CN208638380U - 一种多屏互动系统及互动屏幕设备 - Google Patents

Abstract

本实用新型公开了一种多屏互动系统及互动屏幕设备，其中，互动屏幕设备通过传感器侦测用户的手势，识别模块识别用户手势为多屏互动指令时，第一处理器按照预先定义的选取规则选取特定信息内容，并将所述特定信息内容转换为音频文件；音频播放器，用于发送所述音频文件至移动终端，使所述移动终端将所述音频文件转换成对应的信息内容。通过本实用新型，在手势满足多屏互动手势的情况下，互动屏幕能够获取特定信息内容，并将该特定信息内容转换成音频文件发送，使用户的移动终端能够共享该特定信息内容，透过多屏互动服务器共享用户有兴趣的内容，以此改变户外媒体呈现方式。

Description

一种多屏互动系统及互动屏幕设备

技术领域

本实用新型涉及互联网通信领域，特别涉及一种多屏互动系统及互动屏幕设备。

背景技术

随着大屏媒体终端的不断普及，各种各样的户外广告媒体取得了爆发性的增长。在大屏幕媒体终端上观看人群推送广告等信息成为了一种十分常见的信息推送方式。通过大屏幕终端来推送广告是很多媒体的常用做法，比如通过在固定的大屏幕终端中播送文字、图片、语音和视频等内容，可以达到不错的广告效果。

但是，在现有技术的应用场景下，消费者要取得公共场所中大屏幕或静态展示海报上的信息，传统的方式就是拿支笔记下了，或是用手机拍照，或是扫描屏幕或海报上的二维码，取得服务方提供的信息。这种获取信息的方式，对于消费者来讲比较麻烦不便捷，用户体验较差。

实用新型内容

本实用新型主要解决的技术问题是提供一种多屏互动系统及互动屏幕设备，能够使消费者透过多屏互动服务器共享用户有兴趣的内容，以此改变户外媒体呈现方式。

为解决上述技术问题，本实用新型采用的一个技术方案是：提供一种多屏互动系统，所述系统包括互动屏幕设备以及移动终端；所述互动屏幕包括第一处理器、以及与所述第一处理器电连接的传感器、识别模块、转换模块、第一傅里叶计算器、音频生成模块以及音频播放器；所述传感器用于侦测用户的手势；所述识别模块用于对所述传感器侦测到的手势进行解析以获得对应的手势控制指令；其中，所述互动屏幕设备预先对手势控制指令进行定义：所述第一处理器在所述识别模块识别所述手势控制指令为多屏互动指令时，按照预先定义的选取规则选取特定的信息内容，控制所述转换模块将所述特定信息内容转换为对应的声码；其中，所述选取规则与手势控制指令相对应地进行设置；所述第一傅里叶计算器还与所述转换模块电连接，用于将所述转换模块生成的声码进行傅里叶变换以生成对应的声波信号；所述音频生成模块还与所述第一傅里叶计算机器电连接，用于将所述第一傅里叶计算器生成的声波信号进行处理以生成音频文件；所述第一处理器控制所述音频播放器发送所述音频文件；所述移动终端通过其设置的音频接收器接收所述互动屏幕设备发送的音频文件，并将所述音频文件转换成对应的信息内容。

其中，所述移动终端还包括第二处理器、以及分别与所述第二处理器电连接的音频解析模块、第二傅里叶计算器以及信息处理模块；所述音频解析模块，用于将接收到的音频文件进行解析以得到对应的声波信号；所述第二傅里叶计算器还与所述音频解析模块电连接，用于将所述音频解析模块生成的声波号进行傅里叶变换以生成对应的声码；所述信息处理模块还与所述第二傅里叶计算器电连接，用于将所述第二傅里叶计算器生成的声码转换成信息内容。

其中，所述音频播放器包含扬声器和/或蓝牙模块，所述第一处理器根据所述音频生成模块生成的音频文件类型启动对应的扬声器或蓝牙模块发送所述音频文件。

其中，所述音频接收器包含麦克风和/或蓝牙模块，所述第二处理器根据接收到的所述互动屏幕设备发送的音频文件类型启动对应的麦克风或蓝牙模块接收所述音频文件。

其中，所述信息处理模块为显示处理模块，与所述移动终端的显示器以及扬声器电连接。

其中，还包括多屏互动服务器，与所述移动终端及所述互动屏幕设备通过网络建立通信连接；所述互动屏幕设备的第一处理器还用于在所述识别模块识别所述手势控制指令为多屏互动指令时，按照预先定义的选取规则选取特定信息ID，控制所述转换模块将所述特定信息ID转换为对应的声码，所述第一傅里叶计算器还用于将所述转换模块生成的声码进行傅里叶变换生成对应的声波信号，所述音频生成模块还用于将所述第一傅里叶计算器生成的声波信号进行处理以生成音频文件，并通过所述音频播放器发送所述音频文件；所述移动终端还用于接收所述互动屏幕设备发送的音频文件，通过所述音频解析模块将所述音频文件转换成对应的声波信号，以及通过所述第二傅里叶计算器将所述声波信号进行傅里叶变换以生成对应的信息ID，并上传所述信息ID至所述多屏互动服务器；所述多屏互动服务器包括：数据查询模块，用于根据所述移动终端上传的信息ID查询数据库以获得所述特定信息ID所对应的信息内容；信息推送模块，与所述数据查询模块电连接，用于将确定的信息内容通过网络发送至所述移动终端；其中，所述数据库预先保存了与所述多屏互动服务器建立通信连接的互动屏幕设备的身份ID、及其展示的信息内容。

其中，所述多屏互动服务器通过网络或对应接口与一个或多个所述互动屏幕设备建立连接，还通过网络与一个或多个移动终端建立连接。

为解决上述技术问题，本实用新型采用的另一个技术方案是：提供一种互动屏幕设备，所述设备包括第一处理器、以及与所述第一处理器电连接的传感器、识别模块、转换模块、第一傅里叶计算器、音频生成模块以及音频播放器；所述传感器用于侦测用户的手势；所述识别模块用于对所述传感器侦测到的手势进行解析以获得对应的手势控制指令；其中，所述互动屏幕设备预先对手势控制指令进行定义：所述第一处理器在所述识别模块识别所述手势控制指令为多屏互动指令时，按照预先定义的选取规则选取特定的信息内容，控制所述转换模块将所述特定信息内容转换为对应的声码；其中，所述选取规则与手势控制指令相对应地进行设置；所述第一傅里叶计算器还与所述转换模块电连接，用于将所述转换模块生成的声码进行傅里叶变换以生成对应的声波信号；所述音频生成模块还与所述第一傅里叶计算机器电连接，用于将所述第一傅里叶计算器生成的声波信号进行处理以生成音频文件；所述第一处理器控制所述音频播放器发送所述音频文件，使接收到所述音频文件的移动终端将所述音频文件转换成对应的信息内容。

其中，所述音频播放器包含扬声器和/或蓝牙模块，所述第一处理器根据所述音频生成模块生成的音频文件类型启动对应的扬声器或蓝牙模块发送所述音频文件。

本实用新型实施方式提供的一种多屏互动系统及互动屏幕设备，当用户通过手势对互动屏幕进行操作时，在手势满足多屏互动手势的情况下，互动屏幕能够获取特定信息内容，并将该特定信息内容转换成音频文件发送，使用户的移动终端能够共享该特定信息内容，透过多屏互动服务器共享用户有兴趣的内容，以此改变户外媒体呈现方式。

附图说明

图1是本实用新型第一实施方式中的一种多屏互动系统的网络架构图；

图2是本实用新型第一实施方式中的一种多屏互动系统的结构示意图；

图3是本实用新型第二实施方式中的一种多屏互动系统的网络架构图；

图4是本实用新型第二实施方式中的一种多屏互动系统的结构示意图。

具体实施方式

首先对本实用新型实施方式所需引用的现有技术名词进行解释。

音频：通常泛指声音，或声音的频率。

接收器：本实用新型指音频接收器，例如，麦克风，或是接收BLE蓝牙信号的蓝牙接收器。

声波信号：可以被声音接收器接收并解析的音频，所解析出的原始信号。声码：声波信号进行傅里叶逆向变换后得到的有意义的数据。

内部控制指令：计算机或计算机装置内的指令信号，目的是触发装置的某项功能。

外部控制信令：建立于常见通信协议的外部通信讯号，可以由其它接收装置接收，例如基于WIFI的控制信令、基于蓝牙的控制信令、基于iBeacon的控制信令、或其它以电磁波形式发送的控制信令。

触发响应内容：基于智能识别输入内容所做出的输出对应，例如文字、声音、语音、图像、网页链接、服务链接、控制信号、装置内部控制指令，或外部控制信令等。

声码接收装置：可以是智能设备、手机APP或特定具有收音设备的软件、硬件、固件、或以上组合；用以接收音频，并解析其中的声波信号，最后得到声码，产生该装置的触发响应内容。

用户画像、用户行为画像(personas或behavior personas)：用户画像又称用户角色，通过用户调研与行为分析去了解用户，根据他们的目标、行为和观点的差异，将他们区分为不同的类型，然后每种类型中抽取出典型特征，赋予名字、照片、一些人口统计学要素、场景等描述，就形成了一个人物原型，作为一种勾画目标用户、联系用户诉求与设计方向的有效工具。

用户ID：手机用户ID，可以让多屏互动服务器识别用户，并透过内部大数据进行AI智能比对与计算，找出最适配于该用户的信息内容或指令，作为触发响应内容。

为详细说明本实用新型的技术内容、构造特征、所实现目的及效果，以下结合附图和实施例对本实用新型进行详细说明。

请参阅图1，为本实用新型第一实施方式的一种多屏互动系统的网络架构图。该系统10包括互动屏幕设置11以及移动终端12。在本实施方式中，该互动屏幕设备11为大屏幕，通常指提供商业服务的室内、外大屏幕，及其电脑主机，该大屏幕设备11可以是一台电脑主机，或是仅为一个UI显示终端设备，由一个中央广告系统进行控制。该移动终端12可以是手机、平板电脑，透过装置附带的喇叭或是蓝牙装置，发出音频(声波信号)或是蓝牙信号。

进一步地，请参阅图2，为本实用新型第一实施方式中的一种多屏互动系统的结构示意图。

该互动屏幕设备11包括第一处理器112、以及分别与第一处理器112电连接的传感器110、识别模块111、音频播放器113、转换模块114、第一傅里叶计算器115以及音频生成模块116。

该移动终端12包括第二处理器121、以及分别与第二处理器121电连接的音频接收器120、音频解析模块122、第二傅里叶计算器123以及信息处理模块124。

互动屏幕设备11的传感器110侦测用户的手势，识别模块111识别该传感器110侦测到的用户手势，并根据识别出来的手势解析手势控制指令。其中，互动屏幕设备11预先对手势控制指令进行定义，且预先定义的手势控制指令为一个或多个，在本实施方式中，预先定义的多屏互动手势控制指令所对应的手势为：三根手指在互动屏幕设备11的屏幕上同时向下滑动，在其他实施方式中，预先定义的多屏互动手势控制指令所对应的手势还可以是其他手势。

该转换模块114，用于将特定信息内容转换为对应的声码。具体地，第一处理器112在识别模块111解析出的手势控制指令为多屏互动指令时，按照预先定义的选取规则选取特定信息内容，并控制转换模块114将该特定信息内容转换为对应的声码。特别地，该选取规则与手势控制指令相对应地进行设置，在本实施方式中，该选取规则为：当手势控制指令为多屏互动指令时，将当前显示的内容作为特定信息内容，进一步地，还可以将当前显示的内容以及该内容对应的网页链接地址一并作为特定信息内容，本实用新型并不仅限于此。进一步地，该第一处理器112从互动屏幕设备11本地获取该特定信息内容，还可以通过网络访问其他服务器以获取该特定信息内容。

第一傅里叶计算器115还与转换模块114电连接，用于将转换模块114生成的声码进行傅里叶正向变换，从而生成对应的声波信号。

音频生成模块116还与第一傅里叶计算器115电连接，用于将第一傅里叶计算器115生成的声波信号进行处理以生成音频文件，第一处理器112控制音频播放器113发送生成的音频文件。其中，该音频播放器113可以是扬声器，当该音频文件是声音文件时，第一处理器112控制该音频播放器113发送声音文件；该音频播放器113还可以是蓝牙模块，当该音频文件是蓝牙信号时，该第一处理器112控制该音频播放器113通过蓝牙模块发送蓝牙信号。当然，该音频播放器113还可以同时包含扬声器与蓝牙模块，第一处理器112根据音频生成模块116生成的文件类型启动对应的扬声器或蓝牙模块发送文件。

移动终端12的音频接收器120接收互动屏幕设备11发送的音频文件。对应地，该音频接收器120可以是麦克风，当该音频文件是声音文件时，第二处理器121控制该音频接收器120接收声音文件；该音频接收器120还可以是蓝牙模块，当该音频文件是蓝牙信号时，该第二处理器121控制该音频接收器120通过蓝牙模块发送蓝牙信号。当然，该音频接收器120还可以同时包含麦克风与蓝牙模块，第二处理器121根据接收到的互动屏幕设备11发送的音频文件类型启动对应的麦克风或蓝牙模块接收文件。

音频解析模块122，用于将音频接收器120接收到的音频文件进行解析以得到对应的声波信号；

第二傅里叶计算器123还与音频解析模块122电连接，用于将音频解析模块122生成的声波信号进行逆向傅里叶变换，从而得到对应的声码；

信息处理模块124还与第二傅里叶计算器123电连接，用于将第二傅里叶计算器123生成的声码转换成信息内容。

进一步地，当移动终端12获得该信息内容时，可以根据该信息内容执行相应的操作：

该信息处理模块124可以是显示处理模块，与移动终端12设置的显示器125以及扬声器126电连接，当接收到的信息内容为文字、声音、语音、图像时，则移动终端12的信息处理模块124可直接驱动显示器显示该信息内容、驱动扬声器播放该信息内容，从而实现互动屏幕设备11将其正在展示的图片、视频文件直接共享至移动终端12，进行多屏显示的互动。

当接收到的信息内容为网页链接、服务链接时，则移动终端12可通过访问网页链接/服务链接，以获取该网页链接/服务链接对应的页面内容。例如，互动屏幕设备11将其正在展示的商品图片共享至移动终端12的同时，还将该商品的购买页面链接一并共享至移动终端12，使得移动终端12能够在共享屏幕内容的同时还可以获得进一步地关联内容。

请参阅图3，为本实用新型第二实施方式的一种多屏互动系统的网络架构图。该系统20包括多个互动屏幕设备21、多个移动终端22以及一多屏互动服务器23。其中，该多屏互动服务器23可以与一个或多个互动屏幕设备21通过网络建立通信连接，还可以与一个或多个移动终端22通过网络建立通信连接。

具体地，该互动屏幕设备21可以通过相应的接口与多屏互动服务器23进行数据传输和指令互动。

该多屏互动服务器23可以是一台服务器或多台服务器的组合，负责协调不同屏幕信号的服务器，透过内部控制指令或外部控制信令，触发响应内容，达到多屏互动效果。

进一步地，请参阅图4，为本实用新型第二实施方式中的一种多屏互动系统的结构示意图。

在本实施方式中，该多屏互动服务器23包括数据查询模块230、信息推送模块231以及数据库232。

当第一处理器212在识别模块211解析出的手势控制指令为多屏互动指令时，按照预先定义的选取规则选取特定信息ID，并将该特定信息ID转换为音频文件，通过音频播放器213发送。

其中，该选取规则与手势控制指令相对应地进行设置，在本实施方式中，该选取规则为：当手势控制指令为多屏互动指令时，将当前显示的内容作为特定信息ID，进一步地，还可以将当前显示的内容以及该互动屏幕设备21的身份ID一并作为特定信息ID，本实用新型并不仅限于此。

具体地，转换模块214，用于将特定信息ID转换为对应的声码；

第一傅里叶计算器215，用于将转换模块214生成的声码进行傅里叶正向变换，从而生成对应的声波信号。

音频生成模块216，用于将第一傅里叶计算器215生成的声波信号进行处理以生成音频文件，并通过音频播放器213发送出去。

移动终端22的音频接收器220接收互动屏幕设备21发送的音频文件，第二处理器221将该音频文件转换成对应的信息ID，并发送至多屏互动服务器23。

具体地，音频解析模块222用于将音频接收器220接收到的音频文件进行解析以得到对应的声波信号；

第二傅里叶计算器223，用于将音频解析模块222生成的声波信号进行逆向傅里叶变换，从而得到对应的声码；

信息处理模块224，用于将第二傅里叶计算器223生成的声码转换成信息ID。

多屏互动服务器23接收到移动终端22发送的特定信息ID时，数据查询模块230查询数据库232以获得该特定信息ID所对应的信息内容。其中，数据库232中预先保存了与该多屏互动服务器23建立通信连接的互动屏幕设备21的身份ID，待展示的信息内容、以及每个互动屏幕设备21与待展示信息内容的关联关系，即，有多屏互动服务器23对每个互动屏幕设备21所需展示的信息内容统一进行安排、调配。

信息推送模块231用于将确定的信息内容发送至移动终端22，当移动终端22获得该信息内容时，可以根据该信息内容执行相应的操作。

因此，通过本实用新型，当用户通过手势对互动屏幕进行操作时，在手势满足多屏互动手势的情况下，互动屏幕能够获取特定信息内容，并将该特定信息内容转换成音频文件发送，使用户的移动终端能够共享该特定信息内容，透过多屏互动服务器共享用户有兴趣的内容，以此改变户外媒体呈现方式。

进一步地，该互动屏幕设备21为一具有触摸屏的设备，触摸屏能够识别用户的操作手势，以使得第一处理器212识别该操作手势。

特别地，如果一互动屏幕设备21的传感器210未侦测到触摸手势时，该互动屏幕设备21根据已播放过的历史记录进行有选择性的信息播放。比如，播放该互动屏幕设备21之前播放频度最大的信息，或者播放指定的信息，等等。

本实用新型实施方式提供的一种多屏互动系统及互动屏幕设备，当用户通过手势对互动屏幕进行操作时，在手势满足多屏互动手势的情况下，互动屏幕能够获取特定信息内容，并将该特定信息内容转换成音频文件发送，使用户的移动终端能够共享该特定信息内容，透过多屏互动服务器共享用户有兴趣的内容，以此改变户外媒体呈现方式。

以上所述仅为本实用新型的实施例，并非因此限制本实用新型的专利范围，凡是利用本实用新型说明书及附图内容所作的等效结构或等效流程变换，或直接或间接运用在其他相关的技术领域，均同理包括在本实用新型的专利保护范围内。

Claims (9)

1.一种多屏互动系统，其特征在于，所述系统包括互动屏幕设备以及移动终端；所述互动屏幕包括第一处理器、以及与所述第一处理器电连接的传感器、识别模块、转换模块、第一傅里叶计算器、音频生成模块以及音频播放器；

所述传感器用于侦测用户的手势；

所述识别模块用于对所述传感器侦测到的手势进行解析以获得对应的手势控制指令；其中，所述互动屏幕设备预先对手势控制指令进行定义：

所述第一处理器在所述识别模块识别所述手势控制指令为多屏互动指令时，按照预先定义的选取规则选取特定的信息内容，控制所述转换模块将所述特定信息内容转换为对应的声码；其中，所述选取规则与手势控制指令相对应地进行设置；

所述第一傅里叶计算器还与所述转换模块电连接，用于将所述转换模块生成的声码进行傅里叶变换以生成对应的声波信号；

所述音频生成模块还与所述第一傅里叶计算机器电连接，用于将所述第一傅里叶计算器生成的声波信号进行处理以生成音频文件；

所述第一处理器控制所述音频播放器发送所述音频文件；

所述移动终端通过其设置的音频接收器接收所述互动屏幕设备发送的音频文件，并将所述音频文件转换成对应的信息内容。

2.根据权利要求1所述的多屏互动系统，其特征在于，所述移动终端还包括第二处理器、以及分别与所述第二处理器电连接的音频解析模块、第二傅里叶计算器以及信息处理模块；

所述音频解析模块，用于将接收到的音频文件进行解析以得到对应的声波信号；

所述第二傅里叶计算器还与所述音频解析模块电连接，用于将所述音频解析模块生成的声波号进行傅里叶变换以生成对应的声码；

所述信息处理模块还与所述第二傅里叶计算器电连接，用于将所述第二傅里叶计算器生成的声码转换成信息内容。

3.根据权利要求1所述的多屏互动系统，其特征在于，所述音频播放器包含扬声器和/或蓝牙模块，所述第一处理器根据所述音频生成模块生成的音频文件类型启动对应的扬声器或蓝牙模块发送所述音频文件。

4.根据权利要求2所述的多屏互动系统，其特征在于，所述音频接收器包含麦克风和/或蓝牙模块，所述第二处理器根据接收到的所述互动屏幕设备发送的音频文件类型启动对应的麦克风或蓝牙模块接收所述音频文件。

5.根据权利要求2所述的多屏互动系统，其特征在于，所述信息处理模块为显示处理模块，与所述移动终端的显示器以及扬声器电连接。

6.根据权利要求2所述的多屏互动系统，其特征在于，还包括多屏互动服务器，与所述移动终端及所述互动屏幕设备通过网络建立通信连接；

所述互动屏幕设备的第一处理器还用于在所述识别模块识别所述手势控制指令为多屏互动指令时，按照预先定义的选取规则选取特定信息ID，控制所述转换模块将所述特定信息ID转换为对应的声码，所述第一傅里叶计算器还用于将所述转换模块生成的声码进行傅里叶变换生成对应的声波信号，所述音频生成模块还用于将所述第一傅里叶计算器生成的声波信号进行处理以生成音频文件，并通过所述音频播放器发送所述音频文件；

所述移动终端还用于接收所述互动屏幕设备发送的音频文件，通过所述音频解析模块将所述音频文件转换成对应的声波信号，以及通过所述第二傅里叶计算器将所述声波信号进行傅里叶变换以生成对应的信息ID，并上传所述信息ID至所述多屏互动服务器；

所述多屏互动服务器包括：

数据查询模块，用于根据所述移动终端上传的信息ID查询数据库以获得所述特定信息ID所对应的信息内容；

信息推送模块，与所述数据查询模块电连接，用于将确定的信息内容通过网络发送至所述移动终端；其中，所述数据库预先保存了与所述多屏互动服务器建立通信连接的互动屏幕设备的身份ID、及其展示的信息内容。

7.根据权利要求6所述的多屏互动系统，其特征在于，所述多屏互动服务器通过网络或对应接口与一个或多个所述互动屏幕设备建立连接，还通过网络与一个或多个移动终端建立连接。

8.一种互动屏幕设备，其特征在于，所述设备包括第一处理器、以及与所述第一处理器电连接的传感器、识别模块、转换模块、第一傅里叶计算器、音频生成模块以及音频播放器；

所述传感器用于侦测用户的手势；

所述识别模块用于对所述传感器侦测到的手势进行解析以获得对应的手势控制指令；其中，所述互动屏幕设备预先对手势控制指令进行定义：

所述第一处理器在所述识别模块识别所述手势控制指令为多屏互动指令时，按照预先定义的选取规则选取特定的信息内容，控制所述转换模块将所述特定信息内容转换为对应的声码；其中，所述选取规则与手势控制指令相对应地进行设置；

所述第一傅里叶计算器还与所述转换模块电连接，用于将所述转换模块生成的声码进行傅里叶变换以生成对应的声波信号；

所述音频生成模块还与所述第一傅里叶计算机器电连接，用于将所述第一傅里叶计算器生成的声波信号进行处理以生成音频文件；

所述第一处理器控制所述音频播放器发送所述音频文件，使接收到所述音频文件的移动终端将所述音频文件转换成对应的信息内容。

9.根据权利要求8所述的互动屏幕设备，其特征在于，所述音频播放器包含扬声器和/或蓝牙模块，所述第一处理器根据所述音频生成模块生成的音频文件类型启动对应的扬声器或蓝牙模块发送所述音频文件。