CN114567810A - 投屏交互方法、装置、投屏器及存储介质 - Google Patents

投屏交互方法、装置、投屏器及存储介质 Download PDF

Info

Publication number
CN114567810A
CN114567810A CN202210195177.6A CN202210195177A CN114567810A CN 114567810 A CN114567810 A CN 114567810A CN 202210195177 A CN202210195177 A CN 202210195177A CN 114567810 A CN114567810 A CN 114567810A
Authority
CN
China
Prior art keywords
screen projection
content
screen
interaction
casting
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN202210195177.6A
Other languages
English (en)
Inventor
潘凯欢
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Shenzhen Skyworth RGB Electronics Co Ltd
Original Assignee
Shenzhen Skyworth RGB Electronics Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Shenzhen Skyworth RGB Electronics Co Ltd filed Critical Shenzhen Skyworth RGB Electronics Co Ltd
Priority to CN202210195177.6A priority Critical patent/CN114567810A/zh
Publication of CN114567810A publication Critical patent/CN114567810A/zh
Pending legal-status Critical Current

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/436—Interfacing a local distribution network, e.g. communicating with another STB or one or more peripheral devices inside the home
    • H04N21/4363—Adapting the video stream to a specific local network, e.g. a Bluetooth® network
    • H04N21/43637—Adapting the video stream to a specific local network, e.g. a Bluetooth® network involving a wireless protocol, e.g. Bluetooth, RF or wireless LAN [IEEE 802.11]
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0484—Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range
    • G06F3/04847—Interaction techniques to control parameter settings, e.g. interaction with sliders or dials
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F40/00—Handling natural language data
    • G06F40/30—Semantic analysis
    • G—PHYSICS
    • G10—MUSICAL INSTRUMENTS; ACOUSTICS
    • G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
    • G10L15/00—Speech recognition
    • G10L15/22—Procedures used during a speech recognition process, e.g. man-machine dialogue
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/431—Generation of visual interfaces for content selection or interaction; Content or additional data rendering
    • H04N21/4312—Generation of visual interfaces for content selection or interaction; Content or additional data rendering involving specific graphical features, e.g. screen layout, special fonts or colors, blinking icons, highlights or animations
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/47—End-user applications
    • H04N21/478—Supplemental services, e.g. displaying phone caller identification, shopping application
    • H04N21/4788—Supplemental services, e.g. displaying phone caller identification, shopping application communicating with other users, e.g. chatting
    • G—PHYSICS
    • G10—MUSICAL INSTRUMENTS; ACOUSTICS
    • G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
    • G10L15/00—Speech recognition
    • G10L15/22—Procedures used during a speech recognition process, e.g. man-machine dialogue
    • G10L2015/223—Execution procedure of a spoken command

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • General Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Signal Processing (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Audiology, Speech & Language Pathology (AREA)
  • Computational Linguistics (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Health & Medical Sciences (AREA)
  • Human Computer Interaction (AREA)
  • Artificial Intelligence (AREA)
  • General Health & Medical Sciences (AREA)
  • Acoustics & Sound (AREA)
  • User Interface Of Digital Computer (AREA)

Abstract

本发明公开了一种投屏交互方法、装置、投屏器及存储介质，该方法包括：识别发送端传输的初始投屏内容中是否包含交互内容；若所述初始投屏内容中包含交互内容，则接收发送端发送的摇动交互指令；根据所述摇动交互指令，对所述初始投屏内容进行调整，生成目标投屏内容；将所述目标投屏内容发送至接收端，以供接收端显示所述目标投屏内容。本发明实现了在用户观看体育赛事时，简化投屏交互流程的技术效果。

Description

投屏交互方法、装置、投屏器及存储介质
技术领域
本发明涉及投屏显示技术领域，尤其涉及一种投屏交互方法、装置、投屏器及存储介质。
背景技术
随着投屏技术的发展，投屏功能在影音娱乐、课堂教学、会议展示等场景中的应用也越来越广泛。音视频流投屏和镜像投屏是两种常见的投屏观影方式。音视频流投屏时，音视频资源以流媒体形式进行推送。镜像投屏则没有资源上的限制，可以直接呈现发送端屏幕内容。
当用户使用投屏功能观看体育赛事时，常常会有进行互动的需求。此时，若使用音视频流投屏的方式，不支持将用户想要发送的互动信息呈现在接收端屏幕上，若使用镜像投屏的方式，虽然能够呈现互动信息，但是用户需要进行输入文字或者点击屏幕等操作，打断观影过程，交互过程复杂。
发明内容
本发明的主要目的在于提供一种投屏交互方法、装置、投屏器及存储介质，旨在解决用户投屏观看体育赛事时，交互过程复杂的问题。
为实现上述目的，本发明提供一种投屏交互方法，该方法包括：
识别发送端传输的初始投屏内容中是否包含交互内容；
若所述初始投屏内容中包含交互内容，则接收发送端发送的摇动交互指令；
根据所述摇动交互指令，对所述初始投屏内容进行调整，生成目标投屏内容；
将所述目标投屏内容发送至接收端，以供接收端显示所述目标投屏内容。
可选地，所述识别发送端传输的初始投屏内容中是否包含交互内容的步骤包括：
接收发送端传输的视频和音频；
若识别到所述视频中包含交互场景图像，且所述音频中包含预设的交互关键词，则判定所述初始投屏内容中包含交互内容。
可选地，所述若所述初始投屏内容中包含交互内容，则接收发送端发送的摇动交互指令的步骤包括：
若所述初始投屏内容中包含交互内容，则向发送端发送投屏交互页面；
基于所述投屏交互页面，接收并基于投屏交互开启指令，开启投屏交互模式；
基于所述投屏交互模式，接收发送端发送的摇动交互指令。
可选地，所述根据所述摇动交互指令，对所述初始投屏内容进行调整，生成目标投屏内容的步骤包括：
根据所述摇动交互指令，获取预设的第一喝彩动效；
将所述第一喝彩动效加入初始投屏内容中，生成目标投屏内容。
可选地，在所述识别发送端传输的初始投屏内容中是否包含交互内容的步骤之后，还包括：
若所述初始投屏内容中包含交互内容，则接收发送端发送的语音交互指令；
根据所述语音交互指令，对所述初始投屏内容进行调整，生成目标投屏内容。
可选地，所述根据所述语音交互指令，对所述初始投屏内容进行调整，生成目标投屏内容的步骤包括：
根据所述语音交互指令，接收用户语音信息；
将所述用户语音信息转换为文本信息，并发送至预设的弹幕云服务器；
从所述弹幕云服务器中下载包含所述文本信息的实时弹幕，将所述实时弹幕加入所述初始投屏内容中，生成目标投屏内容。
可选地，在所述识别发送端传输的初始投屏内容中是否包含交互内容的步骤之后，还包括：
若所述初始投屏内容中包含交互内容，则接收发送端发送的关键词交互指令；
根据所述关键词交互指令，获取预设的第二喝彩动效；
将所述第二喝彩动效加入初始投屏内容中，生成目标投屏内容。
此外，为实现上述目的，本发明还提供一种投屏交互装置，所述投屏交互装置包括：
内容识别模块，用于识别发送端传输的初始投屏内容中是否包含交互内容；
指令接收模块，用于若所述初始投屏内容中包含交互内容，则接收发送端发送的摇动交互指令；
内容调整模块，用于根据所述摇动交互指令，对所述初始投屏内容进行调整，生成目标投屏内容；
内容发送模块，用于将所述目标投屏内容发送至接收端，以供接收端显示所述目标投屏内容。
此外，为实现上述目的，本发明还提供一种投屏器，所述投屏器包括：投屏发射器及投屏接收器，所述投屏发射器用于连接发送端，所述投屏接收器用于连接接收端，所述投屏发射器与所述投屏接收器通过无线网络或协议进行数据传输；所述投屏接收器和/或投屏接收器还包括：存储器、处理器及存储在所述存储器上并可在所述处理器上运行的投屏交互程序，所述投屏交互程序配置为实现如上文所述的投屏交互方法的步骤。
此外，为实现上述目的，本发明还提供一种计算机可读存储介质，所述计算机可读存储介质上存储有投屏交互程序，所述投屏交互程序被处理器执行时实现如上文所述的投屏交互方法的步骤。
本发明识别发送端传输的初始投屏内容中是否包含交互内容，若所述初始投屏内容中包含交互内容，则可以进入投屏交互模式，接收发送端发送的摇动交互指令，根据所述摇动交互指令，对所述初始投屏内容进行调整，在初始投屏内容中加入动效，生成目标投屏内容，将所述目标投屏内容发送至接收端，以供接收端显示所述目标投屏内容，用户确认进入投屏交互模式后，通过摇动发送端设备的方式即可在接收端观看到带有动效的体育赛事画面，不需要进行输入文字或者点击屏幕等影响观影流畅度的操作，既满足了用户观看体育赛事时的互动需求，又简化了投屏交互的流程。
附图说明
图1为本发明实施例方案涉及的投屏连接示意图；
图2为本发明实施例方案涉及的投屏器内部结构示意图；
图3为本发明投屏交互方法第一实施例的流程示意图；
图4为本发明投屏交互方法第二实施例的流程示意图；
图5为本发明投屏交互方法第三实施例的流程示意图；
图6为本发明实施例方案涉及的投屏交互装置示意图。
本发明目的的实现、功能特点及优点将结合实施例，参照附图做进一步说明。
具体实施方式
应当理解，此处所描述的具体实施例仅仅用以解释本发明，并不用于限定本发明。
本发明的主要技术方案是：识别发送端传输的初始投屏内容中是否包含交互内容；若所述初始投屏内容中包含交互内容，则接收发送端发送的摇动交互指令；根据所述摇动交互指令，对所述初始投屏内容进行调整，生成目标投屏内容；将所述目标投屏内容发送至接收端，以供接收端显示所述目标投屏内容。
参照图1，图1为本发明实施例方案涉及的投屏连接示意图。
如图1所示，投屏器包括：投屏发射器及投屏接收器，其中，发送端可以是个人电脑，也可以是智能手机、平板电脑、电子书阅读器、便携计算机等可移动式终端设备，接收端可以是电视，也可以是显示器，投影仪等具有显示功能的显示设备。
在一些实施例中，发送端通过有线或无线网络连接投屏发射器或投屏接收器进行数据传输与交互；投屏发射器通过无线网络连接投屏接收器进行数据传输与交互，或者投屏发射器通过无线网络连接接收端进行数据传输与交互；投屏接收器通过有线或无线网络连接接收端进行数据传输与交互。在一可选实现方式中，投屏接收器与接收端之间以及投屏发射器与发送端之间的有线连接方式，可以包括基于HDMI(High DefinitionMultimedia Interface，高清多媒体接口)、USB(Universal Serial Bus，通用串行总线)、DP(Display Port，显示接口)和VGA(Video Graphics Array，视频图形阵列)等有线连接。发送端与投屏发射器和投屏接收器之间、接收端与投屏发射器和投屏接收器之间的无线通信方式，可以包括蓝牙(Bluetooth)、无线宽带(Wi-Fi)、红外通讯等无线通信。
所以，发送端、投屏发射器、投屏接收器和接收端之间实现投屏时可能的连接方式至少包括：
投屏发射器与投屏接收器连接，发送端画面经过投屏发射器、投屏接收器最终投屏到接收端；
投屏发射器与接收端无线连接，发送端画面经过投屏发射器投屏到接收端，此时投屏发射器与接收端内置的无线通信模块通过无线网络相连；
发送端与投屏接收器连接，发送端画面经过投屏接收器投屏到接收端。
参照图2，图2为本发明实施例方案涉及的投屏器内部结构示意图。
如图2所示，该投屏器可以包括：处理器1001，例如中央处理器(CentralProcessing Unit，CPU)，通信总线1002、用户接口1003，网络接口1004，存储器1005。其中，通信总线1002用于实现这些组件之间的连接通信。用户接口1003可以包括显示屏(Display)、输入单元比如键盘(Keyboard)，可选用户接口1003还可以包括标准的有线接口、无线接口。网络接口1004可选的可以包括标准的有线接口、无线接口(如无线保真(WIreless-FIdelity，WI-FI)接口)。存储器1005可以是高速的随机存取存储器(RandomAccess Memory，RAM)存储器，也可以是稳定的非易失性存储器(Non-Volatile Memory，NVM)，例如磁盘存储器。存储器1005可选的还可以是独立于前述处理器1001的存储装置。
本领域技术人员可以理解，图2中示出的结构并不构成对投屏器的限定，可以包括比图示更多或更少的部件，或者组合某些部件，或者不同的部件布置。
如图2所示，作为一种存储介质的存储器1005中可以包括操作系统、网络通信模块、用户接口模块以及投屏交互程序。
在图2所示的投屏器中，网络接口1004主要用于与其他设备进行数据通信；用户接口1003主要用于与用户进行数据交互；本发明投屏器中的处理器1001、存储器1005可以设置在投屏器中，所述投屏器通过处理器1001调用存储器1005中存储的投屏交互程序，并执行以下操作：
识别发送端传输的初始投屏内容中是否包含交互内容；
若所述初始投屏内容中包含交互内容，则接收发送端发送的摇动交互指令；
根据所述摇动交互指令，对所述初始投屏内容进行调整，生成目标投屏内容；
将所述目标投屏内容发送至接收端，以供接收端显示所述目标投屏内容。
在一实施例中，所述投屏器通过处理器1001调用存储器1005中存储的投屏交互程序，还可以执行以下操作：
接收发送端传输的视频和音频；
若识别到所述视频中包含交互场景图像，且所述音频中包含预设的交互关键词，则判定所述初始投屏内容中包含交互内容。
在一实施例中，所述投屏器通过处理器1001调用存储器1005中存储的投屏交互程序，还可以执行以下操作：
若所述初始投屏内容中包含交互内容，则向发送端发送投屏交互页面；
基于所述投屏交互页面，接收并基于投屏交互开启指令，开启投屏交互模式；
基于所述投屏交互模式，接收发送端发送的摇动交互指令。
在一实施例中，所述投屏器通过处理器1001调用存储器1005中存储的投屏交互程序，还可以执行以下操作：
根据所述摇动交互指令，获取预设的第一喝彩动效；
将所述第一喝彩动效加入初始投屏内容中，生成目标投屏内容。
在一实施例中，所述投屏器通过处理器1001调用存储器1005中存储的投屏交互程序，还可以执行以下操作：
若所述初始投屏内容中包含交互内容，则接收发送端发送的语音交互指令；
根据所述语音交互指令，对所述初始投屏内容进行调整，生成目标投屏内容。
在一实施例中，所述投屏器通过处理器1001调用存储器1005中存储的投屏交互程序，还可以执行以下操作：
根据所述语音交互指令，接收用户语音信息；
将所述用户语音信息转换为文本信息，并发送至预设的弹幕云服务器；
从所述弹幕云服务器中下载包含所述文本信息的实时弹幕，将所述实时弹幕加入所述初始投屏内容中，生成目标投屏内容。
在一实施例中，所述投屏器通过处理器1001调用存储器1005中存储的投屏交互程序，还可以执行以下操作：
若所述初始投屏内容中包含交互内容，则接收发送端发送的关键词交互指令；
根据所述关键词交互指令，获取预设的第二喝彩动效；
将所述第二喝彩动效加入初始投屏内容中，生成目标投屏内容。
本发明实施例提供了一种投屏交互方法，参照图3，图3为本发明一种投屏交互方法第一实施例的流程示意图。
本实施例中，所述投屏交互方法包括：
步骤S10，识别发送端传输的初始投屏内容中是否包含交互内容；
本实施例中的执行主体可以为投屏发射器、投屏接收器或包含投屏接收器的投屏显示设备。对本实施例方案进行阐述时，以投屏发射器作为执行主体为例。交互内容可以为投屏内容中可能吸引用户产生交互需求的内容。在本申请实施例中，交互内容主要与体育赛事相关。
作为一种示例，识别发送端传输的初始投屏内容中是否包含交互内容的步骤可以包括：
步骤A1，接收发送端传输的视频和音频。用户在投屏观看体育赛事时，发送端传输的初始投屏内容中通常会包括视频和音频。视频可以为体育赛事的实况、转播或者回放画面。音频可以为体育赛事的实际场地收音音频和解说音频等。
步骤A2，若识别到所述视频中包含交互场景图像，且所述音频中包含预设的交互关键词，则判定所述初始投屏内容中包含交互内容。在识别交互内容时，可以采用计算机视觉和交互关键词语音识别综合判断的方式。比如在投屏器中配置计算机视觉算法，使投屏器能够识别出视频中的交互场景图像。交互场景图像可以为体育赛事的进行场地，比如篮球场、足球场或滑雪大跳台等。比如将“比赛”、“奥运会”或“世锦赛”等赛事名称预设为交互关键词，对音频进行交互关键词识别。
步骤S20，若所述初始投屏内容中包含交互内容，则接收发送端发送的摇动交互指令；
初始投屏内容中包含交互内容，则可以进入投屏交互模式。投屏交互模式中可以包括不同类型的交互方式，比如摇动交互方式。投屏交互模式开启后，可以检测是否接收到交互指令，以及交互指令的类型。若接收到发送端发送的摇动交互指令，则可以进入摇动交互方式。若初始投屏内容中不包含交互内容，则对初始投屏内容进行持续识别，直至识别到交互内容，或者投屏过程结束。
作为一种示例，若所述初始投屏内容中包含交互内容，则接收发送端发送的摇动交互指令的步骤可以包括：
步骤B1，若所述初始投屏内容中包含交互内容，则向发送端发送投屏交互页面。投屏交互页面中包含投屏交互模式是否开启的选项，用户可以根据实际情况，选择本次是否开启投屏交互模式。用户结束本次投屏过程后，投屏交互模式可以默认关闭，当用户再次开启投屏过程，且识别到初始投屏内容中包含交互内容时，重新发送投屏交互页面，确认用户投屏交互意向。
步骤B2，基于所述投屏交互页面，接收并基于投屏交互开启指令，开启投屏交互模式。若用户选择开启投屏交互模式，则可以接收投屏交互开启指令，并开启投屏交互模式。若用户选择本次不开启投屏交互模式，则可以在本次投屏结束之前不再进行识别交互内容的步骤。
步骤B3，基于所述投屏交互模式，接收发送端发送的摇动交互指令。处于投屏交互模式时，发送端可实时识别自身运动状态，不同的运动状态将引发不同的摇动交互效果。不同的运动状态可以通过摇动时间和摇动频率进行区分。
步骤S30，根据所述摇动交互指令，对所述初始投屏内容进行调整，生成目标投屏内容；
对初始投屏内容进行调整的方式可以是向初始投屏内容中加入动效，动效中可以包含不同形式的修饰性元素。
作为一种示例，根据所述摇动交互指令，对所述初始投屏内容进行调整，生成目标投屏内容的步骤可以包括：
步骤C1，根据所述摇动交互指令，获取预设的第一喝彩动效。第一喝彩动效可以是彩带或者烟花等修饰性元素。根据摇动交互指令中的摇动时间和摇动频率，可以确定修饰性元素动效的持续时间和数量。比如，用户摇动时间为5秒，则从识别到摇动交互指令之后，修饰性元素的持续时间也为5秒。比如，投屏画面中修饰性元素的数量随用户摇动频率的升高而增加。
步骤C2，将所述第一喝彩动效加入初始投屏内容中，生成目标投屏内容。确定第一喝彩动效之后，将第一喝彩动效加入至初始投屏内容中。
步骤S40，将所述目标投屏内容发送至接收端，以供接收端显示所述目标投屏内容。
将目标投屏内容进行编码之后，可以发送至接收端，由接收端显示目标投屏内容，从而用户可以观看到带有动效的体育赛事画面，满足用户为自己喜爱的运动员加油的互动需求，丰富用户观看体育赛事时的互动体验。
在本实施例中，识别初始投屏内容中是否包含交互内容，若初始投屏内容中包含交互内容，则接收摇动交互指令，根据摇动交互指令，对初始投屏内容进行调整，生成目标投屏内容，将目标投屏内容发送至接收端，以供接收端显示目标投屏内容，用户确认进入投屏交互模式后，通过摇动发送端设备的方式即可在接收端观看到带有动效的画面，不需要进行输入文字或者点击屏幕等影响观影流畅度的操作，既满足了用户观看体育赛事时的互动需求，又简化了投屏交互的流程。
进一步的，在本发明投屏交互方法的第二实施例中，参照图4，本发明投屏交互方法包括：
步骤S11，若所述初始投屏内容中包含交互内容，则接收发送端发送的语音交互指令；
本实施例中的执行主体可以为投屏发射器、投屏接收器或包含投屏接收器的投屏显示设备。对本实施例方案进行阐述时，以投屏发射器作为执行主体为例。投屏交互模式中还可以采用语音交互的方式。投屏交互模式开启后，可以检测是否接收到交互指令，以及交互指令的类型。用户可以向发送端输入语音信息，发送端接收到语音信息后生成语音交互指令。
步骤S12，根据所述语音交互指令，对所述初始投屏内容进行调整，生成目标投屏内容。
对初始投屏内容进行调整的方式可以是将弹幕加入初始投屏内容中。
作为一种示例，根据所述语音交互指令，对所述初始投屏内容进行调整，生成目标投屏内容的步骤可以包括：
步骤D1，根据所述语音交互指令，接收用户语音信息。在语音交互模式中，基于已建立的投屏通信连接，可以再新增一个用于传输交互语音音频的内容流通道。在不影响发送端传输的投屏内容的情况下，接收发送端传输的用户语音信息。
步骤D2，将所述用户语音信息转换为文本信息，并发送至预设的弹幕云服务器。投屏发射器中可以配置语音转文字系统，将接收到的用户语音信息转换为文本信息，再将文本信息发送至弹幕云服务器。弹幕云服务器接收到文本信息后，可以将文本信息全网发布，形成弹幕。
步骤D3，从所述弹幕云服务器中下载包含所述文本信息的实时弹幕，将所述实时弹幕加入所述初始投屏内容中，生成目标投屏内容。投屏发射器可以连接弹幕云服务器，将文本信息上传至弹幕云服务器形成弹幕之后，再从弹幕云服务器下载实时弹幕。将实时弹幕内容添加至初始投屏内容中，形成目标投屏内容，对目标投屏内容进行编码后传输至接收端，以此，接收端可以显示包含实时弹幕的投屏内容。
在本实施例中，接收发送端发送的语音交互指令和用户语音信息，将用户语音信息转换为文本信息，文本信息通过弹幕云服务器形成弹幕内容，再将弹幕云服务器中的实时弹幕内容添加至初始投屏内容中，不仅实现了通过语音即可发送弹幕，省去手动输入文字的流程，而且实现了音视频流投屏方式也支持显示弹幕，用户对发送端设备的操作更加自由。
进一步的，在本发明投屏交互方法的第三实施例中，参照图5，本发明投屏交互方法包括：
步骤S21，若所述初始投屏内容中包含交互内容，则接收发送端发送的关键词交互指令；
本实施例中的执行主体可以为投屏发射器、投屏接收器或包含投屏接收器的投屏显示设备。对本实施例方案进行阐述时，以投屏发射器作为执行主体为例。投屏交互模式开启后，可以检测是否接收到交互指令，以及交互指令的类型。投屏交互模式中还可以包括关键词交互的方式。在发送端可以预设触发关键词，当发送端开启语音识别状态时，若识别到环境音中包含触发关键词，则可以生成关键词交互指令，将关键词交互指令发送至投屏发射器。具体的，触发关键词可以是“加油”、“好棒”或“永远的神”等。
步骤S22，根据所述关键词交互指令，获取预设的第二喝彩动效；
用户触发关键词交互方式时，可视为具有强交互意向，第二喝彩动效可基于第一喝彩动效进行进一步的加强。比如，第二喝彩动效中的修饰性元素可以为发射性画框或者画面抖动，还可以在动效中加入喝彩声、鼓掌声等声音效果。若预设的触发关键词中包含知名运动员姓名，还可以其设置相应体育项目的动效。
步骤S23，将所述第二喝彩动效加入初始投屏内容中，生成目标投屏内容。
触发第二喝彩动效之后，第二喝彩动效具有一段播放时间。故可以在连续触发的第二喝彩动效之间设置触发时间间隔，以完整播放第二喝彩动效。触发时间间隔可以为5秒或10秒。
第二喝彩动效加入初始投屏内容中，生成目标投屏内容，投屏发射器再将目标投屏内容进行编码，发送至接收端，则接收端可以显示与用户交互意向相适应的投屏内容，为用户带来沉浸式的观影体验。
在本实施例中，接收发送端发送的关键词交互指令，获取第二喝彩动效，将第二喝彩动效加入初始投屏内容中，生成目标投屏内容，用户无需对发送端设备进行手动操作，语音输入触发关键词即可在接收端设备上观看到带有动效的投屏画面，丰富了用户投屏交互的方式，提升了用户观看体育赛事时的交互体验。
参照图6，图6为本发明实施例方案涉及的投屏交互装置示意图。
如图6所示，该投屏交互装置可以包括：
内容识别模块101，用于识别发送端传输的初始投屏内容中是否包含交互内容；
指令接收模块102，用于若所述初始投屏内容中包含交互内容，则接收发送端发送的摇动交互指令；
内容调整模块103，用于根据所述摇动交互指令，对所述初始投屏内容进行调整，生成目标投屏内容；
内容发送模块104，用于将所述目标投屏内容发送至接收端，以供接收端显示所述目标投屏内容。
可选地，内容识别模块101还用于：
接收发送端传输的视频和音频；
若识别到所述视频中包含交互场景图像，且所述音频中包含预设的交互关键词，则判定所述初始投屏内容中包含交互内容。
可选地，指令接收模块102还用于：
若所述初始投屏内容中包含交互内容，则向发送端发送投屏交互页面；
基于所述投屏交互页面，接收并基于投屏交互开启指令，开启投屏交互模式；
基于所述投屏交互模式，接收发送端发送的摇动交互指令。
可选地，内容调整模块103还用于：
根据所述摇动交互指令，获取预设的第一喝彩动效；
将所述第一喝彩动效加入初始投屏内容中，生成目标投屏内容。
可选地，指令接收模块102还用于：
若所述初始投屏内容中包含交互内容，则接收发送端发送的语音交互指令；
根据所述语音交互指令，对所述初始投屏内容进行调整，生成目标投屏内容。
可选地，内容调整模块103还用于：
根据所述语音交互指令，接收用户语音信息；
将所述用户语音信息转换为文本信息，并发送至预设的弹幕云服务器；
从所述弹幕云服务器中下载包含所述文本信息的实时弹幕，将所述实时弹幕加入所述初始投屏内容中，生成目标投屏内容。
可选地，指令接收模块102还用于：
若所述初始投屏内容中包含交互内容，则接收发送端发送的关键词交互指令；
根据所述关键词交互指令，获取预设的第二喝彩动效；
将所述第二喝彩动效加入初始投屏内容中，生成目标投屏内容。
此外，本发明实施例还提供一种投屏器，所述投屏器包括：投屏发射器及投屏接收器，所述投屏发射器用于连接发送端，所述投屏接收器用于连接接收端，所述投屏发射器与所述投屏接收器通过无线网络或协议进行数据传输；所述投屏接收器和/或投屏接收器还包括：存储器、处理器及存储在所述存储器上并可在所述处理器上运行的投屏交互程序，所述投屏交互程序配置为实现如上文所述的投屏交互方法的步骤。
此外，本发明实施例还提供一种计算机可读存储介质，所述计算机可读存储介质上存储有投屏交互程序，所述投屏交互程序被处理器执行时实现如上文所述的投屏交互方法的步骤。
需要说明的是，在本文中，术语“包括”、“包含”或者其任何其他变体意在涵盖非排他性的包含，从而使得包括一系列要素的过程、方法、物品或者系统不仅包括那些要素，而且还包括没有明确列出的其他要素，或者是还包括为这种过程、方法、物品或者系统所固有的要素。在没有更多限制的情况下，由语句“包括一个……”限定的要素，并不排除在包括该要素的过程、方法、物品或者系统中还存在另外的相同要素。
上述本发明实施例序号仅仅为了描述，不代表实施例的优劣。
通过以上的实施方式的描述，本领域的技术人员可以清楚地了解到上述实施例方法可借助软件加必需的通用硬件平台的方式来实现，当然也可以通过硬件，但很多情况下前者是更佳的实施方式。基于这样的理解，本发明的技术方案本质上或者说对现有技术做出贡献的部分可以以软件产品的形式体现出来，该计算机软件产品存储在如上所述的一个存储介质(如ROM/RAM、磁碟、光盘)中，包括若干指令用以使得一台终端设备(可以是手机，计算机，服务器，或者网络设备等)执行本发明各个实施例所述的方法。
以上仅为本发明的优选实施例，并非因此限制本发明的专利范围，凡是利用本发明说明书及附图内容所作的等效结构或等效流程变换，或直接或间接运用在其他相关的技术领域，均同理包括在本发明的专利保护范围内。

Claims (10)

1.一种投屏交互方法，其特征在于，所述投屏交互方法包括以下步骤：
识别发送端传输的初始投屏内容中是否包含交互内容；
若所述初始投屏内容中包含交互内容，则接收发送端发送的摇动交互指令；
根据所述摇动交互指令，对所述初始投屏内容进行调整，生成目标投屏内容；
将所述目标投屏内容发送至接收端，以供接收端显示所述目标投屏内容。
2.如权利要求1所述的投屏交互方法，其特征在于，所述识别发送端传输的初始投屏内容中是否包含交互内容的步骤包括：
接收发送端传输的视频和音频；
若识别到所述视频中包含交互场景图像，且所述音频中包含预设的交互关键词，则判定所述初始投屏内容中包含交互内容。
3.如权利要求1所述的投屏交互方法，其特征在于，所述若所述初始投屏内容中包含交互内容，则接收发送端发送的摇动交互指令的步骤包括：
若所述初始投屏内容中包含交互内容，则向发送端发送投屏交互页面；
基于所述投屏交互页面，接收并基于投屏交互开启指令，开启投屏交互模式；
基于所述投屏交互模式，接收发送端发送的摇动交互指令。
4.如权利要求1所述的投屏交互方法，其特征在于，所述根据所述摇动交互指令，对所述初始投屏内容进行调整，生成目标投屏内容的步骤包括：
根据所述摇动交互指令，获取预设的第一喝彩动效；
将所述第一喝彩动效加入初始投屏内容中，生成目标投屏内容。
5.如权利要求1所述的投屏交互方法，其特征在于，在所述识别发送端传输的初始投屏内容中是否包含交互内容的步骤之后，还包括：
若所述初始投屏内容中包含交互内容，则接收发送端发送的语音交互指令；
根据所述语音交互指令，对所述初始投屏内容进行调整，生成目标投屏内容。
6.如权利要求5所述的投屏交互方法，其特征在于，所述根据所述语音交互指令，对所述初始投屏内容进行调整，生成目标投屏内容的步骤包括：
根据所述语音交互指令，接收用户语音信息；
将所述用户语音信息转换为文本信息，并发送至预设的弹幕云服务器；
从所述弹幕云服务器中下载包含所述文本信息的实时弹幕，将所述实时弹幕加入所述初始投屏内容中，生成目标投屏内容。
7.如权利要求1-6任一项所述的投屏交互方法，其特征在于，在所述识别发送端传输的初始投屏内容中是否包含交互内容的步骤之后，还包括：
若所述初始投屏内容中包含交互内容，则接收发送端发送的关键词交互指令；
根据所述关键词交互指令，获取预设的第二喝彩动效；
将所述第二喝彩动效加入初始投屏内容中，生成目标投屏内容。
8.一种投屏交互装置，其特征在于，所述投屏交互装置包括：
内容识别模块，用于识别发送端传输的初始投屏内容中是否包含交互内容；
指令接收模块，用于若所述初始投屏内容中包含交互内容，则接收发送端发送的摇动交互指令；
内容调整模块，用于根据所述摇动交互指令，对所述初始投屏内容进行调整，生成目标投屏内容；
内容发送模块，用于将所述目标投屏内容发送至接收端，以供接收端显示所述目标投屏内容。
9.一种投屏器，其特征在于，所述投屏器包括：投屏发射器及投屏接收器，所述投屏发射器用于连接发送端，所述投屏接收器用于连接接收端，所述投屏发射器与所述投屏接收器通过无线网络或协议进行数据传输；所述投屏接收器和/或投屏接收器还包括：存储器、处理器及存储在所述存储器上并可在所述处理器上运行的投屏交互程序，所述投屏交互程序配置为实现如权利要求1至7中任一项所述的投屏交互方法的步骤。
10.一种计算机可读存储介质，其特征在于，所述计算机可读存储介质上存储有投屏交互程序，所述投屏交互程序被处理器执行时实现如权利要求1至7任一项所述的投屏交互方法的步骤。
CN202210195177.6A 2022-02-28 2022-02-28 投屏交互方法、装置、投屏器及存储介质 Pending CN114567810A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202210195177.6A CN114567810A (zh) 2022-02-28 2022-02-28 投屏交互方法、装置、投屏器及存储介质

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202210195177.6A CN114567810A (zh) 2022-02-28 2022-02-28 投屏交互方法、装置、投屏器及存储介质

Publications (1)

Publication Number Publication Date
CN114567810A true CN114567810A (zh) 2022-05-31

Family

ID=81715840

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202210195177.6A Pending CN114567810A (zh) 2022-02-28 2022-02-28 投屏交互方法、装置、投屏器及存储介质

Country Status (1)

Country Link
CN (1) CN114567810A (zh)

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN108076370A (zh) * 2017-02-13 2018-05-25 北京市商汤科技开发有限公司 信息传输方法、装置和电子设备
CN113268216A (zh) * 2021-06-15 2021-08-17 北京字跳网络技术有限公司 投屏控制方法、装置及可读存储介质
CN113453030A (zh) * 2021-06-11 2021-09-28 广州方硅信息技术有限公司 直播中的音频交互方法、装置、计算机设备及存储介质
CN113573155A (zh) * 2021-07-22 2021-10-29 深圳创维－Rgb电子有限公司 语音弹幕实现方法、装置、智能设备及可读存储介质
WO2021223453A1 (zh) * 2020-05-06 2021-11-11 上海幻电信息科技有限公司 多屏互动显示方法及装置

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN108076370A (zh) * 2017-02-13 2018-05-25 北京市商汤科技开发有限公司 信息传输方法、装置和电子设备
WO2021223453A1 (zh) * 2020-05-06 2021-11-11 上海幻电信息科技有限公司 多屏互动显示方法及装置
CN113453030A (zh) * 2021-06-11 2021-09-28 广州方硅信息技术有限公司 直播中的音频交互方法、装置、计算机设备及存储介质
CN113268216A (zh) * 2021-06-15 2021-08-17 北京字跳网络技术有限公司 投屏控制方法、装置及可读存储介质
CN113573155A (zh) * 2021-07-22 2021-10-29 深圳创维－Rgb电子有限公司 语音弹幕实现方法、装置、智能设备及可读存储介质

Similar Documents

Publication Publication Date Title
CN106303555B (zh) 一种基于混合现实的直播方法、装置和系统
CN109495771B (zh) 一种实现网络直播的方法和服务器
US8839118B2 (en) Users as actors in content
US9066144B2 (en) Interactive remote participation in live entertainment
CN106911967B (zh) 直播回放方法及装置
CN111711831B (zh) 一种基于互动行为的数据处理方法、装置及存储介质
US20110214141A1 (en) Content playing device
US20090081964A1 (en) Method and system for providing video game sounds to a mobile device
WO2020010819A1 (zh) 基于直播间的数据交互方法、装置、终端和存储介质
CN110798698A (zh) 一种直播应用程序的多服务器推流方法和设备
CN112714334B (zh) 音乐礼物赠送方法及其装置、设备与介质
WO2017181594A1 (zh) 一种视频显示方法及装置
US20080133604A1 (en) Apparatus and method for linking basic device and extended devices
JP2006005897A (ja) 端末装置、コンテンツ配信システム、情報出力方法、情報出力プログラム
WO2020207080A1 (zh) 视频拍摄方法、装置、电子设备及存储介质
CN113141524B (zh) 资源传输方法、装置、终端及存储介质
WO2021169432A1 (zh) 直播应用的数据处理方法、装置、电子设备及存储介质
CN113453029A (zh) 直播互动方法、服务器及存储介质
WO2017181603A1 (zh) 一种视频显示方法及装置
CN112954426B (zh) 视频播放方法、电子设备及存储介质
WO2017181595A1 (zh) 一种视频显示方法及装置
CN113453033B (zh) 直播间信息传送处理方法及其装置、设备与介质
US20210195256A1 (en) Decoder equipment with two audio links
CN114567810A (zh) 投屏交互方法、装置、投屏器及存储介质
CN107948704B (zh) 用于对音频数据进行动态合成的方法、系统以及移动终端

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination