WO2021088320A1 - 显示设备和内容显示方法 - Google Patents

显示设备和内容显示方法 Download PDF

Info

Publication number
WO2021088320A1
WO2021088320A1 PCT/CN2020/086054 CN2020086054W WO2021088320A1 WO 2021088320 A1 WO2021088320 A1 WO 2021088320A1 CN 2020086054 W CN2020086054 W CN 2020086054W WO 2021088320 A1 WO2021088320 A1 WO 2021088320A1
Authority
WO
WIPO (PCT)
Prior art keywords
display
display screen
content
user
control
Prior art date
Application number
PCT/CN2020/086054
Other languages
English (en)
French (fr)
Inventor
王学磊
司洪龙
Original Assignee
海信视像科技股份有限公司
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 海信视像科技股份有限公司 filed Critical 海信视像科技股份有限公司
Publication of WO2021088320A1 publication Critical patent/WO2021088320A1/zh
Priority to US17/645,551 priority Critical patent/US11805292B2/en

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/41Structure of client; Structure of client peripherals
    • H04N21/4104Peripherals receiving signals from specially adapted client devices
    • H04N21/4122Peripherals receiving signals from specially adapted client devices additional display device, e.g. video projector
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/234Processing of video elementary streams, e.g. splicing of video streams, manipulating MPEG-4 scene graphs
    • H04N21/23418Processing of video elementary streams, e.g. splicing of video streams, manipulating MPEG-4 scene graphs involving operations for analysing video streams, e.g. detecting features or characteristics
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/41Structure of client; Structure of client peripherals
    • H04N21/4104Peripherals receiving signals from specially adapted client devices
    • H04N21/4126The peripheral being portable, e.g. PDAs or mobile phones
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/41Structure of client; Structure of client peripherals
    • H04N21/422Input-only peripherals, i.e. input devices connected to specially adapted client devices, e.g. global positioning system [GPS]
    • H04N21/42202Input-only peripherals, i.e. input devices connected to specially adapted client devices, e.g. global positioning system [GPS] environmental sensors, e.g. for detecting temperature, luminosity, pressure, earthquakes
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/41Structure of client; Structure of client peripherals
    • H04N21/422Input-only peripherals, i.e. input devices connected to specially adapted client devices, e.g. global positioning system [GPS]
    • H04N21/42204User interfaces specially adapted for controlling a client device through a remote control device; Remote control devices therefor
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/41Structure of client; Structure of client peripherals
    • H04N21/422Input-only peripherals, i.e. input devices connected to specially adapted client devices, e.g. global positioning system [GPS]
    • H04N21/42204User interfaces specially adapted for controlling a client device through a remote control device; Remote control devices therefor
    • H04N21/42206User interfaces specially adapted for controlling a client device through a remote control device; Remote control devices therefor characterized by hardware details
    • H04N21/4222Remote control device emulator integrated into a non-television apparatus, e.g. a PDA, media center or smart toy
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/41Structure of client; Structure of client peripherals
    • H04N21/422Input-only peripherals, i.e. input devices connected to specially adapted client devices, e.g. global positioning system [GPS]
    • H04N21/42204User interfaces specially adapted for controlling a client device through a remote control device; Remote control devices therefor
    • H04N21/42206User interfaces specially adapted for controlling a client device through a remote control device; Remote control devices therefor characterized by hardware details
    • H04N21/42221Transmission circuitry, e.g. infrared [IR] or radio frequency [RF]
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/41Structure of client; Structure of client peripherals
    • H04N21/422Input-only peripherals, i.e. input devices connected to specially adapted client devices, e.g. global positioning system [GPS]
    • H04N21/4223Cameras
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/431Generation of visual interfaces for content selection or interaction; Content or additional data rendering
    • H04N21/4312Generation of visual interfaces for content selection or interaction; Content or additional data rendering involving specific graphical features, e.g. screen layout, special fonts or colors, blinking icons, highlights or animations
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/436Interfacing a local distribution network, e.g. communicating with another STB or one or more peripheral devices inside the home
    • H04N21/4363Adapting the video or multiplex stream to a specific local network, e.g. a IEEE 1394 or Bluetooth® network
    • H04N21/43637Adapting the video or multiplex stream to a specific local network, e.g. a IEEE 1394 or Bluetooth® network involving a wireless protocol, e.g. Bluetooth, RF or wireless LAN [IEEE 802.11]
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/47End-user applications
    • H04N21/472End-user interface for requesting content, additional data or services; End-user interface for interacting with content, e.g. for content reservation or setting reminders, for requesting event notification, for manipulating displayed content
    • H04N21/47217End-user interface for requesting content, additional data or services; End-user interface for interacting with content, e.g. for content reservation or setting reminders, for requesting event notification, for manipulating displayed content for controlling playback functions for recorded or on-demand content, e.g. using progress bars, mode or play-point indicators or bookmarks
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/47End-user applications
    • H04N21/472End-user interface for requesting content, additional data or services; End-user interface for interacting with content, e.g. for content reservation or setting reminders, for requesting event notification, for manipulating displayed content
    • H04N21/4722End-user interface for requesting content, additional data or services; End-user interface for interacting with content, e.g. for content reservation or setting reminders, for requesting event notification, for manipulating displayed content for requesting additional data associated with the content
    • H04N21/4725End-user interface for requesting content, additional data or services; End-user interface for interacting with content, e.g. for content reservation or setting reminders, for requesting event notification, for manipulating displayed content for requesting additional data associated with the content using interactive regions of the image, e.g. hot spots
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/47End-user applications
    • H04N21/478Supplemental services, e.g. displaying phone caller identification, shopping application
    • H04N21/4781Games
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/47End-user applications
    • H04N21/478Supplemental services, e.g. displaying phone caller identification, shopping application
    • H04N21/47815Electronic shopping
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/47End-user applications
    • H04N21/478Supplemental services, e.g. displaying phone caller identification, shopping application
    • H04N21/4788Supplemental services, e.g. displaying phone caller identification, shopping application communicating with other users, e.g. chatting
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/47End-user applications
    • H04N21/488Data services, e.g. news ticker
    • H04N21/4882Data services, e.g. news ticker for displaying messages, e.g. warnings, reminders
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/47End-user applications
    • H04N21/488Data services, e.g. news ticker
    • H04N21/4886Data services, e.g. news ticker for displaying a ticker, e.g. scrolling banner for news, stock exchange, weather data
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/80Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
    • H04N21/85Assembly of content; Generation of multimedia applications
    • H04N21/858Linking data to content, e.g. by linking an URL to a video object, by creating a hotspot
    • H04N21/8586Linking data to content, e.g. by linking an URL to a video object, by creating a hotspot by using a URL

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Human Computer Interaction (AREA)
  • Databases & Information Systems (AREA)
  • General Engineering & Computer Science (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Business, Economics & Management (AREA)
  • Emergency Management (AREA)
  • Environmental & Geological Engineering (AREA)
  • Environmental Sciences (AREA)
  • Remote Sensing (AREA)
  • Ecology (AREA)
  • Biodiversity & Conservation Biology (AREA)
  • Life Sciences & Earth Sciences (AREA)
  • Controls And Circuits For Display Device (AREA)
  • User Interface Of Digital Computer (AREA)

Abstract

本申请提供一种内容显示方法,包括:控制在第一显示屏显示数字广播信号携带的服务内容;控制在第二显示屏显示服务器返回的推送消息;所述推送消息基于历史观看服务内容的记录生成,或者,基于网络数据生成。这样能够避免对第一显示屏上的内容画面造成遮挡。

Description

显示设备和内容显示方法
本申请要求在2019年11月4日提交中国专利局、申请号为201911067371.0、发明名称为“显示设备和方法”的中国专利申请的优先权,其全部内容通过引用结合在本申请中。
技术领域
本申请实施例涉及显示设备技术领域,尤其涉及一种显示设备和内容显示方法。
背景技术
随着用户对电视需求的不断提高,智能电视也具有越来越多的功能,例如:在智能电视显示屏上正在播放一影片内容时,一些推送消息,如天气通知消息、应用升级消息、外部设备接入消息等,会不定时弹出,这样会遮挡正在播放的影片内容,影响用户观影体验。
发明内容
本申请实施例提供一种显示设备和内容显示方法,以克服推送的信息对播放的视频造成遮挡的问题。
第一方面,提供一种显示设备,包括:
第一显示屏;
第二显示屏;
用户接口,用于接收用户输入的指令;
调谐解调器,用于接收和解码数字广播信号携带的服务内容;
通信器,用于与服务器进行通信;
控制器,用于执行:
控制所述第一显示屏显示所述服务内容;
控制所述第二显示屏显示推送消息;所述推送消息基于历史观看服务内容的记录生成,或者,基于网络数据生成。
在一些实施例中,所述控制器还用于:控制所述第二显示屏按所述推送消息的生成顺序自动播放至少一条推送消息。
在一些实施例中,所述推送消息中内容可以包括:网页类文本推荐、视频点播类推荐、购物类网页链接推荐和应用程序推荐的任一种。
第二方面,提供一种显示设备,包括:
第一显示屏;
第二显示屏;
用户接口,用于接收用户输入的指令;
调谐解调器,用于接收和解码数字广播信号携带的服务内容;
通信器,用于与外部设备或服务器进行通信,以获取其提供的服务内容;
控制器,用于执行:
控制所述第一显示屏播放所述服务内容;
控制所述第二显示屏显示推送消息;所述推送消息包括与所述服务内容对应的显示画面中识别内容相关联的推荐内容、和/或用于响应与所述推荐内容关联操作的用户控制指令输入接口;
响应于用户输入的指示选择器聚焦的指令,控制所述第二显示屏显示用于指示选择任一推送消息的选择器。
在一些实施例中,在所述第二显示屏显示预设数量的推送消息经过预设时间之后,更新显示用于指示查看其它推送消息的用户控制指令输入接口,或者,更新显示初始界面。
第三方面,提供一种显示设备,包括:
第一显示屏;
第二显示屏;
用户接口,用于接收用户输入的指令;
调谐解调器,用于接收和解码数字广播信号携带的服务内容;
通信器,用于与外部设备或服务器进行通信,以获取其提供的服务内容;
控制器,用于执行:
控制所述第一显示屏播放所述服务内容;
控制所述第二显示屏显示推送消息;所述推送消息包括与所述服务内容对应的显示画面中识别内容相关联的推荐内容、和/或用于响应与所述推荐内容关联操作的用户控制指令输入接口;
响应于用户输入的激活目标推送消息的指令,控制所述第一显示屏显示与所述目标推送消息相关联的内容,同时,控制所述第一显示屏中的服务内容暂停播放。
在一些实施例中,所述推荐内容可以包括:与所述广播节目或服务内容对应的显示画面中识别内容相关的至少一个种类的内容推荐、与所述种类的内容推荐相关的内容简述、以及所述种类的内容推荐中内容来源的一个或多个。
第四方面,提供一种显示设备,包括:
第一显示屏;
第二显示屏;
用户接口,用于接收用户输入的指令;
调谐解调器,用于接收和解码数字广播信号携带的服务内容;
通信器,用于与外部设备或服务器进行通信,以获取其提供的服务内容;
控制器,用于执行:
控制所述第一显示屏播放所述服务内容;
控制所述第二显示屏显示推送消息;所述推送消息包括与所述服务内容对应的显示画面中识别内容相关联的推荐内容、和/或用于响应与所述推荐内容关联操作的用户控制指令输入接口;
响应于用户输入的激活目标推送消息的指令,控制所述第一显示屏显示与所述目标推送消息相关联的内容,同时,控制所述第一显示屏中的服务内容暂停播放;
响应于用户输入的退出显示所述目标推送消息相关联的内容的指令,控制所述第一显示屏继续播放所述服务内容。
在一些实施例中,所述目标推送消息对应的屏幕显示对象以动画形式从第二显示屏边界滑出,并从第一显示屏边界滑入。
第五方面,提供一种显示设备,包括:
第一显示屏;
第二显示屏;
用户接口,用于接收用户输入的指令;
通信器,用于与外部设备或服务器进行通信,以获取其提供的服务内容;
控制器,用于执行:
控制所述第一显示屏播放所述服务内容中的第一媒体资源;
检测到在所述第一显示屏播放所述第一媒体资源的过程中,控制所述第二显示屏显示与所述第一媒体资源对应的显示画面中识别内容相关联的推荐内容;
检测到在所述第一显示屏即将完成播放所述第一媒体资源时,控制所述第二显示屏显示所述服务内容中除所述第一媒体资源外,与所述第一媒体资源相关联的其他媒体资源。
在一些实施例中,所述推荐内容至少包括:人物推荐、商品推荐、景点推荐。
第六方面,提供一种显示设备,包括:
第一显示屏,被配置为显示第一用户界面;
第二显示屏,被配置为显示第二用户界面;
与所述第一显示屏通信的第一控制器,以及与所述第二显示屏通信的第二控制器,所述第一控制器和所述第二控制器通信连接;
所述第一控制器,被配置为:
获取所述第一用户界面中的视频画面的信息,并通过第一通信器将所述视频画面的信息发送给服务器,所述服务器用于根据所述视频画面的信息获取所述视频画面中的对象的搜索标识,并将所述搜索标识发送给所述第二控制器;
所述第二控制器被配置为:
通过第二通信器接收所述搜索标识,并控制所述第二显示屏显示第三用户 界面,其中,所述第三用户界面中包括所述视频画面中的对象的搜索标识。
在一些实施例中,所述第一控制器还被配置为:
通过用户输入接口接收选择器的控制指令,响应于所述控制指令,控制所述第一显示屏移除所述选择器,并将所述控制指令发送给所述第二控制器;
所述第二控制器被配置为:
控制所述第二显示屏显示所述选择器,所述第三用户界面中还包括所述选择器。
在一些实施例中,所述第一控制器还被配置为:
通过所述用户输入接口接收指示返回的第一用户输入,并将所述第一用户输入发送给所述第二控制器;
所述第二控制器被配置为:
响应于所述第一用户输入,控制所述第二显示屏显示所述第二用户界面。
在一些实施例中,所述第一控制器还被配置为:
通过所述用户输入接口接收指示选择任一搜索标识的第二用户输入,响应于所述第二用户输入,暂停播放视频,获取与所述搜索标识对应的搜索信息,并控制所述第一显示屏显示所述搜索信息,其中,所述第二用户输入是通过所述选择器作用于所述第二显示屏的,所述第二用户界面中包括所述搜索信息。
在一些实施例中,所述搜索信息悬浮显示在所述第一用户界面中的一侧。
在一些实施例中,所述第一控制器还被配置为:
通过所述用户输入接口接收针对所述搜索信息的第三用户输入,响应于所述第三用户输入,获取与所述搜索信息对应的关联信息,并控制所述第一显示屏显示所述关联信息并移除所述搜索信息,所述关联信息为文字信息或视频信 息。
在一些实施例中,在所述关联信息为文字信息时,所述第一控制器具体被配置为控制所述关联信息悬浮显示在所述第一用户界面的一侧。
在一些实施例中,在所述关联信息为视频信息时,所述第一控制器被配置为控制所述第一显示屏显示第四用户界面,所述第四用户界面中包括所述关联信息。
在一些实施例中,所述第一控制器还被配置为:
在预设时长内,获取所述视频画面的下一帧画面的信息,并通过所述第一通信器将所述下一帧画面的信息发送给服务器,所述服务器用于根据所述下一帧的信息获取所述下一帧画面的搜索标识,并将所述下一帧画面中的对象的搜索标识发送给所述第二控制器;
所述第二控制器被配置为:
通过所述第二通信器接收所述下一帧画面中的对象的搜索标识,并控制所述第二显示屏显示第五用户界面,其中,所述第五用户界面中包括所述视频画面和所述下一帧画面中的对象的搜索标识。
在一些实施例中,所述第二控制器还被配置为:
在所述搜索标识的数目大于预设值时,控制所述第二显示屏滚动显示所述搜索标识。
第七方面,提供一种内容显示方法,包括:
控制第一显示屏显示数字广播信号携带的服务内容;
控制第二显示屏显示服务器返回的推送消息;所述推送消息基于历史观看服务内容的记录生成,或者,基于网络数据生成。
在一些实施例中,所述推送消息中内容可以包括:网页类文本推荐、视频点播类推荐、购物类网页链接推荐和应用程序推荐的任一种。
第八方面,提供一种内容显示方法,包括:
控制第一显示屏播放所述服务内容;所述服务内容为数字广播信号携带;
控制第二显示屏显示服务器返回的推送消息;所述推送消息包括与所述服务内容对应的显示画面中识别内容相关联的推荐内容、和/或用于响应与所述推荐内容关联操作的用户控制指令输入接口;
响应于用户输入的指示选择器聚焦的指令,控制所述第二显示屏显示用于指示选择任一推送消息的选择器。
在一些实施例中,在所述第二显示屏显示预设数量的推送消息经过预设时间之后,更新显示用于指示查看其它推送消息的用户控制指令输入接口,或者,更新显示初始界面。
第九方面,提供一种内容显示方法,包括:
控制第一显示屏播放所述服务内容;所述服务内容为数字广播信号携带,或者,外部设备或服务器提供;
控制第二显示屏显示服务器返回的推送消息;所述推送消息包括与所述服务内容对应的显示画面中识别内容相关联的推荐内容、和/或用于响应与所述推荐内容关联操作的用户控制指令输入接口;
响应于用户输入的激活目标推送消息的指令,控制所述第一显示屏显示与所述目标推送消息相关联的内容,同时,控制所述第一显示屏中的服务内容暂停播放。
在一些实施例中,所述推荐内容可以包括:与所述广播节目或服务内容对 应的显示画面中识别内容相关的至少一个种类的内容推荐、与所述种类的内容推荐相关的内容简述、以及所述种类的内容推荐中内容来源的一个或多个。
第十方面,提供一种内容显示方法,包括:
控制第一显示屏播放所述服务内容;所述服务内容为数字广播信号携带,或者,外部设备或服务器提供;
控制第二显示屏显示推送消息;所述推送消息包括与所述服务内容对应的显示画面中识别内容相关联的推荐内容、和/或用于响应与所述推荐内容关联操作的用户控制指令输入接口;
响应于用户输入的激活目标推送消息的指令,控制所述第一显示屏显示与所述目标推送消息相关联的内容,同时,控制所述第一显示屏中的服务内容暂停播放;
响应于用户输入的退出显示所述目标推送消息相关联的内容的指令,控制所述第一显示屏继续播放所述服务内容。
在一些实施例中,所述目标推送消息对应的屏幕显示对象以动画形式从第二显示屏边界滑出,并从第一显示屏边界滑入。
第十一方面,提供一种内容显示方法,包括:
控制第一显示屏播放外部设备或服务器提供的服务内容中的第一媒体资源;
检测到在所述第一显示屏播放所述第一媒体资源的过程中,控制第二显示屏显示与所述第一媒体资源对应的显示画面中识别内容相关联的推荐内容;
检测到在所述第一显示屏即将完成播放所述第一媒体资源时,控制所述第二显示屏显示所述服务内容中除所述第一媒体资源外,与所述第一媒体资源相 关联的其他媒体资源。
第十二方面,提供一种显示方法,包括:
第一控制器获取第一用户界面中的视频画面的信息,并通过第一通信器将所述视频画面的信息发送给服务器,所述服务器用于根据所述视频画面的信息获取所述视频画面中的对象的搜索标识,并将所述搜索标识发送给所述第二控制器;
第二控制器通过第二通信器接收所述搜索标识,并控制第二显示屏显示第三用户界面,其中,所述第三用户界面中包括所述视频画面中的对象的搜索标识。
附图说明
为了更清楚地说明本申请实施例或现有技术中的技术方案,下面将对实施例或现有技术描述中所需要使用的附图作一简单地介绍,显而易见地,下面描述中的附图是本申请的一些实施例,对于本领域普通技术人员来讲,在不付出创造性劳动性的前提下,还可以根据这些附图获得其他的附图。
图1中示例性示出了根据实施例中显示设备与控制装置之间操作场景的示意图;
图2中示例性示出了根据示例性实施例中控制装置100的配置框图;
图3a中示例性示出了根据示例性实施例中显示设备200中硬件系统的硬件结构示意图;
图3b中示例性示出了根据示例性实施例中显示设备中硬件系统的硬件结构示意图;
图4中示例性示出了电源板与负载的连接关系示意图;
图5中示例性示出了根据图3所示显示设备200的硬件架构框图;
图6中示例性示出了根据示例性实施例中显示设备的功能配置示意图;
图7中示例性示出了根据示例性实施例中显示设备200中软件系统的配置框图;
图8中示例性示出了根据示例性实施例中显示设备的应用程序层示意图;
图9中示例性示出了根据示例性实施例中显示设备200中用户界面的示意图;
图10为本申请示例性实施例提供的显示设备的交互过程的示意图一;
图11为本申请示例性实施例提供的显示设备的交互过程的示意图二;
图12为本申请示例性实施例提供的显示设备的交互过程的示意图三;
图13为本申请示例性实施例提供的显示设备的交互过程的示意图三;
图14为本申请示例性实施例提供的显示设备的交互过程的示意图四;
图15为本申请示例性实施例提供的显示设备的交互过程的示意图五;
图16为本申请示例性实施例提供的显示设备的交互过程的示意图六;
图17为本申请示例性实施例提供的显示设备的交互过程的示意图七;
图18为本申请示例性实施例提供的显示方法的流程示意图一;
图19为本申请示例性实施例提供的显示方法的流程示意图二。
具体实施方式
为使本申请实施例的目的、技术方案和优点更加清楚,下面将结合本申请申请实施例中的附图,对本申请申请实施例中的技术方案进行清楚、完整的地 描述,显然,所描述的实施例仅仅是本申请申请一部分实施例,而不是全部的实施例。基于本申请申请中的实施例,本领域普通技术人员在没有做出作出创造性劳动前提下所获得的所有其他实施例,都属于本申请申请保护的范围。
本申请的说明书、权利要求书及附图中的术语“第一”、“第二”等是用于区别类似的对象,而不必用于描述特定的顺序或先后次序。
本申请主要针对具有双系统、双显示屏结构的显示设备,即具有第一控制器(第一硬件系统、A芯片)、第二控制器(第二硬件系统、N芯片)、第一显示屏和第二显示屏的显示设备的音画同步处理。需要说明的是,第一控制器和第二控制器除了可以实施为上述相互独立的两个硬件系统或控制器,也可以具体实施为一个硬件系统或控制器,具体实施方式可以根据实际需要灵活配置,本实施例对此不作具体限制,仅以具体实施为两个控制器作为示例说明。
下面首先对具有双系统硬件结构的显示设备的结构、功能和实现方式等方面进行详细说明。
为便于用户使用,显示设备上通常会设置各种外部装置接口,以便于连接不同的外设设备或线缆以实现相应的功能。而在显示设备的接口上连接有高清晰度的摄像头时,如果显示设备的硬件系统没有接收源码的高像素摄像头的硬件接口,那么就会导致无法将摄像头接收到的数据呈现到显示设备的显示屏上。
并且,受制于硬件结构,传统显示设备的硬件系统仅支持一路硬解码资源,且通常最大仅能支持4K分辨率的视频解码,因此当要实现边观看网络电视边进行视频聊天时,为了不降低网络视频画面清晰度,就需要使用硬解码资源(通常是硬件系统中的GPU)对网络视频进行解码,而在此情况下,只能采取由硬件系统中的通用处理器(例如CPU)对视频进行软解码的方式处理视频聊天画 面。
采用软解码处理视频聊天画面,会大大增加CPU的数据处理负担,当CPU的数据处理负担过重时,可能会出现画面卡顿或者不流畅的问题。在一些实施例中,受制于CPU的数据处理能力,当采用CPU软解码处理视频聊天画面时,通常无法实现多路视频通话,当用户想要再同一聊天场景同时与多个其他用户进行视频聊天时,会出现接入受阻的情况。
基于上述各方面的考虑,为克服上述缺陷,本申请公开了一种双硬件系统架构,以实现多路视频聊天数据(至少一路本地视频)。
下面首先结合附图对本申请所涉及的概念进行说明。在此需要指出的是,以下对各个概念的说明,仅为了使本申请的内容更加容易理解,并不表示对本申请保护范围的限定。
本申请各实施例中使用的术语“模块”,可以是指任何已知或后来开发的硬件、软件、固件、人工智能、模糊逻辑或硬件或/和软件代码的组合,能够执行与该元件相关的功能。
本申请各实施例中使用的术语“遥控器”,是指电子设备(如本申请中公开的显示设备)的一个组件,该组件通常可在较短的距离范围内无线控制电子设备。该组件一般可以使用红外线和/或射频(RF)信号和/或蓝牙与电子设备连接,也可以包括WiFi、无线USB、蓝牙、动作传感器等功能模块。例如:手持式触摸遥控器,是以触摸屏中用户界面取代一般遥控装置中的大部分物理内置硬件。
本申请各实施例中使用的术语“手势”,是指用户通过一种手型的变化或手部运动等动作,用于表达预期想法、动作、目的/或结果的用户行为。
本申请各实施例中使用的术语“硬件系统”,可以是指由集成电路 (Integrated Circuit,IC)、印刷电路板(Printed circuit board,PCB)等机械、光、电、磁器件构成的具有计算、控制、存储、输入和输出功能的实体部件。在本申请各个实施例中,硬件系统通常也会被称为主板(motherboard)或芯片。
图1中示例性示出了根据实施例中显示设备与控制装置之间操作场景的示意图。如图1所示,用户可通过控制装置100来操作显示设备200。
其中,控制装置100可以是遥控器100A,其可与显示设备200之间通过红外协议通信、蓝牙协议通信、紫蜂(ZigBee)协议通信或其他短距离通信方式进行通信,用于通过无线或其他有线方式来控制显示设备200。用户可以通过遥控器100A上按键、语音输入、控制面板输入等输入用户指令,来控制显示设备200。如:用户可以通过遥控器100A上音量加减键、频道控制键、上/下/左/右的移动按键、语音输入按键、菜单键、开关机按键等输入相应控制指令,来实现控制显示设备200的功能。
控制装置100也可以是智能设备,如移动终端100B、平板电脑、计算机、笔记本电脑等,其可以通过本地网(LAN,Local Area Network)、广域网(WAN,Wide Area Network)、无线局域网(WLAN,Wireless Local Area Network)或其他网络与显示设备200之间通信,并通过与显示设备200相应的应用程序实现对显示设备200的控制。例如,使用在智能设备上运行的应用程序控制显示设备200。该应用程序可以在与智能设备关联的屏幕上通过直观的用户界面(UI,User Interface)为用户提供各种控制。
示例的,移动终端100B与显示设备200均可安装软件应用,从而可通过网络通信协议实现二者之间的连接通信,进而实现一对一控制操作的和数据通信的目的。如:可以使移动终端100B与显示设备200建立控制指令协议,将 遥控控制键盘同步到移动终端100B上,通过控制移动终端100B上用户界面,实现控制显示设备200的功能;也可以将移动终端100B上显示的音视频内容传输到显示设备200上,实现同步显示功能。
如图1所示,显示设备200还可与服务器300通过多种通信方式进行数据通信。在本申请各个实施例中,可允许显示设备200通过局域网、无线局域网或其他网络与服务器300进行有线通信连接或无线通信连接。服务器300可以向显示设备200提供各种内容和互动。
示例的,显示设备200通过发送和接收信息,以及电子节目指南(EPG,Electronic Program Guide)互动,接收软件程序更新,或访问远程储存的数字媒体库。服务器300可以是一组,也可以是多组,可以是一类或多类服务器。通过服务器300提供视频点播和广告服务等其他网络服务内容。
显示设备200包括第一显示屏201与第二显示屏202,其中,第一显示屏201与第二显示屏202之间相互独立,第一显示屏201与第二显示屏202之间采用双硬件控制系统。
其中,第一显示屏201和第二显示屏202可以用于显示不同的显示画面。如,第一显示屏201可以用于传统电视节目的画面显示,第二显示屏202用于通知类消息、语音助手等辅助信息的画面显示。
在一些实施例中,第一显示屏201显示的内容与第二显示屏202显示的内容之间可以相互独立,互不影响。例如,在第一显示屏201播放电视节目时,第二显示屏202可以显示与电视节目无关的时间、天气、气温、提醒消息等信息。
在一些实施例中,第一显示屏201显示的内容与第二显示屏202显示的内 容之间也可以存在关联关系。例如,在第一显示屏201播放视频聊天的主画面时,第二显示屏202可以显示当前接入视频聊天的用户的头像、聊天时长等信息。
在一些实施例中,第二显示屏202显示的部分或全部内容可以调整至第一显示屏201显示。例如,可以将第一显示屏201显示的时间、天气、气温、提醒消息等信息调整到第一显示屏201显示,而用第二显示屏202显示其它的信息。
另外,第一显示屏201在显示传统电视节目画面的同时,还显示多方交互画面,且多方交互画面不会遮挡传统电视节目画面。其中,本申请对传统电视节目画面和多方交互画面的显示方式不做限定。例如,本申请可以根据传统电视节目画面和多方交互画面的优先级,设置传统电视节目画面和多方交互画面的位置和大小。
以传统电视节目画面的优先级高于多方交互画面的优先级为例,传统电视节目画面的面积大于多方交互画面的面积,且多方交互画面可以位于传统电视节目画面的一侧,也可以悬浮设置在多方交互画面的一角。
显示设备200,一方面讲,可以是液晶显示屏、OLED(Organic Light Emitting Diode)显示屏、投影显示设备;另一方面讲,显示设备200被可以是智能电视或显示屏和机顶盒组成的显示系统。具体显示设备类型,尺寸大小和分辨率等不作限定,本领技术人员可以理解的是,显示设备200可以根据需要做性能和配置上的一些改变。
显示设备200除了提供广播接收电视功能之外,还可以附加提供计算机支持功能的智能网络电视功能。示例的包括,网络电视、智能电视、互联网协议 电视(IPTV)等。在一些实施例中,显示设备可以不具备广播接收电视功能。
如图1所示,显示设备200上可以连接或设置有摄像头,用于将摄像头拍摄到的画面呈现在本显示设备或其他显示设备的显示界面上,以实现用户之间的交互聊天。具体的,摄像头拍摄到的画面可在显示设备上全屏显示、半屏显示、或者显示任意可选区域。
作为一种在一些实施例中连接方式,摄像头通过连接板与显示设备的后壳连接,固定安装在显示设备的后壳的上侧中部,作为可安装的方式,可以固定安装在显示设备的后壳的任意位置,能保证其图像采集区域不被后壳遮挡即可,例如,图像采集区域与显示设备的显示朝向相同。
作为另一种在一些实施例中连接方式,摄像头通过连接板或者其他可想到的连接器可升降的与显示设备后壳连接,连接器上安装有升降马达,当用户要使用摄像头或者有应用程序要使用摄像头时,再升出显示设备之上,当不需要使用摄像头时,其可内嵌到后壳之后,以达到保护摄像头免受损坏和保护用户的隐私安全。
作为一种实施例,本申请所采用的摄像头可以为1600万像素,以达到超高清显示目的。在实际使用中,也可采用比1600万像素更高或更低的摄像头。
当显示设备上安装有摄像头以后,显示设备不同应用场景所显示的内容可得到多种不同方式的融合,从而达到传统显示设备无法实现的功能。
示例性的,用户可以在边观看视频节目的同时,与至少一位其他用户进行视频聊天。视频节目的呈现可作为背景画面,视频聊天的窗口显示在背景画面之上。形象的,可以称该功能为“边看边聊”。
在一些实施例中,在“边看边聊”的场景中,在观看直播视频或网络视频 的同时,跨终端的进行至少一路的视频聊天。
另一示例中,用户可以在边进入教育应用学习的同时,与至少一位其他用户进行视频聊天。例如,学生在学习教育应用程序中内容的同时,可实现与老师的远程互动。形象的,可以称该功能为“边学边聊”。
另一示例中,用户在玩纸牌游戏时,与进入游戏的玩家进行视频聊天。例如,玩家在进入游戏应用参与游戏时,可实现与其他玩家的远程互动。形象的,可以称该功能为“边看边玩”。
在一些实施例中,游戏场景与视频画面进行融合,将视频画面中人像进行抠图,显示在游戏画面中,提升用户体验。
在一些实施例中,在体感类游戏中(如打球类、拳击类、跑步类、跳舞类等),通过摄像头获取人体姿势和动作,肢体检测和追踪、人体骨骼关键点数据的检测,再与游戏中动画进行融合,实现如体育、舞蹈等场景的游戏。
另一示例中,用户可以在K歌应用中,与至少一位其他用户进行视频和语音的交互。形象的,可以称该功能为“边看边唱”。在一些实施例中,当至少一位用户在聊天场景进入该应用时,可多个用户共同完成一首歌的录制。
另一个示例中,用户可在本地打开摄像头获取图片和视频,形象的,可以称该功能为“照镜子”。
在另一些示例中,还可以再增加更多功能或减少上述功能。本申请对该显示设备的功能不作具体限定。
图2中示例性示出了根据示例性实施例中控制装置100的配置框图。如图2所示,控制装置100包括控制器110、通信器130、用户输入/输出接口140、存储器190、供电电源180。
控制装置100被配置为可控制所述显示设备200,以及可接收用户的输入操作指令,且将操作指令转换为显示设备200可识别和响应的指令,起到用户与显示设备200之间交互中介作用。如:用户通过操作控制装置100上频道加减键,显示设备200响应频道加减的操作。
在一些实施例中,控制装置100可是一种智能设备。如:控制装置100可根据用户需求安装控制显示设备200的各种应用。
在一些实施例中,如图1所示,移动终端100B或其他智能电子设备,可在安装操控显示设备200的应用之后,起到控制装置100类似功能。如:用户可以通过安装应用,在移动终端100B或其他智能电子设备上可提供的图形用户界面的各种功能键或虚拟按钮,以实现控制装置100实体按键的功能。
控制器110包括处理器112、RAM 113和ROM 114、通信接口以及通信总线。控制器110用于控制控制装置100的运行和操作,以及内部各部件之间通信协作以及外部和内部的数据处理功能。
通信器130在控制器110的控制下,实现与显示设备200之间控制信号和数据信号的通信。如:将接收到的用户输入信号发送至显示设备200上。通信器130可包括WIFI模块131、蓝牙模块132、NFC模块133等通信模块中至少一种。
用户输入/输出接口140,其中,输入接口包括麦克风141、触摸板142、传感器143、按键144、摄像头145等输入接口中至少一者。如:用户可以通过语音、触摸、手势、按压等动作实现用户指令输入功能,输入接口通过将接收的模拟信号转换为数字信号,以及数字信号转换为相应指令信号,发送至显示设备200。
输出接口包括将接收的用户指令发送至显示设备200的接口。在一些实施例中,可以是红外接口,也可以是射频接口。如:红外信号接口时,需要将用户输入指令按照红外控制协议转化为红外控制信号,经红外发送模块进行发送至显示设备200。再如:射频信号接口时,需将用户输入指令转化为数字信号,然后按照射频控制信号调制协议进行调制后,由射频发送端子发送至显示设备200。
在一些实施例中,控制装置100包括通信器130和输出接口中至少一者。控制装置100中配置通信器130,如:WIFI、蓝牙、NFC等模块,可将用户输入指令通过WIFI协议、或蓝牙协议、或NFC协议编码,发送至显示设备200。
存储器190,用于在控制器110的控制下存储驱动和控制控制装置100的各种运行程序、数据和应用。存储器190,可以存储用户输入的各类控制信号指令。
供电电源180,用于在控制器110的控制下为控制装置100各电器元件提供运行电力支持。供电电源180可以采用电池及相关控制电路实现供电。
在一些实施例中,图3a中示例性示出了根据示例性实施例中显示设备200中硬件系统的硬件结构示意图。为了便于说明,图3a中显示设备200以采用液晶显示屏为例进行示意。
图3a所示,显示设备200可以包括:第一面板11、第一背光组件21、主板31、交互板3212、第一后壳13、第一控制器14、第二控制器15、第一显示驱动板33电路16、第二面板1221、第二背光组件22、第二显示驱动板34、电源板4、第一后壳51后壳23、第二后壳52和基座6。显示驱动电路24和电源组件30。另外,在一些实施例中,显示设备200还可以包括:底座或者悬挂 支架。为了便于说明,图3a中显示设备200中以包含底座41进行举例示意,该底座41用于支撑显示设备200。值得说明的是,图中仅示出一种形式的底座设计,本领域技术人员可以根据产品需求设计不同形式的底座。
其中,第一面板11用于给用户呈现第一显示屏201的画面。在一些实施例中,第一面板11可以为液晶面板。例如,液晶面板可以从上到下依次包括:水平偏光板、彩色滤光片、液晶层、薄膜晶体管TFT、垂直偏光板、导光板和印刷电路板(printed circuit board,PCB),该印刷电路板PCB上设置有栅极驱动电路、源极驱动电路等驱动电路。其中,栅极驱动电路通过扫描线与薄膜晶体管TFT的栅极连接,源极驱动电路通过数据线与薄膜晶体管TFT的漏极连接。
其中,第一背光组件12位于第一面板11的下方,通常是一些光学组件,用于供应充足的亮度与分布均匀的光源,使第一面板11能正常显示影像。第一背光组件12还包括第一背板(图中未示出)。
其中,第一后壳13盖设在第一面板11上,以共同隐藏第一背光组件12、第一控制器14、第二控制器15和第一显示驱动电路16和电源组件30等显示设备200的零部件,起到美观的效果。
其中,第一控制器14、第二控制器15和第一显示驱动电路16和电源组件30设置于第一背板上,通常在第一背板上冲压形成一些凸包结构。第一控制器14、第二控制器15和第一显示驱动电路16和电源组件30通过螺钉或者挂钩固定在凸包上。
在一些实施例中,第一控制器14、第二控制器15、第一显示驱动电路16和电源组件30可以共同设置在一个板子上,也可以分别设置不同的板子上,如第一控制器14设置在主板上,第二控制器15设置在交互板上,第一显示驱动 电路16设置在第一显示驱动板上,电源组件30设置在电源板上,也可以组合设置在不同的板子上,也可以与第一背光组件12共同设置在一个板子上,具体可以根据实际需求进行设置,本申请对此不做限定。
为了便于说明,图3a中将第一控制器14、第二控制器15和第一显示驱动电路16和电源组件30共设在一个板子上进行举例示意。
其中,第一显示驱动电路16主要的功能是:通过第一控制器14传输的背光驱动信号,如PWM信号以及Lcald imming信号,进行千级背光分区控制,此部分控制是根据图像内容变化的,以及在与第一控制器14之间建立握手后,接收第一控制器14发送的VbyOne显示信号,并将VbyOne显示信号转换为LVDS信号,实现第一显示屏201的图像画面显示。底座6,用于支撑显示设备200,值得说明的是,图中仅示出一种形式的底座设计,本领域技术人员可以根据产品需求设计不同形式的底座。
其中,第二面板21用于给用户呈现第二显示屏202的画面。在一些实施例中,第二面板21可以为液晶面板,具体包含的结构可以参见前述内容的描述,在此不做赘述。
其中,第二背光组件22位于第二面板12的下方,通常是一些光学组件,用于供应充足的亮度与分布均匀的光源,使第二面板12能正常显示影像。第二背光组件22还包括第二背板(图中未示出)。
其中,第二后壳23盖设在第二面板21上,以共同隐藏第二背光组件22和第二显示驱动电路24等显示设备200的零部件,起到美观效果。
其中,第二显示驱动电路24设置于第二背板上,通常在第二背板上冲压形成一些凸包结构。第二显示驱动电路24通过螺钉或者挂钩固定在凸包上。第二 显示驱动电路24可以单独设置在一个板子上,如第二显示驱动板上,也可以与第二背光组件22共同设置在一个板子上,具体可以根据实际需求进行设置,本申请对此不做限定。为了便于说明,图3a中将第二显示驱动电路24单独设在一个板子上进行举例示意。
在一些实施例中,图3a中还包括按键板,按键板可以设置在第一背板上,也可以设置在第二背板上,本申请对此不做限定。且按键板上设置有多个按键和按键电路,使得第一控制器14或者第二控制器15可以从按键板上接收按键信号,也使得第一控制器14或者第二控制器15可以向按键板发送控制信号。
另外,显示设备200还包括声音再现装置(图中未示出)例如音响组件,如包括功率放大器(Amplifier,AMP)及扬声器(Speaker)的I2S接口等,用于实现声音的再现。通常音响组件至少能够实现两个声道的声音输出;当要实现全景声环绕的效果,则需要设置多个音响组件,输出多个声道的声音,这里不再具体展开说明。
需要说明的是,显示设备200还可以为OLED显示屏,对应的,显示设备200所包含的模板发生相应的改变,如由于OLED显示屏可以实现自发光,因此,OLED显示屏中不需要背光组件(图3a中的第一背光组件12和第二背光组件22),此处不做过多说明。
或者,如图3a所示以具有双显示屏的显示设备作为示例性说明,而在图3b中示例性示出了根据示例性实施例中显示设备中硬件系统的硬件结构示意图。
其中,如图3b所示的具有单显示屏的显示设备中,该显示设备包括:面板1、背光组件2、后壳3、控制器4、电源组件5和底座6。其中,面板1用于给 用户呈现画面;背光组件2位于面板1的下方,通常是一些光学组件,用于供应充足的亮度与分布均匀的光源,使面板1能正常显示图像内容,背光组件2还包括背板,控制器4和电源组件5设置于背板上,通常在背板上冲压形成一些凸包结构,控制器4和电源组件5通过螺钉或者挂钩固定在凸包上;后壳3盖设在面板1上,以共同隐藏背光组件2、控制器4和电源组件5等显示设备的零部件,起到美观的效果;底座6,用于支撑显示设备。
其中,控制器4和电源组件5可以单独设置在一个板子上,也可以共同设置在一个板子上,也可以与背光组件共同设置在一个板子上,具体可以根据实际需求进行设置,本申请对此不做限定。为了便于说明,图3b中,控制器4和电源组件5共同设置在一个板上。
需要说明的是,显示设备200还可以采用OLED显示屏,这样,显示设备200所包含的模板发生相应的改变,此处不做过多说明。
图4示出了电源板与负载的连接关系示意图,如图4所示,电源组件30包括输入端IN和输出端OUT(图中示出第一输出端OUT1、第二输出端OUT2、第三输出端OUT3、第四输出端OUT4和第五输出端OUT5),其中,输入端IN与交流电源(如市电)相连,输出端OUT与负载相连,比如,第一输出端OUT1和声音再现装置相连,第二输出端OUT2和第一面板11/第二面板21相连,第三输出端OUT3和第一背光组件12/第二背光组件22相连,第四输出端OUT4和第一控制器14/第二控制器15相连,第五输出端OUT5和第一显示驱动电路16/第二显示驱动电路24相连。其中,电源组件30需要将交流市电转换为负载所需求的直流电,并且,该直流电通常具有不同的规格,例如音响组件需要18V,第一控制器14需要12V/18V等。
为便于表述,以下将双硬件系统架构中的一个硬件系统称为第一硬件系统或第一控制器,并将另一个硬件系统称为第二硬件系统或第二控制器。第一控制器包含第一控制器的各类处理器、各类接口,及通过各类接口与第一控制器相连的各类模块,第二控制器则包含第二控制器的各类处理器、各类接口,及通过各类接口与第二控制器相连的各类模块。
第一控制器及第二控制器中可以各自安装有相对独立的操作系统,第一控制器的操作系统和第二控制器的操作系统可以通过通信协议相互通信,示例性的:第一控制器的操作系统的framework层和第二控制器的操作系统的framework层可以进行通信进行命令和数据的传输,从而使显示设备200中存在两个在独立但又存在相互关联的子系统。
下面结合图5对本申请双硬件系统架构进行在一些实施例中的说明。需要说明的是图5仅仅是对本申请双硬件系统架构的一个示例性说明,并不表示对本申请的限定。在实际应用中,两个硬件系统均可根据需要包含更多或更少的硬件或接口。
图5中示例性示出了根据图3所示显示设备200的硬件架构框图。如图5所示,显示设备200的硬件系统以包括第一控制器210和第二控制器310,以及通过各类接口与第一控制器210或第二控制器310相连接的模块。
在一些实施例中:第二控制器310可以用于接收第一控制器210发送的指令,并控制第二显示屏380显示相应的图像。
与第一控制器210连接的模块可以包括调谐解调器220、通信器230、外部装置接口250、第一控制器210、存储器290、用户输入接口260-3、视频处理器260-1、音频处理器260-2、第一显示屏280(即图1中的第一显示屏201)、 音频输出接口270、供电模块240。在其他实施例中N芯片也可以包括更多或更少的模块。
其中,调谐解调器220,用于对通过有线或无线方式接收广播电视信号,进行放大、混频和谐振等调制解调处理,从而从多个无线或有线广播电视信号中解调出用户所选择电视频道的频率中所携带的音视频信号,以及附加信息(例如EPG数据信号)。根据电视信号广播制式不同,调谐解调器220的信号途径可以有很多种,诸如:地面广播、有线广播、卫星广播或互联网广播等;以及根据调制类型不同,所述信号的调整方式可以数字调制方式,也可以模拟调制方式;以及根据接收电视信号种类不同,调谐解调器220可以解调模拟信号和/或数字信号。
调谐解调器220,还用于根据用户选择,以及由第一控制器210控制,响应用户选择的电视频道频率以及该频率所携带的电视信号。
在其他一些示例性实施例中,调谐解调器220也可在外置设备中,如外置机顶盒等。这样,机顶盒通过调制解调后输出电视音视频信号,经过外部装置接口250输入至显示设备200中。
通信器230是用于根据各种通信协议类型与外部设备或外部服务器进行通信的组件。例如:通信器230可以包括WIFI模块231,蓝牙通信协议模块232,有线以太网通信协议模块233,及红外通信协议模块等其他网络通信协议模块或近场通信协议模块(图中未示出)。
显示设备200可以通过通信器230与外部控制设备或内容提供设备之间建立控制信号和数据信号的连接。例如,通信器可根据第一控制器210的控制接收遥控器100的控制信号。
外部装置接口250,是提供N芯片的第一控制器210和A芯片及外部其他设备间数据传输的组件。外部装置接口250可按照有线/无线方式与诸如机顶盒、游戏装置、笔记本电脑等的外部设备连接,可接收外部设备的诸如视频信号(例如运动图像)、音频信号(例如音乐)、附加信息(例如EPG)等数据。
其中,外部装置接口250可以包括:高清多媒体接口(HDMI)端子也称之为HDMI 251、复合视频消隐同步(CVBS)端子也称之为AV 252、模拟或数字分量端子也称之为分量253、通用串行总线(USB)端子254、红绿蓝(RGB)端子(图中未示出)等任一个或多个。本申请不对外部装置接口的数量和类型进行限制。
第一控制器210,通过运行存储在存储器290上的各种软件控制程序(如操作系统和/或各种应用程序),来控制显示设备200的工作和响应用户的操作。
如图5所示,第一控制器210包括只读存储器RAM 213、随机存取存储器ROM 214、图形处理器216、CPU处理器212、通信接口218、以及通信总线。其中,RAM 213和ROM 214以及图形处理器216、CPU处理器212、通信接口218通过总线相连接。
ROM 213,用于存储各种系统启动的指令。如在收到开机信号时,显示设备200电源开始启动,CPU处理器212运行ROM中系统启动指令,将存储在存储器290的操作系统拷贝至RAM 214中,以开始运行启动操作系统。当操作系统启动完成后,CPU处理器212再将存储器290中各种应用程序拷贝至RAM 214中,然后,开始运行启动各种应用程序。
图形处理器216,用于产生各种图形对象,如:图标、操作菜单、以及用户输入指令显示图形等。包括运算器,通过接收用户输入各种交互指令进行运 算,根据显示属性显示各种对象。以及包括渲染器,产生基于运算器得到的各种对象,进行渲染的结果显示在第一显示屏280上。
CPU处理器212,用于执行存储在存储器290中操作系统和应用程序指令。以及根据接收外部输入的各种交互指令,来执行各种应用程序、数据和内容,以便最终显示和播放各种音视频内容。
在一些示例性实施例中,CPU处理器212,可以包括多个处理器。所述多个处理器中可包括一个主处理器以及多个或一个子处理器。主处理器,用于在预加电模式中执行显示设备200一些操作,和/或在正常模式下显示画面的操作。多个或一个子处理器,用于执行在待机模式等状态下的一种操作。
通信接口218,可包括第一接口218-1到第n接口218-n。这些接口可以是经由网络被连接到外部设备的网络接口。
第一控制器210可以控制显示设备200与第一显示屏280相关的操作。例如:响应于接收到用于选择在第一显示屏280上显示UI对象的用户命令,第一控制器210便可以执行与由用户命令选择的对象有关的操作。
第一控制器210可以控制显示设备200与第二显示屏380相关的操作。例如:响应于接收到用于选择在第二显示屏380上显示UI对象的用户命令,第一控制器210便可以执行与由用户命令选择的对象有关的操作。
其中,所述对象可以是可选对象中的任何一个,例如超链接或图标。与所选择的对象有关操作,例如:显示连接到超链接页面、文档、图像等操作,或者执行与图标相对应程序的操作。用于选择UI对象用户命令,可以是通过连接到显示设备200的各种输入装置(例如,鼠标、键盘、触摸板等)输入命令或者与由用户说出语音相对应的语音命令。
存储器290,包括存储用于驱动和控制显示设备200的各种软件模块。如:存储器290中存储的各种软件模块,包括:基础模块、检测模块、通信模块、显示控制模块、浏览器模块、和各种服务模块等(图中未示出)。
其中,基础模块是用于显示设备200中各个硬件之间信号通信、并向上层模块发送处理和控制信号的底层软件模块。检测模块是用于从各种传感器或用户输入接口中收集各种信息,并进行数模转换以及分析管理的管理模块。语音识别模块中包括语音解析模块和语音指令数据库模块。显示控制模块是用于控制第一显示屏280进行显示图像内容的模块,可以用于播放多媒体图像内容和UI界面等信息。通信模块,是用于与外部设备之间进行控制和数据通信的模块。浏览器模块,是用于执行浏览服务器之间数据通信的模块。服务模块,是用于提供各种服务以及各类应用程序在内的模块。
同时,存储器290还用于存储接收外部数据和用户数据、各种用户界面中各个项目的图像以及焦点对象的视觉效果图等。
用户输入接口260-3,用于将用户的输入信号发送给第一控制器210,或者,将从第一控制器210输出的信号传送给用户。示例性的,控制装置(例如移动终端或遥控器)可将用户输入的诸如电源开关信号、频道选择信号、音量调节信号等输入信号发送至用户输入接口,再由用户输入接口260-3转送至第一控制器210;或者,控制装置可接收经第一控制器210处理从用户输入接口260-3输出的音频、视频或数据等输出信号,并且显示接收的输出信号或将接收的输出信号输出为音频或振动形式。
在一些实施例中,用户可在第一显示屏280上显示的图形用户界面(GUI)输入用户命令,则用户输入接口260-3通过图形用户界面(GUI)接收用户输入 命令。或者,用户可通过输入特定的声音或手势进行输入用户命令,则用户输入接口260-3通过传感器识别出声音或手势,来接收用户输入命令。
视频处理器260-1,用于接收视频信号,根据输入信号的标准编解码协议,进行解压缩、解码、缩放、降噪、帧率转换、分辨率转换、图像合成等视频数据处理,可得到直接在第一显示屏280上显示或播放的视频信号。
示例的,视频处理器260-1,包括解复用模块、视频解码模块、图像合成模块、帧率转换模块、显示格式化模块等(图中未示出)。
其中,解复用模块,用于对输入音视频数据流进行解复用处理,如输入MPEG-2,则解复用模块进行解复用成视频信号和音频信号等。
视频解码模块,用于对解复用后的视频信号进行处理,包括解码和缩放处理等。
图像合成模块,如图像合成器,其用于将图形生成器根据用户输入或自身生成的GUI信号,与缩放处理后视频画面进行叠加混合处理,以生成可供显示的图像信号。
帧率转换模块,用于对输入视频的帧率进行转换,如将输入的24Hz、25Hz、30Hz、60Hz视频的帧率转换为60Hz、120Hz或240Hz的帧率,其中,输入帧率可以与源视频流有关,输出帧率可以与显示设备的刷新率有关。显示格式化模块,用于将帧率转换模块输出的信号,改变为符合诸如显示设备显示格式的信号,如将帧率转换模块输出的信号进行格式转换以输出RGB数据信号。
第一显示屏280,用于接收源自视频处理器260-1输入的图像信号,进行显示视频内容和图像以及菜单操控界面第一显示屏280包括用于呈现画面的显示屏组件以及驱动图像显示的驱动组件。显示视频内容,可以来自调谐解调器 220接收的广播信号中的视频,也可以来自通信器或外部设备接口输入的视频内容。第一显示屏280,同时显示显示设备200中产生且用于控制显示设备200的用户操控界面UI。
以及,根据第一显示屏280类型不同,还包括用于驱动显示的驱动组件。或者,倘若第一显示屏280为一种投影显示屏,还可以包括一种投影装置和投影屏幕。
音频处理器260-2,用于接收音频信号,根据输入信号的标准编解码协议,进行解压缩和解码,以及降噪、数模转换和放大处理等音频数据处理,得到可以在扬声器272中播放的音频信号。
音频输出接口270,用于在第一控制器210的控制下接收音频处理器260-2输出的音频信号,音频输出接口可包括扬声器272,或输出至外接设备的发生装置的外接音响输出端子274,如:外接音响端子或耳机输出端子等。
在其他一些示例性实施例中,视频处理器260-1可以包括一个或多个芯片组成。音频处理器260-2,也可以包括一个或多个芯片组成。
以及,在其他一些示例性实施例中,视频处理器260-1和音频处理器260-2,可以为单独的芯片,也可以与第一控制器210一起集成在一个或多个芯片中。
供电模块240,用于在第一控制器210控制下,将外部电源输入的电力为显示设备200提供电源供电支持。供电模块240可以包括安装显示设备200内部的内置电源电路,也可以是安装在显示设备200外部的电源,如在显示设备200中提供外接电源的电源接口。
与第一控制器210相类似,如图5所示,与第二控制器310连接的模块可以包括通信器330、检测器340、存储器390、第二显示屏380(即图1中的第 二显示屏202)。在某些实施例中还可以包括用户输入接口、视频处理器、音频处理器、显示屏、音频输出接口(图中未示出)。在某些实施例中,也可以存在独立为第二控制器310供电的供电模块(图中未示出)。
通信器330是用于根据各种通信协议类型与外部设备或外部服务器进行通信的组件。例如:通信器330可以包括WIFI模块331,蓝牙通信协议模块332,有线以太网通信协议模块333,及红外通信协议模块等其他网络通信协议模块或近场通信协议模块(图中未示出)。
通信器330和第一控制器210的通信器230也有相互交互。例如,第一控制器210硬件系统内的WiFi模块231用于连接外部网络,与外部服务器等产生网络通信。第二控制器310硬件系统内的WiFi模块331用于连接至第一控制器210的WiFi模块231,而不与外界网络等产生直接连接,第二控制器310通过第一控制器210连接外部网络。因此,对于用户而言,一个如上述实施例中的显示设备至对外显示一个WiFi账号。
检测器340,是显示设备第二控制器310用于采集外部环境或与外部交互的信号的组件。检测器340可以包括光接收器342,用于采集环境光线强度的传感器,可以通过采集环境光来自适应显示参数变化等;还可以包括图像采集器341,如相机、摄像头等,可以用于采集外部环境场景,以及用于采集用户的属性或与用户交互手势,可以自适应变化显示参数,也可以识别用户手势,以实现与用户之间互动的功能。
外部装置接口350,提供第二控制器310与第一控制器210或外部其他设备间数据传输的组件。外部装置接口可按照有线/无线方式与诸如机顶盒、游戏装置、笔记本电脑等的外部设备连接。
视频处理器360,用于处理相关视频信号。
第二控制器310,通过运行存储在存储器390上的各种软件控制程序(如用安装的第三方应用等),以及与第一控制器210的交互,来控制显示设备200的工作和响应用户的操作。
如图5所示,第二控制器310包括只读存储器ROM 313、随机存取存储器RAM 314、图形处理器316、CPU处理器312、通信接口318、以及通信总线。其中,ROM 313和RAM 314以及图形处理器316、CPU处理器312、通信接口318通过总线相连接。
ROM 313,用于存储各种系统启动的指令。CPU处理器312运行ROM中系统启动指令,将存储在存储器390的操作系统拷贝至RAM 314中,以开始运行启动操作系统。当操作系统启动完成后,CPU处理器312再将存储器390中各种应用程序拷贝至RAM 314中,然后,开始运行启动各种应用程序。
CPU处理器312,用于执行存储在存储器390中操作系统和应用程序指令,和与第一控制器210进行通信、信号、数据、指令等传输与交互,以及根据接收外部输入的各种交互指令,来执行各种应用程序、数据和内容,以便最终显示和播放各种音视频内容。
通信接口318为多个,可包括第一接口318-1到第n接口318-n。这些接口可以是经由网络被连接到外部设备的网络接口,也可以是经由网络被连接到N芯片的网络接口。
第二控制器310可以控制显示设备200与第二显示屏380相关的操作。例如:响应于接收到用于选择在第二显示屏380上显示UI对象的用户命令,第二控制器310便可以执行与由用户命令选择的对象有关的操作。
第二控制器310可以控制显示设备200与第一显示屏280相关的操作。例如:响应于接收到用于选择在第一显示屏280上显示UI对象的用户命令,第一控制器210便可以执行与由用户命令选择的对象有关的操作。
图形处理器316,用于产生各种图形对象,如:图标、操作菜单、以及用户输入指令显示图形等。包括运算器,通过接收用户输入各种交互指令进行运算,根据显示属性显示各种对象。以及包括渲染器,产生基于运算器得到的各种对象,进行渲染的结果显示在第二显示屏380上。
第二控制器310的图形处理器316与第一控制器210的图形处理器216均能产生各种图形对象。区别性的,若应用1安装于第二控制器310,应用2安装在第一控制器210,当用户在应用1的界面,且在应用1内进行用户输入的指令时,由第二控制器310图形处理器316产生图形对象。当用户在应用2的界面,且在应用2内进行用户输入的指令时,由第一控制器210的图形处理器216产生图形对象。
图6中示例性示出了根据示例性实施例中显示设备的功能配置示意图。
如图6所示,第二控制器310的存储器390和第一控制器210的存储器290分别用于存储操作系统、应用程序、内容和用户数据等,在第二控制器310的第二控制器310和第一控制器210的第二控制器210的控制下执行驱动第一显示屏280和第二显示屏380的系统运行以及响应用户的各种操作。第二控制器310的存储器390和第一控制器210的存储器290可以包括易失性和/或非易失性存储器。
对于第一控制器210,存储器290,具体用于存储驱动显示设备200中第一控制器210的运行程序,以及存储显示设备200内置各种应用程序,以及用 户从外部设备下载的各种应用程序、以及与应用程序相关的各种图形用户界面,以及与图形用户界面相关的各种对象,用户数据信息,以及各种支持应用程序的内部数据。存储器290用于存储操作系统(OS)内核、中间件和应用等系统软件,以及存储输入的视频数据和音频数据、及其他用户数据。
存储器290,具体用于存储视频处理器260-1和音频处理器260-2、第一显示屏280、通信器230、调谐解调器220、输入/输出接口等驱动程序和相关数据。
在一些实施例中,存储器290可以存储软件和/或程序,用于表示操作系统(OS)的软件程序包括,例如:内核、中间件、应用编程接口(API)和/或应用程序。示例性的,内核可控制或管理系统资源,或其它程序所实施的功能(如所述中间件、API或应用程序),以及内核可以提供接口,以允许中间件和API,或应用访问控制器,以实现控制或管理系统资源。
示例的,存储器290,包括广播接收模块2901、频道控制模块2902、音量控制模块2903、图像控制模块2904、显示控制模块2905、第一音频控制模块2906、外部指令识别模块2907、通信控制模块2908、光接收模块2909、电力控制模块2910、操作系统2911、以及其他应用程序2912、浏览器模块2913等等。第一控制器210通过运行存储器290中各种软件程序,来执行诸如:广播电视信号接收解调功能、电视频道选择控制功能、音量选择控制功能、图像控制功能、显示控制功能、音频控制功能、外部指令识别功能、通信控制功能、光信号接收功能、电力控制功能、支持各种功能的软件操控平台、以及浏览器功能等各类功能。
存储器390,包括存储用于驱动和控制显示设备200的各种软件模块。如: 存储器390中存储的各种软件模块,包括:基础模块、检测模块、通信模块、显示控制模块、浏览器模块、和各种服务模块等(图中未示出)。由于存储器390与存储器290的功能比较相似,相关之处参见存储器290即可,在此就不再赘述。
示例的,存储器390,包括图像控制模块3904、第二音频控制模块3906、外部指令识别模块3907、通信控制模块3908、光接收模块3909、操作系统3911、以及其他应用程序3912、浏览器模块3913等。第一控制器210通过运行存储器290中各种软件程序,来执行诸如:图像控制功能、显示控制功能、音频控制功能、外部指令识别功能、通信控制功能、光信号接收功能、电力控制功能、支持各种功能的软件操控平台、以及浏览器功能等各类功能。
区别性的,第一控制器210的外部指令识别模块2907和第二控制器310的外部指令识别模块3907可识别不同的指令。
示例性的,由于摄像头等图像接收设备与第二控制器310连接时,第二控制器310的外部指令识别模块3907可包括图形识别模块2907-1,图形识别模块3907-1内存储有图形数据库,摄像头接收到外界的图形指令时,与图形数据库中的指令进行对应关系,以对显示设备作出指令控制。而由于语音接收设备以及遥控器与第一控制器210连接,因此,第一控制器210的外部指令识别模块2907可包括语音识别模块2907-2,语音识别模块2907-2内存储有语音数据库,语音接收设备等接收到外界的语音指令或时,与语音数据库中的指令进行对应关系,以对显示设备作出指令控制。同样的,遥控器等控制装置100与第一控制器210连接,由按键指令识别模块2907-3与控制装置100进行指令交互。
图7中示例性示出了根据示例性实施例中显示设备200中软件系统的配置框图。
对于第一控制器210,如图7中所示,操作系统2911,包括用于处理各种基础系统服务和用于实施硬件相关任务的执行操作软件,充当应用程序和硬件组件之间完成数据处理的媒介。
一些实施例中,部分操作系统内核可以包含一系列软件,用以管理显示设备硬件资源,并为其他程序或软件代码提供服务。
其他一些实施例中,部分操作系统内核可包含一个或多个设备驱动器,设备驱动器可以是操作系统中的一组软件代码,帮助操作或控制显示设备关联的设备或硬件。驱动器可以包含操作视频、音频和/或其他多媒体组件的代码。示例的,包括显示屏、摄像头、Flash、WiFi和音频驱动器。
其中,可访问性模块2911-1,用于修改或访问应用程序,以实现应用程序的可访问性和对其显示内容的可操作性。
通信模块2911-2,用于经由相关通信接口和通信网络与其他外设的连接。
用户界面模块2911-3,用于提供显示用户界面的对象,以供各应用程序访问,可实现用户可操作性。
控制应用程序2911-4,用于控制进程管理,包括运行时间应用程序等。
事件传输系统2914,可在操作系统2911内或应用程序2912中实现。一些实施例中,一方面在在操作系统2911内实现,同时在应用程序2912中实现,用于监听各种用户输入事件,将根据各种事件指代响应各类事件或子事件的识别结果,而实施一组或多组预定义的操作的处理程序。
其中,事件监听模块2914-1,用于监听用户输入接口输入事件或子事件。
事件识别模块2914-2,用于对各种用户输入接口输入各类事件的定义,识别出各种事件或子事件,且将其传输给处理用以执行其相应一组或多组的处理程序。
其中,事件或子事件,是指显示设备200中一个或多个传感器检测的输入,以及外界控制设备(如控制装置100等)的输入。如:语音输入各种子事件,手势识别的手势输入子事件,以及控制装置的遥控按键指令输入的子事件等。示例的,遥控器中一个或多个子事件包括多种形式,包括但不限于按键按上/下/左右/、确定键、按键按住等中一个或组合。以及非实体按键的操作,如移动、按住、释放等操作。
界面布局管理模块2913,直接或间接接收来自于事件传输系统2914监听到各用户输入事件或子事件,用于更新用户界面的布局,包括但不限于界面中各控件或子控件的位置,以及容器的大小或位置、层级等与界面布局相关各种执行操作。
由于第二控制器310的操作系统3911与第一控制器210的操作系统2911的功能比较相似,相关之处参见操作系统2911即可,在此就不再赘述。
图8中示例性示出了根据示例性实施例中显示设备的应用程序层示意图,如图8中所示,显示设备的应用程序层包含可在显示设备200执行的各种应用程序。
第一控制器210的应用程序层2912可包含但不限于一个或多个应用程序,如:视频点播应用程序、应用程序中心、游戏应用等。第二控制器310的应用程序层3912可包含但不限于一个或多个应用程序,如:直播电视应用程序、媒体中心应用程序等。需要说明的是,第二控制器310和第一控制器210上分别 包含什么应用程序是根据操作系统和其他设计确定的,本申请无需对第二控制器310和第一控制器210上所包含的应用程序做具体的限定和划分。
直播电视应用程序,可以通过不同的信号源提供直播电视。例如,直播电视应用程可以使用来自有线电视、无线广播、卫星服务或其他类型的直播电视服务的输入提供电视信号。以及,直播电视应用程序可在显示设备200上显示直播电视信号的视频。
视频点播应用程序,可以提供来自不同存储源的视频。不同于直播电视应用程序,视频点播提供来自某些存储源的视频显示。例如,视频点播可以来自云存储的服务器端、来自包含已存视频节目的本地硬盘储存器。
媒体中心应用程序,可以提供各种多媒体内容播放的应用程序。例如,媒体中心,可以为不同于直播电视或视频点播,用户可通过媒体中心应用程序访问各种图像或音频所提供服务。
应用程序中心,可以提供储存各种应用程序。应用程序可以是一种游戏、应用程序,或某些和计算机系统或其他设备相关但可以在显示设备中运行的其他应用程序。应用程序中心可从不同来源获得这些应用程序,将它们储存在本地储存器中,然后在显示设备200上可运行。
由于第二控制器310及第一控制器210中可能分别安装有独立的操作系统,从而使显示设备200中存在两个在独立但又存在相互关联的子系统。例如,第二控制器310与第一控制器210均可以独立安装有安卓(Android)及各类APP,使得每个芯片均可以实现一定的功能,并且使第二控制器310与第一控制器210协同实现某项功能。
图9中示例性示出了根据示例性实施例中显示设备200中用户界面的示意 图。如图9所示,用户界面包括视第一图显示区2011和第二图显示区2021。第一图显示区2011和第二图显示区2021的功能实现基本相同,下面仅对第一图显示区2011进行重点说明。示例的,其中,第一视图显示区2011包括布局一个或多个不同项目。以及,用户界面中还包括指示项目被选择的选择器,可通过用户输入而移动选择器的位置,以改变选择不同的项目。
一些实施例中,第一视图显示区2011为可缩放视图显示。“可缩放”,可以表示第一视图显示区2011在屏幕上尺寸或占比是可缩放的,或视图显示201中项目在屏幕上尺寸或占比是可缩放的。
“项目”是指在显示设备200中用户界面的视图显示区中显示以表示,诸如图标、缩略图、视频剪辑等对应内容的视觉对象。例如:项目可以表示电影、电视剧的图像内容或视频剪辑、音乐的音频内容、应用程序,或其他用户访问内容历史信息。
此外,项目可以表示显示设备200与外接设备连接的接口或接口集合显示,或可表示连接至显示设备的外部设备名称等。如:信号源输入接口集合、或高清多媒体接口(High Definition Multimedia Interface,HDMI)、USB接口、PC端子接口等。
需要说明的是:视图显示区可呈现视频聊天项目内容,或者呈现应用层项目内容(如,网页视频、云点播(Video on Demand,VOD)展示、应用程序画面等)。
“选择器”用于指示其中任意项目已被选择,如:光标或焦点对象。根据用户在显示设备200中触摸的图标或菜单位置来定位选择信息输入,可使显示设备200中显示焦点对象的移动来选择控制项目,可选择或控制其中一个或多个 项目。
焦点对象指根据用户输入在项目之间移动的对象。示例的,通过项目边缘绘制粗线来实现或标识焦点对象位置。在其他实施例中,焦点形式不限于示例,可以是光标等有形或无形可被用户识别的形态,如可以项目的3D变形等形式,也可以改变聚焦的项目的文本或图像的边框线、尺寸、颜色、透明度和轮廓和/或字体等标识。
事件传输系统2914,可监听到的各预定义的事件或子事件的用户输入,将识别出事件或子事件的控制直接或间接提供给界面布局管理模块2913。
界面布局管理模块2913,用于用户界面状态(包括视图分区、项目、焦点或光标对象等位置和/或大小、变化过程等)的监控,以及根据该事件或子事件,可执行修改视图显示区的大小和位置、层级等布局,和/或,调整或修改视图显示区各类项目布局的大小或/和位置、数量、类型、内容等布局。一些实施例中,修改和调整布局,包括在屏幕上显示或不显示各视图分区或视图分区中项目内容。
用户输入接口,用于将用户的输入信号发送给控制器,或者,将从控制器输出的信号传送给用户。示例性的,控制装置(例如移动终端或遥控器)可将用户输入的诸如电源开关信号、频道选择信号、音量调节信号等输入信号发送至用户输入接口,再由用户输入接口转送至控制器;或者,控制装置可接收经控制器处理从用户输入接口输出的音频、视频或数据等输出信号,并且显示接收的输出信号或将接收的输出信号输出为音频或振动形式。
在一些实施例中,用户可在显示设备200上显示的图形用户界面(GUI)输入用户命令,则用户输入接口通过图形用户界面(GUI)接收用户输入命令。 或者,用户可通过输入特定的声音或手势进行输入用户命令,则用户输入接口通过传感器识别出声音或手势,来接收用户输入命令。
“用户界面”,是应用程序或操作系统与用户之间进行交互和信息交换的介质接口,它实现信息的内部形式与用户可以接受形式之间的转换。用户界面常用的表现形式是图形用户界面(graphicuserinterface,GUI),是指采用图形方式显示的与计算机操作相关的用户界面。它可以是在电子设备的显示屏中显示的一个图标、窗口、控件等界面元素,其中控件可以包括图标、按钮、菜单、选项卡、文本框、对话框、状态栏、导航栏、Widget等可视的界面元素。
在上述实施例的基础上,为了解决相关技术中将影片中的对象的相关信息在显示屏上显示,对显示屏上显示的影片画面造成遮挡的问题,本申请实施例提供了一种显示设备,通过将对象的相关信息在第二显示屏上显示,从而避免了对正在播放的影片画面造成遮挡,提高了用户体验。
本申请实施例提供的显示设备包括:第一显示屏、第二显示屏、与第一显示屏通信的第一控制器,以及与第二显示屏通信的第二控制器,第一控制器和第二控制器通信连接。
其中,第一显示屏被配置为显示第一用户界面。
第二显示屏,被配置为显示第二用户界面。
第一控制器,被配置为:
获取第一用户界面中的视频画面的信息,并通过第一通信器将视频画面的信息发送给服务器,服务器用于根据视频画面的信息获取视频画面中的对象的搜索标识,并将搜索标识发送给第二控制器。
第二控制器被配置为:
通过第二通信器接收搜索标识,并控制第二显示屏显示第三用户界面,其中,第三用户界面中包括视频画面中的对象的搜索标识。
示例性地,第一显示屏播放视频文件时,第一用户界面可以为该视频文件中的任一视频画面,第二用户界面显示与第一用户界面对应的画面,第二用户界面中可以包括语音助手,如小聚,用于和用户进行人机交互,示例性地,第二用户界面中可以包括如下场景“小聚坐在沙发上看电视”,以和用户的当前状态呼应。当然,第二用户界面还可以为待机界面,该待机界面中可以包括与视频画面无关的时间、天气、气温、地点等信息。示例性的,第二用户界面包括当前天气:晴、温度10℃、时间:2019年10月1日、当前定位地点:北京。本实施例对第二用户界面不做限制。
其中,视频画面的信息至少包括该视频画面的视频信息和播放时间点,视频信息至少包括视频名称、该视频画面对应的集数,播放时间点可以为该视频画面在本集视频的时间点,例如:视频名称为电视剧1、视频画面对应的集数为第3集、播放时间点为第20分50秒(本集视频的时长可以为40分钟)。
在第一控制器获取到第一用户界面中的视频画面的信息后,通过第一通信器将该视频画面的信息发送给服务器,服务器用于根据该视频画面的信息获取该视频画面中的对象的搜索标识,并将该搜索标识发送给第二控制器。
其中,服务器在获得到该视频画面的信息后,首先可以根据该视频画面的信息,获取视频画面中的对象,应理解,视频画面中的对象可以为该视频画面中可识别的对象。
示例性的,视频画面中的对象可以为人物或物体。其中,视频画面中可识别的人物为视频中的角色和饰演视频中角色的明星,例如饰演电影1中人物的 明星张三,则视频画面中的对象为张三;视频画面中可识别的物体为视频中的食物、植物、动物、景点、服饰、家居物品、体育器材、乐器、文化用品、电子产品、军事武器、交通工具、建筑物以及公共设施等。例如视频中的出现了景点,则视频画面中的对象即为景点。
获取视频画面中可识别的对象后,获取该对象的搜索标识,应理解,该对象的搜索标识表示针对该搜索标识进行搜索得到该对象的搜索信息的标识。其中,对象的搜索标识可以是图片的形式。该搜索标识可以为对象的浏览链接图,其中,浏览链接图可以包括缩略链接图、大图链接图、对象url链接图。
其中,缩略链接图可以为针对该对象的缩略的搜索标识,例如:人物名称、明星名称、建筑物对应的景点名称、商品的名称等,大图链接图可以为针对该对象的详细的搜索标识,例如:人物简介、明星简介、景点简介以及商品购买链接等,对象url链接图可以为针对该对象的图片的搜索标识,例如:人物图片、明星图片、商品图片以及景点图片等。
在服务器得到视频画面中的对象的搜索标识后,可以将每个对应的每个搜索标识发送给第二控制器,第二控制器通过第二通信器接收该搜索标识,并控制第二显示屏显示第三用户界面,第三用户界面中包括视频画面中的对象的搜索标识。
图10为本申请示例性实施例提供的显示设备的交互过程的示意图一,如图10所示,第一显示屏被配置为显示第一用户界面,第二显示屏被配置为显示第二用户界面,第一用户界面中包括第一视频画面,第一视频画面为电视剧1、第3集、第20分50秒的画面,第一控制器将第一视频画面的信息发送给服务器后,服务器识别出该画面中的对象,包括小王的包包。第二用户界面可以包括 如下场景“小聚坐在沙发上看电视”,当然,第二用户界面还可以包括时间、天气、地点等信息。
第一控制器获取到第一视频画面的信息,并将该视频画面的信息发送给服务器,服务器根据该视频画面的信息获取到该视频画面中的对象的搜索标识,为小王同款包包的购买链接图,该大图链接中包括小王同款包包的图片、原价格以及现价格。接着服务器将该搜索标识发送给第二控制器,第二控制器控制第二显示屏显示第三用户界面。其中,第三用户界面中包括小王同款包包的购买链接图。
应理解,在该视频画面中的对象有多个时,为了使第二显示屏显示的第三用户界面能够包括更多的对象的搜索标识,那么可以控制第二显示屏显示的第三用户界面包括各个搜索标识的缩略图链接或者对象url链接图,下面结合图11以缩略链接图为例进行说明。
图11为本申请示例性实施例提供的显示设备的交互过程的示意图二,如图11所示,如图11所示,第一显示屏被配置为显示第一用户界面,第二显示屏被配置为显示第二用户界面,第一用户界面中包括第二视频画面,第一视频画面为电视剧1、第4集、第10分20秒的画面,第一控制器将第二视频画面的信息发送给服务器后,服务器识别出该画面中的对象,包括小明的包包、饰演小王的明星张三、饰演小明的明星李四、小明的裙子、小王的手机、建筑物1。第二用户界面可以包括如下场景“小聚坐在沙发上看电视”。
第一控制器获取到第二视频画面的信息,并将第二视频画面的信息发送给服务器,服务器根据第二视频画面的信息获取到第二视频画面中的对象的搜索标识,包括:张三、李四、小王同款包包、小明同款裙子、小王同款手机、建 筑物1对应的景点。
接着,服务器将各个搜索标识发送给第二控制器,第二控制器控制第二显示屏显示第三用户界面,其中第三用户界面包括张三、李四、小王同款包包、小明同款裙子、小王同款手机、景点。
在一些示例性的实施方式中,服务器还可以对各个搜索表示进行分类,示例性地,分为服装首饰信息、剧集信息、明星百科资讯类、地点信息对应的景点美食类,为了便于用户查看第三用户界面上的各个搜索标识,服务器将属于同一类的搜索标识放在一起发送给第二控制器,第二控制器控制第二显示屏上的第三用户界面将同一类的搜索标识排列在一起显示,在图11的基础上,图12为本申请示例性实施例提供的显示设备的交互过程的示意图三,如图12所示,服务器将各个搜索标识分类为张三、李四;小王同款包包、小明同款裙子、小王同款手机;景点。在一些实施例中,在第二显示屏的第三用户界面中显示搜索标识时,设置类与类之间的间距大于同一类搜索标识之间的间距,从而提高了用户体验。本实施例不对具体的分类方式做限制。
当然,本实施例中还可以根据视频画面向用户推送相似的视频,推送的视频的搜索标识可以在第二显示屏上显示。具体和参考上述方式,在此不再赘述。
在一些示例性的实施方式中,第二控制器还被配置为:
在搜索标识的数目大于预设值时,控制第二显示屏滚动显示搜索标识。
图13为本申请示例性实施例提供的显示设备的交互过程的示意图三,如图13所示,在搜索标识的数目大于预设值时,第三用户界面中还可以设有滚动控件,第二控制器接收到针对该滚动控件的操作指令时,第二控制器还被配置为控制第二显示屏显示的第三用户界面滚动显示搜索标识。
其中,针对该滚动控件的操作指令可以通过语音或者遥控器或者第二显示屏的控制面板实现。在将各个搜索标识显示时长达到预设时长时,第二控制器可以控制第二显示屏退出显示第三用户界面,即显示第二用户界面。本实施例对显示时长、预设值不做限制,根据实际情况确定即可。
本实施例提供的显示设备,包括第一显示屏、第二显示屏、语音采集装置,与第一显示屏通信的第一控制器,以及与第二显示屏通信的第二控制器,第一控制器和第二控制器通信连接,第一控制器,被配置为获取第一用户界面中的视频画面的信息,并通过第一通信器将视频画面的信息发送给服务器,服务器用于根据视频画面的信息获取视频画面中的对象的搜索标识,并将搜索标识发送给第二控制器,第二控制器被配置为通过第二通信器接收搜索标识,并控制第二显示屏显示第三用户界面,其中,第三用户界面中包括视频画面中的对象的搜索标识。在本申请中,将推送的搜索标识在第二显示屏上显示,避免了对第一显示屏上的画面造成遮挡。
在一些示例性的实施方式中,第一控制器还被配置为:
通过用户输入接口接收选择器的控制指令,响应于控制指令,控制第一显示屏移除选择器,并将控制指令发送给第二控制器。
所述第二控制器被配置为:
控制第二显示屏显示选择器,第三用户界面中还包括选择器。
其中,该控制指令可以通过语音或者遥控器或者第二显示屏的控制面板实现。第一控制器通过用户输入接口接收到选择器的控制指令,响应于该控制指令,控制第一显示屏移除选择器,即移除焦点,将该控制指令发送给第二控制器,第二控制器响应于该控制指令,控制第二显示屏显示该选择器,即焦点位 于第二显示屏上,其中,用户可以通过语音输入或者遥控器或者第二显示屏的控制面板控制选择器在第三用户界面中的各个对象的搜索标识之间来回切换,示例性地,通过边缘绘制粗线或加深颜色来实现标识搜索标识中的焦点对象,表明该搜索标识被选中。
示例性地,图14为本申请示例性实施例提供的显示设备的交互过程的示意图四,如图14所示,用户可以通过按下遥控器的双屏切换按键或者语音输入“选择小屏”,选择器从第一显示屏上的移除,由第一显示屏切换至第二显示屏;当第二显示屏上显示选择器时,用户可以通过遥控器的上/下/左/右的移动按键来回切换选择的搜索标识,并通过边缘绘制粗线或加深颜色来标识该搜索标识,例如:语音输入“张三”,则加深该“张三”这一搜索标识。当然,还可以采用遥控器来回切换选择的搜索标识。
应理解,第二控制器还可以直接接收选择器的控制指令,响应于该控制指令,控制第二显示屏显示该选择器。
在一些示例性的实施方式中,第一控制器还被配置为:
通过用户输入接口接收指示返回的第一用户输入,并将第一用户输入发送给所述第二控制器。
第二控制器被配置为:
响应于第一用户输入,控制第二显示屏显示第二用户界面。
其中,第一用户输入可以通过语音或者遥控器或者第二显示屏的控制面板实现。将选择器移动到第二用户界面中时,第一控制器还被配置为通过用户输入接口接收指示返回的第一用户输入,响应于第一用户输入控制第二显示屏显示第二用户界面,即第二显示屏器退出显示第三用户界面。
示例性地,图15为本申请示例性实施例提供的显示设备的交互过程的示意图五,如图15所示,在第一控制器通过语音输入例如“返回到上一个界面”,或者通过遥控器的返回键接收到第一用户输入时,第二显示屏退出显示第三用户界面,而显示第二用户界面。
应理解,第二控制器还可以通过用户输入接口接收指示返回的第一用户输入,响应于第一用户输入,控制第二显示屏退出显示第三用户界面,而显示第二用户界面。
在一些示例性的实施方式中,第一控制器还被配置为:
通过用户输入接口接收指示选择任一搜索标识的第二用户输入,响应于第二用户输入,暂停播放视频画面的视频文件,获取与搜索标识对应的搜索信息,并控制第一显示屏显示所述搜索信息,其中,第二用户输入是通过选择器作用于第二显示屏的,第二用户界面中包括搜索信息。示例性地,用户可以通过切换选择的搜索标识将选择器选中“张三”之后,按下遥控器的OK按键或者语音输入“选择张三”指示选择的搜索标识。
其中,第二用户输入可以通过语音或者遥控器或者第二显示屏的控制面板实现。第二用户输入是通过选择器作用于第二显示屏的,也即,在第一控制器通过用户输入接口接收指示选择任一搜索标识的第二用户输入时,将该第二用户输入发送给第二控制器,第二控制器控制第二显示屏标识该选择器选择的搜索标识,同时第一显示屏暂停播放视频,并获取与该搜索标识对应的搜索信息。其中,第二控制器获取搜索信息的方式可以是:第二控制器向服务器发送给搜索标识,接收服务器返回的对应的搜索信息,具体的过程和现有技术类似,在此不再赘述。
其中,搜索标识对应的搜索信息为该搜索标识对应的详情信息。例如:搜索信息可以为“张三”,则与该搜索标识对应的详情信息为张三的具体介绍;搜索信息为“小王同款包包”,则与该搜索标识对应的详情信息为小王同款包包的购买界面。
在一些示例性的实施方式中,搜索信息悬浮显示在第一用户界面中的一侧。
示例性地,图16为本申请示例性实施例提供的显示设备的交互过程的示意图六,如图16所示,通过选择器在第三用户界面上选择一搜索标识,例如:小明同款的服饰的购买链接,其中,“景点”这一搜索标识边缘绘制粗线,第一用户界面中的视频暂停,将景点的搜索信息,包括景点基本介绍、景点周边旅游、景点周边美食,悬浮显示在第一用户界面的左侧。其中,在选择“景点”跳转至第一用户界面时的跳转效果可以是滑动、穿越边界的形式,本实施例对此不做限制。
当然,第一控制器还可以控制第一显示屏退出显示第一用户界面,从而将搜索信息全屏显示在第一显示屏上。本实施例对搜索信息的显示方式不做限制。
这样,可以将用户感兴趣的搜索标识对应的搜索信息在第一显示屏上进行展示,提高了用户体验。
在一些示例性的实施方式中,第一控制器还被配置为:
通过用户输入接口接收针对搜索信息的第三用户输入,响应于第三用户输入,获取与搜索信息对应的关联信息,并控制第一显示屏显示关联信息并移除搜索信息,关联信息为文字信息或视频信息。
其中,第三用户输入可以通过语音或者遥控器或者第二显示屏的控制面板实现。与搜索信息对应的关联信息可以为搜索信息中的元素的详细信息,例如: 搜索信息为小王同款包包购买界面,第三用户输入作用于该购买界面中的元素,例如作用于该购买界面中的“加入购物车”这一元素,那么与该搜索信息对应的关联信息为购物车界面;又例如作用于该购买界面中的“立即购买”这一元素,那么与该搜索信息对应的关联信息为支付界面。
又例如:搜索信息为张三,与该搜索信息对应的搜索信息为张三的详细介绍,包括:八卦新闻、参演过的电影、家庭人物等,关联信息为上述任一重信息的详细信息。
在一些示例性的实施方式中,在关联信息为文字信息时,第一控制器具体被配置为控制关联信息悬浮显示在第一用户界面的一侧。
在一些示例性的实施方式中,在关联信息为视频信息时,第一控制器被配置为控制第一显示屏显示第四用户界面,第四用户界面中包括关联信息。
示例性地,图17为本申请示例性实施例提供的显示设备的交互过程的示意图七,如图17所示,搜索信息为张三的介绍,包括:八卦新闻、参演过的电影1、家庭人物等。在第三用户输入作用于张三的家庭人物时,第一控制器控制第一显示屏显示张三的家庭人物的详细介绍悬浮显示在第一用户界面的一侧。
在第三用户输入作用于电影1时,第一控制器控制第一显示屏显示第四用户界面,第四用户界面中包括该电影的画面,即,第一显示屏退出显示第一用户界面。
在一些示例性的实施方式中,第一控制器还被配置为:
通过用户输入接口接收指示返回的第四用户输入,响应于第四用户输入,控制第一显示屏显示第一用户界面。
其中,第四用户输入可以通过语音或者遥控器或者第二显示屏的控制面板 实现。在第一显示屏显示第四用户时,还可以根据第四用户输入,控制第一显示屏显示第一用户界面,即退出显示第四用户界面。
在一些示例性的实施方式中,第一控制器还被配置为:
在预设时长内,获取视频画面的下一帧画面的信息,并通过第一通信器将下一帧画面的信息发送给服务器,服务器用于根据下一帧的信息获取下一帧画面的搜索标识,并将下一帧画面中的对象的搜索标识发送给第二控制器;
第二控制器被配置为:
通过第二通信器接收下一帧画面中的对象的搜索标识,并控制第二显示屏显示第五用户界面,其中,第五用户界面中包括视频画面和下一帧画面中的对象的搜索标识。
其中,该视频画面的下一帧画面的信息至少包括该画面的视频信息和播放时间点,视频信息至少包括视频名称、该画面对应的集数,播放时间点为该画面在本集视频的时间点,例如:视频画面为电视剧1、视频画面对应的集数为第3集、播放时间点为第20分50秒(本集视频的时长可以为40分钟),则下一帧画面为电视剧1、第3集、播放时间点为第20分51秒。
在第一控制器获取到第一用户界面中的下一帧视频画面的信息后,通过第一通信器将该下一帧视频画面的信息发送给服务器,服务器用于根据该下一帧视频画面的信息获取该下一帧视频画面中的对象的搜索标识,并将该搜索标识发送给第二控制器。
其中,服务器获取下一帧视频画面中的对象的搜索标识的方式和获取视频画面中的对象的搜索标识的方式类似,下一帧视频画面中的对象和该视频画面中的对象类似,在此不再赘述。
接着,第二控制器控制第二显示屏显示第五用户界面,其中,第五用户界面中包括该视频画面中的对象的搜索标识和下一帧视频画面中的对象的搜索标识。
在一些示例性的实施方式中,第二控制器还被配置为:
在搜索标识的数目大于预设值时,控制第二显示屏滚动显示搜索标识。参见图13,当第二控制器控制第二显示屏显示视频画面中的对象的搜索标识时,在预设时长内接收到该视频画面的下一帧画面中的对象的搜索标识时,在搜索标识的数目大于预设值时,第三用户界面中还可以设有滚动控件,第二控制器接收到针对该滚动控件的操作指令时,第二控制器还被配置为控制第二显示屏滚动显示第五用户界面,第五用户界面中包括视频画面和下一帧画面中的对象的搜索标识。这样,避免了由于用户漏看而忽略的搜索标识。
其中,针对该滚动控件的操作指令可以通过语音或者遥控器或者第二显示屏的控制面板实现。
图18为本申请示例性实施例提供的显示方法的流程示意图一,如图18所示,该方法包括:
S1801、第一控制器获取第一用户界面中的视频画面的信息,并通过第一通信器将所述视频画面的信息发送给服务器,所述服务器用于根据所述视频画面的信息获取所述视频画面中的对象的搜索标识,并将所述搜索标识发送给所述第二控制器。
S1802、第二控制器通过第二通信器接收所述搜索标识,并控制第二显示屏显示第三用户界面,其中,所述第三用户界面中包括所述视频画面中的对象的搜索标识。
在一些示例性的实施方式中,还包括:
第一控制器通过用户输入接口接收选择器的控制指令,响应于所述控制指令,控制所述第一显示屏移除所述选择器,并将所述控制指令发送给所述第二控制器;
所述第二控制器控制所述第二显示屏显示所述选择器,所述第三用户界面中还包括所述选择器。
在一些示例性的实施方式中,还包括:
第一控制器通过所述用户输入接口接收指示返回的第一用户输入,并将所述第一用户输入发送给所述第二控制器;
所述第二控制器响应于所述第一用户输入,控制所述第二显示屏显示所述第二用户界面。
在一些示例性的实施方式中,还包括:
第一控制器通过所述用户输入接口接收指示选择任一搜索标识的第二用户输入,响应于所述第二用户输入,暂停播放视频,获取与所述搜索标识对应的搜索信息,并控制所述第一显示屏显示所述搜索信息,其中,所述第二用户输入是通过所述选择器作用于所述第二显示屏的,所述第二用户界面中包括所述搜索信息。
在一些示例性的实施方式中,所述搜索信息悬浮显示在所述第一用户界面中的一侧。
在一些示例性的实施方式中,还包括:
所述第一控制器通过所述用户输入接口接收针对所述搜索信息的第三用户输入,响应于所述第三用户输入,获取与所述搜索信息对应的关联信息,并控 制所述第一显示屏显示所述关联信息并移除所述搜索信息,所述关联信息为文字信息或视频信息。
在一些示例性的实施方式中,还包括:
在所述关联信息为文字信息时,所述第一控制器控制所述关联信息悬浮显示在所述第一用户界面的一侧。
在一些示例性的实施方式中,还包括:
在所述关联信息为视频信息时,所述第一控制器控制所述第一显示屏显示第四用户界面,所述第四用户界面中包括所述关联信息。
在一些示例性的实施方式中,还包括:
所述第一控制器通过所述用户输入接口接收指示返回的第四用户输入,响应于所述第四用户输入,控制所述第一显示屏显示所述第一用户界面。
在一些示例性的实施方式中,还包括:
所述第一控制器在预设时长内,获取所述视频画面的下一帧画面的信息,并通过所述第一通信器将所述下一帧画面的信息发送给服务器,所述服务器用于根据所述下一帧的信息获取所述下一帧画面的搜索标识,并将所述下一帧画面中的对象的搜索标识发送给所述第二控制器;
所述第二控制器被配置为:
通过所述第二通信器接收所述下一帧画面中的对象的搜索标识,并控制所述第二显示屏显示第五用户界面,其中,所述第五用户界面中包括所述视频画面和所述下一帧画面中的对象的搜索标识。
在一些示例性的实施方式中,还包括:
在所述搜索标识的数目大于预设值时,所述第二控制器控制所述第二显示 屏滚动显示所述搜索标识。
图19为本申请示例性实施例提供的显示方法的流程示意图二。如图19所示,该方法包括:
S1901、第一控制器获取第一用户界面中的视频画面的信息。
S1902、第一控制器通过第一通信器将所述视频画面的信息发送给服务器。
S1903、服务器根据视频画面的信息获取视频画面中的对象的搜索标识。
S1904、服务器将搜索标识发送给第二控制器。
S1905、第二控制器通过第二通信器接收搜索标识,并控制第二显示屏显示第三用户界面,其中,所述第三用户界面中包括所述视频画面中的对象的搜索标识。
S1906、第一控制器通过用户输入接口接收选择器的控制指令,响应于控制指令,控制第一显示屏移除选择器。
S1907、第一控制器将控制指令发送给所述第二控制器。
S1908、第二控制器控制第二显示屏显示选择器,第三用户界面中还包括选择器。
S1909、第一控制器通过用户输入接口接收指示返回的第一用户输入。
S1910、第一控制器将第一用户输入发送给第二控制器。
S1911、第二控制器响应于第一用户输入,控制第二显示屏显示第二用户界面。
S1912、第一控制器通过用户输入接口接收指示选择任一搜索标识的第二用户输入,响应于第二用户输入,暂停播放视频,获取与搜索标识对应的搜索信息,并控制第一显示屏显示搜索信息。
S1913、第一控制器通过用户输入接口接收针对搜索信息的第三用户输入,响应于第三用户输入,获取与搜索信息对应的关联信息,并控制第一显示屏显示关联信息并移除搜索信息。
S1914、第一控制器通过用户输入接口接收指示返回的第四用户输入,响应于第四用户输入,控制第一显示屏显示第一用户界面。
S1915、第一控制器在预设时长内,获取视频画面的下一帧画面的信息。
S1916、第一控制器通过第一通信器将下一帧画面的信息发送给服务器。
S1917、服务器用于根据下一帧的信息获取下一帧画面的搜索标识。
S1918、服务器将下一帧画面中的对象的搜索标识发送给第二控制器。
S1919、第二控制器通过第二通信器接收下一帧画面中的对象的搜索标识,并控制第二显示屏显示第五用户界面,其中,第五用户界面中包括视频画面和下一帧画面中的对象的搜索标识。
本实施例提供的显示方法和上述实施例中的显示装置的具体实现和技术效果类似,在此不再赘述。本申请还提供一种计算机可读存储介质,其上存储有计算机程序,所述计算机程序被处理器执行时实现前述方法实施例中任一实现方式提供的显示方法。本领域普通技术人员可以理解:实现上述各方法实施例的全部或部分步骤可以通过程序指令相关的硬件来完成。前述的程序可以存储于一计算机可读取存储介质中。该程序在执行时,执行包括上述各方法实施例的步骤;而前述的存储介质包括:ROM、RAM、磁碟或者光盘等各种可以存储程序代码的介质。
最后应说明的是:以上各实施例仅用以说明本申请的技术方案,而非对其限制;尽管参照前述各实施例对本申请进行了详细的说明,本领域的普通技术 人员应当理解:其依然可以对前述各实施例所记载的技术方案进行修改,或者对其中部分或者全部技术特征进行等同替换;而这些修改或者替换,并不使相应技术方案的本质脱离本申请各实施例技术方案的范围。

Claims (20)

  1. 一种显示设备,其特征在于,包括:
    第一显示屏;
    第二显示屏;
    用户接口,用于接收用户输入的指令;
    调谐解调器,用于接收和解码数字广播信号携带的服务内容;
    通信器,用于与服务器进行通信;
    控制器,用于执行:
    控制所述第一显示屏显示所述服务内容;
    控制所述第二显示屏显示推送消息;所述推送消息基于历史观看服务内容的记录生成,或者,基于网络数据生成。
  2. 根据权利要求1所述的显示设备,其特征在于,所述控制器还用于:控制所述第二显示屏按所述推送消息的生成顺序自动播放至少一条推送消息。
  3. 根据权利要求1所述的显示设备,其特征在于,所述推送消息中内容可以包括:网页类文本推荐、视频点播类推荐、购物类网页链接推荐和应用程序推荐的任一种。
  4. 一种显示设备,其特征在于,包括:
    第一显示屏;
    第二显示屏;
    用户接口,用于接收用户输入的指令;
    调谐解调器,用于接收和解码数字广播信号携带的服务内容;
    通信器,用于与外部设备或服务器进行通信,以获取其提供的服务内容;
    控制器,用于执行:
    控制所述第一显示屏播放所述服务内容;
    控制所述第二显示屏显示推送消息;所述推送消息包括与所述服务内容对应的显示画面中识别内容相关联的推荐内容、和/或用于响应与所述推荐内容关联操作的用户控制指令输入接口;
    响应于用户输入的指示选择器聚焦的指令,控制所述第二显示屏显示用于指示选择任一推送消息的选择器。
  5. 根据权利要求4所述的显示设备,其特征在于,在所述第二显示屏显示预设数量的推送消息经过预设时间之后,更新显示用于指示查看其它推送消息的用户控制指令输入接口,或者,更新显示初始界面。
  6. 一种显示设备,其特征在于,包括:
    第一显示屏;
    第二显示屏;
    用户接口,用于接收用户输入的指令;
    调谐解调器,用于接收和解码数字广播信号携带的服务内容;
    通信器,用于与外部设备或服务器进行通信,以获取其提供的服务内容;
    控制器,用于执行:
    控制所述第一显示屏播放所述服务内容;
    控制所述第二显示屏显示推送消息;所述推送消息包括与所述服务内容对应的显示画面中识别内容相关联的推荐内容、和/或用于响应与所述推荐内容关联操作的用户控制指令输入接口;
    响应于用户输入的激活目标推送消息的指令,控制所述第一显示屏显示与 所述目标推送消息相关联的内容,同时,控制所述第一显示屏中的服务内容暂停播放。
  7. 根据权利要求6所述的显示设备,其特征在于,所述推荐内容可以包括:与所述广播节目或服务内容对应的显示画面中识别内容相关的至少一个种类的内容推荐、与所述种类的内容推荐相关的内容简述、以及所述种类的内容推荐中内容来源的一个或多个。
  8. 一种显示设备,其特征在于,包括:
    第一显示屏;
    第二显示屏;
    用户接口,用于接收用户输入的指令;
    调谐解调器,用于接收和解码数字广播信号携带的服务内容;
    通信器,用于与外部设备或服务器进行通信,以获取其提供的服务内容;
    控制器,用于执行:
    控制所述第一显示屏播放所述服务内容;
    控制所述第二显示屏显示推送消息;所述推送消息包括与所述服务内容对应的显示画面中识别内容相关联的推荐内容、和/或用于响应与所述推荐内容关联操作的用户控制指令输入接口;
    响应于用户输入的激活目标推送消息的指令,控制所述第一显示屏显示与所述目标推送消息相关联的内容,同时,控制所述第一显示屏中的服务内容暂停播放;
    响应于用户输入的退出显示所述目标推送消息相关联的内容的指令,控制所述第一显示屏继续播放所述服务内容。
  9. 根据权利要求8所述的显示设备,其特征在于,所述目标推送消息对应的屏幕显示对象以动画形式从第二显示屏边界滑出,并从第一显示屏边界滑入。
  10. 一种显示设备,其特征在于,包括:
    第一显示屏;
    第二显示屏;
    用户接口,用于接收用户输入的指令;
    通信器,用于与外部设备或服务器进行通信,以获取其提供的服务内容;
    控制器,用于执行:
    控制所述第一显示屏播放所述服务内容中的第一媒体资源;
    检测到在所述第一显示屏播放所述第一媒体资源的过程中,控制所述第二显示屏显示与所述第一媒体资源对应的显示画面中识别内容相关联的推荐内容;
    检测到在所述第一显示屏即将完成播放所述第一媒体资源时,控制所述第二显示屏显示所述服务内容中除所述第一媒体资源外,与所述第一媒体资源相关联的其他媒体资源。
  11. 根据权利要求10所述的显示设备,其特征在于,所述推荐内容至少包括:人物推荐、商品推荐、景点推荐。
  12. 一种内容显示方法,其特征在于,包括:
    控制第一显示屏显示数字广播信号携带的服务内容;
    控制第二显示屏显示服务器返回的推送消息;所述推送消息基于历史观看服务内容的记录生成,或者,基于网络数据生成。
  13. 根据权利要求12所述的方法,其特征在于,所述推送消息中内容可以 包括:网页类文本推荐、视频点播类推荐、购物类网页链接推荐和应用程序推荐的任一种。
  14. 一种内容显示方法,其特征在于,包括:
    控制第一显示屏播放所述服务内容;所述服务内容为数字广播信号携带;
    控制第二显示屏显示服务器返回的推送消息;所述推送消息包括与所述服务内容对应的显示画面中识别内容相关联的推荐内容、和/或用于响应与所述推荐内容关联操作的用户控制指令输入接口;
    响应于用户输入的指示选择器聚焦的指令,控制所述第二显示屏显示用于指示选择任一推送消息的选择器。
  15. 根据权利要求14所述的方法,其特征在于,在所述第二显示屏显示预设数量的推送消息经过预设时间之后,更新显示用于指示查看其它推送消息的用户控制指令输入接口,或者,更新显示初始界面。
  16. 一种内容显示方法,其特征在于,包括:
    控制第一显示屏播放所述服务内容;所述服务内容为数字广播信号携带,或者,外部设备或服务器提供;
    控制第二显示屏显示服务器返回的推送消息;所述推送消息包括与所述服务内容对应的显示画面中识别内容相关联的推荐内容、和/或用于响应与所述推荐内容关联操作的用户控制指令输入接口;
    响应于用户输入的激活目标推送消息的指令,控制所述第一显示屏显示与所述目标推送消息相关联的内容,同时,控制所述第一显示屏中的服务内容暂停播放。
  17. 根据权利要求16所述的方法,其特征在于,所述推荐内容可以包括: 与所述广播节目或服务内容对应的显示画面中识别内容相关的至少一个种类的内容推荐、与所述种类的内容推荐相关的内容简述、以及所述种类的内容推荐中内容来源的一个或多个。
  18. 一种内容显示方法,其特征在于,包括:
    控制第一显示屏播放所述服务内容;所述服务内容为数字广播信号携带,或者,外部设备或服务器提供;
    控制第二显示屏显示推送消息;所述推送消息包括与所述服务内容对应的显示画面中识别内容相关联的推荐内容、和/或用于响应与所述推荐内容关联操作的用户控制指令输入接口;
    响应于用户输入的激活目标推送消息的指令,控制所述第一显示屏显示与所述目标推送消息相关联的内容,同时,控制所述第一显示屏中的服务内容暂停播放;
    响应于用户输入的退出显示所述目标推送消息相关联的内容的指令,控制所述第一显示屏继续播放所述服务内容。
  19. 根据权利要求18所述的方法,其特征在于,所述目标推送消息对应的屏幕显示对象以动画形式从第二显示屏边界滑出,并从第一显示屏边界滑入。
  20. 一种内容显示方法,其特征在于,包括:
    控制第一显示屏播放外部设备或服务器提供的服务内容中的第一媒体资源;
    检测到在所述第一显示屏播放所述第一媒体资源的过程中,控制第二显示屏显示与所述第一媒体资源对应的显示画面中识别内容相关联的推荐内容;
    检测到在所述第一显示屏即将完成播放所述第一媒体资源时,控制所述第 二显示屏显示所述服务内容中除所述第一媒体资源外,与所述第一媒体资源相关联的其他媒体资源。
PCT/CN2020/086054 2019-11-04 2020-04-22 显示设备和内容显示方法 WO2021088320A1 (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
US17/645,551 US11805292B2 (en) 2019-11-04 2021-12-22 Display apparatus and content display method

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
CN201911067371.0 2019-11-04
CN201911067371 2019-11-04

Related Child Applications (1)

Application Number Title Priority Date Filing Date
US17/645,551 Continuation US11805292B2 (en) 2019-11-04 2021-12-22 Display apparatus and content display method

Publications (1)

Publication Number Publication Date
WO2021088320A1 true WO2021088320A1 (zh) 2021-05-14

Family

ID=71877844

Family Applications (1)

Application Number Title Priority Date Filing Date
PCT/CN2020/086054 WO2021088320A1 (zh) 2019-11-04 2020-04-22 显示设备和内容显示方法

Country Status (3)

Country Link
US (1) US11805292B2 (zh)
CN (2) CN111510753B (zh)
WO (1) WO2021088320A1 (zh)

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN115426518A (zh) * 2022-08-09 2022-12-02 杭州海康威视数字技术股份有限公司 一种显示控制系统、图像显示方法及led显示控制系统
CN115802012A (zh) * 2023-01-30 2023-03-14 无锡顶视科技有限公司 一种集装箱货物内容球机视频叠加方法及系统

Families Citing this family (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2021244071A1 (zh) * 2020-06-02 2021-12-09 海信视像科技股份有限公司 服务器设备、广播接收装置、服务器管理设备及信息联动系统
CN114915820B (zh) * 2021-02-09 2024-03-01 海信视像科技股份有限公司 显示设备及其控制方法
WO2022188475A1 (zh) * 2021-03-10 2022-09-15 聚好看科技股份有限公司 一种视频文件的双屏同步播放方法及显示设备
CN113038210B (zh) * 2021-03-29 2022-08-26 聚好看科技股份有限公司 一种视频文件的双屏同步播放方法及显示设备
CN115086722B (zh) * 2021-03-10 2023-07-14 聚好看科技股份有限公司 一种副屏内容的展示方法及显示设备
CN112835547A (zh) * 2021-03-26 2021-05-25 聚好看科技股份有限公司 一种媒资文件分屏展示方法及显示设备
CN117667273A (zh) * 2022-08-29 2024-03-08 Oppo广东移动通信有限公司 显示泛在服务入口的方法、装置、电子设备及存储介质

Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20120185886A1 (en) * 2011-01-13 2012-07-19 Verizon Patent And Licensing Inc. Method and apparatus for interacting with a set-top box using widgets
KR20150057822A (ko) * 2013-11-20 2015-05-28 삼성전자주식회사 셋탑 박스 및 셋탑 박스의 디스플레이 방법
US20150156551A1 (en) * 2013-11-29 2015-06-04 Kabushiki Kaisha Toshiba Electronic device, image display method for use in the electronic device and storage medium for image display program
CN105163164A (zh) * 2015-08-31 2015-12-16 腾讯科技(北京)有限公司 信息展示项展示方法及装置
CN105263034A (zh) * 2015-10-13 2016-01-20 深圳Tcl数字技术有限公司 视频广告的插播方法及装置
US20170228781A1 (en) * 2014-02-24 2017-08-10 Hotdot TV, Inc. Systems and methods for identifying, interacting with, and purchasing items of interest in a video

Family Cites Families (14)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP5636678B2 (ja) * 2010-01-19 2014-12-10 ソニー株式会社 表示制御装置、表示制御方法及び表示制御プログラム
EP2610736A1 (en) * 2011-12-28 2013-07-03 Samsung Electronics Co., Ltd. Display apparatus, connectable external peripheral device and method of displaying an image
US8959562B2 (en) * 2013-02-26 2015-02-17 Roku, Inc. Method and apparatus for automatic second screen engagement
US9084026B2 (en) * 2013-06-29 2015-07-14 Cable Television Laboratories, Inc. Commanding video device using program moments
CN104754413B (zh) * 2013-12-30 2020-04-21 北京三星通信技术研究有限公司 基于图像搜索识别电视信号并推荐信息的方法和设备
US9621963B2 (en) * 2014-01-28 2017-04-11 Dolby Laboratories Licensing Corporation Enabling delivery and synchronization of auxiliary content associated with multimedia data using essence-and-version identifier
CN105100911A (zh) * 2014-05-06 2015-11-25 夏普株式会社 智能多媒体系统和方法
KR20170011359A (ko) * 2015-07-22 2017-02-02 삼성전자주식회사 방송 콘텐트와 관련된 정보를 제공하는 전자 장치 및 그 방법
CN113422999B (zh) * 2018-02-08 2022-11-15 聚好看科技股份有限公司 显示方法及显示设备
US10180983B1 (en) * 2018-06-18 2019-01-15 Rovi Guides, Inc. Methods and systems for sharing a user interface of a search engine
CN109413477A (zh) * 2018-09-21 2019-03-01 青岛海信电器股份有限公司 用于显示终端中历史内容服务的显示方法及装置
CN109508427A (zh) * 2018-12-28 2019-03-22 咪咕数字传媒有限公司 一种信息推荐方法及服务器、语音交互终端
CN109922289B (zh) * 2019-03-25 2022-06-28 深圳创维-Rgb电子有限公司 一种双屏电视
CN110147256B (zh) * 2019-04-03 2022-04-29 珠海全志科技股份有限公司 一种多屏交互方法及装置

Patent Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20120185886A1 (en) * 2011-01-13 2012-07-19 Verizon Patent And Licensing Inc. Method and apparatus for interacting with a set-top box using widgets
KR20150057822A (ko) * 2013-11-20 2015-05-28 삼성전자주식회사 셋탑 박스 및 셋탑 박스의 디스플레이 방법
US20150156551A1 (en) * 2013-11-29 2015-06-04 Kabushiki Kaisha Toshiba Electronic device, image display method for use in the electronic device and storage medium for image display program
US20170228781A1 (en) * 2014-02-24 2017-08-10 Hotdot TV, Inc. Systems and methods for identifying, interacting with, and purchasing items of interest in a video
CN105163164A (zh) * 2015-08-31 2015-12-16 腾讯科技(北京)有限公司 信息展示项展示方法及装置
CN105263034A (zh) * 2015-10-13 2016-01-20 深圳Tcl数字技术有限公司 视频广告的插播方法及装置

Cited By (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN115426518A (zh) * 2022-08-09 2022-12-02 杭州海康威视数字技术股份有限公司 一种显示控制系统、图像显示方法及led显示控制系统
CN115426518B (zh) * 2022-08-09 2023-08-25 杭州海康威视数字技术股份有限公司 一种显示控制系统、图像显示方法及led显示控制系统
CN115802012A (zh) * 2023-01-30 2023-03-14 无锡顶视科技有限公司 一种集装箱货物内容球机视频叠加方法及系统
CN115802012B (zh) * 2023-01-30 2023-06-13 无锡顶视科技有限公司 一种集装箱货物内容球机视频叠加方法及系统

Also Published As

Publication number Publication date
CN111510753B (zh) 2022-10-21
US20220116676A1 (en) 2022-04-14
US11805292B2 (en) 2023-10-31
CN112788379A (zh) 2021-05-11
CN111510753A (zh) 2020-08-07

Similar Documents

Publication Publication Date Title
WO2021088320A1 (zh) 显示设备和内容显示方法
WO2021031623A1 (zh) 显示设备、分享文件的方法和服务器
CN111491190B (zh) 一种双系统摄像头切换控制方法及显示设备
WO2020248714A1 (zh) 一种数据传输方法及设备
CN111526415A (zh) 一种双屏显示设备及其hdmi的切换方法
CN112788422A (zh) 显示设备
CN111464840B (zh) 显示设备及显示设备屏幕亮度的调节方法
WO2021031629A1 (zh) 显示设备和控制装置按键复用方法
WO2020248697A1 (zh) 显示设备及视频通讯数据处理方法
CN112788378B (zh) 显示设备与内容显示方法
WO2020248699A1 (zh) 一种声音处理法及显示设备
CN113141528B (zh) 显示设备、开机动画播放方法及存储介质
WO2020248681A1 (zh) 显示设备及蓝牙开关状态的显示方法
CN112783380A (zh) 显示设备和方法
CN112788423A (zh) 一种显示设备及菜单界面的显示方法
WO2021088326A1 (zh) 一种显示设备及来电显示方法
CN113497884B (zh) 一种双系统摄像头切换控制方法及显示设备
CN113365124B (zh) 一种显示设备及显示方法
CN112788375B (zh) 显示设备、显示方法及计算设备
WO2021223074A1 (zh) 显示设备及交互控制方法
WO2020248654A1 (zh) 显示设备及应用共同显示的方法
CN112463267B (zh) 在显示设备屏幕上呈现屏保信息的方法及显示设备
CN112839254A (zh) 显示设备与内容显示方法
CN112784137A (zh) 显示设备、显示方法及计算设备
CN112786036B (zh) 显示设备与内容显示方法

Legal Events

Date Code Title Description
121 Ep: the epo has been informed by wipo that ep was designated in this application

Ref document number: 20885057

Country of ref document: EP

Kind code of ref document: A1

NENP Non-entry into the national phase

Ref country code: DE

122 Ep: pct application non-entry in european phase

Ref document number: 20885057

Country of ref document: EP

Kind code of ref document: A1