CN112565866B - 焦点控制方法、系统、设备及存储介质 - Google Patents

焦点控制方法、系统、设备及存储介质 Download PDF

Info

Publication number
CN112565866B
CN112565866B CN202011386788.6A CN202011386788A CN112565866B CN 112565866 B CN112565866 B CN 112565866B CN 202011386788 A CN202011386788 A CN 202011386788A CN 112565866 B CN112565866 B CN 112565866B
Authority
CN
China
Prior art keywords
remote controller
angle
display interface
focus
included angle
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN202011386788.6A
Other languages
English (en)
Other versions
CN112565866A (zh
Inventor
李志水
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Shenzhen Skyworth RGB Electronics Co Ltd
Original Assignee
Shenzhen Skyworth RGB Electronics Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Shenzhen Skyworth RGB Electronics Co Ltd filed Critical Shenzhen Skyworth RGB Electronics Co Ltd
Priority to CN202011386788.6A priority Critical patent/CN112565866B/zh
Publication of CN112565866A publication Critical patent/CN112565866A/zh
Application granted granted Critical
Publication of CN112565866B publication Critical patent/CN112565866B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/431—Generation of visual interfaces for content selection or interaction; Content or additional data rendering
    • H04N21/4312—Generation of visual interfaces for content selection or interaction; Content or additional data rendering involving specific graphical features, e.g. screen layout, special fonts or colors, blinking icons, highlights or animations
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/20—Movements or behaviour, e.g. gesture recognition
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/442—Monitoring of processes or resources, e.g. detecting the failure of a recording device, monitoring the downstream bandwidth, the number of times a movie has been viewed, the storage space available from the internal hard disk
    • H04N21/44213—Monitoring of end-user related data
    • H04N21/44218—Detecting physical presence or behaviour of the user, e.g. using sensors to detect if the user is leaving the room or changes his face expression during a TV program
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/443—OS processes, e.g. booting an STB, implementing a Java virtual machine in an STB or power management in an STB
    • H04N21/4438—Window management, e.g. event handling following interaction with the user interface
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/47—End-user applications
    • H04N21/472—End-user interface for requesting content, additional data or services; End-user interface for interacting with content, e.g. for content reservation or setting reminders, for requesting event notification, for manipulating displayed content

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Human Computer Interaction (AREA)
  • Health & Medical Sciences (AREA)
  • Social Psychology (AREA)
  • General Health & Medical Sciences (AREA)
  • Databases & Information Systems (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Software Systems (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Psychiatry (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • Selective Calling Equipment (AREA)
  • User Interface Of Digital Computer (AREA)

Abstract

本发明公开了焦点控制方法、系统、设备及存储介质，该方法包括：获取场景图像；若识别到场景图像中的用户有使用遥控器的行为时，则接收遥控器发送的角度参数，同时获取终端设备的显示界面与遥控器之间的位置参数；根据角度参数和位置参数，获取用户通过遥控器在显示界面中所选择的目标控件对应的目标像素点；在与目标像素点对应的目标控件上显示焦点。本发明解决了目前使用遥控器无法快速将焦点从初始位置移动到目标对象上的问题，省去了一步步切换焦点的繁琐过程，实现了焦点的快速切换，提高了焦点切换效率，增强了用户的体验感。

Description

焦点控制方法、系统、设备及存储介质
技术领域
本发明涉及电视技术领域，尤其涉及一种焦点控制方法、系统、设备及存储介质。
背景技术
焦点是电视端设计中必不可少的一个元素，无焦点，用户将无法进行操作。在电视的操作中，当用户在电视上选择目标对象时，需要通过遥控器的【上/下/左/右】键来将焦点从初始位置逐个移动到目标对象上，并且通过按【ok】键来确认所选目标对象，来完成一次操作，整个过程比较少繁琐，使得用户体验较差。可见，目前使用遥控器无法快速将焦点从初始位置移动到目标对象上。
发明内容
本申请实施例通过提供一种焦点控制方法、系统、设备及存储介质，旨在解决目前使用遥控器无法快速将焦点从初始位置移动到目标对象上的问题。
本申请实施例提供了一种焦点控制方法，应用于终端设备，所述焦点控制方法，包括：
获取场景图像；
若识别到所述场景图像中的用户有使用遥控器的行为时，则接收遥控器发送的角度参数，同时获取所述终端设备的显示界面与所述遥控器之间的位置参数；
根据所述角度参数和所述位置参数，获取用户通过所述遥控器在显示界面中所选择的目标控件对应的目标像素点；
在与所述目标像素点对应的目标控件上显示焦点。
在一实施例中，所述位置参数包括第一定位距离和第二定位距离；
所述获取所述终端设备的显示界面与所述遥控器之间的位置参数，包括：
获取接收所述角度参数的时间间隔和所述遥控器发送所述角度参数的传输速度，并将所述时间间隔和所述传输速度的乘积确定为所述第一定位距离；
将所述终端设备的图像采集装置作为基准参照点，获取所述遥控器相对于所述图像采集装置的偏移距离，并将所述偏移距离确定为所述第二定位距离。
在一实施例中，所述位置参数还包括定位夹角；
所述获取所述终端设备的显示界面与所述遥控器之间的位置参数，还包括：
获取所述图像采集装置相对于所述遥控器的俯角的余角，将所述余角确定为所述定位夹角。
在一实施例中，所述角度参数至少包括第一坐标夹角和第二坐标夹角；
所述根据所述角度参数和所述位置参数，获取用户通过所述遥控器在显示界面中所选择的目标控件对应的目标像素点，包括：
根据所述第一坐标夹角、所述第二坐标夹角、所述第一定位距离、所述第二定位距离和所述定位夹角，计算第一线段的第一长度和第二线段的第二长度；其中，所述第一线段是所述目标像素点相对于所述显示界面的高度方向的线段，所述第二线段是所述目标像素点相对于所述显示界面的宽度方向的线段；
将所述第一线段与所述第二线段的交点确定为所述目标像素点。
在一实施例中，所述第一长度的计算公式为所述第二长度的计算公式为L1＝L2-X2*cos(α5)；
其中，X1表示所述第一线段，L1表示所述第二线段，X2表示所述第一定位距离，L2表示所述第二定位距离，α1表示所述定位夹角，α2表示所述第一坐标夹角，α5表示所述第二坐标夹角。
在一实施例中，所述在与所述目标像素点对应的目标控件上显示焦点，包括：
获取显示界面中各个控件分别获得焦点后所对应的焦点像素区域和所述焦点在显示界面中当前所在的初始控件；
确定所述目标像素点所位于的焦点像素区域，将所述焦点从所述初始控件移动至与所述焦点像素区域对应的目标控件上。
本申请实施例提供了一种焦点控制方法，应用于遥控器，所述焦点控制方法包括：
获取所述遥控器当前位置的三维坐标；
确定所述三维坐标的角度参数；
向终端设备发送所述角度参数。
此外，为实现上述目的，本发明还提供了一种焦点控制系统，包括终端设备和遥控器：
所述终端设备，包括：
图像获取模块，用于获取场景图像；
数据接收模块，用于若识别到所述场景图像中的用户有使用遥控器的行为时，则接收遥控器发送的角度参数，同时获取所述终端设备的显示界面与所述遥控器之间的位置参数；
数据计算模块，用于根据所述角度参数和所述位置参数，获取用户通过所述遥控器在显示界面中所选择的目标控件对应的目标像素点；
焦点控制模块，用于在与所述目标像素点对应的目标控件上显示焦点；
所述遥控器，包括：
坐标获取模块，用于获取所述遥控器当前位置的三维坐标；
参数确定模块，用于确定所述三维坐标的角度参数；
数据发送模块，用于向终端设备发送所述角度参数。
此外，为实现上述目的，本发明还提供了一种焦点控制方法设备包括：存储器、处理器及存储在所述存储器上并可在所述处理器上运行的焦点控制程序，所述焦点控制程序被所述处理器执行时实现上述的焦点控制方法的步骤。
此外，为实现上述目的，本发明还提供了一种存储介质，其上存储有焦点控制程序，所述焦点控制程序被处理器执行时实现上述的焦点控制方法的步骤。
本申请实施例中提供的一种焦点控制方法、系统、设备及存储介质的技术方案，至少具有如下技术效果或优点：
由于采用了获取场景图像，若识别到场景图像中的用户有使用遥控器的行为时，则接收遥控器发送的角度参数，同时获取终端设备的显示界面与遥控器之间的位置参数，根据角度参数和位置参数，获取用户通过遥控器在显示界面中所选择的目标控件对应的目标像素点，在与目标像素点对应的目标控件上显示焦点的技术方案，解决目前使用遥控器无法快速将焦点从初始位置移动到目标对象上的问题，省去了一步步切换焦点的繁琐过程，实现了焦点的快速切换，提高了焦点切换效率，增强了用户的体验感。
附图说明
图1为本发明实施例方案涉及的硬件运行环境的结构示意图；
图2为本发明焦点控制方法第一实施例的流程示意图；
图3为计算第一线段的辅助示意图；
图4为计算第二线段的辅助示意图；
图5为用户使用遥控器选择目标控件的示意图；
图6为本发明焦点控制方法第二实施例的流程示意图；
图7为本发明焦点控制方法第三实施例的流程示意图；
图8为本发明焦点控制系统的功能模块图。
具体实施方式
为了更好的理解上述技术方案，下面将参照附图更详细地描述本公开的示例性实施例。虽然附图中显示了本公开的示例性实施例，然而应当理解，可以以各种形式实现本公开而不应被这里阐述的实施例所限制。相反，提供这些实施例是为了能够更透彻地理解本公开，并且能够将本公开的范围完整的传达给本领域的技术人员。
本发明提供一种焦点控制设备。如图1所示，图1为本发明实施例方案涉及的硬件运行环境的结构示意图。
需要说明的是，图1即可为焦点控制设备的硬件运行环境的结构示意图。
如图1所示，该焦点控制设备可以包括：处理器1001，例如CPU，存储器1005，用户接口1003，网络接口1004，通信总线1002。其中，通信总线1002用于实现这些组件之间的连接通信。用户接口1003可以包括显示屏(Display)、输入单元比如键盘(Keyboard)，可选用户接口1003还可以包括标准的有线接口、无线接口。网络接口1004可选的可以包括标准的有线接口、无线接口(如WI-FI接口)。存储器1005可以是高速RAM存储器，也可以是稳定的存储器(non-volatile memory)，例如磁盘存储器。存储器1005可选的还可以是独立于前述处理器1001的存储装置。
可选地，焦点控制设备还可以包括RF(Radio Frequency，射频)电路，传感器、音频电路、WiFi模块等等。
本领域技术人员可以理解，图1中示出的焦点控制设备结构并不构成对焦点控制设备限定，可以包括比图示更多或更少的部件，或者组合某些部件，或者不同的部件布置。
如图1所示，作为一种存储介质的存储器1005中可以包括操作系统、网络通信模块、用户接口模块以及焦点控制程序。其中，操作系统是管理和控制焦点控制设备硬件和软件资源的程序，焦点控制程序以及其它软件或程序的运行。
在图1所示的焦点控制设备中，用户接口1003主要用于连接终端，与终端进行数据通信；网络接口1004主要用于后台服务器，与后台服务器进行数据通信；处理器1001可以用于调用存储器1005中存储的焦点控制程序。
在本实施例中，焦点控制设备包括：存储器1005、处理器1001及存储在所述存储器上并可在所述处理器上运行的焦点控制程序，其中：
应用于终端设备时，处理器1001调用存储器1005中存储的焦点控制程序时，执行以下操作：
获取场景图像；
若识别到所述场景图像中的用户有使用遥控器的行为时，则接收遥控器发送的角度参数，同时获取所述终端设备的显示界面与所述遥控器之间的位置参数；
根据所述角度参数和所述位置参数，获取用户通过所述遥控器在显示界面中所选择的目标控件对应的目标像素点；
在与所述目标像素点对应的目标控件上显示焦点。
应用于终端设备时，处理器1001调用存储器1005中存储的焦点控制程序时，还执行以下操作：
所述位置参数包括第一定位距离和第二定位距离；
获取接收所述角度参数的时间间隔和所述遥控器发送所述角度参数的传输速度，并将所述时间间隔和所述传输速度的乘积确定为所述第一定位距离；
将所述终端设备的图像采集装置作为基准参照点，获取所述遥控器相对于所述图像采集装置的偏移距离，并将所述偏移距离确定为所述第二定位距离。
应用于终端设备时，处理器1001调用存储器1005中存储的焦点控制程序时，还执行以下操作：
所述位置参数还包括定位夹角；
获取所述图像采集装置相对于所述遥控器的俯角的余角，将所述余角确定为所述定位夹角。
应用于终端设备时，处理器1001调用存储器1005中存储的焦点控制程序时，还执行以下操作：
所述角度参数至少包括第一坐标夹角和第二坐标夹角；
所述根据所述角度参数和所述位置参数，获取用户通过所述遥控器在显示界面中所选择的目标控件对应的目标像素点，包括：
根据所述第一坐标夹角、所述第二坐标夹角、所述第一定位距离、所述第二定位距离和所述定位夹角，计算第一线段的第一长度和第二线段的第二长度；其中，所述第一线段是所述目标像素点相对于所述显示界面的高度方向的线段，所述第二线段是所述目标像素点相对于所述显示界面的宽度方向的线段；
将所述第一线段与所述第二线段的交点确定为所述目标像素点。
其中，所述第一长度的计算公式为所述第二长度的计算公式为L1＝L2-X2*cos(α5)；
其中，X1表示所述第一线段，L1表示所述第二线段，X2表示所述第一定位距离，L2表示所述第二定位距离，α1表示所述定位夹角，α2表示所述第一坐标夹角，α5表示所述第二坐标夹角。
应用于终端设备时，处理器1001调用存储器1005中存储的焦点控制程序时，还执行以下操作：
获取显示界面中各个控件分别获得焦点后所对应的焦点像素区域和所述焦点在显示界面中当前所在的初始控件；
确定所述目标像素点所位于的焦点像素区域，将所述焦点从所述初始控件移动至与所述焦点像素区域对应的目标控件上。
应用于遥控器时，处理器1001调用存储器1005中存储的焦点控制程序时，还执行以下操作：
获取所述遥控器当前位置的三维坐标；
确定所述三维坐标的角度参数；
向终端设备发送所述角度参数。
本发明实施例提供了焦点控制方法的实施例，需要说明的是，虽然在流程图中示出了逻辑顺序，但是在某些情况下，可以以不同于此处的顺序执行所示出或描述的步骤，该焦点控制方法应用于终端设备和用于操控终端设备的遥控器。其中，终端设备为可以播放影视节目、以及搭载运行应用软件(APP)的设备，如智能电视。
如图2所示，在本申请的第一实施例中，本申请的焦点控制方法，该方法由终端设备执行时，包括以下步骤：
步骤S210：获取场景图像。
在本实施例中，终端设备包括有安装在其顶部位置上的图像采集装置，如升降摄像头，图像采集装置的采集方向和采集角度可自动调整。终端设备开启后，通过图像采集装置实时采集终端设备周围的场景图像，并对采集到的场景图像进行识别，识别场景图像的用户是否有使用遥控器的行为，用户使用遥控器的行为是用户拿起遥控器。
步骤S220：若识别到所述场景图像中的用户有使用遥控器的行为时，则接收遥控器发送的角度参数，同时获取所述终端设备的显示界面与所述遥控器之间的位置参数。
在本实施例中，终端设备如果通过场景图像识别出用户有使用遥控器的行为，即用户拿起遥控器，则接收遥控器发送的角度参数。其中，用户拿起遥控器时，遥控器通过内置的陀螺仪获取自身当前位置的三维坐标，然后计算出三维坐标的角度参数，角度参数至少包括第一坐标夹角和第二坐标夹角。三维坐标包括X轴、Y轴和Z轴三个方向的坐标，陀螺仪可以根据当前位置的三维坐标确定出X轴、Y轴和Z轴三个方向的坐标分别与空间基准坐标点之间的夹角，即当前位置的三维坐标的X轴夹角、Y轴夹角和Z轴夹角。其中，遥控器向终端设备发送的角度参数取决于在终端设备的显示界面上建立的二维坐标系。在本实施例中可以以显示界面的宽度方向作为X轴方向，显示界面的高度方向作为Y轴方向，则遥控器在空间中的X轴与Y轴所在的平面与显示界面形成了对应。因此，遥控器向终端设备发送的角度参数包括X轴夹角和Y轴夹角，即第一坐标夹角是X轴夹角，第二坐标夹角是Y轴夹角。值得说明的是，还可以将遥控器在空间中的X轴和Z轴所在的平面与显示界面形成对应，或者将遥控器在空间中的Y轴和Z轴所在的平面与显示界面形成对应，本发明不做限定。
进一步的，终端设备接收遥控器发送的角度参数的同时，还获取自身的显示界面与所述遥控器之间的位置参数，位置参数包括第一定位距离、第二定位距离和定位夹角。其中，获取所述终端设备的显示界面与所述遥控器之间的位置参数，包括以下步骤：
步骤a1：获取接收所述角度参数的时间间隔和所述遥控器发送所述角度参数的传输速度，并将所述时间间隔和所述传输速度的乘积确定为所述第一定位距离。
终端设备接收到角度参数后，可获取到遥控器发送角度数据的起始时间以及遥控器发送角度数据的传输速度，还可以获取自身接收到角度参数后的完成时间，根据完成时间和起始时间的差值可以确定出接收角度参数的时间间隔，那么时间间隔的和传输速度的乘积就是遥控器与终端设备的显示界面之间的距离，即第一定位距离，具体参考图3或图4中的X2，X2表示第一定位距离。
步骤b1：将所述终端设备的图像采集装置作为基准参照点，获取所述遥控器相对于所述图像采集装置的偏移距离，并将所述偏移距离确定为所述第二定位距离。
图像采集装置相对于显示界面的具体位置为预先设定的，具体位置信息也是已知的。终端设备将图像采集装置作为基准参照点，识别场景图像中遥控器的具体位置，并获取遥控器相对于图像采集装置的偏移距离，即得到第二定位距离，具体参考图4中的L2，L2表示第二定位距离。
步骤c1：获取所述图像采集装置相对于所述遥控器的俯角的余角，将所述余角确定为所述定位夹角。
参考图3，图像采集装置采集场景图像时，能够自适应调整图像采集装置的采集方向和采集角度。当识别到场景图像中遥控器的具体位置后，可获取到图像采集装置相对于遥控器的俯角，即α4。图像采集装置平视的采集方向与显示界面之间的夹角为直角，则通过俯角可以确定出俯角的余角，即α1；那么，α1＝90°-α4。
步骤S230：根据所述角度参数和所述位置参数，获取用户通过所述遥控器在显示界面中所选择的目标控件对应的目标像素点。
在本实施例中，根据第一坐标夹角(X轴夹角)、第二坐标夹角(Y轴夹角)、第一定位距离(X2)、第二定位距离(L2)和定位夹角(α1)，可以确定出遥控器在空间中指向显示界面的具体方位信息，以遥控器的顶端中心点为起始点，基于第二坐标夹角，从起始点作虚拟射线，虚拟射线与显示界面的交点(线和面的交点)就是用户通过遥控器在显示界面中所选择的目标控件对应的目标像素点。进一步的，步骤S230具体包括：
步骤a2：根据所述第一坐标夹角、所述第二坐标夹角、所述第一定位距离、所述第二定位距离和所述定位夹角，计算第一线段的第一长度和第二线段的第二长度。
如图3和图4所示，第一线段是目标像素点相对于显示界面的高度方向的线段，即X1，第二线段是目标像素点相对于显示界面的宽度方向的线段，即L1。具体的，第一线段的第一长度计算公式为：
其中，X1表示所述第一线段，X2表示所述第一定位距离，α1表示定位夹角，α2表示第一坐标夹角。
第二线段的第二长度计算公式为：
其中，L1表示第二线段，L2表示第二定位距离，α5表示所述第二坐标夹角。
步骤b2：将所述第一线段与所述第二线段的交点确定为所述目标像素点。
在本实施例中，第一线段的第一长度和第二线段的第二长度确定后，第一线段与第二线段的交点就是目标像素点，即图4中X1与L1的交点。
步骤S240：在与所述目标像素点对应的目标控件上显示焦点。
终端设备的显示界面上的一部分像素点对应了可获得焦点的控件，另一部分像素点属于背景部分或者对应了控件无法获得焦点。其中，可获得焦点的控件如搭载在终端设备上的各种应用软件、终端设备的显示界面中会显示相应应用软件的图标，用户通过遥控器选中目标应用软件的图标后，可进入该目标应用软件的界面。又如，应用软件是视频应用软件，用户通过遥控器进入目标视频应用软件的界面中后，可以选择目标节目，进而继续选择目标节目的其中一集的控件，对该集视频进行播放。无法获得焦点的控件是不能被用户通过遥控操作的，如无法获得焦点的控件是只是一张图片，即使用户按下了遥控器的“OK”键，终端设备也不会响应。在本实施例中，目标像素点确定后，如果目标像素点所对应的目标控件是可获得焦点的控件，则在该目标控件上显示焦点。参考图5，图5是显示界面中显示的某节目，焦点默认显示在第1集的控件上(图中未画出)，当用户用遥控器指向第3集的控件时，第1集的控件上的焦点就会消失，第3集的控件上就会显示的焦点，同样如果要直接播放第9集，当用户用遥控器指向第9集的控件时，第3集的控件上的焦点就会消失，第9集的控件上就会显示的焦点，用户按下遥控器的“OK”键就可以播放第9集的视频。
本实施例根据上述技术方案，由于采用了获取场景图像，若识别到场景图像中的用户有使用遥控器的行为时，则接收遥控器发送的角度参数，同时获取终端设备的显示界面与遥控器之间的位置参数，根据角度参数和位置参数，获取用户通过遥控器在显示界面中所选择的目标控件对应的目标像素点，在与目标像素点对应的目标控件上显示焦点的技术手段，省去了一步步切换焦点的繁琐过程，实现了焦点的快速切换，提高了焦点切换效率，增强了用户的体验感。
如图6所示，在本申请的第二实施例中，步骤S240具体包括以下步骤：
步骤S241：获取显示界面中各个控件分别获得焦点后所对应的焦点像素区域和所述焦点在显示界面中当前所在的初始控件；
在本实施例中，终端设备获取自身显示界面中各个可获得焦点的控件，并获取各个可获得焦点的控件在得焦点后所对应的焦点像素区域。其中，焦点像素区域就是可获得焦点的控件在获得焦点后，被焦点覆盖的显示界面中的一块区域。焦点像素区域的形状与控件的轮廓相同，其面积一般大于或者等于控件的面积。进一步的，焦点根据预设方式随机显示在当前显示界面中的某控件上或者显示在当前显示界面中的默认控件上。终端设备开启后，终端设备获取焦点在显示界面中当前所在的初始控件，将初始控件作为焦点移动的起始位置。
步骤S242：确定所述目标像素点所位于的焦点像素区域，将所述焦点从所述初始控件移动至与所述焦点像素区域对应的目标控件上。
当目标像素点确定后，判断目标像素点是在焦点像素区域内，还是在焦点像素区域外。其中，焦点像素区域是若干个像素点的集合，每个像素点对应有相应的坐标，假设焦点像素区域是矩形，其的四个顶点坐标是A、B、C和D，则A、B、C和D按照顺时针或逆时针连接后，就形成了焦点像素区域。如果目标像素点的坐标属于焦点像素区域，则表示该焦点像素区域所对应的控件可获得焦点。具体的，根据目标像素点的坐标可以确定出目标像素点具体属于哪个焦点像素区域，进而将焦点从初始控件直接移动到与目标像素点具体所属于的焦点像素区域对应的控件上。
本实施例根据上述技术方案，由于采用了获取显示界面中各个控件分别获得焦点后所对应的焦点像素区域和所述焦点在显示界面中当前所在的初始控件，确定所述目标像素点所位于的焦点像素区域，将所述焦点从所述初始控件移动至与所述焦点像素区域对应的目标控件上的技术手段，实现了焦点的快速移动。
如图7所示，在本申请的第三实施例中，本申请的焦点控制方法，该方法由遥控器执行时，包括以下步骤：
步骤S310：获取所述遥控器当前位置的三维坐标。
在本实施例中，遥控器内置有陀螺仪，陀螺仪可侦测用户是否有拿起遥控器。当侦测到遥控器的位置发送变化，则获取遥控器当前位置的三维坐标。
步骤S320：确定所述三维坐标的角度参数。
计算出三维坐标的角度参数，角度参数至少包括第一坐标夹角和第二坐标夹角。三维坐标包括X轴、Y轴和Z轴三个方向的坐标，陀螺仪可以根据当前位置的三维坐标确定出X轴、Y轴和Z轴三个方向的坐标分别与空间基准坐标点之间的夹角，即当前位置的三维坐标的X轴夹角、Y轴夹角和Z轴夹角。
步骤S330：向终端设备发送所述角度参数。
遥控器向终端设备发送角度参数，取决于在终端设备的显示界面上建立的二维坐标系。如果显示界面的宽度方向作为X轴方向，显示界面的高度方向作为Y轴方向，则遥控器在空间中的X轴与Y轴所在的平面与显示界面形成了对应，则遥控器向终端设备发送的角度参数包括X轴夹角和Y轴夹角，即第一坐标夹角是X轴夹角，第二坐标夹角是Y轴夹角；如果显示界面的宽度方向作为X轴方向，显示界面的高度方向作为Z轴方向，则遥控器在空间中的X轴与Z轴所在的平面与显示界面形成了对应，则遥控器向终端设备发送的角度参数包括X轴夹角和Z轴夹角，即第一坐标夹角是X轴夹角，第二坐标夹角是Z轴夹角；如果显示界面的宽度方向作为Y轴方向，显示界面的高度方向作为Z轴方向，则遥控器在空间中的Y轴与Z轴所在的平面与显示界面形成了对应，则遥控器向终端设备发送的角度参数包括Y轴夹角和Z轴夹角，即第一坐标夹角是Y轴夹角，第二坐标夹角是Z轴夹角。
如图8所示，本申请提供的一种焦点控制系统，包括终端设备和遥控器：
所述终端设备，包括：
图像获取模块410，用于获取场景图像；
数据接收模块420，用于若识别到所述场景图像中的用户有使用遥控器的行为时，则接收遥控器发送的角度参数，同时获取所述终端设备的显示界面与所述遥控器之间的位置参数；
数据计算模块430，用于根据所述角度参数和所述位置参数，获取用户通过所述遥控器在显示界面中所选择的目标控件对应的目标像素点；
焦点控制模块440，用于在与所述目标像素点对应的目标控件上显示焦点；
所述遥控器，包括：
坐标获取模块510，用于获取所述遥控器当前位置的三维坐标；
参数确定模块520，用于确定所述三维坐标的角度参数；
数据发送模块530，用于向终端设备发送所述角度参数。
进一步的，所述位置参数包括第一定位距离和第二定位距离；所述数据接收模块420在获取所述终端设备的显示界面与所述遥控器之间的位置参数方面，具体包括：
第一接收单元，用于获取接收所述角度参数的时间间隔和所述遥控器发送所述角度参数的传输速度，并将所述时间间隔和所述传输速度的乘积确定为所述第一定位距离；
第二接收单元，用于将所述终端设备的图像采集装置作为基准参照点，获取所述遥控器相对于所述图像采集装置的偏移距离，并将所述偏移距离确定为所述第二定位距离。
进一步的，所述位置参数还包括定位夹角；所述数据接收模块420在获取所述终端设备的显示界面与所述遥控器之间的位置参数方面，具体还包括：
角度获取单元，用于获取所述图像采集装置相对于所述遥控器的俯角的余角，将所述余角确定为所述定位夹角。
进一步的，所述角度参数至少包括第一坐标夹角和第二坐标夹角；所述数据计算模块430，包括：
长度计算单元，用于根据所述第一坐标夹角、所述第二坐标夹角、所述第一定位距离、所述第二定位距离和所述定位夹角，计算第一线段的第一长度和第二线段的第二长度；其中，所述第一线段是所述目标像素点相对于所述显示界面的高度方向的线段，所述第二线段是所述目标像素点相对于所述显示界面的宽度方向的线段；
像素点确定单元，用于将所述第一线段与所述第二线段的交点确定为所述目标像素点。
进一步的，所述第一长度的计算公式为所述第二长度的计算公式为L1＝L2-X2*cos(α5)；
其中，X1表示所述第一线段，L1表示所述第二线段，X2表示所述第一定位距离，L2表示所述第二定位距离，α1表示所述定位夹角，α2表示所述第一坐标夹角，α5表示所述第二坐标夹角。
进一步的，所述焦点控制模块440，包括：
初始信息获取单元，用于获取显示界面中各个控件分别获得焦点后所对应的焦点像素区域和所述焦点在显示界面中当前所在的初始控件；
焦点移动单元，用于确定所述目标像素点所位于的焦点像素区域，将所述焦点从所述初始控件移动至与所述焦点像素区域对应的目标控件上。
本发明焦点控制系统具体实施方式与上述焦点控制方法各实施例基本相同，在此不再赘述。
本领域内的技术人员应明白，本发明的实施例可提供为方法、系统、或计算机程序产品。因此，本发明可采用完全硬件实施例、完全软件实施例、或结合软件和硬件方面的实施例的形式。而且，本发明可采用在一个或多个其中包含有计算机可用程序代码的计算机可用存储介质(包括但不限于磁盘存储器、CD-ROM、光学存储器等)上实施的计算机程序产品的形式。
本发明是参照根据本发明实施例的方法、设备(系统)、和计算机程序产品的流程图和/或方框图来描述的。应理解可由计算机程序指令实现流程图和/或方框图中的每一流程和/或方框、以及流程图和/或方框图中的流程和/或方框的结合。可提供这些计算机程序指令到通用计算机、专用计算机、嵌入式处理机或其他可编程数据处理设备的处理器以产生一个机器，使得通过计算机或其他可编程数据处理设备的处理器执行的指令产生用于实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能的装置。
这些计算机程序指令也可存储在能引导计算机或其他可编程数据处理设备以特定方式工作的计算机可读存储器中，使得存储在该计算机可读存储器中的指令产生包括指令装置的制造品，该指令装置实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能。
这些计算机程序指令也可装载到计算机或其他可编程数据处理设备上，使得在计算机或其他可编程设备上执行一系列操作步骤以产生计算机实现的处理，从而在计算机或其他可编程设备上执行的指令提供用于实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能的步骤。
应当注意的是，在权利要求中，不应将位于括号之间的任何参考符号构造成对权利要求的限制。单词“包含”不排除存在未列在权利要求中的部件或步骤。位于部件之前的单词“一”或“一个”不排除存在多个这样的部件。本发明可以借助于包括有若干不同部件的硬件以及借助于适当编程的计算机来实现。在列举了若干装置的单元权利要求中，这些装置中的若干个可以是通过同一个硬件项来具体体现。单词第一、第二、以及第三等的使用不表示任何顺序。可将这些单词解释为名称。
尽管已描述了本发明的优选实施例，但本领域内的技术人员一旦得知了基本创造性概念，则可对这些实施例作出另外的变更和修改。所以，所附权利要求意欲解释为包括优选实施例以及落入本发明范围的所有变更和修改。
显然，本领域的技术人员可以对本发明进行各种改动和变型而不脱离本发明的精神和范围。这样，倘若本发明的这些修改和变型属于本发明权利要求及其等同技术的范围之内，则本发明也意图包含这些改动和变型在内。

Claims (7)

1.一种焦点控制方法，其特征在于，应用于终端设备，所述焦点控制方法包括：
获取场景图像；
若识别到所述场景图像中的用户有使用遥控器的行为时，则接收遥控器发送的角度参数，其中，所述角度参数由所述遥控器的内置陀螺仪确定，所述角度参数包括与终端设备的显示界面的宽度方向形成的第一坐标夹角，和与所述显示界面的高度方向形成的第二坐标夹角；同时获取所述显示界面与所述遥控器之间的位置参数，其中，所述位置参数包括第一定位距离、第二定位距离和定位夹角，所述第一定位距离为所述遥控器与所述显示界面之间的距离，所述第二定位距离为所述遥控器相对于所述终端设备的图像采集装置的偏移距离，所述定位夹角为所述图像采集装置相对于所述遥控器的俯角的余角；
根据所述第一坐标夹角、所述第二坐标夹角、所述第一定位距离、所述第二定位距离和所述定位夹角，计算第一线段的第一长度和第二线段的第二长度；其中，所述第一线段是目标像素点相对于所述显示界面的高度方向的线段，所述第二线段是所述目标像素点相对于所述显示界面的宽度方向的线段；所述第一长度的计算公式为，所述第二长度的计算公式为/>；其中，X1表示所述第一线段，L1表示所述第二线段，X2表示所述第一定位距离，L2表示所述第二定位距离，α1表示所述定位夹角，α2表示所述第一坐标夹角，α5表示所述第二坐标夹角；
将所述第一线段与所述第二线段的交点确定为所述目标像素点；其中，以所述遥控器的顶端中心点为起始点，基于所述第二坐标夹角，从所述起始点作虚拟射线，所述虚拟射线与所述显示界面的交点就是所述目标像素点；
在与所述目标像素点对应的目标控件上显示焦点。
2.如权利要求1所述的方法，其特征在于，所述获取所述终端设备的显示界面与所述遥控器之间的位置参数，包括：
获取接收所述角度参数的时间间隔和所述遥控器发送所述角度参数的传输速度，并将所述时间间隔和所述传输速度的乘积确定为所述第一定位距离；
将所述终端设备的图像采集装置作为基准参照点，获取所述遥控器相对于所述图像采集装置的偏移距离，并将所述偏移距离确定为所述第二定位距离。
3.如权利要求1所述的方法，其特征在于，所述在与所述目标像素点对应的目标控件上显示焦点，包括：
获取显示界面中各个控件分别获得焦点后所对应的焦点像素区域和所述焦点在显示界面中当前所在的初始控件；
确定所述目标像素点所位于的焦点像素区域，将所述焦点从所述初始控件移动至与所述焦点像素区域对应的目标控件上。
4.一种焦点控制方法，其特征在于，应用于遥控器，所述焦点控制方法包括：
获取所述遥控器当前位置的三维坐标；
确定所述三维坐标的角度参数；其中，所述角度参数由所述遥控器的内置陀螺仪确定，所述角度参数包括与终端设备的显示界面的宽度方向形成的第一坐标夹角，和与所述显示界面的高度方向形成的第二坐标夹角；
向终端设备发送所述角度参数，所述终端设备接收所述角度参数，同时获取所述显示界面与所述遥控器之间的位置参数，其中，所述位置参数包括第一定位距离、第二定位距离和定位夹角，所述第一定位距离为所述遥控器与所述显示界面之间的距离，所述第二定位距离为所述遥控器相对于所述终端设备的图像采集装置的偏移距离，所述定位夹角为所述图像采集装置相对于所述遥控器的俯角的余角；根据所述第一坐标夹角、所述第二坐标夹角、所述第一定位距离、所述第二定位距离和所述定位夹角，计算第一线段的第一长度和第二线段的第二长度；其中，所述第一线段是目标像素点相对于所述显示界面的高度方向的线段，所述第二线段是所述目标像素点相对于所述显示界面的宽度方向的线段；所述第一长度的计算公式为，所述第二长度的计算公式为/>；其中，X1表示所述第一线段，L1表示所述第二线段，X2表示所述第一定位距离，L2表示所述第二定位距离，α1表示所述定位夹角，α2表示所述第一坐标夹角，α5表示所述第二坐标夹角。
5.一种焦点控制系统，其特征在于，包括终端设备和遥控器：
所述终端设备，包括：
图像获取模块，用于获取场景图像；
数据接收模块，用于若识别到所述场景图像中的用户有使用遥控器的行为时，则接收遥控器发送的角度参数，其中，所述角度参数包括与终端设备的显示界面的宽度方向形成的第一坐标夹角，和与所述显示界面的高度方向形成的第二坐标夹角；同时获取所述显示界面与所述遥控器之间的位置参数，同时获取所述终端设备的显示界面与所述遥控器之间的位置参数，其中，所述位置参数包括第一定位距离、第二定位距离和定位夹角，所述第一定位距离为所述遥控器与所述显示界面之间的距离，所述第二定位距离为所述遥控器相对于所述终端设备的图像采集装置的偏移距离，所述定位夹角为所述图像采集装置相对于所述遥控器的俯角的余角；
数据计算模块，用于根据所述第一坐标夹角、所述第二坐标夹角、所述第一定位距离、所述第二定位距离和所述定位夹角，计算第一线段的第一长度和第二线段的第二长度；其中，所述第一线段是目标像素点相对于所述显示界面的高度方向的线段，所述第二线段是所述目标像素点相对于所述显示界面的宽度方向的线段；所述第一长度的计算公式为，所述第二长度的计算公式为/>；其中，X1表示所述第一线段，L1表示所述第二线段，X2表示所述第一定位距离，L2表示所述第二定位距离，α1表示所述定位夹角，α2表示所述第一坐标夹角，α5表示所述第二坐标夹角；
将所述第一线段与所述第二线段的交点确定为所述目标像素点；其中，以所述遥控器的顶端中心点为起始点，基于所述第二坐标夹角，从所述起始点作虚拟射线，所述虚拟射线与所述显示界面的交点就是所述目标像素点；
焦点控制模块，用于在与所述目标像素点对应的目标控件上显示焦点；
所述遥控器，包括：
坐标获取模块，用于获取所述遥控器当前位置的三维坐标；
参数确定模块，用于确定所述三维坐标的角度参数；其中，所述角度参数由所述遥控器的内置陀螺仪确定，所述角度参数包括与终端设备的显示界面的宽度方向形成的第一坐标夹角，和与所述显示界面的高度方向形成的第二坐标夹角；
数据发送模块，用于向终端设备发送所述角度参数。
6.一种焦点控制设备，其特征在于，包括：存储器、处理器及存储在所述存储器上并可在所述处理器上运行的焦点控制程序，所述焦点控制程序被所述处理器执行时实现如权利要求1-4中任一项所述的焦点控制方法的步骤。
7.一种存储介质，其特征在于，其上存储有焦点控制程序，所述焦点控制程序被处理器执行时实现权利要求1-4中任一项所述的焦点控制方法的步骤。
CN202011386788.6A 2020-11-30 2020-11-30 焦点控制方法、系统、设备及存储介质 Active CN112565866B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202011386788.6A CN112565866B (zh) 2020-11-30 2020-11-30 焦点控制方法、系统、设备及存储介质

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202011386788.6A CN112565866B (zh) 2020-11-30 2020-11-30 焦点控制方法、系统、设备及存储介质

Publications (2)

Publication Number Publication Date
CN112565866A CN112565866A (zh) 2021-03-26
CN112565866B true CN112565866B (zh) 2023-12-05

Family

ID=75047223

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202011386788.6A Active CN112565866B (zh) 2020-11-30 2020-11-30 焦点控制方法、系统、设备及存储介质

Country Status (1)

Country Link
CN (1) CN112565866B (zh)

Families Citing this family (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN116680019B (zh) * 2022-10-26 2024-06-28 荣耀终端有限公司 一种屏幕图标移动方法、电子设备及存储介质

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101370096A (zh) * 2008-10-13 2009-02-18 广州市弘元互动数字技术开发有限公司 基于空间定位的交互式电视遥控器
CN106406570A (zh) * 2015-07-29 2017-02-15 中兴通讯股份有限公司 投影光标控制方法、装置及遥控器
CN110335453A (zh) * 2019-07-19 2019-10-15 深圳市飞图视讯有限公司 一种基于模拟激光的无线遥控器装置及系统
CN111107406A (zh) * 2019-12-20 2020-05-05 视联动力信息技术股份有限公司 一种显示终端的控制方法、装置和存储介质
CN111698545A (zh) * 2020-06-24 2020-09-22 北京字节跳动网络技术有限公司 遥控器和识别操作动作的方法、装置、终端及存储介质

Family Cites Families (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102984569A (zh) * 2012-11-29 2013-03-20 中兴通讯股份有限公司 一种控制电视界面焦点的方法、装置和系统
EP3054693B1 (en) * 2013-10-02 2019-12-25 Samsung Electronics Co., Ltd Image display apparatus and pointing method for same

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101370096A (zh) * 2008-10-13 2009-02-18 广州市弘元互动数字技术开发有限公司 基于空间定位的交互式电视遥控器
CN106406570A (zh) * 2015-07-29 2017-02-15 中兴通讯股份有限公司 投影光标控制方法、装置及遥控器
CN110335453A (zh) * 2019-07-19 2019-10-15 深圳市飞图视讯有限公司 一种基于模拟激光的无线遥控器装置及系统
CN111107406A (zh) * 2019-12-20 2020-05-05 视联动力信息技术股份有限公司 一种显示终端的控制方法、装置和存储介质
CN111698545A (zh) * 2020-06-24 2020-09-22 北京字节跳动网络技术有限公司 遥控器和识别操作动作的方法、装置、终端及存储介质

Non-Patent Citations (1)

* Cited by examiner, † Cited by third party
Title
智能电视指向性遥控器的设计与实现;赵伟;林志贤;郭太良;姚剑敏;徐胜;;电视技术(第10期);全文 *

Also Published As

Publication number Publication date
CN112565866A (zh) 2021-03-26

Similar Documents

Publication Publication Date Title
CN106803966B (zh) 一种多人网络直播方法、装置及其电子设备
EP4057109A1 (en) Data processing method and apparatus, electronic device and storage medium
CN106170978B (zh) 深度图生成装置、方法和非短暂性计算机可读介质
US10062209B2 (en) Displaying an object in a panoramic image based upon a line-of-sight direction
US9392248B2 (en) Dynamic POV composite 3D video system
CN105338238B (zh) 一种拍照方法及电子设备
US20200380724A1 (en) Personalized scene image processing method, apparatus and storage medium
CN110737414B (zh) 交互显示方法、装置、终端设备及存储介质
KR101703013B1 (ko) 3차원 스캐너 및 스캐닝 방법
KR102523493B1 (ko) 가상 카메라 머신을 이용한 콘텐츠 제공 시스템 및 방법
CN106412432A (zh) 一种拍照方法及移动终端
CN112039937A (zh) 一种显示方法、位置确定方法及装置
US20140267592A1 (en) Method for capturing image and electronic device thereof
CN106162150A (zh) 一种拍照方法及移动终端
CN112565866B (zh) 焦点控制方法、系统、设备及存储介质
CN110866940A (zh) 虚拟画面的控制方法、装置、终端设备及存储介质
CN110737326A (zh) 虚拟对象的显示方法、装置、终端设备及存储介质
CN114153348A (zh) 光标提示方法和主机
JP2012216074A (ja) 画像処理装置、画像処理装置の制御方法、及びプログラム
CN107566724B (zh) 一种全景图像拍摄方法及移动终端
CN106445282B (zh) 一种基于增强现实技术的交互方法
CN112308981A (zh) 图像处理方法、装置、电子设备及存储介质
CN113542679B (zh) 一种图像播放方法及装置
CN112106347A (zh) 一种图像生成方法、设备、可移动平台及存储介质
CN111198609A (zh) 交互显示方法、装置、电子设备及存储介质

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant