RU2015114537A - Устройство отображения и его способ управления - Google Patents

Устройство отображения и его способ управления Download PDF

Info

Publication number
RU2015114537A
RU2015114537A RU2015114537A RU2015114537A RU2015114537A RU 2015114537 A RU2015114537 A RU 2015114537A RU 2015114537 A RU2015114537 A RU 2015114537A RU 2015114537 A RU2015114537 A RU 2015114537A RU 2015114537 A RU2015114537 A RU 2015114537A
Authority
RU
Russia
Prior art keywords
recognized
recognition
user
display device
display
Prior art date
Application number
RU2015114537A
Other languages
English (en)
Other versions
RU2617927C2 (ru
Inventor
Дзае Хонг АХН
Гиунг Чан СЕОЛ
Original Assignee
Самсунг Электроникс Ко., Лтд.
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Самсунг Электроникс Ко., Лтд. filed Critical Самсунг Электроникс Ко., Лтд.
Publication of RU2015114537A publication Critical patent/RU2015114537A/ru
Application granted granted Critical
Publication of RU2617927C2 publication Critical patent/RU2617927C2/ru

Links

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0484—Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G—PHYSICS
    • G02—OPTICS
    • G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B27/00—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
    • G02B27/01—Head-up displays
    • G02B27/017—Head mounted
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/011—Arrangements for interaction with the human body, e.g. for user immersion in virtual reality
    • G06F3/012—Head tracking input arrangements
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/011—Arrangements for interaction with the human body, e.g. for user immersion in virtual reality
    • G06F3/013—Eye tracking input arrangements
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/017—Gesture based interaction, e.g. based on a set of recognized hand gestures
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/03—Arrangements for converting the position or the displacement of a member into a coded form
    • G06F3/0304—Detection arrangements using opto-electronic means
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0481—Interaction techniques based on graphical user interfaces [GUI] based on specific properties of the displayed interaction object or a metaphor-based environment, e.g. interaction with desktop elements like windows or icons, or assisted by a cursor's changing behaviour or appearance
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0481—Interaction techniques based on graphical user interfaces [GUI] based on specific properties of the displayed interaction object or a metaphor-based environment, e.g. interaction with desktop elements like windows or icons, or assisted by a cursor's changing behaviour or appearance
    • G06F3/04812—Interaction techniques based on cursor appearance or behaviour, e.g. being affected by the presence of displayed objects
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0481—Interaction techniques based on graphical user interfaces [GUI] based on specific properties of the displayed interaction object or a metaphor-based environment, e.g. interaction with desktop elements like windows or icons, or assisted by a cursor's changing behaviour or appearance
    • G06F3/04815—Interaction with a metaphor-based environment or interaction object displayed as three-dimensional, e.g. changing the user viewpoint with respect to the environment or object
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/14—Digital output to display device ; Cooperation and interconnection of the display device with other functional units
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/16—Sound input; Sound output
    • G06F3/167—Audio in a user interface, e.g. using voice commands for navigating, audio feedback
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/10—Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
    • G06V40/16—Human faces, e.g. facial parts, sketches or expressions
    • G06V40/179—Human faces, e.g. facial parts, sketches or expressions metadata assisted face recognition
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/10—Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
    • G06V40/18—Eye characteristics, e.g. of the iris
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/41—Structure of client; Structure of client peripherals
    • H04N21/422—Input-only peripherals, i.e. input devices connected to specially adapted client devices, e.g. global positioning system [GPS]
    • H04N21/4227—Providing Remote input by a user located remotely from the client device, e.g. at work
    • G—PHYSICS
    • G02—OPTICS
    • G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B27/00—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
    • G02B27/01—Head-up displays
    • G02B27/0101—Head-up displays characterised by optical features
    • G02B2027/014—Head-up displays characterised by optical features comprising information/image processing systems
    • G—PHYSICS
    • G02—OPTICS
    • G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B27/00—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
    • G02B27/01—Head-up displays
    • G02B27/0179—Display position adjusting means not related to the information to be displayed
    • G02B2027/0187—Display position adjusting means not related to the information to be displayed slaved to motion of at least a part of the body of the user, e.g. head, eye
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F2203/00—Indexing scheme relating to G06F3/00 - G06F3/048
    • G06F2203/048—Indexing scheme relating to G06F3/048
    • G06F2203/04803—Split screen, i.e. subdividing the display area or the window area into separate subareas

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • General Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Human Computer Interaction (AREA)
  • Multimedia (AREA)
  • Health & Medical Sciences (AREA)
  • General Health & Medical Sciences (AREA)
  • Audiology, Speech & Language Pathology (AREA)
  • Optics & Photonics (AREA)
  • Ophthalmology & Optometry (AREA)
  • Library & Information Science (AREA)
  • Oral & Maxillofacial Surgery (AREA)
  • Signal Processing (AREA)
  • User Interface Of Digital Computer (AREA)
  • Position Input By Displaying (AREA)
  • Studio Devices (AREA)
  • Image Analysis (AREA)
  • Telephone Function (AREA)
  • Controls And Circuits For Display Device (AREA)

Abstract

1. Устройство отображения, содержащее:блок распознавания для распознавания взгляда пользователя;средство управления для определения, находится ли распознанный взгляд в пределах заданной области распознавания, и для управления входом в интерактивный режим при определении, что распознанный взгляд находится в пределах заданной области распознавания; иблок отображения для отображения изображения, соответствующего интерактивному режиму.2. Устройство отображения по п. 1, в котором блок отображения отображает заданную область распознавания.3. Устройство отображения по п. 2, в котором, когда взгляд распознается, средство управления отображает информацию отображения заданной области отличным образом от информации отображения до того, как взгляд распознается.4. Устройство отображения по п. 1, в котором блок отображения отображает позицию распознанного взгляда в виде курсора.5. Устройство отображения по п. 1, в которомблок распознавания распознает движение пользователя, исредство управления определяет команду операции, соответствующую распознанному движению, и управляет приведением в действие блока отображения на основе определенной команды операции.6. Устройство отображения по п. 1, в которомблок распознавания распознает голос пользователя, исредство управления определяет команду операции, соответствующую распознанному голосу, и управляет приведением в действие блока отображения на основе определенной команды операции.7. Устройство отображения по п. 1, в котором, при входе в интерактивный режим, средство управления управляет отображением множества режимов распознавания для взаимодействия с пользователем и выбирает один из

Claims (15)

1. Устройство отображения, содержащее:
блок распознавания для распознавания взгляда пользователя;
средство управления для определения, находится ли распознанный взгляд в пределах заданной области распознавания, и для управления входом в интерактивный режим при определении, что распознанный взгляд находится в пределах заданной области распознавания; и
блок отображения для отображения изображения, соответствующего интерактивному режиму.
2. Устройство отображения по п. 1, в котором блок отображения отображает заданную область распознавания.
3. Устройство отображения по п. 2, в котором, когда взгляд распознается, средство управления отображает информацию отображения заданной области отличным образом от информации отображения до того, как взгляд распознается.
4. Устройство отображения по п. 1, в котором блок отображения отображает позицию распознанного взгляда в виде курсора.
5. Устройство отображения по п. 1, в котором
блок распознавания распознает движение пользователя, и
средство управления определяет команду операции, соответствующую распознанному движению, и управляет приведением в действие блока отображения на основе определенной команды операции.
6. Устройство отображения по п. 1, в котором
блок распознавания распознает голос пользователя, и
средство управления определяет команду операции, соответствующую распознанному голосу, и управляет приведением в действие блока отображения на основе определенной команды операции.
7. Устройство отображения по п. 1, в котором, при входе в интерактивный режим, средство управления управляет отображением множества режимов распознавания для взаимодействия с пользователем и выбирает один из режимов распознавания на основе позиции распознанного взгляда.
8. Устройство отображения по п. 7, дополнительно содержащее:
блок захвата изображения для захвата изображения пользователя; и
блок захвата звука для захвата голоса пользователя, причем средство управления управляет активацией блока захвата изображения и блока захвата звука на основе выбранного режима распознавания.
9. Устройство отображения по п. 1, в котором
блок распознавания распознает лицо пользователя, и
средство управления определяет, является ли распознанный пользователь предварительно зарегистрированным пользователем, при определении, что распознанный пользователь является предварительно зарегистрированным пользователем, управляет распознаванием взгляда пользователя, и в случае, в котором распознается множество пользователей, управляет распознаванием взгляда пользователя, имеющего наивысший приоритет, на основе предварительно сохраненных приоритетов.
10. Устройство отображения по п. 1, в котором средство управления определяет, находится ли распознанный взгляд в пределах заданной области завершения, и при определении, что распознанный взгляд находится в пределах заданной области завершения, управляет завершением интерактивного режима.
11. Устройство отображения по п. 1, в котором
блок распознавания содержит: первый блок распознавания для распознавания взгляда пользователя; и второй блок распознавания для распознавания по меньшей мере одного сигнала, выбранного из движения и голоса пользователя, и для распознавания команды операции, соответствующей по меньшей мере одному распознанному сигналу,
когда движение распознается в состоянии, в котором взгляд находится в пределах заданной области, средство управления подтверждает команду, соответствующую распознанному движению, и управляет исполнением функции, соответствующей подтвержденной команде, и/или
когда голос распознается в состоянии, в котором взгляд
находится в пределах заданной области, средство управления подтверждает команду, соответствующую распознанному голосу, и управляет исполнением функции, соответствующей подтвержденной команде.
12. Устройство отображения по п. 11, дополнительно содержащее:
блок связи для приема звукового сигнала, переданного от внешнего пульта дистанционного управления, причем
второй блок распознавания распознает голос из принятого звукового сигнала.
13. Устройство отображения по п. 1, дополнительно содержащее:
средство настройки для приема внешнего широковещательного сигнала;
процессор сигналов для разделения широковещательного сигнала на сигнал изображения, имеющий информацию изображения, и звуковой сигнал, имеющий звуковую информацию, и для сигнальной обработки разделенных сигнала изображения и звукового сигнала, причем
блок отображения отображает заданную область распознавания, кнопку канала и кнопку громкости и отображает позицию распознанного взгляда в виде курсора, и
когда взгляд пользователя находится вне области блока отображения, средство управления управляет завершением интерактивного режима.
14. Способ управления устройством отображения, содержащий этапы, на которых:
распознают взгляд пользователя;
определяют, находится ли распознанный взгляд в пределах заданной области распознавания;
входят в интерактивный режим при определении, что распознанный взгляд находится в пределах заданной области распознавания в течение предварительно определенного периода времени;
отображают множество режимов распознавания для взаимодействия с пользователем;
определяют режим распознавания, соответствующий позиции распознанного взгляда, из отображаемых режимов распознавания;
исполняют определенный режим распознавания для распознавания команды от пользователя; и
исполняют функцию, соответствующую распознанной команде.
15. Способ управления по п. 14, дополнительно содержащий этап, на котором отображают заданную область распознавания в виде другой информации отображения при входе в интерактивный режим.
RU2015114537A 2012-10-19 2013-09-06 Устройство отображения и его способ управления RU2617927C2 (ru)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
KR10-2012-0116956 2012-10-19
KR1020120116956A KR102095765B1 (ko) 2012-10-19 2012-10-19 디스플레이 장치 및 그 제어 방법
PCT/KR2013/008073 WO2014061916A1 (en) 2012-10-19 2013-09-06 Display apparatus and control method thereof

Publications (2)

Publication Number Publication Date
RU2015114537A true RU2015114537A (ru) 2016-11-10
RU2617927C2 RU2617927C2 (ru) 2017-04-28

Family

ID=49518656

Family Applications (1)

Application Number Title Priority Date Filing Date
RU2015114537A RU2617927C2 (ru) 2012-10-19 2013-09-06 Устройство отображения и его способ управления

Country Status (9)

Country Link
US (2) US9524023B2 (ru)
EP (2) EP3425485B1 (ru)
JP (1) JP6271935B2 (ru)
KR (1) KR102095765B1 (ru)
CN (1) CN103826145B (ru)
IN (1) IN2015DN03276A (ru)
MX (1) MX346605B (ru)
RU (1) RU2617927C2 (ru)
WO (1) WO2014061916A1 (ru)

Families Citing this family (43)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2015056141A (ja) 2013-09-13 2015-03-23 ソニー株式会社 情報処理装置、および情報処理方法
CN104598009A (zh) * 2013-10-30 2015-05-06 鸿富锦精密工业(武汉)有限公司 屏幕按键控制方法及系统
JP5884811B2 (ja) * 2013-11-18 2016-03-15 コニカミノルタ株式会社 Ａｒ表示装置、ａｒ表示制御装置、印刷条件設定システム、印刷システム、印刷設定表示方法およびプログラム
KR102193029B1 (ko) * 2014-05-09 2020-12-18 삼성전자주식회사 디스플레이 장치 및 그의 화상 통화 수행 방법
KR102337682B1 (ko) 2014-10-01 2021-12-09 삼성전자주식회사 디스플레이 장치 및 그의 제어 방법
KR102289904B1 (ko) * 2015-01-23 2021-08-18 삼성디스플레이 주식회사 표시 장치
WO2016136837A1 (ja) * 2015-02-25 2016-09-01 京セラ株式会社 ウェアラブル装置、制御方法及び制御プログラム
KR20160116162A (ko) * 2015-03-26 2016-10-07 삼성디스플레이 주식회사 표시 장치
CN105630148A (zh) * 2015-08-07 2016-06-01 宇龙计算机通信科技(深圳)有限公司 终端的显示方法、终端的显示装置和终端
KR20180071092A (ko) 2016-12-19 2018-06-27 삼성전자주식회사 사용자의 시선 및 입력에 기반하여 제어되는 전자 장치, 모바일 전자 장치 및 디스플레이 장치
JP2019003228A (ja) * 2017-06-09 2019-01-10 富士通株式会社 機器連携システム、機器連携装置、機器連携方法及び機器連携プログラム
KR102203720B1 (ko) * 2017-06-26 2021-01-15 에스케이텔레콤 주식회사 음성 인식 방법 및 장치
US10521946B1 (en) 2017-11-21 2019-12-31 Amazon Technologies, Inc. Processing speech to drive animations on avatars
US11232645B1 (en) 2017-11-21 2022-01-25 Amazon Technologies, Inc. Virtual spaces as a platform
US10732708B1 (en) * 2017-11-21 2020-08-04 Amazon Technologies, Inc. Disambiguation of virtual reality information using multi-modal data including speech
CN109992237B (zh) * 2018-01-03 2022-04-22 腾讯科技（深圳）有限公司 智能语音设备控制方法、装置、计算机设备和存储介质
CN116328317A (zh) 2018-02-06 2023-06-27 日本聚逸株式会社 应用处理系统、应用处理方法以及应用处理程序
JP6855416B2 (ja) * 2018-07-06 2021-04-07 グリー株式会社 ゲーム処理システム、ゲーム処理方法、及びゲーム処理プログラム
EP3520868A1 (en) 2018-02-06 2019-08-07 Gree, Inc. Game processing system, method of processing game, and program for processing game
US10981067B2 (en) 2018-02-06 2021-04-20 Gree, Inc. Game processing system, method of processing game, and storage medium storing program for processing game
JP6850769B2 (ja) * 2018-07-05 2021-03-31 グリー株式会社 ゲーム処理システム、ゲーム処理方法、及びゲーム処理プログラム
JP6908573B2 (ja) 2018-02-06 2021-07-28 グリー株式会社 ゲーム処理システム、ゲーム処理方法、及びゲーム処理プログラム
CN108509856A (zh) * 2018-03-06 2018-09-07 深圳市沃特沃德股份有限公司 音频调整方法、装置和音响设备
US11169668B2 (en) * 2018-05-16 2021-11-09 Google Llc Selecting an input mode for a virtual assistant
CN108897589B (zh) 2018-05-31 2020-10-27 刘国华 显示设备中人机交互方法、装置、计算机设备和存储介质
US11949943B2 (en) * 2018-07-16 2024-04-02 Arris Enterprises Llc Gaze-responsive advertisement
JP6524320B2 (ja) * 2018-09-12 2019-06-05 株式会社東芝 メガネ型ウエアラブル端末およびこの端末を用いる方法
CN109683705A (zh) * 2018-11-30 2019-04-26 北京七鑫易维信息技术有限公司 眼球注视控制交互控件的方法、装置和系统
EP3896983A4 (en) * 2018-12-11 2022-07-06 LG Electronics Inc. DISPLAY DEVICE
WO2020158218A1 (ja) * 2019-01-28 2020-08-06 ソニー株式会社 情報処理装置、情報処理方法及びプログラム
CN109788256A (zh) * 2019-01-30 2019-05-21 温州大学 一种多模态图像的显示系统
CN110211251A (zh) * 2019-04-26 2019-09-06 珠海格力电器股份有限公司 一种人脸识别方法、装置、存储介质及人脸识别终端
JP7277306B2 (ja) * 2019-07-31 2023-05-18 キヤノン株式会社 電子機器、電子機器の制御方法、プログラム、記憶媒体
CN112423190A (zh) * 2019-08-20 2021-02-26 苹果公司 用于头戴式设备的基于音频的反馈
US11112875B1 (en) * 2020-03-20 2021-09-07 Huawei Technologies Co., Ltd. Methods and systems for controlling a device using hand gestures in multi-user environment
US11698677B1 (en) * 2020-06-29 2023-07-11 Apple Inc. Presenting a notification based on an engagement score and an interruption priority value
CN112102828A (zh) * 2020-09-04 2020-12-18 杭州中软安人网络通信股份有限公司 大屏幕自动播报内容的语音控制方法及系统
US11762458B2 (en) * 2021-02-15 2023-09-19 Sony Group Corporation Media display device control based on eye gaze
JP7089128B1 (ja) 2021-07-01 2022-06-21 株式会社あかつき ゲームサーバ、ゲームプログラム、情報処理方法
JP7039753B1 (ja) 2021-07-01 2022-03-22 株式会社あかつき ゲームサーバ、ゲームプログラム、情報処理方法
JP7248853B2 (ja) * 2022-03-09 2023-03-29 株式会社あかつき ゲームサーバ、ゲームプログラム、情報処理方法
JP7141556B1 (ja) 2022-03-09 2022-09-22 株式会社あかつき ゲームサーバ、ゲームプログラム、情報処理方法
JP7387932B2 (ja) * 2022-03-09 2023-11-28 株式会社あかつき ゲームサーバ、ゲームプログラム、情報処理方法

Family Cites Families (48)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH0981309A (ja) * 1995-09-13 1997-03-28 Toshiba Corp 入力装置
DE19736995B4 (de) * 1997-08-26 2009-05-07 Fraunhofer-Gesellschaft zur Förderung der angewandten Forschung e.V. Vorrichtung zum Bestimmen eines Fixationspunktes
US7216351B1 (en) * 1999-04-07 2007-05-08 International Business Machines Corporation Systems and methods for synchronizing multi-modal interactions
JP2001070293A (ja) * 1999-09-06 2001-03-21 Toshiba Corp Ｘ線診断装置
JP2001350578A (ja) * 2000-06-06 2001-12-21 Sensor:Kk 視線による入力制御装置及び方法並びに視線により入力させる制御プログラムを記録した記録媒体
US20030038754A1 (en) * 2001-08-22 2003-02-27 Mikael Goldstein Method and apparatus for gaze responsive text presentation in RSVP display
US7760248B2 (en) * 2002-07-27 2010-07-20 Sony Computer Entertainment Inc. Selective sound source listening in conjunction with computer interactive processing
JP2005117185A (ja) * 2003-10-03 2005-04-28 Canon Inc デジタルテレビジョン装置
EP1978694B1 (en) * 2004-06-04 2011-05-25 QUALCOMM Incorporated High data rate interface apparatus and method
US7057888B2 (en) * 2004-09-22 2006-06-06 Intel Corporation Retractable and extendable camera and microphone array computer system
TWI287787B (en) * 2004-12-14 2007-10-01 Delta Electronics Inc A remote control device and method with speech control
JP4872241B2 (ja) * 2005-05-31 2012-02-08 船井電機株式会社 テレビ受像機
JP2007160473A (ja) * 2005-12-15 2007-06-28 Fujitsu Ltd ロボットにおける対話相手識別方法およびロボット
DE102006011288A1 (de) * 2006-03-10 2007-09-13 Siemens Ag Verfahren zur Auswahl von Funktionen mithilfe einer Benutzerschnittstelle und Benutzerschnittstelle
JP2007324866A (ja) * 2006-05-31 2007-12-13 Funai Electric Co Ltd 電子機器及びテレビ受像機
US20080013262A1 (en) * 2006-06-30 2008-01-17 Logitech Europe S.A. Computer monitor with detachable module
JP4260215B1 (ja) * 2007-08-29 2009-04-30 任天堂株式会社 撮像装置
WO2009042579A1 (en) * 2007-09-24 2009-04-02 Gesturetek, Inc. Enhanced interface for voice and video communications
TW200921483A (en) * 2007-11-09 2009-05-16 Tpk Touch Solutions Inc Touch-control display panel with an electric-field shielding layer
US8555207B2 (en) * 2008-02-27 2013-10-08 Qualcomm Incorporated Enhanced input using recognized gestures
DE102008025124A1 (de) * 2008-05-26 2009-12-03 Volkswagen Ag Anzeigesystem für ein Fahrzeug und Bedienverfahren für ein Anzeigesystem eines Fahrzeugs
KR101427686B1 (ko) * 2008-06-09 2014-08-12 삼성전자주식회사 프로그램 선택 방법 및 그 장치
US8700332B2 (en) * 2008-11-10 2014-04-15 Volkswagen Ag Operating device for a motor vehicle
KR20100064177A (ko) * 2008-12-04 2010-06-14 삼성전자주식회사 전자장치 및 그의 디스플레이방법
AU2010221722A1 (en) * 2009-02-06 2011-08-18 Oculis Labs, Inc. Video-based privacy supporting system
US20110025689A1 (en) * 2009-07-29 2011-02-03 Microsoft Corporation Auto-Generating A Visual Representation
US20110084897A1 (en) * 2009-10-13 2011-04-14 Sony Ericsson Mobile Communications Ab Electronic device
KR101626159B1 (ko) * 2009-11-25 2016-05-31 엘지전자 주식회사 사용자 적응형 디스플레이 장치 및 디스플레이 방법
US20110154014A1 (en) * 2009-12-18 2011-06-23 Sony Ericsson Mobile Communications Ab Data exchange for mobile devices
US8977972B2 (en) * 2009-12-31 2015-03-10 Intel Corporation Using multi-modal input to control multiple objects on a display
US8922480B1 (en) * 2010-03-05 2014-12-30 Amazon Technologies, Inc. Viewer-based device control
KR101815020B1 (ko) * 2010-08-26 2018-01-31 삼성전자주식회사 인터페이스 제어 장치 및 방법
JP2012053545A (ja) * 2010-08-31 2012-03-15 Canon Inc 画像処理システムおよびその制御方法
JP5583531B2 (ja) * 2010-09-10 2014-09-03 日立コンシューマエレクトロニクス株式会社 映像表示装置
WO2012083415A1 (en) * 2010-11-15 2012-06-28 Tandemlaunch Technologies Inc. System and method for interacting with and analyzing media on a display using eye gaze tracking
JP4977249B1 (ja) * 2010-12-24 2012-07-18 株式会社東芝 電子機器
WO2012099584A1 (en) * 2011-01-19 2012-07-26 Hewlett-Packard Development Company, L.P. Method and system for multimodal and gestural control
JP5070367B2 (ja) * 2011-01-31 2012-11-14 三洋電機株式会社 電動自転車
KR20120090621A (ko) * 2011-02-08 2012-08-17 삼성전자주식회사 백라이트 유닛 및 이를 갖는 표시장치
KR101191640B1 (ko) * 2011-02-23 2012-10-17 동국대학교 산학협력단 사용자에게 정보를 전달하는 정보전달장치 및 그 방법
US8643680B2 (en) * 2011-04-08 2014-02-04 Amazon Technologies, Inc. Gaze-based content display
KR101235594B1 (ko) * 2011-06-27 2013-02-21 엘지전자 주식회사 이동 단말기
US9727132B2 (en) * 2011-07-01 2017-08-08 Microsoft Technology Licensing, Llc Multi-visor: managing applications in augmented reality environments
JP5785015B2 (ja) * 2011-07-25 2015-09-24 京セラ株式会社 電子機器、電子文書制御プログラムおよび電子文書制御方法
US8988350B2 (en) * 2011-08-20 2015-03-24 Buckyball Mobile, Inc Method and system of user authentication with bioresponse data
US9823742B2 (en) * 2012-05-18 2017-11-21 Microsoft Technology Licensing, Llc Interaction and management of devices using gaze detection
US9594500B2 (en) * 2012-06-27 2017-03-14 sigmund lindsay clements Touch Free hygienic display control panel for a smart toilet
KR102081930B1 (ko) * 2013-03-21 2020-02-26 엘지전자 주식회사 시선 위치를 디텍트하는 디스플레이 디바이스 및 제어 방법

Also Published As

Publication number Publication date
US9524023B2 (en) 2016-12-20
RU2617927C2 (ru) 2017-04-28
EP3425485A3 (en) 2019-02-13
JP2014086085A (ja) 2014-05-12
CN103826145A (zh) 2014-05-28
JP6271935B2 (ja) 2018-01-31
US20170060370A1 (en) 2017-03-02
EP3425485A2 (en) 2019-01-09
KR20140050484A (ko) 2014-04-29
CN103826145B (zh) 2019-02-15
IN2015DN03276A (ru) 2015-10-09
KR102095765B1 (ko) 2020-04-01
EP2735938A2 (en) 2014-05-28
EP2735938B1 (en) 2018-08-29
MX2015004841A (es) 2015-07-21
US20140111420A1 (en) 2014-04-24
MX346605B (es) 2017-03-24
EP3425485B1 (en) 2020-12-02
WO2014061916A1 (en) 2014-04-24
EP2735938A3 (en) 2015-01-07

Similar Documents

Publication Publication Date Title
RU2015114537A (ru) Устройство отображения и его способ управления
KR102062310B1 (ko) 전자 장치에서 헤드 트래킹 기술을 이용하여 제어 서비스를 제공하기 위한 장치 및 방법
JP6143975B1 (ja) 画像の取り込みを支援するためにハプティックフィードバックを提供するためのシステムおよび方法
US10049665B2 (en) Voice recognition method and apparatus using video recognition
RU2618502C2 (ru) Способ и устройство для выдачи подсказок по очистке воздуха, пользовательское оборудование и система
US20190019515A1 (en) Optimum control method based on multi-mode command of operation-voice, and electronic device to which same is applied
KR102246900B1 (ko) 전자 장치 및 이의 음성 인식 방법
EP3239975A1 (en) Information processing device, information processing method, and program
KR102339657B1 (ko) 전자 장치 및 이의 제어 방법
US20190019513A1 (en) Information processing device, information processing method, and program
US10089061B2 (en) Electronic device and method
WO2017024711A1 (zh) 智能家居设备的控制方法、装置、系统及设备
JP2017506402A (ja) タッチボタンと指紋認識とを実現するための方法、装置、端末機器、プログラム及び記録媒体
KR20150112337A (ko) 디스플레이 장치 및 그 사용자 인터랙션 방법
CN104615359B (zh) 对应用软件进行语音操作的方法及装置
CN106105247B (zh) 显示装置及其控制方法
KR102392087B1 (ko) 원격 조정 장치 및 원격 조정 장치의 사용자 음성 수신방법
KR20130016016A (ko) 음성 인식 및 모션 인식을 이용하는 전자 장치의 제어 방법 및 이를 적용한 전자 장치
KR20150012464A (ko) 디스플레이 장치 및 개인화 서비스 제공 방법
JP2015090547A (ja) 情報入力装置及び情報入力方法、並びにコンピューター・プログラム
JP2014095766A (ja) 情報処理装置、情報処理方法及びプログラム
EP3933570A1 (en) Method and apparatus for controlling a voice assistant, and computer-readable storage medium
US10466795B2 (en) Mobile input device and command input method using the same
US20190129517A1 (en) Remote control by way of sequences of keyboard codes
KR102246555B1 (ko) 디지털 디바이스 및 그 제어 방법