JP6856712B2 - ヒューマンコンピュータインタラクション方法、装置、端末とコンピュータ可読記憶媒体 - Google Patents
ヒューマンコンピュータインタラクション方法、装置、端末とコンピュータ可読記憶媒体 Download PDFInfo
- Publication number
- JP6856712B2 JP6856712B2 JP2019128999A JP2019128999A JP6856712B2 JP 6856712 B2 JP6856712 B2 JP 6856712B2 JP 2019128999 A JP2019128999 A JP 2019128999A JP 2019128999 A JP2019128999 A JP 2019128999A JP 6856712 B2 JP6856712 B2 JP 6856712B2
- Authority
- JP
- Japan
- Prior art keywords
- response
- control signal
- interaction information
- sensor
- response control
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
- 230000003993 interaction Effects 0.000 title claims description 154
- 238000000034 method Methods 0.000 title claims description 66
- 230000004044 response Effects 0.000 claims description 300
- 230000000007 visual effect Effects 0.000 claims description 55
- 230000009471 action Effects 0.000 claims description 16
- 230000003287 optical effect Effects 0.000 claims description 11
- 238000004590 computer program Methods 0.000 claims description 6
- 238000010079 rubber tapping Methods 0.000 claims description 3
- 230000005855 radiation Effects 0.000 claims description 2
- 230000004936 stimulating effect Effects 0.000 claims 2
- 238000010586 diagram Methods 0.000 description 4
- 238000005516 engineering process Methods 0.000 description 3
- 230000035807 sensation Effects 0.000 description 3
- 230000006870 function Effects 0.000 description 2
- 230000006872 improvement Effects 0.000 description 2
- 230000002093 peripheral effect Effects 0.000 description 2
- 230000008569 process Effects 0.000 description 2
- 238000012545 processing Methods 0.000 description 2
- 230000005540 biological transmission Effects 0.000 description 1
- 238000004891 communication Methods 0.000 description 1
- 238000011161 development Methods 0.000 description 1
- 230000000694 effects Effects 0.000 description 1
- 230000002708 enhancing effect Effects 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 230000001953 sensory effect Effects 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
- G06F3/0487—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser
- G06F3/0488—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures
-
- H—ELECTRICITY
- H03—ELECTRONIC CIRCUITRY
- H03K—PULSE TECHNIQUE
- H03K17/00—Electronic switching or gating, i.e. not by contact-making and –breaking
- H03K17/94—Electronic switching or gating, i.e. not by contact-making and –breaking characterised by the way in which the control signals are generated
- H03K17/96—Touch switches
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/016—Input arrangements with force or tactile feedback as computer generated output to the user
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
- G06F3/0487—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser
-
- H—ELECTRICITY
- H01—ELECTRIC ELEMENTS
- H01H—ELECTRIC SWITCHES; RELAYS; SELECTORS; EMERGENCY PROTECTIVE DEVICES
- H01H13/00—Switches having rectilinearly-movable operating part or parts adapted for pushing or pulling in one direction only, e.g. push-button switch
- H01H13/70—Switches having rectilinearly-movable operating part or parts adapted for pushing or pulling in one direction only, e.g. push-button switch having a plurality of operating members associated with different sets of contacts, e.g. keyboard
- H01H13/84—Switches having rectilinearly-movable operating part or parts adapted for pushing or pulling in one direction only, e.g. push-button switch having a plurality of operating members associated with different sets of contacts, e.g. keyboard characterised by ergonomic functions, e.g. for miniature keyboards; characterised by operational sensory functions, e.g. sound feedback
- H01H13/85—Switches having rectilinearly-movable operating part or parts adapted for pushing or pulling in one direction only, e.g. push-button switch having a plurality of operating members associated with different sets of contacts, e.g. keyboard characterised by ergonomic functions, e.g. for miniature keyboards; characterised by operational sensory functions, e.g. sound feedback characterised by tactile feedback features
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F2203/00—Indexing scheme relating to G06F3/00 - G06F3/048
- G06F2203/01—Indexing scheme relating to G06F3/01
- G06F2203/013—Force feedback applied to a game
-
- H—ELECTRICITY
- H01—ELECTRIC ELEMENTS
- H01H—ELECTRIC SWITCHES; RELAYS; SELECTORS; EMERGENCY PROTECTIVE DEVICES
- H01H2215/00—Tactile feedback
- H01H2215/044—Light
-
- H—ELECTRICITY
- H01—ELECTRIC ELEMENTS
- H01H—ELECTRIC SWITCHES; RELAYS; SELECTORS; EMERGENCY PROTECTIVE DEVICES
- H01H2215/00—Tactile feedback
- H01H2215/05—Tactile feedback electromechanical
-
- H—ELECTRICITY
- H03—ELECTRONIC CIRCUITRY
- H03K—PULSE TECHNIQUE
- H03K2217/00—Indexing scheme related to electronic switching or gating, i.e. not by contact-making or -breaking covered by H03K17/00
- H03K2217/94—Indexing scheme related to electronic switching or gating, i.e. not by contact-making or -breaking covered by H03K17/00 characterised by the way in which the control signal is generated
- H03K2217/96—Touch switches
- H03K2217/96042—Touch switches with illumination
-
- H—ELECTRICITY
- H03—ELECTRONIC CIRCUITRY
- H03K—PULSE TECHNIQUE
- H03K2217/00—Indexing scheme related to electronic switching or gating, i.e. not by contact-making or -breaking covered by H03K17/00
- H03K2217/94—Indexing scheme related to electronic switching or gating, i.e. not by contact-making or -breaking covered by H03K17/00 characterised by the way in which the control signal is generated
- H03K2217/96—Touch switches
- H03K2217/96062—Touch switches with tactile or haptic feedback
Landscapes
- Engineering & Computer Science (AREA)
- General Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- Human Computer Interaction (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- User Interface Of Digital Computer (AREA)
Description
Claims (8)
- 端末に用いられるヒューマンコンピュータインタラクション方法であって、
タッチ方式でインタラクション情報を取得するセンサを含むセンサによって取得されたユーザのインタラクション情報を受信するステップと、
前記インタラクション情報に対応する、触覚応答制御信号と視覚応答制御信号とを含む応答制御信号を特定するステップと、
前記触覚応答制御信号に基づいて対応する触覚応答レスポンスを生成し、前記視覚応答制御信号に基づいて対応する視覚応答レスポンスを生成するステップと、を含み、
前記触覚応答レスポンスは、触覚を刺激するレスポンス動作を前記ユーザに提供するために用いられ、前記視覚応答レスポンスは、視認可能なレスポンス動作を前記ユーザに提供するために用いられ、
センサによって取得されたユーザのインタラクション情報を受信するステップの前に、
前記インタラクション情報と前記応答制御信号との間の対応関係を予め記憶するステップをさらに含み、
前記インタラクション情報に対応する応答制御信号を特定するステップは、具体的に、
前記インタラクション情報に対応する応答制御信号を前記対応関係から検索し、検索できた場合に、検索された前記応答制御信号を取得し、検索できなかった場合に、デフォルトの応答制御信号を採用することを含む
ことを特徴とするヒューマンコンピュータインタラクション方法。 - 前記触覚応答レスポンスは、振動を含み、前記視覚応答レスポンスは、可視光の放射を含む
ことを特徴とする請求項1に記載のヒューマンコンピュータインタラクション方法。 - 前記可視光の放射は、少なくとも一つの光源によるレスポンスで実施される
ことを特徴とする請求項2に記載のヒューマンコンピュータインタラクション方法。 - 前記タッチ方式は、押圧、タッチ、または、叩きを含む
ことを特徴とする請求項1または2に記載のヒューマンコンピュータインタラクション方法。 - 前記センサは、温度センサと光センサと湿度センサとの1つまたは複数の組み合わせをさらに含み、
前記センサが温度センサを含む場合に、前記温度センサによって取得された温度値は、タッチ方式で取得されたインタラクション情報によって生成された触覚応答レスポンスの強度に比例し、
前記センサが光センサを含む場合に、前記光センサによって取得された光強度値は、タッチ方式で取得されたインタラクション情報によって生成された視覚応答レスポンスの強度に比例し、
前記センサが湿度センサをさらに含む場合に、前記湿度センサによって取得された湿度値が所定値に達すると、前記視覚応答レスポンスには、湿度値を反映させるための視覚レスポンスがさらに含まれる
ことを特徴とする請求項1または3に記載のヒューマンコンピュータインタラクション方法。 - ヒューマンコンピュータインタラクション装置であって、
受信装置と、特定装置と、応答レスポンス生成装置とを備え、
前記受信装置は、センサによって取得されたユーザのインタラクション情報を受信し、前記センサは、タッチ方式によってインタラクション情報を取得するセンサを含み、
前記特定装置は、前記インタラクション情報に対応する応答制御信号を特定し、前記応答制御信号は、触覚応答制御信号と視覚応答制御信号とを含み、
前記応答レスポンス生成装置は、前記触覚応答制御信号に基づいて対応する触覚応答レスポンスを生成し、前記視覚応答制御信号に基づいて対応する視覚応答レスポンスを生成し、
前記触覚応答レスポンスは、触覚を刺激するレスポンス動作を前記ユーザに提供するために用いられ、前記視覚応答レスポンスは、視認可能なレスポンス動作を前記ユーザに提供するために用いられ、
前記センサによって取得された前記ユーザのインタラクション情報を前記受信装置が受信する前に、前記ヒューマンコンピュータインタラクション装置は、前記インタラクション情報と前記応答制御信号との間の対応関係を予め記憶し、
前記特定装置は、前記インタラクション情報に対応する応答制御信号を特定する際に、前記インタラクション情報に対応する応答制御信号を前記対応関係から検索し、検索できた場合に、検索された前記応答制御信号を取得し、検索できなかった場合に、デフォルトの応答制御信号を採用する
ことを特徴とするヒューマンコンピュータインタラクション装置。 - 少なくとも一つのプロセッサと、
前記少なくとも一つのプロセッサに通信接続されるメモリと、を備え、
前記メモリには、前記少なくとも一つのプロセッサで実行可能な命令が記憶され、前記命令が前記少なくとも一つのプロセッサで実行されることにより、前記少なくとも一つのプロセッサが請求項1乃至5のいずれか1項に記載のヒューマンコンピュータインタラクション方法を実施可能である
ことを特徴とする端末。 - コンピュータプログラムが記憶されるコンピュータ可読記憶媒体であって、
前記コンピュータプログラムがプロセッサによって実行されるとき、請求項1乃至5のいずれか1項に記載のヒューマンコンピュータインタラクション方法が実施される
ことを特徴とするコンピュータ可読記憶媒体。
Applications Claiming Priority (2)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201810895923.6A CN109240585A (zh) | 2018-08-08 | 2018-08-08 | 一种人机交互的方法、装置、终端和计算机可读存储介质 |
CN201810895923.6 | 2018-08-08 |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2020024684A JP2020024684A (ja) | 2020-02-13 |
JP6856712B2 true JP6856712B2 (ja) | 2021-04-07 |
Family
ID=65071323
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2019128999A Active JP6856712B2 (ja) | 2018-08-08 | 2019-07-11 | ヒューマンコンピュータインタラクション方法、装置、端末とコンピュータ可読記憶媒体 |
Country Status (3)
Country | Link |
---|---|
US (1) | US20200050275A1 (ja) |
JP (1) | JP6856712B2 (ja) |
CN (1) | CN109240585A (ja) |
Families Citing this family (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN110853634B (zh) * | 2019-09-30 | 2023-03-10 | 珠海格力节能环保制冷技术研究中心有限公司 | 一种多模态语音交互反馈应答控制方法、计算机可读存储介质及空调 |
CN112445410B (zh) * | 2020-12-07 | 2023-04-18 | 北京小米移动软件有限公司 | 触控事件识别方法、装置及计算机可读存储介质 |
CN112882567B (zh) * | 2021-01-26 | 2022-11-04 | 华为技术有限公司 | 人机交互方法、人机交互装置及存储介质 |
Family Cites Families (8)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US20090102805A1 (en) * | 2007-10-18 | 2009-04-23 | Microsoft Corporation | Three-dimensional object simulation using audio, visual, and tactile feedback |
US9280206B2 (en) * | 2012-08-20 | 2016-03-08 | Samsung Electronics Co., Ltd. | System and method for perceiving images with multimodal feedback |
CN103869933B (zh) * | 2012-12-11 | 2017-06-27 | 联想(北京)有限公司 | 信息处理的方法和终端设备 |
US9524030B2 (en) * | 2013-04-26 | 2016-12-20 | Immersion Corporation | Haptic feedback for interactions with foldable-bendable displays |
US10055062B2 (en) * | 2016-03-29 | 2018-08-21 | Microsoft Technology Licensing, Llc | Pressure sensing display |
DK179823B1 (en) * | 2016-06-12 | 2019-07-12 | Apple Inc. | DEVICES, METHODS, AND GRAPHICAL USER INTERFACES FOR PROVIDING HAPTIC FEEDBACK |
CN107329576A (zh) * | 2017-07-07 | 2017-11-07 | 瑞声科技(新加坡)有限公司 | 触觉反馈系统以及触觉反馈的调整方法 |
KR102477161B1 (ko) * | 2017-11-14 | 2022-12-14 | 삼성전자주식회사 | 어플리케이션을 구동하는 전자 장치 |
-
2018
- 2018-08-08 CN CN201810895923.6A patent/CN109240585A/zh not_active Withdrawn
-
2019
- 2019-07-11 JP JP2019128999A patent/JP6856712B2/ja active Active
- 2019-08-01 US US16/528,692 patent/US20200050275A1/en not_active Abandoned
Also Published As
Publication number | Publication date |
---|---|
US20200050275A1 (en) | 2020-02-13 |
CN109240585A (zh) | 2019-01-18 |
JP2020024684A (ja) | 2020-02-13 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP6856712B2 (ja) | ヒューマンコンピュータインタラクション方法、装置、端末とコンピュータ可読記憶媒体 | |
KR102419624B1 (ko) | 전자 장치의 센서 배치 구조 | |
US10372206B2 (en) | Eye-controlled apparatus, eye-controlled method and eye-controlled system | |
EP2891966A1 (en) | Electronic glasses and method for correcting color blindness | |
CN106293055B (zh) | 电子设备以及用于提供其触觉反馈的方法 | |
EP3312752A1 (en) | Electronic device and method for acquiring fingerprint information | |
KR102229699B1 (ko) | 정보 운용 방법 및 전자 장치 | |
KR102237373B1 (ko) | 전자 장치의 태스크 스케줄링 방법 및 이를 사용하는 전자 장치 | |
CN105589336A (zh) | 多处理器设备 | |
KR102548199B1 (ko) | 전자 장치 및 전자 장치의 시선 추적 방법 | |
CN109416676B (zh) | 用于确定电子设备的角色的方法及其电子设备 | |
US9167429B2 (en) | Visible light communication system, communication terminal and server | |
US11199709B2 (en) | Electronic device, external electronic device and method for connecting electronic device and external electronic device | |
KR102206877B1 (ko) | 생체 정보디스플레이 방법 및 장치 | |
CN105630326A (zh) | 电子设备和控制电子设备中的对象的方法 | |
CN114740981B (zh) | 信息处理方法、装置、可读介质、电子设备及程序产品 | |
US20150187326A1 (en) | Method for Displaying a Content Through Either a Head Mounted Display Device or a Display Device, Corresponding Head Mounted Display Device and Computer Program Product | |
CN106507005A (zh) | 背光亮度的调节方法及装置 | |
EP3309733A1 (en) | Electronic device for transmitting data and method for controlling the same | |
CN113391732A (zh) | 一种投影仪的交互方法、系统和计算机可读存储介质 | |
KR102318808B1 (ko) | 여러 종류의 전자 펜을 사용하기 위한 방법 및 그 전자 장치 | |
KR101871880B1 (ko) | 두뇌 활성화 장치 및 그 방법 | |
US20150002410A1 (en) | Electronic apparatus and touch sensing method thereof | |
CN107239145B (zh) | 触觉反馈装置及方法 | |
US11307082B2 (en) | Method for monitoring motor vibration, terminal device, and computer readable storage medium |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20190711 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20200811 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20200818 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20201117 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20210316 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20210318 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 6856712 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |