JP2021170370A - スマートデバイスの識別および制御 - Google Patents
スマートデバイスの識別および制御 Download PDFInfo
- Publication number
- JP2021170370A JP2021170370A JP2021115685A JP2021115685A JP2021170370A JP 2021170370 A JP2021170370 A JP 2021170370A JP 2021115685 A JP2021115685 A JP 2021115685A JP 2021115685 A JP2021115685 A JP 2021115685A JP 2021170370 A JP2021170370 A JP 2021170370A
- Authority
- JP
- Japan
- Prior art keywords
- smart device
- virtual assistant
- smart
- user
- control
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
Images
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
- H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
- H04N21/436—Interfacing a local distribution network, e.g. communicating with another STB or one or more peripheral devices inside the home
- H04N21/43615—Interfacing a Home Network, e.g. for connecting the client to a plurality of peripherals
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
- G06F3/0484—Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F1/00—Details not covered by groups G06F3/00 - G06F13/00 and G06F21/00
- G06F1/16—Constructional details or arrangements
- G06F1/1613—Constructional details or arrangements for portable computers
- G06F1/1633—Constructional details or arrangements of portable computers not specific to the type of enclosures covered by groups G06F1/1615 - G06F1/1626
- G06F1/1684—Constructional details or arrangements related to integrated I/O peripherals not covered by groups G06F1/1635 - G06F1/1675
- G06F1/1686—Constructional details or arrangements related to integrated I/O peripherals not covered by groups G06F1/1635 - G06F1/1675 the I/O peripheral being an integrated camera
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F1/00—Details not covered by groups G06F3/00 - G06F13/00 and G06F21/00
- G06F1/16—Constructional details or arrangements
- G06F1/1613—Constructional details or arrangements for portable computers
- G06F1/1633—Constructional details or arrangements of portable computers not specific to the type of enclosures covered by groups G06F1/1615 - G06F1/1626
- G06F1/1684—Constructional details or arrangements related to integrated I/O peripherals not covered by groups G06F1/1635 - G06F1/1675
- G06F1/1698—Constructional details or arrangements related to integrated I/O peripherals not covered by groups G06F1/1635 - G06F1/1675 the I/O peripheral being a sending/receiving arrangement to establish a cordless communication link, e.g. radio or infrared link, integrated cellular phone
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/011—Arrangements for interaction with the human body, e.g. for user immersion in virtual reality
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/03—Arrangements for converting the position or the displacement of a member into a coded form
- G06F3/0304—Detection arrangements using opto-electronic means
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
- G06F3/0481—Interaction techniques based on graphical user interfaces [GUI] based on specific properties of the displayed interaction object or a metaphor-based environment, e.g. interaction with desktop elements like windows or icons, or assisted by a cursor's changing behaviour or appearance
- G06F3/0482—Interaction with lists of selectable items, e.g. menus
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
- G06F3/0484—Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range
- G06F3/04847—Interaction techniques to control parameter settings, e.g. interaction with sliders or dials
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/16—Sound input; Sound output
- G06F3/167—Audio in a user interface, e.g. using voice commands for navigating, audio feedback
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F9/00—Arrangements for program control, e.g. control units
- G06F9/06—Arrangements for program control, e.g. control units using stored programs, i.e. using an internal store of processing equipment to receive or retain programs
- G06F9/44—Arrangements for executing specific programs
- G06F9/451—Execution arrangements for user interfaces
- G06F9/453—Help systems
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T19/00—Manipulating 3D models or images for computer graphics
- G06T19/006—Mixed reality
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V20/00—Scenes; Scene-specific elements
- G06V20/20—Scenes; Scene-specific elements in augmented reality scenes
-
- G—PHYSICS
- G08—SIGNALLING
- G08C—TRANSMISSION SYSTEMS FOR MEASURED VALUES, CONTROL OR SIMILAR SIGNALS
- G08C17/00—Arrangements for transmitting signals characterised by the use of a wireless electrical link
- G08C17/02—Arrangements for transmitting signals characterised by the use of a wireless electrical link using a radio link
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04M—TELEPHONIC COMMUNICATION
- H04M1/00—Substation equipment, e.g. for use by subscribers
- H04M1/72—Mobile telephones; Cordless telephones, i.e. devices for establishing wireless links to base stations without route selection
- H04M1/724—User interfaces specially adapted for cordless or mobile telephones
- H04M1/72403—User interfaces specially adapted for cordless or mobile telephones with means for local support of applications that increase the functionality
- H04M1/72409—User interfaces specially adapted for cordless or mobile telephones with means for local support of applications that increase the functionality by interfacing with external accessories
- H04M1/72415—User interfaces specially adapted for cordless or mobile telephones with means for local support of applications that increase the functionality by interfacing with external accessories for remote control of appliances
-
- G—PHYSICS
- G08—SIGNALLING
- G08C—TRANSMISSION SYSTEMS FOR MEASURED VALUES, CONTROL OR SIMILAR SIGNALS
- G08C2201/00—Transmission systems of control signals via wireless link
- G08C2201/30—User interface
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04M—TELEPHONIC COMMUNICATION
- H04M2250/00—Details of telephonic subscriber devices
- H04M2250/52—Details of telephonic subscriber devices including functional features of a camera
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04W—WIRELESS COMMUNICATION NETWORKS
- H04W88/00—Devices specially adapted for wireless communication networks, e.g. terminals, base stations or access point devices
- H04W88/02—Terminal devices
Landscapes
- Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- General Engineering & Computer Science (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Human Computer Interaction (AREA)
- Computer Hardware Design (AREA)
- Multimedia (AREA)
- Software Systems (AREA)
- Signal Processing (AREA)
- Computer Networks & Wireless Communication (AREA)
- General Health & Medical Sciences (AREA)
- Audiology, Speech & Language Pathology (AREA)
- Health & Medical Sciences (AREA)
- Computer Graphics (AREA)
- User Interface Of Digital Computer (AREA)
Abstract
Description
110 モバイルデバイス
111 カメラ
113 マイクロフォン
115 オブジェクト
116 仮想アシスタントアプリケーション
119 インターフェースコントロール
120 音声認識器
123 画像データ
124 ロケーションデータ
125 オブジェクト認識器
126 識別されたオブジェクトデータ
130 スマートデバイスコントロールセレクタ
131 インターフェースコントロール識別データ
135 ユーザインターフェース生成器、インターフェース生成器
136、212、222、322、332 ユーザインターフェース
138 提示データ
140 ユーザインターフェースコントロールインデックス、コントロールインデックス
150 データ通信ネットワーク、ネットワーク
160 仮想アシスタント管理システム
161 フロントエンドサーバ
162 バックエンドサーバ
165 スマートデバイスコントロール選択エンジン、スマートデバイスコントロールセレクタエンジン
166 スマートデバイスコントロール記憶ユニット
167 アカウント管理エンジン
168 登録データ
210、310 スクリーンショット、第1のスクリーンショット
215 音声アシスタントデバイス
220、320 スクリーンショット、第2のスクリーンショット
224 ユーザインターフェースコントロール
226 音量トグルバー
228 音楽制御ボタン
312 インターフェース
315 物理的コントロール
324 ユーザインターフェースコントロール、インターフェースコントロール
325 「ON」トグルボタン
326 調光トグルバー
330 スクリーンショット、第3のスクリーンショット
334 「OFF」トグルボタン
500 コンピュータシステム、システム
510 プロセッサ、構成要素
520 メモリ、構成要素
530 記憶デバイス、構成要素
540 入出力デバイス、構成要素
550 システムバス
560 他の入出力デバイス、たとえば、キーボード、プリンタ、およびディスプレイデバイス
Claims (20)
ユーザのモバイルデバイスのカメラによって取り込まれた画像のための画像データを受信するステップと、
前記画像データに基づいて、前記画像がスマートデバイスまたは前記スマートデバイスのための物理的コントロールのうちの少なくとも1つを示すと決定するステップと、
前記画像がスマートデバイスまたは前記スマートデバイスのための物理的コントロールのうちの少なくとも1つを示すとの決定に応答して、前記スマートデバイスを制御するための1つまたは複数のユーザインターフェースコントロールを識別するステップと、
前記モバイルデバイスのディスプレイにおいて、前記スマートデバイスを制御するための前記1つまたは複数のユーザインターフェースコントロールを生成および提示するステップと、
前記モバイルデバイスの前記ディスプレイにおいて、前記1つまたは複数のユーザインターフェースコントロールのうちの少なくとも1つとのユーザ対話を検出するステップと、
前記検出されたユーザ対話に基づいて、前記スマートデバイスを制御するステップと
を含む方法。
をさらに含む、請求項3に記載の方法。
前記仮想アシスタントスマートスピーカーデバイスが現在実施中であるタスクまたはサービスを決定するステップと、
前記タスクまたはサービスを制御するための1つまたは複数のユーザインターフェースコントロールを選択するステップと
を含む、請求項8に記載の方法。
前記スマートデバイスが前記ユーザのデバイスであることを確認するように、前記ユーザにプロンプトを出すステップと、
前記ユーザから確認を受信するステップと
を含む、請求項1に記載の方法。
1つまたは複数のデータ処理装置と、
前記1つまたは複数のデータ処理装置とデータ通信しているメモリ記憶装置と
を備え、前記メモリ記憶装置が、前記1つまたは複数のデータ処理装置によって実行可能な命令であって、その実行時に、前記1つまたは複数のデータ処理装置に動作を実行させる、命令を記憶し、前記動作が、
ユーザのモバイルデバイスのカメラによって取り込まれた画像のための画像データを受信すること、
前記画像データに基づいて、前記画像がスマートデバイスまたは前記スマートデバイスのための物理的コントロールのうちの少なくとも1つを示すと決定すること、
前記画像がスマートデバイスまたは前記スマートデバイスのための物理的コントロールのうちの少なくとも1つを示すとの決定に応答して、前記スマートデバイスを制御するための1つまたは複数のユーザインターフェースコントロールを識別すること、
前記モバイルデバイスのディスプレイにおいて、前記スマートデバイスを制御するための前記1つまたは複数のユーザインターフェースコントロールを生成および提示すること、
前記モバイルデバイスの前記ディスプレイにおいて、前記1つまたは複数のユーザインターフェースコントロールのうちの少なくとも1つとのユーザ対話を検出すること、ならびに
前記検出されたユーザ対話に基づいて、前記スマートデバイスを制御すること
を含む、システム。
前記画像が前記モバイルデバイスにおいて提示されるときの前記モバイルデバイスが、前記仮想アシスタント制御デバイスを制御することが可能であると決定すること
をさらに含む、請求項14に記載のシステム。
ユーザのモバイルデバイスのカメラによって取り込まれた画像のための画像データを受信すること、
前記画像データに基づいて、前記画像がスマートデバイスまたは前記スマートデバイスのための物理的コントロールのうちの少なくとも1つを示すと決定すること、
前記画像がスマートデバイスまたは前記スマートデバイスのための物理的コントロールのうちの少なくとも1つを示すとの決定に応答して、前記スマートデバイスを制御するための1つまたは複数のユーザインターフェースコントロールを識別すること、
前記モバイルデバイスのディスプレイにおいて、前記スマートデバイスを制御するための前記1つまたは複数のユーザインターフェースコントロールを生成および提示すること、
前記モバイルデバイスの前記ディスプレイにおいて、前記1つまたは複数のユーザインターフェースコントロールのうちの少なくとも1つとのユーザ対話を検出すること、ならびに
前記検出されたユーザ対話に基づいて、前記スマートデバイスを制御すること
を含む、非一時的コンピュータ記憶媒体。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2022080934A JP2022107645A (ja) | 2018-06-25 | 2022-05-17 | スマートデバイスの識別および制御 |
Applications Claiming Priority (3)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
US16/017,394 | 2018-06-25 | ||
US16/017,394 US10725629B2 (en) | 2018-06-25 | 2018-06-25 | Identifying and controlling smart devices |
JP2020546363A JP6915169B2 (ja) | 2018-06-25 | 2019-06-14 | スマートデバイスの識別および制御 |
Related Parent Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2020546363A Division JP6915169B2 (ja) | 2018-06-25 | 2019-06-14 | スマートデバイスの識別および制御 |
Related Child Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2022080934A Division JP2022107645A (ja) | 2018-06-25 | 2022-05-17 | スマートデバイスの識別および制御 |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2021170370A true JP2021170370A (ja) | 2021-10-28 |
JP7077463B2 JP7077463B2 (ja) | 2022-05-30 |
Family
ID=67108213
Family Applications (3)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2020546363A Active JP6915169B2 (ja) | 2018-06-25 | 2019-06-14 | スマートデバイスの識別および制御 |
JP2021115685A Active JP7077463B2 (ja) | 2018-06-25 | 2021-07-13 | スマートデバイスの識別および制御 |
JP2022080934A Pending JP2022107645A (ja) | 2018-06-25 | 2022-05-17 | スマートデバイスの識別および制御 |
Family Applications Before (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2020546363A Active JP6915169B2 (ja) | 2018-06-25 | 2019-06-14 | スマートデバイスの識別および制御 |
Family Applications After (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2022080934A Pending JP2022107645A (ja) | 2018-06-25 | 2022-05-17 | スマートデバイスの識別および制御 |
Country Status (7)
Country | Link |
---|---|
US (4) | US10725629B2 (ja) |
EP (2) | EP3797521B1 (ja) |
JP (3) | JP6915169B2 (ja) |
KR (1) | KR102211014B1 (ja) |
CN (2) | CN114666650B (ja) |
ES (1) | ES2963118T3 (ja) |
WO (1) | WO2020005575A1 (ja) |
Cited By (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO2023067914A1 (ja) | 2021-10-18 | 2023-04-27 | パナソニックIpマネジメント株式会社 | 散水装置及び散水方法 |
Families Citing this family (44)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CA3062818A1 (en) | 2017-04-26 | 2018-11-01 | View, Inc. | Displays for tintable windows |
US11892738B2 (en) | 2017-04-26 | 2024-02-06 | View, Inc. | Tandem vision window and media display |
US10725629B2 (en) * | 2018-06-25 | 2020-07-28 | Google Llc | Identifying and controlling smart devices |
US11132681B2 (en) | 2018-07-06 | 2021-09-28 | At&T Intellectual Property I, L.P. | Services for entity trust conveyances |
WO2020022780A1 (en) * | 2018-07-25 | 2020-01-30 | Samsung Electronics Co., Ltd. | Method and apparatus for establishing device connection |
US10923141B2 (en) * | 2018-08-06 | 2021-02-16 | Spotify Ab | Singing voice separation with deep u-net convolutional networks |
US10977555B2 (en) | 2018-08-06 | 2021-04-13 | Spotify Ab | Automatic isolation of multiple instruments from musical mixtures |
US10991385B2 (en) | 2018-08-06 | 2021-04-27 | Spotify Ab | Singing voice separation with deep U-Net convolutional networks |
US10802872B2 (en) | 2018-09-12 | 2020-10-13 | At&T Intellectual Property I, L.P. | Task delegation and cooperation for automated assistants |
KR102460511B1 (ko) * | 2018-09-24 | 2022-10-28 | 구글 엘엘씨 | 디바이스 및/또는 디바이스의 설치 환경을 캡처하는 이미지 데이터의 처리에 기초한 디바이스 제어 |
KR102620363B1 (ko) * | 2018-10-12 | 2024-01-04 | 삼성전자주식회사 | 모바일 장치 및 모바일 장치의 제어 방법 |
US11481186B2 (en) | 2018-10-25 | 2022-10-25 | At&T Intellectual Property I, L.P. | Automated assistant context and protocol |
EP3892069B1 (en) * | 2018-12-03 | 2023-06-07 | Signify Holding B.V. | Determining a control mechanism based on a surrounding of a remote controllable device |
US20200193264A1 (en) * | 2018-12-14 | 2020-06-18 | At&T Intellectual Property I, L.P. | Synchronizing virtual agent behavior bias to user context and personality attributes |
US10482678B1 (en) * | 2018-12-14 | 2019-11-19 | Capital One Services, Llc | Systems and methods for displaying video from a remote beacon device |
US20200260223A1 (en) * | 2019-02-11 | 2020-08-13 | Spellbound Development Group, Inc. | System and method for object and location-related delivery of real-time messages |
CN111752443A (zh) * | 2019-03-28 | 2020-10-09 | 华为技术有限公司 | 显示设备控制页面的方法、相关装置及系统 |
US11521384B1 (en) * | 2019-07-01 | 2022-12-06 | Alarm.Com Incorporated | Monitoring system integration with augmented reality devices |
US11445107B2 (en) * | 2019-08-08 | 2022-09-13 | Qorvo Us, Inc. | Supervised setup for control device with imager |
US20210121784A1 (en) * | 2019-10-23 | 2021-04-29 | Sony Interactive Entertainment Inc. | Like button |
US11089109B1 (en) * | 2019-11-20 | 2021-08-10 | Sprint Communications Company L.P. | Smart device management via a mobile communication device based on privacy preferences |
US20230124173A1 (en) * | 2020-03-12 | 2023-04-20 | Maxell, Ltd. | Information terminal device and application operation mode control method of same |
US11010129B1 (en) * | 2020-05-08 | 2021-05-18 | International Business Machines Corporation | Augmented reality user interface |
US20210358294A1 (en) * | 2020-05-15 | 2021-11-18 | Microsoft Technology Licensing, Llc | Holographic device control |
WO2022050433A1 (ko) * | 2020-09-01 | 2022-03-10 | 엘지전자 주식회사 | 음성 인식 기동어의 인식 민감도를 조절하는 디스플레이 장치 및 그의 동작 방법 |
JP2022042036A (ja) * | 2020-09-02 | 2022-03-14 | 株式会社リコー | 機器管理システム、機器管理方法およびプログラム |
TW202225941A (zh) * | 2020-11-03 | 2022-07-01 | 美商視野公司 | 虛擬檢視設施中之裝置 |
CN112783467A (zh) * | 2020-12-31 | 2021-05-11 | 读书郎教育科技有限公司 | 一种穿戴式设备截屏控制系统及方法 |
US11947783B2 (en) * | 2021-01-25 | 2024-04-02 | Google Llc | Undoing application operation(s) via user interaction(s) with an automated assistant |
US20220239523A1 (en) * | 2021-01-27 | 2022-07-28 | AVAST Software s.r.o. | Universal virtual remote control for smart devices |
US11832028B2 (en) * | 2021-03-11 | 2023-11-28 | Objectvideo Labs, Llc | Doorbell avoidance techniques |
JP2022178205A (ja) * | 2021-05-19 | 2022-12-02 | キヤノン株式会社 | 制御装置およびその制御方法 |
AT17724U1 (de) * | 2021-06-10 | 2022-12-15 | Ars Electronica Linz Gmbh & Co Kg | System zur räumlich begrenzten Aktivierung einer Steuereinheit |
EP4113987B1 (en) * | 2021-06-29 | 2023-11-08 | Axis AB | System, camera device, method, and computer program for displaying collected sensor data together with images |
US11579752B1 (en) * | 2021-07-20 | 2023-02-14 | Sony Interactive Entertainment Inc. | Augmented reality placement for user feedback |
IT202100022940A1 (it) * | 2021-09-06 | 2023-03-06 | Candy Spa | Metodo per assistere un utente nell’uso e/o nell’esplorazione delle funzionalità di un elettrodomestico, mediante impiego di realtà aumentata |
US11960652B2 (en) * | 2021-10-12 | 2024-04-16 | Qualcomm Incorporated | User interactions with remote devices |
CN113849118A (zh) * | 2021-10-20 | 2021-12-28 | 锐捷网络股份有限公司 | 一种应用于电子白板的图像识别方法及相关装置 |
US11930270B2 (en) | 2021-10-29 | 2024-03-12 | Snap Inc. | Identifying a video camera for an object |
US11579755B1 (en) * | 2022-03-08 | 2023-02-14 | Amazon Technologies, Inc. | Dynamic address-based dashboard customization |
JP2023151540A (ja) * | 2022-03-31 | 2023-10-16 | パナソニックホールディングス株式会社 | 表示システム、表示方法及びプログラム |
TWI804294B (zh) * | 2022-04-28 | 2023-06-01 | 中華電信股份有限公司 | 用於擴增實境協作之遠端設備控制系統、方法及電腦可讀媒介 |
US20240077935A1 (en) * | 2022-09-01 | 2024-03-07 | Youjean Cho | Virtual interfaces for controlling iot devices |
JP2024067727A (ja) * | 2022-11-07 | 2024-05-17 | キヤノン株式会社 | 情報処理装置、情報処理方法、及びコンピュータプログラム |
Citations (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2015100085A (ja) * | 2013-11-20 | 2015-05-28 | ヤマハ株式会社 | 同期再生システム及び同期再生装置 |
JP2015156610A (ja) * | 2014-02-21 | 2015-08-27 | ソニー株式会社 | 電子機器、および電源制御方法 |
US20180157398A1 (en) * | 2016-12-05 | 2018-06-07 | Magic Leap, Inc. | Virtual user input controls in a mixed reality environment |
Family Cites Families (55)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US8818274B2 (en) | 2009-07-17 | 2014-08-26 | Qualcomm Incorporated | Automatic interfacing between a master device and object device |
US20150309316A1 (en) * | 2011-04-06 | 2015-10-29 | Microsoft Technology Licensing, Llc | Ar glasses with predictive control of external device based on event input |
US20140063054A1 (en) * | 2010-02-28 | 2014-03-06 | Osterhout Group, Inc. | Ar glasses specific control interface based on a connected external device type |
WO2013058820A1 (en) * | 2011-10-21 | 2013-04-25 | Nest Labs, Inc. | User-friendly, network connected learning thermostat and related systems and methods |
US9111138B2 (en) * | 2010-11-30 | 2015-08-18 | Cisco Technology, Inc. | System and method for gesture interface control |
US8977971B2 (en) * | 2010-12-24 | 2015-03-10 | General Electric Company | Metadata generation systems and methods |
US20120226981A1 (en) * | 2011-03-02 | 2012-09-06 | Microsoft Corporation | Controlling electronic devices in a multimedia system through a natural user interface |
US9462423B1 (en) * | 2011-07-12 | 2016-10-04 | Google Inc. | Qualitative and quantitative sensor fusion for indoor navigation |
US9329678B2 (en) * | 2012-08-14 | 2016-05-03 | Microsoft Technology Licensing, Llc | Augmented reality overlay for control devices |
US9165406B1 (en) | 2012-09-21 | 2015-10-20 | A9.Com, Inc. | Providing overlays based on text in a live camera view |
US20140181683A1 (en) * | 2012-12-21 | 2014-06-26 | Samsung Electronics Co., Ltd. | Method and system for controlling external device |
KR102171444B1 (ko) * | 2013-04-22 | 2020-10-29 | 엘지전자 주식회사 | 스마트 워치 및 제어 방법 |
US9639984B2 (en) * | 2013-06-03 | 2017-05-02 | Daqri, Llc | Data manipulation based on real world object manipulation |
US10140849B2 (en) * | 2013-10-07 | 2018-11-27 | Google Llc | Status indication triggering and user interfacing in a smart-home hazard detector |
US9282283B2 (en) * | 2014-01-29 | 2016-03-08 | Microsoft Technology Licensing, Llc | Detecting patterns traced on a screen of a user device |
WO2015120019A1 (en) * | 2014-02-10 | 2015-08-13 | Google Inc. | Smart camera user interface |
CN104977904B (zh) * | 2014-04-04 | 2018-06-19 | 浙江大学 | 一种可见即可控的智能家居控制系统及控制方法 |
JP6500477B2 (ja) | 2015-02-12 | 2019-04-17 | セイコーエプソン株式会社 | 頭部装着型表示装置、制御システム、頭部装着型表示装置の制御方法、および、コンピュータープログラム |
US9338493B2 (en) * | 2014-06-30 | 2016-05-10 | Apple Inc. | Intelligent automated assistant for TV user interactions |
SG10201405182WA (en) * | 2014-08-25 | 2016-03-30 | Univ Singapore Technology & Design | Method and system |
US9378467B1 (en) * | 2015-01-14 | 2016-06-28 | Microsoft Technology Licensing, Llc | User interaction pattern extraction for device personalization |
JP2016167385A (ja) | 2015-03-09 | 2016-09-15 | パナソニックIpマネジメント株式会社 | 携帯端末及び機器制御システム |
US10921896B2 (en) * | 2015-03-16 | 2021-02-16 | Facebook Technologies, Llc | Device interaction in augmented reality |
CN104714414B (zh) | 2015-03-25 | 2018-11-02 | 小米科技有限责任公司 | 智能家居设备的控制方法及装置、电子设备 |
US10007413B2 (en) * | 2015-04-27 | 2018-06-26 | Microsoft Technology Licensing, Llc | Mixed environment display of attached control elements |
CN113766636A (zh) * | 2015-05-12 | 2021-12-07 | 三星电子株式会社 | 用于在无线通信系统中估计位置的设备和方法 |
US10347118B2 (en) * | 2015-06-04 | 2019-07-09 | Griffin Innovation | Device and method for controlling a plurality of targeted devices |
US10200737B2 (en) | 2015-08-30 | 2019-02-05 | EVA Automation, Inc. | User interface based on device-state information |
CN105204742B (zh) | 2015-09-28 | 2019-07-09 | 小米科技有限责任公司 | 电子设备的控制方法、装置及终端 |
WO2017096082A1 (en) * | 2015-12-01 | 2017-06-08 | Drexel University | Beam visualization and using augmented reality for control and interaction |
US9927614B2 (en) | 2015-12-29 | 2018-03-27 | Microsoft Technology Licensing, Llc | Augmented reality display system with variable focus |
US10802695B2 (en) * | 2016-03-23 | 2020-10-13 | Youar Inc. | Augmented reality for the internet of things |
US10474297B2 (en) * | 2016-07-20 | 2019-11-12 | Ams Sensors Singapore Pte. Ltd. | Projecting a structured light pattern onto a surface and detecting and responding to interactions with the same |
US10664722B1 (en) * | 2016-10-05 | 2020-05-26 | Digimarc Corporation | Image processing arrangements |
AU2017361061B2 (en) * | 2016-11-15 | 2022-02-03 | Magic Leap, Inc. | Deep learning system for cuboid detection |
CN107038408A (zh) * | 2017-01-11 | 2017-08-11 | 阿里巴巴集团控股有限公司 | 基于增强现实的图像识别方法及装置 |
CN107132769B (zh) * | 2017-04-21 | 2020-09-01 | 北京小米移动软件有限公司 | 智能设备控制方法及装置 |
US10108867B1 (en) * | 2017-04-25 | 2018-10-23 | Uber Technologies, Inc. | Image-based pedestrian detection |
WO2018212809A1 (en) * | 2017-05-19 | 2018-11-22 | Google Llc | Efficient image analysis using environment sensor data |
US10602046B2 (en) * | 2017-07-11 | 2020-03-24 | Htc Corporation | Mobile device and control method |
WO2019022849A1 (en) * | 2017-07-26 | 2019-01-31 | Magic Leap, Inc. | FORMATION OF A NEURONAL NETWORK WITH REPRESENTATIONS OF USER INTERFACE DEVICES |
US11314399B2 (en) * | 2017-10-21 | 2022-04-26 | Eyecam, Inc. | Adaptive graphic user interfacing system |
US11131973B2 (en) * | 2017-12-06 | 2021-09-28 | Arris Enterprises Llc | System and method of IOT device control using augmented reality |
US10937240B2 (en) * | 2018-01-04 | 2021-03-02 | Intel Corporation | Augmented reality bindings of physical objects and virtual objects |
TWM569984U (zh) * | 2018-01-05 | 2018-11-11 | 英屬開曼群島商麥迪創科技股份有限公司 | 載具劇場設備 |
US10620721B2 (en) * | 2018-01-29 | 2020-04-14 | Google Llc | Position-based location indication and device control |
US10650597B2 (en) * | 2018-02-06 | 2020-05-12 | Servicenow, Inc. | Augmented reality assistant |
US10504290B2 (en) * | 2018-05-04 | 2019-12-10 | Facebook Technologies, Llc | User interface security in a virtual reality environment |
US20200028841A1 (en) * | 2018-06-15 | 2020-01-23 | Proxy, Inc. | Method and apparatus for providing multiple user credentials |
US10725629B2 (en) * | 2018-06-25 | 2020-07-28 | Google Llc | Identifying and controlling smart devices |
WO2020022780A1 (en) * | 2018-07-25 | 2020-01-30 | Samsung Electronics Co., Ltd. | Method and apparatus for establishing device connection |
US11042992B2 (en) * | 2018-08-03 | 2021-06-22 | Logitech Europe S.A. | Method and system for detecting peripheral device displacement |
US10867210B2 (en) * | 2018-12-21 | 2020-12-15 | Waymo Llc | Neural networks for coarse- and fine-object classifications |
US10701661B1 (en) * | 2019-04-02 | 2020-06-30 | Google Llc | Location determination for device control and configuration |
US11082249B2 (en) * | 2019-04-02 | 2021-08-03 | Google Llc | Location determination for device control and configuration |
-
2018
- 2018-06-25 US US16/017,394 patent/US10725629B2/en active Active
-
2019
- 2019-06-14 ES ES19734634T patent/ES2963118T3/es active Active
- 2019-06-14 JP JP2020546363A patent/JP6915169B2/ja active Active
- 2019-06-14 KR KR1020207026995A patent/KR102211014B1/ko active IP Right Grant
- 2019-06-14 CN CN202210264622.XA patent/CN114666650B/zh active Active
- 2019-06-14 EP EP19734634.9A patent/EP3797521B1/en active Active
- 2019-06-14 CN CN201980036735.0A patent/CN112219405B/zh active Active
- 2019-06-14 EP EP23183579.4A patent/EP4231652A1/en active Pending
- 2019-06-14 WO PCT/US2019/037171 patent/WO2020005575A1/en unknown
-
2020
- 2020-06-18 US US16/905,245 patent/US11086493B2/en active Active
-
2021
- 2021-07-13 JP JP2021115685A patent/JP7077463B2/ja active Active
- 2021-07-19 US US17/378,856 patent/US11921988B2/en active Active
-
2022
- 2022-05-17 JP JP2022080934A patent/JP2022107645A/ja active Pending
-
2024
- 2024-01-26 US US18/424,284 patent/US20240168613A1/en active Pending
Patent Citations (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2015100085A (ja) * | 2013-11-20 | 2015-05-28 | ヤマハ株式会社 | 同期再生システム及び同期再生装置 |
JP2015156610A (ja) * | 2014-02-21 | 2015-08-27 | ソニー株式会社 | 電子機器、および電源制御方法 |
US20180157398A1 (en) * | 2016-12-05 | 2018-06-07 | Magic Leap, Inc. | Virtual user input controls in a mixed reality environment |
Cited By (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO2023067914A1 (ja) | 2021-10-18 | 2023-04-27 | パナソニックIpマネジメント株式会社 | 散水装置及び散水方法 |
Also Published As
Publication number | Publication date |
---|---|
EP3797521A1 (en) | 2021-03-31 |
EP4231652A1 (en) | 2023-08-23 |
US10725629B2 (en) | 2020-07-28 |
CN114666650A (zh) | 2022-06-24 |
JP2022107645A (ja) | 2022-07-22 |
US20200319765A1 (en) | 2020-10-08 |
US20240168613A1 (en) | 2024-05-23 |
JP7077463B2 (ja) | 2022-05-30 |
WO2020005575A1 (en) | 2020-01-02 |
EP3797521B1 (en) | 2023-08-02 |
JP6915169B2 (ja) | 2021-08-04 |
JP2021514091A (ja) | 2021-06-03 |
ES2963118T3 (es) | 2024-03-25 |
CN112219405A (zh) | 2021-01-12 |
US11086493B2 (en) | 2021-08-10 |
KR20200115652A (ko) | 2020-10-07 |
US20210342047A1 (en) | 2021-11-04 |
KR102211014B1 (ko) | 2021-02-04 |
CN114666650B (zh) | 2023-12-26 |
US11921988B2 (en) | 2024-03-05 |
US20190391716A1 (en) | 2019-12-26 |
CN112219405B (zh) | 2022-03-15 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP7077463B2 (ja) | スマートデバイスの識別および制御 | |
KR102460511B1 (ko) | 디바이스 및/또는 디바이스의 설치 환경을 캡처하는 이미지 데이터의 처리에 기초한 디바이스 제어 | |
US20230061691A1 (en) | Display Apparatus with Intelligent User Interface | |
US11706489B2 (en) | Display apparatus with intelligent user interface | |
US20190354608A1 (en) | Display apparatus with intelligent user interface | |
US11278801B2 (en) | Management of provisioning of video game during game preview | |
US20190354603A1 (en) | Display apparatus with intelligent user interface | |
JP2021056483A (ja) | 音声認識制御方法、装置、電子デバイス及び読み取り可能な記憶媒体 | |
WO2016040710A1 (en) | Actionable item switcher view | |
US20160337712A1 (en) | Display apparatus and method of controlling display apparatus thereof | |
US11375283B2 (en) | Configuring settings of a television | |
KR20160073219A (ko) | 스마트 tv의 맞춤형 홈스크린 편집 장치 및 편집 방법 | |
CN118138823A (zh) | 投屏方法、电子设备及计算机可读存储介质 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20210811 |
|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20210811 |
|
A871 | Explanation of circumstances concerning accelerated examination |
Free format text: JAPANESE INTERMEDIATE CODE: A871 Effective date: 20210811 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20211115 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20220208 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20220418 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20220518 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 7077463 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |