JP6144849B1 - 電子デバイス間の接続を確立するための方法および装置 - Google Patents
電子デバイス間の接続を確立するための方法および装置 Download PDFInfo
- Publication number
- JP6144849B1 JP6144849B1 JP2016557139A JP2016557139A JP6144849B1 JP 6144849 B1 JP6144849 B1 JP 6144849B1 JP 2016557139 A JP2016557139 A JP 2016557139A JP 2016557139 A JP2016557139 A JP 2016557139A JP 6144849 B1 JP6144849 B1 JP 6144849B1
- Authority
- JP
- Japan
- Prior art keywords
- target person
- target
- electronic device
- face
- image
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
- 238000000034 method Methods 0.000 title claims abstract description 43
- 230000001815 facial effect Effects 0.000 claims abstract description 100
- 230000004044 response Effects 0.000 claims description 74
- 230000007613 environmental effect Effects 0.000 claims description 9
- 238000004891 communication Methods 0.000 description 56
- 238000001514 detection method Methods 0.000 description 31
- 238000012545 processing Methods 0.000 description 16
- 210000000887 face Anatomy 0.000 description 13
- 238000012795 verification Methods 0.000 description 11
- 238000010586 diagram Methods 0.000 description 10
- 239000000284 extract Substances 0.000 description 9
- 239000004984 smart glass Substances 0.000 description 9
- 235000019800 disodium phosphate Nutrition 0.000 description 7
- 238000005516 engineering process Methods 0.000 description 7
- 238000000605 extraction Methods 0.000 description 7
- 230000006870 function Effects 0.000 description 7
- 230000003287 optical effect Effects 0.000 description 7
- 239000011521 glass Substances 0.000 description 5
- 101000574648 Homo sapiens Retinoid-inducible serine carboxypeptidase Proteins 0.000 description 4
- 102100025483 Retinoid-inducible serine carboxypeptidase Human genes 0.000 description 4
- 125000002066 L-histidyl group Chemical group [H]N1C([H])=NC(C([H])([H])[C@](C(=O)[*])([H])N([H])[H])=C1[H] 0.000 description 3
- 238000013528 artificial neural network Methods 0.000 description 3
- 230000005540 biological transmission Effects 0.000 description 3
- 230000001413 cellular effect Effects 0.000 description 3
- 230000008569 process Effects 0.000 description 3
- 239000013598 vector Substances 0.000 description 3
- 238000004458 analytical method Methods 0.000 description 2
- 238000003066 decision tree Methods 0.000 description 2
- 239000000835 fiber Substances 0.000 description 2
- 230000007774 longterm Effects 0.000 description 2
- 238000010295 mobile communication Methods 0.000 description 2
- 230000005236 sound signal Effects 0.000 description 2
- 238000012706 support-vector machine Methods 0.000 description 2
- 238000012546 transfer Methods 0.000 description 2
- 238000003491 array Methods 0.000 description 1
- 238000004590 computer program Methods 0.000 description 1
- 230000001143 conditioned effect Effects 0.000 description 1
- 238000013461 design Methods 0.000 description 1
- 210000005069 ears Anatomy 0.000 description 1
- 210000001508 eye Anatomy 0.000 description 1
- 210000004709 eyebrow Anatomy 0.000 description 1
- 210000000088 lip Anatomy 0.000 description 1
- 239000003550 marker Substances 0.000 description 1
- 239000000203 mixture Substances 0.000 description 1
- -1 mobile phones Substances 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 210000001331 nose Anatomy 0.000 description 1
- 230000011218 segmentation Effects 0.000 description 1
- 238000002604 ultrasonography Methods 0.000 description 1
- 230000000007 visual effect Effects 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F21/00—Security arrangements for protecting computers, components thereof, programs or data against unauthorised activity
- G06F21/30—Authentication, i.e. establishing the identity or authorisation of security principals
- G06F21/31—User authentication
- G06F21/32—User authentication using biometric data, e.g. fingerprints, iris scans or voiceprints
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V10/00—Arrangements for image or video recognition or understanding
- G06V10/20—Image preprocessing
- G06V10/22—Image preprocessing by selection of a specific region containing or referencing a pattern; Locating or processing of specific regions to guide the detection or recognition
- G06V10/235—Image preprocessing by selection of a specific region containing or referencing a pattern; Locating or processing of specific regions to guide the detection or recognition based on user input or interaction
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
- G06V40/10—Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
- G06V40/16—Human faces, e.g. facial parts, sketches or expressions
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
- G06V40/10—Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
- G06V40/16—Human faces, e.g. facial parts, sketches or expressions
- G06V40/161—Detection; Localisation; Normalisation
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
- G06V40/10—Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
- G06V40/16—Human faces, e.g. facial parts, sketches or expressions
- G06V40/168—Feature extraction; Face representation
-
- G—PHYSICS
- G10—MUSICAL INSTRUMENTS; ACOUSTICS
- G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
- G10L17/00—Speaker identification or verification techniques
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L63/00—Network architectures or network communication protocols for network security
- H04L63/08—Network architectures or network communication protocols for network security for authentication of entities
- H04L63/0861—Network architectures or network communication protocols for network security for authentication of entities using biometrical features, e.g. fingerprint, retina-scan
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L67/00—Network arrangements or protocols for supporting network services or applications
- H04L67/01—Protocols
- H04L67/10—Protocols in which an application is distributed across nodes in the network
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04W—WIRELESS COMMUNICATION NETWORKS
- H04W12/00—Security arrangements; Authentication; Protecting privacy or anonymity
- H04W12/06—Authentication
-
- G—PHYSICS
- G10—MUSICAL INSTRUMENTS; ACOUSTICS
- G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
- G10L15/00—Speech recognition
Landscapes
- Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- Physics & Mathematics (AREA)
- Health & Medical Sciences (AREA)
- Computer Security & Cryptography (AREA)
- General Physics & Mathematics (AREA)
- Multimedia (AREA)
- General Health & Medical Sciences (AREA)
- Computer Networks & Wireless Communication (AREA)
- Signal Processing (AREA)
- Human Computer Interaction (AREA)
- Oral & Maxillofacial Surgery (AREA)
- General Engineering & Computer Science (AREA)
- Computer Hardware Design (AREA)
- Biomedical Technology (AREA)
- Computing Systems (AREA)
- Software Systems (AREA)
- Audiology, Speech & Language Pathology (AREA)
- Acoustics & Sound (AREA)
- Computer Vision & Pattern Recognition (AREA)
- Computational Linguistics (AREA)
- User Interface Of Digital Computer (AREA)
- Collating Specific Patterns (AREA)
- Telephone Function (AREA)
- Information Transfer Between Computers (AREA)
- Position Input By Displaying (AREA)
Abstract
Description
本出願は、その内容全体が参照により組み込まれる、「METHOD AND APPARATUS FOR ESTABLISHING CONNECTION BETWEEN ELECTRONIC DEVICES」と題する2014年3月19日に出願された米国出願第14/219,894号の優先権を主張する。
112 電子デバイス
114 ポインティングオブジェクト
120 人物
122 電子デバイス
130 人物
132 電子デバイス、対象デバイス
140 人物
142 電子デバイス
150 人物
152 電子デバイス
210 画像
212 顔
220 画像センサー
230 音センサー
240 光学レンズ
310 音声コマンド
410 画像
412 顔
510 ポインティングオブジェクト
520 音声コマンド
610 画像
612 顔
614 キャップ
700 電子デバイス
710 画像センサー
720 音センサー
730 I/O(入力/出力)ユニット
740 対象識別ユニット
750 接続コントローラ
760 通信ユニット
770 ストレージユニット
810 オブジェクト判断ユニット
820 顔検出ユニット
830 コマンド認識ユニット
840 顔照合ユニット
900 電子デバイス
910 画像センサー
920 音センサー
930 ストレージユニット
940 照合ユニット
950 接続コントローラ
960 通信ユニット
1000 方法
1030 方法
1200 電子デバイス
1212 アンテナ
1214 受信機(RCVR)
1216 送信機(TMTR)
1220 デジタルセクション
1222 モデムプロセッサ
1224 縮小命令セットコンピュータ/デジタル信号プロセッサ(RISC/DSP)
1226 コントローラ/プロセッサ
1228 内部メモリ
1232 一般化オーディオエンコーダ
1234 一般化オーディオデコーダ
1236 グラフィックス/ディスプレイプロセッサ
1238 外部バスインターフェース(EBI)
1242 オーディオソース
1243 マイクロフォン
1244 機能判断エンジン
1246 ディスプレイユニット
1248 メインメモリ
Claims (32)
- 対象デバイスに接続するための、電子デバイスにおいて実行される方法であって、
ポインティングオブジェクトと前記対象デバイスに関連付けられた対象人物の顔とを含む画像をキャプチャするステップと、
前記対象人物の指標を認識するステップであって、前記指標が前記キャプチャされた画像内の少なくとも前記ポインティングオブジェクトに対応する、ステップと、
前記指標に基づいて前記画像内の前記対象人物の前記顔を検出するステップであって、前記ポインティングオブジェクトが前記対象人物に向けられていると判断することに基づいて前記対象人物の顔を検出するステップを含む、ステップと、
前記画像内の前記顔の少なくとも1つの顔の特徴を抽出するステップと、
前記少なくとも1つの顔の特徴に基づいて前記対象デバイスに接続するステップと
を含む方法。 - 前記指標を認識するステップが、前記画像内の前記ポインティングオブジェクトを前記対象人物の前記指標として検出するステップを含む、請求項1に記載の方法。
- 前記指標を認識するステップが、
入力音を受信するステップと、
前記入力音からの音声コマンドを前記対象人物の追加の指標として認識するステップと
をさらに含む、請求項1に記載の方法。 - 前記指標を認識するステップが、入力コマンドを前記対象人物の追加の指標として受信するステップをさらに含む、請求項1に記載の方法。
- 前記指標を認識するステップが、
前記画像内の前記ポインティングオブジェクトを前記対象人物の前記指標として検出するステップと、
入力音からの音声コマンドを前記対象人物の追加の指標として認識するステップと
をさらに含む、請求項1に記載の方法。 - 前記対象人物の前記顔を検出するステップが、
前記画像において複数の顔が検出された場合、前記対象人物を識別する追加の指標を受信するステップと、
前記追加の指標に基づいて前記対象人物の前記顔を検出するステップと
を含む、請求項1に記載の方法。 - 前記対象デバイスに接続するステップが、
前記少なくとも1つの顔の特徴を含む接続要求を送信するステップと、
前記対象デバイスから、前記電子デバイスに接続するための応答メッセージを受信するステップと、
前記応答メッセージに基づいて前記対象デバイスとの前記接続を確立するステップと
を含む、請求項1に記載の方法。 - 前記応答メッセージが、前記対象デバイスを確認するためのセキュリティ情報を含み、
前記対象デバイスとの前記接続を確立するステップが、前記セキュリティ情報に基づいて前記応答メッセージを確認するステップを含む、
請求項7に記載の方法。 - 前記セキュリティ情報が、前記対象デバイスによってキャプチャされた環境音データ、および前記電子デバイスのユーザの顔の特徴データのうちの少なくとも1つを含む、請求項8に記載の方法。
- 前記対象デバイスに接続するステップが、
前記少なくとも1つの顔の特徴を含む接続要求を送信するステップと、
前記電子デバイスに接続するための複数の応答メッセージが受信されたかどうかに基づいて前記対象デバイスとの前記接続を確立するステップと
を含む、請求項1に記載の方法。 - 対象デバイスに接続するための電子デバイスであって、
ポインティングオブジェクトと、前記対象デバイスに関連付けられた対象人物の顔とを含む画像をキャプチャするように構成された画像センサーと、
前記対象人物の指標を認識し、前記指標に基づいて前記画像内の前記対象人物の前記顔を検出することによって、前記画像内の前記顔の少なくとも1つの顔の特徴を抽出するように構成された対象識別ユニットであって、前記キャプチャされた画像内の前記ポインティングオブジェクトを前記対象人物の前記指標として検出するように構成されたオブジェクト判断ユニットを備え、前記ポインティングオブジェクトが前記対象人物に向けられていると判断することに基づいて前記対象人物の顔を検出するようにさらに構成される対象識別ユニットと、
前記少なくとも1つの顔の特徴に基づいて前記対象デバイスへの接続を確立するように構成された接続コントローラと
を備える電子デバイス。 - 前記対象識別ユニットが、入力音からの音声コマンドを前記対象人物の追加の指標として認識するように構成されたコマンド認識ユニットを備える、請求項11に記載の電子デバイス。
- 入力コマンドを前記対象人物の追加の指標として受信するように構成された入力ユニットをさらに備える、請求項11に記載の電子デバイス。
- 前記対象識別ユニットが、
前記画像において複数の顔が検出された場合、前記対象人物を識別する追加の指標を受信し、
前記追加の指標に基づいて前記対象人物の前記顔を検出する
ようにさらに構成される、請求項11に記載の電子デバイス。 - 前記接続コントローラが、
前記少なくとも1つの顔の特徴を含む接続要求を送信し、
前記対象デバイスから、前記電子デバイスに接続するための応答メッセージを受信し、
前記応答メッセージに基づいて前記対象デバイスとの前記接続を確立する
ようにさらに構成される、請求項11に記載の電子デバイス。 - 前記応答メッセージが、前記対象デバイスを確認するためのセキュリティ情報を含み、前記接続コントローラが、前記セキュリティ情報に基づいて前記応答メッセージを確認するようにさらに構成される、請求項15に記載の電子デバイス。
- 前記セキュリティ情報が、前記対象デバイスによってキャプチャされた環境音データ、および前記電子デバイスのユーザの顔の特徴データのうちの少なくとも1つを含む、請求項16に記載の電子デバイス。
- 前記接続コントローラが、
前記少なくとも1つの顔の特徴を含む接続要求を送信し、
前記電子デバイスに接続するための複数の応答メッセージが受信されたかどうかに基づいて前記対象デバイスとの前記接続を確立する
ようにさらに構成される、請求項11に記載の電子デバイス。 - 対象デバイスに接続するための命令を含む非一時的コンピュータ可読記憶媒体であって、前記命令が、電子デバイスのプロセッサに、
ポインティングオブジェクトと、前記対象デバイスに関連付けられた対象人物の顔とを含む画像をキャプチャする動作と、
前記対象人物の指標を認識する動作であって、前記指標が前記キャプチャされた画像内の少なくとも前記ポインティングオブジェクトに対応する、動作と、
前記指標に基づいて前記画像内の前記対象人物の前記顔を検出する動作であって、前記ポインティングオブジェクトが前記対象人物に向けられていると判断することに基づいて前記対象人物の顔を検出することを含む動作と、
前記画像内の前記顔の少なくとも1つの顔の特徴を抽出する動作と、
前記少なくとも1つの顔の特徴に基づいて前記対象デバイスに接続する動作と
を実行させる、非一時的コンピュータ可読記憶媒体。 - 前記指標を認識することが、前記画像内の前記ポインティングオブジェクトを前記対象人物の前記指標として検出することを含む、請求項19に記載の非一時的コンピュータ可読記憶媒体。
- 前記指標を認識することが、
入力音を受信することと、
前記入力音からの音声コマンドを前記対象人物の追加の指標として認識することと
をさらに含む、請求項19に記載の非一時的コンピュータ可読記憶媒体。 - 前記対象デバイスに接続することが、
前記少なくとも1つの顔の特徴を含む接続要求を送信することと、
前記対象デバイスから、前記電子デバイスに接続するための応答メッセージを受信することと、
前記応答メッセージに基づいて前記対象デバイスとの前記接続を確立することと
を含む、請求項19に記載の非一時的コンピュータ可読記憶媒体。 - 前記応答メッセージが、前記対象デバイスを確認するためのセキュリティ情報を含み、前記対象デバイスとの前記接続を確立することが、前記セキュリティ情報に基づいて前記応答メッセージを確認することを含む、請求項22に記載の非一時的コンピュータ可読記憶媒体。
- 対象デバイスに接続するための電子デバイスであって、
ポインティングオブジェクトと、前記対象デバイスに関連付けられた対象人物の顔とを含む画像をキャプチャするための手段と、
前記対象人物の指標を認識し、前記指標に基づいて前記画像内の前記対象人物の前記顔を検出することによって、前記画像内の前記顔の少なくとも1つの顔の特徴を抽出するための手段であって、前記画像内の前記ポインティングオブジェクトを前記対象人物の前記指標として検出するための手段を備え、前記ポインティングオブジェクトが前記対象人物に向けられていると判断することに基づいて前記対象人物の顔を検出するための手段をさらに備える手段と、
前記少なくとも1つの顔の特徴に基づいて前記対象デバイスへの接続を確立するための手段と
を備える電子デバイス。 - 前記顔の前記少なくとも1つの顔の特徴を前記抽出するための手段が、入力音からの音声コマンドを前記対象人物の追加の指標として認識するための手段を備える、請求項24に記載の電子デバイス。
- 前記対象デバイスへの前記接続を前記確立するための手段が、
前記少なくとも1つの顔の特徴を含む接続要求を送信し、
前記対象デバイスから、前記電子デバイスに接続するための応答メッセージを受信し、
前記応答メッセージに基づいて前記対象デバイスとの前記接続を確立する
ように構成される、請求項24に記載の電子デバイス。 - 前記応答メッセージが、前記対象デバイスを確認するためのセキュリティ情報を含み、前記対象デバイスへの前記接続を確立するための前記手段が、前記セキュリティ情報に基づいて前記応答メッセージを確認するようにさらに構成される、
請求項26に記載の電子デバイス。 - 前記対象識別ユニットが、前記指標が認識されなかった場合、前記対象人物を識別するための追加の指標を要求するようにさらに構成される、請求項11に記載の電子デバイス。
- 対象デバイスに接続するための、電子デバイスにおいて実行される方法であって、
前記対象デバイスに関連付けられた対象人物の顔を含む画像をキャプチャするステップと、
前記対象人物の指標を認識するステップであって、入力音を受信するステップと、前記入力音からの音声コマンドを前記対象人物の指標として認識するステップとを含むステップと、
前記指標に基づいて前記画像内の前記対象人物の前記顔を検出するステップと、
前記画像内の前記顔の少なくとも1つの顔の特徴を抽出するステップと、
前記少なくとも1つの顔の特徴に基づいて前記対象デバイスに接続するステップと
を含む、方法。 - 対象デバイスに接続するための電子デバイスであって、
前記対象デバイスに関連付けられた対象人物の顔を含む画像をキャプチャするように構成された画像センサーと、
前記対象人物の指標を認識し、前記指標に基づいて前記画像内の前記対象人物の前記顔を検出することによって、前記画像内の前記顔の少なくとも1つの顔の特徴を抽出するように構成された対象識別ユニットであって、入力音からの音声コマンドを前記対象人物の指標として認識するように構成されたコマンド認識ユニットを備える対象識別ユニットと、
前記少なくとも1つの顔の特徴に基づいて前記対象デバイスへの接続を確立するように構成された接続コントローラと
を備える電子デバイス。 - 対象デバイスに接続するための命令を含む非一時的コンピュータ可読記憶媒体であって、前記命令が、電子デバイスのプロセッサに、
前記対象デバイスに関連付けられた対象人物の顔を含む画像をキャプチャする動作と、
前記対象人物の指標を認識する動作であって、入力音を受信する動作と、前記入力音からの音声コマンドを前記対象人物の指標として認識する動作とを含む、動作と、
前記指標に基づいて前記画像内の前記対象人物の前記顔を検出する動作と、
前記画像内の前記顔の少なくとも1つの顔の特徴を抽出する動作と、
前記少なくとも1つの顔の特徴に基づいて前記対象デバイスに接続する動作と
を実行させる、非一時的コンピュータ可読記憶媒体。 - 対象デバイスに接続するための電子デバイスであって、
前記対象デバイスに関連付けられた対象人物の顔を含む画像をキャプチャするための手段と、
前記対象人物の指標を認識し、前記指標に基づいて前記画像内の前記対象人物の前記顔を検出することによって、前記画像内の前記顔の少なくとも1つの顔の特徴を抽出するための手段であって、入力音からの音声コマンドを前記対象人物の指標として認識するための手段を備える手段と、
前記少なくとも1つの顔の特徴に基づいて前記対象デバイスへの接続を確立するための手段と
を備える電子デバイス。
Applications Claiming Priority (3)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
US14/219,894 US9311525B2 (en) | 2014-03-19 | 2014-03-19 | Method and apparatus for establishing connection between electronic devices |
US14/219,894 | 2014-03-19 | ||
PCT/US2015/020710 WO2015142719A2 (en) | 2014-03-19 | 2015-03-16 | Method and apparatus for establishing connection between electronic devices |
Publications (2)
Publication Number | Publication Date |
---|---|
JP6144849B1 true JP6144849B1 (ja) | 2017-06-07 |
JP2017517780A JP2017517780A (ja) | 2017-06-29 |
Family
ID=52875760
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2016557139A Active JP6144849B1 (ja) | 2014-03-19 | 2015-03-16 | 電子デバイス間の接続を確立するための方法および装置 |
Country Status (6)
Country | Link |
---|---|
US (1) | US9311525B2 (ja) |
EP (1) | EP3120298B1 (ja) |
JP (1) | JP6144849B1 (ja) |
KR (1) | KR101759859B1 (ja) |
CN (1) | CN106104569B (ja) |
WO (1) | WO2015142719A2 (ja) |
Cited By (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US10448762B2 (en) | 2017-09-15 | 2019-10-22 | Kohler Co. | Mirror |
US10663938B2 (en) | 2017-09-15 | 2020-05-26 | Kohler Co. | Power operation of intelligent devices |
US10887125B2 (en) | 2017-09-15 | 2021-01-05 | Kohler Co. | Bathroom speaker |
US11099540B2 (en) | 2017-09-15 | 2021-08-24 | Kohler Co. | User identity in household appliances |
US11921794B2 (en) | 2017-09-15 | 2024-03-05 | Kohler Co. | Feedback for water consuming appliance |
Families Citing this family (45)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US8977255B2 (en) | 2007-04-03 | 2015-03-10 | Apple Inc. | Method and system for operating a multi-function portable electronic device using voice-activation |
US10713341B2 (en) * | 2011-07-13 | 2020-07-14 | Scott F. McNulty | System, method and apparatus for generating acoustic signals based on biometric information |
DE212014000045U1 (de) | 2013-02-07 | 2015-09-24 | Apple Inc. | Sprach-Trigger für einen digitalen Assistenten |
US10170123B2 (en) | 2014-05-30 | 2019-01-01 | Apple Inc. | Intelligent assistant for home automation |
TWI512644B (zh) * | 2014-08-21 | 2015-12-11 | Coretronic Corp | 智慧型眼鏡及使用智慧型眼鏡的人臉辨識與提示方法 |
IL235642B (en) | 2014-11-11 | 2021-08-31 | Lumus Ltd | A compact head-up display system is protected by an element with a super-thin structure |
US9769367B2 (en) * | 2015-08-07 | 2017-09-19 | Google Inc. | Speech and computer vision-based control |
JP2017117371A (ja) * | 2015-12-25 | 2017-06-29 | パナソニック インテレクチュアル プロパティ コーポレーション オブ アメリカPanasonic Intellectual Property Corporation of America | 制御方法、制御装置およびプログラム |
US9836819B1 (en) | 2015-12-30 | 2017-12-05 | Google Llc | Systems and methods for selective retention and editing of images captured by mobile image capture device |
US10732809B2 (en) | 2015-12-30 | 2020-08-04 | Google Llc | Systems and methods for selective retention and editing of images captured by mobile image capture device |
US9838641B1 (en) | 2015-12-30 | 2017-12-05 | Google Llc | Low power framework for processing, compressing, and transmitting images at a mobile image capture device |
US10225511B1 (en) | 2015-12-30 | 2019-03-05 | Google Llc | Low power framework for controlling image sensor mode in a mobile image capture device |
US9836484B1 (en) | 2015-12-30 | 2017-12-05 | Google Llc | Systems and methods that leverage deep learning to selectively store images at a mobile image capture device |
JP2017228080A (ja) * | 2016-06-22 | 2017-12-28 | ソニー株式会社 | 情報処理装置、情報処理方法、及び、プログラム |
US10178293B2 (en) * | 2016-06-22 | 2019-01-08 | International Business Machines Corporation | Controlling a camera using a voice command and image recognition |
WO2018000200A1 (zh) * | 2016-06-28 | 2018-01-04 | 华为技术有限公司 | 对电子设备进行控制的终端及其处理方法 |
MX2018007164A (es) | 2016-11-08 | 2019-06-06 | Lumus Ltd | Dispositivo de guia de luz con borde de corte optico y metodos de produccion correspondientes. |
US10212338B2 (en) | 2016-11-22 | 2019-02-19 | Google Llc | Camera operable using natural language commands |
KR102338472B1 (ko) | 2017-02-22 | 2021-12-14 | 루머스 리미티드 | 광 가이드 광학 어셈블리 |
CN109416433B (zh) | 2017-03-22 | 2021-06-01 | 鲁姆斯有限公司 | 交叠的反射面构造 |
KR102304701B1 (ko) * | 2017-03-28 | 2021-09-24 | 삼성전자주식회사 | 사용자의 음성 입력에 대한 답변을 제공하는 방법 및 장치 |
IL251645B (en) | 2017-04-06 | 2018-08-30 | Lumus Ltd | Waveguide and method of production |
US10355931B2 (en) | 2017-04-17 | 2019-07-16 | Essential Products, Inc. | Troubleshooting voice-enabled home setup |
US10176807B2 (en) | 2017-04-17 | 2019-01-08 | Essential Products, Inc. | Voice setup instructions |
US10353480B2 (en) * | 2017-04-17 | 2019-07-16 | Essential Products, Inc. | Connecting assistant device to devices |
DK179560B1 (en) * | 2017-05-16 | 2019-02-18 | Apple Inc. | FAR-FIELD EXTENSION FOR DIGITAL ASSISTANT SERVICES |
US10303715B2 (en) | 2017-05-16 | 2019-05-28 | Apple Inc. | Intelligent automated assistant for media exploration |
KR102299847B1 (ko) * | 2017-06-26 | 2021-09-08 | 삼성전자주식회사 | 얼굴 인증 방법 및 장치 |
US10992662B2 (en) | 2017-10-09 | 2021-04-27 | International Business Machines Corporation | Enabling/disabling applications using face authentication |
CN107748879A (zh) * | 2017-11-16 | 2018-03-02 | 百度在线网络技术(北京)有限公司 | 用于获取人脸信息的方法及装置 |
CN107911613A (zh) * | 2017-12-25 | 2018-04-13 | 努比亚技术有限公司 | 拍照控制方法、移动终端以及计算机可读介质 |
KR102595790B1 (ko) * | 2018-01-26 | 2023-10-30 | 삼성전자주식회사 | 전자 장치 및 그의 제어방법 |
US10679039B2 (en) | 2018-04-03 | 2020-06-09 | Google Llc | Detecting actions to discourage recognition |
US10847162B2 (en) * | 2018-05-07 | 2020-11-24 | Microsoft Technology Licensing, Llc | Multi-modal speech localization |
KR20210013173A (ko) | 2018-05-23 | 2021-02-03 | 루머스 리미티드 | 부분 반사 내부면이 있는 도광 광학 요소를 포함한 광학 시스템 |
DK180639B1 (en) | 2018-06-01 | 2021-11-04 | Apple Inc | DISABILITY OF ATTENTION-ATTENTIVE VIRTUAL ASSISTANT |
CN108834227B (zh) * | 2018-06-22 | 2021-05-14 | 维沃移动通信有限公司 | 移动终端之间建立连接的方法及装置 |
CN108874360B (zh) * | 2018-06-27 | 2023-04-07 | 百度在线网络技术(北京)有限公司 | 全景内容定位方法和装置 |
CN109545225B (zh) * | 2018-12-07 | 2022-04-15 | 四川长虹电器股份有限公司 | 一种基于电子设备远场语音且可动态调整的蓝牙交互方法 |
IL290719B2 (en) | 2019-12-08 | 2023-09-01 | Lumus Ltd | Optical systems with a compact image projector |
KR20210094798A (ko) * | 2020-01-22 | 2021-07-30 | 한화테크윈 주식회사 | 사용자 피드백에 기초한 도어벨 카메라 시스템에 의한 이벤트 생성 |
JP7438868B2 (ja) * | 2020-02-03 | 2024-02-27 | 清水建設株式会社 | 会話支援システム |
CN111444491B (zh) * | 2020-04-20 | 2021-09-14 | 维沃移动通信(杭州)有限公司 | 一种信息处理方法和电子设备 |
US20230222834A1 (en) * | 2020-06-10 | 2023-07-13 | Nec Corporation | Image providing apparatus, image providing system, image providing method, and non-transitory computer readable medium |
JP2024005948A (ja) * | 2022-06-30 | 2024-01-17 | キヤノン株式会社 | 撮像装置、その制御方法及びプログラム |
Citations (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2006101186A (ja) * | 2004-09-29 | 2006-04-13 | Nikon Corp | カメラ |
WO2010134159A1 (ja) * | 2009-05-19 | 2010-11-25 | Necディスプレイソリューションズ株式会社 | 情報処理装置、装置検索方法、装置検索支援方法および記録媒体 |
US20110211073A1 (en) * | 2010-02-26 | 2011-09-01 | Research In Motion Limited | Object detection and selection using gesture recognition |
JP2011227649A (ja) * | 2010-04-19 | 2011-11-10 | Sony Corp | 画像処理システム、画像処理装置、画像処理方法及びプログラム |
JP2011227882A (ja) * | 2010-03-30 | 2011-11-10 | Panasonic Corp | 機器登録方法及び機器登録システム |
JP2014048937A (ja) * | 2012-08-31 | 2014-03-17 | Omron Corp | ジェスチャ認識装置、その制御方法、表示機器、および制御プログラム |
Family Cites Families (11)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US6339706B1 (en) | 1999-11-12 | 2002-01-15 | Telefonaktiebolaget L M Ericsson (Publ) | Wireless voice-activated remote control device |
US20090286479A1 (en) | 2008-05-16 | 2009-11-19 | Sony Ericsson Mobile Communications Ab | Method and system for sensory pairing for a portable communication device |
US20110002680A1 (en) * | 2009-07-02 | 2011-01-06 | Texas Instruments Incorporated | Method and apparatus for focusing an image of an imaging device |
US20110047384A1 (en) | 2009-08-21 | 2011-02-24 | Qualcomm Incorporated | Establishing an ad hoc network using face recognition |
CN110798586A (zh) * | 2010-02-19 | 2020-02-14 | 株式会社尼康 | 电子设备 |
CN102906623A (zh) * | 2010-02-28 | 2013-01-30 | 奥斯特豪特集团有限公司 | 交互式头戴目镜上的本地广告内容 |
US8405729B2 (en) * | 2011-05-11 | 2013-03-26 | Sony Corporation | System and method for pairing hand-held devices utilizing a front-facing camera |
US8818049B2 (en) | 2011-05-18 | 2014-08-26 | Google Inc. | Retrieving contact information based on image recognition searches |
WO2012157196A1 (ja) | 2011-05-18 | 2012-11-22 | パナソニック株式会社 | 通信制御システムおよびその方法、ならびに通信装置およびその方法、プログラム |
KR20130051810A (ko) | 2011-11-10 | 2013-05-21 | 삼성전자주식회사 | 사용자를 인증하는 방법 및 이를 수행하는 장치 |
US9350944B2 (en) | 2012-08-24 | 2016-05-24 | Qualcomm Incorporated | Connecting to an onscreen entity |
-
2014
- 2014-03-19 US US14/219,894 patent/US9311525B2/en active Active
-
2015
- 2015-03-16 EP EP15716904.6A patent/EP3120298B1/en active Active
- 2015-03-16 WO PCT/US2015/020710 patent/WO2015142719A2/en active Application Filing
- 2015-03-16 CN CN201580012703.9A patent/CN106104569B/zh active Active
- 2015-03-16 JP JP2016557139A patent/JP6144849B1/ja active Active
- 2015-03-16 KR KR1020167026732A patent/KR101759859B1/ko active IP Right Grant
Patent Citations (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2006101186A (ja) * | 2004-09-29 | 2006-04-13 | Nikon Corp | カメラ |
WO2010134159A1 (ja) * | 2009-05-19 | 2010-11-25 | Necディスプレイソリューションズ株式会社 | 情報処理装置、装置検索方法、装置検索支援方法および記録媒体 |
US20110211073A1 (en) * | 2010-02-26 | 2011-09-01 | Research In Motion Limited | Object detection and selection using gesture recognition |
JP2011227882A (ja) * | 2010-03-30 | 2011-11-10 | Panasonic Corp | 機器登録方法及び機器登録システム |
JP2011227649A (ja) * | 2010-04-19 | 2011-11-10 | Sony Corp | 画像処理システム、画像処理装置、画像処理方法及びプログラム |
JP2014048937A (ja) * | 2012-08-31 | 2014-03-17 | Omron Corp | ジェスチャ認識装置、その制御方法、表示機器、および制御プログラム |
Cited By (9)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US10448762B2 (en) | 2017-09-15 | 2019-10-22 | Kohler Co. | Mirror |
US10663938B2 (en) | 2017-09-15 | 2020-05-26 | Kohler Co. | Power operation of intelligent devices |
US10887125B2 (en) | 2017-09-15 | 2021-01-05 | Kohler Co. | Bathroom speaker |
US11099540B2 (en) | 2017-09-15 | 2021-08-24 | Kohler Co. | User identity in household appliances |
US11314215B2 (en) | 2017-09-15 | 2022-04-26 | Kohler Co. | Apparatus controlling bathroom appliance lighting based on user identity |
US11314214B2 (en) | 2017-09-15 | 2022-04-26 | Kohler Co. | Geographic analysis of water conditions |
US11892811B2 (en) | 2017-09-15 | 2024-02-06 | Kohler Co. | Geographic analysis of water conditions |
US11921794B2 (en) | 2017-09-15 | 2024-03-05 | Kohler Co. | Feedback for water consuming appliance |
US11949533B2 (en) | 2017-09-15 | 2024-04-02 | Kohler Co. | Sink device |
Also Published As
Publication number | Publication date |
---|---|
EP3120298A2 (en) | 2017-01-25 |
JP2017517780A (ja) | 2017-06-29 |
KR20160117634A (ko) | 2016-10-10 |
US9311525B2 (en) | 2016-04-12 |
EP3120298B1 (en) | 2019-09-25 |
CN106104569A (zh) | 2016-11-09 |
CN106104569B (zh) | 2018-11-23 |
US20150269420A1 (en) | 2015-09-24 |
WO2015142719A2 (en) | 2015-09-24 |
WO2015142719A3 (en) | 2016-01-28 |
KR101759859B1 (ko) | 2017-07-19 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP6144849B1 (ja) | 電子デバイス間の接続を確立するための方法および装置 | |
KR102346491B1 (ko) | 전자 디바이스에 대한 액세스를 위한 자동 인가 | |
US10789343B2 (en) | Identity authentication method and apparatus | |
EP3047622B1 (en) | Method and apparatus for controlling access to applications | |
US10482325B2 (en) | User authentication method and electronic device supporting the same | |
WO2019024717A1 (zh) | 防伪处理方法及相关产品 | |
US20150302856A1 (en) | Method and apparatus for performing function by speech input | |
CN105956518A (zh) | 一种人脸识别方法、装置和系统 | |
JP2017520012A (ja) | スピーチ入力によってアプリケーションをアクティブ化するための方法および装置 | |
CN108496170B (zh) | 一种动态识别的方法及终端设备 | |
US20150153827A1 (en) | Controlling connection of input device to electronic devices | |
CN107766403B (zh) | 一种相册处理方法、移动终端以及计算机可读存储介质 | |
CN107666536B (zh) | 一种寻找终端的方法和装置、一种用于寻找终端的装置 | |
US9158342B2 (en) | Mobile device and method of controlling therefor | |
CN108959273B (zh) | 翻译方法、电子装置及存储介质 | |
CN106203235A (zh) | 活体鉴别方法和装置 | |
KR20180075875A (ko) | 전자 장치 및 그의 메시지 전달 방법 | |
WO2019011108A1 (zh) | 虹膜识别方法及相关产品 | |
US20190050548A1 (en) | Method For Controlling Unlocking And Related Products | |
CN107895108B (zh) | 一种操作管理方法和移动终端 | |
US11734400B2 (en) | Electronic device and control method therefor | |
WO2021213371A1 (zh) | 信息处理方法和电子设备 | |
CN113099354A (zh) | 用于信息处理的方法、设备和计算机存储介质 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20170403 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20170417 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20170511 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 6144849 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |