JP6316447B2 - オブジェクト検索方法および装置 - Google Patents
オブジェクト検索方法および装置 Download PDFInfo
- Publication number
- JP6316447B2 JP6316447B2 JP2016550858A JP2016550858A JP6316447B2 JP 6316447 B2 JP6316447 B2 JP 6316447B2 JP 2016550858 A JP2016550858 A JP 2016550858A JP 2016550858 A JP2016550858 A JP 2016550858A JP 6316447 B2 JP6316447 B2 JP 6316447B2
- Authority
- JP
- Japan
- Prior art keywords
- user
- target object
- gesture input
- image
- voice input
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
- 238000000034 method Methods 0.000 title claims description 79
- 238000000605 extraction Methods 0.000 claims description 4
- 230000005540 biological transmission Effects 0.000 claims description 2
- 238000010586 diagram Methods 0.000 description 10
- 239000003086 colorant Substances 0.000 description 7
- 238000004590 computer program Methods 0.000 description 6
- 239000000284 extract Substances 0.000 description 5
- 230000006870 function Effects 0.000 description 5
- 238000012986 modification Methods 0.000 description 5
- 230000004048 modification Effects 0.000 description 5
- 230000008569 process Effects 0.000 description 5
- 230000001788 irregular Effects 0.000 description 2
- 230000009286 beneficial effect Effects 0.000 description 1
- 229910003460 diamond Inorganic materials 0.000 description 1
- 239000010432 diamond Substances 0.000 description 1
- 230000000694 effects Effects 0.000 description 1
- 230000003287 optical effect Effects 0.000 description 1
- 230000004044 response Effects 0.000 description 1
- 239000000126 substance Substances 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/90—Details of database functions independent of the retrieved data types
- G06F16/95—Retrieval from the web
- G06F16/953—Querying, e.g. by the use of web search engines
- G06F16/9538—Presentation of query results
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/90—Details of database functions independent of the retrieved data types
- G06F16/95—Retrieval from the web
- G06F16/951—Indexing; Web crawling techniques
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
- G06F3/0487—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser
- G06F3/0488—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures
- G06F3/04883—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures for inputting data by handwriting, e.g. gesture or text
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/20—Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
- G06F16/24—Querying
- G06F16/242—Query formulation
- G06F16/2428—Query predicate definition using graphical user interfaces, including menus and forms
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/50—Information retrieval; Database structures therefor; File system structures therefor of still image data
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/50—Information retrieval; Database structures therefor; File system structures therefor of still image data
- G06F16/53—Querying
- G06F16/532—Query formulation, e.g. graphical querying
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/017—Gesture based interaction, e.g. based on a set of recognized hand gestures
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
- G06F3/0481—Interaction techniques based on graphical user interfaces [GUI] based on specific properties of the displayed interaction object or a metaphor-based environment, e.g. interaction with desktop elements like windows or icons, or assisted by a cursor's changing behaviour or appearance
- G06F3/0482—Interaction with lists of selectable items, e.g. menus
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
- G06F3/0484—Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range
- G06F3/04842—Selection of displayed objects or displayed text elements
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/16—Sound input; Sound output
- G06F3/167—Audio in a user interface, e.g. using voice commands for navigating, audio feedback
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F2203/00—Indexing scheme relating to G06F3/00 - G06F3/048
- G06F2203/038—Indexing scheme relating to G06F3/038
- G06F2203/0381—Multimodal input, i.e. interface arrangements enabling the user to issue commands by simultaneous use of input devices of different nature, e.g. voice plus gesture on digitizer
Landscapes
- Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- General Engineering & Computer Science (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Databases & Information Systems (AREA)
- Human Computer Interaction (AREA)
- Data Mining & Analysis (AREA)
- Mathematical Physics (AREA)
- Computational Linguistics (AREA)
- Multimedia (AREA)
- Health & Medical Sciences (AREA)
- Audiology, Speech & Language Pathology (AREA)
- General Health & Medical Sciences (AREA)
- User Interface Of Digital Computer (AREA)
- Image Analysis (AREA)
- Information Retrieval, Db Structures And Fs Structures Therefor (AREA)
Description
ユーザの音声入力およびジェスチャー入力を受信するステップと、
音声入力に従って、ユーザが検索することを期待するターゲットオブジェクトの名前およびターゲットオブジェクトの特徴カテゴリを決定するステップと、
ユーザによってジェスチャー入力を用いて選択された画像領域から特徴カテゴリの特徴情報を抽出するステップと、
抽出された特徴情報およびターゲットオブジェクトの名前に従ってターゲットオブジェクトを検索するステップとを含む。
特徴情報およびターゲットオブジェクトの名前をサーバに送信するステップと、
サーバによって返された検索結果を受信するステップとを特に含み、検索結果は、サーバによって特徴情報に従ってターゲットオブジェクトの名前で表されたターゲットオブジェクトを検索することで取得される。
ユーザによって同時に実行された音声入力およびジェスチャー入力を受信するステップ、または
ユーザの音声入力を受信し、ユーザによるジェスチャー入力が実行されておらず、かつ画像領域が選択されていないと判定された場合に、画像領域を選択する操作を実行するようにユーザに指示し、ユーザのジェスチャー入力を受信するステップ、または
ユーザのジェスチャー入力を受信し、ユーザによる音声入力が実行されていないと判定された場合に、音声入力操作を実行するようにユーザに指示し、ユーザの音声入力を受信するステップを特に含む。
ユーザによってジェスチャー入力を用いて指定された画像から選択された画像領域を取得し、その画像領域をユーザによって選択された画像領域として使用するステップ、または
ユーザによってジェスチャー入力を用いて写真撮影で取得された画像を取得し、その画像領域をユーザによって選択された画像領域として使用するステップを含む。
ユーザの音声入力およびジェスチャー入力を受信するように構成された第1の受信ユニットと、
音声入力に従って、ユーザが検索することを期待するターゲットオブジェクトの名前およびターゲットオブジェクトの特徴カテゴリを決定するように構成された第1の決定ユニットと、
ユーザによってジェスチャー入力を用いて選択された画像領域から特徴カテゴリの特徴情報を抽出するように構成された抽出ユニットと、
抽出された特徴情報およびターゲットオブジェクトの名前に従ってターゲットオブジェクトを検索するように構成された第1の検索ユニットとを含む。
ユーザの音声入力およびジェスチャー入力を受信するステップと、
音声入力に従って、ユーザが検索することを期待するターゲットオブジェクトの名前およびターゲットオブジェクトの特徴カテゴリを決定するステップと、
特徴カテゴリのカテゴリ情報、ターゲットオブジェクトの名前、およびユーザによってジェスチャー入力を用いて選択された画像領域をサーバに送信するステップと、
サーバによって返された検索結果を受信するステップとを含み、検索結果は、サーバによってターゲットオブジェクトの名前で表されたターゲットオブジェクトを検索することで取得され、画像領域に関する、カテゴリ情報によって表された特徴カテゴリの特徴が検索基準として使用される。
ユーザによって同時に実行された音声入力およびジェスチャー入力を受信するステップ、または
ユーザの音声入力を受信し、ユーザによるジェスチャー入力が実行されておらず、かつ画像領域が選択されていないと判定された場合に、画像領域を選択する操作を実行するようにユーザに指示し、ユーザのジェスチャー入力を受信するステップ、または
ユーザのジェスチャー入力を受信し、ユーザによる音声入力が実行されていないと判定された場合に、音声入力操作を実行するようにユーザに指示し、ユーザの音声入力を受信するステップを特に含む。
ユーザによってジェスチャー入力を用いて指定された画像から選択された画像領域を取得し、その画像領域をユーザによって選択された画像領域として使用するステップ、または
ユーザによってジェスチャー入力を用いて写真撮影で取得された画像を取得し、その画像領域をユーザによって選択された画像領域として使用するステップを含む。
ユーザの音声入力およびジェスチャー入力を受信するように構成された第2の受信ユニットと、
音声入力に従って、ユーザが検索することを期待するターゲットオブジェクトの名前およびターゲットオブジェクトの特徴カテゴリを決定するように構成された第2の決定ユニットと、
特徴カテゴリのカテゴリ情報、ターゲットオブジェクトの名前、およびユーザによってジェスチャー入力を用いて選択された画像領域をサーバに送信するように構成された送信ユニットと、
サーバによって返された検索結果を受信するように構成された第3の受信ユニットとを含み、検索結果は、サーバによってターゲットオブジェクトの名前で表されたターゲットオブジェクトを検索することで取得され、画像領域に関する、カテゴリ情報によって表された特徴カテゴリの特徴が検索基準として使用される。
本発明の実施形態で提供される前述の解決策において、オブジェクト検索が実行された場合、ユーザの音声入力およびジェスチャー入力が最初に受信され、ユーザが検索することを期待するターゲットオブジェクトの名前およびターゲットオブジェクトの特徴カテゴリが音声入力に従って決定され、ターゲットオブジェクトが、ユーザによってジェスチャー入力を用いて選択された画像領域の特徴カテゴリの特徴およびターゲットオブジェクトの名前を検索基準として使用して検索される。検索時に、ユーザは、音声を使用して特徴カテゴリおよびターゲットオブジェクトの名前を入力し、ジェスチャー入力を用いて画像領域を選択するだけでよく、特徴カテゴリ、ターゲットオブジェクトの名前、および画像領域を使用して検索基準を表すことができ、検索基準の明確な記述は不要である。したがって、より柔軟な検索方法がユーザに提供され、検索時の適用シナリオに対する制限が軽減される。
ユーザの音声入力およびジェスチャー入力を受信するように構成された第1の受信ユニット401と、
音声入力に従って、ユーザが検索することを期待するターゲットオブジェクトの名前およびターゲットオブジェクトの特徴カテゴリを決定するように構成された第1の決定ユニット402と、
特徴カテゴリの特徴情報を、ユーザによってジェスチャー入力を用いて選択された画像領域から抽出するように構成された抽出ユニット403と、
抽出された特徴情報およびターゲットオブジェクトの名前に従ってターゲットオブジェクトを検索するように構成された第1の検索ユニット404とを特に含む。
ユーザの音声入力およびジェスチャー入力を受信するように構成された第2の受信ユニット501と、
音声入力に従って、ユーザが検索することを期待するターゲットオブジェクトの名前およびターゲットオブジェクトの特徴カテゴリを決定するように構成された第2の決定ユニット502と、
特徴カテゴリのカテゴリ情報、ターゲットオブジェクトの名前、およびユーザによってジェスチャー入力を用いて選択された画像領域をサーバに送信するように構成された送信ユニット503と、
サーバによって返された検索結果を受信するように構成された第3の受信ユニット504とを含み、検索結果は、サーバによってターゲットオブジェクトの名前で表されたターゲットオブジェクトを検索することで取得され、画像領域に関する、カテゴリ情報によって表された特徴カテゴリの特徴が検索基準として使用される。
402 第1の決定ユニット
403 抽出ユニット
404 検索ユニット
501 第2の受信ユニット
502 第2の決定ユニット
503 送信ユニット
504 第3の受信ユニット
Claims (20)
- ユーザから音声入力およびジェスチャー入力を受信するステップと、
前記音声入力に従って、前記ユーザが検索することを期待するターゲットオブジェクトの名前および前記ターゲットオブジェクトの特徴カテゴリを決定するステップと、
前記ユーザによって前記ジェスチャー入力を用いて選択された画像領域から前記特徴カテゴリの特徴情報を抽出するステップであって、前記画像領域はユーザ装置上に表示された指示された画像の一部である、ステップと、
前記抽出された特徴情報および前記ターゲットオブジェクトの前記名前に従って前記ターゲットオブジェクトを検索するステップとを備える、オブジェクト検索方法。 - 前記抽出された特徴情報および前記ターゲットオブジェクトの前記名前に従って前記ターゲットオブジェクトを検索する前記ステップが、
前記特徴情報および前記ターゲットオブジェクトの前記名前をサーバに送信するステップと、
前記サーバによって返された検索結果を受信するステップとを特に備え、前記検索結果が、サーバによって前記特徴情報に従って前記ターゲットオブジェクトの前記名前で表された前記ターゲットオブジェクトを検索することで取得される、請求項1に記載の方法。 - ユーザの音声入力およびジェスチャー入力を受信する前記ステップが、
前記ユーザによって同時に実行された音声入力およびジェスチャー入力を受信するステップ、または
前記ユーザの音声入力を受信し、前記ユーザによるジェスチャー入力が実行されておらず、かつ画像領域が選択されていないと判定された場合に、画像領域を選択する操作を実行するように前記ユーザに指示し、前記ユーザのジェスチャー入力を受信するステップ、または
前記ユーザのジェスチャー入力を受信し、前記ユーザによる音声入力が実行されていないと判定された場合に、音声入力操作を実行するように前記ユーザに指示し、前記ユーザの音声入力を受信するステップを特に備える、請求項1または2に記載の方法。 - 前記ユーザによって前記ジェスチャー入力を用いて選択された前記画像領域を取得するステップが、
前記ユーザによって前記ジェスチャー入力を用いて指定された画像から選択された画像領域を取得し、前記画像領域を前記ユーザによって選択された前記画像領域として使用するステップ、または
前記ユーザによって前記ジェスチャー入力を用いて写真撮影で取得された画像を取得し、前記画像領域を前記ユーザによって選択された前記画像領域として使用するステップを備える、請求項1または2に記載の方法。 - ユーザから音声入力およびジェスチャー入力を受信するように構成された第1の受信ユニットと、
前記音声入力に従って、前記ユーザが検索することを期待するターゲットオブジェクトの名前および前記ターゲットオブジェクトの特徴カテゴリを決定するように構成された第1の決定ユニットと、
前記ユーザによって前記ジェスチャー入力を用いて選択された画像領域から前記特徴カテゴリの特徴情報を抽出するように構成され、前記画像領域はユーザ装置上に表示された指示された画像の一部である、抽出ユニットと、
前記抽出された特徴情報および前記ターゲットオブジェクトの前記名前に従って前記ターゲットオブジェクトを検索するように構成された第1の検索ユニットとを備える、オブジェクト検索装置。 - 前記第1の検索ユニットが、前記特徴情報および前記ターゲットオブジェクトの前記名前をサーバに送信し、前記サーバによって返された検索結果を受信するように特に構成され、前記検索結果が、前記サーバによって前記特徴情報に従って前記ターゲットオブジェクトの前記名前で表された前記ターゲットオブジェクトを検索することで取得される、請求項5に記載の装置。
- 前記第1の受信ユニットが、前記ユーザによって同時に実行された音声入力およびジェスチャー入力を受信するように特に構成されるか、または前記ユーザの音声入力を受信し、前記ユーザによるジェスチャー入力が実行されておらず、かつ画像が選択されていないと判定された場合に、画像領域を選択する操作を実行するように前記ユーザに指示し、前記ユーザのジェスチャー入力を受信するように特に構成されるか、または前記ユーザのジェスチャー入力を受信し、前記ユーザによる音声入力が実行されていないと判定された場合に、音声入力操作を実行するように前記ユーザに指示し、前記ユーザの音声入力を受信するように特に構成される、請求項5または6に記載の装置。
- 前記第1の決定ユニットが、前記ユーザによって前記ジェスチャー入力を用いて指定された画像から選択された画像領域を取得し、前記画像領域を前記ユーザによって選択された前記画像領域として使用するようにさらに構成されるか、または前記ユーザによって前記ジェスチャー入力を用いて写真撮影で取得された画像を取得し、前記画像領域を前記ユーザによって選択された前記画像領域として使用するようにさらに構成される、請求項5または6に記載の装置。
- ユーザから音声入力およびジェスチャー入力を受信するステップと、
前記音声入力に従って、前記ユーザが検索することを期待するターゲットオブジェクトの名前および前記ターゲットオブジェクトの特徴カテゴリを決定するステップと、
前記特徴カテゴリのカテゴリ情報、前記ターゲットオブジェクトの前記名前、および前記ユーザによって前記ジェスチャー入力を用いて選択された画像領域をサーバに送信するステップであって、前記画像領域はユーザ装置上に表示された指示された画像の一部である、ステップと、
前記サーバによって返された検索結果を受信するステップとを備えるオブジェクト検索方法であって、前記検索結果が、前記サーバによって前記ターゲットオブジェクトの前記名前で表された前記ターゲットオブジェクトを検索することで取得され、前記画像領域に関する、前記カテゴリ情報によって表された前記特徴カテゴリの特徴が検索基準として使用される、方法。 - ユーザの音声入力およびジェスチャー入力を受信する前記ステップが、
前記ユーザによって同時に実行された音声入力およびジェスチャー入力を受信するステップ、または
前記ユーザの音声入力を受信し、前記ユーザによるジェスチャー入力が実行されておらず、かつ画像領域が選択されていないと判定された場合に、画像領域を選択する操作を実行するように前記ユーザに指示し、前記ユーザのジェスチャー入力を受信するステップ、または
前記ユーザのジェスチャー入力を受信し、前記ユーザによる音声入力が実行されていないと判定された場合に、音声入力操作を実行するように前記ユーザに指示し、前記ユーザの音声入力を受信するステップを特に備える、請求項9に記載の方法。 - 前記ユーザによって前記ジェスチャー入力を用いて選択された前記画像領域を取得するステップが、
前記ユーザによって前記ジェスチャー入力を用いて指定された画像から選択された画像領域を取得し、前記画像領域を前記ユーザによって選択された前記画像領域として使用するステップ、または
前記ユーザによって前記ジェスチャー入力を用いて写真撮影で取得された画像を取得し、前記画像領域を前記ユーザによって選択された前記画像領域として使用するステップを備える、請求項9に記載の方法。 - ユーザから音声入力およびジェスチャー入力を受信するように構成された第2の受信ユニットと、
前記音声入力に従って、前記ユーザが検索することを期待するターゲットオブジェクトの名前および前記ターゲットオブジェクトの特徴カテゴリを決定するように構成された第2の決定ユニットと、
前記特徴カテゴリのカテゴリ情報、前記ターゲットオブジェクトの前記名前、および前記ユーザによって前記ジェスチャー入力を用いて選択された画像領域をサーバに送信するように構成され、前記画像領域はユーザ装置上に表示された指示された画像の一部である、送信ユニットと、
前記サーバによって返された検索結果を受信するように構成された第3の受信ユニットとを備えるオブジェクト検索装置であって、前記検索結果が、前記サーバによって前記ターゲットオブジェクトの前記名前で表された前記ターゲットオブジェクトを検索することで取得され、前記画像領域に関する、前記カテゴリ情報によって表された前記特徴カテゴリの特徴が検索基準として使用される、装置。 - 前記第2の受信ユニットが、前記ユーザによって同時に実行された音声入力およびジェスチャー入力を受信するように特に構成されるか、または前記ユーザの音声入力を受信し、前記ユーザによるジェスチャー入力が実行されておらず、かつ画像領域が選択されていないと判定された場合に、画像領域を選択する操作を実行するように前記ユーザに指示し、前記ユーザのジェスチャー入力を受信するように特に構成されるか、または前記ユーザのジェスチャー入力を受信し、前記ユーザによる音声入力が実行されていないと判定された場合に、音声入力操作を実行するように前記ユーザに指示し、前記ユーザの音声入力を受信するように特に構成される、請求項12に記載の装置。
- 前記第2の決定ユニットが、前記ユーザによって前記ジェスチャー入力を用いて指定された画像から選択された画像領域を取得し、前記画像領域を前記ユーザによって選択された前記画像領域として使用するようにさらに構成されるか、または前記ユーザによって前記ジェスチャー入力を用いて写真撮影で取得された画像を取得し、前記画像領域を前記ユーザによって選択された前記画像領域として使用するようにさらに構成される、請求項12に記載の装置。
- メモリと1つまたは複数のプロセッサを具備する装置であって、前記メモリと前記1つまたは複数のプロセッサは、バスで接続され、
前記メモリは、一連のプログラムコードを保存するとともに、前記1つまたは複数のプロセッサは、端末に請求項1から4のいずれか一項に記載の方法を実行させるための前記メモリに保存された前記プログラムコードを実施するように構成される、装置。 - メモリと1つまたは複数のプロセッサを具備する装置であって、前記メモリと前記1つまたは複数のプロセッサは、バスで接続され、
前記メモリは、一連のプログラムコードを保存するとともに、前記1つまたは複数のプロセッサは、端末に請求項9から11のいずれか一項に記載の方法を実行させるための前記メモリに保存された前記プログラムコードを実施するように構成される、装置。 - コンピュータによって実行されると、請求項1から4のいずれか一項に記載の方法をコンピュータに実行させる命令を具備する、コンピュータ可読記憶媒体。
- コンピュータによって実行されると、請求項9から11のいずれか一項に記載の方法をコンピュータに実行させる命令を具備する、コンピュータ可読記憶媒体。
- 請求項1から4のいずれか一項に記載の方法をコンピュータに実行させるように適合された、プログラム。
- 請求項9から11のいずれか一項に記載の方法をコンピュータに実行させるように適合された、プログラム。
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
PCT/CN2014/077566 WO2015172359A1 (zh) | 2014-05-15 | 2014-05-15 | 一种对象搜索方法及装置 |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2017513090A JP2017513090A (ja) | 2017-05-25 |
JP6316447B2 true JP6316447B2 (ja) | 2018-04-25 |
Family
ID=53852833
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2016550858A Active JP6316447B2 (ja) | 2014-05-15 | 2014-05-15 | オブジェクト検索方法および装置 |
Country Status (7)
Country | Link |
---|---|
US (1) | US10311115B2 (ja) |
EP (1) | EP3001333A4 (ja) |
JP (1) | JP6316447B2 (ja) |
KR (1) | KR101864240B1 (ja) |
CN (1) | CN104854539B (ja) |
BR (1) | BR112016017262B1 (ja) |
WO (1) | WO2015172359A1 (ja) |
Families Citing this family (17)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
KR101561628B1 (ko) * | 2013-12-30 | 2015-10-20 | 주식회사 케이티 | 스마트 글래스의 영상 정보를 제공하는 검색 장치 및 검색 방법 |
US10444977B2 (en) * | 2014-12-05 | 2019-10-15 | Verizon Patent And Licensing Inc. | Cellphone manager |
KR20170052364A (ko) * | 2015-11-04 | 2017-05-12 | 삼성전자주식회사 | 디스플레이장치 및 그 제어방법 |
CN107515868A (zh) * | 2016-06-15 | 2017-12-26 | 北京陌上花科技有限公司 | 搜索方法及装置 |
JP2017228080A (ja) | 2016-06-22 | 2017-12-28 | ソニー株式会社 | 情報処理装置、情報処理方法、及び、プログラム |
KR102055733B1 (ko) * | 2017-02-24 | 2019-12-13 | 권오민 | 이미지광고 온라인 제공 방법 |
KR102469717B1 (ko) * | 2017-08-01 | 2022-11-22 | 삼성전자주식회사 | 오브젝트에 대한 검색 결과를 제공하기 위한 전자 장치 및 이의 제어 방법 |
CN110119461B (zh) * | 2018-01-25 | 2022-01-14 | 阿里巴巴(中国)有限公司 | 一种查询信息的处理方法及装置 |
KR102630662B1 (ko) | 2018-04-02 | 2024-01-30 | 삼성전자주식회사 | 어플리케이션 실행 방법 및 이를 지원하는 전자 장치 |
CN108874910B (zh) * | 2018-05-28 | 2021-08-17 | 思百达物联网科技(北京)有限公司 | 基于视觉的小目标识别系统 |
CN108984730A (zh) * | 2018-07-12 | 2018-12-11 | 三星电子(中国)研发中心 | 一种搜索方法和搜索设备 |
EP3859488A4 (en) * | 2018-09-28 | 2022-06-29 | Shanghai Cambricon Information Technology Co., Ltd | Signal processing device, signal processing method and related product |
KR102688902B1 (ko) | 2018-12-05 | 2024-07-26 | 제주대학교 산학협력단 | 감귤 바이오겔을 포함하는 감귤 미숙과 추출물을 유효성분으로 함유하는 화장료 조성물 |
JP7275795B2 (ja) * | 2019-04-15 | 2023-05-18 | コニカミノルタ株式会社 | 操作受付装置、制御方法、画像形成システム、及び、プログラム |
CN110765294B (zh) * | 2019-10-25 | 2021-03-12 | 深圳追一科技有限公司 | 图像搜索方法、装置、终端设备及存储介质 |
CN113093406A (zh) * | 2021-04-14 | 2021-07-09 | 陈祥炎 | 智能眼镜 |
CN116628327A (zh) * | 2023-02-16 | 2023-08-22 | 百度在线网络技术(北京)有限公司 | 搜索方法、装置、电子设备以及存储介质 |
Family Cites Families (22)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPH08166866A (ja) | 1994-10-14 | 1996-06-25 | Hitachi Ltd | 対話型インターフェースを具備した編集支援システム |
JPH10198695A (ja) | 1997-01-13 | 1998-07-31 | Sharp Corp | 情報処理装置 |
US6513063B1 (en) * | 1999-01-05 | 2003-01-28 | Sri International | Accessing network-based electronic information through scripted online interfaces using spoken input |
JP3823129B2 (ja) | 2001-12-07 | 2006-09-20 | 株式会社シガメック | 画像検索システム及び画像検索方法 |
JP2006107109A (ja) | 2004-10-05 | 2006-04-20 | Canon Inc | 情報管理装置及び情報管理方法 |
JP2007026316A (ja) | 2005-07-20 | 2007-02-01 | Yamaha Motor Co Ltd | 画像管理装置、ならびに画像管理用コンピュータプログラムおよびそれを記録した記録媒体 |
US7457825B2 (en) | 2005-09-21 | 2008-11-25 | Microsoft Corporation | Generating search requests from multimodal queries |
CN100414548C (zh) | 2006-09-22 | 2008-08-27 | 南京搜拍信息技术有限公司 | 综合利用图像及文字信息的搜索系统及搜索方法 |
CN101071431A (zh) * | 2007-01-31 | 2007-11-14 | 腾讯科技(深圳)有限公司 | 基于关键图形为搜索条件进行图象搜索的方法及系统 |
CN100578508C (zh) | 2008-01-14 | 2010-01-06 | 上海博康智能信息技术有限公司 | 交互式图像搜索系统和方法 |
US8090738B2 (en) | 2008-05-14 | 2012-01-03 | Microsoft Corporation | Multi-modal search wildcards |
US9978365B2 (en) * | 2008-10-31 | 2018-05-22 | Nokia Technologies Oy | Method and system for providing a voice interface |
US20100281435A1 (en) | 2009-04-30 | 2010-11-04 | At&T Intellectual Property I, L.P. | System and method for multimodal interaction using robust gesture processing |
US9087059B2 (en) * | 2009-08-07 | 2015-07-21 | Google Inc. | User interface for presenting search results for multiple regions of a visual query |
CN101930457A (zh) | 2010-08-13 | 2010-12-29 | 百度在线网络技术(北京)有限公司 | 一种供用户进行快速选择对象及搜索的方法、设备和系统 |
US8788434B2 (en) * | 2010-10-28 | 2014-07-22 | Google Inc. | Search with joint image-audio queries |
US20120155717A1 (en) | 2010-12-16 | 2012-06-21 | Microsoft Corporation | Image search including facial image |
JP5794036B2 (ja) * | 2011-08-22 | 2015-10-14 | セイコーエプソン株式会社 | 画像検索装置、画像検索方法、およびプログラム |
CN103946838B (zh) | 2011-11-24 | 2017-10-24 | 微软技术许可有限责任公司 | 交互式多模图像搜索 |
US9152376B2 (en) | 2011-12-01 | 2015-10-06 | At&T Intellectual Property I, L.P. | System and method for continuous multimodal speech and gesture interaction |
CN103246682A (zh) * | 2012-02-13 | 2013-08-14 | 联想(北京)有限公司 | 数据搜索方法和数据搜索装置 |
CN103020184B (zh) | 2012-11-29 | 2016-05-25 | 北京百度网讯科技有限公司 | 使用拍摄图像获取搜索结果的方法和系统 |
-
2014
- 2014-05-15 US US14/902,227 patent/US10311115B2/en active Active
- 2014-05-15 BR BR112016017262-0A patent/BR112016017262B1/pt active IP Right Grant
- 2014-05-15 JP JP2016550858A patent/JP6316447B2/ja active Active
- 2014-05-15 WO PCT/CN2014/077566 patent/WO2015172359A1/zh active Application Filing
- 2014-05-15 KR KR1020167020862A patent/KR101864240B1/ko active IP Right Grant
- 2014-05-15 EP EP14892023.4A patent/EP3001333A4/en not_active Ceased
- 2014-05-15 CN CN201480003299.4A patent/CN104854539B/zh active Active
Also Published As
Publication number | Publication date |
---|---|
BR112016017262A2 (ja) | 2017-08-08 |
EP3001333A4 (en) | 2016-08-24 |
EP3001333A1 (en) | 2016-03-30 |
WO2015172359A1 (zh) | 2015-11-19 |
KR101864240B1 (ko) | 2018-06-04 |
CN104854539B (zh) | 2018-08-14 |
CN104854539A (zh) | 2015-08-19 |
US10311115B2 (en) | 2019-06-04 |
US20160147882A1 (en) | 2016-05-26 |
JP2017513090A (ja) | 2017-05-25 |
KR20160104054A (ko) | 2016-09-02 |
BR112016017262B1 (pt) | 2022-09-27 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP6316447B2 (ja) | オブジェクト検索方法および装置 | |
US10169900B2 (en) | Picture processing method and apparatus | |
CN107368550B (zh) | 信息获取方法、装置、介质、电子设备、服务器及系统 | |
EP3163473A1 (en) | Video playing method and device | |
US10685256B2 (en) | Object recognition state indicators | |
TWI586160B (zh) | 利用行動電話及雲端可視化搜尋引擎之即時物體掃描 | |
WO2018188378A1 (zh) | 一种给应用标注标签的方法、装置、终端及计算机可读存储介质 | |
US20190325019A1 (en) | Method and apparatus for identifying type of text information, storage medium, and electronic apparatus | |
EP3328041A1 (en) | Clothes matching recommendation method and smart terminal | |
CN112748827B (zh) | 截图分享方法、装置、终端设备和存储介质 | |
US20160188680A1 (en) | Electronic device and information searching method for the electronic device | |
US20180336243A1 (en) | Image Search Method, Apparatus and Storage Medium | |
CN111104915A (zh) | 一种同行分析方法、装置、设备和介质 | |
CN106897291B (zh) | 基于截屏操作的搜索方法及装置 | |
US20170277722A1 (en) | Search service providing apparatus, system, method, and computer program | |
CN109033264B (zh) | 视频分析方法及装置、电子设备和存储介质 | |
JP2017162179A5 (ja) | ||
CN111125398A (zh) | 一种图片信息检索方法、装置、设备和介质 | |
CN107077508B (zh) | 专利信息管理的方法和装置 | |
CN111143663B (zh) | 信息推送方法和装置 | |
CN110456955B (zh) | 暴露服饰检测方法、装置、系统、设备及存储介质 | |
WO2017161476A1 (en) | Rating and advising for selection of augmented reality markers | |
CN109522449B (zh) | 搜索方法和装置 | |
CN108021991B (zh) | 获取仪器信息的方法及装置 | |
JP2016151780A (ja) | Api提供装置、及びapi提供方法 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20170801 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20171025 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20171114 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20180214 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20180227 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20180327 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 6316447 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |