JP2015204037A - Image processing device, communication system, and communication method - Google Patents
Image processing device, communication system, and communication method Download PDFInfo
- Publication number
- JP2015204037A JP2015204037A JP2014083861A JP2014083861A JP2015204037A JP 2015204037 A JP2015204037 A JP 2015204037A JP 2014083861 A JP2014083861 A JP 2014083861A JP 2014083861 A JP2014083861 A JP 2014083861A JP 2015204037 A JP2015204037 A JP 2015204037A
- Authority
- JP
- Japan
- Prior art keywords
- information
- unit
- image
- character information
- acquired
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
Images
Landscapes
- Information Retrieval, Db Structures And Fs Structures Therefor (AREA)
- Studio Devices (AREA)
Abstract
Description
本発明は、画像処理装置、通信システム及び通信方法に関する。 The present invention relates to an image processing device, a communication system, and a communication method.
近年、携帯電話機やデジタルカメラといった機器において、画像の認識機能を有するものが提案されてきている。例えば、特許文献1には、撮像により得られた画像からバーコードを読み取ることが可能な携帯型情報読み取り装置が提案されている。また、特許文献2には、2次元コードを読み取ることが可能な符号読み取り装置が提案されている。 In recent years, devices having an image recognition function have been proposed for devices such as mobile phones and digital cameras. For example, Patent Document 1 proposes a portable information reader that can read a barcode from an image obtained by imaging. Patent Document 2 proposes a code reading device capable of reading a two-dimensional code.
画像の認識により、画像に写っている対象物の各種の特徴情報を得ることができる。対象物の特徴情報が分かれば、その特徴情報を用いることにより、対象物のさらなる情報が得ることができると考えられる。しかしながら、このような対象物のさらなる情報を画像処理装置で得るためには、対象物に関する十分な情報を画像処理装置の記憶部に記憶させておく必要がある。この場合、大容量の記憶部を画像処理装置に搭載する必要が生じる。また、画像のさらなる情報の取得をサーバ等の画像処理装置以外の外部装置に行わせるような構成とした場合、画像を外部装置に通信する必要が生じる。この画像の通信のため、通信時間が増加し易い。 By recognizing the image, it is possible to obtain various types of feature information of the object shown in the image. If the feature information of the object is known, it is considered that further information of the object can be obtained by using the feature information. However, in order to obtain such additional information on the object by the image processing apparatus, it is necessary to store sufficient information about the object in the storage unit of the image processing apparatus. In this case, it is necessary to mount a large-capacity storage unit in the image processing apparatus. In addition, when an external device other than an image processing device such as a server is used to acquire further information about an image, it is necessary to communicate the image to the external device. Because of this image communication, the communication time tends to increase.
本発明は、前記の事情に鑑みてなされたもので、装置の大型化と通信時間の増加を抑制しつつ、画像の認識結果を用いて対象物のさらなる情報を得ることが可能な画像処理装置並びにそのような画像処理装置を用いた通信システム及び通信方法を提供することを目的とする。 The present invention has been made in view of the above circumstances, and is an image processing apparatus capable of obtaining further information on an object using an image recognition result while suppressing an increase in the size of the apparatus and an increase in communication time. It is another object of the present invention to provide a communication system and a communication method using such an image processing apparatus.
前記の目的を達成するために、本発明の第1の態様の画像処理装置は、画像を取得する画像取得部と、前記画像取得部で取得された画像から文字情報を取得可能な特徴情報を認識する画像認識部と、前記画像認識部で認識された特徴情報から文字情報を取得する文字情報取得部と、前記文字情報取得部で取得された文字情報を、文字情報からガイド情報を検索するガイド情報検索装置に通信する通信部とを具備することを特徴とする。 In order to achieve the above object, an image processing apparatus according to a first aspect of the present invention includes an image acquisition unit that acquires an image, and feature information that can acquire character information from the image acquired by the image acquisition unit. Retrieving guide information from character information for an image recognition unit to recognize, a character information acquisition unit to acquire character information from feature information recognized by the image recognition unit, and character information acquired from the character information acquisition unit And a communication unit that communicates with the guide information search device.
前記の目的を達成するために、本発明の第2の態様の画像処理装置は、画像を取得する画像取得部と、前記画像取得部で取得された画像から文字情報を取得可能な特徴情報を認識する画像認識部と、前記画像認識部で認識された特徴情報を、特徴情報から文字情報を取得してガイド情報を検索するガイド情報検索装置に通信する通信部とを具備することを特徴とする。 In order to achieve the above object, an image processing apparatus according to a second aspect of the present invention includes an image acquisition unit that acquires an image, and feature information that can acquire character information from the image acquired by the image acquisition unit. An image recognition unit for recognizing and a communication unit for communicating the feature information recognized by the image recognition unit to a guide information search device that acquires character information from the feature information and searches for guide information. To do.
前記の目的を達成するために、本発明の第3の態様の通信システムは、画像を取得する画像取得部と、前記画像取得部で取得された画像から文字情報を取得可能な特徴情報を認識する画像認識部と、前記画像認識部で認識された特徴情報から文字情報を取得する文字情報取得部と、前記文字情報取得部で取得された文字情報を送信する画像処理装置側通信部とを具備する画像処理装置と、前記画像処理装置側通信部から通信された文字情報を受信するガイド情報検索装置側通信部と、前記受信された文字情報からガイド情報を検索する検索部と、前記検索されたガイド情報をユーザに提示する提示部とを具備するガイド情報検索装置とを有することを特徴とする。 In order to achieve the above object, a communication system according to a third aspect of the present invention recognizes an image acquisition unit that acquires an image, and feature information that can acquire character information from the image acquired by the image acquisition unit. An image recognition unit, a character information acquisition unit that acquires character information from the feature information recognized by the image recognition unit, and an image processing apparatus side communication unit that transmits the character information acquired by the character information acquisition unit. An image processing apparatus comprising: a guide information retrieval apparatus side communication unit that receives character information communicated from the image processing apparatus side communication unit; a search unit that retrieves guide information from the received character information; and the search And a guide information search device including a presentation unit for presenting the guide information to the user.
前記の目的を達成するために、本発明の第4の態様の通信システムは、画像を取得する画像取得部と、前記画像取得部で取得された画像から文字情報を取得可能な特徴情報を認識する画像認識部と、前記画像認識部で取得された特徴情報を送信する画像処理装置側通信部とを具備する画像処理装置と、前記画像処理装置側通信部から通信された特徴情報を受信するガイド情報検索装置側通信部と、前記受信された特徴情報から文字情報を取得する文字情報取得部と、前記取得された文字情報からガイド情報を検索する検索部と、前記検索されたガイド情報をユーザに提示する提示部とを具備するガイド情報検索装置とを有することを特徴とする。 In order to achieve the above object, a communication system according to a fourth aspect of the present invention recognizes an image acquisition unit that acquires an image, and feature information that can acquire character information from the image acquired by the image acquisition unit. Receiving the feature information communicated from the image processing device side communication unit, and the image processing device side communication unit that transmits the feature information acquired by the image recognition unit. A guide information search device side communication unit, a character information acquisition unit that acquires character information from the received feature information, a search unit that searches for guide information from the acquired character information, and the searched guide information And a guide information search device including a presentation unit to be presented to the user.
前記の目的を達成するために、本発明の第5の態様の通信方法は、画像を取得することと、前記取得された画像から文字情報を取得可能な特徴情報を認識することと、前記認識された特徴情報から文字情報を取得することと、前記取得された文字情報を、文字情報からガイド情報を検索するガイド情報検索装置に通信することと、前記通信された文字情報から前記ガイド情報検索装置においてガイド情報を検索することと、前記ガイド情報検索装置において検索されたガイド情報をユーザに提示することとを具備することを特徴とする。 In order to achieve the above object, a communication method according to a fifth aspect of the present invention includes obtaining an image, recognizing feature information capable of obtaining character information from the obtained image, and recognizing the recognition. Obtaining character information from the obtained feature information, communicating the obtained character information to a guide information retrieval device for retrieving guide information from the character information, and retrieving the guide information from the communicated character information. Searching for guide information in the apparatus, and presenting the guide information searched in the guide information searching apparatus to the user.
前記の目的を達成するために、本発明の第6の態様の通信方法は、画像を取得することと、前記取得された画像から文字情報を取得可能な特徴情報を認識することと、前記認識された特徴情報を、特徴情報から文字情報を取得してガイド情報を検索するガイド情報検索装置に通信することと、前記通信された特徴情報から文字情報を取得することと、前記取得された文字情報から前記ガイド情報検索装置においてガイド情報を検索することと、前記ガイド情報検索装置において検索されたガイド情報をユーザに提示することとを具備することを特徴とする。 In order to achieve the above object, a communication method according to a sixth aspect of the present invention includes obtaining an image, recognizing feature information capable of obtaining character information from the obtained image, and recognizing the recognition. Communicating the obtained feature information to a guide information retrieval device that obtains character information from the feature information and retrieves guide information, obtaining character information from the communicated feature information, and obtaining the obtained character Searching guide information from the information in the guide information search device, and presenting the guide information searched in the guide information search device to the user.
本発明によれば、装置の大型化と通信時間の増加を抑制しつつ、画像の認識結果を用いて対象物のさらなる情報を得ることが可能な画像処理装置並びにそのような画像処理装置を用いた通信システム及び通信方法を提供することができる。 ADVANTAGE OF THE INVENTION According to this invention, while suppressing the enlargement of an apparatus and the increase in communication time, the image processing apparatus which can obtain the further information of a target object using an image recognition result, and such an image processing apparatus are used. Communication system and communication method can be provided.
以下、図面を参照して本発明の実施形態を説明する。
[第1の実施形態]
まず、本発明の第1の実施形態について説明する。図1は、本発明の第1の実施形態に係る画像処理装置を含む通信システムの機能ブロック図である。画像処理装置100は、画像取得部102と、画像認識部104と、文字情報取得部106と、通信部108とを有している。この画像処理装置100は、ガイド情報検索装置200と通信するように構成されている。
Hereinafter, embodiments of the present invention will be described with reference to the drawings.
[First Embodiment]
First, a first embodiment of the present invention will be described. FIG. 1 is a functional block diagram of a communication system including an image processing apparatus according to the first embodiment of the present invention. The
画像取得部102は、画像を取得する。この画像取得部102は、例えば撮像部による撮像によって得られた画像を取得する。この他、画像取得部102は、画像処理装置100の外部の機器から入力された画像を取得するように構成されていても良い。
The
画像認識部104は、画像取得部102によって入力された画像を認識する。ここでの「認識」は、文字情報取得部106で文字情報を取得できるような特徴情報を得る処理である。例えば、この認識は、画像内の対象物の形状や色等を認識する処理、画像内の文字を認識する処理等を含む。また、この認識は、画像が取得された際の対象物までの距離、画像が取得された位置、画像が取得された時刻等の数値化できる情報を認識する処理を含む。文字情報取得部106は、画像認識部104で認識された結果を用いて文字情報を取得する。例えば、画像認識部104において対象物の認識が行われていれば、文字情報取得部106は、対象物の認識結果から、対象物の名称等の文字情報を取得する。
The
通信部108は、ガイド情報検索装置200と通信する。例えば、通信部108は、文字情報取得部106で取得された文字情報をガイド情報検索装置200に送信する。また、通信部108は、ガイド情報検索装置200で検索された情報を受信する。
The
ガイド情報検索装置200は、記憶部202と、検索部204と、提示部206と、通信部208とを有している。
The guide
記憶部202は、文字情報と各種の情報とを関連付けて記憶している。文字情報と関連付けされる各種の情報は、例えば対象物を撮影する際の撮影方法をユーザにガイドするガイド情報である。 The storage unit 202 stores character information and various types of information in association with each other. The various types of information associated with the character information are guide information that guides the user to a shooting method when shooting the object.
検索部204は、通信部208で受信された文字情報と対応する情報を、記憶部202から検索する。なお、検索部204は、記憶部202以外からも情報を取得するように構成されていても良い。例えば、検索部204は、通信部208で受信された文字情報を検索キーワードとして用いて、検索サイト等における検索によって情報を取得しても良い。
The
提示部206は、検索部204で検索された情報をユーザに対して提示する。この提示は、例えば表示によって行われる。
The
通信部208は、画像処理装置100と通信する。例えば、通信部208は、画像処理装置100から送信された文字情報を受信する。また、通信部208は、必要に応じて検索部204で検索された情報を画像処理装置100に送信する。
A
図2は、図1に示した画像処理装置100とガイド情報検索装置200の適用例である通信システムの構成を示す図である。図2に示す通信システムは、撮像装置300と、携帯端末400と、サーバ500とを有している。撮像装置300と携帯端末400とは、互いに通信するように構成されている。また、携帯端末400とサーバ500とは、互いに通信するように構成されている。
FIG. 2 is a diagram illustrating a configuration of a communication system that is an application example of the
撮像装置300は、画像処理装置100としての機能を有するものであって、制御部302と、撮像部304と、表示部306と、接眼表示部308と、記録部310と、操作部312と、タッチパネル314と、姿勢検出部316と、位置検出部318と、計時部320と、通信部322とを有している。撮像装置300は、例えばデジタルカメラやスマートフォンといった撮像機能を有する各種の機器である。
The
制御部302は、例えばCPUやASICで構成されている。制御部302は、撮像装置300の各部の制御を行う。この制御部302は、図1で示した画像処理装置100の画像取得部102と、画像認識部104と、文字情報取得部106を有する。この他、制御部302は、撮像制御部3023と、画像処理部3024と、表示制御部3025と、通信制御部3026とを有している。撮像制御部3023は、撮像部304による撮像動作を制御する。画像処理部3024は、撮像部304によって取得された画像に対して表示や記録のために必要な画像処理を施す。この画像処理は、ホワイトバランス補正、階調補正、色補正といった画質に関する補正、リサイズ処理、圧縮処理、伸張処理等を含む。表示制御部3025は、表示部306への各種の画像の表示を制御する。通信制御部3026は、通信部322を介して撮像装置300と外部機器との通信の際の制御をする。通信制御部3026により、撮像装置300は、携帯端末400と通信自在に接続される。
The
撮像部304は、被写体を撮像して被写体に関する画像(画像データ)を取得する。この撮像部304は、撮影レンズ3041と、撮像素子3042と、アナログ/デジタル(A/D)変換部3043とを有している。撮影レンズ3041は、被写体からの光束を撮像素子3042に集光させる。撮像素子3042は、受光面を有する。受光面には、画素が配置されている。画素は、例えばフォトダイオードであり、入射光の光量に応じた電気信号(画像信号)を出力する。A/D変換部3043は、撮像素子3042で得られたアナログの画像信号をデジタルの画像信号(画像データ)に変換する。
The
表示部306は、例えば液晶ディスプレイや有機ELディスプレイであり、例えば撮像装置300の背面に設けられている。この表示部306は、各種の画像データに基づいて画像を表示する。接眼表示部308は、例えば液晶ディスプレイや有機ELディスプレイであり、例えば撮像装置300の背面に設けられた覗き込み式の表示部である。この接眼表示部308は、表示部306と同様、各種の画像データに基づいて画像を表示する。ここで、表示部306又は接眼表示部308における表示に用いられる画像データは、撮像部304の撮像によって得られた画像データや記録部310に記録された画像データである。
The
記録部310は、例えばフラッシュメモリであり、画像データ等をファイルとして記録する。記録部310には、接続先データベース(DB)3101と、画像データベース(DB)3102とが構築されている。また、記録部310の記録領域の一部は、機種情報記録部3103である。接続先DB3101は、撮像装置300の通信対象となる機器(携帯端末400)と通信するために必要なアドレス情報等を記憶したデータベースである。画像DB3102は、画像認識部104による画像認識のために必要となる各種の対象物の特徴量データ等を記憶したデータベースである。機種情報記録部3103は、撮像装置300の機種名の情報、撮影レンズ3041の特性情報(焦点距離等)といったガイド情報を取得する対象となる画像を撮像した撮像装置300に関する機種情報を記録するための記録領域である。なお、記録部310は、撮像装置300に内蔵されているものであっても、撮像装置300に対して着脱自在なものであっても良い。
The
操作部312は、ユーザが撮像装置300の操作を行うための機械式の操作部材である。操作部312としては、例えばレリーズボタンや電源スイッチが含まれる。レリーズボタンは、ユーザが撮影動作の実行を指示するためのボタンである。また、電源スイッチは、ユーザが撮像装置300の電源のオン又はオフを指示するためのスイッチである。
The
タッチパネル314は、例えば表示部306の表示画面の上に形成されており、ユーザによるタッチ操作を検出する。制御部302は、タッチパネル314で検出されたタッチ操作に応じた処理を行う。例えば、タッチパネル314は、レリーズボタンの代わりとして用いられる。その他、タッチパネル314は、表示部306の表示画面に表示された画像の特定の部分をユーザが指定するために用いられる。
The
姿勢検出部316は、例えば3軸の加速度センサであり、撮像装置300の姿勢を検出する。位置検出部318は、例えばGPSによって撮像装置300の現在位置を検出する。なお、位置検出部318によって撮像装置300の方位を検出できるようにしても良い。計時部320は、現在時刻を取得する。通信部322は、通信部108と対応しており、通信制御部3026による制御に従って携帯端末400と通信する。通信部322は、例えば無線LANインタフェースである。通信部322は、USB等の有線インタフェースであっても良い。
The
携帯端末400は、ガイド情報検索装置200としての機能を有するものであって、制御部402と、記録部404と、表示部406と、タッチパネル408と、通信部410と、通信部412とを有している。携帯端末400は、スマートフォン等の情報の提示機能を有する各種の機器である。図2の携帯端末400は、撮像部を有していないが、撮像部を有していても良い。
The
制御部402は、例えばCPUで構成されている。この制御部402は、携帯端末400の各部の制御を行う。この制御部402は、図1で示したガイド情報検索装置200の検索部204を有している。この他に制御部402は、通信制御部4022を有している。通信制御部4022は、撮像装置300又はサーバ500との通信の際の制御をする。
The
記録部404は、例えばハードディスクである。この記録部404には、記憶部202としてのガイド情報データベース(DB)4041が構築されている。ガイド情報DB4041は、ガイド情報の検索のためのデータベースである。ガイド情報は、各種の文字情報と対応付けられている。
The
提示部206として機能する表示部406は、例えば液晶ディスプレイや有機ELディスプレイである。この表示部406は、各種の画像データに基づいて画像を表示する。タッチパネル408は、表示部406の表示画面の上に形成されており、ユーザによるタッチ操作を検出する。制御部402は、タッチパネル408で検出されたタッチ操作に応じた処理を行う。
The
通信部410は、通信制御部4022による制御に従って撮像装置300と通信する。通信部412は、通信制御部4022による制御に従ってサーバ500と通信する。通信部410は、例えば無線LANインタフェースである。また、通信部412は、例えば携帯電話回線である。
The communication unit 410 communicates with the
サーバ500は、制御部502と、記録部504と、通信部506とを有している。
The
制御部502は、例えばCPUで構成され、サーバ500の各部の制御を行う。この制御部502は、通信制御部5021を有している。通信制御部5021は、携帯端末400との通信の際の制御をする。記録部504は、例えばハードディスクである。この記録部504には、検索部204によって検索される各種情報が記憶されている。通信部506は、通信制御部5021による制御に従って携帯端末400と通信する。
The
以下、本実施形態に係る通信システムの動作を説明する。ユーザは、撮像装置300と携帯端末400とを所持しているとする。この状態でユーザは、被写体(図では花)を撮影するために、図3(a)に示すように、撮像装置300を被写体に向ける。ここでは、ユーザは、桜を撮影しようとしていたとする。
Hereinafter, the operation of the communication system according to the present embodiment will be described. It is assumed that the user has the
このとき、撮像装置300の画像認識部104は、撮像部304を介して得られる画像から、被写体等の特徴情報を抽出する。特徴情報は、例えば、被写体の形状、色、撮像装置300から被写体までの距離等の文字情報化することが可能な各種の情報である。特徴情報は、画像から取得するものに限るものではない。例えば、位置検出部318で位置情報が取得されていたり、計時部320で現在時刻が取得されていたりする場合には、これらの現在位置情報及び現在時刻情報を特徴情報としても良い。特徴情報の抽出後、画像認識部104は、抽出した特徴情報を文字情報取得部106に送信する。文字情報取得部106は、画像認識部104で認識された各種の特徴情報から文字情報を取得する。例えば、図3(b)の例では、被写体の名称を表す文字情報である「花」、被写体の色を表す文字情報である「桃色」が抽出される。この他、背景を表す文字情報である「青空」等も抽出される。また、距離情報のような数値化された情報であれば、その数値が文字情報として抽出される。
At this time, the
文字情報を取得した後、通信制御部3026は、通信部322により、文字情報取得部106で取得された文字情報を携帯端末400に送信する。このとき、通信制御部3026は、機種情報記録部3103に記録されている機種情報も文字情報として携帯端末400に送信しても良い。
After acquiring the character information, the
撮像装置300から文字情報を取得すると、携帯端末400の検索部204は、図3(c)に示すようにして、撮像装置300から取得した文字情報を検索キーワードとしてガイド情報DB4041からガイド情報を検索する。例えば、被写体の名称が「花」で撮像装置300の機種名が「XX−Z」であれば、検索部204は、「「XX−Z」で「花」を撮る」、「桃色」、等の検索キーワードで検索を行う。前述したように、検索部204は、サーバ500との通信により、ウェブ上で検索をしても良い。
When the character information is acquired from the
ガイド情報の検索が終了すると、携帯端末400の制御部402は、検索したガイド情報を、図3(d)に示すようにして、表示部406に表示させる。これにより、ユーザは、機種「XX−Z」を用いた花の撮り方をガイド情報として知ることができる。本実施形態では、撮像装置300は、ガイド情報の検索をするための文字情報を取得して携帯端末400に送信するだけで、ガイド情報の検索を行わない。さらに、撮像装置300は、文字情報を送信するだけである。したがって、撮像装置300における通信の負荷はかなり小さくなる。
When the search for the guide information is completed, the
以下、本実施形態の通信システムの動作の詳細を説明する。図4は、撮像装置300の制御を示したフローチャートである。図4の処理は、制御部302に予め記憶されたプログラムに従って行われる。
The details of the operation of the communication system of the present embodiment will be described below. FIG. 4 is a flowchart showing the control of the
図4において、制御部302は、電源スイッチがオンされたか否かを判定する(ステップS101)。ステップS101において電源スイッチがオンされていないと判定した場合に、制御部302は、撮像装置300をスタンバイ状態に移行させる。スタンバイ状態では、ステップS101の判定等の撮像装置300における必要最低限の機能のみが実行される。
In FIG. 4, the
ステップS101において電源スイッチがオンされたと判定した場合に、制御部302は、撮像装置300の動作モードが撮影モードであるか否かを判定する(ステップS102)。撮影モードは、記録用の画像を撮影するための動作モードである。なお、撮像装置300の動作モードは、例えばユーザによる操作部312の操作やタッチパネル314の操作によって決定される。ステップS102において撮像装置300の動作モードが撮影モードでないと判定した場合に、制御部302は、撮影モード以外の動作モードに応じた処理を行う。撮影モード以外の動作モードは、例えば再生モードである。再生モードの詳細については説明を省略する。
When it is determined in step S101 that the power switch is turned on, the
ステップS102において撮像装置300の動作モードが撮影モードであると判定した場合に、制御部302は、スルー画表示を行う(ステップS103)。スルー画表示は、撮像部304の連続動作によって得られる画像をリアルタイムで表示部306に表示させる動作である。スルー画表示の際、制御部302は、スルー画表示中に撮像部304で得られる画像を画像取得部102によって取得する。そして、制御部302は、画像認識部104により、画像取得部102によって取得した画像から特徴情報を抽出する(ステップS104)。
If it is determined in step S102 that the operation mode of the
続いて、制御部302は、ユーザがガイド情報を要求しているか否かを判定する(ステップS105)。例えば、ユーザによる操作部312の操作やタッチパネル314の操作によってガイド情報が要求された場合に、ユーザがガイド情報を要求していると判定される。ステップS105においてユーザがガイド情報を要求していないと判定した場合に、制御部302は、ステップS106〜S109の処理をスキップする。一方、ステップS105においてユーザがガイド情報を要求していると判定した場合に、制御部302は、文字情報取得部106により、画像認識部104によって抽出された特徴情報から文字情報を取得する(ステップS106)。その後、制御部302は、文字情報が取得できたか否かを判定する(ステップS107)。ステップS107において文字情報が取得できなかったと判定した場合に、制御部302は、文字情報が取得できなかった、すなわちガイド情報を取得することができない旨の警告をユーザに対して行う(ステップS108)。警告は、例えば表示や音声を用いて行われる。警告の後、制御部302は、処理をステップS110に移行させる。
Subsequently, the
ステップS107において文字情報が取得できたと判定した場合に、制御部302は、通信制御部3026により、文字情報取得部106によって取得された文字情報を携帯端末400に送信する(ステップS109)。もちろん、画像情報のうち、色や形状や大きさ、距離分布など、文字に変換可能な情報のみを送って、画像情報そのものを補助情報として送るような応用も考えられる。この場合、画像情報は輪郭のみであったり、色分布のみであったりしても良い。補助的に得られた時刻や場所や温度や湿度や気圧や方位や傾きなどを文字情報で送っても良い。例えば、温度情報から「暑い時に」とか、仰角情報を「空高く」などと変換して送れば、様々なテキスト検索、ネット検索、自然言語検索がしやすくなる。撮影モードなどもテキスト化は重要で、モード名や撮影パラメータからも、「マクロで撮影」、「ワイドで撮影」等を文字で送れば、情報量が増え、情報の絞り込みが可能で、同様の撮影方法での撮影結果等が検索しやすい。
When it is determined in step S107 that the character information has been acquired, the
ステップS105においてユーザがガイド情報を要求してないと判定した場合、ステップS108又はS109の後、制御部302は、ユーザによる撮影操作があるか否かを判定する(ステップS110)。撮影操作は、例えばユーザによるレリーズボタンの押し操作やタッチパネル314を用いたタッチレリーズ操作である。ステップS110においてユーザによる撮影操作がないと判定した場合に、制御部302は、処理をステップS101に戻す。
If it is determined in step S105 that the user does not request guide information, after step S108 or S109, the
ステップS110においてユーザによる撮影操作があると判定した場合に、制御部302は、撮影動作を行う(ステップS111)。撮影動作は、撮像部304を制御して記録用の画像データを取得する動作である。撮影動作の実行後、制御部302は、画像処理部3024により、撮影動作により得られた画像データを画像処理する。そして、制御部302は、画像処理後の画像データを記録部310に記録する(ステップS112)。この後、制御部302は、処理をステップS101に戻す。
When it is determined in step S110 that there is a shooting operation by the user, the
図5は、携帯端末400の制御を示したフローチャートである。図5の処理は、制御部402に予め記憶されたプログラムに従って行われる。
FIG. 5 is a flowchart showing control of the
図5において、制御部402は、電源をオンさせるか否かを判定する(ステップS201)。ステップS201において電源をオンさせないと判定した場合に、制御部402は、携帯端末400をスタンバイ状態に移行させる。スタンバイ状態では、ステップS201の判定等の携帯端末400における必要最低限の機能のみが実行される。
In FIG. 5, the
ステップS201において電源をオンさせると判定した場合に、制御部402は、携帯端末400の電源をオンさせる。そして、制御部402は、撮像装置300と通信中か否かを判定する(ステップS202)。ステップS202において撮像装置300と通信中でないと判定した場合に、制御部402は、撮像装置300との通信モード以外の動作モードに応じた処理を行う。通信モード以外の動作モードの詳細については説明を省略する。
When it is determined in step S201 that the power is to be turned on, the
ステップS202において撮像装置300と通信中であると判定した場合に、制御部402は、撮像装置300から文字情報を受信したか否かを判定する(ステップS203)。ステップS203において文字情報を受信していないと判定した場合に、制御部402は、処理をステップS201に戻す。
If it is determined in step S202 that communication with the
ステップS203において文字情報を受信したと判定した場合に、制御部402は、検索部204により、受信した文字情報を利用してのガイド情報の検索を行う(ステップS204)。前述したように、ガイド情報は、ガイド情報DB4041からだけでなく、サーバ500によるウェブ上でも検索され得る。ガイド情報の検索後、制御部402は、ガイド情報の検索を行うことができたか否かを判定する(ステップS205)。ステップS205においてガイド情報の検索を行うことができなかったと判定した場合に、制御部402は、ガイド情報を取得することができなかった旨の警告を行う(ステップS206)。警告は、例えば表示や音声を用いて行われる。警告の後、制御部402は、処理をステップS201に移行させる。
When it is determined in step S203 that character information has been received, the
ステップS205においてガイド情報の検索を行うことができたと判定した場合に、制御部402は、検索したガイド情報を例えば図3(d)のようにして表示部406に表示させる(ステップS207)。このガイド情報は、撮影時、観察時のアドバイスであっても良く、撮影、観察時に得られた対象物の名称や解説にとどまらず、その向こうにあるものを教えたり、歴史的背景を教えたり、芸術作品との関係をガイドするものでも良い。ここで表示させる他、カメラで表示できるようにしても良く、周辺に関連機器がある場合又は遠隔でも関連機器がある場合、そこに表示するように無線で飛ばしても良い。例えば、職場に設えられた大型モニタに、出張先で撮影した画像と共に、その時撮影したものに関する情報を関連づけて表示するシステムに採用すれば、会議等に役立つ場合もある。結婚式場での撮影時に撮影した花嫁のブーケの花が、何であるかが、プロジェクタに投影されたりする。
ガイド情報を表示させた後、制御部402は、ガイド情報の表示を終了させるか否かを判定する(ステップS208)。例えば、ユーザによるタッチパネル408の操作によってガイド情報の表示の終了が要求された場合に、ガイド情報の表示を終了させると判定される。ステップS208においてガイド情報の表示を終了させないと判定した場合に、制御部402は、処理をステップS207に戻してガイド情報の表示を継続させる。ステップS208においてガイド情報の表示を終了させると判定した場合に、制御部402は、処理をステップS201に戻す。
When it is determined in step S205 that the guide information can be searched, the
After displaying the guide information, the
以上説明したように本実施形態によれば、画像の認識結果を用いてガイド情報を取得することが可能である。ここで、本実施形態においてはガイド情報をガイド情報検索装置200によって取得させている。このため、ガイド情報を取得するための情報を画像処理装置100に記憶させておく必要がない。また、画像処理装置100において発生する通信は、携帯端末400に文字情報を送信する際の通信だけである。このため、画像処理装置100における通信の負荷を軽減することが可能である。
As described above, according to the present embodiment, it is possible to acquire guide information using an image recognition result. Here, in this embodiment, guide information is acquired by the guide
次に、本実施形態の変形例を説明する。
[変形例1]
前述した実施形態では、ガイド情報をガイド情報検索装置200としての携帯端末400の表示部406に表示させている。これに対し、画像処理装置100としての撮像装置300との通信が発生するものの、携帯端末400において取得したガイド情報を撮像装置300の表示部306又は接眼表示部308に表示させるようにしても良い。特に、接眼表示部308にガイド情報を表示させるようにした場合、表示されるガイド情報は外光の影響を受けない。このため、ユーザは、ガイド情報を鮮明な状態で見ることができる。
Next, a modification of this embodiment will be described.
[Modification 1]
In the embodiment described above, guide information is displayed on the
[変形例2]
図3は、ユーザは、撮像装置300と携帯端末400とを別々に所持している例を示している。これに対し、図6で示すようにして撮像装置300と携帯端末400とが使用されても良い。
[Modification 2]
FIG. 3 shows an example in which the user has the
図6(a)は、変形例2の撮像装置300の外観を示している。図6(a)で示す撮像装置300は、「交換レンズ状」の撮像装置である。交換レンズ状の筐体の内部に図2で示した撮像装置300の各処理ブロックが設けられている。なお、交換レンズ状の撮像装置300の場合、図2で示した全ての処理ブロックが設けられている必要はない。例えば、表示部306と、接眼表示部308と、タッチパネル314と、姿勢検出部316と、位置検出部318と、計時部320とはなくても良い(あっても良い)。一方、図6(b)は、携帯端末400の外観を示している。変形例2の携帯端末400は、例えばスマートフォンであり、図2で示した携帯端末400と同じ構成を有している。
FIG. 6A shows the appearance of the
変形例2の撮像装置300は、図6(c)で示すように、アタッチメント600を介して携帯端末400に装着される。このような構成において、撮像装置300で撮影された画像は携帯端末400に送信される。すなわち、撮像装置300と携帯端末とが1台のデジタルカメラのように動作する。
As illustrated in FIG. 6C, the
図7は、変形例2の撮像装置300の制御を示したフローチャートである。図7の処理は、制御部302に予め記憶されたプログラムに従って行われる。
FIG. 7 is a flowchart illustrating control of the
図7において、制御部302は、電源がオンされたか否かを判定する(ステップS301)。例えば撮像装置300に電源スイッチが設けられている場合には、電源スイッチがオンされたか否かが判定される。ステップS301において電源がオンされていないと判定した場合に、制御部302は、撮像装置300をスタンバイ状態に移行させる。
In FIG. 7, the
ステップS301において電源がオンされたと判定した場合に、制御部302は、通信制御部3026により、スルー画を携帯端末400に送信する(ステップS302)。また、このとき、制御部302は、撮像部304で得られるスルー画を画像取得部102によって取得する。そして、制御部302は、画像認識部104により、画像取得部102によって取得した画像から特徴情報を抽出する(ステップS303)。
If it is determined in step S301 that the power is turned on, the
続いて、制御部302は、ユーザがガイド情報を要求しているか否かを判定する(ステップS304)。例えば、携帯端末400からのガイド要求が受信された場合に、ユーザがガイド情報を要求していると判定される。ステップS304においてユーザがガイド情報を要求していないと判定した場合に、制御部302は、ステップS305〜S308の処理をスキップする。一方、ステップS304においてユーザがガイド情報を要求していると判定した場合に、制御部302は、文字情報取得部106により、画像認識部104によって抽出された特徴情報から文字情報を取得する(ステップS305)。その後、制御部302は、文字情報を取得できたか否かを判定する(ステップS306)。ステップS306において文字情報を取得できなかったと判定した場合に、制御部302は、通信制御部3026により、文字情報を取得できなかった旨を示す警告情報を携帯端末400に送信する(ステップS307)。警告情報の送信の後、制御部402は、処理をステップS309に移行させる。文字情報の取得は、しかし、それほど困難ではなく、撮影が行われた時刻から季節の情報として、「春」とか「初夏」とかに変換しても良く、「朝早く」、「夕方に」といった文字はすぐに変換可能である。「黄色い」といった色だけとか、「丸い」といった形状のみでも良い。「明るい」とか、「動いている」なども、撮影で簡単に得られる情報と言える。撮影時には距離情報も得られる場合も多く、さらに、こうした経時変化などを画像情報としても良い。
Subsequently, the
ステップS306において文字情報が取得できたと判定した場合に、制御部302は、通信制御部3026により、文字情報取得部106によって取得された文字情報を携帯端末400に送信する(ステップS308)。
When it is determined in step S306 that the character information has been acquired, the
ステップS304においてユーザがガイド情報を要求してないと判定した場合、ステップS307又はS308の後、制御部302は、携帯端末400からの撮影指示があるか否かを判定する(ステップS309)。ステップS309において撮影指示がないと判定した場合に、制御部302は、処理をステップS301に戻す。
If it is determined in step S304 that the user does not request guide information, after step S307 or S308, the
ステップS309において撮影指示があると判定した場合に、制御部302は、撮影動作を行う(ステップS310)。撮影動作の実行後、制御部302は、画像処理部3024により、撮影動作により得られた画像データを画像処理する。そして、制御部302は、通信制御部3026により、画像処理後の画像データを携帯端末400に送信する(ステップS311)。この後、制御部302は、処理をステップS301に戻す。
When it is determined in step S309 that there is a shooting instruction, the
図8A及び図8Bは、変形例2の携帯端末400の制御を示したフローチャートである。図8A及び図8Bの処理は、制御部402に予め記憶されたプログラムに従って行われる。
8A and 8B are flowcharts illustrating control of the
図8Aにおいて、制御部402は、電源をオンさせるか否かを判定する(ステップS401)。ステップS401において電源をオンさせないと判定した場合に、制御部402は、携帯端末400をスタンバイ状態に移行させる。
In FIG. 8A, the
ステップS401において電源をオンさせると判定した場合に、制御部402は、携帯端末400の電源をオンさせる。そして、制御部402は、携帯端末400の動作モードが撮影モードであるか否かを判定する(ステップS402)。動作モードの設定は、例えばユーザによるタッチパネル408の操作によって行われる。ステップS402において動作モードが撮影モードでないと判定した場合に、制御部402は、撮影モード以外の動作モードに応じた処理を行う。撮影モード以外の動作モードの詳細については説明を省略する。
When it is determined in step S401 that the power is to be turned on, the
ステップS402において動作モードが撮影モードであると判定した場合に、制御部402は、撮像装置300と通信中か否かを判定する(ステップS403)。ステップS403において撮像装置300と通信中でないと判定した場合に、制御部402は、携帯端末400と撮像装置300とが通信中でないことをユーザに対して警告する(ステップS404)。その後、制御部402は、処理をステップS401に戻す。
When it is determined in step S402 that the operation mode is the shooting mode, the
ステップS403において撮像装置300と通信中であると判定した場合に、制御部402は、撮像装置300からスルー画を受信したか否かを判定する(ステップS405)。ステップS405においてスルー画を受信していないと判定した場合に、制御部402は、処理をステップS401に戻す。ステップS405においてスルー画を受信したと判定した場合に、制御部402は、受信したスルー画を表示部406に表示させる(ステップS406)。
If it is determined in step S403 that communication is being performed with the
続いて、制御部402は、ユーザがガイド情報を要求しているか否かを判定する(ステップS407)。例えば、ユーザによるタッチパネル408の操作によってガイド情報が要求された場合に、ユーザがガイド情報を要求していると判定される。ステップS407においてユーザがガイド情報を要求していないと判定した場合に、制御部402は、ステップS408〜S414の処理をスキップする。一方、ステップS407においてユーザがガイド情報を要求していると判定した場合に、制御部402は、通信制御部4022により、撮像装置300に対してガイド要求を送信する(ステップS408)。
Subsequently, the
ガイド要求の送信後、制御部402は、撮像装置300から文字情報を受信したか否かを判定する(ステップS409)。ステップS409において文字情報を受信していないと判定した場合に、制御部402は、撮像装置300から警告情報を受信したか否かを判定する(ステップS410)。ステップS410において警告情報を受信していないと判定した場合に、制御部402は、処理をステップS409に戻して文字情報の受信を待つ。ステップS410において警告情報を受信したと判定した場合に、制御部402は、ガイド情報を取得できなかった旨をユーザに警告する(ステップS411)。警告は、例えば表示や音声を用いて行われる。警告の後、制御部402は、処理をステップS415に移行させる。
After transmitting the guide request, the
ステップS409において文字情報を受信したと判定した場合に、制御部402は、検索部204により、受信した文字情報を利用してのガイド情報の検索を行う(ステップS412)。ステップS412のガイド情報の検索は、ステップS204のガイド情報の検索と同様にして行われる。ガイド情報の検索後、制御部402は、ガイド情報の検索を行うことができたか否かを判定する(ステップS413)。ステップS413においてガイド情報の検索を行うことができなかったと判定した場合に、制御部402は、処理をステップS411に移行させて警告を行う。
If it is determined in step S409 that character information has been received, the
ステップS413においてガイド情報の検索を行うことができたと判定した場合に、制御部402は、検索したガイド情報を例えば図3(d)のようにして表示部406に表示させる(ステップS414)。
If it is determined in step S413 that the guide information has been searched, the
ステップS407においてユーザがガイド情報を要求してないと判定した場合、ステップS411又はS414の後、制御部402は、ユーザによる撮影操作があるか否かを判定する(ステップS415)。撮影操作は、例えばユーザによるタッチパネル408を用いたタッチレリーズ操作である。ステップS415においてユーザによる撮影操作がないと判定した場合に、制御部402は、処理をステップS401に戻す。
If it is determined in step S407 that the user does not request guide information, after step S411 or S414, the
ステップS415においてユーザによる撮影操作があると判定した場合に、制御部302は、通信制御部4022により、撮像装置300に対して撮影指示を送信する(ステップS416)。撮影指示の送信後、制御部402は、撮像装置300から画像データを受信したか否かを判定する(ステップS417)。ステップS417において撮像装置300から画像データを受信したと判定するまで、制御部402は、ステップS417の判定を繰り返す。所定時間の間に画像データを受信できなかった場合に、処理がステップS401に移行するようにしても良い。
When it is determined in step S415 that there is a shooting operation by the user, the
ステップS417において撮像装置300から画像を受信したと判定した場合に、制御部402は、受信した画像データを記録部404に記録する(ステップS418)。この後、制御部402は、処理をステップS401に戻す。
When determining in step S417 that an image has been received from the
以上説明したように変形例2のような構成であっても、前述した実施形態と同様の効果が得られる。また、撮像装置300は、携帯端末400に比べて、撮像素子や撮影レンズの設計の自由度を高くすることが可能である。このため、携帯端末400よりも高機能の撮像部を設けることが可能である。高機能の撮像部を設けることにより、撮像装置300は、携帯端末400よりも高画質の画像を撮影することが可能である。また、このような高画質の画像を携帯端末400に送信することにより、高画質のスルー画を携帯端末400の表示部406に表示させたり、高画質の画像を記録部404に記録させたりすることが可能である。
As described above, even with the configuration of the second modification, the same effects as those of the above-described embodiment can be obtained. In addition, the
[第2の実施形態]
次に、本発明の第2の実施形態について説明する。図9は、本発明の第2の実施形態に係る画像処理装置を含む通信システムの機能ブロック図である。図10は、図9に示した画像処理装置100とガイド情報検索装置200の適用例である通信システムの構成を示す図である。図9及び図10については、第1の実施形態と異なる部分のみ説明する。図9及び図10に示すように、第2の実施形態では、文字情報取得部106がガイド情報検索装置200(携帯端末400)に設けられている。この他の点は、図1と同様である。このような構成において、第2の実施形態の画像処理装置100では、画像認識部104における対象物の認識までが行われる。そして、ガイド情報検索装置200において、文字情報の取得とガイド情報との検索が行われる。
[Second Embodiment]
Next, a second embodiment of the present invention will be described. FIG. 9 is a functional block diagram of a communication system including an image processing apparatus according to the second embodiment of the present invention. FIG. 10 is a diagram illustrating a configuration of a communication system that is an application example of the
以上説明したような本実施形態においても、画像の認識結果を用いてガイド情報を取得することが可能である。また、画像処理装置100において発生する通信は、ガイド情報検索装置200に特徴情報を送信する際の通信だけである。このため、画像処理装置100における通信の負荷を軽減することが可能である。
Also in the present embodiment as described above, it is possible to acquire guide information using an image recognition result. Further, communication that occurs in the
なお、第2の実施形態で説明した構成と第1の実施形態の変形例1及び変形例2の構成とは組み合わされても良い。 Note that the configuration described in the second embodiment and the configurations of the first and second modifications of the first embodiment may be combined.
以上実施形態に基づいて本発明を説明したが、本発明は上述した実施形態に限定されるものではなく、本発明の要旨の範囲内で種々の変形や応用が可能なことは勿論である。また、前述の各動作フローチャートの説明において、便宜上「まず」、「次に」等を用いて動作を説明しているが、この順で動作を実施することが必須であることを意味するものではない。 Although the present invention has been described above based on the embodiments, the present invention is not limited to the above-described embodiments, and various modifications and applications are naturally possible within the scope of the gist of the present invention. Further, in the description of each operation flowchart described above, the operation is described using “first”, “next”, and the like for convenience, but this does not mean that it is essential to perform the operations in this order. Absent.
また、上述した実施形態では画像処理装置としての側面を強調して説明したが、上述した実施形態の技術は、画像表示装置、検査装置、警告装置として、コンシューマ用途以外の例えば産業用機器や医療用機器の分野にも応用され得る。テキストベースでの検索時の情報量のリッチ化や、情報の絞り込み情報が、表示や検査や警告時の精度を上げることが可能となる。いちいち、スマートフォン等の携帯通信端末を手にしなくとも、いつの間にか、補助情報が送られて来ているような仕様にもできる。うまく検査が出来ない場合等は、失敗検査画像などを画像からや撮影時の情報から判定し、「失敗」などと判定して送っても良く、こうした応用は本願の技術がカバーする範囲内であり、端末を取り出せば、失敗を防ぐアドバイスが表示されていたりすれば便利である。 Further, in the above-described embodiment, the aspect as the image processing apparatus has been emphasized. However, the technology of the above-described embodiment can be used as an image display device, an inspection device, and a warning device, for example, industrial equipment and medical devices other than consumer applications. It can also be applied to the field of industrial equipment. The richness of information amount at the time of text-based search and the information narrowing down information can improve the accuracy at the time of display, inspection and warning. Even if you don't have a mobile communication terminal such as a smartphone, you can make specifications so that auxiliary information is sent to you. If the inspection is not successful, the failure inspection image may be judged from the image or information at the time of shooting, and may be sent as “failure”. Such applications are within the scope covered by the technology of the present application. Yes, if the terminal is taken out, it is convenient if advice to prevent failure is displayed.
さらに、上記した実施形態には種々の段階の発明が含まれており、開示される複数の構成要件の適当な組合せにより種々の発明が抽出され得る。例えば、実施形態に示される全構成要件からいくつかの構成要件が削除されても、上述したような課題を解決でき、上述したような効果が得られる場合には、この構成要件が削除された構成も発明として抽出され得る。 Further, the above-described embodiments include various stages of the invention, and various inventions can be extracted by appropriately combining a plurality of disclosed constituent elements. For example, even if some configuration requirements are deleted from all the configuration requirements shown in the embodiment, the above-described problem can be solved, and this configuration requirement is deleted when the above-described effects can be obtained. The configuration can also be extracted as an invention.
100 画像処理装置、102 画像取得部、104 画像認識部、106 文字情報取得部、108 通信部、200 ガイド情報検索装置、202 記憶部、204 検索部、206 提示部、208 通信部、300 撮像装置、302 制御部、304 撮像部、306 表示部、308 接眼表示部、310 記録部、312 操作部、314 タッチパネル、316 姿勢検出部、318 位置検出部、320 計時部、322 通信部、400 携帯端末、402 制御部、404 記録部、406 表示部、408 タッチパネル、410 通信部、412 通信部、500 サーバ、502 制御部、504 記録部、506 通信部、600 アタッチメント、3023 撮像制御部、3024 画像処理部、3025 表示制御部、3026 通信制御部、3041 撮影レンズ、3042 撮像素子、3043 デジタル(A/D)変換部、3103 機種情報記録部、4022 通信制御部、5021 通信制御部、3101 接続先データベース(DB)、3102 画像データベース(DB)、4041 ガイド情報データベース(DB)
DESCRIPTION OF
Claims (9)
前記画像取得部で取得された画像から文字情報を取得可能な特徴情報を認識する画像認識部と、
前記画像認識部で認識された特徴情報から文字情報を取得する文字情報取得部と、
前記文字情報取得部で取得された文字情報を、文字情報からガイド情報を検索するガイド情報検索装置に通信する通信部と、
を具備することを特徴とする画像処理装置。 An image acquisition unit for acquiring images;
An image recognition unit for recognizing feature information capable of acquiring character information from the image acquired by the image acquisition unit;
A character information acquisition unit that acquires character information from the feature information recognized by the image recognition unit;
A communication unit that communicates the character information acquired by the character information acquisition unit to a guide information search device that searches for guide information from the character information;
An image processing apparatus comprising:
前記画像取得部で取得された画像から文字情報を取得可能な特徴情報を認識する画像認識部と、
前記画像認識部で認識された特徴情報を、特徴情報から文字情報を取得してガイド情報を検索するガイド情報検索装置に通信する通信部と、
を具備することを特徴とする画像処理装置。 An image acquisition unit for acquiring images;
An image recognition unit for recognizing feature information capable of acquiring character information from the image acquired by the image acquisition unit;
A communication unit that communicates to the guide information search device that acquires the character information from the feature information and retrieves the guide information, the feature information recognized by the image recognition unit;
An image processing apparatus comprising:
前記通信部は、前記機種情報をさらに前記ガイド情報検索装置に通信することを特徴とする請求項3に記載の画像処理装置。 A model information recording unit that records model information of the imaging apparatus that has acquired the image;
The image processing apparatus according to claim 3, wherein the communication unit further communicates the model information to the guide information search apparatus.
前記画像が取得された時刻を検出する計時部と、
をさらに具備し、
前記画像認識部は、さらに、前記位置及び時刻を前記特徴情報として認識することを特徴とする請求項3又は4に記載の画像処理装置。 A position detection unit for detecting a position where the image is acquired;
A timer for detecting the time when the image was acquired;
Further comprising
The image processing apparatus according to claim 3, wherein the image recognition unit further recognizes the position and time as the feature information.
前記画像取得部で取得された画像から文字情報を取得可能な特徴情報を認識する画像認識部と、
前記画像認識部で認識された特徴情報から文字情報を取得する文字情報取得部と、
前記文字情報取得部で取得された文字情報を送信する画像処理装置側通信部と、
を具備する画像処理装置と、
前記画像処理装置側通信部から通信された文字情報を受信するガイド情報検索装置側通信部と、
前記受信された文字情報からガイド情報を検索する検索部と、
前記検索されたガイド情報をユーザに提示する提示部と、
を具備するガイド情報検索装置と、
を有することを特徴とする通信システム。 An image acquisition unit for acquiring images;
An image recognition unit for recognizing feature information capable of acquiring character information from the image acquired by the image acquisition unit;
A character information acquisition unit that acquires character information from the feature information recognized by the image recognition unit;
An image processing apparatus-side communication unit that transmits the character information acquired by the character information acquisition unit;
An image processing apparatus comprising:
A guide information retrieval device side communication unit that receives character information communicated from the image processing device side communication unit;
A search unit for searching for guide information from the received character information;
A presentation unit for presenting the searched guide information to a user;
A guide information retrieval device comprising:
A communication system comprising:
前記画像取得部で取得された画像から文字情報を取得可能な特徴情報を認識する画像認識部と、
前記画像認識部で取得された特徴情報を送信する画像処理装置側通信部と、
を具備する画像処理装置と、
前記画像処理装置側通信部から通信された特徴情報を受信するガイド情報検索装置側通信部と、
前記受信された特徴情報から文字情報を取得する文字情報取得部と、
前記取得された文字情報からガイド情報を検索する検索部と、
前記検索されたガイド情報をユーザに提示する提示部と、
を具備するガイド情報検索装置と、
を有することを特徴とする通信システム。 An image acquisition unit for acquiring images;
An image recognition unit for recognizing feature information capable of acquiring character information from the image acquired by the image acquisition unit;
An image processing device side communication unit for transmitting the feature information acquired by the image recognition unit;
An image processing apparatus comprising:
A guide information retrieval device side communication unit that receives feature information communicated from the image processing device side communication unit;
A character information acquisition unit for acquiring character information from the received feature information;
A search unit for searching for guide information from the acquired character information;
A presentation unit for presenting the searched guide information to a user;
A guide information retrieval device comprising:
A communication system comprising:
前記取得された画像から文字情報を取得可能な特徴情報を認識することと、
前記認識された特徴情報から文字情報を取得することと、
前記取得された文字情報を、文字情報からガイド情報を検索するガイド情報検索装置に通信することと、
前記通信された文字情報から前記ガイド情報検索装置においてガイド情報を検索することと、
前記ガイド情報検索装置において検索されたガイド情報をユーザに提示することと、
を具備することを特徴とする通信方法。 Acquiring images,
Recognizing feature information capable of acquiring character information from the acquired image;
Obtaining character information from the recognized feature information;
Communicating the acquired character information to a guide information retrieval device that retrieves guide information from the character information;
Retrieving guide information in the guide information retrieval device from the communicated character information;
Presenting guide information retrieved by the guide information retrieval device to the user;
A communication method comprising:
前記取得された画像から文字情報を取得可能な特徴情報を認識することと、
前記認識された特徴情報を、特徴情報から文字情報を取得してガイド情報を検索するガイド情報検索装置に通信することと、
前記通信された特徴情報から文字情報を取得することと、
前記取得された文字情報から前記ガイド情報検索装置においてガイド情報を検索することと、
前記ガイド情報検索装置において検索されたガイド情報をユーザに提示することと、
を具備することを特徴とする通信方法。 Acquiring images,
Recognizing feature information capable of acquiring character information from the acquired image;
Communicating the recognized feature information to a guide information retrieval device that retrieves character information from the feature information and retrieves guide information;
Obtaining character information from the communicated feature information;
Searching the guide information in the guide information search device from the acquired character information;
Presenting guide information retrieved by the guide information retrieval device to the user;
A communication method comprising:
Priority Applications (4)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2014083861A JP2015204037A (en) | 2014-04-15 | 2014-04-15 | Image processing device, communication system, and communication method |
PCT/JP2015/060984 WO2015159775A1 (en) | 2014-04-15 | 2015-04-08 | Image processing apparatus, communication system, communication method, and image-capturing device |
CN201580019736.6A CN106233283A (en) | 2014-04-15 | 2015-04-08 | Image processing apparatus, communication system and communication means and camera head |
US15/293,820 US10133932B2 (en) | 2014-04-15 | 2016-10-14 | Image processing apparatus, communication system, communication method and imaging device |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2014083861A JP2015204037A (en) | 2014-04-15 | 2014-04-15 | Image processing device, communication system, and communication method |
Publications (1)
Publication Number | Publication Date |
---|---|
JP2015204037A true JP2015204037A (en) | 2015-11-16 |
Family
ID=54597451
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2014083861A Pending JP2015204037A (en) | 2014-04-15 | 2014-04-15 | Image processing device, communication system, and communication method |
Country Status (1)
Country | Link |
---|---|
JP (1) | JP2015204037A (en) |
Cited By (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2018164272A (en) * | 2018-05-28 | 2018-10-18 | ソリッドビジョン株式会社 | Imaging processing apparatus |
-
2014
- 2014-04-15 JP JP2014083861A patent/JP2015204037A/en active Pending
Cited By (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2018164272A (en) * | 2018-05-28 | 2018-10-18 | ソリッドビジョン株式会社 | Imaging processing apparatus |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US9836886B2 (en) | Client terminal and server to determine an overhead view image | |
KR101977703B1 (en) | Method for controlling photographing in terminal and terminal thereof | |
KR101379066B1 (en) | Image processing device, image processing method, and recording medium | |
US9325862B2 (en) | Server, client terminal, system, and storage medium for capturing landmarks | |
JP5532026B2 (en) | Display device, display method, and program | |
WO2015159775A1 (en) | Image processing apparatus, communication system, communication method, and image-capturing device | |
JP2013186691A (en) | Image processing device, image processing method, and program | |
KR20110020746A (en) | Method for providing object information and image pickup device applying the same | |
JPWO2014141522A1 (en) | Image determination apparatus, imaging apparatus, three-dimensional measurement apparatus, image determination method, and program | |
JP5155266B2 (en) | Image display device, image display method, and image display program | |
JP2013021473A (en) | Information processing device, information acquisition method, and computer program | |
JP2015204037A (en) | Image processing device, communication system, and communication method | |
JP2009111827A (en) | Photographing apparatus and image file providing system | |
JP2018106671A (en) | Image information processing apparatus and image information processing method | |
JP6168926B2 (en) | Information processing apparatus, display system, and control method | |
JP5753514B2 (en) | Image display device and computer program | |
JP2017199972A (en) | Terminal device, information acquisition system, information acquisition method, and program | |
JP6591006B2 (en) | Imaging apparatus, communication system, and imaging method | |
JP6370598B2 (en) | Imaging device | |
JP5670092B2 (en) | Topographic display system, portable terminal, topographic display method and program | |
JP5868776B2 (en) | Image display device and computer program | |
JP2012170100A (en) | Image display unit, image display method and computer program | |
JP5247909B2 (en) | Image display device, image display method, and computer program | |
KR101605768B1 (en) | Data processing apparatus for map data process and method thereof | |
JP5634910B2 (en) | Portable information terminal device |