JP6197801B2 - データ入力システム、データ入力装置、データ入力方法およびデータ入力プログラム - Google Patents
データ入力システム、データ入力装置、データ入力方法およびデータ入力プログラム Download PDFInfo
- Publication number
- JP6197801B2 JP6197801B2 JP2015016942A JP2015016942A JP6197801B2 JP 6197801 B2 JP6197801 B2 JP 6197801B2 JP 2015016942 A JP2015016942 A JP 2015016942A JP 2015016942 A JP2015016942 A JP 2015016942A JP 6197801 B2 JP6197801 B2 JP 6197801B2
- Authority
- JP
- Japan
- Prior art keywords
- data input
- information
- screen
- data
- imaging
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
- 238000000034 method Methods 0.000 title claims description 193
- 238000003384 imaging method Methods 0.000 claims description 153
- 238000001514 detection method Methods 0.000 claims description 116
- 230000008859 change Effects 0.000 claims description 80
- 238000000605 extraction Methods 0.000 claims description 25
- 239000000284 extract Substances 0.000 claims description 14
- 230000008569 process Effects 0.000 description 175
- 238000004891 communication Methods 0.000 description 151
- 230000005540 biological transmission Effects 0.000 description 55
- 230000006870 function Effects 0.000 description 46
- 238000012545 processing Methods 0.000 description 24
- 238000010586 diagram Methods 0.000 description 22
- 230000004044 response Effects 0.000 description 11
- 230000003287 optical effect Effects 0.000 description 9
- 239000003550 marker Substances 0.000 description 7
- 230000004048 modification Effects 0.000 description 7
- 238000012986 modification Methods 0.000 description 7
- 230000003068 static effect Effects 0.000 description 5
- 238000006243 chemical reaction Methods 0.000 description 4
- 238000013479 data entry Methods 0.000 description 4
- 238000012805 post-processing Methods 0.000 description 4
- 102220475064 HSPB1-associated protein 1_S64A_mutation Human genes 0.000 description 3
- 239000004065 semiconductor Substances 0.000 description 3
- WBMKMLWMIQUJDP-STHHAXOLSA-N (4R,4aS,7aR,12bS)-4a,9-dihydroxy-3-prop-2-ynyl-2,4,5,6,7a,13-hexahydro-1H-4,12-methanobenzofuro[3,2-e]isoquinolin-7-one hydrochloride Chemical compound Cl.Oc1ccc2C[C@H]3N(CC#C)CC[C@@]45[C@@H](Oc1c24)C(=O)CC[C@@]35O WBMKMLWMIQUJDP-STHHAXOLSA-N 0.000 description 2
- 239000011521 glass Substances 0.000 description 2
- 230000010365 information processing Effects 0.000 description 2
- 239000004973 liquid crystal related substance Substances 0.000 description 2
- OKTJSMMVPCPJKN-UHFFFAOYSA-N Carbon Chemical compound [C] OKTJSMMVPCPJKN-UHFFFAOYSA-N 0.000 description 1
- 230000004913 activation Effects 0.000 description 1
- 238000013459 approach Methods 0.000 description 1
- 239000003738 black carbon Substances 0.000 description 1
- 229910052799 carbon Inorganic materials 0.000 description 1
- 230000000295 complement effect Effects 0.000 description 1
- 230000007123 defense Effects 0.000 description 1
- 238000007599 discharging Methods 0.000 description 1
- 238000005401 electroluminescence Methods 0.000 description 1
- 230000012447 hatching Effects 0.000 description 1
- 229910044991 metal oxide Inorganic materials 0.000 description 1
- 150000004706 metal oxides Chemical class 0.000 description 1
- 230000002093 peripheral effect Effects 0.000 description 1
- 238000003825 pressing Methods 0.000 description 1
- 238000004080 punching Methods 0.000 description 1
- 238000012546 transfer Methods 0.000 description 1
Images
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N1/00—Scanning, transmission or reproduction of documents or the like, e.g. facsimile transmission; Details thereof
- H04N1/00127—Connection or combination of a still picture apparatus with another apparatus, e.g. for storage, processing or transmission of still picture signals or of information associated with a still picture
- H04N1/00204—Connection or combination of a still picture apparatus with another apparatus, e.g. for storage, processing or transmission of still picture signals or of information associated with a still picture with a digital computer or a digital computer system, e.g. an internet server
-
- G—PHYSICS
- G02—OPTICS
- G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
- G02B27/00—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
- G02B27/01—Head-up displays
- G02B27/017—Head mounted
-
- G—PHYSICS
- G02—OPTICS
- G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
- G02B27/00—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
- G02B27/01—Head-up displays
- G02B27/017—Head mounted
- G02B27/0172—Head mounted characterised by optical features
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N1/00—Scanning, transmission or reproduction of documents or the like, e.g. facsimile transmission; Details thereof
- H04N1/00127—Connection or combination of a still picture apparatus with another apparatus, e.g. for storage, processing or transmission of still picture signals or of information associated with a still picture
- H04N1/00249—Connection or combination of a still picture apparatus with another apparatus, e.g. for storage, processing or transmission of still picture signals or of information associated with a still picture with a photographic apparatus, e.g. a photographic printer or a projector
- H04N1/00251—Connection or combination of a still picture apparatus with another apparatus, e.g. for storage, processing or transmission of still picture signals or of information associated with a still picture with a photographic apparatus, e.g. a photographic printer or a projector with an apparatus for taking photographic images, e.g. a camera
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N1/00—Scanning, transmission or reproduction of documents or the like, e.g. facsimile transmission; Details thereof
- H04N1/00127—Connection or combination of a still picture apparatus with another apparatus, e.g. for storage, processing or transmission of still picture signals or of information associated with a still picture
- H04N1/0032—Connection or combination of a still picture apparatus with another apparatus, e.g. for storage, processing or transmission of still picture signals or of information associated with a still picture with a medium handling apparatus, e.g. a sheet sorter
-
- G—PHYSICS
- G02—OPTICS
- G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
- G02B27/00—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
- G02B27/01—Head-up displays
- G02B27/0101—Head-up displays characterised by optical features
- G02B2027/0138—Head-up displays characterised by optical features comprising image capture systems, e.g. camera
-
- G—PHYSICS
- G02—OPTICS
- G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
- G02B27/00—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
- G02B27/01—Head-up displays
- G02B27/0101—Head-up displays characterised by optical features
- G02B2027/014—Head-up displays characterised by optical features comprising information/image processing systems
-
- G—PHYSICS
- G02—OPTICS
- G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
- G02B27/00—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
- G02B27/01—Head-up displays
- G02B27/017—Head mounted
- G02B2027/0178—Eyeglass type
-
- G—PHYSICS
- G02—OPTICS
- G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
- G02B27/00—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
- G02B27/01—Head-up displays
- G02B27/0179—Display position adjusting means not related to the information to be displayed
- G02B2027/0187—Display position adjusting means not related to the information to be displayed slaved to motion of at least a part of the body of the user, e.g. head, eye
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V30/00—Character recognition; Recognising digital ink; Document-oriented image-based pattern recognition
- G06V30/10—Character recognition
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N2201/00—Indexing scheme relating to scanning, transmission or reproduction of documents or the like, and to details thereof
- H04N2201/0008—Connection or combination of a still picture apparatus with another apparatus
- H04N2201/0034—Details of the connection, e.g. connector, interface
- H04N2201/0048—Type of connection
- H04N2201/006—Using near field communication, e.g. an inductive loop
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N2201/00—Indexing scheme relating to scanning, transmission or reproduction of documents or the like, and to details thereof
- H04N2201/0077—Types of the still picture apparatus
- H04N2201/0094—Multifunctional device, i.e. a device capable of all of reading, reproducing, copying, facsimile transception, file transception
Landscapes
- Engineering & Computer Science (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Optics & Photonics (AREA)
- Computing Systems (AREA)
- General Engineering & Computer Science (AREA)
- User Interface Of Digital Computer (AREA)
- Position Input By Displaying (AREA)
Description
この局面に従えば、被写体を撮像し、撮像して得られる画像データに含まれる記録媒体に記憶された情報を検出し、検出された情報のうちからデータ入力領域に入力可能な入力情報を抽出し、撮像して得られる画像データに含まれる表示面と記録媒体の形状が変化した部分または記録媒体の記録媒体が表示面に対して移動する方向の端部との相対位置に基づいて表示面中の指示位置を検出し、検出される指示位置が表示された画面内の場合、抽出された入力情報を、データ入力領域に入力されたデータとして設定する。このため、表示された画面のデータ入力領域に、記録媒体に記憶された情報のうちから抽出されたデータ入力領域に入力可能な入力情報が設定されるので、任意の画面に含まれるデータ入力領域にデータを設定することができる。画像データに含まれる表示面と記録媒体と記録媒体の形状が変化した部分または記録媒体の記録媒体が表示面に対して移動する方向の端部との相対位置に基づいて表示面中の指示位置を検出するので、表示された画面中の位置を特定することができる。また、ユーザーは、記録媒体と表示面との相対的な位置を変更する操作をすればよく、データ入力領域に容易にデータを設定することができる。その結果、任意のアプリケーションプログラムを実行する場合におけるデータを入力する操作を容易にしたデータ入力システムを提供することができる。
この局面に従えば、記録媒体と表示面との相対位置を検出するタイミングを決定することができる。
好ましくは、指示位置検出手段は、記録媒体の形状が変化した部分が表示面と重なる位置を、指示位置として検出する。
この局面に従えば、表示された画面中の位置を特定することができる。
好ましくは、記録媒体は矩形であり、指示位置検出手段は、記録媒体の4辺のうち直線から変化した2つの辺で挟まれる頂角を、形状が変化した部分に決定する。
この局面に従えば、記録媒体の形状の変化を検出することができる。
この発明のさらに他の局面によれば、データ入力装置は、被写体を撮像し、撮像して得られる画像データを出力する撮像手段を備えた撮像装置と通信可能なデータ入力装置であって、データ入力領域を含む画面を表示する表示手段と、データ入力領域に入力されたデータを設定する設定手段と、撮像手段から出力された画像データに含まれる表示手段の表示面と画像データに含まれる記録媒体の記録媒体が表示面に対して移動する方向の端部との相対位置に基づき検出された表示面中の指示位置を取得する指示位置取得手段と、撮像手段が出力する画像に基づいて、記録媒体と表示面との相対位置の変化を検出する移動検出手段と、指示位置取得手段は、相対位置の変化が所定の値以下となった時点の記録媒体の記録媒体が表示面に対して移動する方向の端部と表示面との相対位置に基づいて、指示位置を検出し、画像データに基づき検出された、記録媒体に記憶された情報を取得する情報取得手段と、取得された情報のうちから、データ入力領域に入力可能な入力情報を取得する入力情報取得手段と、を備え、設定手段は、指示位置取得手段により取得される指示位置が表示された画面内の場合、取得された入力情報を、表示された画面に含まれるデータ入力領域に入力されたデータとして設定する。
この局面に従えば、記録媒体と表示面との相対位置を検出するタイミングと、そのタイミングにおける画面中の位置を特定することができる。
好ましくは、指示位置検出手段は、記録媒体と表示面との相対位置が変化している間に記録媒体の記録媒体が表示面に対して移動する方向の端部が、相対位置の変化が所定の値以下となった時点で表示面と重なる位置を指示位置として検出する。
好ましくは、指示位置取得手段は、撮像装置から撮像装置により検出された表示面中の指示位置を取得する。
この発明のさらに他の局面によれば、データ入力方法は、データ入力装置と、データ入力装置と通信可能な撮像装置と、を含むデータ入力システムで実行されるデータ入力方法であって、撮像装置は、被写体を撮像し、撮像して得られる画像データを出力する撮像手段を、備えており、データ入力装置は、データ入力領域を含む画面を表示する表示手段を、備えており、データ入力装置および撮像装置のいずれかに、撮像手段が出力する画像データに含まれる表示手段の表示面と画像データに含まれる記録媒体との相対位置に基づき検出された表示面中の指示位置を取得する指示位置取得ステップと、撮像手段が出力する画像に基づいて、記録媒体と表示面との相対位置の変化を検出する移動検出ステップと、を実行させ、指示位置取得ステップは、相対位置の変化が所定の値以下となった時点の記録媒体の記録媒体が表示面に対して移動する方向の端部と表示面との相対位置に基づいて、指示位置を検出するステップを含み、データ入力装置および撮像装置のいずれかに、撮像手段が出力する画像データに基づき検出された、記録媒体に記憶された情報を取得する情報取得ステップを実行させ、データ入力装置および撮像装置のいずれかに、取得された情報のうちから抽出された、データ入力領域に入力可能な入力情報を取得する入力情報取得ステップを実行させ、データ入力装置に、指示位置取得ステップにおいて取得される指示位置が表示された画面内の場合に、取得された入力情報を、表示された画面に含まれるデータ入力領域に入力されたデータとして設定する設定ステップを実行させる。
この発明のさらに他の局面によれば、データ入力プログラムは、被写体を撮像し、撮像して得られる画像データを出力する撮像手段を備えた撮像装置と通信可能なデータ入力装置を制御するコンピューターで実行されるデータ入力プログラムであって、データ入力装置は、データ入力領域を含む画面を表示する表示手段を備えており、撮像装置から撮像手段が出力する画像データを受信する画像データ受信ステップと、受信された画像データに含まれる表示手段の表示面と画像データに含まれる記録媒体との相対位置に基づいて表示面中の指示位置を検出する指示位置検出ステップと、受信された画像データに基づいて、記録媒体と表示面との相対位置の変化を検出する移動検出ステップと、指示位置検出ステップは、相対位置の変化が所定の値以下となった時点の記録媒体の記録媒体が表示面に対して移動する方向の端部と表示面との相対位置に基づいて、指示位置を検出するステップを含み、受信された画像データに基づいて、記録媒体に記憶された情報を検出する情報検出ステップと、検出された情報のうちからデータ入力領域に入力可能な入力情報を抽出する入力情報抽出ステップと、指示位置検出ステップにおいて検出される指示位置が表示された画面内の場合に、抽出された入力情報を、表示された画面に含まれるデータ入力領域に入力されたデータとして設定する設定ステップと、をコンピューターに実行させる。
図1は、本発明の実施の形態におけるデータ入力システムの全体概要の一例を示す図である。図1を参照して、データ入力システム1は、MFP(Multi Function Peripheral)100と、ヘッドマウントディスプレイ(以下、「HMD」という)200と、パーソナルコンピューター(以下「PC」という)300と、を含む。
図6に示した形状変化検出部59は、記録媒体の形状の変化を検出するようにしたが、記録媒体の移動が停止したことを検出するようにしてもよい。例えば、図9に示した画像データ500において、名刺の画像411が、操作画面400に対する相対位置の変化を検出することにより、名刺の移動を検出する。名刺の画像411と、操作画面400との相対位置が変化しなくなった時点と、名刺の画像411の所定の部分が操作画面400と重なる部分を、指示位置に決定する。所定の部分は、例えば、名刺の画像411において、名刺の画像411が操作画面に対して移動する方向の端部とすればよい。図9に示した画像データ500において、名刺の画像411が操作画面400の下側から上側に移動する場合、名刺画像411の左上の頂点が、所定の部分となる。
上述した実施の形態においては、MFP100にデータを入力する場合を例に説明したが、変形例においては、PC300にデータを入力する。この場合、PC300が備えるCPUは、図6に示した機能と同様の機能を有する。PC300は、複数のアプリケーションプログラムを並列で実行することが可能であり、この場合には、複数のアプリケーションプログラムそれぞれが画面を表示させる。この場合、複数の画面が、同時に表示される。複数の画面は、互いに重ならずに表示される場合もあれば、互いに重なって表示される場合もある。このように、PC300は、複数のアプリケーションプログラムを実行する場合、複数のアプリケーションプログラムにそれぞれ対応する複数の画面を表示するが、複数の画面のいずれか1つをカレント状態に設定する。
部品Bの発注数量に対応するデータ入力領域612に「100」を設定し、部品Dの発注数量に対応するデータ入力領域614に「100」を設定し、部品Eの発注数量に対応するデータ入力領域615に「100」を設定する。
第2の実施の形態におけるデータ入力システム1は、第1の実施の形態におけるデータ入力システム1において、MFP100が有する機能の一部を、HMD200が有するようにしたものである。以下、第2の実施の形態におけるデータ入力システム1について、第1の実施の形態におけるデータ入力システム1と異なる点を主に説明する。
上述した実施の形態においては、MFP100にデータを入力する場合を例に説明したが、変形例においては、PC300にデータを入力する。この場合、PC300が備えるCPUは、図17に示したMFP100が備えるCPU111が有する機能と同様の機能を有する。PC300は、複数のアプリケーションプログラムを並列で実行することが可能であり、この場合には、複数のアプリケーションプログラムそれぞれが画面を表示させる。この場合、複数の画面が、同時に表示される。複数の画面は、互いに重ならずに表示される場合もあれば、互いに重なって表示される場合もある。このように、PC300は、複数のアプリケーションプログラムを実行する場合、複数のアプリケーションプログラムにそれぞれ対応する複数の画面を表示するが、複数の画面のいずれか1つをカレント状態に設定する。カレント状態に設定された画面を表示するアプリケーションプログラムがカレント状態に設定される。
(1)前記入力情報抽出手段は、前記画面が前記表示手段に表示されるごとに、前記表示手段に表示された画面に対応するデータ定義情報に基づいて、入力情報を抽出する、請求項8に記載のデータ入力装置。
Claims (22)
- データ入力装置と、前記データ入力装置と通信可能な撮像装置と、を含むデータ入力システムであって、
前記撮像装置は、被写体を撮像し、撮像して得られる画像データを出力する撮像手段を、備えており、
前記データ入力装置は、データ入力領域を含む画面を表示する表示手段と、
データ入力領域に入力されたデータを設定する設定手段と、を備えており、
前記データ入力装置および前記撮像装置のいずれかは、さらに、前記撮像手段が出力する画像データに含まれる前記表示手段の表示面と、前記画像データに含まれる記録媒体の形状が変化した部分との相対位置に基づいて前記表示面中の指示位置を検出する指示位置検出手段を備え、
前記データ入力装置および前記撮像装置のいずれかは、さらに、前記撮像手段が出力する画像データに含まれる前記記録媒体に記憶された情報を検出する情報検出手段を備え、
前記データ入力装置および前記撮像装置のいずれかは、さらに、前記検出された情報のうちから前記データ入力領域に入力可能な入力情報を抽出する入力情報抽出手段を備え、
前記設定手段は、前記指示位置検出手段により検出される指示位置が前記表示された画面内の場合、前記抽出された入力情報を、前記表示された画面に含まれる前記データ入力領域に入力されたデータとして設定する、データ入力システム。 - データ入力装置と、前記データ入力装置と通信可能な撮像装置と、を含むデータ入力システムであって、
前記撮像装置は、被写体を撮像し、撮像して得られる画像データを出力する撮像手段を、備えており、
前記データ入力装置は、データ入力領域を含む画面を表示する表示手段と、
データ入力領域に入力されたデータを設定する設定手段と、を備えており、
前記データ入力装置および前記撮像装置のいずれかは、さらに、前記撮像手段が出力する画像データに含まれる前記表示手段の表示面と、前記画像データに含まれる記録媒体との相対位置に基づいて前記表示面中の指示位置を検出する指示位置検出手段と、
前記撮像手段が出力する画像に基づいて、記録媒体と前記表示面との相対位置の変化を検出する移動検出手段と、を備え、
前記指示位置検出手段は、前記相対位置の変化が所定の値以下となった時点の前記記録媒体の前記記録媒体が前記表示面に対して移動する方向の端部と前記表示面との相対位置に基づいて、前記指示位置を検出し、
前記データ入力装置および前記撮像装置のいずれかは、さらに、前記撮像手段が出力する画像データに含まれる前記記録媒体に記憶された情報を検出する情報検出手段を備え、
前記データ入力装置および前記撮像装置のいずれかは、さらに、前記検出された情報のうちから前記データ入力領域に入力可能な入力情報を抽出する入力情報抽出手段を備え、
前記設定手段は、前記指示位置検出手段により検出される指示位置が前記表示された画面内の場合、前記抽出された入力情報を、前記表示された画面に含まれる前記データ入力領域に入力されたデータとして設定する、データ入力システム。 - 前記データ入力装置は、前記指示位置検出手段と、前記情報検出手段と、前記入力情報抽出手段と、を備える、請求項1または2に記載のデータ入力システム。
- 前記撮像装置は、前記指示位置検出手段と、前記情報検出手段と、を備える、請求項1または2に記載のデータ入力システム。
- 被写体を撮像し、撮像して得られる画像データを出力する撮像手段を備えた撮像装置と通信可能なデータ入力装置であって、
データ入力領域を含む画面を表示する表示手段と、
データ入力領域に入力されたデータを設定する設定手段と、
前記撮像手段から出力された画像データに含まれる前記表示手段の表示面と前記画像データに含まれる記録媒体の形状が変化した部分との相対位置に基づき検出された前記表示面中の指示位置を取得する指示位置取得手段と、
前記画像データに基づき検出された、前記記録媒体に記憶された情報を取得する情報取得手段と、
前記取得された情報のうちから、前記データ入力領域に入力可能な入力情報を取得する入力情報取得手段と、を備え、
前記設定手段は、前記指示位置取得手段により取得される指示位置が前記表示された画面内の場合、前記取得された入力情報を、前記表示された画面に含まれる前記データ入力領域に入力されたデータとして設定する、データ入力装置。 - 前記撮像手段が出力する画像に基づいて、前記記録媒体の形状の変化を検出する変化検出手段と、をさらに備え、
前記指示位置取得手段は、前記形状の変化が検出された時点の前記記録媒体の形状が変化した部分と前記表示面との相対位置に基づいて、前記指示位置を決定する、請求項5に記載のデータ入力装置。 - 前記指示位置取得手段は、前記記録媒体の形状が変化した部分が前記表示面と重なる位置を、前記指示位置として検出する、請求項6に記載のデータ入力装置。
- 前記記録媒体は矩形であり、
前記指示位置取得手段は、前記記録媒体の4辺のうち直線から変化した2つの辺で挟まれる頂角を、形状が変化した部分に決定する、請求項7に記載のデータ入力装置。 - 被写体を撮像し、撮像して得られる画像データを出力する撮像手段を備えた撮像装置と通信可能なデータ入力装置であって、
データ入力領域を含む画面を表示する表示手段と、
データ入力領域に入力されたデータを設定する設定手段と、
前記撮像手段から出力された画像データに含まれる前記表示手段の表示面と前記画像データに含まれる記録媒体との相対位置に基づき検出された前記表示面中の指示位置を取得する指示位置取得手段と、
前記撮像手段が出力する画像に基づいて、前記記録媒体と前記表示面との相対位置の変化を検出する移動検出手段と、
前記指示位置取得手段は、前記相対位置の変化が所定の値以下となった時点の前記記録媒体の前記記録媒体が前記表示面に対して移動する方向の端部と前記表示面との相対位置に基づいて、前記指示位置を検出し、
前記画像データに基づき検出された、前記記録媒体に記憶された情報を取得する情報取得手段と、
前記取得された情報のうちから、前記データ入力領域に入力可能な入力情報を取得する入力情報取得手段と、を備え、
前記設定手段は、前記指示位置取得手段により取得される指示位置が前記表示された画面内の場合、前記取得された入力情報を、前記表示された画面に含まれる前記データ入力領域に入力されたデータとして設定する、データ入力装置。 - 前記指示位置検出手段は、前記記録媒体と前記表示面との相対位置が変化している間に前記記録媒体の前記記録媒体が前記表示面に対して移動する方向の端部が、相対位置の変化が所定の値以下となった時点で前記表示面と重なる位置を前記指示位置として検出する、請求項9に記載のデータ入力装置。
- 前記指示位置取得手段は、前記撮像装置から前記撮像装置により検出された前記表示面中の指示位置を取得する、請求項5〜10のいずれかに記載のデータ入力装置。
- 前記情報取得手段は、前記撮像装置から受信された前記撮像手段が出力する画像データに基づいて、前記記録媒体に記憶された情報を検出する、請求項5〜11のいずれかに記載のデータ入力装置。
- 前記入力情報取得手段は、前記記録媒体に記憶された情報のうちから前記データ入力領域に入力可能な入力情報を抽出する、請求項5〜12のいずれかに記載のデータ入力装置。
- 前記入力情報取得手段は、前記画面に含まれるデータ入力領域に入力可能なデータを定めるデータ定義情報に基づいて、入力情報を抽出する、請求項13に記載のデータ入力装置。
- 前記入力情報取得手段は、前記表示された画面が複数のデータ入力領域を有する場合、前記複数のデータ入力領域にそれぞれ対応する複数の入力情報を抽出する、請求項13または14に記載のデータ入力装置。
- 前記設定手段は、前記指示位置が、前記表示された画面に含まれる前記データ入力領域内の場合、前記指示位置を含む前記データ入力領域に入力されたデータとして、前記データ入力領域に入力可能な入力情報として抽出された入力情報を設定する、請求項5〜15のいずれかに記載のデータ入力装置。
- 前記表示手段に表示された画面が前記表示手段の表示面に配置される位置を示す画面配置情報を取得する画面配置情報取得手段を、さらに備え、
前記設定手段は、前記画面配置情報に基づいて、前記表示手段に表示された画面の位置を決定する、請求項5〜16のいずれかに記載のデータ入力装置。 - 前記設定手段は、前記表示手段に表示された画面に含まれるデータ入力領域が前記画面に配置される位置を示す領域配置情報に基づいて、前記表示手段に表示された画面中の前記データ入力領域の位置を決定する、請求項5〜17のいずれかに記載のデータ入力装置。
- データ入力装置と、前記データ入力装置と通信可能な撮像装置と、を含むデータ入力システムで実行されるデータ入力方法であって、
前記撮像装置は、被写体を撮像し、撮像して得られる画像データを出力する撮像手段を、備えており、
前記データ入力装置は、データ入力領域を含む画面を表示する表示手段を、備えており、
前記データ入力装置および前記撮像装置のいずれかに前記撮像手段が出力する画像データに含まれる前記表示手段の表示面と前記画像データに含まれる記録媒体の形状が変化した部分との相対位置に基づき検出された前記表示面中の指示位置を取得する指示位置取得ステップを実行させ、
前記データ入力装置および前記撮像装置のいずれかに、前記撮像手段が出力する画像データに基づき検出された、前記記録媒体に記憶された情報を取得する情報取得ステップを実行させ、
前記データ入力装置および前記撮像装置のいずれかに、前記取得された情報のうちから抽出された、前記データ入力領域に入力可能な入力情報を取得する入力情報取得ステップを実行させ、
前記データ入力装置に、前記指示位置取得ステップにおいて取得される指示位置が前記表示された画面内の場合に、前記取得された入力情報を、前記表示された画面に含まれる前記データ入力領域に入力されたデータとして設定する設定ステップを実行させる、データ入力方法。 - データ入力装置と、前記データ入力装置と通信可能な撮像装置と、を含むデータ入力システムで実行されるデータ入力方法であって、
前記撮像装置は、被写体を撮像し、撮像して得られる画像データを出力する撮像手段を、備えており、
前記データ入力装置は、データ入力領域を含む画面を表示する表示手段を、備えており、
前記データ入力装置および前記撮像装置のいずれかに、前記撮像手段が出力する画像データに含まれる前記表示手段の表示面と前記画像データに含まれる記録媒体との相対位置に基づき検出された前記表示面中の指示位置を取得する指示位置取得ステップと、
前記撮像手段が出力する画像に基づいて、前記記録媒体と前記表示面との相対位置の変化を検出する移動検出ステップと、を実行させ、
前記指示位置取得ステップは、前記相対位置の変化が所定の値以下となった時点の前記記録媒体の前記記録媒体が前記表示面に対して移動する方向の端部と前記表示面との相対位置に基づいて、前記指示位置を検出するステップを含み、
前記データ入力装置および前記撮像装置のいずれかに、前記撮像手段が出力する画像データに基づき検出された、前記記録媒体に記憶された情報を取得する情報取得ステップを実行させ、
前記データ入力装置および前記撮像装置のいずれかに、前記取得された情報のうちから抽出された、前記データ入力領域に入力可能な入力情報を取得する入力情報取得ステップを実行させ、
前記データ入力装置に、前記指示位置取得ステップにおいて取得される指示位置が前記表示された画面内の場合に、前記取得された入力情報を、前記表示された画面に含まれる前記データ入力領域に入力されたデータとして設定する設定ステップを実行させる、データ入力方法。 - 被写体を撮像し、撮像して得られる画像データを出力する撮像手段を備えた撮像装置と通信可能なデータ入力装置を制御するコンピューターで実行されるデータ入力プログラムであって、
前記データ入力装置は、データ入力領域を含む画面を表示する表示手段を備えており、
前記撮像装置から前記撮像手段が出力する画像データを受信する画像データ受信ステップと、
前記受信された画像データに含まれる前記表示手段の表示面と前記画像データに含まれる記録媒体の形状が変化した部分との相対位置に基づいて前記表示面中の指示位置を検出する指示位置検出ステップと、
前記受信された画像データに基づいて、前記記録媒体に記憶された情報を検出する情報検出ステップと、
前記検出された情報のうちから前記データ入力領域に入力可能な入力情報を抽出する入力情報抽出ステップと、
前記指示位置検出ステップにおいて検出される指示位置が前記表示された画面内の場合に、前記抽出された入力情報を、前記表示された画面に含まれる前記データ入力領域に入力されたデータとして設定する設定ステップと、を前記コンピューターに実行させる、データ入力プログラム。 - 被写体を撮像し、撮像して得られる画像データを出力する撮像手段を備えた撮像装置と通信可能なデータ入力装置を制御するコンピューターで実行されるデータ入力プログラムであって、
前記データ入力装置は、データ入力領域を含む画面を表示する表示手段を備えており、
前記撮像装置から前記撮像手段が出力する画像データを受信する画像データ受信ステップと、
前記受信された画像データに含まれる前記表示手段の表示面と前記画像データに含まれる記録媒体との相対位置に基づいて前記表示面中の指示位置を検出する指示位置検出ステップと、
前記受信された画像データに基づいて、前記記録媒体と前記表示面との相対位置の変化を検出する移動検出ステップと、
前記指示位置検出ステップは、前記相対位置の変化が所定の値以下となった時点の前記記録媒体の前記記録媒体が前記表示面に対して移動する方向の端部と前記表示面との相対位置に基づいて、前記指示位置を検出するステップを含み、
前記受信された画像データに基づいて、前記記録媒体に記憶された情報を検出する情報検出ステップと、
前記検出された情報のうちから前記データ入力領域に入力可能な入力情報を抽出する入力情報抽出ステップと、
前記指示位置検出ステップにおいて検出される指示位置が前記表示された画面内の場合に、前記抽出された入力情報を、前記表示された画面に含まれる前記データ入力領域に入力されたデータとして設定する設定ステップと、を前記コンピューターに実行させる、データ入力プログラム。
Priority Applications (2)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2015016942A JP6197801B2 (ja) | 2015-01-30 | 2015-01-30 | データ入力システム、データ入力装置、データ入力方法およびデータ入力プログラム |
US15/004,647 US9860395B2 (en) | 2015-01-30 | 2016-01-22 | Data input system, data input apparatus, data input method, and non-transitory computer-readable recording medium encoded with data input program |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2015016942A JP6197801B2 (ja) | 2015-01-30 | 2015-01-30 | データ入力システム、データ入力装置、データ入力方法およびデータ入力プログラム |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2016143145A JP2016143145A (ja) | 2016-08-08 |
JP6197801B2 true JP6197801B2 (ja) | 2017-09-20 |
Family
ID=56553485
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2015016942A Active JP6197801B2 (ja) | 2015-01-30 | 2015-01-30 | データ入力システム、データ入力装置、データ入力方法およびデータ入力プログラム |
Country Status (2)
Country | Link |
---|---|
US (1) | US9860395B2 (ja) |
JP (1) | JP6197801B2 (ja) |
Families Citing this family (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN116456097A (zh) * | 2017-04-28 | 2023-07-18 | 苹果公司 | 视频流水线 |
US10979685B1 (en) | 2017-04-28 | 2021-04-13 | Apple Inc. | Focusing for virtual and augmented reality systems |
Family Cites Families (9)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2003163736A (ja) * | 2001-11-26 | 2003-06-06 | Sharp Corp | カメラ付き携帯端末 |
JP2005100050A (ja) * | 2003-09-24 | 2005-04-14 | Fuji Xerox Co Ltd | 情報表示システム及び情報表示方法 |
JP5179325B2 (ja) * | 2008-11-14 | 2013-04-10 | シャープ株式会社 | 画像解析装置、画像解析方法、表示装置、画像解析プログラムおよび記録媒体 |
JP5030984B2 (ja) * | 2009-03-13 | 2012-09-19 | レノボ・シンガポール・プライベート・リミテッド | 情報処理装置、情報処理方法、およびコンピュータが実行可能なプログラム |
JP5491774B2 (ja) | 2009-06-12 | 2014-05-14 | 株式会社東芝 | データエントリシステムおよびデータエントリ方法 |
JP5263049B2 (ja) * | 2009-07-21 | 2013-08-14 | ソニー株式会社 | 情報処理装置、および情報処理方法、並びにプログラム |
DE102010063392B4 (de) * | 2010-11-15 | 2016-12-15 | Leica Microsystems (Schweiz) Ag | Mikroskop mit Sensorbildschirm, zugehörige Steuereinrichtung und Betriebsverfahren |
EP2874044A4 (en) * | 2012-07-13 | 2016-04-13 | Juice Design Co Ltd | DEVICE FOR SELECTION OF ELEMENTS, METHOD FOR SELECTION OF ELEMENTS AND PROGRAM |
KR20140030361A (ko) * | 2012-08-27 | 2014-03-12 | 삼성전자주식회사 | 휴대단말기의 문자 인식장치 및 방법 |
-
2015
- 2015-01-30 JP JP2015016942A patent/JP6197801B2/ja active Active
-
2016
- 2016-01-22 US US15/004,647 patent/US9860395B2/en active Active
Also Published As
Publication number | Publication date |
---|---|
JP2016143145A (ja) | 2016-08-08 |
US9860395B2 (en) | 2018-01-02 |
US20160227050A1 (en) | 2016-08-04 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP6020353B2 (ja) | 情報処理装置、画像形成装置、遠隔操作方法、遠隔制御方法、遠隔操作プログラムおよび遠隔制御プログラム | |
JP5929883B2 (ja) | 画面生成装置、遠隔操作装置、遠隔制御装置、画面生成方法、および画面生成プログラム | |
US9258440B2 (en) | Image forming apparatus, remote operation device, remote control method, remote operation method, non-transitory computer-readable recording medium encoded with remote control program, and non-transitory computer-readable recording medium encoded with remote operation program for performing remote operation | |
US20160092149A1 (en) | Portable information device, image processing system, remote operation method, and non-transitory computer-readable recording medium encoded with remote operation program | |
JP6241426B2 (ja) | 画像形成システム、画像形成装置、遠隔制御方法および遠隔制御プログラム | |
US10341832B2 (en) | Cooperative system, information processing device, cooperation method, and cooperative program | |
JP5532037B2 (ja) | 連携システム、携帯情報装置、連携方法および連携プログラム | |
JP6197801B2 (ja) | データ入力システム、データ入力装置、データ入力方法およびデータ入力プログラム | |
US10178250B2 (en) | Cooperation system, information processing apparatus, cooperation method and non-transitory computer-readable recording medium encoded with cooperation program | |
JP6268904B2 (ja) | 画像処理装置、画像処理方法および画像処理プログラム | |
US10404870B2 (en) | Image processing apparatus, setting-value setting method and computer-readable recording medium recording setting-value setting program | |
JP5652439B2 (ja) | 画像形成システム、連携方法および画像形成装置 | |
JP2016110590A (ja) | 画像処理装置、データ登録方法およびデータ登録プログラム | |
JP2016081313A (ja) | 画像処理システム、および仮想現実表示方法 | |
JP6528931B2 (ja) | 画像処理システム、画像処理装置、遠隔制御方法および遠隔制御プログラム | |
JP2016153206A (ja) | 画像処理システム、画像処理装置、設定方法および設定プログラム | |
JP6504070B2 (ja) | プリントシステム、画像形成装置、プリント方法およびプリントプログラム | |
JP6747486B2 (ja) | 装置制御システム、画像処理装置、装置制御方法および装置制御プログラム | |
JP6561495B2 (ja) | 画像処理装置、遠隔制御システム、遠隔制御方法および遠隔制御プログラム | |
JP6417762B2 (ja) | 装置制御システム、画像処理装置、装置制御方法および装置制御プログラム | |
JP6766589B2 (ja) | 連携システム、情報処理装置、連携方法および連携プログラム | |
JP5994615B2 (ja) | 遠隔制御システム、携帯情報装置、遠隔制御方法および遠隔制御プログラム | |
JP2015207913A (ja) | 遠隔制御システム、画像処理装置、遠隔制御方法および遠隔制御プログラム | |
JP2016081312A (ja) | 画像処理システム、および連動変更方法 | |
JP2013097624A (ja) | 携帯情報装置、連携方法および連携プログラム |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20170125 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20170214 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20170323 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20170725 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20170807 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 6197801 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |