JPH09134442A - 対話式デスクトップ・システム - Google Patents
対話式デスクトップ・システムInfo
- Publication number
- JPH09134442A JPH09134442A JP8270570A JP27057096A JPH09134442A JP H09134442 A JPH09134442 A JP H09134442A JP 8270570 A JP8270570 A JP 8270570A JP 27057096 A JP27057096 A JP 27057096A JP H09134442 A JPH09134442 A JP H09134442A
- Authority
- JP
- Japan
- Prior art keywords
- camera
- area
- display
- bar
- coded information
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06K—GRAPHICAL DATA READING; PRESENTATION OF DATA; RECORD CARRIERS; HANDLING RECORD CARRIERS
- G06K7/00—Methods or arrangements for sensing record carriers, e.g. for reading patterns
- G06K7/10—Methods or arrangements for sensing record carriers, e.g. for reading patterns by electromagnetic radiation, e.g. optical sensing; by corpuscular radiation
- G06K7/14—Methods or arrangements for sensing record carriers, e.g. for reading patterns by electromagnetic radiation, e.g. optical sensing; by corpuscular radiation using light without selection of wavelength, e.g. sensing reflected white light
- G06K7/1404—Methods for optical code recognition
- G06K7/1408—Methods for optical code recognition the method being specifically adapted for the type of code
- G06K7/143—Glyph-codes
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/03—Arrangements for converting the position or the displacement of a member into a coded form
- G06F3/033—Pointing devices displaced or positioned by the user, e.g. mice, trackballs, pens or joysticks; Accessories therefor
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T7/00—Image analysis
- G06T7/80—Analysis of captured images to determine intrinsic or extrinsic camera parameters, i.e. camera calibration
Landscapes
- Engineering & Computer Science (AREA)
- Physics & Mathematics (AREA)
- Theoretical Computer Science (AREA)
- General Physics & Mathematics (AREA)
- Computer Vision & Pattern Recognition (AREA)
- General Engineering & Computer Science (AREA)
- Human Computer Interaction (AREA)
- Health & Medical Sciences (AREA)
- Electromagnetism (AREA)
- General Health & Medical Sciences (AREA)
- Toxicology (AREA)
- Artificial Intelligence (AREA)
- Image Processing (AREA)
- Processing Or Creating Images (AREA)
Abstract
(57)【要約】
【課題】 視界が変化しても迅速かつ自動的に実行で
き、また、作業面が散らかっていて複数の書類がカメラ
の視界内に位置しているときでも有効であり、そして、
広い範囲の視界をうまく処理できる校正技術を提供す
る。 【解決手段】 本対話式デスクトップ・システムは、作
業面と、この作業面上の第１領域に画像を表示するプロ
ジェクタのような表示装置と、作業面上の第２領域の画
像をキャプチャするカメラと、表示装置およびカメラに
接続してあって、（ａ）作業面上にバーコードを表示さ
せ、（ｂ）前記バーコードのキャプチャを行わせ、
（ｃ）前記キャプチャされた情報に応じて前記第１領域
に対する前記第２領域の位置を決定するように適切にプ
ログラムされている画像プロセッサとからなる。バーコ
ードは最初水平の向きで、次いで垂直の向きで表示さ
れ、各表示向きでの画像キャプチャがカメラで実施され
る。これにより、表示画像内のカメラの視界を決定する
ことができる。
き、また、作業面が散らかっていて複数の書類がカメラ
の視界内に位置しているときでも有効であり、そして、
広い範囲の視界をうまく処理できる校正技術を提供す
る。 【解決手段】 本対話式デスクトップ・システムは、作
業面と、この作業面上の第１領域に画像を表示するプロ
ジェクタのような表示装置と、作業面上の第２領域の画
像をキャプチャするカメラと、表示装置およびカメラに
接続してあって、（ａ）作業面上にバーコードを表示さ
せ、（ｂ）前記バーコードのキャプチャを行わせ、
（ｃ）前記キャプチャされた情報に応じて前記第１領域
に対する前記第２領域の位置を決定するように適切にプ
ログラムされている画像プロセッサとからなる。バーコ
ードは最初水平の向きで、次いで垂直の向きで表示さ
れ、各表示向きでの画像キャプチャがカメラで実施され
る。これにより、表示画像内のカメラの視界を決定する
ことができる。
Description
【０００１】
【産業上の利用分野】本発明は、カメラ・プロジェクタ
構造を介してユーザが対話式にドキュメントを操作する
ドキュメント処理システム、特に、投影表示でカメラの
視界の校正を行うことに関する。
構造を介してユーザが対話式にドキュメントを操作する
ドキュメント処理システム、特に、投影表示でカメラの
視界の校正を行うことに関する。
【０００２】
【従来の技術】デスク情報に設置したカメラ・プロジェ
クタ構造を用いてユーザがカメラの視界内に位置するア
イテムを選択することによって実施しようとしている機
能を選択できるようにすることは、ヨーロッパ特許出願
公開第４９５，６２２号から公知である。デスク上の書
類の画像をキャプチャするのにはビデオ・カメラあるい
はスキャナが用いられ、フィードバック情報が投影表示
によって表示される。機能としては、デスク上に置かれ
たデータ（たとえば、紙の書類のデータ）について実施
される計算、翻訳の操作がある。このようなシステムで
は、カメラと表示が合致した状態に保持されてなければ
ならず、カメラの視界が表示に関して変化したときには
いつでも校正を行わなければならない。
クタ構造を用いてユーザがカメラの視界内に位置するア
イテムを選択することによって実施しようとしている機
能を選択できるようにすることは、ヨーロッパ特許出願
公開第４９５，６２２号から公知である。デスク上の書
類の画像をキャプチャするのにはビデオ・カメラあるい
はスキャナが用いられ、フィードバック情報が投影表示
によって表示される。機能としては、デスク上に置かれ
たデータ（たとえば、紙の書類のデータ）について実施
される計算、翻訳の操作がある。このようなシステムで
は、カメラと表示が合致した状態に保持されてなければ
ならず、カメラの視界が表示に関して変化したときには
いつでも校正を行わなければならない。
【０００３】たとえば、ユーザが或る書類の１つの単語
を選んだとき、フィードバックを表示してその選択が単
語と正確に一致しているかを確認しなければならない。
表示座標系に対するカメラの視界のサイズ、向きおよび
位置が知られていれば、表示された情報の位置を計算で
きる。
を選んだとき、フィードバックを表示してその選択が単
語と正確に一致しているかを確認しなければならない。
表示座標系に対するカメラの視界のサイズ、向きおよび
位置が知られていれば、表示された情報の位置を計算で
きる。
【０００４】この校正上の問題を解決する提案が種々な
されているが、そこでは作業面に校正マークを投影して
いる。ヨーロッパ特許出願公開第６２２，７２２号が開
示している校正システムは、太い十字印すなわち「プラ
ス」記号（＋）を投影し、画像形態(Image Morphology)
法（D. Bloomberg & P. Maragos, "Image Algebra and
Morphological Image Processing", SPIE Conference P
rocs. San Diego, CA., July 1990 参照）を用いてフレ
ーム・グラバ座標スペースにおいてマークの中心をピン
ポイントする。十字（＋）は４つの連続した点に投影さ
れ、これら４つの点からマッピングを計算するために、
これらの技術では、以下の式を使用する（ヨーロッパ特
許出願公開第６２２，７２２号の第４図を参照）。
されているが、そこでは作業面に校正マークを投影して
いる。ヨーロッパ特許出願公開第６２２，７２２号が開
示している校正システムは、太い十字印すなわち「プラ
ス」記号（＋）を投影し、画像形態(Image Morphology)
法（D. Bloomberg & P. Maragos, "Image Algebra and
Morphological Image Processing", SPIE Conference P
rocs. San Diego, CA., July 1990 参照）を用いてフレ
ーム・グラバ座標スペースにおいてマークの中心をピン
ポイントする。十字（＋）は４つの連続した点に投影さ
れ、これら４つの点からマッピングを計算するために、
これらの技術では、以下の式を使用する（ヨーロッパ特
許出願公開第６２２，７２２号の第４図を参照）。
【０００５】 x'=c1x+c2y+c3xy+c4 y'=c5x+c6y+c7xy+c8 ここで、（ｘ、ｙ）は投影表示における座標であり、
（ｘ′、ｙ′）はフレーム・グラバにおける座標であ
る。４つの点の対の場合、この連立一次方程式の解はガ
ウス消去で得られる。次に、５番目の十字（＋）を投影
し、その位置をチェックしてマッピングによって生じた
位置に充分に近いことを確認する。このプロセスはカメ
ラが表示に一致していないことによって生じたキースト
ーニング(keystoning)効果、回転効果を処理し、結果は
１つまたは２つの表示画素内にあるが、ユーザがカメラ
の視界のおおまかな位置を手作業で指定しなければなら
ず、したがって、視界が常にまたは頻繁に変わる状況で
は不適切である。
（ｘ′、ｙ′）はフレーム・グラバにおける座標であ
る。４つの点の対の場合、この連立一次方程式の解はガ
ウス消去で得られる。次に、５番目の十字（＋）を投影
し、その位置をチェックしてマッピングによって生じた
位置に充分に近いことを確認する。このプロセスはカメ
ラが表示に一致していないことによって生じたキースト
ーニング(keystoning)効果、回転効果を処理し、結果は
１つまたは２つの表示画素内にあるが、ユーザがカメラ
の視界のおおまかな位置を手作業で指定しなければなら
ず、したがって、視界が常にまたは頻繁に変わる状況で
は不適切である。
【０００６】したがって、視界が変化しても迅速かつ自
動的に実行できる校正技術が必要である。また、作業面
が散らかっていて複数の書類がカメラの視界内に位置し
ているときでも有効である校正技術が必要である。そし
て、広い範囲の視界をうまく処理できる校正技術も必要
である。
動的に実行できる校正技術が必要である。また、作業面
が散らかっていて複数の書類がカメラの視界内に位置し
ているときでも有効である校正技術が必要である。そし
て、広い範囲の視界をうまく処理できる校正技術も必要
である。
【０００７】本発明は、作業面と、この作業面上の第１
領域に画像を表示する手段と、作業面上の第２領域の画
像をキャプチャする手段と、表示手段およびキャプチャ
手段に接続してあるプロセッサ手段とから成り、このプ
ロセッサ手段が、（ａ）作業面上にコード化された情報
を表示させ、（ｂ）前記コード化情報のキャプチャを行
わせ、（ｃ）前記キャプチャされたコード化情報に応じ
て前記第１領域に対する前記第２領域の位置を決定する
手段を包含することを特徴とする対話式デスクトップ・
システムを提供する。
領域に画像を表示する手段と、作業面上の第２領域の画
像をキャプチャする手段と、表示手段およびキャプチャ
手段に接続してあるプロセッサ手段とから成り、このプ
ロセッサ手段が、（ａ）作業面上にコード化された情報
を表示させ、（ｂ）前記コード化情報のキャプチャを行
わせ、（ｃ）前記キャプチャされたコード化情報に応じ
て前記第１領域に対する前記第２領域の位置を決定する
手段を包含することを特徴とする対話式デスクトップ・
システムを提供する。
【０００８】好ましくは、表示手段はプロジェクタで成
り、キャプチャ手段はカメラから成る。
り、キャプチャ手段はカメラから成る。
【０００９】本発明の１つの利点は、ユーザがカメラの
視界の下で校正表示を位置決めするのにユーザの手出し
が不要であるということにある。すなわち、視界がアプ
リケーションで調節されるときに校正が自動的に行われ
る。
視界の下で校正表示を位置決めするのにユーザの手出し
が不要であるということにある。すなわち、視界がアプ
リケーションで調節されるときに校正が自動的に行われ
る。
【００１０】別の利点は、３つの連続した画像フレーム
の表示、グラビング(grabbing:つかみ取り) だけが必要
であるということにある。それに対して、従来技術で
は、５つ（４つの角隅表示と最終的な精度チェック）を
必要とする。本発明の技術はより迅速である。
の表示、グラビング(grabbing:つかみ取り) だけが必要
であるということにある。それに対して、従来技術で
は、５つ（４つの角隅表示と最終的な精度チェック）を
必要とする。本発明の技術はより迅速である。
【００１１】また別の利点は、作業面が書類で覆われて
いる場合でも迅速に作業を行えることにある。これによ
り、ユーザが校正中にデスクを整頓する必要がなくな
り、ここでもペーパー作業を進めながら自動的に（およ
び周期的に）校正することが可能となるである。
いる場合でも迅速に作業を行えることにある。これによ
り、ユーザが校正中にデスクを整頓する必要がなくな
り、ここでもペーパー作業を進めながら自動的に（およ
び周期的に）校正することが可能となるである。
【００１２】
【発明の実施の形態】以下、本発明の実施例を添付図面
を参照しながら説明する。
を参照しながら説明する。
【００１３】Ａ．基本システム 作業面１１２上方に設置され、そこに合焦されるビデオ
・カメラ１１６、プロジェクタ１１８を用いる、本発明
による全体的なシステム構成が図１に示してある。この
システム１０１は、１９９６年７月１２日出願の英国特
許出願第９６１４８３７．４号に記載されている形態の
うち任意の形態を採用し得る。
・カメラ１１６、プロジェクタ１１８を用いる、本発明
による全体的なシステム構成が図１に示してある。この
システム１０１は、１９９６年７月１２日出願の英国特
許出願第９６１４８３７．４号に記載されている形態の
うち任意の形態を採用し得る。
【００１４】作業面すなわち平坦なデスク面（トップ）
１１２には、ヨーロッパ特許出願公開第６２２，７２２
号に記載されているように、テキスト情報あるいはグラ
フィック情報のソースとして使用しようとしている書類
１１４が置いてある。この書類１１４はデスク面１１２
上方に装置したビデオ・カメラ１１６の視界内に置かれ
ている。カメラ１１６に隣接してプロジェクタ１１８が
装置してあり、これはデスク面１１２上に表示１２１を
投影する。この表示は、全体的にカメラ１１６の視界と
ほぼ一致しており、図示実施例では、新しく作り出され
たドキュメントの画像１２０を含んでいる。カメラ１１
６およびプロジェクタ１１８は、共に、画像処理システ
ム（図示せず）に接続してあり、この画像処理システム
は、たとえば、標準のマイクロコンピュータ（ＰＣ）を
有するコンピュータであってもよい。これは図２を参照
しながらより詳しく説明する。
１１２には、ヨーロッパ特許出願公開第６２２，７２２
号に記載されているように、テキスト情報あるいはグラ
フィック情報のソースとして使用しようとしている書類
１１４が置いてある。この書類１１４はデスク面１１２
上方に装置したビデオ・カメラ１１６の視界内に置かれ
ている。カメラ１１６に隣接してプロジェクタ１１８が
装置してあり、これはデスク面１１２上に表示１２１を
投影する。この表示は、全体的にカメラ１１６の視界と
ほぼ一致しており、図示実施例では、新しく作り出され
たドキュメントの画像１２０を含んでいる。カメラ１１
６およびプロジェクタ１１８は、共に、画像処理システ
ム（図示せず）に接続してあり、この画像処理システム
は、たとえば、標準のマイクロコンピュータ（ＰＣ）を
有するコンピュータであってもよい。これは図２を参照
しながらより詳しく説明する。
【００１５】当業者には明らかであるように、本発明は
Windows（登録商標）の作動するコンピュータを使用す
ることを意図しており、フレーム・グラバ・ボードおよ
び適切なインタフェース回路を備えていてもよい（たと
えば、Jahne B., Digital Image Processing, Appendix
B, Springer-Verlag, Heidelberg, 1991 参照）。
Windows（登録商標）の作動するコンピュータを使用す
ることを意図しており、フレーム・グラバ・ボードおよ
び適切なインタフェース回路を備えていてもよい（たと
えば、Jahne B., Digital Image Processing, Appendix
B, Springer-Verlag, Heidelberg, 1991 参照）。
【００１６】あるいは、ヨーロッパ特許出願公開第６２
２，７２２号に詳細に記載されているハードウェア構造
を用いてもよい。
２，７２２号に詳細に記載されているハードウェア構造
を用いてもよい。
【００１７】本発明を実施する際に、ヨーロッパ特許出
願公開第６２２，７２２号に記載されている画像処理装
置を用い、適当にあるいは以下に説明するようにまたは
これら両方の要領で改造してもよい。
願公開第６２２，７２２号に記載されている画像処理装
置を用い、適当にあるいは以下に説明するようにまたは
これら両方の要領で改造してもよい。
【００１８】コンピュータは、ネットワーク・ケーブル
に接続してある。このケーブルは、普通の内部ドライバ
・カード（図示せず）および適当なソフトウェア（たと
えば、Novell Corp.の市販しているNetware ）と共に、
この技術分野では周知のように、コンピュータでローカ
ル・ネットワーク（ＬＡＮ）あるいはワイド・エリア・
ネットワーク（ＷＡＮ）の一部を形成することができ
る。
に接続してある。このケーブルは、普通の内部ドライバ
・カード（図示せず）および適当なソフトウェア（たと
えば、Novell Corp.の市販しているNetware ）と共に、
この技術分野では周知のように、コンピュータでローカ
ル・ネットワーク（ＬＡＮ）あるいはワイド・エリア・
ネットワーク（ＷＡＮ）の一部を形成することができ
る。
【００１９】本発明の１つの好ましい実施例で用いた画
像処理コンピュータのハードウェアが図２に概略的に示
してある。この構造は、当業者にとって周知であり、た
とえば、The Art of Electronics, Second Edition, C
h.10, P. Horowitz and W. Hill, Cambridge Universit
y Press, 1989に詳細に記載されている。簡単に言え
ば、このシステムは、共通バス１３０に接続した中央処
理装置３２、ランダムアクセスメモリ（ＲＡＭ）３４及
びリードオンリーメモリ（ＲＯＭ）３６を包含するメモ
リ装置、ディスクドライブやテープドライブやＣＤ−Ｒ
ＯＭドライブ等の記憶装置３８、キーボード１２、マウ
ス１４、プリンタやプロットやスキャナ等の装置４０、
Ａ／Ｄ変換及びＤ／Ａ変換装置４２、およびカメラ１１
６、ビデオ・プロジェクタ１１８、ＬＡＮの残部（図示
せず）のような外部装置４６にインタフェースするディ
ジタル入出力装置４４を包含する。
像処理コンピュータのハードウェアが図２に概略的に示
してある。この構造は、当業者にとって周知であり、た
とえば、The Art of Electronics, Second Edition, C
h.10, P. Horowitz and W. Hill, Cambridge Universit
y Press, 1989に詳細に記載されている。簡単に言え
ば、このシステムは、共通バス１３０に接続した中央処
理装置３２、ランダムアクセスメモリ（ＲＡＭ）３４及
びリードオンリーメモリ（ＲＯＭ）３６を包含するメモ
リ装置、ディスクドライブやテープドライブやＣＤ−Ｒ
ＯＭドライブ等の記憶装置３８、キーボード１２、マウ
ス１４、プリンタやプロットやスキャナ等の装置４０、
Ａ／Ｄ変換及びＤ／Ａ変換装置４２、およびカメラ１１
６、ビデオ・プロジェクタ１１８、ＬＡＮの残部（図示
せず）のような外部装置４６にインタフェースするディ
ジタル入出力装置４４を包含する。
【００２０】Ｂ．自動校正 本発明の１つの好ましい実施例によれば、カメラの視界
の位置は、それが表示によって覆われている領域内に位
置しているときにはいつでも自動的に決定される。これ
は、或る形態のバーコードを表示し、カメラを介してこ
れらバーコードの画像をつかみ取ることによって行われ
る。バーコードのつかみ取られた画像を解析してカメラ
がどこを見ていることを決定する。３つの連続した画像
（ブランク表示と２組のバーコード）を表示してつかみ
取り、解析を行うときには、デスクが整頓されているか
書類で散らかっているかどうかには関係なく、ユーザの
介入なしに、カメラおよび投影表示を校正できる。表示
されたバーコードは商品にラベル付けするのに用いられ
るバーコードとは異なる設計である。
の位置は、それが表示によって覆われている領域内に位
置しているときにはいつでも自動的に決定される。これ
は、或る形態のバーコードを表示し、カメラを介してこ
れらバーコードの画像をつかみ取ることによって行われ
る。バーコードのつかみ取られた画像を解析してカメラ
がどこを見ていることを決定する。３つの連続した画像
（ブランク表示と２組のバーコード）を表示してつかみ
取り、解析を行うときには、デスクが整頓されているか
書類で散らかっているかどうかには関係なく、ユーザの
介入なしに、カメラおよび投影表示を校正できる。表示
されたバーコードは商品にラベル付けするのに用いられ
るバーコードとは異なる設計である。
【００２１】図３は、本発明の一実施例で用いられるバ
ーコード１を示しており、このバーコードは、デスク面
（デスクトップ）に投影されたバー２０４及び２０６：
２１０及び２１２、２１６及び２１８、２２２及び２２
４の４つのグループ２０２、２０８、２１４、２２０か
らなる。これらのバーは、異なった太さ、たとえば、１
画素幅と２画素幅で形成してもよい。１グループの始点
にあるバー（たとえば２０４）から次のグループの開始
点のバー（たとえば、２１０）までの距離は一定であ
り、バーコード１のピッチと呼ぶ。ピッチの割合として
表されている、或るグループの最初のバーから最後のバ
ーまでの距離は、バー・グループの広がりと呼ぶ。この
実施例では、広がりはグループ毎に異なっていてもよい
が、常に１ピッチの０．５未満である。これにより、各
グループの開始点を検出できる。
ーコード１を示しており、このバーコードは、デスク面
（デスクトップ）に投影されたバー２０４及び２０６：
２１０及び２１２、２１６及び２１８、２２２及び２２
４の４つのグループ２０２、２０８、２１４、２２０か
らなる。これらのバーは、異なった太さ、たとえば、１
画素幅と２画素幅で形成してもよい。１グループの始点
にあるバー（たとえば２０４）から次のグループの開始
点のバー（たとえば、２１０）までの距離は一定であ
り、バーコード１のピッチと呼ぶ。ピッチの割合として
表されている、或るグループの最初のバーから最後のバ
ーまでの距離は、バー・グループの広がりと呼ぶ。この
実施例では、広がりはグループ毎に異なっていてもよい
が、常に１ピッチの０．５未満である。これにより、各
グループの開始点を検出できる。
【００２２】この技術によれば、一連のバー・グループ
が使用され、広がりは認識可能なシーケンスで変化す
る。カメラは表示された画像の一部をつかみ取り、バー
に対して直角な１つの走査線（以下の図５及びその説明
を参照）に沿った画素値が調べられる。バーが前記の走
査線に見つけられる場合、これらのバーがグループとし
て形成されることができ、そのグループの広がりは、表
示されたパターンの広がりに一致させることができる。
が使用され、広がりは認識可能なシーケンスで変化す
る。カメラは表示された画像の一部をつかみ取り、バー
に対して直角な１つの走査線（以下の図５及びその説明
を参照）に沿った画素値が調べられる。バーが前記の走
査線に見つけられる場合、これらのバーがグループとし
て形成されることができ、そのグループの広がりは、表
示されたパターンの広がりに一致させることができる。
【００２３】図４に目を転じて、この図は走査線に沿っ
た画素値のプロットすなわちグラフを示しており、これ
は複雑なバックグラウンド上にバーを表示する効果を示
している。ブランクフレームが投影されてつかみ取られ
た後、まず、バーコード１が表示を左から右に（矢印Ａ
の方向に）横切るように延びた状態で、１つのバーコー
ド・フレームが投影される。そのバーコード１の各バー
は表示の高さ一杯にわたっていて、表示のほぼ全体がバ
ーコード１で満たされる。このバーコードが投影されて
いる間に、そのバーコード・フレームがカメラによって
つかみ取られる（キャプチャされる）。次に、このステ
ップは、直交する向き（各バーが水平になり且つバーコ
ードが表示の幅方向に広がる向き）ｗにおいて、１つの
投影されたバーコードについて、繰り返される。１組で
３つの表示とグラブ(grab:つかみ取り＝キャプチャ )を
用いることによって、デスク上に位置する書類の干渉効
果は大きく除去できる。第２及び第３のグラブ（垂直バ
ー及び水平バー）からの画素値は、第１のグラブ（ブラ
ンク表示）の値から減算され、各バーそのものから生じ
た１組の画素値の差の値を形成する。図４において、曲
線２６は、ブランク表示でつかみ取られた画像について
の走査線に沿った画素値対位置のグラフを示しており、
曲線２８は、表示したバーコードでつかみ取られた画像
についての走査線に沿った画素値対位置のグラフを示
し、曲線３０は前記の画素値差を示しており、ここで
は、２つの主要ピークが１グループ内の２つの太いバー
の位置を示している。
た画素値のプロットすなわちグラフを示しており、これ
は複雑なバックグラウンド上にバーを表示する効果を示
している。ブランクフレームが投影されてつかみ取られ
た後、まず、バーコード１が表示を左から右に（矢印Ａ
の方向に）横切るように延びた状態で、１つのバーコー
ド・フレームが投影される。そのバーコード１の各バー
は表示の高さ一杯にわたっていて、表示のほぼ全体がバ
ーコード１で満たされる。このバーコードが投影されて
いる間に、そのバーコード・フレームがカメラによって
つかみ取られる（キャプチャされる）。次に、このステ
ップは、直交する向き（各バーが水平になり且つバーコ
ードが表示の幅方向に広がる向き）ｗにおいて、１つの
投影されたバーコードについて、繰り返される。１組で
３つの表示とグラブ(grab:つかみ取り＝キャプチャ )を
用いることによって、デスク上に位置する書類の干渉効
果は大きく除去できる。第２及び第３のグラブ（垂直バ
ー及び水平バー）からの画素値は、第１のグラブ（ブラ
ンク表示）の値から減算され、各バーそのものから生じ
た１組の画素値の差の値を形成する。図４において、曲
線２６は、ブランク表示でつかみ取られた画像について
の走査線に沿った画素値対位置のグラフを示しており、
曲線２８は、表示したバーコードでつかみ取られた画像
についての走査線に沿った画素値対位置のグラフを示
し、曲線３０は前記の画素値差を示しており、ここで
は、２つの主要ピークが１グループ内の２つの太いバー
の位置を示している。
【００２４】曲線２６〜３０はサンプリングの平滑化効
果を示している。曲線３０は、好ましくは、最高値の半
分の値でスレッショルド処理され、これによって、外側
のピーク２９ａ、２９ｂが、太いバー２３ａ、２３ｂに
対応する２つの外側の幅広の方形波パルス２１ａ、２１
ｂを発生し、内側のピーク３１ａ、３１ｂが、太いバー
２５ａ、２５ｂに対応する２つの内側の幅狭い方形波パ
ルス１９ａ、１９ｂを発生する。
果を示している。曲線３０は、好ましくは、最高値の半
分の値でスレッショルド処理され、これによって、外側
のピーク２９ａ、２９ｂが、太いバー２３ａ、２３ｂに
対応する２つの外側の幅広の方形波パルス２１ａ、２１
ｂを発生し、内側のピーク３１ａ、３１ｂが、太いバー
２５ａ、２５ｂに対応する２つの内側の幅狭い方形波パ
ルス１９ａ、１９ｂを発生する。
【００２５】図５の（ａ）は、一連のグループ２０２、
２０８、２１４、２２０、２２１からなる表示バーコー
ドを示しており、その内の小さなセット（２０８、２１
４、２２０）がカメラで見える（カメラの視界にあ
る）。また、カメラの視界内で、バーに対して直角の走
査線２３４に沿った異なった画素値の曲線２３２も示し
てある（図５（ｂ））。バーコード・パターン１のピッ
チは容易に決定できる。これは、グループの各先行バー
（２０４、２１０、２１６、２２２：図３参照）前のギ
ャップが次のグループの幅よりも常に幅が広いためであ
る。グループの幅がわかるならば、これらの幅をピッチ
と比較することによって、つかみ取られた画像における
ピークの対を発生したグループの広がりを演算すること
ができる。つかみ取られた画像における広がりすなわち
スプレッドのシーケンスは、表示されたスプレッドのシ
ーケンスと一致させることができ、前者の位置は後者の
シーケンスに見出すことができる。このことは、シーケ
ンスの一部がカメラの視界内に位置していることを示し
ている。
２０８、２１４、２２０、２２１からなる表示バーコー
ドを示しており、その内の小さなセット（２０８、２１
４、２２０）がカメラで見える（カメラの視界にあ
る）。また、カメラの視界内で、バーに対して直角の走
査線２３４に沿った異なった画素値の曲線２３２も示し
てある（図５（ｂ））。バーコード・パターン１のピッ
チは容易に決定できる。これは、グループの各先行バー
（２０４、２１０、２１６、２２２：図３参照）前のギ
ャップが次のグループの幅よりも常に幅が広いためであ
る。グループの幅がわかるならば、これらの幅をピッチ
と比較することによって、つかみ取られた画像における
ピークの対を発生したグループの広がりを演算すること
ができる。つかみ取られた画像における広がりすなわち
スプレッドのシーケンスは、表示されたスプレッドのシ
ーケンスと一致させることができ、前者の位置は後者の
シーケンスに見出すことができる。このことは、シーケ
ンスの一部がカメラの視界内に位置していることを示し
ている。
【００２６】同じ技術を第３のフレーム内に表示された
バーコードに適用して直交方向におけるカメラ位置を決
定することができる。図６はこれを如何に達成するかを
示している。これらの技術は、カメラの視界３３８の縁
に接近した走査線３４２、３４４および３６２、３６４
に沿って各方向において２回適用される（図６ではこれ
らの縁からの距離が誇張して示してある）。この技術の
各アプリケーションは視界の縁（たとえば、３３７、３
３９）と共に走査線（たとえば、３４２）の２つの交差
点（たとえば、３５ａ、３５ｂ）の座標を発生する。各
縁に沿った交差点は外挿され、外挿された直交縁の対の
位置がわかり、視界３３８の角隅を位置決めすることが
できる。こうして、カメラの視界３３８の角隅に対応す
る表示座標の４つの点を計算することができる。
バーコードに適用して直交方向におけるカメラ位置を決
定することができる。図６はこれを如何に達成するかを
示している。これらの技術は、カメラの視界３３８の縁
に接近した走査線３４２、３４４および３６２、３６４
に沿って各方向において２回適用される（図６ではこれ
らの縁からの距離が誇張して示してある）。この技術の
各アプリケーションは視界の縁（たとえば、３３７、３
３９）と共に走査線（たとえば、３４２）の２つの交差
点（たとえば、３５ａ、３５ｂ）の座標を発生する。各
縁に沿った交差点は外挿され、外挿された直交縁の対の
位置がわかり、視界３３８の角隅を位置決めすることが
できる。こうして、カメラの視界３３８の角隅に対応す
る表示座標の４つの点を計算することができる。
【００２７】上記の技術で起こり得る信頼性の問題を克
服するために、別の実施例では、２レベル・コード化構
造を用いている。これは成功していることが証明されて
いる。これらの問題は、つかみ取られた画像におけるバ
ー・グループの広がりを測定する際の正確さの欠如から
生じる可能性がある。たとえば、０．３と０．４の広が
りを持った２つのバー・グループは、ノイズやサンプリ
ング誤差により、視界が大きい場合には区別することが
できないかも知れない。或る範囲の異なった広がり（た
とえば、０.0５、０.1５、０.2５、０.3５及び０.4５）
を用いてバーコード表示を構築する場合、つかみ取った
画像における広がりを測定する際に誤差が多すぎること
になる。もっと小さい範囲の広がりを使用する場合、た
とえば、０.2及び０.4の広がりを用いる場合には、この
問題は解決される。これはグループの幅の差が視界がど
んなものであっても区別し得ないからである。従って、
カメラは、表示シーケンスにおいて複数回生じるシーケ
ンス（たとえば、０．２、０．４、０．２）をつかみ取
ることができる。このような問題は、広い範囲の視界に
わたってこの技術を使用する際の障害となる。
服するために、別の実施例では、２レベル・コード化構
造を用いている。これは成功していることが証明されて
いる。これらの問題は、つかみ取られた画像におけるバ
ー・グループの広がりを測定する際の正確さの欠如から
生じる可能性がある。たとえば、０．３と０．４の広が
りを持った２つのバー・グループは、ノイズやサンプリ
ング誤差により、視界が大きい場合には区別することが
できないかも知れない。或る範囲の異なった広がり（た
とえば、０.0５、０.1５、０.2５、０.3５及び０.4５）
を用いてバーコード表示を構築する場合、つかみ取った
画像における広がりを測定する際に誤差が多すぎること
になる。もっと小さい範囲の広がりを使用する場合、た
とえば、０.2及び０.4の広がりを用いる場合には、この
問題は解決される。これはグループの幅の差が視界がど
んなものであっても区別し得ないからである。従って、
カメラは、表示シーケンスにおいて複数回生じるシーケ
ンス（たとえば、０．２、０．４、０．２）をつかみ取
ることができる。このような問題は、広い範囲の視界に
わたってこの技術を使用する際の障害となる。
【００２８】かかる問題を解決するために種々のマルチ
パス技術を工夫し得るが、本発明のこの別の実施例で
は、たった３つの表示画像（ブランク表示、垂直バー、
水平バー）を用いるだけのたった一回のパスで問題を解
決している。
パス技術を工夫し得るが、本発明のこの別の実施例で
は、たった３つの表示画像（ブランク表示、垂直バー、
水平バー）を用いるだけのたった一回のパスで問題を解
決している。
【００２９】図７は、たった２つの異なった広がりを用
いるが、各グループの先頭バーと後尾バーとの間に、追
加の分数(fractional)バー２４０、２４２、２４４、２
４６（図７（ａ）参照）を表示した技術を示している。
これらのバー２４０〜２４６はバイナリーコード（たと
えば、異なった画素値の曲線２４８（図７（ｂ））にお
いて追加のピーク２５２、２５４、２５６）を形成し、
このバイナリーコードは小さい視界（図７（ｂ））で、
すなわち、広がりのみでは曖昧さを克服するには不十分
である状況で容易に検出され得る。大きい視界（図７
（ｃ））では、分数バー２４０〜２４６は、もはや画素
の異なった値の曲線２５０では区別することはできない
が、広がり値は表示シーケンスの可視部分を識別するに
は充分である。
いるが、各グループの先頭バーと後尾バーとの間に、追
加の分数(fractional)バー２４０、２４２、２４４、２
４６（図７（ａ）参照）を表示した技術を示している。
これらのバー２４０〜２４６はバイナリーコード（たと
えば、異なった画素値の曲線２４８（図７（ｂ））にお
いて追加のピーク２５２、２５４、２５６）を形成し、
このバイナリーコードは小さい視界（図７（ｂ））で、
すなわち、広がりのみでは曖昧さを克服するには不十分
である状況で容易に検出され得る。大きい視界（図７
（ｃ））では、分数バー２４０〜２４６は、もはや画素
の異なった値の曲線２５０では区別することはできない
が、広がり値は表示シーケンスの可視部分を識別するに
は充分である。
【００３０】図８〜図１２は本発明による校正技術で用
いられるデータ処理ステップの概略フローチャートであ
る。図８は、基本的なステップ・シーケンスを示してい
る。最初、ホワイト（ブランク）・フレーム全体が表示
される（ステップＳ１）。次にカメラが全ホワイト画像
をつかみ取る（ステップＳ２）。ステップＳ３で、垂直
バーがすべてであるバーコードが表示され、ステップＳ
４では、この画像がカメラでつかみ取られる。次に、ス
テップＳ５で、バーが全て水平であるバーコードが投影
され、ステップＳ６で、この画像がカメラでつかみ取ら
れる。最後に、システムがステップＳ７で視界を計算す
る。
いられるデータ処理ステップの概略フローチャートであ
る。図８は、基本的なステップ・シーケンスを示してい
る。最初、ホワイト（ブランク）・フレーム全体が表示
される（ステップＳ１）。次にカメラが全ホワイト画像
をつかみ取る（ステップＳ２）。ステップＳ３で、垂直
バーがすべてであるバーコードが表示され、ステップＳ
４では、この画像がカメラでつかみ取られる。次に、ス
テップＳ５で、バーが全て水平であるバーコードが投影
され、ステップＳ６で、この画像がカメラでつかみ取ら
れる。最後に、システムがステップＳ７で視界を計算す
る。
【００３１】図９は、視界を計算するステップ（Ｓ７）
の中のサブステップを示している。ステップＳ７２は垂
直バーおよび全ホワイト画像のつかみ取られた画像から
の水平縁を位置決めする。ステップＳ７４は水平バーお
よび全ホワイト画像のつかみ取られた画像からの視界の
垂直縁を位置決めする。ステップＳ７６では、これらの
縁を外挿してカメラの視界の角隅の位置を決定する。
の中のサブステップを示している。ステップＳ７２は垂
直バーおよび全ホワイト画像のつかみ取られた画像から
の水平縁を位置決めする。ステップＳ７４は水平バーお
よび全ホワイト画像のつかみ取られた画像からの視界の
垂直縁を位置決めする。ステップＳ７６では、これらの
縁を外挿してカメラの視界の角隅の位置を決定する。
【００３２】図１０は、「垂直」（または「水平」）お
よび「ホワイト」画像からの水平縁を位置決めするステ
ップＳ７２（またはＳ７４）におけるサブステップを示
している。まず、システムは視界の左（または上）縁付
近の走査線の端点（表示座標におけるもの）を見つける
（ステップＳ７２２）。次に、システムは、視界の右
（または下）縁付近の走査線の端点（表示座標における
もの）を見つける（ステップＳ７２４）。最後に、ステ
ップＳ７２６で、システムは端点間で外挿を行って表示
座標での縁を見つける。
よび「ホワイト」画像からの水平縁を位置決めするステ
ップＳ７２（またはＳ７４）におけるサブステップを示
している。まず、システムは視界の左（または上）縁付
近の走査線の端点（表示座標におけるもの）を見つける
（ステップＳ７２２）。次に、システムは、視界の右
（または下）縁付近の走査線の端点（表示座標における
もの）を見つける（ステップＳ７２４）。最後に、ステ
ップＳ７２６で、システムは端点間で外挿を行って表示
座標での縁を見つける。
【００３３】図１１および図１２は、バーに対して直角
の走査線の端点（表示座標におけるもの）を見つけるス
テップにおけるサブステップを示している。ステップＳ
８では、システムは表示されたバーから得たデータを
「ホワイト画像」データから減算してＧＳ（グレイスケ
ール）アレイ（一連のデータの列）を構築する。次に、
ピークの何％かでのスレッショルド値のアレイを構築す
る（ステップＳ９）。次いで、スレッショルド演算を行
い、カメラ座標でのバー位置のリストを作る（ステップ
Ｓ１０）。次に、システムは、連続するバー間の最長ギ
ャップを見つける（ステップＳ１１）。次に、ステップ
転送を先の長いギャップ内へ行い、次のバー（グループ
の先頭バー）を見つける（ステップＳ１２）。ステップ
Ｓ１３で、先頭バーから次のバーまでの距離を計算する
（カメラ座標における計算）。
の走査線の端点（表示座標におけるもの）を見つけるス
テップにおけるサブステップを示している。ステップＳ
８では、システムは表示されたバーから得たデータを
「ホワイト画像」データから減算してＧＳ（グレイスケ
ール）アレイ（一連のデータの列）を構築する。次に、
ピークの何％かでのスレッショルド値のアレイを構築す
る（ステップＳ９）。次いで、スレッショルド演算を行
い、カメラ座標でのバー位置のリストを作る（ステップ
Ｓ１０）。次に、システムは、連続するバー間の最長ギ
ャップを見つける（ステップＳ１１）。次に、ステップ
転送を先の長いギャップ内へ行い、次のバー（グループ
の先頭バー）を見つける（ステップＳ１２）。ステップ
Ｓ１３で、先頭バーから次のバーまでの距離を計算する
（カメラ座標における計算）。
【００３４】次に、図１２に示すように、システムは、
コードリストを構築するルーチンを開始する（ステップ
Ｓ１４）。ステップＳ１５で、図１１のルーチンで求め
られたバーの位置のリストの走査（スキャンニング）を
開始する。各バーの位置について、次のバーとのギャッ
プが（既知の）ピッチ間隔より大きい値かどうかの判定
がなされる（ステップＳ１６）。
コードリストを構築するルーチンを開始する（ステップ
Ｓ１４）。ステップＳ１５で、図１１のルーチンで求め
られたバーの位置のリストの走査（スキャンニング）を
開始する。各バーの位置について、次のバーとのギャッ
プが（既知の）ピッチ間隔より大きい値かどうかの判定
がなされる（ステップＳ１６）。
【００３５】ステップＳ１６の判定がイエスの場合に
は、それは、グループの最後のバーが処理中であること
を意味しており、次のステップは特性（characteristi
c) の広がり（すなわち、０又は１（又は２等））に従
って分類分けされるグループについてであることを意味
する。次に、このグループ内の分数バーの位置が計算さ
れて（ステップＳ１８）、その後に、その分数バーの位
置のΔＧＳの値が検査されて、その分数バーの位置を０
又は１として分類する（ステップＳ１９）。次に、その
０と１のシーケンスから１つのコード（すなわち分数コ
ード）を構築するように演算が行われる（ステップＳ２
０）。フルコード（Ｎ，Ｎ）が構築されると、そのフル
コードが、コンパイルされているコードのリストに加え
られる（ステップＳ２１）。次に、処理はステップＳ２
２に続く。
は、それは、グループの最後のバーが処理中であること
を意味しており、次のステップは特性（characteristi
c) の広がり（すなわち、０又は１（又は２等））に従
って分類分けされるグループについてであることを意味
する。次に、このグループ内の分数バーの位置が計算さ
れて（ステップＳ１８）、その後に、その分数バーの位
置のΔＧＳの値が検査されて、その分数バーの位置を０
又は１として分類する（ステップＳ１９）。次に、その
０と１のシーケンスから１つのコード（すなわち分数コ
ード）を構築するように演算が行われる（ステップＳ２
０）。フルコード（Ｎ，Ｎ）が構築されると、そのフル
コードが、コンパイルされているコードのリストに加え
られる（ステップＳ２１）。次に、処理はステップＳ２
２に続く。
【００３６】ステップＳ１６の判定がノーの場合には、
処理はステップＳ２２にジャンプする。ステップＳ２２
において、視界の中の最後のバーに達したかどうかのチ
ェックが行われ、そうでない場合には、次のバーに移動
し（ステップＳ２３）て、処理はステップＳ１６に戻
る。
処理はステップＳ２２にジャンプする。ステップＳ２２
において、視界の中の最後のバーに達したかどうかのチ
ェックが行われ、そうでない場合には、次のバーに移動
し（ステップＳ２３）て、処理はステップＳ１６に戻
る。
【００３７】他方、ステップＳ２２において、最後のバ
ーに達したと判定された場合、次のステップ（Ｓ２４）
は、表示したグループのリストに最もよく適合するもの
を得るように、走査を行うことである。最良に適合した
ものが得られると、ステップＳ２５において、最初のグ
ループと最後のグループの表示の座標が計算（演算）さ
れる。これによって、その後、走査線の２つの端部の表
示座標が計算（演算）される（ステップＳ２６）。
ーに達したと判定された場合、次のステップ（Ｓ２４）
は、表示したグループのリストに最もよく適合するもの
を得るように、走査を行うことである。最良に適合した
ものが得られると、ステップＳ２５において、最初のグ
ループと最後のグループの表示の座標が計算（演算）さ
れる。これによって、その後、走査線の２つの端部の表
示座標が計算（演算）される（ステップＳ２６）。
【００３８】その他の３つの走査線の各々の両端部の位
置も、同じ様に計算される。それらの端部についての全
８個の座標のセットが得られると、カメラの視界の４つ
の角隅の位置を定めるように、簡単な外挿処理を行え
る。
置も、同じ様に計算される。それらの端部についての全
８個の座標のセットが得られると、カメラの視界の４つ
の角隅の位置を定めるように、簡単な外挿処理を行え
る。
【００３９】当業者にとって、他の種々の形状・形態の
バーコードを、本発明の実施に利用できることが理解さ
れよう。また、当業者にとって、バーコード以外の表示
パターン（例えばグリフコード(glyph code)）が、位置
の判定に使用できることも理解されよう。
バーコードを、本発明の実施に利用できることが理解さ
れよう。また、当業者にとって、バーコード以外の表示
パターン（例えばグリフコード(glyph code)）が、位置
の判定に使用できることも理解されよう。
【図１】本発明の一実施例によるシステム全体図であ
る。
る。
【図２】図１のシステムで使用されるコンピュータの概
略ブロック図である。
略ブロック図である。
【図３】本発明の一実施例において表面に投影される４
つのバー・グループを示す図である。
つのバー・グループを示す図である。
【図４】複雑な背景にバーを表示する効果を示す、走査
線に沿った画素値のグラフである。
線に沿った画素値のグラフである。
【図５】（ａ）は一組の表示されたバーコードを示す
図、（ｂ）は走査線に沿って得た画素値の差を示す図で
ある。
図、（ｂ）は走査線に沿って得た画素値の差を示す図で
ある。
【図６】本発明の一実施例で用いられる４本の走査線を
示す図である。
示す図である。
【図７】本発明の別の実施例を示しており、（ａ）は各
バーグループに分数バーが用いられた様子を示す図、
（ｂ）および（ｃ）は狭い視界および広い視界について
の或る走査線に沿った画素値のグラフを示している。
バーグループに分数バーが用いられた様子を示す図、
（ｂ）および（ｃ）は狭い視界および広い視界について
の或る走査線に沿った画素値のグラフを示している。
【図８】本発明による校正技術で用いられるデータ処理
ステップの概略フローチャートである。
ステップの概略フローチャートである。
【図９】図８のステップ（Ｓ７）の詳細を示すフローチ
ャートである。
ャートである。
【図１０】図９のステップＳ７２（又はＳ７４）の詳細
を示すフローチャートである。
を示すフローチャートである。
【図１１】ピッチを計算するステップの詳細を示すフロ
ーチャートである。
ーチャートである。
【図１２】バーに対して直角の走査線の端点を見つける
ステップの詳細を示すフローチャートである。
ステップの詳細を示すフローチャートである。
１０１ システム １１２ 平坦なデスク面すなわちデスクトップ １１４ 書類 １１６ ビデオ・カメラ １１８ ビデオ・プロジェクタ １２１ 表示 １３０ 共通バス ３２ 中央処理装置 ３４ ＲＡＭ ３６ ＲＯＭ ３８ ディスクドライブ、テープドライブまたはＣＤ−
ＲＯＭドライブ ４０ プリンタ、プロッタまたはスキャナ ４２ Ａ／Ｄ変換、Ｄ／Ａ変換装置 ４４ ディジタル入出力装置 １ バーコード ２０２、２０８、２１４、２２０、２２１ バーのグル
ープ ２０４、２０６、２１０、２１２、２１６、２１８、２
２２、２２４ バー ２６、２８、３０ 走査線に沿った画素値対位置のグラ
フ曲線 ２４０、２４２、２４４、２４６ 分数バー
ＲＯＭドライブ ４０ プリンタ、プロッタまたはスキャナ ４２ Ａ／Ｄ変換、Ｄ／Ａ変換装置 ４４ ディジタル入出力装置 １ バーコード ２０２、２０８、２１４、２２０、２２１ バーのグル
ープ ２０４、２０６、２１０、２１２、２１６、２１８、２
２２、２２４ バー ２６、２８、３０ 走査線に沿った画素値対位置のグラ
フ曲線 ２４０、２４２、２４４、２４６ 分数バー
───────────────────────────────────────────────────── フロントページの続き (72)発明者 クウェンティン スタッフォード フレイ ザー イギリス ケンブリッジシャー ケンブリ ッジ キングストン ザ オールド レク トリー フラット （番地なし) (72)発明者 リチャード ベントリー ドイツ連邦共和国 デー53754 ザンクト オーグスティン ゲーエムデー シュロ ッス ビルリングホーヴェン （番地な し)
Claims (10)
- 【請求項１】 作業面と、この作業面上の第１の領域に
画像を表示する手段と、前記作業面上の第２領域の画像
をキャプチャする手段と、前記表示手段およびキャプチ
ャ手段に接続されたプロセッサ手段とから成り、このプ
ロセッサ手段が、（ａ）作業面上にコード化した情報を
表示させ、（ｂ）前記コード化情報のキャプチャを行わ
せ、前記キャプチャされたコード化情報に依存して、
（ｃ）前記第１領域に対する前記第２領域の位置を決定
する手段を包含することを特徴とする対話式デスクトッ
プ・システム。 - 【請求項２】 請求項１記載のシステムにおいて、前記
第２領域が前記第１領域にオーバラップしていることを
特徴とするシステム。 - 【請求項３】 請求項１または２記載のシステムにおい
て、前記第２領域はその全体が前記第１領域内に位置す
ることを特徴とするシステム。 - 【請求項４】 請求項１、２または３記載のシステムに
おいて、コード化情報の表示を行わせる手段が、該コー
ド化情報を、第１の向きに表示させ、次に、第２の向き
に表示させる手段を包含することを特徴とするシステ
ム。 - 【請求項５】 請求項４記載のシステムにおいて、前記
第１の向きにおいてはコード化情報を水平方向に延びる
ように表示し、前記第２の向きにおいてはコード化情報
が垂直方向に延びるように表示することを特徴とするシ
ステム。 - 【請求項６】 請求項４または５記載のシステムにおい
て、前記コード化情報のキャプチャを行わせる手段が、
前記情報が前記第１の向きで表示された後であって且つ
前記情報が前記第２の向きで表示された後に前記コード
化情報のキャプチャを行わせる手段を包含することを特
徴とするシステム。 - 【請求項７】 請求項１から６のいずれか１つに記載の
システムにおいて、コード化情報がグリフ(glyph) コー
ドを包含することを特徴とするシステム。 - 【請求項８】 請求項１から６のいずれか１つに記載の
システムにおいて、コード化情報がバーコードを包含す
ることを特徴とするシステム。 - 【請求項９】 請求項８記載のシステムにおいて、バー
コードが複数のグループとして配置した一連のバーを包
含することを特徴とするシステム。 - 【請求項１０】 請求項１から９のいずれか１つに記載
のシステムにおいて、前記表示手段がプロジェクタで成
り、前記キャプチャ手段がカメラで成ることを特徴とす
るシステム。
Applications Claiming Priority (2)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| GB9521072:0 | 1995-10-14 | ||
| GBGB9521072.0A GB9521072D0 (en) | 1995-10-14 | 1995-10-14 | Calibration of an interactive desktop system |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| JPH09134442A true JPH09134442A (ja) | 1997-05-20 |
| JP3893174B2 JP3893174B2 (ja) | 2007-03-14 |
Family
ID=10782310
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| JP27057096A Expired - Fee Related JP3893174B2 (ja) | 1995-10-14 | 1996-10-14 | 対話式デスクトップ・システム |
Country Status (5)
| Country | Link |
|---|---|
| US (1) | US6005547A (ja) |
| EP (1) | EP0777173B1 (ja) |
| JP (1) | JP3893174B2 (ja) |
| DE (1) | DE69618913T2 (ja) |
| GB (1) | GB9521072D0 (ja) |
Cited By (2)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| US7973960B2 (en) | 2003-07-16 | 2011-07-05 | Ricoh Company, Ltd. | Document processing system |
| US8418048B2 (en) | 2006-06-27 | 2013-04-09 | Fuji Xerox Co., Ltd. | Document processing system, document processing method, computer readable medium and data signal |
Families Citing this family (18)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| WO2001054110A1 (en) * | 2000-01-18 | 2001-07-26 | The Trustees Of The University Of Pennsylvania | Vision-based human computer interface system |
| US6604683B1 (en) * | 2001-08-06 | 2003-08-12 | Rockwell Collins | Bar code registration of optically addressed photo-luminescent displays |
| JP3920067B2 (ja) * | 2001-10-09 | 2007-05-30 | 株式会社イーアイティー | 座標入力装置 |
| DE10215548B4 (de) * | 2002-04-09 | 2006-05-11 | Eltromat Polygraph Gmbh | Verfahren und Vorrichtung zur Erfassung von Abtastpositionen in Druckbildern |
| US6654001B1 (en) * | 2002-09-05 | 2003-11-25 | Kye Systems Corp. | Hand-movement-sensing input device |
| JP4352808B2 (ja) * | 2002-09-18 | 2009-10-28 | セイコーエプソン株式会社 | プレビュー装置、電子機器および画像形成装置 |
| JP2004354858A (ja) * | 2003-05-30 | 2004-12-16 | Seiko Epson Corp | 画像表示装置および画像表示システム |
| US20050273201A1 (en) * | 2004-06-06 | 2005-12-08 | Zukowski Deborra J | Method and system for deployment of sensors |
| US20060152482A1 (en) * | 2005-01-07 | 2006-07-13 | Chauncy Godwin | Virtual interface and control device |
| US20060158437A1 (en) * | 2005-01-20 | 2006-07-20 | Blythe Michael M | Display device |
| US7970870B2 (en) * | 2005-06-24 | 2011-06-28 | Microsoft Corporation | Extending digital artifacts through an interactive surface |
| US8199117B2 (en) | 2007-05-09 | 2012-06-12 | Microsoft Corporation | Archive for physical and digital objects |
| US9262015B2 (en) * | 2010-06-28 | 2016-02-16 | Intel Corporation | System for portable tangible interaction |
| JP2012065246A (ja) * | 2010-09-17 | 2012-03-29 | Sony Corp | 情報処理装置、情報処理システム、情報処理方法、及びプログラム |
| WO2015049866A1 (ja) * | 2013-10-02 | 2015-04-09 | 日本電気株式会社 | インターフェース装置、モジュール、制御部品、制御方法およびプログラム記憶媒体 |
| JP2016175376A (ja) * | 2015-03-23 | 2016-10-06 | セイコーエプソン株式会社 | 記録装置及び投影方法 |
| US20170094238A1 (en) * | 2015-09-30 | 2017-03-30 | Hand Held Products, Inc. | Self-calibrating projection apparatus and process |
| CN107748894A (zh) * | 2017-10-26 | 2018-03-02 | 辽宁省颅面复原技术重点实验室 | 一种视频现场异地重构方法 |
Family Cites Families (18)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| US4468694A (en) * | 1980-12-30 | 1984-08-28 | International Business Machines Corporation | Apparatus and method for remote displaying and sensing of information using shadow parallax |
| JPS60167069A (ja) * | 1984-02-09 | 1985-08-30 | Omron Tateisi Electronics Co | 図形認識装置 |
| JPS60263642A (ja) * | 1984-06-12 | 1985-12-27 | Nippon Seiko Kk | パタ−ン原図自動読取り装置 |
| JPH0682316B2 (ja) * | 1987-05-28 | 1994-10-19 | 三菱電機株式会社 | 座標入力装置 |
| DE3924989A1 (de) * | 1989-07-28 | 1991-02-07 | Roland Man Druckmasch | Vorrichtung zur durchfuehrung einer umfassenden qualitaetskontrolle an druckbogen |
| JP3063099B2 (ja) * | 1989-09-29 | 2000-07-12 | ミノルタ株式会社 | 原稿読み取り装置 |
| US5194729A (en) * | 1989-09-29 | 1993-03-16 | Minolta Camera Co., Ltd. | Document reading apparatus with area recognizing sensor and obstacle detection |
| JPH03294976A (ja) * | 1990-04-13 | 1991-12-26 | Matsushita Electric Ind Co Ltd | 基準マークパターン検出装置 |
| US5025314A (en) * | 1990-07-30 | 1991-06-18 | Xerox Corporation | Apparatus allowing remote interactive use of a plurality of writing surfaces |
| GB9100733D0 (en) * | 1991-01-14 | 1991-02-27 | Xerox Corp | Indexing of data sets |
| US5377019A (en) * | 1991-12-02 | 1994-12-27 | Minolta Co., Ltd. | Document reading apparatus having a function of determining effective document region based on a detected data |
| US5585926A (en) * | 1991-12-05 | 1996-12-17 | Minolta Co., Ltd. | Document reading apparatus capable of rectifying a picked up image data of documents |
| JPH05316302A (ja) * | 1992-05-13 | 1993-11-26 | Minolta Camera Co Ltd | 画像入力装置 |
| US5436639A (en) * | 1993-03-16 | 1995-07-25 | Hitachi, Ltd. | Information processing system |
| EP0622722B1 (en) * | 1993-04-30 | 2002-07-17 | Xerox Corporation | Interactive copying system |
| US5732227A (en) * | 1994-07-05 | 1998-03-24 | Hitachi, Ltd. | Interactive information processing system responsive to user manipulation of physical objects and displayed images |
| JP3821860B2 (ja) * | 1994-03-15 | 2006-09-13 | コニカミノルタビジネステクノロジーズ株式会社 | 画像読取装置 |
| US5677776A (en) * | 1994-09-29 | 1997-10-14 | Minolta Co., Ltd. | Image reader for processing an image of a document |
-
1995
- 1995-10-14 GB GBGB9521072.0A patent/GB9521072D0/en active Pending
-
1996
- 1996-09-13 US US08/713,490 patent/US6005547A/en not_active Expired - Lifetime
- 1996-10-14 EP EP96307459A patent/EP0777173B1/en not_active Expired - Lifetime
- 1996-10-14 DE DE69618913T patent/DE69618913T2/de not_active Expired - Lifetime
- 1996-10-14 JP JP27057096A patent/JP3893174B2/ja not_active Expired - Fee Related
Cited By (2)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| US7973960B2 (en) | 2003-07-16 | 2011-07-05 | Ricoh Company, Ltd. | Document processing system |
| US8418048B2 (en) | 2006-06-27 | 2013-04-09 | Fuji Xerox Co., Ltd. | Document processing system, document processing method, computer readable medium and data signal |
Also Published As
| Publication number | Publication date |
|---|---|
| EP0777173B1 (en) | 2002-01-30 |
| US6005547A (en) | 1999-12-21 |
| DE69618913T2 (de) | 2002-06-20 |
| DE69618913D1 (de) | 2002-03-14 |
| EP0777173A1 (en) | 1997-06-04 |
| JP3893174B2 (ja) | 2007-03-14 |
| GB9521072D0 (en) | 1995-12-20 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| JP3893174B2 (ja) | 対話式デスクトップ・システム | |
| JP4154413B2 (ja) | Ｑｒコードの位置を確認するための方法、装置、及び記憶媒体 | |
| US6535650B1 (en) | Creating high resolution images | |
| US6985075B2 (en) | Obstacle detection apparatus and method | |
| US7457440B2 (en) | Method of determining usability of a document image and an apparatus therefor | |
| US5389770A (en) | Method and apparatus for decoding unresolved bar code profiles | |
| JPH03144863A (ja) | 画像の傾き検出方法および補正方法ならびに画像情報処理装置 | |
| JP2012510235A (ja) | 曲線修正のためのイメージ処理 | |
| US20060215913A1 (en) | Maze pattern analysis with image matching | |
| US6333997B1 (en) | Image recognizing apparatus | |
| JPH08287184A (ja) | 画像切り出し装置及び文字認識装置 | |
| CN110502948B (zh) | 折叠二维码图像的还原方法、还原装置与扫码设备 | |
| JPH05161002A (ja) | 原稿読み取り装置 | |
| JP2778437B2 (ja) | 文書画像傾き検出装置 | |
| JPH06195462A (ja) | 画像の傾き角度計測方式 | |
| JPH03263282A (ja) | 文字読取装置の文字切出し方法 | |
| JPH06281421A (ja) | 画像処理方法 | |
| TW390072B (en) | Method for obtaining relative and absolute errors in longitudinal and latitudinal amplification ratio from a scanner | |
| US7702158B2 (en) | Image processing apparatus, image processing method and record medium for the image processing apparatus | |
| JP2002286425A (ja) | 変位センサ | |
| JPH05164569A (ja) | 移動車の走行路検出装置 | |
| JP3059446B2 (ja) | 高精度位置計測方法 | |
| JP3367580B2 (ja) | 帳票入力方法及びその装置 | |
| JP2949089B2 (ja) | 画像処理装置 | |
| US7349554B2 (en) | Maze pattern analysis |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20060721 |
|
| A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20060731 |
|
| A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20061030 |
|
| TRDD | Decision of grant or rejection written | ||
| A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20061127 |
|
| A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20061211 |
|
| R150 | Certificate of patent or registration of utility model |
Free format text: JAPANESE INTERMEDIATE CODE: R150 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20101215 Year of fee payment: 4 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20101215 Year of fee payment: 4 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20111215 Year of fee payment: 5 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20111215 Year of fee payment: 5 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20121215 Year of fee payment: 6 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20131215 Year of fee payment: 7 |
|
| R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
| R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
| LAPS | Cancellation because of no payment of annual fees |