JP2006518494A - 電子システムのための印刷されたユーザインターフェース - Google Patents
電子システムのための印刷されたユーザインターフェース Download PDFInfo
- Publication number
- JP2006518494A JP2006518494A JP2004567902A JP2004567902A JP2006518494A JP 2006518494 A JP2006518494 A JP 2006518494A JP 2004567902 A JP2004567902 A JP 2004567902A JP 2004567902 A JP2004567902 A JP 2004567902A JP 2006518494 A JP2006518494 A JP 2006518494A
- Authority
- JP
- Japan
- Prior art keywords
- presentation
- playback device
- printed
- sensor
- section
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
Images
Classifications
-
- G—PHYSICS
- G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
- G09B—EDUCATIONAL OR DEMONSTRATION APPLIANCES; APPLIANCES FOR TEACHING, OR COMMUNICATING WITH, THE BLIND, DEAF OR MUTE; MODELS; PLANETARIA; GLOBES; MAPS; DIAGRAMS
- G09B5/00—Electrically-operated educational appliances
- G09B5/06—Electrically-operated educational appliances with both visual and audible presentation of the material to be studied
- G09B5/062—Combinations of audio and printed presentations, e.g. magnetically striped cards, talking books, magnetic tapes with printed texts thereon
Landscapes
- Engineering & Computer Science (AREA)
- Multimedia (AREA)
- Business, Economics & Management (AREA)
- Physics & Mathematics (AREA)
- Educational Administration (AREA)
- Educational Technology (AREA)
- General Physics & Mathematics (AREA)
- Theoretical Computer Science (AREA)
- Television Signal Processing For Recording (AREA)
- User Interface Of Digital Computer (AREA)
- Input From Keyboards Or The Like (AREA)
- Signal Processing For Digital Recording And Reproducing (AREA)
Abstract
プレゼンテーション再生装置(110)のような装置のためのユーザインターフェースは、印刷物を読み取ることができるセンサ(118)を含む。それゆえ、その装置のためのコマンドを印刷して、センサ(118)を用いて読み取ることができるので、その装置は、小型化するのが難しいユーザインターフェースハードウエアを必要としない。プレゼンテーション再生装置(110)の場合、印刷物(120)には、特定の記録されたオーディオあるいはビデオセクションに対応する画像あるいは他の印刷されたセクションを含む、付属の本あるいは他の印刷物を用いることができる。印刷されたセクション内の記号あるいはその内容を読み取ることにより、ユーザが対応する印刷されたセクションを見ている間に再生装置(110)が選択し、再生することができるデータセクションが指示される。印刷物(120)はさらに、システムを使用するため、あるいは再生装置の音量、音質、バランス、時間スケール、輝度、コントラスト、色あるいは他の動作パラメータを変更するための許可を示すために、ユーザがセンサ(118)を当てる制御信号を含むことができる。
Description
電子システムは一般的に、システムの機能を起動し、制御できるようにするユーザインターフェースを必要とする。たとえば、コンピュータは通常、キーボード、マウス、ディスプレイ、スピーカのようなハードウエアと、ユーザの入力コマンドを解釈し、適当なフィードバックを生成するオペレーティングシステムとを含む、比較的複雑なユーザインターフェースを有する。そのようなユーザインターフェースは多くの場合に、電子システムの最小限の物理的なサイズおよびコストを支配する制限要因である。たとえば、キーが人間の指よりもはるかに短い距離しか離れていないキーボードあるいはキーパッドを操作するのは困難であるので、キーボードあるいはキーパッドを備える電子システムは、キーボードあるいはキーパッドに必要とされるサイズよりも小さいサイズにまで小型化することはできない。
それゆえ、小型化された装置用に、別のインターフェースが開発されてきた。たとえば、個人情報端末(PDA)は多くの場合に使いやすい最も小さなキーボードサイズよりも小さいが、タッチスクリーンを文字認識ソフトウエアとともに用いて、手書きの文字数字入力を認識する。タッチスクリーンインターフェースはキーボードよりも小さくすることはできるが、そのようなインターフェースハードウエアには、ユーザが画面上の対象物を認識できること、およびその画面に触れたり、書き込んだりできることに基づく最小限のサイズがある。
音声認識技術は、ユーザの生理機能に基づくサイズの制限を実質的に受けないユーザインターフェースを提供する。インターフェースハードウエアについては、音声認識システムはマイクロフォンおよび関連する電子部品を使用することができるが、それらは使いやすさを犠牲にすることなく、かなり都合良く小型化することができる。しかしながら、信頼性がある音声認識技術は現在、小型の安価な装置において現時点で利用することができる能力よりも高い処理能力を必要とする。音声認識技術はまた、オーディオ出力と同時に動作するように実施するのが難しい。
オーディオおよびビデオ時間スケーリング能力を有するプレゼンテーション再生装置が、全ての所望の機能制御を提供するために通常は比較的複雑なユーザインターフェースを必要とする電子システムの一例である。そのようなプレゼンテーション再生装置は一般的に、メモリにダウンロードすることができるか、あるいはコンパクトディスクまたはDVDのような媒体上に予め記録することできるプレゼンテーションを再生する。プレゼンテーション再生装置のために望ましいいくつかの制御機能は、1組の記録されたプレゼンテーションから1つのプレゼンテーションを選択できること、記録されたプレゼンテーション内の任意の所望の場所にジャンプできること、選択された場所においてプレゼンテーションを開始できること、再生されるプレゼンテーションの音量、音質、輝度および時間スケールのようなオーディオおよびビデオ特性を制御できることを含む。全ての制御機能を実現するには、一般的に、使いやすさと、インターフェースハードウエアのコストおよび/またはサイズとの間のトレードオフを必要とする。詳細には、使いやすく、直観的なユーザインターフェースは一般的に、比較的多くのユーザ入力ボタン、および/または利用可能な選択を表示し、ユーザの命令を受信する或る程度のタッチスクリーンを必要とするであろう。
プレゼンテーション再生装置に関する別の問題はマルチメディアコンテンツの使い心地である。詳細には、オーディオあるいはビデオプレゼンテーションは、娯楽用であろうと教育用であろうと、視覚的な、あるいは説明に役に立つ資料を追加することにより改善さ
れることが可能であり、また改善される場合が多い。しかしながら、オーディオ、ビデオおよびグラフィカルユーザインターフェース表示能力を有するプレゼンテーション再生装置は一般的に、オーディオおよび/またはビデオ再生能力のみを有するプレゼンテーション再生装置よりもはるかに複雑であり、価格が高いであろう。そのプレゼンテーションを記録するために用いられる媒体の記憶容量が限られている場合には、視覚的な、あるいは説明に役に立つ資料を記憶することも問題になる場合がある。
れることが可能であり、また改善される場合が多い。しかしながら、オーディオ、ビデオおよびグラフィカルユーザインターフェース表示能力を有するプレゼンテーション再生装置は一般的に、オーディオおよび/またはビデオ再生能力のみを有するプレゼンテーション再生装置よりもはるかに複雑であり、価格が高いであろう。そのプレゼンテーションを記録するために用いられる媒体の記憶容量が限られている場合には、視覚的な、あるいは説明に役に立つ資料を記憶することも問題になる場合がある。
本あるいは他の印刷物は、記録されたオーディオおよび/またはビデオプレゼンテーションを支援することができるが、その際、ユーザは印刷物のセクションと再生されているプレゼンテーションの一部とを一致させなければならない。或る特定の一節に対応する正確な印刷画像あるいはテキストを特定するために気が散る結果として、教育的なプレゼンテーションにおいては学習するのが難しくなり、娯楽的なプレゼンテーションではあまり楽しむことができなくなる可能性がある。
現在の最新技術から見て、安価で、小型化が容易であり、使いやすく、しかも印刷物で支援することができるユーザインターフェースが求められている。
本発明の一態様によれば、プレゼンテーション再生装置のような電子システムが、制御情報を含む印刷物とともに使用することができるセンサを備えるユーザインターフェースを有する。制御情報を読み取ることにより、電子システムの所望の機能を起動することができる。プレゼンテーション再生装置の場合、その再生装置のための付属の印刷物は、プレゼンテーションを選択すること、プレゼンテーション内の場所を選択すること、プレゼンテーションを開始あるいは停止すること、プレゼンテーションの音量、音質、バランスあるいは時間スケールなどのプレゼンテーション特性を変更することを含む機能のための制御記号を含むことができる。したがって、容易に小型化することができる単一のセンサを通して、ユーザインターフェースが、プレゼンテーション毎に個別化することができる、複雑で、細かな制御機能を実施することができる。
本発明の別の態様によれば、印刷物が、特定の機能にアクセスできるようにする前に、電子システムが要求する情報を提供することができる。したがって、ユーザは、ロックを解除し、保護されたシステム機能を使用するために特有の印刷されたキーを必要とするであろう。そのような印刷された情報は、ユーザ識別情報、パスワードあるいは他のセキュリティ情報、優先あるいは許可コード、使用期限、およびマーケティング、管理あるいはセキュリティのために必要とされる場合があるか、あるいは有用な場合がある類似の情報を含むことができる。
本発明の別の実施形態によれば、センサには、印刷された制御記号を読み取ることができる、カメラのようなイメージングデバイスあるいはスキャニングデバイスを用いることができる。制御記号は、可視スペクトル内外の光を用いて光学的に、あるいは特殊なインクを用いて磁気的に読み取ることができる。印刷された記号は任意の形をとることができるが、最小限の処理能力しか必要としないソフトウエアを用いて容易に区別される形をとることが好ましい。たとえば、制御記号には、1次元あるいは2次元のバーコード、文字数字、他の印刷された形状あるいは記号、または情報を埋め込まれるか、あるいは符号化された情報を含む画像を用いることができる。
プレゼンテーション再生装置の場合、印刷物は、プレゼンテーションの特定の部分に付属するテキストあるいは画像を含むことができる。各画像は、プレゼンテーション内の対応する場所を特定する制御記号あるいは画像を有することができる。これらの制御記号あるいは画像は、対応する画像に埋め込むことができるか(たとえば透かしとして)、ある
いは画像に隣接する個別のコードブロックにすることができる。別法では、プレゼンテーション再生装置は、画像そのものを認識し、視認されている画像に従ってプレゼンテーションの再生を制御することができる。ユーザは、単に画像あるいは関連する制御ブロックにセンサを当てることにより、画像あるいは他の印刷物に対応するプレゼンテーションセクションに素早くジャンプすることができる。こうして、本発明のさらに別の態様として、プレゼンテーション再生装置は、ユーザが印刷された内容のための参照箇所を特定するか、あるいは知ることを必要とすることなく、プレゼンテーションの電子的な部分と、そのプレゼンテーションの印刷された部分とを自動的に一致させることができる。
いは画像に隣接する個別のコードブロックにすることができる。別法では、プレゼンテーション再生装置は、画像そのものを認識し、視認されている画像に従ってプレゼンテーションの再生を制御することができる。ユーザは、単に画像あるいは関連する制御ブロックにセンサを当てることにより、画像あるいは他の印刷物に対応するプレゼンテーションセクションに素早くジャンプすることができる。こうして、本発明のさらに別の態様として、プレゼンテーション再生装置は、ユーザが印刷された内容のための参照箇所を特定するか、あるいは知ることを必要とすることなく、プレゼンテーションの電子的な部分と、そのプレゼンテーションの印刷された部分とを自動的に一致させることができる。
本発明の1つの特定の実施形態は、センサ、認識ユニットおよび制御ユニットを含む電子システムである。センサは、イメージングデバイスあるいはスキャナを用いることができ、印刷物内の印刷内容を読み取ることができる。認識ユニットはセンサからの信号を解析し、印刷内容によって表現されるコマンドを特定し、制御ユニットは、認識ユニットによって認識されたコマンドを実施するようシステムに命令する。
オーディオ出力システムを有するプレゼンテーション再生装置のようなシステムでは、コマンドを実施することにより、オーディオ出力システムからのオーディオ出力の音量、音質、バランスあるいは時間スケールのような特性を変更することができる。ビデオ出力システムを有するシステムでは、コマンドを実施することにより、輝度、コントラストおよび画像サイズのようなビデオ特性を変更することができる。さらに、プレゼンテーション再生装置のためのデータは、プレゼンテーションの複数のセクションを含むことができ、コマンドを実施することにより、再生するためにどのセクションが選択されるかを変更することができる。本発明の別の態様によれば、コマンドを実施することにより、プレゼンテーションの言語のようなコンテンツ特性を変更することができる。たとえば、プレゼンテーションは英語にすることも、フランス語、ドイツ語、日本語にすることもできるであろう。これにより、1つのプレゼンテーションを、複数言語のプレゼンテーションおよび外国語教育において役立てることができる。
本発明の別の具体的な実施形態は、付属の印刷物とともに、コンパクトディスクあるいはメモリカードのような記録された媒体を含むプレゼンテーションである。記録された媒体は、再生装置のためにフォーマットされた1つあるいは複数のプレゼンテーションを記憶する。印刷物は、その再生装置が読み取ることができる印刷された記号を含み、その記号は、その媒体からプレゼンテーションを再生するときに、再生装置が用いることができる情報を指示する。
媒体上に記録されたオーディオあるいはビデオは一般的に、複数のセクションに分割され、印刷物も同じように印刷されたセクションに分割される。印刷されたセクションはそれぞれ、そのオーディオ/ビデオのセクションに対応し、印刷されたセクションはそれぞれ、再生装置が印刷されたセクションを特定するために読み取ることができる内容を含む。再生装置が印刷された各セクションにおいて読み取ることができる内容のいくつかの例には、印刷された記号、透かし、あるいは印刷されたセクションの中にある画像の特徴的な部分が含まれる。記録されたセクションに対応する印刷されたセクションに加えて、印刷物は、再生装置が実行することができる機能を指示する印刷された記号をさらに含むことができ、これらの印刷された記号を読み取ることにより、個々の機能が起動される。このようにして起動することができる機能のうちのいくつかは、その再生装置からのオーディオ出力の音量、音質、バランスあるいは時間スケールを設定することを含む。
本発明の別の具体的な実施形態は、印刷物を用いて、プレゼンテーション再生装置のような電子システム内のファイルをナビゲートする。この実施形態では、そのシステムあるいは再生装置に記憶されたファイルの印刷された索引が、ユーザが所望のファイルを選択
できるようにする記号、バーコード、あるいはデータを埋め込まれた画像を含むであろう。MP3再生装置のような音楽システム、あるいはDivXファイルのようなビデオファイルを再生することができるシステムでは、ファイルを再生装置にロードする媒体内容管理アプリケーションが、ファイルを選択するための符号化された情報を含むファイルリストを印刷することもできる。
できるようにする記号、バーコード、あるいはデータを埋め込まれた画像を含むであろう。MP3再生装置のような音楽システム、あるいはDivXファイルのようなビデオファイルを再生することができるシステムでは、ファイルを再生装置にロードする媒体内容管理アプリケーションが、ファイルを選択するための符号化された情報を含むファイルリストを印刷することもできる。
本発明のさらに別の具体的な実施形態は、プレゼンテーション再生装置のような電子システムを動作させるための方法である。その方法は、再生装置内のセンサを印刷物に当てること、センサの出力を解析することであって、それによって、印刷物の印刷された内容を特定する、解析すること、および、印刷物の印刷された内容に従って、その再生装置を動作させることを含む。印刷された内容は、再生装置内の複数のセクションの中から目的とするセクションを特定することができるか、あるいは再生装置の動作パラメータまたはモードを特定することができる。その際、印刷された内容に従って再生装置を動作させることは、目的とするオーディオセクションを選択すること、あるいは再生装置の動作パラメータまたはモードを設定することを含む。
異なる図面における同じ参照記号の使用は、類似のあるいは同じ要素を示す。
本発明の一態様によれば、電子システムが、印刷物と、印刷内容あるいは印刷された画像を読み取ることができるセンサとを含むユーザインターフェースを有する。そのセンサは、キーパッドあるいはキーボードのような従来のインターフェースハードウエアの代わりに用いることができ、それでも、ユーザが電子システムに複雑なコマンドあるいは制御命令を容易に入力できるようにする。そのセンサは、従来のスキャニングあるいはイメージング技術を用いて実装することができ、小さく安価な電子デバイス用に小型化することができる。その電子システムのための印刷物は、電子システムの種々の機能を起動するための制御記号、および印刷物のテキスト、画像あるいは他の視覚的な内容を特定する記号を含むことができる。このようにして、その電子システムは、その動作を、ユーザが視認している視覚的な内容と一致させることができる。
本発明によるユーザインターフェースを用いる1つの電子システムは、記録されたオーディオあるいはビデオの再生装置である。図1は、本発明の一実施形態による再生装置システム100のブロック図である。システム100は、電子システム(あるいは再生装置)110と、印刷物120とを含む。
再生装置110はデータ記憶112を含み、このデータ記憶112としては、電子的なプレゼンテーションのための情報を記憶することができる任意のタイプの記憶装置を用いることができる。データ記憶112は、たとえば、予め記録されたプレゼンテーションデータを含む、DVD、CD、ミニディスク、メモリカードあるいはメモリスティックのような、取外し可能であり、かつ交換可能なデータ記憶媒体を含むことができる。別法では、データ記憶112には、ハードディスク、フラッシュメモリ、またはプレゼンテーションデータを、インターフェース(図示せず)を介してダウンロードすることができる他の揮発性あるいは不揮発性メモリまたはバッファのようなメモリデバイスを用いることができる。出力ユニット114が、システム制御ユニット116の制御下にあり、データ記憶112の内容から導出されるデータを受信し、電子的な出力を与える。図1の例示される実施形態では、一例としてオーディオ出力が示されるが、ビデオのような他の電子的な出力を与えることもできる。
システム制御ユニット116は、ソフトウエアあるいはファームウエアを実行し、プレゼンテーション再生装置110の機能を制御する、マイクロプロセッサあるいはマイクロ
コントローラのようなプロセッサである。システム機能は一般的に、データ記憶112からアクセスされるデータを選択すること、アクセスされたデータを出力ユニット112に与えるために復号化すること、プレゼンテーションのオーディオ部分の時間スケールを選択すること、あるいはそのオーディオ部分において時間スケーリング動作を実行すること、および、データ記憶112および出力ユニット114に動作パラメータを与えることを含む。システム制御ユニット116は、センサ118を通してユーザ命令を受信する。
コントローラのようなプロセッサである。システム機能は一般的に、データ記憶112からアクセスされるデータを選択すること、アクセスされたデータを出力ユニット112に与えるために復号化すること、プレゼンテーションのオーディオ部分の時間スケールを選択すること、あるいはそのオーディオ部分において時間スケーリング動作を実行すること、および、データ記憶112および出力ユニット114に動作パラメータを与えることを含む。システム制御ユニット116は、センサ118を通してユーザ命令を受信する。
センサ118には、印刷物120の内容122、124および126のうちの少なくともいくつかを読み取ることができる任意のタイプのセンサを用いることができる。印刷物の内容を読み取るための数多くの技術が知られている。1つの種類のセンサは、印刷物から反射される光を検出あるいは測定し、その光はセンサ118内の光源、あるいは印刷物120の周囲のいずれかから到来することができる。別法では、磁気あるいは他の検出可能な特性を有する特殊なインクを、内容122、124および126のうちのいくつかに対して用いることができ、センサ118は、その特殊なインクの特性およびパターンを検出することができる。
印刷物の内容を読み取るための1つのよく知られている技術はスキャニングであり、それは一般的には、バーコードを特定するために用いられる。スキャニングは一般的に、直線あるいは1次元の印刷されたパターンを検出し、容易に解釈あるいは復号化することができる電子信号あるいは線形データストリームを生成する。スキャニングを用いる本発明の一実施形態では、センサ118には、プレゼンテーション再生装置110に情報あるいはコマンドを入力するために、ユーザが印刷物120の内容122、124あるいは126をなぞるライトペンを用いることができる。スキャンガンのような他のスキャニング装置もよく知られており、用いることができる。
印刷物の内容を読み取るための別のよく知られている技術はイメージングである。イメージングは印刷内容の2次元のパターンを読み取り、その2次元のパターンがデジタル処理で、あるいは他の方法で解析され、画像の内容を特定することができる。イメージングの場合、センサ118には、電荷結合素子(CCD)を含むカメラ、あるいはピクセルデータのアレイを生成するCMOS光センサアレイを用いることができる。その際、よく知られているパターンおよび/または色認識技術によって、ピクセルアレイ内に表現される具体的な印刷内容を特定することができる。
認識ユニット115は、センサ118からの電子信号(たとえば、ピクセルアレイあるいはスキャニングされたデータ)を解釈し、具体的な印刷内容を特定し、システム制御ユニット116に情報あるいは制御データを与える。別の実施形態では、認識ユニット115は、システム制御ユニット116によって実行されるソフトウエア/ファームウエアであるか、あるいはシステム制御ユニット116に接続される個別の処理ユニットである。認識ユニット115が実行する具体的な認識解析は一般的に、センサ118のタイプ、および解析されている内容122、124あるいは126のタイプによる。
印刷物120には、限定はしないが、1枚あるいは複数の綴じられていないページ、あるいは小冊子、雑誌あるいは本からの1枚あるいは複数のページを含む、任意のタイプの印刷物を用いることができる。例示するために、図1の印刷物120の内容は、プレゼンテーション再生装置110の機能を制御するための制御記号122と、ユーザのための視覚的な内容124と、プレゼンテーション再生装置110に対して視覚的な内容124を特定する特定用記号126とを含む。内容122、124および126うちのいくつかは、同じページ上にある必要がない場合もある。たとえば、制御記号122は制御ページ上に、あるいは小冊子の内あるいは外表紙上に分けることができ、一方、特定用記号126を含むか、あるいは含まない視覚的なコンテンツ124が、小冊子の残りのページを埋め
る。
る。
制御記号122は、プレゼンテーション再生装置110の機能に応じて変えることができる。制御記号122は、開始/停止記号;モード選択記号;音量アップ、ダウンあるいは一定記号;時間スケールアップ、ダウンあるいは一定記号;および参照あるいは状態記号を含むことができる。さらに、制御記号122は、特定の場所にプレゼンテーション再生装置を誘導するためのナビゲーション情報を指示することができる。一般的に、各制御記号122は、何らかのユーザが認識可能な特徴および装置が認識可能な特徴を有するであろう。たとえば、種々の制御記号122の機能を指示するテキストあるいは汎用的な記号で、種々の制御記号122に説明を付けることができる。別法では、ユーザが認識可能な特徴およびセンサが認識可能な特徴は同じにすることができる。さらに、制御記号には、よく知られている光学的文字認識(OCR)技術を用いて翻訳されるテキストデータを用いることもできる。詳細には、センサ118が読み取る記号122そのものを、その制御記号122に対応する機能を特定する汎用の記号にすることができる。ユーザは、ユーザが認識可能な特徴を用いて、所望の機能に対応する具体的な制御記号122を特定し、その後、センサ118をその対応する、装置が認識可能な特徴に当てて、その機能を起動する。
制御記号122は任意の所望のデザインを有することができる。各制御記号122には、ほんの数例を挙げると、バーコード、文字数字、あるいは印刷されたテキストと同じような、それらの文字の組み合わせ、幾何学的な形状あるいは幾何学的な形状の組み合わせ、または色分けされた領域を用いることができる。制御記号122は、最小限の処理能力を用いて、比較的、互いから容易に素早く区別することができるデザインを有することが好ましい。
視覚的な内容124はユーザにプレゼンテーションの視覚的な内容を提供する。詳細には、プレゼンテーション再生装置110がオーディオプレゼンテーションを再生しているとき、印刷物120内の視覚的な内容124は、そのオーディオプレゼンテーションに対応する画像および/またはテキストを提供する。各特定用記号126は、特定の視覚的な内容124に対応し、プレゼンテーション再生装置110に対して視覚的な内容124が何であるかを指示するための仕組みを提供する。本発明の一実施形態では、ユーザはセンサ118を特定用記号126に当てて、プレゼンテーション再生装置110が再生しているプレゼンテーションの電子的な部分を、ユーザが視認している視覚的な内容124に一致させる。
特定用記号126には、視覚的な内容124を特定するために、ユーザがセンサ118を当てる個別の、視覚的に区別可能な記号を用いることができる。しかしながら、特定用記号126は一般的に、ユーザが視認できる必要はない。特定用記号126は、透かし(たとえば、画像内に符号化された情報を印刷される)の形をとることができるか、あるいは通常はユーザが視認できない印刷物(たとえば、紫外線下においてのみ視認できるインクで印刷される)の形をとることができる。目に見えない特定用記号126を用いることにより、特定用記号126が見えていたなら問題になっていたかもしれない美的感覚の問題や気が散るといったことが避けられるであろう。その際、ユーザがセンサを視覚的な内容124あるいは視覚的な内容124に対応する特定のエリア(たとえば、右上角、視覚的な内容の上あるいは下)に当てると、センサ118が、ユーザの目には見えない記号を読み取るであろう。さらに別の代替形態では、センサ118および認識ユニット115が、たとえば視覚的な内容124の画像あるいは走査画像と、データ記憶112からの予め符号化された索引データとを比較することにより、視覚的な内容124を直に特定するときには、特定用記号126は省略される場合もある。
システム100はさらに、電子システム100が特定の機能へのアクセスを許可する前に必要とされる情報を表す、使用許可証128を含む。それゆえ、ユーザはセンサ118を使用許可証128に当てて、システム100を使用できるようにする。使用許可証128は図1には個別の印刷されたキーとして示されるが、別法では、使用許可証128は制御記号122の間に、あるいは印刷物120の視覚的な内容124とともに含まれることができる。使用許可証128は一般的に、ユーザ識別情報、パスワードまたは他のセキュリティコード、優先あるいは許可コード、使用期限、およびマーケティング、管理およびセキュリティのために必要とされる場合があるか、あるいは有用な場合がある類似の情報などを含む情報を伝達することができる。たとえば、期限が切れてない許可をユーザが有することを使用許可証128が指示する場合にのみ、あるいは特定されたユーザの口座に後に料金を請求するために、システム100が使用許可証128から読み出される情報を記録することができる場合にのみ、プレゼンテーション再生装置は、著作権で保護された記録物にアクセスすることができる。
図2は、1つあるいは複数の記録されたプレゼンテーションを含む媒体210と、1組の1つあるいは複数の付属の本220との組み合わせを示す。媒体210はプレゼンテーション再生装置に挿入するためのものであり(たとえば、システム110のデータ記憶112の一部として)、CD、DVD、メモリカード、あるいは他の取出し可能または取出し不可能なデジタル記憶装置として実装することができる。媒体210は、付属の本220内の対応する印刷された内容に従って複数のセクションに分割され、索引を付けられる、1つあるいは複数の記録されたプレゼンテーションを含む。媒体210はさらに、プレゼンテーション再生装置が認識過程において使用し、プレゼンテーション再生装置のユーザインターフェースの一部である補助データを含むことができる。たとえば、媒体210は、プレゼンテーション再生装置に対する特定のコマンドを、あるいは付属の本の特定の部分を特定する視覚的な目印を指示するデータを含むことができる。
本220は、パンフレット、雑誌あるいは任意の他の印刷物の場合があり、媒体210上に記録されるプレゼンテーションに関連付けられる画像あるいは他の印刷物を含む。この印刷物は、媒体上の記録されたオーディオあるいはビデオセクションに対応する複数のセクション(たとえば、1組の1つあるいは複数の画像)に編成され、印刷された各セクションは、関連する1つあるいは複数の特定用記号、あるいは印刷されたセクションの内容のいずれかから特定することができる。本220はさらに、ユーザがプレゼンテーション再生装置のセンサを当てることができる、印刷された制御記号を含むことができる。したがって、プレゼンテーション再生装置内のセンサは他のユーザインターフェースハードウエアの代わりに用いることができるか、あるいはそのセンサによって他のユーザインターフェースハードウエアを簡易にすることができ、それでも複雑なコマンドを入力することができる。
また図2は、種々の印刷物220および220’に対応する種々の記録された媒体210および210’を同じプレゼンテーション再生装置で用いることができることを示す。印刷物220および220’は記録された媒体210および210’のために個別化することができる。
図3は、システム100を用いるための過程300を示す流れ図である。最初にユーザは、たとえばディスクあるいはメモリカードをドライブあるいはリーダに挿入することにより、あるいはプレゼンテーションを再生装置にダウンロードすることにより、プレゼンテーション再生装置にプレゼンテーションデータをロードする。その後、ステップ310においてユーザは、プレゼンテーションのために、再生装置のセンサを付属の本のプレゼンテーション識別子記号に当てる。その後、ステップ315において再生装置は、プレゼンテーション識別子が再生装置にロードされたプレゼンテーションのうちの1つに一致す
るか否かを判定する。識別子に対応するプレゼンテーションが利用可能である場合には、再生装置は、そのプレゼンテーションの準備ができていることを指示することができるか(たとえば、ステップ325の場合のようにプレゼンテーションタイトルを再生することによる)、あるいは妥当なプレゼンテーションが再生装置内に存在しない場合には、エラーメッセージを再生することができる(ステップ320)。
るか否かを判定する。識別子に対応するプレゼンテーションが利用可能である場合には、再生装置は、そのプレゼンテーションの準備ができていることを指示することができるか(たとえば、ステップ325の場合のようにプレゼンテーションタイトルを再生することによる)、あるいは妥当なプレゼンテーションが再生装置内に存在しない場合には、エラーメッセージを再生することができる(ステップ320)。
またユーザは、ステップ330に示されるように、センサを制御記号に当てて、再生装置の動作モードあるいは動作パラメータを設定することもできる。このようにして制御することができるいくつかの設定は:コマンドまたは再生モード;許可有あるいは許可無ユーザモード;オーディオの音量、音質またはバランス;ビデオの輝度、コントラストおよび色;およびオーディオおよびビデオのための時間スケールを含む。時間スケーリングは、オーディオのピッチを変更することなく、プレゼンテーションの再生速度を速くあるいは遅くすることができる、既知の過程である。こうして、時間スケーリングは、ユーザが情報を吸収する能力に合わせた速度で、情報を提供するプレゼンテーションを再生できるようにしながら、出力されるオーディオが不自然になるのを避ける。
一旦、ユーザが印刷物に対応するプレゼンテーションをプレゼンテーション再生装置にロードしたなら、ステップ335に示されるように、ユーザは再生装置のセンサを当てて、印刷物内の1つのセクションを特定することができる。それに応じて、ステップ340において決定されるようなモードに基づいて、再生装置がコマンドモードにある場合には、ステップ345に示されるように、そのセクションのための特定用情報を再生することができるか、あるいは再生装置が再生モードにある場合には、ステップ350に示されるように、特定されたオーディオセクションを再生し始めることができる。
再生装置が選択されたセクションを再生し始めた後に、再生装置はそのセクションの終了を待ちながら、ユーザコマンドを検出するためにセンサ入力をモニタする。ステップ360において再生装置が、1つのセクションの終わりに達したものと判定する場合には、ステップ365において再生装置は、その動作モードに応じて、再生を停止することができるか、あるいは選択されたセクションを再開するためにループバックすることができる。
再生中に、ステップ370において再生装置がユーザコマンドを読み取る場合には、再生装置はコマンドを特定し、適当な動作を実行する。たとえば、ステップ375において再生装置が停止記号が読み取られたことを特定する場合には、ステップ380において再生装置は再生を停止する。ステップ385において再生装置がオーディオプレゼンテーションの音量、音質、バランスあるいは時間スケールのような動作パラメータを変更するコマンドを特定する場合には、ステップ390において再生装置は、オーディオの特性が変化するように動作パラメータを変更する。ステップ395において再生装置が、ユーザがセンサを新たな印刷されたセクションに当てたことを検出する場合には、再生装置は印刷されたセクションの対応する電子的なセクションにジャンプし、その部分を再生し始める。
図4は、システム400が、MP3ファイルあるいは他の形式の多数の歌を記憶することができるMP3再生装置、あるいはDivXあるいは他の形式の多数のビデオクリップを記憶することができるビデオ再生装置のような再生装置410を含む、本発明の一実施形態を示す。ユーザは典型的には、コンピュータシステム430を用いて、再生装置410内のデータ記憶412に歌あるいは他のファイルをダウンロードする。それゆえ、再生装置410の内容はユーザ毎に固有であり、たとえば、ユーザの所望の歌を選択するために、従来のユーザインターフェースを設けて、多数のファイルを容易に検索できるようにすることは困難である可能性がある。システム400では、再生装置410は、印刷され
たファイルリスト420上の印刷内容を読み取ることができるセンサ418を含むユーザインターフェースを有する。制御ユニット416がセンサ418からの信号を解析し、データ記憶412に記憶されているファイルの中から目的とするファイルを選択する。
たファイルリスト420上の印刷内容を読み取ることができるセンサ418を含むユーザインターフェースを有する。制御ユニット416がセンサ418からの信号を解析し、データ記憶412に記憶されているファイルの中から目的とするファイルを選択する。
印刷されたリスト420は、記憶装置412内のファイル(たとえば歌)を記載し、ファイルを区別するために再生装置410が読み取ることができる記号を含む。印刷されたリスト420はたとえば、歌のタイトルを、個々の歌がデータ記憶412内に記憶された場所を指示するアドレスとともに示すことができる。データ記憶412へのファイルのダウンロードを制御するために用いることができるアプリケーション432が、コンピュータシステム430の一部であるプリンタ434を制御して、リスト420をプリントアウトすることができる。こうして、ユーザがデータ記憶412の内容を変更する度に、ユーザはリスト420を更新することができる。
図5は、システム500が印刷されたテレビガイド520を用いてテレビ510を制御する、本発明の別の実施形態を示す。システム500では、テレビコントロール装置530(たとえばリモコン)が、印刷されたテレビガイド520の内容を読み取り、解読することができるセンサ538および制御ユニット536を含む。たとえば、印刷されたガイド520はセンサ538のための特殊な制御記号を含むことができるか、あるいは制御ユニット536はテキストを読み出すことができる文字認識ルーチンを実行することができる。ユーザがテレビガイドを読み取るとき、センサ538を印刷されたガイド520の、目的とする番組に対応する部分に当てて、コントロール530を起動して、テレビ510に1つのチャネルを選択させることができるか、あるいは目的とする番組に対応してリマインダを設定することができる。
本発明は特定の実施形態を参照しながら説明されてきたが、その説明は本発明の応用形態の例示にすぎず、制限するものと受け取られるべきではない。たとえば、これまで、プレゼンテーション再生装置において用いられるユーザインターフェースを説明してきたが、そのようなユーザインターフェースは、インターフェースハードウエアのサイズを縮小し、コストを削減することが望ましい他の電子システムにおいて用いることもできる。さらに、これまでの説明は、印刷物が記録されたオーディオあるいはビデオプレゼンテーションの付属物である、本発明の実施形態に言及するが、そのオーディオあるいはビデオが印刷物の付属物でもある。本発明による本、雑誌あるいは他の印刷されたドキュメントは、印刷物を補強するために再生装置が提供することができる特定の効果音楽あるいは他の付属する出力を特定する、装置が読取り可能な情報を含むことができる。開示される実施形態の特徴の種々の他の改変および組み合わせも、添付の特許請求の範囲によって規定されるような本発明の範囲内にある。
Claims (30)
- プレゼンテーションを再生することができる出力装置(114)と、
印刷物(120)上の印刷内容を読み取ることができるセンサ(118)と、
前記センサ(118)に接続される認識ユニット(115)であって、前記センサ(118)からの信号を解析し、コマンドを特定する、該認識ユニット(115)と、
前記出力装置(114)が前記プレゼンテーションを再生するのを制御するためのコマンドを前記認識ユニット(115)から受信するように接続される制御ユニット(116)とを備える、プレゼンテーションシステム。 - 前記出力装置(114)はオーディオ出力を提供する、請求項1に記載のシステム。
- 前記コマンドは、前記オーディオ出力の音量、音質およびバランスを制御する、請求項2に記載のシステム。
- 前記出力装置(114)はビデオ出力を提供する、請求項1、2または3に記載のシステム。
- 前記コマンドは、前記出力装置(114)が再生するビデオのソースを制御する、請求項4に記載のシステム。
- 前記出力装置はチューナを含み、前記コマンドは、前記チューナが同調する局を選択する、先行する請求項のいずれかに記載のシステム。
- 前記コマンドは、プレゼンテーションの時間スケールを制御する、先行する請求項のいずれかに記載のシステム。
- プレゼンテーションデータの複数のセクションを記憶するデータ記憶(112)をさらに備え、前記コマンドは前記セクションのうちの1つを選択する、先行する請求項のいずれかに記載のシステム。
- 前記セクションはそれぞれ1つのMP3ファイルあるいはオーディオデータの1つのセクションを含む、請求項8に記載のシステム。
- 前記セクションはそれぞれ歌に対応し、前記コマンドは、前記システムが再生するための前記歌のうちの1つを選択する、請求項8に記載のシステム。
- 実行されるときに、前記歌のリストを印刷するアプリケーションをさらに備え、前記リストは前記センサ(118)によって読取り可能であり、前記センサ(118)を前記リストに当てることにより、ユーザは前記リストから1つあるいは複数の歌を選択し、再生することができる、請求項10に記載のシステム。
- 前記センサ(118)からの信号が必要とされる許可情報を提供するのに応答して、前記コマンドは、前記システムの選択された機能にアクセスできるようにする、先行する請求項のいずれかに記載のシステム。
- 前記許可情報は、ユーザ識別情報、パスワード、セキュリティコード、優先コード、許可コード、および使用期限からなるグループから選択される情報を含む、請求項12に記載のシステム。
- 前記センサはイメージングデバイスあるいはスキャナを含む、先行する請求項のいずれかに記載のシステム。
- 再生装置(110)のためにフォーマットされたプレゼンテーションを含む媒体(112)と、
前記再生装置が読み取ることができる印刷内容を含む印刷物(120)であって、該印刷内容は、前記媒体(112)からの前記プレゼンテーションを再生するときに、前記再生装置(110)が使用することができる情報を指示する、該印刷物とを含む、プレゼンテーション。 - 前記媒体(112)は前記プレゼンテーションを表すデータを含むディスクを含む、請求項15に記載のプレゼンテーション。
- 前記媒体(112)上の前記プレゼンテーションは複数のデータセクションに分割され、
前記印刷物(120)は印刷されたセクションに分割され、該印刷されたセクションはそれぞれ前記データセクションに対応し、前記印刷されたセクションはそれぞれ、該印刷されたセクションに対応する前記データセクションを特定するために前記再生装置(110)が読み取ることができる内容を含む、請求項15もしくは16に記載のプレゼンテーション。 - 前記印刷された各セクションにおいて、前記再生装置が読み取ることができる前記内容は、印刷された記号、透かし、あるいは前記印刷されたセクション内の画像の特徴を含む、請求項17に記載のプレゼンテーション。
- 前記印刷物(120)は、前記再生装置(110)が読み取ることができる複数の印刷された記号をさらに含み、該記号はそれぞれ、前記再生装置(110)が実行することができる機能を指示する、請求項15ないし18のいずれかに記載のプレゼンテーション。
- 前記印刷された記号によって指示される前記機能は、前記再生装置からのオーディオ出力の特性あるいは時間スケールを設定することを含む、請求項19に記載のプレゼンテーション。
- 再生装置(110)内のセンサ(118)を印刷物(120)に当てること、
前記センサ(118)の出力を解析することであって、それによって、前記印刷物(120)の内容を特定する、解析すること、および、
前記センサ(118)の前記出力を解析することによって判定されるような前記印刷物(120)の前記内容に従って、前記再生装置(110)を動作させることを含む方法。 - 前記内容は、前記再生装置(110)に記憶される複数のデータセクションの中から目的とするセクションを特定し、前記再生装置(110)を動作させることは、前記目的とするセクションを選択することを含む、請求項21に記載の方法。
- 前記内容は前記再生装置の動作パラメータを特定し、前記再生装置を動作させることは、前記動作パラメータを設定することを含む、請求項21もしくは22に記載の方法。
- 前記動作パラメータは、前記再生装置からのオーディオ出力の音量、音質およびバランス、あるいはプレゼンテーションのための時間スケールである、請求項23に記載の方法。
- 前記内容は、前記再生装置(110)が許可があれば再生することができるプレゼンテーションにアクセスすることをユーザが許可されるか否かを指示する、請求項21ないし24のいずれかに記載の方法。
- 印刷物を読み取ることができるセンサ(418)と、プレゼンテーションを記憶する記憶装置(412)とを備える再生装置(410)と、
前記再生装置(410)に記憶されるプレゼンテーションを特定し、前記再生装置(410)に記憶される該プレゼンテーションのリスト(420)を印刷するためにプリンタ(434)を制御することができるアプリケーション(432)とを含むシステムであって、前記再生装置(410)は前記センサ(418)の動作を通して前記リスト(420)を読み取ることができる、システム。 - 前記プレゼンテーションは前記記憶装置(412)にダウンロードされる歌を表す、請求項26に記載のシステム。
- 前記アプリケーションはさらに、前記記憶装置(412)への前記歌のダウンロードを制御する、請求項26もしくは27に記載のシステム。
- テレビ(510)と、
印刷物を読み取ることができるセンサ(538)を含むテレビコントロール(530)と、
前記テレビコントロール(530)が読み取ることができる記号を含む印刷されたテレビガイド(520)とを備えるシステムであって、前記センサ(538)が番組のエントリに当てられるときに、前記テレビコントロール(530)を起動することにより、前記テレビ(510)は前記番組(520)を選択する、システム。 - 前記センサ(538)が前記番組の前記エントリに当てられるときに、前記テレビコントロール(530)を起動することにより、前記テレビ(510)は、前記番組(510)に対応するチャネルに同調する、請求項29に記載のシステム。
Applications Claiming Priority (2)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
US10/364,218 US20040155897A1 (en) | 2003-02-10 | 2003-02-10 | Printed user interface for electronic systems |
PCT/JP2003/016363 WO2004070596A2 (en) | 2003-02-10 | 2003-12-19 | Printed user interface for electronic systems |
Publications (1)
Publication Number | Publication Date |
---|---|
JP2006518494A true JP2006518494A (ja) | 2006-08-10 |
Family
ID=32824393
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2004567902A Pending JP2006518494A (ja) | 2003-02-10 | 2003-12-19 | 電子システムのための印刷されたユーザインターフェース |
Country Status (4)
Country | Link |
---|---|
US (1) | US20040155897A1 (ja) |
JP (1) | JP2006518494A (ja) |
TW (1) | TW200428261A (ja) |
WO (1) | WO2004070596A2 (ja) |
Families Citing this family (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US20040261040A1 (en) * | 2003-06-23 | 2004-12-23 | Microsoft Corporation | Method and apparatus for media access control |
US20080118904A1 (en) * | 2006-11-22 | 2008-05-22 | Allen Frederick T | Birding acoustic feedback learning aid |
US7761602B1 (en) * | 2007-11-26 | 2010-07-20 | Adobe Systems Incorporated | Playback of content on portable devices |
US20090251441A1 (en) * | 2008-04-03 | 2009-10-08 | Livescribe, Inc. | Multi-Modal Controller |
US11055552B2 (en) * | 2016-01-12 | 2021-07-06 | Disney Enterprises, Inc. | Systems and methods for detecting light signatures and performing actions in response thereto |
DE102021203465A1 (de) * | 2021-04-08 | 2022-10-13 | BSH Hausgeräte GmbH | Verfahren zum Steuern eines Gerätes, Steuereinheit und Steuersystem |
Family Cites Families (12)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US4481412A (en) * | 1982-06-21 | 1984-11-06 | Fields Craig I | Interactive videodisc training system with bar code access |
US6076733A (en) * | 1993-11-24 | 2000-06-20 | Metrologic Instruments, Inc. | Web-based system and method for enabling a viewer to access and display HTML-encoded documents located on the world wide web (WWW) by reading URL-encoded bar code symbols printed on a web-based information resource guide |
US20020170966A1 (en) * | 1995-07-27 | 2002-11-21 | Hannigan Brett T. | Identification document including embedded data |
US5640193A (en) * | 1994-08-15 | 1997-06-17 | Lucent Technologies Inc. | Multimedia service access by reading marks on an object |
GB9517789D0 (en) * | 1995-08-31 | 1995-11-01 | Philips Electronics Uk Ltd | Interactive entertainment content control |
US6011949A (en) * | 1997-07-01 | 2000-01-04 | Shimomukai; Satoru | Study support system |
US5957697A (en) * | 1997-08-20 | 1999-09-28 | Ithaca Media Corporation | Printed book augmented with an electronic virtual book and associated electronic data |
US5899700A (en) * | 1997-09-22 | 1999-05-04 | Didacticom Partners | Embedded multimedia control code method and apparatus |
US6745234B1 (en) * | 1998-09-11 | 2004-06-01 | Digital:Convergence Corporation | Method and apparatus for accessing a remote location by scanning an optical code |
US6089943A (en) * | 1998-10-30 | 2000-07-18 | Tai Sun Plastic Novelties Ltd. | Toy |
WO2001028236A1 (fr) * | 1999-10-13 | 2001-04-19 | Dentsu Inc. | Procede de radiodiffusion d'emission de television, recepteur de television, et support |
US20030066892A1 (en) * | 2001-10-10 | 2003-04-10 | Yuki Akiyama | System for reading text display information |
-
2003
- 2003-02-10 US US10/364,218 patent/US20040155897A1/en not_active Abandoned
- 2003-12-09 TW TW092134712A patent/TW200428261A/zh unknown
- 2003-12-19 WO PCT/JP2003/016363 patent/WO2004070596A2/en active Application Filing
- 2003-12-19 JP JP2004567902A patent/JP2006518494A/ja active Pending
Also Published As
Publication number | Publication date |
---|---|
WO2004070596A3 (en) | 2006-06-08 |
WO2004070596A2 (en) | 2004-08-19 |
TW200428261A (en) | 2004-12-16 |
US20040155897A1 (en) | 2004-08-12 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US9600175B2 (en) | Method and system for classification sign display | |
EP1383107B1 (en) | Ring tone code structure and ring tone code reading apparatus for cellular phones | |
WO2008015770A1 (fr) | Dispositif d'impression, dispositif de création de disque d'impression de contenu, terminal interactif, procédé de commande de dispositif d'impression et son programme | |
US20070299850A1 (en) | Voice/Text Memo Synchronized Digital Photo Readers/Frames and Data Accessing Methods | |
US7239842B2 (en) | Talking E-book | |
WO2012086359A1 (ja) | ビューワ装置、閲覧システム、ビューワプログラム及び記録媒体 | |
US6904003B2 (en) | Information reproducing apparatus having cue point setting function | |
US20080138044A1 (en) | Recording Apparatus, Method for Recording, Reproducing Apparatus, Method For Reproduction, Program, And Recording Medium | |
JP2006518494A (ja) | 電子システムのための印刷されたユーザインターフェース | |
JP2006157324A (ja) | 画像再生装置およびプログラム | |
CN101207670A (zh) | 图像处理设备、图像处理方法、程序、及存储介质 | |
US20050057545A1 (en) | Device, system, method and program for data processing, recording medium storing the program, and player | |
JPWO2006030509A1 (ja) | 画像検索装置、画像検索方法、画像作成装置、画像作成方法、プログラム | |
US8160431B2 (en) | Image reproduction system and device, image capture device, and information processing device | |
JP2008171517A (ja) | 車載用再生装置 | |
US8452161B2 (en) | Recording and reproducing apparatus and recording and reproducing method | |
US20060243807A1 (en) | Method of controlling computer through reading bar code as well as control software and means therefor | |
JP2006146579A (ja) | データ検索再生装置、情報入力記録装置、及び操作装置 | |
JP4165490B2 (ja) | 画像ファイル編集装置 | |
KR20090001605A (ko) | 재생 설정 정보를 포함하는 이동식 기록매체, 이동식기록매체에 기록된 재생 설정 정보를 이용하여 콘텐츠를재생하는 장치 및 방법 | |
JP2008090580A (ja) | 電子機器 | |
JP2006079688A (ja) | 遠隔操作装置 | |
KR20060116985A (ko) | 인쇄 구분자를 이용한 멀티미디어 재생시스템 및 방법 | |
JP3953060B2 (ja) | 情報処理方法、及び情報処理装置 | |
US8315133B2 (en) | Controlling an optical-disc reader using surface marks |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20061107 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20080507 |
|
A02 | Decision of refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A02 Effective date: 20080909 |