JP4292399B2 - 画像処理装置および画像処理方法 - Google Patents

Description

この発明は、例えば、テレビ受像機などのモニタ受像機、ＶＴＲ（Video Tape Recorder）、ＤＶＤ（Digital Versatile Disc）の再生機や記録再生機などの画像信号（映像信号）を処理する種々の画像処理装置および画像処理方法に関する。

表示画面に表示された画像（映像）をデジタルデータ（画像データ）として取り込み、これを画像ファイルとして保存して、閲覧したり解析したりできるようにするいわゆるキャプチャー機能を備えた表示装置などの電子機器が提供されるようになってきている。例えば、後に記す特許文献１には、テレビ放送番組の視聴中に、表示画面に表示された画像をキャプチャーし、これを表示画面の一部分に形成される子画面に表示して観視できるようにし、テレビ放送番組の映像は引き続き表示画面に表示して観視できるようにする技術が開示されている。

また、後に記す特許文献１には、キャプチャーした画像に含まれる電話番号、電子メールアドレス（Ｅ−Ｍａｉｌアドレス）、ＵＲＬ（Uniform Resource Locator）などの表示文字情報の文字認識を行って、文字認識した電話番号を用いて電話をかけたり、文字認識した電子メールアドレスを宛先として電子メールを作成して送信したり、文字認識したＵＲＬにより特定されるＷｅｂページにアクセスして情報を取得したりすることを自動的に行うようにする技術が開示されている。

この特許文献１に記載の技術を用いることにより、テレビショッピングの番組中において表示された電話番号、テレビ放送番組中において表示された意見や感想の宛先の電子メールアドレスや詳細情報の提供元のＷｅｂページのＵＲＬ等を視聴者が急いでメモを取るなどの手間をかけなくても、必要な情報を確実に保持するようにして利用することができるようにされる。
特開２００２−４４５４４号公報

ところで、キャプチャーしたい画像は、電話番号、電子メールアドレス、ＵＲＬ等の通信の相手先を示す文字情報を含むものだけではない。例えば、料理番組において複数回に分けて表示される料理のレシピ、歌番組において楽曲の進行に合わせて表示される歌詞など、比較的に短い時間の間に連続して複数回にわたり映像をキャプチャーするようにしたい場合も発生する。このような場合には、キャプチャーした画像を即座に使用することは少なく、必要になった場合に閲覧できるようにしておけばよい場合が多い。

上述した特許文献１に記載の技術の場合には、キャプチャーした画像を即座に子画面に表示することができるので、キャプチャーした１枚の画像を即座に使用する場合には便利である。しかし、上述した料理のレシピなどのように、比較的に短い時間の間に連続して複数回にわたり画像をキャプチャーするような場合には、キャプチャーした画像は子画面に１つだけしか表示できず、目的とするが複数の画像がキャプチャーできたかを把握したり、連続的にキャプチャーした複数の画像を使い分けたりする場合には十分に対応できない場合があると考えられる。

以上のことにかんがみ、この発明は、表示画像の取り込み機能（キャプチャー機能）を備えたより使い勝手のよい装置、この装置で用いられる方法を提供することを目的とする。

上記課題を解決するため、請求項１に記載の発明の画像処理装置は、
表示画面に表示されている画像の取り込み指示入力を受け付ける受付手段と、
前記受付手段を通じて前記取り込み指示入力を受け付けた場合に、前記表示画面に表示されている１フレーム分の前記画像を形成する画像信号をデジタルデータとしてメモリに取り込むようにする取込手段と、
前記メモリに前記デジタルデータを記録した場合に、今回記録した前記デジタルデータによる画像の縮小画像と、前記メモリに過去に記録したデジタルデータによる画像の１つ以上の縮小画像とを前記表示画面の一部分に所定時間の間表示するようにする表示制御手段と、
前記メモリに取り込まれた複数の画像のそれぞれを縮小した縮小画像の一覧表示を前記表示画面に行うことの指示入力を受け付ける一覧表示指示受付手段と、
前記一覧表示指示受付手段を通じて、前記一覧表示を行うことの前記指示入力を受け付けた場合に、前記メモリに記憶されている複数の画像のそれぞれを縮小した縮小画像の一覧表示を行うようにする一覧表示制御手段と、
前記表示画面に一覧表示された縮小画像から選択した画像を、あるいは、前記メモリに取り込まれた複数の画像を、前記表示画面にスライドショー表示することの指示入力を受け付けるスライドショー表示指示受付手段と、
前記スライドショー表示指示受付手段を通じて、前記スライドショー表示を行うことの指示入力を受け付けた場合に、スライドショー表示を行うようにするスライドショー表示制御手段と、
前記一覧表示制御手段により前記表示画面に一覧表示された複数の縮小画像の中から、目的とする縮小画像の選択入力を受け付ける選択入力受付手段と、
前記選択入力受付手段を通じて選択された縮小画像を前記表示画面に拡大するようにして表示するようにする画像表示制御手段と、
前記画像表示制御手段により前記表示画面に拡大するようにして表示するようにされた画像に対する処理の選択指示を受け付ける選択指示受付手段と、
前記選択指示受付手段を通じて受け付けた前記選択指示が、画像に含まれる文字情報の認識処理以外の処理の実行を指示するものであるときに、当該指示された処理を実行するように制御する処理実行制御手段と、
前記選択指示受付手段を通じて受け付けた前記選択指示が、画像に含まれる文字情報の認識処理の実行を指示するものであるときに、前記表示画面に拡大するようにして表示するようにされた画像に含まれる文字情報の文字認識を行う文字認識手段と、
前記文字認識手段により文字認識された文字情報が通信の相手先を示す情報である場合に、当該文字情報に応じた通信関連処理を実行するようにする通信関連処理手段と
を備える。

この発明によれば、取り込むようにした画像が取り込まれたか否かを過去に取り込んだ画像と共に即時に確認することができる。また、取り込んだ複数の画像の使い分けを簡単に行うようにすることができる。また、画像中に含まれる文字認識を行うことができるので、視聴者が自らメモを取るなどの必要を生じさせることもない。したがって、ユーザー（使用者）にとってより使い勝手のよい画像処理装置、画像処理方法を提供することができる。

以下、図を参照しながらこの発明による装置、方法の一実施の形態について説明する。以下に説明する実施の形態においては、この発明による装置、方法をテレビ受像機に適用した場合を例にして説明する。なお、説明を簡単にするため、以下に説明する実施の形態のテレビ受像機においての音声信号の処理系についての説明は省略することとする。

［第１の実施の形態］
図１は、この第１の実施の形態のテレビ受像機を説明するためのブロック図である。図１に示すように、この第１の実施の形態のテレビ受像機は、屋外に設置されるテレビ放送信号の受信アンテナ１に接続される選局部（チューナ部）２、復調部３、セレクタ４、映像信号の外部入力端子５、デジタル／アナログ変換部（以下、Ｄ／Ａ変換部と略称する。）６、主映像処理部７、子画面処理部８、映像合成部（以下、単に合成部という。）９、ＯＳＤ処理部１０、キャプチャー処理部１１、ドライブ回路１２、表示部１３、タッチパネル１４、座標変換部１５、制御部２０を備えたものである。

制御部２０は、この第１の実施の形態のテレビ受像機の各部を制御するものであり、図１に示したように、ＣＰＵ（Central Processing Unit）２１、ＲＯＭ（Read Only Memory）２２、ＲＡＭ（Random Access Memory）２３、ＥＥＰＲＯＭ（Electrical Erasable Programmable ROM）２４がＣＰＵバス２５を通じて接続されて形成されたマイクロコンピュータある。

ここで、制御部２０のＲＯＭ２２は、この第１の実施の形態のテレビ受像機において実行する各種の処理プログラムや処理に必要なデータなどが記録されたものである。ＲＡＭ２３は、各種の処理において得られたデータを一時的に記憶保持するなどのように、主に各種の処理の作業領域として用いられるものである。ＥＥＰＲＯＭ２４は、いわゆる不揮発性のメモリであり、電源が落とされても、記憶保持した情報が失われることがないようにされたものであり、各種のパラメータ情報などを記憶保持するものである。

また、制御部２０には、通信部３０が接続されている。通信部３０は、電話網やインターネットなどの通信網（通信ネットワーク）と、この実施の形態のテレビ受像機とを接続するためのものである。この実施の形態において、通信部３０は、電話網に接続された電話線Ｌに接続するようにされている。

電話線Ｌに接続された端子ＭＪは、電話線Ｌと、この実施の形態のテレビ受像機とを接続するためのいわゆるモジュラージャックである。また、通信部３０には、接続端子ＪＫを通じて、通話を行うためのハンドセット（送受話器）３１を接続することもできるようにされている。

そして、この第１の実施の形態のテレビ受像機は、通信部３０、電話線Ｌ、および、所定のＩＳＰ（Internet Service Provider）などを通じてインターネットに接続し、電子メールの送受信を行ったり、インターネット上に提供されているＷｅｂページなどの各種の情報（コンテンツ）の提供を受けたりすることができるものである。

また、この第１の実施の形態のテレビ受像機は、通信部３０、電話線Ｌを通じて、目的とする相手先との間に電話回線を接続し、ハンドセット３１を通じて通話を行うこともできるものである。このように、通信部３０は、いわゆるモデムとしての機能を有するとともに、電話機能をも実現することができるようにされたものである。

このため、制御部２０は、通信部３０を制御して、オフフックしたりオンフックしたりするなどのことができるとともに、オフフックするように通信部３０を制御したときには、所定のダイヤル信号を送出するようにするいわゆるダイヤラとしての機能などをも備えたものである。

また、制御部２０には、外部メモリインターフェース（以下、外部メモリＩ／Ｆと略称する。）４１が接続されており、半導体メモリを用いたメモリカードなどと呼ばれる外部メモリ５０を着脱することができるようにされている。外部メモリ５０が外部メモリインターフェース４１に装着された場合には、この外部メモリ５０は、後述もするように、取得するようにした種々の情報を記憶するいわゆるユーザーメモリとしてもちいられる。なお、外部メモリ５０が外部メモリインターフェース４１に装着されていないときには、取得するようにした種々の情報は、例えば、ＲＡＭ２３やＥＥＰＲＯＭ２４などに記録するようにされる。

また、制御部２０には、リモコンＩ／Ｆ４２を通じて、リモコン信号受光部４３が接続されている。リモコン信号受光部４３は、遠隔操作装置であるリモートコマンダ（以下、リモコンと略称する。）１００からの赤外線のリモコン信号を受光し、これを電気信号に変換して制御部２０に供給するものである。これにより、制御部２０は、リモコン信号受光部４３により受光するリモコン１００からのリモコン信号に応じて各部を制御し、リモコン１００に対して行われたユーザーからの指示入力操作に応じた処理を実行することができるようにしている。

そして、この実施の形態のテレビ受像機は、テレビ放送信号を受信選局し、選局したテレビ放送信号を復調して再生するテレビモードと、前述もしたように通信部３０を通じて、インターネットに接続し、インターネット上に提供されているＷｅｂページなどのコンテンツにアクセスすることを可能にするインターネットモードと、電子メールの作成やインターネットを通じて電子メールの送受信等を行うことを可能にする電子メールモードと、電話網を通じて目的とする相手先との間に電話回線を接続して通話を可能にする電話モードとの４つの基本動作モードを有するものである。

また、この実施の形態のテレビ受像機は、テレビモード、インターネットモード、電子メールモードにあるときに、表示部１３の表示画面に表示された画像（映像）を画像データとして取り込んで（キャプチャーして）、所定のキャプチャーメモリ、例えば、外部メモリ５０などに画像ファイルとして記憶保持するようにする画面メモ機能を備えている。

この画面メモ機能は、表示部１３の表示画面に表示された１画面分の画像（映像）を形成する画像信号（映像信号）をデジタルデータである画像データに変換して取り込み、これを所定のメモリに格納すると共に、表示部１３の表示画面の一部分にクリップボードと呼ばれるキャプチャーした画像の縮小画像を表示するための表示領域を設け、ここに最新にキャプチャーした画像の縮小画像と、それ以前にキャプチャーした１枚以上の画像のそれぞれの縮小画像とを一定時間表示するようにする機能である。

この第１の実施の形態において、キャプチャーした画像を形成する画像データは、外部メモリ５０が装着されているときには外部メモリ５０に、また、外部メモリ５０が装着されていない場合には、例えばＲＡＭ２３に記憶される。また、クリップボードには、最新にキャプチャーされた画像から最大で過去に４枚分の画像が縮小されて表示するようにされる。また、この第１の実施の形態のテレビ受像機において、表示されたクリップボードは、表示された時点から２秒間程度表示された後、自動的に消去するようにされる。

そして、この第１の実施の形態においては、後述もするように、画面メモ機能によりキャプチャーした個々の画像については、アルバム機能を用いることによりそのそれぞれを利用することができるようにされる。アルバム機能は、キャプチャーした画像、デジタルカメラから取得した画像などをまとめて管理すると共に、各画像の利用を可能にするための機能であり、管理対象の画像の縮小画像を一覧表示し、選択入力を受け付け、選択された縮小画像を拡大するようにして表示する（元のように表示画面の全面に表示する）などのことができるものである。

さらに、この第１の実施の形態のテレビ受像機は、アルバム機能を用いて拡大するように表示して利用するようにした画像中に、電話番号、電子メールアドレス、ＵＲＬ等の文字情報が存在する場合には、その文字情報を文字認識処理する文字認識機能を備え、認識した文字情報を用いて電話をかけたり、目的とする相手先への電子メールを作成して送信したり、また、目的とするＷｅｂページにアクセスして情報の提供を受けたりすることを自動的に行うことができるようにしている。

すなわち、キャプチャーした画像中に電話番号、電子メールアドレス、ＵＲＬ等の通信の視手先を特定（指定）する情報が含まれているときには、これらの情報をいちいちユーザーが入力しなくても、それらの情報を文字認識することにより利用可能なデータとして取得し、これを２次利用することができるようにしている。具体的には、後述もするが、文字認識機能により取得した通信の相手先を特定する情報を用いるようにユーザーから指示された場合に、文字認識により検出した通信の相手先を特定する情報に基づいて、通信部３０を制御し、目的とする相手先との間で通信を行うことができるようにしている。

また、この実施の形態のテレビ受像機においては、リモコン１００の操作キーを操作することにより、各モードへの切り換えや各機能の実行を手動で行うことができるようにされている。図２は、この実施の形態のテレビ受像機のリモコン１００の一例を説明するための図である。

図２に示すように、この実施の形態のテレビ受像機用のリモコン１００は、電源のオン／オフキー１０１を備えるとともに、各種の機能キーとして、スリープ機能のオン／オフキー１０２、ミュート機能のオン／オフキー１０３、インターネットモードへの切り換えキー１０４、電子メールモードへの切り換えキー１０５、テレビモードへの切り換えキー１０６、電話モードへの切り換えキー１０７、画面メモ機能の実行キー１０８、その他の機能キー１０９を備えたものである。

また、リモコン１００は、図２に示すように、チャンネル選択用の数字キー群１１０、テレビ放送信号の選局チャンネルのアップ／ダウンキー１１１、音量のアップ／ダウンキー１１２を備えるとともに、予め用意されたメニューからの処理の実行を可能にするため、メニュー表示のオン／オフキー１１３、リセットキー１１４、リターンキー１１５、エンターキー１１６、カーソルを移動させる場合などに用いるアップ／ダウンキー１１７、右矢印キー１１８、左矢印キー１１９を備えたものである。

そして、リモコン１００は、ユーザーにより操作された操作キーに応じたリモコン信号を生成し、これを赤外線の信号として送出する。これにより、前述したように、ユーザーは、リモコン１００を通じて、電源のオン／オフを初め、スリープ機能やミュート機能のオン／オフを行うことができる。また、テレビモード、電子メールモード、インターネットモードにあるときに、画面メモ機能の実行キー１０８を押下することにより、画面メモ機能を実行することができる。

また、インターネットモードへの切り換えキー１０４、電子メールモードへの切り換えキー１０５、テレビモードへの切り換えキー１０６、電話モードへの切り換えキー１０７を押下することにより、その押下された切り換えキーに応じたモードに切り換えることができるようにしている。

そして、この第１の実施の形態のテレビ受像機においては、電源の投入直後においては、制御部２０の制御によりテレビモードとなるようにされている。そして、このテレビモード時においては、アンテナ１を通じて受信されたテレビ放送信号が、選局部２に供給される。

選局部２は、受信アンテナ１からのテレビ放送信号の中から、制御部２０からの選局指示信号に応じたテレビ放送信号を選局し、この選局したテレビ放送信号を復調部３に供給する。復調部３は、これに供給されたテレビ放送信号を復調して、復調後の映像信号（画像信号）をセレクタ４に供給する。

セレクタ４には、復調部３からの映像信号の他に、映像信号の外部入力端子５を通じて受け付けた映像信号（画像信号）と、Ｄ／Ａ変換部６を通じて、制御部２０からの映像信号（画像信号）とが供給するようにされている。外部入力端子５は、例えば、ＶＴＲやＤＶＤ装置などの外部機器からのアナログ映像信号の供給を受け付けるものである。また、制御部２０からＤ／Ａ変換部６を通じてセレクタ４に供給される映像信号は、通信部３０を通じて、取り込んだ、例えば、インターネット上に提供されているいわゆるＷｅｂページの情報や、自機宛ての電子メールなどの情報、あるいは、電子メールの作成画面など制御部２０が形成する各種の表示情報などである。

セレクタ４は、制御部２０からの切り換え制御信号に応じて、復調部３からの映像信号と、外部入力端子５からの映像信号と、Ｄ／Ａ変換部６を通じて供給される制御部２０からの映像信号とのうち、どの映像信号を主映像処理部７に供給し、どの映像信号を子画面処理部８に供給するかを切り換える。

主映像処理部７は、セレクタ４からの映像信号（テレビジョン信号）から表示用信号（コンポーネント信号（Ｒ−Ｙ、Ｂ−Ｙ、Ｙ）を形成し、これを合成部９に供給する。また、子画面処理部８は、表示部１３の表示画面の一部の領域に設けられる子画面としての表示領域の大きさに合致するように、セレクタ４からの映像信号から表示用信号（コンポーネント信号）を形成すると共に、この信号による映像を縮小するようにする処理を施し、子画面への映像の表示用信号を形成してこれを合成部９に供給する。

合成部９は、主映像処理部７からの表示用信号と子画面処理部８からの表示用信号とを合成することによって、この実施の形態のテレビ受像機においては、いわゆるＰｉｎＰ（Picture in Picture）とよばれる２画面表示の態様で映像を表示することができるようにするものである。

ＰｉｎＰは、表示部１３の表示画面の一部の領域に子画面を設け、この子画面以外の領域を親画面とし、子画面と親画面とに独立に映像を表示するようにするものである。この第１の実施の形態においては、主映像処理部７からの表示用信号による映像が親画面に、子画面処理部８からの表示用信号による映像が子画面に表示するようにされる。

また、合成部９には、図１に示したように、ＯＳＤ処理部１０からの表示用信号も供給される。ＯＳＤ処理部１０は、制御部２０から供給されるデータに応じて、表示部１３の表示画面に表示する画像に多重表示するようにする画像の表示用信号を形成する。このＯＳＤ処理部１０により、例えば、操作用ガイダンス、クリップボードに表示するキャプチャーした画像の縮小画像などの多重化する種々の画像の表示用信号が形成される。

合成部９は、主映像処理部７からの表示用信号（親画面用の映像信号）と、子画面処理部８からの表示用信号（子画面用の映像信号）と、ＯＳＤ処理部１０からの多重する画像の表示用信号（多重する画像を形成する映像信号）とを合成し、表示部１３の表示画面に映像を表示するための信号を形成し、これをドライブ回路１２とキャプチャー処理部１１とに供給する。

ドライブ回路１２は、これに供給された表示用信号である色信号や輝度信号を表示部１３を駆動させるために必要なレベルにまで増幅したり、垂直同期信号、水平同期信号を取り出して、表示部１３に供給したりする。これにより、合成部９からの表示用信号に応じた映像が、表示部１３の表示画面に表示される。

このように、親画面と子画面とに異なる映像信号による異なる映像（画像）を表示することができるようにされているので、例えば、テレビ放送番組の視聴中に、電子メールを作成して送信する必要が生じた場合には、電子メールモードに切り換えて、電子メールの作成画面を親画面に表示して電子メールの作成を可能にすると共に、受信しているテレビ放送信号によるテレビ放送番組の映像を子画面に表示して視聴するなどのことができるようにしている。

この場合には、制御部２０によりセレクタ４が制御され、復調部３から映像信号が子画面処理部８に供給され、Ｄ／Ａ変換部６を通じて供給される制御部２０からの電子メールの作成画面を形成する映像信号が主映像処理部７に供給されて、子画面でテレビ放送番組の視聴を継続しながら、親画面に表示された電子メールの作成画面を通じて電子メールの作成をも行うことができるようにされる。同様に、Ｗｅｂページの映像を親画面に表示し、テレビ放送番組の映像を子画面に表示するようにすることもできるようにされる。

このように、２画面表示が指示された場合には、親画面と子画面とのそれぞれの表示エリアに異なる映像信号による映像を表示することができると共に、これらの映像にクリップボードのキャプチャーした画像や操作用ガイダンスなどの表示情報をも多重するようにして表示することができるようにしている。

なお、２画面表示が行うようにされていない場合には、表示部１３の表示画面の全面に、主映像処理部７からの表示用信号による映像が表示される。また、ＯＳＤ処理部１０からの多重映像も常時表示されるわけではなく、制御部２０の制御に応じて、必要なときに、必要な情報が表示されることになる。

また、キャプチャー処理部１１は、フレームメモリを備え、表示部１３の表示画面に表示されている画像を形成する表示用信号（画像信号）がデジタルデータとして常時取り込まれるようにされている。そして、図２に示したリモコン１００の画面メモキー１０８が押下操作された場合には、そのときに、表示部１３の表示画面に表示されている画像が画像データとしてキャプチャー処理部１１の機能により取り込まれるようにされる。

そして、上述もしたように、取り込まれた画像の画像データは、制御部２０の制御により、外部メモリ５０が装着されているときには外部メモリ５０に、外部メモリ５０が装着されていないときにはＲＡＭ２３に、画像ファイルとして記録され、後述もするように、アルバム機能を用いて管理すると共に利用することができるようにされる。

このように、この第１の実施の形態のテレビ受像機は、テレビ放送番組の視聴に用いられるばかりでなく、電子メールの作成、送信、自機宛ての電子メールの受信、Ｗｅｂページへのアクセスなどのインターネットの利用機能を備えると共に、電話機能をも有するものである。そして、表示部１３の表示画面に表示されている映像をキャプチャーする画面メモ機能を備え、キャプチャーした画像を形成する画像データなどを管理し利用するようにするためのアルバム機能をも備えたものである。

［画面メモ機能の利用について］
前述もしたように、この実施の形態のテレビ受像機は、表示部１３の表示画面に表示されている画像を画像データとして取り込んで利用できるようにする画面メモ機能を有している。図３は、この実施の形態のテレビ受像機における画面メモ機能を説明するための図である。

上述もしたように、この実施の形態のテレビ受像機は、テレビ放送番組の画像、外部入力画像、Ｗｅｂページの画像、電子メールの画像などを表示部１３の表示画面に表示することができるものであり、これらの表示されている１画面分の画像（映像）を画像データとして取り込む（キャプチャーする）ことができるものである。

例えば、図３Ａに示すように、電子メールアドレスやＵＲＬを含むテレビ放送番組の画像が表示部１３の表示画面１３Ｇに表示された場合に、ユーザーは、リモコン１００の画面メモキー１０８を押下操作すると、これに応じたリモコン信号がリモコン１００から送出され、これがこの実施の形態のテレビ受像機のリモコン信号受光部４３により受信される。

この場合、テレビ受像機の制御部２０は、キャプチャー処理部１１を制御し、表示部１３の表示画面１３Ｇに表示している映像を形成する映像信号を画像データとして取り込み、これを自機に装填された外部メモリ５０に画像ファイルとして記録する。この場合、制御部２０は、図示しない音声信号系の音声信号処理部を制御し、この実施の形態のテレビ受像機が備えるスピーカから表示画像をキャプチャーしたことを示すアラーム音を放音することができるようにしている。

さらに制御部２０は、ＯＳＤ処理部１０に対して、最新にキャプチャーした画像の縮小画像を形成する画像データと、それより以前にキャプチャーした画像のうち、キャプチャーした時期の新しい３枚の画像の縮小画像を形成する画像データとを供給して、図３Ｂに示すように、表示画面１３Ｇの左側に、キャプチャーした画像の縮小画像を表示したクリップボード１３ＣＰを表示する。

図３Ｂの場合には、最新に（今回）キャプチャーした映像の縮小画像ｃｐ１と、前回キャプチャーした画像の縮小画像ｃｐ２との２枚のキャプチャー画像がクリップボード１３ＣＰに表示されている場合を示している。すなわち、図３Ｂの例は、画面メモ機能によりキャプチャーされた画像が２つある場合を示している。

そして、キャプチャーされた画像の縮小画像が表示されたクリップボード１３ＣＰは、一定時間（例えば２秒間）表示された後に、自動的に表示画面１３Ｇからは消去され、図３Ｃに示すように、元の映像、この例の場合には、テレビ放送番組の映像のみが表示するようにされる。

なお、画面メモキー１０８を連続して押下操作することにより、表示部１３の表示画面１３Ｇに表示される画像を連続してキャプチャーして、連続してキャプチャーされた画像のそれぞれの画像データを外部メモリ５０などに画像ファイルとして記憶保持することができるようにされる。

この場合においても、画面メモキー１０８が押下操作される毎に、キャプチャー実行音をテレビ受像機のスピーカから放音すると共に、最新にキャプチャーした画像の縮小画像が上端側に位置するようにされたクリップボード１３ＣＰが表示され、所定時間経過後に自動的に消去するようにされる。

このように、画面メモキー１０８が押下操作されるごとに表示画面１３Ｇに表示されている画像を形成する画像信号が画像データ（デジタルデータ）として取り込まれ、画像ファイルとして記憶保持するようにされるが、画面メモキーが押下操作され、表示されている画像のキャプチャーが行われる毎に、キャプチャー実行音の放音と、クリップボード１３ＣＰの表示とにより、すなわち、音と表示とにより、ユーザーは目的とする画像がキャプチャーされたことを確実に確認することができるようにしている。

しかも、クリップボード１３ＣＰには、キャプチャーした複数の映像の縮小映像を表示することができるので、過去にキャプチャーした画像の存在をユーザーに知らせることができるし、また、連続して画像をキャプチャーした場合には、目的とする映像が連続して適正にキャプチャーされたか否かを確認することもできるようにされる。

次に、この実施の形態のテレビ受像機における主に画面メモ機能の実行時の動作について、図４のフローチャートを参照しながら説明する。図４は、この実施の形態のテレビ受像機に電源が投入された場合に、制御部２０において実行される処理である。

電源が投入されると、この実施の形態のテレビ受像機の制御部２０は、ユーザーからの操作入力待ちとなる（ステップＳ１）。制御部２０は、リモコン信号受光部４３を通じて、あるいは、タッチパネル１４を通じて、ユーザーからの操作入力を受け付けたか否かを判断する。そして、ステップＳ１の判断処理において、受け付けていないと判断した場合には、ステップＳ１からの処理を繰り返し、受け付けたと判断したときには、その受け付けた操作入力が電源オフを指示するものであるか否かを判断する（ステップＳ２）。

ステップＳ２の判断処理において、受け付けた操作入力が、電源オフを指示するものであると判断したときには、制御部２０は、各部への電源の供給を停止するなどの終了処理を行って（ステップＳ３）、この図４に示す処理を終了する。また、ステップＳ２の判断処理において、受け付けた操作入力が、電源オフを指示するものではないと判断したときには、制御部２０は、受け付けた操作入力は、画面メモ機能の実行を指示するものか否かを判断する（ステップＳ４）。

ステップＳ４の判断処理において、受け付けた操作入力が、画面メモ機能の実行を指示するものであると判断したときには、制御部２０は、キャプチャー処理部１１を制御して、表示中の映像を形成する映像信号をデジタルデータとして所定のメモリ、この例の場合には、テレビ受像機に装着された外部メモリ５０に記録する（ステップＳ５）。

このとき、制御部２０は、テレビ受像機の図示しない音声信号処理部を制御し、スピーカから映像のキャプチャーを行ったことを報知するためのアラーム音をスピーカから放音するようにすると共に（ステップＳ６）、クリップボード１３ＣＰに表示するキャプチャーした複数の画像の縮小画像を表示するためのデータをＯＳＤ処理部１０に供給して、図３Ｂに示したようにキャプチャーして得た複数の画像の縮小画像が表示するようにされたクリップボード１３ＣＰを一定時間だけ表示する処理を行う（ステップＳ７）。ステップＳ７の処理において、クリップボード１３ＣＰを表示した後、制御部２０は、ステップＳ１からの処理を繰り返すようにし、ユーザーからの操作入力の待ち状態になる。

また、ステップＳ４の判断処理において、受け付けた操作入力が、画面メモ機能の実行を指示するものではないと判断したときには、制御部２０は、受け付けたリモコン信号に応じた他の処理、例えば、放送チャンネルの選局や、音量の調整、画質の調整、モード切り換えなどが行うようにされる（ステップＳ８）。このステップＳ８の処理の後、制御部２０は、ステップＳ１からの処理を繰り返すようにし、ユーザーからの操作入力の待ち状態になる。

このように、この第１の実施の形態のテレビ受像機においては、画面メモキー１０８の押下操作という簡単な操作を行うだけで、表示部１３の表示画面１３Ｇに表示されている画像を画像データとして取り込んで、所定のメモリに記憶すると共に、最新に取り込んだ画像の縮小画像と、それ以前に取り込んだ複数の画像の縮小画像とをクリップボード１３ＣＰに貼り付けて、一定時間の間、表示するようにされる。また、音声によっても、映像のキャプチャーを行ったことをユーザーに通知することができるので、目的とする映像が適正にキャプチャーされたか否かが分からなくなるなどの不都合を生じることもない。

そして、上述もしたように、この第１の実施の形態のテレビ受像機の場合には、キャプチャーして得た複数の画像の画像データを記憶保持することができ、それら複数のキャプチャーした画像をまとめて管理すると共に、それらの１つ１つの画像を個々に利用することもできるようにしている。図５は、この実施の形態のテレビ受像機において、キャプチャーした映像のデジタルデータを画像ファイルとして記憶保持するキャプチャーメモリについて説明するための図である。

この実施の形態のテレビ受像機においては、外部メモリ５０が、キャプチャーメモリとして用いるようにされている。そして、図５において、ｃｐ１、ｃｐ２、ｃｐ３、…が示すように、キャプチャーメモリには、キャプチャーした個々の画像の画像データが画像ファイルとして記録され、上述したように、それらを管理することができると共に、そのそれぞれを個別に利用することもできるようにしている。

なお、キャプチャーメモリには、その記憶容量に応じて複数の画像の画像データが記録可能である。そして、キャプチャーメモリの記憶容量いっぱいにキャプチャーした画像の画像データが記録された場合には、例えば、メモリ容量が不足していることを通知し、不必要になったキャプチャー画像の整理（消去）や、全てのキャプチャー画像の消去などの対応を取ることが促すようにされる。

［画面メモ機能によりキャプチャーした映像の利用について］
次に、画面メモ機能によりキャプチャーした画像の利用について説明する。図６は、この実施の形態のテレビ受像機においてのキャプチャーした画像の利用の仕方について説明するための図である。図５を用いて説明したように、キャプチャーメモリには、キャプチャーされた複数の画像の画像データが画像ファイルｃｐ１、ｃｐ２、ｃｐ３、…として記録されている。

それらの個々の画像ファイルをアルバム機能を用いることによって、図６において、表示部１３の表示画面１３Ｇに示したように、キャプチャーした画像の縮小画像の一覧表示ＧＨを表示することができるようにされている。ここでは、図６に示したように、１画面に９枚の縮小画像を表示する場合を示しており、スクロールすることにより、キャプチャーメモリに記憶保持されている全ての画像の縮小画像を表示することができるようにしている。

この一覧表示ＧＨは、制御部２０が、１画面中に表示する複数の画像の画像データをキャプチャーメモリから読み出して、縮小処理して一覧表示できるように整え、一覧表示ＧＨを表示するためのデジタルデータを形成して、これをＤ／Ａ変換部６、セレクタ４を通じて主映像処理部７に供給することにより表示される。

そして、図６において、表示部１３の下側に矢印を用いて示したように、この実施の形態のテレビ受像機においては、アルバム機能を用いることによって、大きく分けると、スライドショー表示と拡大表示（この実施の形態においては、選択された縮小画像を表示画面１３Ｇの全面に表示するようにする処理）とを行うことができるようにされる。

さらに拡大表示を行うようにした場合には、その拡大して表示するようにした画像を印刷したり、電子メールに添付したり、お絵描きに利用したり、拡大して表示するようにした画像中に含まれる電子メールアドレス、ＵＲＬ、電話番号である通信の相手先を示す文字情報の文字認識を行うことができるようにされる。

そして、拡大して表示するようにした画像中に含まれる文字情報の文字認識を行うようにした場合には、後述もするが、認識した文字列に応じて、図６の最下段に示すように、電子メールソフト（電子メールプログラム）、ブラウザ、電話処理ソフトを自動的に立ち上げて、自動的に通信処理を行うことができるようにしている。

なお、電子メールソフトは、一般にメールソフト、メーラーなどと呼ばれるソフトウエアであり、電子メールを作成したり、作成した電子メールを送信したり、また自分宛ての電子メールを受信して閲覧するなどのことを行うためのものである。また、ブラウザは、インターネット上のＷｅｂページを閲覧するためのソフトウエア（閲覧プログラム）である。また、電話処理ソフトは、通信部３０を制御し、目的刷る相手先との間に電話回線を接続し、通話を行うことができるようにする電話機能を実現するためのソフトウエアである。

また、スライドショー表示は、一覧表示ＧＨの中から目的とする複数の映像の選択入力を受け付け、選択された映像のそれぞれを一定時間ずつ表示部１３の表示画面１３Ｇの全面に表示するようにするものである。もちろん、キャプチャーメモリに記録された画像ファイルによる画像を予め決められた順番、例えば、記録順に一定時間ずつ表示するようにすることも可能である。また、ユーザーが選択した映像を、あるいは、記憶されている全ての画像を、ユーザーからの指示に応じたタイミングで順番に表示するようにすることも可能である。

図７は、キャプチャーした画像であって、拡大して表示するようにした画像中に含まれる通信の相手先を示す文字情報を認識して、これを利用する場合の例を説明するための図である。図７Ａに示すように、アルバム機能を実行し、キャプチャーした画像についての縮小画像の一覧表示ＧＨを行うようにした後、拡大して表示するようにした画像を選択すると、テレビ受像機の表示部１３の表示画面１３Ｇには、図７Ｂに示すように、選択された縮小画像が拡大するようにして表示される。図７Ｂに示した例は、電子メールアドレスとＵＲＬとが含まれた縮小画像が拡大するようにして表示された場合を示している。

なお、拡大するようにして表示する目的とする縮小画像の選択は、例えば、目的とする画像が表示されているタッチパネル１４が貼付された表示画面１３Ｇ上の位置に指などを接触させることにより、その接触位置をタッチパネル１４、座標変換部１５を通じて制御部２０が認識し、その接触位置に表示されている縮小画像を選択された画像として制御部２０が認識するようにすることができる。

また、リモコン１００の矢印キー１１７、１１８、１１９などを操作して、表示された縮小画像の１つに位置付けることが可能にされたカーソルを移動させ、目的とする縮小画像にカーソルを位置付けて、エンターキー１１６を押下操作することによって、カーソルが位置付けられた縮小画像を選択された画像として制御部２０が認識することができる。

そして、拡大するようにして表示された画像中に表示された文字列の文字認識を行わせようとする場合には、文字認識しようとしている文字列の位置を指示する。具体的には、目的とする文字列が表示されている表示画面１３Ｇ上の位置に指などを接触させることにより、その接触位置をタッチパネル１４、座標変換部１５を通じて制御部２０が認識し、この認識した接触位置を基準にして、表示画面１３Ｇの所定範囲内に表示されている文字列の文字認識を行うようにすることができる。

例えば、図７Ｂにおいて、電子メールアドレスである「ａｂｃｄｅ＠ｘｘｘ．ｃｏｍ」という文字列が表示されている表示画面１３Ｇ上に指などを接触させることにより、その接触位置を、タッチパネル１４、座標変換部１５を通じて制御部２０が認識し、その認識した接触位置を基準位置として、表示画面の横方向に文字認識を行うことにより、表示されている文字列「ａｂｃｄｅ＠ｘｘｘ．ｃｏｍ」の文字認識をすることができるようにされる。

そして、文字認識した文字列に文字「＠」が含まれている場合には、制御部２０は、これを電子メールアドレスであると認識する。この場合、後述もするように、制御部２０は、電子メールソフトを起動し、図７Ｃに示すように、文字認識した電子メールアドレスを電子メールの送信先として自動的に設定して、電子メールの作成、作成した電子メールの送信などを行うことができるようにされる。

また、図７Ｂにおいて、「ｈｔｔｐ；／／ｗｗｗ．ａｂｃ．ｃｏｍ」という文字列が表示されている表示画面１３Ｇ上に指などを接触させることにより、その接触位置を、タッチパネル１４、座標変換部１５を通じて制御部２０が認識し、その認識した接触位置を基準位置として、表示画面の横方向に文字認識を行うことにより、表示されている文字列「ｈｔｔｐ；／／ｗｗｗ．ａｂｃ．ｃｏｍ」を文字認識することができるようにされる。

そして、文字認識した文字列に文字列「ｈｔｔｐ」が含まれている場合には、制御部２０は、これをＵＲＬであると認識する。この場合、後述もするように、制御部２０は、ブラウザを起動し、所定のＩＳＰを通じてインターネットに接続し、図７Ｄに示すように、文字認識したＵＲＬを用いて、目的とするＷｅｂページに自動的にアクセスすることができるようにされる。

なお、文字認識した文字列が、数字のみ、あるいは、数字とハイフンのみからなる文字列は、電話番号であると判別することができる。文字認識した文字列が電話番号であると判別した場合には、制御部２０は、電話処理ソフトを実行し、その電話番号の相手先に対して電話をかけて通話を行うことができるようにされる。

また、文字認識を行うようにする場合には、目的とする文字列の位置をタッチパネル１４と座標変換部１５とを通じて入力するものとして説明したが、これに限るものではない。例えば、リモコン１００を通じて、表示画面１３Ｇ上に表示されるポインタを移動させて、文字認識させたい文字列の表示範囲を指示するようにすることも可能である。

［アルバム機能について］
次に、画面メモ機能によりキャプチャーした画像を利用するためのアルバム機能と画像拡大処理とについて説明する。図８は、この実施の形態のテレビ受像機の制御部２０において行われるアルバム機能実行時の処理について説明するためのフローチャートである。

この実施の形態のテレビ受像機においては、表示部１３の表示画面１３Ｇに表示されるメニューからアルバム機能を選択することにより、図８に示すアルバム機能ルーチンが実行される。アルバム機能ルーチンが実行するようにされると、この実施の形態のテレビ受像機の制御部２０は、所定のキャプチャーメモリ、この実施の形態においては、外部メモリ５０に記憶されているキャプチャーされた画像の画像データを読み出し、図７Ａに示したように、キャプチャーされた画像のそれぞれの縮小画像の一覧表示を行う（ステップＳ１１）。

なお、ここでは、一覧表示される縮小画像は、キャプチャーされたものとして説明したが、これに限られるものではない。上述もしたように、デジタルカメラから取り込んだ画像なども含まれる。そして、１画面に表示しきれない場合には、画面のスクロールを行うことにより、記録されている画像の全部を順次に表示して目的とする画像を探し出すことができるようにされている。

そして、制御部２０は、リモコン１００、あるいは、タッチパネル１４を通じて受け付けるユーザーからの操作入力待ちとなる（ステップＳ１２）上述もしたように、この実施の形態のテレビ受像機は、表示部１３の表示画面１３Ｇに表示するアイコンや選択項目の表示とタッチパネル１４とを通じて、あるいは、リモコン１００を通じて、ユーザーからの操作入力を受け付けることができるようにされている。

操作入力の具体例をあげれば、例えば、実行するようにしたアルバム機能を終了する場合には、終了アイコンが表示されている表示部１３の表示画面１３Ｇ上のタッチパネル１４に指などを接触させることにより、アルバム機能の終了を指示することができる。また、スライドショー表示を行う場合も同様に、スライドショーアイコンが表示されている表示部１３の表示画面１３Ｇ上のタッチパネル１４に指などを接触させることにより、スライドショー表示を行うようにすることを指示することができる。

また、キャプチャーした画像を拡大するようにして表示する場合には、上述もしたように、一覧表示されている縮小画像の中から拡大するようにして表示する縮小画像が表示されている表示部１３の表示画面１３Ｇ上のタッチパネル１４に指などを接触させることにより、拡大するようにして表示する縮小画像を選択し、さらに、拡大表示アイコンが表示されている表示部１３の表示画面１３Ｇ上のタッチパネル１４に指などを接触させることにより、選択した縮小画像を拡大するようにして表示することを指示することができる。

そして、ステップＳ１２において、上述のようなユーザーからの操作入力を受け付けたと判断したときには、その受け付けた操作入力が示す指示内容を判別する（ステップＳ１３）。 ステップＳ１３の判断処理において、アルバム機能の終了が指示されたと判断したときには、制御部２０は、この図８に示すアルバム機能ルーチンを終了する。

また、ステップＳ１３の判断処理において、スライドショー表示を行うことが指示されたと判断したときには、上述もしたように、スライドショーに用いるキャプチャーした画像などの選択入力を受け付けて、選択された画像を一定時間ずつ自動的に表示するようにするなどのスライドショー処理を行うようにし（ステップＳ１４）、スライドショー処理が終了した場合には、この実施の形態のテレビ受像機の制御部２０は、ステップＳ１１からの処理を繰り返すようにする。

また、ステップＳ１３の判断処理において、画像を拡大するようにして表示することが指示されたと判断したときには、図７を用いて説明したように、画像の拡大表示（縮小画像に対応する画像データを用いて、表示画面の全面に画像を表示するようにする処理）を行って、文字認識や印刷、メール添付、お絵描きなどの処理を行うようにする画像の拡大処理を実行し（ステップＳ１５）、画像の拡大処理が終了した場合には、この実施の形態のテレビ受像機の制御部２０は、ステップＳ１１からの処理を繰り返すようにする。

このようにして、キャプチャーすることにより取り込んだ、テレビ放送番組の画像、外部機器からの画像、インターネットを通じて取り込んだ画像、さらには、デジタルカメラから取得したが画像についても、一覧表示し、スライドショー表示を行うようにしたり、拡大するようにした表示を行ったりして、種々の態様で利用することができるようにされる。

［画像の拡大処理について］
次に、図８に示したアルバム機能ルーチンのステップＳ１５において行われる画像の拡大処理について説明する。図９は、図８に示した処理のステップＳ１５において行われる画像拡大処理を説明するためのフローチャートである。

画像の拡大表示が指示された場合、この実施の形態のテレビ受像機の制御部２０は、まず、上述もしたように、一覧表示の中から拡大するようにして表示する画像映像として選択された画像を表示部１３の表示画面１３Ｇいっぱいに表示（拡大表示）するようにし（ステップＳ２１）、ユーザーからの操作入力待ちとなる（ステップＳ２２）。ステップＳ２２の判断処理において、ユーザーからの操作入力を受け付けたと判断したときには、その操作入力は文字認識処理の実行を指示するものか否かを判断する（ステップＳ２３）。

ここで、文字認識処理の実行を指示する操作入力は、例えば、文字認識すべき文字情報が表示されている表示画面上のタッチパネル１４にユーザーが指などを接触させたり、あるいは、接触させたまま移動させるようにするいわゆるドラック操作を行ったりしたことを検出した場合に、これを文字認識の実行指示であると判断する。

そして、制御部２０は、指などの接触位置を基準とする表示画面１３Ｇ上の所定範囲に表示されている文字列、あるいは、ドラックされた区間（接触開始位置から接触終了位置）に対応する表示画面１３Ｇ上に表示されている文字列について、文字認識処理を行うようにする。

また、文字認識以外の処理の実行指示の場合には、ユーザーが指などを接触させたタッチパネル１４上の位置に対応する表示画面１３Ｇ上の位置に表示されているアイコンに応じて、印刷を行うようにする指示か、お絵描きを行うようにする指示か、電子メールに添付する指示かを判別することができる。

そして、ステップＳ２３の判別処理において、受け付けた操作入力が、文字認識処理の実行を指示するものであると判断した場合には、制御部２０は、表示部１３の表示画面１３Ｇに表示している画像のユーザーに指示された位置を基準にして文字認識すべき画像の表示エリアを確定し、その表示エリア内に表示されている画像の画像データからパターンマッチングを行うためのマッチングデータを形成すると共に、この形成したマッチングデータと、制御部２０のＲＯＭ２２に予め用意されている文字のマッチングデータとのパターンマッチングを行って、文字認識を行い、認識した文字を文字データにエンコードとして例えばＥＥＰＲＯＭ２４に記憶保持する（ステップＳ２４）。

このように、この第１の実施の形態のテレビ受像機の制御部２０は、外部メモリ５０などのキャプチャーメモリに取り込まれた画像中に表示される文字列をいわゆるパターンマッチング法を用いて文字情報として認識し、これをＥＥＰＲＯＭ２４に記憶保持することにより、これを２次利用することができるようにしている。

そして、制御部２０は、文字認識した文字列は、電子メールアドレスか否かを判断する（ステップＳ２５）。ステップＳ２５の判断処理において、文字認識した文字列が文字「＠」を含む電子メールアドレスであると判断したときには、制御部２０は、後述もする電子メール処理を実行して（ステップＳ２６）、この図９に示す処理を終了する。

また、ステップＳ２５の判断処理において、文字認識した文字列は、電子メールアドレスではないと判断したときには、文字認識した文字列は、文字列「ｈｔｔｐ」を含むＵＲＬか否かを判断する（ステップＳ２７）。このステップＳ２７の判断処理において、文字認識した文字列はＵＲＬであると判断したときには、後述もするブラウザ処理を実行して（ステップＳ２８）、この図９に示す処理を終了する。

また、ステップＳ２７の判断処理において、文字認識した文字列はＵＲＬではないと判断したときには、その他の処理、すなわち、後述もするが、電話処理やメッセージ表示処理等を行い（ステップＳ２９）、この図９に示す処理を終了する。

また、ステップＳ２３の判断処理において、受け付けた操作入力が、文字認識処理の実行を指示するものではないと判断した場合には、制御部２０は、選択された画像の印刷処理や、お絵描きでの利用、あるいは、電子メールへの添付など、ユーザーの指示に応じて、選択された画像を利用する処理を実行し（ステップＳ３０）、この図９に示す処理を終了する。

［文字認識後の処理について］
次に、図９に示した画像拡大処理において、文字認識を行った場合に、ステップＳ２６において行われる電子メール処理、ステップＳ２８において行われるブラウザ処理、ステップＳ２９において行われるその他の処理のそれぞれについて説明する。

［電子メール処理について］
図１０は、図９に示したステップＳ２６において実行される電子メール処理を説明するためのフローチャートである。すなわち、文字認識した文字列が電子メールアドレスであると判別した場合に、制御部２０は、図１０に示す処理を実行して、まず電子メールソフトを起動し（ステップＳ３１）、電子メールの作成画面を表示し、文字認識して取得した電子メールアドレスを相手先アドレスとして使用するように自動設定して（ステップＳ３２）、電子メールの作成入力を受け付けるようにする（ステップＳ３３）。

そして、作成した電子メールの送信指示があるか否かを判断し（ステップＳ３４）、送信指示がされたと判断したときには、制御部２０は、インターネットへの接続が確立されているか否かを判断する（ステップＳ３５）。ステップＳ３５の判断処理において、インターネットへの接続が確立されていないと判断した場合には、制御部２０は、例えば、所定のＩＳＰを通じてインターネットに接続するようにする処理を行う（ステップＳ３６）。

ステップＳ３５の判断処理において、既にインターネットへの接続が確立していると判断した場合、および、ステップＳ３６の処理によりインターネットへの接続を確立するようにした場合には、制御部２０は、作成した電子メールを文字認識した電子メールアドレスによって指定される相手先のメールボックス機能を有するサーバーに送信する（ステップＳ３７）。この後ステップＳ３３からの処理に戻り、電子メールの作成を続行することができるようにされる。

また、ステップＳ３４の判断処理において、送信指示はないと判断したときには、終了指示がされたか否かを判断する（ステップＳ３８）。ステップＳ３８の判断処理において、終了指示はされていないと判断したときには、制御部２０は、ステップＳ３３からの処理を繰り返す。ステップＳ３８の判断処理において、終了指示がされたと判断したときには、制御部２０は電子メールソフトを終了するなどの終了処理を行って（ステップＳ３９）、この図１０に示す処理を終了する。

このように、文字認識した電子メールアドレスを電子メールの送信先のアドレスとして自動的に用いて電子メールを作成することができるようにし、作成した電子メールを送信することができるようにしている。したがって、ユーザーは電子メールソフトを立ち上げて、目的とする相手先の電子メールアドレスを手入力したりするなどのことをしなくても、目的とする相手先に対して、電子メールを作成して送信することができるようにされる。

［ブラウザ処理について］
図１１は、図９に示したステップＳ２８において実行されるブラウザ処理を説明するためのフローチャートである。すなわち、文字認識した文字列がＵＲＬであると判別した場合、制御部２０は、ブラウザを起動し（ステップＳ４１）、インターネットへの接続を確立済みか否かを判断する（ステップＳ４２）。ステップＳ４２の判断処理において、インターネットへの接続が確立されていないと判断したときには、制御部２０は、例えば、所定のＩＳＰを通じてインターネットに接続するようにする処理を行う（ステップＳ４３）。

ステップＳ４２の判断処理において、インターネットへの接続が確立済みであると判断した場合、および、ステップＳ４３の処理によりインターネットへの接続を確立するようにした場合には、文字認識して取得したＵＲＬにより特定されるＷｅｂページに自動的にアクセスし（ステップＳ４４）、そのＷｅｂページを表示して利用できるようにする（ステップＳ４５）。ここで、Ｗｅｂページの利用は、スクロールして必要な情報を得たり、印刷したりするなど、目的とするＷｅｂページを種々利用することである。

そして、終了が指示されたか否かを判断し（ステップＳ４６）、終了指示がされていないと判断したときには、ステップＳ４５からの処理を繰り返す。また、ステップＳ４６の判断処理において、終了指示がされたと判断したときには、制御部２０は、ブラウザを終了するなどの終了処理を行って（ステップＳ４７）、この図１１に示す処理を終了する。

このように、文字認識したＵＲＬを用いて、目的とするＷｅｂページにアクセスすることができるようにされる。したがって、ユーザーはブラウザを立ち上げて、目的とするＷｅｂページのＵＲＬを手入力したりすることなく、目的とするＷｅｂページに自動的にアクセスすることができるようにされる。

［文字認識した後のその他の処理について］
図１２は、図９に示したステップＳ２９において実行されるその他の処理を説明するためのフローチャートである。すなわち、文字認識された文字列が電子メールアドレスでもＵＲＬでもないと判別した場合、制御部２０は、認識した文字列は、電話番号か否かを判断する（ステップＳ５１）。ステップＳ５１の判断処理において、認識した文字列が電話番号であると判断したときには、発呼処理の実行が指示されたか否かを判断する（ステップＳ５２）。

ステップＳ５２の判断処理において、発呼処理の実行が指示された、すなわち、発呼処理の実行を指示する所定の操作を受け付けたと判断した場合には、制御部２０は、文字認識することにより取得した電話番号を電話をかける相手先（発呼先）の電話番号として用いて発呼処理を行い、電話回線を接続するようにする（ステップＳ５３）。

そして、相手からの応答を待ち、電話回線が接続された場合には通話を行い、通話終了後にユーザーからの指示に応じてオンフックするようにする処理を行い、また、話し中であったり、相手からの応答がなく通話を行うことができなかったりした場合には、ユーザーからの指示に応じてオンフックするようにする処理を行ういわゆる通話処理を行うようにする（ステップＳ５４）。この後、ステップＳ５２からの処理を繰り返すようにされる。

また、ステップＳ５２の判断処理において、発呼処理の実行は指示されていないと判断したときには、終了することが指示されたか否かを判断する（ステップＳ５５）。ステップＳ５５の判断処理において、終了指示はされていないと判断したときには、ステップＳ５２からの処理を繰り返すようにする。また、ステップＳ５５の判断処理においては、終了指示がされたと判断したときには、所定の終了処理を行って（ステップＳ５６）、この図１２の処理を終了する。

また、ステップＳ５１の判断処理において、認識した文字列は電話番号ではないと判断したときには、文字認識した文字列は、結局、電子メールアドレスでも、ＵＲＬでも、また、電話番号でもないので、通信処理に利用可能な通信の相手先を示す情報を認識できなかったことを通知するようにし（ステップＳ５７）、終了処理を行って（ステップＳ５６）、この図１２に示す処理を終了する。

このように、文字認識した電話番号を用いて、目的とする相手先に自動的に電話をかけるようにすることができる。したがって、ユーザーは電話番号を手入力することなく、目的とする相手先に電話をかけて通話を行うようにすることができる。

［第１の実施の形態のまとめ］
上述した第１の実施の形態においては、画面メモ機能を用いることによって、表示部１３の表示画面１３Ｇに表示された画像を画像データとして取り込んで（キャプチャーして）、メモリに画像ファイルとして保存することができるようにされる。この場合、連続して画像をキャプチャーすることも可能であり、キャプチャーが行われるようにされた時には、クリップボードにキャプチャーした画像の縮小画像を表示して、目的とする画像がキャプチャーされたことを明確にユーザーに通知することができる。

また、キャプチャーを行うようにした場合には、キャプチャーしたことを通知する音声（キャプチャー実行音）を放音することにより、ユーザーは聴覚を通じてもキャプチャーが実行されたことを認識することができるようにされる。

また、クリップボードには、最新にキャプチャーした画像と共に、過去にキャプチャーした画像があれば、それも表示することができるので、例えば、連続してキャプチャーを行うようにした場合にそのそれぞれを確認することができるし、また、過去にキャプチャーした画像の存在をキャプチャーを行うようにするたびにユーザーに知らせることができる。

そして、キャプチャーした画像は、アルバム機能を用いて、スライドショー表示を行うようにしたり、キャプチャーした画像を拡大するようにして表示して、それを印刷したり、お絵描きに用いたり、電子メールに添付したりすることができる。また、拡大表示した画像に、電子メールアドレス、ＵＲＬ、電話番号等の表示がされている場合には、それらの情報を文字認識して取得し、電子メールアドレス、ＵＲＬ、電話番号といった通信の相手先を特定する情報をいちいち入力しなくても、自動的に目的とする相手先との間で通信を行うようにすることができる。

したがって、テレビ放送番組の中で、意見、感想を電子メールで受け付ける旨の表示と電子メールアドレスとが表示された場合には、その画像をキャプチャーし、そのキャプチャーした画像中に表示されている電子メールアドレスを文字認識して取得し、目的とする相手先にその番組に対する意見や感想を送信することができるようにされる。したがって、電子メールアドレスをユーザーがメモするなどの手間をかけることなく、また、電子メールアドレスをユーザー手入力することもないため電子メールアドレスの入力間違いが発生することもない。

同様に、ＵＲＬや電話番号が表示された映像中に存在する場合には、その画像をキャプチャーし、そのキャプチャーした画像中に含まれるＵＲＬや電話番号を文字認識して取得し、Ｗｅｂページを通じて詳細情報を取得したり、また、電話をかけて購入申込をしたりするなどのことを行うことができるようにされる。

しかも、上述した第１の実施の形態の場合には、画像のキャプチャー処理のみ繰り返し行って、キャプチャーした画像を、アルバム機能を用いて管理し、後でゆっくり利用するようにすることができる。すなわち、即座に利用する必要はないが、後で利用したい情報を含む画像が表示された場合に、その画像をキャプチャーして画像データとして保存しておき、必要に応じて読み出して利用することができるようにされる。

なお、上述した第１の実施の形態においては、アルバム機能を用い、キャプチャーした画像から目的とする画像を選択し、この選択した画像を表示画面１３Ｇの全面に表示するようにした後に、さらに文字情報の表示位置を指示した場合に文字認識を行うものとして説明したが、これに限るものではない。例えば、リモコン１００に設けられる文字認識指示キーの押下操作などを行うことにより、表示された画像中に含まれる文字情報の文字認識処理を行うようにしてもよい。この場合には、画像データを分析することにより、文字情報が表示されている表示エリアを特定し、上述した場合と同様に、画像データからパターンマッチング用のデータを形成してパターンマッチングを行うようにすればよい。

また、目的とする縮小画像を選択した段階で、選択された画像に含まれる文字情報の文字認識処理を行って、これを用いるようにすることも可能である。

なお、上述の説明からも分かるように、この第１の実施の形態において、受付手段は、リモコン１００、リモコン信号受光部４３が実現し、取り込み手段は、キャプチャー処理部１１、制御部２０が実現し、表示制御手段は、制御部２０、ＯＳＤ処理部１０、合成部９が協働して実現ししている。

また、一覧表示受付手段、選択入力受付手段は、リモコン１００、リモコン信号受光部４３、あるいは、タッチパネル１４、座標変換部１５が実現し、一覧表示制御手段、画像表示制御手段は、制御部２０、Ｄ／Ａ変換部６、セレクタ４、主映像処理部５など実現するようにしている。また、実行指示受付手段は、リモコン１００、リモコン信号受光部４３、あるいは、タッチパネル１４、座標変換部１５が実現し、文字認識手段は、主に制御部２０が実現し、通信関連処理手段は、制御部２０、通信部３０が実現するようにしている。

［第２の実施の形態］
上述したように、第１の実施の形態のテレビ受像機は、必要な表示情報を含む画像をキャプチャーして画像データとして蓄積しておき、アルバム機能を用いることによって、いつでも必要なときに、キャプチャーした画像を表示して利用することができるようにしたものである。

しかし、キャプチャーした画像を即座に利用するようにしたい場合もある。特に、電子メールアドレス、ＵＲＬ、電話番号といった通信の相手先を特定する情報が表示情報として含まれている場合には、その相手先に即座に電子メールを送信したり、ＵＲＬで特定されるＷｅｂページにアクセスして詳細情報を確認するようにしたり、あるいは、相手先に電話をかけて通話するようにしたりしたい場合がある。

そこで、この第２の実施の形態のテレビ受像機は、テレビ放送番組などの映像をキャプチャーした場合に、アルバム機能を用いることなく、ユーザーからの指示に応じて即座にキャプチャーした画像に含まれる文字列の文字認識を行って、文字認識した文字列に応じて、電子メールソフトやブラウザを自動立ち上げし、利用することができるようにしたものである。

なお、この第２の実施の形態のテレビ受像機は、図１を用いて上述した第１の実施の形態のテレビ受像機と同様に構成されるものである。このため、この第２の実施の形態のテレビ受像機もまた、図１に示した構成を有し、図２に示した操作キーを備えるリモコンを用いることができるものとして、図１、図２をも参照しながら説明する。

また、この第２の実施の形態のテレビ受像機の場合にも、上述した第１の実施の形態のテレビ受像機の場合と同様に、テレビモード、インターネットモード、電子メールモード、電話モードの４つの基本動作モードを備えると共に、第１の実施の形態のテレビ受像機とほぼ同様の機能を備えるものである。しかし、この第２の実施の形態のテレビ受像機の画面メモ機能は、以下に説明するように、上述した第１の実施の形態のテレビ受像機とは異なるものである。

［画面メモ機能の利用について］
図１３は、この第２の実施の形態のテレビ受像機における画面メモ機能を説明するための図である。この第２の実施の形態のテレビ受像機もまた、テレビ放送番組の映像、外部入力映像、Ｗｅｂページの映像、電子メールの映像などを表示部１３の表示画面に表示することができるものであり、これらの表示されている１画面の画像（映像）を画像データとして取り込む（キャプチャーする）ことができるものである。

例えば、図１３Ａに示すように、電子メールアドレスやＵＲＬを含むテレビ放送番組の画像（映像）が表示部１３の表示画面１３Ｇに表示された場合に、ユーザーは、リモコン１００の画面メモキー１０８を押下操作すると、これに応じたリモコン信号がリモコン１００から送出され、これがこの第２の実施の形態のテレビ受像機のリモコン信号受光部４３により受光される。

この場合、テレビ受像機の制御部２０は、キャプチャー処理部１１を制御し、表示部１３の表示画面１３Ｇに表示している映像を形成する映像信号を画像データとして取り込み、これを自機に装填された外部メモリ５０に画像ファイルとして記録する。この場合、制御部２０は、図示しない音声信号系の音声信号処理部を制御し、この実施の形態のテレビ受像機が備えるスピーカから表示映像をキャプチャーしたことを示すアラーム音を放音することができるようにしている。

さらに制御部２０は、ＯＳＤ処理部１０に対して、最新にキャプチャーした画像の縮小画像を形成する画像データと、それより以前にキャプチャーした画像のうち、キャプチャーした時期の新しい３枚の画像の縮小画像を形成する画像データとを供給して、図１３Ｂに示すように、表示画面１３Ｇの左側に、キャプチャーした画像の縮小画像を表示したクリップボード１３ＣＰを表示する。

図１３Ｂの場合には、最新に（今回）キャプチャーした映像の縮小画像ｃｐ１と、前回キャプチャーした画像の縮小画像ｃｐ２との２枚のキャプチャー画像がクリップボード１３ＣＰに表示されている場合を示している。すなわち、図１３Ｂの例は、画面メモ機能によりキャプチャーされた画像が２つある場合を示している。

そして、この第２の実施の形態のテレビ受像機においては、表示から一定時間（例えば１０秒程度）経過するか、リモコン１００の機能キー１０９が押下操作されるまで、クリップボード１３ＣＰは表示されたままとする。そして、クリップボード１０３に表示されたキャプチャーした画像の縮小画像が表示されている表示画面１３Ｇ上の位置に指などを接触させると、その接触位置がタッチパネル１４、座標変換部１５を通じて、制御部２０に通知され、制御部２０は、キャプチャーした画像が選択されたと判断するようにしている。

そして、キャプチャーした画像がユーザーにより選択されたと判断した場合には、制御部２０は、選択されたキャプチャーした画像に表示情報として含まれる文字情報の文字認識を行う。

この文字認識によって、選択されたキャプチャー画像中に表示されている文字情報が電子メールアドレスであると認識した場合、制御部２０は、図１３Ｃに示すように、電子メールソフトを自動立ち上げし、電子メールの作成画面を表示し、文字認識することに得た電子メールアドレスを目的とする相手先の電子メールアドレスとして用いて、電子メールの作成、送信を行うことができるようにする。

この場合、図１３Ｃに示したように表示画面１３Ｇの右下側に子画面１３Ｓを設け、ここに図１３Ａの段階では表示画面１３Ｇの全面に表示するようにされていた映像を表示するようにする。これにより、図１３Ｃに示したように、電子メールソフトを起動させて電子メールの作成画面を表示画面１３Ｇの全面に表示させた場合であっても、その表示画面１３Ｇの一部分に設けられる子画面１３Ｓを通じて、それまで視聴していたテレビ放送番組の映像の観視を続行することができるようにされる。

この場合、音声については、子画面に表示する映像と同期が取られた音声（テレビ放送番組の音声）を放音することにより、それまで視聴していた種々のコンテンツの視聴を続行することができるようにされる。なお、画像の表示は、制御部２０からの電子メールの作成画面を形成する映像信号を主映像処理部７に供給し、それまで視聴していた復調部３あるいは入力端子５からの映像信号を子画面処理部８に供給するようにすればよい。

同様に、文字認識によって、選択されたキャプチャー画像中に表示されている文字情報がＵＲＬであると認識した場合、制御部２０は、図１３Ｄに示すように、ブラウザを自動立ち上げし、文字認識することに得たＵＲＬで特定されるＷｅｂページにアクセスして、Ｗｅｂページとして提供された情報を取得することができるようにされる。

この場合においても、図１３Ｄの右下側に子画面１３Ｓを設け、ここに図１３Ａの段階では表示画面１３Ｇの全面に表示するようにされていた画像を表示するようにする。これにより、図１３Ｄに示したように、ブラウザを起動させてＷｅｂページを表示画面１３Ｇの全面に表示させた場合であっても、その表示画面１３Ｇの一部分に設けられる子画面１３Ｓを通じて、それまで視聴していた画像の観視を続行することができる。

なお、この第２の実施の形態のテレビ受像機においても、画面メモキー１０８が押下操作される毎に、キャプチャー実行音をテレビ受像機のスピーカから放音すると共に、最新にキャプチャーした画像の縮小画像が上端側に位置するようにされたクリップボード１３ＣＰが表示するようにされる。

そして、この第２の実施の形態のテレビ受像機の場合には、上述したように、キャプチャーした画像を即座に利用することができるので、キャプチャーした画像に含まれる通信の相手先を特定する情報を用いて素早く通信処理を開始させたい場合にも対応することができる。

次に、この第２の実施の形態のテレビ受像機における主に画面メモ機能の実行時の動作について、図１４、図１５のフローチャートを参照しながら説明する。図１４、図１５は、この第２の実施の形態のテレビ受像機に電源が投入された場合に、制御部２０において実行される処理を説明するためのフローチャートである。

電源が投入されると、この実施の形態のテレビ受像機の制御部２０は、ユーザーからの操作入力待ちとなる（ステップＳ１０１）。制御部２０は、リモコン信号受光部４３を通じて、あるいは、タッチパネル１４を通じて、ユーザーからの操作入力を受け付けたか否かを判断する。そして、ステップＳ１０１の判断処理において、受け付けていないと判断した場合には、ステップＳ１０１からの処理を繰り返し、受け付けたと判断したときには、その受け付けた操作入力が電源オフを指示するものであるか否かを判断する（ステップＳ１０２）。

ステップＳ１０２の判断処理において、受け付けた操作入力が、電源オフを指示するものであると判断したときには、制御部２０は、各部への電源の供給を停止するなどの終了処理を行って（ステップＳ１０３）、この図１４、図１５に示す処理を終了する。また、ステップＳ１０２の判断処理において、受け付けた操作入力が、電源オフを指示するものではないと判断したときには、制御部２０は、受け付けた操作入力は、画面メモ機能の実行を指示するものか否かを判断する（ステップＳ１０４）。

ステップＳ１０４の判断処理において、受け付けた操作入力が、画面メモ機能の実行を指示するものであると判断したときには、制御部２０は、キャプチャー処理部１１を制御して、表示中の映像を形成する映像信号をデジタルデータとして所定のメモリ、この例の場合には、テレビ受像機に装着された外部メモリ５０に記録する（ステップＳ１０５）。

このとき、制御部２０は、テレビ受像機の図示しない音声信号処理部を制御し、スピーカから映像のキャプチャーを行ったことを報知するためのアラーム音をスピーカから放音するようにすると共に（ステップＳ１０６）、クリップボード１３ＣＰに表示するキャプチャーした複数の画像の縮小画像を表示するためのデータをＯＳＤ処理部１０に供給して、図１３Ｂに示したようにキャプチャーして得た複数の画像の縮小画像が表示するようにされたクリップボード１３ＣＰを表示する処理を行う（ステップＳ１０７）。ステップＳ１０７の処理において、クリップボード１３ＣＰを表示した後、制御部２０は、クリップボード１３ＣＰに表示したキャプチャー画像の中の画像がユーザーにより選択されたか否かを判断する（ステップＳ１０８）。

ステップＳ１０８の判断処理において、キャプチャー画像の選択が行なわれたと判断したときには、制御部２０は、選択された画像の画像データを解析し、文字情報が表示されている表示エリアを特定して、その表示エリア内に表示されている画像の画像データからパターンマッチングを行うためのマッチングデータを形成すると共に、この形成したマッチングデータと、制御部２０のＲＯＭ２２に予め用意されている文字のマッチングデータとのパターンマッチングを行って、文字認識を行い、認識した文字を文字データにエンコードとして例えばＥＥＰＲＯＭ２４に記憶保持する（ステップＳ１０９）。このステップＳ１０９の処理の後、制御部２０は、図１５に示すステップＳ１１０の判断処理に進み、文字認識した表示情報が、電子メールアドレスか否かを判断する（ステップＳ１１０）。

ステップＳ１１０の判断処理において、文字認識した情報が、電子メールアドレスであると判断したときには、電子メール処理を実行し（ステップＳ１１１）、この後、図１４に示したステップＳ１０１からの処理を繰り返すようにする。ステップＳ１１０の判断処理において、文字認識した情報は、電子メールアドレスではないと判断したときには、制御部２０は、文字認識した情報は、ＵＲＬか否かを判断する（ステップＳ１１２）。

ステップＳ１１２の判断処理において、文字認識した情報が、ＵＲＬであると判断したときには、ブラウザ処理を実行し（ステップＳ１１３）、図１４に示したステップＳ１０１からの処理を繰り返すようにする。ステップＳ１１２の判断処理において、文字認識した情報がＵＲＬではないと判断したときには、制御部２０は、その他の処理を行って（ステップＳ１１４）、図１４に示したステップＳ１０１からの処理を繰り返すようにする。なお、図１５に示したステップＳ１１４のおいて行われるその他の処理は、図１２を用いて説明した第１の実施の形態のテレビ受像機において実行されるその他の処理と同様の処理が行われる。

また、図１４に示したステップＳ１０８の判断処理において、キャプチャー画像の選択はされていないと判断したときには、クリップボード１３ＣＰの表示開始から一定時間経過するか、あるいは、ユーザーからクリップボード１３ＣＰの消去指示を受け付けたかのクリップボードの消去事由が発生したか否かを判断する（ステップＳ１１５）。

ステップＳ１１５の判断処理において、クリップボードＣＰの消去事由が発生したと判断したときには、クリップボード１３ＣＰの表示を消去し（ステップＳ１１６）、ステップＳ１０１からの処理を繰り返すようにする。また、ステップＳ１１５の判断処理において、クリップボードＣＰの消去事由は発生していないと判断したときには、ステップＳ１０８からの処理を繰り返すようにする。

また、ステップＳ１０４の判断処理において、受け付けた操作入力が、画面メモ機能の実行を指示するものではないと判断したときには、制御部２０は、受け付けた操作入力に応じた他の処理、例えば、放送チャンネルの選局や、音量の調整、画質の調整、モード切り換えなどが行うようにされる（ステップＳ１１７）。このステップＳ１１７の処理の後、制御部２０は、ステップＳ１０１からの処理を繰り返すようにし、ユーザーからの操作入力の待ち状態になる。

このように、この第２の実施の形態のテレビ受像機においては、表示映像のキャプチャーを行った場合には、クリップボード１３ＣＰに表示したキャプチャーした画像の縮小画像を通じて、キャプチャー画像の選択を行い、選択したキャプチャー画像に含まれる文字情報の文字認識を行って、それを用いて迅速に通信処理を行うことができるようにされる。

［文字認識後の処理について］
次に、図１４、図１５に示した画面メモ機能時の処理において、文字認識を行った場合に、図１５に示したステップＳ１１１において行われる電子メール処理、ステップＳ１１３において行われるブラウザ処理のそれぞれについて説明する。

［電子メール処理について］
図１６は、図１５に示したステップＳ１１１において実行される電子メール処理を説明するためのフローチャートである。すなわち、文字認識した文字列が電子メールアドレスであると判別した場合に、制御部２０は、図１６に示す処理を実行して、まず電子メールソフトを起動し（ステップＳ１２１）、電子メールの作成画面を表示し、文字認識して取得した電子メールアドレスを相手先アドレスとして使用するように自動設定して（ステップＳ１２２）、電子メールの作成画面の表示前に表示画面の全面に表示するようにしていた映像の子画面１３Ｓへの表示を開始するようにする（ステップＳ１２３）。

そして、後述もするように、子画面１３Ｇの表示／非表示の指示入力を受け付けるようにする子画面表示／非表示処理を行って（ステップＳ１２４）、電子メールの作成入力を受け付けるようにする（ステップＳ１２５）。

そして、作成した電子メールの送信指示があるか否かを判断し（ステップＳ１２６）、送信指示がされたと判断したときには、制御部２０は、インターネットへの接続が確立されているか否かを判断する（ステップＳ１２７）。ステップＳ１２７の判断処理において、インターネットへの接続が確立されていないと判断した場合には、制御部２０は、例えば、所定のＩＳＰを通じてインターネットに接続するようにする処理を行う（ステップＳ１２８）。

ステップＳ１２８の判断処理において、既にインターネットへの接続が確立していると判断した場合、および、ステップＳ１２８の処理によりインターネットへの接続を確立するようにした場合には、制御部２０は、作成した電子メールを文字認識した電子メールアドレスによって指定される相手先のメールボックス機能を有するサーバーに送信する（ステップＳ１２９）。この後ステップＳ１２４からの処理に戻り、電子メールの作成を続行することができるようにされる。

また、ステップＳ１２６の判断処理において、送信指示はないと判断したときには、終了指示がされたか否かを判断する（ステップＳ１３０）。ステップＳ１３０の判断処理において、終了指示はされていないと判断したときには、制御部２０は、ステップＳ１２４からの処理を繰り返す。ステップＳ１３０の判断処理において、終了指示がされたと判断したときには、制御部２０は電子メールソフトを終了するなどの終了処理を行って（ステップＳ１３１）、この図１６に示す処理を終了する。

このように、文字認識した電子メールアドレスを電子メールの送信先のアドレスとして自動的に用いて電子メールを作成し、これを送信することができるようにしている。したがって、ユーザーは電子メールソフトを立ち上げて、目的とする相手先の電子メールアドレスを手入力したりするなどのことをしなくても、目的とする相手先に対して、電子メールを作成して送信することができるようにされる。

しかも、電子メールの作成画面を表示するまで表示画面１３Ｇの全面に表示するようにされていた、例えば、テレビ放送番組や外部機器からのコンテンツなどの映像を子画面１３Ｓを通じて見ることができるようにされる。すなわち、画面メモ機能を用いて、画像をキャプチャーし、キャプチャーした画像を即座に利用するようにした場合であっても、視聴するようにしていた映像の視聴を子画面１３Ｓを通じて続行することができるようにされる。

［ブラウザ処理について］
図１７は、図１５に示したステップＳ１１３において実行されるブラウザ処理を説明するためのフローチャートである。すなわち、文字認識した文字列がＵＲＬであると判別した場合、制御部２０は、ブラウザを起動して（ステップＳ１４１）、ブラウザによる表示情報を表示画面１３Ｇの全面に表示するようにし、このブラウザによる表示情報を表示画面１３Ｇの全面に表示する前に表示画面１１３Ｇの全面に表示するようにしていた映像の子画面１３Ｓへの表示を開始するようにする（ステップＳ１４２）。

そして、インターネットへの接続を確立済みか否かを判断する（ステップＳ１４３）。ステップＳ１４３の判断処理において、インターネットへの接続が確立されていないと判断したときには、制御部２０は、例えば、所定のＩＳＰを通じてインターネットに接続するようにする処理を行う（ステップＳ１４４）。

ステップＳ１４３の判断処理において、インターネットへの接続が確立済みであると判断した場合、および、ステップＳ１４４の処理によりインターネットへの接続を確立するようにした場合には、文字認識して取得したＵＲＬにより特定されるＷｅｂページに自動的にアクセスして、そのＷｅｂページを表示画面１３Ｇ表示するようにする（ステップＳ１４５）。

そして、後述もするように、子画面１３Ｇの表示／非表示の指示入力を受け付けるようにする子画面表示／非表示処理を行って（ステップＳ１４６）、Ｗｅｂページの利用をできるようにする（ステップＳ１４７）。ここで、Ｗｅｂページの利用は、スクロールして必要な情報を得たり、印刷したりするなど、目的とするＷｅｂページを種々利用することである。

そして、終了が指示されたか否かを判断し（ステップＳ１４８）、終了指示がされていないと判断したときには、ステップＳ１４６からの処理を繰り返す。また、ステップＳ１４８の判断処理において、終了指示がされたと判断したときには、制御部２０は、ブラウザを終了するなどの終了処理を行って（ステップＳ１４９）、この図１１に示す処理を終了する。

このように、文字認識したＵＲＬを用いて、目的とするＷｅｂページにアクセスすることができるようにされる。したがって、ユーザーはブラウザを立ち上げて、目的とするＷｅｂページのＵＲＬを手入力したりすることなく、目的とするＷｅｂページに自動的にアクセスすることができるようにされる。

また、ブラウザの画面を表示するまで表示画面１３Ｇの全面に表示するようにされていた、例えば、テレビ放送番組や外部機器からのコンテンツなどの映像を子画面１３Ｓを通じて見ることができるようにされる。すなわち、画面メモ機能を用いて、映像をキャプチャーし、キャプチャーした画像を即座に利用するようにした場合であっても、視聴するようにしていた映像の視聴を子画面１３Ｓを通じて続行することができるようにされる。

［子画面表示／非表示処理について］
図１８は、図１６のステップＳ１２４、図１７のステップＳ１４６において行われる子画面表示／非表示処理を説明するためのフローチャートである。図１６に示した電子メール処理、および、図１７に示したブラウザ処理においては、上述もしたように、電子メールの作成画面やブラウザの画面が表示される直前まで表示するようにされていたテレビ放送番組などの映像が、子画面１３Ｓに表示するようにされる。

しかし、子画面１３Ｓの表示は、場合によっては邪魔になる場合がある。そこで、この第２の実施の形態のテレビ受像機においては、子画面１３Ｓの表示／非表示をユーザーが切り換えることができるようにしている。

すなわち、図１６のステップＳ１２４、図１７のステップＳ１４６において行われる子画面表示／非表示処理においては、制御部２０は、まず、子画面１３Ｓの表示が行われているか否かを判断する（ステップＳ１５１）。この判断処理は、セレクタ４や子画面処理部８の制御の状態から判別することが可能である。

ステップＳ１５１の判断処理において、子画面１３Ｓが表示されていると判断したときには、制御部２０は、リモコン１００やタッチパネル１４を通じて、子画面１３Ｓの消去を指示する所定の操作を受け付けたか否かを判断する（ステップＳ１５２）。

ステップＳ１５２の判断処理において、子画面１３Ｓの消去を指示する所定の操作を受け付けたと判断したときには、制御部２０は、例えば、セレクタ４と子画面処理部８とを制御して、子画面１３Ｓの表示を行わないようにし（ステップＳ１５３）、この図１８に示す処理を終了する。また、ステップＳ１５２の判断処理において、子画面１３Ｓの消去を指示する所定の操作を受け付けていない判断したときには、制御部２０は、子画面１３Ｓの表示を続行したまま、この図１８に示す処理を終了する。

また、ステップＳ１５１の判断処理において、子画面１３Ｓが表示されていないと判断したときには、制御部２０は、リモコン１００やタッチパネル１４を通じて、子画面１３Ｓの表示を指示する所定の操作を受け付けたか否かを判断する（ステップＳ１５４）。

ステップＳ１５４の判断処理において、子画面１３Ｓを表示を指示する所定の操作を受け付けたと判断したときには、制御部２０は、例えば、セレクタ４と子画面処理部８とを制御して、子画面１３Ｓに視聴していた復調部４からの映像信号、または、入力端子５からの映像信号を子画面処理部８に供給して、子画面への映像の表示を行うようにし（ステップＳ１５５）、この図１８に示す処理を終了する。また、ステップＳ１５４の判断処理において、子画面１３Ｓを表示することを指示する所定の操作を受け付けていない判断したときには、制御部２０は、子画面１３Ｓの表示を消去したまま、この図１８に示す処理を終了する。

このように、この第２の実施の形態のテレビ受像機の場合には、キャプチャーした画像を即座に利用できるようにし、キャプチャーした画像に電子メールアドレス、ＵＲＬ、電話番号等の通信の相手先を特定する文字情報（表示情報）が含まれている場合には、それを文字認識し、その文字認識した情報に基づいて、それらをユーザーがいちいち入力することなく、電子メールを作成して送信したり、ＷｅｂページにアクセスしてＷｅｂページの情報を表示したり、また、電話をかけて通話を行うようにしたりすることができるようにされる。

また、電子メールの作成やＷｅｂページの閲覧を行うようにした場合であっても、それまで視聴していたテレビ放送番組や外部機器からのコンテンツの映像を子画面１３Ｓを通じて視聴することができるので、重要なシーンを見逃すなどの不都合が生じることもない。また、子画面１３Ｓの表示／非表示は、ユーザー自身が切り換えることができるので、電子メールの作成やＷｅｂページの閲覧時に子画面１３Ｓが邪魔な場合には、子画面１３Ｓの表示を行わないようにしたり、また、邪魔で無くなった場合、あるいは、必要に応じて、子画面１３Ｓの表示を行うようにしたりすることができる。

なお、上述した第２の実施の形態の場合には、クリップボード１３ＣＰから目的とする縮小画像を選択するようにした場合に、その選択された画像に含まれる文字情報の文字認識処理を行うものとして説明したが、これに限るものではない。例えば、クリップボード１３ＣＰから目的とする縮小画像を選択するようにした場合に、その選択された縮小画像を表示画面１３Ｇの全面に拡大するようにして表示した後に、第１の実施の形態の場合と同様に、文字認識の実行指示が与えられた場合に、文字認識を行うようにしてもよい。

また、上述した第２の実施の形態からも明らかなように、この第２の実施の形態において、受付手段は、リモコン１００、リモコン信号受光部４３が実現し、取り込み手段は、キャプチャー処理部１１、制御部２０が実現し、表示制御手段は、制御部２０、ＯＳＤ処理部１０、合成部９が協働して実現ししている。

また、選択入力受付手段は、リモコン１００、リモコン信号受光部４３、あるいは、タッチパネル１４、座標変換部１５が実現し、また、選択入力受付手段は、リモコン１００、リモコン信号受光部４３、あるいは、タッチパネル１４、座標変換部１５が実現し、文字認識手段は、主に制御部２０が実現し、通信関連処理手段は、制御部２０、通信部３０が実現するようにしている。また、副画像表示処理手段は、制御部２０、セレクタ４、子画面処理部８が実現するようにしている。

なお、上述した第１、第２の実施の形態においては、１画面分の表示画像をキャプチャーするようにしたが、例えば、Ｗｅｂページなどを表示している場合などにおいて、１画面分の画像中に複数の画像が存在し、そのそれぞれを識別して選択することができる場合には、目的とする画像の選択入力を受け付けるようにし、その選択された画像のみをキャプチャーしてクリップボードに貼り付けるようにすることももちろん可能である。

また、上述した第１、第２の実施の形態においては、地上波のアナログテレビ放送信号を受信、選局するテレビ受像機に、この発明を適用した場合を例にして説明したが、これに限るものではない。衛星放送の受信機能を有するテレビ受像機や、データ放送の受信機能を有するテレビ受像機、ケーブルテレビ放送の受信機能を有するテレビ受像機にもこの発明を適用することができる。また、これらの受信機能のうち、複数の受信機能を有するテレビ受像機に、この発明を適用することができる。

また、上述の第２の実施の形態においては、いわゆるＰｉｎＰ機能を搭載し、親画面中に子画面を設けることができる場合を説明した。この場合、子画面の位置は、上述した例の場合に限るものではなく、適宜の位置に設けることができるし、ユーザーが子画面の位置を変更するようにすることも可能である。

また、親画面と子画面との表示エリアが重ならないようにするいわゆるＰｏｕｔＰ（Picture out Picture）対応で２画面表示を行うようにしたり、表示部１３の表示画面を左右、あるいは、上下に２分割し、そのそれぞれに異なる画像を表示するようにするなど、種々の対応の２画面表示を用いることも可能である。

また、上述の第１、第２の実施の形態においては、この発明をテレビ受像機に適用した場合を例にして説明したが、これに限るものではない。例えば、ケーブルテレビ放送の受信装置であるＳＴＢ（Ｓｅｔ−Ｔｏｐ Ｂｏｘ）と呼ばれる受信装置や、ＩＲＤ（Ｉｎｔｅｇｒａｔｅｄ Ｒｅｃｅｉｖｅｒ／Ｄｅｃｏｄｅｒ）と呼ばれる受信装置にもこの発明を適用することができる。

この場合には、受信装置に通信機能を実現するための電話回路や、２画面機能を実現するための子画面処理部や映像合成部、さらに、キャプチャー処理部を搭載し、文字認識処理を実行するプログラムなどの必要な各種のプログラムをも搭載するようにすればよい。そして、受信装置において、映像のキャプチャリングや、２画面処理を行い、処理された映像信号をモニタ受像機に供給するようにすればよい。

そして、モニタ受像機の表示画面に表示される映像を見ながら受信装置を制御することにより、前述した実施の形態のテレビ受像機の場合と同様に、通信の相手先を特定する文字情報を表示情報として含む映像を静止画像として取り込み、その取り込んだ映像に含まれる文字情報を文字認識して検出し、その検出した情報を用いて、通信を行うようにすることができる。

同様にして、ＶＴＲやＤＶＤ装置などの記録媒体に記録されている映像信号を再生する映像信号再生装置にもこの発明を適用することができる。この場合には、再生された映像信号により表示される映像のうち、通信の相手先を示す情報が表示されたる１画面分の映像を形成する映像信号を取り込み、取り込んだ映像信号により表示される通信の相手先を示す情報を文字認識して抽出し、通信処理に利用することができる。

また、文字認識して検出した通信の相手先を特定する情報を、例えば、ＥＥＰＲＯＭなどに蓄積しておくことにより、その蓄積情報を、いわゆるアドレス帳として用いるようにすることができる。また、文字認識して検出したＵＲＬをブラウザの機能であるブックマークやお気に入りの機能に用いられるＵＲＬとして、登録してもちいるようにすることもできる。また、通信の相手先を示す情報は、電話番号、電子メールアドレス、ＵＲＬに限ることなく、郵便番号、住所、あて先名などの郵便などによる通信の相手先を特定する情報であってもよい。

この発明による映像信号処理装置、映像信号処理方法の一実施の形態が適用されたテレビ受像機を説明するための図である。 図１に示したテレビ受像機のリモコンの外観を説明するための図である。 図１に示した第１の実施の形態のテレビ受像機における画面メモ機能を説明するための図である。 図１に示した第１の実施の形態のテレビ受像機における画面メモ機能実行時の処理を説明するためのフローチャートである。 キャプチャーした映像のデジタルデータを画像ファイルとして記憶保持するキャプチャーメモリについて説明するための図である。 図１に示した第１の実施の形態のテレビ受像機におけるキャプチャーした画像の利用の仕方について説明するための図である。 図１に示した第１の実施の形態のテレビ受像機において、キャプチャーした画像であって、拡大表示するようにした画像中に含まれる通信の相手先を示す文字情報を認識して、これを利用する場合の例を説明するための図である。 第１の実施の形態のテレビ受像機の制御部２０において行われるアルバム機能実行時の処理について説明するためのフローチャートである。 図８に示した処理のステップＳ１５において行われる画像拡大処理を説明するためのフローチャートである。 図９に示したステップＳ２６において実行される電子メール処理を説明するためのフローチャートである。 図９に示したステップＳ２８において実行されるブラウザ処理を説明するためのフローチャートである。 図９に示したステップＳ２９において実行されるその他の処理を説明するためのフローチャートである。 第２の実施の形態のテレビ受像機における画面メモ機能を説明するための図である。 第２の実施の形態のテレビ受像機に電源が投入された場合に、制御部２０において実行される処理を説明するためのフローチャートである。 図１４に続くフローチャートである。 図１５に示したステップＳ１１１において実行される電子メール処理を説明するためのフローチャートである。 図１５に示したステップＳ１１３において実行されるブラウザ処理を説明するためのフローチャートである。 図１６のステップＳ１２４、図１７のステップＳ１４６において行われる子画面表示／非表示処理を説明するためのフローチャートである。

符号の説明

１…受信アンテナ、２…選局部（チューナ部）、３…復調部、４…セレクタ、５…外部入力端子、６…Ｄ／Ａ変換部、７…主映像処理部、８…子画面処理部、９…映像合成部、１０…ＯＳＤ処理部、１１…キャプチャー処理部、１２…ドライブ回路、１３…表示部、１４…タッチパネル、１５…座標変換部、２０…制御部、２１…ＣＰＵ、２２…ＲＯＭ、２３…ＲＡＭ、２４…ＥＥＰＲＯＭ、２５…ＣＰＵバス、３０…電話回路、３１…ハンドセット（送受話器）、４１…外部メモリＩ／Ｆ、４２…リモコンＩ／Ｆ、４３…リモコン信号受光部、５０…外部メモリ、１００…リモコン

Claims (2)

1. 表示画面に表示されている画像の取り込み指示入力を受け付ける受付手段と、
   前記受付手段を通じて前記取り込み指示入力を受け付けた場合に、前記表示画面に表示されている１フレーム分の前記画像を形成する画像信号をデジタルデータとしてメモリに取り込むようにする取込手段と、
   前記メモリに前記デジタルデータを記録した場合に、今回記録した前記デジタルデータによる画像の縮小画像と、前記メモリに過去に記録したデジタルデータによる画像の１つ以上の縮小画像とを前記表示画面の一部分に所定時間の間表示するようにする表示制御手段と、
   前記メモリに取り込まれた複数の画像のそれぞれを縮小した縮小画像の一覧表示を前記表示画面に行うことの指示入力を受け付ける一覧表示指示受付手段と、
   前記一覧表示指示受付手段を通じて、前記一覧表示を行うことの前記指示入力を受け付けた場合に、前記メモリに記憶されている複数の画像のそれぞれを縮小した縮小画像の一覧表示を行うようにする一覧表示制御手段と、
   前記表示画面に一覧表示された縮小画像から選択した画像を、あるいは、前記メモリに取り込まれた複数の画像を、前記表示画面にスライドショー表示することの指示入力を受け付けるスライドショー表示指示受付手段と、
   前記スライドショー表示指示受付手段を通じて、前記スライドショー表示を行うことの指示入力を受け付けた場合に、スライドショー表示を行うようにするスライドショー表示制御手段と、
   前記一覧表示制御手段により前記表示画面に一覧表示された複数の縮小画像の中から、目的とする縮小画像の選択入力を受け付ける選択入力受付手段と、
   前記選択入力受付手段を通じて選択された縮小画像を前記表示画面に拡大するようにして表示するようにする画像表示制御手段と、
   前記画像表示制御手段により前記表示画面に拡大するようにして表示するようにされた画像に対する処理の選択指示を受け付ける選択指示受付手段と、
   前記選択指示受付手段を通じて受け付けた前記選択指示が、画像に含まれる文字情報の認識処理以外の処理の実行を指示するものであるときに、当該指示された処理を実行するように制御する処理実行制御手段と、
   前記選択指示受付手段を通じて受け付けた前記選択指示が、画像に含まれる文字情報の認識処理の実行を指示するものであるときに、前記表示画面に拡大するようにして表示するようにされた画像に含まれる文字情報の文字認識を行う文字認識手段と、
   前記文字認識手段により文字認識された文字情報が通信の相手先を示す情報である場合に、当該文字情報に応じた通信関連処理を実行するようにする通信関連処理手段と
   を備える画像処理装置。
2. 表示画面に表示されている画像の取り込み指示入力を、受付手段が受け付ける受付ステップと、
   前記受付ステップにおいて前記取り込み指示入力を受け付けた場合に、前記表示画面に表示されている１フレーム分の前記画像を形成する画像信号を、取込手段がデジタルデータとしてメモリに取り込むようにする取込ステップと、
   前記メモリに前記デジタルデータを記録した場合に、今回記録した前記デジタルデータによる画像の縮小画像と、前記メモリに過去に記録したデジタルデータによる画像の１つ以上の縮小画像とを、表示制御手段が前記表示画面の一部分に所定時間の間表示するようにする表示処理ステップと、
   前記メモリに取り込まれた複数の画像のそれぞれを縮小した縮小画像の一覧表示を前記表示画面に行うことの指示入力を、一覧表示指示受付手段が受け付ける一覧表示指示受付ステップと、
   前記一覧表示指示受付ステップにおいて前記一覧表示を行うことの前記指示入力を受け付けた場合に、前記メモリに記憶されている複数の画像のそれぞれを縮小した縮小画像の一覧表示を、一覧表示制御手段が行うようにする一覧表示制御ステップと、
   前記表示画面に一覧表示された縮小画像から選択した画像を、あるいは、前記メモリに取り込まれた複数の画像を、前記表示画面にスライドショー表示することの指示入力を、スライドショー表示指示受付手段が受け付けるスライドショー表示指示受付ステップと、
   前記スライドショー表示指示受付ステップにおいて前記スライドショー表示を行うことの指示入力を受け付けた場合に、スライドショー表示制御手段がスライドショー表示を行うようにするスライドショー表示制御ステップと、
   前記一覧表示制御ステップにおいて前記表示画面に一覧表示された複数の縮小画像の中から、目的とする縮小画像の選択入力を、選択入力受付手段を通じて受け付ける選択入力受付ステップと、
   前記選択入力受付ステップにおいて選択された縮小画像を前記表示画面に、画像表示制御手段が拡大するようにして表示するようにする画像表示制御ステップと、
   前記画像表示制御ステップにおいて前記表示画面に拡大するようにして表示するようにした画像に対する処理の選択指示を選択指示受付手段が受け付ける選択指示受付ステップと、
   前記選択指示受付ステップにおいて受け付けた前記選択指示が、画像に含まれる文字情報の認識処理以外の処理の実行を指示するものであるときに、当該指示された処理を処理実行制御手段が実行するように制御する処理実行制御ステップと、
   前記選択指示受付手段を通じて受け付けた前記選択指示が、画像に含まれる文字情報の認識処理の実行を指示するものであるときに、前記表示画面に拡大するようにして表示するようにした画像に含まれる文字情報の文字認識を文字認識手段が行う文字認識ステップと、
   前記文字認識ステップにおいて文字認識した文字情報が通信の相手先を示す情報である場合に、当該文字情報に応じた通信関連処理を、通信関連処理手段が実行するようにする通信関連処理ステップと
   を有する画像処理方法。

Images