JP2008066925A - Information providing device, display controller, display device, and information providing method - Google Patents

Information providing device, display controller, display device, and information providing method Download PDF

Info

Publication number
JP2008066925A
JP2008066925A JP2006241126A JP2006241126A JP2008066925A JP 2008066925 A JP2008066925 A JP 2008066925A JP 2006241126 A JP2006241126 A JP 2006241126A JP 2006241126 A JP2006241126 A JP 2006241126A JP 2008066925 A JP2008066925 A JP 2008066925A
Authority
JP
Japan
Prior art keywords
information
person
image
display
unit
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Withdrawn
Application number
JP2006241126A
Other languages
Japanese (ja)
Inventor
Tamotsu Sato
有 佐藤
Mitsuhiko Igarashi
光彦 五十嵐
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Seiko Epson Corp
Original Assignee
Seiko Epson Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Seiko Epson Corp filed Critical Seiko Epson Corp
Priority to JP2006241126A priority Critical patent/JP2008066925A/en
Publication of JP2008066925A publication Critical patent/JP2008066925A/en
Withdrawn legal-status Critical Current

Links

Images

Abstract

<P>PROBLEM TO BE SOLVED: To provide an information providing device capable of providing person's information about a desired person in a target image. <P>SOLUTION: The information providing device comprises: a storage section 21 for storing a person's information table Dt (person identifying information and person's information) about a plurality of persons; an image analyzing section 23 (identifying processing section) for identifying the person in the image data D1 based on a processing result of the image analyzing processing and the person's information table Dt (person identifying information) while performing image analysis processing to image data D1 (subject image); and a control section 24 (first control section) for extracting the person's information about the person identified by the image analyzing section 23 from the person's information table Dt stored in the storage section 21 (reading from the storage section 21), and for outputting the person's information as search result data D2. <P>COPYRIGHT: (C)2008,JPO&INPIT

Description

本発明は、画像内の人物に関する人物情報を提供する情報提供装置、表示制御装置、表示装置および情報提供方法に関するものである。   The present invention relates to an information providing device, a display control device, a display device, and an information providing method for providing person information related to a person in an image.

今日、ＥＰＧ（Electric Program Guide）情報に基づく電子番組表を所定のスイッチ操作によって表示部に表示させる機能を有するテレビが普及している。この種のテレビとして、出願人は、ＥＰＧ情報処理部を備えたデジタルテレビジョン装置（以下、「テレビ」ともいう）を特開２００６−１９７０８５号公報において開示している。このテレビでは、リモコンのＥＰＧボタンが操作されたときに、ＥＰＧ情報処理部が、チューナから出力されているトランスポート・ストリームから電子番組表情報を抽出する。次いで、ＥＰＧ情報処理部は、抽出結果に基づいて電子番組表の映像信号を生成して映像出力部に出力する。これにより、電子番組表が表示装置に表示される。
特開２００６−１９７０８５号公報（第４−６頁、第１−６図） Nowadays, televisions having a function of displaying an electronic program guide based on EPG (Electric Program Guide) information on a display unit by a predetermined switch operation are widely used. As this type of television, the applicant discloses a digital television device (hereinafter also referred to as “television”) including an EPG information processing unit in Japanese Patent Application Laid-Open No. 2006-197085. In this television, when the EPG button of the remote controller is operated, the EPG information processing unit extracts the electronic program guide information from the transport stream output from the tuner. Next, the EPG information processing unit generates a video signal of the electronic program guide based on the extraction result and outputs the video signal to the video output unit. Thereby, the electronic program guide is displayed on the display device.
Japanese Unexamined Patent Publication No. 2006-197085 (page 4-6, FIG. 1-6)

ところが、出願人が開示している従来のテレビには、以下の改善すべき課題がある。すなわち、この種のテレビでは、ＥＰＧ情報として提供された番組情報に基づき、電子番組表においてカーソル表示によって選択されている番組の司会者や出演者等の人物名等を欄外の情報表示領域に表示させる構成が採用されている。しかしながら、ＥＰＧ情報は、主として番組の放送時刻やタイトル等の情報を提供するための情報で構成されている。したがって、例えばクイズ番組の司会者や主たる出演者の人物名については、ＥＰＧ情報に基づいて特定できることが多いものの、脇役的な出演者やアシスタント等についての人物名がＥＰＧ情報として提供されることは殆どないため、視聴中の番組において、これらの人物の人物名を特定するのが困難となっている。また、すべての番組出演者について、その人物名がＥＰＧ情報として提供されたとしても、提供された複数の人物名と、画面中に映し出されている各人物との対応関係を特定するのが困難であるため、画面中の所望の人物に関する人物名等を特定することは依然として困難となっている。   However, the conventional television set disclosed by the applicant has the following problems to be improved. That is, in this type of television, based on the program information provided as EPG information, the names of persons such as moderators and performers selected by cursor display in the electronic program guide are displayed in the information display area outside the margin. The structure to let it be adopted is adopted. However, the EPG information is mainly composed of information for providing information such as the broadcast time and title of the program. Therefore, for example, although the name of the host or the main performer of the quiz program can often be specified based on the EPG information, the name of the supporting performer or assistant is provided as EPG information. Since there are few, it is difficult to specify the names of these persons in the program being viewed. Moreover, even if the names of all the program performers are provided as EPG information, it is difficult to specify the correspondence between the provided names and each person displayed on the screen. Therefore, it is still difficult to specify a person name or the like related to a desired person on the screen.

本発明は、かかる改善すべき課題に鑑みてなされたものであり、対象画像中の所望の人物に関する人物情報を提供し得る情報提供装置、表示制御装置、表示装置および情報提供方法を提供することを主目的とする。   The present invention has been made in view of the problems to be improved, and provides an information providing device, a display control device, a display device, and an information providing method capable of providing personal information regarding a desired person in a target image. The main purpose.

上記目的を達成すべく本発明に係る情報提供装置は、複数の人物についての人物特定情報および当該各人物に関する人物情報を相互に関連付けて記憶する記憶部と、対象画像に対する画像解析処理を実行すると共に当該画像解析処理の処理結果および前記人物特定情報に基づいて当該対象画像内の人物を特定する特定処理部と、当該特定処理部によって特定された人物についての前記人物情報を前記記憶部から読み出して出力する第１の制御部とを備えている。   In order to achieve the above object, the information providing apparatus according to the present invention executes a storage unit that stores person specifying information about a plurality of persons and person information about each person in association with each other, and an image analysis process on the target image. A specific processing unit that specifies a person in the target image based on the processing result of the image analysis process and the person specifying information, and the person information about the person specified by the specifying processing unit is read from the storage unit. And a first control unit that outputs the output.

また、本発明に係る情報提供方法は、対象画像に対する画像解析処理を実行すると共に当該画像解析処理の処理結果と複数の人物についての人物特定情報とに基づいて当該対象画像内の人物を特定し、当該特定した人物に関する人物情報を出力する。   The information providing method according to the present invention executes an image analysis process on the target image and specifies a person in the target image based on the processing result of the image analysis process and person specifying information about a plurality of persons. The person information related to the specified person is output.

この情報提供装置および情報提供方法によれば、対象画像に対する画像解析処理を実行すると共に画像解析処理の処理結果と複数の人物についての人物特定情報とに基づいて対象画像内の人物を特定し、特定した人物に関する人物情報を出力することにより、ＥＰＧ情報に基づく電子番組表を表示させるのとは異なり、人物特定情報として各種の人物についての情報を用意しておくことで、司会者や主役についてのみならず、脇役的な出演者やアシスタント等についての人物名等（人物情報）を提供することができる。   According to the information providing apparatus and the information providing method, the person in the target image is specified based on the processing result of the image analysis process and the person specifying information about the plurality of persons while performing the image analysis process on the target image. Unlike displaying an electronic program guide based on EPG information by outputting person information about the specified person, by preparing information about various persons as person specifying information, In addition, it is possible to provide personal names and the like (person information) about performers and assistants who are supporting characters.

また、本発明に係る情報提供装置は、前記記憶部が、前記各人物の特徴部分をそれぞれ数値化した情報を前記人物特定情報として記憶し、前記特定処理部が、前記対象画像に対する画像解析処理を実行して当該対象画像内の人物の前記特徴部分を数値化して特徴情報を生成し、当該特徴情報と前記人物特定情報とに基づいて当該対象画像内の人物を特定する。   Further, in the information providing apparatus according to the present invention, the storage unit stores information obtained by digitizing the characteristic portions of each person as the person specifying information, and the specifying processing unit performs image analysis processing on the target image. Is executed to digitize the characteristic portion of the person in the target image to generate characteristic information, and the person in the target image is specified based on the characteristic information and the person specifying information.

この情報提供装置によれば、対象画像に対する画像解析処理を実行して対象画像内の人物の特徴部分を数値化して特徴情報を生成し、特徴情報と人物特定情報とに基づいて対象画像内の人物を特定することにより、例えば、各人物についての静止画像と、対象画像とを個別的に比較処理する構成とは異なり、該当人物についての人物特定情報が存在するか否かを高精度でしかも容易に特定することができる。   According to the information providing apparatus, the image analysis process is performed on the target image, the feature portion of the person in the target image is digitized to generate the feature information, and the feature information in the target image is generated based on the feature information and the person specifying information. By specifying a person, for example, unlike a configuration in which a still image for each person and a target image are individually compared, it is possible to determine whether or not person specifying information about the person exists with high accuracy. Can be easily identified.

さらに、本発明に係る情報提供装置は、外部記憶装置に記憶されている前記人物特定情報および前記人物情報を取得する情報取得部を備え、前記第１の制御部が、前記情報取得部を制御して前記人物特定情報および前記人物情報を取得させて前記記憶部に記憶させる情報取得処理を実行する。   The information providing apparatus according to the present invention further includes an information acquisition unit that acquires the person specifying information and the person information stored in an external storage device, and the first control unit controls the information acquisition unit. Then, an information acquisition process for acquiring the person specifying information and the person information and storing it in the storage unit is executed.

この情報提供装置によれば、外部記憶装置に記憶されている人物特定情報および人物情報を取得して記憶部に記憶させることにより、新たな人物についての人物情報および人物特定情報の追加や、既存の人物情報および人物特定情報の更新が行われた状態の新たな情報に基づいて対象画像内の人物を高精度で特定して人物情報を提供することができる。   According to this information providing apparatus, the person specifying information and the person information stored in the external storage device are acquired and stored in the storage unit, thereby adding the person information and the person specifying information about the new person, It is possible to provide the person information by specifying the person in the target image with high accuracy based on the new information in a state where the person information and the person specifying information are updated.

また、本発明に係る表示制御装置は、上記のいずれかの情報提供装置と、画像データに基づく画像を表示部に表示させる第２の制御部とを備え、前記第２の制御部が、情報提供指示信号が出力されたときに、前記表示部に表示させている画像に基づいて前記対象画像を生成して前記情報提供装置に出力すると共に、当該情報提供装置から前記人物情報が出力されたときに当該人物情報に基づく情報提供画像を前記表示部に表示させる。   The display control device according to the present invention includes any one of the information providing devices described above and a second control unit that causes the display unit to display an image based on the image data. When the providing instruction signal is output, the target image is generated based on the image displayed on the display unit and output to the information providing apparatus, and the person information is output from the information providing apparatus. Sometimes an information providing image based on the person information is displayed on the display unit.

また、本発明に係る表示装置は、上記のいずれかの表示制御装置と、前記表示部とを備えている。   A display device according to the present invention includes any one of the display control devices described above and the display unit.

この表示制御装置および表示装置によれば、情報提供指示信号が出力されたときに、第２の制御部が表示部に表示させている画像に基づいて対象画像を生成して情報提供装置に出力すると共に、情報提供装置から人物情報が出力されたときに人物情報に基づく情報提供画像を表示部に表示させることにより、例えばテレビ番組の視聴中において、人物名等の人物情報を知りたい出演者が表示された時点で情報提供スイッチを操作することで、その人物が脇役的な出演者等であったとしても、その人物情報を表示部に表示させることができる。   According to the display control device and the display device, when the information providing instruction signal is output, the second control unit generates a target image based on the image displayed on the display unit and outputs the target image to the information providing device. At the same time, by displaying an information providing image based on the person information on the display unit when the person information is output from the information providing device, for example, a performer who wants to know the person information such as the person name while viewing the television program. By operating the information providing switch when is displayed, even if the person is a supporting character or the like, the person information can be displayed on the display unit.

また、本発明に係る表示制御装置は、前記第２の制御部が、前記情報提供指示信号が出力されたときに、前記画像データに基づく前記画像を表示する画像表示画面と、前記情報提供指示信号が出力された時点において前記表示部に表示させていた前記画像から前記情報提供装置に出力する前記対象画像の範囲を選択させるための範囲選択画面とを前記表示部に２画面で表示させる。   In the display control device according to the present invention, the second control unit displays the image based on the image data when the information provision instruction signal is output, and the information provision instruction. A range selection screen for selecting a range of the target image to be output to the information providing apparatus from the image displayed on the display unit at the time when the signal is output is displayed on the display unit on two screens.

この表示制御装置によれば、情報提供指示信号が出力されたときに、第２の制御部が画像表示画面と範囲選択画面とを表示部に２画面で表示させることにより、人物情報が表示されている状態において、例えば画像表示画面としての番組視聴画面に表示されたテレビ番組の視聴を継続することができる。   According to this display control apparatus, when the information provision instruction signal is output, the second control unit displays the image display screen and the range selection screen on the display unit on two screens, thereby displaying the personal information. In this state, for example, it is possible to continue watching the television program displayed on the program viewing screen as the image display screen.

さらに、本発明に係る表示制御装置は、前記第２の制御部が、前記情報提供装置から前記人物情報が出力されたときに、前記画像データに基づく前記画像を表示する画像表示画面と、前記人物情報に基づく前記情報提供画像を表示する情報提供画面とを前記表示部に２画面で表示させる。   Furthermore, in the display control device according to the present invention, the second control unit displays the image based on the image data when the person information is output from the information providing device; An information providing screen for displaying the information providing image based on the person information is displayed on the display unit in two screens.

この表示制御装置によれば、情報提供装置から人物情報が出力されたときに、第２の制御部が画像表示画面と情報提供画面とを表示部に２画面で表示させることにより、人物情報が表示されている状態において、例えば画像表示画面としての番組視聴画面に表示されたテレビ番組の視聴を継続することができる。   According to this display control device, when personal information is output from the information providing device, the second control unit causes the display unit to display the image display screen and the information providing screen on two screens, whereby the personal information is obtained. In the displayed state, for example, the television program displayed on the program viewing screen as the image display screen can be continuously viewed.

以下、本発明に係る情報提供装置、表示制御装置、表示装置および情報提供方法の最良の形態について、添付図面を参照して説明する。図１に示すテレビ１は、本発明に係る情報提供装置および表示制御装置を備えた表示装置の一例であって、本体部１ａおよびリモコン２を備えて構成されている。この場合、リモコン２は、テレビ１専用の遠隔制御装置であって、チャンネルアップスイッチ、チャンネルダウンスイッチ、ボリュームアップスイッチ、ボリュームダウンスイッチ、カーソルスイッチ、決定スイッチ、戻るスイッチ（キャンセルスイッチ）、メニュースイッチおよび情報提供スイッチなどの各種操作スイッチ（図示せず）が配列され、操作されたスイッチを特定可能な赤外線信号Ｓ４を出力する。   DESCRIPTION OF THE PREFERRED EMBODIMENTS The best mode of an information providing apparatus, a display control apparatus, a display apparatus, and an information providing method according to the present invention will be described below with reference to the accompanying drawings. A television 1 shown in FIG. 1 is an example of a display device including an information providing device and a display control device according to the present invention, and includes a main body 1a and a remote controller 2. In this case, the remote controller 2 is a remote control device dedicated to the television 1 and includes a channel up switch, a channel down switch, a volume up switch, a volume down switch, a cursor switch, a decision switch, a return switch (cancel switch), a menu switch, Various operation switches (not shown) such as an information providing switch are arranged, and an infrared signal S4 that can specify the operated switch is output.

一方、本体部１ａは、本発明に係る表示制御装置と、本発明における表示部とを一体的に構成したリアプロジェクション型のテレビであって、表示装置５およびチューナ６を備えている。この場合、チューナ６は、一例として、地上アナログ放送、地上デジタル放送、ＣＳ放送およびＢＳ放送などの各種放送波Ｓ１を受信して放送信号Ｓ２を生成し、生成した放送信号Ｓ２を表示装置５に出力する。なお、チューナ６を本体部１ａに内蔵することなく、本体部１ａとは別体に構成したチューナ６を本体部１ａに接続する構成を採用することもできる。   On the other hand, the main body 1a is a rear projection type television in which the display control device according to the present invention and the display unit according to the present invention are integrated, and includes a display device 5 and a tuner 6. In this case, as an example, the tuner 6 receives various broadcast waves S1 such as terrestrial analog broadcast, digital terrestrial broadcast, CS broadcast, and BS broadcast, generates a broadcast signal S2, and generates the broadcast signal S2 on the display device 5. Output. In addition, the structure which connects the tuner 6 comprised separately from the main-body part 1a to the main-body part 1a without incorporating the tuner 6 in the main-body part 1a is also employable.

表示装置５は、信号処理部１１、描画処理部１２、表示部１３、受信部１４、主制御部１５、記憶部１６および情報提供装置２０を備えている。信号処理部１１は、チューナ６から出力された放送信号Ｓ２を信号処理して画像信号Ｓ２ａおよび音声信号を生成し、画像信号Ｓ２ａを描画処理部１２に出力すると共に、音声信号を図示しない音声出力部に出力する。描画処理部１２は、信号処理部１１から出力された画像信号Ｓ２ａに基づいて（画像信号Ｓ２ａをデコードして）各種の表示画面を表示部１３に表示させるための画像信号Ｓ３を生成する。また、描画処理部１２は、主制御部１５と相俟って本発明における第２の制御部を構成し、後述するようにして人物情報を表示させる人物の顔が描画されている範囲を選択するための範囲選択画面４２（図４参照）や、情報提供装置２０から出力された検索結果データＤ２に基づく検索結果表示画面４３（本発明における情報提供画面：図７参照）を表示部１３に表示させる。   The display device 5 includes a signal processing unit 11, a drawing processing unit 12, a display unit 13, a receiving unit 14, a main control unit 15, a storage unit 16, and an information providing device 20. The signal processing unit 11 processes the broadcast signal S2 output from the tuner 6 to generate an image signal S2a and an audio signal, outputs the image signal S2a to the drawing processing unit 12, and outputs an audio signal (not shown). To the output. The drawing processing unit 12 generates an image signal S3 for displaying various display screens on the display unit 13 based on the image signal S2a output from the signal processing unit 11 (by decoding the image signal S2a). In addition, the drawing processing unit 12 constitutes a second control unit in the present invention in combination with the main control unit 15 and selects a range in which a person's face for displaying personal information is drawn as described later. Range display screen 42 (see FIG. 4) for search, and search result display screen 43 (information provision screen in the present invention: see FIG. 7) based on the search result data D2 output from the information providing device 20 are displayed on the display unit 13. Display.

表示部１３は、光学エンジンおよびスクリーンパネル等（図示せず）を備え、描画処理部１２から出力された画像信号Ｓ３に基づくテレビ画像の番組視聴画面４１（本発明における画像表示画面：図３参照）などを表示する。具体的には、表示部１３は、画像信号Ｓ３に基づいて光変調した投射光をスクリーンパネルに背面側から投射することで各種画像をスクリーンパネルに表示する。この場合、上記の光学エンジンは、例えば、光源と、光変調素子（一例として、デジタルマイクロミラーデバイスや液晶ライトバルブ）と、投射レンズ（いずれも図示せず）とを備えて構成されている。受信部１４は、リモコン２から出力される赤外線信号Ｓ４を受信して操作信号Ｓ５に変換して主制御部１５に出力する。   The display unit 13 includes an optical engine, a screen panel, and the like (not shown), and a TV image program viewing screen 41 based on the image signal S3 output from the drawing processing unit 12 (image display screen in the present invention: see FIG. 3). ) Etc. are displayed. Specifically, the display unit 13 displays various images on the screen panel by projecting projection light, which is light-modulated based on the image signal S3, onto the screen panel from the back side. In this case, the optical engine includes, for example, a light source, a light modulation element (for example, a digital micromirror device or a liquid crystal light valve), and a projection lens (both not shown). The receiving unit 14 receives the infrared signal S4 output from the remote controller 2, converts it into an operation signal S5, and outputs it to the main control unit 15.

主制御部１５は、テレビ１を総括的に制御する。具体的には、主制御部１５は、描画処理部１２を制御して番組視聴画面４１などを表示部１３に表示させる。また、主制御部１５は、前述したように描画処理部１２と相俟って本発明における第２の制御部を構成し、図２に示す情報表示処理５０を実行して、リモコン２の情報提供スイッチが操作されたときに、情報提供装置２０に対して本発明における対象画像についての画像データＤ１を出力する。さらに、主制御部１５は、情報提供装置２０から検索結果データＤ２が出力されたときに、描画処理部１２を制御して検索結果表示画面４３を表示部１３に表示させる。記憶部１６は、主制御部１５の動作プログラムなどを記憶する。   The main control unit 15 controls the television 1 as a whole. Specifically, the main control unit 15 controls the drawing processing unit 12 to display the program viewing screen 41 and the like on the display unit 13. Further, the main control unit 15 constitutes the second control unit in the present invention in combination with the drawing processing unit 12 as described above, and executes the information display processing 50 shown in FIG. When the providing switch is operated, the image data D1 for the target image in the present invention is output to the information providing apparatus 20. Further, when the search result data D2 is output from the information providing device 20, the main control unit 15 controls the drawing processing unit 12 to display the search result display screen 43 on the display unit 13. The storage unit 16 stores an operation program of the main control unit 15 and the like.

情報提供装置２０は、記憶部２１、ネットワーク接続部２２、画像解析部２３、制御部２４および記憶部２５を備えている。記憶部２１は、一例として、ハードディスクドライブ等の大容量記憶装置で構成されて人物情報テーブルＤｔを記憶する。この場合、人物情報テーブルＤｔは、本発明における人物特定情報および人物情報に相当し、複数の人物についての各々の特徴部分を数値化した情報（人物特定情報）と、各人物についての「人物名（氏名や芸名）」、「生年月日」、「出身地」および「代表作」などを含む人物情報が相互に関連付けられて構成されている。ネットワーク接続部２２は、制御部２４と相俟って本発明における情報取得部を構成する。このネットワーク接続部２２は、インターネット３０に接続可能に構成されると共に、制御部２４の制御に従い、インターネット３０に接続された情報提供サーバ３１（本発明における「外部記憶装置」の一例）から人物情報テーブルＤｔを取得（ダウンロード）する。   The information providing apparatus 20 includes a storage unit 21, a network connection unit 22, an image analysis unit 23, a control unit 24, and a storage unit 25. As an example, the storage unit 21 is configured by a large-capacity storage device such as a hard disk drive and stores the person information table Dt. In this case, the person information table Dt corresponds to the person specifying information and the person information in the present invention, and information (person specifying information) obtained by quantifying each characteristic portion of a plurality of persons and the “person name” for each person. (Name and stage name) ”,“ birth date ”,“ birthplace ”,“ representative work ”, etc. are associated with each other. The network connection unit 22 together with the control unit 24 constitutes an information acquisition unit in the present invention. The network connection unit 22 is configured to be connectable to the Internet 30 and, from the information providing server 31 (an example of the “external storage device” in the present invention) connected to the Internet 30 under the control of the control unit 24, personal information Obtain (download) the table Dt.

画像解析部２３は、本発明における特定処理部に相当し、主制御部１５から出力された画像データＤ１に対する画像解析処理を実行して、画像データＤ１内の人物の特徴部分を数値化して本発明における特徴情報を生成する。また、画像解析部２３は、記憶部２１に記憶されている人物情報テーブルＤｔと、上記の特徴情報とに基づき、画像データＤ１内の人物と特徴部分が一致する人物についての人物特定情報が人物情報テーブルＤｔ内に存在するか否かを判別する。なお、この画像解析部２３による上記の各処理内容については、後に詳細に説明する。   The image analysis unit 23 corresponds to a specific processing unit in the present invention, executes image analysis processing on the image data D1 output from the main control unit 15, and quantifies the character feature portion of the person in the image data D1. The feature information in the invention is generated. In addition, the image analysis unit 23 stores person specifying information about a person whose feature part matches the person in the image data D1 based on the person information table Dt stored in the storage unit 21 and the feature information. It is determined whether or not it exists in the information table Dt. The details of each process performed by the image analysis unit 23 will be described later in detail.

制御部２４は、本発明における第１の制御部に相当し、ネットワーク接続部２２を制御して情報提供サーバ３１から最新の人物情報テーブルＤｔを取得させて記憶部２１に記憶させる処理（本発明における情報取得処理）を実行する。また、制御部２４は、画像解析部２３を制御して画像データＤ１に対する画像解析処理を実行させると共に、画像解析処理の処理結果と人物情報テーブルＤｔとに基づいて画像データＤ１内の人物を特定させる。さらに、制御部２４は、画像解析部２３によって特定された人物についての人物情報を人物情報テーブルＤｔから抽出して検索結果データＤ２として主制御部１５に出力する。記憶部２５は、制御部２４の動作プログラムなどを記憶する。   The control unit 24 corresponds to the first control unit in the present invention, and controls the network connection unit 22 to acquire the latest person information table Dt from the information providing server 31 and store it in the storage unit 21 (the present invention). Information acquisition process) is executed. Further, the control unit 24 controls the image analysis unit 23 to execute image analysis processing on the image data D1, and specifies a person in the image data D1 based on the processing result of the image analysis processing and the person information table Dt. Let Further, the control unit 24 extracts the person information about the person specified by the image analysis unit 23 from the person information table Dt and outputs it to the main control unit 15 as search result data D2. The storage unit 25 stores an operation program of the control unit 24 and the like.

次に、テレビ１の全体的な動作について、図面を参照して説明する。このテレビ１の使用に際しては、情報提供サーバ３１から最新の人物情報テーブルＤｔを取得して記憶部２１に記憶させる。具体的には、リモコン２のメニュースイッチを操作してテレビ１の動作条件設定画面（図示せず）を表示部１３に表示させ、一例として、情報提供サーバ３１のＵＲＬと、人物情報テーブルＤｔの更新間隔（一例として、１日１回）と、更新タイミング（一例として、深夜１２時）とを設定する。この際に、上記設定項目の設定完了時点において、制御部２４は、記憶部２１に人物情報テーブルＤｔが存在しないと判別し、ネットワーク接続部２２を制御して情報提供サーバ３１から最新の人物情報テーブルＤｔをダウンロードさせて記憶部２１に記憶させる。これにより、テレビ１による人物情報の提供が可能な状態となる。以後、このテレビ１では、毎日深夜１２時に情報提供サーバ３１から最新の人物情報テーブルＤｔがダウンロードされて記憶部２１に記憶させられる。   Next, the overall operation of the television 1 will be described with reference to the drawings. When using the television 1, the latest personal information table Dt is acquired from the information providing server 31 and stored in the storage unit 21. Specifically, the operation condition setting screen (not shown) of the television 1 is displayed on the display unit 13 by operating the menu switch of the remote controller 2, and as an example, the URL of the information providing server 31 and the person information table Dt An update interval (for example, once a day) and an update timing (for example, midnight at 12:00) are set. At this time, at the time when the setting items are set, the control unit 24 determines that the person information table Dt does not exist in the storage unit 21, and controls the network connection unit 22 to update the latest person information from the information providing server 31. The table Dt is downloaded and stored in the storage unit 21. As a result, the television 1 can provide personal information. Thereafter, in the television 1, the latest personal information table Dt is downloaded from the information providing server 31 at midnight every day and stored in the storage unit 21.

一方、このテレビ１によってテレビ番組を視聴する際には、リモコン２の電源スイッチを操作して電源を投入する。この際には、チューナ６が主制御部１５の制御に従い、直前の電源遮断時に選局されていたチャンネルの放送波Ｓ１を受信して信号処理部１１に放送信号Ｓ２を出力する。これに応じて、信号処理部１１が主制御部１５の制御に従い、画像信号Ｓ２ａと音声信号とを生成して、画像信号Ｓ２ａを描画処理部１２に出力すると共に音声信号を図外の音声出力部に出力する。この際に、描画処理部１２は、主制御部１５の制御に従い、信号処理部１１から出力された画像信号Ｓ２ａに基づいて画像信号Ｓ３を生成して表示部１３に出力する。これにより、図３に示すように、番組視聴画面４１が表示部１３のスクリーンパネルに表示されると共に、対応する音声が所定の出力音量でスピーカから出力される。   On the other hand, when viewing a television program on the television 1, the power is turned on by operating the power switch of the remote controller 2. At this time, the tuner 6 receives the broadcast wave S1 of the channel that was selected at the time of the previous power cut-off and outputs the broadcast signal S2 to the signal processing unit 11 according to the control of the main control unit 15. In response to this, the signal processing unit 11 generates an image signal S2a and an audio signal under the control of the main control unit 15, outputs the image signal S2a to the drawing processing unit 12, and outputs the audio signal to an audio output not shown. To the output. At this time, the drawing processing unit 12 generates an image signal S3 based on the image signal S2a output from the signal processing unit 11 and outputs the image signal S3 to the display unit 13 according to the control of the main control unit 15. Thereby, as shown in FIG. 3, the program viewing screen 41 is displayed on the screen panel of the display unit 13, and the corresponding sound is output from the speaker at a predetermined output volume.

この場合、主制御部１５は、テレビ１に電源が投入された時点において（テレビ番組の視聴が開始された時点において）、図２に示す情報表示処理５０を開始する。この情報表示処理５０では、主制御部１５は、リモコン２からの赤外線信号Ｓ４の出力（受信部１４からの操作信号Ｓ５の出力）を監視することで、リモコン２の情報提供スイッチが操作されたか否かを監視する（ステップ５１）。この場合、番組視聴画面４１内の所定の出演者（人物）に関する人名等の人物情報を知りたいときには、リモコン２の情報提供スイッチを操作する。これに伴い、リモコン２から情報提供スイッチが操作された旨を特定可能な赤外線信号Ｓ４が出力され、この赤外線信号Ｓ４が本体部１ａの受信部１４によって受信されて操作信号Ｓ５として主制御部１５に出力される。これに応じて、主制御部１５は、情報提供スイッチを操作されたと判別して、描画処理部１２に制御信号Ｓ６を出力することにより、その時点において表示部１３に表示させている番組視聴画面４１をキャプチャ処理させて静止画像データを生成させる（キャップチャ画像の生成：ステップ５２）。   In this case, the main control unit 15 starts the information display processing 50 shown in FIG. 2 when the power is turned on to the television 1 (when viewing of the television program is started). In the information display processing 50, the main control unit 15 monitors the output of the infrared signal S4 from the remote control 2 (the output of the operation signal S5 from the reception unit 14), so that the information providing switch of the remote control 2 is operated. Whether or not is monitored (step 51). In this case, when it is desired to know personal information such as the name of a predetermined performer (person) in the program viewing screen 41, the information providing switch of the remote controller 2 is operated. Accordingly, an infrared signal S4 that can specify that the information providing switch has been operated is output from the remote controller 2, and this infrared signal S4 is received by the receiving unit 14 of the main body 1a and is operated as the operation signal S5. Is output. In response to this, the main control unit 15 determines that the information providing switch has been operated, and outputs the control signal S6 to the drawing processing unit 12, thereby displaying the program viewing screen displayed on the display unit 13 at that time. 41 is captured to generate still image data (capture image generation: step 52).

次いで、主制御部１５は、描画処理部１２を制御して、図４に示すように、信号処理部１１からの画像信号Ｓ２ａに基づく上記の番組視聴画面４１と、人物情報を表示させる人物が描画されている（表示されている）範囲を選択させるための範囲選択画面４２とを表示部１３に並べて２画面で表示させる（２画面表示の開始：ステップ５３）。この場合、描画処理部１２は、上記のキャプチャ処理によって生成した静止画像データに基づいて範囲選択画面４２を表示させる。また、描画処理部１２は、範囲選択画面４２に表示された静止画像（情報提供スイッチが操作された時点において番組視聴画面４１に表示されていたテレビ画像）から、人物情報の表示を所望する人物が描画されている（表示されている）範囲を選択させるためのカーソル表示４２ａを静止画像に重ねて表示させる。なお、範囲選択画面４２の表示開始時点において、描画処理部１２は、同図に破線で示すように、範囲選択画面４２の画面中央部にカーソル表示４２ａを表示させる。   Next, the main control unit 15 controls the drawing processing unit 12 so that the program viewing screen 41 based on the image signal S2a from the signal processing unit 11 and the person displaying the personal information are controlled as shown in FIG. A range selection screen 42 for selecting a drawn (displayed) range is arranged on the display unit 13 and displayed on two screens (start of two-screen display: step 53). In this case, the drawing processing unit 12 displays the range selection screen 42 based on the still image data generated by the capture process. The drawing processing unit 12 also displays a person who wants to display personal information from the still image displayed on the range selection screen 42 (the TV image displayed on the program viewing screen 41 when the information providing switch is operated). A cursor display 42a for selecting a range in which is drawn (displayed) is superimposed on the still image. Note that, at the time of starting the display of the range selection screen 42, the drawing processing unit 12 displays a cursor display 42a at the center of the range selection screen 42 as indicated by a broken line in FIG.

この場合、対象とする人物が範囲選択画面４２の中央部以外の部位に表示されているときには、リモコン２のカーソルスイッチを操作してカーソル表示４２ａを対象の人物が表示されている部位に移動させる。この際に、主制御部１５は、リモコン２からの赤外線信号Ｓ４の出力（受信部１４からの操作信号Ｓ５の出力）に基づいてカーソルスイッチが操作されたと判別し（ステップ５４）、描画処理部１２を制御して、そのスイッチ操作に応じた方向にカーソル表示４２ａ（選択領域）を移動させる（ステップ５５）。この結果、同図に実線で示すように、対象の人物が表示されている部位にカーソル表示４２ａが重ねて表示される。   In this case, when the target person is displayed in a part other than the central part of the range selection screen 42, the cursor switch 42a of the remote controller 2 is operated to move the cursor display 42a to the part where the target person is displayed. . At this time, the main controller 15 determines that the cursor switch has been operated based on the output of the infrared signal S4 from the remote controller 2 (the output of the operation signal S5 from the receiver 14) (step 54), and the drawing processor 12 is controlled to move the cursor display 42a (selected area) in the direction corresponding to the switch operation (step 55). As a result, as indicated by a solid line in the figure, the cursor display 42a is displayed over the part where the target person is displayed.

この際に、対象とする人物における顔がカーソル表示４２ａによって囲われた（顔の表示部位にカーソル表示４２ａが重ねて表示された）ときに、リモコン２の決定スイッチを操作する。これに応じて、主制御部１５は、決定スイッチが操作されたと判別し（ステップ５６）、描画処理部１２を制御して、情報提供装置２０に対して人物情報を検索させるための画像データＤ１を生成させる（ステップ５７）。この際に、描画処理部１２は、図５に示すように、決定スイッチの操作時点においてカーソル表示４２ａを表示させていた部位（カーソル表示４２ａによって囲われた領域）の静止画像を切り出して画像データＤ１を生成して、生成した画像データＤ１を主制御部１５に出力する。これに応じて、主制御部１５は、情報提供装置２０の制御部２４に対して検索開始を指示する制御信号Ｓ７と共に画像データＤ１を出力する（ステップ５８）。   At this time, when the face of the target person is surrounded by the cursor display 42a (the cursor display 42a is displayed over the face display part), the determination switch of the remote controller 2 is operated. In response to this, the main control unit 15 determines that the determination switch has been operated (step 56), and controls the drawing processing unit 12 to cause the information providing apparatus 20 to search for person information. Is generated (step 57). At this time, as shown in FIG. 5, the drawing processing unit 12 cuts out a still image of a part (area surrounded by the cursor display 42 a) where the cursor display 42 a was displayed at the time of operation of the determination switch, and image data D1 is generated, and the generated image data D1 is output to the main control unit 15. In response to this, the main control unit 15 outputs the image data D1 together with the control signal S7 instructing the control unit 24 of the information providing apparatus 20 to start searching (step 58).

これに応じて、情報提供装置２０の制御部２４は、図６に示す情報検索処理７０を開始する。この情報検索処理７０では、制御部２４は、主制御部１５から出力された画像データＤ１と、画像解析処理の開始を指示する制御信号Ｓ８とを画像解析部２３に出力することにより、画像データＤ１に描画されている人物の特徴部分を数値化させる処理を実行させる（ステップ７１）。この際に、画像解析部２３は、制御部２４から出力された画像データＤ１に対して、例えば、輪郭抽出処理を実行した後に、抽出した輪郭情報に基づいて、人物の目、鼻および口などの位置情報（距離情報）を生成することで、人物の特徴部分を数値化した特徴情報を生成する。なお、静止画像データ（この例では、画像データＤ１）から上記の特徴情報を生成する方法については、上記の方法に限定されず、周知の各種画像解析処理によって特徴情報を生成することができる。   In response to this, the control unit 24 of the information providing apparatus 20 starts the information search process 70 shown in FIG. In this information search processing 70, the control unit 24 outputs the image data D 1 output from the main control unit 15 and the control signal S 8 instructing the start of the image analysis processing to the image analysis unit 23, whereby the image data A process of digitizing the characteristic portion of the person drawn in D1 is executed (step 71). At this time, the image analysis unit 23 performs, for example, contour extraction processing on the image data D1 output from the control unit 24, and then, based on the extracted contour information, the human eyes, nose, mouth, and the like By generating the position information (distance information), feature information obtained by quantifying the feature portion of the person is generated. The method for generating the feature information from the still image data (in this example, the image data D1) is not limited to the method described above, and the feature information can be generated by various known image analysis processes.

次いで、画像解析部２３は、主制御部１５の制御に従い、記憶部２１に記憶されている人物情報テーブルＤｔ内の各人物特定情報と、上記の特徴情報とを個別的に処理する比較処理を実行する（ステップ７２）。この際に、上記の特徴情報と一致する人物特定情報が人物情報テーブルＤｔ内に存在しないときには、画像解析部２３は、その旨を報知する検索結果信号Ｓ９を制御部２４に出力する。これに応じて、制御部２４は、人物情報テーブルＤｔ内に該当データが存在しないと判別し（ステップ７３）、「該当データなし」との検索結果信号Ｓ１０を主制御部１５に出力して（ステップ７４）、この情報検索処理７０を終了する。   Next, the image analysis unit 23 performs a comparison process for individually processing each person specifying information in the person information table Dt stored in the storage unit 21 and the feature information in accordance with the control of the main control unit 15. Execute (step 72). At this time, if there is no person identification information that matches the feature information in the person information table Dt, the image analysis unit 23 outputs a search result signal S9 for notifying the fact to the control unit 24. In response to this, the control unit 24 determines that the corresponding data does not exist in the person information table Dt (step 73), and outputs a search result signal S10 of “no corresponding data” to the main control unit 15 ( Step 74), the information retrieval processing 70 is terminated.

これに応じて、主制御部１５は、情報提供装置２０から検索結果信号Ｓ１０が出力されたと判別して（ステップ５９）、描画処理部１２を制御して表示部１３に検索結果を表示させる（ステップ６０）。この際、描画処理部１２は、主制御部１５からの制御信号Ｓ６に従い、一例として「該当するデータが存在しません」とのメッセージを表示部１３の範囲選択画面４２に重ねて表示させる（図示せず）。この後、主制御部１５は、リモコン２の戻るスイッチが操作されたか否かを監視し（ステップ６１）、戻るスイッチが操作されたと判別したときには、描画処理部１２を制御して、番組視聴画面４１と範囲選択画面４２との２画面表示を終了させて、図３に示すように、番組視聴画面４１を表示部１３の全域に表示させ、この情報表示処理５０を終了する。   In response to this, the main control unit 15 determines that the search result signal S10 is output from the information providing device 20 (step 59), and controls the drawing processing unit 12 to display the search result on the display unit 13 ( Step 60). At this time, in accordance with the control signal S6 from the main control unit 15, the drawing processing unit 12 displays, for example, a message “No corresponding data” superimposed on the range selection screen 42 of the display unit 13 (see FIG. Not shown). Thereafter, the main control unit 15 monitors whether or not the return switch of the remote controller 2 has been operated (step 61). When determining that the return switch has been operated, the main control unit 15 controls the drawing processing unit 12 to display the program viewing screen. The two-screen display of 41 and the range selection screen 42 is terminated, and as shown in FIG. 3, the program viewing screen 41 is displayed over the entire display unit 13, and this information display processing 50 is terminated.

一方、画像解析部２３は、情報検索処理７０のステップ７３において、上記の特徴情報と一致する人物特定情報が人物情報テーブルＤｔ内に存在すると判別したときには、その旨を報知する検索結果信号Ｓ９を制御部２４に出力する。これに応じて、制御部２４は、人物情報テーブルＤｔ内の該当する人物特定情報に関連付けられた人物情報に基づいて検索結果データＤ２を生成して、「該当データ有り」との検索結果信号Ｓ１０と、生成した検索結果データＤ２とを主制御部１５に出力して（人物情報の出力：ステップ７５）、この情報検索処理７０を終了する。これに応じて、主制御部１５は、情報提供装置２０から検索結果信号Ｓ１０が出力されたと判別し（ステップ５９）、描画処理部１２を制御して表示部１３に検索結果を表示させる（ステップ６０）。   On the other hand, when it is determined in step 73 of the information search processing 70 that the person specifying information that matches the feature information exists in the person information table Dt, the image analysis unit 23 displays a search result signal S9 that notifies that fact. Output to the control unit 24. In response to this, the control unit 24 generates search result data D2 based on the person information associated with the corresponding person specifying information in the person information table Dt, and the search result signal S10 indicating “there is corresponding data”. Then, the generated search result data D2 is output to the main control unit 15 (output of person information: step 75), and the information search processing 70 is terminated. In response to this, the main control unit 15 determines that the search result signal S10 is output from the information providing device 20 (step 59), and controls the drawing processing unit 12 to display the search result on the display unit 13 (step 59). 60).

この際に、描画処理部１２は、主制御部１５からの制御信号Ｓ６に従い、図７に示すように、番組視聴画面４１と、検索結果データＤ２に基づく検索結果を表示する検索結果表示画面４３とを表示部１３に並べて２画面で表示させる。これにより、所望の人物について、例えば、「人物名」、「生年月日」、「出身地」および「代表作」等の人物情報が表示部１３（検索結果表示画面４３）に表示される。この後、主制御部１５は、リモコン２の戻るスイッチが操作されたか否かを監視し（ステップ６１）、戻るスイッチが操作されたと判別したときには、描画処理部１２を制御して、番組視聴画面４１と検索結果表示画面４３との２画面表示を終了させて（ステップ６２）、図３に示すように、番組視聴画面４１を表示部１３の全域に表示させて、この情報表示処理５０を終了する。   At this time, the drawing processing unit 12 follows the control signal S6 from the main control unit 15 and, as shown in FIG. 7, the program viewing screen 41 and the search result display screen 43 that displays the search results based on the search result data D2. Are arranged on the display unit 13 and displayed on two screens. As a result, for the desired person, for example, personal information such as “person name”, “birth date”, “birthplace”, and “representative work” is displayed on the display unit 13 (search result display screen 43). Thereafter, the main control unit 15 monitors whether or not the return switch of the remote controller 2 has been operated (step 61). When determining that the return switch has been operated, the main control unit 15 controls the drawing processing unit 12 to display the program viewing screen. 41 and the search result display screen 43 are terminated (step 62), and as shown in FIG. 3, the program viewing screen 41 is displayed over the entire display unit 13, and the information display processing 50 is terminated. To do.

このように、このテレビ１（情報提供装置２０）およびテレビ１による情報提供方法によれば、画像データＤ１に対する画像解析処理を実行すると共に画像解析処理の処理結果と複数の人物についての人物特定情報（人物情報テーブルＤｔ）とに基づいて画像データＤ１内の人物を特定し、特定した人物に関する人物情報（検索結果データＤ２）を出力することにより、ＥＰＧ情報に基づく電子番組表を表示させるのとは異なり、本発明における人物特定情報として各種の人物についての情報を用意しておくことで、司会者や主役についてのみならず、脇役的な出演者やアシスタント等についての人物名等（人物情報）を提供することができる。また、このテレビ１では、人物情報の表示を所望する人物が描画されている（表示されている）範囲を範囲選択画面４２において選択することで生成された画像データＤ１内の人物に関する人物情報が検索結果表示画面４３内に表示されるため、電子番組表における人物名等の表示とは異なり、情報提供スイッチの操作時点において番組視聴画面４１内に表示されていた複数の人物のうちのいずれの人物についての人物情報が提供されているのかを確実かつ容易に認識させることができる。   As described above, according to the television 1 (information providing device 20) and the information provision method using the television 1, the image analysis processing is executed on the image data D1, the processing result of the image analysis processing, and person specifying information about a plurality of persons. The person in the image data D1 is specified based on (person information table Dt), and the person information (search result data D2) related to the specified person is output, thereby displaying the electronic program guide based on the EPG information. On the other hand, by preparing information about various persons as person specifying information in the present invention, not only about the moderator and the main character, but also the person name about the supporting performer and assistant, etc. (person information) Can be provided. Further, in the television 1, personal information regarding a person in the image data D1 generated by selecting a range in which a person who desires to display personal information is drawn (displayed) on the range selection screen 42 is displayed. Since it is displayed in the search result display screen 43, unlike the display of a person name or the like in the electronic program guide, any one of a plurality of persons displayed in the program viewing screen 41 at the time of operation of the information providing switch is displayed. It is possible to reliably and easily recognize whether the person information about the person is provided.

また、このテレビ１（情報提供装置２０）によれば、画像データＤ１に対する画像解析処理を実行して画像データＤ１内の人物の特徴部分を数値化して特徴情報を生成して、生成した特徴情報と人物特定情報（人物情報テーブルＤｔ）とに基づいて画像データＤ１内の人物を特定することにより、例えば、各人物についての静止画像データと、画像データＤ１とを個別的に比較処理する構成とは異なり、人物情報テーブルＤｔ内に該当人物についての人物特定情報が存在するか否かを高精度でしかも容易に特定することができる。   Further, according to the television 1 (information providing apparatus 20), the image information D1 is subjected to image analysis processing, the characteristic portions of the person in the image data D1 are digitized to generate characteristic information, and the generated characteristic information And a person identification information (person information table Dt), for example, by specifying a person in the image data D1, for example, to individually compare the still image data for each person and the image data D1 In contrast, it is possible to easily specify with high accuracy whether or not the person specifying information about the person exists in the person information table Dt.

さらに、このテレビ１（情報提供装置２０）によれば、外部記憶装置（情報提供サーバ３１）に記憶されている人物情報テーブルＤｔを取得して記憶部２１に記憶させることにより、新たな人物についての人物情報および人物特定情報の追加や、既存の人物情報および人物特定情報の更新が行われた状態の新たな人物情報テーブルＤｔに基づいて画像データＤ１内の人物を高精度で特定して人物情報を提供することができる。   Furthermore, according to the television 1 (information providing device 20), a person information table Dt stored in the external storage device (information providing server 31) is acquired and stored in the storage unit 21, thereby allowing a new person to be recorded. The person in the image data D1 is identified with high accuracy on the basis of the new person information table Dt in a state where the person information and the person specifying information of the person are added or the existing person information and the person specifying information are updated. Information can be provided.

また、このテレビ１によれば、情報提供指示信号が出力されたとき（情報提供スイッチの操作に伴って赤外線信号Ｓ４が出力されたとき）に、描画処理部１２が主制御部１５の制御下で表示部１３に表示させている画像に基づいて画像データＤ１を生成して情報提供装置２０に出力すると共に、情報提供装置２０から検索結果データＤ２（人物情報）が出力されたときに検索結果データＤ２に基づく情報提供画像（検索結果表示画面４３）を表示部１３に表示させることにより、例えばテレビ番組の視聴中において、人物名等の人物情報を知りたい出演者が表示された時点で情報提供スイッチを操作することで、その人物が脇役的な出演者等であったとしても、その人物情報を表示部１３に表示させることができる。   Further, according to the television 1, when the information providing instruction signal is output (when the infrared signal S4 is output in accordance with the operation of the information providing switch), the drawing processing unit 12 is under the control of the main control unit 15. The image data D1 is generated based on the image displayed on the display unit 13 and output to the information providing device 20, and the search result data D2 (person information) is output from the information providing device 20. By displaying an information providing image (search result display screen 43) based on the data D2 on the display unit 13, for example, when a performer who wants to know personal information such as a person name is displayed while viewing a television program, the information is displayed. By operating the providing switch, even if the person is a supporting character or the like, the person information can be displayed on the display unit 13.

さらに、このテレビ１によれば、情報提供指示信号が出力されたときに、描画処理部１２が主制御部１５の制御下で番組視聴画面４１と範囲選択画面４２とを表示部１３に２画面で表示させることにより、人物情報が表示されている状態において、番組視聴画面４１に表示されたテレビ番組の視聴を継続することができる。   Further, according to the television 1, when the information provision instruction signal is output, the drawing processing unit 12 displays the program viewing screen 41 and the range selection screen 42 on the display unit 13 under the control of the main control unit 15. By displaying at, the television program displayed on the program viewing screen 41 can be continuously viewed while the personal information is displayed.

また、このテレビ１によれば、情報提供装置から人物情報が出力されたときに、描画処理部１２が主制御部１５の制御下で番組視聴画面４１と検索結果表示画面４３とを表示部１３に２画面で表示させることにより、人物情報が表示されている状態において、番組視聴画面４１に表示されたテレビ番組の視聴を継続することができる。   Also, according to the television 1, when the personal information is output from the information providing apparatus, the drawing processing unit 12 displays the program viewing screen 41 and the search result display screen 43 under the control of the main control unit 15. By displaying on the two screens, the television program displayed on the program viewing screen 41 can be continuously viewed while the personal information is displayed.

なお、本発明は、上記の構成に限定されない。例えば、テレビ番組の視聴中において、番組視聴画面４１から対象人物を選択して（対象人物の顔をカーソル表示４２ａで囲んで）人物情報を検索結果表示画面４３に表示させる例について説明したが、本発明における「情報提供指示信号が出力された時点において表示部に表示させていた画像」は、テレビ番組の画像に限定されず、例えば、テレビ１に接続された光ディスクプレーヤからの映像信号に基づく画像や、テレビ１に接続されたデジタルスチルカメラからの画像信号に基づく画像などがこれに含まれる。また、インターネット３０を介して情報提供サーバ３１から人物情報テーブルＤｔを取得する例について説明したが、本発明はこれに限定されず、例えば、光ディスク等の大容量の記憶媒体に人物情報テーブルＤｔを記憶させて、この記憶媒体から人物情報テーブルＤｔを読み出して情報提供装置２０の記憶部２１に記憶させる構成を採用することもできる。   In addition, this invention is not limited to said structure. For example, while watching a TV program, an example in which a target person is selected from the program viewing screen 41 (the face of the target person is surrounded by a cursor display 42a) and personal information is displayed on the search result display screen 43 has been described. The “image displayed on the display unit at the time when the information provision instruction signal is output” in the present invention is not limited to an image of a television program, and is based on, for example, a video signal from an optical disc player connected to the television 1. This includes images and images based on image signals from a digital still camera connected to the television 1. Moreover, although the example which acquires the person information table Dt from the information provision server 31 via the internet 30 was demonstrated, this invention is not limited to this, For example, the person information table Dt is stored in large-capacity storage media, such as an optical disk. It is also possible to adopt a configuration in which the person information table Dt is read from the storage medium and stored in the storage unit 21 of the information providing apparatus 20.

さらに、リアプロジェクション型の表示部１３を備えたテレビ１について上記したが、本発明における表示部は、液晶表示器、プラズマ表示器および有機ＥＬ表示器等の各種表示器で構成することができる。また、本発明に係る情報提供装置および表示制御装置と、本発明における表示部とを一体に構成した表示装置（テレビ１）について説明したが、本発明における表示部を本発明に係る表示制御装置とは別体に構成して外部装置としての表示部に、前述した番組視聴画面４１、範囲選択画面４２および検索結果表示画面４３などを表示させる構成を採用することもできる。具体的には、表示部を備えていない各種の視聴覚機器（例えば、各種レコーダ、プレーヤ、デコーダおよびチューナ等）に本発明を適用することができる。   Furthermore, although the television 1 provided with the rear projection type display unit 13 has been described above, the display unit in the present invention can be configured by various displays such as a liquid crystal display, a plasma display, and an organic EL display. Further, the display device (TV 1) in which the information providing device and the display control device according to the present invention are integrated with the display unit according to the present invention has been described. It is also possible to adopt a configuration in which the program viewing screen 41, the range selection screen 42, the search result display screen 43, and the like are displayed on a display unit as an external device. Specifically, the present invention can be applied to various audiovisual devices (for example, various recorders, players, decoders, tuners, and the like) that do not include a display unit.

テレビ１の構成を示すブロック図である。1 is a block diagram illustrating a configuration of a television 1. FIG. 情報表示処理５０のフローチャートである。5 is a flowchart of information display processing 50. 番組視聴画面４１の表示画面図である。It is a display screen figure of the program viewing screen. 番組視聴画面４１および範囲選択画面４２の表示画面図である。It is a display screen figure of the program viewing screen 41 and the range selection screen 42. 画像データＤ１に対応する人物画像の概念図である。It is a conceptual diagram of the person image corresponding to the image data D1. 情報検索処理７０のフローチャートである。5 is a flowchart of information search processing 70; 番組視聴画面４１および検索結果表示画面４３の表示画面図である。It is a display screen figure of the program viewing screen 41 and the search result display screen 43.

符号の説明Explanation of symbols

１ テレビ、２ リモコン、５ 表示装置、１１ 信号処理部、１２ 描画処理部、１３ 表示部、１４ 受信部、１５ 主制御部、２０ 情報提供装置、２１ 記憶部、２２ ネットワーク接続部、２３ 画像解析部、２４ 制御部、３０ インターネット、３１ 情報提供サーバ、４１ 番組視聴画面、４２ 選択領域指定画面、４３ 検索結果表示画面、５０ 情報表示処理、７０ 情報検索処理、Ｄ１ 画像データ、Ｄ２ 検索結果データ、Ｄｔ 人物情報テーブル、Ｓ２，Ｓ２ａ，Ｓ３ 画像信号、Ｓ４ 赤外線信号、Ｓ５ 操作信号、Ｓ６，Ｓ７，Ｓ８ 制御信号、Ｓ９，Ｓ１０ 検索結果信号   DESCRIPTION OF SYMBOLS 1 Television, 2 Remote control, 5 Display apparatus, 11 Signal processing part, 12 Drawing process part, 13 Display part, 14 Reception part, 15 Main control part, 20 Information provision apparatus, 21 Storage part, 22 Network connection part, 23 Image analysis Part, 24 control part, 30 Internet, 31 information providing server, 41 program viewing screen, 42 selection area designation screen, 43 search result display screen, 50 information display process, 70 information search process, D1 image data, D2 search result data, Dt person information table, S2, S2a, S3 image signal, S4 infrared signal, S5 operation signal, S6, S7, S8 control signal, S9, S10 search result signal

Claims (8)

複数の人物についての人物特定情報および当該各人物に関する人物情報を相互に関連付けて記憶する記憶部と、対象画像に対する画像解析処理を実行すると共に当該画像解析処理の処理結果および前記人物特定情報に基づいて当該対象画像内の人物を特定する特定処理部と、当該特定処理部によって特定された人物についての前記人物情報を前記記憶部から読み出して出力する第１の制御部とを備えている情報提供装置。   Based on the storage unit that stores the person specifying information about a plurality of persons and the person information about each person in association with each other, the image analysis process for the target image, and the processing result of the image analysis process and the person specifying information An information processing unit that identifies a person in the target image and a first control unit that reads out and outputs the personal information about the person identified by the identification processing unit from the storage unit apparatus. 前記記憶部は、前記各人物の特徴部分をそれぞれ数値化した情報を前記人物特定情報として記憶し、
前記特定処理部は、前記対象画像に対する画像解析処理を実行して当該対象画像内の人物の前記特徴部分を数値化して特徴情報を生成し、当該特徴情報と前記人物特定情報とに基づいて当該対象画像内の人物を特定する請求項１記載の情報提供装置。 The storage unit stores, as the person specifying information, information obtained by quantifying the characteristic portions of each person.
The identification processing unit performs image analysis processing on the target image to digitize the characteristic portion of the person in the target image to generate characteristic information, and based on the characteristic information and the person identification information, The information providing apparatus according to claim 1, wherein a person in the target image is specified. 外部記憶装置に記憶されている前記人物特定情報および前記人物情報を取得する情報取得部を備え、
前記第１の制御部は、前記情報取得部を制御して前記人物特定情報および前記人物情報を取得させて前記記憶部に記憶させる情報取得処理を実行する請求項１または２記載の情報提供装置。 An information acquisition unit that acquires the person identification information and the person information stored in an external storage device;
3. The information providing apparatus according to claim 1, wherein the first control unit controls the information acquisition unit to execute the information acquisition process of acquiring the person specifying information and the person information and storing the information in the storage unit. . 請求項１から３のいずれかに記載の情報提供装置と、画像データに基づく画像を表示部に表示させる第２の制御部とを備え、
前記第２の制御部は、情報提供指示信号が出力されたときに、前記表示部に表示させている画像に基づいて前記対象画像を生成して前記情報提供装置に出力すると共に、当該情報提供装置から前記人物情報が出力されたときに当該人物情報に基づく情報提供画像を前記表示部に表示させる表示制御装置。 An information providing device according to any one of claims 1 to 3, and a second control unit that displays an image based on image data on a display unit,
When the information providing instruction signal is output, the second control unit generates the target image based on the image displayed on the display unit and outputs the target image to the information providing apparatus. A display control device for displaying an information providing image based on the personal information on the display unit when the personal information is output from the device. 前記第２の制御部は、前記情報提供指示信号が出力されたときに、前記画像データに基づく前記画像を表示する画像表示画面と、前記情報提供指示信号が出力された時点において前記表示部に表示させていた前記画像から前記情報提供装置に出力する前記対象画像の範囲を選択させるための範囲選択画面とを前記表示部に２画面で表示させる請求項４記載の表示制御装置。   The second control unit displays an image display screen for displaying the image based on the image data when the information provision instruction signal is output, and displays the image on the display unit when the information provision instruction signal is output. The display control device according to claim 4, wherein a range selection screen for selecting a range of the target image to be output to the information providing device from the displayed image is displayed on the display unit in two screens. 前記第２の制御部は、前記情報提供装置から前記人物情報が出力されたときに、前記画像データに基づく前記画像を表示する画像表示画面と、前記人物情報に基づく前記情報提供画像を表示する情報提供画面とを前記表示部に２画面で表示させる請求項４または５記載の表示制御装置。   The second control unit displays an image display screen for displaying the image based on the image data and the information providing image based on the person information when the person information is output from the information providing apparatus. 6. The display control apparatus according to claim 4, wherein an information provision screen is displayed on the display unit in two screens. 請求項４から６のいずれかに記載の表示制御装置と、前記表示部とを備えている表示装置。   A display device comprising: the display control device according to claim 4; and the display unit. 対象画像に対する画像解析処理を実行すると共に当該画像解析処理の処理結果と複数の人物についての人物特定情報とに基づいて当該対象画像内の人物を特定し、当該特定した人物に関する人物情報を出力する情報提供方法。   Executes image analysis processing on the target image, specifies a person in the target image based on the processing result of the image analysis processing and person specifying information about a plurality of persons, and outputs person information about the specified person Information provision method.
JP2006241126A 2006-09-06 2006-09-06 Information providing device, display controller, display device, and information providing method Withdrawn JP2008066925A (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2006241126A JP2008066925A (en) 2006-09-06 2006-09-06 Information providing device, display controller, display device, and information providing method

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2006241126A JP2008066925A (en) 2006-09-06 2006-09-06 Information providing device, display controller, display device, and information providing method

Publications (1)

Publication Number Publication Date
JP2008066925A true JP2008066925A (en) 2008-03-21

Family

ID=39289259

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2006241126A Withdrawn JP2008066925A (en) 2006-09-06 2006-09-06 Information providing device, display controller, display device, and information providing method

Country Status (1)

Country Link
JP (1) JP2008066925A (en)

Cited By (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2010103764A (en) * 2008-10-23 2010-05-06 Toshiba Corp Information processing apparatus, and content display method
JP2010152744A (en) * 2008-12-25 2010-07-08 Toshiba Corp Reproducing device
JP2013012913A (en) * 2011-06-29 2013-01-17 Mitsubishi Electric Corp Digital broadcast receiver and digital broadcast reception method
JP2013073392A (en) * 2011-09-27 2013-04-22 Fujitsu Ltd Display control device, display control program, and display control method
KR101292087B1 (en) * 2011-08-12 2013-08-08 인피언컨설팅 주식회사 Method for providing person tagged optional contents using mobile computing device

Cited By (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2010103764A (en) * 2008-10-23 2010-05-06 Toshiba Corp Information processing apparatus, and content display method
JP4496263B2 (en) * 2008-10-23 2010-07-07 株式会社東芝 Information processing apparatus and content display method
US8023702B2 (en) 2008-10-23 2011-09-20 Kabushiki Kaisha Toshiba Information processing apparatus and content display method
JP2010152744A (en) * 2008-12-25 2010-07-08 Toshiba Corp Reproducing device
JP2013012913A (en) * 2011-06-29 2013-01-17 Mitsubishi Electric Corp Digital broadcast receiver and digital broadcast reception method
KR101292087B1 (en) * 2011-08-12 2013-08-08 인피언컨설팅 주식회사 Method for providing person tagged optional contents using mobile computing device
JP2013073392A (en) * 2011-09-27 2013-04-22 Fujitsu Ltd Display control device, display control program, and display control method

Similar Documents

Publication Publication Date Title
US20060110128A1 (en) Image-keyed index for video program stored in personal video recorder
JP2008124574A (en) Preference extracting apparatus, preference extracting method and preference extracting program
JP2007158998A (en) Broadcast receiver and its video-recording program selection support method
US20120278765A1 (en) Image display apparatus and menu screen displaying method
US20110093896A1 (en) System and method for providing television program reminders
US20060064719A1 (en) Simultaneous video input display and selection system and method
JP2008066925A (en) Information providing device, display controller, display device, and information providing method
JP2006295652A (en) Display processor and display processing method
JP2013016903A (en) Information processor and information processing method
JP2006311121A (en) Program selecting apparatus
JP6266271B2 (en) Electronic device, electronic device control method, and computer program
JP2011170735A (en) Sever device, electronic equipment, retrieval system, retrieval method and program
JP2006323971A (en) Reproducing device
JP5464870B2 (en) Playback apparatus, control method thereof, and program
KR100739752B1 (en) Image forming apparatus and method
KR20040067695A (en) Method for displaying representative image each broadcasting channel
JP4860707B2 (en) Television recording device, television receiver, and control program
JP2006268966A (en) Digital broadcasting receiver
JP2014207619A (en) Video recording and reproducing device and control method of video recording and reproducing device
KR100664830B1 (en) Apparatus and method for controling record quality in broadcasting program recorder
JP3858915B2 (en) Hard disk recorder and information recording / reproducing apparatus
JP2007067740A (en) Contents reproducing apparatus and contents reproducing method
JP2008193258A (en) Multi-screen display device and multi-screen display control method
JP2016012894A (en) Electronic apparatus, and control method and control program of the same
JP2008065508A (en) Display control device and display control method

Legal Events

Date Code Title Description
A300 Withdrawal of application because of no request for examination

Free format text: JAPANESE INTERMEDIATE CODE: A300

Effective date: 20091110