JP2007067739A - Contents reproducing apparatus and contents reproducing method - Google Patents

Contents reproducing apparatus and contents reproducing method Download PDF

Info

Publication number
JP2007067739A
JP2007067739A JP2005250320A JP2005250320A JP2007067739A JP 2007067739 A JP2007067739 A JP 2007067739A JP 2005250320 A JP2005250320 A JP 2005250320A JP 2005250320 A JP2005250320 A JP 2005250320A JP 2007067739 A JP2007067739 A JP 2007067739A
Authority
JP
Japan
Prior art keywords
content
gaze
screen
contents
screens
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
JP2005250320A
Other languages
Japanese (ja)
Other versions
JP4609244B2 (en
Inventor
Tetsujiro Kondo
哲二郎 近藤
Kazutaka Uchida
和隆 内田
Takeshi Tanaka
剛 田中
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Sony Corp
Original Assignee
Sony Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Sony Corp filed Critical Sony Corp
Priority to JP2005250320A priority Critical patent/JP4609244B2/en
Publication of JP2007067739A publication Critical patent/JP2007067739A/en
Application granted granted Critical
Publication of JP4609244B2 publication Critical patent/JP4609244B2/en
Expired - Fee Related legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Abstract

<P>PROBLEM TO BE SOLVED: To provide a contents reproducing apparatus and a contents reproducing method whereby a viewer can efficiently and easily acquire information. <P>SOLUTION: The contents reproducing apparatus includes: a display section 13 with a plurality of screens; a switcher 14 for switching contents displayed on each screen of the display section 13 coming from a reception section 11 and/or a recording section 12; a noted screen image detection section 15 for detecting a watch screen image watched by the viewer; and a control section 18 for controlling each configuration section above, and the control section 18 for creating a contents list including contents selected on the basis of the similarity with the contents displayed on the watch screen image and switchingly reproducing the contents displayed on the screens of the display section 13 on the basis of the contents list. <P>COPYRIGHT: (C)2007,JPO&INPIT

Description

本発明は、例えば、テレビジョン放送等の複数のコンテンツを複数の画面に同時に表示するコンテンツ再生装置及びコンテンツ再生方法に関するものである。   The present invention relates to a content reproduction apparatus and a content reproduction method for simultaneously displaying a plurality of contents such as television broadcasts on a plurality of screens at the same time.

近年、大容量のＨＤＤ（Hard Disk Drive）などにコンテンツデータを大量に蓄積することができる。また、多チャンネル化により、視聴可能なコンテンツが増大している。大量に蓄積されたコンテンツ又は受信したコンテンツを複数の画面に同時に表示することができる表示装置は、複数の情報を一度に取得することができるため、大変利便性が高いものである。例えば、映像データベースに格納された類似する複数の映像を同時に提示すれば、視聴者は類似する複数の映像を比較することができる（例えば、特許文献１参照。）。   In recent years, a large amount of content data can be stored in a large capacity HDD (Hard Disk Drive) or the like. In addition, the contents that can be viewed are increasing due to the increase in the number of channels. A display device capable of simultaneously displaying a large amount of accumulated content or received content on a plurality of screens can acquire a plurality of pieces of information at a time, and thus is very convenient. For example, if a plurality of similar videos stored in the video database are presented at the same time, the viewer can compare a plurality of similar videos (see, for example, Patent Document 1).

特開２００２−５７９６５号公報JP 2002-57965 A

しかしながら、特許文献１に記載された技術では、比較視聴する情報をユーザが作成しなければならず、映像データベースに格納された複数の映像を容易に比較することが困難であった。   However, in the technique described in Patent Document 1, it is difficult for a user to create information to be compared and viewed, and it is difficult to easily compare a plurality of videos stored in a video database.

本発明は、上記問題点を解消するためになされたものであり、視聴者が効率よく容易に情報を取得することができるコンテンツ再生装置及びコンテンツ再生方法を提供することを目的とする。   The present invention has been made to solve the above problems, and an object of the present invention is to provide a content reproduction apparatus and a content reproduction method that enable a viewer to efficiently and easily acquire information.

上述した課題を解決するために、本発明に係るコンテンツ再生装置は、複数の画面を有する表示手段を備え、当該表示手段に複数のコンテンツを再生するコンテンツ再生装置において、視聴者の注視点を検出し、上記複数の画面から注視画面を検出する注視画面検出手段と、上記注視画面検出手段で検出された注視画面に表示されたコンテンツとの類似性に基づいて選択されたコンテンツを含むコンテンツリストを作成し、当該コンテンツリストに基づいて上記複数の画面に表示するコンテンツを切り替え再生する再生手段とを備えることを特徴としている。   In order to solve the above-described problem, a content reproduction apparatus according to the present invention includes a display unit having a plurality of screens, and detects a viewer's gaze point in a content reproduction apparatus that reproduces a plurality of contents on the display unit. And a content list including content selected based on similarity between the gaze screen detection means for detecting the gaze screen from the plurality of screens and the content displayed on the gaze screen detected by the gaze screen detection means. It is characterized by comprising reproduction means for switching and reproducing the content to be created and displayed on the plurality of screens based on the content list.

また、本発明に係るコンテンツ再生方法は、複数の画面を有する表示手段に複数のコンテンツを再生するコンテンツ再生方法において、視聴者の注視点を検出し、上記複数の画面から注視画面を検出する注視画面検出工程と、上記注視画面検出工程で検出された注視画面に表示されたコンテンツとの類似性に基づいて選択されたコンテンツを含むコンテンツリストを作成し、当該コンテンツリストに基づいて上記複数の画面に表示するコンテンツを切り替え再生する再生工程とを有することを特徴としている。   Further, the content reproduction method according to the present invention is a content reproduction method for reproducing a plurality of contents on a display means having a plurality of screens, and detects a gaze point of a viewer and detects a gaze screen from the plurality of screens. A content list including content selected based on the similarity between the screen detection step and the content displayed on the gaze screen detected in the gaze screen detection step is created, and the plurality of screens based on the content list And a reproduction step of switching and reproducing the content to be displayed.

本発明によれば、視聴者が注視する注視画面に表示されたコンテンツとの類似性に基づいて選択されたコンテンツを含むコンテンツリストを作成し、このコンテンツリストに基づいてコンテンツを再生するため、視聴者は効率よく情報を取得することができる。   According to the present invention, the content list including the content selected based on the similarity to the content displayed on the gaze screen watched by the viewer is created, and the content is reproduced based on the content list. The person can acquire information efficiently.

以下、本発明の具体的な実施の形態について、図面を参照しながら詳細に説明する。図１は、本発明の一実施形態におけるコンテンツ再生装置を示すブロック図である。このコンテンツ再生装置１０は、複数のチャンネルのコンテンツデータを受信する受信部１１と、複数のコンテンツデータを記録する記録部１２と、複数の画面を有する表示部１３と、受信部１１及び／又は記録部１２から表示部１３の各画面に表示するコンテンツを切り替えるスイッチャー１４と、視聴者が注視する注視画面を検出する注視画面検出部１５と、視聴者の要求を指示するリモートコントローラ１６と、リモートコントローラ１６から視聴者の要求に応じた制御信号を受光する受光部１７と、受光部１７からの制御信号に応じて各構成部を制御する制御部１８とを備えて構成されている。   Hereinafter, specific embodiments of the present invention will be described in detail with reference to the drawings. FIG. 1 is a block diagram showing a content reproduction apparatus according to an embodiment of the present invention. The content playback apparatus 10 includes a receiving unit 11 that receives content data of a plurality of channels, a recording unit 12 that records a plurality of content data, a display unit 13 having a plurality of screens, a receiving unit 11 and / or a recording. A switcher 14 that switches content to be displayed on each screen of the display unit 13 from the unit 12, a gaze screen detection unit 15 that detects a gaze screen watched by the viewer, a remote controller 16 that instructs the viewer's request, and a remote controller 16 includes a light receiving unit 17 that receives a control signal according to a viewer's request from 16 and a control unit 18 that controls each component according to the control signal from the light receiving unit 17.

受信部１１は、所望のチャンネルの放送信号を受信するチューナを備えている。なお、異なるコンテンツを複数の画面に表示する場合、チューナは表示部１３が有する画面数分備えられることが好ましい。   The receiving unit 11 includes a tuner that receives a broadcast signal of a desired channel. When displaying different contents on a plurality of screens, it is preferable that as many tuners as the number of screens included in the display unit 13 are provided.

記録部１２は、例えば、受信部１１で受信したチャンネルのコンテンツデータを記録するための大容量のＨＤＤ（Hard Disk Drive）を備えている。また、記録部１２は、コンテンツデータとともにそのコンテンツの属性情報を記録する。この属性情報は、例えば、ＥＰＧ（Electronic Program Guide）等から得ることができる、タイトル、ジャンル、キーワード、日時、提供媒体等の情報であり、これらの情報は、放送信号やインターネット等から取得することができる。なお、リアルタイムの放送を視聴する場合には、記録部１２は受信したコンテンツデータと属性情報を一時的に保持する。   The recording unit 12 includes, for example, a large capacity HDD (Hard Disk Drive) for recording the content data of the channel received by the receiving unit 11. The recording unit 12 records the attribute information of the content together with the content data. This attribute information is, for example, information such as title, genre, keyword, date and time, providing medium, etc. that can be obtained from EPG (Electronic Program Guide), etc., and these information should be obtained from broadcast signals, the Internet, etc. Can do. When viewing a real-time broadcast, the recording unit 12 temporarily holds the received content data and attribute information.

図２は、属性情報としてＥＰＧにおけるジャンルの一例を示す図である。ここで、ジャンルとしては、地上波映画、ＢＳ映画、ドラマ、スポーツ、音楽、バラエティ、アニメ等が挙げられる。また、地上波映画、ＢＳ映画等のサブジャンルとしては、邦画、洋画等が挙げられる。また、ドラマのサブチャンネルとしては、時代劇、海外ドラマ等が挙げられる。また、スポーツのサブジャンルとしては、野球、サッカー、ゴルフ等が挙げられる。また、音楽のサブジャンルとしては、クラシック、ジャズ、演歌、歌謡曲等が挙げられる。また、バラエティのサブジャンルとしては、クイズ、お笑い等が挙げられる。なお、属性情報は、ジャンルの情報だけでなく、放送日時、公開日時、タイトル、キーワード等の情報も有しており、後述するコンテンツの類似性の評価に用いられる。   FIG. 2 is a diagram illustrating an example of a genre in EPG as attribute information. Here, the genre includes terrestrial movies, BS movies, dramas, sports, music, variety, animation, and the like. Sub-genres such as terrestrial movies and BS movies include Japanese and Western movies. In addition, drama subchannels include historical drama and overseas dramas. Moreover, baseball, soccer, golf, etc. are mentioned as a sports subgenre. The music sub-genre includes classical, jazz, enka, kayokyoku, and the like. The variety sub-genre includes quizzes and comedy. The attribute information includes not only genre information but also information such as broadcast date / time, release date / time, title, and keyword, and is used to evaluate the similarity of content described later.

表示部１３は、複数の画面１３１〜画面１３Ｎを有しており、複数のコンテンツを同時に表示する。なお、表示部１３は、１つのディスプレイ画面を複数の画面に分割した構成でもよく、複数のディスプレイ画面を用いた構成としてもよい。 The display unit 13 has a plurality of screens 13 1 to 13 N and displays a plurality of contents at the same time. The display unit 13 may have a configuration in which one display screen is divided into a plurality of screens, or a configuration using a plurality of display screens.

スイッチャー１４は、受信部１１で選局されたチャンネルのコンテンツデータや記録部１２に記録されたコンテンツデータの中から表示部１３の各画面に表示するコンテンツの切り替えを行う。   The switcher 14 switches the content to be displayed on each screen of the display unit 13 from the content data of the channel selected by the receiving unit 11 or the content data recorded in the recording unit 12.

注視画面検出部１５は、視聴者を撮像する撮像手段を備えている。この注視画面検出部１５は、後述するように取得した画像から、顔の向きや位置を検出し、視線の向きを検出し、注視点を検出する。そして、検出した注視点より注視画面を検出する。   The gaze screen detection unit 15 includes imaging means for imaging the viewer. The gaze screen detection unit 15 detects the direction and position of the face from the acquired image as described later, detects the direction of the line of sight, and detects the gaze point. A gaze screen is detected from the detected gaze point.

リモートコントローラ１６は、視聴者によって操作され、視聴者の要求を指示する。例えば、コンテンツの切り替えを要求する場合、リモートコントローラ１５のチャンネル切替ボタンを押すことにより、切替制御信号が送信される。   The remote controller 16 is operated by the viewer and instructs the viewer's request. For example, when requesting content switching, a switching control signal is transmitted by pressing a channel switching button of the remote controller 15.

受光部１７は、リモートコントローラ１６からの制御信号を受信する。   The light receiving unit 17 receives a control signal from the remote controller 16.

制御部１８は、リモートコントローラ１６を介した視聴者からの指示に応じて各部を制御する。例えば、類似性の高いコンテンツ再生モードの場合、制御部１８は、注視画面検出部１５における視聴者が注視する注視画面の検出結果に基づいて選択されたコンテンツリストを作成し、このコンテンツリストに基づいてコンテンツを再生する。具体的には、最も注視回数及び／又は注視時間が多い画面に表示されたコンテンツと再生可能な他のコンテンツとの類似性を比較評価し、評価値が高い順番にコンテンツを並べたコンテンツリストを作成し、その順番でコンテンツの表示を切り替える。   The control unit 18 controls each unit in accordance with instructions from the viewer via the remote controller 16. For example, in the case of the content reproduction mode with high similarity, the control unit 18 creates a content list selected based on the detection result of the gaze screen that the viewer gazes at the gaze screen detection unit 15, and based on this content list To play the content. Specifically, a content list that compares and evaluates the similarity between content displayed on the screen with the largest number of gazes and / or gaze time and other reproducible content, and arranges the content in order of the highest evaluation value. Create and switch content display in that order.

類似性の評価は、例えば、ＥＰＧの内容が一致しているか否かに基づいて行われる。例えば、ジャンル、サブジャンル、タイトル、キーワードのうち一致するものが多いものを評価値の高いものとする。また、放送日時が現時点よりも近いものの評価値を高くする。   The similarity evaluation is performed based on, for example, whether or not the contents of the EPG match. For example, a genre, a sub-genre, a title, and a keyword that have many matches are regarded as having a high evaluation value. In addition, the evaluation value is increased when the broadcast date and time is closer than the current time.

また、例えば、タイトル、ジャンル、キーワード、日時、提供媒体等の情報の嗜好度を設定し、評価値を算出することにより、視聴者が求めるコンテンツを効率よく再生させる。例えば、テレビジョン番組の場合、出演者のキーワード及び日時の嗜好度を高く設定して評価値を算出するようにすることにより、この出演者が出演しているコンテンツが複数再生され、お気に入りの出演者の最近の情報を効率よく得ることができる。また、例えば、ニュース番組を比較したい場合、ジャンル及び日時の嗜好度を高く設定して評価値を算出するようにすることにより、放送日時が近い他のニュース番組が複数比較再生されるため、着眼点の違いや取材の力の入れ方の違い等を理解することができる。なお、このコンテンツリストは、ある一定時間、画面上に表示されていないコンテンツが並べられたもので、重複して同じコンテンツが再生されないようになっている。   In addition, for example, by setting a preference level of information such as a title, a genre, a keyword, a date, and a providing medium, and calculating an evaluation value, the content desired by the viewer is efficiently reproduced. For example, in the case of a television program, by setting a preference level of a performer's keyword and date and time and calculating an evaluation value, a plurality of contents in which the performer has appeared are played back, and a favorite appearance The latest information of the person can be obtained efficiently. Also, for example, when comparing news programs, by setting a high preference level for genre and date / time and calculating an evaluation value, a plurality of other news programs with similar broadcast dates / times are compared and played back. Can understand differences in points and differences in how to apply coverage. Note that this content list is a list of contents that are not displayed on the screen for a certain period of time, so that the same contents are not reproduced repeatedly.

このコンテンツ再生装置１０は、制御部１８がスイッチャー１４を制御し、受信部１１や記録部１２から入力されたコンテンツ画像を表示部１３の複数の画面に振り分けることによりコンテンツを同時に再生する。   In the content reproduction apparatus 10, the control unit 18 controls the switcher 14 and distributes content images input from the reception unit 11 or the recording unit 12 to a plurality of screens of the display unit 13 to simultaneously reproduce the content.

図３は、上述したコンテンツ再生装置１０のコンテンツ再生動作を示すフローチャートである。   FIG. 3 is a flowchart showing the content reproduction operation of the content reproduction apparatus 10 described above.

ステップＳ１において、注視画面検出部１５は、視聴者が注視している画面を検出する。ここで、ステップＳ１の注視画面検出動作を図４に示すフローチャートを用いて説明する。ステップＳ１０１において、注視画面検出部１５は、例えば、肌色、白目の白、黒目の黒等の色彩情報を用いて、両目の輪郭、両目の位置を検出し、さらに画像の輝度情報を用いて鼻孔の位置を検出し、顔の向き及び位置を検出する。   In step S <b> 1, the gaze screen detection unit 15 detects a screen that the viewer is gazing at. Here, the gaze screen detection operation in step S1 will be described with reference to the flowchart shown in FIG. In step S101, the gaze screen detection unit 15 detects the outline of both eyes and the position of both eyes using color information such as skin color, white of white, black of black, and the like, and further uses the luminance information of the image to obtain a nostril. Is detected, and the orientation and position of the face are detected.

次に、ステップＳ１０２において、注視画面検出部１５は、両目の位置及び鼻孔の位置の幾何学的な位置関係に基づいて眼球の中心の位置及び半径を推定するとともに輝度情報を用いて瞳孔の位置を検出し、眼球の中心と瞳孔の中心を結ぶベクトルを算出することにより視線の向きを検出する。   Next, in step S102, the gaze screen detection unit 15 estimates the position and radius of the center of the eyeball based on the geometric positional relationship between the positions of both eyes and the nostrils, and uses the luminance information to determine the position of the pupil. And the direction of the line of sight is detected by calculating a vector connecting the center of the eyeball and the center of the pupil.

そして、ステップＳ１０２で検出された視線の延長上の注視点を検出し（ステップＳ１０３）、その注視点が画面上にあるか否かを判別する（ステップＳ１０４）。   Then, a gaze point on the extension of the line of sight detected in step S102 is detected (step S103), and it is determined whether or not the gaze point is on the screen (step S104).

ステップＳ１０４において、検出した注視点が画面上である場合、注視画面検出部１５は、その注視点がある画面の番号を出力する。また、検出した注視点が画面上でない場合、注視画像検出処理を終了する。   In step S104, when the detected gazing point is on the screen, the gazing screen detection unit 15 outputs the number of the screen having the gazing point. If the detected gaze point is not on the screen, the gaze image detection process is terminated.

この注視画面検出処理は、例えば、所定時間Ｔ１毎に行われている。そして、注視画面検出部１５から出力された注視画面番号は、タイムコードとともに制御部１８内のＲＡＭ（Random Access Memory）等のメモリに蓄積される（ステップＳ２）。   This gaze screen detection process is performed, for example, every predetermined time T1. The gaze screen number output from the gaze screen detection unit 15 is stored in a memory such as a RAM (Random Access Memory) in the control unit 18 together with the time code (step S2).

ステップＳ３〜ステップＳ１０において、制御部１８は、ステップＳ２で蓄積された画面番号１〜画面番号ｉまでの注視画面情報に基づいてコンテンツの再生処理を行う。   In step S3 to step S10, the control unit 18 performs content reproduction processing based on the gaze screen information from screen number 1 to screen number i accumulated in step S2.

ステップＳ３〜ステップＳ６では、画面毎に過去一定時間Ｔ２（Ｔ２＞Ｔ１）内に一定以上の注視回数があるか否かを判別し、コンテンツを切り替える画面を決定する。すなわち、画面番号１の画面から順次判別し（ステップＳ４）、画面番号ｉが表示部１３の画面数Ｎとなるまで判別し、コンテンツを切り替える画面を決定する。   In steps S3 to S6, it is determined whether or not there is a fixed number of gazes within a certain fixed time T2 (T2> T1) for each screen, and a screen for switching contents is determined. That is, the screen number 1 is sequentially determined from the screen (step S4), the screen number i is determined until the screen number N of the display unit 13 is reached, and the content switching screen is determined.

ステップＳ５において、画面ｉ（１≦ｉ≦Ｎ）（Ｎは画面数）が表示部１３の画面数Ｎ以下の場合、ステップＳ６に進み、画面ｉの注視回数が一定以上あるか否かを判別する。   In step S5, if the screen i (1 ≦ i ≦ N) (N is the number of screens) is less than or equal to the number N of screens on the display unit 13, the process proceeds to step S6 to determine whether or not the number of gazes on the screen i is greater than or equal to a certain value. To do.

ステップＳ６において、画面ｉの注視回数が一定以上ない場合、ステップＳ７に進み、例えば、過去一定時間Ｔ２内に最も注視回数があった画面のコンテンツとの類似度に基づいて選択されたコンテンツを含むコンテンツリストを作成する。このコンテンツリストは、画面１〜Ｎにおける再生処理において同じものを用いることができる。また、ステップＳ６において、画面ｉの注視回数が一定以上ある場合、ステップＳ１０に進む。   In step S6, if the number of gazes on screen i is not equal to or greater than a certain level, the process proceeds to step S7, and includes, for example, content selected based on the similarity to the content of the screen that has been gazed most in the past certain time T2. Create a content list. The same content list can be used in the reproduction processing on the screens 1 to N. If the number of gazes on the screen i is greater than or equal to a certain number in step S6, the process proceeds to step S10.

ステップＳ８において、制御部１８は、画面ｉのコンテンツを類似度の評価がｊ番目に高いコンテンツに変更する。そして、コンテンツリストの評価値ｊをインクリメントし（ステップＳ９）、次に変更するコンテンツを決定する。   In step S <b> 8, the control unit 18 changes the content on the screen i to content with the highest similarity evaluation. Then, the evaluation value j of the content list is incremented (step S9), and the content to be changed next is determined.

ステップＳ１０では、画面番号ｉをインクリメントし、ステップＳ５に戻り、ｉ＞Ｎとなった場合、上述の再生処理を終了する。   In step S10, the screen number i is incremented, and the process returns to step S5. When i> N, the above-described reproduction process is terminated.

このように複数の画面から視聴者の注視回数に基づいてコンテンツの切り替え画面を決定し、最も注視回数の多いコンテンツと類似度が高いコンテンツを切り替え決定画面に再生することにより、視聴者は効率よく情報を取得することができる。換言すれば、視聴者があまり注視しない画面のコンテンツ、つまりあまり興味のないコンテンツを、類似度が高く、興味があるコンテンツに切り替えるようにしたため、視聴者は容易に多くの情報を得ることができる。   In this way, the content switching screen is determined from a plurality of screens based on the number of viewers' attention, and the content having the highest similarity with the content having the highest number of attentions is reproduced on the switching determination screen. Information can be acquired. In other words, the content of the screen that the viewer does not pay much attention, that is, the content that is not very interesting is switched to the content that has a high degree of similarity and is interesting, so that the viewer can easily obtain a lot of information. .

図５は、本実施の形態における再生処理例を模式的に示す図である。ここで、表示部１３は、９つの画面１３１〜画面１３９を有するものとする。また、過去一定時間内に注視回数が一定以上ない画面、すなわち、コンテンツを切り替える画面は、画面１３２と画面１３４であり、最も注視回数が多い画面は、画面１３１であるとする。この場合、画面１３１に再生されているコンテンツＡと他のコンテンツとの類似性の評価値を算出することにより、例えば、コンテンツＣ、コンテンツＥ、コンテンツＦ・・・の順番からなるコンテンツリストが作成される。このコンテンツリストに従って、過去一定時間内に注視回数が一定以上ない画面１３２及び画面１３４は、それぞれコンテンツＣ及びコンテンツＥの画像に切り替わる。これにより、例えば、違う局の同一話題のニュースを見比べることができ、新規の情報を発見することができる。また、映像を対比させて見ることによりその映像をより深く理解することができる。 FIG. 5 is a diagram schematically showing an example of the reproduction process in the present embodiment. Here, the display unit 13 has nine screens 13 1 to 13 9 . Furthermore, past fixed time without gaze count is more constant within the screen, i.e., the screen to switch the content, the screen 13 is 2 and the screen 13 4, most gaze count is large screen, and a screen 13 1. In this case, by calculating the evaluation value of the similarity between the content A and other content that is being reproduced on the screen 13 1, for example, the content C, content E, a content list of the order of the content F · · · Created. According to this content list, past fixed time in a screen 13 2 and the screen 13 4 no more constant gaze count in each switched to the image of the content C and content E. Thereby, for example, news of the same topic in different stations can be compared, and new information can be found. In addition, the video can be understood more deeply by comparing the video.

なお、上記実施の形態では、注視されていない画面のコンテンツを定期的に切り替えるようにしたが、視聴者から受信したコンテンツの切り替え指示に応じてコンテンツを切り替えてもよい。   In the above embodiment, the content of the screen that is not being watched is periodically switched. However, the content may be switched according to the content switching instruction received from the viewer.

また、上記実施の形態では、過去一定時間内の注視回数に応じてコンテンツを切り替える画面を決定したが、過去一定時間内の注視時間に応じてコンテンツを切り替える画面を決定してもよい。この注視時間は、例えば画面をある時間注視した回数に基づいて算出しても、サンプリングされた画面の注視点に基づいて算出してもよい。   Moreover, in the said embodiment, although the screen which switches content according to the frequency | count of gaze in the past fixed time was determined, you may determine the screen which switches content according to the gaze time in the past fixed time. This gaze time may be calculated based on, for example, the number of times the screen is gazed for a certain time, or may be calculated based on the gaze point of the sampled screen.

また、コンテンツの類似性の評価をＥＰＧ等の属性情報を用いて行うこととしたが、画像のフレーム差分や画像の色ヒストグラムの相関などの映像の画像特徴を用いて類似性を評価してもよい。   In addition, content similarity is evaluated using attribute information such as EPG. However, even if similarity is evaluated using image image features such as image frame difference and image color histogram correlation. Good.

本発明の一実施形態におけるコンテンツ再生装置を示すブロック図である。It is a block diagram which shows the content reproduction apparatus in one Embodiment of this invention. 属性情報としてＥＰＧのジャンルの一例を示す図である。It is a figure which shows an example of the genre of EPG as attribute information. コンテンツ再生動作例を示すフローチャートである。It is a flowchart which shows the example of content reproduction | regeneration operation | movement. 注視画面検出動作例を示すフローチャートである。It is a flowchart which shows the gaze screen detection operation example. 本実施の形態における再生処理例を模式的に示す図である。It is a figure which shows typically the example of a reproduction | regeneration processing in this Embodiment.

符号の説明Explanation of symbols

１０ コンテンツ再生装置、１１ 受信部、１２ 記録部、１３ 表示部、１４ スイッチャー、１５ 注視画面検出部、１６ リモートコントローラ、１７ 受光部、１８ 制御部 DESCRIPTION OF SYMBOLS 10 Content reproduction apparatus, 11 Reception part, 12 Recording part, 13 Display part, 14 Switcher, 15 Gaze screen detection part, 16 Remote controller, 17 Light-receiving part, 18 Control part

Claims (6)

複数の画面を有する表示手段を備え、当該表示手段に複数のコンテンツを再生するコンテンツ再生装置において、
視聴者の注視点を検出し、上記複数の画面から注視画面を検出する注視画面検出手段と、
上記注視画面検出手段で検出された注視画面に表示されたコンテンツとの類似性に基づいて選択されたコンテンツを含むコンテンツリストを作成し、当該コンテンツリストに基づいて上記複数の画面に表示するコンテンツを切り替え再生する再生手段と
を備えることを特徴とするコンテンツ再生装置。 In a content reproduction apparatus comprising a display means having a plurality of screens and reproducing a plurality of contents on the display means,
Gaze screen detection means for detecting a viewer's gaze point and detecting a gaze screen from the plurality of screens;
A content list including content selected based on similarity to content displayed on the gaze screen detected by the gaze screen detection unit is created, and content to be displayed on the plurality of screens based on the content list is displayed. A content playback apparatus comprising: playback means for switching playback. 上記再生手段は、上記注視画面検出手段における注視画面検出結果において最も注視回数及び／又は注視時間が多い画面のコンテンツの属性情報に基づいて他のコンテンツとの類似性を評価し、上記コンテンツリストを作成することを特徴とする請求項１記載のコンテンツ再生装置。   The reproduction means evaluates the similarity with other contents based on the attribute information of the contents of the screen with the largest number of times of gaze and / or gaze time in the result of gaze screen detection in the gaze screen detection means, and the content list The content reproduction apparatus according to claim 1, wherein the content reproduction apparatus is created. 上記属性情報は、上記コンテンツのタイトル、ジャンル、キーワード、日時及び提供媒体の情報を含むことを特徴とする請求項２記載のコンテンツ再生装置。   3. The content reproducing apparatus according to claim 2, wherein the attribute information includes information on a title, a genre, a keyword, a date and time of the content, and a providing medium. 上記再生手段は、所定時間内における各画面の注視回数及び／又は注視時間に応じてコンテンツを切り替える画面を選択し、上記コンテンツリストに基づいてコンテンツを切り替え再生することを特徴とする請求項１記載のコンテンツ再生装置。   2. The playback unit according to claim 1, wherein the playback unit selects a screen for switching content according to the number of times of watching each screen within a predetermined time and / or the time for watching, and switches and plays back the content based on the content list. Content playback device. 上記コンテンツの切り替え要求を指示する指示手段を備え、
上記再生手段は、各画面に再生されたコンテンツについて、上記切り替え要求から過去一定時間までの注視回数及び／又は注視時間と閾値とを比較し、上記注視回数及び／又は注視時間が上記閾値以下の画面のコンテンツを上記コンテンツリストに基づいて切り替え再生することを特徴とする請求項１記載のコンテンツ再生装置。 Instructing means for instructing the content switching request,
The reproduction means compares the number of gazes and / or the gaze time from the switching request to the past fixed time with a threshold value for the content reproduced on each screen, and the gaze frequency and / or gaze time is equal to or less than the threshold value. 2. The content reproduction apparatus according to claim 1, wherein the content on the screen is switched and reproduced based on the content list. 複数の画面を有する表示手段に複数のコンテンツを再生するコンテンツ再生方法において、
視聴者の注視点を検出し、上記複数の画面から注視画面を検出する注視画面検出工程と、
上記注視画面検出工程で検出された注視画面に表示されたコンテンツとの類似性に基づいて選択されたコンテンツを含むコンテンツリストを作成し、当該コンテンツリストに基づいて上記複数の画面に表示するコンテンツを切り替え再生する再生工程と
を有することを特徴とするコンテンツ再生方法。 In a content reproduction method for reproducing a plurality of contents on a display means having a plurality of screens,
A gaze screen detection step of detecting a gaze point of a viewer and detecting a gaze screen from the plurality of screens;
A content list including content selected based on similarity to content displayed on the gaze screen detected in the gaze screen detection step is created, and content to be displayed on the plurality of screens based on the content list A content playback method comprising: a playback step of switching playback.
JP2005250320A 2005-08-30 2005-08-30 Content playback apparatus and content playback method Expired - Fee Related JP4609244B2 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2005250320A JP4609244B2 (en) 2005-08-30 2005-08-30 Content playback apparatus and content playback method

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2005250320A JP4609244B2 (en) 2005-08-30 2005-08-30 Content playback apparatus and content playback method

Publications (2)

Publication Number Publication Date
JP2007067739A true JP2007067739A (en) 2007-03-15
JP4609244B2 JP4609244B2 (en) 2011-01-12

Family

ID=37929429

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2005250320A Expired - Fee Related JP4609244B2 (en) 2005-08-30 2005-08-30 Content playback apparatus and content playback method

Country Status (1)

Country Link
JP (1) JP4609244B2 (en)

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2014021986A (en) * 2012-07-18 2014-02-03 Samsung Electronics Co Ltd Content provision method and display device using the same
KR20190056697A (en) * 2017-11-17 2019-05-27 에스케이브로드밴드주식회사 Apparatus for contents service and control method thereof

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH10191288A (en) * 1996-12-27 1998-07-21 Canon Inc Portable information transmission device and portable video telephone system
JP2000278626A (en) * 1999-03-29 2000-10-06 Sanyo Electric Co Ltd Multiple screens sound output controller
WO2005027512A1 (en) * 2003-09-11 2005-03-24 Matsushita Electric Industrial Co., Ltd. Content selection method and content selection device
JP2005333524A (en) * 2004-05-21 2005-12-02 Nippon Hoso Kyokai <Nhk> Support equipment and support program for program selection

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH10191288A (en) * 1996-12-27 1998-07-21 Canon Inc Portable information transmission device and portable video telephone system
JP2000278626A (en) * 1999-03-29 2000-10-06 Sanyo Electric Co Ltd Multiple screens sound output controller
WO2005027512A1 (en) * 2003-09-11 2005-03-24 Matsushita Electric Industrial Co., Ltd. Content selection method and content selection device
JP2005333524A (en) * 2004-05-21 2005-12-02 Nippon Hoso Kyokai <Nhk> Support equipment and support program for program selection

Cited By (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2014021986A (en) * 2012-07-18 2014-02-03 Samsung Electronics Co Ltd Content provision method and display device using the same
US9535499B2 (en) 2012-07-18 2017-01-03 Samsung Electronics Co., Ltd. Method and display apparatus for providing content
KR20190056697A (en) * 2017-11-17 2019-05-27 에스케이브로드밴드주식회사 Apparatus for contents service and control method thereof
KR102019237B1 (en) * 2017-11-17 2019-09-06 에스케이브로드밴드주식회사 Apparatus for contents service and control method thereof

Also Published As

Publication number Publication date
JP4609244B2 (en) 2011-01-12

Similar Documents

Publication Publication Date Title
US10051299B2 (en) Television system with aided user program searching
US20200037032A1 (en) Systems and methods for providing program suggestions in an interactive television program guide
KR100774168B1 (en) Video display apparatus and control method thereof including time shift function
US8453169B2 (en) Video output device and video output method
JP4766566B2 (en) Digital recording / reproducing apparatus, computer program, and server
US20070154168A1 (en) Systems and methods for accessing media program options based on program segment interest
US8793733B2 (en) Information processing apparatus, information processing method, and program for enabling computer to execute same method
JP2009543411A (en) Content replacement method
US20080136937A1 (en) Image processing apparatus, image processing method, and program
JP5543107B2 (en) Method and apparatus for generating recommendations for at least one content item
JP2007512735A (en) Insert commercials into a video stream based on surrounding program content
JP2009522860A (en) System and method for media program selection access based on program segment interest
JP2004519968A (en) Method and system for selecting locations in an image sequence
JP2012008789A (en) Moving image recommendation system and moving image recommendation method
JP2007158998A (en) Broadcast receiver and its video-recording program selection support method
JP2001275048A (en) Program recommending device
JP4609244B2 (en) Content playback apparatus and content playback method
JP2015119286A (en) Content server, content reproduction device, content reproduction control method, and content reproduction control program
JP2009290583A (en) Image recording and reproducing apparatus
JP2007306527A (en) Content display apparatus
JP4802618B2 (en) Content playback apparatus and content playback method
JP2014165752A (en) Information display device and information display method
KR101138896B1 (en) Display method and apparatus having picture-in-picture function
JP2009065597A (en) Preference information generating apparatus and preference information generating program
KR101481689B1 (en) Method and apparatus for detecting multimedia contents using number information

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20080627

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20100629

A521 Written amendment

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20100818

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20100914

A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20100927

FPAY Renewal fee payment (prs date is renewal date of database)

Free format text: PAYMENT UNTIL: 20131022

Year of fee payment: 3

FPAY Renewal fee payment (prs date is renewal date of database)

Free format text: PAYMENT UNTIL: 20131022

Year of fee payment: 3

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

LAPS Cancellation because of no payment of annual fees