JP2008312183A - Information processing apparatus, method, and program - Google Patents
Information processing apparatus, method, and program Download PDFInfo
- Publication number
- JP2008312183A JP2008312183A JP2007254992A JP2007254992A JP2008312183A JP 2008312183 A JP2008312183 A JP 2008312183A JP 2007254992 A JP2007254992 A JP 2007254992A JP 2007254992 A JP2007254992 A JP 2007254992A JP 2008312183 A JP2008312183 A JP 2008312183A
- Authority
- JP
- Japan
- Prior art keywords
- scene
- display
- unit
- attention
- bookmark
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
Images
Abstract
Description
本発明は、情報処理装置および方法、並びにプログラムに関し、特に、録画したコンテンツの中の視聴したいシーンを簡単に見つけ出すことができるようにする情報処理装置および方法、並びにプログラムに関する。 The present invention relates to an information processing apparatus and method, and a program, and more particularly, to an information processing apparatus and method, and a program for easily finding a scene to be viewed in recorded content.
図1は、テレビジョン放送番組を録画した録画再生装置において表示される録画番組一覧(以下、メニュー画面と称する)の例を示している。 FIG. 1 shows an example of a recorded program list (hereinafter referred to as a menu screen) displayed on a recording / playback apparatus that records a television broadcast program.
図1の例では、録画された各番組のサムネイル画像とタイトルが表示されている。このサムネイル画像は、例えば録画が開始されたときに取り込まれた番組の画像データから生成されたものであって、番組の放送開始から録画が開始された場合番組冒頭の画像のサムネイル画像となる。タイトルの表示は、例えばEPG(Electronic Program Guide)情報から抽出されたタイトル情報によって生成される。 In the example of FIG. 1, thumbnail images and titles of each recorded program are displayed. This thumbnail image is generated from, for example, image data of a program taken when recording is started, and becomes a thumbnail image of an image at the beginning of the program when recording is started from the start of broadcast of the program. The title display is generated, for example, by title information extracted from EPG (Electronic Program Guide) information.
ユーザによるリモートコントローラなどの操作により、メニュー画面の所定の番組に対応するサムネイル画像やタイトルの表示が選択されて、視聴する番組が指定されると、指定された番組のデータが記録媒体から読み出されて再生される。 When a thumbnail image or title display corresponding to a predetermined program on the menu screen is selected by a user operation on a remote controller and a program to be viewed is specified, the data of the specified program is read from the recording medium. To be played.
このようにしてユーザは、メニュー画面から視聴した番組を見つけ出し、それを視聴することができる。 In this way, the user can find the viewed program from the menu screen and view it.
例えば録画予約される番組に設定された番組の有効期限に基づいて、番組を分類し、分類された番組毎に録画番組一覧を表示する方法など、録画番組一覧表示方法が各種存在するが、この方法においてもその表示単位は、番組となっている(特許文献1)。
ところで、このメニュー画面は、上述したように、番組(図1の例では、野球番組、クイズ番組、サッカー番組)毎に、サムネイル画像とタイトルの表示が配置され、番組単位で構成されているので、ユーザは、番組単位でしか、視聴する番組を指定することができない。 By the way, as described above, this menu screen is composed of thumbnail images and titles for each program (baseball program, quiz program, soccer program in the example of FIG. 1), and is configured in units of programs. The user can designate a program to be viewed only on a program basis.
しかしながらこのように番組単位でしか視聴する番組を指定することができないと、ある番組のあるシーンを視聴したい場合(例えば、野球番組で放送されたある選手がホームランを打ったシーンから視聴したい場合)、ユーザは、まずメニュー画面からその番組の表示を選択して番組を再生させた後、そのシーンまで視聴する必要があった。 However, if it is possible to specify a program to be viewed only on a program basis in this way, if you want to view a certain scene of a certain program (for example, if you want to view from a scene in which a player broadcast on a baseball program hit a home run) First, the user needs to view the scene after selecting the display of the program from the menu screen to reproduce the program.
すなわち従来の録画番組等のメニュー画面では、簡単に、視聴したシーンを見つけ出し視聴することができなかった。 In other words, on a conventional menu screen for a recorded program or the like, it is not possible to easily find and view the viewed scene.
本発明では、録画したコンテンツの中の視聴したいシーンを簡単に見つけ出すことができるようにするものである。 According to the present invention, a scene to be viewed in recorded content can be easily found.
本発明の一側面の情報処理装置は、記録媒体に記録される映像コンテンツ又は記録媒体に既に記録されている映像コンテンツの再生処理中において、ユーザが注目したいシーンの指定入力を受け付ける受け付け手段と、前記受け付け手段により前記指定入力が受け付けられたタイミングに対応するシーンを、ユーザが注目したい注目シーンとして設定する設定手段と、前記注目シーンの内容を示す表示を生成するための付加情報を取得する取得手段と、前記付加情報に基づいて前記注目シーンの内容を示す表示を生成し、前記注目シーン毎に、前記注目シーンの内容を示す表示が配置された一覧画面を表示する表示手段とを備える。 An information processing apparatus according to an aspect of the present invention includes: a receiving unit that receives a designation input of a scene that a user wants to focus on during playback processing of video content recorded on a recording medium or video content already recorded on a recording medium; A setting unit that sets a scene corresponding to a timing at which the designation input is received by the receiving unit as a target scene that the user wants to pay attention to, and acquisition that acquires additional information for generating a display indicating the content of the target scene And display means for generating a display showing the contents of the attention scene based on the additional information and displaying a list screen in which a display showing the contents of the attention scene is arranged for each attention scene.
前記取得手段は、記録媒体に記録される映像コンテンツ又は記録媒体に既に記録されている映像コンテンツのシーンチェンジを検出する検出手段を備え、前記設定手段は、前記受け付け手段により前記指定入力が受け付けられたタイミングの直前の前記検出手段により検出されたシーンチェンジから始まるシーンを、前記注目シーンとして設定することができる。 The acquisition means includes detection means for detecting video content recorded on a recording medium or a scene change of video content already recorded on the recording medium, and the setting means accepts the designation input by the acceptance means. A scene starting from a scene change detected by the detection means immediately before the timing can be set as the attention scene.
前記取得手段は、前記注目シーンの画像特徴量に基づいて文字情報を抽出する抽出手段を備え、前記表示手段は、前記注目シーンの内容を示す表示として前記抽出手段により抽出された前記文字情報の表示を用いて前記一覧画面を生成し、それを表示することができる。 The acquisition unit includes an extraction unit that extracts character information based on an image feature amount of the target scene, and the display unit displays the character information extracted by the extraction unit as a display indicating the content of the target scene. The list screen can be generated using a display and displayed.
前記映像コンテンツに文字情報が多重化されている場合において、前記取得手段は、前記注目シーンの近傍に重畳された文字情報を抽出する抽出手段を備え、前記表示手段は、前記注目シーンの内容を示す表示として前記抽出手段により抽出された前記文字情報の表示を用いて前記一覧画面を生成し、それを表示することができる。 In the case where character information is multiplexed in the video content, the acquisition means includes extraction means for extracting character information superimposed in the vicinity of the scene of interest, and the display means displays the content of the scene of interest. The list screen can be generated by using the display of the character information extracted by the extraction means as the display to be displayed.
本発明の一側面の情報処理方法、又はプログラムは、記録媒体に記録される映像コンテンツ又は記録媒体に既に記録されている映像コンテンツの再生処理中において、ユーザが注目したいシーンの指定入力を受け付ける受け付けステップと、前記受け付けステップの処理で前記指定入力が受け付けられたタイミングに対応するシーンを、ユーザが注目したい注目シーンとして設定する設定ステップと、前記注目シーンの内容を示す表示を生成するための付加情報を取得する取得ステップと、前記付加情報に基づいて前記注目シーンの内容を示す表示を生成し、前記注目シーン毎に、前記注目シーンの内容を示す表示が配置された一覧画面を表示する表示ステップとを含む。 An information processing method or program according to one aspect of the present invention receives a designation input of a scene that a user wants to focus on during playback processing of video content recorded on a recording medium or video content already recorded on a recording medium. A setting step for setting a scene corresponding to the timing at which the designation input is received in the processing of the receiving step as a target scene that the user wants to focus on, and an addition for generating a display indicating the content of the target scene An acquisition step for acquiring information, and a display for generating a display showing the content of the attention scene based on the additional information, and displaying a list screen in which a display showing the content of the attention scene is arranged for each attention scene Steps.
本発明の一側面の情報処理装置、情報処理方法、又はプログラムにおいては、記録媒体に記録される映像コンテンツ又は記録媒体に既に記録されている映像コンテンツの再生処理中において、ユーザが注目したいシーンの指定入力が受け付けられ、前記指定入力が受け付けられたタイミングに対応するシーンが、ユーザが注目したい注目シーンとして設定され、前記注目シーンの内容を示す表示を生成するための付加情報が取得され、前記付加情報に基づいて前記注目シーンの内容を示す表示が生成され、前記注目シーン毎に、前記注目シーンの内容を示す表示が配置された一覧画面が表示される。 In the information processing apparatus, the information processing method, or the program according to one aspect of the present invention, the scene of the scene that the user wants to pay attention to during the reproduction process of the video content recorded on the recording medium or the video content already recorded on the recording medium. A designated input is accepted, a scene corresponding to the timing at which the designated input is accepted is set as an attention scene that the user wants to pay attention to, and additional information for generating a display indicating the contents of the attention scene is acquired, A display indicating the contents of the attention scene is generated based on the additional information, and a list screen in which a display indicating the contents of the attention scene is arranged for each attention scene.
本発明の一側面によれば、録画したコンテンツの中の視聴したいシーンを簡単に見つけ出すことができる。 According to one aspect of the present invention, it is possible to easily find a scene to be viewed in recorded content.
以下に本発明の実施の形態を説明するが、本発明の構成要件と、明細書又は図面に記載の実施の形態との対応関係を例示すると、次のようになる。この記載は、本発明をサポートする実施の形態が、明細書又は図面に記載されていることを確認するためのものである。従って、明細書又は図面中には記載されているが、本発明の構成要件に対応する実施の形態として、ここには記載されていない実施の形態があったとしても、そのことは、その実施の形態が、その構成要件に対応するものではないことを意味するものではない。逆に、実施の形態が構成要件に対応するものとしてここに記載されていたとしても、そのことは、その実施の形態が、その構成要件以外の構成要件には対応しないものであることを意味するものでもない。 Embodiments of the present invention will be described below. Correspondences between the constituent elements of the present invention and the embodiments described in the specification or the drawings are exemplified as follows. This description is intended to confirm that the embodiments supporting the present invention are described in the specification or the drawings. Therefore, even if there is an embodiment which is described in the specification or the drawings but is not described here as an embodiment corresponding to the constituent elements of the present invention, that is not the case. It does not mean that the form does not correspond to the constituent requirements. Conversely, even if an embodiment is described here as corresponding to a configuration requirement, that means that the embodiment does not correspond to a configuration requirement other than the configuration requirement. It's not something to do.
本発明の一側面の情報処理装置は、
記録媒体に記録される映像コンテンツ又は記録媒体に既に記録されている映像コンテンツの再生処理中において、ユーザが注目したいシーンの指定入力を受け付ける受け付け手段(例えば、図2の制御部20)と、
前記受け付け手段により前記指定入力が受け付けられたタイミングに対応するシーンを、ユーザが注目したい注目シーンとして設定する設定手段(例えば、図2のメニュー画面表示制御部13)と、
前記注目シーンの内容を示す表示を生成するための付加情報を取得する取得手段(例えば、図2のブックマーク情報取得部12とメニュー画面表示制御部13)と、
前記付加情報に基づいて前記注目シーンの内容を示す表示を生成し、前記注目シーン毎に、前記注目シーンの内容を示す表示が配置された一覧画面を表示する表示手段(例えば、図2のメニュ画面表示制御部13)と
を備える。
An information processing apparatus according to one aspect of the present invention includes:
Receiving means (for example, the
Setting means (for example, the menu screen
Acquisition means (for example, bookmark
Display means for generating a display showing the contents of the attention scene based on the additional information and displaying a list screen in which a display showing the contents of the attention scene is arranged for each of the attention scenes (for example, the menu of FIG. 2). And a screen display control unit 13).
前記取得手段は、記録媒体に記録される映像コンテンツ又は記録媒体に既に記録されている映像コンテンツのシーンチェンジを検出する検出手段(例えば、図2のシーンチェンジ検出部31)を備え、
前記設定手段は、前記受け付け手段により前記指定入力が受け付けられたタイミングの直前の前記検出手段により検出されたシーンチェンジから始まるシーンを、前記注目シーンとして設定することができる。
The acquisition means includes detection means (for example, the scene
The setting means can set a scene starting from a scene change detected by the detection means immediately before the timing when the designation input is received by the receiving means as the scene of interest.
前記取得手段は、前記注目シーンの画像特徴量に基づいて文字情報を抽出する抽出手段(例えば、図2の付加情報抽出部33)を備え、
前記表示手段は、前記注目シーンの内容を示す表示として前記抽出手段により抽出された前記文字情報の表示を用いて前記一覧画面を生成し、それを表示することができる。
The acquisition unit includes an extraction unit (for example, the additional
The display means can generate the list screen by using the display of the character information extracted by the extraction means as a display indicating the content of the attention scene, and display it.
前記映像コンテンツに文字情報が多重化されている場合において、前記取得手段は、前記注目シーンの近傍に重畳された文字情報を抽出する抽出手段(例えば、図2の付加情報抽出部33)を備え、
前記表示手段は、前記注目シーンの内容を示す表示として前記抽出手段により抽出された前記文字情報の表示を用いて前記一覧画面を生成し、それを表示することができる。
In the case where character information is multiplexed in the video content, the acquisition means includes extraction means (for example, additional
The display means can generate the list screen by using the display of the character information extracted by the extraction means as a display indicating the content of the attention scene, and display it.
本発明の一側面の情報処理方法およびプログラムは、
記録媒体に記録される映像コンテンツ又は記録媒体に既に記録されている映像コンテンツの再生処理中において、ユーザが注目したいシーンの指定入力を受け付ける受け付けステップ(例えば、図5のステップS3)と、
前記受け付けステップの処理で前記指定入力が受け付けられたタイミングに対応するシーンを、ユーザが注目したい注目シーンとして設定する設定ステップ(例えば、図5のステップS4)と、
前記注目シーンの内容を示す表示を生成するための付加情報を取得する取得ステップ(例えば、図5のステップS5)と、
前記付加情報に基づいて前記注目シーンの内容を示す表示を生成し、前記注目シーン毎に、前記注目シーンの内容を示す表示が配置された一覧画面を表示する表示ステップ(例えば、図7のステップS11およびステップS12)と を含む。
An information processing method and program according to one aspect of the present invention include:
A receiving step (for example, step S3 in FIG. 5) for receiving designation input of a scene that the user wants to pay attention during the reproduction processing of the video content recorded on the recording medium or the video content already recorded on the recording medium;
A setting step (for example, step S4 in FIG. 5) for setting a scene corresponding to the timing at which the designation input is received in the processing of the receiving step as a target scene that the user wants to pay attention to;
An acquisition step (for example, step S5 in FIG. 5) for acquiring additional information for generating a display indicating the content of the scene of interest;
A display step of generating a display showing the content of the attention scene based on the additional information and displaying a list screen in which a display showing the content of the attention scene is arranged for each of the attention scenes (for example, step of FIG. 7) S11 and step S12).
図2は、本発明を適用した記録再生装置1の構成例を示している。この記録再生装置1は、記録媒体に記録される映像コンテンツ又は記録媒体に既に記録されている映像コンテンツの再生処理中において、ユーザが注目したいシーンを指定する操作(以下、ブックマーク操作)を受け付け、そのブックマーク操作のタイミングに対応する注目シーン(以下、ブックマークが付されたシーンと称する)の所定の情報に基づいて、ブックマークが付されたシーンを表すサムネイル画像やコメント(以下、ブックマーク表示と称する)を生成し、例えば、図3に示すような、ブックマークが付されたシーン毎にブックマーク表示が配置された録画番組の一覧画面(すなわち、メニュー画面)を表示する。
FIG. 2 shows a configuration example of a recording / reproducing
図3の例では、野球番組視聴中のブックマーク操作により指定された、所定の選手である「竹坂選手」がホームランを打ったときのシーンのサムネイル画像、そのシーンの所定の情報から生成されたコメント(竹坂のホームラン)および野球番組のタイトル(図中、カッコ書き)、野球番組視聴中のブックマーク操作により指定された、所定の選手である「竹坂選手」が三振したときのシーンのサムネイル画像、そのシーンの所定の情報から生成されたコメント(竹坂の三振)および野球番組のタイトル、クイズ番組視聴中のブックマーク操作により指定された、解答者が最終問題に挑戦しているときのシーンのサムネイル画像、そのシーンの所定の情報から生成されたコメント(最終問題100万円に挑戦)およびクイズ番組のタイトル、並びにサッカー番組視聴中のブックマーク操作により指定された、所定の選手である「小田選手」がゴールを入れたときのサムネイル画像、そのシーンの所定の情報から生成されたコメント(小田選手のゴール)およびサッカー番組のタイトルが、シーン毎に表示されている。 In the example of FIG. 3, a thumbnail image of a scene when a predetermined player “Takesaka” hits a home run specified by a bookmark operation while viewing a baseball program is generated from predetermined information of the scene. Thumbnail of a scene when a given player “Takezaka” strikes out with a comment (Takesaka's home run), a baseball program title (in parentheses in the figure), and a bookmark operation while viewing the baseball program A scene when the answerer is challenging the final question, specified by a bookmark operation while viewing an image, a comment (Takesaka's strikeout) and a baseball program title, and a quiz program, generated from predetermined information of the scene Thumbnail images, comments generated from certain information about the scene (the final question is 1 million yen challenge) and quiz program titles, A thumbnail image when a predetermined player “Oda”, who is designated by a bookmark operation while watching a soccer program, puts a goal, a comment generated from the predetermined information of the scene (Goal of Oda player), and The title of the soccer program is displayed for each scene.
このようなブックマークが付されたシーン毎のブックマーク表示からなるメニュー画面が操作されて、所定のブックマーク表示が指定されると、記録再生装置1は、例えばその指定されたシーンからその番組の再生を開始する。
When a menu screen including a bookmark display for each scene with such a bookmark is operated and a predetermined bookmark display is designated, the recording / reproducing
なおここでは、録画する又は既に録画されているテレビジョン放送番組にブックマークを付す場合を例として説明するが、画像データを含んで構成される他のコンテンツについても同様に本発明を適用することができる。 Here, a case where a bookmark is added to a recorded or already recorded television broadcast program will be described as an example. However, the present invention can be similarly applied to other contents including image data. it can.
図2に戻り入力部11には、再生部17により再生されている、記録中の番組の画像データ又は既に記録媒体16に記録されている番組の画像データを入力し、ブックマーク情報取得部12と記録制御部15に供給する。
Returning to FIG. 2, the image data of the program being recorded or the image data of the program already recorded on the recording medium 16 being reproduced by the
ブックマーク情報取得部12は、制御部20の制御に従って、入力部11から供給された画像データ等から、ブックマーク表示を生成するために必要な情報(以下、ブックマーク情報と称する)を取得し、メニュー画面表示制御部13に供給する。
The bookmark
メニュー画面表示制御部13は、制御部20の制御に従って、ブックマーク情報取得部12から供給されるブックマーク情報から、メニュー画面を生成するためのブックマーク情報を抽出し、記憶部14に記憶させる。
Under the control of the
メニュー画面表示制御部13はまた、制御部20の制御に従って、記憶部14に記憶されているブックマーク情報からブックマーク表示を生成するとともに、図3に示したような、生成したブックマーク表示をブックマークが付されたシーン毎に配置してメニュー画面を生成し、表示部18に表示させる。
The menu screen
記録制御部15は、制御部20の制御に従って、入力部11から供給された画像データを記録媒体16に記録させる。
The
再生部17は、制御部20の制御に従って、別途入力される画像データや記録媒体16に記録されている画像データを再生し、表示部18および入力部11に供給する。
The
操作部19は、各種ボタンやリモートコントローラからのコントロール信号を受信する受信部等から構成されており、ユーザの各種ボタン等に対する操作内容を入力し、制御部20に通知する。
The operation unit 19 includes various buttons and a reception unit that receives control signals from the remote controller, and inputs operation contents of various buttons and the like of the user and notifies the
制御部20は、各部を制御し、後述するブックマーク処理等を実行させる。
The
次に、ブックマーク情報取得部12の構成例について説明する。
Next, a configuration example of the bookmark
シーンチェンジ検出部31は、入力部11から供給された画像データを解析し、シーンチェンジを検出する。例えば、番組の本編からコマーシャルに切り替わるポイント、夜のシーンから昼間のシーンに切り替わるポイント、又は登場している人物や物体が替わるポイントが、シーンチェンジとして検出される。
The scene
シーンチェンジ検出部31は、シーンチェンジを検出したとき、その旨を、サムネイル画像生成部32とメニュー画面表示制御部13に供給する。
When the scene
サムネイル画像生成部32は、例えばシーンチェンジ検出部31からシーンチェンジが検出された旨が通知されたとき、シーンチェンジがあった画像データからサムネイル画像を生成し、メニュー画面表示制御部13に供給する。
For example, when the scene
付加情報抽出部33には、入力部11からの画像データと、EPG情報が別途入力される。付加情報抽出部33は、図4に示すように構成され、タイトル抽出部51は、入力されたEPG情報から番組のタイトル情報を抽出し、メニュー画面表示制御部13に供給する。
The additional
特徴量抽出部52は、入力された画像データの所定の特徴量を抽出し、抽出した特徴量をキーワード抽出部53およびメニュー画面表示制御部13に供給する。
The feature
キーワード抽出部53は、特徴量抽出部52から供給された特徴量からキーワードを抽出し、メニュー画面表示制御部13に供給する。
The
例えば付加情報抽出部33に供給された画像にクローズドキャプション(closed captioning)の文字情報が多重化されている場合には、特徴量抽出部52からは、その文字情報に対応する特徴量が供給されるので、キーワード抽出部53は、その特徴量に対応する文字情報(すなわちテキスト)を生成し、メニュー画面表示制御部13に供給する。
For example, when character information of closed captioning is multiplexed on the image supplied to the additional
また文字情報が含まれていなくても、例えば、「山」や「城」等の所定の物体の像が含まれている場合、特徴量抽出部52からそれらの像に対応する特徴量が供給されるので、キーワード抽出部53は、その特徴量に対応するキーワード(例えば、「山」と「城」という言葉、またその「山」や「城」の名称を特定できる場合はその名称)を抽出し、メニュー画面表示制御部13に供給する。
Even if character information is not included, for example, when an image of a predetermined object such as “mountain” or “castle” is included, feature amounts corresponding to those images are supplied from the feature
次に、記録再生装置1のブックマーク処理を、図5のフローチャートを参照して説明する。
Next, bookmark processing of the recording / reproducing
ステップS1において、記録再生装置1の制御部20は、再生部17を制御して、別途入力される画像データ又は記録媒体16に既に記録されている画像データを再生させる。
In step S <b> 1, the
これにより再生部17により再生された画像データが表示部18に表示されるとともに、入力部11に入力される。入力部11は、入力した画像データを、記録制御部15およびブックマーク情報取得部12に供給する。なお記録媒体16に記録されている画像データが再生される場合、入力部11は、記録制御部15への画像データの供給を行わない。
As a result, the image data reproduced by the
次に、ステップS2において、制御部20は、ブックマーク情報取得部12を制御して、ブックマーク情報の取得を開始させる。
Next, in step S <b> 2, the
これにより、ブックマーク情報取得部12は、入力部11から供給された画像データ等からのブックマーク情報の取得を開始する。
As a result, the bookmark
すなわちシーンチェンジ検出部31は、シーンチェンジの検出を開始し、サムネイル画像生成部32は、サムネイル画像の生成を開始し、付加情報抽出部33は、付加情報の抽出を開始する。
That is, the scene
ステップS3において、制御部20は、操作部19から、再生中の画像にブックマークを付すためのブックマーク操作がなされた旨が入力されるまで待機し、その旨が入力されたと判定した場合、ステップS4において、メニュー画面表示制御部13に、メニュー画面を生成するためのブックマーク情報の取得を指示する。これによりメニュー画面表示制御部13は、例えばブックマーク操作がなされたときのシーンの直前に検出されたシーンチェンジ位置を取得し、シーンチェンジがあった画像をブックマークを付す画像として、その画像の位置を検出する。
In step S3, the
例えば図6に示すようなシーンが図中左側のシーンC1から順に再生されて表示部18に表示される場合において、上向きの矢印Aが示すシーンC6が表示されているときにブックマーク操作がなされた場合、上向きの矢印Bが示す、シーンチェンジ検出部31により検出された、山の風景の画像から人の顔の画像へのシーンチェンジがあったシーンC4に、ブックマークが付される。
For example, when a scene as shown in FIG. 6 is reproduced in order from the scene C1 on the left side of the drawing and displayed on the
次にステップS5において、メニュー画面表示制御部13は、ブックマーク情報取得部12(のサムネイル画像生成部32および付加情報抽出部33)から供給されたサムネイル画像および付加情報の中から、ブックマークが付された画像(図6の例では、フレームC4)から取得されたサムネイル画像および付加情報を抽出し、メニュー画面を生成するためのブックマーク情報として記憶部14に記憶させる。
In step S5, the menu screen
ブックマークが付される映像コンテンツにクローズドキャプションの文字情報が多重化されている場合には、ブックマーク情報取得部12から供給される、その文字画像から抽出された文字情報(すなわちテキスト)が記憶部14に記憶される。
When the closed caption character information is multiplexed on the video content to be bookmarked, the character information (that is, text) extracted from the character image supplied from the bookmark
また文字情報が含まれていなくても、例えば、「山」や「城」等の物体の像が含まれている場合、ブックマーク情報取得部12から供給される、その画像から抽出された、その物体を意味する言葉(例えば、「山」や「城」の言葉)、又はその物体の名称等が記憶部14に記憶される。
Even if character information is not included, for example, when an image of an object such as “mountain” or “castle” is included, the bookmark
次に、ステップS6において、制御部20は、画像データの再生を終了する旨の指令が操作部19から入力されたか否かを判定し、入力されていないと判定した場合、ステップS3に戻り、再度、ブックマーク操作がなされるまで待機する。
Next, in step S6, the
ステップS6で、画像データの再生を終了する指令が入力されたとき、制御部20は、ブックマーク処理を終了させる。
When an instruction to end the reproduction of the image data is input in step S6, the
次に、メニュー画面の表示処理を、図7のフローチャートを参照して説明する。 Next, menu screen display processing will be described with reference to the flowchart of FIG.
メニュー画面表示制御部13は、制御部20から、メニュー画面表示の指令を受け付けると、ステップS11において、記憶部14から、上述したブックマーク処理で記憶されたメニュー画面を生成するためのブックマーク情報を読み出す。
When the menu screen
ステップS12において、メニュー画面表示制御部13は、ステップS11で読み出したブックマーク情報から、ブックマーク表示を生成する。例えばブックマーク情報として文字情報が記憶されている場合、その文字情報から所定の言葉(例えば、図3の例では、「竹坂のホームラン」等)を抽出したり、サムネイル画像やタイトルを表示するためのデータを生成する。
In step S12, the menu screen
メニュー画面表示制御部13は、生成したブックマーク表示を、図3に示したように、ブックマークが付されたシーン毎に表示されるように配置してメニュー画面を生成し、表示部18に表示させる。
The menu screen
このようにしてブックマークが付されたシーン毎にブックマーク表示が表示されるメニュー画面がユーザに提示される。 In this way, a menu screen on which a bookmark display is displayed for each scene with a bookmark is presented to the user.
以上のように、記録媒体16に記録される画像データ又は記録媒体16に既に記録されている画像データの再生処理中において、ユーザからの、再生中のシーンに対するブックマーク操作を受け付け、その操作のタイミングに対応するシーンにブックマークを付与し、そのシーンから得られた付加情報に基づいてブックマーク表示を生成し、ブックマークが付されたシーン毎にブックマーク表示が表示されるように配置されたメニュー画面を表示するようにしたので、ユーザは、そのメニュー画面から、視聴したいシーンを容易に見つけ出すことができる。 As described above, during the reproduction process of the image data recorded on the recording medium 16 or the image data already recorded on the recording medium 16, a bookmark operation for the scene being reproduced from the user is received and the timing of the operation is received. A bookmark is attached to the scene corresponding to, a bookmark display is generated based on the additional information obtained from the scene, and a menu screen arranged so that the bookmark display is displayed for each scene with the bookmark is displayed. Thus, the user can easily find the scene he / she wants to view from the menu screen.
またブックマーク操作のタイミングが遅れても、例えば直前のシーンチェンジがあったシーンにブックマークが遡って付されるので、ブックマークを適切に付することができる。図6の例では、人の顔の画像が表示され始めたシーンC4にブックマークを付すことができる。 Even if the timing of the bookmark operation is delayed, for example, since the bookmark is retroactively attached to the scene having the previous scene change, the bookmark can be appropriately attached. In the example of FIG. 6, a bookmark can be attached to the scene C <b> 4 where the human face image has started to be displayed.
またブックマークが付されたシーンにクローズドキャプションの文字情報が多重化されている場合には、その文字情報をブックマーク表示として表示することができるので、クローズドキャプションの文字はそのシーンの内容を説明していることから、そのシーンを適切に表すコメント(図3の例では、「竹坂のホームラン」等)を、ブックマーク表示として表示することができる。 In addition, if the text information of the closed caption is multiplexed in the bookmarked scene, the text information can be displayed as a bookmark display, so the closed caption text explains the contents of the scene. Therefore, a comment (such as “Takesaka's home run” in the example of FIG. 3) that appropriately represents the scene can be displayed as a bookmark display.
なおユーザの操作部19に対する操作により、図3に示したようなメニュー画面の所定のブックマーク表示が選択されると、そのブックマーク表示に対応するシーンから再生が開始されるが、例えばブックマーク情報として、ブックマークが付されたシーンの後のシーンチェンジ点を保持しておき、そのシーンチェンジ点まで再生し、その後は、再生を停止するようにすることもできる。 When a predetermined bookmark display on the menu screen as shown in FIG. 3 is selected by the user's operation on the operation unit 19, playback is started from a scene corresponding to the bookmark display. For example, as bookmark information, It is also possible to retain a scene change point after the bookmarked scene, play back to that scene change point, and then stop playback.
図8は、記録再生装置1の他の構成例を示している。この記録再生装置には、図2の記録再生装置1に、画像分割部61がさらに設けられている。
FIG. 8 shows another configuration example of the recording / reproducing
図8の記録再生装置1は、図9に示すように、ユーザの操作部19に対する所定の操作によりポインタ19Aで、再生中のシーンの任意の位置が指定されると、その位置に対応する領域の画像データから付加情報が抽出されるようになされている。
As shown in FIG. 9, when the recording /
すなわち制御部20は、再生中に、操作部19からポインタ19Aで所定の位置が指定された旨が入力されると、その位置を画像分割部61に通知する。
That is, when an indication that a predetermined position is designated by the
画像分割部61は、入力部11から供給された画像データから、制御部20から通知された位置に対応する領域(図9の例では、人の画像の領域)の画像データを抽出し、その画像データを、サムネイル画像生成部32および付加情報抽出部33に供給する。
The
サムネイル画像生成部32は、画像分割部61から供給された分割画像からサムネイル画像を生成し、メニュー画面表示制御部13に供給する。
The thumbnail
付加情報抽出部33は、画像分割部61から供給された分割画像の特徴量から付加情報を抽出し、メニュー画面表示制御部13に供給する。図9の例の場合、付加情報抽出部33は、画像分割部61から供給された画像データから、人の像であることを認識し、人の像であることをメニュー画面表示制御部13に通知する。また画像分割部61から供給された人の画像データを顔認識し、認識した人の名前等を特定できる場合には、特定した名前等を、メニュー画面表示制御部13に通知することもできる。
The additional
メニュー画面表示制御部13は、サムネイル画像生成部32から供給されたサムネイル画像および付加情報抽出部33から供給された付加情報を、メニュー画面を生成するためのブックマーク情報として記憶部14に記憶させる。
The menu screen
このように注目したいシーンとともに、その所定の領域を指定することができるようにしたので、例えば図10に示すように、図3の例において、ブックマークが付されたシーンについて、ポインタ19Aでそのときのピッチャーの像を指定すると、図11に示すように、そのピッチャーに応じたコメント(例えば、「上野、ホームラン打たれる」)をブックマーク表示として表示させることができる。 Since the predetermined area can be designated together with the scene to be noticed in this way, as shown in FIG. 10, for example, in the example of FIG. When the pitcher image is designated, a comment corresponding to the pitcher (for example, “Ueno hits home run”) can be displayed as a bookmark display, as shown in FIG.
図12は、上述した一連の処理をプログラムにより実行するコンピュータのハードウェアの構成例を示すブロック図である。 FIG. 12 is a block diagram illustrating a hardware configuration example of a computer that executes the above-described series of processing by a program.
コンピュータにおいて、CPU(Central Processing Unit)201,ROM(Read Only Memory)202,RAM(Random Access Memory)203は、バス204により相互に接続されている。
In a computer, a central processing unit (CPU) 201, a read only memory (ROM) 202, and a random access memory (RAM) 203 are connected to each other by a
バス204には、さらに、入出力インタフェース205が接続されている。入出力インタフェース205には、キーボード、マウス、マイクロホンなどよりなる入力部206、ディスプレイ、スピーカなどよりなる出力部207、ハードディスクや不揮発性のメモリなどよりなる記憶部208、ネットワークインタフェースなどよりなる通信部209、磁気ディスク、光ディスク、光磁気ディスク、あるいは半導体メモリなどのリムーバブルメディア211を駆動するドライブ210が接続されている。
An input /
以上のように構成されるコンピュータでは、CPU201が、例えば、記憶部208に記憶されているプログラムを、入出力インタフェース205およびバス204を介して、RAM203にロードして実行することにより、上述した一連の処理が行われる。
In the computer configured as described above, the
コンピュータ(CPU201)が実行するプログラムは、例えば、磁気ディスク(フレキシブルディスクを含む)、光ディスク(CD-ROM(Compact Disc-Read Only Memory),DVD(Digital Versatile Disc)等)、光磁気ディスク、もしくは半導体メモリなどよりなるパッケージメディアであるリムーバブルメディア211に記録して、あるいは、ローカルエリアネットワーク、インターネット、デジタル衛星放送といった、有線又は無線の伝送媒体を介して提供される。
The program executed by the computer (CPU 201) is, for example, a magnetic disk (including a flexible disk), an optical disk (CD-ROM (Compact Disc-Read Only Memory), DVD (Digital Versatile Disc), etc.), a magneto-optical disk, or a semiconductor. The program is recorded on a
そして、プログラムは、リムーバブルメディア211をドライブ210に装着することにより、入出力インタフェース205を介して、記憶部208にインストールすることができる。また、プログラムは、有線又は無線の伝送媒体を介して、通信部209で受信し、記憶部208にインストールすることができる。その他、プログラムは、ROM202や記憶部208に、あらかじめインストールしておくことができる。
The program can be installed in the
なお、コンピュータが実行するプログラムは、本明細書で説明する順序に沿って時系列に処理が行われるプログラムであっても良いし、並列に、あるいは呼び出しが行われたとき等の必要なタイミングで処理が行われるプログラムであっても良い。 The program executed by the computer may be a program that is processed in time series in the order described in this specification, or in parallel or at a necessary timing such as when a call is made. It may be a program for processing.
11 入力部, 12 ブックマーク情報取得部, 13 メニュー画面表示制御部, 14 記憶部, 15 記録制御部, 16 記録媒体, 17 再生部, 18 表示部, 19 操作部, 20 制御部, 31 シーンチェンジ検出部, 32 サムネイル画像生成部, 33 付加情報抽出部, 51 タイトル抽出部, 52 特徴量抽出部, 53 キーワード抽出部, 61 画像分割部
DESCRIPTION OF
Claims (6)
前記受け付け手段により前記指定入力が受け付けられたタイミングに対応するシーンを、ユーザが注目したい注目シーンとして設定する設定手段と、
前記注目シーンの内容を示す表示を生成するための付加情報を取得する取得手段と、
前記付加情報に基づいて前記注目シーンの内容を示す表示を生成し、前記注目シーン毎に、前記注目シーンの内容を示す表示が配置された一覧画面を表示する表示手段と
を備える情報処理装置。 Receiving means for receiving a designation input of a scene that the user wants to pay attention during the reproduction processing of the video content recorded on the recording medium or the video content already recorded on the recording medium;
A setting unit that sets a scene corresponding to the timing at which the designation input is received by the receiving unit as a target scene that the user wants to focus on;
Acquisition means for acquiring additional information for generating a display indicating the content of the scene of interest;
An information processing apparatus comprising: display means for generating a display indicating the content of the attention scene based on the additional information, and displaying a list screen in which a display indicating the content of the attention scene is arranged for each attention scene.
前記設定手段は、前記受け付け手段により前記指定入力が受け付けられたタイミングの直前の前記検出手段により検出されたシーンチェンジから始まるシーンを、前記注目シーンとして設定する
請求項1に記載の情報処理装置。 The acquisition means includes a detection means for detecting a video content recorded on a recording medium or a scene change of a video content already recorded on the recording medium,
The information processing apparatus according to claim 1, wherein the setting unit sets a scene starting from a scene change detected by the detection unit immediately before the timing when the designation input is received by the receiving unit as the attention scene.
前記表示手段は、前記注目シーンの内容を示す表示として前記抽出手段により抽出された前記文字情報の表示を用いて前記一覧画面を生成し、それを表示する
ことを特徴とする請求項1に記載の情報処理装置。 The acquisition unit includes an extraction unit that extracts character information based on an image feature amount of the target scene,
The said display means produces | generates the said list screen using the display of the said character information extracted by the said extraction means as a display which shows the content of the said attention scene, and displays it. Information processing device.
前記表示手段は、前記注目シーンの内容を示す表示として前記抽出手段により抽出された前記文字情報の表示を用いて前記一覧画面を生成し、それを表示する
請求項1に記載の情報処理装置。 In the case where character information is multiplexed in the video content, the acquisition means includes extraction means for extracting character information superimposed in the vicinity of the scene of interest,
The information processing apparatus according to claim 1, wherein the display unit generates the list screen using the display of the character information extracted by the extraction unit as a display indicating the content of the attention scene, and displays the list screen.
前記受け付けステップの処理で前記指定入力が受け付けられたタイミングに対応するシーンを、ユーザが注目したい注目シーンとして設定する設定ステップと、
前記注目シーンの内容を示す表示を生成するための付加情報を取得する取得ステップと、
前記付加情報に基づいて前記注目シーンの内容を示す表示を生成し、前記注目シーン毎に、前記注目シーンの内容を示す表示が配置された一覧画面を表示する表示ステップと
を含む情報処理方法。 A receiving step of receiving a designation input of a scene that the user wants to pay attention during the reproduction process of the video content recorded on the recording medium or the video content already recorded on the recording medium;
A setting step for setting a scene corresponding to the timing at which the designation input is received in the process of the receiving step as a target scene that the user wants to pay attention to;
An acquisition step of acquiring additional information for generating a display indicating the content of the attention scene;
A display step of generating a display indicating the content of the attention scene based on the additional information, and displaying a list screen in which a display indicating the content of the attention scene is arranged for each of the attention scenes.
前記受け付けステップの処理で前記指定入力が受け付けられたタイミングに対応するシーンを、ユーザが注目したい注目シーンとして設定する設定ステップと、
前記注目シーンの内容を示す表示を生成するための付加情報を取得する取得ステップと、
前記付加情報に基づいて前記注目シーンの内容を示す表示を生成し、前記注目シーン毎に、前記注目シーンの内容を示す表示が配置された一覧画面を表示する表示ステップと
を含む情報処理をコンピュータに実行させるプログラム。 A receiving step of receiving a designation input of a scene that the user wants to pay attention during the reproduction process of the video content recorded on the recording medium or the video content already recorded on the recording medium;
A setting step for setting a scene corresponding to the timing at which the designation input is received in the process of the receiving step as a target scene that the user wants to pay attention to;
An acquisition step of acquiring additional information for generating a display indicating the content of the attention scene;
A computer that generates a display showing the contents of the scene of interest based on the additional information, and displays a list screen in which a display showing the contents of the scene of interest is arranged for each of the scenes of interest. Program to be executed.
Priority Applications (2)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2007254992A JP2008312183A (en) | 2007-05-15 | 2007-09-28 | Information processing apparatus, method, and program |
US12/104,025 US8693843B2 (en) | 2007-05-15 | 2008-04-16 | Information processing apparatus, method, and program |
Applications Claiming Priority (2)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2007129516 | 2007-05-15 | ||
JP2007254992A JP2008312183A (en) | 2007-05-15 | 2007-09-28 | Information processing apparatus, method, and program |
Publications (1)
Publication Number | Publication Date |
---|---|
JP2008312183A true JP2008312183A (en) | 2008-12-25 |
Family
ID=40125081
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2007254992A Pending JP2008312183A (en) | 2007-05-15 | 2007-09-28 | Information processing apparatus, method, and program |
Country Status (2)
Country | Link |
---|---|
JP (1) | JP2008312183A (en) |
CN (1) | CN101308692A (en) |
Cited By (8)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2010176786A (en) * | 2009-01-05 | 2010-08-12 | Panasonic Corp | Controller, video recording device, and menu display device |
WO2010125962A1 (en) | 2009-04-30 | 2010-11-04 | ソニー株式会社 | Display control device, display control method, and program |
EP2447946A2 (en) | 2010-10-27 | 2012-05-02 | Sony Corporation | Two dimensional timeline with thumbnail bookmarks for content search in video surveilance system. |
WO2012070180A1 (en) * | 2010-11-24 | 2012-05-31 | 株式会社Jvcケンウッド | Chapter creation device, chapter creation method, and chapter creation program |
US8571381B2 (en) | 2011-10-18 | 2013-10-29 | Sony Corporation | Image processing apparatus, image processing method, and program |
CN103733563A (en) * | 2011-08-12 | 2014-04-16 | 索尼公司 | Information processing device, signature-generation device, information processing method, signature-generation method, and program |
CN103931136A (en) * | 2011-08-29 | 2014-07-16 | 索尼公司 | Information processing device, signature generation device, information processing method, signature generation method, and program |
JP2022095287A (en) * | 2020-12-16 | 2022-06-28 | 株式会社コロプラ | Program, information processing method and information processing device |
Families Citing this family (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
KR101354615B1 (en) | 2009-08-18 | 2014-01-22 | 소니 컴퓨터 엔터테인먼트 인코포레이티드 | Information processing device, information processing method, information storage medium and program |
CN105898583B (en) * | 2015-01-26 | 2020-06-16 | 北京搜狗科技发展有限公司 | Image recommendation method and electronic equipment |
-
2007
- 2007-09-28 JP JP2007254992A patent/JP2008312183A/en active Pending
-
2008
- 2008-05-15 CN CNA200810099236XA patent/CN101308692A/en active Pending
Cited By (12)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2010176786A (en) * | 2009-01-05 | 2010-08-12 | Panasonic Corp | Controller, video recording device, and menu display device |
WO2010125962A1 (en) | 2009-04-30 | 2010-11-04 | ソニー株式会社 | Display control device, display control method, and program |
US8457469B2 (en) | 2009-04-30 | 2013-06-04 | Sony Corporation | Display control device, display control method, and program |
EP2447946A2 (en) | 2010-10-27 | 2012-05-02 | Sony Corporation | Two dimensional timeline with thumbnail bookmarks for content search in video surveilance system. |
US9123385B2 (en) | 2010-10-27 | 2015-09-01 | Sony Corporation | Information processing apparatus, information processing method, program, and surveillance system |
WO2012070180A1 (en) * | 2010-11-24 | 2012-05-31 | 株式会社Jvcケンウッド | Chapter creation device, chapter creation method, and chapter creation program |
JP2012129980A (en) * | 2010-11-24 | 2012-07-05 | Jvc Kenwood Corp | Chapter creation device, chapter creation method, and chapter creation program |
US9094650B2 (en) | 2010-11-24 | 2015-07-28 | JVC Kenwood Corporation | Chapter creating device, chapter creating method, and computer program product therefor |
CN103733563A (en) * | 2011-08-12 | 2014-04-16 | 索尼公司 | Information processing device, signature-generation device, information processing method, signature-generation method, and program |
CN103931136A (en) * | 2011-08-29 | 2014-07-16 | 索尼公司 | Information processing device, signature generation device, information processing method, signature generation method, and program |
US8571381B2 (en) | 2011-10-18 | 2013-10-29 | Sony Corporation | Image processing apparatus, image processing method, and program |
JP2022095287A (en) * | 2020-12-16 | 2022-06-28 | 株式会社コロプラ | Program, information processing method and information processing device |
Also Published As
Publication number | Publication date |
---|---|
CN101308692A (en) | 2008-11-19 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP2008312183A (en) | Information processing apparatus, method, and program | |
JP4482829B2 (en) | Preference extraction device, preference extraction method, and preference extraction program | |
JP4630869B2 (en) | Video summarization method | |
JP5135024B2 (en) | Apparatus, method, and program for notifying content scene appearance | |
US20080031595A1 (en) | Method of controlling receiver and receiver using the same | |
US20090222849A1 (en) | Audiovisual Censoring | |
KR20070001240A (en) | Method and apparatus to catch up with a running broadcast or stored content | |
JP2007166363A (en) | Information processing apparatus and method, and program | |
JP2006211311A (en) | Digested video image forming device | |
JPWO2009044818A1 (en) | Content display control device, content display control method, program, and recording medium | |
JP2007060060A (en) | Reproduction system, reproducing apparatus, reproducing method, information processing apparatus, information processing method, and program | |
JP2010509830A (en) | Method and apparatus for generating a summary of a video data stream | |
JP2008131413A (en) | Video recording/playback unit | |
JP2009027428A (en) | Recording/reproduction system and recording/reproduction method | |
JP4650288B2 (en) | REPRODUCTION CONTROL DEVICE, REPRODUCTION CONTROL METHOD, AND PROGRAM | |
KR20090089878A (en) | Method for creating a new summary of an audiovisual document that already includes a summary and reports and a receiver that can implement said method | |
US8693843B2 (en) | Information processing apparatus, method, and program | |
JP2009004872A (en) | One-segment broadcast receiver, one-segment broadcast receiving method and medium recording one-segment broadcast receiving program | |
JP2008048297A (en) | Method for providing content, program of method for providing content, recording medium on which program of method for providing content is recorded and content providing apparatus | |
US8768144B2 (en) | Video image data reproducing apparatus | |
JP2003037796A (en) | Information recording and reproducing device | |
JP5033653B2 (en) | Video recording / reproducing apparatus and video reproducing apparatus | |
JP5073535B2 (en) | CONTENT REPRODUCTION DEVICE, CONTENT REPRODUCTION METHOD, CONTENT REPRODUCTION SYSTEM, CONTENT REPRODUCTION PROGRAM, AND RECORDING MEDIUM CONTAINING THE PROGRAM | |
JP4609711B2 (en) | Image processing apparatus and method, and program | |
JP2005328329A (en) | Picture reproducer, picture recording-reproducing device and method of reproducing picture |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20090408 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20090414 |
|
A521 | Written amendment |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20090610 |
|
A02 | Decision of refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A02 Effective date: 20090730 |