JP2004072727A - Image processing method, image processing apparatus, image recording and reproducing apparatus, and television receiver - Google Patents

Image processing method, image processing apparatus, image recording and reproducing apparatus, and television receiver Download PDF

Info

Publication number
JP2004072727A
JP2004072727A JP2003160351A JP2003160351A JP2004072727A JP 2004072727 A JP2004072727 A JP 2004072727A JP 2003160351 A JP2003160351 A JP 2003160351A JP 2003160351 A JP2003160351 A JP 2003160351A JP 2004072727 A JP2004072727 A JP 2004072727A
Authority
JP
Japan
Prior art keywords
image
index
unit
moving
recording
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
JP2003160351A
Other languages
Japanese (ja)
Inventor
Shigeyuki Okada
Shinichiro Okada
岡田 伸一郎
岡田 茂之
Original Assignee
Sanyo Electric Co Ltd
三洋電機株式会社
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Priority to JP2002170712 priority Critical
Application filed by Sanyo Electric Co Ltd, 三洋電機株式会社 filed Critical Sanyo Electric Co Ltd
Priority to JP2003160351A priority patent/JP2004072727A/en
Publication of JP2004072727A publication Critical patent/JP2004072727A/en
Application status is Pending legal-status Critical

Links

Images

Abstract

<P>PROBLEM TO BE SOLVED: To solve a problem that a user occasionally interrupts the reproduction of recorded moving images in the middle when searching a desired scene. <P>SOLUTION: The moving image under reproduction is displayed on a main picture and a plurality of thumbnail images are displayed to be indexes when searching the desired scene. Besides, the thumbnail image to be displayed is updated in a predetermined timing in accordance with the progress of the moving image. <P>COPYRIGHT: (C)2004,JPO

Description

【0001】 [0001]
【発明の属する技術分野】 BACKGROUND OF THE INVENTION
本発明は、画像記録再生技術に関し、特にユーザが動画像を視聴する際に所望のシーンの検索を支援する技術に関する。 The present invention relates to an image recording and reproducing technique relates assist technique to search for the desired scene, especially when the user can view a moving picture.
【0002】 [0002]
【従来の技術】 BACKGROUND OF THE INVENTION
近年、DVD(Digital Versatile Disc)やハードディスク磁気記録媒体(以下、単に「ハードディスク」とも言う)など、記録されているデータへのランダムアクセスが容易な記録媒体を利用した動画像の記録が普及し始めている。 In recent years, DVD (Digital Versatile Disc), a hard disk, a magnetic recording medium (hereinafter, simply referred to as a "hard disk") such as, random access is easy moving images using the recording medium record is beginning to spread to the data that has been recorded there. 特に、ハードディスクの大容量化と低価格化が進んだことにより、ハードディスクを用いた画像記録再生装置であるハードディスクレコーダが製品化され、更にはテレビジョン受信装置に内蔵されるケースも見られる(例えば、特許文献1参照)。 In particular, by proceeding capacity of hard disks and price reduction, the hard disk recorder is an image recording and reproducing apparatus using a hard disk is commercialized, and even seen cases incorporated in the television receiver (e.g. , see Patent Document 1).
【0003】 [0003]
現在、比較的容易に入手可能な記録容量80GB程度のハードディスクを用いた場合、一般的なVTR並の画質で、30時間程度の記録が可能で、記録時間を優先したモードでは100時間近く記録が可能となっている。 Currently, when a relatively readily available recording capacity 80GB about hard disk, a typical VTR mediocre image quality, can be about 30 hours recording, close to 100 hours recording mode giving priority to recording time It has become possible.
【0004】 [0004]
【特許文献1】 [Patent Document 1]
特開2001−177804号公報(全文) JP 2001-177804 JP (full text)
【0005】 [0005]
【発明が解決しようとする課題】 [Problems that the Invention is to Solve
上述のような、記録データへのランダムアクセスが容易な記録媒体を使用した画像記録再生装置において、記録されている動画像の所望のシーンを検索する技術として、サムネイル画像を用いる方法がある。 As described above, the image recording and reproducing apparatus using a random access easy recording medium to record the data, as a technique for searching a desired scene of a moving image recorded, there is a method of using thumbnail images. これは、動画像からあらかじめ静止画像を選定し所定サイズに縮小してインデックス表示させる。 This is reduced to a predetermined size selected in advance still image from a moving image to the index display. しかしながら、これを利用しても所望のシーンを探し出すのに手間が掛かることがある。 However, there is also time-consuming to locate a desired scene using the same. また、動画像の再生を一旦中断してインデックス表示画面を呼び出して、所望のシーンを探し出す必要があった。 Also, call the index display screen temporarily interrupt the reproduction of the moving image, it was necessary to find a desired scene.
【0006】 [0006]
本発明者は、こうような状況のもと次の認識をするに至った。 The present inventors have led to the original following recognition of situations such as this. すなわち、容易に所望のシーンの検索が可能であればユーザの利便性が向上する。 In other words, easily improving the convenience for the user if possible search a desired scene. また、現在表示されているシーンのすぐ側のシーンであれば、動画像の表示を継続することですぐに所望のシーンが表示され、わざわざ動画像を中断する必要がなくシーンの検索が可能であれば、その検索が容易となり、ユーザの操作を少なくできる。 Further, if the immediate side scene of the scene that is currently displayed, the desired scene immediately to continue the display of the moving image is displayed, allows retrieval of the scene without the need to bother interrupted moving image if, the search becomes easy, thereby reducing the user operation. また、検索の対象となるシーンが、現在表示しているシーンから時間的に近い場合、わざわざ動画像の再生を中断するまでもないことがある。 Also, the scene to be searched, if currently are temporally close to the scene displayed, it may not even bother to interrupt the playback of the moving picture.
【0007】 [0007]
本発明は、このような認識に基づきなされたものであり、その目的は、ユーザが動画像を視聴する際に所望のシーンの検索を支援する技術を提供することにある。 The present invention has been made based on this recognition, the aim is to provide assistance to technology to search for a desired scene when the user views a moving image.
【0008】 [0008]
【課題を解決するための手段】 In order to solve the problems]
本発明のある態様は、画像処理方法に関する。 An embodiment of the present invention relates to an image processing method. この方法は、動画像が表示される際に、複数の縮小画像を動画像の進行と時間関係が認識可能に表示させるよう制御するステップと、表示された縮小画像を動画像の進行に応じて更新させるよう制御するステップと、を有する。 This method, when a moving image is displayed, and controlling so that the plurality of reduced images progress and time relationship of the moving image is recognizably displayed, according to the progress of the moving image a reduced image displayed and a step of controlling so as to update.
【0009】 [0009]
ここで縮小画像とは、動画像を構成する単位画像のサイズを縮小した画像を指すが、その縮小方法、および縮小形態は問わない。 Here the reduced image A, refers to an image obtained by reducing the size of the unit images forming a moving image, its reduction mode, and the reduced form is not limited. 例えば、画像の縦および横の長さを同比率で縮小してもよいし、更に画像の一部のみを使用してもよい。 For example, the length of sides of the image may be reduced in the same proportion, it may be further used only part of the image.
【0010】 [0010]
また、表示される縮小画像は1枚でもよいし複数枚であってもよい。 Moreover, the reduced image to be displayed may be a plurality may be the one. また、現在表示されているシーンより以降のシーンを示す画像であってもよいし、以前のシーンであってもよいし、更にそれらの組合せであってもよい。 Further, it may be an image showing the subsequent scene from the scene currently being displayed, may be a previous scene, it may be a further combination thereof. また、動画像と同一画面に表示されるよう制御してもよいし、縮小画像のみが表示されるよう制御してもてもよい。 Further, it may be controlled so as to be displayed on the moving image and the same screen, may be also be controlled so that only the reduced image is displayed.
【0011】 [0011]
複数の縮小画像が表示されるよう制御される場合、それら画像の間隔は任意である。 When multiple reduced images is controlled to be displayed, their spacing image is arbitrary. つまり、例えば、時間的に等間隔であってもよいし、現在表示されているシーンから時間的に離れるに従い、その間隔を拡大してもよい。 That is, for example, may be a temporally equal interval, in accordance with temporally away from the scene that is currently displayed, or expanded its interval.
【0012】 [0012]
動画像の視聴者は、この縮小画像を手掛かりに現在の動画像の表示を中断することなく所望のシーンを検索することができる。 Moving image viewer is able to search for a desired scene without interrupting the display of the current video image to the reduced image as a clue. 探していたシーンが、現在表示されているシーンのすぐ側であれば、わざわざ表示を中断するまでもない。 Looking had a scene is, if the immediate side of the scene that is currently displayed, not even interrupting the display bother. 本発明によれば、このような操作を避けることができる。 According to the present invention, it is possible to avoid such operations.
【0013】 [0013]
本発明の別の態様は、画像処理装置に関する。 Another aspect of the present invention relates to an image processing apparatus. この装置は、動画像が表示される際に、複数の縮小画像を動画像の進行と時間関係が認識可能に、動画像が表示される画面と同一画面に表示されるよう制御する表示制御部と、動画像と同一画面に表示される縮小画像を、動画像の進行に応じて更新されるよう制御する縮小画像更新部と、を有する。 This device, when a moving image is displayed, a plurality of reduced images to be recognized progress and time relationship of the moving image to the display control unit that controls to be displayed on the screen and the same screen a moving image is displayed When, having a reduced image displayed in the moving image and the same screen, a reduced image update unit that controls to be updated in accordance with the progress of the moving picture, the.
【0014】 [0014]
本発明の別の態様は、画像記録再生装置に関する。 Another aspect of the present invention relates to an image recording and reproducing apparatus. この装置は、動画像信号を取得し動画像を構成する単位画像を抽出する画像抽出部と、動画像の所望のシーンを検索する際に利用するインデックス画像の原画像を画像抽出部で抽出された単位画像から選定する画像選定部と、動画像信号を保持する第一のデータ記録部と、選定された原画像のサイズを縮小することでインデックス画像を生成するインデックス画像生成部と、インデックス画像を原画像と関連づけて記録し保持する第二のデータ記録部と、動画像の進行に応じて所定のインデックス画像を第二のデータ記録部より選定するインデックス画像特定部と、動画像の進行に応じてインデックス画像を更新させるよう制御するインデックス更新部と、を有する。 This device is extracted and an image extraction unit for extracting the unit images forming a moving image to get the motion picture signal, the original image of the index image to be used when searching for a desired scene of the moving image by the image extracting unit an image selecting section for selecting the unit image, and the first data recording unit for holding a moving image signal, and the index image generating unit that generates an index image by reducing the size of the selected original image index images and a second data recording section for holding recorded in association with the original image, and the index image selecting unit for selecting a predetermined index images from the second data recording unit in accordance with progress of the moving image, the progress of the moving picture having an index update section that controls so as to update the index image according.
【0015】 [0015]
第一および第二のデータ記録部として、DVDなどの光ディスク記録媒体や、ハードディスクなどがある。 As the first and second data recording unit, and an optical disc recording medium of DVD, etc. there is a hard disk. また、検索に利用されるインデックス画像は、サムネイル画像とも呼ばれる。 Further, index images to be used in the search is also called a thumbnail image.
【0016】 [0016]
インデックス画像の生成のタイミングとして、(1)所定の時間間隔、(2)ユーザからの指示に基づいて、(3)動画像のシーンチェンジ、(4)コマーシャルから本番組への切り替わり、(5)表示フォーマットの切り替わり、(6)動画像の作成者が示したインデックス画像取得ポイント、(7)動画像が複数のチャプターで構成されている場合であれば、チャプターの先頭画像や、チャプターのインデックス画像に連動して、(8)音量の変化点、具体的には、音量が大きく変化する点、などがある。 As the timing of generating the index image, (1) a predetermined time interval, based on an instruction from (2) the user, (3) moving image of a scene change, switching to the program (4) Commercial, (5) switching of the display format, (6) author index image acquisition point shown moving image, (7) in the case where moving picture is composed of a plurality of chapters, and the first image of the chapter, the chapter index images in conjunction with (8) volume change point, specifically, that the volume changes significantly, and the like. 上述の(1)から(3)のタイミングの場合、コマーシャルのシーンを除外して、インデックス画像を生成してもよい。 If the above (1) timing (3), to exclude the scene of commercials, may generate an index image. 表示フォーマットの切り替わりとは、有効画素数720×480かつインタレス方式である480iから、有効画素数1280×720かつプログレッシブ方式である720pのフォーマットへ替わるときなどがある。 And switching the display format from an effective pixel number 720 × 480 and Intaresu system 480i, and the like when an alternative to the format of a valid pixel number 1280 × 720 and progressive system 720p.
【0017】 [0017]
ここで、インデックス画像は、記録済みの動画像を再生しつつ生成されてもよいし、動画像を新たに記録する際に、その記録とともに生成されてもよい。 Here, the index image may be generated while reproducing the recorded moving image, when the newly recorded moving images may be generated with the record.
【0018】 [0018]
インデックス画像の更新タイミングとして、表示されている動画像のシーンがインデックス画像のいずれかに近づいた場合や、一致した場合などがある。 As an update timing of the index image, and if the scene of the moving image being displayed is close to one of the index image, and the like if it matches. また、「時間関係が認識可能」とは、例えば時間的に後ろのインデックス画像から順に、更に表示されている動画像のシーンとの前後関係が分かるようにインデックス画像を配置することなどがある。 Further, "the time relationship recognizable", for example, from temporally behind of the index image in order, and the like to further place the index image as context is found in the scene of the moving image being displayed. 例えば、表示装置の左側2/3の領域に動画像を表示し、右側1/3の領域に、インデックス画像を前後それぞれ2枚ずつ、上側が動画像の進行方向となるように時系列的に配置する。 For example, to display a moving image in the region of the left two-thirds of the display device, the area of ​​the right 1/3, by two respective index images before and after time series such that the upper is the traveling direction of the moving picture Deploy.
【0019】 [0019]
本発明の更に別の態様も画像記録再生装置に関する。 Yet another aspect of the present invention also relates to an image recording and reproducing apparatus. この装置は、符号化データを取得し動画像を構成する単位画像を復号する第一のデコード部と、動画像の所望のシーンを検索する際に利用するインデックス画像の原画像を第一のデコード部で復号された単位画像から選定する画像選定部と、符号化データを保持する第一のデータ記録部と、選定された原画像のサイズを縮小することでインデックス画像を生成するインデックス画像生成部と、インデックス画像を画像内符号化(「フレーム内符号化」とも言う)しインデックス画像のデータ量を圧縮するエンコード部と、符号化されたインデックス画像を原画像と関連づけて保持する第二のデータ記録部と、動画像の進行にあわせて、所定のインデックス画像を選定し復号する第二のデコード部と、動画像の進行に応じて復号されたインデッ This device, first decoding unit and a desired original image of the index image to be used when searching for scenes first decoding of a moving image decoding unit image constituting a moving picture acquired encoded data an image selecting section for selecting the decoded unit image in parts, the index image generating unit which generates a first data recording unit for holding encoded data, the index image by reducing the size of the selected original image If a second data holding and encoding unit for compressing the data amount of the index image image encoding (also referred to as "intra-frame coding") and the index image, the coded index image in association with the original image a recording unit, in accordance with the progress of the moving image, a second decoding unit which selects a predetermined index image decoding, decoded according to the progress of the moving picture indexes ス画像を更新させるよう制御するインデックス更新部と、を有する。 It has a index update section that controls so as to update the scan image.
【0020】 [0020]
また、当該装置は、動画像との時間関係が認識できるように、復号されたインデックス画像を複数用いて構成されるインデックス表示領域を生成するインデックス領域生成部と、動画像とインデックス表示領域を同一画面に配し表示させるよう制御する表示制御部と、を更に有してもよい。 Further, the apparatus may be the same to recognize the time relationship between the moving image, and the index area generator for generating an index display area constituted by using a plurality of decoded index images, moving images and index display area a display control unit that controls to display placed on the screen, may further include a. また、第一および第二のデコード部は、共通化され単一の構成で実現されてもよい。 Further, the first and second decoding portion may be implemented in common by the single configuration. また、インデックス表示領域は、OSD(On Screen Display)として動画像の上に表示させるよう制御されてもよい。 Also, index display area may be controlled so as to be displayed on the moving image as an OSD (On Screen Display). その場合、視聴者の動画像の視認性が考慮されることが望ましい。 In that case, it is desirable that the visibility of the moving image viewer is taken into account.
【0021】 [0021]
動画像を画像記録再生装置に記録する際や、画像記録再生装置に記録された動画像を再生する際に、任意の間隔や、シーンチェンジ、あるいは視聴者の好みのタイミングで、あらかじめインデックス画像を生成し符号化した上で第二のデータ記録部に記録する。 And when recording a moving image on the image recording and reproducing apparatus, when reproducing the moving image recorded in the image recording and reproducing apparatus, or an arbitrary interval, a scene change or the timing of viewer preferences, the advance index image generated and recorded in the second data recording unit on which the coding. つづいて、動画像を再生する際に、動画像の進行に応じてインデックス画像が選定され復号される。 Subsequently, when reproducing the moving image, the index image is being selected and decoded in accordance with the progress of the moving picture. 第一および第二のデコード部が共通化される場合、動画像の復号処理の空き時間を利用してインデックス画像が復号される。 If the first and the second decoding unit is shared, the index image is decoded by utilizing the free time of decoding a moving image.
【0022】 [0022]
インデックス画像はその原画像である画像が記録されている記録媒体の記録アドレスと関連づけて記録され、ユーザが選択したインデックス画像に関連づけられている記録アドレスから表示すべき画像を選定し動画像の表示場面をその画像に移動するシーン決定部を有してもよい。 Index image is recorded in association with the recorded address of the recording medium on which an image is its original image is recorded, the selected display of the moving image an image to be displayed from the recorded address associated with the index image selected by the user scene and may have a scene determining unit that moves to the image. 動画像の符号化手法として、MotionJPEG(Joint Photographic Coding Experts Group)やMPEG(Moving Picture Experts Group)2、MPEG4が挙げられるがこれに限る趣旨ではない。 As the encoding method of a moving picture, MotionJPEG (Joint Photographic Coding Experts Group) and MPEG (Moving Picture Experts Group) 2, MPEG4 including but not intended to limit thereto. また、インデックス画像の圧縮手法として、MPEGやJPEG、GIF(Graphics Interchange Format)などがある。 Furthermore, as the compression method of the index image, MPEG or JPEG, GIF (Graphics Interchange Format) and the like.
【0023】 [0023]
本発明の更に別の態様も画像記録再生装置に関する。 Yet another aspect of the present invention also relates to an image recording and reproducing apparatus. この装置は、MPEGに準拠して符号化された動画像信号である符号化データを取得し、動画像を構成する単位画像を復号する第一のMPEGデコーダと、動画像の所望のシーンを検索する際に利用するインデックス画像の原画像を第一のMPEGデコーダで復号された単位画像から選定する画像選定部と、符号化データを保持する第一のデータ記録部と、選定された単位画像のサイズを縮小することでインデックス画像を生成するインデックス画像生成部と、インデックス画像を画像内符号化するMPEGエンコーダと、符号化されたインデックス画像をその原画像と関連づけて保持する第二のデータ記録部と、所定のインデックス画像を復号する第二のMPEGデコーダと、動画像の進行との時間関係が認識できるように、復号されたイ The apparatus searches a first MPEG decoder for decoding the unit images acquired encoded data is a moving image signal coded in compliance with MPEG, constituting a moving image, a desired scene of the moving picture an image selecting section for selecting an original image of the index image to be used when the first MPEG decoded unit image in the decoder, and the first data recording unit for holding encoded data, of the selected unit image and the index image generating unit that generates an index image by reducing the size, the MPEG encoder for image coding index images, the second data recording unit for holding in association with coded index image and its original image When, a second MPEG decoder for decoding a predetermined index image, to recognize the time relationship between the progression of the moving image, the decoded Lee デックス画像を用いて構成されるインデックス領域を生成するインデックス領域生成部と、インデックス領域を表示させるよう制御する表示制御部と、を有する。 It has a index area generator which generates a composed index area using index images, a display control unit that controls to display the index area, the.
【0024】 [0024]
本発明の更に別の態様はテレビジョン受像機に関する。 Yet another aspect of the present invention relates to a television receiver. このテレビジョン受像機は、MPEGに準拠して符号化された動画像信号を含むトランスポートストリームに多重化され所定の変調が施されたデジタルテレビジョン放送の信号波を受信し、その信号波をトランスポートストリームに復調するチューナ部と、トランスポートストリームから動画像信号を符号化データとして分離するTS分離部と、符号化データを取得し、動画像を構成する単位画像を復号する第一のMPEGデコーダと、符号化された動画像信号を符号化データとして保持する第一のデータ記録部と、動画像の所望のシーンを検索する際に利用するインデックス画像の原画像を第一のMPEGデコーダで復号された単位画像から選定する画像選定部と、選定された単位画像のサイズを縮小することでインデックス画像を生成す The television receiver receives a signal wave of a digital television broadcasting predetermined modulation is multiplexed is applied to the transport stream including a moving image signal encoded in compliance with MPEG, the signal wave a tuner for demodulating the transport stream, a TS separation unit for separating the moving image signal as encoded data from the transport stream, obtains the coded data, the first MPEG for decoding the unit images forming a moving image decoder and a first data recording unit for holding the moving image signal is encoded as encoded data, with the original image first MPEG decoder index image to be used when searching for a desired scene of the moving picture an image selecting section for selecting the decoded unit image, to generate an index image by reducing the size of the selected unit image インデックス画像生成部と、インデックス画像を画像内符号化するMPEGエンコーダと、符号化されたインデックス画像をその原画像と関連づけて保持する第二のデータ記録部と、所定のインデックス画像を復号する第二のMPEGデコーダと、動画像の進行との時間関係が認識できるように、復号されたインデックス画像を用いて構成されるインデックス領域を生成するインデックス領域生成部と、インデックス領域を表示させるよう制御する表示制御部と、インデックス領域を構成するインデックス画像のいずれかがユーザから選択されたとき、そのインデックス画像に対応した画像から動画像の進行を再開するシーン決定部と、を有する。 And the index image generating unit, and the MPEG encoder for image coding index images, the second to decode the second data recording unit that holds the encoded index image in association with the original image, a predetermined index images and MPEG decoder, to recognize the time relationship between the progression of the moving image, and the index area generator which generates a composed index region using the decoded index image display controlling so as to display the index area having a control unit, when one of the index images which constitute the index area is selected by the user, and resumes the scene determining unit progression of the moving image from the image corresponding to the index image.
【0025】 [0025]
本発明の更に別の態様はテレビジョン受像機に関する。 Yet another aspect of the present invention relates to a television receiver. このテレビジョン受像機は、MPEGに準拠して符号化された動画像信号を含むトランスポートストリームに多重化され所定の変調が施されたデジタルテレビジョン放送の信号波を受信し、その信号波をトランスポートストリームに復調するチューナ部と、トランスポートストリームから動画像信号を符号化データとして分離するTS分離部と、符号化データを取得し、動画像を構成する単位画像を復号する第一のMPEGデコーダと、トランスポートストリームを保持する第一のデータ記録部と、動画像の所望のシーンを検索する際に利用するインデックス画像の原画像を第一のMPEGデコーダで復号された単位画像から選定する画像選定部と、選定された単位画像のサイズを縮小することでインデックス画像を生成するインデックス画 The television receiver receives a signal wave of a digital television broadcasting predetermined modulation is multiplexed is applied to the transport stream including a moving image signal encoded in compliance with MPEG, the signal wave a tuner for demodulating the transport stream, a TS separation unit for separating the moving image signal as encoded data from the transport stream, obtains the coded data, the first MPEG for decoding the unit images forming a moving image a decoder, selects the first data recording unit and a desired index image to be used when searching for scenes decoded unit image to the original image at a first MPEG decoder of a moving image which holds the transport stream index picture for generating an index image by reducing the image selecting unit, the size of the selected unit image 生成部と、インデックス画像を画像内符号化するMPEGエンコーダと、符号化されたインデックス画像をその原画像と関連づけて保持する第二のデータ記録部と、所定のインデックス画像を復号する第二のMPEGデコーダと、動画像の進行との時間関係が認識できるように、復号されたインデックス画像を用いて構成されるインデックス領域を生成するインデックス領域生成部と、インデックス領域を表示させるよう制御する表示制御部と、インデックス領域を構成するインデックス画像のいずれかがユーザから選択されたとき、そのインデックス画像に対応した画像から動画像の進行を再開するシーン決定部と、を有する。 A generation unit, a second MPEG for decoding the MPEG encoder for image coding index images, and the second data recording unit that holds the encoded index image in association with the original image, a predetermined index images decoder and, as can be recognized time relationship between the progression of the moving image, and the index area generator which generates a composed index region using the decoded index image display control unit that controls to display the index area with the, when any of the index images which constitute the index area is selected by the user, and resumes the scene determining unit progression of the moving image from the image corresponding to the index image.
【0026】 [0026]
本出願人は、特開2001−238167号公報で提案した逆順再生技術を1チップのLSI(Large−Scale Integration)回路として製品化している。 The applicant has commercialized reverse reproduction technology proposed in JP-A-2001-238167 as a chip of LSI (Large-Scale Integration) circuits. このLSIは2チャンネルのMPEG2ストリームを復号する能力を有するMPEG2デコーダとMPEGエンコーダを備えている。 This LSI includes a MPEG2 decoder and MPEG encoder having the ability to decode an MPEG2 stream of two channels. このLSIを利用することで、本発明は低コストで実現される。 By using this LSI, the present invention is implemented at a low cost.
【0027】 [0027]
なお、以上の構成要素の任意の組合せ、本発明の表現を方法、装置、システム、記録媒体などの間で変換したものもまた、本発明の態様として有効である。 Incidentally, any combinations of the foregoing components and expressions changed among a method, apparatus, system, even those that have been converted between such a recording medium, is effective as an embodiment of the present invention.
【0028】 [0028]
【発明の実施の形態】 DETAILED DESCRIPTION OF THE INVENTION
以下、本発明に好適な実施の形態1〜5をもとに説明する。 Hereinafter, it will be explained based on the first to fifth preferred embodiments of the present invention. これら実施の形態において、ハードディスクに記録されたデジタルテレビジョン放送が再生される際に、検索用に縮小されたインデックス画像(以下、「サムネイル画像」とも言う)を時系列的に表示し、ユーザが所望のシーンを指定する際の支援をする。 In these embodiments, when the digital television broadcast which is recorded on the hard disk is reproduced, it reduced index images for search (hereinafter, also referred to as "thumbnail image") chronologically displaying the user the support for specifying a desired scene.
【0029】 [0029]
一般に、ハードディスクなどの記録媒体に記録された番組を視聴中に、ユーザが同一番組の別のシーンに移りたい場合、従来はコマ送り再生して所望のシーンが再生されるのを待つか、一旦、再生を中断しサムネイル画像が表示される画面を呼び出して、所望のシーンを呼び出す必要があった。 Generally, in view recording medium recorded program, such as a hard disk, if you want to move to another scene users same program, or conventional waits for desired scene by reproducing frame advance is reproduced, once by calling a screen thumbnail images interrupting playback is displayed, it is necessary to call a desired scene.
【0030】 [0030]
そこで、実施の形態では、現在再生中の動画像を表示するとともにサムネイル画像を複数同一画面に表示する。 Therefore, in the embodiment, displaying the thumbnail images into a plurality same screen and displays the moving image of the currently playing. また、表示されるサムネイル画像は、動画像の進行に応じて所定のタイミングで切り替わる。 Further, the thumbnail image to be displayed is switched at a predetermined timing in accordance with the progress of the moving picture. 以下、再生中の動画像を主画像と呼ぶ。 Hereinafter referred to as moving image during reproduction with the main image. また、主画像が表示されている領域を主画面と呼び、上述のサムネイル画像が複数表示される領域をサムネイルフレームと呼ぶ。 Further, a region where the main image is displayed is referred to as a main screen, called a region above the thumbnail images are displayed more thumbnail frame. 通常の再生では、主画面のみが表示され、ユーザの指示に応じて主画像とサムネイルフレームが同一画面に表示される。 In normal reproduction, only the main screen is displayed, the main image and the thumbnail frame in accordance with an instruction from the user is displayed on the same screen.
【0031】 [0031]
ユーザは、表示されたサムネイル画像の中にジャンプしたいシーンがあれば、リモートコントローラ(以下、単に「RC」とも略す)等のインタフェイス手段を用いて、その画像を選択する。 The user, if there is to jump into the displayed thumbnail image scene, a remote controller (hereinafter, simply referred to as "RC") using the interface means, such as, for selecting the image. つづいて、選択されたサムネイル画像に対応するシーンから主画面に表示すべき画像の復号が再開され表示される。 Subsequently, the decoding of the image to be displayed from the scene corresponding to the selected thumbnail image in the main screen is displayed is resumed. 所望のシーンが存在しない場合、ユーザの指示により、別のサムネイル画像がデコードされ新たなサムネイルフレームが生成され表示される。 If desired scene does not exist, in response to an instruction of the user, another thumbnail image a new thumbnail frame decoded is generated and displayed.
【0032】 [0032]
図1は、表示装置12において主画像MIとサムネイルフレームTFに第1〜第3サムネイル画像TN1〜TN3がそれらの時系列関係が認識可能に同一画面上に配置され表示されている状態を示している。 Figure 1 shows a state where the display device 12 has first to third thumbnail image TN1~TN3 appears arranged in time series relationship recognizably the same screen thereof in the main image MI and the thumbnail frame TF there.
【0033】 [0033]
第1サムネイル画像TN1は、主画像MIより時間的に以前のシーンに対応しており、一方、第2サムネイル画像TN2および第3サムネイル画像TN3は主画像MIより時間的に以降のシーンに対応している。 The first thumbnail image TN1 corresponds to from temporally previous scene main image MI, while the second thumbnail image TN2 and the third thumbnail image TN3 corresponds to from temporally subsequent scene main image MI ing.
【0034】 [0034]
図2は、主画像MIと第1〜第6サムネイル画像TN1〜TN6の時系列関係を示している。 Figure 2 shows the time sequence relationship of the main image MI and the sixth thumbnail image TN1~TN6. 例えば、図1において主画像MIは、第1サムネイル画像TN1と第2サムネイル画像TN2の間に位置している。 For example, the main image MI in FIG. 1 is located between the first thumbnail image TN1 second thumbnail image TN 2. このため、サムネイルフレームTFには、第1〜第3サムネイル画像TN1〜TN3が配置される。 Therefore, the thumbnail frame TF, the first to third thumbnail image TN1~TN3 are arranged. これらサムネイル画像は、主画像MIの進行に連動して更新される。 These thumbnail images are updated in association with the progress of the main image MI. 例えば、主画像MIが第2サムネイル画像TN2に達した場合や、所定の間隔まで達した場合、図3に示すように、第1〜第3サムネイル画像TN1〜TN3は更新され、それぞれ新たに第2〜第4サムネイル画像TN2〜TN4が表示される。 For example, if the main image MI has reached the second thumbnail image TN 2, when it reaches to the predetermined distance, as shown in FIG. 3, first to third thumbnail image TN1~TN3 is updated, new first respectively to fourth thumbnail image TN2~TN4 is displayed.
【0035】 [0035]
また、ユーザの指示を受け、図4に示すように主画像MIが第1サムネイル画像TN1と第2サムネイル画像TN2の間に存在しながら、サムネイルフレームTFに第4〜第6サムネイル画像TN4〜TN6が配置されてもよい。 Further, receiving an instruction from the user, the main image MI as shown in FIG. 4, while present between the first thumbnail image TN1 second thumbnail image TN 2, fourth to sixth thumbnail image in the thumbnail frame TF TN4~TN6 There may be arranged.
【0036】 [0036]
以下、実施の形態1〜5は、上述のシーン検索を実現する具体例である。 Hereinafter, first to fifth embodiments is an example for realizing the scene search described above. ここでは、デジタルテレビジョン放送の受信装置およびハードディスクによる画像録画装置を備えるテレビジョン受信装置を想定する。 Here, it is assumed television receiver comprising a receiving device and an image recording apparatus according to a hard disk of a digital television broadcast.
【0037】 [0037]
(実施の形態1) (Embodiment 1)
図5は、実施の形態1に係るテレビジョン受信装置10の構成を示すブロック図である。 Figure 5 is a block diagram showing a configuration of a television receiver 10 according to the first embodiment. テレビジョン受信装置10は表示装置12、チューナ部14、画像記録再生部16、およびリモコン受光部60を備える。 Television receiver 10 includes a display device 12, a tuner section 14, image recording and reproducing unit 16 and the remote control receiver 60. リモコン受光部60は、ユーザのRC62の操作による当該装置への指示を受け付ける。 Remote control receiver 60 receives an instruction to the apparatus by the operation of RC62 user. 受け付けた指示は、後述の制御コア回路50により当該テレビジョン受信装置10の各構成要素に対して制御信号として送られる。 Instruction received is sent as a control signal to each component of the television receiver 10 by the control core circuit 50 which will be described later.
【0038】 [0038]
チューナ部14は、更に、アンテナ18において受信したRF(Radio Frequency)信号をベースバンド信号に変換するRF部22、得られたベースバンド信号を復調する復調部24、およびエラー訂正部26を備える。 Tuner 14 further comprises a RF (Radio Frequency) RF unit 22 for converting the signal into a baseband signal, demodulating unit 24 demodulates the baseband signal obtained and the error correction unit 26, received at the antenna 18. チューナ部14から出力される信号は、トランスポートストリーム(以下、単に「TS」と略す)と称し、このTSにはデジタルテレビジョン放送の規格に準じ動画像信号や音声信号、データ放送で使用する全てのデータが多重化されている。 Signal output from the tuner unit 14, a transport stream (hereinafter, simply abbreviated as "TS") referred to as moving image and audio signals according to digital television broadcasting standards in this TS, for use in data broadcasting all data are multiplexed.
【0039】 [0039]
画像記録再生部16は、TS分離部28、ハードディスク30、第1MPEGデコーダ32、第2MPEGデコーダ34、MPEGエンコーダ36、画像選定部38、データ量低減部40、サムネイル領域生成部42を備える。 Image recording and reproducing unit 16 includes TS separation unit 28, hard disk 30, the 1MPEG decoder 32, the 2MPEG decoder 34, MPEG encoder 36, the image selection unit 38, the data amount reducing unit 40, a thumbnail area generator 42. なお、画像記録再生部16は、テレビジョン受信装置10に含まれる構成に限らず、単体で製造および販売されてもよい。 Note that the image reproducing unit 16 is not limited to the configuration included in the television receiver 10, it may be manufactured and sold separately.
【0040】 [0040]
TS分離部28は、多重化されている信号を動画像信号、音声信号などTS内に含まれている各種情報に対応する信号に分離する。 TS separation unit 28 separates the signals corresponding to various information included the signal being multiplexed video signal, to the TS and voice signals. 本実施の形態に特徴的であるのは、動画像信号であるので、以降動画像信号についてのみ記述し、音声信号など動画像信号以外の信号に関する記述は省略する。 The it is characteristic of the present embodiment, since the moving picture signal, only describe later moving image signal, description of signals other than moving image signal such as a voice signal is omitted. TS分離部28において、分離された動画像信号および音声信号はそれぞれMPEG2形式で符号化された符号化画像データおよび符号化音声データである。 In TS separating section 28, moving image signal and audio signal separated is encoded encoded image data and encoded audio data in MPEG2 format, respectively. TS分離部28において分離された符号化画像データは、ハードディスク30と第1スイッチ回路SW1に伝達される。 Coded image data separated in the TS separation unit 28 is transmitted hard disk 30 to the first switch circuit SW1.
【0041】 [0041]
ハードディスク30は、符号化画像データを保持する符号化画像データ領域44およびサムネイル画像として利用される縮小画像が更に画像内符号化されたのち保持されるサムネイル画像データ領域46を備える。 Hard disk 30 includes a thumbnail image data area 46 in which the reduced image is used as coded image data area 44 and the thumbnail image holds the encoded image data is held after being further image coding. 第1MPEGデコーダ32および第2MPEGデコーダ34は、MPEG2形式で符号化された画像データを復号する。 The 1MPEG decoder 32 and the 2MPEG decoder 34 decodes the image data encoded in the MPEG2 format.
【0042】 [0042]
画像選定部38は、復号された動画像からサムネイル画像として利用する画像を選定する。 Image selecting unit 38 selects an image to be used as a thumbnail image from the decoded moving image. 選定のタイミングは、所定の時間間隔やシーンチェンジが存在する際に行われる。 The timing of the selection is performed when a predetermined time interval and a scene change is present.
【0043】 [0043]
選定のタイミングが所定の時間間隔である場合、その時間間隔は、録画前の状況や、サムネイル画像の選定開始前の状況に応じて設定される。 If the timing of selection is a predetermined time interval, the time interval, recording or previous status is set according to the situation before selecting the start of the thumbnail images. 例えば、以下の(1)から(4)いずれかの条件から選択される。 For example, selected from the following (1) to (4) one of the conditions.
(1)1回の録画時間に応じて設定する。 (1) it is set in accordance with the one-time recording time. 例えば、録画時間が30分であれば、時間間隔を5分とし、録画時間が120分であれば時間間隔を15分とする。 For example, if the recording time is 30 minutes, and 5 minutes of time interval, recording time is 15 minutes a time interval if 120 minutes. これによって、録画時間に応じて、過不足なくサーチポイントとしてサムネイル画像に利用する画像を選定することができる。 Thus, depending on the recording time, it is possible to select an image to be used for the thumbnail image as just enough search points.
(2)録画する番組の種類に応じて設定する。 (2) is set according to the type of program to be recorded. 例えば、録画する番組がスポーツ番組であれば、時間間隔を15分とし、ドラマの番組であれば、時間間隔を5分とする。 For example, a program to be recorded is if the sports program, to minutes 15 time interval, if the drama of the program, and a 5-minute time interval. 番組の種類によっては、内容の展開が遅いケースもあり、そのような場合、サムネイル画像の時間間隔を短くしても、サーチポイントとしてそれほど有効でないポイントがサムネイル画像として選定されてしまい、その処理や記憶容量が無駄になりかねない。 Depending on the type of programs, there is also slow cases development of content, such cases, even by shortening the time interval of the thumbnail images, the less effective point as a search point will be selected as a thumbnail image, Ya the process storage capacity could be wasted. そこで番組の種類に応じて時間間隔を設定することで、録画する番組の種類に最適な時間間隔でサムネイル画像として利用する画像を選定することができる。 Therefore by setting the time interval in accordance with the type of program, it is possible to select a picture to use as a thumbnail image in an optimal time interval to the type of program to be recorded.
(3)ハードディスク30の残りの記憶容量に応じて設定する。 (3) set in accordance with the remaining storage capacity of the hard disk 30. 例えば、ハードディスク30の記憶容量に余裕がある場合は、時間間隔を1分とし、記憶容量が少なくなるに応じて、2分、5分、10分とする。 For example, if there is room in the storage capacity of the hard disk 30, and 1 minute time interval, according to the storage capacity is reduced, 2 minutes, 5 minutes, and 10 minutes. これによって、録画中にハードディスク30の記録容量が不足することを防止できる。 Thus, it is possible to prevent the recording capacity of the hard disk 30 is insufficient during recording.
(4)視聴者が録画予約する際に設定する。 (4) the viewer is set at the time of recording reservation. これによって、視聴者の意志に従ってサムネイル画像を取得する時間間隔を決定することができる。 Thus, it is possible to determine a time interval for acquiring the thumbnail images in accordance with the will of the viewer.
【0044】 [0044]
画像選定部38は、第1MPEGデコーダ32において復号された動画像からサムネイル画像に利用する画像の選定のタイミングとして、番組送信側、つまりコンテンツ作成側が示したサムネイル画像取得ポイントを利用してもよい。 Image selecting unit 38, as the timing of the selection of the image to use from a moving image decoded by the first 1MPEG decoder 32 to the thumbnail image, the program transmission side, that may be utilized thumbnail image obtaining points the content creation side showed. サムネイル画像取得ポイントは、例えば、番組の各コーナーの開始点やタイトルバックが挿入されているタイミング等である。 Thumbnail image obtaining points, for example, a timing such starting point or title back of each corner of the program is inserted. 番組送信側が意図して選択したサーチポイントを収集することで、より適切なシーンサーチを実現できる。 By collecting the search point the program transmission side is selected with the intention can be realized more appropriate scene search.
【0045】 [0045]
画像選定部38は、番組が複数のチャプターから構成されていれば、各チャプターの先頭画像をサムネイル画像として利用したり、各チャプターにインデックス画像が用意されていれば、そのインデックス画像をサムネイル画像として利用してもよい。 Image selecting unit 38, if configured program from a plurality of chapters, or using the first image of each chapter as a thumbnail image, if the index image is prepared for each chapter, the index image as a thumbnail image it may be used. これによって、視聴者は、隣接するチャプター画像を見ながら所望のシーンを検索することができる。 Thus, the viewer can search for desired scene while watching the adjacent chapter images. また、チャプター画面で検索してから見たいシーンを検索するという2ステップの操作が同時に実現できる。 In addition, the operation of the two-step that to find the scene you want to see from the search for the chapter screen can be realized at the same time.
【0046】 [0046]
画像選定部38がどのようなタイミングでサムネイル画像を生成するかは、視聴者が、上述の条件から選択してテレビジョン受信装置10に設定する構成とする。 Or generating a thumbnail image in which timing the image selection unit 38, the viewer is configured to set the television receiver 10 and selected from the above conditions. ユーザが設定した条件に基づいて画像選定部38は、サムネイル画像を選定する。 Image selecting section 38 based on the condition set by the user, the selected thumbnail image.
【0047】 [0047]
データ量低減部40は、画像選定部38において選定された画像のサイズをサムネイル画像として十分な画像サイズに変換することにより、そのデータ量を低減しサムネイル画像を生成する。 Data amount reduction unit 40, by converting the size of the selected image in the image selection unit 38 a sufficient image size as the thumbnail image to generate a thumbnail image to reduce the data amount. この際に、サイズのみでなく使用される色数を、例えば16ビットから8ビットなどに低減してもよい。 At this time, the number of colors to be used, not only the size, for example may be reduced from 16 bits like eight bits.
【0048】 [0048]
MPEGエンコーダ36は、画像選定部38において選定され、データ量低減部40においてデータ量が低減されたサムネイル画像に対して画像内符号化による圧縮を行う。 MPEG encoder 36 is selected by the image selection unit 38 performs compression by the image coding on the thumbnail image data amount is reduced in data amount reduction unit 40. 圧縮されたサムネイル画像は、その原画像が復号される前に、符号化データとし符号化画像データ領域44に記録されている記録アドレスとともにサムネイル画像データ領域46に記録される。 Compressed thumbnail image, before the original image is decoded, together with the recording address recorded in the coded image data area 44 and the coded data is recorded in the thumbnail image data area 46. ここでは、空間周波数に着目する圧縮手法、具体的にはMPEG2規格Iピクチャに準じて画像が符号化圧縮される。 Here, the compression technique of focusing on the spatial frequency, specifically image in accordance with the MPEG2 standard I picture is compression-encoded. サムネイル領域生成部42は、第2MPEGデコーダ34にて復号された複数のサムネイル画像で構成されるサムネイルフレームを生成する。 Thumbnail area generator 42 generates a thumbnail frame composed of a plurality of thumbnail images decoded by the 2MPEG decoder 34.
【0049】 [0049]
画像記録再生部16は、更に、第1スイッチ回路SW1、第2スイッチ回路SW2、制御コア回路50および表示制御部52を備える。 Image recording and reproducing unit 16 further includes a first switch circuit SW1, the second switch circuit SW2, the control core circuit 50 and the display control unit 52. 表示制御部52は、サムネイル領域生成部42で生成されたサムネイルフレームを主画面とともに表示する。 The display control unit 52 displays a thumbnail frame generated in the thumbnail area generator 42 together with the main screen. このとき、表示画面においてサムネイルフレームを表示するための領域を確保するために、主画面は適当なサイズに変換される。 At this time, in order to secure the area for displaying the thumbnail frame in the display screen, the main screen is converted to an appropriate size.
【0050】 [0050]
制御コア回路50は、第1MPEGデコーダ32、第2MPEGデコーダ34、MPEGエンコーダ36、サムネイル領域生成部42および表示制御部52をはじめとして画像記録再生部16の各構成要素の動作を制御する。 Control core circuit 50, the 1MPEG decoder 32, the 2MPEG decoder 34, MPEG encoder 36, controls the operation of each component of the image recording and reproducing unit 16 including the thumbnail area generator 42 and the display control unit 52. 制御コア回路50として、一般には、中央演算処理装置(CPU:Central Processing Unit)が挙げられる。 As a control core circuit 50 generally includes a central processing unit (CPU: Central Processing Unit) and the like. 各種制御指示プログラムは、ハードディスク30やROM(Read Only Memory)(図示せず)などにあらかじめ記述されている。 Various control instruction program is previously written in a hard disk 30 or a ROM (Read Only Memory) (not shown).
【0051】 [0051]
第1スイッチ回路SW1は、制御コア回路50の制御に従って第1MPEGデコーダ32の入力切替えを行い、現在放送中の画像データを表示するか、ハードディスク30に記録されている画像データを表示するかによりその回路が切り替わる。 The first switch circuit SW1, the make input of a 1MPEG decoder 32 switch the control of the control core circuit 50, to display the image data currently being broadcast, by either displaying the image data recorded on the hard disk 30 circuit is switched. 第1ノードN1側の接続が確立されると、その時点でチューナ部14において受信されTSストリームから分離された符号化データが第1MPEGデコーダ32に送られる。 When the connection of the first node N1 side is established, encoded data separated from the received TS stream in the tuner section 14 at that time is sent to the 1MPEG decoder 32. 一方、第2ノードN2側に接続が確立されると、ハードディスク30から符号化データが読み出され第1MPEGデコーダ32に送られる。 On the other hand, when connected to the second node N2 side is established, the encoded data from the hard disk 30 is sent to the 1MPEG decoder 32 is read.
【0052】 [0052]
第2スイッチ回路SW2は、同様に制御コア回路50の制御に従って第1MPEGデコーダ32にて復号された動画像およびサムネイル領域生成部42で生成されたサムネイルフレームを選択的に表示制御部52に送る。 The second switch circuit SW2 sends to selectively display control unit 52 a thumbnail frame generated by the moving image and the thumbnail area generator 42 decoded by the 1MPEG decoder 32 under the control of the same control core circuit 50. 第3ノードN3の接続が確立されると、第1MPEGデコーダ32で復号された動画像が表示制御部52に送られ、一方、第4ノードN4側の接続が確立されると、サムネイルフレームが表示制御部52に送られる。 When the connection of the third node N3 is established, moving image decoded by the first 1MPEG decoder 32 is sent to the display control unit 52, whereas, when the connection of the fourth node N4 side is established, the display thumbnail frame It is sent to the control unit 52. サムネイルフレームを表示しない場合は、第3ノードN3側の接続が常時確立される。 If you do not see the thumbnail frame, the connection of the third node N3 side is established at all times. サムネイルフレームの表示がユーザより要求されている場合、サムネイルフレームの更新のタイミング毎に、第4ノードN4の接続が確立される。 If the display of the thumbnail frame is requested by the user, for each update timing thumbnail frame, connection of the fourth node N4 is established.
【0053】 [0053]
更に、本図では図示しないが当該装置は各構成要素の処理におけるワークエリアとして機能するメモリを有する。 Furthermore, although not shown the apparatus in the figure has a memory that functions as a work area in the processing of each component.
【0054】 [0054]
以上の構成をもとに、図6に示すフローチャートを用いて、サムネイル画像を利用したシーンの検索手順を示す。 Based on the above configuration, with reference to a flowchart shown in FIG. 6 shows the search procedure of the scene using thumbnail images. また、サムネイル画像が表示される際の、表示装置における配置は図1に示した配置とする。 Further, when the thumbnail images are displayed, arranged in the display device and arrangement shown in FIG.
【0055】 [0055]
ユーザがサムネイルフレームの表示を選択した場合、第2MPEGデコーダ34は、サムネイル画像データ領域46から主画像に応じた3枚のサムネイル画像を読み出し復号する(S10)。 If the user selects the display of the thumbnail frame, the 2MPEG decoder 34 decodes read the three thumbnail images corresponding to the main image from the thumbnail image data area 46 (S10). つづいて、復号されたサムネイル画像をもとに、サムネイル領域生成部42は、サムネイルフレームTFを生成する(S12)。 Subsequently, on the basis of the decoded thumbnail image, the thumbnail area generator 42 generates a thumbnail frame TF (S12). 生成されたサムネイルフレームTFは、表示制御部52により主画像とともに表示装置12に表示される(S14)。 Generated thumbnail frame TF is displayed on the display device 12 together with the main image by the display control unit 52 (S14).
【0056】 [0056]
表示されたサムネイル画像のいずれかがユーザにより選択された場合(S16のY)、主画面は選択されたサムネイル画像に対応づけられたシーンにジャンプして(S18)、サムネイル画像の表示が終了する。 If any of the displayed thumbnail images is selected by the user (S16 of Y), the main screen jumps to associated with the selected thumbnail image scene (S18), the display of the thumbnail image ends . 一方、ユーザからサムネイル画像の選択がない場合(S16のN)、サムネイル画像の更新タイミングでなければ(S20のN)、S14のステップに戻りサムネイルフレームの表示が継続される。 On the other hand, if there is no selection of a thumbnail image from the user (S16 of N), if the update timing of the thumbnail image (S20 in N), the display of the thumbnail frame returns to step S14 is continued. 更新のタイミングであれば(S20のY)、S10のステップに戻り、新たなサムネイル画像の読み出され、以降、同様の処理がなされる。 If the timing of updating (S20 of Y), returns to step S10, read out the new thumbnail image, thereafter, the same processing is performed.
【0057】 [0057]
以上、本実施の形態1によれば、ユーザは現在表示されている動画像の表示を中断することなく、所望のシーンの検索ができる。 As described above, according to the first embodiment, the user without interrupting the display of the moving image currently being displayed, can search for a desired scene.
【0058】 [0058]
(実施の形態2) (Embodiment 2)
実施の形態1では、サムネイル画像の生成は、所定の時間間隔や、シーンチェンジが存在する際に行われた。 In the first embodiment, generation of the thumbnail images, predetermined, time interval, were performed in the presence of a scene change. 実施の形態2では、サムネイル画像生成がユーザからの指示に基づき行われる。 In the second embodiment, the thumbnail image generation is performed based on an instruction from the user. サムネイル画像の表示およびシーンの検索に関しては、実施の形態1と同様である。 For the search of the display and scene thumbnail image is the same as in the first embodiment.
【0059】 [0059]
図7は、実施の形態2に係るテレビジョン受信装置10の構成を示すブロック図である。 Figure 7 is a block diagram showing a configuration of a television receiver 10 according to the second embodiment. この構成は、図5で示した画像記録再生部16の構成と類似しているので、実施の形態2に特徴的な点のみを説明し、それ以外の説明は省略する。 This arrangement, since similar to the configuration of the image recording and reproducing unit 16 shown in FIG. 5, describes only characteristic points to the second embodiment, the other explanation is omitted.
【0060】 [0060]
本実施の形態2では、第1MPEGデコーダ32と画像選定部38の信号経路途上に第3スイッチ回路SW3が設けられる。 In the second embodiment, the third switch circuit SW3 is provided in the signal path developing of the 1MPEG decoder 32 and the image selection unit 38. ユーザは、主画像を確認しながらRC62を用いてサムネイル画像を生成するタイミングを指示する。 The user instructs the timing for generating a thumbnail image by using the RC62 while confirming the main image.
【0061】 [0061]
指示を受けると、第3スイッチ回路SW3はオンとなり画像選定部38がサムネイル画像の原画像を選定する。 Upon receiving the instruction, the third switch circuit SW3 image selecting unit 38 turns on the selected original image of the thumbnail image. 以降の処理は実施の形態1と同様である。 Subsequent processing is similar to the first embodiment.
【0062】 [0062]
実施の形態2によると、実施の形態1の効果が得られるとともに、ユーザの希望とするシーンをサムネイル画像として記録できる。 According to the second embodiment, together with the effects of the first embodiment can be obtained, can be recorded scene to desired by the user as a thumbnail image.
【0063】 [0063]
(実施の形態3) (Embodiment 3)
実施の形態1および2では、サムネイル画像の復号のときに、第2MPEGデコーダ34を用いた。 In the first and second embodiments, when the decoding of the thumbnail image, using the first 2MPEG decoder 34. 実施の形態3では、第1MPEGデコーダ32と第2MPEGデコーダ34を共通化し、一つのMPEGデコーダとする。 In the third embodiment, the first 1MPEG decoder 32 first 2MPEG decoder 34 in common, and one of the MPEG decoder.
【0064】 [0064]
図8は、実施の形態3に係るテレビジョン受信装置10の構成を示すブロック図である。 Figure 8 is a block diagram showing a configuration of a television receiver 10 according to the third embodiment. 本実施の形態に特徴的な構成は、図7に示した画像記録再生部16における第2MPEGデコーダ34を省き、上述のように、第2MPEGデコーダ34の機能を第1MPEGデコーダ32が行う。 Characteristic configuration in this embodiment, omitting the first 2MPEG decoder 34 in the image recording and reproducing unit 16 shown in FIG. 7, as described above, the 1MPEG decoder 32 performs the functions of the 2MPEG decoder 34. したがって、動画像とサムネイル画像の復号が行われる場合、つまり、サムネイルフレームの生成が行われる場合、時分割でそれら符号化データの復号が行われる。 Therefore, if the decoding of a moving image and a thumbnail image is, i.e., if the generation of the thumbnail frame is performed, when the decoding thereof encoded data splitting is performed.
【0065】 [0065]
また、第1スイッチ回路SW1は第5ノードN5を更に有する。 Further, the first switch circuit SW1 further has a fifth node N5. ハードディスク30の符号化画像データ領域44に記録されている符号化画像データを復号して動画像を表示する際、制御コア回路50の制御に従い、第1スイッチ回路SW1の第2ノードN2側および第2スイッチ回路SW2の第3ノードN3側の接続が確立される。 When displaying a moving image by decoding the encoded image data recorded in the coded image data area 44 of the hard disk 30 under the control of the control core circuit 50, the second node N2 side of the first switch circuit SW1 and the the third node N3 side connection 2 switch circuit SW2 is established. また、サムネイル画像が復号される場合、第1スイッチ回路SW1の第5ノードN5側および第2スイッチ回路SW2の第4ノードN4側の接続が同時に確立される。 Also, if the thumbnail images are decoded, the connection of the fourth node N4 side of the fifth node N5 side and the second switch circuit SW2 of the first switch circuit SW1 is established at the same time.
【0066】 [0066]
実施の形態3によると、実施の形態1および2と同様の効果が得られるとともに、2チャンネルのMPEG2ストリームを復号可能なMPEG2デコーダを既に有している場合、コストの追加を最小限に抑えて本発明を実現できる。 According to the third embodiment, together with the same effects are obtained when the first and second embodiments, if it has already MPEG2 decoder decodable an MPEG2 stream of two channels, with minimal additional costs the present invention can be implemented.
【0067】 [0067]
(実施の形態4) (Embodiment 4)
実施の形態1から3では、ハードディスク30に記録されるデータは、一旦TS分離部28でTSから分離された符号化データであった。 In the first to third embodiments, data recorded in the hard disk 30 was encoded data separated from the TS once in the TS separation unit 28. 実施の形態4では、TSがそのままハードディスク30に記録される。 In the fourth embodiment, TS is directly recorded on the hard disk 30. ハードディスク30の領域中で、TSが記録される領域をTSデータ領域66と呼び、これは実施の形態1から3の符号化画像データ領域44に相当する。 In the region of the hard disk 30, it referred to area TS is recorded as TS data area 66, which corresponds to Embodiments 1 to the encoded image data area 44 of 3.
【0068】 [0068]
図9は、実施の形態4に係るテレビジョン受信装置10の構成を示すブロック図である。 Figure 9 is a block diagram showing a configuration of a television receiver 10 according to the fourth embodiment. この構成は実施の形態2に示したテレビジョン受信装置10と類似しているので、特に本実施の形態4に特徴的な点を説明する。 This configuration is similar to the television receiver 10 shown in the second embodiment, illustrating a characteristic point in particular to the fourth embodiment.
【0069】 [0069]
ハードディスク30は、TSより分離された符号化データが記録される符号化画像データ領域44の代わりに、TSが記録されるTSデータ領域66を備える。 Hard disk 30, instead of the encoded image data area 44 where the separated encoded data from the TS is recorded, and a TS data area 66 TS is recorded. また、第1スイッチ回路SW1をTS分離部28の前、つまりチューナ部14側に設けた。 Further, providing the first switch circuit SW1 previous TS separation unit 28, that is, the tuner section 14 side. この第1スイッチ回路SW1により、チューナ部14で受信中のTSもしくはTSデータ領域66に記録されているTSのいずれかが選択されTS分離部28に送られる。 The first switch circuit SW1, and sent to the tuner unit 14 or the TS recorded in the TS or TS data area 66 being received is selected by the TS separation unit 28.
【0070】 [0070]
実施の形態4では、実施の形態2の構成を変更することでTSをハードディスク30のTSデータ領域66に記録した。 In the fourth embodiment, was recorded TS in the TS data area 66 of the hard disk 30 by changing the configuration of the second embodiment. 当然、実施の形態1および3の構成を同様に変更しTSをハードディスク30のTSデータ領域66に記録する構成にしてもよい。 Of course, the TS similarly changed the structure of the first and third embodiments may be configured to record the TS data area 66 of the hard disk 30.
【0071】 [0071]
(実施の形態5) (Embodiment 5)
実施の形態1では、サムネイル画像の生成タイミングは、例えば第1MPEGデコーダ32により復号された画像を参照しシーンチェンジを検出することで求められた。 In the first embodiment, the generation timing of the thumbnail images, for example, with reference to the decoded image obtained by detecting the scene change by the 1MPEG decoder 32. 本実施の形態では、音声データが大きく変化する点をサムネイル画像の生成タイミングとする。 In this embodiment, the point at which audio data is largely changed as the generation timing of the thumbnail images.
【0072】 [0072]
図13は、実施の形態5に係るテレビジョン受信装置10の構成を示すブロック図である。 Figure 13 is a block diagram showing a configuration of a television receiver 10 according to the fifth embodiment. この構成は実施の形態1に示したテレビジョン受信装置10と類似しているので、特に本実施の形態に特徴的な点を説明する。 This configuration is similar to the television receiver 10 shown in the first embodiment, illustrating a characteristic point in the particular embodiment.
【0073】 [0073]
テレビジョン受信装置10は、TS分離部28において分離された符号化音声データを復号する音声デコーダ54と、復号された音声データを外部に出力する音声出力部56を備える。 Television receiver 10 includes a speech decoder 54 for decoding the coded audio data separated at the TS separation unit 28, an audio output unit 56 for outputting the decoded audio data to the outside. 音声データがMPEG2規格に準じて符号化されており第1MPEGデコーダ32の処理能力が高い場合、第1MPEGデコーダ32が音声デコーダ54の機能を果たしてもよい。 If audio data is high processing capability of the 1MPEG decoder 32 are encoded according to MPEG2 standard, the 1MPEG decoder 32 may fulfill the functions of the audio decoder 54. なお、音声デコーダ54および音声出力部56は、本来、実施の形態1から4に示したテレビジョン受信装置10にも備わるが、説明を容易にするために省略した構成要素である。 Incidentally, the audio decoder 54 and the audio output unit 56, Originally, provided the television receiver apparatus 10 shown in Embodiments 1 to 4, a component is omitted for ease of explanation.
【0074】 [0074]
音声デコーダ54で復号された音声データは、画像選定部38および音声出力部56に伝達される。 Audio data decoded by the audio decoder 54 is transmitted to the image selecting section 38 and the audio output unit 56. 画像選定部38は、音声データを参照し、音声データが大きく変化するポイントを、サムネイル画像を選定するタイミングとして決定し、そのタイミングに基づいて、第1MPEGデコーダ32において復号された動画像からサムネイル画像として利用する画像を選定する。 Image selecting unit 38 refers to the audio data, the point at which audio data is largely changed, determined as the timing for selecting a thumbnail image, on the basis of the timing, a thumbnail image from a moving image decoded by the first 1MPEG decoder 32 to select the image to be used as. なお、本実施の形態の構成を、実施の形態4と同様に変更しTSをハードディスク30のTSデータ領域66に記録する構成にしてもよい。 Incidentally, the configuration of the present embodiment, a TS change as in the fourth embodiment may be configured to record the TS data area 66 of the hard disk 30.
【0075】 [0075]
上述の構成は、ハードウエア的には、任意のコンピュータのCPU、メモリ、その他のLSIで実現でき、ソフトウエア的にはメモリにロードされた画像処理機能を有するプログラムなどによって実現されるが、ここではそれらの連携によって実現される機能ブロックを描いている。 The structure described above, the hardware such as a CPU, a memory, can be implemented in other LSI, In terms of software, it is realized by a program having an image processing function that has been loaded into memory, wherein in depicts functional blocks that are realized in cooperation with those. したがって、これらの機能ブロックがハードウエアのみ、ソフトウエアのみ、またはそれらの組合せによっていろいろな形で実現できることは、当業者には理解されるところである。 Therefore, these functional blocks are hardware only, software only, or can be realized in various forms by a combination thereof, is where is understood by those skilled in the art.
【0076】 [0076]
以上、本発明をいくつかの実施の形態をもとに説明した。 The present invention has been described based upon illustrative embodiments. これらの実施の形態は例示であり、それらの各構成要素や各処理プロセスの組合せにいろいろな変形例が可能なこと、またそうした変形例も本発明の範囲にあることは当業者に理解されるところである。 These embodiments are illustrative in nature and allows various modifications to the combination of their respective components and processes, also be in the scope of the present invention such modifications will be understood by those skilled in the art By the way there. そうした変形例を挙げる。 Such deformation example.
【0077】 [0077]
実施の形態では、サムネイル画像の時間間隔は等間隔であったが、図10に示すように主画像MIから時間的に離れるにしたがって、時間間隔が拡大してもよい。 In the embodiment, the time interval of the thumbnail image has been a regular intervals, according to temporally away from the main image MI as shown in FIG. 10 may be expanded time interval.
【0078】 [0078]
図10は、主画像MIと6枚の第1〜第6サムネイル画像TN1〜TN6の時系列関係を示している。 Figure 10 shows the time sequences of the main image MI and six first to sixth thumbnail image TN1~TN6. 主画像MIは、第3サムネイル画像TN3と第4サムネイル画像TN4の間に位置している。 Main image MI is located between the third thumbnail image TN3 of the fourth thumbnail image TN4. 第1〜第3サムネイル画像TN1〜TN3は、主画像MIより以前のシーンに対応し、第4〜第6サムネイル画像TN4〜TN6は、主画像MIより以降のシーンに対応している。 First to third thumbnail image TN1~TN3 corresponds to the previous scene than the main image MI, fourth to sixth thumbnail image TN4~TN6 corresponds to a later scene from the main image MI.
【0079】 [0079]
図11は、主画像MIと第1〜第6サムネイル画像TN1〜TN6の表示装置12における配置を示している。 Figure 11 shows an arrangement of the display device 12 of the main image MI and the sixth thumbnail image TN1~TN6. 第1サムネイルフレームTF1には第1〜第3サムネイル画像TN1〜TN3が含まれ、第2サムネイルフレームTF2には第4〜第6サムネイル画像TN4〜TN6が含まれる。 The first thumbnail frame TF1 includes first to third thumbnail image TN1~TN3, the second thumbnail frame TF2 includes fourth to sixth thumbnail image TN4~TN6. 主画像MIを中心にして、第1サムネイルフレームTF1は左側に、第2サムネイルフレームTF2は右側に配置され、主画像MIと6枚のサムネイル画像の前後関係が容易に認識可能となっている。 Around the main image MI, first thumbnail frame TF1 on the left side, the second thumbnail frame TF2 is disposed on the right side, the context of the main image MI and six thumbnail images are easily become recognizable.
【0080】 [0080]
図12に、本発明を別の観点から着目した画像記録再生装置70の機能ブロックの構成を示す。 Figure 12 shows an arrangement of functional blocks of the image recording and reproducing apparatus 70 that focuses the present invention from another point of view. 画像記録再生装置70は、入力インタフェイスブロック72、データブロック74、動画像ブロック76、インデックス画像生成ブロック78、フレーム生成ブロック80、および表示制御ブロック84を備える。 Image recording and reproducing apparatus 70 comprises an input interface block 72, the data block 74, a moving image block 76, the index image generating block 78, the frame generation block 80 and the display control block 84,.
【0081】 [0081]
以下に、上述の実施の形態1〜5で示した画像記録再生部16と図12に示す画像記録再生装置70の各構成要素の主な対応を示す。 The following is a main response of each component of the image recording and reproducing apparatus 70 shown in the image recording unit 16 and 12 shown in the first to fifth embodiments described above. 動画像ブロック76には第1MPEGデコーダ32が、データブロック74にはハードディスク30が対応する。 The 1MPEG decoder 32 to the video block 76, the hard disk 30 corresponds to the data block 74. インデックス画像生成ブロック78には画像選定部38、データ量低減部40、およびMPEGエンコーダ36が対応する。 Image selecting unit 38, the data amount reducing unit 40 and MPEG encoder 36, corresponding to the index image generating block 78. また、フレーム生成ブロック80には第2MPEGデコーダ34とサムネイル領域生成部42が、表示制御ブロック84は表示制御部52と第2スイッチ回路SW2が対応する。 Also, the frame generation block 80 first 2MPEG decoder 34 and the thumbnail area generator 42, the display control block 84 to the display control unit 52 and the second switch circuit SW2 corresponds. ただし、図示しないが、各構成ブロックは制御コア回路50に相当するCPU等の所定の制御回路と共動により、それらの機能が実行される。 However, although not shown, each building block by a predetermined control circuit cooperates such as a CPU corresponding to a control core circuit 50, these functions are performed. また、同様に各構成ブロックはそれぞれ共動により機能が実行される。 Moreover, functions are performed by respective similarly each building block cooperates.
【0082】 [0082]
入力インタフェイスブロック72は、伝達メディア90から符号化データを受け付ける。 Input interface block 72 receives the encoded data from the transmission medium 90. その符号化データは、動画像ブロック76に送られるか、データブロック74に記録される。 The encoded data is either sent to the moving image blocks 76, recorded in the data block 74. インデックス画像生成ブロック78は、動画像ブロック76で復号された動画像よりサムネイル画像として使用する画像を選定し、サムネイル画像を生成し、符号化してデータブロック74に記録する。 Index image generating block 78 selects the image to be used from the moving image decoded by the moving image block 76 as a thumbnail image, to generate a thumbnail image is recorded in the data block 74 is encoded.
【0083】 [0083]
フレーム生成ブロック80は、所定のサムネイル画像を複数復号し、それらサムネイル画像が動画像との時間関係が認識可能にサムネイルフレームを生成する。 Frame generation block 80, a predetermined thumbnail image multiple decoding, they thumbnail image time relationship between the moving image to generate a recognizable thumbnails frame. 生成されたサムネイルフレームは、表示制御ブロック84により動画像とともに表示装置12において表示される。 Generated thumbnail frames are displayed on the display device 12 together with the moving image by the display control block 84. また、フレーム生成ブロック80は、所定の更新タイミングでサムネイルフレームを更新する。 The frame generation block 80 updates the thumbnail frame at a predetermined update timing. ここで、伝達メディア90には、DVD等の蓄積メディア、地上波放送や衛星放送、CATVなどの放送メディアがある。 Here, the transmission media 90 is storage medium such as a DVD, terrestrial broadcasting and satellite broadcasting, there is a broadcast media such as CATV.
【0084】 [0084]
【発明の効果】 【Effect of the invention】
本発明によると、ユーザが動画像を視聴する際に、所望のシーンの検索が可能となる。 According to the present invention, when a user views a moving image, it is possible to search for a desired scene. また、別の観点では動画像の表示を中断せずにシーンの検索が可能となる。 Further, it is possible to search for the scene without interrupting the display of the moving image in another aspect. 更に別の観点では、インデックス画像を更に圧縮する場合、新たに大きな記録容量を必要とすることがないため、コストの追加を抑えつつシーン検索の技術を実現できる。 In yet another aspect, to further compress the index image, it is not to require a new large recording capacity, while reducing the additional cost can be realized scene search techniques.
【図面の簡単な説明】 BRIEF DESCRIPTION OF THE DRAWINGS
【図1】表示装置におけるサムネイルフレームと主画像の配置を示す図である。 Is a diagram showing an arrangement of a thumbnail frame and main image in FIG. 1 display device.
【図2】サムネイル画像間の時間間隔が等間隔である際の、サムネイル画像と主画像の時系列関係を示す図である。 [Figure 2] time interval between thumbnail image upon equally spaced a diagram showing a time-series relationship between a thumbnail image and a main image.
【図3】表示装置におけるサムネイルフレームと主画像の配置を示す図である。 Is a diagram showing an arrangement of a thumbnail frame and main image in Figure 3 the display device.
【図4】表示装置におけるサムネイルフレームと主画像の配置を示す図である。 Is a diagram showing an arrangement of a thumbnail frame and main image in FIG. 4 the display device.
【図5】実施の形態1に係るテレビジョン受信装置の構成を示すブロック図である。 5 is a block diagram showing a configuration of a television receiver according to the first embodiment.
【図6】サムネイルフレームを表示し、所望のシーンにジャンプする手順を示すフローチャートである。 [6] Display thumbnail frame is a flowchart showing a procedure to jump to a desired scene.
【図7】実施の形態2に係るテレビジョン受信装置の構成を示すブロック図である。 7 is a block diagram showing a configuration of a television receiver according to the second embodiment.
【図8】実施の形態3に係るテレビジョン受信装置の構成を示すブロック図である。 8 is a block diagram showing a configuration of a television receiver according to the third embodiment.
【図9】実施の形態4に係るテレビジョン受信装置の構成を示すブロック図である。 9 is a block diagram showing a configuration of a television receiver according to the fourth embodiment.
【図10】サムネイル画像間の時間間隔が主画像から離れるにしたがって拡大する際の、サムネイル画像と主画像の時系列関係を示す図である。 [10] time interval between thumbnail images when enlarging the distance from the main image is a diagram showing a time-series relationship between a thumbnail image and a main image.
【図11】変形例における、表示装置におけるサムネイルフレームと主画像の配置を示す図である。 In [11] Modification is a diagram showing an arrangement of a thumbnail frame and main image in the display device.
【図12】画像記録再生装置の構成を機能ブロックで示した図である。 12 is a diagram showing a configuration of an image recording and reproducing apparatus in function block.
【図13】実施の形態5に係るテレビジョン受信装置の構成を示すブロック図である。 13 is a block diagram showing a configuration of a television receiver according to the fifth embodiment.
【符号の説明】 DESCRIPTION OF SYMBOLS
10 テレビジョン受信装置、 12 表示装置、 14 チューナ部、 16 画像記録再生部、 18 アンテナ、 22 RF部、 24 復調部、 26 エラー訂正部、 28 TS分離部、 30 ハードディスク、 32 第1MPEGデコーダ、 34 第2MPEGデコーダ、 36 MPEGエンコーダ、 38 画像選定部、 40 データ量低減部、 42 サムネイル領域生成部、 44 符号化画像データ領域、 46 サムネイル画像データ領域、 50 制御コア回路、 52 表示制御部、 54 音声デコーダ、 56音声出力部、 60 リモコン受光部、 62 RC、 66 TSデータ領域、 70 画像記録再生装置、 72 入力インタフェイスブロック、 74データブロック、 76 動画像ブロック、 78 インデックス画像生成ブロック、 80 フレーム生成ブ 10 television receiver, 12 a display device, 14 a tuner, 16 image recording and reproducing unit, 18 an antenna, 22 RF unit, 24 demodulating unit, 26 an error correction unit, 28 TS separation unit, 30 hard disk, 32 second 1MPEG decoder, 34 the 2MPEG decoder, 36 MPEG encoder, 38 image selecting part, 40 a data amount reducing unit, 42 thumbnail area generator, 44 coded image data area, 46 thumbnail image data area, 50 control core circuit, 52 display control unit, 54 voice decoder, 56 audio output unit, 60 remote control receiver, 62 RC, 66 TS data area, 70 image recording and reproducing apparatus, 72 input interface block, 74 data blocks, 76 a moving image block, 78 the index image generating block, 80 frame generation Breakfast ック、 84 表示制御ブロック、 90 伝達メディア。 Click, 84 display control block, 90 transmission media.

Claims (19)

  1. 動画像が表示される際に、複数の縮小画像を前記動画像の進行と時間関係が認識可能に表示させるよう制御するステップと、 When a moving image is displayed, and controlling so that the plurality of reduced images progress and time relationship of the moving image is recognizably displayed,
    表示された縮小画像を、前記動画像の進行に応じて更新させるよう制御するステップと、 And controlling so that the reduced image is displayed, it is updated in accordance with the progress of the moving image,
    を有することを特徴とする画像処理方法。 An image processing method characterized in that it comprises a.
  2. 動画像が表示される際に、複数の縮小画像を前記動画像の進行と時間関係が認識可能に、前記動画像が表示される画面と同一画面に表示する表示制御部と、 When a moving image is displayed, and a display control unit a plurality of reduced images progress and time relationship of the moving image recognizable, to be displayed on the screen and the same screen where the moving image is displayed,
    前記動画像と同一画面に表示される縮小画像を、前記動画像の進行に応じて更新する縮小画像更新部と、 A reduced image to be displayed on the moving image of the same screen, a reduced image update section for updating in accordance with the progress of the moving image,
    を有することを特徴とする画像処理装置。 The image processing apparatus characterized by having a.
  3. 動画像信号を取得し動画像を構成する単位画像を抽出する画像抽出部と、 An image extraction unit configured to extract the unit image constituting a moving picture to get the motion picture signal,
    前記動画像の所望のシーンを検索する際に利用するインデックス画像の原画像を、前記画像抽出部で抽出された単位画像から選定する画像選定部と、 An image selecting section for selecting an original image of the index image to be used when searching for a desired scene of the moving image, from the extracted unit image by the image extracting unit,
    前記動画像信号を保持する第一のデータ記録部と、 A first data recording section for holding said moving image signal,
    前記選定された原画像のサイズを縮小することでインデックス画像を生成するインデックス画像生成部と、 And the index image generating unit that generates an index image by reducing the size of the selected original image,
    前記インデックス画像を前記原画像と関連づけて記録し保持する第二のデータ記録部と、 A second data recording section for holding recording the index image in association with the original image,
    前記動画像の進行に応じて所定のインデックス画像を前記第二のデータ記録部より選定するインデックス画像特定部と、 And the index image specifying unit for selecting a predetermined index images from the second data recording unit in accordance with the progress of the moving image,
    前記動画像の進行に応じて前記インデックス画像を更新させるよう制御するインデックス更新部と、 And an index update section that controls so as to update the index image according to the progress of the moving image,
    を有することを特徴とする画像記録再生装置。 Image recording and reproducing apparatus characterized by having a.
  4. 符号化データを取得し動画像を構成する単位画像を復号する第一のデコード部と、 A first decoding unit for decoding the unit images forming a moving image acquires encoded data,
    前記動画像の所望のシーンを検索する際に利用するインデックス画像の原画像を、前記第一のデコード部で復号された単位画像から選定する画像選定部と、 An image selecting section for selecting an original image of the index image to be used when searching for a desired scene of the moving image from the decoded unit image by the first decoding unit,
    前記符号化データを保持する第一のデータ記録部と、 A first data recording section for holding said encoded data,
    前記選定された原画像のサイズを縮小することでインデックス画像を生成するインデックス画像生成部と、 And the index image generating unit that generates an index image by reducing the size of the selected original image,
    前記インデックス画像を画像内符号化し前記インデックス画像のデータ量を圧縮するエンコード部と、 And encoding unit for image coding the index image compressing data amount of the index image,
    前記符号化されたインデックス画像を前記原画像と関連づけて保持する第二のデータ記録部と、 A second data recording unit that holds the encoded index image in association with the original image,
    前記動画像の進行にあわせて、所定のインデックス画像を選定し復号する第二のデコード部と、 In accordance with the progression of the moving image, a second decoding unit which selects a predetermined index image decoding,
    前記動画像の進行に応じて復号された前記インデックス画像を更新させるよう制御するインデックス更新部と、 And an index update section that controls so as to update the index image which has been decoded according to the progress of the moving image,
    を有することを特徴とする画像記録再生装置。 Image recording and reproducing apparatus characterized by having a.
  5. 前記動画像との時間関係が認識できるように、前記インデックス画像を用いて構成されるインデックス表示領域を生成するインデックス領域生成部と、 As can be appreciated the time relationship between the moving image, and the index area generator for generating an index display area formed by using the index image,
    前記動画像と前記インデックス表示領域を同一画面に配し表示させるよう制御する表示制御部と、 A display control unit that controls to display disposing said index display area and the video image on the same screen,
    を更に有することを特徴とする請求項3または4に記載の画像記録再生装置。 Image recording and reproducing apparatus according to claim 3 or 4, further comprising a.
  6. 前記第一および前記第二のデコード部は、共通化され単一の構成で実現されることを特徴とする請求項4または5に記載の画像記録再生装置。 Said first and said second decoding unit, an image recording and reproducing apparatus according to claim 4 or 5, characterized in that it is implemented in a single configuration is common.
  7. MPEGに準拠して符号化された動画像信号である符号化データを取得し、動画像を構成する単位画像を復号する第一のMPEGデコーダと、 Acquires encoded data is the encoded video signal in compliance with MPEG, a first MPEG decoder for decoding the unit images forming a moving image,
    前記動画像の所望のシーンを検索する際に利用するインデックス画像の原画像を前記第一のMPEGデコーダで復号された単位画像から選定する画像選定部と、 An image selecting section for selecting the desired index image to be used when searching for scenes decoded unit image to the original image by the first MPEG decoder of the moving image,
    前記符号化データを保持する第一のデータ記録部と、 A first data recording section for holding said encoded data,
    前記選定された単位画像のサイズを縮小することでインデックス画像を生成するインデックス画像生成部と、 And the index image generating unit that generates an index image by reducing the size of the selected the unit image,
    前記インデックス画像を画像内符号化するMPEGエンコーダと、 And the MPEG encoder for image coding the index image,
    前記符号化されたインデックス画像をその原画像と関連づけて保持する第二のデータ記録部と、 A second data recording unit that holds the encoded index image in association with the original image,
    所定のインデックス画像を復号する第二のMPEGデコーダと、 A second MPEG decoder for decoding a predetermined index image,
    前記動画像の進行との時間関係が認識できるように、前記復号されたインデックス画像を用いて構成されるインデックス領域を生成するインデックス領域生成部と、 As can be appreciated the time relationship between the progression of the moving image, and the index area generator which generates a composed index region using the decoded index image,
    前記インデックス領域を表示させるよう制御する表示制御部と、 A display control unit that controls to display the index area,
    を有することを特徴とする画像記録再生装置。 Image recording and reproducing apparatus characterized by having a.
  8. 前記第一および前記第二のMPEGデコーダは、共通化され単一の構成で実現されることを特徴とする請求項7に記載の画像記録再生装置。 It said first and said second MPEG decoder, an image recording and reproducing apparatus according to claim 7, characterized in that it is implemented in common by the single configuration.
  9. MPEGに準拠して符号化された動画像信号を含むトランスポートストリームに多重化され所定の変調が施されたデジタルテレビジョン放送の信号波を受信し、その信号波をトランスポートストリームに復調するチューナ部と、 MPEG to conform to receive a signal wave of a digital television broadcasting predetermined modulation is multiplexed is applied to the transport stream including a moving image signal encoding, demodulates the signal wave in the transport stream tuner and parts,
    前記トランスポートストリームから前記動画像信号を符号化データとして分離するTS分離部と、 A TS separation unit for separating the moving image signal as encoded data from the transport stream,
    前記符号化データを取得し、動画像を構成する単位画像を復号する第一のMPEGデコーダと、 A first MPEG decoder for decoding the unit images to obtain the coded data, constituting a moving picture,
    前記符号化された動画像信号を符号化データとして保持する第一のデータ記録部と、 A first data recording unit for holding the moving image signal the encoded as encoded data,
    前記動画像の所望のシーンを検索する際に利用するインデックス画像の原画像を前記第一のMPEGデコーダで復号された単位画像から選定する画像選定部と、 An image selecting section for selecting the desired index image to be used when searching for scenes decoded unit image to the original image by the first MPEG decoder of the moving image,
    前記選定された単位画像のサイズを縮小することでインデックス画像を生成するインデックス画像生成部と、 And the index image generating unit that generates an index image by reducing the size of the selected the unit image,
    前記インデックス画像を画像内符号化するMPEGエンコーダと、 And the MPEG encoder for image coding the index image,
    前記符号化されたインデックス画像をその原画像と関連づけて保持する第二のデータ記録部と、 A second data recording unit that holds the encoded index image in association with the original image,
    所定のインデックス画像を復号する第二のMPEGデコーダと、 A second MPEG decoder for decoding a predetermined index image,
    前記動画像の進行との時間関係が認識できるように、前記復号されたインデックス画像を用いて構成されるインデックス領域を生成するインデックス領域生成部と、 As can be appreciated the time relationship between the progression of the moving image, and the index area generator which generates a composed index region using the decoded index image,
    前記インデックス領域を表示させるよう制御する表示制御部と、 A display control unit that controls to display the index area,
    前記インデックス領域を構成する前記インデックス画像のいずれかがユーザから選択されたとき、そのインデックス画像に対応した画像から動画像の進行を再開するシーン決定部と、 When one of the index images forming the index area is selected by the user, and resumes the scene determining unit progression of the moving image from the image corresponding to the index image,
    を有することを特徴とするテレビジョン受像機。 Television receiver which is characterized in that it has a.
  10. MPEGに準拠して符号化された動画像信号を含むトランスポートストリームに多重化され所定の変調が施されたデジタルテレビジョン放送の信号波を受信し、その信号波をトランスポートストリームに復調するチューナ部と、 MPEG to conform to receive a signal wave of a digital television broadcasting predetermined modulation is multiplexed is applied to the transport stream including a moving image signal encoding, demodulates the signal wave in the transport stream tuner and parts,
    前記トランスポートストリームから前記動画像信号を符号化データとして分離するTS分離部と、 A TS separation unit for separating the moving image signal as encoded data from the transport stream,
    前記符号化データを取得し、動画像を構成する単位画像を復号する第一のMPEGデコーダと、 A first MPEG decoder for decoding the unit images to obtain the coded data, constituting a moving picture,
    前記トランスポートストリームを保持する第一のデータ記録部と、 A first data recording section for holding said transport stream,
    前記動画像の所望のシーンを検索する際に利用するインデックス画像の原画像を前記第一のMPEGデコーダで復号された単位画像から選定する画像選定部と、 An image selecting section for selecting the desired index image to be used when searching for scenes decoded unit image to the original image by the first MPEG decoder of the moving image,
    前記選定された単位画像のサイズを縮小することでインデックス画像を生成するインデックス画像生成部と、 And the index image generating unit that generates an index image by reducing the size of the selected the unit image,
    前記インデックス画像を画像内符号化するMPEGエンコーダと、 And the MPEG encoder for image coding the index image,
    前記符号化されたインデックス画像をその原画像と関連づけて保持する第二のデータ記録部と、 A second data recording unit that holds the encoded index image in association with the original image,
    所定のインデックス画像を復号する第二のMPEGデコーダと、 A second MPEG decoder for decoding a predetermined index image,
    前記動画像の進行との時間関係が認識できるように、前記復号されたインデックス画像を用いて構成されるインデックス領域を生成するインデックス領域生成部と、 As can be appreciated the time relationship between the progression of the moving image, and the index area generator which generates a composed index region using the decoded index image,
    前記インデックス領域を表示させるよう制御する表示制御部と、 A display control unit that controls to display the index area,
    前記インデックス領域を構成する前記インデックス画像のいずれかがユーザから選択されたとき、そのインデックス画像に対応した画像から動画像の進行を再開するシーン決定部と、 When one of the index images forming the index area is selected by the user, and resumes the scene determining unit progression of the moving image from the image corresponding to the index image,
    を有することを特徴とするテレビジョン受像機。 Television receiver which is characterized in that it has a.
  11. 前記第一および前記第二のMPEGデコーダは、共通化され単一の構成で実現されることを特徴とする請求項9または10に記載のテレビジョン受像機。 It said first and said second MPEG decoder, a television receiver according to claim 9 or 10, characterized in that it is implemented in common by the single configuration.
  12. 前記画像選定部は、所定の時間間隔で前記インデックス画像の原画像を選定することを特徴とする請求項3から8のいずれかに記載の画像記録再生装置。 Wherein the image selecting unit, image recording and reproducing apparatus according to any one of claims 3 to 8, characterized in that selecting the original image of the index image at predetermined time intervals.
  13. 前記画像選定部は、ユーザからの指示に基づいて前記インデックス画像の原画像を選定することを特徴とする請求項3から8のいずれかに記載の画像記録再生装置。 Wherein the image selecting unit, image recording and reproducing apparatus according to any one of claims 3, characterized in that selects the original image of the index image based on an instruction from the user 8.
  14. 前記画像選定部は、前記動画像のシーンが大きく変化するタイミングで前記インデックス画像の原画像を選定することを特徴とする請求項3から8のいずれかに記載の画像記録再生装置。 Wherein the image selecting unit, image recording and reproducing apparatus according to any one of claims 3 to 8, characterized in that selecting the original image of the index image at the timing when the scene of the moving image is greatly changed.
  15. 前記画像選定部は、前記動画像の作成者が前記動画像に設けたタイミングで、前記インデックス画像の原画像を選定することを特徴とする請求項3から8のいずれかに記載の画像記録再生装置。 Wherein the image selecting section at the timing when the moving image of the creator is provided on the moving image, the image recording and reproducing according to any one of claims 3 to 8, characterized in that selecting the original image of the index image apparatus.
  16. 前記動画像が複数のチャプターで構成されている場合、前記画像選定部は、前記チャプターの先頭の画像を、前記インデックス画像の原画像として選定することを特徴とする請求項3から8のいずれかに記載の画像記録再生装置。 If the moving image is composed of a plurality of chapters, the image selection unit, the first image of the chapter, claim 3 to 8, characterized in that to select as an original image of the index image image recording and reproducing apparatus according to.
  17. 前記動画像が複数のチャプターで構成されておりチャプターに検索用画像が設けられている場合、前記画像選定部は、前記検索用画像を前記インデックス画像の原画像として選定することを特徴とする請求項3から8のいずれかに記載の画像記録再生装置。 If the moving image is the image for retrieval provided chapter is composed of a plurality of chapters, the image selection unit, wherein, wherein selecting the search image as an original image of the index image image recording and reproducing apparatus according to any one of claim 3 8.
  18. 前記符号化データに含まれる音声データを復号する第三のデコーダを更に有し、 Further comprising a third decoder for decoding the audio data included in the encoded data,
    前記画像選定部は、前記第三のデコーダで復号された音声データを参照し、音量が大きく変わるタイミングで前記インデックス画像の原画像を選定することを特徴とする請求項3から8のいずれかに記載の画像記録再生装置。 Wherein the image selecting unit, the reference to the audio data decoded by the third decoder, in any one of claims 3 to 8, characterized in that selecting the original image of the index image at the timing at which the volume varies greatly image recording and reproducing apparatus according.
  19. 前記画像選定部は、前記インデックス画像の原画像の抽出前の状況に応じて、前記所定の時間間隔を設定することを特徴とする請求項12に記載の画像記録再生装置。 Wherein the image selecting unit, according to the condition of prior to extraction of the original image of the index image, the image recording and reproducing apparatus according to claim 12, characterized by setting the predetermined time interval.
JP2003160351A 2002-06-11 2003-06-05 Image processing method, image processing apparatus, image recording and reproducing apparatus, and television receiver Pending JP2004072727A (en)

Priority Applications (2)

Application Number Priority Date Filing Date Title
JP2002170712 2002-06-11
JP2003160351A JP2004072727A (en) 2002-06-11 2003-06-05 Image processing method, image processing apparatus, image recording and reproducing apparatus, and television receiver

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2003160351A JP2004072727A (en) 2002-06-11 2003-06-05 Image processing method, image processing apparatus, image recording and reproducing apparatus, and television receiver

Publications (1)

Publication Number Publication Date
JP2004072727A true JP2004072727A (en) 2004-03-04

Family

ID=32032241

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2003160351A Pending JP2004072727A (en) 2002-06-11 2003-06-05 Image processing method, image processing apparatus, image recording and reproducing apparatus, and television receiver

Country Status (1)

Country Link
JP (1) JP2004072727A (en)

Cited By (15)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2005114993A1 (en) * 2004-05-21 2005-12-01 Sanyo Electric Co., Ltd. Digital broadcast reception device
KR100635277B1 (en) * 2004-08-06 2006-10-19 삼성전자주식회사 Method for selecting PIP image in image reproduction device
KR100670411B1 (en) 2004-09-07 2007-01-16 엘지전자 주식회사 Method and apparatus for processing a recorded things of an image display device
JP2007123981A (en) * 2005-10-25 2007-05-17 Sony Corp Device and method controlling display, program, and recording medium
JP2007214953A (en) * 2006-02-10 2007-08-23 Hitachi Ltd Content reproduction device, method, and program, and content distribution server
JP2008022200A (en) * 2006-07-12 2008-01-31 Canon Inc Reproducing device
KR100827129B1 (en) 2006-10-28 2008-05-02 삼성전자주식회사 Apparatus providing added information of media contents and method thereof
US7437674B2 (en) 2004-03-31 2008-10-14 Corel Tw Corp. Video processing methods
JP2009509446A (en) * 2005-09-22 2009-03-05 ジェイエフディアイ エンジニアリング リミテッド Search Tools
CN101959021A (en) * 2004-05-13 2011-01-26 索尼株式会社 Image display apparatus and image display method
US8004594B2 (en) 2007-07-17 2011-08-23 Sony Corporation Apparatus, method, and program for controlling display of moving and still images
KR101268986B1 (en) 2006-06-09 2013-05-29 삼성전자주식회사 Digital Image Processing Method
KR101362576B1 (en) 2007-03-22 2014-02-14 엘지전자 주식회사 Broadcast Receiving Apparatus And Method Of Providing Representative Picture Using Same
US8938153B2 (en) 2006-02-08 2015-01-20 Nec Corporation Representative image or representative image group display system, representative image or representative image group display method, and program therefor
KR101529923B1 (en) * 2008-12-02 2015-06-18 엘지전자 주식회사 Image display apparatus and method for searching images thereof

Cited By (22)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US7437674B2 (en) 2004-03-31 2008-10-14 Corel Tw Corp. Video processing methods
US9497382B2 (en) 2004-05-13 2016-11-15 Thomson Licensing Imaging apparatus, user interface and associated methodology for a co-existent shooting and reproduction mode
CN101959021A (en) * 2004-05-13 2011-01-26 索尼株式会社 Image display apparatus and image display method
WO2005114993A1 (en) * 2004-05-21 2005-12-01 Sanyo Electric Co., Ltd. Digital broadcast reception device
KR100635277B1 (en) * 2004-08-06 2006-10-19 삼성전자주식회사 Method for selecting PIP image in image reproduction device
KR100670411B1 (en) 2004-09-07 2007-01-16 엘지전자 주식회사 Method and apparatus for processing a recorded things of an image display device
JP2009509446A (en) * 2005-09-22 2009-03-05 ジェイエフディアイ エンジニアリング リミテッド Search Tools
US8433180B2 (en) 2005-09-22 2013-04-30 Jfdi Engineering, Ltd. Search tool
JP4670584B2 (en) * 2005-10-25 2011-04-13 ソニー株式会社 Display control apparatus and method, program and recording medium
JP2007123981A (en) * 2005-10-25 2007-05-17 Sony Corp Device and method controlling display, program, and recording medium
US8009232B2 (en) 2005-10-25 2011-08-30 Sony Corporation Display control device, and associated method of identifying content
US8938153B2 (en) 2006-02-08 2015-01-20 Nec Corporation Representative image or representative image group display system, representative image or representative image group display method, and program therefor
JP2007214953A (en) * 2006-02-10 2007-08-23 Hitachi Ltd Content reproduction device, method, and program, and content distribution server
KR101268986B1 (en) 2006-06-09 2013-05-29 삼성전자주식회사 Digital Image Processing Method
JP2008022200A (en) * 2006-07-12 2008-01-31 Canon Inc Reproducing device
JP4642710B2 (en) * 2006-07-12 2011-03-02 キヤノン株式会社 Reproducing apparatus
EP1916660A3 (en) * 2006-10-28 2010-12-08 Samsung Electronics Co., Ltd. Apparatus and method for providing additional information of media content
US8799950B2 (en) 2006-10-28 2014-08-05 Samsung Electronics Co., Ltd. Apparatus and method for providing additional information of media content
KR100827129B1 (en) 2006-10-28 2008-05-02 삼성전자주식회사 Apparatus providing added information of media contents and method thereof
KR101362576B1 (en) 2007-03-22 2014-02-14 엘지전자 주식회사 Broadcast Receiving Apparatus And Method Of Providing Representative Picture Using Same
US8004594B2 (en) 2007-07-17 2011-08-23 Sony Corporation Apparatus, method, and program for controlling display of moving and still images
KR101529923B1 (en) * 2008-12-02 2015-06-18 엘지전자 주식회사 Image display apparatus and method for searching images thereof

Similar Documents

Publication Publication Date Title
US7657149B2 (en) Method and apparatus for storing a stream of video data on a storage medium
JP3646707B2 (en) Acquiring apparatus and method for acquiring program information
KR100443854B1 (en) Digital broadcast receiving apparatus
CN1294750C (en) Image detecting apparatus, image detecting method, and image detecting program
US6226447B1 (en) Video signal recording and reproducing apparatus
US8285109B2 (en) Video signal recording and reproducing apparatus
EP0762756A2 (en) Video signal recording and reproducing apparatus
JP4370172B2 (en) Method and system for displaying closed caption information during video trick mode
KR100564452B1 (en) Video recording/playback apparatus and method
CN1178489C (en) Video frequency device, and display method
US7558319B2 (en) Method and apparatus for reproducing images, and image recording apparatus
KR20100091990A (en) Electronic device, reproduction method and program
EP1173016A2 (en) Image recording method and apparatus
JP4536653B2 (en) Data processing apparatus and method
KR100973204B1 (en) Live picture presentation while digital video recording
JPH0965225A (en) Television receiver and display method therefor
JP2000184320A (en) Recording and reproducing device and display device for electronic program guide
JP4172379B2 (en) Recording and reproducing apparatus
JP2012104216A (en) Digital recording and reproducing device
CN1299502C (en) Decoding device and decoding method
KR101454025B1 (en) Method and device for playing the picture using the recording information
CN101715093B (en) Method and apparatus for processing images, method and apparatus for recording and reporducing images, and television receiver utilizing the same
JP2005515723A (en) Service program playback resume method and apparatus
US7496281B2 (en) Signal recording apparatus and method and signal reproduction apparatus and method
JP3791024B2 (en) The video signal recording and reproducing apparatus

Legal Events

Date Code Title Description
A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20060119

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20060131

A521 Written amendment

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20060403

A02 Decision of refusal

Free format text: JAPANESE INTERMEDIATE CODE: A02

Effective date: 20060620

A521 Written amendment

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20061012