JP4701958B2 - Image processing apparatus, image processing method, and program thereof - Google Patents
Image processing apparatus, image processing method, and program thereof Download PDFInfo
- Publication number
- JP4701958B2 JP4701958B2 JP2005277723A JP2005277723A JP4701958B2 JP 4701958 B2 JP4701958 B2 JP 4701958B2 JP 2005277723 A JP2005277723 A JP 2005277723A JP 2005277723 A JP2005277723 A JP 2005277723A JP 4701958 B2 JP4701958 B2 JP 4701958B2
- Authority
- JP
- Japan
- Prior art keywords
- section
- frame
- image
- moving image
- processing apparatus
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Expired - Fee Related
Links
Images
Landscapes
- Television Signal Processing For Recording (AREA)
- Indexing, Searching, Synchronizing, And The Amount Of Synchronization Travel Of Record Carriers (AREA)
- Management Or Editing Of Information On Record Carriers (AREA)
Description
本発明は、例えばHDD(Hard Disk Drive)やDVD(Digital Versatile Disk)等の記録媒体等に記録され再生される動画像を処理することが可能な画像処理装置、画像処理方法及びそのプログラム関する。 The present invention relates to an image processing apparatus, an image processing method, and a program for processing a moving image recorded and reproduced on a recording medium such as an HDD (Hard Disk Drive) or a DVD (Digital Versatile Disk).
従来から、HDDやDVD等の記録媒体に動画像を記録し、当該記録された動画像を再生可能な記録再生装置等においては、各動画像にチャプターと呼ばれる区切りを付けて、当該チャプター単位で所望のシーンを検索して動画像の再生を行う技術が存在する。このような技術に関連して、例えば、下記特許文献1には、動画像から所定の条件でサムネイル画像を生成し、表示装置に現在再生中の主画像を表示するとともに複数のサムネイル画像を同一画面に表示し、ユーザが主画像の再生中に何れかのサムネイル画像を選択した場合に、当該サムネイル画像に対応したシーンへジャンプすることが可能な記録再生装置が開示されている。
しかしながら、上記特許文献1に記載の技術においては、ユーザは上記サムネイル画像を確認するのみではそのサムネイル画像から始まるシーン(チャプター)が所望のシーンであるかどうかを把握することは難しく、また、サムネイル画像を選択してジャンプした後も、当該ジャンプ後のシーンがユーザにとって本当に所望のシーンであるかどうかをすぐに把握することも困難である。したがって、ジャンプ後のシーン内容をしばらく確認してからそのシーンが所望の位置であったか否かが分かることとなり、所望のシーンでなかった場合にはその後に違うシーンへジャンプするための煩雑な操作が必要となり、ユーザの利便性を害する結果となる。
However, in the technique described in
以上のような事情に鑑み、本発明の目的は、ユーザが所望のチャプターを容易に選択して当該チャプターへ移動でき、またチャプター移動後も所望のチャプターであったか否かの確認を容易に行うことが可能な画像処理装置、画像処理方法及びそのプログラムを提供することにある。 In view of the circumstances as described above, an object of the present invention is to allow a user to easily select a desired chapter and move to that chapter, and to easily check whether or not the chapter is a desired chapter even after moving the chapter. An image processing apparatus, an image processing method, and a program therefor are provided.
上述の課題を解決するため、本発明の主たる観点に係る画像処理装置は、複数のフレームで構成され、所定の条件により複数の区間に区切るための区切り位置情報が所定のフレームに付加された動画像を再生する再生手段と、前記区切られた動画像中の第1の区間の動画像の再生中に、当該第1の区間の動画像から当該第1の区間とは異なる第2の区間の動画像へ移動して再生するためのユーザ操作を入力する入力手段と、前記ユーザ操作が入力されたときに、前記第1の区間の動画像の再生を停止するとともに、前記区切り位置情報に基づいて、少なくとも前記第2の区間の先頭フレーム及び当該先頭フレームの前のフレームの各縮小画像を表示するように制御する表示制御手段とを具備する。 In order to solve the above-described problem, an image processing apparatus according to a main aspect of the present invention includes a moving image that includes a plurality of frames, and is provided with delimiter position information for delimiting into a plurality of sections according to a predetermined condition. A reproduction unit that reproduces an image, and a second segment that is different from the first segment from the first segment during the reproduction of the first segment in the segmented movie. Input means for inputting a user operation for moving to and playing a moving image, and when the user operation is input, the reproduction of the moving image in the first section is stopped, and based on the break position information Display control means for controlling to display at least the first frame of the second section and each reduced image of the frame before the first frame.
ここで上記動画像とは例えばデジタル放送またはアナログ放送によるテレビ番組が例えばMPEG(Moving Picture Experts Group)等の方式で記録されたものである。画像処理装置とは、例えばHDD/DVDレコーダ等の記録再生装置や記録再生機能を有するテレビジョン受像機、DVDプレーヤー等の再生装置、PC(Personal Computer)等である。好ましくは、上記動画像に所定の条件により上記区切り位置情報を付加する手段を有する装置である。所定の条件とは、例えば動画像中における音声信号の種類(ステレオ/モノラル)(CMの有無)、音量、登場人物等の違いやシーンチェンジ等の条件であり、上記区間とはいわゆるチャプターと称されるものである。 Here, the moving image is a television program recorded by, for example, digital broadcasting or analog broadcasting recorded by a method such as MPEG (Moving Picture Experts Group). The image processing apparatus is, for example, a recording / reproducing apparatus such as an HDD / DVD recorder, a television receiver having a recording / reproducing function, a reproducing apparatus such as a DVD player, a PC (Personal Computer), or the like. Preferably, the apparatus has means for adding the delimiter position information to the moving image according to a predetermined condition. The predetermined condition is, for example, a condition such as a type of audio signal (stereo / monaural) (CM presence / absence), a volume, a character change, a scene change, or the like in a moving image, and the section is called a chapter. It is what is done.
なお、ここで上記先頭フレーム及びその前のフレームとは、連続したフレームのみを指すものではなく、例えば上記動画像がMPEG方式の動画像である場合には、Iピクチャのみを抽出したものであってもよい。またIピクチャに加えてPピクチャを抽出するようにしても構わない。第2の区間の先頭フレームの前のフレームとは、すなわち第1の区間の最終フレーム(最終Iピクチャ)のことである。 Here, the first frame and the previous frame do not indicate only consecutive frames. For example, when the moving image is an MPEG moving image, only the I picture is extracted. May be. In addition to the I picture, a P picture may be extracted. The frame before the first frame of the second section is the last frame (final I picture) of the first section.
この構成により、上記第2の区間へ移動するためのユーザ操作が入力されたときに、第2の区間の先頭フレームのみならず、その前の第1の区間の最終フレームの縮小画像も表示されるため、ユーザは当該両縮小画像により、所望のフレームであるか否かの確認を容易に行うことができ、動画像の再生中にユーザがいわゆるチャプターの移動を所望した際の利便性が向上する。 With this configuration, when a user operation for moving to the second section is input, not only the first frame of the second section but also a reduced image of the last frame of the previous first section is displayed. Therefore, the user can easily check whether or not the frame is a desired frame by using both the reduced images, and the convenience when the user desires to move the chapter during the reproduction of the moving image is improved. To do.
本発明の一の形態によれば、上記画像処理装置において、前記第2の区間は前記第1の区間の一つ前または一つ後の区間であり、前記表示制御手段は、前記ユーザ操作が入力されたときに、前記第2の区間の動画像を前記先頭フレームから再生するとともに、当該先頭フレーム及び当該先頭フレームの前後の各フレームの各縮小画像を前記再生される第2の区間の動画像上に時系列順に並べて表示するように制御するようにしてもよい。 According to an aspect of the present invention, in the image processing apparatus, the second section is a section immediately before or after the first section, and the display control unit is configured to perform the user operation. When input, the moving image of the second section is reproduced from the first frame, and the reduced image of each frame before and after the first frame is reproduced. You may make it control to arrange and display on an image in time series order.
上記前後の各フレームは、それぞれ少なくとも1枚のフレーム、好ましくは複数枚のフレーム(例えば2、3枚のフレーム)である。また上記先頭フレーム及びその前後のフレームは例えばMPEGのIピクチャである。これによりユーザは、第2の区間に移動後に上記先頭フレーム及びその前後のフレームの縮小画像を確認することで、移動後の第2の区間が所望の区間であるか否かを容易に確認することができる。 Each of the front and rear frames is at least one frame, preferably a plurality of frames (for example, two or three frames). The top frame and the frames before and after it are, for example, MPEG I pictures. Accordingly, the user can easily confirm whether the second section after the movement is a desired section by confirming the reduced image of the first frame and the frames before and after the movement after the movement to the second section. be able to.
本発明の一の形態によれば、上記画像処理装置において、前記表示制御手段は、前記表示された各縮小画像を所定時間経過後に消去するように制御するようにしてもよい。 According to an aspect of the present invention, in the image processing apparatus, the display control unit may perform control so that each displayed reduced image is erased after a predetermined time has elapsed.
これによりユーザは、移動後の区間が所望の区間であるか否かの確認が終了した後は、上記各縮小画像に邪魔されることなく動画像を快適に視聴することができる。 As a result, the user can comfortably view the moving image without being disturbed by the respective reduced images after confirming whether or not the section after movement is the desired section.
本発明の一の形態によれば、上記画像処理装置において、前記表示制御手段は、前記各縮小画像が消去されたときに、前記再生されている第2の区間の動画像の前記消去位置におけるタイムコードを当該第2の区間の動画像上に所定時間表示するように制御するようにしても構わない。 According to an aspect of the present invention, in the image processing device, the display control unit is configured to display the moving image of the second section being reproduced at the erasing position when each reduced image is erased. You may make it control to display a time code on the moving image of the said 2nd area for the predetermined time.
上記各縮小画像とタイムコードとによって、ユーザは移動先の第2の区間が所望の位置であったかをより確実に把握することができる。 From each of the reduced images and the time code, the user can more surely grasp whether the second section of the movement destination is a desired position.
本発明の一の形態によれば、上記画像処理装置において、前記表示制御手段は、前記各種縮小画像が消去されたときに、前記再生を停止された第1の区間の動画像の当該停止位置におけるタイムコードと前記再生されている前記第2の区間の動画像の前記消去位置におけるタイムコードとの時間間隔情報を表示するように制御するようにしても構わない。 According to an aspect of the present invention, in the image processing apparatus, the display control unit is configured to stop the playback of the moving image in the first section in which the reproduction is stopped when the various reduced images are deleted. Control may be performed so that time interval information between the time code at and the time code at the erasure position of the reproduced moving image in the second section is displayed.
上記各縮小画像と時間間隔情報とにより、ユーザは移動先の第2の区間が移動前の第1の区間からどのくらいの時間分移動した位置であるかを把握できるため、所望の位置であったか否かを確実に把握することができる。 Since each reduced image and the time interval information allow the user to know how much time the second section of the movement destination has moved from the first section before the movement, whether or not it was a desired position Can be grasped reliably.
本発明の一の形態によれば、上記画像処理装置は、前記表示制御手段により前記第2の区間の先頭フレーム及び当該先頭フレームの前後の各フレームの各縮小画像が表示されている状態で、ユーザの操作により当該前後の各フレームの何れかに前記区切り位置情報を付加し直す手段を更に具備していてもよい。 According to an aspect of the present invention, in the image processing device, the display control unit displays the reduced image of the first frame of the second section and each frame before and after the first frame. The information processing apparatus may further include means for re-adding the delimiter position information to any of the preceding and following frames by a user operation.
これにより、上記区切り位置情報によって決められた区間の区切りをユーザの好みに応じて変更したり、区切り位置がずれていた場合に当該ずれを修正したりすることができる。区切り位置情報を付加し直した後は、次回からはその付加し直した区切り位置から第2の区間を再生させることができ、ユーザの利便性が向上する。 Thereby, the section break determined by the break position information can be changed according to the user's preference, or the shift can be corrected when the break position is shifted. After re-adding the delimiter position information, the second section can be reproduced from the re-added delimiter position from the next time, improving the convenience for the user.
本発明の一の形態によれば、上記画像処理装置において、前記第2の区間は複数存在し、前記表示制御手段は、前記ユーザ操作が入力されたときに、前記第1の区間の前記再生停止位置における停止フレーム及び当該停止フレームの前後の各フレームの各縮小画像を第1の方向に時系列順に並べて表示させるとともに、前記移動すべき第2の区間をユーザに選択させるために、前記各第2の区間の各先頭フレームの縮小画像を前記停止フレームの縮小画像を挟むように前記第1の方向とは異なる第2の方向に時系列順に並べて表示させるように制御する第1の表示制御手段と、前記表示された各第2の区間の各先頭フレームの縮小画像のうち何れかを選択する第1のユーザ選択操作が入力されたときに、前記表示された停止フレーム及び当該停止フレームの前後の各フレームの各縮小画像を消去するとともに、前記選択された第2の区間の先頭フレーム及び当該先頭フレームの前後の各フレームの各縮小画像を前記第1の方向に時系列順に並べて表示するように制御する第2の表示制御手段とを有していてもよい。 According to an aspect of the present invention, in the above image processing apparatus, there are a plurality of the second sections, and the display control unit performs the reproduction of the first section when the user operation is input. In order to display the stop frame at the stop position and the reduced images of the frames before and after the stop frame in time series in the first direction, and to allow the user to select the second section to be moved, First display control for controlling the reduced images of the first frames in the second section to be displayed in time series in a second direction different from the first direction so as to sandwich the reduced image of the stop frame. And when the first user selection operation for selecting any one of the reduced images of the first frames of the displayed second sections is input, the displayed stop frame and the The reduced images of each frame before and after the stop frame are erased, and the first frame of the selected second section and the reduced images of the frames before and after the first frame are time-sequentially in the first direction. You may have the 2nd display control means controlled to display side by side.
上記第1の制御手段により、上記停止位置のフレーム及びその前後のフレームの縮小画像で停止位置周辺のシーン内容を確認しながら移動先の第2の区間を選択することができ、また上記第2の制御手段により、各第2の区間の先頭フレーム及びその前後のフレームの縮小画像で第1のユーザ選択操作により選択した当該第2の区間が所望の区間であることを確実に確認することができる。すなわち、ユーザは区間移動前に移動先の区間の内容を確実に把握することができる。 The first control means can select the second section of the movement destination while confirming the scene contents around the stop position with the reduced image of the frame at the stop position and the frames before and after the stop position, and the second section. With the control means, it is possible to reliably confirm that the second section selected by the first user selection operation in the reduced images of the first frame and the frames before and after each second section is a desired section. it can. That is, the user can surely grasp the contents of the destination section before the section movement.
本発明の一の形態によれば、上記画像処理装置において、前記再生手段は、前記第1のユーザ選択操作後に前記第2の区間の動画像の再生を選択する第2のユーザ選択操作が入力されたときに、当該第2の区間の前記先頭フレームから動画像を再生するようにしてもよい。 According to an aspect of the present invention, in the image processing apparatus, the reproduction unit receives an input of a second user selection operation for selecting reproduction of a moving image in the second section after the first user selection operation. When this is done, a moving image may be reproduced from the first frame in the second section.
これにより、ユーザは上記第1の制御手段により表示された上記第2の区間の先頭フレーム及びその前後のフレームの縮小画像により、移動先の第2の区間の内容を確実に把握したうえで移動して、当該第2の区間の動画像を再生させることが可能となる。 Thereby, the user moves after confirming the contents of the second section of the moving destination by the reduced images of the first frame of the second section and the frames before and after the second section displayed by the first control means. Thus, it is possible to reproduce the moving image in the second section.
本発明の一の形態によれば、上記画像処理装置において、前記再生手段は、前記第1のユーザ選択操作後に前記第2の制御手段により表示された第2の区間の先頭フレーム及び当該先頭フレームの前後の各フレームの各縮小画像のうち何れかを選択する第3のユーザ選択操作が入力されたときに、当該選択された縮小画像に対応するフレームから前記動画像を再生するようにしてもよい。 According to an aspect of the present invention, in the image processing apparatus, the reproduction unit includes the first frame of the second section displayed by the second control unit after the first user selection operation and the first frame. When a third user selection operation for selecting any one of the reduced images of each frame before and after is input, the moving image may be reproduced from the frame corresponding to the selected reduced image. Good.
これにより、移動先の第2の区間の先頭フレームは勿論、その前後のフレームからも動画像を再生させることができる。したがって、上記区切り位置のフレームの周辺のフレームから再生可能となるため、例えばユーザが視聴を所望しないフレームを飛ばして再生させることもでき、また例えばシーンチェンジ等の条件による上記区切り位置の付加の仕方が不十分で、実際には第2の区間の一つ前の区間に属するべきフレームがずれて第2の区間に属していたような場合にでも、当該ずれを補正してユーザが真に所望するシーンから動画像を再生することができる。 As a result, a moving image can be reproduced not only from the first frame of the second section of the movement destination but also from the frames before and after the first frame. Accordingly, since it is possible to reproduce from a frame around the frame at the delimiter position, it is possible to reproduce the frame by skipping a frame that the user does not desire to view, for example, and how to add the delimiter position according to a condition such as a scene change. Even if the frame that should belong to the section immediately before the second section is shifted and belongs to the second section, the user really wants by correcting the shift. A moving image can be reproduced from the scene to be played.
本発明の一の形態によれば、上記画像処理装置において、前記第1の制御手段及び第2の制御手段は、前記第1の方向と第2の方向とが略直交するように各縮小画像が表示されるように制御するようにしても構わない。 According to an aspect of the present invention, in the image processing apparatus, the first control unit and the second control unit may reduce each reduced image so that the first direction and the second direction are substantially orthogonal to each other. You may make it control so that is displayed.
例えば上記第1の方向は水平方向、第2の方向は垂直方向である。これにより区間に関する情報は第2の方向に表示され、各区間の先頭及びその周辺のフレームに関する情報が第1の方向に略直交する第2の方向に表示されることにより、ユーザは同一画面上において第2の区間を選択しながら当該第2の区間の先頭フレーム及びその周辺のフレームを確認することで、所望の移動位置を容易に選択することができ、ユーザにとってより分かりやすいインターフェースを提供することができる。 For example, the first direction is the horizontal direction and the second direction is the vertical direction. As a result, the information about the section is displayed in the second direction, and the information about the head of each section and the surrounding frames is displayed in the second direction substantially orthogonal to the first direction. The user can easily select a desired movement position by checking the first frame of the second section and the surrounding frames while selecting the second section in FIG. 1, and provides a user-friendly interface. be able to.
本発明の一の形態によれば、上記画像処理装置において、前記第2の制御手段により前記第2の区間の先頭フレーム及び当該先頭フレームの前後の各フレームの各縮小画像が表示されている状態で、ユーザの操作により当該前後の各フレームの何れかに前記区切り位置情報を付加し直す手段を更に具備していてもよい。 According to an aspect of the present invention, in the image processing device, the second control unit displays the first frame of the second section and the reduced images of the frames before and after the first frame. Then, the information processing apparatus may further include means for re-adding the delimiter position information to any of the preceding and succeeding frames by a user operation.
これにより、上記区切り位置情報によって決められた区間の区切り位置をユーザの好みに応じて変更したり、区切り位置がずれていた場合に当該ずれを修正したりすることができ、ユーザの利便性が向上する。 Thereby, the section position determined by the section position information can be changed according to the user's preference, or the section position can be corrected when the section position is shifted. improves.
本発明の一の形態によれば、上記画像処理装置において、前記第2の区間は前記第1の区間の一つ後の区間であり、前記表示制御手段は、前記ユーザ操作が入力されたときに、前記第2の区間の動画像を前記先頭フレームから再生するとともに、前記第1の区間の再生停止位置におけるフレームから前記先頭フレームまでの縮小動画像を前記再生される第2の区間の動画像上に表示するよう制御するようにしても構わない。 According to an aspect of the present invention, in the image processing apparatus, the second section is a section immediately after the first section, and the display control unit is configured to input the user operation. In addition, the moving image of the second section is reproduced from the first frame, and the reduced moving image from the frame at the reproduction stop position of the first section to the first frame is reproduced. You may make it control to display on an image.
これによりユーザは、第2の区間に移動することによって再生されなかった(飛ばされた)第1の区間の動画像の内容を確認しながら、すなわち同一画面上で第1の区間と第2の区間との関係を把握しながら、移動先の第2の区間の動画像を視聴することができ、ユーザの利便性が向上する。 As a result, the user confirms the content of the moving image of the first section that has not been reproduced (flew) by moving to the second section, that is, the first section and the second section on the same screen. While grasping the relationship with the section, it is possible to view the moving image of the second section of the movement destination, and the convenience for the user is improved.
本発明の他の観点に係る画像処理方法は、複数のフレームで構成され、所定の条件により複数の区間に区切るための区切り位置情報が所定のフレームに付加された動画像を再生するステップと、前記区切られた動画像中の第1の区間の動画像の再生中に、当該第1の区間の動画像から当該第1の区間とは異なる第2の区間の動画像へ移動して再生するためのユーザ操作を入力するステップと、前記ユーザ操作が入力されたときに、前記第1の区間の動画像の再生を停止するとともに、前記区切り位置情報に基づいて、少なくとも前記第2の区間の先頭フレーム及び当該先頭フレームの前のフレームの各縮小画像を表示するように制御するステップとを具備する。 An image processing method according to another aspect of the present invention includes a step of playing back a moving image that is composed of a plurality of frames and in which delimiter position information for delimiting into a plurality of sections according to a predetermined condition is added to the predetermined frame; During the reproduction of the moving image of the first section in the divided moving image, the moving image of the first section is moved to the moving image of the second section different from the first section and reproduced. A user operation for inputting, and when the user operation is input, the reproduction of the moving image of the first section is stopped, and at least the second section based on the break position information And a step of controlling to display each reduced image of the first frame and a frame before the first frame.
本発明のまた別の観点に係るプログラムは、画像処理装置に、複数のフレームで構成され、所定の条件により複数の区間に区切るための区切り位置情報が所定のフレームに付加された動画像を再生するステップと、前記区切られた動画像中の第1の区間の動画像の再生中に、当該第1の区間の動画像から当該第1の区間とは異なる第2の区間の動画像へ移動して再生するためのユーザ操作を入力するステップと、前記ユーザ操作が入力されたときに、前記第1の区間の動画像の再生を停止するとともに、前記区切り位置情報に基づいて、少なくとも前記第2の区間の先頭フレーム及び当該先頭フレームの前のフレームの各縮小画像を表示するように制御するステップとを実行させるためのものである。
A program according to still another aspect of the present invention reproduces a moving image that is composed of a plurality of frames and that includes division position information added to a predetermined frame for dividing into a plurality of sections according to a predetermined condition. And moving from the moving image of the first section to the moving image of the second section different from the first section during reproduction of the moving image of the first section in the segmented moving image Inputting a user operation for playback, and stopping the playback of the moving image of the first section when the user operation is input, and at least based on the break position information, And a step of controlling to display each reduced image of the first frame in the
本発明によれば、ユーザが所望のチャプターを容易に選択して当該チャプターへ移動でき、またチャプター移動後も所望のチャプターであったか否かの確認を容易に行うことができる。 According to the present invention, a user can easily select a desired chapter and move to that chapter, and can easily check whether or not the chapter is a desired chapter even after moving the chapter.
以下、本発明の実施の形態を図面に基づき説明する。 Hereinafter, embodiments of the present invention will be described with reference to the drawings.
図1は、本発明の一実施形態に係る記録再生装置100の構成を示した図である。同図に示すように、記録再生装置100は、デジタルチューナ1、アナログチューナ2、A/D(Analog / Digital)コンバータ3、MPEGエンコーダ4、バッファコントローラ5、特徴点抽出部6、HDD7、光ディスクドライブ8、CPU(Central Processing Unit)9、ROM(Read Only Memory)10、RAM(Random Access Memory)11、MPEGデコーダ12、グラフィックコントローラ13、D/A(Digital / Analog)コンバータ14、15及び操作入力部16等を備えており、各部はシステムバス17により接続されている。
FIG. 1 is a diagram showing a configuration of a recording / reproducing
デジタルチューナ1は、図示しないアンテナを通じてデジタル放送の特定のチャンネルを選局してデジタルビデオ信号及びデジタルオーディオ信号を例えばMPEGストリームとして受信し、当該各信号を復調してバッファコントローラ5へ出力する。
The
アナログチューナ2は、上記アンテナを通じてアナログ放送の特定のチャンネルを選局してアナログビデオ信号及びアナログオーディオ信号を受信し、各信号をA/Dコンバータ3へ出力する。
The
A/Dコンバータ3は、アナログチューナ2から入力したアナログビデオ信号及びアナログオーディオ信号をそれぞれデジタル信号に変換し、MPEGエンコーダ4に出力する。
The A / D converter 3 converts the analog video signal and the analog audio signal input from the
MPEGエンコーダ4は、上記A/Dコンバータ3から入力したデジタルビデオ信号及びデジタルオーディオ信号をMPEGストリームへ符号化処理し、バッファコントローラ5へ出力する。
The
バッファコントローラ5は、上記デジタルチューナ1又はMPEGエンコーダ4から連続的に供給されるデジタルビデオ信号及びデジタルオーディオ信号の、HDD7または光ディスクドライブ8への書き込みのタイミングやデータ量を制御し、各信号をHDD7または光ディスクドライブ8へ断続的に書き込む。また、バッファコントローラ5は、HDD7または光ディスクドライブ8に記録されたデジタル信号の読み出しのタイミングやデータ量を制御し、HDD7または光ディスクドライブ8から断続的に読み出されるMPEGストリームを、MPEGデコーダ12へ連続的に供給する。
The buffer controller 5 controls the writing timing and data amount of the digital video signal and the digital audio signal continuously supplied from the
すなわち、HDD7や光ディスクドライブ8がシーク動作を行っている間は読み書きを行うことができない一方、MPEGエンコーダ4やMPEGデコーダ12は連続的なMPEGストリームの入出力を期待するため、上記バッファコントローラ5によってMPEGストリームをバッファリングし、HDD7及び光ディスクドライブ8の特性に合わせた読み出し及び書き込みのタイミング制御を行っている。
That is, while the
またバッファコントローラ5は、HDD7及び光ディスクドライブ8とのデータ授受だけでなく、システムバス17を介してCPU9からの読み書きも受け付け、CPU9からHDD7及び光ディスクドライブ8に対する読み出し及び書き込みも行うことが可能である。
Further, the buffer controller 5 can not only exchange data with the
HDD7は、上記各タイトルのMPEGストリームの他、各種プログラムやデータ等を内蔵のハードディスクに記録し、またそれらを当該ハードディスクから読み出す。
The
光ディスクドライブ8は、上記MPEGストリーム等のデータをDVDディスク(例えばDVD−Video、DVD−RAM、DVD−R、DVD−RW、DVD+R、DVD+RW等)やBlu−rayディスク等の着脱自在な光ディスク20に記録したり、当該光ディスク20から上記データを再生時に読み出したりする。
The
特徴点抽出部6は、上記HDD7または光ディスクドライブ8に記録後または記録前のMPEGストリームから、例えばシーンチェンジ、CM(コマーシャル)と番組本編との切り替わり、ハイライトシーン等の特徴的なシーンを抽出して、当該切り替わり位置をチャプターの区切り位置として、MPEGストリームとして記録される(記録された)番組(以下、タイトルと称する)毎にチャプター分けを行う。特徴点抽出の具体的手法としては、例えば上記シーンチェンジの場合には、MPEGストリームを構成する各フレーム毎の輝度成分や音量情報を基に1フレーム毎に特徴点を検出し、各フレームの特徴点の変化や大小を比較する等して特徴的なシーンを抽出し、当該シーンをチャプターの区切り位置として抽出する方法や、CMと番組本編との切り替わりの場合には音声信号のステレオ/モノラルの切り替わり位置を検出する方法等がある。抽出された特徴点データは、タイトル毎のチャプター情報として例えばROM10またはHDD7にデータベース化され記憶される。
The feature
CPU9は、例えばROM10に記憶されたOS(Operating System)やファームウェア等に基づいて各ブロックを統括的に制御したり、各種の演算処理を実行したりする装置である。
The
ROM10は、CPU9に実行させるOS、プログラムや各種パラメータなどのファームウェアが固定的に記憶されている不揮発性のメモリである。
The
RAM11は、CPU9の作業用領域等として用いられ、例えばROM10に記憶されたOSやプログラム、処理データ等を一時的に保持するメモリである。
The
MPEGデコーダ12は、上記HDD7または光ディスクドライブ8からバッファコントローラ5を介して読み込まれたMPEGストリームを復号処理によりデジタルビデオ信号及びデジタルオーディオ信号に変換し、デジタルビデオ信号をグラフィックコントローラ13へ、デジタルオーディオ信号をD/Aコンバータ15へ出力する。
The
グラフィックコントローラ13は、上記MPEGデコーダ12から入力した各タイトルのデジタルビデオ信号と、当該各タイトルに対応する上記チャプター情報等をOSD(On Screen Display)として合成したり、当該チャプター情報を切り替えたりするグラフィック処理を行い、D/Aコンバータ14に出力する。
The
D/Aコンバータ14はグラフィックコントローラ13でグラフィック処理を施されたデジタルビデオ信号をアナログビデオ信号(NTSC(National Television Standards Committee)信号)に変換し、ディスプレイ18に出力して表示させる。
The D /
D/Aコンバータ15は上記MPEGデコーダ12から入力されたデジタルオーディオ信号をアナログオーディオ信号に変換してスピーカ19に出力して再生させる。
The D /
操作入力部16は、ボタン、スイッチ、キー、操作確認用の表示器や、リモートコントローラ21(以下、リモコン21と称する)から送信される赤外線信号の受光部等で構成され、ユーザの操作による各種設定値や指令を入力してCPU9へ出力する。
The
なお、本実施形態においてはデジタルストリームの圧縮方式としてMPEGを用いているが、その他の圧縮方式でも勿論構わない。 In this embodiment, MPEG is used as a digital stream compression method, but other compression methods may be used.
次に、本実施形態における記録再生装置100の動作について説明する。
Next, the operation of the recording / reproducing
図2は、本実施形態において、タイトル中のあるチャプターを再生中にユーザの操作によりチャプターを移動する場合の記録再生装置100の動作の流れを示したフローチャートである。
FIG. 2 is a flowchart showing an operation flow of the recording / reproducing
同図に示すように、記録再生装置100は、ユーザからタイトルの再生操作があると、上記HDD7または光ディスクドライブ8に記録され、かつ、特徴点抽出部6によりチャプター情報が付加されたタイトルのMPEGストリームを、上記MPEGデコーダ12等の処理により上記ディスプレイ18及びスピーカ19により再生する(ステップ31)。
As shown in the figure, when a user performs a title playback operation, the recording /
続いて、ユーザからリモコンやボタン等の操作によるキー入力の待ち状態に入る(ステップ32)。タイトル再生中に、ユーザからキー入力があった場合、当該キー入力の種類を判別する(ステップ33)。キー入力が、複数のチャプターから移動先のチャプターを選択する画面(以下、チャプター選択画面と称する)の表示を要求する操作の場合(ステップ33のK1)、記録再生装置100は、再生中のタイトルの再生を停止するとともに、ROM10またはHDD7に記憶されたチャプター情報と、上記再生を停止したタイトルのMPEGストリームを読み出し、グラフィックコントローラ13等の処理により、図3に示すようなチャプター選択画面を表示する(ステップ34)。
Subsequently, the system enters a waiting state for key input from the user by operating the remote controller or buttons (step 32). If there is a key input from the user during the title reproduction, the type of the key input is determined (step 33). When the key input is an operation requesting display of a screen for selecting a destination chapter from a plurality of chapters (hereinafter referred to as chapter selection screen) (K1 in step 33), the recording / reproducing
図3(a)に示すように、当該チャプター選択画面51では、例えば上記再生中のチャプターがチャプター3であるとすると、上記再生を停止した位置の停止フレームを縮小したサムネイル画像60bを中心として、横軸にその前後(例えば前に1つ、後に2つ)のフレームの各サムネイル画像60a、60c、60dを生成して表示させ、縦軸に当該停止フレームのサムネイル画像60bを挟むように、当該チャプター3の周辺の各チャプター(チャプター1、チャプター2、チャプター4、チャプター5)の各先頭フレームの各サムネイル画像50a、50b、50c、50dを生成して時系列順に(例えば上から下へ)各軸に並べて表示させる。
As shown in FIG. 3A, in the
そして、当該チャプター選択画面51上で、ユーザ操作(例えば十字キーによるカーソル上下移動操作)により何れかのチャプターが選択された場合(ステップ35のYes)には、当該選択されたチャプターの先頭フレームのサムネイル画像を、上記停止フレームのサムネイル画像60bが表示されていた位置に表示させ、また当該先頭フレームの前後のフレームの各サムネイル画像を、上記停止フレームの前後のフレームの各サムネイル画像(60a、60c、60d)が表示されていた位置にスクロールするようにして表示させる(ステップ36)。例えば、同図(b)に示すように、ユーザ操作によりチャプター5が選択された場合には、当該チャプター5の先頭フレームのサムネイル画像50dと、その前後のフレームのサムネイル画像61a、61c、61dを横軸に表示させる。
When any chapter is selected on the
そして、チャプター選択画面51上で、ユーザ操作(例えばカーソル左右移動及び決定ボタン)により当該各サムネイル画像が表示されたチャプターの何れかのサムネイル画像が選択された場合(ステップ37のYes)には、当該選択されたチャプターの当該選択されたサムネイル画像のフレームからタイトルを再生する(ステップ38)。例えば、同図(b)に示すように、チャプター5の先頭から2つ進んだフレーム(+2)のサムネイル画像61dが選択された場合には、同図(c)に示すように当該サムネイル画像61dのフレームからタイトルを再生する。
Then, on the
すなわち、上記チャプター選択画面51においては、選択されたチャプターを先頭フレームから再生させるだけでなく、上記表示されたその前後フレームからも再生させることができる。したがって、ユーザは、チャプターを選択する際に、上記先頭フレームのみならずその前後フレームを参照することによって所望のチャプターの内容を容易に把握した上で、移動先のチャプターを容易に決定することができるとともに、当該所望のチャプターの、先頭フレーム周辺の所望のフレームからタイトルを再生することが可能となる。これにより、例えばチャプターの区切りがずれていた場合(例えば、シーンチェンジ前の最終フレームが次のフレームの先頭フレームとなっていたような場合)に、当該ずれを補正して、真にチャプターの区切りとなるべき位置のフレームからタイトルを再生させることができる。
That is, on the
なお、上記図3において、チャプター選択画面51の上端のタブ(52a、52b・・・)は、当該チャプターがどのような条件で区切られているのかを示すものであり、各タブはユーザにより選択可能となっている。例えば、タブ52aはCMとタイトル本編との切り替わりによるチャプター区切り、タブ52bはCMと本編との切り替わりに加えてシーンチェンジの要素も加味したチャプター区切り、といったように、ユーザの好みに応じて上記特徴点抽出部6の処理により各条件でチャプターを作成させて、当該作成された各条件のチャプター区切りに応じたチャプター毎の再生を行わせることができる。
In FIG. 3, the tabs (52a, 52b,...) At the upper end of the
次に、上記ステップ33において、ユーザの操作が、現在再生中のチャプターからその前後のチャプターへ移動すること(以下、この動作を「チャプター送り」と称する)を要求する操作であった場合(ステップ33のK2)には、再生中のタイトルの再生を停止するとともに、当該一つ前または後のチャプターへ移動し(ステップ39)、当該移動後のチャプターの先頭フレームからタイトルを再生する(ステップ40)。例えば、図4(a)に示すように、チャプターAのMPEGストリームを再生中にチャプターを一つ先へ送るユーザ操作(例えばチャプター送りボタンや十字キーの右キーの押下操作)があった場合には、同図(b)に示すように、チャプターAに続くチャプターBへ移動して当該チャプターBのMPEGストリームを先頭フレームから再生する。 Next, in the above step 33, when the user operation is an operation requesting to move from the chapter currently being played back to the chapters before and after the chapter (this operation is hereinafter referred to as “chapter feeding”) (step 33). At 33 K2), the reproduction of the title being reproduced is stopped, and the next or next chapter is moved (step 39), and the title is reproduced from the first frame of the moved chapter (step 40). ). For example, as shown in FIG. 4 (a), when there is a user operation (for example, pressing the right button of the chapter feed button or the cross key) for sending a chapter forward while the MPEG stream of chapter A is being played back. As shown in FIG. 5B, the program moves to the chapter B following the chapter A and reproduces the MPEG stream of the chapter B from the first frame.
そして、図4(b)に示すように、当該移動先のチャプターBのMPEGストリームの再生と同時に、当該再生されたチャプターBのMPEGストリーム上に、当該移動先のチャプターBの先頭フレーム及びその前後(例えば各2枚)のフレームの各サムネイル画像70a〜70eを例えば画面下方に時系列順に水平方向へ並べて表示させる(図2のステップ41)。すなわち、上記サムネイル画像のうち、サムネイル画像70a及び70bは、移動元のチャプターAの最後から2枚目までのフレームのサムネイル画像であり、サムネイル画像70d及び70eは、移動先のチャプターBの先頭から2枚目及び3枚目のフレームのサムネイル画像である。なお同図の場合とは逆に一つ前のチャプターへ移動した場合には、二つ前のチャプターの最後の2フレームのサムネイル画像と、移動先のチャプターの先頭から3枚目までのフレームのサムネイル画像が表示されることとなる。
Then, as shown in FIG. 4 (b), simultaneously with the reproduction of the MPEG stream of the destination chapter B, the first frame of the destination chapter B and the preceding and following frames are reproduced on the reproduced MPEG stream of the chapter B. The
続いて、図4(c)に示すように、所定時間(例えば3〜5秒)経過後に上記各サムネイル画像を消去し、当該消去時におけるタイトルのタイムコード71を表示させる(ステップ42)。
Subsequently, as shown in FIG. 4C, each thumbnail image is erased after a predetermined time (for example, 3 to 5 seconds), and the
そして、図4(d)に示すように、所定時間(例えば1〜2秒)経過後、上記タイムコード71を消去して(ステップ43)、通常通り移動先のチャプターBのMPEGストリームを再生する。
Then, as shown in FIG. 4D, after a predetermined time (for example, 1 to 2 seconds) has elapsed, the
当該ステップ39〜ステップ43のチャプター送り動作によれば、上記各サムネイル画像により、ユーザはチャプター移動後にすぐに当該チャプターの内容及び移動元のチャプターとの関係を把握することができ、当該移動先のチャプターが自分の所望のチャプターであったか否かを容易に確認することができる。更に、上記タイムコードにより、移動後のチャプターのタイトル全体における位置も把握することができる。 According to the chapter sending operation in Step 39 to Step 43, the above thumbnail images allow the user to grasp the contents of the chapter and the relationship with the source chapter immediately after moving the chapter. It can be easily confirmed whether or not the chapter is a desired chapter. Furthermore, the position of the chapter in the entire title after movement can be grasped by the time code.
また、上記ステップ33において、ユーザ操作が上記K1及びK2の何れでもなかった場合(ステップ33のK3)には、ステップ31において再生中のタイトルの再生処理を続行する。以上の処理を、ユーザから操作入力を受け付ける度に繰り返す。 In step 33, if the user operation is neither K1 nor K2 (K3 in step 33), the reproduction process of the title being reproduced in step 31 is continued. The above processing is repeated every time an operation input is received from the user.
なお、上記チャプター選択動作及びチャプター送り動作において表示されるサムネイル画像は、例えばMPEGストリーム中のIピクチャフレームを抽出したサムネイル画像である。したがって、この場合上記各チャプターの先頭フレーム及びその前後のフレーム、または停止フレーム及びその前後のフレームの各サムネイル画像は、Iピクチャのみを見た場合の連続したIピクチャフレームのサムネイル画像である。 The thumbnail images displayed in the chapter selection operation and the chapter sending operation are thumbnail images obtained by extracting I picture frames in an MPEG stream, for example. Accordingly, in this case, the thumbnail images of the first frame of each chapter and the preceding and following frames, or the stop frame and the preceding and following frames are thumbnail images of successive I picture frames when only the I picture is viewed.
以上説明したように、本実施形態においては、チャプターの移動前には、上記チャプター選択画面51におけるサムネイル画像61により、ユーザが所望のチャプターを容易に選択して当該チャプターへ移動でき、またチャプター移動後も、上記サムネイル画像70により、所望のチャプターであったか否かの確認を容易に行うことができる。
As described above, in the present embodiment, before the chapter is moved, the user can easily select a desired chapter and move to the chapter by the thumbnail image 61 on the
なお、本発明は上述の実施形態にのみ限定されるものではなく、本発明の要旨を逸脱しない範囲内において種々変更を加え得ることは勿論である。 It should be noted that the present invention is not limited to the above-described embodiment, and various modifications can be made without departing from the scope of the present invention.
上述の実施形態においては、上記図4に示したようにユーザからチャプター送り操作が入力された場合には、移動先のチャプターの先頭フレーム及びその前後のフレームの各サムネイル画像を表示させるようにしていたが、一つ先のチャプターに移動する場合には、当該各サムネイル画像を表示させる代わりに、移動先のチャプターのMPEGストリームを再生するのと同時に、当該再生されたMPEGストリーム上に、チャプター移動によって表示されなかったシーンのMPEGストリームをサムネイルストリームとしていわゆるピクチャー・イン・ピクチャー形式で再生するようにしても構わない。 In the above-described embodiment, when the chapter feed operation is input from the user as shown in FIG. 4, the thumbnail images of the first frame of the destination chapter and the frames before and after the chapter are displayed. However, when moving to the next chapter, instead of displaying each thumbnail image, the chapter stream is moved onto the reproduced MPEG stream at the same time as the MPEG stream of the destination chapter is reproduced. The MPEG stream of the scene not displayed by the above may be reproduced as a thumbnail stream in a so-called picture-in-picture format.
図5は、当該ピクチャー・イン・ピクチャー形式で表示させる場合の画面の様子を示した図である。同図(a)に示すように、例えばチャプターAのMPEGストリームを再生中に、ユーザから次のチャプターBへの送り操作があった場合には、当該チャプターAのMPEGストリームの再生を停止して、同図(b)に示すように、主画面において移動先のチャプターBのMPEGストリームをその先頭フレームから再生するのと同時に、例えば画面右隅に、上記チャプターAの再生停止位置におけるフレーム以降のフレームをサムネイルストリーム80としてピクチャー・イン・ピクチャー形式で表示する。また、このとき当該先頭フレームのタイムコード71も表示するようにしても構わない。
FIG. 5 is a diagram showing a state of the screen when displaying in the picture-in-picture format. As shown in FIG. 5A, for example, when the user performs a sending operation to the next chapter B during playback of the MPEG stream of chapter A, the playback of the MPEG stream of chapter A is stopped. As shown in FIG. 5B, at the same time as the MPEG stream of the destination chapter B on the main screen is played back from the top frame, at the right corner of the screen, for example, after the frame at the playback stop position of the chapter A. The frame is displayed as a
そして、同図(c)に示すように、上記サムネイルストリーム80は、移動先のチャプターBの先頭フレームまで再生される。この時、主画面においてはチャプターBのフレームB’まで再生が進んでいる。その後は同図(d)に示すようにフレームB’以降のチャプターBのMPEGストリームを通常通り再生する。
Then, as shown in FIG. 5C, the
図6は、この場合の主画面(チャプターBのMPEGストリーム)と上記サムネイルストリーム80の各シーケンスを示した図である。同図に示すように、ユーザのチャプター送り動作によりチャプターAからチャプターBに送られた場合、主画面において、チャプターBの先頭フレームからフレームB’までのフレームが再生される間に、サムネイルストリーム80において、主画面では再生されなかった、チャプターAにおける停止位置のフレームから移動先のチャプターBの先頭フレームBまでのフレームが再生されることになる。
FIG. 6 shows each sequence of the main screen (MPEG stream of Chapter B) and the
図7は、上記サムネイルストリーム80を再生する場合の動作の流れを示したフローチャートである。同図において、上述の実施形態における図2と同様の動作となる箇所については同一の符号を付し、説明を省略または簡略化する。
FIG. 7 is a flowchart showing an operation flow when the
同図に示すように、ユーザから一つ先のチャプターへの送り操作が入力された場合(ステップ33のK2)、例えばチャプターAからその次のチャプターBへチャプター送り操作がされた場合には、当該一つ先のチャプターへ移動して(ステップ91)、上記図5(b)及び(c)に示したように、移動後のチャプターBのMPEGストリームを先頭フレームから再生するとともに(ステップ92)、主画面右隅に、上記移動前のチャプターAの再生停止時点におけるフレームからサムネイルストリーム80を再生する(ステップ93)。そして、当該サムネイルストリーム80を、移動先のチャプターBの先頭フレームまで再生した場合(ステップ94のYes)、サムネイルストリーム80を消去して(ステップ95)、チャプターBのMPEGストリーム(図5(d)のフレームB’から後のフレーム)を通常通り再生する。
As shown in the figure, when a feed operation from the user to the next chapter is input (K2 in step 33), for example, when a chapter feed operation is performed from chapter A to the next chapter B, After moving to the next chapter (step 91), as shown in FIGS. 5B and 5C, the MPEG stream of chapter B after the movement is reproduced from the first frame (step 92). In the right corner of the main screen, the
なお、記録再生装置100は、上記主画面用のデコード処理を行う上記MPEGデコーダ12の他に、当該サムネイルストリーム80のデコード用に、MPEGデコーダをもう一つ設けるようにしてもよい。また、当該サムネイルストリーム80は、等倍速ではなく、例えば2倍速、3倍速等、再生速度を変更して再生するようにしても構わない。これにより、チャプター送りによって再生されなかったシーンも表示されるため、ユーザは移動元のチャプターと移動先のチャプターの両方のシーンを視聴して両チャプターの関係を同一画面上で把握しながらタイトルを再生させることが可能となる。
The recording / reproducing
上述の実施形態において、上記チャプター選択画面51で各チャプターの先頭フレーム及びその前後のフレームの各サムネイル画像が表示された場合や、チャプター送りの際に移動先のチャプターの先頭フレーム及びその前後のフレームの各サムネイル画像が表示された場合に、当該表示画面上において、上記チャプターを区切るための区切り位置情報を付加し直すことができるようにしても構わない。すなわち、例えば上記特徴点抽出部6がチャプター区切りのために当初付加した区切り位置情報にずれや漏れがあった場合や、ユーザの嗜好に合わない場合等に、上記画面上において、先頭フレームの前後のフレームを選択することで、上記先頭フレームに付加されている各チャプターの区切り位置情報をその前後フレームに打ち直すことができるように特徴点抽出部6に処理させる。この場合、具体的には例えば各前後フレームのサムネイル画像にカーソルが合わされたときに、チャプター打ち直しのためのサブメニュー画面を表示させるようにしてもよい。これにより、ユーザは所望の位置にチャプターを打ち直すことができ、次回からは当該打ち直した位置を先頭フレームとしてチャプターを再生させることができる。
In the above-described embodiment, when the thumbnail images of the first frame of each chapter and the frames before and after the chapter are displayed on the
上記実施形態においては、サムネイル画像の表示とともにタイトルのタイムコード71を表示していたが、時間情報として、当該タイムコードに代えて、例えばチャプター送りの場合に、移動前のチャプターの停止時点から移動先の先頭フレームまでの、タイムコード上の時間間隔(すなわち、どのくらいの時間分移動したか)を表示させるようにしても構わない。
In the above embodiment, the
また、チャプター送りの場合には、上述の実施形態のようなサムネイル画像の表示、または上記ピクチャー・イン・ピクチャー形式のサムネイルストリームの表示、上記タイムコードの表示、時間間隔の表示、といった表示の何れを行うか、または何れも行わないかをユーザの嗜好に応じて自由にカスタマイズできるようにしても構わない。 In the case of chapter sending, any one of the thumbnail image display as in the above embodiment, the picture-in-picture format thumbnail stream display, the time code display, and the time interval display may be used. Whether or not to perform the above may be freely customized according to the user's preference.
上述の実施形態においては、いわゆるHDD/DVDレコーダとしての記録再生装置100に本発明を適用したが、例えば記録再生機能を有するテレビジョン受像機やPC等、他の機器に適用することも勿論可能である。
In the above-described embodiment, the present invention is applied to the recording / reproducing
6…特徴点抽出部
7…HDD
8…光ディスクドライブ
9…CPU
12…MPEGデコーダ
13…グラフィックコントローラ
16…操作入力部
18…ディスプレイ
20…光ディスク
21…リモートコントローラ
51…チャプター選択画面
50…各チャプター先頭フレームのサムネイル画像
60…停止フレームの前後フレームのサムネイル画像
61…移動先チャプター先頭フレームの前後フレームのサムネイル画像
70…送り先のチャプター先頭フレーム及びその前後フレームのサムネイル画像
71…タイムコード
80…サムネイルストリーム
100…記録再生装置
6 ... Feature
8 ...
DESCRIPTION OF
Claims (14)
前記区切られた動画像中の第1の区間の動画像の再生中に、当該第1の区間の動画像から当該第1の区間とは異なる第2の区間の動画像へ移動して再生するためのユーザ操作を入力する入力手段と、
前記ユーザ操作が入力されたときに、前記第1の区間の動画像の再生を停止するとともに、前記区切り位置情報に基づいて、少なくとも前記第2の区間の先頭フレーム及び当該先頭フレームの前のフレームの各縮小画像を表示するように制御する表示制御手段と
を具備することを特徴とする画像処理装置。 Reproduction means configured to reproduce a moving image that is composed of a plurality of frames and in which delimiter position information for delimiting into a plurality of sections according to a predetermined condition is added to the predetermined frame;
During the reproduction of the moving image of the first section in the divided moving image, the moving image of the first section is moved to the moving image of the second section different from the first section and reproduced. Input means for inputting a user operation for
When the user operation is input, the reproduction of the moving image of the first section is stopped, and at least the first frame of the second section and the frame before the first frame based on the delimiter position information An image processing apparatus comprising: a display control unit that controls to display each of the reduced images.
前記第2の区間は前記第1の区間の一つ前または一つ後の区間であり、
前記表示制御手段は、前記ユーザ操作が入力されたときに、前記第2の区間の動画像を前記先頭フレームから再生するとともに、当該先頭フレーム及び当該先頭フレームの前後の各フレームの各縮小画像を前記再生される第2の区間の動画像上に時系列順に並べて表示するように制御することを特徴とする画像処理装置。 The image processing apparatus according to claim 1.
The second section is a section immediately before or after the first section,
The display control means reproduces the moving image of the second section from the top frame when the user operation is input, and displays the reduced images of the top frame and the frames before and after the top frame. An image processing apparatus that performs control so as to be arranged and displayed in time series on the moving image of the second section to be reproduced.
前記表示制御手段は、前記表示された各縮小画像を所定時間経過後に消去するように制御することを特徴とする画像処理装置。 The image processing apparatus according to claim 2,
The image processing apparatus, wherein the display control unit controls the displayed reduced images to be erased after a predetermined time.
前記表示制御手段は、前記各縮小画像が消去されたときに、前記再生されている第2の区間の動画像の前記消去位置におけるタイムコードを当該第2の区間の動画像上に所定時間表示するように制御することを特徴とする画像処理装置。 The image processing apparatus according to claim 3.
The display control means displays a time code at the erasing position of the reproduced moving image of the second section on the moving image of the second section for a predetermined time when each reduced image is erased. An image processing apparatus that is controlled so as to perform.
前記表示制御手段は、前記各種縮小画像が消去されたときに、前記再生を停止された第1の区間の動画像の当該停止位置におけるタイムコードと前記再生されている前記第2の区間の動画像の前記消去位置におけるタイムコードとの時間間隔情報を表示するように制御することを特徴とする画像処理装置。 The image processing apparatus according to claim 3.
When the various reduced images are erased, the display control means includes a time code at the stop position of the moving image of the first section where the reproduction is stopped and the moving image of the second section being reproduced. An image processing apparatus that controls to display time interval information with respect to a time code at the erasing position of an image.
前記表示制御手段により前記第2の区間の先頭フレーム及び当該先頭フレームの前後の各フレームの各縮小画像が表示されている状態で、ユーザの操作により当該前後の各フレームの何れかに前記区切り位置情報を付加し直す手段を更に具備することを特徴とする画像処理装置。 The image processing apparatus according to claim 2,
In the state where the display control means displays the first frame of the second section and the reduced images of the frames before and after the first frame, the separation position is set at any of the frames before and after the user operation. An image processing apparatus, further comprising means for re-adding information.
前記第2の区間は複数存在し、
前記表示制御手段は、
前記ユーザ操作が入力されたときに、前記第1の区間の前記再生停止位置における停止フレーム及び当該停止フレームの前後の各フレームの各縮小画像を第1の方向に時系列順に並べて表示させるとともに、前記移動すべき第2の区間をユーザに選択させるために、前記各第2の区間の各先頭フレームの縮小画像を前記停止フレームの縮小画像を挟むように前記第1の方向とは異なる第2の方向に時系列順に並べて表示させるように制御する第1の表示制御手段と、
前記表示された各第2の区間の各先頭フレームの縮小画像のうち何れかを選択する第1のユーザ選択操作が入力されたときに、前記表示された停止フレーム及び当該停止フレームの前後の各フレームの各縮小画像を消去するとともに、前記選択された第2の区間の先頭フレーム及び当該先頭フレームの前後の各フレームの各縮小画像を前記第1の方向に時系列順に並べて表示するように制御する第2の表示制御手段と
を有することを特徴とする画像処理装置。 The image processing apparatus according to claim 1.
There are a plurality of the second sections,
The display control means includes
When the user operation is input, the stop frame at the playback stop position in the first section and the reduced images of the frames before and after the stop frame are displayed side by side in time series in the first direction, and In order to allow the user to select the second section to be moved, a second image that is different from the first direction so that the reduced image of each head frame of each second section sandwiches the reduced image of the stop frame. First display control means for controlling the display to be displayed in chronological order in the direction of
When the first user selection operation for selecting any one of the reduced images of the first frames of the displayed second sections is input, the displayed stop frame and the frames before and after the stop frame are input. Controls to delete each reduced image of the frame, and display the reduced image of the first frame of the selected second section and each of the reduced frames of the frames before and after the first frame in time series in the first direction. And a second display control means.
前記再生手段は、前記第1のユーザ選択操作後に前記第2の区間の動画像の再生を選択する第2のユーザ選択操作が入力されたときに、当該第2の区間の前記先頭フレームから動画像を再生することを特徴とする画像処理装置。 The image processing apparatus according to claim 7.
When the second user selection operation for selecting playback of the moving image in the second section is input after the first user selection operation, the playback means starts moving from the first frame in the second section. An image processing apparatus for reproducing an image.
前記再生手段は、前記第1のユーザ選択操作後に前記第2の表示制御手段により表示された第2の区間の先頭フレーム及び当該先頭フレームの前後の各フレームの各縮小画像のうち何れかを選択する第3のユーザ選択操作が入力されたときに、当該選択された縮小画像に対応するフレームから前記動画像を再生することを特徴とする画像処理装置。 The image processing apparatus according to claim 7.
The reproduction means selects either the first frame of the second section displayed by the second display control means after the first user selection operation or each reduced image of each frame before and after the first frame. When the third user selection operation is input, the moving image is reproduced from a frame corresponding to the selected reduced image.
前記第1の表示制御手段及び前記第2の表示制御手段は、前記第1の方向と第2の方向とが略直交するように各縮小画像が表示されるように制御することを特徴とする画像処理装置。 The image processing apparatus according to claim 7.
It said first display control means and the second display control means, characterized in that said first and second directions are controlled so that each reduced image is displayed so as to be substantially perpendicular Image processing device.
前記第2の表示制御手段により前記第2の区間の先頭フレーム及び当該先頭フレームの前後の各フレームの各縮小画像が表示されている状態で、ユーザの操作により当該前後の各フレームの何れかに前記区切り位置情報を付加し直す手段を更に具備することを特徴とする画像処理装置。 The image processing apparatus according to claim 7.
With the second display control means displaying the first frame of the second section and the reduced images of the frames before and after the first frame, any one of the frames before and after the user operation is displayed. An image processing apparatus further comprising means for re-adding the delimiter position information.
前記第2の区間は前記第1の区間の一つ後の区間であり、
前記表示制御手段は、前記ユーザ操作が入力されたときに、前記第2の区間の動画像を前記先頭フレームから再生するとともに、前記第1の区間の再生停止位置におけるフレームから前記先頭フレームまでの縮小動画像を前記再生される第2の区間の動画像上に表示するよう制御することを特徴とする画像処理装置。 The image processing apparatus according to claim 1.
The second section is a section immediately after the first section,
The display control means plays back the moving image of the second section from the top frame when the user operation is input, and from the frame at the playback stop position of the first section to the top frame. An image processing apparatus that controls to display a reduced moving image on the moving image of the second section to be reproduced.
前記区切られた動画像中の第1の区間の動画像の再生中に、当該第1の区間の動画像から当該第1の区間とは異なる第2の区間の動画像へ移動して再生するためのユーザ操作を入力するステップと、
前記ユーザ操作が入力されたときに、前記第1の区間の動画像の再生を停止するとともに、前記区切り位置情報に基づいて、少なくとも前記第2の区間の先頭フレーム及び当該先頭フレームの前のフレームの各縮小画像を表示するように制御するステップと
を具備することを特徴とする画像処理方法。 A step of playing back a moving image that is composed of a plurality of frames and in which delimiter position information for delimiting into a plurality of sections according to a predetermined condition is added to the predetermined frame;
During the reproduction of the moving image of the first section in the divided moving image, the moving image of the first section is moved to the moving image of the second section different from the first section and reproduced. Inputting a user operation for:
When the user operation is input, the reproduction of the moving image of the first section is stopped, and at least the first frame of the second section and the frame before the first frame based on the delimiter position information And a step of controlling to display each reduced image.
複数のフレームで構成され、所定の条件により複数の区間に区切るための区切り位置情報が所定のフレームに付加された動画像を再生するステップと、
前記区切られた動画像中の第1の区間の動画像の再生中に、当該第1の区間の動画像から当該第1の区間とは異なる第2の区間の動画像へ移動して再生するためのユーザ操作を入力するステップと、
前記ユーザ操作が入力されたときに、前記第1の区間の動画像の再生を停止するとともに、前記区切り位置情報に基づいて、少なくとも前記第2の区間の先頭フレーム及び当該先頭フレームの前のフレームの各縮小画像を表示するように制御するステップと
を実行させるためのプログラム。 In the image processing device,
A step of playing back a moving image that is composed of a plurality of frames and in which delimiter position information for delimiting into a plurality of sections according to a predetermined condition is added to the predetermined frame;
During the reproduction of the moving image of the first section in the divided moving image, the moving image of the first section is moved to the moving image of the second section different from the first section and reproduced. Inputting a user operation for:
When the user operation is input, the reproduction of the moving image of the first section is stopped, and at least the first frame of the second section and the frame before the first frame based on the delimiter position information And a step for controlling to display each reduced image of.
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2005277723A JP4701958B2 (en) | 2005-09-26 | 2005-09-26 | Image processing apparatus, image processing method, and program thereof |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2005277723A JP4701958B2 (en) | 2005-09-26 | 2005-09-26 | Image processing apparatus, image processing method, and program thereof |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2007089012A JP2007089012A (en) | 2007-04-05 |
JP4701958B2 true JP4701958B2 (en) | 2011-06-15 |
Family
ID=37975524
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2005277723A Expired - Fee Related JP4701958B2 (en) | 2005-09-26 | 2005-09-26 | Image processing apparatus, image processing method, and program thereof |
Country Status (1)
Country | Link |
---|---|
JP (1) | JP4701958B2 (en) |
Families Citing this family (9)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
KR101345291B1 (en) | 2007-05-14 | 2013-12-27 | 삼성전자주식회사 | Method of controlling digital image processing apparatus wherein still image is efficiently searched from moving image |
JP2009047721A (en) * | 2007-08-13 | 2009-03-05 | Sony Corp | Display control device, display control method and program |
US8768137B2 (en) | 2007-12-14 | 2014-07-01 | Microsoft Corporation | Program segments display bar |
KR101531911B1 (en) * | 2008-09-30 | 2015-06-29 | 엘지전자 주식회사 | Opraing method of broadcasting receiver storing broadcasting program and broadcasting receiver enabling of the method |
JP5757080B2 (en) | 2010-10-22 | 2015-07-29 | ソニー株式会社 | Operation terminal device, display device, and operation method of display device |
JP5754119B2 (en) | 2010-12-07 | 2015-07-29 | ソニー株式会社 | Information processing apparatus, information processing method, and program |
JP6898575B2 (en) * | 2017-01-20 | 2021-07-07 | 株式会社ミクシィ | Information processing device, control method and control program of information processing device |
JP6718389B2 (en) * | 2017-01-20 | 2020-07-08 | 株式会社ミクシィ | Information processing apparatus, control method of information processing apparatus, and control program |
CN111818393B (en) * | 2020-08-07 | 2022-11-18 | 联想(北京)有限公司 | Video progress adjusting method and device and electronic equipment |
Citations (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2001008168A (en) * | 1999-06-22 | 2001-01-12 | Canon Inc | Picture recording/reproducing device, its method and computer readable storage medium |
US20030122861A1 (en) * | 2001-12-29 | 2003-07-03 | Lg Electronics Inc. | Method, interface and apparatus for video browsing |
JP2004072132A (en) * | 2002-06-11 | 2004-03-04 | Sony Corp | Image detector, image detecting method and image detecting program |
-
2005
- 2005-09-26 JP JP2005277723A patent/JP4701958B2/en not_active Expired - Fee Related
Patent Citations (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2001008168A (en) * | 1999-06-22 | 2001-01-12 | Canon Inc | Picture recording/reproducing device, its method and computer readable storage medium |
US20030122861A1 (en) * | 2001-12-29 | 2003-07-03 | Lg Electronics Inc. | Method, interface and apparatus for video browsing |
JP2004072132A (en) * | 2002-06-11 | 2004-03-04 | Sony Corp | Image detector, image detecting method and image detecting program |
Also Published As
Publication number | Publication date |
---|---|
JP2007089012A (en) | 2007-04-05 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP4774940B2 (en) | Information processing apparatus, display method, and program thereof | |
JP4701958B2 (en) | Image processing apparatus, image processing method, and program thereof | |
JP3938368B2 (en) | Moving image data editing apparatus and moving image data editing method | |
JP4340528B2 (en) | Information reproducing apparatus, information reproducing method, information reproducing program, and information recording medium | |
JP2008098960A (en) | Information recording and reproducing apparatus | |
JP2008167256A (en) | Information processor and information processing method, and program | |
JP4280776B2 (en) | Information reproducing apparatus and method, and computer program | |
JP2003259310A (en) | Menu apparatus for video/audio recording and reproducing medium | |
JP4031918B2 (en) | Playback device | |
JP2002262228A (en) | Digest producing device | |
JP4579875B2 (en) | Recording / reproducing apparatus and recording / reproducing method | |
KR100782212B1 (en) | Apparatus and method for guiding main image using progress bar in PVR | |
JP2007208559A (en) | Image output device | |
JP2007097015A (en) | Reproducing apparatus, recording and reproducing apparatus, data processing method, and program thereof | |
JP3900363B2 (en) | AVHDD and hard disk recorder | |
JP2003319314A (en) | Hard disk recorder and video recording and reproducing apparatus | |
JP4807328B2 (en) | Playback device | |
JP2006332856A (en) | Reproducing apparatus | |
JP2006323895A (en) | Reproducing method and device matching kind of medium | |
JP2005347997A (en) | Composite type information recording and reproducing device | |
JP3090934U (en) | DVD player | |
JP4769825B2 (en) | Information playback device | |
JP5023136B2 (en) | Information playback device | |
JP2013051645A (en) | Video processing device and video processing method | |
JP4835558B2 (en) | Digital data dubbing method and apparatus |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20080916 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20100217 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20100427 |
|
A521 | Written amendment |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20100521 |
|
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20110208 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20110221 |
|
LAPS | Cancellation because of no payment of annual fees |