JP2007006082A - Image reproducer - Google Patents

Image reproducer Download PDF

Info

Publication number
JP2007006082A
JP2007006082A JP2005183242A JP2005183242A JP2007006082A JP 2007006082 A JP2007006082 A JP 2007006082A JP 2005183242 A JP2005183242 A JP 2005183242A JP 2005183242 A JP2005183242 A JP 2005183242A JP 2007006082 A JP2007006082 A JP 2007006082A
Authority
JP
Japan
Prior art keywords
music
video
playback
search
search condition
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
JP2005183242A
Other languages
Japanese (ja)
Other versions
JP4679259B2 (en
Inventor
Hiroki Okada
広樹 岡田
Original Assignee
Alpine Electronics Inc
アルパイン株式会社
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Alpine Electronics Inc, アルパイン株式会社 filed Critical Alpine Electronics Inc
Priority to JP2005183242A priority Critical patent/JP4679259B2/en
Publication of JP2007006082A publication Critical patent/JP2007006082A/en
Application granted granted Critical
Publication of JP4679259B2 publication Critical patent/JP4679259B2/en
Expired - Fee Related legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Abstract

<P>PROBLEM TO BE SOLVED: To provide an "image reproducer" capable of reducing complicated labor and a time for retrieving a desired scene from a recorded image. <P>SOLUTION: The image reproducer retrieves a partial scene from an image in which music corresponds to at least a part of the image. The image reproducer has an image/music storage 1 storing image data required for reproducing the image and the music and music data and a retrieval-condition setting section 3 setting retrieval conditions capable of specifying the place of the reproduction of the music. The image reproducer further has a music retriever 4 specifying the place of the reproduction of the music satisfying retrieval conditions set by the retrieval-condition setting section 3, and an image retriever 5 specifying the partial scene of the image corresponding to the place of the reproduction of the music specified by the music retriever 4. <P>COPYRIGHT: (C)2007,JPO&INPIT

Description

本発明は、記録された映像の中から所望のシーンを検索する映像再生装置に関する。   The present invention relates to a video playback apparatus that searches for a desired scene from recorded video.
DVD等に記録された映画等の映像は再生時間が長いため、その中から特徴のあるシーンのみを取り出してみることができれば便利である。例えば、DVDの購入に先立って、特徴のあるダイジェストシーンのみを見ることができれば、このDVDを購入すべきか否かを決定する場合の参考になる。また、一度見た映画等について特徴のクライマックスシーンのみを見たい場合がある。このような記録された映像全体から一部のシーンを選択的に抽出する従来技術としては、マルチアングルの映像からなるダイジェスト画像を生成する映像システムが知られている(例えば、特許文献1参照。)。
特開2003−230127号公報(第5−11頁、図1−8)
Since movies such as movies recorded on a DVD or the like have a long playback time, it is convenient if only characteristic scenes can be extracted from the video. For example, prior to the purchase of a DVD, if only a characteristic digest scene can be seen, this is a reference for determining whether or not to purchase this DVD. In addition, there may be a case where only a featured climax scene is desired for a movie or the like that has been seen once. As a conventional technique for selectively extracting a part of a scene from the entire recorded video, a video system that generates a digest image including a multi-angle video is known (for example, see Patent Document 1). ).
Japanese Patent Laying-Open No. 2003-230127 (page 5-11, FIG. 1-8)
ところで、上述した特許文献1に開示されたシステムでは、マルチアングルの映像が重要なシーンにのみ用いられているという前提でダイジェスト映像が生成されている。しかし、利用者が検索したいシーンが必ずしもマルチアングルの映像であるとは限らないため、マルチアングルであることを条件に映像を検索した場合に必ずしも所望のシーンを検索することができず、結局早送り等の操作に頼ることになるため映像の検索に煩雑な手間と時間がかかるという問題があった。また、現時点でマルチアングルの映像を一部に取り入れている映画等の映像はそれほど多くないため、そのような映像については所望のシーンを検索できないことになる。   By the way, in the system disclosed in Patent Document 1 described above, a digest video is generated on the premise that a multi-angle video is used only for an important scene. However, since the scene that the user wants to search is not necessarily a multi-angle video, if the video is searched on condition that it is multi-angle, the desired scene cannot always be searched, and eventually fast-forwarding is performed. There is a problem that it takes a lot of trouble and time to search for the video because it depends on such operations as the above. In addition, since there are not so many videos such as movies that incorporate a multi-angle video as a part at present, a desired scene cannot be searched for such a video.
本発明は、このような点に鑑みて創作されたものであり、その目的は、記録された映像の中から所望のシーンを検索する煩雑な手間と時間を低減することができる映像再生装置を提供することにある。   The present invention was created in view of the above points, and an object of the present invention is to provide a video reproducing apparatus capable of reducing the troublesome time and time for searching for a desired scene from recorded video. It is to provide.
上述した課題を解決するために、本発明の映像再生装置は、少なくとも一部に音楽が対応している映像の中から一部のシーンを検索しており、映像および音楽の再生に必要な映像データおよび音楽データが格納される映像・音楽格納手段と、音楽の再生位置を特定可能な検索条件を設定する検索条件設定手段と、検索条件設定手段によって設定された検索条件を満たす音楽の再生位置を特定する音楽検索手段と、音楽検索手段によって特定された音楽の再生位置に対応する映像の一部のシーンを特定する映像検索手段とを備えている。映像とともに音楽が再生される場合にこの音楽を所定の検索条件を指定して検索し、さらに検索された音楽に対応する映像を検索することにより、音楽を手掛かりにして映像の検索を行うことができるため、所望の映像シーン対応して特徴的な音楽が用いられている場合にこのシーンの検索に要する煩雑な手間と時間を削減することができる。例えば、映画やドラマ等のクライマックスシーンでは、映像の臨場感を高めるために他のシーンよりも印象に残る音楽が用いられる場合が多いため、この特徴的な音楽を指定することにより、再生を希望するクライマックスシーンの検索が容易となる。   In order to solve the above-described problem, the video playback apparatus of the present invention searches for a part of scenes from video corresponding to music at least in part, and video necessary for playback of video and music Video / music storage means for storing data and music data, search condition setting means for setting search conditions for specifying the music playback position, and music playback position satisfying the search conditions set by the search condition setting means And music search means for specifying a partial scene of the video corresponding to the music playback position specified by the music search means. When music is played along with video, this music can be searched by specifying a predetermined search condition, and video corresponding to the searched music can be searched to search for video using the music as a clue. Therefore, when characteristic music corresponding to a desired video scene is used, it is possible to reduce troublesome labor and time required to search for this scene. For example, in climax scenes such as movies and dramas, music that is more impressive than other scenes is often used to enhance the realistic sensation of the video, so playback can be requested by specifying this characteristic music. The search for the climax scene to be performed becomes easy.
また、上述した検索条件設定手段によって設定される検索条件は、音の大きさの時間変化パターンを特定可能な音楽データであり、音楽検索手段は、映像・音楽格納手段に格納された音楽データの再生したときに得られる音楽の音の大きさの時間変化パターンの中から、検索条件としての音の大きさの時間変化パターンと一致あるいは類似する箇所を、検索条件を満たす音楽の再生位置として特定することが望ましい。音楽を検索するための検索条件として、音の大きさの時間変化パターン、すなわち波形パターンを特定することができる音楽データを指定することにより、この波形パターンと同じ内容を有する音楽の再生位置を検索することができる。   Further, the search condition set by the search condition setting means described above is music data that can specify a temporal change pattern of sound volume, and the music search means stores music data stored in the video / music storage means. From the time-varying pattern of the sound volume of the music that is obtained during playback, the part that matches or resembles the sound volume time-varying pattern as the search condition is specified as the music playback position that satisfies the search condition. It is desirable to do. As a search condition for searching for music, by specifying music data that can specify the time change pattern of the sound volume, that is, the waveform pattern, the playback position of music having the same content as this waveform pattern is searched. can do.
また、上述した検索条件設定手段によって設定される検索条件は、使用される楽器であり、音楽検索手段は、映像・音楽格納手段に格納された音楽データを再生したときに得られる音楽の中から、検索条件で指定された楽器を用いて演奏された箇所を、検索条件を満たす音楽の再生位置として特定することが望ましい。音楽を検索するための検索条件として楽器を指定することにより、その楽器が用いられている音楽の再生位置を検索することができるため、音楽を演奏している楽器の印象が強い映像シーンを検索する場合に、このシーンの検索に要する煩雑な手間と時間を削減することができる。   The search condition set by the search condition setting means described above is a musical instrument to be used, and the music search means is selected from among music obtained when music data stored in the video / music storage means is reproduced. It is desirable to specify a place played using the musical instrument specified by the search condition as a music playback position that satisfies the search condition. By specifying an instrument as a search condition for searching for music, you can search for the playback position of the music that uses the instrument, so you can search for video scenes that have a strong impression of the instrument playing the music. In this case, it is possible to reduce the troublesome time and time required to search for this scene.
また、上述した音楽検索手段は、映像・音楽格納手段に格納された音楽データを再生したときに得られる音楽の中から、検索条件で指定された楽器に固有の音色を含む箇所を、検索条件を満たす音楽の再生位置として特定することが望ましい。これにより、検索条件として指定した楽器を使用した音楽の再生位置の特定が可能となる。   In addition, the music search means described above searches for a location including a timbre specific to the instrument specified by the search condition from music obtained when the music data stored in the video / music storage means is reproduced. It is desirable to specify the music playback position that satisfies the above. This makes it possible to specify the music playback position using the musical instrument designated as the search condition.
また、上述した検索条件設定手段によって設定される検索条件は、曲調およびジャンルの少なくとも一方であり、音楽検索手段は、映像・音楽格納手段に格納された音楽データを再生したときに得られる音楽の中から、検索条件で指定された曲調あるいはジャンルが一致する箇所を、検索条件を満たす音楽の再生位置として特定することが望ましい。音楽を検索するための検索条件として曲調やジャンルを指定することにより、その曲調あるいはジャンルの音楽の再生位置を検索することができるため、音楽の曲調やジャンルの印象が強い映像シーンを検索する場合に、このシーンの検索に要する煩雑な手間と時間を削減することができる。   Further, the search condition set by the search condition setting means described above is at least one of tune and genre, and the music search means is the music that is obtained when the music data stored in the video / music storage means is reproduced. It is desirable to specify a position where the music tone or genre specified by the search condition matches as a music playback position satisfying the search condition. When searching for video scenes with a strong impression of the music tone or genre by specifying the tone or genre as a search condition for searching for music, the playback position of the music or genre music can be searched. In addition, it is possible to reduce the troublesome time and time required to search for this scene.
また、上述した映像・音楽再生手段に格納された映像データおよび音楽データを読み出して映像および音楽の再生を行う再生手段と、再生開始位置を指定して再生手段による再生動作の開始を指示する再生指示手段とをさらに備え、映像検索手段によって一部のシーンが特定されたときに、再生指示手段は、この一部のシーンに対応する再生開始位置を指定して再生手段に対する映像および音楽の再生を指示することが望ましい。これにより、検索条件に合った音楽の再生位置から音楽と映像の両方を再生することが可能になる。   Also, a playback means for reading the video data and music data stored in the video / music playback means described above to play back the video and music, and a playback for designating a playback start position and instructing the start of the playback operation by the playback means An instruction means, and when a part of the scene is specified by the video search means, the reproduction instruction means designates a reproduction start position corresponding to the part of the scene and reproduces video and music on the reproduction means. It is desirable to indicate. As a result, both music and video can be played from the music playback position that meets the search conditions.
また、上述した映像検索手段によって特定されたシーンが複数存在する場合に、再生指示手段は、再生位置が最も早いシーンに対応する再生開始位置を指定することが望ましい。これにより、検索条件に合った音楽の再生位置が複数存在する場合に、最初のシーンから再生してその内容を確認することが可能になる。   Further, when there are a plurality of scenes specified by the above-described video search means, it is desirable that the reproduction instruction means designates a reproduction start position corresponding to the scene with the earliest reproduction position. As a result, when there are a plurality of music playback positions that meet the search conditions, it is possible to play back from the first scene and check the contents.
また、上述した再生位置の変更指示を受け付ける操作手段をさらに備え、再生指示手段は、操作手段を用いて変更指示がなされたときに、映像検索手段によって特定された複数のシーンのそれぞれに対応する再生開始位置を所定の順番で切り替えることが望ましい。これにより、検索条件に合った音楽の再生位置が複数存在する場合に、それぞれの再生位置に対応した複数のシーンを利用者の操作に応じて順番に再生してその内容を確認することが可能になる。   In addition, it further includes an operation unit that receives an instruction to change the reproduction position described above, and the reproduction instruction unit corresponds to each of the plurality of scenes specified by the video search unit when the change instruction is made using the operation unit. It is desirable to switch the reproduction start position in a predetermined order. As a result, when there are multiple music playback positions that match the search conditions, it is possible to play back multiple scenes corresponding to each playback position in order according to the user's operation and confirm the contents. become.
また、上述した映像検索手段によって特定されたシーンが複数存在する場合に、再生指示手段は、これら複数のシーンのそれぞれに対応する再生開始位置を順番に指定し、再生手段は、再生指示手段によって指定された再生開始位置の順番にしたがって複数のシーンのそれぞれに対応する映像および音楽の再生を行うことが望ましい。これにより、検索条件に合った音楽の再生位置が複数存在する場合に、それぞれの再生位置に対応した複数のシーンを自動的に順番に再生してその内容を確認することができる。   In addition, when there are a plurality of scenes specified by the video search means described above, the playback instruction means sequentially specifies the playback start positions corresponding to each of the plurality of scenes, and the playback means is controlled by the playback instruction means. It is desirable to reproduce video and music corresponding to each of a plurality of scenes according to the order of the designated reproduction start positions. As a result, when there are a plurality of music playback positions that meet the search conditions, a plurality of scenes corresponding to the respective playback positions can be automatically played back in order and the contents can be confirmed.
以下、本発明を適用した一実施形態の映像再生装置について、図面を参照しながら説明する。図1は、一実施形態の映像再生装置の基本構成を示す図である。図1に示す映像再生装置は、映像・音楽格納部1、映像検索処理部2、再生部7、操作部8を含んで構成されている。この映像再生装置は、少なくとも一部に音楽が付加された映像をこの音楽とともに再生するためのものであり、映像シーンの中から一部のシーンを検索する機能を有している。   A video playback apparatus according to an embodiment to which the present invention is applied will be described below with reference to the drawings. FIG. 1 is a diagram illustrating a basic configuration of a video playback apparatus according to an embodiment. 1 includes a video / music storage unit 1, a video search processing unit 2, a playback unit 7, and an operation unit 8. This video playback apparatus is for playing back a video with music added at least in part together with the music, and has a function of searching for a part of the scene from the video scene.
映像・音楽格納部1は、映像および音楽の再生に必要な映像データおよび音楽データが格納される。映像データを格納するために所定の容量を有する必要があるが、記録媒体自体はハードディスク装置であってもDVDやCDであってもよい。また、広帯域の通信手段を用いて、必要な映像データおよび音楽データをネットワークを介して所定の配信サーバからその都度取得するようにしてもよい。この場合には、映像・音楽格納部はネットワークを介して接続される配信サーバ内に備わっていることになる。   The video / music storage unit 1 stores video data and music data necessary for playback of video and music. Although it is necessary to have a predetermined capacity for storing video data, the recording medium itself may be a hard disk device, a DVD, or a CD. In addition, necessary video data and music data may be obtained from a predetermined distribution server each time via a network using a broadband communication means. In this case, the video / music storage unit is provided in a distribution server connected via a network.
映像検索処理部2は、所定の検索条件を設定することにより、利用者が再生を希望する映像の特定シーンを検索する処理を行う。この特定シーンは、再生される映像の中に複数箇所存在してもよい。この映像検索処理部2は、検索条件設定部3、音楽検索部4、映像検索部5、再生位置指定部6を備えている。   The video search processing unit 2 performs a process of searching for a specific scene of a video that the user desires to reproduce by setting a predetermined search condition. The specific scene may exist in a plurality of locations in the video to be played back. The video search processing unit 2 includes a search condition setting unit 3, a music search unit 4, a video search unit 5, and a playback position designation unit 6.
検索条件設定部3は、映像に付加されている音楽の再生位置を特定可能な検索条件を設定する。検索条件の設定方法としては、以下の3つの方法がある。
(1)音の大きさの時間変化パターン、すなわち波形パターンを特定可能な音楽データを指定あるいは入力する方法。波形パターンを特定可能な音楽データとは、検索したい音楽のPCMデータやMP3等の形式で圧縮されたデータである。例えば、映画やドラマ等におけるクライマックスシーンにいつも同じ音楽が用いられている場合には、このクライマックスシーンで用いられている音楽そのものをこの方法で指定する。
(2)使用される楽器を指定する方法。例えば、ピアノの演奏が含まれる音楽の再生箇所を検索する場合にこの方法が用いられる。
(3)曲調あるいはジャンルを指定する方法。例えば、短調や長調あるいは気分(雰囲気)等を示す曲調や、ロック、ポップス、ジャズ等のジャンルを指定して音楽の再生箇所を検索する場合にこの方法が用いられる。
The search condition setting unit 3 sets a search condition that can specify the playback position of music added to a video. There are the following three methods for setting search conditions.
(1) A method for designating or inputting music data capable of specifying a time change pattern of a loudness, that is, a waveform pattern. The music data that can specify the waveform pattern is PCM data of music to be searched or data compressed in a format such as MP3. For example, when the same music is always used in a climax scene in a movie or a drama, the music itself used in the climax scene is designated by this method.
(2) A method for specifying the instrument to be used. For example, this method is used when searching for a playback position of music including a piano performance.
(3) A method of designating the tune or genre. For example, this method is used when a music playback location is searched by specifying a melody indicating a minor, major, or mood (atmosphere), or a genre such as rock, pop, or jazz.
音楽検索部4は、映像・音楽格納部1に格納された映像に付加された音楽の中から、検索条件設定部3によって設定された検索条件を満たす再生位置を特定する。検索条件を満たす再生位置とは、再生開始位置から再生終了位置までの再生範囲を特定可能な情報が含まれている。映像検索部5は、音楽検索部4によって音楽の再生位置が特定されたときに、この音楽が付加されている映像の一部のシーンをを検索する。再生位置指定部6は、映像検索部5によって検索された映像の一部のシーンの再生開始位置を再生部7に指定して、再生部7による再生動作の開始を指示する。再生部7は、再生位置指定部6によって指定された再生開始位置から、映像・音楽格納部1に格納された映像データおよび音楽データを読み出して映像および音楽の再生を行う。操作部8は、検索条件設定部3によって検索条件の設定を行う際に、利用者の入力操作を行うためのものであり、検索条件設定に必要な各種のキーが備わっている。また、操作部8は、検索条件を満たす音楽の再生箇所が複数存在する場合であって、これら複数箇所のいずれかに対応する映像シーンを再生中に、このシーンをスキップして他のシーンを再生したい場合に再生位置の変更指示を受け付ける「スキップ」キーを備えている。   The music search unit 4 specifies a playback position that satisfies the search condition set by the search condition setting unit 3 from the music added to the video stored in the video / music storage unit 1. The playback position that satisfies the search condition includes information that can specify the playback range from the playback start position to the playback end position. When the music search position is specified by the music search unit 4, the video search unit 5 searches for a partial scene of the video to which this music is added. The reproduction position designating unit 6 designates the reproduction start position of a part of the scene of the video searched by the video search unit 5 to the reproduction unit 7 and instructs the reproduction unit 7 to start the reproduction operation. The playback unit 7 reads video data and music data stored in the video / music storage unit 1 from the playback start position specified by the playback position specifying unit 6 and plays back video and music. The operation unit 8 is used for a user input operation when the search condition setting unit 3 sets the search condition, and includes various keys necessary for setting the search condition. In addition, the operation unit 8 is a case where there are a plurality of music playback locations that satisfy the search conditions, and during playback of a video scene corresponding to any of these locations, the operation unit 8 skips this scene and selects other scenes. A “skip” key is provided for accepting a playback position change instruction when playback is desired.
上述した映像・音楽格納部1が映像・音楽格納手段に、検索条件設定部3が検索条件設定手段に、音楽検索部4が音楽検索手段に、映像検索部5が映像検索手段に、再生部7が再生手段に、再生位置指定部6が再生指示手段に、操作部8が操作手段にそれぞれ対応する。   The video / music storage unit 1 is the video / music storage unit, the search condition setting unit 3 is the search condition setting unit, the music search unit 4 is the music search unit, the video search unit 5 is the video search unit, and the playback unit. 7 corresponds to the reproduction means, the reproduction position designation unit 6 corresponds to the reproduction instruction unit, and the operation unit 8 corresponds to the operation unit.
図2は、図1に示した映像再生装置をDVD再生装置に適用した場合の構成を示す図である。図2に示すDVD再生装置100は、DVD10に記録された映像および音楽の信号を読み取るためのスピンドルモータ12、光ピックアップ14、送りモータ16およびサーボ制御部18と、読み取った信号の増幅等を行って画像表示や音楽出力を行うためのRFアンプ22、デジタル信号処理部24、4個のバッファ用RAM26、34、38、42、ストリーム分離部30、オーディオデコーダ32、ビデオデコーダ36、サブピクチャデコーダ40、ビデオプロセッサ44、ビデオエンコーダ46、ディスプレイ装置47、デジタル−アナログ(D/A)変換器48およびスピーカ49と、利用者が各種の操作指示を入力するための操作部58と、DVD再生装置100の全体を制御するためのシステムコントローラ60とを含んで構成されている。   FIG. 2 is a diagram showing a configuration when the video playback device shown in FIG. 1 is applied to a DVD playback device. A DVD playback apparatus 100 shown in FIG. 2 performs amplification of the read signal with a spindle motor 12, an optical pickup 14, a feed motor 16 and a servo control unit 18 for reading video and music signals recorded on the DVD 10. An RF amplifier 22, a digital signal processing unit 24, four buffer RAMs 26, 34, 38, 42, a stream separation unit 30, an audio decoder 32, a video decoder 36, and a sub-picture decoder 40. , Video processor 44, video encoder 46, display device 47, digital-analog (D / A) converter 48 and speaker 49, operation unit 58 for a user to input various operation instructions, and DVD playback device 100. Including a system controller 60 for controlling the entire system It has been made.
スピンドルモータ12は、DVD10を一定の線速度で回転させる。光ピックアップ14は、DVD10に記録されたデータを検出するものであり、例えば半導体レーザとホトダイオードとが内蔵されている。送りモータ16は、光ピックアップ14をDVD10の径方向に移動させるものである。   The spindle motor 12 rotates the DVD 10 at a constant linear velocity. The optical pickup 14 detects data recorded on the DVD 10, and includes, for example, a semiconductor laser and a photodiode. The feed motor 16 moves the optical pickup 14 in the radial direction of the DVD 10.
サーボ制御部18は、システムコントローラ60の指示に応じて、上述したスピンドルモータ12および送りモータ16を駆動するとともに、光ピックアップ14に内蔵された対物レンズ(図示せず)を動かすことにより半導体レーザの焦点位置をDVD10の記録面と垂直方向および水平方向に移動させる。また、サーボ制御部18は、DVD10からのデータの読み取りに必要な各種のサーボ(フォーカスサーボ、トラッキングサーボ、回転サーボ)制御を行う。   The servo control unit 18 drives the spindle motor 12 and the feed motor 16 described above in accordance with an instruction from the system controller 60 and moves an objective lens (not shown) built in the optical pickup 14 to move the semiconductor laser. The focal position is moved vertically and horizontally with respect to the recording surface of the DVD 10. The servo control unit 18 performs various servo (focus servo, tracking servo, rotation servo) control necessary for reading data from the DVD 10.
RFアンプ22は、光ピックアップ14に内蔵されたホトダイオードから出力される電気信号を増幅するものであり、DVD再生装置100に大きな振動や衝撃等が加わってトラックジャンプが発生すると、トラックジャンプ検出信号を出力する機能も有している。   The RF amplifier 22 amplifies an electric signal output from a photodiode built in the optical pickup 14, and when a track jump occurs due to a large vibration or impact on the DVD playback apparatus 100, a track jump detection signal is generated. It also has a function to output.
デジタル信号処理部24は、RFアンプ22から出力される信号に対して、デジタルデータに変換した後にDVD10のデータフォーマットに応じた信号復調処理(8−16復調処理)と誤り訂正処理を行い、RAM26に格納する。そして、デジタル信号処理部24は、システムコントローラ60の指示に応じて、RAM26に格納したデータからVMGIやVTSIを抽出してシステムコントローラ60に出力するとともに、VOBUを抽出してストリーム分離部30に出力する。   The digital signal processing unit 24 converts the signal output from the RF amplifier 22 into digital data, and then performs signal demodulation processing (8-16 demodulation processing) and error correction processing according to the data format of the DVD 10, and the RAM 26. To store. The digital signal processing unit 24 extracts VMGI and VTSI from the data stored in the RAM 26 in accordance with an instruction from the system controller 60 and outputs the VMGI and VTSI to the system controller 60, and also extracts VOBU and outputs it to the stream separation unit 30. To do.
ストリーム分離部30は、システムコントローラ60の指示に応じて、デジタル信号処理部24から出力されるVOBUを構成するパックヘッダを解析することにより、オーディオパック(A_PCK)、ビデオパック(V_PCK)、サブピクチャパック(SP_PCK)、ナビゲーションパック(NV_PCK)を分離する。ストリーム分離部30によって分離されたオーディオパックはオーディオデコーダ32に出力され、ビデオパックはビデオデコーダ36に出力され、サブピクチャパックはサブピクチャデコーダ40に出力され、ナビゲーションパックはシステムコントローラ60に転送される。   The stream separation unit 30 analyzes the pack header constituting the VOBU output from the digital signal processing unit 24 in accordance with an instruction from the system controller 60, thereby performing audio pack (A_PCK), video pack (V_PCK), sub-picture. The pack (SP_PCK) and the navigation pack (NV_PCK) are separated. The audio pack separated by the stream separation unit 30 is output to the audio decoder 32, the video pack is output to the video decoder 36, the sub-picture pack is output to the sub-picture decoder 40, and the navigation pack is transferred to the system controller 60. .
オーディオデコーダ32は、ストリーム分離部30から出力されるオーディオパックに対して所定のデコード処理を行ってオーディオデータを出力する。ビデオデコーダ36は、ストリーム分離部30から出力されるビデオパックに対して所定のデコード処理を行ってビデオデータを出力する。MPEG2による画像データ圧縮技術を採用する場合には、ビデオデコーダ36は、ストリーム分離部30から出力される複数のビデオパックに含まれるIピクチャに対応する画像データ、Pピクチャに対応する画像データ、Bピクチャに対応する画像データに基づいて、Iピクチャ、Pピクチャ、Bピクチャの3種類のビデオデータを生成して出力する。サブピクチャデコーダ40は、ストリーム分離部30から出力されるサブピクチャパックに対して所定のデコード処理を行ってサブピクチャデータを出力する。   The audio decoder 32 performs a predetermined decoding process on the audio pack output from the stream separator 30 and outputs audio data. The video decoder 36 performs a predetermined decoding process on the video pack output from the stream separator 30 and outputs video data. When the image data compression technique based on MPEG2 is employed, the video decoder 36 uses the image data corresponding to the I picture, the image data corresponding to the P picture, and the B picture included in the plurality of video packs output from the stream separation unit 30. Based on the image data corresponding to the picture, three types of video data of I picture, P picture, and B picture are generated and output. The sub-picture decoder 40 performs a predetermined decoding process on the sub-picture pack output from the stream separation unit 30 and outputs sub-picture data.
ビデオプロセッサ44は、システムコントローラ60の指示に応じて、ビデオデコーダ36から出力されるビデオデータとサブピクチャデコーダ40から出力されるサブピクチャデータとを合成した画像データを生成し、ビデオエンコーダ46に出力する。ビデオエンコーダ46は、ビデオプロセッサ44から出力される画像データを表示用の画像信号に変換する。この画像信号がディスプレイ装置47に出力されることによって、画像が表示される。   The video processor 44 generates image data obtained by synthesizing the video data output from the video decoder 36 and the sub-picture data output from the sub-picture decoder 40 in accordance with an instruction from the system controller 60, and outputs the generated image data to the video encoder 46. To do. The video encoder 46 converts the image data output from the video processor 44 into an image signal for display. By outputting this image signal to the display device 47, an image is displayed.
D/A変換器48は、オーディオデコーダ32から出力されるオーディオデータをアナログのオーディオ信号に変換する。このオーディオ信号がスピーカ49に出力されることによって、オーディオ音(音楽)の再生が行われる。   The D / A converter 48 converts the audio data output from the audio decoder 32 into an analog audio signal. By outputting the audio signal to the speaker 49, audio sound (music) is reproduced.
操作部58は、タイトル再生の指示を与えるための再生キーやタイトル再生の停止を指示するための停止キー、タイトル再生の一時停止を指示するための一時停止キー、再生動作が停止した位置を記録する指示を与えるための停止位置記録キー、後述する停止位置メニュー画面を表示する指示を与えるための停止位置メニュー画面表示キー、左右上下のカーソルキー、表示画面上のカーソル位置にある項目の確定を行う設定キー等の各種操作キーを備えており、キーの操作状態に応じた信号がシステムコントローラ60に向けて出力される。   The operation unit 58 records a playback key for giving a title playback instruction, a stop key for instructing a stop of title playback, a pause key for instructing a pause of the title playback, and a position where the playback operation has stopped. Stop position recording key for giving an instruction to perform, Stop position menu screen display key for giving an instruction to display a stop position menu screen described later, Left / right / up / down cursor keys, Confirming the item at the cursor position on the display screen Various operation keys such as a setting key to be performed are provided, and a signal corresponding to the operation state of the key is output to the system controller 60.
システムコントローラ60は、各種のサーボ指令をサーボ制御部18に出力したり、利用者の操作指示に応じた画像生成指示をビデオプロセッサ44に出力する等、全機能ブロックの制御を行う。具体的には、システムコントローラ60は、デジタル信号処理部24から出力されるデータに含まれるVMGI、VTSI、ストリーム分離部30から出力されるNV_PCKを受け取って、これらに含まれるナビゲーションコマンドを実行することにより、各種のサーボ指令をサーボ制御部18に出力したり、利用者の操作指示に応じた画像生成指示をビデオプロセッサ44に出力する等、再生動作に必要な各種の制御を行う。   The system controller 60 controls all the functional blocks such as outputting various servo commands to the servo control unit 18 and outputting an image generation command corresponding to a user operation command to the video processor 44. Specifically, the system controller 60 receives VMGI and VTSI included in the data output from the digital signal processing unit 24, and NV_PCK output from the stream separation unit 30, and executes a navigation command included in these. Thus, various controls necessary for the reproduction operation are performed, such as outputting various servo commands to the servo control unit 18 and outputting an image generation instruction corresponding to a user operation instruction to the video processor 44.
上述した構成において、DVD10が映像・音楽格納部1に、DVD10から読み取った信号に基づいて映像や音楽を出力するディスプレイ装置47やスピーカ49までの各構成が再生部7に、操作部58が操作部8にそれぞれ対応する。また、システムコントローラ60が図1に示した映像検索処理部2の機能を有しており、検索条件設定部3、音楽検索部4、映像検索部5、再生位置指定部6を備えている。   In the configuration described above, the DVD 10 is in the video / music storage unit 1, the display unit 47 that outputs video and music based on the signals read from the DVD 10, and the speaker 49 are in the playback unit 7, and the operation unit 58 is in operation. Each corresponds to part 8. Further, the system controller 60 has the function of the video search processing unit 2 shown in FIG. 1, and includes a search condition setting unit 3, a music search unit 4, a video search unit 5, and a playback position designation unit 6.
図3は、DVDのボリューム空間の構造を示す図である。同図に示すように、DVDのボリューム空間は、DVDの内周から外周に向かって、ボリューム・ファイル構造、DVD−Videoゾーン、DVD otherゾーンによって構成されている。これらのうち、DVD−Videoゾーンには、再生動作に必要な各種のデータが含まれている。DVD−Videoゾーンは、ビデオマネージャ(VMG)と各タイトルに対応する1つ以上のビデオタイトルセット(VTS)によって構成されている。   FIG. 3 is a diagram showing the structure of the volume space of the DVD. As shown in the figure, the volume space of the DVD is composed of a volume file structure, a DVD-Video zone, and a DVD other zone from the inner periphery to the outer periphery of the DVD. Among these, the DVD-Video zone includes various data necessary for the reproduction operation. The DVD-Video zone includes a video manager (VMG) and one or more video title sets (VTS) corresponding to each title.
図4は、VMGのデータ構造を示す図である。同図に示すように、VMGは、ビデオマネージャ情報(VMGI)、VMGメニュー用ビデオオブジェクトセット(VMGM_VOBS)、VMGIのバックアップ用ファイル(VMGI_BUP)によって構成されている。   FIG. 4 is a diagram showing the data structure of VMG. As shown in the figure, the VMG includes video manager information (VMGI), a VMG menu video object set (VMGM_VOBS), and a VMGI backup file (VMGI_BUP).
VMGIは、VTSに関する情報(VTSの数、各VTSを識別するためのVTS番号、DVD内の各VTSの格納位置等)、タイトルメニューに表示されるタイトルの表示順、1つ以上のプログラムチェーン情報(PGCI)、DVDを識別するためのディスクID(DVD_ID)、ディスク名(例えば映画の題名)等が含まれている。VMGM_VOBSは、1つ以上のビデオオブジェクト(VOB)によって構成されている。このVOBは、タイトルを選択するためのメニュー画面(タイトルメニュー画面)を再生する際の再生データであるビデオデータを含んでいる。   VMGI includes information about VTS (number of VTSs, VTS number for identifying each VTS, storage position of each VTS in the DVD, etc.), display order of titles displayed in the title menu, and one or more program chain information (PGCI), a disc ID (DVD_ID) for identifying a DVD, a disc name (for example, a movie title), and the like are included. VMGM_VOBS is composed of one or more video objects (VOB). This VOB includes video data which is reproduction data when reproducing a menu screen (title menu screen) for selecting a title.
図5は、VTSのデータ構造を示す図である。同図に示すように、VTSは、ビデオタイトルセット情報(VTSI)、VTSメニュー用ビデオオブジェクトセット(VTSM_VOBS)、VTSタイトル用ビデオオブジェクトセット(VTSTT_VOBS)、VTSIのバックアップ用ファイル(VTSI_BUP)によって構成されている。   FIG. 5 shows the data structure of the VTS. As shown in the figure, the VTS is composed of video title set information (VTSI), VTS menu video object set (VTSM_VOBS), VTS title video object set (VTSTT_VOBS), and a VTSI backup file (VTSI_BUP). Yes.
VTSIは、タイトルに関する情報、VTS内の各チャプタ(PTT)を識別するためのPTT番号、1つ以上のPGCI等が含まれている。VTSM_VOBSおよびVTSTT_VOBSは、1つ以上のVOBによって構成されている。このVOBは、ビデオデータやオーディオデータ等の再生データを含んでいる。   The VTSI includes information on a title, a PTT number for identifying each chapter (PTT) in the VTS, one or more PGCIs, and the like. The VTSM_VOBS and VTSTT_VOBS are configured by one or more VOBs. This VOB includes reproduction data such as video data and audio data.
タイトルの再生データは、VTSTT_VOBS内のVOB#1〜#iに含まれている。チャプタは、タイトルを分割した単位であり、チャプタの再生データは、VTSTT_VOBS内の1あるいは複数のVOBに含まれる。例えば、図5に示すように、タイトルはチャプタ#1〜#pに分割されており、チャプタ#1の再生データはVOB#1〜#3に含まれており、チャプタ#2の再生データは、VOB#4、#5に含まれている。   The playback data of the title is included in VOB # 1 to #i in VTSTT_VOBS. A chapter is a unit obtained by dividing a title, and chapter reproduction data is included in one or a plurality of VOBs in VTSTT_VOBS. For example, as shown in FIG. 5, the title is divided into chapters # 1 to #p, the reproduction data of chapter # 1 is included in VOB # 1 to # 3, and the reproduction data of chapter # 2 is It is included in VOB # 4 and # 5.
図6は、上述したVMGM_VOBS、VTSM_VOBS、VTSTT_VOBSに含まれるVOBのデータ構造を示す図である。同図に示すように、VOBは、複数のセルによって構成されている。そして、各セルは、複数のビデオオブジェクトユニット(VOBU)によって構成されている。各VOBUは、ナビゲーションパック(NV_PCK)と、ビデオパック(V_PCK)、サブピクチャパック(SP_PCK)およびオーディオパック(A_PCK)の少なくとも1つを含んで構成されている。   FIG. 6 is a diagram illustrating a data structure of a VOB included in the above-described VMGM_VOBS, VTSM_VOBS, and VTSTT_VOBS. As shown in the figure, the VOB is composed of a plurality of cells. Each cell is composed of a plurality of video object units (VOBU). Each VOBU includes at least one of a navigation pack (NV_PCK), a video pack (V_PCK), a sub-picture pack (SP_PCK), and an audio pack (A_PCK).
NV_PCKは、再生制御情報(PCI)、データサーチ情報(DSI)を含んで構成されている。PCIとDSIには、VOBUのデータ量、タイトルの再生を開始してから対応するVOBUの再生を開始するまでの再生時間、次に再生すべきVOBUの位置等の情報が設定されている。   NV_PCK includes playback control information (PCI) and data search information (DSI). The PCI and DSI are set with information such as the amount of VOBU data, the playback time from the start of playback of a title to the start of playback of the corresponding VOBU, and the position of the VOBU to be played next.
V_PCK、SP_PCK、A_PCKは、それぞれ再生データの種別(動画、サブピクチャ、オーディオ)等の情報が含まれているパックヘッダ、パケットヘッダや、データ圧縮されたビデオデータ、サブピクチャデータ、オーディオデータ(圧縮再生データ)を含んで構成されている。   V_PCK, SP_PCK, and A_PCK are respectively a pack header, packet header, data-compressed video data, sub-picture data, and audio data (compressed) that include information such as the type of reproduction data (moving image, sub-picture, audio). Playback data).
本実施形態の映像再生装置を適用したDVD再生装置はこのような構成を有しており、次にその動作を説明する。図7は、本実施形態における映像シーンの検索動作の動作手順を示す流れ図である。DVD再生装置100の電源が投入されて再生動作を開始可能な状態になると、システムコントローラ60内の検索条件設定部3は、検索条件設定が指示されたか否かを判定する(ステップ100)。この指示は操作部58を用いて行われる。検索条件設定が指示されない場合には否定判断が行われ、この判定が繰り返される。なお、この検索条件設定指示は、DVD再生装置100の電源投入直後に限らず、再生動作中であっても可能であり、検索条件設定部3は、所定の操作禁止期間を除く間中この判定を行っている。   The DVD playback apparatus to which the video playback apparatus of this embodiment is applied has such a configuration, and the operation thereof will be described next. FIG. 7 is a flowchart showing an operation procedure of a video scene search operation in the present embodiment. When the DVD playback apparatus 100 is turned on and is ready to start a playback operation, the search condition setting unit 3 in the system controller 60 determines whether or not search condition setting has been instructed (step 100). This instruction is performed using the operation unit 58. If the search condition setting is not instructed, a negative determination is made and this determination is repeated. This search condition setting instruction is not limited to immediately after the DVD playback apparatus 100 is turned on, but can be performed during the playback operation, and the search condition setting unit 3 makes this determination during a period excluding a predetermined operation prohibition period. It is carried out.
また、操作部58を用いて検索条件設定指示がなされるとステップ100の判定において肯定判断が行われ、検索条件設定部3は、操作部58の操作内容に応じた検索条件を設定する(ステップ101)。上述したように、設定可能な検索条件としては、(1)波形パターンを特定可能な音楽データを指定あるいは入力する、(2)使用される楽器を指定する、(3)曲調あるいはジャンルを指定する、のいずれかを選択することができる。例えば、検索条件設定部3は、これら3種類の検索条件入力方法を選択項目として含むメニュー画面をディスプレイ装置47に表示する。利用者は、操作部58を操作して、いずれの検索条件入力方法を採用するかを選択することができる。利用者によっていずれかの検索条件入力方法が選択されると、次に検索条件設定部3は、それぞれの検索条件入力方法毎の検索条件設定画面をディスプレイ装置47に表示する。利用者は、操作部58を操作して、表示されている検索条件設定画面を用いて所定の検索条件を設定することができる。例えば、使用される楽器を指定する場合には、選択可能な楽器を選択肢に含む選択画面を表示していずれか一つあるいは複数の楽器を選択すればよい。また、曲調あるいはジャンルを指定する場合には、選択可能な曲調やジャンルを選択肢に含む選択画面を表示して曲調やジャンルを選択すればよい。また、波形パターンを特定可能な音楽データについては、入力端子(図示せず)から直接波形パターンを入力する場合や、あらかじめ格納しておいて音楽データ(全体あるいは一部)を指定する場合などが考えられる。   When a search condition setting instruction is issued using the operation unit 58, an affirmative determination is made in the determination of step 100, and the search condition setting unit 3 sets a search condition according to the operation content of the operation unit 58 (step). 101). As described above, search conditions that can be set include (1) specifying or inputting music data that can specify a waveform pattern, (2) specifying a musical instrument to be used, and (3) specifying a musical tone or genre. , Either can be selected. For example, the search condition setting unit 3 displays a menu screen including these three types of search condition input methods as selection items on the display device 47. The user can select which search condition input method is adopted by operating the operation unit 58. When one of the search condition input methods is selected by the user, the search condition setting unit 3 displays a search condition setting screen for each search condition input method on the display device 47 next. The user can operate the operation unit 58 to set a predetermined search condition using the displayed search condition setting screen. For example, when a musical instrument to be used is designated, a selection screen including selectable musical instruments as options may be displayed and any one or a plurality of musical instruments may be selected. Further, when designating a tune or genre, a selection screen including selectable tunes and genres as options may be displayed to select a tune or genre. As for music data for which a waveform pattern can be specified, there is a case where a waveform pattern is directly input from an input terminal (not shown), or a case where music data (whole or part) is stored in advance and designated. Conceivable.
検索条件の設定が終了すると、次に、音楽検索部4は、DVD10に記録されているオーディオパックを順番に読み出し(ステップ102)、検索条件を満たす音楽ありか否かを判定する(ステップ103)。例えば、検索条件として波形パターンが特定可能な音楽データが指定されている場合には、この波形パターンを用いたパターン認識処理が行われ、同じあるいは類似する波形パターンを有する音楽の再生箇所が特定される。また、検索条件として楽器が指定されている場合には、指定された楽器を用いて演奏された音楽の再生箇所が特定される。一般に、楽器には固有の音色があり、この音色毎に特有な周波数成分や波形を有している。したがって、これらの音色毎に特有な周波数成分や波形に合致する再生箇所を抽出することにより、指定された楽器を用いて演奏された音楽の再生箇所を特定することができる。また、検索条件として曲調あるいはジャンルが指定されている場合には、指定された曲調を有する音楽の再生箇所あるいは指定されたジャンルに対応する音楽の再生箇所が特定される。具体的な検索手法は、楽器の場合と基本的に同じであり、曲調あるいはジャンルに特有な一般的な周波数成分や波形があらかじめ分析によって得られており、指定された曲調あるいはジャンルに対応する周波数成分や波形に合致する再生箇所を抽出することにより、該当する音楽の再生箇所が特定される。   When the search conditions are set, the music search unit 4 sequentially reads out the audio packs recorded on the DVD 10 (step 102), and determines whether there is music that satisfies the search conditions (step 103). . For example, when music data that can specify a waveform pattern is specified as a search condition, pattern recognition processing using this waveform pattern is performed, and a playback position of music having the same or similar waveform pattern is specified. The When a musical instrument is designated as the search condition, the playback location of music played using the designated musical instrument is specified. In general, a musical instrument has a unique timbre, and each timbre has a unique frequency component and waveform. Therefore, by extracting a reproduction portion that matches a frequency component or waveform peculiar to each timbre, it is possible to specify a reproduction portion of music played using a designated instrument. Further, when a music tone or genre is designated as a search condition, a music playback location having the designated music tone or a music playback location corresponding to the designated genre is specified. The specific search method is basically the same as in the case of musical instruments, and general frequency components and waveforms peculiar to the tone or genre have been obtained in advance, and the frequency corresponding to the specified tone or genre. By extracting the playback location that matches the component or waveform, the playback location of the corresponding music is identified.
検索条件を満たす音楽が含まれており、ステップ103の判定において肯定判断が行われると、音楽検索部4は、検索された音楽の再生箇所を記録した後(ステップ104)、あるいは、検索条件を満たす音楽が読み出したオーディオパックの中に含まれておらずステップ103の判定において否定判断が行われた後に、ビデオパックの読み出しが再生終了位置まで終了したか否か判定する(ステップ105)。終了していない場合には否定判断が行われ、ステップ102に戻ってオーディオパックの読み出し以降の処理が繰り返される。   If music satisfying the search condition is included and an affirmative determination is made in step 103, the music search unit 4 records the playback location of the searched music (step 104) or sets the search condition. After the music to be satisfied is not included in the read audio pack and a negative determination is made in the determination in step 103, it is determined whether or not the reading of the video pack has been completed to the playback end position (step 105). If not completed, a negative determination is made, and the process returns to step 102 to repeat the process after reading the audio pack.
また、ビデオパックの読み出しが再生終了位置に達するとステップ105の判定において肯定判断が行われ、次に、映像検索部5は、検索条件を満たした音楽があったか否かを判定する(ステップ106)。該当する音楽がなかった場合には否定判断が行われ、ディスプレイ装置47にその旨の表示を行って(ステップ107)、映像シーンの検索に関する一連の処理を終了する。   When the reading of the video pack reaches the reproduction end position, an affirmative determination is made in the determination of step 105, and then the video search unit 5 determines whether or not there is music that satisfies the search condition (step 106). . If there is no corresponding music, a negative determination is made, a message to that effect is displayed on the display device 47 (step 107), and a series of processing relating to the search for the video scene is terminated.
また、検索条件を満たした音楽があった場合にはステップ106の判定において肯定判断が行われ、次に、映像検索部5は、検索条件を満たす音楽に対応する最初の映像シーンを検索し(ステップ108)、再生位置指定部6は、この検索された最初の映像シーンの再生開始位置を指定して再生部7として動作する各構成に対して映像および音楽の再生を指示する(ステップ109)。この指示に応じて、検索された音楽の再生箇所に対応する映像シーンが音楽付きで再生される(ステップ110)。   If there is music that satisfies the search condition, an affirmative determination is made in the determination of step 106, and then the video search unit 5 searches for the first video scene corresponding to the music that satisfies the search condition ( Step 108), the playback position designation unit 6 designates the playback start position of the searched first video scene, and instructs each component operating as the playback unit 7 to play video and music (Step 109). . In response to this instruction, the video scene corresponding to the searched music playback location is played back with music (step 110).
また、この再生動作と並行して、再生位置指定部6は、操作部58の「スキップ」キーを用いて映像シーンをスキップする変更指示が行われたか否かを判定する(ステップ111)。変更指示が行われない場合には否定判断が行われ、次に、再生位置指定部6は、検索条件を満たした音楽に対応する映像シーンの再生が終了したか否かを判定する(ステップ112)。再生が終了していない場合には否定判断が行われ、ステップ110に戻って映像および音楽の再生動作が繰り返される。   In parallel with this playback operation, the playback position designating unit 6 determines whether or not a change instruction for skipping the video scene has been performed using the “skip” key of the operation unit 58 (step 111). If no change instruction is given, a negative determination is made, and then the playback position designating unit 6 determines whether or not the playback of the video scene corresponding to the music satisfying the search condition has ended (step 112). ). If reproduction has not ended, a negative determination is made, and the process returns to step 110 to repeat the video and music reproduction operations.
また、再生動作の途中で変更指示が行われてステップ111の判定において肯定判断が行われた後、あるいは、映像シーンの再生が終了してステップ112の判定において肯定判断が行われた後に、再生位置指定部6は、検索条件を満たした音楽に対応する次の映像シーンが存在するか否かを判定する(ステップ113)。他に該当する映像シーンが存在しない場合には否定判断が行われて、映像シーンの検索に関する一連の処理を終了する。また、他に該当する映像シーンが存在する場合にはステップ113の判定において肯定判断が行われ、次に、再生位置指定部6は、次の映像シーンの再生開始位置を指定して再生部7として動作する各構成に対して映像および音楽の再生を指示する(ステップ114)。その後、ステップ110に戻って映像および音楽の再生動作が繰り返される。   Also, after a change instruction is given in the middle of the playback operation and an affirmative determination is made in the determination of step 111, or after the reproduction of the video scene is finished and an affirmative determination is made in the determination of step 112, the playback is performed. The position specifying unit 6 determines whether or not there is a next video scene corresponding to the music that satisfies the search condition (step 113). If there is no other applicable video scene, a negative determination is made, and the series of processing relating to the search for the video scene is terminated. If there is any other video scene, an affirmative determination is made in the determination of step 113, and then the playback position designating unit 6 designates the playback start position of the next video scene and plays the playback unit 7 Are instructed to play back video and music (step 114). Thereafter, the process returns to step 110 and the video and music playback operations are repeated.
図8は、映像シーン検索の具体例を示す図である。図8に示すように、再生される映画の映像にはシーン1、2、…が含まれており、この中でシーン1、3、4、6、7のそれぞれに音楽1、2、3、4、5が対応しているものとする。これらの音楽の中で、音楽5は検索条件Aを満たしている(例えば、主役の俳優が活躍するクライマックスシーンに流れる音楽)。また、音楽2、3は検索条件Bを満たしている(例えば、ピアノで演奏されている)。また、音楽3、5は検索条件Cを満たしている(例えば、喜怒哀楽の中の「哀」に対応する曲調を有していている)。   FIG. 8 is a diagram showing a specific example of video scene search. As shown in FIG. 8, scenes 1, 2,... Are included in a movie image to be played, and among these, scenes 1, 3, 4, 6, 7 have music 1, 2, 3, 4 and 5 correspond to each other. Among these music, music 5 satisfies the search condition A (for example, music flowing in the climax scene where the leading actor plays an active role). Music 2 and 3 satisfy search condition B (for example, they are played on a piano). The music 3 and 5 satisfy the search condition C (for example, the music 3 and 5 have a tone corresponding to “sorrow” in emotions).
このような内容を有する音楽付きの映像について、検索条件Aを指定すると、検索条件Aを満たす音楽5が検索され、この音楽5に対応する映像のシーン7が検索され、このシーン7が音楽5とともに再生される。これにより、クライマックスシーンに流れる音楽を指定するだけでクライマックスシーンの映像を再生することが可能になる。   When the search condition A is specified for the video with music having such contents, the music 5 satisfying the search condition A is searched, the scene 7 of the video corresponding to the music 5 is searched, and this scene 7 is the music 5. Played with. Thus, it is possible to reproduce the video of the climax scene simply by specifying the music flowing in the climax scene.
また、検索条件Cを指定すると、検索条件Cを満たす音楽3、5が検索され、最初に音楽3に対応する映像のシーン4が検索され、このシーン4が音楽3とともに再生される。また、シーン4の再生が終了すると、あるいは再生途中で「スキップ」キーが押下されて変更指示がなされると、次に、音楽5に対応する映像のシーン7が検索され、このシーン7が音楽5とともに再生される。これにより、「哀」を感じさせる音楽を指定するだけで、対応する映像を再生することが可能になる。   When the search condition C is designated, the music 3 and 5 satisfying the search condition C are searched, and the scene 4 of the video corresponding to the music 3 is searched first, and this scene 4 is reproduced together with the music 3. When the playback of the scene 4 is completed, or when a “skip” key is pressed during playback and a change instruction is given, the video scene 7 corresponding to the music 5 is searched for, and this scene 7 is stored in the music. 5 is played. This makes it possible to play back the corresponding video simply by designating music that feels “sad”.
このように、映像とともに音楽が再生される場合にこの音楽を所定の検索条件を指定して検索し、さらに検索された音楽に対応する映像を検索することにより、音楽を手掛かりにして映像の検索を行うことができるため、所望の映像シーン対応して特徴的な音楽が用いられている場合にこのシーンの検索に要する煩雑な手間と時間を削減することができる。例えば、映画やドラマ等のクライマックスシーンでは、映像の臨場感を高めるために他のシーンよりも印象に残る音楽が用いられる場合が多いため、この特徴的な音楽を指定することにより、再生を希望するクライマックスシーンの検索が容易となる。   In this way, when music is played back together with the video, the music is searched by specifying a predetermined search condition, and the video corresponding to the searched music is searched, so that the video can be searched using the music as a clue. Therefore, when characteristic music corresponding to a desired video scene is used, it is possible to reduce troublesome labor and time required to search for this scene. For example, in climax scenes such as movies and dramas, music that is more impressive than other scenes is often used to enhance the realistic sensation of the video, so playback can be requested by specifying this characteristic music. The search for the climax scene to be performed becomes easy.
特に、音楽を検索するための検索条件として、音の大きさの時間変化パターン、すなわち波形パターンを特定することができる音楽データを指定することにより、この波形パターンと同じ内容を有する音楽の再生位置を検索することができる。   In particular, as a search condition for searching for music, a time change pattern of sound volume, that is, music data that can specify a waveform pattern is specified, and a music playback position having the same content as this waveform pattern is specified. Can be searched.
また、音楽を検索するための検索条件として楽器を指定することにより、その楽器が用いられている音楽の再生位置を検索することができるため、音楽を演奏している楽器の印象が強い映像シーンを検索する場合に、このシーンの検索に要する煩雑な手間と時間を削減することができる。特に、検索条件で指定された楽器に固有の音色を含む箇所を、検索条件を満たす音楽の再生位置として特定することにより、検索条件として指定した楽器を使用した音楽の再生位置の特定が可能となる。   In addition, by specifying a musical instrument as a search condition for searching for music, it is possible to search the playback position of the music in which the musical instrument is used, so a video scene with a strong impression of the musical instrument playing the music When searching, it is possible to reduce the troublesome time and time required to search for this scene. In particular, it is possible to specify the music playback position using the instrument specified as the search condition by specifying the location that contains the tone specific to the instrument specified in the search condition as the music playback position that satisfies the search condition. Become.
また、音楽を検索するための検索条件として曲調やジャンルを指定することにより、その曲調あるいはジャンルの音楽の再生位置を検索することができるため、音楽の曲調やジャンルの印象が強い映像シーンを検索する場合に、このシーンの検索に要する煩雑な手間と時間を削減することができる。   Also, by specifying the tune and genre as the search condition for searching for music, you can search for the playback position of the tune or genre of music, so you can search for video scenes that have a strong impression of tune or genre of music. In this case, it is possible to reduce the troublesome time and time required to search for this scene.
また、検索条件を満たす音楽の再生箇所が複数存在する場合に、再生位置が最も早い映像シーンを再生開始位置として再生することにより、最初の映像シーンから再生してその内容を確認することが可能になる。また、これら複数の映像シーンのそれぞれに対応する再生開始位置を所定の順番で切り替えることにより、複数の映像シーンを利用者の操作に応じて順番に再生してその内容を確認することが可能になる。あるいは、検索条件に合った音楽の再生位置が複数存在する場合に、それぞれの再生位置に対応した複数のシーンを自動的に順番に再生してその内容を確認することができる。   Also, when there are multiple music playback locations that satisfy the search conditions, it is possible to play back the first video scene and check its contents by playing the video scene with the earliest playback position as the playback start position. become. In addition, by switching the playback start position corresponding to each of the plurality of video scenes in a predetermined order, it is possible to play back the plurality of video scenes in order according to the user's operation and confirm the contents. Become. Alternatively, when there are a plurality of music playback positions that meet the search conditions, a plurality of scenes corresponding to the respective playback positions can be automatically played in order and the contents can be confirmed.
なお、本発明は上記実施形態に限定されるものではなく、本発明の要旨の範囲内において種々の変形実施が可能である。上述した実施形態では、検索条件を満たす音楽が検索された場合に、この音楽に対応する映像シーンを検索して再生したが、この映像シーンの再生範囲は必ずしも検索された音楽の再生範囲と完全に一致している必要はない。例えば、特徴的な音楽の一部を指定したときに、この音楽に対応する映像シーンの再生範囲はこの一部の音楽よりも広い場合が多い。したがって、図5に示すデータ構造を有する場合に、検索条件を満たす音楽の再生位置が特定されたときに、この再生位置を含むVOB全体あるいはチャプタ全体を映像シーンの再生範囲として検索するようにしてもよい。   In addition, this invention is not limited to the said embodiment, A various deformation | transformation implementation is possible within the range of the summary of this invention. In the embodiment described above, when music satisfying the search condition is searched, a video scene corresponding to this music is searched for and played back. However, the playback range of this video scene is not necessarily the same as the playback range of the searched music. It is not necessary to match. For example, when a part of characteristic music is designated, the playback range of the video scene corresponding to this music is often wider than this part of music. Therefore, in the case of having the data structure shown in FIG. 5, when the playback position of music satisfying the search condition is specified, the entire VOB or the entire chapter including this playback position is searched as the playback range of the video scene. Also good.
また、図7に示した動作手順では、検索された音楽に対応する映像シーンのみを再生するようにしたが、この映像シーンとこれに続く映像シーンを再生するようにしてもよい。   In the operation procedure shown in FIG. 7, only the video scene corresponding to the searched music is played back. However, this video scene and the video scene following the video scene may be played back.
また、上述した実施形態では、本発明をDVD再生装置に適用した具体例について説明したが、映像と音楽の再生可能な装置であれば本発明を適用することができる。例えば、パーソナルコンピュータによってDVDやハードディスク装置に格納された映像・音楽データを読み出して再生するようにしてもよい。   In the above-described embodiment, a specific example in which the present invention is applied to a DVD playback apparatus has been described. However, the present invention can be applied to any apparatus capable of playing video and music. For example, video / music data stored in a DVD or hard disk device may be read out and reproduced by a personal computer.
一実施形態の映像再生装置の基本構成を示す図である。It is a figure which shows the basic composition of the video reproduction apparatus of one Embodiment. 図1に示した映像再生装置をDVD再生装置に適用した場合の構成を示す図である。It is a figure which shows the structure at the time of applying the video reproduction apparatus shown in FIG. 1 to a DVD reproduction apparatus. DVDのボリューム空間の構造を示す図である。It is a figure which shows the structure of the volume space of DVD. VMGのデータ構造を示す図である。It is a figure which shows the data structure of VMG. VTSのデータ構造を示す図である。It is a figure which shows the data structure of VTS. VOBのデータ構造を示す図である。It is a figure which shows the data structure of VOB. 本実施形態における映像シーンの検索動作の動作手順を示す流れ図である。It is a flowchart which shows the operation | movement procedure of the search operation | movement of the video scene in this embodiment. 映像シーン検索の具体例を示す図である。It is a figure which shows the specific example of a video scene search.
符号の説明Explanation of symbols
1 映像・音楽格納部
2 映像検索処理部
3 検索条件設定部
4 音楽検索部
5 映像検索部
6 再生位置指定部
7 再生部
8 操作部
1 Video / Music Storage Unit 2 Video Search Processing Unit 3 Search Condition Setting Unit 4 Music Search Unit 5 Video Search Unit 6 Playback Position Designation Unit 7 Playback Unit 8 Operation Unit

Claims (9)

  1. 少なくとも一部に音楽が対応している映像の中から一部のシーンを検索する映像再生装置であって、
    前記映像および前記音楽の再生に必要な映像データおよび音楽データが格納される映像・音楽格納手段と、
    前記音楽の再生位置を特定可能な検索条件を設定する検索条件設定手段と、
    前記検索条件設定手段によって設定された検索条件を満たす前記音楽の再生位置を特定する音楽検索手段と、
    前記音楽検索手段によって特定された前記音楽の再生位置に対応する前記映像の一部のシーンを特定する映像検索手段と、
    を備えることを特徴とする映像再生装置。
    A video playback device for searching for a part of a scene from video corresponding to at least a part of music,
    Video / music storage means for storing video data and music data necessary for reproduction of the video and music;
    Search condition setting means for setting a search condition capable of specifying the music playback position;
    Music search means for specifying the playback position of the music that satisfies the search conditions set by the search condition setting means;
    Video search means for specifying a partial scene of the video corresponding to the music playback position specified by the music search means;
    A video playback apparatus comprising:
  2. 請求項1において、
    前記検索条件設定手段によって設定される検索条件は、音の大きさの時間変化パターンを特定可能な音楽データであり、
    前記音楽検索手段は、前記映像・音楽格納手段に格納された音楽データの再生したときに得られる音楽の音の大きさの時間変化パターンの中から、前記検索条件としての音の大きさの時間変化パターンと一致あるいは類似する箇所を、前記検索条件を満たす前記音楽の再生位置として特定することを特徴とする映像再生装置。
    In claim 1,
    The search condition set by the search condition setting means is music data capable of specifying a time change pattern of sound volume,
    The music search means includes a time duration of sound volume as the search condition from a time change pattern of music sound volume obtained when the music data stored in the video / music storage means is reproduced. A video playback apparatus that identifies a location that matches or is similar to a change pattern as a playback position of the music that satisfies the search condition.
  3. 請求項1において、
    前記検索条件設定手段によって設定される検索条件は、使用される楽器であり、
    前記音楽検索手段は、前記映像・音楽格納手段に格納された音楽データを再生したときに得られる音楽の中から、前記検索条件で指定された楽器を用いて演奏された箇所を、前記検索条件を満たす前記音楽の再生位置として特定することを特徴とする映像再生装置。
    In claim 1,
    The search condition set by the search condition setting means is a musical instrument used,
    The music search means is configured to select a place played using the musical instrument specified in the search condition from among the music obtained when the music data stored in the video / music storage means is reproduced. A video playback apparatus characterized by being specified as a playback position of the music satisfying the above.
  4. 請求項3において、
    前記音楽検索手段は、前記映像・音楽格納手段に格納された音楽データを再生したときに得られる音楽の中から、前記検索条件で指定された楽器に固有の音色を含む箇所を、前記検索条件を満たす前記音楽の再生位置として特定することを特徴とする映像再生装置。
    In claim 3,
    The music search means includes a search condition for a location including a timbre unique to the musical instrument specified by the search condition from music obtained when the music data stored in the video / music storage means is reproduced. A video playback apparatus characterized by being specified as a playback position of the music satisfying the above.
  5. 請求項1において、
    前記検索条件設定手段によって設定される検索条件は、曲調およびジャンルの少なくとも一方であり、
    前記音楽検索手段は、前記映像・音楽格納手段に格納された音楽データを再生したときに得られる音楽の中から、前記検索条件で指定された曲調あるいはジャンルが一致する箇所を、前記検索条件を満たす前記音楽の再生位置として特定することを特徴とする映像再生装置。
    In claim 1,
    The search condition set by the search condition setting means is at least one of tune and genre,
    The music search means is configured to search for a position where the tune or genre specified by the search condition matches from the music obtained when the music data stored in the video / music storage means is reproduced. A video playback apparatus characterized by being specified as a playback position of the music to be satisfied.
  6. 請求項1〜5のいずれかにおいて、
    前記映像・音楽再生手段に格納された前記映像データおよび前記音楽データを読み出して映像および音楽の再生を行う再生手段と、
    再生開始位置を指定して前記再生手段による再生動作の開始を指示する再生指示手段と、
    をさらに備え、前記映像検索手段によって前記一部のシーンが特定されたときに、前記再生指示手段は、この一部のシーンに対応する再生開始位置を指定して前記再生手段に対する映像および音楽の再生を指示することを特徴とする映像再生装置。
    In any one of Claims 1-5,
    Reproduction means for reading the video data and the music data stored in the video / music reproduction means and reproducing the video and music;
    Reproduction instruction means for designating a reproduction start position and instructing start of a reproduction operation by the reproduction means;
    And when the part of the scene is specified by the video search means, the playback instruction means designates a playback start position corresponding to the part of the scene, and the video and music for the playback means are specified. A video playback apparatus characterized by instructing playback.
  7. 請求項6において、
    前記映像検索手段によって特定されたシーンが複数存在する場合に、前記再生指示手段は、再生位置が最も早いシーンに対応する再生開始位置を指定することを特徴とする映像再生装置。
    In claim 6,
    When there are a plurality of scenes specified by the video search means, the playback instruction means specifies a playback start position corresponding to a scene with the earliest playback position.
  8. 請求項7において、
    前記再生位置の変更指示を受け付ける操作手段をさらに備え、
    前記再生指示手段は、前記操作手段を用いて変更指示がなされたときに、前記映像検索手段によって特定された複数のシーンのそれぞれに対応する再生開始位置を所定の順番で切り替えることを特徴とする映像再生装置。
    In claim 7,
    An operation means for receiving an instruction to change the reproduction position;
    The reproduction instruction means switches a reproduction start position corresponding to each of a plurality of scenes specified by the video search means in a predetermined order when a change instruction is made using the operation means. Video playback device.
  9. 請求項6において、
    前記映像検索手段によって特定されたシーンが複数存在する場合に、前記再生指示手段は、これら複数のシーンのそれぞれに対応する再生開始位置を順番に指定し、
    前記再生手段は、前記再生指示手段によって指定された再生開始位置の順番にしたがって複数のシーンのそれぞれに対応する映像および音楽の再生を行うことを特徴とする映像再生装置。
    In claim 6,
    When there are a plurality of scenes specified by the video search unit, the playback instruction unit sequentially specifies playback start positions corresponding to the plurality of scenes,
    The video playback apparatus, wherein the playback means plays back video and music corresponding to each of a plurality of scenes according to the order of the playback start positions designated by the playback instruction means.
JP2005183242A 2005-06-23 2005-06-23 Video playback device Expired - Fee Related JP4679259B2 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2005183242A JP4679259B2 (en) 2005-06-23 2005-06-23 Video playback device

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2005183242A JP4679259B2 (en) 2005-06-23 2005-06-23 Video playback device

Publications (2)

Publication Number Publication Date
JP2007006082A true JP2007006082A (en) 2007-01-11
JP4679259B2 JP4679259B2 (en) 2011-04-27

Family

ID=37691261

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2005183242A Expired - Fee Related JP4679259B2 (en) 2005-06-23 2005-06-23 Video playback device

Country Status (1)

Country Link
JP (1) JP4679259B2 (en)

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2008227881A (en) * 2007-03-13 2008-09-25 Yamaha Corp Unit for reproducing video content
JP2009128727A (en) * 2007-11-27 2009-06-11 Sanyo Electric Co Ltd Electronic device capable of playing back music data
KR101634897B1 (en) * 2015-01-23 2016-07-08 주식회사 아이리버 Image providing system related to sound source and method thereof

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH07175816A (en) * 1993-10-25 1995-07-14 Hitachi Ltd Video associative retrieving device and method
JP2004140675A (en) * 2002-10-18 2004-05-13 Sharp Corp Video recorder
JP2005018674A (en) * 2003-06-30 2005-01-20 Nippon Hoso Kyokai <Nhk> Content feature amount extractor, content feature extract program and content feature extract method

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH07175816A (en) * 1993-10-25 1995-07-14 Hitachi Ltd Video associative retrieving device and method
JP2004140675A (en) * 2002-10-18 2004-05-13 Sharp Corp Video recorder
JP2005018674A (en) * 2003-06-30 2005-01-20 Nippon Hoso Kyokai <Nhk> Content feature amount extractor, content feature extract program and content feature extract method

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2008227881A (en) * 2007-03-13 2008-09-25 Yamaha Corp Unit for reproducing video content
JP2009128727A (en) * 2007-11-27 2009-06-11 Sanyo Electric Co Ltd Electronic device capable of playing back music data
KR101634897B1 (en) * 2015-01-23 2016-07-08 주식회사 아이리버 Image providing system related to sound source and method thereof

Also Published As

Publication number Publication date
JP4679259B2 (en) 2011-04-27

Similar Documents

Publication Publication Date Title
JP2004158186A (en) Method for recording/managing audio data of re-recordable recording medium
KR20050015937A (en) Information storage medium, reproducing apparatus and method therefor
KR100254610B1 (en) Apparatus and method for calculating reproducing time of optical disc
JP4095271B2 (en) Disc player
JP2004214748A (en) Video reproducing apparatus and display control method
JP4679259B2 (en) Video playback device
JP3802269B2 (en) Disc player
JP2747262B2 (en) Information reproduction method and apparatus for reproducing menu data
JP2000149514A (en) Disk reproducing apparatus
JP4191312B2 (en) Disc player
JP3978166B2 (en) Video playback apparatus and video playback method
JP3698915B2 (en) Disc player
JP2002223411A (en) Disk reproducing device
JP2005182959A (en) Playback device
JP2000156023A (en) Disk reproducing device
JP4998090B2 (en) Video content playback apparatus and video content playback method
JP3642981B2 (en) Disc player
JP2000175154A (en) Disk reproducing device
JP2003077222A (en) Disk reproducing device
JP2000163933A (en) Disk-reproducing device
JP4780024B2 (en) Optical disk device
JP2007080329A (en) Still picture switching position retrieving apparatus of disk
JP4588270B2 (en) Disc player
JP3701485B2 (en) Disc player
KR100404135B1 (en) Digital video disk medium and accompaniment title having single pattern selection menu and method for controlling playback operation of player using the dvd medium

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20080218

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20100407

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20100413

A521 Written amendment

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20100517

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20100629

A521 Written amendment

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20100811

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20110125

A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20110201

R150 Certificate of patent or registration of utility model

Free format text: JAPANESE INTERMEDIATE CODE: R150

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20140210

Year of fee payment: 3

LAPS Cancellation because of no payment of annual fees