JP3780142B2 - 映像記録再生装置 - Google Patents

Description

【０００１】
【発明の属する技術分野】
本発明は、ディジタル映像信号が記録されている記録媒体から、ディジタル映像信号に挿入されている識別情報に基づいて、ユーザが希望する場面（シーン）を検索して再生する装置及び方法に関するものである。
【０００２】
【従来の技術】
動画像中の内容に基づいて所望の場面（シーン）を検索して再生する映像検索装置が、特開平８−１３０７０１号公報に開示されている。図１２は特開平８−１３０７０１号公報に記載されている映像記録再生検索装置の概略構成図である。
【０００３】
図１２において、記録部１０にはＭＰＥＧ（データ圧縮の国際規格）に準拠したビットストリームで構成された映像データが記録されている。ビットストリーム中のユーザーデータ領域に、当該ユーザー領域に対応するシーンの内容を示す識別情報が挿入されている。ＭＰＥＧデコーダ２０は、ユーザーデータ領域に挿入した識別情報を抽出するユーザー領域符号抽出部２８を備える。検索部３０は、ユーザが所望のシーン内容を入力するための検索内容入力部３２と、検索内容入力部３２から入力された内容とユーザー領域符号抽出部２８の内容とを比較する比較部３１とから構成される。
【０００４】
検索内容入力部３２から所望のシーンの内容が入力されると、この検索内容に合致する識別情報を持つ映像信号を記録部１１内の映像信号から検索するように制御部１２に指令が与えられる。そして、検索内容と識別情報とが合致した場合に、検索部３０からＭＰＥＧデコーダ２０に対して「オン」指令が出され、当該映像信号（シーン）の復号と表示が開始される。
【０００５】
【発明が解決しようとする課題】
ところで、映像検索装置の使用例としてある番組の再生中に別の番組の中から所望の場面を検索するケースが想定される。例えばユーザーが録画したドラマなどの番組を再生中に、同じく録画したニュース番組中から明日の天気予報の部分を検索して再生する場合である。この場合、再生しているドラマの番組を停止することなく検索を実行し、検索直後にあるいは再生中の番組終了後に、検索された天気予報の映像を再生開始するようなユーザーインタフェースが望まれる。このようなユーザーインタフェイスを実現するためには、映像の再生と検索の処理を並列実行する必要がある。
【０００６】
しかしながら、ＭＰＥＧにしたがったビットストリームに挿入された識別情報から映像の検索を行うためには、ビットストリームからユーザーデータ領域を抽出する必要があるが、図１２に示す映像検索装置のように１つのＭＰＥＧデコーダでは映像の再生と検索の処理を並列実行することはできない。
【０００７】
本発明は、以上のような実情に鑑みてなされたもので、映像の再生と所望シーンの検索とを並列実行することができ、使い勝手が良くユーザインタフェースに優れた映像検索再生装置を提供することを目的とする。
【０００８】
【課題を解決するための手段】
ＭＰＥＧストリームを始めとする各種データストリーム中には、圧縮符号化された映像ストリーム、音声ストリームとユーザーデータを格納するためのプライベートストリーム（本発明ではユーザーデータとして検索のための識別情報を使用するので、以下の説明ではプライベートストリームを検索データストリームと呼ぶ）が多重化されている。
【０００９】
上記のデータストリームから再生と検索を行うためには、多重化されたデータストリームからプライベート、映像、音声の各ストリームに分離する多重分離機能と、圧縮符号化された映像・音声データを伸張して復号化するする映像復号機能・音声復号機能と、検索をおこなうための検索機能とを要する。従って、再生と検索を並列に実行するためには、再生中のストリームと検索のためのストリームを同時に処理する必要があるが、並列動作が要求されるのは多重分離機能のみである。
【００１０】
本発明では、複数の多重分離部を実装することで、映像の再生と検索を並列実行するものである。
【００１１】
【発明の実施の形態】
本発明の第１の態様は、映像記録再生装置として、映像データ、音声データと共に検索のための識別情報が組込まれた識別データが多重化されたデータストリームを記録する記録部と、この記録部に記録された前記データストリームを多重分離して映像データ及び音声データを出力する第一の多重分離部と、前記データストリームを多重分離して識別データを出力する第二の多重分離部と、多重分離された映像データ及び音声データを復号化して再生する再生部と、多重分離された識別データを基に特定の映像データ及び音声データを検索する検索部とを備え、前記識別データは前記第一の多重分離部が出力する映像／音声ストリームとは異なる映像／音声ストリームに対応する識別データであり、前記データストリームから検索用の識別データを抽出するための多重分離と前記データストリームから映像及び音声再生用の映像データ及び音声データを抽出するための多重分離とを前記複数の多重分離部が並列に実行するようにしたものであり、一方の多重分離部には映像を再生するストリームを入力し、もう一方の多重分離部には検索のためのストリームを入力して多重分離を行うことにより、映像の再生と検索を同時に実行するという作用を有する。
【００１２】
本発明の第２の態様は、第１の態様の映像記録再生装置において、検索情報を抽出する多重分離部と検索処理を実行する検索処理部とがそれぞれ複数で構成され、複数のストリームに対して検索処理を並行して実行し得るようにしたものであり、複数のストリームに対して検索処理を並列に実行することにより、映像の再生と検索を並列実行し、かつ高速に検索を行うという作用を有する。
【００１３】
本発明の第３の態様は、第１、第２の態様の映像記録再生装置において、検索情報を抽出するための多重分離を実行する多重分離部に対して映像及び音声再生のための多重分離を実行する多重分離部に入力するデータストリームのデータ転送速度よりも高速にデータストリームを入力し、検索処理を高速に実行するようにしたものであり、高速に検索を行うという作用を有する。
【００１４】
本発明の第４の態様は、映像記録再生装置として、映像データ、音声データと共に検索のための識別情報が組込まれた識別データが多重化されたデータストリームを多重分離して映像データ及び音声データを出力する第一の多重分離部と、前記データストリームを多重分離して識別データを出力する第二の多重分離部と、前記第一及び第二の多重分離部によって多重分離された映像データ、音声データ及び識別データを記録する記録部と、この記録部に記録された映像データ及び音声データを復号化して再生する再生部と、前記記録部に記録された識別データを基に特定の映像データ及び音声データを検索する検索部とを具備し、前記識別データは前記第一の多重分離部が出力する映像／音声ストリームとは異なる映像／音声ストリームに対応する識別データであるようにしたものであり、記録前にストリーム中に多重化されている映像ストリーム、音声ストリームおよび検索データストリームを分離して記録部に記録し、再生時には映像ストリームと音声ストリームを、検索時には検索データストリームを用いることにより映像の再生と検索を並列実行するという作用を有する。
【００１５】
本発明の第５の態様は、映像記録再生装置として、映像データ、音声データと共に検索のための識別情報が組込まれた識別データが多重化されたデータストリームを多重化された映像データ及び音声データのストリームと識別データとに多重分離する第一の多重分離部と、この第一の多重分離部によって多重分離された多重化された映像データ及び音声データのストリームと識別データとを記録する記録部と、この記録部に記録された前記多重化された映像データ及び音声データのストリームを映像データと音声データとに多重分離する第二の多重分離部と、この第二の多重分離部によって多重分離された映像データ及び音声データを復号化して再生する再生部と、前記記録部に記録された識別データを基に特定の映像データ及び音声データを検索する検索部とを具備し、前記識別データは前記第一の多重分離部が出力する映像／音声ストリームとは異なる映像／音声ストリームに対応する識別データであるようにしたものであり、記録前にストリーム中に多重化されている映像ストリーム、音声ストリームおよび検索データストリームを、多重化された映像ストリームと音声ストリーム、単独の検索データストリームに分離して記録部に記録し、再生には多重化された映像ストリームと音声ストリームを、検索には検索データストリームを用いることにより映像の再生と検索を並列実行するという作用を有する。
【００１６】
本発明の第６の態様は、映像記録再生装置として、映像データ、音声データと共に検索のための識別情報が組込まれた識別データが多重化されたデータストリームを記録する記録部と、この記録部に記録されたデータストリームを多重分離して映像データ及び音声データを出力する第一の多重分離部と、前記データストリームを多重分離して識別データを出力する第二の多重分離部と、多重分離された後の映像データ及び音声データを復号化して再生する再生部と、多重分離された識別データを基に特定の映像データ及び音声データを検索する検索部と、前記記録部と前記再生部との間に設けられたランダムアクセス可能な一時記憶部とを備え、前記一時記憶部にデータストリームを一時記憶し、前記識別データは前記第一の多重分離部が出力する映像／音声ストリームとは異なる映像／音声ストリームに対応する識別データであるようにしたものであり、記録部に記録されたストリームを一時記憶部に高速に転送、一時記憶することにより、例えば前述の記録部がＶＴＲなどシーケンシャルにのみアクセス可能な媒体である場合においても、再生のためのストリームと検索のためのストリームに同時にアクセス可能にするという作用を有する。
【００１７】
本発明の第７の態様は、映像記録再生装置として、映像データ、音声データと共に検索のための識別情報が組込まれた識別データが多重化されたデータストリームを記録する記録部と、この記録部に記録されたデータストリームを多重分離して映像データ及び音声データを出力する第一の多重分離部と、前記データストリームを多重分離して識別データを出力する第二の多重分離部と、多重分離された後の映像データ及び音声データを復号化して再生する再生部と、多重分離された識別データを基に特定の映像データ及び音声データを検索する検索部と、前記多重分離部と前記再生部との間に設けられたランダムアクセス可能な一時記憶部とを備え、前記識別データは前記第一の多重分離部が出力する映像／音声ストリームとは異なる映像／音声ストリームに対応する識別データであり、前記一時記憶部に多重分離された映像データ及び音声データを一時記憶するようにしたものであり、記録部に記録されたＭＰＥＧストリームを一時記憶部に高速に転送、一時記憶することにより、例えば前述の記録部がＶＴＲなどシーケンシャルにのみアクセス可能な媒体である場合においても、再生のためのストリームと検索のためのストリームに同時にアクセス可能にするという作用を有する。
【００１８】
本発明の第８の態様は、映像記録再生装置として、映像データ、音声データと共に検索のための識別情報が組込まれた識別データが多重化されたデータストリームを多重分離して映像データ及び音声データを出力する第一の多重分離部と、前記データストリームを多重分離して識別データを出力する第二の多重分離部と、多重分離された映像データ、音声データ及び識別データを一時的に記録するランダムアクセス可能な一時記憶部と、前記一時記憶部から読み出される映像データ及び音声データを復号化して再生する再生部と、前記一時記憶部から読み出される識別データを基に特定の映像データ及び音声データを検索する検索部とを具備し、前記識別データは前記第一の多重分離部が出力する映像／音声ストリームとは異なる映像／音声ストリームに対応する識別データであるようにしたものであり、記録部に記録された映像データ、音声データ及び識別データを一時記憶部に高速に転送、一時記憶することにより、例えば前述の記録部がＶＴＲなどシーケンシャルにのみアクセス可能な媒体である場合においても、再生のためのストリームと検索のためのストリームに同時にアクセス可能にするという作用を有する。
【００１９】
本発明の第９の態様は、映像記録再生装置として、映像データ、音声データと共に検索のための識別情報が組込まれた識別データが多重化されたデータストリームを記録する記録部と、この記録部に記録されたデータストリームを多重分離して映像データ及び音声データのストリームを出力する第一の多重分離部と、前記データストリームを多重分離して識別データを出力する第二の多重分離部と、多重化された映像データ及び音声データのストリームを復号化して再生する再生部と、多重分離された識別データを基に特定の映像データ及び音声データを検索する検索部と、前記多重分離部と前記再生部との間に設けられたランダムアクセス可能な一時記憶部とを備え、前記識別データは前記第一の多重分離部が出力する映像／音声ストリームとは異なる映像／音声ストリームに対応する識別データであり、前記一時記憶部に多重化された映像データ及び音声データのストリームを一時的に記憶するようにしたものであり、記録部に記録された映像データ及び音声データのストリームを一時記憶部に高速に転送して一時記憶し、識別データは記録部から検索部へ転送する事により、例えば前述の記録部がＶＴＲなどシーケンシャルにのみアクセス可能な媒体である場合においても、再生のためのストリームと検索のためのストリームに同時にアクセス可能にするという作用を有する。また、一時記憶部の容量を抑えることができる。
【００２０】
本発明の第１０の態様は、映像記録再生装置として、映像データ、音声データと共に検索のための識別情報が組込まれた識別データが多重化されたデータストリームを記録する記録部と、この記録部に記録されたデータストリームを多重分離して映像データ及び音声データのストリームを出力する第一の多重分離部と、前記データストリームを多重分離して識別データを出力する第二の多重分離部と、多重化された映像データ及び音声データのストリームを復号化して再生する再生部と、多重分離された識別データを基に特定の映像データ及び音声データを検索する検索部と、前記多重分離部と前記再生部との間に設けられたランダムアクセス可能な一時記憶部とを備え、前記識別データは前記第一の多重分離部が出力する映像／音声ストリームとは異なる映像／音声ストリームに対応する識別データであり、前記一時記憶部に多重分離された識別データと多重化された映像データ及び音声データのストリームとを一時的に記憶するようにしたものであり、記録部に記録された識別データと映像データ及び音声データのストリームを一時記憶部に高速に転送して一時記憶する事により、例えば前述の記録部がＶＴＲなどシーケンシャルにのみアクセス可能な媒体である場合においても、再生のためのストリームと検索のためのストリームに同時にアクセス可能にするという作用を有する。
【００２１】
本発明の第１１の態様は、第６の態様の映像記録再生装置において、前記第一の多重分離部には、前記一時記憶部に蓄積されたデータストリームを出力し、前記第二の多重分離部には、前記記録部に蓄積されたストリームを前記一時記憶部を介さずに出力するようにしたものであり、例えば前述の記録部がＶＴＲなどシーケンシャルにのみアクセス可能な媒体である場合においても、再生のためのストリームと検索のためのストリームに同時にアクセス可能にするという作用を有する。
【００２２】
本発明の第１２の態様は、映像記録再生装置として、映像データ、音声データと共に検索のための識別情報が組込まれた識別データが多重化されたストリームを多重分離して映像データ及び音声データを出力する第一の多重分離部と、前記データストリームを多重分離して識別データを出力する第二の多重分離部と、多重分離された映像データ及び音声データを記録する記録部と、多重分離された識別データを記録する第二の記録部と、前記記録部から読み出される映像データ及び音声データを復号化して再生する再生部と、前記第二の記録部から読み出される識別データを基に特定の映像データ及び音声データを検索する検索部とを具備し、前記識別データは前記第一の多重分離部が出力する映像データ及び音声データとは異なる映像データ及び音声データに対応する識別データであるようにしたものであり、記録部がＶＴＲなどシーケンシャルにのみアクセス可能な媒体である場合においても、複数のＭＰＥＧストリームに同時にアクセス可能にするという作用を有する。
【００２３】
本発明の第１３の態様は、映像記録再生装置として、映像データ、音声データと共に検索のための識別情報が組込まれた識別データが多重化されたストリームを識別データと多重化された映像データ及び音声データのストリームとに多重分離する第一の多重分離部と、この多重化された映像データ及び音声データのストリームを記録する記録部と、前記第一の多重分離部によって多重分離された識別データを記録する第二の記録部と、前記記録部に記録された多重化された映像データ及び音声データのストリームを映像データと音声データとに多重分離する第二の多重分離部と、多重分離された後の映像データ及び音声データを復号化して再生する再生部と、前記第二の記録部に記録された識別データを基に特定の映像データ及び音声データを検索する検索部とを具備し、前記識別データは前記第一の多重分離部が出力する映像／音声ストリームとは異なる映像／音声ストリームに対応する識別データであるようにしたものであり、記録部がＶＴＲなどシーケンシャルにのみアクセス可能な媒体である場合においても、複数のＭＰＥＧストリームに同時にアクセス可能にするという作用を有する。
【００２４】
本発明の第１４の態様は、映像記録再生装置として、第１２、第１３の態様の映像記録再生装置において、前記第二の記録部は、ランダムアクセス可能な記録装置であるようにしたので、複数の検索対象のストリームに同時アクセスでき校則検索が可能になる。
【００２５】
本発明の第１５の態様は、映像記録再生装置として、映像データ、音声データと共に検索のための識別情報が組込まれた識別データが多重化されたデータストリームを多重分離して映像データ及び音声データを出力する第一の多重分離部と、前記データストリームを多重分離して識別データを出力する第二の多重分離部と、多重分離された識別データを基に前記データストリーム中からあらかじめ登録した検索条件に合致する区間を選択する検索部と、多重分離された映像データ及び音声データのうち選択区間に対応するデータを記録する記録部と、この記録部に記録された映像データ及び音声データを復号化して再生する再生部とを具備し、前記識別データは前記第一の多重分離部が出力する映像／音声ストリームとは異なる映像／音声ストリームに対応する識別データであるようにしたものであり、データストリームを記録部に記録する前に検索データストリームを分離して検索部に入力し、予め登録していた検索条件と一致した検索データストリームに対応する区間だけを記録部に記録するようにしたので、効率的な映像記録が可能となる。
【００２６】
本発明の第１６の態様は、映像記録再生装置として、映像データ、音声データと共に検索のための識別情報が組込まれた識別データが多重化されたデータストリームを多重化された映像データ及び音声データのストリームと識別データとに多重分離する第一の多重分離部と、多重分離された識別データを基に前記データストリーム中からあらかじめ登録した検索条件に合致する区間を選択する検索部と、多重化された映像データ及び音声データのストリームのうち選択区間に対応するデータを記録する記録部と、この記録部に記録された前記多重化された映像データ及び音声データのストリームを映像データと音声データとに多重分離する第二の多重分離部と、この多重分離された映像データ及び音声データを復号化して再生する再生部とを具備し、前記識別データは前記第一の多重分離部が出力する映像／音声ストリームとは異なる映像／音声ストリームに対応する識別データであるようにしたものであり、多重化された映像データ及び音声データを記録部に記録する前に検索データストリームを分離して検索部に入力し、予め登録していた検索条件と一致した検索データストリームに対応する区間だけを記録部に記録するようにしたので、効率的な映像記録が可能となる。
【００２７】
本発明の第１７の態様は、映像記録再生装置として、映像データ、音声データと共に検索のための識別情報が組込まれた識別データが多重化されたデータストリームを多重分離して映像データ及び音声データを出力する第一の多重分離部と、前記データストリームを多重分離して識別データを出力する第二の多重分離部と、多重分離された識別データを記録する第二の記録部と、前記第二の記録部に記録された識別データを基に前記データストリーム中からあらかじめ登録した検索条件に合致する区間を選択する検索部と、多重分離された映像データ及び音声データのうち選択区間に対応するデータを記録する記録部と、この記録部に記録された映像データ及び音声データを復号化して再生する再生部とを具備し、前記識別データは前記第一の多重分離部が出力する映像／音声ストリームとは異なる映像／音声ストリームに対応する識別データであるようにしたものであり、映像データ及び音声データを記録部に記録する前に多重分離された識別データを第二の記録部を経由して検索部に入力し、予め登録していた検索条件と一致した検索データストリームに対応する区間だけを記録部に記録するようにしたので、効率的な映像記録が可能となる。
【００２８】
本発明の第１８の態様は、映像記録再生装置として、映像データ、音声データと共に検索のための識別情報が組込まれた識別データが多重化されたデータストリームを識別データと映像データ及び音声データのストリームとに多重分離する第一の多重分離部と、多重分離された識別データを記録する第二の記録部と、前記第二の記録部に記録された識別データを基に前記データストリーム中からあらかじめ登録した検索条件に合致する区間を選択する検索部と、多重化された映像データ及び音声データのストリームのうち選択区間に対応するストリームを記録する記録部と、この記録部に記録された映像データ及び音声データのストリームを映像データと音声データとに多重分離する第二の多重分離部と、多重分離された後の映像データ及び音声データを復号化して再生する再生部とを具備し、前記識別データは前記第一の多重分離部が出力する映像／音声ストリームとは異なる映像／音声ストリームに対応する識別データであるようにしたものであり、多重化された映像データ及び音声データを記録部に記録する前に多重分離された識別データを第二の記録部を経由して検索部に入力し、予め登録していた検索条件と一致した検索データストリームに対応する区間だけを記録部に記録するようにしたので、効率的な映像記録が可能となる。
【００２９】
本発明の第１９の態様は、第１から第１８の映像記録再生装置において、前記データストリームは、動画像符号化標準のＭＰＥＧに準拠したＭＰＥＧストリームであるようにしたものであり、ＭＰＥＧストリームについて、一方の多重分離部には映像を再生するストリームを入力し、もう一方の多重分離部には検索のためのストリームを入力して多重分離を行い、また複数のストリームに対して検索処理を並列に実行することにより、映像の再生と検索を並列実行し、かつ高速に検索を行うという作用を有する。
【００３０】
本発明の第２０の態様は、第１９の映像記録再生装置において、前記ＭＰＥＧストリームは、映像データ、音声データ及び識別データがそれぞれパケット化され、ＰＥＳ（Packetized Elementary Stream）パケットとして多重化されているものである。
【００３１】
本発明の第２１の態様は、第１９の映像記録再生装置において、前記ＭＰＥＧストリームは、識別データはストリーム情報を格納するためのストリームヘッダに含まれ、映像データ及び音声データと共に多重化されているものである。
【００３２】
本発明の第２２の態様は、第１９の映像記録再生装置において、前記ＭＰＥＧストリームは、識別データはプライベートディスクリプタとしてＰＡＴ（Program Association Table）、ＰＭＴ(Program Map Table)、又はＣＡＴ（Conditional Access table）中に格納され、映像データ及び音声データとともに多重化されているものである。
【００３３】
本発明の第２３の態様は、第１９の映像記録再生装置において、前記ＭＰＥＧストリームは、識別データがプライベートセクションデータとして格納され、映像データ及び音声データと共に多重化されているものである。
【００３４】
本発明の第２４の態様は、映像データ、音声データと共に検索のための識別情報が組込まれた識別データが多重化されたデータストリームを多重化された映像データ及び音声データのストリームと識別データとに多重分離する第一の多重分離部と、多重分離された識別データを基に前記データストリーム中から映像再生端末から伝送媒体を経由して受信している検索条件に合致する区間を選択する検索部と、多重化された映像データ及び音声データのストリームのうち選択区間に対応するデータを記録する記録部と、この記録部に記録された前記多重化された映像データ及び音声データのストリームを前記伝送媒体を経由して前記映像再生端末へ送信する送信部とを具備し、前記識別データは前記第一の多重分離部が出力する映像／音声ストリームとは異なる映像／音声ストリームに対応する識別データである映像検索サーバ装置である。
【００３５】
本発明の第２５の態様は、第２４の態様の映像検索サーバ装置に対して検索要求を出す映像再生端末であって、前記伝送媒体を経由して映像検索サーバ装置へ検索条件を送信する送信部と、前記映像検索サーバ装置から検索結果として送られてきた多重化された映像データ及び音声データのストリームを受信する受信部と、受信した映像データ及び音声データのストリームを映像データ及び音声データに多重分離する第二の多重分離部と、多重分離された映像データ及び音声データを復号化して再生する再生部とを具備する映像再生端末である。
【００３６】
本発明の第２６の態様は、第２４の態様の映像検索サーバ装置と、第２５の態様の映像再生端末と、前記映像検索サーバ装置と前記映像再生端末とを結ぶ伝送媒体とからなる映像検索システムであって、前記伝送媒体は、通信網、放送網、又は通信網と放送網の組み合わせであることに特徴とする映像検索システムである。
【００３７】
本発明の第２７の態様は、映像データ、音声データと共に検索のための識別情報が組込まれた識別データが多重化されたデータストリームを記録媒体に蓄積し、再生要求と検索要求とが時間的に重なって発生したときは、前記記録媒体から再生対象のデータストリーム及び検索対象のデータストリームを読み出し、双方のデータストリームを並列に映像データ、音声データ及び識別データに多重分離し、再生対象のデータストリームから多重分離された映像データ及び音声データを復号化して再生する一方、検索対象のデータストリームから多重分離された識別データを基に特定の映像データ及び音声データを検索し、前記検索対象のデータストリームは、前記再生対象のデータストリームとは異なるデータストリームであることを特徴とする映像記録再生方法である。
【００３８】
本発明の第２８の態様は、映像データ、音声データと共に検索のための識別情報が組込まれた識別データが多重化されたデータストリームを映像データ、音声データ及び識別データにそれぞれ多重分離し、再生要求と検索要求とが時間的に重なって発生したときは、前記記録媒体から再生対象の映像データ及び音声データと並列に検索対象のデータストリームに含まれていた識別データを読出し、読み出された映像データ及び音声データを復号化して再生する一方、識別データを基に特定の映像データ及び音声データを検索し、前記検索対象のデータストリームは、前記再生対象のデータストリームとは異なるデータストリームであることを特徴とする映像記録再生方法である。
【００３９】
本発明の第２９の態様は、映像データ、音声データと共に検索のための識別情報が組込まれた識別データが多重化されたデータストリームを多重化された映像データ及び音声データのストリームと識別データとに多重分離し、この多重化された映像データ及び音声データのストリームと識別データとを記録媒体に蓄積し、再生要求と検索要求とが時間的に重なって発生したときは、前記記録媒体から再生対象の映像データ及び音声データのストリームと並列に検索対象のデータストリームに含まれていた識別データを読出し、映像データ及び音声データのストリームを多重分離した後に復号化して再生する一方、識別データを基に特定の映像データ及び音声データを検索し、前記検索対象のデータストリームは、前記再生対象のデータストリームとは異なるデータストリームであることを特徴とする映像記録再生方法である。
【００４０】
本発明の第３０の態様は、映像データ、音声データと共に検索のための識別情報が組込まれた識別データが多重化されたデータストリームをシーケンシャルアクセスのみ可能な記録媒体に蓄積し、再生対象及び又は検索対象のデータストリームを前記記録媒体から一時記憶部へ転送し、再生要求と検索要求とが時間的に重なって発生している場合は前記一時記憶部から再生対象のデータストリーム及び検索対象のデータストリームを読み出し、双方のデータストリームを並列に映像データ、音声データ及び識別データに多重分離し、再生対象のデータストリームから多重分離された映像データ及び音声データを復号化して再生する一方、検索対象のデータストリームから多重分離された識別データを基に特定の映像データ及び音声データを検索し、前記検索対象のデータストリームは、前記再生対象のデータストリームとは異なるデータストリームであることを特徴とする映像記録再生方法である。
【００４２】
以下、本発明の実施の形態について図面を参照して具体的に説明する。以下の説明では、データストリームとして動画像符号化標準であるＭＰＥＧに準拠したＭＰＥＧストリームを例に説明するが、動画像符号化標準のＭＰＥＧに準拠したＭＰＥＧストリームでないデータストリームに対しても本発明は適用可能であることはもちろんである。
【００４３】
（実施の形態１）
図１は本発明の実施の形態１にかかる映像記録再生装置の概略構成図である。この映像記録再生装置は、ＭＰＥＧストリームが入力されるＭＰＥＧストリーム入力部１、復号された映像信号を出力する映像出力部２、復号された音声信号を出力する音声出力部３を備えている。ＭＰＥＧストリーム入力部１で受信されたＭＰＥＧストリームは記録部１１に蓄積される。記録部１１には複数の出力部があり、記録された複数のＭＰＥＧストリームは同時にアクセス可能である。記録部１１は制御部１２によって制御される。制御部１２は検索部３０からの指示にしたがって記録部１１に蓄積されているＭＰＥＧストリームの読出しを制御する。
【００４４】
記録部１１の２つの出力部に対して第一の多重分離部２１と第二の多重分離部２２とが同時にアクセス可能に設けられている。第一の多重分離部２１は、記録部１１から再生のために読み出されたＭＰＥＧストリームから映像ストリームと音声ストリームと取り出す処理を行う。第二の多重分離部２２は、記録部１１から検索のために読み出されたＭＰＥＧストリームから検索ストリームを取り出す処理を行う。映像ストリーム、音声ストリーム及び検索ストリームはＭＰＥＧストリームに多重されている。
【００４５】
第一の多重分離部２１に対して映像復号部２３及び音声復号部２４が並列に配置されている。映像復号部２３は、圧縮された映像ストリームを伸張して復元された映像信号を映像出力部２へ出力する部分である。音声復号部２４は圧縮された音声ストリームを伸張して復元された音声信号を音声出力部３へ出力する部分である。映像復号部２３及び音声復号部２４は同期して動作する。
【００４６】
検索部３０は、比較部３１と検索内容入力部３２とから構成されている。検索内容入力部３２は検索内容を入力する部分であり、比較部３１は検索のためにＭＰＥＧストリームの読出しを制御部１２に指示すると共に、記録部１１から読み出され第二の多重分離部２２で抽出された検索データストリーム中の識別情報と検索内容入力部３２からの検索内容とを比較する部分である。
【００４７】
図２（Ａ）は本実施の形態におけるＭＰＥＧストリームの構成例を示すものである。図２（Ａ）に示すように、ＭＰＥＧストリームは、ストリーム情報を格納するためのストリームヘッダ１０１と、符号化された複数の映像ストリーム（映像ストリーム（１）１０２〜映像ストリーム（ｎ）１０５）と、符号化された複数の音声ストリーム（音声ストリーム（１）１０３〜音声ストリーム（ｎ）１０６）と、検索のための識別情報が組み込まれた複数の識別データとしての検索データストリーム（検索データストリーム（１）１０４〜検索データストリーム（ｎ）１０６）と、により構成される。
【００４８】
上記検索データストリームには対応するシーンの内容を示す識別情報が、該当する映像データストリーム、音声データストリームを同期して再生するための情報であるPTS（Presentation Time Stamp）あるいはタイムコードと共に記録されている。また、映像データ、音声データ及び検索データストリームはそれぞれパケット化され、ＰＥＳ（Packetized Elementary Stream）パケットとして多重化されている。又は、検索データストリームはプライベートディスクリプタとしてＰＡＴ（Program Association Table）、ＰＭＴ(Program Map Table)、又はＣＡＴ（Conditional Access table）中に格納され、映像データ及び音声データとともに多重化されてもよい。
【００４９】
図２（Ｂ）は符号化映像データにより構成された複数のＧＯＰ（Group of Picture）から成る映像信号の構成例であり、図２（Ｃ）はＧＯＰヘッダの構成例を示している。図２（Ｂ）に示す映像シーケンスはパケット化されて、図２（Ａ）に示すＭＰＥＧストリーム中の映像ストリーム（１）１０２〜映像ストリーム(ｎ)１０５にエレメントデータとして格納されている。
【００５０】
ここで、ＧＯＰとは、時間的に連続した映像フレーム（またはフィールド）が符号化された一連のＩピクチャ、Ｐピクチャ、Ｂピクチャから構成されたグループのことである。このＧＯＰは、映像信号を符号化して記録、再生する装置において、符号化されたデータがフレーム（またはフィールド）内で符号化されるＩピクチャと、Ｉピクチャを参照して動き補償フレーム（またはフィールド）間符号化されるＰピクチャ、またはこのようにしてフレーム（またはフィールド）間符号化されて得られたＰピクチャを参照して動き補償フレーム（またはフィールド）間符号化されるＰピクチャと、時間的に前後に位置するＩピクチャまたはＰピクチャを参照して双方向からの動き補償フレーム（またはフィールド）間符号化されるＢピクチャとにより構成される。
【００５１】
図２（Ｂ）に示すように、符号化された映像信号のシーケンスは、シーケンスヘッダ２０１と、複数のＧＯＰ（第１番目のＧＯＰ＝「ＧＯＰ１」、以下同種のデータには同様の要領でデータ番号が付けられる）２０２−１〜２０２−ｎから成る。図２（Ｃ）にＧＯＰ２（２０２−２）の内部の詳細を示す。ＧＯＰ２の構成は、ヘッダ２０３と、１又は複数のＩピクチャ２０６と、複数のＰピクチャ２０９、２１２、２１５と、複数のＢピクチャ２０７、２０８、２１０、２１１、２１３、２１４、２１６、２１７、２１８とから構成される。図中の括弧内の数字は各データの先頭アドレスを示す。
【００５２】
映像信号の復号化時にはＧＯＰ単位で処理を行う。映像復号部２３は、Ｉ１、Ｂ-1、Ｂ0、Ｐ４、Ｂ２、Ｂ3、……の順に入力して来るピクチャを復号化処理する。復号化された映像信号は、映像出力部２から表示部へ送出されて（Ｂ-1）、（Ｂ0）、Ｉ１、Ｂ2、Ｂ3、Ｐ4、……のフレーム順に表示される。
【００５３】
また、映像信号と音声信号とを同期して再生するためのＰＴＳは、映像ストリーム（１）１０２〜映像ストリーム（ｎ）１０５、音声ストリーム（１）１０３〜音声ストリーム（ｎ）１０６のヘッダ部にそれぞれ格納されている。タイムスタンプは、ＧＯＰ１（２０２−１）〜ＧＯＰｎ（２０２−ｎ）のヘッダ部（２０３）に格納されている。
【００５４】
次に、以上のように構成された本実施の形態の動作について説明する。制御部１２は図示されていないユーザインターフェースから番組のアドレス又は番組識別番号を指定して再生指示が入ると、指示された番組のＭＰＥＧストリームの先頭アドレスを特定して記録部１１に再生指示を出す。この結果、制御部１２から指示された番組のＭＰＥＧストリームが記録部１１の一方の出力部から第一の多重分離部２１に対して送出される。第一の多重分離部２１はＭＰＥＧストリームから映像ストリームと音声ストリームとを取りだす。取り出された映像ストリームは映像復号部２３で復号され、取り出された音声ストリームは音声復号部２４で復号される。そして映像信号及び音声信号が同期して映像出力部２及び音声出力部３から送出される。
【００５５】
本発明は、以上のようにして番組が再生されている場合であっても、所望のデータストリームを記録部１１から検索することができる。すなわち、番組再生中に、検索部３０の検索内容入力部３２にユーザから検索したいシーンの内容が入力されると、比較部３１が制御部１２に指示して検索用のＭＰＥＧストリームを記録部１１から出力させる。このとき、第二の多重分離部２２は再生中のＭＰＥＧストリームを出力している出力部とは別の出力部にアクセスする。第二の多重分離部２２は検索用のＭＰＥＧストリームから検索データストリームを取り出す。そして、検索データストリームに挿入されている識別情報が第二の多重分離部２２から比較部２２へ出力される。
【００５６】
比較部３１は、検索内容入力部３２に入力した検索内容と検索データストリーム中の識別情報とを比較し、両者が合致するまで記録部１１に蓄積されているＭＰＥＧストリームを読み出すように制御部１２に指示する。
【００５７】
さらに、第二の多重分離部２２は、検索データストリーム中に格納されているＰＴＳ又はタイムコードの値を参照し、対応する映像フレームのGOP先頭アドレス、および該当映像フレームのＧＯＰ先頭フレームからのフレーム数を算出し、検索部３０へ出力する。
【００５８】
検索部３０は、比較部３１において検索内容と識別情報とが一致したときは、その時の映像フレームのGOP先頭アドレス及び当映像フレームのＧＯＰ先頭フレームからのフレーム数を保持する。そして、制御部１２へ検索シーンの再生を指示するときに上記ＧＯＰ先頭アドレス及びＧＯＰ先頭フレームからのフレーム数を制御部１２へ通知して再生を指示する。これにより、検索した映像の再生開始時に、所望の映像フレームに直接アクセスすることが可能となる。
【００５９】
以上のように本実施の形態によれば、第一の多重分離部２１と第二の多重分離部２２を備えたので、再生と検索を同時に実行することが可能となる。
【００６０】
なお、検索情報を抽出するための多重分離を実行する第二の多重分離部２２と、識別データを基に特定の映像データ及び音声データを検索する検索部３０とをそれぞれ複数個備え、これら複数の第二の多重分離部２２及び検索部３０が記録部１１に蓄積された複数のデータストリームに対して検索処理を並行して実行するように構成しても良い。これにより、検索処理の高速化を図る事ができる。
【００６１】
また、検索情報を抽出するための多重分離を実行する第二の多重分離部２２に対して映像及び音声再生のための多重分離を実行する第一の多重分離部２１に入力するデータストリームのデータ転送速度よりも高速にデータストリームを入力し、検索処理を高速に実行するようにしても良い。
【００６２】
（実施の形態２）
図３は本発明の第２の実施の形態にかかる映像記録再生装置の概略構成図である。なお、以下の説明では前述の図１と同一機能を有する部分には同一の番号を付して、詳細な説明を省略する。
【００６３】
本実施の形態における映像記録再生装置では、ＭＰＥＧストリーム入力部１と記録部１１との間に第三の多重分離部２５を配置している。第三の多重分離部２５は、入力する多重化されたＭＰＥＧストリームを映像ストリーム、音声ストリーム、検索データストリームに分離する。映像ストリーム、音声ストリーム、検索データストリームは分離された後に記録部１１へ格納される。記録部１１は、３つの出力部を有する。記録部１１の有するそれぞれの出力部は、映像復号部２３、音声復号部２４及び検索部３０の比較部３１に接続される。
【００６４】
以下に本実施の形態２における映像記録再生装置の動作を説明する。ＭＰＥＧストリーム入力部１に入力する多重化されたＭＰＥＧストリームは、第三の多重分離部２５において映像ストリーム、音声ストリーム及び検索データストリームに分離されて記録部１１に記録される。
【００６５】
映像の再生時には、記録部１１から映像ストリームが映像復号部２３に入力し、音声ストリームが音声復号部２４に入力して、映像と音声が同期して出力される。
【００６６】
また、映像の検索時には、記録部１１に記録された検索データストリームが検索部３０に入力して第１の実施の形態と同様の検索処理が実行される。比較部３１は検索データストリームに含まれた識別情報と検索内容とが一致するデータストリームを検出すると共に、検索データストリーム中に格納されているＰＴＳ又はタイムコードの値を参照し、対応する映像フレームのＧＯＰ先頭アドレス、および該当映像フレームのＧＯＰ先頭フレームからのフレーム数を算出している。算出値は検索シーンを再生するときに使用する。
【００６７】
このように、ＭＰＥＧストリームから分離した映像ストリーム、音声ストリーム及び検索データストリームを記録部１１に記録するとともに、記録部１１に記録された映像ストリーム、音声ストリーム及び検索データストリームを独立してアクセス可能にしたので、映像・音声の再生と検索を同時に行うことができる。
【００６８】
（実施の形態３）
図４は本発明の第３の実施の形態にかかる映像記録再生装置の概略構成図である。なお、以下の説明では前述の図１と同一機能を有する部分には同一の番号を付して、詳細な説明を省略する。
【００６９】
本実施の形態の映像記録再生装置は、ＭＰＥＧストリーム入力部１と記録部１１との間に第四の多重分離部２６を配置し、且つ記録部１１と映像復号部２３及び音声復号部２４と間に第５の多重化復号部２７を配置している。第四の多重分離部２６は、多重化されたＭＰＥＧストリームを映像ストリーム及び音声ストリームが多重化されたデータストリームと、検索データストリームとに分離する。また、第５の多重化復号部２７は、多重化された映像ストリームと音声ストリームとを映像ストリームと音声ストリームとに分離する。
【００７０】
図５（Ａ）は第４の多重化復号部２６に入力するＭＰＥＧストリームの構成を示し、図５（Ｂ）（Ｃ）は第４の多重化復号部２６から出力される記録ＭＰＥＧストリームの構成を示す。
【００７１】
以下に本実施の形態における映像記録再生装置の動作を説明する。ＭＰＥＧストリーム入力部１に入力する多重化されたＭＰＥＧストリームは、第４の多重化復号部２６にて映像ストリーム、音声ストリーム及び検索データストリームに分離される。その後、再度、ストリームヘッダ１１１を付加して映像ストリームと音声ストリームとを多重化して出力する。検索データストリームと、多重化された映像ストリーム及び音声ストリームとは、それぞれ記録部１１に記録される。
【００７２】
映像の再生時には、記録部１１に記録された多重化された映像ストリームと音声ストリームは第五の多重分離部２７にて映像ストリームと音声ストリームとに分離され、映像ストリーム、音声ストリームはそれぞれ映像復号部２３、音声復号部２４を経由して映像信号、音声信号に変換されて出力される。
【００７３】
映像の検索には、記録部１１に記録された検索データストリームが検索部３０に入力して、検索処理が実行される。このとき、記録部１１に記録された検索データストリームと、多重化された映像ストリームと音声ストリームとは独立してアクセス可能であり、従って、映像・音声の再生と検索を同時に行うことができる。
【００７４】
（実施の形態４）
図６は本発明の第４の実施の形態にかかる映像記録再生装置の概略構成図である。なお、以下の説明では前述の図１と同一機能を有する部分には同一の番号を付して、詳細な説明を省略する。
【００７５】
本実施の形態の映像記録再生装置は、記録部１１と第一の多重分離部２１及び第二の多重分離部２２との間に一時記憶部４０を配置している。一時記憶部４０は、再生又は検索の実行時に、記録部１１に記録されたＭＰＥＧデータを、通常の映像再生処理に必要なデータ転送レートよりも高速に転送して一時記憶し、第一の多重分離部２１及び第二の多重分離部２２に対して通常の映像再生処理と同じデータ転送レートでＭＰＥＧデータを供給する。
【００７６】
以下に本実施の形態における映像記録再生装置の動作を説明する。映像再生時には、記録部１１から一時記憶部４０に再生するＭＰＥＧストリームの一部または全てを通常の映像再生処理時のデータ転送レートよりも高速に転送する。そして一時記憶部４０から第一の多重分離部２１に通常の映像再生処理と同じデータ転送レートで転送する。第一の多重分離部２１は映像ストリームと音声ストリームとに分離して映像復号部２３、音声復号部２４へ供給する。復元された映像信号、音声信号は映像出力部２、音声出力部３から送出される。
【００７７】
一方、制御部１２は、一時記憶部４０に蓄積された再生のためのＭＰＥＧストリームが全て第一の多重分離部２１に転送される前に、再度、記録部１１から一時記憶部４０に残りの再生のためのＭＰＥＧストリームを転送するよう記録部１１を制御する。
【００７８】
映像検索時にはユーザーから検索部３０に検索要求が入力される。この場合、制御部１２は再生するＭＰＥＧストリームを記録部１１から一時記憶部４０に転送中であるかを判断し、転送中でない場合は検索のためのＭＰＥＧストリームを記録部１１から一時記憶部４０に転送する。第二の多重分離部２２は一時記憶部４０に記録された検索のためのＭＰＥＧストリームから検索データストリームを取り出し、検索データストリーム中の識別情報を検索部３０へ出力する。
【００７９】
ここで、映像再生のためのデータストリームを記録部１１から一時記憶部４０へ転送している間は、検索用のデータストリームを記録部１１から読み出すことはできない。しかし、映像再生のための全データストリームを一時記憶部４０へ転送した後、又は周期的に実行される映像再生のためのデータストリームの転送の合間であれば、映像再生中であっても検索用のデータストリームを記録部１１から読み出すことが可能である。
【００８０】
記録部１１が例えばＶＴＲ等のようにシーケンシャルアクセスのみ可能な媒体の場合は、第一の多重分離部２１及び第二の多重分離部２２を併設しても記録部１１に蓄積された複数のＭＰＥＧストリームに対して同時アクセスできない。
【００８１】
そこで、上述したように記録部１１がシーケンシャルアクセスのみ可能な媒体の場合は、記録部１１の出力段に複数のＭＰＥＧストリームに対して同時にアクセス可能な記録媒体（４０）を配置することにより、複数のＭＰＥＧストリームに対して同時にアクセス可能となり、映像・音声の再生と検索を同時に行うことができる。
【００８２】
しかも、記録部１１から一時記憶部４０に対してＭＰＥＧストリームを通常の映像再生処理時のデータ転送レートよりも高速に転送するので、再生時に一時記憶部４０に一時的に蓄積されるＭＰＥＧストリームが枯渇しないので、連続再生が可能になっている。
【００８３】
（実施の形態５）
図７は本発明の第５の実施の形態にかかる映像記録再生装置の概略構成図である。なお、以下の説明では前述の図１、図３、図６と同一機能を有する部分には同一の番号を付して、詳細な説明を省略する。
【００８４】
本実施の形態の映像記録再生装置は、映像ストリーム、音声ストリーム及び検索データストリームが多重化されたＭＰＥＧストリームを記録部１１から読み出して第三の多重分離部２５に入力して、映像ストリーム、音声ストリーム及び検索データストリームに分離する。そして、映像ストリームと音声ストリームとを一時記憶部４０に格納し、検索時には検索データストリームを検索部３０へ入力する。一時記憶部４０は映像復号部２３及び音声復号部２４に対して映像ストリームと音声ストリームを並列に送出する。
【００８５】
以下に本実施の形態の映像記録再生装置の動作を説明する。映像再生時には、再生するＭＰＥＧストリームの一部または全てを、記録部１１から第三の多重分離部２５に向けて通常の映像再生処理時のデータ転送レートよりも高速に転送する。第三の多重分離部２５は多重化された映像ストリーム、音声ストリーム及び検索データストリームを、映像ストリーム及び音声ストリームと、検索データストリームとに分離し、映像ストリームと音声ストリームは一時記憶部４０に転送して一時記憶する。そして、一時記憶部４０から映像復号部２３と音声復号部２４に映像ストリームと音声ストリームを通常の映像再生時の転送レートで転送する。映像復号部２３と音声復号部２４は、復元した映像信号と音声信号を出力する。
【００８６】
一方、制御部１２は一時記憶部４０に蓄積された再生のための映像ストリームと音声ストリームがの全て映像復号部２３と音声復号部２４に転送される前に、再度、記録部１１から第三の多重分離部２５を経由して一時記憶部４０に残りの再生するＭＰＥＧストリームを転送するよう制御する。
【００８７】
ユーザーから検索部３０に検索要求が入力されると、制御部１２は再生するＭＰＥＧストリームを記録部１１から一時記憶部４０に転送中であるかを判断し、転送中でない場合は検索のためのＭＰＥＧストリームを記録部１１から第三の多重分離部２５に転送する。
【００８８】
第三の多重分離部２５は、検索のためのＭＰＥＧストリームから、検索データストリームを分離し、検索部３０に検索データストリームを転送して、検索処理を行う。
【００８９】
このように、本実施の形態では、検索データストリームを一時記憶装置４０には記憶しないため、前述の第４の実施の形態に比べてより記憶容量の少ない一時記憶装置４０を用いる事ができる。
【００９０】
なお、上記実施の形態において、一時記憶部４０をランダムアクセス可能な記憶装置で構成し、検索対象のＭＰＥＧストリームから多重分離された識別データも一時記憶部４０に格納し、検索部３０は一時記憶部４０から読み出した識別データを利用して検索処理を実行するようにしても良い。
【００９１】
また、上記実施の形態において、一時記憶部４０をランダムアクセス可能な記憶装置で構成し、第三の多重分離部２５で再生対象及び又は検索対象のＭＰＥＧストリームを識別データと多重化された映像データ及び音声データのストリームとに多重分離し、一時記憶部４０には映像データ及び音声データのストリーム記録し、映像復号部２３及び音声復号部２４からなる再生部が映像データ及び音声データのストリームを復号するようにしてもよい。
【００９２】
また、上記実施の形態において、一時記憶部４０をランダムアクセス可能な記憶装置で構成し、第三の多重分離部２５で再生対象及び又は検索対象のＭＰＥＧストリームを識別データと多重化された映像データ及び音声データのストリームとに多重分離してそれぞれ一時記憶部４０に記録する。そして、映像復号部２３及び音声復号部２４からなる再生部が映像データ及び音声データのストリームを復号し、検索部３０は一時記憶部４０から読み出した識別データを利用して検索処理を実行するようにする。
【００９３】
（実施の形態６）
図８は本発明の第６の実施の形態にかかる映像記録再生装置の概略構成図である。なお、以下の説明では前述の図１、図６と同一機能を有する部分には同一の番号を付して、詳細な説明を省略する。
【００９４】
本発明の実施の形態の映像記録再生装置は、前述の実施の形態１の構成において、記録部１１と第一の多重分離部２２との間に一時記憶部４０を配置したものである。
【００９５】
以下に本実施の形態における映像記録再生装置の動作を説明する。映像再生時には、記録部１１に蓄積されたＭＰＥＧストリームを、記録部１１から一時記憶部４０に対して通常の映像再生処理時のデータ転送レートよりも高速に転送する。そして、一時記憶部４０からＭＰＥＧストリームを第一の多重分離部２１に通常の映像再生処理と同じデータ転送レートで転送する。第一の多重分離部２１はＭＰＥＧストリームから映像ストリームと音声ストリームとを取りだし、映像ストリームを映像復号部２３へ出力し、音声ストリームを音声復号部２４へ出力する。これにより、復元された映像信号及び音声信号が出力される。
【００９６】
一方、制御部１２は一時記憶部４０に蓄積された再生のためのＭＰＥＧストリームがすべて第一の多重分離部２１に転送される前に、再度、記録部１１から一時記憶部４０に残りの再生のためのＭＰＥＧストリームを転送するように記録部１１を制御する。
【００９７】
ユーザーから検索部３０に検索要求が入力されると、制御部１２は再生するＭＰＥＧストリームを記録部１１から一時記憶部４０に転送中であるかを判断し、転送中で無い場合は検索のためのＭＰＥＧストリームを記録部１１から第二の多重分離部２２に転送する。第二の多重分離部２２はＭＰＥＧストリームから検索データストリーム（又は識別情報）を取り出して検索部３０へ送出する。検索部３０では識別情報と検索内容とから検索処理を実行する。
【００９８】
映像ストリーム、音声ストリーム及び検索データストリームが多重化されたデータストリームにおいて、検索データストリームのデータ量が、映像ストリーム及び音声ストリームのデータ量と比較して小さい場合、第二の多重分離部２２で検索データストリームを分離する多重分離処理は、映像再生に要する処理時間より十分高速に実行することが可能である。
【００９９】
したがって、記録部１１がたとえばＶＴＲ等のようにシーケンシャルアクセスのみが可能な媒体であっても、複数のＭＰＥＧストリームに対して同時にアクセス可能となる。
【０１００】
（実施の形態７）
図９は本発明の第７の実施の形態にかかる映像記録再生装置の概略構成図である。なお、以下の説明では前述の図１、図３と同一機能を有する部分には同一の番号を付して、詳細な説明を省略する。
【０１０１】
本実施の形態の映像記録再生装置は、前述の第２の実施の形態の構成において、第三の多重分離部２５と検索部３０との間に第二の記録部１３を配置したものである。第二の記録部１３は、ランダムアクセス可能な記録装置である半導体メモリ、HDD、DVD-RAM、ＰＤ、光磁気ディスク等のいづれか、あるいはそれらの組み合わせで構成される。
【０１０２】
以下に本実施の形態における映像記録再生装置の動作を説明する。ＭＰＥＧストリーム入力部１に入力する多重化されたＭＰＥＧストリームは、第三の多重分離部２５において、映像ストリーム、音声ストリーム、検索データストリームに分離される。分離された映像ストリーム及び音声ストリームは記録部１１に記録され、分離された検索データストリームは第二の記録部１３に記録される。
【０１０３】
映像の再生時には、記録部１１に記録された映像ストリーム、音声ストリームが映像復号部２３、音声復号部２４に入力して、映像と音声が出力される。一方、映像の検索時には、第二の記録部１３に記録された検索データストリームが検索部３０に入力して、検索処理が実行される。
【０１０４】
このように、多重化されたＭＰＥＧストリームを記録部に蓄積する前に映像ストリーム、音声ストリーム及び検索データストリームに分離し、専ら映像再生に使用する映像ストリーム及び音声ストリームを記録部１１に格納し、専ら検索に使用する検索データストリームは別の第二の記録部１３に格納するようにしたので、記録部１１が例えばＶＴＲ等のようにシーケンシャルアクセスのみ可能な媒体であっても映像再生と検索とを同時並列的に実行できる。しかも、ランダムアクセス可能な記録装置で構成されている第二の記録部１３に検索データストリームだけが記録されるので、高速な映像検索を行うことが可能となる。
【０１０５】
なお、上記実施の形態において、記録部１１及び第二の記録部１３の前段に第三の多重分離部２５に代えて図４に示す第四の多重分離部２６を配置し、且つ記録部１１と映像復号部２３及び音声復号部２４との間に図４に示す第五の多重分離部２７を配置する。そして、検索部３０は第二の記録部１３から識別データを取り出して検索処理を実行するようにする。これによっても、記録部１１が例えばＶＴＲ等のようにシーケンシャルアクセスのみ可能な媒体であっても、高速な検索が可能で、映像再生と検索とを同時並列的に実行できる。
【０１０６】
また、上記実施の形態において、検索部３０は第二の記録部１３から識別データを取り出して検索処理を実行し、あらかじめ登録した検索条件と合致する区間を選択し、選択区間に対応するＭＰＥＧストリームから分離された映像データ及び音声データのストリームを記録部１１に記録するようにしてもよい。さらには、上記実施の形態において、記録部１１及び第二の記録部１３の前段に第三の多重分離部２５に代えて図４に示す第四の多重分離部２６を配置し、且つ記録部１１と映像復号部２３及び音声復号部２４との間に図４に示す第五の多重分離部２７を配置する。そして、検索部３０は第二の記録部１３から識別データを取り出して検索処理を実行し、あらかじめ登録した検索条件と合致する区間を選択し、選択区間に対応するＭＰＥＧストリームから分離された映像データ及び音声データのストリームを記録部１１に記録するようにしてもよい。
【０１０７】
また、検索部３０が第二の記録部を経由せずに第四の多重分離部２６から識別データを取り出して検索処理を実行し、あらかじめ登録した検索条件と合致する区間を選択し、選択区間に対応するＭＰＥＧストリームから分離された映像ストリーム及び音声ストリームを記録部１１に記録するようにしてもよい。
【０１０８】
（実施の形態８）
図１０は本発明の第８の実施の形態にかかる映像記録再生装置の概略構成図である。なお、前述の図１、図３と同一機能を有する部分には同一の番号を付して、詳細な説明を省略する。
【０１０９】
本発明の形態の映像記録再生装置では、前述した第２の実施の形態にかかる映像記録再生装置の構成において、第三の多重分離部２５から出力する検索データストリームをそのまま検索部３０に直接入力する構成としたものである。
【０１１０】
以下に本実施の形態における映像記録再生装置の動作を説明する。ＭＰＥＧストリーム入力部１に入力する多重化されたＭＰＥＧストリームは、第三の多重分離部２５において、映像ストリーム、音声ストリーム及び検索データストリームに分離される。分離された検索データストリームは記録部１１を経由せずにそのまま検索部３０に入力する。
【０１１１】
本実施の形態では、検索部３０には検索内容入力部３２から入力された検索条件が予め登録されている。検索部３０では、第三の多重分離部２５から入力する検索データストリームに含まれている識別情報と、あらかじめ登録されている検索条件とを比較する。そして、両者が合致した場合に、制御部１２に対して一致信号を出力する。
【０１１２】
制御部１２は、検索部３０から一致信号が出力された場合、対応するＭＰＥＧストリームから分離された映像ストリーム及び音声ストリームを記録部１１に記録するように記録部１１を制御する。その結果、ユーザーが所望とする条件に合致する区間の映像、音声のみが記録部１１に記録されるものとなる。
【０１１３】
このように、ＭＰＥＧストリームを記録部１１に記録する前に検索データストリームを分離して検索部３０に入力し、予め登録していた検索条件と一致した検索データストリームに対応する区間だけを記録部１１に記録するようにしたので、効率的な映像記録が可能となる。
【０１１４】
なお、上記実施の形態において、記録部１１の前段に第三の多重分離部２５に代えて図４に示す第四の多重分離部２６を配置し、且つ記録部１１と映像復号部２３及び音声復号部２４との間に図４に示す第五の多重分離部２７を配置する。そして、検索部３０は第四の多重分離部２６から識別データを取り出して検索処理を実行し、あらかじめ登録した検索条件と合致する区間を選択し、選択区間に対応するＭＰＥＧストリームから多重化された映像データ及び音声データのストリームを記録部１１に記録するようにしてもよい。
【０１１５】
（実施の形態９）
図１１は第９の実施の形態にかかる映像記録再生システムの概略構成図である。なお、前述の図１、図４と同一機能を有する部分には同一の番号を付して、詳細な説明を省略する。
【０１１６】
本実施の形態の映像記録再生システムは、映像検索サーバ５０、映像再生端末５１及び電送媒体５２から構成されている。
【０１１７】
映像検索サーバ５０は、ＭＰＥＧストリーム入力部１、第四の多重分離部２５、記録部１１、制御部１２、比較部３１、映像データストリームと音声データストリームが多重化されたＭＰＥＧストリームを送信するＭＰＥＧストリーム送信部４、検索内容を受信する検索内容受信部６から構成される。
【０１１８】
映像再生端末５１は、第五の多重分離部２７、映像復号部２３、音声復号部２４、検索内容入力部３２、映像出力部２、音声出力部３、映像データストリームと音声データストリームが多重化されたＭＰＥＧストリームを受信するＭＰＥＧストリーム受信部５、検索内容を送信する検索内容送信部７から構成される。
【０１１９】
さらに、映像検索サーバ４０と映像再生端末４１との間の伝送媒体５２は、通信網、あるいは放送網、あるいは通信網および放送網からなる。
【０１２０】
以下に本実施の形態における映像記録再生システムの動作を説明する。映像再生端末５１において、ユーザーが検索したい内容を検索内容入力部３２から入力すると、入力した検索内容は検索内容送信部７から伝送媒体４２を介して映像検索サーバ４０へ送られる。
【０１２１】
映像検索サーバ４０では、検索内容受信部６で検索内容が受信される。受信した検索内容は比較部３１に入力する。比較部３１では、記録部１１に記録されている検索データストリーム中の識別情報と受信検索内容とを比較して、映像検索を実行する。検索条件に合致した映像は、多重化された映像ストリーム・音声ストリームとしてＭＰＥＧストリーム送信部４から伝送媒体４２を介して映像再生端末５１へ送信される。
【０１２２】
映像再生端末５１では、検索された映像ストリーム・音声ストリームがＭＰＥＧストリーム受信部５で受信される。受信した映像ストリーム・音声ストリームは第五の多重分離部２７にて分離された後、映像復号部２３、音声復号部２４にて伸張され映像及び音声が出力される。
【０１２３】
また、検索データストリームは多重分離処理され記録部１１に記録されているため、複数の映像検索端末からの検索要求に対して、処理を同時かつ高速に行うことが可能である。
【０１２４】
なお、上記第１の実施の形態１から第８の実施の形態に記載した映像記録再生装置及びその変形例における少なくとも記録部及び検索部を映像検索サーバに配置し、少なくとも映像復号部及び音声復号部を映像再生端末に配置していれば、その他の構成要素はいずれのサイドに配置してもよく適宜設計変更可能である。
【０１２５】
【発明の効果】
以上のように本発明によれば、映像の再生処理と検索処理を同時に並行して行うことが可能となる。
【０１２６】
また、本発明によれば、記録部がＶＴＲのようにシーケンシャルアクセスのみ可能な媒体を使用している場合においても、映像の再生と検索処理を同時に行うことが可能となる。
【図面の簡単な説明】
【図１】第１の実施の形態にかかる映像記録再生装置の概略構成図
【図２】上記実施の形態にかかるＭＰＥＧストリームの構成例を示す図
【図３】第２の実施の形態にかかる映像記録再生装置の概略構成図
【図４】第３の実施の形態にかかる映像記録再生装置の概略構成図
【図５】第３の実施の形態にかかる記録ＭＰＥＧストリームの構成例を示す図
【図６】第４の実施の形態にかかる映像記録再生装置の概略構成図
【図７】第５の実施の形態にかかる映像記録再生装置の概略構成図
【図８】第６の実施の形態にかかる映像記録再生装置の概略構成図
【図９】第７の実施の形態にかかる映像記録再生装置の概略構成図
【図１０】第８の実施の形態にかかる映像記録再生装置の概略構成図
【図１１】第９の実施の形態にかかる映像記録再生システムの概略構成図
【図１２】従来例における、映像記録再生検索装置を説明するための概略構成図
【符号の説明】
１ ＭＰＥＧストリーム入力部
２ 映像出力部
３ 音声出力部
１１ 記録部
１２ 制御部
２１ 第一の多重分離部
２２ 第二の多重分離部
２３ 映像復号部
２４ 音声復号部
２５ 第三の多重分離部
２６ 第四の多重分離部
２７ 第五の多重分離部
２８ ユーザー領域符号抽出部
３０ 検索部
３１ 比較部
３２ 検索内容入力部
４０ 一時記憶部

Claims (30)

1. 映像データ、音声データと共に検索のための識別情報が組込まれた識別データが多重化されたデータストリームを記録する記録部と、この記録部に記録された前記データストリームを多重分離して映像データ及び音声データを出力する第一の多重分離部と、前記データストリームを多重分離して識別データを出力する第二の多重分離部と、多重分離された映像データ及び音声データを復号化して再生する再生部と、多重分離された識別データを基に特定の映像データ及び音声データを検索する検索部とを備え、
   再生要求と検索要求とが時間的に重なって発生したときは、前記データストリームから検索用の識別データを抽出するための多重分離と前記データストリームから再生用の映像データ及び音声データを抽出するための多重分離とを前記第一及び第二の多重分離部が並列に実行し、
   前記第二の多重分離部は、前記第一の多重分離部に入力される前記データストリームとは異なるデータストリームを多重分離することを特徴とする映像記録再生装置。
2. 前記データストリームから検索用の識別データを抽出するための多重分離を実行する複数の多重分離部と、識別データを基に特定の映像データ及び音声データを検索する複数の検索部とを備え、これら複数の多重分離部及び検索部が複数のデータストリームに対して検索処理を並行して実行することを特徴とする請求項１記載の映像記録再生装置。
3. 検索用の識別データを抽出するための多重分離を実行する多重分離部に対して再生用の映像データ及び音声データを抽出するための多重分離を実行する多重分離部に入力するデータストリームのデータ転送速度よりも高速にデータストリームを入力することを特徴とする請求項１又は請求項２記載の映像記録再生装置。
4. 映像データ、音声データと共に検索のための識別情報が組込まれた識別データが多重化されたデータストリームを多重分離して映像データ及び音声データを出力する第一の多重分離部と、前記データストリームを多重分離して識別データを出力する第二の多重分離部と、前記第一及び第二の多重分離部によって多重分離された映像データ、音声データ及び識別データを記録する記録部と、この記録部に記録された映像データ及び音声データを復号化して再生する再生部と、前記記録部に記録された識別データを基に特定の映像データ及び音声データを検索する検索部とを具備し、
   前記第二の多重分離部は、前記第一の多重分離部に入力される前記データストリームとは異なるデータストリームを多重分離することを特徴とする映像記録再生装置。
5. 映像データ、音声データと共に検索のための識別情報が組込まれた識別データが多重化されたデータストリームを多重化された映像データ及び音声データのストリームと識別データとに多重分離する第一の多重分離部と、この第一の多重分離部によって多重分離された多重化された映像データ及び音声データのストリームと識別データとを記録する記録部と、この記録部に記録された前記多重化された映像データ及び音声データのストリームを映像データ及び音声データとに多重分離する第二の多重分離部と、この第二の多重分離部によって多重分離された映像データ及び音声データを復号化して再生する再生部と、前記記録部に記録された識別データを基に特定の映像データ及び音声データを検索する検索部とを具備し、
   前記第二の多重分離部は、前記第一の多重分離部に入力される前記データストリームとは異なるデータストリームを多重分離することを特徴とする映像記録再生装置。
6. 映像データ、音声データと共に検索のための識別情報が組込まれた識別データが多重化されたデータストリームを記録する記録部と、この記録部に記録されたデータストリームを多重分離して映像データ及び音声データを出力する第一の多重分離部と、前記データストリームを多重分離して識別データを出力する第二の多重分離部と、多重分離された後の映像データ及び音声データを復号化して再生する再生部と、多重分離された識別データを基に特定の映像データ及び音声データを検索する検索部と、前記記録部と前記再生部との間に設けられたランダムアクセス可能な一時記憶部とを備え、
   前記一時記憶部にデータストリームを一時記憶し、
   前記第二の多重分離部は、前記第一の多重分離部に入力される前記データストリームとは異なるデータストリームを多重分離することを特徴とする映像記録再生装置。
7. 映像データ、音声データと共に検索のための識別情報が組込まれた識別データが多重化されたデータストリームを記録する記録部と、この記録部に記録されたデータストリームを多重分離して映像データ及び音声データを出力する第一の多重分離部と、前記データストリームを多重分離して識別データを出力する第二の多重分離部と、多重分離された後の映像データ及び音声データを復号化して再生する再生部と、多重分離された識別データを基に特定の映像データ及び音声データを検索する検索部と、前記多重分離部と前記再生部との間に設けられたランダムアクセス可能な一時記憶部とを備え、
   前記一時記憶部に多重分離された映像データ及び音声データを一時記憶し、
   前記第二の多重分離部は、前記第一の多重分離部に入力される前記データストリームとは異なるデータストリームを多重分離することを特徴とする映像記録再生装置。
8. 映像データ、音声データと共に検索のための識別情報が組込まれた識別データが多重化されたデータストリームを多重分離して映像データ及び音声データを出力する第一の多重分離部と、前記データストリームを多重分離して識別データを出力する第二の多重分離部と、多重分離された映像データ、音声データ及び識別データを一時的に記録するランダムアクセス可能な一時記憶部と、前記一時記憶部から読み出される映像データ及び音声データを復号化して再生する再生部と、前記一時記憶部から読み出される識別データを基に特定の映像データ及び音声データを検索する検索部とを具備し、
   前記第二の多重分離部は、前記第一の多重分離部に入力される前記データストリームとは異なるデータストリームを多重分離することを特徴とする映像記録再生装置。
9. 映像データ、音声データと共に検索のための識別情報が組込まれた識別データが多重化されたデータストリームを記録する記録部と、この記録部に記録されたデータストリームを多重分離して映像データ及び音声データのストリームを出力する第一の多重分離部と、前記データストリームを多重分離して識別データを出力する第二の多重分離部と、多重化された映像データ及び音声データのストリームを復号化して再生する再生部と、多重分離された識別データを基に特定の映像データ及び音声データを検索する検索部と、前記多重分離部と前記再生部との間に設けられたランダムアクセス可能な一時記憶部とを備え、
   前記一時記憶部に多重化された映像データ及び音声データのストリームを一時的に記憶し、
   前記第二の多重分離部は、前記第一の多重分離部に入力される前記データストリームとは異なるデータストリームを多重分離することを特徴とする映像記録再生装置。
10. 映像データ、音声データと共に検索のための識別情報が組込まれた識別データが多重化されたデータストリームを記録する記録部と、この記録部に記録されたデータストリームを多重分離して映像データ及び音声データのストリームを出力する第一の多重分離部と、前記データストリームを多重分離して識別データを出力する第二の多重分離部と、多重化された映像データ及び音声データのストリームを復号化して再生する再生部と、多重分離された識別データを基に特定の映像データ及び音声データを検索する検索部と、前記多重分離部と前記再生部との間に設けられたランダムアクセス可能な一時記憶部とを備え、前記一時記憶部に多重分離された識別データと多重化された映像データ及び音声データのストリームとを一時的に記憶し、
    前記第二の多重分離部は、前記第一の多重分離部に入力される前記データストリームとは異なるデータストリームを多重分離することを特徴とする映像記録再生装置。
11. 前記第一の多重分離部には、前記一時記憶部に蓄積されたデータストリームを出力し、前記第二の多重分離部には、前記記録部に蓄積されたストリームを前記一時記憶部を介さずに出力することに特徴を有する請求項６記載の映像記録再生装置。
12. 映像データ、音声データと共に検索のための識別情報が組込まれた識別データが多重化されたストリームを多重分離して映像データ及び音声データを出力する第一の多重分離部と、前記データストリームを多重分離して識別データを出力する第二の多重分離部と、多重分離された映像データ及び音声データを記録する記録部と、多重分離された識別データを記録する第二の記録部と、前記記録部から読み出される映像データ及び音声データを復号化して再生する再生部と、前記第二の記録部から読み出される識別データを基に特定の映像データ及び音声データを検索する検索部とを具備し、
    前記第二の多重分離部は、前記第一の多重分離部に入力される前記データストリームとは異なるデータストリームを多重分離することを特徴とする映像記録再生装置。
13. 映像データ、音声データと共に検索のための識別情報が組込まれた識別データが多重化されたデータストリームを識別データと多重化された映像データ及び音声データのストリームとに多重分離する第一の多重分離部と、この多重化された映像データ及び音声データのストリームを記録する記録部と、多重分離された識別データを記録する第二の記録部と、前記記録部から読み出される多重化された映像データ及び音声データのストリームを映像データ及び音声データとに多重分離する第二の多重分離部と、多重分離された後の映像データ及び音声データを復号化して再生する再生部と、前記第二の記録部から読み出される識別データを基に特定の映像データ及び音声データを検索する検索部とを具備し、
    前記第二の多重分離部は、前記第一の多重分離部に入力される前記データストリームとは異なるデータストリームを多重分離することを特徴とする映像記録再生装置。
14. 前記第二の記録部は、ランダムアクセス可能な記録装置であることを特徴とする請求項１２又は請求項１３記載の映像記録再生装置。
15. 映像データ、音声データと共に検索のための識別情報が組込まれた識別データが多重化されたデータストリームを多重分離して映像データ及び音声データを出力する第一の多重分離部と、前記データストリームを多重分離して識別データを出力する第二の多重分離部と、多重分離された識別データを基に前記データストリーム中からあらかじめ登録した検索条件に合致する区間を選択する検索部と、多重分離された映像データ及び音声データのうち選択区間に対応するデータを記録する記録部と、この記録部に記録された映像データ及び音声データを復号化して再生する再生部とを具備し、
    前記第二の多重分離部は、前記第一の多重分離部に入力される前記データストリームとは異なるデータストリームを多重分離することを特徴とする映像記録再生装置。
16. 映像データ、音声データと共に検索のための識別情報が組込まれた識別データが多重化されたデータストリームを多重化された映像データ及び音声データのストリームと識別データとに多重分離する第一の多重分離部と、多重分離された識別データを基に前記データストリーム中からあらかじめ登録した検索条件に合致する区間を選択する検索部と、多重化された映像データ及び音声データのストリームのうち選択区間に対応するデータを記録する記録部と、この記録部に記録された前記多重化された映像データ及び音声データのストリームを映像データ及び音声データとに多重分離する第二の多重分離部と、この多重分離された映像データ及び音声データを復号化して再生する再生部とを具備し、
    前記第二の多重分離部は、前記第一の多重分離部に入力される前記データストリームとは異なるデータストリームを多重分離することを特徴とする映像記録再生装置。
17. 映像データ、音声データと共に検索のための識別情報が組込まれた識別データが多重化されたデータストリームを多重分離して映像データ及び音声データを出力する第一の多重分離部と、前記データストリームを多重分離して識別データを出力する第二の多重分離部と、多重分離された識別データを記録する第二の記録部と、前記第二の記録部に記録された識別データを基に前記データストリーム中からあらかじめ登録した検索条件に合致する区間を選択する検索部と、多重分離された映像データ及び音声データのうち選択区間に対応するデータを記録する記録部と、この記録部に記録された映像データ及び音声データを復号化して再生する再生部とを具備し、
    前記第二の多重分離部は、前記第一の多重分離部に入力される前記データストリームとは異なるデータストリームを多重分離することを特徴とする映像記録再生装置。
18. 映像データ、音声データと共に検索のための識別情報が組込まれた識別データが多重化されたデータストリームを識別データと映像データ及び音声データのストリームとに多重分離する第一の多重分離部と、多重分離された識別データを記録する第二の記録部と、前記第二の記録部に記録された識別データを基に前記データストリーム中からあらかじめ登録した検索条件に合致する区間を選択する検索部と、多重化された映像データ及び音声データのストリームのうち選択区間に対応するストリームを記録する記録部と、この記録部に記録された映像データ及び音声データのストリームを映像データ及び音声データとに多重分離する第二の多重分離部と、多重分離された後の映像データ及び音声データを復号化して再生する再生部とを具備し、
    前記第二の多重分離部は、前記第一の多重分離部に入力される前記データストリームとは異なるデータストリームを多重分離することを特徴とする映像記録再生装置。
19. 前記データストリームは、動画像符号化標準のＭＰＥＧに準拠したＭＰＥＧストリームであることを特徴とする請求項１から請求項１８のいずれかに記載の映像記録再生装置。
20. 前記ＭＰＥＧストリームは、映像データ、音声データ及び識別データがそれぞれパケット化され、ＰＥＳ（Packetized Elementary Stream）パケットとして多重化されていることを特徴とする請求項１９記載の映像記録再生装置。
21. 前記ＭＰＥＧストリームにおいて、識別データはストリーム情報を格納するためのストリームヘッダに含まれ、映像データ及び音声データと共に多重化されていることを特徴とする請求項１９記載の映像記録再生装置。
22. 前記ＭＰＥＧストリームにおいて、識別データはプライベートディスクリプタとしてＰＡＴ（Program Association Table）、ＰＭＴ(Program Map Table)、又はＣＡＴ（Conditional Access table）中に格納され、映像データ及び音声データとともに多重化されていることを特徴とする請求項１９記載の映像記録再生装置。
23. 前記ＭＰＥＧストリームにおいて、識別データはプライベートセクションデータとして格納され、映像データ及び音声データと共に多重化されていることを特徴とする請求項１９記載の映像記録再生装置。
24. 映像データ、音声データと共に検索のための識別情報が組込まれた識別データが多重化されたデータストリームを多重化された映像データ及び音声データのストリームと識別データとに多重分離する第一の多重分離部と、多重分離された識別データを基に前記データストリーム中から映像再生端末から伝送媒体を経由して受信している検索条件に合致する区間を選択する検索部と、多重化された映像データ及び音声データのストリームのうち選択区間に対応するデータを記録する記録部と、この記録部に記録された前記多重化された映像データ及び音声データのストリームを前記伝送媒体を経由して前記映像再生端末へ送信する送信部とを具備し、
    前記第二の多重分離部は、前記第一の多重分離部に入力される前記データストリームとは異なるデータストリームを多重分離することを特徴とする映像検索サーバ装置。
25. 請求項２４記載の映像検索サーバ装置に対して検索要求を出す映像再生端末であって、前記伝送媒体を経由して映像検索サーバ装置へ検索条件を送信する送信部と、前記映像検索サーバ装置から検索結果として送られてきた多重化された映像データ及び音声データのストリームを受信する受信部と、受信した映像データ及び音声データのストリームを映像データ及び音声データに多重分離する第二の多重分離部と、多重分離された映像データ及び音声データを復号化して再生する再生部とを具備する映像再生端末。
26. 請求項２４記載の映像検索サーバ装置と、請求項２５記載の映像再生端末と、前記映像検索サーバ装置と前記映像再生端末とを結ぶ伝送媒体とからなる映像検索システムであって、前記伝送媒体は、通信網、放送網、又は通信網と放送網の組み合わせであることに特徴とする映像検索システム。
27. 映像データ、音声データと共に検索のための識別情報が組込まれた識別データが多重化されたデータストリームを記録媒体に蓄積し、再生要求と検索要求とが時間的に重なって発生したときは、前記記録媒体から再生対象のデータストリーム及び検索対象のデータストリームを読み出し、双方のデータストリームを並列に映像データ、音声データ及び識別データに多重分離し、再生対象のデータストリームから多重分離された映像データ及び音声データを復号化して再生する一方、検索対象のデータストリームから多重分離された識別データを基に特定の映像データ及び音声データを検索し、
    前記検索対象のデータストリームは、前記再生対象のデータストリームとは異なるデータストリームであることを特徴とする映像記録再生方法。
28. 映像データ、音声データと共に検索のための識別情報が組込まれた識別データが多重化されたデータストリームを映像データ、音声データ及び識別データにそれぞれ多重分離し、再生要求と検索要求とが時間的に重なって発生したときは、前記記録媒体から再生対象の映像データ及び音声データと並列に検索対象のデータストリームに含まれていた識別データを読出し、読み出された映像データ及び音声データを復号化して再生する一方、識別データを基に特定の映像データ及び音声データを検索し、
    前記検索対象のデータストリームは、前記再生対象のデータストリームとは異なるデータストリームであることを特徴とする映像記録再生方法。
29. 映像データ、音声データと共に検索のための識別情報が組込まれた識別データが多重化されたデータストリームを多重化された映像データ及び音声データのストリームと識別データとに多重分離し、この多重化された映像データ及び音声データのストリームと識別データとを記録媒体に蓄積し、再生要求と検索要求とが時間的に重なって発生したときは、前記記録媒体から再生対象の映像データ及び音声データのストリームと並列に検索対象のデータストリームに含まれていた識別データを読出し、映像データ及び音声データのストリームを多重分離した後に復号化して再生する一方、識別データを基に特定の映像データ及び音声データを検索し、
    前記検索対象のデータストリームは、前記再生対象のデータストリームとは異なるデータストリームであることを特徴とする映像記録再生方法。
30. 映像データ、音声データと共に検索のための識別情報が組込まれた識別データが多重化されたデータストリームをシーケンシャルアクセスのみ可能な記録媒体に蓄積し、再生対象及び又は検索対象のデータストリームを前記記録媒体から一時記憶部へ転送し、再生要求と検索要求とが時間的に重なって発生している場合は前記一時記憶部から再生対象のデータストリーム及び検索対象のデータストリームを読み出し、双方のデータストリームを並列に映像データ、音声データ及び識別データに多重分離し、再生対象のデータストリームから多重分離された映像データ及び音声データを復号化して再生する一方、検索対象のデータストリームから多重分離された識別データを基に特定の映像データ及び音声データを検索し、
    前記検索対象のデータストリームは、前記再生対象のデータストリームとは異なるデータストリームであることを特徴とする映像記録再生方法。

Images