JPH09270006A - 動画像処理方法 - Google Patents

動画像処理方法

Info

Publication number
JPH09270006A
JPH09270006A JP8081146A JP8114696A JPH09270006A JP H09270006 A JPH09270006 A JP H09270006A JP 8081146 A JP8081146 A JP 8081146A JP 8114696 A JP8114696 A JP 8114696A JP H09270006 A JPH09270006 A JP H09270006A
Authority
JP
Japan
Prior art keywords
moving image
feature amount
input
similarity
video
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
JP8081146A
Other languages
English (en)
Other versions
JP3534368B2 (ja
Inventor
Hisashi Aoki
恒 青木
Toshimitsu Kaneko
敏充 金子
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Toshiba Corp
Original Assignee
Toshiba Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Toshiba Corp filed Critical Toshiba Corp
Priority to JP08114696A priority Critical patent/JP3534368B2/ja
Priority to US08/832,374 priority patent/US6466731B2/en
Publication of JPH09270006A publication Critical patent/JPH09270006A/ja
Application granted granted Critical
Publication of JP3534368B2 publication Critical patent/JP3534368B2/ja
Anticipated expiration legal-status Critical
Expired - Fee Related legal-status Critical Current

Links

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/45—Management operations performed by the client for facilitating the reception of or the interaction with the content or administrating data related to the end-user or to the client device itself, e.g. learning user preferences for recommending movies, resolving scheduling conflicts
    • H04N21/454—Content or additional data filtering, e.g. blocking advertisements
    • G—PHYSICS
    • G11—INFORMATION STORAGE
    • G11B—INFORMATION STORAGE BASED ON RELATIVE MOVEMENT BETWEEN RECORD CARRIER AND TRANSDUCER
    • G11B27/00—Editing; Indexing; Addressing; Timing or synchronising; Monitoring; Measuring tape travel
    • G11B27/10—Indexing; Addressing; Timing or synchronising; Measuring tape travel
    • G11B27/102—Programmed access in sequence to addressed parts of tracks of operating record carriers
    • G11B27/105—Programmed access in sequence to addressed parts of tracks of operating record carriers of operating discs
    • G—PHYSICS
    • G11—INFORMATION STORAGE
    • G11B—INFORMATION STORAGE BASED ON RELATIVE MOVEMENT BETWEEN RECORD CARRIER AND TRANSDUCER
    • G11B27/00—Editing; Indexing; Addressing; Timing or synchronising; Monitoring; Measuring tape travel
    • G11B27/10—Indexing; Addressing; Timing or synchronising; Measuring tape travel
    • G11B27/102—Programmed access in sequence to addressed parts of tracks of operating record carriers
    • G11B27/107—Programmed access in sequence to addressed parts of tracks of operating record carriers of operating tapes
    • G—PHYSICS
    • G11—INFORMATION STORAGE
    • G11B—INFORMATION STORAGE BASED ON RELATIVE MOVEMENT BETWEEN RECORD CARRIER AND TRANSDUCER
    • G11B27/00—Editing; Indexing; Addressing; Timing or synchronising; Monitoring; Measuring tape travel
    • G11B27/10—Indexing; Addressing; Timing or synchronising; Measuring tape travel
    • G11B27/19—Indexing; Addressing; Timing or synchronising; Measuring tape travel by using information detectable on the record carrier
    • G11B27/28—Indexing; Addressing; Timing or synchronising; Measuring tape travel by using information detectable on the record carrier by using information signals recorded by the same method as the main recording
    • G—PHYSICS
    • G11—INFORMATION STORAGE
    • G11B—INFORMATION STORAGE BASED ON RELATIVE MOVEMENT BETWEEN RECORD CARRIER AND TRANSDUCER
    • G11B27/00—Editing; Indexing; Addressing; Timing or synchronising; Monitoring; Measuring tape travel
    • G11B27/10—Indexing; Addressing; Timing or synchronising; Measuring tape travel
    • G11B27/34—Indicating arrangements 
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/41—Structure of client; Structure of client peripherals
    • H04N21/414—Specialised client platforms, e.g. receiver in car or embedded in a mobile appliance
    • H04N21/4147—PVR [Personal Video Recorder]
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/433—Content storage operation, e.g. storage operation in response to a pause request, caching operations
    • H04N21/4331—Caching operations, e.g. of an advertisement for later insertion during playback
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/44—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs
    • H04N21/44008—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs involving operations for analysing video streams, e.g. detecting features or characteristics in the video stream
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/47—End-user applications
    • H04N21/488—Data services, e.g. news ticker
    • H04N21/4882—Data services, e.g. news ticker for displaying messages, e.g. warnings, reminders
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/80—Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
    • H04N21/81—Monomedia components thereof
    • H04N21/812—Monomedia components thereof involving advertisement data
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00—Details of television systems
    • H04N5/14—Picture signal circuitry for video frequency region
    • H04N5/147—Scene change detection
    • G—PHYSICS
    • G11—INFORMATION STORAGE
    • G11B—INFORMATION STORAGE BASED ON RELATIVE MOVEMENT BETWEEN RECORD CARRIER AND TRANSDUCER
    • G11B2220/00—Record carriers by type
    • G11B2220/20—Disc-shaped record carriers
    • G—PHYSICS
    • G11—INFORMATION STORAGE
    • G11B—INFORMATION STORAGE BASED ON RELATIVE MOVEMENT BETWEEN RECORD CARRIER AND TRANSDUCER
    • G11B2220/00—Record carriers by type
    • G11B2220/90—Tape-like record carriers
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00—Details of television systems
    • H04N5/44—Receiver circuitry for the reception of television signals according to analogue transmission standards
    • H04N5/445—Receiver circuitry for the reception of television signals according to analogue transmission standards for displaying additional information
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00—Details of television systems
    • H04N5/44—Receiver circuitry for the reception of television signals according to analogue transmission standards
    • H04N5/445—Receiver circuitry for the reception of television signals according to analogue transmission standards for displaying additional information
    • H04N5/45—Picture in picture, e.g. displaying simultaneously another television channel in a region of the screen

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Databases & Information Systems (AREA)
  • Business, Economics & Management (AREA)
  • Marketing (AREA)
  • Information Retrieval, Db Structures And Fs Structures Therefor (AREA)
  • Image Analysis (AREA)
  • Television Signal Processing For Recording (AREA)
  • Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)
  • Studio Circuits (AREA)

Abstract

(57)【要約】 【課題】 本願発明はすでに見た映像の重複視聴を防ぐ
ことを課題とする。 【解決手段】 すでに見た映像の特徴量を時々刻々デー
タベースに記録し、現在見ている画像が、すでに本装置
を経由して提示されたものであるかどうかを常に検査す
る。もし現在の画像が既出のものであった場合には、利
用者が指定した時期まで映像の出力を停止する。また、
アイコンの一覧で映像を表示する場合、類似重複するア
イコンは表示を省略する。

Description

【発明の詳細な説明】
【０００１】
【発明の属する技術分野】本願発明は、マルチメディア
情報，特に動画像データを編集するための動画像処理方
法に関する。
【０００２】
【従来の技術】衛星放送（ＢＳ放送）、ケーブルテレビ
ジョン放送（ＣＡＴＶ）の普及などにより、家庭におい
ても視聴可能な映像チャンネル数は増加の一途をたどっ
ている。また従来のビデオテープやレーザーディスクな
どの映像記録媒体に加え、映像音声情報をディジタルデ
ータとして記録再生できるＤＶＤ（ディジタル・ビデオ
・ディスク）も１９９６年には実用・製品化される見込
みであるなど、ごく普通のユーザが大量の映像にアクセ
スできる環境は充実しつつあるといってよい。
【０００３】その一方で、それら大量の映像の中から目
的の映像に効率よくアクセスできる技術の提供は従前の
ままである。例えばテレビの視聴者は、新聞などに掲載
される番組欄を参照して見たい映像（番組）を選択した
り、ビデオソフトパッケージを購入しようとする消費者
はパッケージに記載されているタイトルや出演者、あら
すじなどを参照して希望のビデオを選択する。これらは
文字による映像内容のテキスト記述であるが、映像の全
てに対して記述がなされているわけではなく、そのよう
に全てに対して記述することは大変な手間となるもので
あることはいうまでもない。
【０００４】また、映像中のどの部分を見たいか、とい
う要求は当然ユーザ個々に異なるものであるはずで、す
べてのユーザに対応可能なテキスト記述を作成すること
は付加情報量の増大を招き、おもに放送メディアなど供
給できる情報量に限界があるソースにおいては実用が難
しい。このためテレビ視聴者はニュース番組中の特定の
話題だけを見たい場合にも、テレビをつけたままで目的
の話題となるのを待たなくてはならなかったり、すでに
別の番組で見たニュースを繰り返し見させられたりし
て、著しく時間の無駄となっている。
【０００５】映像情報中の目的の部分を選択する方法と
しては、映像を場面の変化点（カット）ごとに１枚の小
画像（アイコン）で表示し、ユーザは目的のアイコンを
画面上で指示することによって、再生開始点や、編集操
作を装置に知らせる方法が主流である（たとえば電子情
報通信学会論文誌Ｄ-II, Vol.J75-D-II, No.2, pp.216-
225. 1992 ほか多数）が、これらの手法は供給される映
像データのどの部分にもユーザの要求にしたがってアク
セスできる（ランダムアクセス）場合を前提としてお
り、放送メディアのような一方向の情報の流れしかない
場合を想定しているとはいい難い。これらのように映像
をユーザのランダムアクセス可能な状態で処理する装置
を用いた場合、ユーザは今放送されている番組を見るの
にも、一度この装置に映像情報を転送記録する必要が生
じ、これは利便性を大きく損なう。
【０００６】更に、映像の場面をカットごとに１枚のア
イコンで表示する方法においても、たとえば５秒に１回
のカットが生じたとすると、２時間の映画にたいして１
４４０の小画面が表示されることになり、一覧表示した
場合に視認性が高いとはいえない。
【０００７】このような貧弱な映像アクセス環境のまま
では、近い将来、ユーザが大量の映像情報にアクセスで
きる状況が実現したとしても、その情報量をスムーズに
享受できるとはいえず、かえって情報量の多さに混乱す
るユーザが増える懸念さえもある。
【０００８】
【発明が解決しようとする課題】上記のように、とりわ
け放送などの非インタラクティブ映像メディアをリアル
タイムで情報フィルタリングする有効な手法は提案され
ていない。本願発明は、必ずしもユーザのランダムアク
セスが可能でないような映像ソースを相手としたアクセ
ス時にも、目的外の場面の提示を回避することによって
ユーザが画面に注目してなければならない時間を軽減す
ることを目的とする。
【０００９】また、現在の技術においては２枚の静止画
間の類似性の評価、あるいは動画像と静止画の類似性の
評価はあるものの、２つの動画像の類似性を検定する具
体的な手法が提案されていない。さらに、映像内容を小
画面の一覧によって表示する際に、映像内容に即して表
示すべき小画面の数を減少させる具体的な手法も提案さ
れていない。
【００１０】
【課題を解決するための手段】本願発明は、入力された
動画像のフレームの特徴量を求め、求めた前記特徴量
と、すでに入力された動画像のフレームの特徴量との類
似度を求め、求めた前記類似度をもとに、入力された前
記動画像が、すでに入力されたか否かを判断し、前記判
断した結果をもとに、提示すべき入力された前記動画像
を変化させることを特徴とする。
【００１１】また、入力された動画像のフレームの特徴
量を求め、求めた前記特徴量と、すでに入力された動画
像のフレームの特徴量との類似度を求め、求めた前記類
似度をもとに、入力された前記動画像が、すでに入力さ
れたか否かを判断し、この判断した結果をもとに、入力
された前記動画像を提示すべき外部装置を制御すること
を特徴とする。
【００１２】また、入力された複数の動画像を任意の区
間で分割し、分割した前記動画像の各々の区間のフレー
ムの特徴量を求め、求めた前記各々の区間のフレームの
特徴量との類似度を求め、求めた前記類似度をもとに、
入力された前記複数の動画像の類似性を判定することを
特徴とする。
【００１３】さらに、入力された動画像の変化点を検出
し、検出した前記変化点によって区切られる動画像の区
間を求め、求めた動画像の区間に対応する小画面を表示
する動画像編集方法において、求めた前記動画像の各々
の区間のフレームの特徴量を求め、求めた前記各々の区
間のフレームの特徴量との類似度を求め、求めた前記類
似度をもとに、入力された前記各々の区間の類似性を判
断し、類似すると判断した各動画像の区間に対応する小
画面の一つだけを選択的に表示することを特徴とする。
【００１４】つまり、本願発明の第１の動画像処理方法
は、通常は入力された映像をそのまま出力提示するが、
時々刻々入力される映像を、定められた時間間隔で一枚
一枚の静止画像に分割しており、静止画像ごとに特徴量
を計算して保管する。新規に入力された映像が、この静
止画像の特徴量によって過去の映像と類似と判定された
場合には、あらかじめ指定した時間だけ映像出力を中止
したり、別の映像の提示を行う。あるいは類似でない場
面や、あらかじめ指定した場面と類似である場面が登場
するまで映像出力を中止したり、別の映像の提示を行
う。
【００１５】また本願発明の第２の動画像処理方法は、
本願発明の第１の動画像処理方法をランダムアクセス可
能な映像ソースに接続した場合に、映像ソースとなって
いる再生装置を制御する信号出力をもっており、新規に
入力された映像が過去の映像と類似と判定された場合に
は、第１の動画像処理方法の機能に加えて、直接再生装
置を制御して目的の場面になるまで映像を進行させる機
能をもつ。
【００１６】また本願発明の第３の情報処理方法は、２
つの動画像の類似性を判定する際に、それぞれの動画像
をいくつかの複数の時間区間に分割し、それらそれぞれ
の時間区間から計算された特徴量を、動画像ごとに一つ
ずつ選択して類似性を判定するという行程を複数の組み
合わせて行う。
【００１７】更に本願発明の第４の動画像処理方法は、
動画像をショットごとに１枚のアイコンで代表させて一
覧表示させる際に、類似のショットについてはその１つ
だけを一覧表示に採用し、再度表示させない。
【００１８】
【発明の実施の形態】すでに見た映像の特徴量を時々刻
々データベースに記録し、現在見ている画像が、すでに
本装置を経由して提示されたものであるかどうかを常に
検査する。もし現在の画像が既出のものであった場合に
は、利用者が指定した時期まで映像の出力を停止する。
【００１９】また、映像をショットごとの小画面の一覧
として表示する際に、複数のショットをショット内容の
類似性によってグループ化し、グループごとに一つの小
画面を表示する。
【００２０】以下に、本願発明の動画像処理方法につい
て実施例を図面に即して説明する。なお、本願発明の第
２の動画像処理方法は本願発明の第１の動画像処理方法
に機能を付加したものであるから、第１、第２の動画像
処理方法ともに説明のための図面は第２の動画像処理方
法を説明したものを用いる。したがって、図中には第２
の動画像処理方法でのみ意味を持つ部分が含まれてい
る。
【００２１】図１は本願発明の動画像処理方法の構成を
示すブロック図である。以下では、テレビ放送（地上
波）や衛星放送（ＢＳ放送）、ケーブルテレビジョン放
送（ＣＡＴＶ）を受信するチューナーと、利用者がチュ
ーナで受信した映像を視聴するテレビモニタとの信号の
流れの中間に本願発明の動画像処理方法が置かれるもの
として説明する。
【００２２】映像音声入力端子１０１からは、チューナ
ーからの映像音声信号が入力され、映像音声信号は表示
映像作成部１０５に到達するとともに、映像信号はフレ
ームメモリ１０２に送られる。
【００２３】通常は映像音声情報は、加工をほどこさな
いそのままの形で映像音声出力端子１０６に出力され、
利用者は本願発明の動画像処理方法の存在を意識しない
で視聴する。
【００２４】一方、フレームメモリ１０２に入力された
映像は、あらかじめ定められた時間間隔で時々刻々と変
化する動画像を計算機で処理可能なディジタル静止画像
データにして一時記憶する。一時記憶された静止画像の
１枚を１フレームという。定められた時間間隔とは例え
ば１／３０秒や１／５秒などである。この時間間隔は以
下の処理が１フレームに関して要する時間によって決定
されるべきである。
【００２５】フレームメモリ１０２に蓄積された１フレ
ームの画像データは、特徴量計算部１０３によって特徴
が数量化される。ここで画像の特徴量について説明す
る。画像のもっとも単純な特徴量は画像データそのもの
である。たとえば横６４０縦４８０の矩形領域に分割
し、各矩形領域に置いては３原色を２５６階調で表現で
きる画像データの場合、６４０×４８０×３＝９２１６
００次元空間の１点としてこの画像は表現できる。しか
し、このような特徴量は格納記憶領域や処理時間を大き
く浪費するので、入力映像がそのままで特徴量とされる
ことは適切でない。
【００２６】ほかの特徴量として映像の解像度を落とし
て特徴量とする方法がある。上記の６４０×４８０の画
像を、４０×３０の画像領域に切りなおし、各領域内で
は、領域内の３原色値の平均値を画素の値とすれば特徴
量のデータ量を２５６分の１にすることができる。
【００２７】また、各画素の値を３原色に分解する代わ
りに、輝度（Ｙ）、および輝度と赤との色差（Ｃｒ）、
輝度と青との色差（Ｃｂ）、という３種の値で表す（テ
レビジョン信号はこの３値に分解されている）と、ＹＣ
ｒＣｂの３次元空間に画素の値をプロットした際、Ｃｒ
＝Ｃｂ＝０の軸を中心にＣｒ＝０の平面となす角が画素
ごとに求められる。この角を１フレーム中の画素に対し
て求め、たとえば角度１０度ごとにプロットされた点の
数を数えたヒストグラム（色相ヒストグラム）は３６次
元の特徴量である。この特徴量は映像が徐々に暗くなる
フェイドアウトなどの映像効果に影響を受けにくい特徴
量である。
【００２８】もっとも情報量の少ない特徴量は、画像の
輝度値平均などである。これは１フレーム内の各画素の
Ｙ値を平均した１次元の値であり、真っ黒の画面で０、
真っ白の画面で２５５などの値をとる。
【００２９】本願発明の動画像処理方法においては、特
徴量計算の方法は特に限定しない。特徴量計算部１０３
で計算された特徴量は、入力画像が新規の場合には特徴
量データベース１０７に記録される。特徴量データベー
ス１０７に記録されるデータとしては、上記の特徴量の
他に、そのフレームの出現年月日時刻、何チャンネルな
どという映像ソース情報などである。もし現在放送して
いる番組名などがディジタルデータとしてわかっている
場合にはそれをともに記録してもよい。特徴量データベ
ース１０７には、本願発明の動画像処理方法を初めて使
用した時からの新規映像の特徴量や年月日時刻などが全
て保存されるが、特徴量データベース１０７の記憶容量
に限りがある場合には、容量の限界に達した時点で古い
情報から順に一定量を削除する。また、この削除の機会
は利用者が指示してもよいし、記録してから何日経過な
ど、期間指定をしてもよい。
【００３０】入力された画像に関する特徴量が新規であ
るかどうかという判定は類似度判定部１０４で行う。類
似度判定部１０４では、今入力された画像の特徴量と、
特徴量データベース１０７に登録されている既提示特徴
量とを比較し、もっとも合致するものの特徴量と記録年
月日時刻を読み出す。この比較を容易にするべく、特徴
量データベース１０７内の情報は特徴量によって並び替
えをあらかじめ行っておいてもよい。たとえば上述の輝
度値平均の場合、値の昇順（あるいは降順）でソートを
行っておく。
【００３１】合致の度合は、２特徴量（今入力された画
像に関する特徴量と、特徴量データベース１０７内のあ
る１画像に対する特徴量）の距離を計算することによっ
て行う。上記の角度ヒストグラムを用いた特徴量の例で
は、３６次元空間での２特徴量点の距離を求める。
【００３２】合致の度合いが高い、すなわち距離があら
かじめ設定した値より近い場合には、今入力した画像は
既出であると判定される。既出と判定されなかった場
合、すなわち新規である場合、上述のようにその１フレ
ームの特徴量、および年月日日時などの付加情報を特徴
量データベースに追加登録し、映像音声出力端子１０６
から出力される映像音声情報は映像音声入力端子１０１
から入力されたそれと同じものである。
【００３３】既出であると判定された場合、比較の対象
となった既出フレームの特徴量および関連情報は特徴量
データベース１０７から削除され、かわりに今入力され
た画像に関する特徴量および関連情報が新規登録され
る。
【００３４】その一方、現在のフレームが既出であった
旨が表示映像作成部１０５に送られる。表示映像作成部
では、現在のフレームが既出と判定された旨を利用者が
見ている画面上に表示する。この表示の例を図２に示
す。利用者が見ている画面２０１上に現在放送されてい
る画面２０２を小画面として提示し、その下に既出であ
る旨の注意表示２０３がある。なお、この注意表示２０
３は利用者の指定により表示させないこともでき、小画
面２０２を画面全体に表示してもよい。
【００３５】利用者は本願発明の動画像処理方法が画面
２０１に表示した問いかけに対する返答を、リモートコ
ントローラ（図示せず）あるいは本願発明の動画像処理
方法に取り付けられたコントロールボタン（図示せず）
などを用いて、操作入力端子１１０から本願発明の動画
像処理方法に通知する。
【００３６】現在のフレームが既出であると判定された
場合、利用者の指定によって本願発明の動画像処理方法
はたとえば次のような３つの動作をする。 （１）図５に示すように、利用者があらかじめ指定した
時間（たとえば２分）映像音声入力端子１０１からの入
力を映像音声出力端子１０６への出力を停止する。指定
した時刻が経過すると出力を再開し、同時に音声で再開
を告知する。 （２）図６に示すように、入力画像が既出と判定されな
い場面になるまで出力を停止する。新規の場面が入力さ
れると出力を再開し、同時に音声で再開を告知する。 （３）図７に示すように、利用者があらかじめ指定した
特徴量を持つ映像が入力されるまで出力を停止する。指
定した特徴量をもつ映像が入力されると出力を再開し、
同時に音声で再開を告知する。
【００３７】上記（１）は、どのような放送内容に対し
ても比較的対応しやすい手法である。たとえばテレビド
ラマを見ている時、同じコマーシャルは何回も見たいと
は思わない人が多い。上記（１）の動作では、放送がコ
マーシャルに変わるとコマーシャルの典型的な継続時間
２分や、１分３０秒といった時間、画面出力が停止する
ので、コマーシャルによって物語内容から意識を散漫に
させられたり、不容易に大音量のコマーシャルに煩わさ
れることがない。
【００３８】上記（２）はトーク番組などで有効であ
る。たとえば聞き手および語り手の２人によるトーク番
組の場合、画面は主に聞き手一人のアップ、語り手一人
のアップ、二人のアップ、二人のロング（遠景）、会場
の観客、およびいくらかのその他の場面で構成されてお
り、これらが繰り返される。利用者はこれら繰り返しの
場面を各１度ずつ特徴量データベース１０７に登録させ
たあとは、このトークコーナーが終了するまで映像の出
力を停止させることができる。
【００３９】上記（３）はニュース番組などで有効であ
る。ニュース番組では、新しい話題に移った際の場面は
アナウンサーのアップ、または、アナウンサーとニュー
ス項目を示す小画面といった画像であることが多い。こ
の画像をスキップ用の登録画像とすれば、利用者はすで
に他のチャンネルなどで見たニュース項目の映像が始ま
ったときに本願発明の動画像処理方法から既出の通知を
受け、ここで次のスキップ用画像まで、と指定すること
で次の項目までの出力を停止できる。また、たとえばス
キージャンプなどのように同様の映像が選手だけが変化
して繰り返されるような場合、選手がこれから滑走しよ
うとしているフレームをスキップ用の登録画像とすれ
ば、利用者は滑走準備のフレームだけを見て、それが自
分が見たい選手でなければ次の選手まで出力を停止させ
ることができる。
【００４０】映像音声出力停止中は、停止直前のフレー
ムを静止画像として出力してもよいし、利用者があらか
じめ登録した静止画像用画像（たとえば気に入った風景
など）を出力してもよい。また、利用者が地上波とＢＳ
放送などチューナーを複数もっている場合、停止中は別
のチャンネルの映像を提示してもよい。
【００４１】また、スキップ用画像として、所望の番組
のオープニングの画像を登録することで、所望の番組を
確実に視聴（録画）することができる。例えば、スポー
ツ中継の延長などによりプログラムに変更があった場合
でも、所望の番組を確実に視聴（録画）することができ
る。
【００４２】以下に、本願発明の第２の動画像処理方法
について実施例を図面に即して説明する。説明に用いる
図面は図１であり、現在のフレームが既出と判定された
場合の動作も上記の実施例と同じである。
【００４３】本願発明の第２の動画像処理方法において
は、これに加えて上記の（１）〜（３）で入力映像の出
力を停止している間に、映像ソースとなっている装置、
たとえばビデオテープ再生装置や、レーザーディスクプ
レーヤ、あるいはディジタルビデオディスクプレーヤに
直接制御信号を制御信号出力端子１０９から出力し、レ
ーザーディスクの場合、次のチャプタ（インデックス）
にスキップする、ビデオテーププレーヤの場合、再生早
送りするなどの動作をさせる。映像ソースとなっている
装置に、本願発明の動画像処理方法からの制御信号を受
け付ける仕組みがない場合には、たとえば制御信号出力
端子１０９に映像ソースのリモートコントローラの信号
を出力できる発信ユニット（図示せず）を接続し、リモ
ートコントローラの信号を用いて映像ソースを制御して
もよい。
【００４４】以上、本願発明の第１第２の動画像処理方
法双方において、類似度を判定する手法や、既出か否か
を判定する基準レベルの設定などは、装置に標準手法、
標準値として規定されているものとするが、利用者の指
示入力により、操作入力端子１１０経由で自由な値に設
定しなおしてもよい。
【００４５】また、映像ソースがチューナーであって
も、制御信号出力端子１０９をビデオテープレコーダー
（ＶＴＲ）に接続し、上記手法によって映像出力を停止
している間は録画も停止するように動作させることもで
きる。こうすることで、現在放送されている映像から必
要部分だけを簡単に選び出して録画することができる。
【００４６】以下に、本願発明の第３の情報処理方法に
ついて実施例を図面に即して説明する。図３は映像中の
シーンを模式的にあらわしたものである。３０１Ａと３
０１Ｂは、それぞれ時間的に重複しない２ショット（こ
こでは撮影装置を停止せずに録画した映像の時間区間を
ショットと称する）を示し、右側に行くほど時間の経過
を表している。３０２ａ〜ｈはそれぞれのショット中の
フレーム（映像の時間断面である静止画）を表し、その
時点での映像をそれぞれ３０３ａ〜ｈに示した。ショッ
ト３０１Ａは人物を左斜め後（３０３ａ）から右斜め後
（３０３ｂ）、右斜め前（３０３ｃ）と連続的にカメラ
を移動しながら撮影し、引き続きその人物をアップにし
（３０３ｄ）、最後にカメラが人物を肩ごしに写す（３
０３ｅ）というショットである。一方、ショット３０１
Ｂは、ショット３０１Ａに登場したのと同じ人物がアッ
プの状態で話しているショットである。
【００４７】２ショットが類似であるかどうかを判定す
る方法の一つに、ショット内の全フレームの平均画像を
作成し、比較するという方法もあるが、このような手法
においては、ショットＢはショット内の状態変化が少な
いため、平均したものは３０３ｆ〜ｈの画像と大差ない
ものとなるのに対し、ショットＡは内部の変化が大き
く、平均した画像は散漫になり、各フレームの特徴を相
殺したものになってしまう。したがって、画像を平均す
る手法でショットＡ、ショットＢの類似度を検定するこ
とはこの２ショットに対しては適切でない。
【００４８】また、ショット内の全フレームに登場する
画素値（輝度、色相）を平均したとしても、フレーム３
０３ａ〜３０３ｂ付近に現れている人物の全面にある壁
の色はショットＢには現れていないものであり、この壁
がショットＡないで大面積を占めるために、やはり２シ
ョットは類似と判定されない。
【００４９】このように、ショット全体から一つの特徴
量を算出する方法では、動きの激しいショットの特徴を
正確に表現したとはいえない。一方、図３を見ると、シ
ョットＡとショットＢは部分的に似ている。たとえばシ
ョットＡ中の３０３ｄはショットＢのどのフレームと類
似性が高い。本願発明の第３の情報処理方法において
は、ショットの中から複数のフレームを選択し、それら
の類似度を計算し、最も類似であった組み合わせの類似
度が設定したしきい値以上であった場合に２ショットは
類似であると判定する。
【００５０】本願発明の第３の情報処理方法において
は、ショットの先頭（３０４ａ、３０４ｆ）、ショット
の中央（３０４ｃ、３０４ｈ）、ショットの最後（３０
４ｅ、３０４ｊ）およびショットの先頭と中央の中間
（３０４ｂ、３０４ｇ）、ショットの中央と最後の中間
（３０４ｄ、３０４ｉ）の特徴量を計算する。ここでい
う特徴量とは、画像内の画素値の平均であるとか、色相
のヒストグラムなど、本願発明の第１の実施例でも説明
したものを含め、静止画の特徴を計算するいかなる方法
でもよく、２以上の方法の組み合わせでもよい。
【００５１】こうして、ショットＡ、ショットＢそれぞ
れから５つずつの特徴量が得られたが、ショットＡから
の５つのうちの一つとショットＢの５つのうちの一つを
選びだし、類似度を計算する。この類似度計算について
も本願発明の第１の実施例で説明した。したがって、５
×５＝２５通りの組み合わせで類似度が計算される。図
３にはこの組み合わせのいくつかが図示されているが、
全てを示したわけではない。このような類似度計算を行
うとき、３０４ａ、３０４ｂ，３０４ｃ，３０４ｅに対
するショットＢの３０４ｆ〜３０４ｊの類似度は低い
が、３０４ｄに対するショットＢ内のフレームの類似度
は高い。
【００５２】したがって、この２５通りの類似度計算の
うち、最も高い類似度の値は３０４ｄに対する３０４ｆ
〜３０４ｊのうちのどれか一つの組み合わせになる。こ
の最高類似度が、ユーザによって設定されたしきい値よ
りも高いときに、ショットＡとショットＢは類似である
と判定される。
【００５３】ショット中からの特徴量計算フレームの選
択数は５でなくてもよく、またショット内で等間隔にと
らなくてもよい。選択数を３とすれば、たとえばショッ
トの先頭、中央、最後のフレームをとればよく、この場
合の組み合わせ計算の数は９に削減される。逆にショッ
ト中の全てのフレームを選択してもよい。
【００５４】例えば、本願発明の第１、第２の実施例の
場合、既出の場面の特徴量としてショットの先頭、中
央、最後のフレームの色相ヒストグラムを特徴量データ
ベース１０７に保存しておき、新しく流れてきた映像の
１フレームがこれらと類似であった場合に提示を停止す
るという方法にも用いられる。
【００５５】また、図１におけるフレームメモリ１０２
を複数のフレームを記憶できるものにし、ショットの終
端が検出されるまでの映像をフレームメモリ１０２に保
存しておき、その保存されたショットの先頭、中央、最
後のフレームの特徴量と、特徴量データベース１０７中
の特徴量との比較を用いて２ショットの類似性を判定
し、ショット単位で類似なものの提示／不提示をおこな
ってもよい。
【００５６】以下に、本願発明の第４の動画像処理方法
について実施例を図面に即して説明する。図４は、架空
の映像について映像中の場面転換（カット。上述のショ
ット間の区切り）ごとに１枚の小画面（アイコン）を表
示した例である。図４全体は一覧表示の一画面を表し、
この例では一度に１６のアイコンが表示されている。以
下ではそれぞれのアイコンを列と行で示し、４０１列ａ
行、あるいは単に４０１ａなどと称すことにする。
【００５７】この例では、アイコンの示すショットの時
間順は列内では左から右に進行し、右端４０４列の次は
次の行の４０１列という順位に上から下に進行するもの
とする。つまり、４０１ａ→４０２ａ→４０３ａ→４０
４ａ→４０１ｂ→…という順で、この画面内で最後のシ
ョットは４０４ｄである。
【００５８】図４の中には連続する２シーンのそれぞれ
一部分が表示されている。前半のシーンは４０１ａある
いは、４０１ａよりも前の図示されていないショットか
ら始まり、４０３ｃで終了する。後半のシーンは４０４
ｃから開始し、４０４ｄあるいは４０４ｄよりも後の図
示されていないショットまで続く。前半のシーンを便宜
的にシーンＡ、後半をシーンＢと称する。
【００５９】シーンＡは、一組の男女が喫茶店で会話し
ているシーンだが、現実の映画などではこのように２人
の会話のシーンは多く、さらにその多くは会話に参加し
ている２人物のそれぞれのアップが繰り返して出現する
ことが多い。
【００６０】図４に見られるように、このようなシーン
をカットごとにアイコン表示したのでは、表示すべきア
イコンの数量が増え、したがって１画面で伝達できる情
報量が少なくなっている。
【００６１】本願発明の第４の動画像処理方法では、本
願発明の第３の情報処理方法で用いたショットの類似度
判定を用い、類似であるショットであった場合には一覧
画面の表示から削除する。図４の場合、４０１ａと４０
３ａと４０１ｂと４０４ｄは同じ人物を同じ構図で撮影
したものであり、酷似している。したがって、これらは
本願発明の第３の情報処理方法で用いたショットの類似
度判定により、類似シーンとみなされる。
【００６２】また同様に４０３ｂと４０３ｃも類似、４
０２ａと４０４ａと４０２ｂと４０１ｃも類似である。
こうして類似としてグループ化されたショットの中か
ら、一つのショットを選び、そのアイコンをグループの
アイコンとして表示すれば、表示すべきアイコンの数を
減少させることができる。この例でいうと、シーンＡに
関してはこのようにして４０３ａ、４０４ａ、４０１
ｂ、４０２ｂ、４０４ｂ、４０１ｃ、４０３ｃの表示は
省くことができ、これまで次の画面に表示されていた別
のショット（あるいはショットグループ）のアイコンを
７つ新たに表示することができるようになる。
【００６３】シーンＢについても同様の処理を行えば、
７という数字は更に増えることも期待できる。私たちが
行った実験では、たとえば映画の中で２人が会話する１
分のシーンにおいて２０カットがあったが、これは２人
のアップの繰り返しであったために２枚の代表画像によ
って内容を充分表示することができた。
【００６４】上記のようにしてグループ化したショット
からの代表アイコンの選び方は特に限定するものではな
いが、ショット内に人物が写っている場合などにおいて
は、その人物が正面を向いている画像がより望ましい。
この正面顔の選択方法は、ショット内で中央付近の指定
領域内ないにある肌色画素の多少を参考にしても良い
し、正面顔の典型的な特徴量を抽出し、その特徴量と似
ている領域がフレーム内に存在するか否かを基準にして
もよい。正面顔の検出方法については、文献（アメリ
カ、カーネギー・メロン大学 CMU-CS-95-158, "Human F
ace Detection in Visual Scenes", 1995 ）などにも示
されている。また、グループ化して省略表示した場合の
アイコンには、表示を省略したショットの数や特別な記
号などを付記表示してもよい。
【００６５】
【発明の効果】以上説明したように、本願発明の第１お
よび第２および第３の動画像処理方法および方法によれ
ば、放送されている映像を利用者がリアルタイムで見る
／見ないを判定する有力な材料を提供することができ、
すでに見た映像を何度も繰り返し見ずにすむ快適な映像
視聴環境を提供できる。しかも、本願発明の動画像処理
方法においては、装置内部に目的とする映像ソースを確
保している訳ではなく、放送される映像情報にも対応し
ているため、一般利用者の手元に莫大な映像記憶媒体を
用意する必要はなく、また、一旦蓄積して編集して見る
という手間を省くことができる。
【００６６】また、本願発明の第３および第４の動画像
処理方法および方法によれば、映像を場面転換ごとに１
つの小画面によって代表させて一覧表示する場合に、映
像内容の要約性を損なうことなく表示すべきアイコンの
数を大幅に削減することができ、一覧表示の視認性を高
めることができる。
【図面の簡単な説明】
【図１】 本願発明の動画像処理方法に係るブロック
図。
【図２】 本願発明の動画像処理方法の動作を説明する
概念図。
【図３】 本願発明の動画像処理方法の動作を説明する
概念図。
【図４】 従来の映像表示手法を示す概念図。
【図５】 本願発明の動画像処理方法の手順を示す図。
【図６】 本願発明の動画像処理方法の手順を示す図。
【図７】 本願発明の動画像処理方法の手順を示す図。
【符号の説明】
１０１…映像音声情報入力端子 １０６…映像音声情報出力端子 １０９…制御信号出力端子 １１０…操作入力端子 ２０１…提示画面

Claims (4)

    【特許請求の範囲】
  1. 【請求項１】入力された動画像のフレームの特徴量を求
    め、 求めた前記特徴量と、すでに入力された動画像のフレー
    ムの特徴量との類似度を求め、 求めた前記類似度をもとに、入力された前記動画像が、
    すでに入力されたか否かを判断し、 前記判断した結果をもとに、提示すべき入力された前記
    動画像を変化させることを特徴とする動画像処理方法。
  2. 【請求項２】入力された動画像のフレームの特徴量を求
    め、 求めた前記特徴量と、すでに入力された動画像のフレー
    ムの特徴量との類似度を求め、 求めた前記類似度をもとに、入力された前記動画像が、
    すでに入力されたか否かを判断し、 この判断した結果をもとに、入力された前記動画像を提
    示すべき外部装置を制御することを特徴とする動画像処
    理方法。
  3. 【請求項３】入力された複数の動画像を任意の区間で分
    割し、 分割した前記動画像の各々の区間のフレームの特徴量を
    求め、 求めた前記各々の区間のフレームの特徴量との類似度を
    求め、 求めた前記類似度をもとに、入力された前記複数の動画
    像の類似性を判定することを特徴とする動画像処理方
    法。
  4. 【請求項４】入力された動画像の変化点を検出し、 検出した前記変化点によって区切られる動画像の区間を
    求め、 求めた動画像の区間に対応する小画面を表示する動画像
    編集方法において、 求めた前記動画像の各々の区間のフレームの特徴量を求
    め、 求めた前記各々の区間のフレームの特徴量との類似度を
    求め、 求めた前記類似度をもとに、入力された前記各々の区間
    の類似性を判断し、 類似すると判断した各動画像の区間に対応する小画面の
    一つだけを選択的に表示することを特徴とする動画像処
    理方法。
JP08114696A 1996-04-03 1996-04-03 動画像処理方法及び動画像処理装置 Expired - Fee Related JP3534368B2 (ja)

Priority Applications (2)

Application Number Priority Date Filing Date Title
JP08114696A JP3534368B2 (ja) 1996-04-03 1996-04-03 動画像処理方法及び動画像処理装置
US08/832,374 US6466731B2 (en) 1996-04-03 1997-04-02 Moving picture processing method and moving picture processing apparatus

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP08114696A JP3534368B2 (ja) 1996-04-03 1996-04-03 動画像処理方法及び動画像処理装置

Publications (2)

Publication Number Publication Date
JPH09270006A true JPH09270006A (ja) 1997-10-14
JP3534368B2 JP3534368B2 (ja) 2004-06-07

Family

ID=13738293

Family Applications (1)

Application Number Title Priority Date Filing Date
JP08114696A Expired - Fee Related JP3534368B2 (ja) 1996-04-03 1996-04-03 動画像処理方法及び動画像処理装置

Country Status (2)

Country Link
US (1) US6466731B2 (ja)
JP (1) JP3534368B2 (ja)

Cited By (16)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH11261909A (ja) * 1998-03-12 1999-09-24 Toshiba Corp マルチメディアデータ処理装置および方法，記録媒体
JP2001167095A (ja) * 1999-09-27 2001-06-22 Mitsubishi Electric Corp 画像検索システムおよび画像検索方法
JP2002056388A (ja) * 2001-05-28 2002-02-20 Nec Corp ロボット装置
JP2006018831A (ja) * 1999-09-27 2006-01-19 Mitsubishi Electric Corp 画像検索システムおよび画像検索方法
JP2007235572A (ja) * 2006-03-01 2007-09-13 Sony Corp 画像処理装置および方法、プログラム記録媒体、並びにプログラム
JP2007235374A (ja) * 2006-02-28 2007-09-13 Sony Corp 画像処理装置および方法、データ記録媒体、プログラム記録媒体、並びにプログラム
JP2008269628A (ja) * 1999-09-27 2008-11-06 Mitsubishi Electric Corp 画像検索システムおよび画像検索方法
JP2009021732A (ja) * 2007-07-11 2009-01-29 Nippon Hoso Kyokai <Nhk> 蓄積型放送受信装置および要約映像再生プログラム
US7490107B2 (en) 2000-05-19 2009-02-10 Nippon Telegraph & Telephone Corporation Information search method and apparatus of time-series data using multi-dimensional time-series feature vector and program storage medium
JP2009118461A (ja) * 2007-11-01 2009-05-28 Internatl Business Mach Corp <Ibm> ビデオ・ストリームに対するリアル・タイム新規イベント検出のシステムおよび方法
WO2009069831A1 (en) * 2007-11-29 2009-06-04 Kabushiki Kaisha Toshiba Picture processing method and picture processing apparatus
JP2009535920A (ja) * 2006-04-28 2009-10-01 ボバイル インコーポレイテッド 多重解像度、複数のフレームレートの空間及び時間域特徴に基づきデジタルビデオオブジェクトのフィンガープリンティング方法とシステム
US7778470B2 (en) 2003-09-30 2010-08-17 Kabushiki Kaisha Toshiba Moving picture processor, method, and computer program product to generate metashots
US8200061B2 (en) 2007-09-12 2012-06-12 Kabushiki Kaisha Toshiba Signal processing apparatus and method thereof
US8224038B2 (en) 2007-08-21 2012-07-17 Kabushiki Kaisha Toshiba Apparatus, computer program product, and method for processing pictures
JP2016517646A (ja) * 2013-03-08 2016-06-16 トムソン ライセンシングＴｈｏｍｓｏｎ Ｌｉｃｅｎｓｉｎｇ 自動ビデオセグメント化のための方法および装置

Families Citing this family (11)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP4146955B2 (ja) * 1999-02-15 2008-09-10 キヤノン株式会社 画像処理方法及び画像処理装置
KR100438269B1 (ko) * 2001-03-23 2004-07-02 엘지전자 주식회사 뉴스 비디오 브라우징 시스템에서 앵커 샷 자동 검출 방법
US7280696B2 (en) * 2002-05-20 2007-10-09 Simmonds Precision Products, Inc. Video detection/verification system
US20050055710A1 (en) * 2002-11-22 2005-03-10 Kabushiki Kaisha Toshiba Motion picture storage apparatus and motion picture distributing system
JP2004272662A (ja) * 2003-03-10 2004-09-30 Ricoh Co Ltd コンテンツ管理装置、コンテンツ管理システム、コンテンツ管理方法、コンテンツ管理方法をコンピュータに実行させるプログラム、記録媒体、およびコンテンツデータ
US7930649B2 (en) * 2004-10-08 2011-04-19 Emc Corporation Method and system for sharing and managing context information
KR100610690B1 (ko) * 2005-06-29 2006-08-09 엔에이치엔(주) 3차원 화면에 플래시 동영상 삽입 방법 및 이를 위한 기록매체
JP2009048490A (ja) * 2007-08-21 2009-03-05 Toshiba Corp 類似ショット検出装置、プログラムおよび方法
US8818037B2 (en) * 2012-10-01 2014-08-26 Microsoft Corporation Video scene detection
KR102045245B1 (ko) 2012-12-20 2019-12-03 삼성전자주식회사 휴대단말기의 영상 재생 방법 및 장치
JP7491465B2 (ja) * 2021-03-29 2024-05-28 日本電気株式会社 学習システム、認証システム、学習方法、コンピュータプログラム、学習モデル生成装置、及び推定装置

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH04237284A (ja) * 1991-01-21 1992-08-25 Nippon Telegr & Teleph Corp <Ntt> 映像内容圧縮表示処理方法
JPH05224660A (ja) * 1992-02-10 1993-09-03 Nippon Telegr & Teleph Corp <Ntt> 代表画面表示方法
JPH0636026A (ja) * 1992-07-13 1994-02-10 Toshiba Corp 動画像処理装置
JPH0738842A (ja) * 1993-06-29 1995-02-07 Toshiba Corp 動画編集装置

Family Cites Families (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US4697209A (en) * 1984-04-26 1987-09-29 A. C. Nielsen Company Methods and apparatus for automatically identifying programs viewed or recorded
US5099322A (en) * 1990-02-27 1992-03-24 Texas Instruments Incorporated Scene change detection system and method
EP0473322B1 (en) * 1990-08-29 1995-10-25 Sony United Kingdom Limited Method of and apparatus for film to video signal conversion
JP3340532B2 (ja) 1993-10-20 2002-11-05 株式会社日立製作所 ビデオの検索方法および装置
US5668917A (en) * 1994-07-05 1997-09-16 Lewine; Donald A. Apparatus and method for detection of unwanted broadcast information
US5613032A (en) * 1994-09-02 1997-03-18 Bell Communications Research, Inc. System and method for recording, playing back and searching multimedia events wherein video, audio and text can be searched and retrieved
JP2735003B2 (ja) * 1994-09-28 1998-04-02 松下電器産業株式会社 ホワイトバランス調整量演算装置
JP3823333B2 (ja) * 1995-02-21 2006-09-20 株式会社日立製作所 動画像の変化点検出方法、動画像の変化点検出装置、動画像の変化点検出システム

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH04237284A (ja) * 1991-01-21 1992-08-25 Nippon Telegr & Teleph Corp <Ntt> 映像内容圧縮表示処理方法
JPH05224660A (ja) * 1992-02-10 1993-09-03 Nippon Telegr & Teleph Corp <Ntt> 代表画面表示方法
JPH0636026A (ja) * 1992-07-13 1994-02-10 Toshiba Corp 動画像処理装置
JPH0738842A (ja) * 1993-06-29 1995-02-07 Toshiba Corp 動画編集装置

Cited By (21)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH11261909A (ja) * 1998-03-12 1999-09-24 Toshiba Corp マルチメディアデータ処理装置および方法，記録媒体
JP2001167095A (ja) * 1999-09-27 2001-06-22 Mitsubishi Electric Corp 画像検索システムおよび画像検索方法
JP2006018831A (ja) * 1999-09-27 2006-01-19 Mitsubishi Electric Corp 画像検索システムおよび画像検索方法
JP2008269628A (ja) * 1999-09-27 2008-11-06 Mitsubishi Electric Corp 画像検索システムおよび画像検索方法
USRE42185E1 (en) 1999-12-02 2011-03-01 Mitsubishi Denki Kabushiki Kaisha Image retrieval system and image retrieval method
US7490107B2 (en) 2000-05-19 2009-02-10 Nippon Telegraph & Telephone Corporation Information search method and apparatus of time-series data using multi-dimensional time-series feature vector and program storage medium
JP2002056388A (ja) * 2001-05-28 2002-02-20 Nec Corp ロボット装置
US7778470B2 (en) 2003-09-30 2010-08-17 Kabushiki Kaisha Toshiba Moving picture processor, method, and computer program product to generate metashots
US8068672B2 (en) 2006-02-28 2011-11-29 Sony Corporation Image processing apparatus and method, data recording medium, program recording medium, and program therefor
JP2007235374A (ja) * 2006-02-28 2007-09-13 Sony Corp 画像処理装置および方法、データ記録媒体、プログラム記録媒体、並びにプログラム
JP4720544B2 (ja) * 2006-03-01 2011-07-13 ソニー株式会社 画像処理装置および方法、プログラム記録媒体、並びにプログラム
JP2007235572A (ja) * 2006-03-01 2007-09-13 Sony Corp 画像処理装置および方法、プログラム記録媒体、並びにプログラム
JP2009535920A (ja) * 2006-04-28 2009-10-01 ボバイル インコーポレイテッド 多重解像度、複数のフレームレートの空間及び時間域特徴に基づきデジタルビデオオブジェクトのフィンガープリンティング方法とシステム
JP2009021732A (ja) * 2007-07-11 2009-01-29 Nippon Hoso Kyokai <Nhk> 蓄積型放送受信装置および要約映像再生プログラム
US8224038B2 (en) 2007-08-21 2012-07-17 Kabushiki Kaisha Toshiba Apparatus, computer program product, and method for processing pictures
US8200061B2 (en) 2007-09-12 2012-06-12 Kabushiki Kaisha Toshiba Signal processing apparatus and method thereof
JP2009118461A (ja) * 2007-11-01 2009-05-28 Internatl Business Mach Corp <Ibm> ビデオ・ストリームに対するリアル・タイム新規イベント検出のシステムおよび方法
US9215479B2 (en) 2007-11-01 2015-12-15 International Business Machines Corporation System and method for real-time new event detection on video streams
WO2009069831A1 (en) * 2007-11-29 2009-06-04 Kabushiki Kaisha Toshiba Picture processing method and picture processing apparatus
JP2011505601A (ja) * 2007-11-29 2011-02-24 株式会社東芝 映像処理方法および映像処理装置
JP2016517646A (ja) * 2013-03-08 2016-06-16 トムソン ライセンシングＴｈｏｍｓｏｎ Ｌｉｃｅｎｓｉｎｇ 自動ビデオセグメント化のための方法および装置

Also Published As

Publication number Publication date
US20020071649A1 (en) 2002-06-13
JP3534368B2 (ja) 2004-06-07
US6466731B2 (en) 2002-10-15

Similar Documents

Publication Publication Date Title
JP3534368B2 (ja) 動画像処理方法及び動画像処理装置
US7333712B2 (en) Visual summary for scanning forwards and backwards in video content
EP3185539B1 (en) Information processing apparatus, imaging apparatus, image display control method and computer program
US7356244B2 (en) Method and system for replaying video images
US8832732B2 (en) Controlled multi-media program review
US7865058B2 (en) Apparatus for receiving a digital information signal comprising a first video signal producing images of a first size, and a second video signal producing images of a second size smaller than the first size
US9098172B2 (en) Apparatus, systems and methods for a thumbnail-sized scene index of media content
US7646960B2 (en) Determining chapters based on presentation of a program
US20080136937A1 (en) Image processing apparatus, image processing method, and program
US20040128317A1 (en) Methods and apparatuses for viewing, browsing, navigating and bookmarking videos and displaying images
US20050220439A1 (en) Interactive multimedia system and method
JP2004519968A (ja) 画像シーケンス中の位置を選択する方法及びシステム
US20100141833A1 (en) Method and device for providing multiple video pictures
KR100865042B1 (ko) 비디오 프로그램의 멀티미디어 설명 데이터를 생성하는 시스템 및 방법, 비디오 디스플레이 시스템, 및 컴퓨터 판독 가능 기록 매체
US20060110128A1 (en) Image-keyed index for video program stored in personal video recorder
JP2006514451A (ja) 類似のビデオコンテンツへの乗り換えのための方法および装置
JP2013176102A (ja) 受信器で視聴覚的記録を見る方法及びそのような記録を見るための受信器
US20090102973A1 (en) Video split device
US5867229A (en) Video effects using a video record/playback device
JP2000350165A (ja) 動画像記録再生装置
JP2000023062A (ja) ダイジェスト作成システム
US8627400B2 (en) Moving image reproducing apparatus and control method of moving image reproducing apparatus
JP2008042333A (ja) 映像再生方法及び装置
WO2002060177A1 (en) System and method for providing a user interface for a &#39;deja vu&#39; video system
US7580763B2 (en) Recording apparatus for recording signal including a plurality of sound information

Legal Events

Date Code Title Description
TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20040305

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20040308

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20080319

Year of fee payment: 4

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20090319

Year of fee payment: 5

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20100319

Year of fee payment: 6

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20100319

Year of fee payment: 6

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20110319

Year of fee payment: 7

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20120319

Year of fee payment: 8

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20130319

Year of fee payment: 9

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20130319

Year of fee payment: 9

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20140319

Year of fee payment: 10

LAPS Cancellation because of no payment of annual fees