JP2009076970A - 要約コンテンツ生成装置およびコンピュータプログラム - Google Patents
要約コンテンツ生成装置およびコンピュータプログラム Download PDFInfo
- Publication number
- JP2009076970A JP2009076970A JP2007241371A JP2007241371A JP2009076970A JP 2009076970 A JP2009076970 A JP 2009076970A JP 2007241371 A JP2007241371 A JP 2007241371A JP 2007241371 A JP2007241371 A JP 2007241371A JP 2009076970 A JP2009076970 A JP 2009076970A
- Authority
- JP
- Japan
- Prior art keywords
- subtitle
- character string
- subtitle character
- summary content
- still image
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
- 238000004590 computer program Methods 0.000 title claims description 7
- 238000000605 extraction Methods 0.000 claims abstract description 20
- 238000001514 detection method Methods 0.000 claims description 26
- 239000000284 extract Substances 0.000 claims description 10
- 230000008921 facial expression Effects 0.000 claims description 9
- 206010011469 Crying Diseases 0.000 claims description 3
- 238000000034 method Methods 0.000 description 80
- 238000012545 processing Methods 0.000 description 49
- 230000006870 function Effects 0.000 description 25
- 238000004458 analytical method Methods 0.000 description 24
- 238000010586 diagram Methods 0.000 description 8
- 239000000203 mixture Substances 0.000 description 8
- 102100034458 Hepatitis A virus cellular receptor 2 Human genes 0.000 description 6
- 101001068133 Homo sapiens Hepatitis A virus cellular receptor 2 Proteins 0.000 description 6
- 101000669511 Homo sapiens T-cell immunoglobulin and mucin domain-containing protein 4 Proteins 0.000 description 6
- 102100039367 T-cell immunoglobulin and mucin domain-containing protein 4 Human genes 0.000 description 6
- 238000003860 storage Methods 0.000 description 6
- 230000010365 information processing Effects 0.000 description 5
- 230000005540 biological transmission Effects 0.000 description 4
- 238000004891 communication Methods 0.000 description 4
- 238000010187 selection method Methods 0.000 description 4
- 238000007405 data analysis Methods 0.000 description 3
- 230000003247 decreasing effect Effects 0.000 description 3
- 238000000926 separation method Methods 0.000 description 3
- 102100034459 Hepatitis A virus cellular receptor 1 Human genes 0.000 description 2
- 101001068136 Homo sapiens Hepatitis A virus cellular receptor 1 Proteins 0.000 description 2
- 101000831286 Homo sapiens Protein timeless homolog Proteins 0.000 description 2
- 101000752245 Homo sapiens Rho guanine nucleotide exchange factor 5 Proteins 0.000 description 2
- 238000004364 calculation method Methods 0.000 description 2
- 238000006243 chemical reaction Methods 0.000 description 2
- 230000000694 effects Effects 0.000 description 2
- 208000032041 Hearing impaired Diseases 0.000 description 1
- 101150074789 Timd2 gene Proteins 0.000 description 1
- 239000000470 constituent Substances 0.000 description 1
- 238000013461 design Methods 0.000 description 1
- 239000003814 drug Substances 0.000 description 1
- 230000001815 facial effect Effects 0.000 description 1
- 238000010191 image analysis Methods 0.000 description 1
- 238000003780 insertion Methods 0.000 description 1
- 230000037431 insertion Effects 0.000 description 1
- 238000011835 investigation Methods 0.000 description 1
- 238000005304 joining Methods 0.000 description 1
- 238000004519 manufacturing process Methods 0.000 description 1
- 230000002093 peripheral effect Effects 0.000 description 1
- 230000002194 synthesizing effect Effects 0.000 description 1
- 238000012795 verification Methods 0.000 description 1
Images
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N7/00—Television systems
- H04N7/08—Systems for the simultaneous or sequential transmission of more than one television signal, e.g. additional information signals, the signals occupying wholly or partially the same frequency band, e.g. by time division
- H04N7/087—Systems for the simultaneous or sequential transmission of more than one television signal, e.g. additional information signals, the signals occupying wholly or partially the same frequency band, e.g. by time division with signal insertion during the vertical blanking interval only
- H04N7/088—Systems for the simultaneous or sequential transmission of more than one television signal, e.g. additional information signals, the signals occupying wholly or partially the same frequency band, e.g. by time division with signal insertion during the vertical blanking interval only the inserted signal being digital
- H04N7/0884—Systems for the simultaneous or sequential transmission of more than one television signal, e.g. additional information signals, the signals occupying wholly or partially the same frequency band, e.g. by time division with signal insertion during the vertical blanking interval only the inserted signal being digital for the transmission of additional display-information, e.g. menu for programme or channel selection
- H04N7/0885—Systems for the simultaneous or sequential transmission of more than one television signal, e.g. additional information signals, the signals occupying wholly or partially the same frequency band, e.g. by time division with signal insertion during the vertical blanking interval only the inserted signal being digital for the transmission of additional display-information, e.g. menu for programme or channel selection for the transmission of subtitles
-
- G—PHYSICS
- G11—INFORMATION STORAGE
- G11B—INFORMATION STORAGE BASED ON RELATIVE MOVEMENT BETWEEN RECORD CARRIER AND TRANSDUCER
- G11B27/00—Editing; Indexing; Addressing; Timing or synchronising; Monitoring; Measuring tape travel
- G11B27/02—Editing, e.g. varying the order of information signals recorded on, or reproduced from, record carriers
- G11B27/031—Electronic editing of digitised analogue information signals, e.g. audio or video signals
- G11B27/034—Electronic editing of digitised analogue information signals, e.g. audio or video signals on discs
-
- G—PHYSICS
- G11—INFORMATION STORAGE
- G11B—INFORMATION STORAGE BASED ON RELATIVE MOVEMENT BETWEEN RECORD CARRIER AND TRANSDUCER
- G11B27/00—Editing; Indexing; Addressing; Timing or synchronising; Monitoring; Measuring tape travel
- G11B27/10—Indexing; Addressing; Timing or synchronising; Measuring tape travel
- G11B27/19—Indexing; Addressing; Timing or synchronising; Measuring tape travel by using information detectable on the record carrier
- G11B27/28—Indexing; Addressing; Timing or synchronising; Measuring tape travel by using information detectable on the record carrier by using information signals recorded by the same method as the main recording
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
- H04N21/41—Structure of client; Structure of client peripherals
- H04N21/426—Internal components of the client ; Characteristics thereof
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
- H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
- H04N21/434—Disassembling of a multiplex stream, e.g. demultiplexing audio and video streams, extraction of additional data from a video stream; Remultiplexing of multiplex streams; Extraction or processing of SI; Disassembling of packetised elementary stream
- H04N21/4348—Demultiplexing of additional data and video streams
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
- H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
- H04N21/435—Processing of additional data, e.g. decrypting of additional data, reconstructing software from modules extracted from the transport stream
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
- H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
- H04N21/44—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs
- H04N21/44008—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs involving operations for analysing video streams, e.g. detecting features or characteristics in the video stream
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
- H04N21/45—Management operations performed by the client for facilitating the reception of or the interaction with the content or administrating data related to the end-user or to the client device itself, e.g. learning user preferences for recommending movies, resolving scheduling conflicts
- H04N21/4508—Management of client data or end-user data
- H04N21/4532—Management of client data or end-user data involving end-user characteristics, e.g. viewer profile, preferences
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
- H04N21/47—End-user applications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
- H04N21/47—End-user applications
- H04N21/488—Data services, e.g. news ticker
- H04N21/4884—Data services, e.g. news ticker for displaying subtitles
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/80—Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
- H04N21/85—Assembly of content; Generation of multimedia applications
- H04N21/854—Content authoring
- H04N21/8549—Creating video summaries, e.g. movie trailer
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
- H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
- H04N21/439—Processing of audio elementary streams
- H04N21/4394—Processing of audio elementary streams involving operations for analysing the audio stream, e.g. detecting features or characteristics in audio streams
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/60—Network structure or processes for video distribution between server and client or between remote clients; Control signalling between clients, server and network components; Transmission of management data between server and client, e.g. sending from server to client commands for recording incoming content stream; Communication details between server and client
- H04N21/61—Network physical structure; Signal processing
- H04N21/6106—Network physical structure; Signal processing specially adapted to the downstream path of the transmission network
- H04N21/6112—Network physical structure; Signal processing specially adapted to the downstream path of the transmission network involving terrestrial transmission, e.g. DVB-T
Landscapes
- Engineering & Computer Science (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- Databases & Information Systems (AREA)
- Human Computer Interaction (AREA)
- Computer Security & Cryptography (AREA)
- Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)
- Information Retrieval, Db Structures And Fs Structures Therefor (AREA)
- Television Signal Processing For Recording (AREA)
- Studio Circuits (AREA)
Abstract
【解決手段】デジタル放送信号に含まれる字幕情報データから、字幕文字列を抽出する字幕文字列抽出手段と、前記デジタル放送信号に含まれる映像データから、前記字幕文字列に対応する静止画を一つ抽出する静止画抽出手段と、前記抽出された字幕文字列を前記抽出された対応する静止画とともに表示する要約コンテンツを生成する要約コンテンツ生成手段と、を備え、前記要約コンテンツ生成手段は、前記要約コンテンツを構成する複数の字幕文字列及び静止画についての表示切替タイミングを、該字幕文字列に基づいて決定することを特徴とする。
【選択図】図1
Description
特許文献2には、番組内容を要約したアニメーション画像を生成する方法が提案されている。この特許文献2記載の従来技術では、映像の中から画像と字幕情報を抽出し、それらを合成した画像群を連続的に切り替えたアニメーション画像として、要約コンテンツを生成する。そのアニメーション画像に利用する画像は、字幕情報を受信した時点、受信した字幕情報が一定のデータ量を超過した時点、映像シーンが切り替わった時点、あるいは、一定の時間が経過した時点のフレーム画像が利用される。また、要約コンテンツのデータサイズを小さくするために、切り出した画像に対して、輪郭だけを抽出する画像処理を施している。
これにより、前述の要約コンテンツ生成装置がコンピュータを利用して実現できるようになる。
図1は、本発明の一実施形態に係るデジタル放送受信システムの全体構成を示すブロック図である。図1において、デジタル放送受信システムには、アンテナ等を介して受信したデジタル放送信号が入力される。デジタル放送としては、例えば、地上デジタル放送および衛星デジタル放送などの放送波を利用したもの、IP(Internet Protocol)放送と呼ばれるインターネット(IP通信網)を利用したもの、などが挙げられる。本実施形態では、以下、地上デジタル放送を例に挙げて説明する。
映像解析部31は番組コンテンツ中の映像データを解析する。映像処理部32はその映像データ解析結果に基づいて映像データを処理する。映像処理部は、例えば、コンテンツ読込部23から受け取った映像データ中の全フレーム画像の中から、要約コンテンツ生成に利用する静止画を取捨選択する処理を行う。
図4は、本実施形態に係る要約コンテンツの生成手順を示すフローチャートである。以下、図4に示される手順(ステップS1〜S8)に従ってステップ毎に動作を説明する。なお、要約コンテンツ生成部40は、コンテンツ処理部30と連携して、図4の各ステップの処理を行う。要約コンテンツ生成部40は、番組コンテンツ中の映像データに係る処理について映像解析部31及び映像処理部32と連携する。要約コンテンツ生成部40は、番組コンテンツ中の字幕情報データに係る処理について字幕情報解析部33及び字幕情報処理部34と連携する。また、音声データを要約コンテンツに含める場合には、要約コンテンツ生成部40は、番組コンテンツ中の音声データに係る処理について音声解析部35及び音声処理部36と連携する。
要約コンテンツ生成部40は、字幕・静止画表示スケジュール情報を初期設定する。この初期設定では、まず対象番組コンテンツ中の全ての字幕情報データを対象にして、字幕情報データに含まれる字幕文字列Tn(但し、nは字幕文字列の識別番号(1、2、3、・・・)である)を検出する。一つの字幕文字列Tnは、全ての文字が同時に映像に重畳されて表示されるものである。次いで、各字幕文字列Tnに対して、その表示順序に従って字幕番号Cm(但し、m=1、2、3、・・・)を付与する。次いで、各字幕文字列Tnの表示時刻を、番組コンテンツ再生開始時点からの経過時間によって表す。次いで、それら字幕番号Cm、表示時刻及び字幕文字列Tnの組を字幕・静止画表示スケジュール情報に含める。図5に字幕・静止画表示スケジュール情報100の構成例を示す。このステップS1の段階では、対象番組コンテンツ中の全ての字幕文字列Tnが抽出され、各字幕文字列Tnに対応する字幕番号Cm、表示時刻及び字幕文字列Tnの組のみが字幕・静止画表示スケジュール情報100に格納される。
字幕情報データ中の各字幕文字列は、必ずしもそれだけで1つの文章を構成するとは限らない。ここで、文章とは、文末が句点で終わる文字列を指す。放送番組では、場合によっては、登場人物の会話などの映像進行に合わせて、文章が分割され、連続する複数の字幕文字列から1つの文章が構成される。また、映像の進行に対して、字幕情報データの受信間隔は不定である。例えば2秒程度の非常に短い間隔で次の字幕情報データを受信する場合もあれば、10秒以上経過しても次の字幕情報データを受信しない場合もある。このような知見に基づき、本実施形態では、連続する複数の字幕文字列が結合可能かどうか判定し、結合可能と判定された字幕文字列を結合する。
判定基準1:字幕文字列Aが、句点で終わっていない。
判定基準2:字幕文字列A,Bの合計文字数が、第1の規定文字数N1(例えば30文字)よりも少ない。
判定基準3:字幕文字列Aの表示後、字幕文字列Bを表示するまでの時間が、規定時間TIM1(例えば4.0秒)よりも短い。
判定基準4:連続する3つの字幕文字列A,B,Cに対して、それら合計文字数が第2の規定文字数N2よりも多く、且つ、字幕文字列A,B,Cの結合「A+B+C」を2つの文字列に分割することにより、分割後の2つの文字列が両方とも第1の規定文字数N1よりも少なくなる。
この第2の結合規則によれば、要約コンテンツ生成部は、連続する3つの字幕文字列を結合してから2つの文字列に分割し、字幕・静止画表示スケジュール情報100を更新する。図8に、図7の字幕・静止画表示スケジュール情報100に対する、第2の結合規則による処理結果の例を示す。図8の例では、図7中の字幕文字列T8、T9、T10の合計文字数が第2の規定文字数N2よりも多く、該字幕文字列T8、T9、T10を結合してから2つの文字列T8',T8”に分割することで、文字列T8',T8”が両方とも第1の規定文字数N1よりも少なくなる。このため、字幕番号C8の組の字幕文字列を該分割後の文字列T8'に変更するとともに、字幕番号C9の組の字幕文字列を該分割後の文字列T8”に変更し、字幕番号C10の組の情報(表示時刻および字幕文字列)を削除する。
なお、第2の結合規則において、字幕文字列の結合を分割するときの分割位置は、例えば、(1)読点で終わる、(2)単語の中間ではない、(3)全文字列長の中間位置に近い、のいずれかの条件をみたすところに決定する。
要約コンテンツ生成部40は、字幕・静止画表示スケジュール情報100中の各字幕文字列に対する要約用静止画の候補となるフレーム画像群(以下、「候補画像群」と称する)を、字幕・静止画表示スケジュール情報100中の表示時刻に基づいて、対象番組コンテンツ中の映像データから抽出する。
要約コンテンツ生成部40は、字幕・静止画表示スケジュール情報100中のフレーム画像番号列で示される候補画像群(フレーム画像群)から、字幕文字列に対する要約用静止画として不適当なフレーム画像を削除する。これは、地上デジタル放送において、映像の進行と字幕文字列の表示には、若干のずれがあるため、映像の内容と字幕文字列の内容が一致していない場合があるためである。そのため、候補画像群の中に映像シーンの切り替えが存在する場合には、該候補画像群において映像シーン切り替えの前半部あるいは後半部を削除する。図11に、候補画像群の範囲調整の概念図を示す。図11において、字幕番号Ckについての候補画像群に対して、前半部のNSCフレーム時にシーン切り替えが発生していると判定された場合、候補画像群からその前半部のフレーム画像を削除する。図12に、図10の字幕・静止画表示スケジュール情報100に対する処理結果の例を示す。図12の例では、図10中の字幕番号C8についての候補画像群(フレーム画像番号列「1565-1959」)に対して前半部の20個のフレーム画像を削除し、図12に示されるように、字幕番号C8についての候補画像群をフレーム画像番号列「1585-1959」に変更している。
要約コンテンツ生成部40は、字幕・静止画表示スケジュール情報100中のフレーム画像番号列で示される候補画像群の中から、要約用静止画を1つ選択する。要約用静止画の選択方法としては、例えば、(1)一番目の画像を選択、(2)真ん中の画像を選択、(3)ランダムに選択、などが挙げられる。
上記ステップS5で選択された要約用静止画に関して、連続する要約用静止画が類似している場合がある。例えば、連続する2つの要約用静止画が、ともに、ニュースキャスターが原稿を読んでいる場面、或いは、同じ場所を撮影している場面など、同じ映像シーンに存在している場合や、同じ被写体を撮影している場合などである。このような知見に基づき、本実施形態では、連続する複数の要約用静止画が類似している場合には、どれか一つの要約用静止画を代表の要約用静止画として採用することで、それら連続する複数の要約用静止画については表示の切替を行わないように、字幕・静止画表示スケジュール情報100を変更する。
上記ステップS6までの段階で作成された字幕・静止画表示スケジュール情報100中の「表示時刻」は、元々の放送番組の時間をもとに付与されている。つまり、元々の放送番組の放送時間が30分であった場合には、その「表示時刻」通りに要約用コンテンツ(字幕文字列及び要約用静止画)を再生すると、要約用コンテンツの再生にかかる時間も30分となってしまう。一方で、視聴者ごとに字幕文字列を読む早さや読解力が異なり、特に、字幕文字列中に難易度の高い単語が含まれている場合には、それが顕著となる。
要約コンテンツの再生にかけられる時間(再生時間)が指定されている場合に、その再生時間を字幕・静止画表示スケジュール情報100中の字幕文字列の個数で等分割する。そして、等分割された再生時間に従って、各字幕文字列の再生時刻を字幕・静止画表示スケジュール情報100に設定する。この方法の場合、各字幕文字列が、テレビ画面上に表示されている時間(表示時間)は同じになる。そして、例えば視聴者が指定した再生時間で、要約コンテンツを再生し終えることができる。
字幕・静止画表示スケジュール情報100中の字幕文字列の文字数に応じて、当該字幕文字列がテレビ画面上に表示されている時間(表示時間)を決定する。
再生時刻設定方法2−1では、字幕文字列の文字数が多いほど表示時間を長くするように、各字幕文字列の再生時刻を設定する。図15に、この場合の処理フローを示す。図15の処理では、字幕・静止画表示スケジュール情報100中の全ての字幕文字列に対して、表示時間を算出している。図15において、ステップS41では、変数iに初期値「1」をセットする。ステップS42では、字幕番号Ciの組の字幕文字列が存在するか調べる。字幕番号Ciの組の字幕文字列が存在する場合にはステップS43に進み、字幕番号Ciの組の字幕文字列が存在しない場合にはステップS45に進む。ステップS43では、字幕番号Ciの組の字幕文字列の文字数CNiを数える。ステップS44では、字幕番号Ciの組の字幕文字列の表示時間TNi(単位は秒)を計算する。この計算式は、「TNi=2+(CNi÷20)」である。ステップS45では、変数iに1を加える。ステップS46では、字幕番号Ciが字幕・静止画表示スケジュール情報100中に存在するか調べる。字幕番号Ciが字幕・静止画表示スケジュール情報100中に存在する場合はステップS42に戻る。一方、字幕番号Ciが字幕・静止画表示スケジュール情報100中に存在せず、全ての字幕番号Ciについての処理が終了した場合には処理を終了する。この図15の処理によって算出された各字幕文字列の表示時間TNiに従って、各字幕文字列の再生時刻を字幕・静止画表示スケジュール情報100に設定する。
再生時刻設定方法2−2では、字幕文字列の文字数に対し閾値を設け、閾値を境にして段階的に表示時間を長くする。
字幕文字列の文字数が規定値N3以下であれば、該字幕文字列の表示時間を規定値TIM3とする。一方、字幕文字列の文字数が規定値N3超過であれば、該字幕文字列の表示時間を規定値TIM4にする。但し、規定値TIM4は規定値TIM3より長い時間である。各規定値は、例えば、N3=12、TIM3=2秒、TIM4=4秒と設定する。そして、各字幕文字列の表示時間に従って、各字幕文字列の再生時刻を字幕・静止画表示スケジュール情報100に設定する。
字幕・静止画表示スケジュール情報100中の字幕文字列内に、難易度の高い単語が含まれている場合、その難易度に応じて、該字幕文字列がテレビ画面上に表示されている時間(表示時間)を決定する。例えば、難易度の高い単語が含まれていない字幕文字列に対する表示時間は、所定値(例えば、上記再生時刻設定方法1又は再生時刻設定方法2で定めた値)とする。そして、難易度の高い単語が含まれる字幕文字列に対する表示時間は、該所定値を増加させた値(例えば、所定倍率だけ割り増した値、一定値を加算した値など)とする。そして、各字幕文字列の表示時間に従って、各字幕文字列の再生時刻を字幕・静止画表示スケジュール情報100に設定する。
視聴者のプロフィール情報(年齢、性別、職業など)に応じて、字幕文字列がテレビ画面上に表示されている時間(表示時間)を決定する。プロフィール情報の項目、例えば年齢、職業などを検索キーにした、再生時間のデータベースを作成しておき、視聴者のプロフィール情報に対応した表示時間を該データベースから取得する。表示時間のデータベースとしては、例えば、高齢者や子供には表示時間を長くする、などが挙げられる。視聴者のプロフィール情報は、予め記録しておくか、或いは、視聴者から適宜、手入力してもらう。そして、その決定した表示時間に従って、各字幕文字列の再生時刻を字幕・静止画表示スケジュール情報100に設定する。この方法の場合、全体の再生時間は、視聴者のプロフィールによって変動する。そして、視聴者のプロフィールに応じて字幕文字列の再生時間が増減されるので、効果的な再生時間の設定が可能であるとともに、視聴者が字幕を理解する確度が高くなる。
要約コンテンツ生成部40は、要約コンテンツを再生する再生装置(要約コンテンツ再生装置)のスペックに合わせて、字幕・静止画表示スケジュール情報100で示される各要約用静止画を対象に画像フォーマットを変換する。例えば、携帯電話機が要約コンテンツ再生装置であり、要約コンテンツを表示する際の解像度が、横240ピクセル、縦80ピクセルである場合には、その解像度に合わせるように要約用静止画を画像処理する。そして、要約コンテンツ生成部40は、字幕・静止画表示スケジュール情報100で示される、画像フォーマット変換後の要約用静止画及び要約用文字列と、字幕・静止画表示スケジュール情報100とを一つの要約コンテンツとして、データベース50に記録する。
(1)地上デジタル放送番組に対して、字幕情報データ内の字幕文字列を順番に切り替えて表示するのに合わせて、映像データから切り出した静止画も表示するアニメーションコンテンツとして、要約コンテンツを生成することにより、視聴者は、該要約コンテンツを再生して、字幕文字列を読みつつ、静止画を確認するだけで、番組の内容を簡単に理解することができるようになる。
(2)地上デジタル放送データに対して、字幕情報データと、映像データから切り出した静止画群を利用して要約コンテンツを生成することにより、該放送データと比較して要約コンテンツのデータサイズを小さくできる。
(3)アニメーション切り替えタイミングを、字幕文字列および静止画の解析結果に基づいて決定することにより、視聴者の可読性が高くなる。
(4)複数の字幕文字列を結合したり、視聴者個人のプロフィールに応じて表示タイミングを変更したりすることにより、視聴者の可読性、理解度が高くなる。
(5)類似する静止画が連続する場合、一方を省略することにより、画像数やアニメーション切り替え回数を削減することができ、要約コンテンツのデータサイズ、再生時間を小さくできる。
また、「コンピュータ読み取り可能な記録媒体」とは、フレキシブルディスク、光磁気ディスク、ROM、フラッシュメモリ等の書き込み可能な不揮発性メモリ、DVD(Digital Versatile Disk)等の可搬媒体、コンピュータシステムに内蔵されるハードディスク等の記憶装置のことをいう。
また、上記プログラムは、このプログラムを記憶装置等に格納したコンピュータシステムから、伝送媒体を介して、あるいは、伝送媒体中の伝送波により他のコンピュータシステムに伝送されてもよい。ここで、プログラムを伝送する「伝送媒体」は、インターネット等のネットワーク(通信網)や電話回線等の通信回線(通信線)のように情報を伝送する機能を有する媒体のことをいう。
また、上記プログラムは、前述した機能の一部を実現するためのものであっても良い。さらに、前述した機能をコンピュータシステムにすでに記録されているプログラムとの組み合わせで実現できるもの、いわゆる差分ファイル(差分プログラム)であっても良い。
例えば、上述の実施形態では、地上デジタル放送を例に挙げて説明したが、衛星デジタル放送やIP放送などにも適用可能である。
ここでは、字幕・静止画表示スケジュール情報100中のフレーム画像番号列で示される候補画像群の中から、画像の内容に基づいて要約用静止画を1つ選択する方法をいくつかの例(方法A,B)を挙げて説明する。
要約用静止画として採用する画像の内容は、以下の(a)〜(e)いずれかである。
(a)人物が映っている画像
(b)人物が正面を向いて映っている画像
(c)人物が正面を向き且つ眼を開けて映っている画像
(d)人物が正面を向き且つ笑って映っている画像
(e)人物が正面を向き且つ泣いて映っている画像
本方法Aを用いる場合には、図1中の映像解析部31は、人物検出機能および表情検出機能を備える。人物検出機能は、映像データを解析し、画像内に映っている人物を検出する。さらに、人物検出機能は、検出した人物が正面を向いているか判断する。表情検出機能は、映像データを解析し、人物検出機能によって検出された人物の表情を判定する。なお、要約用静止画として、(a)人物が映っている画像、又は、(b)人物が正面を向いて映っている画像を採用する場合には、人物の表情を判定する必要がないので、映像解析部31は表情検出機能を具備しなくてもよい。
ステップS76では、P番目の候補画像から検出された人物が正面を向いているか判定する。ここでは、映像解析部31は、当該候補画像を解析し、検出済みの人物が正面を向いているかを判断する。この結果、人物が正面を向いている場合にはステップS77に進み、人物が正面を向いていない場合にはステップS72に戻る。
ステップS77では、P番目の候補画像から検出された人物が眼を開けているか判定する。ここでは、映像解析部31は、当該候補画像を解析し、検出済みの正面を向いている人物が眼を開けているかを判断する。この結果、人物が眼を開けている場合にはステップS78に進み、人物が眼を開けていない場合にはステップS72に戻る。
ステップS78では、P番目の候補画像には人物が正面を向き且つ眼を開けて映っているので、当該P番目の候補画像を要約用静止画の候補として記録する。
要約用静止画として採用する画像の内容は、以下の(f),(g)いずれかである。
(f)テロップデータが挿入されている画像。テロップデータは、地上デジタル放送信号中の映像データに含まれている。テロップデータは、所定のデータ形式を有しており、映像データから検出できるようになっている。テロップデータは、映像データが表示されるテレビ画面上に挿入される文字列のデータである。なお、テロップデータは、テレビ画面上に表示される文字列を含むが、本発明に係る字幕情報データとは別のものであり、本発明に係る字幕文字列とは異なる。
(g)アンカーショットが映っている画像。アンカーショットとは、ニュース番組においてメインのニュースキャスタが現れる映像区間である。
要約用静止画として、(g)アンカーショットが映っている画像を採用する場合には、図1中の映像解析部31は、アンカーショット検出機能を備える。アンカーショット検出機能は、映像データを解析し、画像にアンカーショットが映っているかを判定する。
ステップS97では、P番目の候補画像にアンカーショットが映っているか判定する。ここでは、映像解析部31は、読み込んだ候補画像を解析し、該画像にアンカーショットが映っているかを判定する。この結果、アンカーショットが映っている場合にはステップS96に進み、当該P番目の候補画像を要約用静止画の候補として記録する。その後、ステップS92に戻る。一方、アンカーショットが検出されなかった場合にはそのままステップS92に戻る。
Claims (21)
- 映像データと字幕情報データを有するデジタル放送信号を用いて放送番組の要約コンテンツを生成する要約コンテンツ生成装置において、
前記デジタル放送信号に含まれる字幕情報データから、字幕文字列を抽出する字幕文字列抽出手段と、
前記デジタル放送信号に含まれる映像データから、前記字幕文字列に対応する静止画を一つ抽出する静止画抽出手段と、
前記抽出された字幕文字列を前記抽出された対応する静止画とともに画面上に表示する要約コンテンツを生成する要約コンテンツ生成手段と、を備え、
前記要約コンテンツ生成手段は、前記要約コンテンツを構成する複数の字幕文字列及び静止画についての表示切替タイミングを、該字幕文字列に基づいて決定する、
ことを特徴とする要約コンテンツ生成装置。 - 前記要約コンテンツ生成手段は、字幕文字列の文字数に応じて、該字幕文字列が画面上に表示されている時間(表示時間)を決定することを特徴とする請求項1に記載の要約コンテンツ生成装置。
- 字幕文字列の文字数に対し閾値を設け、閾値を境にして段階的に表示時間を長くすることを特徴とする請求項2に記載の要約コンテンツ生成装置。
- 前記要約コンテンツ生成手段は、字幕文字列中の単語の難易度に応じて、該字幕文字列が画面上に表示されている時間を決定することを特徴とする請求項1に記載の要約コンテンツ生成装置。
- 前記要約コンテンツ生成手段は、視聴者のプロフィールに応じて、字幕文字列が画面上に表示されている時間を決定することを特徴とする請求項1に記載の要約コンテンツ生成装置。
- 前記要約コンテンツ生成手段は、前記要約コンテンツを構成する複数の字幕文字列及び静止画についての再生時刻を示す字幕・静止画表示スケジュール情報を作成することを特徴とする請求項1に記載の要約コンテンツ生成装置。
- 前記要約コンテンツ生成手段は、連続する複数の字幕文字列が結合可能か判定し、結合可能と判定された複数の字幕文字列を結合し、結合した字幕文字列を一つの静止画に対応付けることを特徴とする請求項1に記載の要約コンテンツ生成装置。
- 連続する複数の字幕文字列が結合可能かの判定基準は、字幕文字列A次いで字幕文字列Bの順序で連続する2つの字幕文字列A,Bに対し、
判定基準1:字幕文字列Aが句点で終わっていない、
を含むことを特徴とする請求項7に記載の要約コンテンツ生成装置。 - 連続する複数の字幕文字列が結合可能かの判定基準は、字幕文字列A次いで字幕文字列Bの順序で連続する2つの字幕文字列A,Bに対し、
判定基準2:字幕文字列A,Bの合計文字数が第1の規定文字数よりも少ない、
を含むことを特徴とする請求項7に記載の要約コンテンツ生成装置。 - 連続する複数の字幕文字列が結合可能かの判定基準は、字幕文字列A次いで字幕文字列Bの順序で連続する2つの字幕文字列A,Bに対し、
判定基準3:字幕文字列Aの表示後、字幕文字列Bを表示するまでの時間が規定時間よりも短い、
を含むことを特徴とする請求項7に記載の要約コンテンツ生成装置。 - 連続する3つ以上の字幕文字列が結合可能かの判定基準は、字幕文字列A次いで字幕文字列B次いで字幕文字列Cの順序で連続する3つの字幕文字列A,B,Cに対し、
判定基準4:字幕文字列A,B,Cの合計文字数が第2の規定文字数よりも多く、且つ、字幕文字列A,B,Cの結合「A+B+C」を2つの文字列に分割することにより、分割後の2つの文字列が両方とも第1の規定文字数よりも少なくなる、
を含むことを特徴とする請求項7に記載の要約コンテンツ生成装置。 - 前記判定基準4を満たす3つの字幕文字列の結合を分割するときの分割位置は、読点で終わる、単語の中間ではない、又は、全文字列長の中間位置に近い、のいずれかの条件をみたすところに決定する、
ことを特徴とする請求項11に記載の要約コンテンツ生成装置。 - 前記要約コンテンツ生成手段は、連続する複数の静止画が類似しているか判定し、連続する複数の類似した静止画の中から代表の静止画を採用することを特徴とする請求項1に記載の要約コンテンツ生成装置。
- 前記静止画抽出手段は、前記字幕文字列抽出手段によって抽出された字幕文字列に対応する候補画像群の中から、一番目の画像、真ん中の画像、又は、ランダムに選択した一つの画像を該字幕文字列に対応する静止画として抽出することを特徴とする請求項1に記載の要約コンテンツ生成装置。
- 前記デジタル放送信号に含まれる映像データを解析し、画像内に映っている人物を検出する人物検出手段を備え、
前記静止画抽出手段は、人物が映っている画像を前記静止画として抽出することを特徴とする請求項1に記載の要約コンテンツ生成装置。 - 前記デジタル放送信号に含まれる映像データを解析し、画像内に映っている人物を検出し、該人物が正面を向いているか判断する人物検出手段を備え、
前記静止画抽出手段は、人物が正面を向いて映っている画像を前記静止画として抽出することを特徴とする請求項1に記載の要約コンテンツ生成装置。 - 前記デジタル放送信号に含まれる映像データを解析し、画像内に映っている人物を検出し、該人物が正面を向いているか判断する人物検出手段と、
該映像データを解析し、前記人物検出手段によって検出された人物の表情を判定する表情検出手段と、を備え、
前記静止画抽出手段は、人物が特定の表情をして映っている画像を前記静止画として抽出することを特徴とする請求項1に記載の要約コンテンツ生成装置。 - 前記特定の表情は、眼が開いている、笑っている、又は、泣いている、であることを特徴とする請求項17に記載の要約コンテンツ生成装置。
- 前記デジタル放送信号に含まれる映像データには、映像データが表示される画面上に挿入される文字列のデータであるテロップデータが含まれており、
前記デジタル放送信号に含まれる映像データを解析し、画像中にテロップデータが挿入されているかを検出するテロップ検出手段を備え、
前記静止画抽出手段は、テロップデータが挿入されている画像を前記静止画として抽出することを特徴とする請求項1に記載の要約コンテンツ生成装置。 - 前記デジタル放送信号に含まれる映像データには、ニュース番組においてメインのニュースキャスタが現れる映像区間であるアンカーショットが映っている画像が含まれており、
前記デジタル放送信号に含まれる映像データを解析し、画像にアンカーショットが映っているかを判定するアンカーショット検出手段を備え、
前記静止画抽出手段は、アンカーショットが映っている画像を前記静止画として抽出することを特徴とする請求項1に記載の要約コンテンツ生成装置。 - 映像データと字幕情報データを有するデジタル放送信号を用いて放送番組の要約コンテンツを生成するためのコンピュータプログラムであって、
前記デジタル放送信号に含まれる字幕情報データから、字幕文字列を抽出する字幕文字列抽出機能と、
前記デジタル放送信号に含まれる映像データから、前記字幕文字列に対応する静止画を一つ抽出する静止画抽出機能と、
前記抽出された字幕文字列を前記抽出された対応する静止画とともに画面上に表示する要約コンテンツを生成する要約コンテンツ生成機能と、をコンピュータに実現させるものであり、
前記要約コンテンツ生成機能は、前記要約コンテンツを構成する複数の字幕文字列及び静止画についての表示切替タイミングを、該字幕文字列に基づいて決定する、
ことを特徴とするコンピュータプログラム。
Priority Applications (2)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2007241371A JP5173337B2 (ja) | 2007-09-18 | 2007-09-18 | 要約コンテンツ生成装置およびコンピュータプログラム |
US12/211,488 US8279343B2 (en) | 2007-09-18 | 2008-09-16 | Summary content generation device and computer program |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2007241371A JP5173337B2 (ja) | 2007-09-18 | 2007-09-18 | 要約コンテンツ生成装置およびコンピュータプログラム |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2009076970A true JP2009076970A (ja) | 2009-04-09 |
JP5173337B2 JP5173337B2 (ja) | 2013-04-03 |
Family
ID=40454025
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2007241371A Expired - Fee Related JP5173337B2 (ja) | 2007-09-18 | 2007-09-18 | 要約コンテンツ生成装置およびコンピュータプログラム |
Country Status (2)
Country | Link |
---|---|
US (1) | US8279343B2 (ja) |
JP (1) | JP5173337B2 (ja) |
Cited By (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2010268076A (ja) * | 2009-05-12 | 2010-11-25 | Sharp Corp | 映像処理方法、映像処理装置及び映像表示装置 |
JP2011061670A (ja) * | 2009-09-14 | 2011-03-24 | Kddi Corp | 要約コンテンツを表示する表示装置、方法及びプログラム |
JP2011061497A (ja) * | 2009-09-10 | 2011-03-24 | Kddi Corp | 字幕表示装置、字幕表示方法およびプログラム |
JP2012142881A (ja) * | 2011-01-06 | 2012-07-26 | Kddi Corp | 字幕編集装置、字幕編集方法、及びコンピュータプログラム |
WO2015056883A1 (en) * | 2013-10-14 | 2015-04-23 | Samsung Electronics Co., Ltd. | Content summarization server, content providing system, and method of summarizing content |
JP2016531512A (ja) * | 2013-12-04 | 2016-10-06 | バイドゥ オンライン ネットワーク テクノロジー(ペキン) カンパニー リミテッド | 動画画面の処理方法及び装置 |
Families Citing this family (17)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2010136067A (ja) * | 2008-12-04 | 2010-06-17 | Sony Corp | データ処理装置、データ処理方法、及び、プログラム |
JP4711152B2 (ja) * | 2008-12-26 | 2011-06-29 | ソニー株式会社 | コンテンツ表示制御装置および方法、プログラム、並びに記録媒体 |
JP5573682B2 (ja) * | 2009-01-22 | 2014-08-20 | 日本電気株式会社 | 立体映像鑑賞システム、表示システム、光シャッタおよび立体映像鑑賞方法 |
KR20110062982A (ko) * | 2009-12-04 | 2011-06-10 | 삼성전자주식회사 | 실시간 방송 컨텐츠의 방송 요약 정보 생성 방법 및 장치와, 그 제공방법 및 방송 수신 장치 |
JP2011164779A (ja) * | 2010-02-05 | 2011-08-25 | Sony Corp | 情報処理装置、情報処理方法、及びプログラム |
CN102834843B (zh) * | 2010-04-02 | 2016-11-16 | 诺基亚技术有限公司 | 用于面部检测的方法和装置 |
KR101839406B1 (ko) * | 2011-09-27 | 2018-03-19 | 삼성전자 주식회사 | 디스플레이장치 및 그 제어방법 |
CN106127796B (zh) | 2012-03-07 | 2019-03-26 | 奥林巴斯株式会社 | 图像处理装置和图像处理方法 |
CN104203065B (zh) * | 2012-03-08 | 2017-04-12 | 奥林巴斯株式会社 | 图像处理装置和图像处理方法 |
WO2013157354A1 (ja) | 2012-04-18 | 2013-10-24 | オリンパス株式会社 | 画像処理装置、プログラム及び画像処理方法 |
US9202522B2 (en) * | 2013-05-08 | 2015-12-01 | Adobe Systems Incorporated | Method and apparatus for subtitle display |
US20160127807A1 (en) * | 2014-10-29 | 2016-05-05 | EchoStar Technologies, L.L.C. | Dynamically determined audiovisual content guidebook |
KR101822443B1 (ko) * | 2016-09-19 | 2018-01-30 | 서강대학교산학협력단 | 샷 경계 및 자막을 이용한 동영상 축약 방법 및 처리 장치 |
US10795932B2 (en) * | 2017-09-28 | 2020-10-06 | Electronics And Telecommunications Research Institute | Method and apparatus for generating title and keyframe of video |
CN108984094B (zh) * | 2018-06-29 | 2019-08-27 | 北京微播视界科技有限公司 | 切换全局特效的方法、装置、终端设备及存储介质 |
CN108924599A (zh) | 2018-06-29 | 2018-11-30 | 北京优酷科技有限公司 | 视频字幕显示方法及装置 |
US10743079B2 (en) | 2018-12-17 | 2020-08-11 | Rovi Guides, Inc. | Systems and methods for providing subtitles based on language proficiency |
Citations (12)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPH05166000A (ja) * | 1991-12-12 | 1993-07-02 | Oki Electric Ind Co Ltd | 文書画像の領域抽出方法 |
JPH0630385A (ja) * | 1992-07-07 | 1994-02-04 | Fujitsu General Ltd | 文字放送表示システム |
JPH0974390A (ja) * | 1995-09-05 | 1997-03-18 | Casio Comput Co Ltd | 情報表示装置 |
JP2004088384A (ja) * | 2002-08-27 | 2004-03-18 | Sony Corp | 情報処理装置および方法、プログラム格納媒体、並びにプログラム |
JP2004240859A (ja) * | 2003-02-07 | 2004-08-26 | Oki Electric Ind Co Ltd | 言い換えシステム |
JP2004336606A (ja) * | 2003-05-12 | 2004-11-25 | National Institute Of Information & Communication Technology | 字幕制作システム |
JP2005236993A (ja) * | 2004-02-18 | 2005-09-02 | Samsung Electronics Co Ltd | 複数画像の要約方法および装置 |
JP2006003875A (ja) * | 2004-05-18 | 2006-01-05 | Toyota Motor Corp | 画面表示制御装置および画面表示制御方法 |
WO2006048963A1 (ja) * | 2004-11-02 | 2006-05-11 | Tv Asahi Data Vision Corporation | 字幕付き静止画コンテンツ作成装置、字幕付き静止画コンテンツ作成プログラム及び字幕付き静止画コンテンツ作成システム |
JP2006135387A (ja) * | 2004-11-02 | 2006-05-25 | Kddi Corp | 動画像話題分割方法 |
JP2007067560A (ja) * | 2005-08-29 | 2007-03-15 | Canon Inc | 撮像装置及びその制御方法、コンピュータプログラム及び記録媒体 |
JP2008098955A (ja) * | 2006-10-12 | 2008-04-24 | Casio Hitachi Mobile Communications Co Ltd | 映像記録装置及びプログラム |
Family Cites Families (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP3361587B2 (ja) | 1993-12-27 | 2003-01-07 | 株式会社日立製作所 | 動画像検索装置及び方法 |
TR200102701T2 (tr) * | 1998-07-20 | 2002-06-21 | Canal + Societe Anonyme | Çok-kanallı bir dijital televizyon sistemi için kanallar arasında gezme sistemi. |
US7149957B2 (en) * | 2001-11-19 | 2006-12-12 | Ricoh Company, Ltd. | Techniques for retrieving multimedia information using a paper-based interface |
JP2007006308A (ja) | 2005-06-27 | 2007-01-11 | Casio Comput Co Ltd | テレビ受信装置およびテレビ受信処理のプログラム |
-
2007
- 2007-09-18 JP JP2007241371A patent/JP5173337B2/ja not_active Expired - Fee Related
-
2008
- 2008-09-16 US US12/211,488 patent/US8279343B2/en not_active Expired - Fee Related
Patent Citations (12)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPH05166000A (ja) * | 1991-12-12 | 1993-07-02 | Oki Electric Ind Co Ltd | 文書画像の領域抽出方法 |
JPH0630385A (ja) * | 1992-07-07 | 1994-02-04 | Fujitsu General Ltd | 文字放送表示システム |
JPH0974390A (ja) * | 1995-09-05 | 1997-03-18 | Casio Comput Co Ltd | 情報表示装置 |
JP2004088384A (ja) * | 2002-08-27 | 2004-03-18 | Sony Corp | 情報処理装置および方法、プログラム格納媒体、並びにプログラム |
JP2004240859A (ja) * | 2003-02-07 | 2004-08-26 | Oki Electric Ind Co Ltd | 言い換えシステム |
JP2004336606A (ja) * | 2003-05-12 | 2004-11-25 | National Institute Of Information & Communication Technology | 字幕制作システム |
JP2005236993A (ja) * | 2004-02-18 | 2005-09-02 | Samsung Electronics Co Ltd | 複数画像の要約方法および装置 |
JP2006003875A (ja) * | 2004-05-18 | 2006-01-05 | Toyota Motor Corp | 画面表示制御装置および画面表示制御方法 |
WO2006048963A1 (ja) * | 2004-11-02 | 2006-05-11 | Tv Asahi Data Vision Corporation | 字幕付き静止画コンテンツ作成装置、字幕付き静止画コンテンツ作成プログラム及び字幕付き静止画コンテンツ作成システム |
JP2006135387A (ja) * | 2004-11-02 | 2006-05-25 | Kddi Corp | 動画像話題分割方法 |
JP2007067560A (ja) * | 2005-08-29 | 2007-03-15 | Canon Inc | 撮像装置及びその制御方法、コンピュータプログラム及び記録媒体 |
JP2008098955A (ja) * | 2006-10-12 | 2008-04-24 | Casio Hitachi Mobile Communications Co Ltd | 映像記録装置及びプログラム |
Cited By (7)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2010268076A (ja) * | 2009-05-12 | 2010-11-25 | Sharp Corp | 映像処理方法、映像処理装置及び映像表示装置 |
JP2011061497A (ja) * | 2009-09-10 | 2011-03-24 | Kddi Corp | 字幕表示装置、字幕表示方法およびプログラム |
JP2011061670A (ja) * | 2009-09-14 | 2011-03-24 | Kddi Corp | 要約コンテンツを表示する表示装置、方法及びプログラム |
JP2012142881A (ja) * | 2011-01-06 | 2012-07-26 | Kddi Corp | 字幕編集装置、字幕編集方法、及びコンピュータプログラム |
WO2015056883A1 (en) * | 2013-10-14 | 2015-04-23 | Samsung Electronics Co., Ltd. | Content summarization server, content providing system, and method of summarizing content |
JP2016531512A (ja) * | 2013-12-04 | 2016-10-06 | バイドゥ オンライン ネットワーク テクノロジー(ペキン) カンパニー リミテッド | 動画画面の処理方法及び装置 |
US9973793B2 (en) | 2013-12-04 | 2018-05-15 | Baidu Online Network Technology (Beijing) Co., Ltd. | Method and apparatus for processing video image |
Also Published As
Publication number | Publication date |
---|---|
JP5173337B2 (ja) | 2013-04-03 |
US20090073314A1 (en) | 2009-03-19 |
US8279343B2 (en) | 2012-10-02 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP5173337B2 (ja) | 要約コンテンツ生成装置およびコンピュータプログラム | |
JP4616274B2 (ja) | 字幕付き静止画コンテンツ作成装置、字幕付き静止画コンテンツ作成プログラム及び字幕付き静止画コンテンツ作成システム | |
CA2924065C (en) | Content based video content segmentation | |
US8914820B2 (en) | Systems and methods for memorializing a viewers viewing experience with captured viewer images | |
JP3953886B2 (ja) | 字幕抽出装置 | |
JP5237174B2 (ja) | 携帯端末によって原コンテンツを編集するコンテンツ編集方法、コンテンツサーバ、システム及びプログラム | |
JP2008148077A (ja) | 動画再生装置 | |
KR20070052554A (ko) | 영상 표시 장치 및 방법 | |
US11812100B2 (en) | Apparatus, systems and methods for accessing information based on an image presented on a display | |
JP5067370B2 (ja) | 受信装置、表示制御方法、及びプログラム | |
JP2009004872A (ja) | ワンセグ放送受信装置、ワンセグ放送受信方法、およびワンセグ放送受信プログラムを記録した媒体 | |
JP2008178090A (ja) | 映像処理装置 | |
JP4937211B2 (ja) | 静止画抽出装置及び静止画抽出プログラム | |
JP4846674B2 (ja) | 静止画抽出装置及び静止画抽出プログラム | |
JP5042182B2 (ja) | 要約コンテンツ生成装置およびコンピュータプログラム | |
JP2006180306A (ja) | 動画記録再生装置 | |
JP2008098955A (ja) | 映像記録装置及びプログラム | |
JP2006054517A (ja) | 情報提示装置、方法及びプログラム | |
JP2005260322A (ja) | コンテンツ補足情報提供システム、携帯情報端末、サーバ | |
US20080104656A1 (en) | Method of storing and reproducing interactive digital broadcast signals and apparatus therefor | |
JP5228623B2 (ja) | 放送映像再生方法、システム及び装置 | |
KR20220001657A (ko) | 영상 편집 장치 | |
JP2011182274A (ja) | 映像記録再生装置 | |
JP4760893B2 (ja) | 動画記録再生装置 | |
JP2009065596A (ja) | 要約映像生成装置及び要約映像生成プログラム |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20100201 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A821 Effective date: 20100202 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20120613 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20120619 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20120820 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A821 Effective date: 20120821 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20120911 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20121112 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A821 Effective date: 20121113 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20121204 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20121227 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 5173337 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |
|
LAPS | Cancellation because of no payment of annual fees |