JP5232744B2 - Display device, method and program for displaying summary content - Google Patents

Display device, method and program for displaying summary content Download PDF

Info

Publication number
JP5232744B2
JP5232744B2 JP2009211593A JP2009211593A JP5232744B2 JP 5232744 B2 JP5232744 B2 JP 5232744B2 JP 2009211593 A JP2009211593 A JP 2009211593A JP 2009211593 A JP2009211593 A JP 2009211593A JP 5232744 B2 JP5232744 B2 JP 5232744B2
Authority
JP
Japan
Prior art keywords
display
still image
time
character string
subtitle character
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
JP2009211593A
Other languages
Japanese (ja)
Other versions
JP2011061670A (en
Inventor
一則 松本
和史 池田
康弘 滝嶋
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
KDDI Corp
Original Assignee
KDDI Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by KDDI Corp filed Critical KDDI Corp
Priority to JP2009211593A priority Critical patent/JP5232744B2/en
Publication of JP2011061670A publication Critical patent/JP2011061670A/en
Application granted granted Critical
Publication of JP5232744B2 publication Critical patent/JP5232744B2/en
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Description

本発明は、映像及び字幕文字列を含むデジタル放送コンテンツを表示する技術に関する。特に、地上デジタル放送サービスに配信されたコンテンツを録画し、且つ、その要約コンテンツを再生する技術に関する。   The present invention relates to a technique for displaying digital broadcast content including video and subtitle character strings. In particular, the present invention relates to a technique for recording content distributed to a terrestrial digital broadcasting service and reproducing the summary content.

地上デジタル放送サービスによれば、映像に加えて、字幕情報(クローズドキャプション)も同時に配信される。字幕情報は、その映像に関する会話やセリフのような文字列である。放送受信端末は、受信した放送データ内の映像データ及び音声データを再生すると共に、その放送データ内の字幕情報データを、再生中の映像データに重畳して表示する。放送受信端末は、家庭用のテレビ受像機に限られず、例えばパーソナルコンピュータや携帯電話端末であってもよい。特に、携帯電話向け地上デジタル放送サービスとしては、ARIB(社団法人電波産業会)の標準規格で定められた「ワンセグ(1seg)」技術がある。この技術によれば、利用者は、音声を聞くことなく、再生中の映像と、常に表示される字幕情報とから、その内容を理解することができる。   According to the digital terrestrial broadcasting service, subtitle information (closed caption) is simultaneously distributed in addition to video. The caption information is a character string such as a conversation or a dialogue about the video. The broadcast receiving terminal reproduces the video data and audio data in the received broadcast data, and superimposes the caption information data in the broadcast data on the video data being reproduced. The broadcast receiving terminal is not limited to a home television receiver, and may be, for example, a personal computer or a mobile phone terminal. In particular, as a terrestrial digital broadcasting service for mobile phones, there is “1 seg” technology defined by the standard of ARIB (Radio Industry Association). According to this technology, the user can understand the content from the video being reproduced and the caption information that is always displayed without listening to the sound.

放送受信端末には、受信した放送データを、ハードディスク装置等の記憶デバイスに録画する機能を搭載したものもある。記憶デバイスの大容量化によって、視聴者は、放送コンテンツを長時間に渡って録画し、その放送コンテンツをいつでも再生することができる。   Some broadcast receiving terminals have a function of recording received broadcast data in a storage device such as a hard disk device. By increasing the capacity of the storage device, the viewer can record the broadcast content for a long time and reproduce the broadcast content at any time.

このとき、視聴者は、1つの放送コンテンツについて、最初から最後まで再生する場合もあれば、一部分のみを再生する場合もある。特に、視聴者は、時間の制約によって、その放送コンテンツの概要だけを短時間で視聴したいと所望する場合も多い。この場合、視聴者は、早送りで再生しながら、見たいシーンの部分だけを通常再生によって視聴する。   At this time, the viewer may play back one broadcast content from the beginning to the end, or may play back only a part thereof. In particular, the viewer often desires to view only the outline of the broadcast content in a short time due to time constraints. In this case, the viewer views only the portion of the scene he / she wants to see by normal playback while playing back in fast-forward.

視聴者に対して短時間でその放送コンテンツの概要を理解させるために、要約コンテンツを生成する技術がある。要約コンテンツとしては、例えば、原コンテンツから、部分的に抽出した映像データを連結したものや、部分的に抽出した静止画像からアニメーションを生成したものがある。   There is a technique for generating summary content in order for a viewer to understand the outline of the broadcast content in a short time. The summary content includes, for example, one obtained by concatenating partially extracted video data from the original content, and one obtained by generating an animation from a partially extracted still image.

例えば、アニメーション画像を生成するために、切り出した静止画像に対して輪郭だけを抽出する画像処理を施し、それらを合成した画像群を連続的に切り替える技術がある(例えば特許文献1参照)。   For example, in order to generate an animation image, there is a technique in which image processing for extracting only the outline is performed on a cut out still image, and an image group obtained by synthesizing them is continuously switched (see, for example, Patent Document 1).

また、デジタル放送コンテンツに含まれる字幕文字列の表示と共に、映像データから切り出した静止画像の表示を切り替えて表示する技術もある(例えば特許文献2参照)。   In addition, there is a technique for switching and displaying the display of a still image cut out from video data together with the display of subtitle character strings included in digital broadcast content (for example, see Patent Document 2).

特開2007−006308号公報JP 2007-006308 A 特開2009−076970号公報JP 2009-076970 A

特許文献1に記載された技術によれば、線描画のアニメーション画像が生成されるので、視聴者は、原コンテンツの画像を実感することができない。一方で、特許文献2に記載された技術によれば、映像データから切り出した静止画像を直接的に利用するために、原コンテンツの画像を実感しやすい。また、この技術によれば、静止画像の切替タイミングが、字幕文字列に基づいて決定されるために、静止画像と同時に表示される字幕文字列の可読性が高くなる。   According to the technique described in Patent Document 1, a line drawing animation image is generated, so that the viewer cannot feel the original content image. On the other hand, according to the technique described in Patent Document 2, since the still image cut out from the video data is directly used, it is easy to feel the original content image. In addition, according to this technique, since the still image switching timing is determined based on the caption character string, the readability of the caption character string displayed simultaneously with the still image is improved.

しかしながら、この技術は、閲覧中に表示される静止画像及び字幕文字列は1組だけであって、その組を切り替えて表示するものである。この場合、視聴者は、複数の静止画像及び字幕文字列を、時間経過に伴う流れの中で理解することができない。勿論、注目されるべき静止画像及び字幕文字列を中心にして、時間経過に伴って、複数の静止画像及び字幕文字列を前後に表示することもできる。   However, in this technique, there is only one set of still images and subtitle character strings displayed during browsing, and these sets are switched and displayed. In this case, the viewer cannot understand a plurality of still images and subtitle character strings in the flow with time. Of course, it is also possible to display a plurality of still images and subtitle character strings before and after the passage of time with a focus on still images and subtitle character strings to be noted.

しかしながら、時間経過に伴って静止画像及び字幕文字列の表示を移動させる際、字幕文字列に基づく表示時間に基づいて静止画像を切り替えた場合、断片的な表示の切り替えしかできない。即ち、静止画像を滑らかに移動させることができない。この場合、視聴者から見て、断片的な表示の切り替えは、不自然であって、視覚的な疲れを生じさせる原因ともなる。   However, when moving the display of a still image and a caption character string with the passage of time, if the still image is switched based on the display time based on the caption character string, only fragmental display switching can be performed. That is, the still image cannot be moved smoothly. In this case, when viewed from the viewer, the switching of the fragmentary display is unnatural and causes visual fatigue.

そこで、本発明によれば、静止画像及び字幕文字列を含む要約コンテンツを、視聴者から見て、その字幕文字列の可読性を高めると共に、静止画像の表示を視覚的に自然に切り替えることができる表示装置、方法及びプログラムを提供することを目的とする。   Therefore, according to the present invention, summary content including a still image and a subtitle character string can be viewed from the viewer, and the readability of the subtitle character string can be improved and the display of the still image can be switched visually and naturally. It is an object to provide a display device, a method, and a program.

本発明によれば、映像及び字幕文字列を含むデジタル放送コンテンツに基づく要約コンテンツを表示する表示装置であって、
デジタル放送コンテンツから、字幕文字列の単位を抽出する字幕文字列抽出手段と、
デジタル放送コンテンツから、字幕文字列の単位毎に、映像を抽出する映像抽出手段と、
字幕文字列の単位に基づく映像の中から、1つの静止画像を抽出する画像抽出手段と、
字幕文字列の単位毎に、その文字数に応じて、静止画像の表示時間を決定する表示時間決定手段と、
静止画像を、時間経過に伴って進行方向に滑動的に移動させると共に、表示領域に静止画像1枚程度の進行方向の長さLで指定された表示中央範囲に通過させ、当該表示中央範囲の進行方向後方に時間的未来の静止画像を表示する表示制御手段と
を有し、
表示制御手段について、進行方向への移動速度は、表示中央範囲の長さLを、当該表示中央範囲内へ進行方向後方から入り始めた静止画像の当該表示時間で除算した値とすることを特徴とする。
According to the present invention, a display device for displaying summary content based on digital broadcast content including video and subtitle character strings,
Subtitle character string extraction means for extracting a subtitle character string unit from digital broadcast content;
Video extraction means for extracting video from digital broadcast content in units of subtitle character strings;
Image extracting means for extracting one still image from video based on a unit of subtitle character string;
Display time determining means for determining the display time of a still image according to the number of characters for each unit of subtitle character string;
The still image is slidably moved in the traveling direction as time passes, and is passed through the display center range designated by the length L in the traveling direction of about one still image in the display area. Display control means for displaying a still image of the temporal future behind the traveling direction of
With respect to the display control means , the moving speed in the traveling direction is a value obtained by dividing the length L of the display center range by the display time of the still image that has entered the display center range from the rear in the traveling direction. And

本発明の表示装置における他の実施形態によれば、表示時間決定手段は、表示時間を、文字数が所定数以下である場合に、少なくとも所定最小時間に決定することも好ましい。   According to another embodiment of the display device of the present invention, it is also preferable that the display time determination means determines the display time to be at least a predetermined minimum time when the number of characters is equal to or less than a predetermined number.

本発明の表示装置における他の実施形態によれば、
表示制御手段は、表示領域の表示中央範囲に表示される静止画像が、第1の画像から第2の画像へ切り替わる際に、第1の画像の表示時間の中の終了所定時間範囲と、第2の画像の表示時間の中の開始所定時間範囲との間で、第1の画像の表示時間に基づく第1の移動速度から、第2の表示時間に基づく第2の移動速度へ可変制御することも好ましい。
According to another embodiment of the display device of the present invention,
When the still image displayed in the display central range of the display area is switched from the first image to the second image, the display control means includes a predetermined end time range in the display time of the first image, The first moving speed based on the display time of the first image is variably controlled from the first moving speed based on the display time of the first image to the second moving speed based on the second display time within a predetermined start time range in the display time of the second image. It is also preferable.

本発明の表示装置における他の実施形態によれば、表示制御手段は、表示領域の表示中央範囲に表示されている第2の静止画像及び字幕文字列を、ハイライトによって視覚的に強調して表示することも好ましい。   According to another embodiment of the display device of the present invention, the display control means visually highlights the second still image and the caption character string displayed in the display center range of the display area by highlighting. It is also preferable to display.

本発明の表示装置における他の実施形態によれば、表示制御手段は、表示領域の表示中央範囲外に表示されている第1の静止画像及び字幕文字列及び第3の静止画像及び字幕文字列を、コントラストを下げることによって視覚的に目立たないように表示することも好ましい。   According to another embodiment of the display device of the present invention, the display control means includes the first still image, the subtitle character string, the third still image, and the subtitle character string displayed outside the display center range of the display area. It is also preferable to display the image so as not to be visually noticeable by reducing the contrast.

本発明によれば、映像及び字幕文字列を含むデジタル放送コンテンツに基づく要約コンテンツを表示する表示装置に搭載されたコンピュータを機能させるプログラムであって、
デジタル放送コンテンツから、字幕文字列の単位を抽出する字幕文字列抽出手段と、
デジタル放送コンテンツから、字幕文字列の単位毎に、映像を抽出する映像抽出手段と、
字幕文字列の単位に基づく映像の中から、1つの静止画像を抽出する画像抽出手段と、
字幕文字列の単位毎に、その文字数に応じて、静止画像の表示時間を決定する表示時間決定手段と、
静止画像を、時間経過に伴って進行方向に滑動的に移動させると共に、表示領域に静止画像1枚程度の進行方向の長さLで指定された表示中央範囲に通過させ、当該表示中央範囲の進行方向後方に時間的未来の静止画像を表示する表示制御手段と
を有し、
表示制御手段について、進行方向への移動速度は、表示中央範囲の長さLを、当該表示中央範囲内へ進行方向後方から入り始めた静止画像の当該表示時間で除算した値とする
ようにコンピュータを機能させることを特徴とする。
According to the present invention, there is provided a program for causing a computer mounted on a display device that displays summary content based on digital broadcast content including video and subtitle character strings to function.
Subtitle character string extraction means for extracting a subtitle character string unit from digital broadcast content;
Video extraction means for extracting video from digital broadcast content in units of subtitle character strings;
Image extracting means for extracting one still image from video based on a unit of subtitle character string;
Display time determining means for determining the display time of a still image according to the number of characters for each unit of subtitle character string;
The still image is slidably moved in the traveling direction as time passes, and is passed through the display center range designated by the length L in the traveling direction of about one still image in the display area. Display control means for displaying a still image of the temporal future behind the traveling direction of
For the display control means , the moving speed in the traveling direction is a value obtained by dividing the length L of the display center range by the display time of the still image that has started to enter the display center range from the rear in the traveling direction. > It is characterized by making the computer function as follows.

本発明によれば、映像及び字幕文字列を含むデジタル放送コンテンツに基づく要約コンテンツを表示装置に表示する表示方法であって、
デジタル放送コンテンツから、字幕文字列の単位を抽出する第1のステップと、
デジタル放送コンテンツから、字幕文字列の単位毎に、映像を抽出する第2のステップと、
字幕文字列の単位に基づく映像の中から、1つの静止画像を抽出する第3のステップと、
字幕文字列の単位毎に、その文字数に応じて、静止画像の表示時間を決定する第4のステップと、
静止画像を、時間経過に伴って進行方向に滑動的に移動させると共に、表示領域に静止画像1枚程度の進行方向の長さLで指定された表示中央範囲に通過させ、当該表示中央範囲の進行方向後方に時間的未来の静止画像を表示する第5のステップ
を有し、
第5のステップについて、進行方向への移動速度は、表示中央範囲の長さLを、当該表示中央範囲内へ進行方向後方から入り始めた静止画像の当該表示時間で除算した値とする
ことを特徴とする。
According to the present invention, there is provided a display method for displaying summary content on a display device based on digital broadcast content including video and subtitle character strings,
A first step of extracting a subtitle character string unit from the digital broadcast content;
A second step of extracting video from digital broadcast content for each unit of subtitle character string;
A third step of extracting one still image from the video based on the unit of the subtitle character string;
A fourth step of determining a display time of a still image according to the number of characters for each subtitle character string unit;
The still image is slidably moved in the traveling direction as time passes, and is passed through the display center range designated by the length L in the traveling direction of about one still image in the display area. And a fifth step of displaying a still image of the temporal future behind the traveling direction of
For the fifth step, the moving speed in the traveling direction is a value obtained by dividing the length L of the display central range by the display time of the still image that has started to enter the display central range from the rear in the traveling direction. It is characterized by that.

本発明の表示装置、方法及びプログラムによれば、静止画像及び字幕文字列を含む要約コンテンツを、視聴者から見て、その字幕文字列の可読性を高めると共に、静止画像の表示を視覚的に自然に切り替えることができる。   According to the display device, method, and program of the present invention, a summary content including a still image and a subtitle character string is viewed from the viewer, the readability of the subtitle character string is improved, and still image display is visually natural. You can switch to

本発明における第1の表示イメージである。It is a 1st display image in this invention. 本発明における第2の表示イメージである。It is a 2nd display image in this invention. 本発明における表示装置の機能構成図である。It is a functional block diagram of the display apparatus in this invention. 静止画像と字幕文字列との対応関係を表す説明図である。It is explanatory drawing showing the correspondence of a still image and a caption character string. 第1の時刻及び第2の時刻における表示イメージである。It is a display image in the 1st time and the 2nd time. 第3の時刻及び第4の時刻における表示イメージである。It is a display image in 3rd time and 4th time. 第5の時刻及び第6の時刻における表示イメージである。It is a display image in 5th time and 6th time. 第7の時刻及び第8の時刻における表示イメージである。It is a display image in 7th time and 8th time.

以下、本発明の実施の形態について、図面を用いて詳細に説明する。   Hereinafter, embodiments of the present invention will be described in detail with reference to the drawings.

図1は、本発明における第1の表示イメージである。   FIG. 1 is a first display image in the present invention.

表示装置1は、デジタル放送データをアンテナ又は通信インタフェースによって受信する。表示装置1は、ユーザに対するディスプレイを備えており、パーソナルコンピュータであってもよいし、携帯電話機又は携帯端末であってもよい。デジタル放送データとしては、放送波を介する地上/衛星デジタル放送や、インターネットを介するIP放送等がある。デジタル放送データは、映像データ、音声データ及び字幕情報データを含む。   The display device 1 receives digital broadcast data through an antenna or a communication interface. The display device 1 includes a display for a user, and may be a personal computer, a mobile phone, or a mobile terminal. Digital broadcast data includes terrestrial / satellite digital broadcast via broadcast waves, IP broadcast via the Internet, and the like. The digital broadcast data includes video data, audio data, and caption information data.

本発明における表示装置1は、受信したデジタル放送データから要約コンテンツを生成し、その要約コンテンツをディスプレイに表示する。本発明における要約コンテンツとは、原放送コンテンツから、字幕文字列の単位毎に1枚の静止画像を抽出したコンテンツである。本発明によれば、静止画像をディスプレイに表示する際に、その部分に相当する字幕文字列も同時に表示される。   The display device 1 according to the present invention generates summary content from the received digital broadcast data, and displays the summary content on a display. The summary content in the present invention is content obtained by extracting one still image for each unit of subtitle character string from the original broadcast content. According to the present invention, when a still image is displayed on a display, a subtitle character string corresponding to that portion is also displayed simultaneously.

表示装置1のディスプレイには、ブラウザ画面が表示される。そのブラウザ画面の中に、静止画像及び字幕文字列が第1の方向に並べられ、静止画像が、時間進行に伴って第2の方向に滑動的に移動させて表示される。   A browser screen is displayed on the display of the display device 1. In the browser screen, still images and subtitle character strings are arranged in the first direction, and the still images are displayed slidably moved in the second direction as time progresses.

図1によれば、静止画像及び字幕文字列を上下方向(第1の方向)に並べ、その静止画像が、時間進行に伴って左右方向(第2の方向)に滑動的に移動して表示される(スムーススクロール)。また、複数の静止画像は、時間進行に伴って、右から左への方向へ流れて移動する。その画像に流れに沿って、字幕文字列も、右から左への方向へ移動する。   According to FIG. 1, a still image and a subtitle character string are arranged in the vertical direction (first direction), and the still image is slidably displayed in the left-right direction (second direction) as time progresses. (Smooth scroll). The plurality of still images flow and move from right to left as time progresses. The subtitle character string also moves from right to left along the flow of the image.

図1によれば、視聴者に注目させるべき画像及び字幕文字列は、ブラウザ画面の中央付近に表示され、且つ、ハイライトの枠で表示されている。これによって、視聴者は、注目すべき画像及び字幕文字列を認識しやすくなる。   According to FIG. 1, the image and subtitle character string that should be noticed by the viewer are displayed near the center of the browser screen and displayed with a highlight frame. This makes it easier for the viewer to recognize the image and subtitle character string to be noted.

注目すべき静止画像に対応する字幕文字列は、中央に表示され、ジャンプして移動するものであってもよい。また。静止画像と並行に同時に滑らかに移動するものであってもよい。   The subtitle character string corresponding to the still image to be noticed may be displayed at the center and jumped to move. Also. It may be one that moves smoothly in parallel with a still image.

尚、静止画像の移動速度は、ブラウザ画面上で視聴者に確認できるように表示されることも好ましい。   The moving speed of the still image is also preferably displayed on the browser screen so that it can be confirmed by the viewer.

図2は、本発明における第2の表示イメージである。   FIG. 2 is a second display image in the present invention.

図2によれば、静止画像及び字幕文字列が左右方向(第1の方向)に並べられ、その静止画像が、時間進行に伴って上下方向(第2の方向)に滑動的に移動して表示される。1つの静止画像の右横に、その画像に対応する字幕文字列が表示されている。また、複数の静止画像は、時間進行に伴って、下から上への方向へ流れて移動する。その画像に流れに沿って、字幕文字列も、下から上への方向へ移動する。勿論、静止画像及び字幕文字列は、逆に上から下への方向へ移動するものであってもよい。   According to FIG. 2, the still image and the subtitle character string are arranged in the left-right direction (first direction), and the still image moves slidably in the up-down direction (second direction) as time progresses. Is displayed. A subtitle character string corresponding to the image is displayed on the right side of one still image. In addition, the plurality of still images flow and move from the bottom to the top as time progresses. The subtitle character string also moves from bottom to top along the flow of the image. Of course, the still image and the subtitle character string may move in the direction from top to bottom.

図3は、本発明における表示装置の機能構成図である。   FIG. 3 is a functional configuration diagram of the display device according to the present invention.

図3によれば、表示装置1は、放送受信部101と、復調部102と、映像デコード部103と、字幕情報デコード部104と、音声デコード部105と、録画管理部106と、コンテンツ蓄積部107とを有する。   According to FIG. 3, the display device 1 includes a broadcast receiving unit 101, a demodulating unit 102, a video decoding unit 103, a caption information decoding unit 104, an audio decoding unit 105, a recording management unit 106, and a content storage unit. 107.

放送受信部101は、デジタル放送信号をアンテナ又は通信インタフェースによって受信し、1つのチャネルの放送信号を復調部102へ出力する。チャネルの選択は、視聴者の選択に基づく。復調部102は、その放送信号を復調する。そして、映像データは映像デコード部103へ出力され、字幕情報データは字幕情報デコード部104へ出力され、音声データは音声デコード部105へ出力される。映像デコード部103は映像データを復号し、字幕情報デコード部104は字幕情報データを復号し、音声デコード部105は音声データを復号する。復号された映像データ、字幕情報データ及び音声データは、録画管理部106へ出力される。録画管理部106は、映像データ、字幕情報データ及び音声データを1つのコンテンツとして、コンテンツ蓄積部107へ蓄積する。コンテンツ蓄積部107は、ハードディスク装置のような大容量の記録デバイスである。   The broadcast receiving unit 101 receives a digital broadcast signal through an antenna or a communication interface, and outputs a broadcast signal of one channel to the demodulation unit 102. Channel selection is based on viewer selection. The demodulator 102 demodulates the broadcast signal. The video data is output to the video decoding unit 103, the caption information data is output to the caption information decoding unit 104, and the audio data is output to the audio decoding unit 105. The video decoding unit 103 decodes video data, the subtitle information decoding unit 104 decodes subtitle information data, and the audio decoding unit 105 decodes audio data. The decoded video data, caption information data, and audio data are output to the recording management unit 106. The recording management unit 106 stores the video data, caption information data, and audio data as one content in the content storage unit 107. The content storage unit 107 is a large-capacity recording device such as a hard disk device.

尚、前述した機能構成部101〜106は、本発明における必須構成要素ではない。本発明によれば、コンテンツ蓄積部107が、要約コンテンツを生成するために、映像データ及び字幕情報データを含む少なくとも1つの放送コンテンツを蓄積していることを要する。   The functional components 101 to 106 described above are not essential components in the present invention. According to the present invention, the content storage unit 107 needs to store at least one broadcast content including video data and caption information data in order to generate summary content.

また、図3によれば、表示装置1は、字幕文字列抽出部111と、映像抽出部112と、画像抽出部113と、表示時間決定部114と、要約コンテンツ蓄積部115と、表示制御部121と、ディスプレイ部122とを有する。ディスプレイ121以外のこれら機能構成部は、表示装置に搭載されたコンピュータを機能させるプログラムを実行することによって実現される。また、以下で説明する機能構成部は、要約コンテンツを表示する表示装置における表示方法として、時系列に表されている。   Further, according to FIG. 3, the display device 1 includes a subtitle character string extraction unit 111, a video extraction unit 112, an image extraction unit 113, a display time determination unit 114, a summary content storage unit 115, and a display control unit. 121 and a display unit 122. These functional components other than the display 121 are realized by executing a program that causes a computer mounted on the display device to function. In addition, the functional configuration unit described below is represented in time series as a display method in a display device that displays summary content.

尚、図4は、静止画像と字幕文字列との対応関係を表す説明図である。以下では、図4は、図3と共に説明される。   FIG. 4 is an explanatory diagram showing the correspondence between still images and subtitle character strings. In the following, FIG. 4 is described in conjunction with FIG.

字幕文字列抽出部111は、コンテンツ蓄積部107から1つの放送コンテンツを取得し、字幕文字列の単位を抽出する。図4(b)は、字幕文字列の単位を表す。字幕文字列は、2秒程度の短い間隔の映像データで検出される場合もあれば、10秒以上の長い間隔の映像データで検出される場合もある。   The subtitle character string extraction unit 111 acquires one broadcast content from the content storage unit 107 and extracts a unit of the subtitle character string. FIG. 4B shows a unit of a caption character string. The subtitle character string may be detected by video data having a short interval of about 2 seconds, or may be detected by video data having a long interval of 10 seconds or more.

映像抽出部112は、コンテンツ蓄積部107から1つの放送コンテンツを取得すると共に、字幕文字列抽出部111から字幕文字列の検出タイミングを入力する。図4(a)は映像データのフレームを表す。映像抽出部112は、図4(a)及び図4(b)の関係を検出する。   The video extraction unit 112 acquires one broadcast content from the content storage unit 107 and inputs the detection timing of the subtitle character string from the subtitle character string extraction unit 111. FIG. 4A shows a frame of video data. The video extraction unit 112 detects the relationship shown in FIGS. 4 (a) and 4 (b).

図4によれば、フレームFを再生する際に字幕文字列Cが検出され、その後、フレームFを再生する際に字幕文字列Cが検出されている。この場合、1つの字幕文字列Cに、複数のフレームF〜Fが対応付けられる。視聴者に対して、ディスプレイは、複数のフレームF〜Fの再生中に、字幕文字列Cを重畳して表示する。図4によれば、次も同様に、ディスプレイは、複数のフレームF〜F13の再生中に、字幕文字列Cを重畳して表示する。 According to FIG. 4, the subtitle character string C 1 is detected when the frame F 1 is reproduced, and then the subtitle character string C 2 is detected when the frame F 7 is reproduced. In this case, a plurality of frames F 1 to F 6 are associated with one caption character string C 1 . To the viewer, the display, during playback of a plurality of frames F 1 to F 6, and displays the superimposed subtitle string C 1. According to FIG. 4, the following likewise, the display, during the playback of a plurality of frames F 7 to F 13, and displays the superimposed subtitle string C 2.

画像抽出部113は、字幕文字列の単位に基づく映像データのフレームの中から、1つの画像を抽出する。一般的に、字幕文字列は、映像の進行よりも少し早いタイミングで表示される。但し、生放送番組等では、字幕文字列の方が映像よりも遅く表示される場合もある。そのために、映像の進行と字幕文字列の進行とが必ずしも一致していない。字幕文字列に対して、できる限り適切な静止画像を抽出するために、図4(c)によれば、真ん中の画像が選択されている。勿論、例えば1番目の画像を選択するものであってもよいし、ランダムに選択するものであってもよい。   The image extraction unit 113 extracts one image from a frame of video data based on a subtitle character string unit. In general, a subtitle character string is displayed at a timing slightly earlier than the progress of a video. However, in live broadcast programs, subtitle character strings may be displayed later than video. For this reason, the progress of the video and the progress of the subtitle character string do not necessarily match. In order to extract a still image as appropriate as possible for the subtitle character string, the middle image is selected according to FIG. 4C. Of course, for example, the first image may be selected or may be selected at random.

表示時間決定部114は、字幕文字列の単位毎に、その文字数に応じて、対応する静止画像の表示時間を決定する。本発明によれば、表示時間は、以下の式によって表される。
表示時間(秒)=字幕文字数×S+B
S:1文字当たりの表示時間(例えば1文字当たり0.1秒)
B:最小表示時間(字幕文字数が0でも表示すべき最小時間:例えば2秒)
最小表示時間Bによって、視聴者から見て、表示時間が短くなりすぎることによる視覚的な不快感がないようにする。
The display time determination unit 114 determines the display time of the corresponding still image according to the number of characters for each subtitle character string unit. According to the present invention, the display time is represented by the following equation.
Display time (seconds) = number of subtitle characters x S + B
S: Display time per character (for example, 0.1 seconds per character)
B: Minimum display time (minimum time to be displayed even when the number of subtitle characters is 0: 2 seconds, for example)
The minimum display time B prevents visual discomfort caused by the display time being too short when viewed from the viewer.

表示制御部121は、静止画像及び字幕文字列を第1の方向に並べ、その静止画像を時間進行に伴って第2の方向に滑動的に移動させて表示する(スムーススクロール)。また、表示制御部121は、少なくとも3つ以上の静止画像及び字幕文字列を、時間進行に伴って第2の方向に滑動的に移動しながら表示する。表示領域の表示中央範囲に第2の静止画像及び字幕文字列を表示し、当該表示中央範囲の前方に時間的過去の第1の静止画像及び字幕文字列を表示し、当該表示中央範囲の後方に時間的未来の第3の静止画像及び字幕文字列を表示する。ここで、表示領域の表示中央範囲に表示される第2の静止画像及び字幕文字列は、「フォーカス画像」「フォーカス字幕」を意味する。   The display control unit 121 arranges the still image and the caption character string in the first direction, and slides and displays the still image in the second direction as time progresses (smooth scrolling). The display control unit 121 displays at least three or more still images and subtitle character strings while sliding in the second direction as time progresses. The second still image and the caption character string are displayed in the display center range of the display area, the first still image and the caption character string in the past in time are displayed in front of the display center range, and behind the display center range. The third still image and subtitle character string of the temporal future are displayed. Here, the second still image and the caption character string displayed in the display center range of the display area mean “focus image” and “focus caption”.

表示制御部121は、表示領域の表示中央範囲に表示されているフォーカス画像及びフォーカス字幕を、ハイライトによって視覚的に強調して表示する。例えば、目立つような枠色(例えばオレンジ)を表示することも好ましい。   The display control unit 121 visually highlights and displays the focus image and the focus subtitle displayed in the display center range of the display area. For example, it is also preferable to display a conspicuous frame color (for example, orange).

逆に、表示制御部121は、表示領域の表示中央範囲外に表示されている第1の静止画像及び字幕文字列及び第3の静止画像及び字幕文字列を、コントラストを下げることによって視覚的に目立たないように表示するものであってもよい。例えば、第1の静止画像及び字幕文字列と第3の静止画像及び字幕文字列とを「コントラスト:−40%」「ぼかし:2.5ポイント」で表示することも好ましい。また、字幕文字列は、文字を薄い色で表示することも好ましい。   Conversely, the display control unit 121 visually reduces the first still image, subtitle character string, and third still image and subtitle character string displayed outside the display center range of the display area by reducing the contrast. You may display so that it may not stand out. For example, it is also preferable to display the first still image and subtitle character string and the third still image and subtitle character string with “contrast: −40%” and “blur: 2.5 points”. In the subtitle character string, it is also preferable to display characters in a light color.

そして、表示制御部121は、静止画像毎に、その表示時間だけ、表示領域の表示中央範囲L内に表示されるべく、第2の方向への移動速度を可変制御する。第2の方向への移動速度は、表示領域の表示中央範囲における距離から、表示時間で除算することによって決定される。   The display control unit 121 variably controls the moving speed in the second direction so that each still image is displayed within the display center range L of the display area for the display time. The moving speed in the second direction is determined by dividing by the display time from the distance in the display center range of the display area.

図5〜図8は、時間経過に伴う表示イメージを表し、静止画像の列と、字幕文字列の列とが並べて表示されている。複数の画像は、時間進行に伴って、右から左への方向へ流れて移動する。その画像に流れに沿って、字幕文字列も、右から左への方向へ移動する。   5 to 8 show display images over time, and a still image column and a subtitle character string column are displayed side by side. A plurality of images flow and move from right to left as time progresses. The subtitle character string also moves from right to left along the flow of the image.

また、表示領域には、表示領域の中心xを中心とする表示中央範囲Lが表される。フォーカス画像は、その表示時間の間、表示中央範囲Lを移動する。
表示中央範囲L: x+L/2 <- x -> x−L/2
The display area is represented a display center range L around the center x 0 of the display area. The focus image moves in the display center range L during the display time.
Display center range L: x 0 + L / 2 <-x 0- > x 0 -L / 2

表示中央範囲Lは、ピクセル数で表される。画面サイズは固定であるために、ピクセル数Dは、プログラム的に固定値となる。画面の解像度が1820×1080である場合、D=360(ピクセル)が適当である。一方で、フォーカス画像は、例えばJPEGサイズ最大240×180である場合、1.4倍のサイズ336×252に拡大することも好ましい。   The display center range L is represented by the number of pixels. Since the screen size is fixed, the number of pixels D is a fixed value programmatically. When the screen resolution is 1820 × 1080, D = 360 (pixels) is appropriate. On the other hand, for example, when the JPEG size is 240 × 180 at the maximum, the focus image is preferably enlarged to 1.4 times the size 336 × 252.

表示中央範囲Lの移動速度は、以下の式によって表される。
移動速度(ピクセル/秒)=表示中央範囲D(ピクセル)/表示時間(秒)
The moving speed of the display center range L is expressed by the following equation.
Movement speed (pixel / second) = display center range D (pixel) / display time (second)

また、表示領域の表示中央範囲に表示される画像が、第1の画像から第2の画像へ切り替わる際に、第1の画像の表示時間の中の終了所定時間範囲と、第2の画像の表示時間の中の開始所定時間範囲との間で、第1の画像の表示時間に基づく第1の移動速度から、第2の表示時間に基づく第2の移動速度へ可変制御される。   In addition, when the image displayed in the display center range of the display area is switched from the first image to the second image, the end predetermined time range in the display time of the first image, and the second image The first moving speed based on the display time of the first image is variably controlled from the first moving speed based on the display time of the first image within a predetermined start time range in the display time.

更に、表示時間は、視聴者の所望設定によって、以下の式のように表されることも好ましい。
表示時間(秒)=F・(字幕文字数×S+B)
F:加速・減速定数(例えば0.5〜1.5)
加速・減速定数Fは、例えば視聴者が、要約コンテンツを高速に閲覧したい場合には1以下に設定する。逆に、視聴者が、要約コンテンツをゆっくり閲覧したい場合には1以上に設定する。
Furthermore, it is preferable that the display time is expressed by the following equation depending on the desired setting of the viewer.
Display time (seconds) = F. (Number of subtitle characters x S + B)
F: Acceleration / deceleration constant (for example, 0.5 to 1.5)
The acceleration / deceleration constant F is set to 1 or less, for example, when the viewer wants to browse summary content at high speed. Conversely, when the viewer wants to browse the summary content slowly, it is set to 1 or more.

図5は、第1の時刻及び第2の時刻における表示イメージである。   FIG. 5 is a display image at the first time and the second time.

第1の時刻tによれば、静止画像Fが表示中央範囲L内に表示されている。静止画像Fの表示時間は、字幕文字数に基づいてT=3秒に決定されている。このとき、静止画像の列が、右から左の方向へ移動する移動速度は、以下の式によって制御される。
移動速度(ピクセル/秒)=表示中央範囲のピクセル数D/表示時間T
このとき、静止画像Fに対応する字幕文字列も、表示中央範囲L内に表示されている。
According to a first time t 1, the still image F 3 is displayed on the display center range L. The display time of the still image F 3 is determined as T 1 = 3 seconds based on the number of subtitle characters. At this time, the moving speed at which the sequence of still images moves from right to left is controlled by the following equation.
Movement speed (pixels / second) = number of pixels in the display center range D / display time T 1
In this case, the subtitle character string corresponding to the still image F 3 are also displayed in the display center range L.

表示中央範囲のピクセル数Dが360ピクセルとすると、移動速度は、以下のようになる。
移動速度=D/T
=360ピクセル/3秒
=120ピクセル/秒
When the number of pixels D in the display center range is 360 pixels, the moving speed is as follows.
Movement speed = D / T 1
= 360 pixels / 3 seconds
= 120 pixels / second

第2の時刻tによれば、静止画像の列が移動し、静止画像Fが、表示中央範囲Lに表示すべき終了所定時間範囲(例えば表示時間における終わり10%)に達したとする。
終了所定時間範囲=表示時間T×所定割合(10%)
=3秒×10%
=0.3秒
According to the second time t 2, it is assumed that the sequence of still images has moved and the still image F 3 has reached a predetermined end time range to be displayed in the display center range L (for example, the end 10% of the display time). .
End predetermined time range = display time T 1 × predetermined ratio (10%)
= 3 seconds x 10%
= 0.3 seconds

終了所定時間範囲0.3秒について、移動速度は、以下のように可変制御される。
移動速度=D/T -> (D/T+D/T)/2
静止画像の列は、静止画像Fの表示時間に対する移動速度から、静止画像F11の表示時間に対する移動速度へ、減速される。静止画像Fの中心が、表示中央範囲Lの外側境界と一致した時、移動速度(D/T+D/T)/2になる。終了所定時間範囲では、静止画像Fに対応する字幕文字列が、表示中央範囲L内に表示される。
For the end predetermined time range of 0.3 seconds, the moving speed is variably controlled as follows.
Movement speed = D / T 1- > (D / T 1 + D / T 2 ) / 2
Column of the still image, the moving speed with respect to the display time of the still image F 3, the moving speed with respect to the display time of the still image F 11, are decelerated. When the center of the still image F 3 coincides with the outer boundary of the display center range L, the moving speed becomes (D / T 1 + D / T 2 ) / 2. In the end the predetermined time range, subtitle character string corresponding to the still image F 3 is displayed on the display center range L.

図5によれば、静止画像Fの表示時間はT=3秒であり、静止画像F11の表示時間はT=4秒である。このとき、移動速度は、以下のように減速される。
移動速度=D/T -> (D/T+D/T)/2
=120 -> (360/3+360/4)/2
=120ピクセル/秒 -> 105ピクセル/秒
According to FIG. 5, the display time of the still image F 3 is T 1 = 3 seconds, and the display time of the still image F 11 is T 2 = 4 seconds. At this time, the moving speed is decelerated as follows.
Movement speed = D / T 1- > (D / T 1 + D / T 2 ) / 2
= 120-> (360/3 + 360/4) / 2
= 120 pixels / second-> 105 pixels / second

図6は、第3の時刻及び第4の時刻における表示イメージである。   FIG. 6 shows display images at the third time and the fourth time.

第3の時刻tによれば、静止画像Fの中心x及び静止画像F11の中心xが、表示中央範囲Lの外側境界と一致する。このとき、このとき、静止画像の列が、右から左の方向へ移動する移動速度は、以下の式によって制御される。
移動速度=(D/T+D/T)/2
=105ピクセル/秒
このとき、まだ、静止画像Fに対応する字幕文字列が、表示中央範囲L内に表示されている。
According to a third time t 3, the center x 0 of the center x 0, and the still image F 11 in the still image F 3 matches the outer boundary of the display central region L. At this time, the moving speed at which the sequence of still images moves from the right to the left is controlled by the following equation.
Movement speed = (D / T 1 + D / T 2 ) / 2
= 105 pixels / sec at this time, still, subtitle character string corresponding to the still image F 3 is displayed in the display center range L.

第4の時刻tによれば、静止画像の列が移動し、静止画像F11が、表示中央範囲Lに表示すべき開始所定時間範囲(例えば表示時間における始め10%)に達したとする。
終了所定時間範囲=表示時間T×所定割合(10%)
=4×10%
=0.4秒
According to a fourth time t 4, the column of the still image is moved, the still image F 11 is, and reaches the display center range L start a predetermined time range to be displayed (for example, 10% beginning at display time) .
End predetermined time range = display time T 2 × predetermined ratio (10%)
= 4 x 10%
= 0.4 seconds

このとき、静止画像の列は、開始所定時間範囲0.4秒について、以下のように、移動速度を可変制御する。
移動速度=(D/T+D/T)/2 -> D/T
静止画像の列は、静止画像Fの表示時間に対する移動速度から、静止画像F11の表示時間に対する移動速度へ、減速される。終了所定時間範囲では、静止画像Fに対応する字幕文字列が、表示中央範囲L内に表示される。
At this time, the moving speed of the sequence of still images is variably controlled as follows for a predetermined start time range of 0.4 seconds.
Movement speed = (D / T 1 + D / T 2 ) / 2-> D / T 2
Column of the still image, the moving speed with respect to the display time of the still image F 3, the moving speed with respect to the display time of the still image F 11, are decelerated. In the end the predetermined time range, subtitle character string corresponding to the still image F 3 is displayed on the display center range L.

図5によれば、静止画像Fの表示時間はT=3秒であり、静止画像F11の表示時間はT=4秒である。このとき、移動速度は、以下のように減速される。
移動速度=(D/T+D/T)/2 -> D/T
=(360/3+360/4)/2 -> 90
=105ピクセル/秒->90ピクセル/秒
According to FIG. 5, the display time of the still image F 3 is T 1 = 3 seconds, and the display time of the still image F 11 is T 2 = 4 seconds. At this time, the moving speed is decelerated as follows.
Movement speed = (D / T 1 + D / T 2 ) / 2-> D / T 2
= (360/3 + 360/4) / 2-> 90
= 105 pixels / second-> 90 pixels / second

図7は、第5の時刻及び第6の時刻における表示イメージである。   FIG. 7 is a display image at the fifth time and the sixth time.

第5の時刻tによれば、静止画像F11が表示中央範囲L内に表示されている。このとき、移動速度は、以下のようになる。
移動速度=D/T
=360ピクセル/4秒
=90ピクセル/秒
このとき、静止画像Fに対応する字幕文字列も、表示中央範囲L内に表示されている。
According to the time t 5 of the fifth, still image F 11 is displayed in the display center range L. At this time, the moving speed is as follows.
Movement speed = D / T 2
= 360 pixels / 4 seconds
= 90 pixels / sec at this time, subtitle character string corresponding to the still image F 3 are also displayed in the display center range L.

第6の時刻tによれば、静止画像F11が、終了所定時間範囲(例えば表示時間における終わり10%)に達したとする。
終了所定時間範囲=表示時間T×所定割合(10%)
=4秒×10%
=0.4秒
According to the time t 6 of the sixth, still image F 11 is, and reaches the end a predetermined time range (for example 10% at the end of the display time).
End predetermined time range = display time T 2 × predetermined ratio (10%)
= 4 seconds x 10%
= 0.4 seconds

終了所定時間範囲0.4秒について、移動速度は、以下のように加速される。
移動速度=D/T -> (D/T+D/T)/2
=90 -> (360/4+360/3)/2
=90ピクセル/秒 -> 105ピクセル/秒
For the end predetermined time range of 0.4 seconds, the moving speed is accelerated as follows.
Movement speed = D / T 2- > (D / T 2 + D / T 3 ) / 2
= 90-> (360/4 + 360/3) / 2
= 90 pixels / second-> 105 pixels / second

図8は、第7の時刻及び第8の時刻における表示イメージである。   FIG. 8 shows display images at the seventh time and the eighth time.

第7の時刻tによれば、静止画像F11の中心x及び静止画像F18の中心xが、表示中央範囲Lの外側境界と一致する。このとき、移動速度は、以下の式によって制御される。
移動速度=(D/T+D/T)/2
=105ピクセル/秒
このとき、まだ、静止画像F11に対応する字幕文字列が、表示中央範囲L内に表示されている。
According to the time t 7 of the seventh, the center x 0 of the center x 0, and the still image F 18 in the still image F 11 matches the outer boundary of the display central region L. At this time, the moving speed is controlled by the following equation.
Movement speed = (D / T 1 + D / T 2 ) / 2
= 105 pixels / sec at this time, still, subtitle character string corresponding to the still image F 11 is displayed in the display center range L.

第8の時刻tによれば、静止画像の列が移動し、静止画像F18が、表示中央範囲Lに表示すべき開始所定時間範囲(例えば表示時間における始め10%)に達したとする。
終了所定時間範囲=表示時間T×所定割合(10%)
=3×10%
=0.3秒
According to the time t 8 the eighth row of the still image is moved, the still image F 18 is, and reaches the display center range L start a predetermined time range to be displayed (for example, 10% beginning at display time) .
End predetermined time range = display time T 3 × predetermined ratio (10%)
= 3 x 10%
= 0.3 seconds

このとき、静止画像の列は、開始所定時間範囲0.3秒について、移動速度は、以下のように加速される。
移動速度=(D/T+D/T)/2 -> D/T
=(360/4+360/2)/2 -> 120
=105ピクセル/秒->120ピクセル/秒
At this time, the movement speed of the sequence of still images is accelerated as follows for a predetermined start time range of 0.3 seconds.
Movement speed = (D / T 2 + D / T 3 ) / 2-> D / T 3
= (360/4 + 360/2) / 2-> 120
= 105 pixels / second-> 120 pixels / second

前述した図5〜図8によれば、静止画像毎に、その表示時間だけ、表示領域の表示中央範囲に表示されるべく、第2の方向への移動速度が可変制御される。   5 to 8, the moving speed in the second direction is variably controlled so that each still image is displayed in the display center range of the display area for the display time.

以上、詳細に説明したように、本発明の表示装置、方法及びプログラムによれば、静止画像及び字幕文字列を含む要約コンテンツを、視聴者から見て、その字幕文字列の可読性を高めると共に、静止画像の表示を視覚的に自然に切り替えることができる。   As described above in detail, according to the display device, method, and program of the present invention, the summary content including the still image and the caption character string is viewed from the viewer, and the readability of the caption character string is improved. Still image display can be switched visually and naturally.

前述した本発明の種々の実施形態について、本発明の技術思想及び見地の範囲の種々の変更、修正及び省略は、当業者によれば容易に行うことができる。前述の説明はあくまで例であって、何ら制約しようとするものではない。本発明は、特許請求の範囲及びその均等物として限定するものにのみ制約される。   Various changes, modifications, and omissions of the above-described various embodiments of the present invention can be easily made by those skilled in the art. The above description is merely an example, and is not intended to be restrictive. The invention is limited only as defined in the following claims and the equivalents thereto.

1 表示装置
101 放送受信部
102 復調部
103 映像デコード部
104 字幕情報デコード部
105 音声デコード部
106 録画管理部
107 コンテンツ蓄積部
111 字幕文字列抽出部
112 映像抽出部
113 画像抽出部
114 表示時間決定部
115 要約コンテンツ蓄積部
121 表示制御部
122 ディスプレイ部
DESCRIPTION OF SYMBOLS 1 Display apparatus 101 Broadcast receiving part 102 Demodulating part 103 Video decoding part 104 Subtitle information decoding part 105 Audio | voice decoding part 106 Recording management part 107 Content storage part 111 Subtitle character string extraction part 112 Video extraction part 113 Image extraction part 114 Display time determination part 115 summary content storage unit 121 display control unit 122 display unit

Claims (7)

映像及び字幕文字列を含むデジタル放送コンテンツに基づく要約コンテンツを表示する表示装置であって、
前記デジタル放送コンテンツから、前記字幕文字列の単位を抽出する字幕文字列抽出手段と、
前記デジタル放送コンテンツから、前記字幕文字列の単位毎に、前記映像を抽出する映像抽出手段と、
前記字幕文字列の単位に基づく前記映像の中から、1つの静止画像を抽出する画像抽出手段と、
前記字幕文字列の単位毎に、その文字数に応じて、前記静止画像の表示時間を決定する表示時間決定手段と、
前記静止画像を、時間経過に伴って進行方向に滑動的に移動させると共に、表示領域に静止画像1枚程度の前記進行方向の長さLで指定された表示中央範囲に通過させ、当該表示中央範囲の前記進行方向後方に時間的未来の静止画像を表示する表示制御手段と
を有し、
前記表示制御手段について、前記進行方向への移動速度は、前記表示中央範囲の長さLを、当該表示中央範囲内へ前記進行方向後方から入り始めた静止画像の当該表示時間で除算した値とすることを特徴とする表示装置。
A display device for displaying summary content based on digital broadcast content including video and subtitle character strings,
Subtitle character string extraction means for extracting a unit of the subtitle character string from the digital broadcast content;
Video extraction means for extracting the video for each unit of the subtitle character string from the digital broadcast content;
Image extracting means for extracting one still image from the video based on the unit of the subtitle character string;
Display time determining means for determining the display time of the still image according to the number of characters for each unit of the subtitle character string;
The still image is slidably moved in the advancing direction as time passes, and the display area is passed through the display center range designated by the length L in the advancing direction of about one still image. Display control means for displaying a still image of the temporal future behind the direction of travel of the central range ,
For the display control means , the moving speed in the traveling direction is a value obtained by dividing the length L of the display central range by the display time of the still image that has started to enter the display central range from the rear in the traveling direction. A display device characterized by:
前記表示時間決定手段は、前記表示時間を、前記文字数が所定数以下である場合に、少なくとも所定最小時間に決定することを特徴とする請求項に記載の表示装置。 The display device according to claim 1 , wherein the display time determining unit determines the display time to be at least a predetermined minimum time when the number of characters is equal to or less than a predetermined number. 前記表示制御手段は、前記表示領域の表示中央範囲に表示される静止画像が、第1の画像から第2の画像へ切り替わる際に、第1の画像の表示時間の中の終了所定時間範囲と、第2の画像の表示時間の中の開始所定時間範囲との間で、第1の画像の表示時間に基づく第1の移動速度から、第2の表示時間に基づく第2の移動速度へ変更することを特徴とする請求項1又は2に記載の表示装置。 When the still image displayed in the display center range of the display area is switched from the first image to the second image, the display control means is configured to determine a predetermined end time range within the display time of the first image. The first movement speed based on the display time of the first image is changed from the first movement speed based on the display time of the first image to the second movement speed based on the second display time within a predetermined start time range in the display time of the second image. The display device according to claim 1, wherein the display device is a display device. 前記表示制御手段は、前記表示領域の表示中央範囲に表示されている第2の静止画像及び字幕文字列を、ハイライトによって視覚的に強調して表示することを特徴とする請求項1から3のいずれか1項に記載の要約コンテンツを表示する表示装置。 Wherein the display control unit, 3 a second still image and the subtitle text displayed on the display central area of the display area, from claim 1, wherein the displaying visually emphasized by highlighting A display device that displays the summary content according to any one of the above. 前記表示制御手段は、前記表示領域の表示中央範囲外に表示されている第1の静止画像及び字幕文字列及び第3の静止画像及び字幕文字列を、コントラストを下げることによって視覚的に目立たないように表示することを特徴とする請求項1から3のいずれか1項に記載の表示装置。 The display control means is visually inconspicuous by reducing the contrast of the first still image and subtitle character string and the third still image and subtitle character string displayed outside the display center range of the display area. Viewing apparatus according to any one of claims 1 to 3, characterized in that the display as. 映像及び字幕文字列を含むデジタル放送コンテンツに基づく要約コンテンツを表示する表示装置に搭載されたコンピュータを機能させるプログラムであって、
前記デジタル放送コンテンツから、前記字幕文字列の単位を抽出する字幕文字列抽出手段と、
前記デジタル放送コンテンツから、前記字幕文字列の単位毎に、前記映像を抽出する映像抽出手段と、
前記字幕文字列の単位に基づく前記映像の中から、1つの静止画像を抽出する画像抽出手段と、
前記字幕文字列の単位毎に、その文字数に応じて、前記静止画像の表示時間を決定する表示時間決定手段と、
前記静止画像を、時間経過に伴って進行方向に滑動的に移動させると共に、表示領域に静止画像1枚程度の前記進行方向の長さLで指定された表示中央範囲に通過させ、当該表示中央範囲の前記進行方向後方に時間的未来の静止画像を表示する表示制御手段と
を有し、
前記表示制御手段について、前記進行方向への移動速度は、前記表示中央範囲の長さLを、当該表示中央範囲内へ前記進行方向後方から入り始めた静止画像の当該表示時間で除算した値とする
ようにコンピュータを機能させることを特徴とする表示プログラム。
A program for causing a computer mounted on a display device that displays summary content based on digital broadcast content including video and subtitle character strings to function.
Subtitle character string extraction means for extracting a unit of the subtitle character string from the digital broadcast content;
Video extraction means for extracting the video for each unit of the subtitle character string from the digital broadcast content;
Image extracting means for extracting one still image from the video based on the unit of the subtitle character string;
Display time determining means for determining the display time of the still image according to the number of characters for each unit of the subtitle character string;
The still image is slidably moved in the advancing direction as time passes, and the display area is passed through the display center range designated by the length L in the advancing direction of about one still image. Display control means for displaying a still image of the temporal future behind the direction of travel of the central range ,
For the display control means , the moving speed in the traveling direction is a value obtained by dividing the length L of the display central range by the display time of the still image that has started to enter the display central range from the rear in the traveling direction. A display program for causing a computer to function as described above.
映像及び字幕文字列を含むデジタル放送コンテンツに基づく要約コンテンツを表示装置に表示する表示方法であって、
前記デジタル放送コンテンツから、前記字幕文字列の単位を抽出する第1のステップと、
前記デジタル放送コンテンツから、前記字幕文字列の単位毎に、前記映像を抽出する第2のステップと、
前記字幕文字列の単位に基づく前記映像の中から、1つの静止画像を抽出する第3のステップと、
前記字幕文字列の単位毎に、その文字数に応じて、前記静止画像の表示時間を決定する第4のステップと、
前記静止画像を、時間経過に伴って進行方向に滑動的に移動させると共に、表示領域に静止画像1枚程度の前記進行方向の長さLで指定された表示中央範囲に通過させ、当該表示中央範囲の前記進行方向後方に時間的未来の静止画像を表示する第5のステップ
を有し、
第5のステップについて、前記進行方向への移動速度は、前記表示中央範囲の長さLを、当該表示中央範囲内へ前記進行方向後方から入り始めた静止画像の当該表示時間で除算した値とする
ことを特徴とする表示方法。
A display method for displaying summary content on a display device based on digital broadcast content including video and subtitle character strings,
A first step of extracting a unit of the subtitle character string from the digital broadcast content;
A second step of extracting the video from the digital broadcast content for each unit of the subtitle character string;
A third step of extracting one still image from the video based on the unit of the subtitle character string;
A fourth step of determining a display time of the still image according to the number of characters for each unit of the subtitle character string;
The still image is slidably moved in the advancing direction as time passes, and the display area is passed through the display center range designated by the length L in the advancing direction of about one still image. A fifth step of displaying a still-time future image behind the direction of travel of the central range ;
Regarding the fifth step, the moving speed in the traveling direction is a value obtained by dividing the length L of the display central range by the display time of the still image that has started to enter the display central range from the rear in the traveling direction. A display method characterized by:
JP2009211593A 2009-09-14 2009-09-14 Display device, method and program for displaying summary content Active JP5232744B2 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2009211593A JP5232744B2 (en) 2009-09-14 2009-09-14 Display device, method and program for displaying summary content

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2009211593A JP5232744B2 (en) 2009-09-14 2009-09-14 Display device, method and program for displaying summary content

Publications (2)

Publication Number Publication Date
JP2011061670A JP2011061670A (en) 2011-03-24
JP5232744B2 true JP5232744B2 (en) 2013-07-10

Family

ID=43948759

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2009211593A Active JP5232744B2 (en) 2009-09-14 2009-09-14 Display device, method and program for displaying summary content

Country Status (1)

Country Link
JP (1) JP5232744B2 (en)

Families Citing this family (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2015026913A (en) * 2013-07-24 2015-02-05 シャープ株式会社 Printing data generation apparatus, image formation apparatus, printing data generation method, program, and recording medium
CN103634605B (en) 2013-12-04 2017-02-15 百度在线网络技术(北京)有限公司 Processing method and device for video images

Family Cites Families (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP4846674B2 (en) * 2007-08-14 2011-12-28 日本放送協会 Still image extraction apparatus and still image extraction program
JP5173337B2 (en) * 2007-09-18 2013-04-03 Kddi株式会社 Abstract content generation apparatus and computer program

Also Published As

Publication number Publication date
JP2011061670A (en) 2011-03-24

Similar Documents

Publication Publication Date Title
JP6419306B2 (en) Abstract content service method and broadcast receiving apparatus
JP5173337B2 (en) Abstract content generation apparatus and computer program
CN101197984B (en) Image processing apparatus, image processing method
JP5321694B2 (en) System and method for providing closed captioning to 3D images
JP4616274B2 (en) Still image content creation device with caption, still image content creation program with caption, and still image content creation system with caption
JP5201692B2 (en) System and method for applying closed captions
TWI463870B (en) Method for displaying a video stream according to a customised format
US8330863B2 (en) Information presentation apparatus and information presentation method that display subtitles together with video
KR20160055813A (en) Gesture based interactive graphical user interface for video editing on smartphone/camera with touchscreen
JP5423425B2 (en) Image processing device
US20070079343A1 (en) Information processor and information processing method
KR20150056394A (en) Picture display device and operating method thereof
JP2013046198A (en) Television viewing apparatus
KR20130104215A (en) Method for adaptive and partial replacement of moving picture, and method of generating program moving picture including embedded advertisement image employing the same
JP5232744B2 (en) Display device, method and program for displaying summary content
JP2006270139A (en) Data reproducer and data reproducing method and system
KR20100135131A (en) Method of processing image in a display apparatus and the display apparatus
JP5027827B2 (en) Text reproduction device, text recording / reproduction device, text reproduction method, control program, and recording medium
KR101655804B1 (en) Image Display Device with 3D-Thumbnail and Operation Controlling Method for the Same
JP2009027430A (en) Moving picture reproducing apparatus
JP6363015B2 (en) Electronic device and display method
KR20150126359A (en) Method and apparatus for using gestures for shot effects
JP5163005B2 (en) Video signal reproducing apparatus, video signal processing apparatus, and video signal processing method
WO2009024966A2 (en) Method for adapting media for viewing on small display screens
JP2011249859A (en) Three-dimensional video display device and three-dimensional video display method

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20120220

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20121214

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20130104

A521 Written amendment

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20130214

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20130308

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20130325

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20160329

Year of fee payment: 3

R150 Certificate of patent or registration of utility model

Ref document number: 5232744

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150

Free format text: JAPANESE INTERMEDIATE CODE: R150