JP2009159125A

JP2009159125A - Reproducer for video image with caption, search result notifying method for reproducer for video image with caption, and program

Info

Publication number: JP2009159125A
Application number: JP2007333149A
Authority: JP
Inventors: Masaki Wakabayashi; 正樹若林; Tomoya Ozaki; 友哉尾崎; Mayumi Nakade; 真弓中出; Masahiro Yamazaki; 正裕山崎
Original assignee: Casio Hitachi Mobile Communications Co Ltd
Current assignee: Casio Hitachi Mobile Communications Co Ltd
Priority date: 2007-12-25
Filing date: 2007-12-25
Publication date: 2009-07-16

Abstract

<P>PROBLEM TO BE SOLVED: To prevent a user from overlooking of a desired scene. <P>SOLUTION: When a viewing mode with a caption list is selected, a display portion 21 displays a video image on a video image region, and displays a caption sentence on a caption region. In addition, the display portion 21 displays the caption sentence centering at a caption list on a caption list region. If a search word is contained in the displayed caption sentence, the display portion 21 notifies it to a user, by changing a color of the caption sentence displayed on the caption region and the caption list region and a background color so that they may become different from the surrounding color. When a usual viewing mode is selected, the display portion 21 changes color of the caption sentence displayed only on the caption region and background color so that they may become different from the surrounding color, since there is no caption list region. <P>COPYRIGHT: (C)2009,JPO&INPIT

Description

本発明は、字幕付き映像再生装置、字幕付き映像再生装置の検索結果通知方法及びプログラムに関するものである。 The present invention relates to a video playback device with captions, a search result notification method and a program for a video playback device with captions.

従来、字幕文を表示時刻が付与された状態でストリームから抽出し、ユーザが字幕文を選択したときに、その字幕文とその字幕文の表示時刻に対応する映像とを合成して表示する字幕付き映像再生装置がある（例えば、特許文献１参照）。
特開２００３−１８４９１号公報（第３頁、図１） Conventionally, subtitle text is extracted from a stream with a display time attached, and when the user selects the subtitle text, the subtitle text and the video corresponding to the display time of the subtitle text are combined and displayed. There is an attached video reproduction device (see, for example, Patent Document 1).
Japanese Patent Laying-Open No. 2003-18491 (page 3, FIG. 1)

しかし、従来の字幕付き映像再生装置では、検索語を入力して字幕文に含まれる語を検索した場合、検索語に一致する語が表示されていても、この語がユーザに通知されないため、ユーザが所望の場面を見逃してしまうおそれがある。このため、携帯電話１の視聴効率が低下する。 However, in the conventional video playback device with captions, when a search word is input and a word included in the caption text is searched, even if a word that matches the search word is displayed, this word is not notified to the user. The user may miss a desired scene. For this reason, the viewing efficiency of the mobile phone 1 is reduced.

本発明は、このような従来の問題点に鑑みてなされたもので、所望の場面の見逃しを防止することが可能な字幕付き映像再生装置、字幕付き映像再生装置の検索結果通知方法及びプログラムを提供することを目的とする。 The present invention has been made in view of such a conventional problem, and provides a video playback device with subtitles, a search result notification method and a program for a video playback device with subtitles that can prevent a desired scene from being overlooked. The purpose is to provide.

この目的を達成するため、本発明の第１の観点に係る字幕付き映像再生装置は、
映像とともに再生した字幕文を表示する表示手段と、
検索語の入力を受け付ける受付手段と、
前記受付手段が受け付けて入力された検索語を取得し、前記表示手段が表示した字幕文に、取得した検索語が含まれているか否かを判定する判定手段と、
前記表示手段が表示した前記字幕文に前記検索語が含まれていると前記判定手段が判定したとき、当該判定結果を示す通知を行う通知手段と、を備えたことを特徴とする。 In order to achieve this object, a video playback device with subtitles according to the first aspect of the present invention includes:
Display means for displaying the subtitle sentence reproduced together with the video;
A receiving means for receiving an input of a search term;
A determination unit that acquires the search term received and input by the reception unit, and determines whether or not the acquired search term is included in the subtitle sentence displayed by the display unit;
When the determination means determines that the search word is included in the subtitle sentence displayed by the display means, a notification means is provided for performing a notification indicating the determination result.

前記通知手段は、表示した前記字幕文に前記検索語が含まれていると前記判定手段が判定したとき、前記表示手段に表示された前記検索語を含む字幕文の色又は前記字幕文の背景色を変更することにより、前記通知を行うようにしてもよい。 The notification means, when the determination means determines that the search word is included in the displayed subtitle sentence, the color of the subtitle sentence including the search word displayed on the display means or the background of the subtitle sentence The notification may be performed by changing the color.

前記表示手段は、字幕領域と字幕リスト領域とに、再生した前記字幕文を表示するものであって、
前記通知手段は、表示した前記字幕文に前記検索語が含まれていると前記判定手段が判定したとき、前記表示手段の字幕領域及び字幕リスト領域の少なくとも１つの領域に表示された前記検索語を含む字幕文の色又は前記字幕文の背景色を変更することにより、前記通知を行うようにしてもよい。 The display means displays the reproduced subtitle sentence in a subtitle area and a subtitle list area,
The notification means displays the search word displayed in at least one of the subtitle area and the subtitle list area of the display means when the determination means determines that the search word is included in the displayed subtitle sentence. The notification may be performed by changing the color of the subtitle sentence including or the background color of the subtitle sentence.

筐体を振動させる振動手段と、音声を出力する音声出力手段と、の少なくとも１つを備え、
前記通知手段は、表示した前記字幕文に前記検索語が含まれていると前記判定手段が判定したとき、前記振動手段及び前記音声出力手段のうちの少なくとも１つを作動させることにより、前記通知を行うようにしてもよい。 Comprising at least one of vibration means for vibrating the housing and sound output means for outputting sound;
The notifying means activates at least one of the vibrating means and the audio output means when the determining means determines that the search word is included in the displayed subtitle sentence, thereby notifying the notification May be performed.

前記映像のデータと前記字幕文のデータとを含む放送信号を受信する受信手段と、
前記受信手段が受信した放送信号を解析して前記映像のデータと前記字幕文のデータとを取得するデータ取得手段と、を備え、
前記表示手段は、前記データ取得手段が取得した前記映像のデータと前記字幕文のデータとに基づいて、前記映像とともに再生した字幕文を表示するようにしてもよい。 Receiving means for receiving a broadcast signal including the video data and the caption text data;
Data acquisition means for analyzing the broadcast signal received by the reception means and acquiring the video data and the caption text data;
The display means may display the caption text reproduced together with the video based on the video data and the caption text data acquired by the data acquisition means.

前記データ取得手段が取得した前記映像のデータと前記字幕文のデータとを記憶する記憶手段と、を備え、
前記表示手段は、前記データ取得手段が取得して前記記憶手段に記憶された前記映像のデータと前記字幕文のデータとに基づいて、前記映像とともに再生した字幕文を表示するようにしてもよい。 Storage means for storing the video data and the caption text data acquired by the data acquisition means,
The display means may display the caption text reproduced together with the video based on the video data and the caption text data acquired by the data acquisition means and stored in the storage means. .

本発明の第２の観点に係る字幕付き映像再生装置の検索結果通知方法は、
映像とともに再生した字幕文を表示するステップと、
検索語の入力を受け付けるステップと、
入力された検索語を取得し、表示された字幕文に、取得した検索語が含まれているか否かを判定するステップと、
表示された前記字幕文に前記検索語が含まれていると判定したとき、当該判定結果を示す通知を行うステップと、を備えたことを特徴とする。 A search result notification method for a captioned video playback device according to a second aspect of the present invention includes:
Displaying subtitles played with the video;
Receiving a search term input;
Obtaining an input search word and determining whether or not the acquired search word is included in the displayed subtitle sentence;
And a step of notifying the determination result when it is determined that the search word is included in the displayed subtitle sentence.

本発明の第３の観点に係るプログラムは、
コンピュータに、
映像とともに再生した字幕文を表示させる手順、
入力された検索語を取得する手順、
映像とともに再生して表示された字幕文に、取得した検索語が含まれているか否かを判定する手順、
表示された前記字幕文に前記検索語が含まれていると判定したとき、当該判定結果を示す通知を行う手順、
を実行させるためのものである。 The program according to the third aspect of the present invention is:
On the computer,
The procedure to display the subtitle sentence played with the video,
To get the entered search terms,
A procedure for determining whether or not the retrieved search word is included in the subtitle sentence reproduced and displayed together with the video,
A procedure for performing a notification indicating the determination result when it is determined that the search word is included in the displayed subtitle sentence;
Is to execute.

本発明によれば、所望の場面の見逃しを防止することができる。 According to the present invention, it is possible to prevent a desired scene from being overlooked.

以下、本発明の実施形態に係る字幕付き映像再生装置を図面を参照して説明する。尚、本実施形態では、字幕付き映像再生装置を携帯電話として説明する。
（実施形態１）
本実施形態に係る携帯電話の構成を図１に示す。
本実施形態に係る携帯電話１は、アンテナ１１と、通信部１２と、マイク１３と、スピーカ１４と、アンテナ１５と、チューナ１６と、デコード部１７と、記憶部１８と、ＤＡＣ１９と、スピーカ２０と、表示部２１と、操作部２２と、制御部２３と、バス２４と、を備える。 Hereinafter, a captioned video playback apparatus according to an embodiment of the present invention will be described with reference to the drawings. In the present embodiment, the video playback device with captions is described as a mobile phone.
(Embodiment 1)
The configuration of the mobile phone according to the present embodiment is shown in FIG.
The cellular phone 1 according to this embodiment includes an antenna 11, a communication unit 12, a microphone 13, a speaker 14, an antenna 15, a tuner 16, a decoding unit 17, a storage unit 18, a DAC 19, and a speaker 20. A display unit 21, an operation unit 22, a control unit 23, and a bus 24.

図２は、この携帯電話１の外観を示す図であり、携帯電話１は、この図２に示すように、例えば、上側筐体１ａと下側筐体１ｂとに分かれた折り畳み型のものである。 FIG. 2 is a diagram showing the appearance of the cellular phone 1, and the cellular phone 1 is, for example, a folding type that is divided into an upper casing 1a and a lower casing 1b as shown in FIG. is there.

この携帯電話１は、字幕文と映像とを表示するとともに、字幕リストの表示が可能なものであり、字幕リストで選択された字幕文に基づいて映像を選択できるように構成されている。 The mobile phone 1 is capable of displaying a caption text and a video and displaying a caption list, and is configured to be able to select a video based on the caption text selected in the caption list.

また、この携帯電話１は、検索機能を備えており、検索語が、表示された字幕文に含まれている場合、この字幕文を判別できるように表示を変更して、表示された字幕文に検索語が含まれていることを示す判定結果をユーザに通知するように構成されている。 Further, the mobile phone 1 has a search function, and when the search word is included in the displayed subtitle sentence, the display is changed so that the subtitle sentence can be identified, and the displayed subtitle sentence is displayed. Is configured to notify the user of a determination result indicating that a search term is included in

図１に示すバス２４は、各部間で相互にデータを伝送するものである。制御部２３と、記憶部１８と、ＤＡＣ１９と、表示部２１とは、バス２４を介して接続される。 The bus 24 shown in FIG. 1 is used to transmit data to each other. The control unit 23, the storage unit 18, the DAC 19, and the display unit 21 are connected via a bus 24.

アンテナ１１は、基地局（図示せず）との間で通話音声、各種のデータ等の電波信号を送受信するものであり、図２に示すように、携帯電話１の上側筐体１ａの上部に設けられる。 The antenna 11 transmits and receives radio signals such as call voice and various data to and from a base station (not shown). As shown in FIG. Provided.

通信部１２は、アンテナ１１が送受信する電波信号の信号処理を行うものである。
マイク１３は、図２に示すように下側筐体１ｂに設けられ、通話時等に、音声を収集して音声信号に変換するものであり、変換した音声信号を通信部１２に供給する。 The communication unit 12 performs signal processing of radio signals transmitted and received by the antenna 11.
As shown in FIG. 2, the microphone 13 is provided in the lower housing 1 b and collects voice and converts it into a voice signal during a call or the like, and supplies the converted voice signal to the communication unit 12.

スピーカ１４は、図２に示すように上側筐体１ａに設けられ、通話時等において、音声信号に基づいて音声を出力するものである。 The speaker 14 is provided in the upper housing 1a as shown in FIG. 2, and outputs sound based on an audio signal during a call or the like.

アンテナ１５は、ワンセグ放送の放送信号の電波信号を受信するものであり、携帯電話１に内蔵される。このワンセグ放送の放送信号は、放送番組のコンテンツデータとして映像データと音声データと字幕文（データ）とを含んでいる。尚、アンテナ１５が受信する電波信号は、例えば、ワンセグ放送におけるデータ転送方式に則った形式である。 The antenna 15 receives a radio signal of a broadcast signal of one-segment broadcasting, and is built in the mobile phone 1. The broadcast signal of this one-segment broadcasting includes video data, audio data, and caption text (data) as content data of the broadcast program. The radio wave signal received by the antenna 15 has a format conforming to a data transfer method in one-segment broadcasting, for example.

チューナ１６とデコード部１７とは、アンテナ１５が受信した放送信号を解析して映像データと音声データと字幕文とを取得するものである。チューナ１６は、アンテナ１５が受信した電波信号から、ワンセグ放送の信号を復調するものであり、復調後の復調信号をデコード部１７に供給する。 The tuner 16 and the decoding unit 17 analyze the broadcast signal received by the antenna 15 and acquire video data, audio data, and caption text. The tuner 16 demodulates the one-segment broadcasting signal from the radio signal received by the antenna 15, and supplies the demodulated demodulated signal to the decoding unit 17.

デコード部１７は、供給された復調信号の復号を行い、図３（ａ）に示すようなＴＳ（Transport Stream Packet、トランスポートストリームパケット）を生成する。 The decoding unit 17 decodes the supplied demodulated signal and generates a TS (Transport Stream Packet) as shown in FIG.

ＴＳは、ＴＳＰ（Transport Stream Packet、トランスポートストリームパケット）が多重化されたストリームであり、ＴＳＰには、映像データ用の映像パケットＶ、音声データ用の音声パケットＡ、字幕用の字幕パケットＣがある。 TS is a stream in which TSP (Transport Stream Packet) is multiplexed, and video packet V for video data, audio packet A for audio data, and subtitle packet C for subtitles are included in TSP. is there.

各ＴＳＰは、図３（ｂ）に示すように、ＴＳヘッダとペイロードとからなる。ＴＳヘッダは、ＴＳパケットの開始を示すデータ、パケット識別子等を格納する領域である。 Each TSP is composed of a TS header and a payload, as shown in FIG. The TS header is an area for storing data indicating the start of a TS packet, a packet identifier, and the like.

ペイロードは、データを格納する領域であり、図３（ｃ）に示すようなＰＥＳ（Packetized Elementary Stream）パケットが分割されて格納される。この各ペイロードに格納されたデータにより、図３（ｃ）に示すようなＰＥＳが構成される。 The payload is an area for storing data, and a PES (Packetized Elementary Stream) packet as shown in FIG. 3C is divided and stored. The data stored in each payload constitutes a PES as shown in FIG.

ＰＥＳは、ＰＥＳヘッダとＰＥＳペイロードとからなる。ＰＥＳヘッダは、ＰＥＳの始まりを示すデータ、パケット識別子、パケット長等のデータが格納される領域である。ＰＥＳペイロードは、ＥＳ（Elementary Stream）が分割されて格納される領域であり、映像データ、音声データ、字幕データは、圧縮符号化されてＰＥＳペイロードに格納される。 The PES is composed of a PES header and a PES payload. The PES header is an area in which data indicating the start of PES, data such as a packet identifier and a packet length are stored. The PES payload is an area in which ES (Elementary Stream) is divided and stored, and video data, audio data, and caption data are compression-coded and stored in the PES payload.

デコード部１７は、ＴＳヘッダに格納された情報に基づいて、ＴＳから映像パケットＶ、音声パケットＡ、字幕パケットＣを分離し、各ＴＳＰのペイロードからＰＥＳを取り出す。 Based on the information stored in the TS header, the decoding unit 17 separates the video packet V, the audio packet A, and the caption packet C from the TS, and extracts the PES from the payload of each TSP.

さらに、デコード部１７は、ＰＥＳヘッダに格納されているデータに基づいて、図３（ｃ）に示すような、映像データを含むビデオＰＥＳ、音声データを含む音声ＰＥＳ、字幕データを含む字幕ＰＥＳを生成する。 Further, based on the data stored in the PES header, the decoding unit 17 generates a video PES including video data, an audio PES including audio data, and a subtitle PES including subtitle data as shown in FIG. Generate.

尚、ＴＳパケットは固定長であり、ＰＥＳは、可変長である。このため、ＴＳＰには、ＴＳＰの長さを一定長とするためのアダプテーションフィールドが含まれる場合がある。 The TS packet has a fixed length, and the PES has a variable length. For this reason, the TSP may include an adaptation field for making the length of the TSP constant.

図４は、表示される映像、字幕のＴＶ信号ＳＧの例を示す。携帯電話１は、このＴＶ信号ＳＧの形式に従って映像を表示する。 FIG. 4 shows an example of a video signal and caption TV signal SG to be displayed. The mobile phone 1 displays an image according to the format of the TV signal SG.

ワンセグ放送におけるデータは予測符号化方式に則ったデータであり、ビデオＰＥＳは、ＩＤＲ（Instantaneous Decoder Refresh）フレームと、Ｐフレームとを含む。 Data in the one-segment broadcasting is data conforming to the predictive coding method, and the video PES includes an IDR (Instantaneous Decoder Refresh) frame and a P frame.

図４において、Ｉd_1，Ｉd_2，Ｉd_3，Ｉd_qは、ＩＤＲフレームを示し、Ｐ11，Ｐ12，Ｐ21，Ｐ22，Ｐq1はＰフレームを示す。 In FIG. 4, Id_1, Id_2, Id_3, and Id_q indicate IDR frames, and P11, P12, P21, P22, and Pq1 indicate P frames.

ＩＤＲフレームＩd_1〜Ｉd_qは、他の映像フレームを参照しないフレームであり、独立映像パケットＶＩに対応する。ＰフレームＰ11〜Ｐq1は、自己の再生タイミングよりも先に再生されるＩＤＲフレームＩd_1〜Ｉd_qを参照するフレームであり、参照映像パケットＶＰに対応する。 IDR frames Id_1 to Id_q are frames that do not refer to other video frames and correspond to independent video packets VI. P frames P11 to Pq1 are frames that refer to IDR frames Id_1 to Id_q that are reproduced prior to their own reproduction timing, and correspond to the reference video packet VP.

ビデオＰＥＳのＰＥＳヘッダには、再生タイミングＴｆが格納される。再生タイミングＴｆは、構築されるＴＶ信号ＳＧの先頭の映像の再生時刻を示すデータである。また、ＴＳＰヘッダには、ＩＤＲフレームＩd_1〜Ｉd_qの表示時刻を示すシークポイントＴＲが含まれている。 The playback timing Tf is stored in the PES header of the video PES. The reproduction timing Tf is data indicating the reproduction time of the first video of the TV signal SG to be constructed. Further, the TSP header includes a seek point TR indicating the display time of the IDR frames Id_1 to Id_q.

図４において、ＴＲ_１，ＴＲ_２，ＴＲ_３，ＴＲ_ｑは、それぞれ、再生タイミングＴｆからＩＤＲフレームＩd_1，Ｉd_2，Ｉd_3，Ｉd_qの経過時間を示す。 In FIG. 4, TR_1, TR_2, TR_3, and TR_q respectively indicate elapsed times of the IDR frames Id_1, Id_2, Id_3, and Id_q from the reproduction timing Tf.

字幕ＰＥＳのＰＥＳペイロードには、圧縮符号化された字幕文（データ）Ｍ１〜Ｍｐ（ｐ：整数）が格納される。字幕文Ｍ１〜Ｍｐは、映像に付加される字幕文の内容を示すデータである。 The PES payload of the caption PES stores caption-coded caption text (data) M1 to Mp (p: integer). The caption sentences M1 to Mp are data indicating the contents of the caption sentence added to the video.

字幕ＰＥＳの各ＰＥＳヘッダには、字幕表示時刻ＴＭ１〜ＴＭｐと制御符号ＣＳ１〜ＣＳｐとが含まれる。 Each PES header of the caption PES includes caption display times TM1 to TMp and control codes CS1 to CSp.

字幕表示時刻ＴＭ１〜ＴＭｐは、それぞれ、字幕文Ｍ１〜Ｍｐを表示するタイミングを表す時刻情報であり、制御符号ＣＳ１〜ＣＳｐは、それぞれ、字幕文Ｍ１〜Ｍｐの区切りを示す情報であり、字幕文Ｍ１〜Ｍｐの表示を切り替えるタイミングを示す。 The caption display times TM1 to TMp are time information indicating the timing of displaying the caption texts M1 to Mp, respectively, and the control codes CS1 to CSp are information indicating delimiters of the caption texts M1 to Mp, respectively. The timing which switches the display of M1-Mp is shown.

図３（ｂ）に示すＴＳヘッダには、ＰＣＲ（Program Clock Referende）と呼ばれる基準時間情報が格納され、ＰＥＳヘッダには、ＰＴＳ（Presentation Time Stamp）が格納される。このＰＴＳは、そのＰＥＳ内のＥＳ（Elementary Stream）を再生する時間を示す時間情報であり、９０ｋＨｚのクロック周波数に基づいて表される。 The TS header shown in FIG. 3B stores reference time information called PCR (Program Clock Referende), and the PES header stores PTS (Presentation Time Stamp). This PTS is time information indicating a time for reproducing an ES (Elementary Stream) in the PES, and is expressed based on a clock frequency of 90 kHz.

携帯電話１は、ＰＣＲを受信した瞬間の時刻をＰＣＲ値で示された時刻と解釈し、携帯電話１のＳＴＣ（System Time Clock；基準時刻）をＰＣＲに同期させる。これにより、すべての受信機（携帯電話１）の時刻が同期する。 The mobile phone 1 interprets the time at the moment of receiving the PCR as the time indicated by the PCR value, and synchronizes the STC (System Time Clock; reference time) of the mobile phone 1 with the PCR. Thereby, the time of all the receivers (cell-phone 1) synchronizes.

尚、再生タイミングＴｆ、字幕表示時刻ＴＭ１〜ＴＭｐは、経過時間ＴＲ１〜ＴＲｑは、ＰＴＳ単位のデータで格納される。 The reproduction timing Tf and the caption display times TM1 to TMp are stored as elapsed time TR1 to TRq as data in units of PTS.

デコード部１７は、復号したビデオＰＥＳ、音声ＰＥＳ、字幕ＰＥＳとともに、ＴＳヘッダ、ＰＥＳヘッダの情報を制御部２３に供給する。 The decoding unit 17 supplies the TS header and PES header information to the control unit 23 together with the decoded video PES, audio PES, and subtitle PES.

図１に戻り、記憶部１８は、各種データを記憶するものであり、フラッシュメモリなどの不揮発性メモリ、ＲＡＭ（Random Access Memory）等による内部メモリ、外部記録メディアによって構成される。 Returning to FIG. 1, the storage unit 18 stores various data, and includes a nonvolatile memory such as a flash memory, an internal memory such as a RAM (Random Access Memory), and an external recording medium.

記憶部１８には、図５に示すように、コンテンツ録画データ記憶領域１８１と、字幕管理データ記憶領域１８２と、シークポイント管理情報記憶領域１８３と、表示データ記憶領域１８４と、が設けられる。 As shown in FIG. 5, the storage unit 18 includes a content recording data storage area 181, a caption management data storage area 182, a seek point management information storage area 183, and a display data storage area 184.

コンテンツ録画データ記憶領域１８１は、データとして、デコード部１７が解析したビデオＰＥＳ、音声ＰＥＳ、字幕ＰＥＳを記憶する領域である。 The content recording data storage area 181 is an area for storing video PES, audio PES, and subtitle PES analyzed by the decoding unit 17 as data.

字幕管理データ記憶領域１８２は、図６（ａ）に示すような字幕管理データを記憶する領域である。字幕管理データは、「字幕表示時刻ＴＭｉ」（ｉ＝１〜ｐ）と「字幕文Ｍｉ」とを対応付けるテーブルデータであり、制御部２３によって生成される。 The caption management data storage area 182 is an area for storing caption management data as shown in FIG. The caption management data is table data that associates “caption display time TMi” (i = 1 to p) with “caption text Mi”, and is generated by the control unit 23.

「字幕表示時刻ＴＭｉ」は、字幕文Ｍｉを表示する時刻を示す。本実施形態では、字幕表示時刻ＴＭｉを、コンテンツ録画データの再生開始時（ＴＶ信号の先頭の映像の再生時刻）の再生タイミングＴｆを基準とするオフセット時刻とする。 “Subtitle display time TMi” indicates a time at which the caption text Mi is displayed. In the present embodiment, the caption display time TMi is set as an offset time based on the reproduction timing Tf at the start of reproduction of the content recording data (the reproduction time of the first video of the TV signal).

シークポイント管理情報記憶領域１８３は、シークポイント管理情報を記憶する領域である。シークポイント管理情報は、図６（ｂ）に示すように、シークポイントＴＲｊ（ｊ＝１〜ｑ）と、映像位置ＰＲｊと、を対応付けるテーブルデータであり、制御部２３によって生成される。 The seek point management information storage area 183 is an area for storing seek point management information. The seek point management information is table data associating seek points TRj (j = 1 to q) and video positions PRj as shown in FIG. 6B, and is generated by the control unit 23.

「シークポイントＴＲｊ」は、各映像フレームが表示される時刻を示し、ＰＴＳ単位で表される。「映像位置ＰＲｊ」は、コンテンツ録画データにおける映像フレームの位置を示すデータであり、インデックスとして機能する。ワンセグ放送の場合、「映像位置ＰＲｊ」は、通常、ＩＤＲフレームの先頭を含むＴＳＰの番号となる。 “Seek point TRj” indicates the time at which each video frame is displayed, and is expressed in units of PTS. “Video position PRj” is data indicating the position of the video frame in the content recording data, and functions as an index. In the case of one-segment broadcasting, “video position PRj” is usually a TSP number including the head of the IDR frame.

表示データ記憶領域１８４は、表示部２１が表示する映像、字幕文Ｍｉ等の各データが格納される領域である。 The display data storage area 184 is an area in which data such as video and caption text Mi displayed on the display unit 21 is stored.

また、記憶部１８は、制御部２３の動作制御用プログラムのデータを記憶するとともに、制御部２３のワークメモリとしても機能する。 Further, the storage unit 18 stores data of an operation control program for the control unit 23 and also functions as a work memory for the control unit 23.

ＤＡＣ１９は、制御部２３からのディジタルオーディオ信号（音声データ）をアナログオーディオ信号に変換するものであり、変換したアナログオーディオ信号をスピーカ２０に供給する。 The DAC 19 converts the digital audio signal (audio data) from the control unit 23 into an analog audio signal, and supplies the converted analog audio signal to the speaker 20.

スピーカ２０は、ＤＡＣ１９から供給されたアナログオーディオ信号に基づいて音声を出力するものであり、図２に示すように上側筐体１ａに設けられる。 The speaker 20 outputs sound based on the analog audio signal supplied from the DAC 19, and is provided in the upper housing 1a as shown in FIG.

表示部２１は、図２に示すドットマトリクスタイプのＬＣＤ（Liquid Crystal Display）３１とドライバ回路（図示せず）等から構成されて、映像とともに再生した字幕文ＭｉをＬＣＤ３１に表示するものである。ＬＣＤ３１は、上側筐体１ａに設けられる。尚、ＬＣＤ３１は、画像をカラーで表示する機能を有し、表示部２１は、この色を制御する機能を備えている。 The display unit 21 includes a dot matrix type LCD (Liquid Crystal Display) 31 and a driver circuit (not shown) shown in FIG. 2, and displays the subtitle sentence Mi reproduced together with the video on the LCD 31. The LCD 31 is provided in the upper housing 1a. The LCD 31 has a function of displaying an image in color, and the display unit 21 has a function of controlling this color.

表示部２１は、制御部２３の制御下にて、記憶部１８の表示データ記憶領域１８４からデータを読み出し、読み出したデータに基づいて映像とともに再生した字幕文ＭｉをＬＣＤ３１に表示する。 The display unit 21 reads data from the display data storage area 184 of the storage unit 18 under the control of the control unit 23, and displays the subtitle sentence Mi reproduced along with the video based on the read data on the LCD 31.

携帯電話１は、「字幕リスト付視聴モード」と「通常視聴モード」との２つのモードを有しており、表示部２１は、モードに応じた画面をＬＣＤ３１に表示する。 The mobile phone 1 has two modes of “viewing mode with subtitle list” and “normal viewing mode”, and the display unit 21 displays a screen corresponding to the mode on the LCD 31.

「字幕リスト付視聴モード」は、映像と映像に対応した字幕文Ｍｉとを表示するとともに字幕リストを表示して字幕リストから映像の選択を可能とするモードである。「通常視聴モード」は、字幕リストを表示することなく字幕と映像とを表示するモードである。 The “viewing mode with subtitle list” is a mode in which a video and a subtitle sentence Mi corresponding to the video are displayed and a subtitle list is displayed so that a video can be selected from the subtitle list. “Normal viewing mode” is a mode in which subtitles and video are displayed without displaying a subtitle list.

「字幕リスト付視聴モード」が選択された場合、表示部２１は、ＬＣＤ３１に、図７（ａ）に示すような画面Ｄ１を表示する。 When “viewing mode with subtitle list” is selected, the display unit 21 displays a screen D1 as shown in FIG.

この「字幕リスト付視聴モード」の画面Ｄ１において、映像領域ＲＡは、映像を表示する領域であり、表示部２１は、この映像領域ＲＡに、字幕リストから選択中の字幕文Ｍｉの再生タイミングに対応した再生タイミングの映像を表示する。 In the “viewing mode with subtitle list” screen D1, the video area RA is an area for displaying a video, and the display unit 21 displays the video area RA at the playback timing of the subtitle sentence Mi selected from the subtitle list. Display the video with the corresponding playback timing.

字幕領域ＭＡは、字幕文Ｍｉを表示する領域であり、表示部２１は、この字幕領域ＭＡに、字幕リストからユーザが選択した字幕文Ｍｉを表示する。 The caption area MA is an area for displaying the caption text Mi, and the display unit 21 displays the caption text Mi selected by the user from the caption list in the caption area MA.

字幕リスト領域ＬＡは、複数の字幕文Ｍｉをリスト形式に並べたものを表示する領域であり、表示部２１は、この字幕リスト領域ＬＡに、例えば、５個の字幕リスト枝領域ＬＡ１〜ＬＡ５を表示する。 The subtitle list area LA is an area for displaying a plurality of subtitle sentences Mi arranged in a list format, and the display unit 21 includes, for example, five subtitle list branch areas LA1 to LA5 in the subtitle list area LA. indicate.

ソフトキー領域ＦＡは、ソフトキーSoft1，Soft2を表示する領域である。ソフトキーSoft1は、現在のモードが「字幕リスト付視聴モード」であることを示すために用いられる。ソフトキーSoft2は、現在のモードが「通常視聴モード」であることを示すために用いられる。ソフトキーSoft1，Soft2は、キーボード３２を操作することによって選択される。 The soft key area FA is an area for displaying soft keys Soft1 and Soft2. The soft key Soft1 is used to indicate that the current mode is “viewing mode with subtitle list”. The soft key Soft2 is used to indicate that the current mode is the “normal viewing mode”. The soft keys Soft1 and Soft2 are selected by operating the keyboard 32.

ピクト領域ＰＡは、携帯電話１の動作情報を表示する領域であり、表示部２１は、このピクト領域ＰＡに、携帯電話１の電波の受信状況やバッテリの残量、現在日時等を表示する。 The pictogram area PA is an area for displaying the operation information of the mobile phone 1, and the display unit 21 displays the radio wave reception status of the mobile phone 1, the remaining battery level, the current date and time, etc.

「通常視聴モード」は、字幕リストを表示することなく、映像とともに再生した字幕を表示するモードであり、「通常視聴モード」が選択された場合、表示部２１は、ＬＣＤ３１に、図７（ｂ）に示すような字幕リスト領域ＬＡを空欄とした画面Ｄ２を表示する。 The “normal viewing mode” is a mode for displaying the subtitles reproduced together with the video without displaying the subtitle list. When “normal viewing mode” is selected, the display unit 21 displays on the LCD 31 in FIG. A screen D2 with the subtitle list area LA as shown in FIG.

また、この携帯電話１は、検索機能を備えており、検索機能が選択された場合、表示部２１は、ＬＣＤ３１に、図７（ｃ）に示すような検索語入力画面Ｄ３を表示する。 In addition, the mobile phone 1 has a search function, and when the search function is selected, the display unit 21 displays a search word input screen D3 as shown in FIG.

この検索語入力画面Ｄ３において、検索語入力領域ＫＡは、検索する検索語（キーワード）を入力する領域であり、表示部２１は、この検索語入力領域ＫＡに、ユーザが字幕表示時に通知してほしい検索語（キーワード）を表示する。 In the search word input screen D3, the search word input area KA is an area for inputting a search word (keyword) to be searched, and the display unit 21 notifies the search word input area KA when the caption is displayed. Display the desired search term (keyword).

ユーザが検索語入力画面Ｄ３において入力した検索語が、表示された字幕文Ｍｉ、字幕リスト中の字幕文Ｍｉに含まれている場合、表示部２１は、制御部２３に制御されて、この判定結果をユーザに通知するように、表示された字幕文Ｍｉの表示を変更する。 When the search word input by the user on the search word input screen D3 is included in the displayed subtitle sentence Mi and the subtitle sentence Mi in the subtitle list, the display unit 21 is controlled by the control unit 23 to make this determination. The display of the displayed subtitle sentence Mi is changed so as to notify the user of the result.

この場合、字幕領域ＭＡに、この字幕文Ｍｉが含まれている場合、表示部２１は、この字幕文Ｍｉの色や背景色を、周辺の色と異なる色になるように変更する。 In this case, when the subtitle text Mi is included in the subtitle area MA, the display unit 21 changes the color and background color of the subtitle text Mi so as to be different from the surrounding colors.

また、「字幕リスト付視聴モード」では、字幕領域ＭＡ及び字幕リスト領域ＬＡに表示された字幕文Ｍｉのうちの少なくとも一方の色や背景色を周辺の色と異なる色になるように変更する。 Further, in the “viewing mode with subtitle list”, at least one of the subtitle text Mi displayed in the subtitle area MA and the subtitle list area LA and the background color are changed to be different from the surrounding colors.

本実施形態では、字幕領域ＭＡ及び字幕リスト領域ＬＡに表示された字幕文Ｍｉに検索語が含まれる場合、表示部２１は、この字幕文Ｍｉの色や背景色を周辺の色と異なる色になるように変更する。 In the present embodiment, when a search word is included in the caption text Mi displayed in the caption area MA and the caption list area LA, the display unit 21 changes the color or background color of the caption text Mi to a color different from the surrounding colors. Change to

また、検索語を含む字幕文Ｍｉが、字幕領域ＭＡには表示されず、字幕リスト領域ＬＡにのみ表示された場合、表示部２１は、字幕リスト領域ＬＡに表示された字幕文Ｍｉの色や背景色を周辺の色と異なる色になるように変更する。 When the subtitle sentence Mi including the search word is not displayed in the subtitle area MA and is displayed only in the subtitle list area LA, the display unit 21 displays the color of the subtitle sentence Mi displayed in the subtitle list area LA, Change the background color to be different from the surrounding colors.

操作部２２は、例えば、テレビジョン放送の受信の開始・終了の指示や、ユーザがテレビ番組を録画するときのコンテンツの録画の開始・終了の指示、ユーザ認証時のパスワードの入力等といったユーザによる入力を受け付けるものである。 The operation unit 22 is, for example, an instruction for starting / ending reception of a television broadcast, an instruction for starting / ending content recording when the user records a TV program, and a password input at the time of user authentication. It accepts input.

操作部２２は、図２に示すようなキーボード３２を備える。このキーボード３２は、電源スイッチ、カーソルキー３３、テンキー等からなり、携帯電話１の電源のオン、オフ、モードの切り替え、数字、文字、記号の入力、メニューの選択、ワンセグ放送の受信、検索語の入力に用いられる。 The operation unit 22 includes a keyboard 32 as shown in FIG. The keyboard 32 includes a power switch, a cursor key 33, a numeric keypad, and the like. The mobile phone 1 is turned on / off, mode is switched, numbers, characters, symbols are input, menus are selected, one-seg broadcasting is received, and search words are searched. Used for input.

カーソルキー３３は、画面上に表示されたカーソルをスクロールさせ、字幕リストから任意の字幕文Ｍｉを選択するためのキーである。 The cursor key 33 is a key for scrolling the cursor displayed on the screen and selecting an arbitrary subtitle sentence Mi from the subtitle list.

操作部２２は、ユーザがキーボード３２を操作して検索メニューが選択され、検索語が入力されると、この検索語の入力を受け付ける。 When the user operates the keyboard 32 to select a search menu and a search word is input, the operation unit 22 receives the input of the search word.

操作部２２は、ユーザによる入力を受け付けると、この操作情報を制御部２３に供給する。 The operation unit 22 supplies the operation information to the control unit 23 when receiving an input from the user.

制御部２３は、マイクロプロセッサユニット等から構成され、記憶部１８に格納された動作制御プログラムデータに従って、携帯電話１全体の動作を制御する。 The control unit 23 includes a microprocessor unit and the like, and controls the operation of the entire mobile phone 1 according to operation control program data stored in the storage unit 18.

制御部２３は、操作部２２から供給された操作情報に基づいて、携帯電話１の動作を制御する。 The control unit 23 controls the operation of the mobile phone 1 based on the operation information supplied from the operation unit 22.

次に本実施形態に係る携帯電話１の動作を説明する。
制御部２３は、操作部２２から、キーボード３２の電源スイッチが押下された旨の操作情報が供給される毎に、携帯電話１の電源をオン、オフする。 Next, the operation of the mobile phone 1 according to this embodiment will be described.
The control unit 23 turns on and off the power of the mobile phone 1 every time operation information indicating that the power switch of the keyboard 32 is pressed is supplied from the operation unit 22.

制御部２３は、操作部２２から、ワンセグ放送の放送信号を受信するメニューを選択するメニューボタンの操作情報が供給されると、アンテナ１５、チューナ１６、デコード部１７を制御してワンセグ放送の受信を開始する。 When the operation information of the menu button for selecting the menu for receiving the broadcast signal of the one-segment broadcasting is supplied from the operation unit 22, the control unit 23 controls the antenna 15, the tuner 16, and the decoding unit 17 to receive the one-segment broadcast. To start.

アンテナ１５は、ワンセグ放送の電波信号を受信し、チューナ１６は、アンテナ１５が受信した電波信号から、ワンセグ放送の信号を復調し、復調後の復調信号をデコード部１７に供給する。 The antenna 15 receives a one-segment broadcast radio signal, and the tuner 16 demodulates the one-segment broadcast signal from the radio signal received by the antenna 15 and supplies the demodulated demodulated signal to the decoding unit 17.

デコード部１７は、供給されたコンテンツデータに含まれている映像データ、音声データ、字幕データを分離するとともに、これらのデータを復号し、復号したビデオＰＥＳ、音声ＰＥＳ、字幕ＰＥＳを制御部２３に供給する。 The decoding unit 17 separates video data, audio data, and caption data included in the supplied content data, decodes these data, and sends the decoded video PES, audio PES, and caption PES to the control unit 23. Supply.

制御部２３は、操作部２２から、ワンセグ放送のコンテンツを録画するメニューが選択された旨のメニューボタンの操作情報が供給されると、ワンセグ放送を録画する。 When the operation information of the menu button indicating that the menu for recording the content of the one seg broadcast is selected from the operation unit 22, the control unit 23 records the one seg broadcast.

即ち、制御部２３は、デコード部１７から供給されたビデオＰＥＳ、音声ＰＥＳ、字幕ＰＥＳを、記憶部１８のコンテンツ録画データ記憶領域１８１に格納する。 That is, the control unit 23 stores the video PES, audio PES, and subtitle PES supplied from the decoding unit 17 in the content recording data storage area 181 of the storage unit 18.

制御部２３は、ビデオＰＥＳ、音声ＰＥＳ、字幕ＰＥＳをコンテンツ録画データ記憶領域１８１に格納すると、字幕管理データ生成処理のプログラムデータを読み出し、図８に示すフローチャートに従い、この字幕管理データ生成処理を実行する。 When storing the video PES, the audio PES, and the caption PES in the content recording data storage area 181, the control unit 23 reads the program data of the caption management data generation process, and executes the caption management data generation process according to the flowchart shown in FIG. To do.

制御部２３は、字幕ＰＥＳの取得が可能か否かを判定する（ステップＳ１１）。 The control unit 23 determines whether or not the caption PES can be acquired (step S11).

字幕ＰＥＳを取得できないと判定した場合（ステップＳ１１；Ｎｏ）、制御部２３は、この字幕管理データ生成処理を終了させる。 When determining that the caption PES cannot be acquired (step S11; No), the control unit 23 ends the caption management data generation process.

字幕ＰＥＳが取得可能であると判定した場合（ステップＳ１１；Ｙｅｓ）、制部は、字幕文Ｍｉが存在するか否かを判定する（ステップＳ１２）。 When it determines with subtitle PES being acquirable (step S11; Yes), a control part determines whether subtitle sentence Mi exists (step S12).

字幕文Ｍiが存在しないと判定した場合（ステップＳ１２；Ｎｏ）、制御部２３は、再度、字幕ＰＥＳの取得が可能か否かを判定する（ステップＳ１１）。 When it is determined that the caption sentence Mi does not exist (step S12; No), the control unit 23 determines again whether or not the caption PES can be acquired (step S11).

字幕文Ｍiが存在すると判定した場合（ステップＳ１２；Ｙｅｓ）、制御部２３は、取得した字幕ＰＥＳを解析し、字幕ＰＥＳのＰＥＳヘッダに格納されているＰＴＳから再生タイミングＴｆを減じ、先頭映像からの経過時間を取得する（ステップＳ１３）。 When it is determined that the caption text Mi exists (step S12; Yes), the control unit 23 analyzes the obtained caption PES, subtracts the reproduction timing Tf from the PTS stored in the PES header of the caption PES, and starts from the top video. Is obtained (step S13).

制御部２３は、求めたＰＴＳ単位の経過時間を時分秒単位の経過時間に換算し（ステップＳ１４）、換算した経過時間を字幕表示時刻ＴＭｉとして、この字幕表示時刻ＴＭｉを、記憶部１８の字幕管理データ記憶領域１８２の字幕管理データに登録する（ステップＳ１５）。 The control unit 23 converts the obtained elapsed time in PTS units into elapsed time in hour / minute / second units (step S14), uses the converted elapsed time as the caption display time TMi, and stores the caption display time TMi in the storage unit 18. Registration is made in the caption management data in the caption management data storage area 182 (step S15).

制御部２３は、字幕ＰＥＳに含まれている制御符号ＣＳでデータを区切り、制御符号ＣＳの直前の字幕文Ｍiを取得し、取得した字幕文Ｍiを、記憶部１８の字幕管理データ記憶領域１８２の字幕管理データに登録する（ステップＳ１６）。 The control unit 23 divides the data with the control code CS included in the subtitle PES, acquires the subtitle sentence Mi immediately before the control code CS, and uses the acquired subtitle sentence Mi as the subtitle management data storage area 182 of the storage unit 18. Is registered in the subtitle management data (step S16).

制御部２３は、この字幕文Ｍiが最後のデータか否かを判定する（ステップＳ１７）。制御部２３は、制御符号ＣＳがあれば、この字幕文Ｍiが最後のデータではないと判定し、制御符号ＣＳがなければ、この字幕文Ｍiが最後のデータと判定する。 The control unit 23 determines whether or not the caption text Mi is the last data (step S17). If there is a control code CS, the control unit 23 determines that the subtitle sentence Mi is not the last data, and if there is no control code CS, the control section 23 determines that the subtitle sentence Mi is the last data.

この字幕文Ｍiが最後のデータではないと判定した場合（ステップＳ１７；Ｎｏ）、制御部２３は、再度、ステップＳ１１〜１６を実行する。 If it is determined that the caption text Mi is not the last data (step S17; No), the control unit 23 executes steps S11 to S16 again.

この字幕文Ｍiが最後のデータと判定した場合（ステップＳ１７；Ｙｅｓ）、制御部２３は、この字幕管理データ生成処理を終了させる。 When it is determined that the caption text Mi is the last data (step S17; Yes), the control unit 23 ends the caption management data generation process.

このように字幕管理データ生成処理を実行すると、制御部２３は、デコード部１７から供給されたＴＳヘッダのデータに基づいてＴＳＰを順次解析する。制御部２３は、解析した結果のデータを、記憶部１８のシークポイント管理情報記憶領域１８３のシークポイント管理情報に登録し、シークポイント管理情報を生成する。 When the subtitle management data generation process is executed in this way, the control unit 23 sequentially analyzes the TSP based on the TS header data supplied from the decoding unit 17. The control unit 23 registers the analyzed data in the seek point management information in the seek point management information storage area 183 of the storage unit 18 to generate seek point management information.

操作部２２は、メニューボタンが操作されて検索機能が選択された場合、この操作情報を制御部２３に供給する。制御部２３は、操作部２２から、この操作情報が供給されると、図９に示すフローチャートに従い、検索語取得処理を実行する。 When the menu button is operated and the search function is selected, the operation unit 22 supplies this operation information to the control unit 23. When this operation information is supplied from the operation unit 22, the control unit 23 executes a search word acquisition process according to the flowchart shown in FIG. 9.

制御部２３は、図７（ｃ）に示すような検索語入力画面Ｄ３を、ＬＣＤ３１に表示するように表示部２１を制御する（ステップＳ２１）。 The control unit 23 controls the display unit 21 to display the search word input screen D3 as shown in FIG. 7C on the LCD 31 (step S21).

制御部２３は、操作部２２が受け付けた検索語を取得し（ステップＳ２２）、この検索語受付処理を終了させる。 The control unit 23 acquires the search word received by the operation unit 22 (step S22), and ends the search word reception process.

通常視聴モードに切り替えるようにキーボード３２が操作されると、操作部２２は、この操作情報を制御部２３に供給する。制御部２３は、操作部２２から供給された操作情報に基づいて「通常視聴モード」が選択されたことを判別する。 When the keyboard 32 is operated so as to switch to the normal viewing mode, the operation unit 22 supplies this operation information to the control unit 23. The control unit 23 determines that the “normal viewing mode” is selected based on the operation information supplied from the operation unit 22.

そして、制御部２３は、図１０に示すフローチャートに従い、通常視聴モード処理を実行する。 And the control part 23 performs a normal viewing-and-listening mode process according to the flowchart shown in FIG.

制御部２３は、現在選択中の字幕文Ｍｉを表示データ記憶領域１８４に格納する（ステップＳ３１）。 The control unit 23 stores the currently selected subtitle sentence Mi in the display data storage area 184 (step S31).

制御部２３は、映像をシークする（ステップＳ３２）。即ち、制御部２３は、現在選択中の字幕文Ｍｉの字幕表示時刻ＴＭｉと、シークポイント管理情報のシークポイントＴＲとを比較し、字幕表示時刻ＴＭｉの直前のシークポイントＴＲを特定する。 The control unit 23 seeks the video (step S32). That is, the control unit 23 compares the subtitle display time TMi of the currently selected subtitle sentence Mi with the seek point TR of the seek point management information, and specifies the seek point TR immediately before the subtitle display time TMi.

制御部２３は、特定したシークポイントＴＲに対応する映像位置ＰＲを取得し、取得した映像位置ＰＲからの映像データ、字幕文Ｍｉを、順次、記憶部１８の表示データ記憶領域１８４に格納する（ステップＳ３３）。 The control unit 23 acquires the video position PR corresponding to the specified seek point TR, and sequentially stores the video data and the caption sentence Mi from the acquired video position PR in the display data storage area 184 of the storage unit 18 ( Step S33).

制御部２３は、表示データ記憶領域１８４に格納した映像データに基づいて映像を映像領域ＲＡに表示するように表示部２１を制御する（ステップＳ３４）。 The control unit 23 controls the display unit 21 to display the video in the video area RA based on the video data stored in the display data storage area 184 (step S34).

制御部２３は、表示データ記憶領域１８４に格納した字幕文Ｍｉを、字幕領域ＭＡに表示するように表示部２１を制御する（ステップＳ３５）。 The control unit 23 controls the display unit 21 to display the caption text Mi stored in the display data storage area 184 in the caption area MA (step S35).

制御部２３は、検索処理を実行する（ステップＳ３６）。制御部２３は、図１１に示すフローチャートに従い、この検索処理を実行する。 The control unit 23 executes search processing (step S36). The controller 23 executes this search process according to the flowchart shown in FIG.

制御部２３は、表示データ記憶領域１８４に格納されている字幕文Ｍｉのうち、取得した検索語に一致するような字幕文Ｍｉを検索する（ステップＳ４１）。 The control unit 23 searches for the caption text Mi that matches the acquired search word from the caption text Mi stored in the display data storage area 184 (step S41).

制御部２３は、記憶部１８の表示データ記憶領域１８４を検索することにより、表示した字幕文Ｍｉに、取得した検索語が含まれているか否かを判定する（ステップＳ４２）。 The control unit 23 searches the display data storage area 184 of the storage unit 18 to determine whether or not the acquired search word is included in the displayed caption text Mi (step S42).

表示した字幕文Ｍｉに、取得した検索語が含まれていないと判定した場合（ステップＳ４２；Ｎｏ）、制御部２３は、この検索処理を終了させる。 When it is determined that the acquired search word is not included in the displayed subtitle sentence Mi (step S42; No), the control unit 23 ends the search process.

表示した字幕文Ｍｉに、取得した検索語が含まれていると判定した場合（ステップＳ４２；Ｙｅｓ）、制御部２３は、この字幕文Ｍｉの色や背景色を、周辺の色と異なる色になるように変更して判定結果をユーザに通知するように表示部２１を制御する（ステップＳ４３）。そして、制御部２３は、この検索処理を終了させる。 When it is determined that the acquired search word is included in the displayed subtitle sentence Mi (step S42; Yes), the control unit 23 changes the color or background color of the subtitle sentence Mi to a color different from the surrounding colors. Then, the display unit 21 is controlled so as to notify the user of the determination result (step S43). And the control part 23 complete | finishes this search process.

制御部２３は、検索処理を実行すると、操作部２２から供給された操作情報に基づいて、「字幕リスト付視聴モード」が選択されたか否かを判定する（ステップＳ３７）。 When executing the search process, the control unit 23 determines whether or not “viewing mode with caption list” is selected based on the operation information supplied from the operation unit 22 (step S37).

「字幕リスト付視聴モード」が選択されていないと判定した場合（ステップＳ３７；Ｎｏ）、制御部２３は、「通常視聴モード」の継続と判定し、再度、ステップＳ３１〜３６を実行する。 If it is determined that the “subtitle list-added viewing mode” is not selected (step S37; No), the control unit 23 determines that the “normal viewing mode” is continued, and executes steps S31 to S36 again.

一方、キーボード３２が操作されて「字幕リスト付視聴モード」が選択されたと判定した場合（ステップＳ３７；Ｙｅｓ）、制御部２３は、この通常視聴モード処理を終了させる。 On the other hand, when it is determined that the “viewing mode with caption list” is selected by operating the keyboard 32 (step S37; Yes), the control unit 23 ends the normal viewing mode process.

そして、制御部２３は、図１２に示すフローチャートに従い、字幕リスト付視聴モード処理を実行する。 And the control part 23 performs viewing-and-listening mode processing with a caption list according to the flowchart shown in FIG.

制御部２３は、記憶部１８のコンテンツ録画データ記憶領域１８１に記憶されたビデオＰＥＳを参照し、ＰＥＳヘッダに格納されたＰＴＳ又は基準時刻ＳＴＣに基づいて、「字幕リスト付視聴モード」が選択されたときの映像の表示時刻を取得する（ステップＳ５１）。 The control unit 23 refers to the video PES stored in the content recording data storage area 181 of the storage unit 18 and selects “viewing mode with subtitle list” based on the PTS stored in the PES header or the reference time STC. The display time of the video at that time is acquired (step S51).

制御部２３は、記憶部１８の字幕管理データ記憶領域１８２に記憶された字幕管理データを参照し、取得した表示時刻の直前又は直後の字幕表示時刻ＴＭｉを取得する（ステップＳ５２）。 The control unit 23 refers to the caption management data stored in the caption management data storage area 182 of the storage unit 18, and acquires the caption display time TMi immediately before or after the acquired display time (step S52).

制御部２３は、取得した字幕表示時刻ＴＭｉに対応する字幕文Ｍｉを取得する（ステップＳ５３）。 The control unit 23 acquires a caption sentence Mi corresponding to the acquired caption display time TMi (step S53).

制御部２３は、取得した字幕文Ｍｉを表示データ記憶領域１８４に格納する（ステップＳ５４）。 The control unit 23 stores the acquired subtitle sentence Mi in the display data storage area 184 (step S54).

制御部２３は、映像をシークする（ステップＳ５５）。即ち、制御部２３は、取得した映像の表示時刻と、字幕管理データの字幕表示時刻ＴＭｉとを比較し、取得した映像の表示時刻の直後にある字幕表示時刻ＴＭｉを特定する。 The control unit 23 seeks the video (step S55). That is, the control unit 23 compares the acquired video display time with the subtitle display time TMi of the subtitle management data, and specifies the subtitle display time TMi immediately after the acquired video display time.

制御部２３は、シークした映像の映像データ、字幕文Ｍｉを、順次、表示データ記憶領域１８４に格納する（ステップＳ５６）。 The control unit 23 sequentially stores the video data of the sought video and the subtitle sentence Mi in the display data storage area 184 (step S56).

制御部２３は、表示データ記憶領域１８４に格納した映像データに基づいて映像を映像領域ＲＡに表示するように表示部２１を制御する（ステップＳ５７）。 The control unit 23 controls the display unit 21 to display the video in the video area RA based on the video data stored in the display data storage area 184 (step S57).

制御部２３は、表示データ記憶領域１８４に格納した字幕文Ｍｉを、字幕領域ＭＡに表示するように表示部２１を制御する（ステップＳ５８）。 The control unit 23 controls the display unit 21 to display the caption text Mi stored in the display data storage area 184 in the caption area MA (step S58).

制御部２３は、表示データ記憶領域１８４に格納した字幕文Ｍｉを中心とする字幕リストを、字幕リスト領域ＬＡに表示するように表示部２１を制御する（ステップＳ５９）。 The control unit 23 controls the display unit 21 to display the subtitle list centered on the subtitle sentence Mi stored in the display data storage area 184 in the subtitle list area LA (step S59).

制御部２３は、通常視聴モード処理実行時と同様に、検索処理を実行する（ステップＳ６０）。
制御部２３は、検索処理を実行すると、操作部２２から供給された操作情報に基づいて、「通常視聴モード」が選択されたか否かを判定する（ステップＳ６１）。 The control unit 23 executes the search process in the same manner as when the normal viewing mode process is executed (step S60).
When executing the search process, the control unit 23 determines whether or not the “normal viewing mode” is selected based on the operation information supplied from the operation unit 22 (step S61).

「通常視聴モード」が選択されていないと判定した場合（ステップＳ６１；Ｎｏ）、制御部２３は、「字幕リスト視聴モード」の継続と判定し、再度、ステップＳ５１〜６０を実行する。 When it determines with "normal viewing mode" not being selected (step S61; No), the control part 23 determines with continuing "subtitle list viewing mode", and performs step S51-60 again.

一方、キーボード３２が操作されて「通常視聴モード」が選択されたと判定した場合（ステップＳ３７；Ｙｅｓ）、制御部２３は、この字幕付き視聴モード処理を終了させる。 On the other hand, when it is determined that the “normal viewing mode” has been selected by operating the keyboard 32 (step S37; Yes), the control unit 23 ends the viewing mode processing with captions.

次に、この携帯電話１の動作を具体的に説明する。
例えば、ユーザが、メニューボタンを操作して、検索機能を選択し、図１３に示すような検索語入力画面Ｄ４において、キーボード３２を操作して、検索語として「とてもよい」を入力したものとする。 Next, the operation of the mobile phone 1 will be specifically described.
For example, the user operates the menu button to select the search function, and operates the keyboard 32 on the search word input screen D4 as shown in FIG. 13 to input “very good” as the search word. To do.

操作部２２は、この入力を受け付けて、制御部２３は、操作部２２から、この検索語「とてもよい」を取得する。 The operation unit 22 receives this input, and the control unit 23 acquires the search term “very good” from the operation unit 22.

「字幕リスト付視聴モード」が選択された場合に、字幕文Ｍ３「今日は、とてもよい天気」が表示データ記憶領域１８４に格納されると、表示部２１は、図１４（ａ）に示すように、「今日は、とてもよい天気」を字幕領域ＭＡに表示する（ステップＳ５８の処理）。 When the “viewing mode with subtitle list” is selected and the subtitle sentence M3 “Today's very good weather” is stored in the display data storage area 184, the display unit 21 displays as shown in FIG. Then, “Today is very good weather” is displayed in the caption area MA (step S58).

また、字幕文Ｍ３は、検索語「とてもよい」を含むため、制御部２３は、表示データ記憶領域１８４を検索した結果、表示した字幕文Ｍ３に、取得した検索語が含まれていると判定する（ステップＳ４２；Ｙｅｓ）。 Further, since the caption sentence M3 includes the search word “very good”, the control unit 23 determines that the acquired search word is included in the displayed caption sentence M3 as a result of searching the display data storage area 184. (Step S42; Yes).

この場合、表示部２１は、図１４（ａ）に示すように、字幕リスト枝領域ＬＡ３の字幕文Ｍ３の色及び背景色を、周辺の色とは異なる色になるように変更する（ステップＳ４３の処理）。 In this case, as shown in FIG. 14A, the display unit 21 changes the color and background color of the caption text M3 in the caption list branch area LA3 so as to be different from the surrounding colors (step S43). Processing).

また、図１４（ｂ）に示すように、検索語「とてもよい」が、字幕文Ｍ３ではなく、字幕文Ｍ４に含まれている場合、この字幕文Ｍ４は字幕領域ＭＡには、表示されない。 As shown in FIG. 14B, when the search word “very good” is included in the caption sentence M4 instead of the caption sentence M3, the caption sentence M4 is not displayed in the caption area MA.

この場合、表示部２１は、図１４（ｂ）に示すように、字幕リスト枝領域ＬＡ４の検索語の色、もしくは背景色のみを、周辺の色とは異なる色に変更する（ステップＳ４３の処理）。このようにして携帯電話１は、ユーザに、字幕領域リスト領域ＬＡに、検索語に一致する語が含まれていることを通知する。 In this case, as shown in FIG. 14B, the display unit 21 changes only the color of the search word in the subtitle list branch area LA4 or the background color to a color different from the surrounding colors (processing in step S43). ). In this way, the mobile phone 1 notifies the user that the subtitle area list area LA includes a word that matches the search word.

「通常視聴モード」が選択された場合に、字幕文Ｍ３「今日は、とてもよい天気」が表示データ記憶領域１８４に格納されると、表示部２１は、図１４（ｃ）に示すように、字幕文Ｍ３「今日は、とてもよい天気」を字幕領域ＭＡに表示する（ステップＳ３５の処理）。 When the “normal viewing mode” is selected and the subtitle sentence M3 “Today's very good weather” is stored in the display data storage area 184, the display unit 21 displays, as shown in FIG. The caption text M3 “Today is very good weather” is displayed in the caption area MA (step S35).

検索語を、同じように「とてもよい」とすると、「通常視聴モード」では、字幕リスト領域ＬＡがないため、表示部２１は、図１４（ｃ）に示すように、字幕領域ＭＡの語の色や背景色のみを、周辺の色と異なる色になるように変更する（ステップＳ４３の処理）。 If the search term is “very good” in the same way, in the “normal viewing mode”, since there is no caption list area LA, the display unit 21 displays the words in the caption area MA as shown in FIG. Only the color and the background color are changed so as to be different from the surrounding colors (step S43).

以上説明したように、本実施形態１によれば、検索語が、表示された字幕文Ｍｉに含まれている場合、携帯電話１は、この字幕文Ｍｉの語の色や背景色を、周辺の色と異なる色になるように変更し、ユーザに通知するようにした。 As described above, according to the first embodiment, when the search word is included in the displayed subtitle sentence Mi, the mobile phone 1 changes the word color and background color of the subtitle sentence Mi to the surroundings. Changed to be different from the color of, and notified the user.

従って、ユーザによる所望の場面の見逃しを防止することができ、携帯電話１の視聴効率を向上させることができる。 Therefore, it is possible to prevent a user from overlooking a desired scene and to improve the viewing efficiency of the mobile phone 1.

（実施形態２）
実施形態２に係る携帯電話は、ワンセグ放送の受信と同時にコンテンツを再生するようにしたものである。 (Embodiment 2)
The mobile phone according to the second embodiment reproduces content simultaneously with reception of one-segment broadcasting.

実施形態２に係る携帯電話１は、実施形態１と同様、図１に示すように構成され、任意のデータ転送方式に則ったコンテンツを受信する。 Similar to the first embodiment, the mobile phone 1 according to the second embodiment is configured as shown in FIG. 1 and receives content in accordance with an arbitrary data transfer method.

実施形態２に係る携帯電話１は、放送波の受信と同時に再生するため、再生時に受信していない字幕文Ｍｉは表示することができない。この点が実施形態１とは異なる。 Since the mobile phone 1 according to the second embodiment is played back simultaneously with the reception of the broadcast wave, the subtitle sentence Mi that has not been received during playback cannot be displayed. This point is different from the first embodiment.

したがって、現在表示している映像より後に出現する映像に対応する字幕文Ｍｉや、その字幕文Ｍｉを含む字幕リストを予め作成しておくことはできない。よって、視聴モードは、字幕リストを表示しない「通常視聴モード」のみとなる。 Therefore, it is impossible to previously create a caption text Mi corresponding to a video that appears after the currently displayed video, or a caption list including the caption text Mi. Therefore, the viewing mode is only the “normal viewing mode” in which the subtitle list is not displayed.

このため、例えば、図７（ｂ）に示すような「通常視聴モード」の画面Ｄ２から、図７（ａ）に示すような「字幕リスト付視聴モード」の画面Ｄ１への遷移は存在せず、字幕リスト領域ＬＡも存在しない。 For this reason, for example, there is no transition from the screen D2 in the “normal viewing mode” as shown in FIG. 7B to the screen D1 in the “viewing mode with caption list” as shown in FIG. 7A. The subtitle list area LA does not exist.

従って、検索語「とてもよい」が字幕文Ｍ３に含まれている場合、表示部２１は、図１４（ｃ）の画面Ｄ７のみをＬＣＤ３１に表示する。 Therefore, when the search term “very good” is included in the caption sentence M3, the display unit 21 displays only the screen D7 of FIG.

尚、本発明を実施するにあたっては、種々の形態が考えられ、上記実施形態に限られるものではない。
例えば、上記実施形態では、検索語に一致する語が含まれていることをユーザに通知する方法として、一致した語の色や背景色を周辺の色と異なる色になるように変更するものとした。 In carrying out the present invention, various forms are conceivable and the present invention is not limited to the above embodiment.
For example, in the above embodiment, as a method of notifying the user that a word that matches the search word is included, the color of the matched word or the background color is changed to a color different from the surrounding colors. did.

しかし、通知方法は、これに限られるものではない。例えば、携帯電話１には、通常、携帯電話１の筐体を振動させる振動（バイブレーション）手段が備えられているため、携帯電話１は、この振動手段を作動させて判定結果を通知するようにもよい。また、携帯電話１は、スピーカ２０から音声を出力して判定結果を通知するようにしてもよい。 However, the notification method is not limited to this. For example, since the mobile phone 1 is normally provided with vibration means for vibrating the casing of the mobile phone 1, the mobile phone 1 operates the vibration means so as to notify the determination result. Also good. Further, the mobile phone 1 may output a sound from the speaker 20 to notify the determination result.

また、携帯電話１は、色や背景色を変更したり、点滅させたりといった通知方法の変更を、ユーザが、メニューにより適宜できるように構成されてもよい。 In addition, the mobile phone 1 may be configured so that the user can appropriately change the notification method, such as changing the color or background color, or blinking, using a menu.

図７（ａ）の字幕リスト領域ＬＡには、字幕文Ｍ３を表示するだけでなく、字幕表示時刻ＴＭ３も表示するように構成されてもよい。例えば、「字幕リスト付視聴モード」の場合、各字幕リスト枝領域ＬＡ１〜ＬＡ５の字幕文Ｍ３の後部に、字幕表示時刻ＴＭ３を表示することができる。これにより、ユーザは字幕文Ｍ３が表示される時刻を知ることができる。 In the caption list area LA of FIG. 7A, not only the caption text M3 but also the caption display time TM3 may be displayed. For example, in the “viewing mode with subtitle list”, the subtitle display time TM3 can be displayed behind the subtitle sentence M3 in each subtitle list branch area LA1 to LA5. Thereby, the user can know the time when the caption text M3 is displayed.

上記実施形態では、「通常視聴モード」を、字幕リストを表示することなく字幕文Ｍｉと映像とを表示するモードとして説明した。しかし、「通常視聴モード」であっても字幕リストを表示するようにしてもよい。 In the above embodiment, the “normal viewing mode” has been described as a mode for displaying the caption text Mi and the video without displaying the caption list. However, the subtitle list may be displayed even in the “normal viewing mode”.

この場合、「通常視聴モード」は、画面構成が「動画＋字幕リスト」となり、動画の再生に合わせて字幕および字幕リストが更新されるモードとする。また、「字幕リスト付視聴モード」は、画面構成が「静止画＋字幕リスト」となり、ユーザのキーボード操作によって再生字幕が選択され、それに対応した映像（静止画）を表示するモードとする。 In this case, the “normal viewing mode” is a mode in which the screen configuration is “moving image + subtitle list” and the subtitle and subtitle list is updated in accordance with the reproduction of the moving image. The “viewing mode with subtitle list” is a mode in which the screen configuration is “still image + subtitle list”, a playback subtitle is selected by the user's keyboard operation, and the corresponding video (still image) is displayed.

この場合、「通常視聴モード」において、字幕リスト枝領域の字幕文Ｍｉに検索語が含まれているとすると、表示部２１は、字幕リスト枝領域の字幕文Ｍｉの色及び背景色を、周辺の色とは異なる色になるように変更する。 In this case, in the “normal viewing mode”, if the search word is included in the subtitle sentence Mi in the subtitle list branch area, the display unit 21 displays the color and background color of the subtitle sentence Mi in the subtitle list branch area as the peripheral color. Change the color so that it is different from the color.

上記実施形態では、ワンセグ放送の場合について説明した。しかし、ワンセグ放送に限られるものではなく、映像、字幕を含み、各映像と各字幕を表示する時刻が付されている形式で保存される映像データに対し、全て適用可能である。 In the above embodiment, the case of one-segment broadcasting has been described. However, the present invention is not limited to one-segment broadcasting, and can be applied to all video data that includes video and subtitles and is stored in a format that includes the time for displaying each video and each subtitle.

上記実施形態では、携帯端末を携帯電話１として説明した。しかし、携帯端末は、このものに限られるものではなく、例えば、ＰＨＳ、ＰＤＡ（Personal Digital Assistants）、電子カメラ、電子腕時計、ノート型ＰＣ、携帯型ＴＶ、携帯型映像記録装置・再生装置、カーナビゲーション装置にも適用できる。 In the above embodiment, the mobile terminal has been described as the mobile phone 1. However, the portable terminal is not limited to this, for example, PHS, PDA (Personal Digital Assistants), electronic camera, electronic wristwatch, notebook PC, portable TV, portable video recording / reproducing device, car It can also be applied to navigation devices.

また、上記実施形態では、プログラムが、それぞれメモリ等に予め記憶されているものとして説明した。しかし、字幕付き映像再生装置を、全体装置の全部又は一部として動作させ、あるいは、上述の処理を実行させるためのプログラムを、フレキシブルディスク、ＣＤ−ＲＯＭ（Compact Disk Read-Only Memory）、ＤＶＤ（Digital Versatile Disk）、ＭＯ（Magneto Optical disk）などのコンピュータ読み取り可能な記録媒体に格納して配布し、これを別のコンピュータにインストールし、上述の手段として動作させ、あるいは、上述の工程を実行させてもよい。 In the above-described embodiment, the program is described as being stored in advance in a memory or the like. However, programs for operating the video playback device with subtitles as all or part of the entire device or executing the above-described processing are stored on a flexible disk, a CD-ROM (Compact Disk Read-Only Memory), a DVD ( It is stored and distributed in a computer-readable recording medium such as Digital Versatile Disk (MO) or MO (Magneto Optical disk) and installed on another computer to operate as the above-mentioned means or execute the above-mentioned steps. May be.

さらに、インターネット上のサーバ装置が有するディスク装置等にプログラムを格納しておき、例えば、搬送波に重畳させて、コンピュータにダウンロード等するものとしてもよい。 Furthermore, the program may be stored in a disk device or the like included in a server device on the Internet, and may be downloaded onto a computer by being superimposed on a carrier wave, for example.

本発明の実施形態に係る携帯電話の構成を示すブロック図である。It is a block diagram which shows the structure of the mobile telephone which concerns on embodiment of this invention. 図１に示す携帯電話の外観を示す図である。It is a figure which shows the external appearance of the mobile phone shown in FIG. 受信する信号の構成を示す図であり、（ａ）は、ＴＳ、（ｂ）は、ＴＳＰ、（ｃ）は、ＰＥＳを示す。It is a figure which shows the structure of the signal to receive, (a) shows TS, (b) shows TSP, (c) shows PES. ＴＶ信号の構成を示す図である。It is a figure which shows the structure of TV signal. 図１に示す記憶部の各記憶領域を示す図である。It is a figure which shows each storage area of the memory | storage part shown in FIG. 記憶部が記憶するデータであり、（ａ）は、字幕管理データを示し、（ｂ）は、シークポイント管理情報を示す。This is data stored in the storage unit, where (a) indicates caption management data, and (b) indicates seek point management information. 表示部がＬＣＤに表示する画面を示す図であり、（ａ）は、字幕リスト付視聴モードにおける画面を示し、（ｂ）は、通常視聴モードにおける画面を示し、（ｃ）は、検索語入力画面を示す。It is a figure which shows the screen which a display part displays on LCD, (a) shows the screen in viewing-and-listening mode with a caption list, (b) shows the screen in normal viewing-and-listening mode, (c) is search word input Show the screen. 図１に示す制御部が実行する字幕管理データ生成処理を示すフローチャートである。It is a flowchart which shows the title management data generation process which the control part shown in FIG. 1 performs. 図１に示す制御部が実行する検索語取得処理を示すフローチャートである。It is a flowchart which shows the search term acquisition process which the control part shown in FIG. 1 performs. 図１に示す制御部が実行する通常視聴モード処理を示すフローチャートである。It is a flowchart which shows the normal viewing-and-listening mode process which the control part shown in FIG. 1 performs. 図１に示す制御部が実行する検索処理を示すフローチャートである。It is a flowchart which shows the search process which the control part shown in FIG. 1 performs. 図１に示す制御部が実行する字幕リスト付視聴モード処理を示すフローチャートである。It is a flowchart which shows the viewing-and-listening mode addition process with subtitle list which the control part shown in FIG. 1 performs. 検索語取得処理の具体例として表示された検索語入力画面を示す図である。It is a figure which shows the search word input screen displayed as a specific example of a search word acquisition process. 検索処理の具体例として、通知方法を示す図であり、（ａ）は、字幕リスト付視聴モードにおいて、字幕領域と字幕リスト領域とに表示された字幕文に検索語が含まれている場合の通知方法を示し、（ｂ）は、字幕リスト付視聴モードにおいて、字幕リスト領域にのみに表示された字幕文に検索語が含まれている場合の通知方法を示し、（ｃ）は、通常視聴モードにおける通知方法を示す。As a specific example of search processing, it is a diagram showing a notification method, (a) in the case where a search word is included in the caption text displayed in the caption area and the caption list area in the viewing mode with caption list (B) shows a notification method when a search word is included in the caption text displayed only in the caption list area in the viewing mode with caption list, and (c) shows normal viewing. The notification method in the mode is shown.

Explanation of symbols

１・・・携帯電話、１１，１５・・・アンテナ、１６・・・チューナ、１７・・・デコード部、１８・・・記憶部、２１・・・表示部、３１・・・ＬＣＤ、２３・・・制御部、１８４・・・表示データ記憶領域 DESCRIPTION OF SYMBOLS 1 ... Mobile phone, 11, 15 ... Antenna, 16 ... Tuner, 17 ... Decoding part, 18 ... Memory | storage part, 21 ... Display part, 31 ... LCD, 23. ..Control unit, 184 ... display data storage area

Claims

Display means for displaying the subtitle sentence reproduced together with the video;
A receiving means for receiving an input of a search term;
A determination unit that acquires the search term received and input by the reception unit, and determines whether or not the acquired search term is included in the subtitle sentence displayed by the display unit;
Notification means for performing a notification indicating the determination result when the determination means determines that the search word is included in the subtitle sentence displayed by the display means;
A video playback apparatus with subtitles.

The notification means, when the determination means determines that the search word is included in the displayed subtitle sentence, the color of the subtitle sentence including the search word displayed on the display means or the background of the subtitle sentence Do the notification by changing the color,
The video reproduction apparatus with captions according to claim 1.

The display means displays the reproduced subtitle sentence in a subtitle area and a subtitle list area,
The notification means displays the search word displayed in at least one of the subtitle area and the subtitle list area of the display means when the determination means determines that the search word is included in the displayed subtitle sentence. The notification is performed by changing the color of the subtitle sentence including or the background color of the subtitle sentence.
The video reproduction apparatus with captions according to claim 1 or 2.

Comprising at least one of vibration means for vibrating the housing and sound output means for outputting sound;
The notifying means activates at least one of the vibrating means and the audio output means when the determining means determines that the search word is included in the displayed subtitle sentence, thereby notifying the notification I do,
The video playback device with captions according to any one of claims 1 to 3.

Receiving means for receiving a broadcast signal including the video data and the caption text data;
Data acquisition means for analyzing the broadcast signal received by the reception means and acquiring the video data and the caption text data;
The display means displays the caption text reproduced together with the video based on the video data and the caption text data acquired by the data acquisition means,
The video reproduction apparatus with subtitles according to any one of claims 1 to 4, wherein the video reproduction apparatus has subtitles.

Storage means for storing the video data and the caption text data acquired by the data acquisition means,
The display means displays the subtitle sentence reproduced together with the video based on the video data and the subtitle sentence data acquired by the data acquisition means and stored in the storage means;
The video reproduction apparatus with captions according to claim 5.

Displaying subtitles played with the video;
Receiving a search term input;
Acquiring a search term received and input, and determining whether or not the acquired search term is included in the displayed subtitle sentence;
When it is determined that the search word is included in the displayed subtitle sentence, a step of notifying the determination result is provided,
A search result notification method for a captioned video reproduction apparatus.

On the computer,
The procedure to display the subtitle sentence played with the video,
To get the entered search terms,
A procedure for determining whether or not the retrieved search word is included in the subtitle sentence reproduced and displayed together with the video,
A procedure for performing a notification indicating the determination result when it is determined that the search word is included in the displayed subtitle sentence;
A program for running