JP3890335B2 - Content cue position control method, content cue position control device, and content cue position control program - Google Patents

Content cue position control method, content cue position control device, and content cue position control program Download PDF

Info

Publication number
JP3890335B2
JP3890335B2 JP2004104567A JP2004104567A JP3890335B2 JP 3890335 B2 JP3890335 B2 JP 3890335B2 JP 2004104567 A JP2004104567 A JP 2004104567A JP 2004104567 A JP2004104567 A JP 2004104567A JP 3890335 B2 JP3890335 B2 JP 3890335B2
Authority
JP
Japan
Prior art keywords
content
reproduction
search
playback
time stamp
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Expired - Fee Related
Application number
JP2004104567A
Other languages
Japanese (ja)
Other versions
JP2005293680A (en
Inventor
裕治 鮫田
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
NEC Embedded Products Ltd
Original Assignee
NEC Embedded Products Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by NEC Embedded Products Ltd filed Critical NEC Embedded Products Ltd
Priority to JP2004104567A priority Critical patent/JP3890335B2/en
Publication of JP2005293680A publication Critical patent/JP2005293680A/en
Application granted granted Critical
Publication of JP3890335B2 publication Critical patent/JP3890335B2/en
Anticipated expiration legal-status Critical
Expired - Fee Related legal-status Critical Current

Links

Images

Description

本発明は、コンテンツの頭出位置を制御するためのコンテンツ頭出位置制御方法、コンテンツ頭出位置制御装置及びコンテンツ頭出位置制御プログラムに関し、特に、ハードディスクドライブ、DVD(Digital Versatile Disc)又はビデオテープレコーダ等に記録されたコンテンツをサーチ再生した後に通常再生、スロー再生、静止画再生等のサーチ再生とは異なる第2の再生モードで再生する場合に、第2の再生モードにおける再生の頭出位置を制御するためのコンテンツ頭出位置制御方法、コンテンツ頭出位置制御装置及びコンテンツ頭出位置制御プログラムに関する。   The present invention relates to a content cue position control method, a content cue position control device, and a content cue position control program for controlling a cue position of content, and in particular, a hard disk drive, a DVD (Digital Versatile Disc) or a video tape. When the content recorded in the recorder or the like is searched for and played back in the second playback mode different from the search playback such as normal playback, slow playback, still image playback, etc., the playback cue position in the second playback mode The present invention relates to a content cue position control method, a content cue position control device, and a content cue position control program.

音声映像コンテンツがアナログ記録若しくはデジタル記録されたビデオテープレコーダ、音声映像コンテンツがデジタル記録されたハードディスク、コンパクトディスク、DVD、光磁気ディスク等から音声映像コンテンツを再生する際、又は、音声コンテンツがアナログ記録若しくはデジタル記録されたオーディオテープレコーダ、音声コンテンツがデジタル記録されたハードディスクドライブ、コンパクトディスク、DVD、光磁気ディスク等からコンテンツを再生する場合、必ずしも、コンテンツの最初から再生をするとは限らない。記録媒体の途中に記録されているチャプターを最初から再生をしたり、記録媒体の途中に記録されている曲を最初から再生をする場合には、インデックスを用いて頭出しをすることができる。   Video tape recorder with audio / video content recorded in analog or digital recording, audio / video content played back from hard disk, compact disc, DVD, magneto-optical disc, etc. with audio / video content digitally recorded, or audio content recorded in analog Alternatively, when content is reproduced from a digitally recorded audio tape recorder, a hard disk drive in which audio content is digitally recorded, a compact disc, a DVD, a magneto-optical disk, or the like, the content is not necessarily reproduced from the beginning. When a chapter recorded in the middle of a recording medium is reproduced from the beginning, or when a song recorded in the middle of the recording medium is reproduced from the beginning, the index can be used for cueing.

特許文献1には、ユーザがマークを付したカットの先頭画像及び末尾画像を表示し、また、これを可能とするために、シーンチェンジを検出する発明が記載されている。   Patent Document 1 describes an invention in which a start image and an end image of a cut marked by a user are displayed and a scene change is detected in order to enable this.

特許文献2には、コンテンツ中に散在する複数の画像を1つの画面に一覧表示し、その中から選択された画像に対応する部分を通常再生する発明が記載されている。   Patent Document 2 describes an invention in which a plurality of images scattered in content are displayed in a list on one screen, and a portion corresponding to an image selected from the images is normally reproduced.

特許文献3及び4には、シーンチェンジを検出する本願出願人を出願人とする発明が記載されている。   Patent Documents 3 and 4 describe inventions whose applicant is the applicant of the present application for detecting a scene change.

特許文献5には、ニュース番組等を要約して画面及び音声を出力する本願出願人を出願人とする発明が記載されている。また、要約のために、人物を検出する発明が第42乃至43段落及び第74段落に記載されており、テロップを検出する発明が第44段落に記載されており、類似画像を検出する発明が第66段落に記載されている。   Patent Document 5 describes an invention in which an applicant of the present application that summarizes a news program and outputs a screen and sound is the applicant. For the sake of summarization, the invention for detecting a person is described in the 42nd to 43rd paragraphs and the 74th paragraph, the invention for detecting a telop is described in the 44th paragraph, and the invention for detecting a similar image is described. It is described in the 66th paragraph.

特許文献6には、人物の顔を検出する本願出願人を出願人とする発明が記載されている。   Patent Document 6 describes an invention in which the applicant of the present application for detecting a human face is the applicant.

特許文献7には、検出された顔をデータベース中の顔と照合して、人物を識別する本願出願人を出願人とする発明が記載されている。   Patent Document 7 describes an invention in which an applicant of the present application who identifies a person by comparing a detected face with a face in a database is the applicant.

本願出願人は、非特許文献1に、人物の顔を検出し、照合するによる発明を記載している。   The applicant of the present application describes an invention in Non-Patent Document 1 by detecting and collating a human face.

本願出願人は、非特許文献2に、類似画像を検索する発明を記載している。
特開平9−107517号公報 特開平10−145743号公報 特開平6−259052号公報 特開2001−78196号公報 特開2002−149672号公報 特開平7−311833号公報 特開2001−283224号公報 顔検出/顔照合エンジン「Neo Face」、 インターネット <URL: http://www.sw.nec.co.jp/soft/neoface/nf01.html> 「Picture Finder」、 インターネット <http://www.sw.nec.co.jp/soft/PictureFinder/03.html>
The applicant of the present application describes an invention for searching for similar images in Non-Patent Document 2.
JP-A-9-107517 JP-A-10-145743 JP-A-6-259052 JP 2001-78196 A JP 2002-149672 A JP 7-311833 A JP 2001-283224 A Face detection / face matching engine “Neo Face”, Internet <URL: http://www.sw.nec.co.jp/soft/neoface/nf01.html> "Picture Finder", Internet <http://www.sw.nec.co.jp/soft/PictureFinder/03.html>

ところで、特定のシーンのみを視聴したり、特定の人物が記録されている部分のみを視聴する場合など、コンテンツ中の特定の部分のみを視聴した場合には、ユーザは、コンテンツをサーチ再生して、目的の部分が現れたならば、通常再生ボタンを押して、通常再生モードで視聴を始める。また、今見た部分を再度視聴したい場合には、ユーザは、コンテンツを逆転サーチ再生して、その部分の先頭部が現れたならば、通常再生ボタンを押して、通常再生モードで視聴を再開する。   By the way, when viewing only a specific part in the content, such as viewing only a specific scene or viewing only a part where a specific person is recorded, the user searches and reproduces the content. When the target portion appears, the normal playback button is pressed to start viewing in the normal playback mode. If the user wants to view the part that has just been viewed, the user performs reverse search playback of the content, and when the head of the part appears, presses the normal playback button to resume viewing in the normal playback mode.

しかし、ユーザが、サーチ画面を眺めていて、サーチ画面中に通常再生をしたい部分が含まれていることを発見してから、再生モードをサーチ再生モードから通常再生モードに移行させるための操作をするまでには、判断時間及び反射時間を含む遅延時間が経過している。従って、ユーザが、再生モードをサーチ再生モードから通常再生モードに移行するための操作を行った瞬間には、ユーザが再生を始めたいと判断した場所を通過している。従って、ユーザは、コンテンツが進みすぎている場合には、頭出しのために逆転再生の操作をすることが必要となり、コンテンツが戻りすぎている場合には、目的の部分が現れるまで待つことが必要となる。   However, after the user looks at the search screen and finds that the search screen contains a portion that he / she wants to perform normal playback, an operation for changing the playback mode from the search playback mode to the normal playback mode is performed. By the time, delay time including judgment time and reflection time has elapsed. Therefore, at the moment when the user performs an operation for changing the playback mode from the search playback mode to the normal playback mode, the user passes the place where he / she wants to start playback. Therefore, when the content is progressing too much, the user needs to perform a reverse playback operation for cueing. When the content is returning too much, the user waits until the target portion appears. Necessary.

従って、本発明は、ユーザが再生モードをサーチ再生モードからサーチ再生モード以外の再生モードに移行させるための操作をしたならば、サーチ再生モード以外の再生モードでコンテンツの再生を開始する場所がユーザが望んでいた場所になるように調整を行うコンテンツ頭出位置制御方法、コンテンツ頭出位置制御装置及びコンテンツ頭出位置制御プログラムを提供することを目的とする。   Therefore, according to the present invention, when the user performs an operation for shifting the playback mode from the search playback mode to a playback mode other than the search playback mode, the place where the content playback starts in the playback mode other than the search playback mode is determined by the user. It is an object of the present invention to provide a content cue position control method, a content cue position control device, and a content cue position control program that perform adjustment so that a desired location is obtained.

本発明の第1の観点によれば、コンテンツの再生モードをサーチ再生モードから他の再生モードに移行させるための操作がユーザにより行われたことを検出する操作検出ステップと、見積遅延時間に前記サーチ再生の速度を乗じることにより、補正時間を得る補正時間算出ステップと、前記操作が行われた瞬間の前記コンテンツのタイムスタンプから前記補正時間を差し引くことにより、見積始動タイムスタンプを得るタイムスタンプ補正ステップと、前記ユーザが希望する希望位置のタイムスタンプを入力する希望位置入力ステップと、前記見積始動タイムスタンプ、前記希望位置タイムスタンプ及び前記サーチ再生の速度に基づいて、前記見積遅延時間を補正する見積遅延時間補正ステップと、を備えることを特徴とするコンテンツ頭出位置制御方法が提供される。   According to the first aspect of the present invention, an operation detecting step for detecting that an operation for shifting the content playback mode from the search playback mode to another playback mode is performed by the user, and the estimated delay time A correction time calculation step for obtaining a correction time by multiplying the search reproduction speed, and a time stamp correction for obtaining an estimated start time stamp by subtracting the correction time from the time stamp of the content at the moment when the operation is performed A desired position input step for inputting a time stamp of a desired position desired by the user, and the estimated delay time is corrected based on the estimated start time stamp, the desired position time stamp, and the search reproduction speed. And an estimated delay time correcting step.置制 control method is provided.

上記のコンテンツ頭出位置制御方法において、前記見積遅延時間補正ステップは、前記見積始動タイムスタンプと前記希望位置タイムスタンプとの差分を前記サーチ再生の速度で除して得た時間に所定の係数を乗じて得た時間を前記見積遅延時間から減ずることにより、前記見積遅延時間を補正してもよい。   In the content cue position control method, the estimated delay time correction step may include a predetermined coefficient for a time obtained by dividing a difference between the estimated start time stamp and the desired position time stamp by the search reproduction speed. The estimated delay time may be corrected by subtracting the time obtained by multiplication from the estimated delay time.

上記のコンテンツ頭出位置制御方法において、前記見積遅延時間補正ステップは、複数回の頭出しに亘る前記見積始動タイムスタンプ、前記希望位置タイムスタンプ及び前記サーチ再生の速度に基づいて、前記見積遅延時間を補正してもよい。   In the content cue position control method, the estimated delay time correction step includes the estimated delay time based on the estimated start time stamp, the desired position time stamp, and the search reproduction speed over a plurality of cue times. May be corrected.

上記のコンテンツ頭出位置制御方法において、前記見積始動タイムスタンプ位置から最も近い順に1以上のシーンチェンジの位置を検出するシーンチェンジ検出ステップと、前記1以上のシーンチェンジの位置のコンテンツを希望位置の候補のコンテンツとして表示する表示ステップと、を更に備えるようにしてもよい。 In the above-described content cue position control method, a scene change detection step for detecting the position of one or more scene changes in the order closest to the estimated start time stamp position, and the content at the position of the one or more scene changes are set to a desired position. And a display step of displaying as candidate content .

本発明の第2の観点によれば、算出手段が、ユーザにより、コンテンツの再生モードをサーチ再生モードから他の再生モードに変更されると、ユーザが所望する位置に再生開始位置を補正するための補正情報であって、あらかじめ記憶手段に記憶されているものと、前記サーチ再生モードにおけるサーチ速度とから第1の再生開始位置を算出する第1のステップと、表示手段が、前記第1の再生開始位置近傍における前記コンテンツの複数のサムネイル画像を表示する第2のステップと、再生手段が、ユーザにより選択された前記サムネイル画像に基づいて第2の再生開始位置を決定し、前記第2の再生開始位置から前記コンテンツを再生する第3のステップとを有することを特徴とするコンテンツ再生制御方法が提供される。  According to the second aspect of the present invention, the calculation means corrects the reproduction start position to a position desired by the user when the user changes the content reproduction mode from the search reproduction mode to another reproduction mode. Correction information stored in advance in the storage means, a first step of calculating a first reproduction start position from the search speed in the search reproduction mode, and a display means comprising: A second step of displaying a plurality of thumbnail images of the content in the vicinity of the playback start position; and a playback means determining a second playback start position based on the thumbnail image selected by a user; And a third step of reproducing the content from the reproduction start position. A content reproduction control method is provided.

本発明の第3の観点によれば、算出手段が、ユーザにより、コンテンツの再生モードをサーチ再生モードから他の再生モードに変更されると、ユーザが所望する位置に再生開始位置を補正するための補正情報であって、あらかじめ記憶手段に記憶されているものと、前記サーチ再生モードにおけるサーチ速度とから第1の再生開始位置を算出する第1のステップと、再生手段が、前記第1の再生位置から最も近いシーンチェンジの位置を第2の再生開始位置として決定し、前記第2の再生開始位置から前記コンテンツを再生する第3のステップとを有することを特徴とするコンテンツ再生制御方法が提供される。  According to the third aspect of the present invention, when the user changes the content playback mode from the search playback mode to another playback mode, the calculation means corrects the playback start position to a position desired by the user. The first step of calculating the first reproduction start position from the correction information stored in the storage means in advance and the search speed in the search reproduction mode, and the reproduction means, And a third step of determining a scene change position closest to the reproduction position as a second reproduction start position and reproducing the content from the second reproduction start position. Provided.

本発明の第2又は第3の観点によるコンテンツ生成制御方法において、変更手段が、前記第1の再生開始位置、前記第2の再生開始位置および前記サーチ再生モードにおけるサーチ速度に基づいて、前記補正情報を変更する第4のステップをさらに有するようにしてもよい。  In the content generation control method according to the second or third aspect of the present invention, the correction means performs the correction based on the first playback start position, the second playback start position, and the search speed in the search playback mode. You may make it further have the 4th step which changes information.

本発明によれば、ユーザが再生モードをサーチ再生モードからサーチ再生モード以外の再生モードに移行させるための操作をしたならば、サーチ再生モード以外の再生モードでコンテンツの再生を開始する場所がユーザが望んでいた場所になるように調整を行うことができる。また、サーチ再生モード中に再生速度を変えることで、ユーザが望んでいる再生位置を探し易くすることができる。   According to the present invention, when the user performs an operation for shifting the playback mode from the search playback mode to a playback mode other than the search playback mode, the place where the content playback starts in the playback mode other than the search playback mode is the user. You can make adjustments to get where you want. Further, by changing the playback speed during the search playback mode, it is possible to easily find the playback position desired by the user.

以下、図面を参照して本発明を実施するための最良の形態について詳細に説明する。   The best mode for carrying out the present invention will be described below in detail with reference to the drawings.

図1を参照して本発明の概略を説明すると、例えば、再生モードを正方向サーチ再生モードから通常再生モードに移行させるためのユーザによる操作を検出したならば、その時のコンテンツのタイムスタンプTSAから補正時間(後述する。)ΔTSABに相当する距離だけ戻ったタイムスタンプTSBの位置(見積頭出位置)まで、コンテンツを巻き戻し、見積頭出位置から通常再生を開始する。そして、真にユーザが通常再生を開始したいと希望していた位置(希望頭出位置)のタイムスタンプTSCから見積頭出位置のタイムスタンプTSBを差し引いた時間を誤差時間ΔTSBCとして算出し、補正時間ΔTSABから誤差時間ΔTSBCを差し引いた時間を新たな補正時間ΔTSAB’とする。 The outline of the present invention will be described with reference to FIG. 1. For example, if an operation by the user for changing the playback mode from the forward search playback mode to the normal playback mode is detected, the time stamp TSA of the content at that time is detected. The content is rewound to the position of the time stamp TSB (estimated cue position) returned by a correction time (described later) ΔTSAB, and normal playback is started from the estimated cue position. Then, a time obtained by subtracting the time stamp TSB of the estimated head position from the time stamp TSC of the position (desired head position) where the user really wanted to start normal reproduction is calculated as an error time ΔTSBC, and the correction time to be a new correction time ΔTSAB 'a time which is obtained by subtracting the error time Δ TSBC from ΔTSAB.

こうすることにより、次回に同様な動作をした時に、タイムスタンプTSBとタイムスタンプTSCが一致することとなり、ユーザは、タイムスタンプTSBの位置からタイムスタンプTSCの位置までコンテンツを巻き戻したり、進めたりする必要が無くなる。   By doing this, when the same operation is performed next time, the time stamp TSB and the time stamp TSC coincide with each other, and the user rewinds or advances the content from the position of the time stamp TSB to the position of the time stamp TSC. There is no need to do.

本発明を適用する再生モードの遷移は、サーチ再生モードから通常再生モードへの遷移のみならず、サーチ再生モードからサーチ再生モード以外の再生モードである。サーチ再生モードの速度は、例えば、数倍速〜数十倍速である。サーチ再生モード以外の再生モードには、通常再生モードのみならず、早見再生モード、スロー再生モード、コマ送り再生モード、ジョグ再生モード、静止画再生モード及び逆転再生モードが含まれる。ここで、通常再生モードの再生速度は、1倍速であり、早見再生モードの再生速度は、1を超える数倍速(例えば、1.5倍、2倍、2.5倍、3倍、3.5倍、4倍、…)であり、スロー再生モードの再生速度は、0を超え1未満(例えば、1/2倍、1/3倍、1/4倍、1/5倍、…)であり、静止画再生モードの再生速度は、0であり、逆転再生モードの再生速度は、0未満マイナス数倍速(例えば、−4倍速、−3.5倍速、−3倍速、−2.5倍速、−2倍速、−1.5倍速、−1倍速、−1/2倍速、−3/1倍速、−1/4倍速、−1/5倍速等)である。コマ送り再生モードでは、通常は静止画再生を行い、コマ送りボタンが押された時に1フレーム正転又は逆転する。ジョグ再生モードでは、ジョグダイアルの回転量に応じて、フレームが正方向又は逆方向に進む。   The transition of the playback mode to which the present invention is applied is not only a transition from the search playback mode to the normal playback mode, but also a playback mode other than the search playback mode from the search playback mode. The speed of the search reproduction mode is, for example, several times speed to several tens times speed. Playback modes other than the search playback mode include not only the normal playback mode but also the fast-play playback mode, slow playback mode, frame advance playback mode, jog playback mode, still image playback mode, and reverse playback mode. Here, the playback speed in the normal playback mode is 1 × speed, and the playback speed in the fast-view playback mode is several times faster than 1 (for example, 1.5 ×, 2 ×, 2.5 ×, 3 ×, 3. 5 times, 4 times,..., And the playback speed in the slow playback mode is greater than 0 and less than 1 (for example, 1/2 times, 1/3 times, 1/4 times, 1/5 times,...). Yes, the playback speed of the still image playback mode is 0, and the playback speed of the reverse playback mode is less than 0 minus several times speed (for example, -4 times speed, -3.5 times speed, -3 times speed, -2.5 times speed) , -2 times speed, -1.5 times speed, -1 times speed, -1/2 times speed, -3/1 times speed, -1/4 times speed, -1/5 times speed, and the like. In the frame advance playback mode, still image playback is normally performed, and when the frame advance button is pressed, one frame is rotated forward or backward. In the jog playback mode, the frame advances in the forward direction or the reverse direction according to the amount of rotation of the jog dial.

また、サーチ再生ボタンを押している最中にサーチ再生が行われ、サーチ再生ボタンから指が離されると通常再生モードに移行するのであれば、サーチモード再生から通常再生モードに移行させるためのユーザによる操作を検出する時とは、サーチ再生ボタンから指が離されたことを検出した時である。また、サーチ再生ボタンを一度押せば、その後サーチ再生ボタンを押さなくても、サーチ再生を行い、サーチ再生の最中に通常再生ボタンが押された時に、サーチ再生モードから通常再生モードへ移行するのであれば、サーチモード再生から通常再生モードに移行させるためのユーザによる操作を検出する時とは、通常再生ボタンが押されたことを検出した時である。但し、速度サーボ部への速度指示信号の変化時をサーチモード再生から通常再生モードに移行させるためのユーザによる操作を検出する時としてもよい。 If the search playback is performed while the search playback button is being pressed and the normal playback mode is entered when the finger is released from the search playback button, a user for switching from the search mode playback to the normal playback mode is used. The operation is detected when it is detected that the finger is released from the search reproduction button. Also, once the search playback button is pressed, search playback is performed without pressing the search playback button. When the normal playback button is pressed during search playback, the search playback mode is switched to the normal playback mode. if the, from the search mode playback and when detecting an operation by a user to shift to the normal reproduction mode is when the normal is detected that the playback button is pressed. However, the time when the speed instruction signal to the speed servo unit is changed may be a time when an operation by the user for shifting from the search mode reproduction to the normal reproduction mode is detected.

次に、図2を参照して、本発明の原理を説明する。判断時間及び反射時間を含む遅延時間の見積値(見積遅延時間)は、ΔRTであり、サーチ再生の速度に依存しないと仮定する。N倍速のサーチ再生の場合には、見積遅延時間ΔRTにサーチ再生速度Nを乗じることにより補正時間ΔTSABを求める(ΔTSAB=N×ΔRT)。次に、タイムスタンプTSAの位置から補正時間ΔTSABに相当する距離だけコンテンツ巻き戻し、こうすることにより、コンテンツをタイムスタンプTSBの位置まで至らせる(TSB=TSA−ΔTSAB)。N倍速のサーチ再生の場合には、見積遅延時間ΔRTにサーチ再生速度Nを乗じることにより補正時間ΔTSABを求める(ΔTSAB=N×ΔRT)。次に、タイムスタンプTSAの位置から補正時間ΔTSABに相当する距離だけコンテンツ巻き戻し、こうすることにより、コンテンツをタイムスタンプTSBの位置まで至らせる(TSB=TSA−ΔTSAB)。従って、サーチ再生の速度が変化しても、遅延時間に対応した距離だけコンテンツを巻き戻すことが可能となる。なお、逆転サーチ再生をしている場合は、早送り巻き戻しに変わる点を除き、正転サーチ再生の場合と同様である。 Next, the principle of the present invention will be described with reference to FIG. It is assumed that the estimated value of the delay time (estimated delay time) including the judgment time and the reflection time is ΔRT and does not depend on the search reproduction speed. In the case of N 1 × speed search reproduction, the correction time ΔTSAB 1 is obtained by multiplying the estimated delay time ΔRT by the search reproduction speed N 1 (ΔTSAB 1 = N 1 × ΔRT). Next, the content is rewound from the position of the time stamp TSA 1 by a distance corresponding to the correction time ΔTSAB 1, and thereby the content is brought to the position of the time stamp TSB 1 (TSB 1 = TSA 1 −ΔTSAB 1 ). In the case of N 2 times speed search reproduction, the correction time ΔTSAB 2 is obtained by multiplying the estimated delay time ΔRT by the search reproduction speed N 2 (ΔTSAB 2 = N 2 × ΔRT). Next, the content is rewound by a distance corresponding to the correction time ΔTSAB 2 from the position of the time stamp TSA 2 , and thereby the content is brought to the position of the time stamp TSB 2 (TSB 2 = TSA 2 −ΔTSAB 2 ). Therefore, even if the search reproduction speed changes, the content can be rewound by a distance corresponding to the delay time. The reverse search reproduction is the same as the normal search reproduction except that fast forward is changed to rewind .

次に、図3を参照して、見積遅延時間の補正方法について説明する。図2では、2種類のサーチ速度N及びNの場合を示したが、図3では、両者を代表して、サーチ速度がNであるとする。タイムスタンプTSAの位置から補正時間ΔTSABだけ巻き戻されたタイムスタンプTSBの位置は、見積遅延時間ΔRTに基づいた位置であり、見積遅延時間ΔRTに誤差が含まれている場合には、真にユーザが頭出をしたい位置(タイムスタンプTSC)の位置と一致しない。 Next, a method for correcting the estimated delay time will be described with reference to FIG. FIG. 2 shows the case of two types of search speeds N 1 and N 2. In FIG. 3, it is assumed that the search speed is N on behalf of both. The position of the time stamp TSB that has been rewound by the correction time ΔTSAB from the position of the time stamp TSA is a position based on the estimated delay time ΔRT, and if the estimated delay time ΔRT includes an error, the user is truly a user. Does not match the position (time stamp TSC) at which cueing is desired.

そこで、タイムスタンプTSCからタイムスタンプTSBを差し引くことによりタイムスタンプ換算誤差ΔTSBCを得て(ΔTSBC=TSC−TSB)、これをサーチ速度Nで除することにより見積遅延時間誤差ΔCを得て(ΔC=ΔTSBC/N)、見積遅延時間ΔRTから見積遅延時間誤差ΔCを差し引くことにより、見積遅延時間ΔRTを更新する(ΔRT’=ΔRT−ΔC=ΔRT−ΔTSBC/N)。   Therefore, a time stamp conversion error ΔTSBC is obtained by subtracting the time stamp TSB from the time stamp TSC (ΔTSBC = TSC−TSB), and this is divided by the search speed N to obtain an estimated delay time error ΔC (ΔC = ΔTSBC / N), the estimated delay time ΔRT is updated by subtracting the estimated delay time error ΔC from the estimated delay time ΔRT (ΔRT ′ = ΔRT−ΔC = ΔRT−ΔTSBC / N).

こうすることにより、サーチ速度に依存しない見積遅延時間ΔRTが補正されるので、次回以降、サーチ速度が変化しても、タイムスタンプTSBはタイムスタンプTSCと一致することとなる。   By doing so, the estimated delay time ΔRT that does not depend on the search speed is corrected, so that the time stamp TSB matches the time stamp TSC even if the search speed changes from the next time.

次に、図4を参照して、希望頭出位置のタイムスタンプTSCを得る1つの方法について説明する。コンテンツを見積頭出位置(タイムスタンプがTSBである位置)まで巻き戻したならば、その位置を中心として、所定の範囲のサムネイル画像301−1乃至301−5を一覧表示する。そして、ユーザに頭出し位置の画像を選択させ、ユーザにより選択された画像がある位置のタイムスタンプを希望頭出位置のタイムスタンプTSCとする。   Next, with reference to FIG. 4, one method for obtaining the time stamp TSC at the desired cueing position will be described. When the content is rewound to the estimated head position (the position where the time stamp is TSB), thumbnail images 301-1 to 301-5 in a predetermined range are displayed as a list centering on the position. Then, the user selects an image at the cue position, and the time stamp at the position where the image selected by the user is located is set as the time stamp TSC at the desired cue position.

サムネイル画像301−1乃至301−5は、一定間隔の複数位置の画像であってもよいし、見積頭出位置からの距離が短い順に上位の位置にあるシーンチェンジ直後の画像であってもよい。シーンチェンジ検出をするためには、例えば、特許文献3又は4に記載されている発明を利用することができる。   The thumbnail images 301-1 to 301-5 may be images at a plurality of positions at regular intervals, or may be images immediately after a scene change at a higher position in order of shorter distance from the estimated cue position. . In order to detect a scene change, for example, the invention described in Patent Document 3 or 4 can be used.

また、図5に示すように、ユーザからの選択を待たずに、見積頭出位置からの距離が最も短い位置にあるシーンチェンジのタイムスタンプをタイムスタンプTSCとして、自動的に通常再生を開始し、更に、自動的に見積遅延時間ΔRTを補正しても良い。   In addition, as shown in FIG. 5, normal playback is automatically started without waiting for selection from the user, using the time stamp of the scene change at the position where the distance from the estimated cue position is the shortest as the time stamp TSC. Furthermore, the estimated delay time ΔRT may be automatically corrected.

次に、見積遅延時間ΔRTの補正方法のバリエーションについて説明する。   Next, variations of the method for correcting the estimated delay time ΔRT will be described.

上述の例では、見積遅延時間ΔRTから見積遅延時間誤差ΔCを差し引くことにより、見積遅延時間を補正した(ΔRT’=ΔRT−ΔC)。しかし、このような補正を行うと、単に、前回補正された見積遅延時間を次回に適用するのみであり、前回の補正が誤りであれば、次回の見積遅延時間は誤ったものとなってしまう。   In the above example, the estimated delay time is corrected by subtracting the estimated delay time error ΔC from the estimated delay time ΔRT (ΔRT ′ = ΔRT−ΔC). However, when such correction is performed, the estimated delay time corrected last time is simply applied to the next time, and if the previous correction is incorrect, the next estimated delay time is incorrect. .

そこで、例えば、図6に示すように、見積遅延時間ΔRTから見積遅延時間誤差ΔCに1未満の係数(図6の例では1/2)を掛けた値を見積遅延時間ΔRTから差し引くことにより、見積遅延時間を補正する(ΔRT’=ΔRT−a×ΔC)。こうすることにより、すでに見積遅延時間ΔRTが正しい値に収束し、連続して見積遅延時間誤差ΔCがほぼゼロとなった後に、錯誤的に1回だけ見積遅延時間誤差ΔCの大きな値になったとしても、見積遅延時間ΔRTが大きく補正されることが無くなる。   Therefore, for example, as shown in FIG. 6, by subtracting a value obtained by multiplying the estimated delay time error RT from the estimated delay time error ΔC by a coefficient less than 1 (1/2 in the example of FIG. 6) from the estimated delay time ΔRT, The estimated delay time is corrected (ΔRT ′ = ΔRT−a × ΔC). By doing this, the estimated delay time ΔRT has already converged to the correct value, and after the estimated delay time error ΔC has become substantially zero continuously, the estimated delay time error ΔC has become a large value only once by mistake. However, the estimated delay time ΔRT is not greatly corrected.

また、図7に示すように、過去の複数回にわたるΔRT−ΔCを基に、見積遅延時間ΔRTを補正しても良い。図7の例では、ΔRTを求める場合には、過去の1回のΔRT−ΔCを基に、見積遅延時間を補正する。使用を開始してから間もない頃に、過去の複数回にわたるΔRT−ΔCが蓄積されていない場合には、1回の過去のΔRT−ΔCのみを利用することにより、最速に見積遅延時間を正しい値まで持っていくことができる。ΔRTを求める場合には、過去の2回のΔRT−ΔCを基に見積遅延時間を補正する。使用を開始してから間もない頃に、過去の所定の複数回にわたるΔRT−ΔCが蓄積されていない場合には、所定の複数回未満の数の過去のΔRT−ΔCのみを利用することにより、早く且つある程度の信頼性を伴って見積遅延時間を正しい値まで持っていくことができる。ΔRT、ΔRT、ΔRT、…を求める場合には、過去の3回のΔRT−ΔCを基に見積遅延時間を補正する。使用を開始してから使用回数が一定回数以上になり、過去の所定の複数回にわたるΔRT−ΔCが蓄積されている場合には、所定の複数回の過去のΔRT−ΔCのみを利用することにより、かなりの信頼性を伴って見積遅延時間を微調整することができる。図7の例では、過去の3回のΔRT−ΔCを基に見積遅延時間を補正する状態が定常状態であるとしたが、過去の4回以上のΔRT−ΔCを基に見積遅延時間を補正する状態が定常状態であるとしてもよい。 Further, as shown in FIG. 7, the estimated delay time ΔRT may be corrected based on ΔRT−ΔC over a plurality of past times. In the example of FIG. 7, when ΔRT 2 is obtained, the estimated delay time is corrected based on the past ΔRT−ΔC. When ΔRT-ΔC has not been accumulated several times before the start of use, the estimated delay time is set to the fastest by using only one past ΔRT-ΔC. You can bring it to the correct value. When ΔRT 3 is obtained, the estimated delay time is corrected based on the past two ΔRT−ΔC. When ΔRT-ΔC for a plurality of past predetermined times has not been accumulated shortly after the start of use, by using only a number of past ΔRT-ΔC less than a predetermined number of times The estimated delay time can be brought to a correct value quickly and with a certain degree of reliability. When obtaining ΔRT 3 , ΔRT 4 , ΔRT 5 ,..., The estimated delay time is corrected based on the past three ΔRT−ΔC. When the number of times of use has exceeded a certain number of times since the start of use and ΔRT-ΔC has been accumulated for a plurality of past predetermined times, by using only a predetermined number of past ΔRT-ΔC. The estimated delay time can be fine tuned with considerable reliability. In the example of FIG. 7, the state in which the estimated delay time is corrected based on the past three ΔRT−ΔC is the steady state, but the estimated delay time is corrected based on the past four or more ΔRT−ΔC. The state to be performed may be a steady state.

図7の例では、過去の3回のΔRT−ΔCを等しい重みで利用することとしたが、図8に示すように、加重平均を取っても良い。図8の例では、最近のΔRT−ΔCに対して重みを重くしている。   In the example of FIG. 7, the past three ΔRT−ΔC are used with equal weights, but a weighted average may be taken as shown in FIG. 8. In the example of FIG. 8, the weight is increased with respect to the recent ΔRT−ΔC.

図9は、図8の例を表で表したものである。   FIG. 9 is a table showing the example of FIG.

図10は、図8の表を一般化したものである。各行の全ての重みの和は1でなければならない。例えば、
(2)+a(2)=1
(3)+a(3)+a(3)=1
である。しかし、重みについてのそれ以外の制限はない。
FIG. 10 is a generalization of the table of FIG. The sum of all weights in each row must be 1. For example,
a 1 (2) + a 2 (2) = 1
a 1 (3) + a 2 (3) + a 3 (3) = 1
It is. However, there are no other restrictions on the weight.

図11の例では、ΔRT、ΔRT及びΔRTの計算において、ΔRT−ΔCを用いていない。これは、ΔRT−ΔCの値が、ΔRT−ΔC、ΔRT−ΔC、ΔRT−ΔC、…と比較してかけ離れた値である。このような場合には、錯誤的にΔRT−ΔCの値が得られたと判断して、ΔRT−ΔCを用いないこととしている。あるΔRT−ΔCを用いるか用いないかについては、例えば、その前後のΔRT−ΔCの平均値を中心とした所定時間の範囲に入っているか否かに基づいて判断する。また、所定数のΔRT−ΔCを集め、最大値から所定数個のΔRT−ΔC及び最小値から所定数個のΔRT−ΔCを除外するようにしても良い。例えば、過去10回のΔRT−ΔCを集め、最大値をとるΔRT−ΔC、2番目の最大値をとるΔRT−ΔC、最小値をとるΔRT−ΔC及び2番目の最小値をとるΔRT−ΔCを除外して、過去回のΔRT−ΔCの加重平均により、ΔRTを補正しても良い。 In the example of FIG. 11, ΔRT 5 -ΔC 5 is not used in the calculation of ΔRT 6 , ΔRT 7, and ΔRT 8 . This is a value in which the value of ΔRT 5 −ΔC 5 is far from that of ΔRT 4 −ΔC 4 , ΔRT 3 −ΔC 3 , ΔRT 2 −ΔC 2 ,. In such a case, it is determined by mistake that the value of ΔRT 5 -ΔC 5 has been obtained, and ΔRT 5 -ΔC 5 is not used. Whether or not to use a certain ΔRT−ΔC is determined based on, for example, whether or not a certain ΔRT−ΔC is within a predetermined time range centered on an average value of ΔRT−ΔC before and after that. Alternatively, a predetermined number of ΔRT−ΔC may be collected, and a predetermined number of ΔRT−ΔC may be excluded from the maximum value and a predetermined number of ΔRT−ΔC may be excluded from the minimum value. For example, the past 10 ΔRT−ΔC are collected, ΔRT 3 −ΔC 3 taking the maximum value, ΔRT 5 −ΔC 5 taking the second maximum value, ΔRT 2 −ΔC 2 taking the minimum value, and the second minimum value excludes ΔRT 7 -ΔC 7 taking, the weighted average of the past six ΔRT-ΔC, may be corrected DerutaRT.

サーチ速度は一定でなくても良いことを上述したが、例えば、図12に示すように、テロップが含まれている画像、人物が含まれている画像及び特定画像が含まれている画像において、サーチ速度を遅くして、その他の画像において、サーチ速度を速くするようにしても良い。勿論、テロップが含まれている画像のみにおいてサーチ速度を遅くしてもよいし、人物が含まれている画像のみにおいてサーチ速度を遅くしてもよいし、特定画像が含まれている画像のみにおいてサーチ速度を遅くしてもよい。   As described above, the search speed may not be constant. For example, as illustrated in FIG. 12, in an image including a telop, an image including a person, and an image including a specific image, The search speed may be decreased to increase the search speed for other images. Of course, the search speed may be slowed only for images containing telops, the search speed may be slowed only for images containing people, or only for images containing specific images. The search speed may be slowed down.

テロップが含まれている画像を検出するためには、例えば、特許文献5に記載されている発明を利用することができる。人物が含まれている画像を検出するためには、例えば、特許文献6、特許文献7及び非特許文献1に記載されている発明を利用することができる。特定画像が含まれている画像を検出するためには、例えば、特許文献5及び非特許文献2に記載されている発明を利用することができる。   In order to detect an image including a telop, for example, the invention described in Patent Document 5 can be used. In order to detect an image including a person, for example, the inventions described in Patent Document 6, Patent Document 7, and Non-Patent Document 1 can be used. In order to detect an image including a specific image, for example, the inventions described in Patent Document 5 and Non-Patent Document 2 can be used.

次に、本実施形態の具体的な構成及び動作について、図13、14及び15を参照して説明する。   Next, a specific configuration and operation of the present embodiment will be described with reference to FIGS.

図13を参照すると、本実施形態によるコンテンツ頭出位置制御装置は、ドライブ103、位置サーボ部105、速度サーボ部107、サーチ速度検出部109、操作検出部111、見積遅延時間格納部113、補正時間算出部115、操作時タイムスタンプ取得部117、タイムスタンプ補正部119、見積遅延時間補正部121、希望位置入力部123、ユーザインターフェース部125、再生部127、シーンチェンジ検出部129、テロップ検出部131、人物検出部133、特定画像検出部135、サーチ速度指示部137及び特定画像指定部139を備える。なお、これらの部分はハードウェアによって実現することもできるが、コンピュータをこれらの部分として機能させるためのプログラムをコンピュータが読み込んで実行することによっても実現することができる。   Referring to FIG. 13, the content cue position control apparatus according to the present embodiment includes a drive 103, a position servo unit 105, a speed servo unit 107, a search speed detection unit 109, an operation detection unit 111, an estimated delay time storage unit 113, and a correction. Time calculation unit 115, operation time stamp acquisition unit 117, time stamp correction unit 119, estimated delay time correction unit 121, desired position input unit 123, user interface unit 125, playback unit 127, scene change detection unit 129, telop detection unit 131, a person detection unit 133, a specific image detection unit 135, a search speed instruction unit 137, and a specific image designation unit 139. These parts can be realized by hardware, but can also be realized by reading and executing a program for causing a computer to function as these parts.

まず、全体の動作について、図13及び14を参照して説明する。   First, the overall operation will be described with reference to FIGS.

まず、操作検出部111は、ユーザインターフェース部125を介して、サーチ再生モードに移行したか否かを判断する(ステップS201)。又は、サーチ速度検出部109が、速度サーボ部107から得られる目標速度又は実際の速度を検出することにより、サーチ再生モードに移行したか否かを判断しても良い。次に、サーチ速度検出部109は、速度サーボ部107から得られる目標速度又は実際の速度をサーチ速度Nとして検出する(ステップS203)。次に、操作検出部111は、ユーザインターフェース部125を介して、サーチ再生モード以外の再生モードに移行したか否かを判断する(ステップS205)。   First, the operation detection unit 111 determines whether or not the search playback mode has been entered via the user interface unit 125 (step S201). Alternatively, the search speed detection unit 109 may determine whether the search playback mode has been entered by detecting the target speed or the actual speed obtained from the speed servo unit 107. Next, the search speed detection unit 109 detects the target speed or actual speed obtained from the speed servo unit 107 as the search speed N (step S203). Next, the operation detection unit 111 determines whether or not the playback mode has shifted to a playback mode other than the search playback mode via the user interface unit 125 (step S205).

次に、操作時タイムスタンプ取得部117は、位置サーボ部105から得られるタイムスタンプ及び操作検出部111から得られるモード移行検出信号に基づいて、サーチ再生モードから他の再生モードに移行するための操作が行われた瞬間のタイムスタンプTSAを検出する(ステップS207)。 Next, the operation time stamp acquisition unit 117 is for shifting from the search reproduction mode to another reproduction mode based on the time stamp obtained from the position servo unit 105 and the mode transition detection signal obtained from the operation detection unit 111. The time stamp TSA at the moment when the operation is performed is detected (step S207).

次に、補正時間算出部115は、見積遅延時間格納部113から得られる見積遅延時間ΔRTにサーチ速度検出部109から得られるサーチ速度Nを乗ずることにより、補正時間ΔTSABを得る(ステップS209)。   Next, the correction time calculation unit 115 obtains the correction time ΔTSAB by multiplying the estimated delay time ΔRT obtained from the estimated delay time storage unit 113 by the search speed N obtained from the search speed detection unit 109 (step S209).

次に、タイムスタンプ補正部119は、操作時タイムスタンプ取得部117から得られる操作検出時のタイムスタンプTSAから補正時間ΔTSABを差し引くことにより、見積始動タイムスタンプTSBを得る(ステップS211)。   Next, the time stamp correction unit 119 obtains an estimated start time stamp TSB by subtracting the correction time ΔTSAB from the operation detection time stamp TSA obtained from the operation time stamp acquisition unit 117 (step S211).

次に、位置サーボ部105は、ドライブ103を駆動することにより、見積始動タイムスタンプTSBの位置までコンテンツ媒体101に記録されているコンテンツを移動させる(ステップS213)。   Next, the position servo unit 105 moves the content recorded on the content medium 101 to the position of the estimated start time stamp TSB by driving the drive 103 (step S213).

次に、位置サーボ部105による制御により、見積始動タイムスタンプTSBの位置を中心とする所定範囲の所定数の画像を再生部127により再生し、ユーザインターフェース部125は、それらのサムネイル画像を画面に一覧表示する(ステップS215)。又は、位置サーボ部105による制御により、見積始動タイムスタンプTSBの位置を中心とする所定範囲の画像を再生部127により再生し、シーンチェンジ検出部129が、再生画像からシーンチェンジを検出し、ユーザインターフェース部125は、1以上のシーンチェンジ直後のサムネイル画像を画面に一覧表示するようにしてもよい。   Next, under the control of the position servo unit 105, a predetermined number of images in a predetermined range centered on the position of the estimated start time stamp TSB are reproduced by the reproduction unit 127, and the user interface unit 125 displays the thumbnail images on the screen. A list is displayed (step S215). Alternatively, under the control of the position servo unit 105, an image within a predetermined range centered on the position of the estimated start time stamp TSB is reproduced by the reproduction unit 127, and the scene change detection unit 129 detects a scene change from the reproduction image, and the user The interface unit 125 may display a list of thumbnail images immediately after one or more scene changes on the screen.

次に、ユーザインターフェース部125は、ユーザにより選択されたサムネイル画像を識別する(ステップS217)。次に、希望位置入力部123は、ステップS217で識別されたサムネイル画像に対応するタイムスタンプを希望位置タイムスタンプTSCとして検出する(ステップS219)。次に、見積遅延時間補正部121は、見積始動タイムスタンプTSB、希望位置タイムスタンプTSC及びサーチ速度Nに基づいて、見積遅延時間ΔRTを補正し、補正後の見積遅延時間ΔRTを見積遅延時間格納部113に格納する(ステップ221)。   Next, the user interface unit 125 identifies the thumbnail image selected by the user (step S217). Next, the desired position input unit 123 detects the time stamp corresponding to the thumbnail image identified in step S217 as the desired position time stamp TSC (step S219). Next, the estimated delay time correction unit 121 corrects the estimated delay time ΔRT based on the estimated start time stamp TSB, the desired position time stamp TSC, and the search speed N, and stores the corrected estimated delay time ΔRT as the estimated delay time. The data is stored in the unit 113 (step 221).

次に、サーチ速度の制御について、図13及び15を参照して説明する。   Next, search speed control will be described with reference to FIGS.

まず、ユーザインターフェース部125は、ユーザからの再生モード指示の信号を基に、サーチ再生モードに移行したか否かを判断する(ステップS251)。   First, the user interface unit 125 determines whether the search playback mode has been entered based on a playback mode instruction signal from the user (step S251).

サーチ再生モードに移行したならば(ステップS251でYES)、テロップ検出部131は、再生されている画像にテロップが含まれているか否かを検出する(ステップS253)。再生されている画像にテロップが含まれている場合にはステップS261に進み、そうでない場合にはステップS255に進む。   If the search reproduction mode is entered (YES in step S251), the telop detection unit 131 detects whether or not a telop is included in the image being reproduced (step S253). If a telop is included in the reproduced image, the process proceeds to step S261. If not, the process proceeds to step S255.

ステップS255では、人物検出部133は、再生されている画像に人物が含まれているか否かを検出する。再生されている画像に人物が含まれている場合にはステップS261に進み、そうでない場合にはステップS257に進む。   In step S255, the person detection unit 133 detects whether a person is included in the reproduced image. If a person is included in the reproduced image, the process proceeds to step S261. If not, the process proceeds to step S257.

ステップS257では、特定画像検出部135は、再生されている画像に特定画像指定部139にて指定された特定画像が含まれているか否かを検出する。再生されている画像に特定画像が含まれている場合にはステップS261に進み、そうでない場合にはステップS259に進む。   In step S257, the specific image detecting unit 135 detects whether or not the reproduced image includes the specific image specified by the specific image specifying unit 139. If the specific image is included in the reproduced image, the process proceeds to step S261, and if not, the process proceeds to step S259.

ステップS259では、サーチ再生の速度をN2に設定する。ステップS261では、サーチ再生の速度をN1に設定する(N1<N2)。   In step S259, the search reproduction speed is set to N2. In step S261, the search reproduction speed is set to N1 (N1 <N2).

次に、サーチ再生モード以外の再生モードに移行するためのユーザからの入力があれば(ステップS269でYES)、ステップS251に戻り、一定時間が経過すれば(ステップS267でYES)、ステップS253に戻る。ここで、時間の計測のために一次変数Iを用いている(ステップS263及びS265)。   Next, if there is an input from the user to shift to a playback mode other than the search playback mode (YES in step S269), the process returns to step S251, and if a certain time has passed (YES in step S267), the process returns to step S253. Return. Here, the primary variable I is used for time measurement (steps S263 and S265).

なお、サーチ速度指示部137が、ステップS253、S255及びS257の判断を行い、ステップS259及びS261の速度設定を行い、設定された速度を速度サーボ部107に目標速度として与える。   Note that the search speed instruction unit 137 performs determinations in steps S253, S255, and S257, performs speed settings in steps S259 and S261, and gives the set speed to the speed servo unit 107 as a target speed.

本発明は、ハードディスクドライブ、DVD又はビデオテープレコーダ等に記録されたコンテンツをサーチ再生した後に通常再生、スロー再生、静止画再生等のサーチ再生とは異なる第2の再生モードで再生する場合に、第2の再生モードにおける再生の頭出位置を制御するために利用することができる。   The present invention is a case where the content recorded in a hard disk drive, DVD or video tape recorder or the like is searched for playback and then played back in a second playback mode different from search playback such as normal playback, slow playback, still image playback, etc. This can be used to control the cue position of reproduction in the second reproduction mode.

本発明の実施形態の概要を示すであり、巻き戻し量が自動補正される様子を示す。It is a figure which shows the outline | summary of embodiment of this invention, and shows a mode that the amount of rewinding is correct | amended automatically. 本発明の実施形態の原理を示す第1の図であり、サーチ再生速度が異なる場合に、巻き戻し量が異なる様子を示す。It is a 1st figure which shows the principle of embodiment of this invention, and shows a mode that the amount of rewinding differs when search reproduction speeds differ. 本発明の実施形態の原理を示す第2の図であり、見積遅延時間を補正する方法を示す。FIG. 6 is a second diagram showing the principle of the embodiment of the present invention, and shows a method of correcting the estimated delay time. 本発明の実施形態による、ユーザに頭出し位置を選択させるために表示する一覧画面を示す。6 shows a list screen that is displayed to allow a user to select a cue position, according to an embodiment of the present invention. 本発明の実施形態による、シーンチェンジ箇所からの自動再生を示す図である。It is a figure which shows the automatic reproduction | regeneration from the scene change location by embodiment of this invention. 本発明の実施形態による、見積遅延時間の補正方法のバリエーションを示す第1の図である。It is a 1st figure which shows the variation of the correction method of estimated delay time by embodiment of this invention. 本発明の実施形態による、見積遅延時間の補正方法のバリエーションを示す第2の図である。It is a 2nd figure which shows the variation of the correction method of estimated delay time by embodiment of this invention. 本発明の実施形態による、見積遅延時間の補正方法のバリエーションを示す第3の図である。It is a 3rd figure which shows the variation of the correction method of estimated delay time by embodiment of this invention. 本発明の実施形態による、見積遅延時間の補正方法のバリエーションを示す第4の図である。It is a 4th figure which shows the variation of the correction method of estimated delay time by embodiment of this invention. 本発明の実施形態による、見積遅延時間の補正方法のバリエーションを示す第5の図である。It is a 5th figure which shows the variation of the correction method of estimated delay time by embodiment of this invention. 本発明の実施形態による、見積遅延時間の補正方法のバリエーションを示す第6の図である。It is a 6th figure which shows the variation of the correction method of estimated delay time by embodiment of this invention. 本発明の実施形態による、可変サーチ再生速度を説明するための図である。It is a figure for demonstrating the variable search reproduction speed by embodiment of this invention. 本発明の実施形態によるコンテンツ頭出位置制御装置の構成を示すブロック図である。It is a block diagram which shows the structure of the content cue position control apparatus by embodiment of this invention. 本発明の実施形態によるコンテンツ頭出位置制御方法を示すフローチャートである。5 is a flowchart illustrating a content cue position control method according to an embodiment of the present invention. 本発明の実施形態による、可変サーチ再生速度を実現する方法を示すフローチャートである。4 is a flowchart illustrating a method for realizing a variable search playback speed according to an embodiment of the present invention.

符号の説明Explanation of symbols

101 コンテンツ媒体
103 ドライブ
105 位置サーボ部
107 速度サーボ部
109 サーチ速度検出部
111 操作検出部
113 見積遅延時間格納部
115 補正時間算出部
117 操作時タイムスタンプ取得部
119 タイムスタンプ補正部
121 見積遅延時間補正部
123 希望位置入力部
125 ユーザインターフェース部
127 再生部
129 シーンチェンジ検出部
131 テロップ検出部
133 人物検出部
135 特定画像検出部
137 サーチ速度指示部
139 特定画像指定部
DESCRIPTION OF SYMBOLS 101 Content medium 103 Drive 105 Position servo part 107 Speed servo part 109 Search speed detection part 111 Operation detection part 113 Estimated delay time storage part 115 Correction time calculation part 117 Operation time stamp acquisition part 119 Time stamp correction part 121 Estimated delay time correction Numeral 123 Favored position input unit 125 User interface unit 127 Playback unit 129 Scene change detection unit 131 Telop detection unit 133 Person detection unit 135 Specific image detection unit 137 Search speed instruction unit 139 Specific image specification unit

Claims (14)

コンテンツの再生モードをサーチ再生モードから他の再生モードに移行させるための操作がユーザにより行われたことを検出する操作検出ステップと、
見積遅延時間に前記サーチ再生の速度を乗じることにより、補正時間を得る補正時間算出ステップと、
前記操作が行われた瞬間の前記コンテンツのタイムスタンプから前記補正時間を差し引くことにより、見積始動タイムスタンプを得るタイムスタンプ補正ステップと、
前記ユーザが希望する希望位置のタイムスタンプを入力する希望位置入力ステップと、
前記見積始動タイムスタンプ、前記希望位置タイムスタンプ及び前記サーチ再生の速度に基づいて、前記見積遅延時間を補正する見積遅延時間補正ステップと、
を備えることを特徴とするコンテンツ頭出位置制御方法。
An operation detecting step for detecting that an operation for shifting the content reproduction mode from the search reproduction mode to another reproduction mode is performed by the user;
A correction time calculation step of obtaining a correction time by multiplying the estimated delay time by the search reproduction speed;
A time stamp correction step of obtaining an estimated start time stamp by subtracting the correction time from a time stamp of the content at the moment when the operation is performed;
A desired position input step for inputting a time stamp of a desired position desired by the user;
An estimated delay time correcting step of correcting the estimated delay time based on the estimated start time stamp, the desired position time stamp and the search reproduction speed;
A content cue position control method comprising:
請求項1に記載のコンテンツ頭出位置制御方法において、
前記見積遅延時間補正ステップは、
前記見積始動タイムスタンプと前記希望位置タイムスタンプとの差分を前記サーチ再生の速度で除して得た時間に所定の係数を乗じて得た時間を前記見積遅延時間から減ずることにより、前記見積遅延時間を補正することを特徴とするコンテンツ頭出位置制御方法。
The content cue position control method according to claim 1,
The estimated delay time correction step includes:
The estimated delay time is obtained by subtracting, from the estimated delay time, a time obtained by multiplying a time obtained by dividing the difference between the estimated start time stamp and the desired position time stamp by the search reproduction speed by a predetermined coefficient. A content cue position control method characterized by correcting time.
請求項1に記載のコンテンツ頭出位置制御方法において、
前記見積遅延時間補正ステップは、複数回の頭出しに亘る前記見積始動タイムスタンプ、前記希望位置タイムスタンプ及び前記サーチ再生の速度に基づいて、前記見積遅延時間を補正することを特徴とするコンテンツ頭出位置制御方法。
The content cue position control method according to claim 1,
The estimated delay time correcting step corrects the estimated delay time based on the estimated start time stamp, the desired position time stamp, and the search reproduction speed over a plurality of times. Exit position control method.
請求項1に記載のコンテンツ頭出位置制御方法において、
前記見積始動タイムスタンプ位置から最も近い順に1以上のシーンチェンジの位置を検出するシーンチェンジ検出ステップと、
前記1以上のシーンチェンジの位置のコンテンツを希望位置の候補のコンテンツとして表示する表示ステップと、
を更に備えることを特徴とするコンテンツ頭出位置制御方法。
The content cue position control method according to claim 1,
A scene change detection step of detecting the position of one or more scene changes in the order closest to the estimated start time stamp position;
A display step of displaying the content at the position of the one or more scene changes as a candidate content of a desired position;
The content cueing position control method further comprising:
コンテンツの再生モードをサーチ再生モードから他の再生モードに移行させるための操作がユーザにより行われたことを検出する操作検出手段と、
見積遅延時間に前記サーチ再生の速度を乗じることにより、補正時間を得る補正時間算出手段と、
前記操作が行われた瞬間の前記コンテンツのタイムスタンプから前記補正時間を差し引くことにより、見積始動タイムスタンプを得るタイムスタンプ補正手段と、
前記ユーザが希望する希望位置のタイムスタンプを入力する希望位置入力手段と、
前記見積始動タイムスタンプ、前記希望位置タイムスタンプ及び前記サーチ再生の速度に基づいて、前記見積遅延時間を補正する見積遅延時間補正手段と、
を備えることを特徴とするコンテンツ頭出位置制御装置。
Operation detecting means for detecting that an operation for shifting the content reproduction mode from the search reproduction mode to another reproduction mode is performed by the user;
A correction time calculation means for obtaining a correction time by multiplying the estimated delay time by the search reproduction speed;
Time stamp correction means for obtaining an estimated start time stamp by subtracting the correction time from the time stamp of the content at the moment when the operation is performed;
A desired position input means for inputting a time stamp of a desired position desired by the user;
Estimated delay time correcting means for correcting the estimated delay time based on the estimated start time stamp, the desired position time stamp, and the search reproduction speed;
A content cueing position control apparatus comprising:
請求項5に記載のコンテンツ頭出位置制御装置において、
前記見積遅延時間補正手段は、
前記見積始動タイムスタンプと前記希望位置タイムスタンプとの差分を前記サーチ再生の速度で除して得た時間に所定の係数を乗じて得た時間を前記見積遅延時間から減ずることにより、前記見積遅延時間を補正することを特徴とするコンテンツ頭出位置制御装置。
In the content cue position control device according to claim 5,
The estimated delay time correcting means includes
The estimated delay time is obtained by subtracting, from the estimated delay time, a time obtained by multiplying a time obtained by dividing the difference between the estimated start time stamp and the desired position time stamp by the search reproduction speed by a predetermined coefficient. A content cue position control apparatus characterized by correcting time.
請求項5に記載のコンテンツ頭出位置制御装置において、
前記見積遅延時間補正手段は、複数回の頭出しに亘る前記見積始動タイムスタンプ、前記希望位置タイムスタンプ及び前記サーチ再生の速度に基づいて、前記見積遅延時間を補正することを特徴とするコンテンツ頭出位置制御装置。
In the content cue position control device according to claim 5,
The estimated delay time correcting means corrects the estimated delay time based on the estimated start time stamp, the desired position time stamp, and the search reproduction speed over a plurality of times. Exit position control device.
請求項5に記載のコンテンツ頭出位置制御装置において、
前記見積始動タイムスタンプ位置から最も近い順に1以上のシーンチェンジの位置を検出するシーンチェンジ検出手段と、
前記1以上のシーンチェンジの位置のコンテンツを希望位置の候補のコンテンツとして表示する表示手段と、
を更に備えることを特徴とするコンテンツ頭出位置制御装置。
In the content cue position control device according to claim 5,
Scene change detection means for detecting the position of one or more scene changes in the order closest to the estimated start time stamp position;
Display means for displaying the content at the position of the one or more scene changes as candidate content of the desired position;
The content cueing position control device further comprising:
コンピュータに請求項1乃至4の何れか1項に記載のコンテンツ頭出位置制御方法を行わせるためのコンテンツ頭出位置制御プログラム。   A content cue position control program for causing a computer to perform the content cue position control method according to any one of claims 1 to 4. 算出手段が、ユーザにより、コンテンツの再生モードをサーチ再生モードから他の再生モードに変更されると、ユーザが所望する位置に再生開始位置を補正するための補正情報であって、あらかじめ記憶手段に記憶されているものと、前記サーチ再生モードにおけるサーチ速度とから第1の再生開始位置を算出する第1のステップと、
表示手段が、前記第1の再生開始位置近傍における前記コンテンツの複数のサムネイル画像を表示する第2のステップと、
再生手段が、ユーザにより選択された前記サムネイル画像に基づいて第2の再生開始位置を決定し、前記第2の再生開始位置から前記コンテンツを再生する第3のステップと、
変更手段が、前記第1の再生開始位置、前記第2の再生開始位置および前記サーチ再生モードにおけるサーチ速度に基づいて、前記補正情報を変更する第4のステップを有することを特徴とするコンテンツ再生制御方法。
When the calculation unit changes the playback mode of the content from the search playback mode to another playback mode by the user, the calculation unit is correction information for correcting the playback start position to a position desired by the user, and is stored in the storage unit in advance. A first step of calculating a first playback start position from what is stored and a search speed in the search playback mode;
A second step in which display means displays a plurality of thumbnail images of the content in the vicinity of the first reproduction start position;
A third step in which reproduction means determines a second reproduction start position based on the thumbnail image selected by the user, and reproduces the content from the second reproduction start position;
Change means content to the first reproduction start position, based on the search speed of the second reproduction start position and said search reproduction mode, characterized by a fourth step of changing the correction information Playback control method.
算出手段が、ユーザにより、コンテンツの再生モードをサーチ再生モードから他の再生モードに変更されると、ユーザが所望する位置に再生開始位置を補正するための補正情報であって、あらかじめ記憶手段に記憶されているものと、前記サーチ再生モードにおけるサーチ速度とから第1の再生開始位置を算出する第1のステップと、
再生手段が、前記第1の再生位置から最も近いシーンチェンジの位置を第2の再生開始位置として決定し、前記第2の再生開始位置から前記コンテンツを再生する第3のステップと、
変更手段が、前記第1の再生開始位置、前記第2の再生開始位置および前記サーチ再生モードにおけるサーチ速度に基づいて、前記補正情報を変更する第4のステップを有することを特徴とするコンテンツ再生制御方法。
When the calculation unit changes the playback mode of the content from the search playback mode to another playback mode by the user, the calculation unit is correction information for correcting the playback start position to a position desired by the user, and is stored in the storage unit in advance. A first step of calculating a first playback start position from what is stored and a search speed in the search playback mode;
A third step in which the reproduction means determines the position of the scene change closest to the first reproduction position as a second reproduction start position, and reproduces the content from the second reproduction start position;
Change means content to the first reproduction start position, based on the search speed of the second reproduction start position and said search reproduction mode, characterized by a fourth step of changing the correction information Playback control method.
ユーザにより、コンテンツの再生モードをサーチ再生モードから他の再生モードに変更されると、ユーザが所望する位置に再生開始位置を補正するための補正情報であって、あらかじめ記憶手段に記憶されているものと、前記サーチ再生モードにおけるサーチ速度とから第1の再生開始位置を算出する算出手段と、
前記第1の再生開始位置近傍における前記コンテンツの複数のサムネイル画像を表示する表示手段と、
ユーザにより選択された前記サムネイル画像に基づいて第2の再生開始位置を決定し、前記第2の再生開始位置から前記コンテンツを再生する再生手段と、
前記第1の再生開始位置、前記第2の再生開始位置および前記サーチ再生モードにおけるサーチ速度に基づいて、前記補正情報を変更する変更手段を有することを特徴とするコンテンツ再生装置。
When the user changes the content playback mode from the search playback mode to another playback mode, the correction information for correcting the playback start position to a position desired by the user is stored in the storage means in advance. Calculating means for calculating a first reproduction start position from a search speed in the search reproduction mode;
Display means for displaying a plurality of thumbnail images of the content in the vicinity of the first reproduction start position;
Playback means for determining a second playback start position based on the thumbnail image selected by the user and playing back the content from the second playback start position;
The first reproduction start position, on the basis of the search speed of the second reproduction start position and said search reproduction mode, the content reproducing apparatus; and a changing means for changing the correction information.
ユーザにより、コンテンツの再生モードをサーチ再生モードから他の再生モードに変更されると、ユーザが所望する位置に再生開始位置を補正するための補正情報であって、あらかじめ記憶手段に記憶されているものと、前記サーチ再生モードにおけるサーチ速度とから第1の再生開始位置を算出する算出手段と、
前記第1の再生位置から最も近いシーンチェンジの位置を第2の再生開始位置として決定し、前記第2の再生開始位置から前記コンテンツを再生する再生手段と、
前記第1の再生開始位置、前記第2の再生開始位置および前記サーチ再生モードにおけるサーチ速度に基づいて、前記補正情報を変更する変更手段を有することを特徴とするコンテンツ再生装置。
When the user changes the content playback mode from the search playback mode to another playback mode, the correction information for correcting the playback start position to a position desired by the user is stored in the storage means in advance. Calculating means for calculating a first reproduction start position from a search speed in the search reproduction mode;
Reproduction means for determining a position of a scene change closest to the first reproduction position as a second reproduction start position, and reproducing the content from the second reproduction start position;
The first reproduction start position, on the basis of the search speed of the second reproduction start position and said search reproduction mode, the content reproducing apparatus; and a changing means for changing the correction information.
コンピュータに請求項10乃至11の何れか1項に記載のコンテンツ再生制御方法を行わせるためのコンテンツ再生制御プログラム。 A content reproduction control program for causing a computer to perform the content reproduction control method according to any one of claims 10 to 11 .
JP2004104567A 2004-03-31 2004-03-31 Content cue position control method, content cue position control device, and content cue position control program Expired - Fee Related JP3890335B2 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2004104567A JP3890335B2 (en) 2004-03-31 2004-03-31 Content cue position control method, content cue position control device, and content cue position control program

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2004104567A JP3890335B2 (en) 2004-03-31 2004-03-31 Content cue position control method, content cue position control device, and content cue position control program

Publications (2)

Publication Number Publication Date
JP2005293680A JP2005293680A (en) 2005-10-20
JP3890335B2 true JP3890335B2 (en) 2007-03-07

Family

ID=35326457

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2004104567A Expired - Fee Related JP3890335B2 (en) 2004-03-31 2004-03-31 Content cue position control method, content cue position control device, and content cue position control program

Country Status (1)

Country Link
JP (1) JP3890335B2 (en)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN106936528A (en) * 2015-09-29 2017-07-07 特克特朗尼克公司 Adaptive equalization to the asymmetric delay in inside in network timing system

Families Citing this family (11)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2007105267A1 (en) * 2006-03-10 2007-09-20 Fujitsu Limited Playback device, control method for playback device, program, and computer-readable recording medium
KR100880962B1 (en) * 2006-12-21 2009-02-03 주식회사 휴맥스 Apparatus and method for controlling playback in digital video recorder
JP2008312025A (en) * 2007-06-15 2008-12-25 Victor Co Of Japan Ltd Video image content data reproduction apparatus
JP2009010620A (en) * 2007-06-27 2009-01-15 Sharp Corp Reproduction apparatus
US9299388B2 (en) 2007-09-10 2016-03-29 Gvbb Holdings S.A.R.L. Video playback
JP2010147509A (en) * 2008-12-16 2010-07-01 Hitachi Ltd Video processor and video distribution system
JP5241521B2 (en) 2009-01-06 2013-07-17 キヤノン株式会社 Content reproduction method and content reproduction apparatus
JP5421627B2 (en) * 2009-03-19 2014-02-19 キヤノン株式会社 Video data display apparatus and method
JP5570203B2 (en) * 2009-12-16 2014-08-13 キヤノン株式会社 Video playback apparatus and control method thereof
CN102884786B (en) * 2010-05-07 2016-08-17 汤姆森特许公司 The method and apparatus of optimal playback location in digital content
JP5970090B2 (en) * 2015-01-26 2016-08-17 トムソン ライセンシングThomson Licensing Method and apparatus for optimal playback positioning in digital content

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN106936528A (en) * 2015-09-29 2017-07-07 特克特朗尼克公司 Adaptive equalization to the asymmetric delay in inside in network timing system

Also Published As

Publication number Publication date
JP2005293680A (en) 2005-10-20

Similar Documents

Publication Publication Date Title
US10331512B2 (en) Adaptive intervals in navigating content and/or media
KR100422699B1 (en) Method and apparatus for intelligent video browsing of video contents
JP3890335B2 (en) Content cue position control method, content cue position control device, and content cue position control program
KR20060055422A (en) Enhanced bookmakers for digital video playback
KR100254610B1 (en) Apparatus and method for calculating reproducing time of optical disc
JP3809089B2 (en) Information playback device
US7711240B2 (en) Reproducing apparatus and reproducing method
KR100555427B1 (en) Video playing device and smart skip method for thereof
KR100609154B1 (en) Video-contents playing method and apparatus using the same
JP4277817B2 (en) Operation history display device, operation history display method and program
KR100573686B1 (en) Method for reproducing optical disc
JP4461233B2 (en) MEDIA DATA SELECTION DEVICE, MEDIA DATA SELECTION METHOD, MEDIA DATA SELECTION PROGRAM, AND RECORDING MEDIUM CONTAINING THE PROGRAM
GB2430597A (en) An Image Stream Search Tool
JP2004282763A (en) Video reproducing method and system, and apparatus using the same
JP5441582B2 (en) Audio apparatus and introscan method
KR100793191B1 (en) Method for controlling title preview in digital video device
JP3456006B2 (en) Media playback device
US20040184371A1 (en) Apparatus and method for playing optical disk
KR20050058639A (en) Method for compositing and searching index disc in optical disc device
JP2009267457A (en) Recording and reproducing device
KR20030060351A (en) Method for improving video recorder performance in a search mode
KR20040079209A (en) Method for editing a play list in digital recorder
KR20030096493A (en) Method for displaying a thumbnail picture in optical disc driver
CN1953091A (en) Display control device and method for head table
JP2006294125A (en) Reproduction unit

Legal Events

Date Code Title Description
A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20060426

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20060508

A521 Written amendment

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20060707

A02 Decision of refusal

Free format text: JAPANESE INTERMEDIATE CODE: A02

Effective date: 20060728

A521 Written amendment

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20060828

RD01 Notification of change of attorney

Free format text: JAPANESE INTERMEDIATE CODE: A7421

Effective date: 20060828

A521 Written amendment

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20060914

A911 Transfer to examiner for re-examination before appeal (zenchi)

Free format text: JAPANESE INTERMEDIATE CODE: A911

Effective date: 20061019

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20061114

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20061204

R150 Certificate of patent or registration of utility model

Free format text: JAPANESE INTERMEDIATE CODE: R150

Ref document number: 3890335

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20091208

Year of fee payment: 3

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20101208

Year of fee payment: 4

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20101208

Year of fee payment: 4

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20111208

Year of fee payment: 5

S111 Request for change of ownership or part of ownership

Free format text: JAPANESE INTERMEDIATE CODE: R313111

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20111208

Year of fee payment: 5

S531 Written request for registration of change of domicile

Free format text: JAPANESE INTERMEDIATE CODE: R313531

S533 Written request for registration of change of name

Free format text: JAPANESE INTERMEDIATE CODE: R313533

R371 Transfer withdrawn

Free format text: JAPANESE INTERMEDIATE CODE: R371

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20111208

Year of fee payment: 5

S111 Request for change of ownership or part of ownership

Free format text: JAPANESE INTERMEDIATE CODE: R313111

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20111208

Year of fee payment: 5

R350 Written notification of registration of transfer

Free format text: JAPANESE INTERMEDIATE CODE: R350

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20121208

Year of fee payment: 6

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20121208

Year of fee payment: 6

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20121208

Year of fee payment: 6

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20121208

Year of fee payment: 6

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20131208

Year of fee payment: 7

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

LAPS Cancellation because of no payment of annual fees