JP5243813B2 - Metadata retrieval storage device for program search and metadata extraction storage program for program retrieval - Google Patents

Metadata retrieval storage device for program search and metadata extraction storage program for program retrieval Download PDF

Info

Publication number
JP5243813B2
JP5243813B2 JP2008033908A JP2008033908A JP5243813B2 JP 5243813 B2 JP5243813 B2 JP 5243813B2 JP 2008033908 A JP2008033908 A JP 2008033908A JP 2008033908 A JP2008033908 A JP 2008033908A JP 5243813 B2 JP5243813 B2 JP 5243813B2
Authority
JP
Japan
Prior art keywords
program
program information
download
moving image
database
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
JP2008033908A
Other languages
Japanese (ja)
Other versions
JP2009194664A (en
Inventor
章 中村
健二 寺田
博登 井手口
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Japan Broadcasting Corp
Original Assignee
Japan Broadcasting Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Japan Broadcasting Corp filed Critical Japan Broadcasting Corp
Priority to JP2008033908A priority Critical patent/JP5243813B2/en
Publication of JP2009194664A publication Critical patent/JP2009194664A/en
Application granted granted Critical
Publication of JP5243813B2 publication Critical patent/JP5243813B2/en
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Landscapes

  • Information Retrieval, Db Structures And Fs Structures Therefor (AREA)
  • Television Signal Processing For Recording (AREA)
  • Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)

Description

本発明は、番組を検索するのに用いる番組検索用メタデータを、当該番組から抽出してデータベースに格納する番組検索用メタデータ抽出格納装置及び番組検索用メタデータ抽出格納プログラムに関する。   The present invention relates to a program search metadata extraction and storage device and a program search metadata extraction and storage program for extracting program search metadata used for searching a program from the program and storing it in a database.

従来、放送又は配信される多数の番組を、一旦、蓄積装置に蓄積後、視聴者の所望する番組を検索してから視聴することが行われている。そして、視聴者が所望の番組を検索する場合、番組が放送又は配信された時刻や、番組のタイトルを手掛かりにしている場合が多い。   2. Description of the Related Art Conventionally, many programs to be broadcasted or distributed are temporarily stored in a storage device, and then a program desired by a viewer is searched and viewed. When a viewer searches for a desired program, the viewer often uses the time when the program is broadcast or distributed or the title of the program as a clue.

しかし、放送又は配信が行われた後、長期間が経過していた場合に、番組が放送されていた時刻や番組のタイトル等を、視聴者が記憶していなかった（忘れてしまった）場合、当該視聴者は、所望の番組を検索する手掛かりを失ってしまう場合がある。   However, if the viewer did not remember (forgets) the time when the program was broadcast, the title of the program, etc., after a long period of time after broadcasting or distribution The viewer may lose a clue to search for a desired program.

このような事態を回避するために、受信した番組について、当該番組の特徴を抽出することが想定され、この番組の特徴をデータベース化しておくことで、視聴者が所望する番組を高速に検索できることが望まれている。この番組の特徴としては、番組に含まれるテロップ等の文字情報（例えば、非特許文献１を参照）や、特定のシーンや、特定の発言（キーワード）が挙げられる。   In order to avoid such a situation, it is assumed that the characteristics of the received program are extracted, and the program desired by the viewer can be searched at high speed by creating a database of the characteristics of the program. Is desired. Characteristic features of this program include text information such as telop included in the program (see, for example, Non-Patent Document 1), specific scenes, and specific statements (keywords).

また、現在放送又は配信中の番組も含めて、所望の番組を検索しようとした場合、迅速に番組の特徴をデータベース化する必要がある。
宮崎 洋光、他２名 平成１７年度電気関係学会九州支部連合大会 大会誌ｐ５５１「動画像中のテキスト認識を目的とした文字形状に基づくビデオモザイキング手法」、［online］、［平成２０年２月１４日検索］、インターネット〈URL：http：//human.is.kyushu-u.ac.jp/~uchida/Papers/miyazaki-shibu2005.pdf〉 In addition, when searching for a desired program including a program currently being broadcast or distributed, it is necessary to quickly create a database of program characteristics.
Hiromitsu Miyazaki and two others 2005 Annual Conference of the Association of Electrical Engineers of Kyushu Branch p551 “Video Mosaicing Method Based on Character Shape for Text Recognition in Moving Images”, [online], [February 14, 2008 Day search], Internet <URL: http: ///human.is.kyushu-u.ac.jp/~uchida/Papers/miyazaki-shibu2005.pdf>

しかしながら、番組の特徴をデータベース化する場合、１つのチャンネルの番組につき、１台の装置（例えば、ＰＣ）で行っていると、全てのチャンネルの番組について、当該番組の特徴をデータベース化するのに時間がかかってしまい、すぐに活用することができないという問題がある。   However, when creating a database of program characteristics, if a single device (for example, a PC) is used for each channel program, the program characteristics for all channel programs can be converted into a database. There is a problem that it takes time and cannot be used immediately.

そして、現在放送又は配信中の番組も含めて、所望の番組を検索するのに、当該データベースをすぐに活用しようとした場合、受信した複数のチャンネルについて、そのチャンネル数だけデータベース化する装置を用意しなければならず、費用が増大してしまうという問題がある。   When searching for a desired program, including a program currently being broadcast or distributed, if a database is to be used immediately, a device is prepared for creating a database for the number of received channels corresponding to the number of channels. There is a problem that the cost increases.

そこで、本発明では、前記した問題を解決し、費用を増大させることなく、番組を検索するのに活用可能なデータベースを作成することができる番組検索用メタデータ抽出格納装置及び番組検索用メタデータ抽出格納プログラムを提供することを目的とする。   Therefore, in the present invention, a program search metadata extraction storage device and program search metadata that can create a database that can be used to search for programs without solving the above-described problems and without increasing costs. An object is to provide an extraction storage program.

前記課題を解決するため、請求項１に記載の番組検索用メタデータ抽出格納装置は、放送又は通信により配信される複数の番組をチャンネルごとに蓄積するＴＶ放送同録装置にＵＰｎＰコントロールポイントとして接続し、ＴＶ放送同録装置から動画ファイル蓄積手段に番組の一部をダウンロードすると共に、所望の番組を検索するために用いるデータである番組検索用メタデータを、当該番組の一部から抽出し、当該番組に関する情報である番組情報と共にデータベース蓄積手段に蓄積されるデータベースに格納する番組検索用メタデータ抽出格納装置であって、番組情報取得手段と、動画ダウンロード手段と、特徴抽出手段と、を備え、動画ダウンロード手段が、番組情報検出手段と、カウンタ手段と、ダウンロード実行手段とを備える構成とした。 To solve the above problems, the program search for metadata extraction storage device according to claim 1, connected as a UPnP control point a plurality of programs in TV broadcasting the recording apparatus for storing for each channel to be distributed by broadcasting or communication Then, a part of the program is downloaded from the TV broadcast simultaneous recording device to the moving image file storage means, and program search metadata that is data used for searching for a desired program is extracted from the part of the program, A metadata retrieval and storage device for program search stored in a database stored in the database storage means together with program information that is information relating to the program, comprising: program information acquisition means, video download means, and feature extraction means. comprises video downloading means, and program information detection means, and counter means, and a download executing means It was formed.

かかる構成によれば、番組検索用メタデータ抽出格納装置は、番組情報取得手段によって、ＴＶ放送同録装置から一定の時間間隔で前記番組情報を取得してデータベースに格納する。続いて、番組検索用メタデータ抽出格納装置は、動画ダウンロード手段によって、番組情報によって特定される番組それぞれについて、番組の一部である所定時間分の動画ファイルを、ＴＶ放送同録装置から動画ファイル蓄積手段にダウンロードする。そして、番組検索用メタデータ抽出格納装置は、特徴抽出手段によって、動画ファイル蓄積手段から所定時間分の動画ファイルを順次切り替えながら読み込んで、動画ファイルから映像及び音声の少なくとも１つの予め設定した特徴を番組検索用メタデータとして抽出してデータベースに格納する。そして、番組検索用メタデータ抽出格納装置は、番組情報検出手段によって、番組情報取得手段で取得された番組情報が前記データベースに格納されたか否かを検出し、カウンタ手段によって、所定時間を計時し、当該所定時間の経過を通知する。そして、番組検索用メタデータ抽出格納装置は、ダウンロード実行手段によって、番組情報検出手段で番組情報が検出された場合、当該番組情報で特定される番組のダウンロードアドレスに基づき、番組の一部をＴＶ放送同録装置からチャンネルを切り替えてダウンロードし、カウンタ手段から所定時間の経過が通知された場合、ダウンロードを中止し、ダウンロードした当該番組の一部を動画ファイルとして動画ファイル蓄積手段に蓄積する。 According to such a configuration, the program search metadata extraction and storage device acquires the program information from the TV broadcast simultaneous recording device at a fixed time interval by the program information acquisition means and stores it in the database. Subsequently, the metadata retrieval and storage device for program search uses the moving image download means to obtain a moving image file for a predetermined time as a part of the program from the TV broadcasting simultaneous recording device for each program specified by the program information. download sul to the accumulation means. Features The program search for metadata extraction enclosure, by the feature extraction unit reads while sequentially switching the predetermined time moving image file from the moving image file storage means, which is at least one pre-set video and audio from the video file the as a program search for metadata stored in a database out extraction. The program search metadata extraction / storage device detects whether the program information acquired by the program information acquisition means is stored in the database by the program information detection means, and counts a predetermined time by the counter means. The progress of the predetermined time is notified. When the program information is detected by the program information detection means by the download execution means, the program search metadata extraction / storage device converts a part of the program to the TV based on the download address of the program specified by the program information. When the channel is switched from the broadcast recording apparatus and downloaded, and the counter means is notified of the elapse of a predetermined time, the download is stopped and a part of the downloaded program is stored in the moving picture file storing means as a moving picture file.

請求項２に記載の番組検索用メタデータ抽出格納装置は、請求項１に記載の番組検索用メタデータ抽出格納装置において、前記特徴抽出手段は、前記動画ファイルの各フレームに含まれる文字データを認識し、この文字データを番組検索用メタデータとすることを特徴とする。   The program search metadata extraction and storage device according to claim 2 is the program search metadata extraction and storage device according to claim 1, wherein the feature extraction means stores the character data included in each frame of the moving image file. The character data is recognized and used as program search metadata.

かかる構成によれば、番組検索用メタデータ抽出格納装置は、特徴抽出手段によって、文字データが番組検索用メタデータとして抽出されることで、この文字データを手掛かりにして番組を検索することができる。   According to such a configuration, the program search metadata extraction and storage device can search for programs using the character data as a clue by extracting the character data as program search metadata by the feature extraction unit. .

請求項３に記載の番組検索用メタデータ抽出格納プログラムは、放送又は通信により配信される複数の番組をチャンネルごとに蓄積するＴＶ放送同録装置にＵＰｎＰコントロールポイントとして接続し、ＴＶ放送同録装置から動画ファイル蓄積手段に番組の一部をダウンロードすると共に、所望の番組を検索するために用いるデータである番組検索用メタデータを、当該番組の一部から抽出し、当該番組に関する情報である番組情報と共にデータベース蓄積手段に蓄積されるデータベースに格納するために、コンピュータを、番組情報取得手段、動画ダウンロード手段、特徴抽出手段、として機能させ、動画ダウンロード手段を、番組情報検出手段と、カウンタ手段と、ダウンロード実行手段として機能させる構成とした。 Program search for metadata extraction storing program according to claim 3, connected as a UPnP control point in a TV broadcast the recording apparatus for storing a plurality of programs distributed by the broadcast or communication to each channel, the TV broadcast the recording device Downloads a part of the program to the moving image file storage means , extracts program search metadata, which is data used to search for the desired program , from the part of the program, and is a program that is information about the program In order to store the information in the database stored in the database storage means together with the information, the computer functions as program information acquisition means, video download means, feature extraction means, and the video download means includes program information detection means, counter means, It is configured to function as download execution means .

かかる構成によれば、番組検索用メタデータ抽出格納プログラムは、番組情報取得手段によって、ＴＶ放送同録装置から一定の時間間隔で番組情報を取得してデータベースに格納し、動画ダウンロード手段によって、番組情報によって特定される番組それぞれについて、番組の一部である所定時間分の動画ファイルを、ＴＶ放送同録装置から動画ファイル蓄積手段にダウンロードする。そして、番組検索用メタデータ抽出格納プログラムは、特徴抽出手段によって、動画ファイル蓄積手段から所定時間分の動画ファイルを順次切り替えながら読み込んで、動画ファイルから映像及び音声の少なくとも１つの予め設定した特徴を番組検索用メタデータとして抽出して前記データベースに格納する。そして、番組検索用メタデータ抽出格納プログラムは、番組情報検出手段によって、番組情報取得手段で取得された番組情報がデータベースに格納されたか否かを検出し、カウンタ手段によって、所定時間を計時し、所定時間の経過を通知する。そして、番組検索用メタデータ抽出格納プログラムは、ダウンロード実行手段によって、番組情報検出手段で番組情報が検出された場合、番組情報で特定される番組のダウンロードアドレスに基づき、番組の一部をＴＶ放送同録装置からチャンネルを切り替えてダウンロードし、カウンタ手段から所定時間の経過が通知された場合、ダウンロードを中止し、ダウンロードした番組の一部を動画ファイルとして動画ファイル蓄積手段に蓄積する。 According to such a configuration, the program search for metadata extraction storing program by the program information acquisition unit, and stored in the database to get a turn set information from the TV broadcast the recording device at a predetermined time interval, the video downloading means, for each program specified by the program information once to download a predetermined time of the video file that is part of the program, the moving image file storage means from the TV broadcast the recording device. The program search metadata extraction / storage program reads the moving image file for a predetermined time from the moving image file storage unit by the feature extracting unit while sequentially switching and reads at least one preset feature of video and audio from the moving image file. as a program search for metadata stored in the database out extraction. The program search metadata extraction and storage program detects whether or not the program information acquired by the program information acquisition means is stored in the database by the program information detection means, counts a predetermined time by the counter means, Notify the elapse of a predetermined time. When the program information is detected by the program information detecting means by the download executing means, the program search metadata extracting and storing program broadcasts a part of the program on the basis of the program download address specified by the program information. When the channel recording is switched from the recording apparatus and the elapse of a predetermined time is notified from the counter means, the download is stopped and a part of the downloaded program is accumulated as a moving picture file in the moving picture file storing means.

請求項１、３に記載の発明によれば、データベースに番組検索用メタデータを格納する際に、番組情報を取得した後、チャンネルごとの番組に独立させて、ダウンロードしたり、特徴抽出を行ったりすることで、費用を増大させることなく、複数の番組について当該番組の特徴を抽出して、番組検索用メタデータを格納したデータベースを効率よく作成することができる。   According to the first and third aspects of the invention, when storing the program search metadata in the database, after the program information is acquired, the program is independently downloaded to each channel and the feature extraction is performed. As a result, it is possible to efficiently create a database storing program search metadata by extracting features of the programs for a plurality of programs without increasing costs.

請求項２に記載の発明によれば、番組に含まれる文字データが番組検索用メタデータとして抽出されるので、この文字データを手掛かりにして番組を検索することができる。   According to the second aspect of the present invention, the character data included in the program is extracted as the metadata for searching the program, so that the program can be searched using this character data as a clue.

次に、本発明の実施形態について、適宜、図面を参照しながら詳細に説明する。
図１は番組検索用メタデータ抽出格納システムの概略を示す図である。この図１（ａ）に示すように、番組検索用メタデータ抽出格納システムＳは、本装置（番組検索用メタデータ抽出格納装置）１とＴＶ放送同録装置（蓄積装置）２とから構成されている。そして、本装置１からＴＶ放送同録装置２に対し、ＵＰｎＰコントロールのポイントとして接続し（１）、ＴＶ放送同録装置２から本装置１のデータベース（図２に示すデータベース蓄積手段５）に番組情報を登録（格納）する（２）。 Next, embodiments of the present invention will be described in detail with reference to the drawings as appropriate.
FIG. 1 is a diagram showing an outline of a program search metadata extraction and storage system. As shown in FIG. 1A, a program search metadata extraction / storage system S is composed of the present apparatus (program search metadata extraction / storage apparatus) 1 and a TV broadcast simultaneous recording apparatus (storage apparatus) 2. ing. Then, the apparatus 1 connects to the TV broadcast recording apparatus 2 as a point of UPnP control (1), and the TV broadcast recording apparatus 2 connects the program to the database of the apparatus 1 (database storage means 5 shown in FIG. 2). Information is registered (stored) (2).

なお、ＵＰｎＰコントロールポイントとは、ＵＰｎＰネットワークを使用して、他のデバイス（ここでは、ＴＶ放送同録装置２）を、本装置１からコントロールする機能のことである。   The UPnP control point is a function for controlling another device (here, the TV broadcast simultaneous recording device 2) from the device 1 using the UPnP network.

すなわち、本装置１は、番組情報登録タスクを実行すること（図２に示す番組情報取得手段３による動作）で、番組情報をデータベースに登録する。そして、図１（ｂ）に示すように、本装置１は、データベースから番組情報を得て、ダウンロードアドレスを取得する（１）。また、ＴＶ放送同録装置２は、「チャンネル０１動画」、「チャンネル０２動画」、・・・、「チャンネル０８動画」と図示したように、チャンネル別に番組を蓄積している。そして、本装置１は、ダウンロードタスクを実行すること（図２に示す動画ダウンロード手段７による動作）で、ＴＶ放送同録装置２から「チャンネル０１動画」、「チャンネル０２動画」、・・・、「チャンネル０８動画」を、別々にダウンとロードする（一定間隔で動画をダウンロード）（２）。   That is, the apparatus 1 registers program information in the database by executing a program information registration task (operation by the program information acquisition means 3 shown in FIG. 2). Then, as shown in FIG. 1B, the device 1 obtains program information from the database and obtains a download address (1). Further, the TV broadcast simultaneous recording apparatus 2 stores programs for each channel as illustrated as “channel 01 moving image”, “channel 02 moving image”,..., “Channel 08 moving image”. Then, the present apparatus 1 executes a download task (operation by the moving image download means 7 shown in FIG. 2), thereby “channel 01 moving image”, “channel 02 moving image”,. Download and download “channel 08 video” separately (download video at regular intervals) (2).

このように、本装置１は、ＴＶ放送同録装置２から動画（番組）をダウンロードしつつ、後記するように、番組の特徴（文字認識した認識結果）を抽出して、番組検索用メタデータとし、データベースを構築している。次に、図２を用いて、この番組検索用メタデータ抽出格納システムＳの詳細な構成を説明する。   In this way, the present apparatus 1 extracts program characteristics (recognition results obtained by character recognition) and downloads program search metadata as described later while downloading a moving image (program) from the TV broadcast recording apparatus 2. And we are building a database. Next, the detailed configuration of the program search metadata extraction / storage system S will be described with reference to FIG.

図２は番組検索用メタデータ抽出格納システムを示すブロック図である。この図２に示すように、番組検索用メタデータ抽出格納システムＳは、番組検索用メタデータ抽出格納装置１と、ＴＶ放送同録装置２とを備えている。   FIG. 2 is a block diagram showing a program search metadata extraction and storage system. As shown in FIG. 2, the program search metadata extraction and storage system S includes a program search metadata extraction and storage device 1 and a TV broadcast simultaneous recording device 2.

ＴＶ放送同録装置２は、ネットワークを介して、番組情報を受信すると共に、放送又はネットワークを介して配信された番組を受信して蓄積するものである。この実施形態では、図１に示したように、ＴＶ放送同録装置２は、番組検索用メタデータ抽出格納装置１とＵＰｎＰコントロールポイントとして接続されている。   The TV broadcast simultaneous recording apparatus 2 receives program information via a network and receives and stores programs distributed via the broadcast or network. In this embodiment, as shown in FIG. 1, the TV broadcast simultaneous recording device 2 is connected to the program search metadata extraction / storage device 1 as a UPnP control point.

また、このＴＶ放送同録装置２は、番組を動画ファイルとして蓄積しており、この動画ファイルを蓄積する際に、当該動画ファイルを放送又は配信されたチャンネルごとにまとめて蓄積している。図１に前記したように「チャンネル０１の動画」、「チャンネル０２の動画」、・・・、「チャンネル０８の動画」、・・・といったようにまとめて蓄積している。   The TV broadcast simultaneous recording apparatus 2 accumulates programs as moving image files, and accumulates the moving image files for each broadcast or distributed channel when accumulating the moving image files. As described above with reference to FIG. 1, “channel 01 movie”, “channel 02 movie”,..., “Channel 08 movie”,.

番組情報は、番組に関する様々な情報であり、番組のＩＤ、タイトル、クラス、日付、詳細、チャンネル名、ジャンル、ＲＥＳ（ＵＲＬ：アドレス）を少なくとも含んだものである。
番組のＩＤは、番組を識別する識別子であり、番組のタイトルは、番組の名称である。 The program information is various information relating to the program, and includes at least a program ID, title, class, date, details, channel name, genre, and RES (URL: address).
The program ID is an identifier for identifying the program, and the program title is the name of the program.

番組のクラスは、番組の種類が、映像（ビデオ）、音声（音楽）、静止画（写真）等であることを示すもので、ｏｂｊｅｃｔ、ｉｔｅｍ、ｖｉｄｅｏＩｔｅｍ、ｖｉｄｅｏＢｒｏａｄｃａｓｔといったように記述されている。
番組の日付は、番組が放送又は配信された日時及び時刻（開始時刻、終了時刻）を示したものである。 The program class indicates that the type of program is video (video), audio (music), still image (photo), etc., and is described as object, item, videoItem, videoBroadcast.
The program date indicates the date and time (start time, end time) when the program was broadcast or distributed.

番組の詳細は、番組の具体的な中身について、例えば、「Ｎ」や「天」といった所定Ｂｙｔｅ（ここでは、１Ｂｙｔｅ）のデータで記述されたものである。この「Ｎ」は番組が関東各地の話題に関するニュースであることを示しており、「天」は番組が各地の天気予報であることを示している。   The details of the program are described by data of a predetermined byte (here, 1 byte) such as “N” or “heaven” for the specific contents of the program. “N” indicates that the program is news related to topics in various parts of the Kanto region, and “Ten” indicates that the program is a weather forecast for each region.

番組のチャンネル名は、番組が放送された場合であれば放送局の名前、番組がネットワークを介して配信された場合であれば、配信元のＵＲＬによって特定される提供者の名前である。
番組のジャンルは、番組のジャンルを示すもので、例えば、ニュース、スポーツ、ドラマ、映画等に分類されている。 The channel name of the program is the name of the broadcasting station if the program is broadcast, and the name of the provider specified by the URL of the distribution source if the program is distributed via the network.
The genre of the program indicates the genre of the program and is classified into, for example, news, sports, dramas, movies, and the like.

番組のＲＥＳは、番組をダウンロードするアドレス（ＴＶ放送同録装置２のネットワーク上のアドレス及びこのＴＶ放送同録装置２における記憶手段（図示せず）における位置）であり、例えば、ｈｔｔｐ：／／１９２．１６８．１．１１３：１５０００／ｓｔｒｅａｍ／０４／ｂ９／００４Ｂ９ＺＺといったように記述される。   The RES of the program is an address for downloading the program (an address on the network of the TV broadcast simultaneous recording device 2 and a position in a storage means (not shown) in the TV broadcast simultaneous recording device 2), for example, http: // 192.168.1.113:15000/stream/04/b9/004B9ZZ.

（番組検索用メタデータ抽出格納装置の構成）
番組検索用メタデータ抽出格納装置１は、番組検索用メタデータを番組から抽出し、番組情報と共にデータベースに格納するもので、番組情報取得手段３と、データベース蓄積手段５と、動画ダウンロード手段７と、動画ファイル蓄積手段９と、文字認識手段（特徴抽出手段）１１と、を備えている。 (Configuration of metadata retrieval and storage device for program search)
The program search metadata extraction and storage device 1 extracts program search metadata from a program and stores it in a database together with program information. The program information acquisition means 3, the database storage means 5, the moving picture download means 7, , A moving image file storage means 9 and a character recognition means (feature extraction means) 11.

番組情報取得手段３は、ＴＶ放送同録装置２とＵＰｎＰコントロールポイントとして接続が行われることで、一定の間隔（例えば、数時間の間隔）で番組情報を取得して、データベース蓄積手段５に出力するものである。つまり、この番組情報取得手段３は、ＴＶ放送同録装置２に番組情報が受信されることで、定期的に番組情報を取得していく。この実施形態では、ＴＶ放送同録装置２から番組情報を取得することとしているが、番組検索用メタデータ抽出格納装置１が直接ネットワークに接続して、ＥＰＧ等から番組情報を取得してもよい。   The program information acquisition means 3 is connected to the TV broadcast simultaneous recording device 2 as a UPnP control point, so that the program information acquisition means 3 acquires program information at regular intervals (for example, intervals of several hours) and outputs them to the database storage means 5 To do. That is, the program information acquisition means 3 periodically acquires program information when the TV broadcast simultaneous recording device 2 receives the program information. In this embodiment, program information is acquired from the TV broadcast recording apparatus 2, but the program search metadata extraction / storage apparatus 1 may be directly connected to the network to acquire program information from an EPG or the like. .

データベース蓄積手段５は、番組情報取得手段３から入力された番組情報を格納（登録）し、番組情報取得状態項目と動画ダウンロード状態項目と特徴抽出状態項目とからなる状態項目を保持し、文字認識手段１１から認識された認識結果（映像及び音声の少なくとも１つの予め設定した特徴）とを対応付けて登録（格納）したものであり、一般的なハードディスクやメモリ等によって構成されている。なお、認識結果は、映像である動画ファイルに含まれていた文字データであり、この文字データが番組検索用メタデータとして活用されることとなる。   The database storage unit 5 stores (registers) the program information input from the program information acquisition unit 3, holds a state item including a program information acquisition state item, a moving image download state item, and a feature extraction state item, and performs character recognition. A recognition result (at least one preset feature of video and audio) recognized by means 11 is registered (stored) in association with each other, and is constituted by a general hard disk, memory, or the like. The recognition result is character data included in the video file that is a video, and this character data is used as program search metadata.

番組情報取得状態項目は、番組情報取得手段３で番組情報が取得された番組情報取得済みを示す項目である。この番組情報取得状態項目によって、番組情報取得済みとされることによって、ＴＶ放送同録装置２が受信した番組情報の有無が判明することとなる。つまり、番組情報取得済みとならなければ、番組情報取得手段３により一定の間隔で取得した時点でＴＶ放送同録装置２には番組情報が無いことになる。   The program information acquisition status item is an item indicating that the program information has been acquired by the program information acquisition means 3. The presence or absence of program information received by the TV broadcast simultaneous recording apparatus 2 can be determined by determining that the program information has been acquired by the program information acquisition state item. That is, if the program information has not been acquired, the TV broadcast simultaneous recording apparatus 2 has no program information at the time when the program information acquisition means 3 acquires the program information at regular intervals.

動画ダウンロード状態項目は、動画ダウンロード手段７によって、チャンネルごとの番組が動画ファイルとして、動画ファイル蓄積手段９にダウンロードされている途中（ダウンロード中、ダウンロード途中のことで、今まさにダウンロードしている最中は含まない）又はダウンロードが完了されたこと（ダウンロード完了）を示す項目である。   In the video download status item, a program for each channel is being downloaded to the video file storage means 9 by the video download means 7 as a video file (during downloading, in the middle of downloading. Is an item indicating that download has been completed (download completion).

なお、この動画ダウンロード状態項目は、ある番組の動画ファイルについて、予め設定した所定時間（例えば、５分間）分のダウンロードが完了した時点で、当該動画ファイルのダウンロードが完了したことを示すことも可能である。この場合、動画ファイルがダウンロードされた途中箇所を示す当該動画ファイルの位置（動画ファイルのバイトアドレス）が記憶されることとなる。   This video download status item can also indicate that the download of the video file has been completed when the video file of a certain program has been downloaded for a predetermined time (for example, 5 minutes). It is. In this case, the position (byte address of the moving image file) of the moving image file indicating the midway point where the moving image file is downloaded is stored.

特徴抽出状態項目は、文字認識手段１１によって、動画ファイル蓄積手段９から動画ファイルが読み込まれ、文字認識されている途中（特徴を抽出中）又は文字認識が完了されたこと（抽出完了）を示す項目である。   The feature extraction state item indicates that the moving image file is read from the moving image file storage unit 9 by the character recognition unit 11 and character recognition is being performed (feature is being extracted) or character recognition has been completed (extraction is completed). It is an item.

動画ダウンロード手段７は、番組情報によって特定される番組それぞれについて、チャンネルごとの番組の一部を動画ファイルとして所定時間ごとにＴＶ放送同録装置２から動画ファイル蓄積手段９にダウンロードするもので、番組情報検出手段７ａと、カウンタ手段７ｂと、ダウンロード実行手段７ｃと、位置保持手段７ｄとを備えている。   The moving image download means 7 downloads a part of the program for each channel as a moving image file from the TV broadcast recorder 2 to the moving image file storage means 9 for each program specified by the program information. The information detection means 7a, the counter means 7b, the download execution means 7c, and the position holding means 7d are provided.

番組情報検出手段７ａは、番組情報取得手段３で取得された番組情報がデータベース蓄積手段５のデータベースに格納されたか否かを当該データベースの該当するデータの有無により検出するものである。そして、この番組情報検出手段７ａは、番組情報があった場合に、この番組情報をダウンロード実行手段７ｃに通知する。   The program information detection means 7a detects whether or not the program information acquired by the program information acquisition means 3 is stored in the database of the database storage means 5 based on the presence / absence of corresponding data in the database. Then, when there is program information, this program information detection means 7a notifies the download execution means 7c of this program information.

カウンタ手段７ｂは、当該装置１の使用者が設定した所定時間（この実施形態では５分）を計時するものである。そして、このカウンタ手段７ｂは、所定時間が経過した場合、当該所定時間が経過したことをダウンロード実行手段７ｃに通知する。   The counter means 7b measures a predetermined time (5 minutes in this embodiment) set by the user of the device 1. When the predetermined time has elapsed, the counter unit 7b notifies the download execution unit 7c that the predetermined time has elapsed.

ダウンロード実行手段７ｃは、番組情報検出手段７ａから番組情報が通知された場合に、当該番組情報で特定される番組について、チャンネルごとの番組の一部を動画ファイルとして、番組情報に含まれる番組のＲＥＳに基づきＴＶ放送同録装置２からカウンタ手段７ｂで計時された所定時間ごとにチャンネルを切り替えてダウンロードして、動画ファイル蓄積手段９に蓄積するものである。   When the program information is notified from the program information detection unit 7a, the download execution unit 7c uses a part of the program for each channel as a moving image file for the program specified by the program information, and stores the program included in the program information. Based on the RES, the channel is switched and downloaded from the TV broadcast recording apparatus 2 every predetermined time counted by the counter means 7b and stored in the moving image file storage means 9.

そして、このダウンロード実行手段７ｃは、チャンネルを切り替えるごとに、ＴＶ放送同録装置２における動画ファイルの読み込み位置及び動画ファイル蓄積手段９における動画ファイルの書き込み位置を出力する。   The download execution unit 7c outputs the moving image file reading position in the TV broadcast simultaneous recording device 2 and the moving image file writing position in the moving image file storage unit 9 every time the channel is switched.

そして、このダウンロード実行手段７ｃは、ダウンロードをしている途中であるのか（ダウンロード中）、ダウンロードを完了したのか（ダウンロード完了又はダウンロード済み）を、データベース蓄積手段５に出力する。   Then, the download execution means 7c outputs to the database storage means 5 whether the download is in progress (during download) or whether the download has been completed (download completed or downloaded).

位置保持手段７ｄは、ダウンロード実行手段７ｃから出力された、ＴＶ放送同録装置２における動画ファイルの読み込み位置及び動画ファイル蓄積手段９における動画ファイルの書き込み位置を保持するものである。   The position holding unit 7d holds the moving image file reading position in the TV broadcast simultaneous recording apparatus 2 and the moving image file writing position in the moving image file storage unit 9 output from the download executing unit 7c.

ここで、図３を参照して番組情報取得手段３によりデータベース蓄積手段５に登録される番組情報と、動画ダウンロード手段７により更新される項目の変化とを説明する。
まず、チャンネル０１では、番組「Ａ」が０１：００〜０１：３０に放送され、チャンネル０２では、番組「Ｂ」が０１：００〜０１：３０に放送されていたとし、ＴＶ放送同録装置２で蓄積していたとする。 Here, the program information registered in the database storage means 5 by the program information acquisition means 3 and the change of items updated by the moving image download means 7 will be described with reference to FIG.
First, on channel 01, program “A” is broadcast from 01:00 to 01:30, and on channel 02, program “B” is broadcast from 01:00 to 01:30. Suppose that it was accumulated in 2.

そして、番組情報取得手段３によって、番組情報が取得されると、図３（ａ）に示したように、データベース蓄積手段５に登録した順にＩＤが付され、番組「Ａ」については、ＩＤ「１」、チャネル「０１」、タイトル「Ａ」、開始時刻「０１：００：００」、ＲＥＳ「ｈｔｔｐ：／／．．．」、状態「番組情報取得済み」となり、番組「Ｂ」については、ＩＤ「２」、チャネル「０２」、タイトル「Ｂ」、開始時刻「０１：００：００」、ＲＥＳ「ｈｔｔｐ：／／．．．」、状態「番組情報取得済み」となる。   Then, when the program information is acquired by the program information acquisition means 3, as shown in FIG. 3A, IDs are given in the order of registration in the database storage means 5, and the program “A” has the ID “ 1 ”, channel“ 01 ”, title“ A ”, start time“ 01:00:00 ”, RES“ http: // ... ”, status“ program information already acquired ”, and program“ B ” The ID is “2”, the channel is “02”, the title is “B”, the start time is “01: 00: 00: 00”, the RES is “http: // ...”, and the state is “program information acquired”.

そして、動画ダウンロード手段７では、このデータベース蓄積手段５に登録された中で、開始時刻が最古のもので、状態が「番組情報取得済み」又は「ダウンロード中」の番組について、登録された順（ＩＤが小さい順）に、ダウンロードを開始する。そうすると、図３（ｂ）に示したように、チャンネル「０１」の番組「Ａ」の状態が「ダウンロード中」となり、動画ダウンロード手段７によって、取得したアドレス（ＲＥＳ）よりダウンロードを開始する。そして、動画ダウンロード手段７は、動画ファイル蓄積手段９にダウンロードしたチャンネルごとの番組を、当該番組の動画ファイルとして書き込む。   Then, in the video download means 7, among the programs registered in the database storage means 5, the programs with the start time of the oldest and the status “program information already acquired” or “downloading” are registered in the order of registration. Download is started in the order of ascending ID. Then, as shown in FIG. 3B, the state of the program “A” on the channel “01” becomes “downloading”, and the moving image download means 7 starts downloading from the acquired address (RES). Then, the moving image download unit 7 writes the program for each channel downloaded to the moving image file storage unit 9 as a moving image file of the program.

そして、動画ダウンロード手段７では、所定時間（この実施形態では５分）経過後、チャンネル「０１」の番組「Ａ」についてダウンロードを中止する。さらに、動画ダウンロード手段７では、チャンネル「０２」の番組「Ｂ」についてダウンロードを開始する。そうすると、図３（ｃ）に示したように、チャンネル「０２」の番組「Ｂ」の状態が「ダウンロード中」となる。また、ダウンロード中からダウンロードを中断する場合、動画ダウンロード手段７は、データベース蓄積手段５の状態を「番組情報取得済み」に戻す。以降、５分ごとに、動画ダウンロード手段７は、チャンネル「０１」の番組「Ａ」とチャンネル「０２」の番組「Ｂ」とのダウンロードを繰り返す。   Then, the moving image download means 7 stops the download of the program “A” of the channel “01” after a predetermined time (5 minutes in this embodiment) has elapsed. Further, the moving image download means 7 starts downloading the program “B” of the channel “02”. Then, as shown in FIG. 3C, the state of the program “B” on the channel “02” becomes “downloading”. When the download is interrupted during downloading, the moving image download means 7 returns the state of the database storage means 5 to “program information acquired”. Thereafter, every 5 minutes, the moving image download means 7 repeats the download of the program “A” of the channel “01” and the program “B” of the channel “02”.

そして、図３（ｄ）に示したように、番組「Ａ」と番組「Ｂ」とは、文字認識手段１１によって、文字認識が終了すると、データベース蓄積手段５の状態を「文字認識終了」とする。図１に戻る。   As shown in FIG. 3D, when the character recognition unit 11 ends the character recognition of the program “A” and the program “B”, the state of the database storage unit 5 is changed to “character recognition end”. To do. Returning to FIG.

動画ファイル蓄積手段９は、動画ダウンロード手段７によってダウンロードされた動画ファイルを蓄積するもので、一般的なハードディスクやメモリ等によって構成されている。また、この動画ファイル蓄積手段９は、文字認識手段１１からの読み込み指示に従って、蓄積している動画ファイルを、文字認識手段１１に出力する。   The moving image file storage means 9 stores the moving image file downloaded by the moving image download means 7, and is constituted by a general hard disk, memory, or the like. In addition, the moving image file storage unit 9 outputs the stored moving image file to the character recognition unit 11 in accordance with a read instruction from the character recognition unit 11.

文字認識手段１１は、動画ファイル蓄積手段９から所定時間分のチャンネルごとの動画ファイルを順次切り替えながら読み込んで、当該動画ファイルから映像及び音声の少なくとも１つの予め設定した特徴（この実施形態では映像における文字データ）を番組検索用メタデータとして所定時間分ずつ抽出して、データベース蓄積手段５のデータベースに格納するもので、状態項目検出手段１１ａと、読み込み手段１１ｂと、認識実行手段１１ｃとを備えている。   The character recognizing unit 11 reads the video file for each channel for a predetermined time from the video file storage unit 9 while sequentially switching, and reads at least one preset feature of video and audio from the video file (in this embodiment, in the video (Character data) is extracted as program search metadata for a predetermined time and stored in the database of the database storage means 5, and includes a state item detection means 11a, a reading means 11b, and a recognition execution means 11c. Yes.

状態項目検出手段１１ａは、番組情報がデータベース蓄積手段５のデータベースに格納されたか否かと、動画ファイルが動画ファイル蓄積手段９に蓄積された否かとについて、当該データベースの該当するデータの有無（番組情報取得済み、且つ、ダウンロード中又はダウンロード完了）により検出するものである。そして、この状態項目検出手段１１ａは、番組情報取得済みであり、動画ファイルが蓄積されていた場合に、動画ファイルの読み込みが可能なことを読み込み手段１１ｂに通知する。   The status item detection unit 11a determines whether or not the program information is stored in the database of the database storage unit 5 and whether or not the moving image file is stored in the moving image file storage unit 9. It is detected when it has been acquired and is being downloaded or has been downloaded. The state item detection unit 11a notifies the reading unit 11b that the moving image file can be read when the program information has been acquired and the moving image file has been accumulated.

読み込み手段１１ｂは、状態項目検出手段１１ａから動画ファイルを読み込み可能なことが通知された場合に、動画ファイル蓄積手段９から該当する動画ファイルを読み込むものである。   The reading unit 11b reads the corresponding moving image file from the moving image file storage unit 9 when it is notified from the state item detecting unit 11a that the moving image file can be read.

認識実行手段１１ｃは、動画ファイル蓄積手段９から読み込み手段１１ｂによって読み込んだ動画ファイルについて、文字認識を行うものである。そして、この認識実行手段１１ｃは、文字認識した認識結果と文字認識した箇所（時刻で特定されるフレーム位置）とを対応付けて、番組検索用メタデータとしてデータベース蓄積手段５に出力する。   The recognition execution unit 11c performs character recognition on the moving image file read from the moving image file storage unit 9 by the reading unit 11b. Then, the recognition execution unit 11c associates the recognition result of character recognition with the character recognized part (frame position specified by time) and outputs it to the database storage unit 5 as program search metadata.

ここで、データベース蓄積手段５に、文字認識した認識結果が、番組情報と対応付けられた例を図４に示す。この図４に示した例では、番組「Ａ」の認識結果に「政治」（００′０″）、「小島一郎」（００′０３″）、「殺人事件」（００′０８″）、「偽装」（００′１５″）が含まれている。図２に戻る。   Here, FIG. 4 shows an example in which the recognition result obtained by character recognition in the database storage means 5 is associated with the program information. In the example shown in FIG. 4, the recognition result of the program “A” includes “politics” (00′0 ″), “Ichiro Kojima” (00′03 ″), “murder case” (00′08 ″), “ "Impersonation" (00'15 ") is included. Returning to FIG.

なお、この文字認識手段１１による文字認識は、動画ファイルを構成する１フレームごとに、当該フレームにおける画素値の違いに基づいて、文字を認識するもので、一般的な画像処理手法に従って行われる。   The character recognition by the character recognizing unit 11 recognizes a character for each frame constituting the moving image file based on a difference in pixel value in the frame, and is performed according to a general image processing method.

また、この実施形態では、動画ファイルに含まれている文字（テロップ等）について、文字認識した認識結果を、番組検索用メタデータとして出力しているが、これに限定されず、例えば、動画ファイルに含まれている音声について、音声認識した認識結果（例えば、特定の人物名、事件名、業界用語）を、番組検索用メタデータとして出力することも可能である。さらに、動画ファイルを構成するフレームにおいて、画像認識した認識結果（特定の人物等）を、番組検索用メタデータとして出力することも可能である。   In this embodiment, the recognition result obtained by character recognition of characters (telop or the like) included in the moving image file is output as program search metadata. However, the present invention is not limited to this. It is also possible to output a recognition result (for example, a specific person name, case name, industry term) recognized as speech for the audio included in the program search metadata. Furthermore, it is also possible to output a recognition result (a specific person or the like) obtained by image recognition as program search metadata in a frame constituting the moving image file.

この番組検索用メタデータ抽出格納装置１によれば、データベース蓄積手段５に番組検索用メタデータを格納する際に、チャンネルごとの番組（動画ファイルの全部又は一部）に独立させて、番組情報を取得したり、ダウンロードしたり、特徴抽出を行ったりすることで、費用を増大させることなく、複数の番組について当該番組の特徴を抽出して、番組検索用メタデータを格納したデータベース蓄積手段５を効率よく作成することができる。   According to this program search metadata extraction and storage device 1, when storing the program search metadata in the database storage means 5, the program information is made independent of the program (all or part of the moving image file) for each channel. The database accumulating means 5 for extracting program features for a plurality of programs and storing program search metadata without increasing costs by acquiring, downloading, or extracting features. Can be created efficiently.

また、この番組検索用メタデータ抽出格納装置１によれば、ＴＶ放送同録装置２で受信された番組であれば、現在放送又は配信されている番組についても、番組の長さに依存せずに、予め設定した所定時間（この実施形態では５分）だけダウンロードして、文字認識して特徴を抽出しているので、すぐに当該番組を検索するのに活用可能なデータベースを作成することができる。   Further, according to the program search metadata extraction and storage device 1, as long as the program is received by the TV broadcast simultaneous recording device 2, the currently broadcasted or distributed program does not depend on the length of the program. In addition, since a feature is extracted by downloading characters for a predetermined time (5 minutes in this embodiment) in advance, it is possible to create a database that can be used to quickly search for the program. it can.

さらに、この番組検索用メタデータ抽出格納装置１によれば、番組に含まれる文字データが番組検索用メタデータとして抽出されるので、この文字データを手掛かりにして番組を検索することができる。
つまり、この番組検索用メタデータ抽出格納装置１によれば、多くのチャンネルの番組について、所定時間ずつ、ダウンロードして、この所定時間の各番組について、特徴（文字認識した結果）を抽出することで、データベースを作成している。このため、例えば６チャンネルの番組（それぞれ１時間の番組とする）について、特徴を抽出して完全なデータベースを作成しようとした場合、従来では単純に６時間要してしまうが、この番組検索用メタデータ抽出格納装置１では、完全なものではないけれども、約３０分で（１番組５分ずつ６チャンネル分）データベースが作成でき、活用可能となる。 Furthermore, according to the program search metadata extraction and storage device 1, the character data included in the program is extracted as the program search metadata, so that the program can be searched using this character data as a clue.
That is, according to the program search metadata extraction and storage device 1, the programs of many channels are downloaded at predetermined time intervals, and the features (results of character recognition) are extracted for each program at the predetermined time intervals. And you are creating a database. For this reason, for example, when it is attempted to create a complete database by extracting features of 6-channel programs (each of which is a 1-hour program), 6 hours is conventionally required. Although not complete, the metadata extraction and storage device 1 can create and use a database in about 30 minutes (6 channels for 5 minutes per program).

また、この番組検索用メタデータ抽出格納装置１では、文字認識した結果を番組の特徴に用いているので、一般的に番組がニュース番組や映画等を問わずに、番組の冒頭にテロップ等で、当該番組の内容が紹介されることが多いので、たとえ番組の冒頭から５分だけ文字認識した認識結果を用いても、十分に検索に活用することができる。   Further, in the program search metadata extracting and storing apparatus 1, since the result of character recognition is used for the feature of the program, generally, the program is a news program, a movie, etc. Since the contents of the program are often introduced, even if the recognition result obtained by recognizing characters for only 5 minutes from the beginning of the program is used, it can be sufficiently utilized for searching.

（番組検索用メタデータ抽出格納装置の動作 その１）
次に、図５に示すフローチャートを参照して、番組検索用メタデータ抽出格納装置１の番組情報を取得する際の動作について説明する（適宜、図２参照）。
まず、番組検索用メタデータ抽出格納装置１は、番組情報取得手段３によって、ＴＶ放送同録装置２から番組情報を取得する（ステップＳ１）。続いて、番組検索用メタデータ抽出格納装置１は、番組情報取得手段３によって、取得した番組情報の中に、新しい番組情報があるか否かを判定する（ステップＳ２）。 (Operation of Metadata Extraction and Storage Device for Program Search Part 1)
Next, with reference to the flowchart shown in FIG. 5, the operation of the program search metadata extraction / storage device 1 when acquiring program information will be described (see FIG. 2 as appropriate).
First, the program search metadata extraction and storage device 1 acquires program information from the TV broadcast simultaneous recording device 2 by the program information acquisition means 3 (step S1). Subsequently, the program search metadata extraction and storage device 1 determines whether or not there is new program information in the acquired program information by the program information acquisition means 3 (step S2).

そうすると、番組検索用メタデータ抽出格納装置１は、新しい番組情報があると判定しなかった場合（ステップＳ２、Ｎｏ）、ステップＳ１に戻り、新しい番組情報があると判定した場合（ステップＳ２、Ｙｅｓ）、番組情報をデータベース蓄積手段５に登録する（ステップＳ３）。さらに、番組検索用メタデータ抽出格納装置１は、番組情報取得手段３によって、データベース蓄積手段５の該当する番組の［状態］を「番組情報取得済み」として登録し（ステップＳ４）、ステップＳ１に戻る。   Then, if the program search metadata extraction and storage device 1 does not determine that there is new program information (step S2, No), the program search metadata extraction storage device 1 returns to step S1 and determines that there is new program information (step S2, Yes). The program information is registered in the database storage means 5 (step S3). Further, the program search metadata extraction / storage device 1 registers the [state] of the corresponding program in the database storage means 5 as “program information already acquired” by the program information acquisition means 3 (step S4), and in step S1. Return.

（番組検索用メタデータ抽出格納装置の動作 その２）
次に、図６に示すフローチャートを参照して、番組検索用メタデータ抽出格納装置１の動画をダウンロードする際の動作について説明する（適宜、図２参照）。
まず、番組検索用メタデータ抽出格納装置１は、動画ダウンロード手段７によって、データベース蓄積手段５の［状態］が「番組情報取得済み」又は「ダウンロード中」の［番組のアドレス］（番組のＲＥＳ）を取得する（ステップＳ１１）。 (Operation of metadata retrieval and storage device for program search, part 2)
Next, referring to the flowchart shown in FIG. 6, the operation of downloading the moving image of the program search metadata extraction / storage device 1 will be described (see FIG. 2 as appropriate).
First, the program search metadata extraction and storage device 1 uses the video download means 7 to [program address] (program RES) in which the [status] in the database storage means 5 is “program information already acquired” or “downloading”. Is acquired (step S11).

そして、番組検索用メタデータ抽出格納装置１は、動画ダウンロード手段７によって、データベース蓄積手段５の［状態］が「番組情報取得済み」又は「ダウンロード中」の番組があるか否かを判定する（ステップＳ１２）。番組検索用メタデータ抽出格納装置１は、動画ダウンロード手段７によって、データベース蓄積手段５の［状態］が「番組情報取得済み」又は「ダウンロード中」の番組があると判定しなかった場合（ステップＳ１２、Ｎｏ）は、ステップＳ１１に戻る。   Then, the program search metadata extraction and storage device 1 determines whether or not there is a program whose [status] in the database storage unit 5 is “program information already acquired” or “downloading” by the moving image download unit 7 ( Step S12). The program search metadata extraction and storage device 1 does not determine that there is a program whose [status] in the database storage unit 5 is “program information already acquired” or “downloading” by the moving image download unit 7 (step S12). , No) returns to step S11.

そして、番組検索用メタデータ抽出格納装置１は、動画ダウンロード手段７によって、データベース蓄積手段５の［状態］が「番組情報取得済み」又は「ダウンロード中」の番組があると判定した場合（ステップＳ１２、Ｙｅｓ）は、ダウンロードを開始する。そうすると、番組検索用メタデータ抽出格納装置１は、動画ダウンロード手段７によって、動画ファイル蓄積手段９に対し、書き出しファイルをオープンさせる（ステップＳ１３）。また、番組検索用メタデータ抽出格納装置１は、動画ダウンロード手段７によって、該当する番組について、最初のダウンロードの場合、ファイル名をデータベース蓄積手段５に保存する（ステップＳ１４）。   Then, the program search metadata extraction / storage device 1 determines that there is a program whose [status] in the database storage means 5 is “program information already acquired” or “downloading” by the video download means 7 (step S12). , Yes) starts the download. Then, the program search metadata extraction / storage device 1 causes the moving image download means 7 to open the writing file to the moving image file storage means 9 (step S13). Further, the program search metadata extraction and storage device 1 stores the file name in the database storage means 5 in the case of the first download of the corresponding program by the moving picture download means 7 (step S14).

そして、番組検索用メタデータ抽出格納装置１は、動画ダウンロード手段７によって、動画ファイル蓄積手段９における書き出しファイルの書き出し位置を最後尾に移動する（ステップＳ１５）。また、番組検索用メタデータ抽出格納装置１は、動画ダウンロード手段７によって、データベース蓄積手段５より、番組の［読み込み位置］を取得する（ステップＳ１６）。そして、番組検索用メタデータ抽出格納装置１は、動画ダウンロード手段７によって、データベース蓄積手段５の該当する番組について［状態］を「ダウンロード中」に設定する（ステップＳ１７）。   Then, the program search metadata extraction / storage device 1 uses the moving picture download means 7 to move the writing position of the writing file in the moving picture file storage means 9 to the end (step S15). Further, the program search metadata extraction and storage device 1 acquires the [reading position] of the program from the database storage unit 5 by the moving image download unit 7 (step S16). Then, the program search metadata extraction and storage device 1 sets [Status] to “Downloading” for the corresponding program in the database storage means 5 by the moving picture download means 7 (step S17).

そして、番組検索用メタデータ抽出格納装置１は、動画ダウンロード手段７によって、ＴＶ放送同録装置２のメモリ上から［番組のアドレス］と［読み込み位置］とが示すデータをダウンロードする（ステップＳ１８）。そして、番組検索用メタデータ抽出格納装置１は、動画ダウンロード手段７によって、動画ファイル蓄積手段９にダウンロードデータはあるか否かを判定する（ステップＳ１９）。   Then, the program search metadata extraction and storage device 1 downloads the data indicated by [program address] and [reading position] from the memory of the TV broadcast simultaneous recording device 2 by the moving image download means 7 (step S18). . Then, the program search metadata extraction and storage device 1 determines whether or not there is download data in the moving image file storage unit 9 by the moving image download unit 7 (step S19).

そして、番組検索用メタデータ抽出格納装置１は、動画ダウンロード手段７によって、動画ファイル蓄積手段９にダウンロードデータはあると判定しなかった場合（ステップＳ１９、Ｎｏ）は、動画ダウンロード手段７によって、動画ファイル蓄積手段９に対し書き出しファイルをクローズさせ（ステップＳ２０）、動画ダウンロード手段７によって、データベース蓄積手段５の該当する番組について［状態］を「ダウンロード済み」に設定し（ステップＳ２１）、ステップＳ１１に戻る。   Then, the program search metadata extraction and storage device 1 uses the video download unit 7 to determine that there is no download data in the video file storage unit 9 (No in step S19). The file storage unit 9 closes the write file (step S20), and the moving image download unit 7 sets [Status] to “downloaded” for the corresponding program in the database storage unit 5 (step S21). Return.

また、番組検索用メタデータ抽出格納装置１は、ステップＳ１９にて、（動画ファイル蓄積手段９にダウンロードデータはあると判定した場合（ステップＳ１９、Ｙｅｓ）は、動画ダウンロード手段７によって、ＴＶ放送同録装置２のメモリ上の［読み込み位置］に次の読み込み位置を設定し（ステップＳ２２）、動画ファイル蓄積手段９に対し、書き出しファイルに、ＴＶ放送同録装置２のメモリ上から、データの書き込みを開始する（ステップＳ２３）。   Further, in step S19, the program search metadata extraction and storage device 1 determines that there is download data in the moving image file storage means 9 (step S19, Yes). The next reading position is set in [Reading position] on the memory of the recording device 2 (step S22), and the data is written to the moving image file storage means 9 from the memory of the TV broadcast simultaneous recording device 2 to the writing file. Is started (step S23).

そして、番組検索用メタデータ抽出格納装置１は、動画ダウンロード手段７によって、所定時間経過したか否かを判定し（ステップＳ２４）、経過したと判定するまで（ステップＳ２４、Ｎｏ）、ステップＳ１８に戻り、経過したと判定した場合（ステップＳ２４、Ｙｅｓ）、データベース蓄積手段５の該当する番組について［読み込み位置］（次の読み込み位置）を設定し（ステップＳ２５）、動画ダウンロード手段７によって、動画ファイル蓄積手段９に対し、書き出しファイルをクローズさせる（ステップＳ２６）。   Then, the program search metadata extraction and storage device 1 determines whether or not the predetermined time has passed by the moving image download means 7 (step S24), and until it is determined that it has passed (step S24, No), the process goes to step S18. Returning, if it is determined that it has passed (step S24, Yes), [reading position] (next reading position) is set for the corresponding program in the database storage means 5 (step S25), and the moving picture download means 7 uses the moving picture file. The storage unit 9 is made to close the writing file (step S26).

（番組検索用メタデータ抽出格納装置の動作 その３）
次に、図７に示すフローチャートを参照して、番組検索用メタデータ抽出格納装置１の文字認識を行う際の動作について説明する（適宜、図２参照）。
まず、番組検索用メタデータ抽出格納装置１は、文字認識手段１１によって、データベース蓄積手段５の中で、番組の［状態］が「ダウンロード中」又は「ダウンロード済み」の［ファイル名］を取得する（ステップＳ３１）。 (Operation of metadata retrieval and storage device for program search Part 3)
Next, with reference to the flowchart shown in FIG. 7, the operation | movement at the time of performing character recognition of the metadata extraction storage device 1 for program search is demonstrated (refer FIG. 2 suitably).
First, the program search metadata extraction and storage device 1 uses the character recognition unit 11 to acquire, in the database storage unit 5, a [file name] whose program [status] is “downloading” or “downloaded”. (Step S31).

そして、番組検索用メタデータ抽出格納装置１は、文字認識手段１１によって、番組の［状態］が「ダウンロード中」又は「ダウンロード済み」の［ファイル名］があるか否かを判定し（ステップＳ３２）、あると判定しなかった場合（ステップＳ３２、Ｎｏ）、ステップＳ３１に戻り、あると判定した場合（ステップＳ３２、Ｙｅｓ）、文字認識手段１１によって、動画ファイル蓄積手段９に書き込まれているファイルをオープンさせる（ステップＳ３３）。   Then, the program search metadata extraction and storage device 1 determines whether or not there is a [file name] in which the [status] of the program is “downloading” or “downloaded” by the character recognition unit 11 (step S32). ), If not determined to be present (No at Step S32), return to Step S31; if determined to be present (Yes at Step S32), the file written in the moving image file storage means 9 by the character recognition means 11 Is opened (step S33).

そして、番組検索用メタデータ抽出格納装置１は、文字認識手段１１によって、オープンされたファイルのフレーム位置の静止画を取得し（ステップＳ３４）、最終フレームであるか否かを判定する（ステップＳ３５）。そして、番組検索用メタデータ抽出格納装置１は、文字認識手段１１によって、最終フレームであると判定した場合（ステップＳ３５、Ｙｅｓ）、ファイルをクローズさせ（ステップＳ３６）、文字認識手段１１によって、データベース蓄積手段５の該当する番組について［状態］を「文字認識終了」に設定する（ステップＳ３７）。   Then, the program search metadata extraction / storage device 1 acquires the still image at the frame position of the opened file by the character recognition means 11 (step S34), and determines whether it is the last frame (step S35). ). When the character retrieval unit 11 determines that the frame is the final frame (step S35, Yes), the program search metadata extraction / storage device 1 closes the file (step S36). For the corresponding program in the storage means 5, the [status] is set to "character recognition end" (step S37).

また、番組検索用メタデータ抽出格納装置１は、文字認識手段１１によって、ステップＳ３５にて、最終フレームであると判定しなかった場合（ステップＳ３５、Ｎｏ）、フレームから静止画を抽出し（ステップＳ３８）、当該静止画に文字強調の処理を行う（ステップＳ３９）。そして、番組検索用メタデータ抽出格納装置１は、文字認識手段１１によって、ＯＣＲライブラリを用いて文字認識を行って（ステップＳ４０）、文字があるか否かを判定する（ステップＳ４１）。   Also, the program search metadata extraction / storage device 1 extracts a still image from the frame (step S35, No) when the character recognition means 11 does not determine that the frame is the final frame in step S35 (step S35, No). S38) Character emphasis processing is performed on the still image (step S39). Then, the program search metadata extraction and storage device 1 performs character recognition using the OCR library by the character recognition unit 11 (step S40) and determines whether or not there is a character (step S41).

そして、番組検索用メタデータ抽出格納装置１は、文字認識手段１１によって、文字があると判定しなかった場合（ステップＳ４１、Ｎｏ）、ステップＳ３４に戻る（又は動作を終了する）。また、番組検索用メタデータ抽出格納装置１は、文字認識手段１１によって、文字があると判定した場合（ステップＳ４１、Ｙｅｓ）、データベース蓄積手段５の該当する番組に対応付けて、登録し（ステップＳ４２）、ステップＳ３４に戻る（又は動作を終了する）。   Then, the program retrieval metadata extraction / storage device 1 returns to step S34 (or terminates the operation) when the character recognition unit 11 does not determine that there is a character (No in step S41). Further, the program search metadata extraction and storage device 1 registers the character recognition means 11 in association with the corresponding program in the database storage means 5 when it is determined that there is a character (Yes in Step S41) (Step S41). S42), the process returns to step S34 (or the operation is terminated).

（２つのチャンネルについてダウンロードする際の具体的な例、具体的な効果の説明）
図８を参照して、２つのチャンネルについてダウンロードする際の具体的な例を説明し、図９を参照して、番組検索用メタデータ抽出格納装置１の具体的な効果について説明する（適宜、図２参照）。 (Specific examples of downloading two channels, explanation of specific effects)
Referring to FIG. 8, a specific example when downloading two channels will be described, and with reference to FIG. 9, a specific effect of the program search metadata extraction / storage device 1 will be described (as appropriate) (See FIG. 2).

この図８において、Ｘビデオステーションは図１に示したＴＶ放送同録装置２を指しており、ＵＰｎＰＣｏｎｔｒｏｌＰｏｉｎｔライブラリはＵＰｎＰコントロールを指している。また、チャンネル１アプリケーション、チャンネル２アプリケーションは、番組検索用メタデータ抽出格納装置１の動画ダウンロード手段７によって、図３に示したチャンネル「０１」、チャンネル「０２」をダウンロードするタスクがそれぞれ独立したアプリケーションとして存在することを指している。   In FIG. 8, the X video station indicates the TV broadcast simultaneous recording apparatus 2 shown in FIG. 1, and the UPnPCControlPoint library indicates the UPnP control. The channel 1 application and the channel 2 application are applications in which tasks for downloading the channels “01” and “02” shown in FIG. Points to exist as.

そして、チャンネル１アプリケーションがＵＰｎＰＣｏｎｔｒｏｌＰｏｉｎｔライブラリに接続を要求すると、このＵＰｎＰＣｏｎｔｒｏｌＰｏｉｎｔライブラリを介して、Ｘビデオステーションに接続し、接続応答を、ＵＰｎＰＣｏｎｔｒｏｌＰｏｉｎｔライブラリを介して、チャンネル１アプリケーションに返す。同様に、チャンネル２アプリケーションがＵＰｎＰＣｏｎｔｒｏｌＰｏｉｎｔライブラリに接続を要求すると、このＵＰｎＰＣｏｎｔｒｏｌＰｏｉｎｔライブラリを介して、Ｘビデオステーションに接続し、接続応答を、ＵＰｎＰＣｏｎｔｒｏｌＰｏｉｎｔライブラリを介して、チャンネル２アプリケーションに返す。   When the channel 1 application requests connection to the UPnPCControlPoint library, the channel 1 application connects to the X video station via this UPnPCControlPoint library, and returns a connection response to the channel 1 application via the UPnPCControlPoint library. Similarly, when the channel 2 application requests connection to the UPnPCControlPoint library, the channel 2 application connects to the X video station via this UPnPCControlPoint library, and returns a connection response to the channel 2 application via the UPnPCControlPoint library.

また、チャンネル１アプリケーションがＵＰｎＰＣｏｎｔｒｏｌＰｏｉｎｔライブラリにファイルオープン（Ｘビデオステーションに蓄積されているチャンネル１の番組）を要求すると、このＵＰｎＰＣｏｎｔｒｏｌＰｏｉｎｔライブラリを介して、Ｘビデオステーションに対しファイルオープンを実行させ、この応答であるファイルオープン応答を、ＵＰｎＰＣｏｎｔｒｏｌＰｏｉｎｔライブラリを介して、チャンネル１アプリケーションに返す。   Also, when the channel 1 application requests a file open (channel 1 program stored in the X video station) to the UPnPCControlPoint library, the file is opened to the X video station via this UPnPCControlPoint library. A certain file open response is returned to the channel 1 application via the UPnPCControlPoint library.

この時点で、チャンネル２アプリケーションがＵＰｎＰＣｏｎｔｒｏｌＰｏｉｎｔライブラリにファイルオープンを要求し、このＵＰｎＰＣｏｎｔｒｏｌＰｏｉｎｔライブラリを介して、Ｘビデオステーションに対しファイルオープンを実行させると、チャンネル１のファイルをオープンしているので、応答としてファイルオープンＮＧ応答を、ＵＰｎＰＣｏｎｔｒｏｌＰｏｉｎｔライブラリを介して、チャンネル２アプリケーションに返す。   At this point, when the channel 2 application requests the UPnPCControlPoint library to open a file and when the X video station executes the file opening via this UPnPCControlPoint library, the file of channel 1 is opened, and the file is returned as a response. An open NG response is returned to the channel 2 application via the UPnPCControlPoint library.

また、チャンネル１アプリケーションは、ＵＰｎＰＣｏｎｔｒｏｌＰｏｉｎｔライブラリにファイル読み込みを要求すると、このＵＰｎＰＣｏｎｔｒｏｌＰｏｉｎｔライブラリを介して、Ｘビデオステーションに対しファイル読み込みを実行させ、この応答であるファイル読み込み応答を、ＵＰｎＰＣｏｎｔｒｏｌＰｏｉｎｔライブラリを介して、チャンネル１アプリケーションに返す。なお、このファイル読み込みは、ファイルサイズ分ずつ繰り返し行われる。   In addition, when the channel 1 application requests the UPnPCControlPoint library to read a file, the Xn video station reads the file through the UPnPCControlPoint library, and the file read response as a response is sent to the channel via the UPnPCControlPoint library. Return to 1 application. This file reading is repeated for each file size.

そして、チャンネル１アプリケーションは、ＵＰｎＰＣｏｎｔｒｏｌＰｏｉｎｔライブラリにファイルクローズを要求すると、このＵＰｎＰＣｏｎｔｒｏｌＰｏｉｎｔライブラリを介して、Ｘビデオステーションに対しファイルクローズを実行させ、この応答であるファイルクローズ応答を、ＵＰｎＰＣｏｎｔｒｏｌＰｏｉｎｔライブラリを介して、チャンネル１アプリケーションに返す。   When the channel 1 application requests the UPnPCControlPoint library to close the file, the channel 1 application causes the X video station to execute the file close via the UPnPCControlPoint library, and sends a file close response as a response to the channel close via the UPnPCControlPoint library. Return to 1 application.

引き続いて、チャンネル２アプリケーションがＵＰｎＰＣｏｎｔｒｏｌＰｏｉｎｔライブラリにファイルオープンを要求し、このＵＰｎＰＣｏｎｔｒｏｌＰｏｉｎｔライブラリを介して、Ｘビデオステーションに対しファイルオープンを実行させると、この時点ではチャンネル１のファイルをクローズしているのでチャンネル２のファイルをオープンすることができ、この応答であるファイルオープン応答を、ＵＰｎＰＣｏｎｔｒｏｌＰｏｉｎｔライブラリを介して、チャンネル２アプリケーションに返す。   Subsequently, when the channel 2 application requests the UPnPCControlPoint library to open a file and causes the X video station to execute the file opening via this UPnPCControlPoint library, the file of channel 1 is closed at this point, so channel 2 The file open response, which is this response, is returned to the channel 2 application via the UPnPCControlPoint library.

また、チャンネル２アプリケーションは、ＵＰｎＰＣｏｎｔｒｏｌＰｏｉｎｔライブラリにファイル読み込みを要求すると、このＵＰｎＰＣｏｎｔｒｏｌＰｏｉｎｔライブラリを介して、Ｘビデオステーションに対しファイル読み込みを実行させ、この応答であるファイル読み込み応答を、ＵＰｎＰＣｏｎｔｒｏｌＰｏｉｎｔライブラリを介して、チャンネル２アプリケーションに返す。なお、このファイル読み込みは、ファイルサイズ分ずつ繰り返し行われる。   In addition, when the channel 2 application requests the UPnPCControlPoint library to read a file, the Xn video station reads the file through the UPnPCControlPoint library, and the file read response as a response is sent to the channel via the UPnPCControlPoint library. 2 Return to application. This file reading is repeated for each file size.

そして、チャンネル２アプリケーションは、ＵＰｎＰＣｏｎｔｒｏｌＰｏｉｎｔライブラリにファイルクローズを要求すると、このＵＰｎＰＣｏｎｔｒｏｌＰｏｉｎｔライブラリを介して、Ｘビデオステーションに対しファイルクローズを実行させ、この応答であるファイルクローズ応答を、ＵＰｎＰＣｏｎｔｒｏｌＰｏｉｎｔライブラリを介して、チャンネル２アプリケーションに返す。   Then, when the channel 2 application requests the UPnPCControlPoint library to close the file, it causes the X video station to perform file closing via this UPnPCControlPoint library, and this file close response is sent to the channel via the UPnPCControlPoint library. 2 Return to application.

また、図９において、番組「Ａ」と番組「Ｂ」とのファイルをＴＶ放送同録装置２から番組検索用メタデータ抽出格納装置１にダウンロードする際に、（１）番組ＡのＭＰＥＧファイルＯＰＥＮ、（２）フレーム位置に移動、（３）画像抽出、（４）番組ＡのＭＰＥＧファイルＣＬＯＳＥ、（５）番組ＢのＭＰＥＧファイルＯＰＥＮ、（６）フレーム位置に移動、（７）画像抽出、（８）番組ＢのＭＰＥＧファイルＣＬＯＳＥ、（９）番組ＡのＭＰＥＧファイルＯＰＥＮ、（１０）フレーム位置に移動、（１１）画像抽出、（１２）番組ＡのＭＰＥＧファイルＣＬＯＳＥといった手順となることを示している。   In FIG. 9, when the files of the program “A” and the program “B” are downloaded from the TV broadcast recording apparatus 2 to the program search metadata extraction / storage apparatus 1, (1) MPEG file OPEN of the program A (2) Move to frame position, (3) Image extraction, (4) MPEG file CLOSE of program A, (5) MPEG file OPEN of program B, (6) Move to frame position, (7) Image extraction, ( 8) MPEG file CLOSE of program B, (9) MPEG file OPEN of program A, (10) Move to frame position, (11) Image extraction, (12) MPEG file CLOSE of program A Yes.

この図９で枠囲いした（９）及び（１０）は、番組ごとにタスクを用意すると、フレーム位置が大きくなるにつれ、再度オープンする際の処理が重くなってしまうので、この番組検索用メタデータ抽出格納装置１では、図８に示したように、チャンネルごとにタスクを用意しておいて、番組ごとに再度オープンすることを無くすようにしている。   In (9) and (10) surrounded by a frame in FIG. 9, when a task is prepared for each program, the process for reopening becomes heavy as the frame position becomes larger. In the extraction storage device 1, as shown in FIG. 8, a task is prepared for each channel so that reopening for each program is eliminated.

これは、動画ファイルであるＭＰＥＧファイルの操作に、市販されている既存のライブラリを使用しているため、文字認識手段１１において、文字認識を行う際に、画像抽出を行ったＭＰＥＧファイルを一度閉じてしまうと、次のフレーム位置に移動するのに時間がかかってしまうためである。   This is because an existing commercially available library is used for the operation of the MPEG file which is a moving image file. Therefore, when the character recognition unit 11 performs character recognition, the MPEG file from which the image has been extracted is closed once. This is because it takes time to move to the next frame position.

以上、本発明の実施形態について説明したが、本発明は前記実施形態には限定されない。例えば、本実施形態では、番組検索用メタデータ抽出格納装置１として説明したが、番組検索用メタデータ抽出格納装置１の各構成の動作をコンピュータと協働させるように、コンピュータ言語で記述した組検索用メタデータ抽出格納プログラムとして構成することも可能である。   As mentioned above, although embodiment of this invention was described, this invention is not limited to the said embodiment. For example, in the present embodiment, the program search metadata extraction / storage device 1 has been described. However, the program search metadata extraction / storage device 1 is described in a computer language so that the operations of the components of the program search metadata extraction / storage device 1 cooperate with the computer. It can also be configured as a search metadata extraction and storage program.

本発明の実施形態に係る番組検索用メタデータ抽出格納システムの概略を示す図である。It is a figure which shows the outline of the metadata extraction storage system for program searches which concerns on embodiment of this invention. 本発明の実施形態に係る番組検索用メタデータ抽出格納装置を示すブロック図である。It is a block diagram which shows the metadata extraction storage device for a program search which concerns on embodiment of this invention. 状態項目監視手段によりデータベース蓄積手段に登録される番組情報について示す図である。It is a figure shown about the program information registered into a database storage means by the state item monitoring means. データベース蓄積手段に蓄積されるデータに、認識結果が対応付けられた状態を示す図である。It is a figure which shows the state by which the recognition result was matched with the data accumulate | stored in a database storage means. 図１に示した番組検索用メタデータ抽出格納装置の動作（番組情報取得の動作）を示すフローチャートである。3 is a flowchart showing an operation (program information acquisition operation) of the program search metadata extraction / storage device shown in FIG. 1. 図１に示した番組検索用メタデータ抽出格納装置の動作（動画ダウンロードの動作）を示すフローチャートである。3 is a flowchart showing an operation (moving image download operation) of the program search metadata extraction and storage device shown in FIG. 1. 図１に示した番組検索用メタデータ抽出格納装置の動作（文字認識の動作）を示すフローチャートである。It is a flowchart which shows operation | movement (character recognition operation | movement) of the metadata extraction storage device for program search shown in FIG. ２つのチャンネルについてダウンロードする際の具体的な例を示す図である。It is a figure which shows the specific example at the time of downloading about two channels. 番組検索用メタデータ抽出格納装置の具体的な効果について示す図である。It is a figure shown about the specific effect of the metadata extraction storage device for program search.

符号の説明Explanation of symbols

１ 番組検索用メタデータ抽出格納装置
２ ＴＶ放送同録装置
３ 番組情報取得手段
５ データベース蓄積手段
７ 動画ダウンロード手段
７ａ 番組情報検出手段
７ｂ カウンタ手段
７ｃ ダウンロード実行手段
７ｄ 位置保持手段
９ 動画ファイル蓄積手段
１１ 文字認識手段（特徴抽出手段）
１１ａ 状態項目検出手段
１１ｂ 読み込み手段
１１ｃ 認識実行手段
Ｓ 番組検索用メタデータ抽出格納システム DESCRIPTION OF SYMBOLS 1 Program search metadata extraction storage apparatus 2 TV broadcast simultaneous recording apparatus 3 Program information acquisition means 5 Database storage means 7 Movie download means 7a Program information detection means 7b Counter means 7c Download execution means 7d Position holding means 9 Movie file storage means 11 Character recognition means (feature extraction means)
11a State item detection means 11b Reading means 11c Recognition execution means S Program search metadata extraction and storage system

Claims (3)

放送又は通信により配信される複数の番組をチャンネルごとに蓄積するＴＶ放送同録装置にＵＰｎＰコントロールポイントとして接続し、前記ＴＶ放送同録装置から動画ファイル蓄積手段に前記番組の一部をダウンロードすると共に、所望の番組を検索するために用いるデータである番組検索用メタデータを、当該番組の一部から抽出し、当該番組に関する情報である番組情報と共にデータベース蓄積手段に蓄積されるデータベースに格納する番組検索用メタデータ抽出格納装置であって、
前記ＴＶ放送同録装置から一定の時間間隔で前記番組情報を取得して前記データベースに格納する番組情報取得手段と、
前記番組情報によって特定される番組それぞれについて、当該番組の一部である所定時間分の動画ファイルを、前記ＴＶ放送同録装置から前記動画ファイル蓄積手段にダウンロードする動画ダウンロード手段と、
前記動画ファイル蓄積手段から前記所定時間分の動画ファイルを順次切り替えながら読み込んで、当該動画ファイルから映像及び音声の少なくとも１つの予め設定した特徴を前記番組検索用メタデータとして抽出して前記データベースに格納する特徴抽出手段と、
を備え、
前記動画ダウンロード手段は、
前記番組情報取得手段で取得された番組情報が前記データベースに格納されたか否かを検出する番組情報検出手段と、
所定時間を計時し、当該所定時間の経過を通知するカウンタ手段と、
前記番組情報検出手段で番組情報が検出された場合、当該番組情報で特定される番組のダウンロードアドレスに基づき、前記番組の一部を前記ＴＶ放送同録装置からチャンネルを切り替えてダウンロードし、前記カウンタ手段から所定時間の経過が通知された場合、当該ダウンロードを中止し、ダウンロードした当該番組の一部を前記動画ファイルとして前記動画ファイル蓄積手段に蓄積するダウンロード実行手段と、
を備えることを特徴とする番組検索用メタデータ抽出格納装置。 Connect as a UPnP control point in a TV broadcast the recording apparatus for storing a plurality of programs distributed by the broadcast or communication to each channel, the download pieces of the program to the moving image file storage means from the TV broadcast the recording device The program search metadata, which is data used to search for a desired program, is extracted from a part of the program and stored in a database stored in the database storage means together with program information which is information related to the program A metadata extraction and storage device for search,
Program information acquisition means for acquiring the program information from the TV broadcast simultaneous recording device at regular time intervals and storing it in the database;
For each program specified by the program information, and downloads sul video downloading means a predetermined time of the video file from the TV broadcast the recording device in the moving image file storage means, which is part of the program,
Loading while sequentially switching said predetermined time dynamic image file from the moving image file storage means, said database at least one preset characteristic of the video and audio from the video file out extracted by said program searching for metadata And feature extraction means stored in
Equipped with a,
The video download means
Program information detection means for detecting whether or not the program information acquired by the program information acquisition means is stored in the database;
Counter means for measuring a predetermined time and notifying the passage of the predetermined time;
When the program information is detected by the program information detecting means, a part of the program is downloaded from the TV broadcast recording apparatus by switching the channel based on the download address of the program specified by the program information, and the counter Download execution means for stopping the download and storing a part of the downloaded program as the video file in the video file storage means when notification of the elapse of a predetermined time from the means;
A metadata extraction and storage device for program search, comprising: 前記特徴抽出手段は、前記動画ファイルの各フレームに含まれる文字データを認識し、この文字データを番組検索用メタデータとすることを特徴とする請求項１に記載の番組検索用メタデータ抽出格納装置。   2. The program search metadata extraction storage according to claim 1, wherein the feature extraction unit recognizes character data included in each frame of the moving image file and uses the character data as program search metadata. apparatus. 放送又は通信により配信される複数の番組をチャンネルごとに蓄積するＴＶ放送同録装置にＵＰｎＰコントロールポイントとして接続し、前記ＴＶ放送同録装置から動画ファイル蓄積手段に前記番組の一部をダウンロードすると共に、所望の番組を検索するために用いるデータである番組検索用メタデータを、当該番組の一部から抽出し、当該番組に関する情報である番組情報と共にデータベース蓄積手段に蓄積されるデータベースに格納するために、コンピュータを、
前記ＴＶ放送同録装置から一定の時間間隔で前記番組情報を取得して前記データベースに格納する番組情報取得手段、
前記番組情報によって特定される番組それぞれについて、当該番組の一部である所定時間分の動画ファイルを、前記ＴＶ放送同録装置から前記動画ファイル蓄積手段にダウンロードする動画ダウンロード手段、
前記動画ファイル蓄積手段から前記所定時間分の動画ファイルを順次切り替えながら読み込んで、当該動画ファイルから映像及び音声の少なくとも１つの予め設定した特徴を前記番組検索用メタデータとして抽出して前記データベースに格納する特徴抽出手段、
として機能させ、
前記動画ダウンロード手段を、
前記番組情報取得手段で取得された番組情報が前記データベースに格納されたか否かを検出する番組情報検出手段、
所定時間を計時し、当該所定時間の経過を通知するカウンタ手段、
前記番組情報検出手段で番組情報が検出された場合、当該番組情報で特定される番組のダウンロードアドレスに基づき、前記番組の一部を前記ＴＶ放送同録装置からチャンネルを切り替えてダウンロードし、前記カウンタ手段から所定時間の経過が通知された場合、当該ダウンロードを中止し、ダウンロードした当該番組の一部を前記動画ファイルとして前記動画ファイル蓄積手段に蓄積するダウンロード実行手段、
として機能させるための番組検索用メタデータ抽出格納プログラム。 Connect as a UPnP control point in a TV broadcast the recording apparatus for storing a plurality of programs distributed by the broadcast or communication to each channel, the download pieces of the program to the moving image file storage means from the TV broadcast the recording device In order to extract program search metadata, which is data used to search for a desired program, from a part of the program and store it in a database stored in the database storage means together with program information which is information related to the program To the computer,
Program information acquisition means for acquiring the program information from the TV broadcast recording apparatus at regular time intervals and storing it in the database;
Wherein for each program specified by the program information, the predetermined time of the video file that is part of the program, the TV broadcast downloading sul video downloading means to the moving image file storage means from the recording device,
Loading while sequentially switching said predetermined time of a moving image file from the moving image file storage means, said at least one preset characteristic of the video and audio from the video file out extracted by said program searching for the metadata database Feature extraction means for storing;
Function as
The video download means,
Program information detection means for detecting whether or not the program information acquired by the program information acquisition means is stored in the database;
Counter means for measuring a predetermined time and notifying the passage of the predetermined time;
When the program information is detected by the program information detecting means, a part of the program is downloaded from the TV broadcast recording apparatus by switching the channel based on the download address of the program specified by the program information, and the counter Download execution means for canceling the download and storing a part of the downloaded program as the video file in the video file storage means when notified of the passage of a predetermined time from the means;
Program search for metadata extraction storing program for functioning as a.
JP2008033908A 2008-02-15 2008-02-15 Metadata retrieval storage device for program search and metadata extraction storage program for program retrieval Active JP5243813B2 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2008033908A JP5243813B2 (en) 2008-02-15 2008-02-15 Metadata retrieval storage device for program search and metadata extraction storage program for program retrieval

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2008033908A JP5243813B2 (en) 2008-02-15 2008-02-15 Metadata retrieval storage device for program search and metadata extraction storage program for program retrieval

Publications (2)

Publication Number Publication Date
JP2009194664A JP2009194664A (en) 2009-08-27
JP5243813B2 true JP5243813B2 (en) 2013-07-24

Family

ID=41076275

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2008033908A Active JP5243813B2 (en) 2008-02-15 2008-02-15 Metadata retrieval storage device for program search and metadata extraction storage program for program retrieval

Country Status (1)

Country Link
JP (1) JP5243813B2 (en)

Families Citing this family (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2013115235A1 (en) * 2012-02-03 2013-08-08 シャープ株式会社 Output system, control method of output system, control program, and recording medium

Family Cites Families (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2000011485A (en) * 1998-06-16 2000-01-14 Tatsuhiko Kusakawa Method and device for receiving broadcast program
JP2001245226A (en) * 2000-03-01 2001-09-07 Canon Inc Device, system and method for recording television broadcast and storage medium
JP2002135673A (en) * 2000-10-24 2002-05-10 Hitachi Ltd Information processor
JP2005328422A (en) * 2004-05-17 2005-11-24 Casio Comput Co Ltd Terminal device and terminal processing program
JP4473813B2 (en) * 2005-12-09 2010-06-02 日本電信電話株式会社 Metadata automatic generation device, metadata automatic generation method, metadata automatic generation program, and recording medium recording the program

Also Published As

Publication number Publication date
JP2009194664A (en) 2009-08-27

Similar Documents

Publication Publication Date Title
US11272248B2 (en) Methods for identifying video segments and displaying contextually targeted content on a connected television
CA2924065C (en) Content based video content segmentation
US8332414B2 (en) Method and system for prefetching internet content for video recorders
JP5651231B2 (en) Media fingerprint for determining and searching content
US9906834B2 (en) Methods for identifying video segments and displaying contextually targeted content on a connected television
TWI457770B (en) Keyword extraction method and device, search method and device, and storage medium readable by a computer
JP5571556B2 (en) In-video book marking
US8453179B2 (en) Linking real time media context to related applications and services
KR101246917B1 (en) Method and system for sharing the information between users of the media reproducing systems
US20220007085A1 (en) Automatically generating supercuts
CN100417214C (en) Content recording/reproducing apparatus, content recording/reproducing method, and computer program
JP2006155384A (en) Video comment input/display method and device, program, and storage medium with program stored
US20070070218A1 (en) Storage system for retaining identification data to allow retrieval of media content
CN106851326B (en) Playing method and device
JP2009239729A (en) Device, method and program for informing content scene appearance
CN108924606B (en) Streaming media processing method and device, storage medium and electronic device
JP2003274309A (en) Receiving device
US20090328100A1 (en) Program information display apparatus and program information display method
US20170094370A1 (en) Digital video recorder and a method for dynamic management of advertising content on a digital video recorder
US8745650B1 (en) Content segment selection based on time-shifted content viewing
WO2011135664A1 (en) Information processing device, information processing method, and program
JP5243813B2 (en) Metadata retrieval storage device for program search and metadata extraction storage program for program retrieval
KR101108584B1 (en) System and its method for providing advertisement based on substance of multimedia contents
US11477541B2 (en) Automatically generating supercuts
US20110083151A1 (en) Method for recording a moving picture and broadcasting receiver enabling the method

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20100707

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20120724

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20120725

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20120911

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20130312

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20130405

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20160412

Year of fee payment: 3

R150 Certificate of patent or registration of utility model

Free format text: JAPANESE INTERMEDIATE CODE: R150

Ref document number: 5243813

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250