JP5189481B2

JP5189481B2 - Video-related information presentation device, video-related information presentation system, and control program for video-related information presentation device

Info

Publication number: JP5189481B2
Application number: JP2008332314A
Authority: JP
Inventors: 知彦高橋; 勝菅野
Original assignee: KDDI Corp
Current assignee: KDDI Corp
Priority date: 2008-12-26
Filing date: 2008-12-26
Publication date: 2013-04-24
Anticipated expiration: 2028-12-26
Also published as: JP2010154415A

Description

本発明は、ユーザが視聴した、または視聴中である映像コンテンツに関連する情報を、可搬型端末に提供する技術に関する。 The present invention relates to a technique for providing a portable terminal with information related to video content viewed or being viewed by a user.

映像コンテンツの代表的な例としては、ケーブル・ＩＰＴＶ等も含めたテレビがある。視聴者は、チューナーを内蔵したテレビや、セットトップボックス等の映像受信装置を用いることで、また、可搬型の情報端末としては、インターネット接続機能を備えた携帯電話が広く普及している。 Representative examples of video content include televisions including cable and IPTV. Viewers use TV receivers with built-in tuners, video receivers such as set-top boxes, and mobile phones with an Internet connection function are widely used as portable information terminals.

昨今、携帯電話機とテレビ録画機とを連携させたより高度なサービスとして、携帯電話機からテレビ番組を予約録画するサービスが一般的になりつつある。これは、携帯電話機を入力デバイスとして用い、携帯電話機から録画機（ＤＶＲ）を操作する仕組みによって実現される。 Nowadays, as a more advanced service in which a mobile phone and a TV recorder are linked, a service for pre-recording a TV program from a mobile phone is becoming popular. This is realized by a mechanism in which a cellular phone is used as an input device and a recorder (DVR) is operated from the cellular phone.

一方、テレビ録画機から携帯電話機への方向の連携としては、録画したコンテンツを携帯電話機に転送して視聴する、あるいは、パレンタルロックの解除を携帯電話機にメールで通知するといった一方向的な機能のみが実現されていた。
NTTドコモホームU http://www.nttdocomo.co.jp/service/func_tool/homeu/ On the other hand, as a link in the direction from the TV recorder to the mobile phone, the one-way function of transferring the recorded content to the mobile phone for viewing or notifying the mobile phone of the release of the parental lock by e-mail. Only was realized.
NTT Docomo Home U http://www.nttdocomo.co.jp/service/func_tool/homeu/

ユーザがテレビを視聴するとき、ユーザの視聴スタイルは大きく２通りに分けられる。すなわち、（１）視聴する番組を前もって決め、集中して視聴する場合、（２）視聴すべきコンテンツを決めず、なんとなくテレビ録画機をつけて視聴する場合、である。 When a user views a television, the user's viewing style is roughly divided into two ways. That is, (1) a program to be viewed is determined in advance and viewed in a concentrated manner, and (2) a content to be viewed is not determined, and a television recorder is installed for somehow.

他方、近年、番組中にホームページのＵＲＬを表示したり、Ｗｅｂサーチエンジンで検索する際のキーワードを表示したりするといった、テレビ受像機をトリガとした情報検索を促す広告が増えつつある。しかし、従来の技術では、テレビ受像機から携帯電話機に情報を提供する仕組みが提供されていないため、ユーザは手動でＵＲＬを入力しなければならなかった。またその際、上記のような“ながら視聴”においては、ユーザは事前に録画や情報記録の準備をしていないため、興味のある情報に遭遇したとしても、キーワードを忘れてしまい、関連する検索を行なうことができないといった状況に至ることが多かった。 On the other hand, in recent years, advertisements that promote information retrieval triggered by a television receiver, such as displaying the URL of a home page in a program or displaying a keyword for searching with a Web search engine, are increasing. However, since the conventional technology does not provide a mechanism for providing information from the television receiver to the mobile phone, the user has to manually input the URL. At that time, in “viewing while” as described above, the user does not prepare for recording or information recording in advance, so even if he encounters information of interest, he forgets the keyword and makes a related search. In many cases, it was not possible to carry out.

また、テレビ受像機を用いて情報検索サービスを提供しようという試みもいくつかあるが、いずれも、テレビ受像機の画面を用いて、テレビ受像機上で検索を行なうことを想定したものである。複数のユーザでテレビ番組を視聴しているときに、必ずしもユーザ全員が検索を望んでいるわけではないので、検索を望むユーザと検索を望まないユーザのそれぞれにとって、利便性が高いとはいえない状況である。このため、第２の、パーソナルなディスプレイとして、携帯電話機を利用可能とする仕組みが望まれる。 There are also some attempts to provide an information search service using a television receiver, and all of them are assumed to perform a search on the television receiver using the screen of the television receiver. When watching TV programs with multiple users, not all users want to search, so it's not very convenient for users who want to search and those who don't want to search. Is the situation. For this reason, a mechanism that enables the use of a mobile phone as a second personal display is desired.

本発明は、このような事情に鑑みてなされたものであり、ユーザが視聴した、または視聴中であるテレビ番組に関連する情報を、携帯電話機に提供することができる映像関連情報提示装置、映像関連情報提示システムおよび映像関連情報提示装置の制御プログラムを実現することを目的とする。 The present invention has been made in view of such circumstances, and a video-related information presentation device, a video, and the like that can provide information related to a TV program that a user has watched or is watching to a mobile phone. It is an object to realize a control program for a related information presentation system and a video related information presentation device.

（１）上記の目的を達成するために、本発明は、以下のような手段を講じた。すなわち、本発明に係る映像関連情報提示装置は、ユーザが視聴した、または視聴中である映像コンテンツに関連する情報を、可搬型端末に提供する映像関連情報提示装置であって、映像受信装置から、静止画像および前記静止画像から抽出されたキャプション内の文字列情報、ＵＲＬ情報、画像情報、または前記静止画像上にオーバレイされた地図情報の少なくとも一つを含む重要情報を一定の間隔で取得する番組内情報管理部と、前記取得した静止画像および重要情報を格納する番組内情報データベースと、可搬型端末から前記重要情報の取得要求があったときに、前記可搬型端末の認証を行なう認証部と、前記認証に成功したときに、前記番組内情報データベースから取得要求の対象となった重要情報を特定する特定情報を読み出して、表示画面を生成する画面生成部と、前記生成した画面を前記可搬型端末へ送信する重要情報送信部と、を備えることを特徴としている。 (1) In order to achieve the above object, the present invention takes the following measures. That is, the video related information presentation device according to the present invention is a video related information presentation device that provides information related to video content viewed or being viewed by a user to a portable terminal, from the video receiving device. Important information including at least one of a still image and character string information in a caption extracted from the still image, URL information, image information, or map information overlaid on the still image is acquired at regular intervals. An in-program information management unit, an in-program information database for storing the acquired still image and important information, and an authentication unit for authenticating the portable terminal when there is a request for acquisition of the important information from the portable terminal And, when the authentication is successful, reads out the specific information for identifying the important information subject to the acquisition request from the in-program information database. It is a screen generation unit that generates a display screen, and key information transmitting unit that transmits the screen to the generated into the portable terminal, comprising: a.

この構成により、例えば、ユーザが視聴中の番組に関連した情報を、テレビ受像機から携帯電話機に連動させることができるので、ユーザは簡便な操作でテレビ受像機と連動した情報を取得することが可能となり、利便性が向上する。さらに、ユーザが過去に視聴した番組の情報を、その視聴履歴に応じて表示することで、テレビ視聴の備忘録的な機能を実現することができる。また、映像関連情報として、携帯電話機に蓄積されたユーザ個々の属性情報（年齢・嗜好）を利用するので、同一のテレビ受像機を用いた場合でも、個々にパーソナライズされたサービスを提供することが可能となる。さらに、本発明によれば、ユーザが視聴したコンテンツの履歴と、その中に含まれる重要な情報のみを自動的に保存し、かつ、それを携帯電話機で閲覧することが可能になる。既存のＤＶＲでは、番組を丸ごと保存することはできても、そこから重要な情報のみ抽出し、携帯電話機に最適な形で提示することはできないため、本発明によれば、まったく新しいサービスを提供することが可能となる。 With this configuration, for example, information related to the program being viewed by the user can be linked from the television receiver to the mobile phone, so the user can acquire information linked to the television receiver with a simple operation. It becomes possible and the convenience is improved. Furthermore, by displaying information on programs that the user has viewed in the past according to the viewing history, it is possible to realize a memorandum function for watching TV. In addition, since the user's individual attribute information (age / preference) stored in the mobile phone is used as the video-related information, it is possible to provide an individualized service even when the same television receiver is used. It becomes possible. Furthermore, according to the present invention, it is possible to automatically save only the history of the content viewed by the user and the important information contained therein, and view it on the mobile phone. In the existing DVR, even though the entire program can be saved, only important information can be extracted from it and cannot be presented in an optimal form for a mobile phone. Therefore, according to the present invention, a completely new service is provided. It becomes possible to do.

（２）また、本発明の映像関連情報提示装置は、ユーザが視聴した、または視聴中である映像コンテンツに関連する情報を、可搬型端末に提供する映像関連情報提示装置であって、映像受信装置から、ユーザの操作を示す操作情報を取得し、ユーザが視聴中の映像を解析するユーザ操作解析部と、前記解析結果を格納するユーザ視聴情報データベースと、ユーザが視聴中の映像コンテンツから、静止画像および前記静止画像から抽出されたキャプション内の文字列情報、ＵＲＬ情報、画像情報、または前記静止画像上にオーバレイされた地図情報の少なくとも一つを含む重要情報を一定の間隔で取得する映像解析部と、前記取得した静止画像および重要情報を格納する番組内情報データベースと、可搬型端末から前記重要情報の取得要求があったときに、前記可搬型端末の認証を行なう認証部と、前記認証に成功したときに、前記番組内情報データベースから取得要求の対象となった重要情報を特定する特定情報を読み出して、読み出した特定情報を表示する画面を生成する画面生成部と、前記生成した画面を前記可搬型端末へ送信する重要情報送信部と、を備えることを特徴としている。 (2) Also, the video related information presentation device of the present invention is a video related information presentation device that provides information related to video content viewed or being viewed by a user to a portable terminal. From the device, the operation information indicating the user's operation is acquired, the user operation analysis unit that analyzes the video that the user is viewing, the user viewing information database that stores the analysis result, and the video content that the user is viewing, Video that acquires important information including at least one of a still image and character string information in a caption extracted from the still image, URL information, image information, or map information overlaid on the still image at regular intervals An analysis unit, an in-program information database storing the acquired still image and important information, and a request for acquiring the important information from a portable terminal. An authentication unit that authenticates the portable terminal, and when the authentication is successful, reads out the specific information that identifies the important information that is the target of the acquisition request from the in-program information database A screen generation unit that generates a screen for displaying specific information, and an important information transmission unit that transmits the generated screen to the portable terminal are provided.

この構成により、例えば、ユーザが視聴中の番組に関連した情報を、テレビ受像機から携帯電話機に連動させることができるので、ユーザは簡便な操作でテレビ受像機と連動した情報を取得することが可能となり、利便性が向上する。さらに、ユーザが過去に視聴した番組の情報を、その視聴履歴に応じて表示することで、テレビ視聴の備忘録的な機能を実現することができる。また、映像関連情報として、携帯電話機に蓄積されたユーザ個々の属性情報（年齢・嗜好）を利用するので、同一のテレビ受像機を用いた場合でも、個々にパーソナライズされたサービスを提供することが可能となる。さらに、本発明によれば、ユーザが視聴したコンテンツの履歴と、その中に含まれる重要な情報のみを自動的に保存し、かつ、それを携帯電話機で閲覧することが可能になる。既存のＤＶＲでは、番組を丸ごと保存することはできても、そこから重要な情報のみ抽出し、携帯電話機に最適な形で提示することはできないため、本発明によれば、まったく新しいサービスを提供することが可能となる。また、セットトップボックスからは実際の解析結果を送るのではなく、セットトップボックスで取得されたユーザの視聴情報、操作情報のみを送信し、映像関連情報提示装置の情報選択・取得部で、受信・解析された番組内情報データベースを紐付けることで、画像処理を行なうことができない低スペックのセットトップボックスであっても、本サービスの提供が可能となる。 With this configuration, for example, information related to the program being viewed by the user can be linked from the television receiver to the mobile phone, so the user can acquire information linked to the television receiver with a simple operation. It becomes possible and the convenience is improved. Furthermore, by displaying information on programs that the user has viewed in the past according to the viewing history, it is possible to realize a memorandum function for watching TV. In addition, since the user's individual attribute information (age / preference) stored in the mobile phone is used as the video-related information, it is possible to provide an individualized service even when the same television receiver is used. It becomes possible. Furthermore, according to the present invention, it is possible to automatically save only the history of the content viewed by the user and the important information contained therein, and view it on the mobile phone. In the existing DVR, even though the entire program can be saved, only important information can be extracted from it and cannot be presented in an optimal form for a mobile phone. Therefore, according to the present invention, a completely new service is provided. It becomes possible to do. Also, instead of sending the actual analysis results from the set top box, only the viewing information and operation information of the user acquired by the set top box are transmitted and received by the information selection / acquisition unit of the video related information presentation device -By linking the analyzed in-program information database, this service can be provided even for low-spec set-top boxes that cannot perform image processing.

（３）また、本発明の映像関連情報提示装置は、ユーザが視聴した、または視聴中である映像コンテンツに関連する情報を、可搬型端末に提供する映像関連情報提示装置であって、映像受信装置から、静止画像および前記静止画像から抽出されたキャプション内の文字列情報、ＵＲＬ情報、画像情報、または前記静止画像上にオーバレイされた地図情報の少なくとも一つを含む重要情報を一定の間隔で取得する番組内情報管理部と、映像受信装置から、ユーザの操作を示す操作情報を取得し、ユーザが視聴中の映像を解析するユーザ操作解析部と、前記解析結果を格納するユーザ視聴情報データベースと、ユーザが視聴中の映像コンテンツから、静止画像および前記静止画像から抽出されたキャプション内の文字列情報、ＵＲＬ情報、画像情報、または前記静止画像上にオーバレイされた地図情報の少なくとも一つを含む重要情報を一定の間隔で取得する映像解析部と、前記番組内情報管理部が取得した前記静止画像および前記重要情報または前記映像解析部が取得した前記静止画像および前記重要情報を格納する番組内情報データベースと、可搬型端末から前記重要情報の取得要求があったときに、前記可搬型端末の認証を行なう認証部と、前記認証に成功したときに、前記番組内情報データベースから取得要求の対象となった重要情報を特定する特定情報を読み出して、読み出した特定情報を表示する画面を生成する画面生成部と、前記生成した画面を前記可搬型端末へ送信する重要情報送信部と、を備え、前記映像受信装置において、ユーザがリアルタイムに映像コンテンツを視聴しているときは、前記ユーザ操作解析部は、そのユーザの操作を示す操作情報を取得する一方、前記映像受信装置において、ユーザが録画された映像コンテンツを視聴しているときは、前記番組内情報管理部は、前記映像受信装置から、静止画像および前記静止画像から抽出されたキャプション内の文字列情報、ＵＲＬ情報、画像情報、または前記静止画像上にオーバレイされた地図情報の少なくとも一つを含む重要情報を一定の間隔で取得することを特徴としている。 (3) The video related information presentation device of the present invention is a video related information presentation device that provides information related to video content viewed or viewed by a user to a portable terminal. Important information including at least one of a still image and character string information in a caption extracted from the still image, URL information, image information, or map information overlaid on the still image from the device at regular intervals. An in-program information management unit to be acquired, a user operation analysis unit for acquiring operation information indicating a user operation from the video receiving device, and analyzing a video being viewed by the user, and a user viewing information database for storing the analysis result And from the video content being viewed by the user, the still image and the character string information in the caption extracted from the still image, URL information, image information Or a video analysis unit that acquires important information including at least one of the map information overlaid on the still image at regular intervals, and the still image and the important information acquired by the in-program information management unit, or the An in-program information database for storing the still image and the important information acquired by the video analysis unit; an authentication unit for authenticating the portable terminal when a request for acquisition of the important information is received from the portable terminal; When the authentication is successful, the screen generation unit that reads the specific information that identifies the important information that is the target of the acquisition request from the in-program information database, and generates a screen that displays the read specific information, and the generation An important information transmission unit that transmits the screen to the portable terminal, and in the video reception device, the user can perform video content in real time. When viewing, the user operation analysis unit obtains operation information indicating the user's operation, and when the user is viewing the recorded video content in the video receiving device, the program The internal information management unit includes at least one of a still image and character string information in the caption extracted from the still image, URL information, image information, or map information overlaid on the still image from the video receiving device. It is characterized in that important information including "" is acquired at regular intervals.

この構成により、例えば、ユーザが視聴中の番組に関連した情報を、テレビ受像機から携帯電話機に連動させることができるので、ユーザは簡便な操作でテレビ受像機と連動した情報を取得することが可能となり、利便性が向上する。さらに、ユーザが過去に視聴した番組の情報を、その視聴履歴に応じて表示することで、テレビ視聴の備忘録的な機能を実現することができる。また、映像関連情報として、携帯電話機に蓄積されたユーザ個々の属性情報（年齢・嗜好）を利用するので、同一のテレビ受像機を用いた場合でも、個々にパーソナライズされたサービスを提供することが可能となる。さらに、本発明によれば、ユーザが視聴したコンテンツの履歴と、その中に含まれる重要な情報のみを自動的に保存し、かつ、それを携帯電話機で閲覧することが可能になる。既存のＤＶＲでは、番組を丸ごと保存することはできても、そこから重要な情報のみ抽出し、携帯電話機に最適な形で提示することはできないため、本発明によれば、まったく新しいサービスを提供することが可能となる。また、映像受信装置（ＳＴＢ）内部での画像解析だけでなく、ユーザの処理負荷を軽減することが可能となる。 With this configuration, for example, information related to the program being viewed by the user can be linked from the television receiver to the mobile phone, so the user can acquire information linked to the television receiver with a simple operation. It becomes possible and the convenience is improved. Furthermore, by displaying information on programs that the user has viewed in the past according to the viewing history, it is possible to realize a memorandum function for watching TV. In addition, since the user's individual attribute information (age / preference) stored in the mobile phone is used as the video-related information, it is possible to provide an individualized service even when the same television receiver is used. It becomes possible. Furthermore, according to the present invention, it is possible to automatically save only the history of the content viewed by the user and the important information contained therein, and view it on the mobile phone. In the existing DVR, even though the entire program can be saved, only important information can be extracted from it and cannot be presented in an optimal form for a mobile phone. Therefore, according to the present invention, a completely new service is provided. It becomes possible to do. In addition to image analysis inside the video receiving device (STB), it is possible to reduce the processing load on the user.

（４）また、本発明の映像関連情報提示装置において、前記重要情報送信部は、前記画面を受信した可搬型端末でいずれかの特定情報が選択されたときに、その特定情報に対応する重要情報を前記番組内情報データベースから読み出して、前記可搬型端末に送信することを特徴としている。 (4) Further, in the video related information presentation device of the present invention, the important information transmitting unit is configured to handle important information corresponding to the specific information when any specific information is selected by the portable terminal that has received the screen. Information is read from the in-program information database and transmitted to the portable terminal.

この構成により、重要情報を抽出し、可搬型端末に最適な形で提示することができる。 With this configuration, important information can be extracted and presented in an optimal form for a portable terminal.

（５）また、本発明の映像関連情報提示装置において、前記番組内情報管理部は、前記可搬型端末から前記重要情報の取得要求があったときは、前記映像受信装置に対して、前記番組内情報データベースに格納されている直近の静止画像および重要情報が最新であるかどうかについて問合せを行ない、前記番組内情報データベースに格納されている直近の静止画像および重要情報が最新でない場合は、前記映像受信装置から最新の静止画像および重要情報を取得し、前記番組内情報データベースに格納されている静止画像および重要情報を最新の静止画像および重要情報に更新することを特徴としている。 (5) Further, in the video related information presentation device of the present invention, the in-program information management unit, with respect to the video receiving device, receives the important information acquisition request from the portable terminal. An inquiry is made as to whether the latest still image and important information stored in the internal information database are the latest, and if the latest still image and important information stored in the in-program information database are not the latest, The latest still image and important information are acquired from the video receiver, and the still image and important information stored in the program information database are updated to the latest still image and important information.

この構成により、常に最新の重要情報を抽出し、携帯電話機に最適な形で提示することができる。 With this configuration, it is possible to always extract the latest important information and present it in a form optimal for a mobile phone.

（６）また、本発明の映像関連情報提示システムは、ユーザが視聴した、または視聴中である映像コンテンツに関連する情報を、可搬型端末に提供する映像関連情報提示システムであって、請求項１または請求項３記載の映像関連情報提示装置と、ユーザが視聴中である映像コンテンツから、静止画像、および前記静止画像に含まれるキャプション内の文字列情報、ＵＲＬ情報、画像情報、または前記静止画像上にオーバレイされた地図情報の少なくとも一つを含む重要情報を抽出し、前記映像関連情報提示装置に出力する映像受信装置と、前記映像関連情報提示装置に対して、前記重要情報の取得要求を行なう可搬型端末と、から構成されることを特徴としている。 (6) Further, the video related information presentation system of the present invention is a video related information presentation system that provides information related to video content viewed or viewed by a user to a portable terminal. 4. The video related information presentation apparatus according to claim 1 and the video content being viewed by a user, a still image, and character string information in a caption included in the still image, URL information, image information, or the still image An important information including at least one of the map information overlaid on the image is extracted and output to the video related information presenting device, and the important information acquisition request to the video related information presenting device And a portable terminal.

（７）また、本発明の映像関連情報提示システムは、ユーザが視聴した、または視聴中である映像コンテンツに関連する情報を、可搬型端末に提供する映像関連情報提示システムであって、請求項２または請求項３記載の映像関連情報提示装置と、ユーザの操作を示す操作情報を前記映像関連情報提示装置に出力する映像受信装置と、前記映像関連情報提示装置に対して、前記重要情報の取得要求を行なう可搬型端末と、から構成されることを特徴としている。 (7) In addition, the video related information presentation system of the present invention is a video related information presentation system that provides information related to video content viewed or viewed by a user to a portable terminal. The video related information presentation device according to claim 2, a video reception device that outputs operation information indicating a user's operation to the video related information presentation device, and It is characterized by comprising a portable terminal that makes an acquisition request.

（８）また、本発明の映像関連情報提示装置の制御プログラムは、ユーザが視聴した、または視聴中である映像コンテンツに関連する情報を、可搬型端末に提供する映像関連情報提示装置の制御プログラムであって、映像受信装置から、静止画像および前記静止画像から抽出されたキャプション内の文字列情報、ＵＲＬ情報、画像情報、または前記静止画像上にオーバレイされた地図情報の少なくとも一つを含む重要情報を一定の間隔で取得する処理と、前記取得した静止画像および重要情報を番組内情報データベースに格納する処理と、可搬型端末から前記重要情報の取得要求があったときに、前記可搬型端末の認証を行なう処理と、前記認証に成功したときに、前記番組内情報データベースから取得要求の対象となった重要情報を特定する特定情報を読み出す処理と、前記読み出した特定情報を一覧表示する画面を生成する処理と、前記生成した画面を前記可搬型端末へ送信する処理と、の一連の処理を、コンピュータに読み取りおよび実行可能にコマンド化されたことを特徴としている。 (8) Further, the control program for the video related information presentation device of the present invention provides the control program for the video related information presentation device that provides the portable terminal with information related to the video content that the user has viewed or is viewing. The image receiving device includes at least one of a still image and character string information in caption extracted from the still image, URL information, image information, or map information overlaid on the still image. A process for acquiring information at regular intervals, a process for storing the acquired still image and important information in an in-program information database, and the portable terminal when there is a request for acquisition of the important information from a portable terminal And the important information that is the subject of the acquisition request from the in-program information database when the authentication is successful. A computer can read and execute a series of processes of reading specific information, generating a screen for displaying a list of the read specific information, and transmitting the generated screen to the portable terminal. It is characterized by being commanded.

（９）また、本発明の映像関連情報提示装置の制御プログラムは、ユーザが視聴した、または視聴中である映像コンテンツに関連する情報を、可搬型端末に提供する映像関連情報提示装置の制御プログラムであって、映像受信装置から、ユーザの操作を示す操作情報を取得して、ユーザが視聴中の映像コンテンツを解析する処理と、前記解析結果をユーザ視聴情報データベースに格納する処理と、前記映像受信装置を介してユーザが視聴中の映像コンテンツから、静止画像および前記静止画像から抽出されたキャプション内の文字列情報、ＵＲＬ情報、画像情報、または前記静止画像上にオーバレイされた地図情報の少なくとも一つを含む重要情報を一定の間隔で取得する処理と、前記取得した静止画像および重要情報を番組内情報データベースに格納する処理と、可搬型端末から前記重要情報の取得要求があったときに、前記可搬型端末の認証を行なう処理と、前記認証に成功したときに、前記番組内情報データベースから取得要求の対象となった重要情報を特定する特定情報を読み出す処理と、前記読み出した特定情報を一覧表示する画面を生成する処理と、前記生成した画面を前記可搬型端末へ送信する処理と、の一連の処理を、コンピュータに読み取りおよび実行可能にコマンド化されたことを特徴としている。 (9) Further, the control program for the video related information presentation device of the present invention provides the control program for the video related information presentation device that provides the portable terminal with information related to the video content that the user has viewed or is viewing. A process of acquiring operation information indicating a user's operation from the video receiving device, analyzing video content being viewed by the user, storing the analysis result in a user viewing information database, and the video At least the still image and the character string information in the caption extracted from the still image, the URL information, the image information, or the map information overlaid on the still image from the video content being viewed by the user via the receiving device Processing for acquiring important information including one at regular intervals, and acquiring the acquired still image and important information in a program information database. Storage processing, processing for authenticating the portable terminal when there is a request for acquisition of the important information from a portable terminal, and acquisition request from the in-program information database when the authentication is successful A series of processing for reading out the specific information for identifying the important information that is the target of processing, processing for generating a screen for displaying the list of the read specific information, and processing for transmitting the generated screen to the portable terminal The above processing is commanded to be read and executed by a computer.

（１０）また、本発明の映像関連情報提示装置の制御プログラムは、ユーザが視聴した、または視聴中である映像コンテンツに関連する情報を、可搬型端末に提供する映像関連情報提示装置の制御プログラムであって、映像受信装置において、ユーザが録画された映像コンテンツを視聴しているときは、前記映像受信装置から、静止画像および前記静止画像から抽出されたキャプション内の文字列情報、ＵＲＬ情報、画像情報、または前記静止画像上にオーバレイされた地図情報の少なくとも一つを含む重要情報を一定の間隔で取得する処理と、前記映像受信装置において、ユーザがリアルタイムに映像コンテンツを視聴しているときは、そのユーザの操作を示す操作情報を取得して、ユーザが視聴中の映像を解析する処理と、前記解析結果をユーザ視聴情報データベースに格納する処理と、ユーザがリアルタイムに視聴中の映像コンテンツから、静止画像および前記静止画像から抽出されたキャプション内の文字列情報、ＵＲＬ情報、画像情報、または前記静止画像上にオーバレイされた地図情報の少なくとも一つを含む重要情報を一定の間隔で取得する処理と、前記取得した静止画像および重要情報を番組内情報データベースに格納する処理と、可搬型端末から前記重要情報の取得要求があったときに、前記可搬型端末の認証を行なう処理と、前記認証に成功したときに、前記番組内情報データベースから取得要求の対象となった重要情報を特定する特定情報を読み出して、読み出した特定情報を表示する画面を生成する処理と、前記生成した画面を前記可搬型端末へ送信する処理と、の一連の処理を、コンピュータに読み取りおよび実行可能にコマンド化されたことを特徴としている。 (10) Further, the control program for the video related information presentation apparatus according to the present invention provides the control program for the video related information presentation apparatus that provides the portable terminal with information related to the video content that the user has viewed or is viewing. In the video reception device, when the user is viewing the recorded video content, the character string information, URL information in the caption extracted from the still image and the still image from the video reception device, URL information, Processing for acquiring important information including at least one of image information or map information overlaid on the still image at regular intervals, and when the user is viewing video content in real time in the video receiving device Is a process of acquiring operation information indicating the operation of the user and analyzing the video being viewed by the user, and the analysis result The processing stored in the user viewing information database and the character string information in the caption extracted from the still image and the caption information extracted from the still image from the video content being viewed by the user in real time, the URL information, the image information, or the still image Processing for acquiring important information including at least one of the overlaid map information at regular intervals, processing for storing the acquired still image and important information in an in-program information database, and information on the important information from a portable terminal Processing for authenticating the portable terminal when there is an acquisition request, and when the authentication is successful, reading out specific information identifying important information that is the target of the acquisition request from the in-program information database , Processing for generating a screen for displaying the read specific information, and transmitting the generated screen to the portable terminal And sense, a series of processes, is characterized in that it is read and executable on command in a computer.

本発明によれば、例えば、ユーザが視聴中の番組に関連した情報を、テレビ受像機から携帯電話機に連動させることができるので、ユーザは簡便な操作でテレビ受像機と連動した情報を取得することが可能となり、利便性が向上する。さらに、ユーザが過去に視聴した番組の情報を、その視聴履歴に応じて表示することで、テレビ視聴の備忘録的な機能を実現することができる。また、映像関連情報として、携帯電話機に蓄積されたユーザ個々の属性情報（年齢・嗜好）を利用するので、同一のテレビ受像機を用いた場合でも、個々にパーソナライズされたサービスを提供することが可能となる。 According to the present invention, for example, information related to a program being viewed by the user can be linked from the television receiver to the mobile phone, so that the user can obtain information linked to the television receiver with a simple operation. It is possible to improve convenience. Furthermore, by displaying information on programs that the user has viewed in the past according to the viewing history, it is possible to realize a memorandum function for watching TV. In addition, since the user's individual attribute information (age / preference) stored in the mobile phone is used as the video-related information, it is possible to provide an individualized service even when the same television receiver is used. It becomes possible.

さらに、本発明によれば、ユーザが視聴したコンテンツの履歴と、その中に含まれる重要な情報のみを自動的に保存し、かつ、それを携帯電話機で閲覧することが可能になる。既存のＤＶＲでは、番組を丸ごと保存することはできても、そこから重要な情報のみ抽出し、携帯電話機に最適な形で提示することはできないため、本発明によれば、まったく新しいサービスを提供することが可能となる。 Furthermore, according to the present invention, it is possible to automatically save only the history of the content viewed by the user and the important information contained therein, and view it on the mobile phone. In the existing DVR, even though the entire program can be saved, only important information can be extracted from it and cannot be presented in an optimal form for a mobile phone. Therefore, according to the present invention, a completely new service is provided. It becomes possible to do.

また、本発明によれば、セットトップボックスからは実際の解析結果を送るのではなく、セットトップボックスで取得されたユーザの視聴情報、操作情報のみを送信し、映像関連情報提示装置の情報選択・取得部で、受信・解析された番組内情報データベースを紐付けることで、画像処理を行なうことができない低スペックのセットトップボックスであっても、本サービスの提供が可能となる。 Further, according to the present invention, instead of sending the actual analysis result from the set top box, only the viewing information and operation information of the user acquired by the set top box are transmitted, and the information selection of the video related information presentation device is selected. -By associating the received and analyzed in-program information database with the acquisition unit, this service can be provided even for low-spec set top boxes that cannot perform image processing.

以下、本発明の実施形態について、図面を参照しながら具体的に説明する。なお、以下の説明では、例として、映像受信装置をセットトップボックス（以下、「ＳＴＢ」と呼称する。）とし、可搬型端末を携帯電話機として説明する。ただし、これはあくまでも例示であって、本発明は、これらに限定されるわけではない。 Embodiments of the present invention will be specifically described below with reference to the drawings. In the following description, as an example, the video receiver is described as a set-top box (hereinafter referred to as “STB”), and the portable terminal is described as a mobile phone. However, this is merely an example, and the present invention is not limited to these.

（第１の実施形態）
第１の実施形態では、ＳＴＢは、十分に高速なインターネット接続機能と高い処理能力を持ち、かつ、テレビ番組を受信しているものとする。テレビ番組の取得は、テレビ電波（ＲＦ：Radio Frequency）の受信の他、ＩＰＴＶ（Internet Protocol TeleVision）を介した受信でも良い。 (First embodiment)
In the first embodiment, it is assumed that the STB has a sufficiently high-speed Internet connection function and a high processing capacity, and receives a TV program. The acquisition of the TV program may be received via IPTV (Internet Protocol TeleVision) in addition to receiving TV radio waves (RF).

図１は、第１の実施形態に係る映像関連情報提示システムの概略構成を示す図である。第１の実施形態に係る映像関連情報提示システムは、映像受信装置１０（以下、「ＳＴＢ１０と呼称する。）と、映像関連情報提示装置２０と、可搬型端末３０（以下、「携帯電話機３０」と呼称する。）とから構成される。ＳＴＢ１０と、映像関連情報提示装置２０とは、ＨＧＷ（Home Gate Way）４０によって接続されている。また、映像関連情報提示装置２０と携帯電話機３０とは無線によりデータの送受信が可能となっている。 FIG. 1 is a diagram showing a schematic configuration of a video related information presentation system according to the first embodiment. The video-related information presentation system according to the first embodiment includes a video reception device 10 (hereinafter referred to as “STB 10”), a video-related information presentation device 20, and a portable terminal 30 (hereinafter “mobile phone 30”). It is comprised.). The STB 10 and the video related information presentation device 20 are connected by an HGW (Home Gate Way) 40. The video related information presentation device 20 and the mobile phone 30 can transmit and receive data wirelessly.

ＳＴＢ１０は、映像受信部１１で映像を受信し、映像表示部１２で受信した映像を表示する。ユーザが、テレビ番組の視聴中に、ＳＴＢ１０の映像解析部１３は、現在受信中のテレビ映像を、バックグラウンドで解析し、一定の間隔で静止画を取得する。その中から、重要と思われる情報（重要情報）を取得し、その情報の種類とともに、重要情報保存部１４に保存する。重要情報としては、例えば以下が該当する。
・キャプションに含まれる文字列情報
・ＵＲＬ情報
・画像情報
・画面上にオーバレイされた地図情報 The STB 10 receives the video at the video reception unit 11 and displays the video received at the video display unit 12. While the user is watching a television program, the video analysis unit 13 of the STB 10 analyzes the currently received television video in the background and acquires still images at regular intervals. Information that is considered important (important information) is acquired from the information, and stored in the important information storage unit 14 together with the type of the information. The important information includes, for example, the following.
-Character string information included in captions-URL information-Image information-Map information overlaid on the screen

通信部１５は、重要情報が検出された各フレームに対して、取得した重要情報と静止画像を、一定間隔で映像関連情報提示装置２０に送信する。ＥＰＧ情報取得部１６は、ＥＰＧ（Electronic Program Guide）を取得する。 The communication unit 15 transmits the acquired important information and the still image to the video related information presentation device 20 at regular intervals for each frame in which the important information is detected. The EPG information acquisition unit 16 acquires an EPG (Electronic Program Guide).

映像関連情報提示装置２０は、通信部２１を介して、番組内情報管理部２２において、ＳＴＢ１０から送信された情報を取得し、番組内情報ＤＢ（データベース）２３に格納する。図２は、番組内情報ＤＢ２３に格納される情報のフォーマットを示す図である。図２に示すように、番組内情報ＤＢ２３には、情報を保存した時間（Ｔｉｍｅ）、保存したチャンネルの番号（Ｃｈａｎｎｅｌ）、ＥＰＧから取得した番組のタイトル（Ｐｒｏｇｒａｍ＿Ｔｉｔｌｅ）、情報を抽出したシーンのサムネイル画像（Ｔｈｕｍｂｎａｉｌ）、取得した情報の個数（Ｉｎｆｏ＿ｎｕｍ）、取得した情報の画面中の位置、すなわち、情報を示す４角形の頂点座標（Ｉｎｆｏ＿ｎｕｍ毎にＡｒｅａ）、文字列、ＵＲＬ、画像、地図（Ｉｎｆｏ＿ｎｕｍ毎にＩｎｆｏ＿ｔｙｐｅ）、取得した情報の中身（Ｉｎｆｏ＿ｎｕｍ毎にＩｎｆｏ）が格納されている。 The video related information presentation device 20 acquires the information transmitted from the STB 10 in the in-program information management unit 22 via the communication unit 21 and stores it in the in-program information DB (database) 23. FIG. 2 is a diagram showing a format of information stored in the in-program information DB 23. As shown in FIG. 2, the in-program information DB 23 stores the information storage time (Time), the number of the stored channel (Channel), the title of the program (Program_Title) acquired from the EPG, and the thumbnail of the scene from which the information is extracted. Image (Thumbnail), the number of acquired information (Info_num), the position of the acquired information in the screen, that is, the vertex coordinates of the rectangle indicating the information (Area for each Info_num), character string, URL, image, map (Info_num) Each Info_type) and the contents of the acquired information (Info for each Info_num) are stored.

ユーザは、自分が見た映像コンテンツの情報で欲しいものがあるとき、携帯電話機３０の入力部３１、画面表示部３２を利用して操作を行ない、通信部３３を介して映像関連情報提示装置２０にアクセスする。映像関連情報提示装置２０は、通信部２５を介して、ユーザプロファイル管理部２６において、ユーザを識別する。この識別には、携帯電話機３０の個別ＩＤ（サブスクライバＩＤ）を用いてもよいし、専用のＩＤ、パスワードを用いても良い。映像関連情報提示装置２０では、認識したユーザＩＤから、事前にユーザプロファイルＤＢ２７に格納されているユーザプロファイルＩＤを取得する。ユーザプロファイルＩＤには、例えば、ユーザの年齢や、許容されているレーティング（視聴制限）情報が含まれる。また、ユーザプロファイルＤＢ２７には、携帯電話機のユーザプロファイルＩＤと、ＳＴＢ１０のＳｕｂｓｃｒｉｂｅｒ＿ＩＤの対が、事前にユーザによって登録されており、映像関連情報提示装置２０は、この紐付けに基づいて関連するＳＴＢ１０を特定する。なお、通信部２５は、重要情報送信部を構成し、ユーザプロファイル管理部２６およびユーザプロファイルＤＢ２７は、認証部を構成する。 When the user wants the information of the video content that he / she saw, the user performs an operation using the input unit 31 and the screen display unit 32 of the mobile phone 30, and the video related information presentation device 20 via the communication unit 33. To access. The video related information presentation device 20 identifies the user in the user profile management unit 26 via the communication unit 25. For this identification, an individual ID (subscriber ID) of the mobile phone 30 may be used, or a dedicated ID and password may be used. In the video related information presentation device 20, the user profile ID stored in the user profile DB 27 in advance is acquired from the recognized user ID. The user profile ID includes, for example, the user's age and allowed rating (viewing restriction) information. Also, in the user profile DB 27, a pair of the user profile ID of the mobile phone and the Subscriber_ID of the STB 10 is registered in advance by the user, and the video related information presentation apparatus 20 displays the related STB 10 based on this association. Identify. The communication unit 25 constitutes an important information transmission unit, and the user profile management unit 26 and the user profile DB 27 constitute an authentication unit.

ユーザが携帯電話機３０を操作して映像関連情報提示装置２０にアクセスした際、映像関連情報提示装置２０は、通信部２１を介して、ＳＴＢ１０に問い合わせを投げ、取得した重要情報と静止画の対を、最新のものに更新する。このように、前述の、携帯電話機３０からのリクエストによらない、通常の一定間隔の更新と、携帯電話機からのアクセス時の更新を組み合わせることで、ユーザの待ち時間を軽減することができる。 When the user operates the mobile phone 30 to access the video related information presentation device 20, the video related information presentation device 20 sends an inquiry to the STB 10 via the communication unit 21, and obtains a pair of the acquired important information and the still image. To the latest version. In this way, the user's waiting time can be reduced by combining the normal update at regular intervals, which is not based on the request from the mobile phone 30, and the update at the time of access from the mobile phone.

情報更新後、画面生成部２４は、ユーザが見たコンテンツの履歴と、その重要情報を紐付けて、一覧の画面を生成し、通信部２５は、ユーザにその一覧の画面を提示する。一覧の提供は、例えばＨＴＭＬによって生成された画面を、ＨＴＴＰによって提供することが想定される。この画面で一覧表示される項目は、キャプチャされた画面のサムネイル、番組のタイトル、チャンネル、視聴した時間である。この一覧表示は、例えば、チャンネル毎に表示、時系列で表示等が選択可能である。また、表示時に、ユーザプロファイル情報から視聴制限を行ない、子供の携帯電話には、レーティングありコンテンツの情報は表示されないようにする。 After the information update, the screen generation unit 24 generates a list screen by associating the history of the content viewed by the user with the important information, and the communication unit 25 presents the list screen to the user. For providing the list, for example, it is assumed that a screen generated by HTML is provided by HTTP. Items displayed in a list on this screen are a thumbnail of the captured screen, a program title, a channel, and a viewing time. As the list display, for example, display for each channel, display in time series, or the like can be selected. At the time of display, viewing restriction is performed based on the user profile information so that the content information with a rating is not displayed on the child's mobile phone.

ユーザは、携帯電話機３０の画面表示部３２を見て、重要情報が検出されたシーンの番組のサムネイル一覧の中から、所望の情報が含まれるサムネイルを選択する。映像関連情報提示装置２０は、ユーザによって選択されたサムネイルが含む重要情報を、その画面中の位置とともにユーザに提示し、選択可能とする。これにより、ユーザは視覚的に情報を選択することが可能となる。ユーザが情報を取得すると、映像関連情報提示装置２０は、取得された情報の種類に応じて、ユーザへの情報提供処理を行なう。取得された情報の種類と、情報提供処理の関係は以下の通りである。
（１）キャプションに含まれる文字列情報・・・文字列をキーにＷｅｂを検索した結果を提示する。
（２）ＵＲＬ情報・・・ユーザにＵＲＬを提示した後、取得したＵＲＬにリンクする。
（３）画像情報
（４）画面上にオーバレイされた地図情報・・・ユーザに切り出した画像領域を提示し、著作権上保護機能（携帯電話機の外部への送信不可設定）を行なった上で、携帯電話機に保存させる。 The user looks at the screen display unit 32 of the mobile phone 30 and selects a thumbnail including desired information from a list of thumbnails of programs in a scene in which important information is detected. The video related information presentation device 20 presents important information included in the thumbnail selected by the user together with the position in the screen to the user so that the user can select the important information. As a result, the user can visually select information. When the user acquires information, the video related information presentation device 20 performs information providing processing to the user according to the type of information acquired. The relationship between the type of acquired information and the information providing process is as follows.
(1) Character string information included in caption: Presents a result of searching the Web using a character string as a key.
(2) URL information: After presenting the URL to the user, link to the acquired URL.
(3) Image information (4) Map information overlaid on the screen ... After presenting the image area cut out to the user and performing a copyright protection function (setting to disable transmission to the outside of the mobile phone) , Save it on your mobile phone.

次に、以上のように構成された第１の実施形態に係る映像関連情報提示システムの主要な動作について説明する。図３は、ユーザのテレビ番組視聴中に行なう重要情報保存処理の概要を示すフローチャートである。まず、ＳＴＢ１０において、テレビ番組の視聴、または録画が開始されると（ステップＳ１）、ＳＴＢ１０の映像解析部１３が静止画像とその静止画像から重要情報を抽出する処理を行なう（ステップＳ２）。そして、テレビ画面、すなわち、静止画像中から、重要情報が発見されたかどうかを判断し（ステップＳ３）、重要情報が発見されない場合は、ステップＳ２へ遷移する。一方、ステップＳ３において、重要情報が発見された場合は、図５Ａに示すように、テレビ画面から重要情報を抽出し、抽出した重要情報をＳＴＢ１０の重要情報保存部１４に格納する（ステップＳ４）。 Next, main operations of the video related information presentation system according to the first embodiment configured as described above will be described. FIG. 3 is a flowchart showing an outline of important information storage processing performed while a user is watching a television program. First, when viewing or recording of a television program is started in the STB 10 (step S1), the video analysis unit 13 of the STB 10 performs a process of extracting important information from the still image (step S2). Then, it is determined whether or not important information has been found from the television screen, that is, the still image (step S3). If the important information is not found, the process proceeds to step S2. On the other hand, when important information is found in step S3, as shown in FIG. 5A, the important information is extracted from the television screen, and the extracted important information is stored in the important information storage unit 14 of the STB 10 (step S4). .

図４は、携帯電話機３０から重要情報の取得要求があった場合に、携帯電話機３０に対して重要情報の一覧表示を提供する処理の概要を示すフローチャートである。まず、携帯電話機３０から通信部２５へアクセスが行なわれ（ステップＳ１０）、次に、携帯電話機３０のユーザＩＤが取得される（ステップＳ１１）。通信部２５へのアクセスは、例えばＨＴＴＰ等のプロトコルを用いることが可能である。次に、ユーザＩＤを元に、ユーザプロファイルＤＢ２７からＳＴＢ１０のＳｕｂｓｃｒｉｂｅｒ＿ＩＤ、ユーザプロファイル情報を取得する（ステップＳ１２）。次に、ＳＴＢ１０のＳｕｂｓｃｒｉｂｅｒ＿ＩＤを元に、ＳＴＢ１０の重要情報保存部１４に格納されている最新の重要情報を要求する（ステップＳ１３）。次に、ＳＴＢ１０のＳｕｂｓｃｒｉｂｅｒ＿ＩＤを元に、番組内情報ＤＢ２３に蓄積されている情報を取得し（ステップＳ１４）、画面生成部２４で、重要情報一覧を作成し、通信部２５経由で携帯電話機３０に提示する（ステップＳ１５）。この重要情報一覧は、図５Ｂに示すように、重要情報を特定する情報から構成されている。ユーザが、重要情報一覧のいずれかを選択すると、図５Ｃに示すように、その重要情報が携帯電話機３０の画面表示部３２に表示される。 FIG. 4 is a flowchart showing an outline of processing for providing a list display of important information to the mobile phone 30 when there is a request for acquisition of important information from the mobile phone 30. First, the mobile phone 30 is accessed to the communication unit 25 (step S10), and then the user ID of the mobile phone 30 is acquired (step S11). For example, a protocol such as HTTP can be used for access to the communication unit 25. Next, based on the user ID, the Subscriber_ID and user profile information of the STB 10 are acquired from the user profile DB 27 (step S12). Next, the latest important information stored in the important information storage unit 14 of the STB 10 is requested based on the Subscriber_ID of the STB 10 (step S13). Next, based on the Subscriber_ID of the STB 10, information stored in the in-program information DB 23 is acquired (Step S 14), an important information list is created by the screen generator 24, and the information is stored in the mobile phone 30 via the communication unit 25. Present (step S15). As shown in FIG. 5B, this important information list includes information for specifying important information. When the user selects one of the important information lists, the important information is displayed on the screen display unit 32 of the mobile phone 30 as shown in FIG. 5C.

以上のような第１の実施形態の特徴的な動作は、コンピュータにプログラムを実行させることによって行なわれる。すなわち、第１の実施形態に係る映像関連情報提示装置の制御プログラムは、ユーザが視聴した、または視聴中であるテレビ番組に関連する情報を、携帯電話機に提供する映像関連情報提示装置の制御プログラムであって、セットトップボックスから、静止画像および前記静止画像から抽出されたキャプション内の文字列情報、ＵＲＬ情報、画像情報、または前記静止画像上にオーバレイされた地図情報の少なくとも一つを含む重要情報を一定の間隔で取得する処理と、前記取得した静止画像および重要情報を番組内情報データベースに格納する処理と、携帯電話機から前記重要情報の取得要求があったときに、前記携帯電話機の認証を行なう処理と、前記認証に成功したときに、前記番組内情報データベースから取得要求の対象となった重要情報を特定する特定情報を読み出す処理と、前記読み出した特定情報を一覧表示する画面を生成する処理と、前記生成した画面を前記携帯電話機へ送信する処理と、の一連の処理を、コンピュータに読み取りおよび実行可能にコマンド化されたことを特徴としている。 The characteristic operation of the first embodiment as described above is performed by causing a computer to execute a program. That is, the control program for the video related information presentation device according to the first embodiment provides the control program for the video related information presentation device that provides the mobile phone with information related to the TV program that the user has watched or is watching. And including at least one of a still image and character string information in a caption extracted from the still image, URL information, image information, or map information overlaid on the still image from the set-top box. A process of acquiring information at regular intervals, a process of storing the acquired still image and important information in an in-program information database, and authentication of the mobile phone when there is a request for acquisition of the important information from the mobile phone And when the authentication is successful, the content that is the subject of the acquisition request from the in-program information database. A computer reads a series of processes of reading specific information for specifying information, generating a screen for displaying a list of the read specific information, and transmitting the generated screen to the mobile phone. It is characterized by being commanded to be executable.

以上説明したように、第１の実施形態によれば、ユーザが視聴中の番組に関連した情報を、テレビ受像機から携帯電話機に連動させることができるので、ユーザは簡便な操作でテレビ受像機と連動した情報を取得することが可能となり、利便性が向上する。さらに、ユーザが過去に視聴した番組の情報を、その視聴履歴に応じて表示することで、テレビ視聴の備忘録的な機能を実現することができる。また、映像関連情報として、携帯電話機に蓄積されたユーザ個々の属性情報（年齢・嗜好）を利用するので、同一のテレビ受像機を用いた場合でも、個々にパーソナライズされたサービスを提供することが可能となる。さらに、ユーザが視聴したコンテンツの履歴と、その中に含まれる重要な情報のみを自動的に保存し、かつ、それを携帯電話機で閲覧することが可能になる。既存のＤＶＲでは、番組を丸ごと保存することはできても、そこから重要な情報のみ抽出し、携帯電話機に最適な形で提示することはできないため、本発明によれば、まったく新しいサービスを提供することが可能となる。 As described above, according to the first embodiment, information related to a program that the user is viewing can be linked from the television receiver to the mobile phone, so that the user can operate the television receiver with a simple operation. It becomes possible to acquire information linked with the system, and convenience is improved. Furthermore, by displaying information on programs that the user has viewed in the past according to the viewing history, it is possible to realize a memorandum function for watching TV. In addition, since the user's individual attribute information (age / preference) stored in the mobile phone is used as the video-related information, it is possible to provide an individualized service even when the same television receiver is used. It becomes possible. Furthermore, it is possible to automatically save only the history of content viewed by the user and the important information contained therein, and view it on a mobile phone. In the existing DVR, even though the entire program can be saved, only important information can be extracted from it and cannot be presented in an optimal form for a mobile phone. Therefore, according to the present invention, a completely new service is provided. It becomes possible to do.

（第２の実施形態）
第２の実施形態では、ＳＴＢは、十分なインターネット接続機能や、処理能力が無い、簡易構成のＳＴＢを利用する場合を想定する。図６は、第２の実施形態に係る映像関連情報提示システムの概略構成を示す図である。ＳＴＢ１０の操作情報通知部１７は、電源投入時、チャンネル変更時等の操作毎に、自らの視聴・操作情報を映像関連情報提示装置２０に送信する。図７は、操作情報のフォーマットを示す図である。図７に示すように、操作情報は、操作が行なわれた時刻（Ｔｉｍｅ）、ＴＶ電源ＯＮ、チャンネル変更、追いかけ再生開始、追いかけ再生終了、ＴＶ電源ＯＦＦ（Ｃｏｍｍａｎｄ）、視聴開始の場合のチャンネル番号（Ｃｈａｎｎｅｌ）、ＳＴＢを一意に紐付ける識別子（ＳＴＢ＿ＩＤ）、ＳＴＢを所有している契約者ＩＤ（Ｓｕｂｓｃｒｉｂｅｒ＿ＩＤ）、から構成されている。 (Second Embodiment)
In the second embodiment, it is assumed that the STB uses a STB with a simple configuration that does not have a sufficient Internet connection function or processing capability. FIG. 6 is a diagram showing a schematic configuration of a video related information presentation system according to the second embodiment. The operation information notification unit 17 of the STB 10 transmits its own viewing / operation information to the video related information presentation device 20 for each operation such as when the power is turned on or when the channel is changed. FIG. 7 is a diagram showing a format of operation information. As shown in FIG. 7, the operation information includes the time when the operation is performed (Time), the TV power ON, the channel change, the chasing playback start, the chasing playback end, the TV power OFF (Command), and the channel number at the start of viewing. (Channel), an identifier (STB_ID) that uniquely associates the STB, and a contractor ID (Subscriber_ID) that owns the STB.

映像関連情報提示装置２０では、受信した操作情報から、ユーザ操作解析部６１によって、ユーザが現在視聴しているチャンネルを解析し、ユーザ視聴情報ＤＢ６２に保存する。図８は、ユーザ視聴情報ＤＢフォーマットを示す図である。図８に示すように、ユーザ視聴情報は、ＳＴＢを一意に紐付ける識別子（ＳＴＢ＿ＩＤ）、ＳＴＢを所有している契約者ＩＤ（Ｓｕｂｓｃｒｉｂｅｒ＿ＩＤ）、視聴情報を保存している期間（ｐｅｒｉｏｄ）、視聴開始時間（視聴履歴の個数分、Ｓｔａｒｔ＿ｔｉｍｅ）、視聴終了時間（視聴履歴の個数分、Ｅｎｄ＿ｔｉｍｅ）、チャンネル（視聴履歴の個数分、Ｃｈａｎｎｅｌ）、から構成されている。 In the video related information presentation device 20, the user operation analysis unit 61 analyzes the channel currently being viewed by the user from the received operation information and stores it in the user viewing information DB 62. FIG. 8 is a diagram showing a user viewing information DB format. As shown in FIG. 8, user viewing information includes an identifier (STB_ID) that uniquely associates an STB, a contractor ID that owns the STB (Subscriber_ID), a period during which viewing information is stored (period), and viewing start. Time (number of viewing histories, Start_time), viewing end time (number of viewing histories, End_time), and channel (number of viewing histories, Channel) are configured.

映像関連情報提示装置２０では、映像受信部６４として、複数のチューナーを備え、ユーザが視聴可能な全番組を受信し、テレビ視聴中に、映像解析部６３は、現在受信中のテレビ映像を、バックグラウンドで解析し、一定の間隔で静止画を取得する。その中から、重要と思われる情報（重要情報）を取得し、その情報の種類とともに番組内情報ＤＢ２３に保存する。この処理は、第１の実施形態ＳＴＢ１０が行なうものと同様である。 In the video related information presentation device 20, the video receiving unit 64 includes a plurality of tuners, receives all programs that can be viewed by the user, and during video viewing, the video analysis unit 63 displays the currently received television video. Analyzes in the background and acquires still images at regular intervals. Information that is considered important (important information) is acquired from the information, and stored in the in-program information DB 23 together with the type of the information. This process is the same as that performed by the first embodiment STB10.

ユーザは、自分が見た映像コンテンツの情報で欲しいものがあるとき、携帯電話機３０を用いて映像関連情報提示装置２０にアクセスする、映像関連情報提示装置２０では、ユーザプロファイル管理部２６によって、ユーザを識別する。この識別には、携帯電話機の個別ＩＤ（サブスクライバＩＤ）を用いてもよいし、専用のＩＤ、パスワードを用いても良い。映像関連情報提示装置２０では、認識したユーザＩＤから、事前にユーザプロファイルＤＢ２７に格納されているユーザプロファイルＩＤを取得する。ユーザプロファイルＩＤには、ユーザの年齢・許容されているレーティング（視聴制限）情報が含まれる。また、ユーザプロファイルＤＢ２７には、携帯電話機のユーザプロファイルＩＤと、ＳＴＢ１０のＳｕｂｓｃｒｉｂｅｒ＿ＩＤの対が、事前にユーザによって登録されており、映像関連情報提示装置２０は、この紐付けに基づいて関連するＳＴＢ１０を特定する。 The user accesses the video related information presentation device 20 by using the mobile phone 30 when there is desired information on the video content that he / she saw. In the video related information presentation device 20, the user profile management unit 26 uses the user profile management unit 26. Identify For this identification, an individual ID (subscriber ID) of the mobile phone may be used, or a dedicated ID and password may be used. In the video related information presentation device 20, the user profile ID stored in the user profile DB 27 in advance is acquired from the recognized user ID. The user profile ID includes the user's age and allowed rating (viewing restriction) information. Also, in the user profile DB 27, a pair of the user profile ID of the mobile phone and the Subscriber_ID of the STB 10 is registered in advance by the user, and the video related information presentation apparatus 20 displays the related STB 10 based on this association. Identify.

ユーザが携帯電話機３０を用いて映像関連情報提示装置２０にアクセスした際、映像関連情報提示装置２０は、Ｓｕｂｓｃｒｉｂｅｒ＿ＩＤに基づき、ユーザ視聴情報ＤＢ６２にアクセスし、該当の契約者世帯が視聴した番組、現在視聴中の番組の情報を取得する。さらに、映像関連情報提示装置２０の情報選択・取得部６０は、取得した番組情報をキーに、番組内情報ＤＢ２３を検索し、番組内の重要情報の一覧を取得する。映像関連情報提示装置２０は、取得された情報の種類に応じて、ユーザへの情報提供処理を行なう。以下の処理は第１の実施形態と同様である。 When the user accesses the video related information presentation device 20 using the mobile phone 30, the video related information presentation device 20 accesses the user viewing information DB 62 based on the Subscriber_ID, and the program viewed by the corresponding subscriber household, Get information about the program you are watching. Further, the information selection / acquisition unit 60 of the video related information presentation device 20 searches the in-program information DB 23 using the acquired program information as a key, and acquires a list of important information in the program. The video related information presentation device 20 performs information provision processing to the user according to the type of information acquired. The following processing is the same as in the first embodiment.

図９は、ユーザのテレビ番組視聴中に行なうユーザ視聴情報保存処理の概要を示すフローチャートである。まず、ＳＴＢ１０において、テレビ番組の視聴または録画が開始されると（ステップＳ２１）、ＳＴＢ１０の操作情報通知部は、ユーザによる映像関連操作情報を、映像関連情報提示装置２０に送信する（ステップＳ２２）。次に、映像関連情報提示装置２０で、ユーザ視聴情報ＤＢ６２にユーザ視聴情報を格納する（ステップＳ２３）。なお、ステップＳ２２とステップＳ２３の処理は、チャンネル変更等の操作毎に実行されるものである。 FIG. 9 is a flowchart showing an overview of user viewing information storage processing performed while the user is viewing a television program. First, when viewing or recording of a TV program is started in the STB 10 (step S21), the operation information notification unit of the STB 10 transmits video related operation information by the user to the video related information presentation device 20 (step S22). . Next, the user viewing information is stored in the user viewing information DB 62 by the video related information presentation device 20 (step S23). Note that the processing in steps S22 and S23 is executed for each operation such as channel change.

図１０は、映像関連情報提示装置における番組内情報格納処理の概要を示すフローチャートである。映像関連情報提示装置２０では、対象とする全チャンネルを受信し、重要情報を検出する（ステップＳ３１）。次に、検出された重要情報を、番組内情報ＤＢ２３に格納する（ステップＳ３２）。これらのステップＳ３１およびステップＳ３２の処理は、サービス提供中は、常に実施されるものである。 FIG. 10 is a flowchart showing an overview of the in-program information storage processing in the video related information presentation device. The video related information presentation device 20 receives all the target channels and detects important information (step S31). Next, the detected important information is stored in the in-program information DB 23 (step S32). The processes in step S31 and step S32 are always performed during service provision.

図１１は、携帯電話機３０から重要情報の取得要求があった場合に、携帯電話機３０に対して重要情報の一覧表示を提供する処理の概要を示すフローチャートである。まず、携帯電話機３０から通信部２５へアクセスが行なわれ（ステップＳ４１）、次に、携帯電話機３０のユーザＩＤが取得される（ステップＳ４２）。次に、ユーザＩＤを元に、ユーザプロファイルＤＢ２７からＳＴＢ１０のＳｕｂｓｃｒｉｂｅｒ＿ＩＤ、ユーザプロファイル情報を取得する（ステップＳ４３）。次に、ＳＴＢ１０のＳｕｂｓｃｒｉｂｅｒ＿ＩＤを元に、ユーザ視聴情報ＤＢ６２から、ユーザの視聴情報を取得する（ステップＳ４４）。次に、ユーザの視聴情報を元に、番組内情報ＤＢ２３から番組の重要情報の一覧を取得し（ステップＳ４５）、画面生成部２４で、重要情報一覧を作成し、通信部２５経由で携帯電話機３０に提示する（ステップＳ４６）。この重要情報一覧は、図５Ｂに示すように、重要情報を特定する情報から構成されている。ユーザが、重要情報一覧のいずれかを選択すると、図５Ｃに示すように、その重要情報が携帯電話機３０の画面表示部３２に表示される。 FIG. 11 is a flowchart showing an overview of processing for providing a list display of important information to the mobile phone 30 when there is a request for acquisition of important information from the mobile phone 30. First, the mobile phone 30 is accessed to the communication unit 25 (step S41), and then the user ID of the mobile phone 30 is acquired (step S42). Next, based on the user ID, the Subscriber_ID of the STB 10 and the user profile information are acquired from the user profile DB 27 (step S43). Next, user viewing information is acquired from the user viewing information DB 62 based on the Subscriber_ID of the STB 10 (step S44). Next, a list of important information of the program is acquired from the in-program information DB 23 based on the viewing information of the user (step S45), the important information list is created by the screen generation unit 24, and the mobile phone is connected via the communication unit 25. 30 (step S46). As shown in FIG. 5B, this important information list includes information for specifying important information. When the user selects one of the important information lists, the important information is displayed on the screen display unit 32 of the mobile phone 30 as shown in FIG. 5C.

以上のような第２の実施形態の特徴的な動作は、コンピュータにプログラムを実行させることによって行なわれる。すなわち、第２の実施形態に係る映像関連情報提示装置の制御プログラムは、ユーザが視聴した、または視聴中であるテレビ番組に関連する情報を、携帯電話機に提供する映像関連情報提示装置の制御プログラムであって、セットトップボックスから、ユーザの操作を示す操作情報を取得する処理と、ユーザが視聴中のテレビ番組を解析する処理と、前記解析結果をユーザ視聴情報データベースに格納する処理と、前記セットトップボックスを介してユーザが視聴中のテレビ番組から、静止画像および前記静止画像から抽出されたキャプション内の文字列情報、ＵＲＬ情報、画像情報、または前記静止画像上にオーバレイされた地図情報の少なくとも一つを含む重要情報を一定の間隔で取得する処理と、前記取得した静止画像および重要情報を番組内情報データベースに格納する処理と、携帯電話機から前記重要情報の取得要求があったときに、前記携帯電話機の認証を行なう処理と、前記認証に成功したときに、前記番組内情報データベースから取得要求の対象となった重要情報を特定する特定情報を読み出す処理と、前記読み出した特定情報を一覧表示する画面を生成する処理と、前記生成した画面を前記携帯電話機へ送信する処理と、の一連の処理を、コンピュータに読み取りおよび実行可能にコマンド化されたことを特徴としている。 The characteristic operation of the second embodiment as described above is performed by causing a computer to execute a program. That is, the control program for the video-related information presentation device according to the second embodiment provides the control program for the video-related information presentation device that provides the mobile phone with information related to the TV program that the user has watched or is watching. A process for obtaining operation information indicating a user operation from a set-top box, a process for analyzing a TV program being viewed by the user, a process for storing the analysis result in a user viewing information database, From a television program being viewed by a user via a set-top box, a still image and character string information in captions extracted from the still image, URL information, image information, or map information overlaid on the still image Processing for acquiring important information including at least one at regular intervals, and the acquired still image and important information Processing to store in the in-program information database, processing to authenticate the mobile phone when there is a request for acquisition of the important information from the mobile phone, and acquisition from the in-program information database when the authentication is successful A series of a process of reading specific information specifying important information that is a target of a request, a process of generating a screen that displays a list of the read specific information, and a process of transmitting the generated screen to the mobile phone The above processing is commanded to be read and executed by a computer.

以上説明したように、第２の実施形態によれば、ユーザが視聴中の番組に関連した情報を、テレビ受像機から携帯電話機に連動させることができるので、ユーザは簡便な操作でテレビ受像機と連動した情報を取得することが可能となり、利便性が向上する。さらに、ユーザが過去に視聴した番組の情報を、その視聴履歴に応じて表示することで、テレビ視聴の備忘録的な機能を実現することができる。また、映像関連情報として、携帯電話機に蓄積されたユーザ個々の属性情報（年齢・嗜好）を利用するので、同一のテレビ受像機を用いた場合でも、個々にパーソナライズされたサービスを提供することが可能となる。さらに、本発明によれば、ユーザが視聴したコンテンツの履歴と、その中に含まれる重要な情報のみを自動的に保存し、かつ、それを携帯電話機で閲覧することが可能になる。既存のＤＶＲでは、番組を丸ごと保存することはできても、そこから重要な情報のみ抽出し、携帯電話機に最適な形で提示することはできないため、本発明によれば、まったく新しいサービスを提供することが可能となる。また、セットトップボックスからは実際の解析結果を送るのではなく、セットトップボックスで取得されたユーザの視聴情報、操作情報のみを送信し、映像関連情報提示装置の情報選択・取得部で、受信・解析された番組内情報データベースを紐付けることで、画像処理を行なうことができない低スペックのセットトップボックスであっても、本サービスの提供が可能となる。 As described above, according to the second embodiment, since information related to a program that the user is viewing can be linked from the television receiver to the mobile phone, the user can perform the television receiver with a simple operation. It becomes possible to acquire information linked with the system, and convenience is improved. Furthermore, by displaying information on programs that the user has viewed in the past according to the viewing history, it is possible to realize a memorandum function for watching TV. In addition, since the user's individual attribute information (age / preference) stored in the mobile phone is used as the video-related information, it is possible to provide an individualized service even when the same television receiver is used. It becomes possible. Furthermore, according to the present invention, it is possible to automatically save only the history of the content viewed by the user and the important information contained therein, and view it on the mobile phone. In the existing DVR, even though the entire program can be saved, only important information can be extracted from it and cannot be presented in an optimal form for a mobile phone. Therefore, according to the present invention, a completely new service is provided. It becomes possible to do. Also, instead of sending the actual analysis results from the set top box, only the viewing information and operation information of the user acquired by the set top box are transmitted and received by the information selection / acquisition unit of the video related information presentation device -By linking the analyzed in-program information database, this service can be provided even for low-spec set-top boxes that cannot perform image processing.

（第３の実施形態）
さらに、第３の実施形態として、ＳＴＢ１０は十分なインターネット接続機能や、高い処理能力を持ち、さらに受信したコンテンツを録画する機能をも有する。そして、第３の実施形態では、処理負荷を最小化するために、ＳＴＢ１０内部での画像解析だけでなく、ユーザの処理負荷を軽減することを想定する。すなわち、映像関連情報提示装置２０は、図６に示したユーザ操作解析部６１、ユーザ視聴情報ＤＢ６２および図１に示した番組内情報管理部２２を備え、映像受信装置（ＳＴＢ）１０において、ユーザがリアルタイムにコンテンツを視聴しているときは、第２の実施形態と同様に、そのユーザの操作を示す操作情報を、ユーザ操作解析部６１によって取得し、ユーザ視聴情報ＤＢ６２に格納する。また、ユーザが録画されたコンテンツを視聴しているときは、第１の実施形態と同様に、番組内情報管理部２２によって、映像受信装置（ＳＴＢ）１０から、静止画像および前記静止画像から抽出されたキャプション内の文字列情報、ＵＲＬ情報、画像情報、または前記静止画像上にオーバレイされた地図情報の少なくとも一つを含む重要情報を一定の間隔で取得し、番組内情報ＤＢ２３に格納する。 (Third embodiment)
Furthermore, as a third embodiment, the STB 10 has a sufficient Internet connection function, a high processing capability, and a function of recording received content. In the third embodiment, in order to minimize the processing load, it is assumed that not only the image analysis inside the STB 10 but also the processing load on the user is reduced. That is, the video related information presentation device 20 includes the user operation analysis unit 61, the user viewing information DB 62 shown in FIG. 6, and the in-program information management unit 22 shown in FIG. When viewing content in real time, as in the second embodiment, operation information indicating the user's operation is acquired by the user operation analysis unit 61 and stored in the user viewing information DB 62. When the user is viewing the recorded content, the in-program information management unit 22 extracts the still image and the still image from the video receiver (STB) 10 as in the first embodiment. Important information including at least one of character string information, URL information, image information, or map information overlaid on the still image in the caption is acquired at regular intervals and stored in the in-program information DB 23.

ユーザからの情報取得要求があると、映像関連情報提示装置２０は、番組内情報ＤＢ２３に格納された重要情報のうち、（１）ユーザ視聴情報ＤＢ６２によって、ユーザがリアルタイムに視聴していたと判断されたコンテンツに含まれるもの、（２）ユーザが視聴した録画ずみコンテンツに含まれる重要情報、すなわち映像受信装置（ＳＴＢ）１０の映像解析部１３から、通信部１５を介して受信したものの双方を抽出し、ユーザに提示を行なう。 When there is an information acquisition request from the user, the video related information presentation device 20 determines that the user was watching in real time by (1) user viewing information DB 62 among the important information stored in the in-program information DB 23. (2) Important information included in recorded content viewed by the user, that is, what is received from the video analysis unit 13 of the video receiving device (STB) 10 via the communication unit 15 is extracted. And present it to the user.

第１の実施形態に係る映像関連情報提示システムの概略構成を示す図である。It is a figure which shows schematic structure of the image | video related information presentation system which concerns on 1st Embodiment. 番組内情報ＤＢ２３に格納される情報のフォーマットを示す図である。It is a figure which shows the format of the information stored in in-program information DB23. ユーザのテレビ番組視聴中に行なう重要情報保存処理の概要を示すフローチャートである。It is a flowchart which shows the outline | summary of the important information preservation | save process performed while a user's television program viewing. 携帯電話機３０から重要情報の取得要求があった場合に、携帯電話機３０に対して重要情報の一覧表示を提供する処理の概要を示すフローチャートである。4 is a flowchart showing an outline of processing for providing a list display of important information to the mobile phone 30 when there is a request for acquisition of important information from the mobile phone 30; テレビ画面から重要情報を抽出する様子を示す図である。It is a figure which shows a mode that important information is extracted from a television screen. 携帯電話機で重要情報一覧が表示された様子を示す図である。It is a figure which shows a mode that the important information list was displayed with the mobile phone. 携帯電話機に重要情報が表示された様子を示す図である。It is a figure which shows a mode that important information was displayed on the mobile telephone. 第２の実施形態に係る映像関連情報提示システムの概略構成を示す図である。It is a figure which shows schematic structure of the video relevant information presentation system which concerns on 2nd Embodiment. 操作情報のフォーマットを示す図である。It is a figure which shows the format of operation information. ユーザ視聴情報ＤＢフォーマットを示す図である。It is a figure which shows user viewing-and-listening information DB format. ユーザのテレビ番組視聴中に行なうユーザ視聴情報保存処理の概要を示すフローチャートである。It is a flowchart which shows the outline | summary of the user viewing-and-listening information preservation | save process performed while a user's television program viewing. 映像関連情報提示装置における番組内情報格納処理の概要を示すフローチャートである。It is a flowchart which shows the outline | summary of the information storage process in a program in a video related information presentation apparatus. 携帯電話機３０から重要情報の取得要求があった場合に、携帯電話機３０に対して重要情報の一覧表示を提供する処理の概要を示すフローチャートである。4 is a flowchart showing an outline of processing for providing a list display of important information to the mobile phone 30 when there is a request for acquisition of important information from the mobile phone 30;

Explanation of symbols

１０映像受信装置（ＳＴＢ）
１１映像受信部
１２映像表示部
１３映像解析部
１４重要情報保存部
１５通信部
１６ＥＰＧ情報取得部
１７操作情報通知部
２０映像関連情報提示装置
２１通信部
２２番組内情報管理部
２３番組内情報ＤＢ
２４画面生成部
２５通信部
２６ユーザプロファイル管理部
２７ユーザプロファイルＤＢ
３０可搬型端末（携帯電話機）
３１入力部
３２画面表示部
３３通信部
６０情報選択・取得部
６１ユーザ操作解析部
６２ユーザ視聴情報ＤＢ
６３映像解析部
６４映像受信部 10 Video receiver (STB)
DESCRIPTION OF SYMBOLS 11 Image | video receiving part 12 Image | video display part 13 Image | video analysis part 14 Important information preservation | save part 15 Communication part 16 EPG information acquisition part 17 Operation information notification part 20 Image | video related information presentation apparatus 21 Communication part 22 In-program information management part 23 In-program information DB
24 screen generation unit 25 communication unit 26 user profile management unit 27 user profile DB
30 Portable terminal (mobile phone)
31 Input unit 32 Screen display unit 33 Communication unit 60 Information selection / acquisition unit 61 User operation analysis unit 62 User viewing information DB
63 Video analysis unit 64 Video reception unit

Claims

A video-related information presentation device that provides information related to video content viewed or viewed by a user to a portable terminal,
A user operation analysis unit that acquires operation information indicating a user operation from the video reception device, analyzes the video content that the user is viewing, and acquires the viewing history of the user;
A user viewing information database for storing the analysis result and the user viewing history;
Important information including at least one of a still image and character string information in the caption, URL information, image information, or map information overlaid on the still image from the still image and video content being viewed by the user is fixed. An image analysis unit that acquires at intervals of
An in-program information database for storing the acquired still image and important information;
An authentication unit that authenticates the portable terminal when a request for acquisition of the important information is received from the portable terminal;
When the authentication is successful, the viewing history of the user of the portable terminal is acquired from the user viewing information database, and based on the acquired viewing history of the user, an acquisition request is made from the in-program information database. A screen generation unit that reads the specific information for identifying the important information and generates a screen for displaying the read specific information;
A video-related information presentation apparatus comprising: an important information transmission unit configured to transmit the generated screen to the portable terminal .

A video-related information presentation device that provides information related to video content viewed or viewed by a user to a portable terminal,
Important information including at least one of a still image and character string information in a caption extracted from the still image, URL information, image information, or map information overlaid on the still image from the video receiving device is fixed. An in-program information management unit acquired at intervals;
A user operation analysis unit that acquires operation information indicating a user operation from the video reception device, analyzes the video content that the user is viewing, and acquires the viewing history of the user;
A user viewing information database for storing the analysis result and the user viewing history;
Important information including at least one of a still image and character string information in the caption, URL information, image information, or map information overlaid on the still image from the still image and video content being viewed by the user is fixed. An image analysis unit that acquires at intervals of
An in-program information database storing the still image and the important information acquired by the in-program information management unit or the still image and the important information acquired by the video analysis unit;
An authentication unit that authenticates the portable terminal when a request for acquisition of the important information is received from the portable terminal;
When the authentication is successful, the viewing history of the user of the portable terminal is acquired from the user viewing information database, and based on the acquired viewing history of the user, an acquisition request is made from the in-program information database. A screen generation unit that reads the specific information for identifying the important information and generates a screen for displaying the read specific information;
An important information transmitting unit that transmits the generated screen to the portable terminal,
In the video reception device, when the user is viewing the video content in real time, the user operation analysis unit acquires operation information indicating the user's operation, while the video reception device records the user. When viewing the video content, the in-program information management unit receives from the video receiving device, the still image and the character string information in the caption from the still image, URL information, image information, or on the still image. An apparatus for presenting video-related information, characterized in that important information including at least one piece of map information overlaid on the screen is acquired at regular intervals .

The important information transmission unit reads important information corresponding to the specific information from the in-program information database when any specific information is selected by the portable terminal that has received the screen, and the portable terminal The video related information presentation device according to claim 1 , wherein the video related information presentation device transmits the video related information.

When there is a request for acquisition of the important information from the portable terminal, the in-program information management unit, with respect to the video reception device, the latest still image and important information stored in the in-program information database And if the latest still image and important information stored in the in-program information database is not the latest, obtain the latest still image and important information from the video receiving device, 3. The video related information presentation apparatus according to claim 2, wherein the still image and the important information stored in the in-program information database are updated to the latest still image and the important information .

A video-related information presentation system that provides information related to video content that a user has watched or is watching to a portable terminal,
The video related information presentation device according to claim 2,
From video content that the user is viewing, at least one of a still image and character string information in a caption included in the still image, URL information, image information, or map information overlaid on the still image A video receiving device that extracts important information and outputs it to the video related information presentation device;
A video-related information presentation system comprising: a portable terminal that makes an acquisition request for the important information to the video-related information presentation device.

A video-related information presentation system that provides information related to video content that a user has watched or is watching to a portable terminal,
The video related information presentation device according to claim 1 or 2,
A video receiving device that outputs operation information indicating a user operation to the video related information presentation device;
A video-related information presentation system comprising: a portable terminal that makes an acquisition request for the important information to the video-related information presentation device.

A control program for a video-related information presentation device that provides information related to video content that a user has watched or is watching to a portable terminal,
A process of acquiring operation information indicating a user's operation from the video receiving device, analyzing the video content being viewed by the user, and acquiring the user's viewing history;
Processing for storing the analysis result and the user viewing history in a user viewing information database;
From video content being viewed by the user via the video receiver, at least one of a still image and character string information in the caption from the still image, URL information, image information, or map information overlaid on the still image. Processing to acquire important information including one at regular intervals,
A process of storing the acquired still image and important information in an in-program information database;
Processing for authenticating the portable terminal when there is a request for acquisition of the important information from the portable terminal;
When the authentication is successful, the viewing history of the user of the portable terminal is acquired from the user viewing information database, and based on the acquired viewing history of the user, an acquisition request is made from the in-program information database. Processing for reading out specific information for identifying important information,
Processing for generating a screen for displaying a list of the read specific information;
A control program for a video-related information presenting apparatus, characterized by causing a computer to execute a series of processes including a process of transmitting the generated screen to the portable terminal.

A control program for a video-related information presentation device that provides information related to video content that a user has watched or is watching to a portable terminal,
In the video receiving device, when the user is viewing the recorded video content, the still image and the character string information in the caption extracted from the still image, URL information, image information, or Processing for obtaining important information including at least one of the map information overlaid on the still image at regular intervals;
In the video reception device, when the user is viewing the video content in real time, operation information indicating the user's operation is acquired, the video content being viewed by the user is analyzed, and the viewing history of the user is acquired. Processing to
Processing for storing the analysis result and the user viewing history in a user viewing information database;
Important information including at least one of a still image and character string information in a caption from the still image, URL information, image information, or map information overlaid on the still image from video content being viewed in real time by the user A process for acquiring the data at regular intervals;
A process of storing the acquired still image and important information in an in-program information database;
Processing for authenticating the portable terminal when there is a request for acquisition of the important information from the portable terminal;
When the authentication is successful, the viewing history of the user of the portable terminal is acquired from the user viewing information database, and based on the acquired viewing history of the user, an acquisition request is made from the in-program information database. Processing for generating specific information for identifying the important information and generating a screen for displaying the read specific information;
A control program for a video-related information presenting apparatus, characterized by causing a computer to execute a series of processes including a process of transmitting the generated screen to the portable terminal.