JP6379362B2 - 映像受信装置、パラメータ設定方法および付加情報表示システム - Google Patents
映像受信装置、パラメータ設定方法および付加情報表示システム Download PDFInfo
- Publication number
- JP6379362B2 JP6379362B2 JP2016509614A JP2016509614A JP6379362B2 JP 6379362 B2 JP6379362 B2 JP 6379362B2 JP 2016509614 A JP2016509614 A JP 2016509614A JP 2016509614 A JP2016509614 A JP 2016509614A JP 6379362 B2 JP6379362 B2 JP 6379362B2
- Authority
- JP
- Japan
- Prior art keywords
- video
- calibration
- communication network
- video recognition
- partial
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/80—Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
- H04N21/81—Monomedia components thereof
- H04N21/8126—Monomedia components thereof involving additional data, e.g. news, sports, stocks, weather forecasts
- H04N21/8133—Monomedia components thereof involving additional data, e.g. news, sports, stocks, weather forecasts specifically related to the content, e.g. biography of the actors in a movie, detailed information about an article seen in a video program
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
- H04N21/47—End-user applications
- H04N21/472—End-user interface for requesting content, additional data or services; End-user interface for interacting with content, e.g. for content reservation or setting reminders, for requesting event notification, for manipulating displayed content
- H04N21/4722—End-user interface for requesting content, additional data or services; End-user interface for interacting with content, e.g. for content reservation or setting reminders, for requesting event notification, for manipulating displayed content for requesting additional data associated with the content
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/50—Information retrieval; Database structures therefor; File system structures therefor of still image data
- G06F16/58—Retrieval characterised by using metadata, e.g. metadata not derived from the content or metadata generated manually
- G06F16/583—Retrieval characterised by using metadata, e.g. metadata not derived from the content or metadata generated manually using metadata automatically derived from the content
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/70—Information retrieval; Database structures therefor; File system structures therefor of video data
- G06F16/73—Querying
- G06F16/738—Presentation of query results
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/70—Information retrieval; Database structures therefor; File system structures therefor of video data
- G06F16/78—Retrieval characterised by using metadata, e.g. metadata not derived from the content or metadata generated manually
- G06F16/783—Retrieval characterised by using metadata, e.g. metadata not derived from the content or metadata generated manually using metadata automatically derived from the content
- G06F16/7847—Retrieval characterised by using metadata, e.g. metadata not derived from the content or metadata generated manually using metadata automatically derived from the content using low-level visual features of the video content
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/70—Information retrieval; Database structures therefor; File system structures therefor of video data
- G06F16/78—Retrieval characterised by using metadata, e.g. metadata not derived from the content or metadata generated manually
- G06F16/783—Retrieval characterised by using metadata, e.g. metadata not derived from the content or metadata generated manually using metadata automatically derived from the content
- G06F16/7847—Retrieval characterised by using metadata, e.g. metadata not derived from the content or metadata generated manually using metadata automatically derived from the content using low-level visual features of the video content
- G06F16/786—Retrieval characterised by using metadata, e.g. metadata not derived from the content or metadata generated manually using metadata automatically derived from the content using low-level visual features of the video content using motion, e.g. object motion or camera motion
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V20/00—Scenes; Scene-specific elements
- G06V20/40—Scenes; Scene-specific elements in video content
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V20/00—Scenes; Scene-specific elements
- G06V20/60—Type of objects
- G06V20/62—Text, e.g. of license plates, overlay texts or captions on TV images
- G06V20/63—Scene text, e.g. street names
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
- G06V40/10—Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
- G06V40/16—Human faces, e.g. facial parts, sketches or expressions
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04H—BROADCAST COMMUNICATION
- H04H60/00—Arrangements for broadcast applications with a direct linking to broadcast information or broadcast space-time; Broadcast-related systems
- H04H60/56—Arrangements characterised by components specially adapted for monitoring, identification or recognition covered by groups H04H60/29-H04H60/54
- H04H60/59—Arrangements characterised by components specially adapted for monitoring, identification or recognition covered by groups H04H60/29-H04H60/54 of video
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04H—BROADCAST COMMUNICATION
- H04H60/00—Arrangements for broadcast applications with a direct linking to broadcast information or broadcast space-time; Broadcast-related systems
- H04H60/61—Arrangements for services using the result of monitoring, identification or recognition covered by groups H04H60/29-H04H60/54
- H04H60/65—Arrangements for services using the result of monitoring, identification or recognition covered by groups H04H60/29-H04H60/54 for using the result on users' side
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
- H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
- H04N21/234—Processing of video elementary streams, e.g. splicing of video streams, manipulating MPEG-4 scene graphs
- H04N21/23418—Processing of video elementary streams, e.g. splicing of video streams, manipulating MPEG-4 scene graphs involving operations for analysing video streams, e.g. detecting features or characteristics
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
- H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
- H04N21/235—Processing of additional data, e.g. scrambling of additional data or processing content descriptors
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
- H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
- H04N21/44—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream, rendering scenes according to MPEG-4 scene graphs
- H04N21/44008—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream, rendering scenes according to MPEG-4 scene graphs involving operations for analysing video streams, e.g. detecting features or characteristics in the video stream
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
- H04N21/45—Management operations performed by the client for facilitating the reception of or the interaction with the content or administrating data related to the end-user or to the client device itself, e.g. learning user preferences for recommending movies, resolving scheduling conflicts
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
- H04N21/45—Management operations performed by the client for facilitating the reception of or the interaction with the content or administrating data related to the end-user or to the client device itself, e.g. learning user preferences for recommending movies, resolving scheduling conflicts
- H04N21/462—Content or additional data management, e.g. creating a master electronic program guide from data received from the Internet and a Head-end, controlling the complexity of a video stream by scaling the resolution or bit-rate based on the client capabilities
- H04N21/4622—Retrieving content or additional data from different sources, e.g. from a broadcast channel and the Internet
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
- H04N21/47—End-user applications
- H04N21/472—End-user interface for requesting content, additional data or services; End-user interface for interacting with content, e.g. for content reservation or setting reminders, for requesting event notification, for manipulating displayed content
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/60—Network structure or processes for video distribution between server and client or between remote clients; Control signalling between clients, server and network components; Transmission of management data between server and client, e.g. sending from server to client commands for recording incoming content stream; Communication details between server and client
- H04N21/61—Network physical structure; Signal processing
- H04N21/6106—Network physical structure; Signal processing specially adapted to the downstream path of the transmission network
- H04N21/6112—Network physical structure; Signal processing specially adapted to the downstream path of the transmission network involving terrestrial transmission, e.g. DVB-T
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/60—Network structure or processes for video distribution between server and client or between remote clients; Control signalling between clients, server and network components; Transmission of management data between server and client, e.g. sending from server to client commands for recording incoming content stream; Communication details between server and client
- H04N21/61—Network physical structure; Signal processing
- H04N21/6106—Network physical structure; Signal processing specially adapted to the downstream path of the transmission network
- H04N21/6125—Network physical structure; Signal processing specially adapted to the downstream path of the transmission network involving transmission via Internet
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/60—Network structure or processes for video distribution between server and client or between remote clients; Control signalling between clients, server and network components; Transmission of management data between server and client, e.g. sending from server to client commands for recording incoming content stream; Communication details between server and client
- H04N21/65—Transmission of management data between client and server
- H04N21/654—Transmission by server directed to the client
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/60—Network structure or processes for video distribution between server and client or between remote clients; Control signalling between clients, server and network components; Transmission of management data between server and client, e.g. sending from server to client commands for recording incoming content stream; Communication details between server and client
- H04N21/65—Transmission of management data between client and server
- H04N21/654—Transmission by server directed to the client
- H04N21/6547—Transmission by server directed to the client comprising parameters, e.g. for client setup
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/60—Network structure or processes for video distribution between server and client or between remote clients; Control signalling between clients, server and network components; Transmission of management data between server and client, e.g. sending from server to client commands for recording incoming content stream; Communication details between server and client
- H04N21/65—Transmission of management data between client and server
- H04N21/658—Transmission by the client directed to the server
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/60—Network structure or processes for video distribution between server and client or between remote clients; Control signalling between clients, server and network components; Transmission of management data between server and client, e.g. sending from server to client commands for recording incoming content stream; Communication details between server and client
- H04N21/65—Transmission of management data between client and server
- H04N21/658—Transmission by the client directed to the server
- H04N21/6581—Reference data, e.g. a movie identifier for ordering a movie or a product identifier in a home shopping application
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/80—Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
- H04N21/83—Generation or processing of protective or descriptive data associated with content; Content structuring
- H04N21/84—Generation or processing of descriptive data, e.g. content descriptors
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/60—Control of cameras or camera modules
- H04N23/61—Control of cameras or camera modules based on recognised objects
- H04N23/611—Control of cameras or camera modules based on recognised objects where the recognised objects include parts of the human body
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N5/00—Details of television systems
- H04N5/14—Picture signal circuitry for video frequency region
- H04N5/147—Scene change detection
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N7/00—Television systems
- H04N7/08—Systems for the simultaneous or sequential transmission of more than one television signal, e.g. additional information signals, the signals occupying wholly or partially the same frequency band, e.g. by time division
- H04N7/087—Systems for the simultaneous or sequential transmission of more than one television signal, e.g. additional information signals, the signals occupying wholly or partially the same frequency band, e.g. by time division with signal insertion during the vertical blanking interval only
- H04N7/088—Systems for the simultaneous or sequential transmission of more than one television signal, e.g. additional information signals, the signals occupying wholly or partially the same frequency band, e.g. by time division with signal insertion during the vertical blanking interval only the inserted signal being digital
- H04N7/0887—Systems for the simultaneous or sequential transmission of more than one television signal, e.g. additional information signals, the signals occupying wholly or partially the same frequency band, e.g. by time division with signal insertion during the vertical blanking interval only the inserted signal being digital for the transmission of programme or channel identifying signals
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N9/00—Details of colour television systems
- H04N9/79—Processing of colour television signals in connection with recording
- H04N9/80—Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback
- H04N9/82—Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback the individual colour picture signal components being recorded simultaneously only
- H04N9/8205—Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback the individual colour picture signal components being recorded simultaneously only involving the multiplexing of an additional signal and the colour video signal
- H04N9/8211—Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback the individual colour picture signal components being recorded simultaneously only involving the multiplexing of an additional signal and the colour video signal the additional signal being a sound signal
Description
以下、図1〜図11を用いて、実施の形態1を説明する。
[1−1−1.システム構成の概略]
図1は、実施の形態1における付加情報表示システム10の構成の一例を概略的に示す図である。付加情報表示システム10は、放送局12、映像送信装置であるSTB(Set Top Box)14、映像認識装置20、付加情報配信装置30、および映像受信装置40を備える。付加情報表示システム10は、映像認識装置20が有する映像認識技術を利用して、映像受信装置40が受信した映像がどのコンテンツのものかを特定し、そのコンテンツに関連する付加情報を、付加情報配信装置30から取得して映像受信装置40に表示する、ことができるように構成された通信システムである。
図2は、実施の形態1における映像認識装置20および映像受信装置40の構成の一例を概略的に示すブロック図である。
(1)映像受信装置40は、キャリブレーション実行部491を備え、映像認識処理の精度向上または負荷低減のためのキャリブレーション処理を実行し、パラメータの初期設定を行う。
(2)映像認識装置20は、キャリブレーション部24を備え、キャリブレーション処理(パラメータ初期設定)のための映像認識処理を行う。
(3)映像受信装置40と映像認識装置20とは、上述の各処理を連携して行う。
以上のように構成された映像受信装置40および映像認識装置20について、その動作を図3〜図10を用いて説明する。
図3は、実施の形態1における映像受信装置40のキャリブレーション処理時の動作の一例を概略的に示すフローチャートである。
以上のように、本実施の形態において、映像受信装置40は、通信ネットワーク16を介してデータの送受信を行えるように構成されており、映像入力部48、映像抽出部45、制御部41、およびキャリブレーション実行部491を備える。映像入力部48は、外部に設置された映像送信装置(例えば、STB14)から出力される映像信号を入力するように構成されている。映像抽出部45は、その映像信号から映像認識処理用の部分映像を抽出するように構成されている。制御部41は、通信ネットワーク16に接続された映像認識装置20に、部分映像または部分映像から生成したコンテンツ認識情報を送信して映像認識処理を依頼し、その映像認識処理の結果を映像認識装置20から取得し、その映像認識処理の結果に基づく付加情報を、通信ネットワーク16に接続された付加情報配信装置30から取得する制御を行うように構成されている。キャリブレーション実行部491は、映像認識装置20と連携してキャリブレーション処理を行い所定のパラメータを設定するように構成されている。
実施の形態1で設定されたパラメータは、映像認識処理を行う際にフィンガープリントのデータベースにおける照合範囲の設定に用いられるものであったが、キャリブレーション処理によって設定されるパラメータは何らこれに限定されない。本実施の形態では、他のパラメータをキャリブレーション処理によって設定する例を説明する。
本実施の形態に示す付加情報表示システム110は、構成要素に映像認識装置120および映像受信装置140を備える。
以下、実施の形態2におけるキャリブレーション処理時の動作を説明する。
図12は、実施の形態2における付加情報表示システム110で行うキャリブレーション処理の一例を映像を用いて概略的に示す図である。
以上のように、本実施の形態において、映像認識装置120は、映像受信装置140と連携して、映像抽出部45における部分映像の抽出の周期に関するパラメータを設定して映像受信装置140に送信するように構成されている。映像抽出部45は、このパラメータにもとづく周期で部分映像を映像信号から抽出するように構成されている。
以上のように、本出願において開示する技術の例示として、実施の形態1、2を説明した。しかしながら、本開示における技術は、これに限定されず、変更、置き換え、付加、省略等を行った実施の形態にも適用できる。また、上記実施の形態1、2で説明した各構成要素を組み合わせて、新たな実施の形態とすることも可能である。
12 放送局
14,14a,14b STB
16 通信ネットワーク
20,120 映像認識装置
21,42 HTTP送受信部
22 検索部
23,47 記憶部
24,124 キャリブレーション部
30 付加情報配信装置
40,40a,40b,140,142,240 映像受信装置
41,141 制御部
43 操作信号受信部
44,144 映像出力部
45 映像抽出部
46,146 第2制御部
48,48a,48b 映像入力部
49 受信部
51 付加情報
54 表示部
61 中継設備
65 入力部
66 コンテンツ切替検出部
154 映像表示装置
241 キャリブレーション用比較検索部
242 キャリブレーション用データ生成部
243 キャリブレーションCHデータベース
244 キャリブレーション用映像抽出部
245 キャリブレーション用記憶部
246,256 キャリブレーション用制御部
491,491a,491b,493 キャリブレーション実行部
492 第2記憶部
Claims (13)
- 通信ネットワークを介してデータの送受信を行えるように構成された映像受信装置であって、
映像信号を入力するように構成された入力部と、
前記映像信号から映像認識処理用の部分映像を抽出するように構成された映像抽出部と、
前記通信ネットワークに接続された映像認識装置に、前記部分映像または前記部分映像から生成したコンテンツ認識情報を送信して映像認識処理を依頼し、前記映像認識処理の結果を前記映像認識装置から取得し、前記通信ネットワークに接続された付加情報配信装置から前記映像認識処理の結果に基づく付加情報を取得する制御を行うように構成された制御部と、
前記映像認識装置と連携してキャリブレーション処理を行い所定のパラメータを設定するように構成されたキャリブレーション実行部と、を備え、
前記キャリブレーション実行部は、キャリブレーション処理の開始要求とともに、当該映像受信装置が設置されている地域の特定に用いることができる地域情報を前記映像認識装置に送信し、前記映像認識装置から送信されてくるキャリブレーション用チャンネルの候補を示す情報を受信するように構成された、
映像受信装置。 - 前記映像信号に前記付加情報を重畳した映像を表示するように構成された表示部、をさらに備え、
前記キャリブレーション実行部は、前記表示部に、前記キャリブレーション用チャンネルの候補を表示するとともに、前記キャリブレーション用チャンネルの候補のいずれかにチャンネルを変更するようにユーザに促すメッセージを表示するように構成された、
請求項1に記載の映像受信装置。 - チャンネル変更が終了したことを示すユーザ操作を受け付けるように構成された操作信号受信部を更に備えた、
請求項2に記載の映像受信装置。 - 通信ネットワークを介してデータの送受信を行えるように構成された映像受信装置であって、
映像信号を入力するように構成された入力部と、
前記映像信号から映像認識処理用の部分映像を抽出するように構成された映像抽出部と、
前記通信ネットワークに接続された映像認識装置に、前記部分映像または前記部分映像から生成したコンテンツ認識情報を送信して映像認識処理を依頼し、前記映像認識処理の結果を前記映像認識装置から取得し、前記通信ネットワークに接続された付加情報配信装置から前記映像認識処理の結果に基づく付加情報を取得する制御を行うように構成された制御部と、
前記映像認識装置と連携してキャリブレーション処理を行い、前記部分映像が前記映像認識装置で受信される時刻と、前記部分映像に対応する映像信号が前記映像認識装置で取得される時刻との時間差を示すパラメータを設定するように構成されたキャリブレーション実行部と、を備え、
前記制御部は、
前記パラメータを前記部分映像または前記コンテンツ認識情報とともに前記映像認識装置へ送信して映像認識処理を依頼するように構成された、
映像受信装置。 - 通信ネットワークを介してデータの送受信を行えるように構成された映像受信装置であって、
映像信号を入力するように構成された入力部と、
前記映像信号から映像認識処理用の部分映像を抽出するように構成された映像抽出部と、
前記通信ネットワークに接続された映像認識装置に、前記部分映像または前記部分映像から生成したコンテンツ認識情報を送信して映像認識処理を依頼し、前記映像認識処理の結果を前記映像認識装置から取得し、前記通信ネットワークに接続された付加情報配信装置から前記映像認識処理の結果に基づく付加情報を取得する制御を行うように構成された制御部と、
前記映像認識装置と連携してキャリブレーション処理を行い、前記映像抽出部における前記部分映像の抽出の周期に関するパラメータを設定するように構成されたキャリブレーション実行部と、を備え、
前記映像抽出部は、前記パラメータにもとづく周期で前記部分映像を前記映像信号から抽出するように構成された、
映像受信装置。 - 通信ネットワークを介してデータの送受信を行えるように構成された映像受信装置におけるパラメータ設定方法であって、
外部から入力される映像信号から映像認識処理用の部分映像を抽出するステップと、
前記通信ネットワークに接続された映像認識装置に、前記部分映像または前記部分映像から生成したコンテンツ認識情報を送信して映像認識処理を依頼し、前記映像認識処理の結果を前記映像認識装置から取得するステップと、
前記映像認識処理の結果に基づく付加情報を、前記通信ネットワークに接続された付加情報配信装置から取得するステップと、
前記映像認識装置と連携してキャリブレーション処理を行い所定のパラメータを設定するステップと、
前記キャリブレーション処理の開始要求とともに、当該映像受信装置が設置されている地域の特定に用いることができる地域情報を前記映像認識装置に送信するステップと、
前記映像認識装置から送信されてくるキャリブレーション用チャンネルの候補を示す情報を受信するステップと、を備えた、
パラメータ設定方法。 - 前記キャリブレーション用チャンネルの候補を表示部に表示するステップと、
前記キャリブレーション用チャンネルの候補のいずれかにチャンネルを変更するようにユーザに促すメッセージを表示するステップ、をさらに備えた、
請求項6に記載のパラメータ設定方法。 - チャンネル変更が終了したことを示すユーザ操作を受け付けるステップ、をさらに備え、
前記ユーザ操作を受け付けた後に前記キャリブレーション処理を開始する、
請求項7に記載のパラメータ設定方法。 - 通信ネットワークを介して互いにデータの送受信を行えるように構成された、映像受信装置、映像認識装置、および付加情報配信装置、を備えた付加情報表示システムであって、
前記映像受信装置は、
映像信号を入力するように構成された入力部と、
前記映像信号から映像認識処理用の部分映像を抽出するように構成された映像抽出部と、
前記映像認識装置に前記通信ネットワークを介して前記部分映像または前記部分映像から生成したコンテンツ認識情報を送信して映像認識処理を依頼し、前記映像認識処理の結果を前記映像認識装置から前記通信ネットワークを介して取得し、前記付加情報配信装置から前記映像認識処理の結果に基づく付加情報を前記通信ネットワークを介して取得する制御を行うように構成された制御部と、
前記映像認識装置と連携してキャリブレーション処理を行い所定のパラメータを設定するように構成されたキャリブレーション実行部と、を備え
前記映像認識装置は、
前記通信ネットワークを介して受信した前記部分映像に関する映像認識処理を行い、前記映像認識処理の結果を前記通信ネットワークを介して前記映像受信装置に送信するように構成されるとともに、前記映像受信装置と連携してキャリブレーション処理を行い所定のパラメータを設定して前記映像受信装置へ送信するように構成され、
前記付加情報配信装置は、
前記通信ネットワークを介して受信した前記映像認識処理の結果に対応する付加情報を前記通信ネットワークを介して前記映像受信装置に送信するように構成され、
前記映像受信装置の前記キャリブレーション実行部は、
キャリブレーション処理の開始要求とともに、前記映像受信装置が設置されている地域の特定に用いることができる地域情報を前記映像認識装置に送信するように構成され、
前記映像認識装置は、
前記地域情報にもとづき、キャリブレーションチャンネルデータベースからキャリブレーション用チャンネルの候補を選択して前記映像受信装置へ送信するように構成された、
付加情報表示システム。 - 通信ネットワークを介して互いにデータの送受信を行えるように構成された、映像受信装置、映像認識装置、および付加情報配信装置、を備えた付加情報表示システムであって、
前記映像受信装置は、
映像信号を入力するように構成された入力部と、
前記映像信号から映像認識処理用の部分映像を抽出するように構成された映像抽出部と、
前記映像認識装置に前記通信ネットワークを介して前記部分映像または前記部分映像から生成したコンテンツ認識情報を送信して映像認識処理を依頼し、前記映像認識処理の結果を前記映像認識装置から前記通信ネットワークを介して取得し、前記付加情報配信装置から前記映像認識処理の結果に基づく付加情報を前記通信ネットワークを介して取得する制御を行うように構成された制御部と、
前記映像認識装置と連携してキャリブレーション処理を行い所定のパラメータを設定するように構成されたキャリブレーション実行部と、を備え
前記映像認識装置は、
前記通信ネットワークを介して受信した前記部分映像に関する映像認識処理を行い、前記映像認識処理の結果を前記通信ネットワークを介して前記映像受信装置に送信するように構成されるとともに、前記映像受信装置と連携してキャリブレーション処理を行い所定のパラメータを設定して前記映像受信装置へ送信するように構成され、
前記付加情報配信装置は、
前記通信ネットワークを介して受信した前記映像認識処理の結果に対応する付加情報を前記通信ネットワークを介して前記映像受信装置に送信するように構成され、
前記映像認識装置は、
前記映像受信装置から送信されてくる前記部分映像を前記映像認識装置で受信する時刻と、前記部分映像に対応する映像信号を前記映像認識装置で取得する時刻との時間差を示すパラメータを設定して前記映像受信装置に送信するように構成され、
前記映像受信装置の前記キャリブレーション実行部は、
受信した前記パラメータを記憶し、映像認識処理を依頼する際に、前記部分映像または前記コンテンツ認識情報とともに前記パラメータを前記映像認識装置へ送信するように構成された、
付加情報表示システム。 - 通信ネットワークを介して互いにデータの送受信を行えるように構成された、映像受信装置、映像認識装置、および付加情報配信装置、を備えた付加情報表示システムであって、
前記映像受信装置は、
映像信号を入力するように構成された入力部と、
前記映像信号から映像認識処理用の部分映像を抽出するように構成された映像抽出部と、
前記映像認識装置に前記通信ネットワークを介して前記部分映像または前記部分映像から生成したコンテンツ認識情報を送信して映像認識処理を依頼し、前記映像認識処理の結果を前記映像認識装置から前記通信ネットワークを介して取得し、前記付加情報配信装置から前記映像認識処理の結果に基づく付加情報を前記通信ネットワークを介して取得する制御を行うように構成された制御部と、
前記映像認識装置と連携してキャリブレーション処理を行い所定のパラメータを設定するように構成されたキャリブレーション実行部と、を備え
前記映像認識装置は、
前記通信ネットワークを介して受信した前記部分映像に関する映像認識処理を行い、前記映像認識処理の結果を前記通信ネットワークを介して前記映像受信装置に送信するように構成されるとともに、前記映像受信装置と連携してキャリブレーション処理を行い所定のパラメータを設定して前記映像受信装置へ送信するように構成され、
前記付加情報配信装置は、
前記通信ネットワークを介して受信した前記映像認識処理の結果に対応する付加情報を前記通信ネットワークを介して前記映像受信装置に送信するように構成され、
前記映像認識装置は、
前記映像受信装置から送信されてくる前記部分映像を前記映像認識装置で受信する時刻と、前記部分映像に対応する映像信号を前記映像認識装置で取得する時刻との時間差を示すパラメータを設定して前記映像受信装置に送信するように構成され、
前記映像認識装置は、
前記部分映像の抽出の周期に関するパラメータを設定して前記映像受信装置に送信するように構成され、
前記映像受信装置の前記キャリブレーション実行部は、
受信した前記パラメータにもとづく周期で前記映像信号から前記部分映像を抽出するように前記映像抽出部に指示するように構成された
付加情報表示システム。 - 通信ネットワークを介して互いにデータの送受信を行えるように構成された、映像受信装置、映像認識装置、および付加情報配信装置、を備えた付加情報表示システムであって、
前記映像受信装置は、
映像信号を入力するように構成された入力部と、
前記映像信号から映像認識処理用の部分映像を抽出するように構成された映像抽出部と、
前記映像認識装置に前記通信ネットワークを介して前記部分映像または前記部分映像から生成したコンテンツ認識情報を送信して映像認識処理を依頼し、前記映像認識処理の結果を前記映像認識装置から前記通信ネットワークを介して取得し、前記付加情報配信装置から前記映像認識処理の結果に基づく付加情報を前記通信ネットワークを介して取得する制御を行うように構成された制御部と、
前記映像認識装置と連携してキャリブレーション処理を行い所定のパラメータを設定するように構成されたキャリブレーション実行部と、を備え
前記映像認識装置は、
前記通信ネットワークを介して受信した前記部分映像に関する映像認識処理を行い、前記映像認識処理の結果を前記通信ネットワークを介して前記映像受信装置に送信するように構成されるとともに、前記映像受信装置と連携してキャリブレーション処理を行い所定のパラメータを設定して前記映像受信装置へ送信するように構成され、
前記付加情報配信装置は、
前記通信ネットワークを介して受信した前記映像認識処理の結果に対応する付加情報を前記通信ネットワークを介して前記映像受信装置に送信するように構成され、
前記映像認識装置は、
前記映像受信装置から送信されてくる前記部分映像を前記映像認識装置で受信する時刻と、前記部分映像に対応する映像信号を前記映像認識装置で取得する時刻との時間差を示すパラメータを設定して前記映像受信装置に送信するように構成され、
前記キャリブレーション中に、
前記映像受信装置の前記入力部に入力される映像信号は、キャリブレーション用チャンネルの放送信号の映像信号であり、
前記映像認識装置で受信される放送信号は、前記キャリブレーション用チャンネルの放送信号である、
付加情報表示システム。 - 通信ネットワークを介して互いにデータの送受信を行えるように構成された、映像受信装置、映像認識装置、および付加情報配信装置、を備えた付加情報表示システムであって、
前記映像受信装置は、
映像信号を入力するように構成された入力部と、
前記映像信号から映像認識処理用の部分映像を抽出するように構成された映像抽出部と、
前記映像認識装置に前記通信ネットワークを介して前記部分映像または前記部分映像から生成したコンテンツ認識情報を送信して映像認識処理を依頼し、前記映像認識処理の結果を前記映像認識装置から前記通信ネットワークを介して取得し、前記付加情報配信装置から前記映像認識処理の結果に基づく付加情報を前記通信ネットワークを介して取得する制御を行うように構成された制御部と、
前記映像認識装置と連携してキャリブレーション処理を行い所定のパラメータを設定するように構成されたキャリブレーション実行部と、を備え
前記映像認識装置は、
前記通信ネットワークを介して受信した前記部分映像に関する映像認識処理を行い、前記映像認識処理の結果を前記通信ネットワークを介して前記映像受信装置に送信するように構成されるとともに、前記映像受信装置と連携してキャリブレーション処理を行い所定のパラメータを設定して前記映像受信装置へ送信するように構成され、
前記付加情報配信装置は、
前記通信ネットワークを介して受信した前記映像認識処理の結果に対応する付加情報を前記通信ネットワークを介して前記映像受信装置に送信するように構成され、
前記映像認識装置は、
前記映像受信装置から送信されてくる前記部分映像を前記映像認識装置で受信する時刻と、前記部分映像に対応する映像信号を前記映像認識装置で取得する時刻との時間差を示すパラメータを設定して前記映像受信装置に送信するように構成され、
前記映像認識装置は、
前記映像受信装置から送信されてくる前記部分映像または前記コンテンツ認識情報が、キャリブレーション用チャンネルの放送信号による部分映像またはコンテンツ認識情報か否かを判断し、前記判断の結果を前記映像受信装置に送信するとともに、前記判断の結果にもとづき前記キャリブレーション処理を開始するように構成され、
前記映像受信装置は、
受信した前記判断の結果にもとづくメッセージを表示部に表示するように構成された、
付加情報表示システム。
Applications Claiming Priority (3)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2014068198 | 2014-03-28 | ||
JP2014068198 | 2014-03-28 | ||
PCT/JP2014/005405 WO2015145501A1 (ja) | 2014-03-28 | 2014-10-24 | 映像受信装置、パラメータ設定方法および付加情報表示システム |
Publications (2)
Publication Number | Publication Date |
---|---|
JPWO2015145501A1 JPWO2015145501A1 (ja) | 2017-04-13 |
JP6379362B2 true JP6379362B2 (ja) | 2018-08-29 |
Family
ID=54194103
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2016509614A Active JP6379362B2 (ja) | 2014-03-28 | 2014-10-24 | 映像受信装置、パラメータ設定方法および付加情報表示システム |
Country Status (4)
Country | Link |
---|---|
US (1) | US9955234B2 (ja) |
JP (1) | JP6379362B2 (ja) |
CN (1) | CN105850149B (ja) |
WO (1) | WO2015145501A1 (ja) |
Families Citing this family (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US9723347B2 (en) * | 2015-10-01 | 2017-08-01 | Sorenson Media, Inc | Frequency capping for media content |
US9848214B2 (en) | 2015-10-01 | 2017-12-19 | Sorenson Media, Inc. | Sequentially overlaying media content |
US10432994B2 (en) | 2016-02-17 | 2019-10-01 | The Nielsen Company (Us), Llc | Content comparison testing on linear media streams |
US10542326B2 (en) * | 2017-03-29 | 2020-01-21 | The Nielsen Company (Us), Llc | Targeted content placement using overlays |
US11134312B2 (en) * | 2017-12-14 | 2021-09-28 | Google Llc | Methods, systems, and media for presenting contextual information in connection with media content |
CN110852273B (zh) * | 2019-11-12 | 2023-05-16 | 重庆大学 | 一种基于强化学习注意力机制的行为识别方法 |
Family Cites Families (13)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN1179869A (zh) * | 1995-03-31 | 1998-04-22 | 索尼欧洲公司 | 按需提供信息的系统 |
JPH10214258A (ja) | 1997-01-28 | 1998-08-11 | Victor Co Of Japan Ltd | データ処理システム |
JP3994682B2 (ja) * | 2000-04-14 | 2007-10-24 | 日本電信電話株式会社 | 放送情報送受信システム |
CN100592788C (zh) * | 2000-04-14 | 2010-02-24 | 日本电信电话株式会社 | 与广播信息相关的信息取得方法、系统和装置 |
JP4344185B2 (ja) * | 2003-01-28 | 2009-10-14 | シャープ株式会社 | クライアント端末装置、情報処理方法、サブクライアント端末装置、コンピュータ実行可能なプログラム、及び記録媒体 |
RU2006134049A (ru) | 2004-02-26 | 2008-04-10 | Медиагайд | Способ и устройство для автоматического обнаружения и идентификации сигнала передаваемой аудио- или видеопрограммы |
US8229751B2 (en) | 2004-02-26 | 2012-07-24 | Mediaguide, Inc. | Method and apparatus for automatic detection and identification of unidentified Broadcast audio or video signals |
US20090006337A1 (en) | 2005-12-30 | 2009-01-01 | Mediaguide, Inc. | Method and apparatus for automatic detection and identification of unidentified video signals |
JP5010292B2 (ja) * | 2007-01-18 | 2012-08-29 | 株式会社東芝 | 映像属性情報出力装置、映像要約装置、プログラムおよび映像属性情報出力方法 |
JP2010532943A (ja) | 2007-07-06 | 2010-10-14 | エーエムビーエックス ユーケー リミテッド | マルチメディア・システムにおいてコンテンツ・ストリームと一つまたは複数の感覚効果を出力するためのスクリプトを同期させる方法 |
US8549556B2 (en) * | 2008-04-15 | 2013-10-01 | Shlomo Selim Rakib | Contextual advertising |
US9635421B2 (en) * | 2009-11-11 | 2017-04-25 | Time Warner Cable Enterprises Llc | Methods and apparatus for audience data collection and analysis in a content delivery network |
JP2012161030A (ja) * | 2011-02-02 | 2012-08-23 | Nippon Telegr & Teleph Corp <Ntt> | 付随コンテンツ検索装置、システム、方法、及びプログラム |
-
2014
- 2014-10-24 US US15/036,804 patent/US9955234B2/en active Active
- 2014-10-24 WO PCT/JP2014/005405 patent/WO2015145501A1/ja active Application Filing
- 2014-10-24 CN CN201480071262.5A patent/CN105850149B/zh active Active
- 2014-10-24 JP JP2016509614A patent/JP6379362B2/ja active Active
Also Published As
Publication number | Publication date |
---|---|
CN105850149B (zh) | 2018-12-14 |
US20160286283A1 (en) | 2016-09-29 |
CN105850149A (zh) | 2016-08-10 |
WO2015145501A1 (ja) | 2015-10-01 |
US9955234B2 (en) | 2018-04-24 |
JPWO2015145501A1 (ja) | 2017-04-13 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP6194484B2 (ja) | 映像受信装置、付加情報表示方法および付加情報表示システム | |
JP6379362B2 (ja) | 映像受信装置、パラメータ設定方法および付加情報表示システム | |
JP7161516B2 (ja) | ビデオ複数一致検出とオーディオフィンガープリントに基づく曖昧性排除とを用いたメディアチャネル識別 | |
KR20210022134A (ko) | 프레임적으로 정확한 컨텐츠 수정을 용이하게 하기 위해, 낮은 레이트 핑거프린팅을 사용하는 보간을 기반으로 하는 시간 맵핑의 확립 및 사용 | |
JP6281125B2 (ja) | 映像受信装置、映像認識方法および付加情報表示システム | |
JP6281126B2 (ja) | 映像受信装置、付加情報表示方法および付加情報表示システム | |
JP5820986B2 (ja) | 映像受信装置及び受信映像の画像認識方法 | |
KR20150104358A (ko) | 서버 장치 및 그의 핑거프린트 전송 방법, 그리고 방송수신장치 | |
TWI788701B (zh) | 用於使用帶內元資料作為存取參考指紋的基礎來促進與內容相關的動作的方法及媒體客戶端 | |
JP6340596B2 (ja) | 映像受信装置、映像認識方法および付加情報表示システム | |
JP6240899B2 (ja) | 映像受信装置、映像認識方法および付加情報表示システム | |
JP6194483B2 (ja) | 映像受信装置、映像認識方法および付加情報表示システム | |
JPWO2017061103A1 (ja) | 番組分割装置及び番組分割方法 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20170214 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20180206 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20180306 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20180619 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20180702 |
|
R151 | Written notification of patent or utility model registration |
Ref document number: 6379362 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R151 |