RU2630432C2 - Приемное устройство, способ обработки информации, программа, передающее устройство и система взаимодействия передающих программ - Google Patents

Приемное устройство, способ обработки информации, программа, передающее устройство и система взаимодействия передающих программ Download PDF

Info

Publication number
RU2630432C2
RU2630432C2 RU2014152247A RU2014152247A RU2630432C2 RU 2630432 C2 RU2630432 C2 RU 2630432C2 RU 2014152247 A RU2014152247 A RU 2014152247A RU 2014152247 A RU2014152247 A RU 2014152247A RU 2630432 C2 RU2630432 C2 RU 2630432C2
Authority
RU
Russia
Prior art keywords
content
data
request
user profile
acr
Prior art date
Application number
RU2014152247A
Other languages
English (en)
Other versions
RU2014152247A (ru
Inventor
Ясуаки ЯМАГИСИ
Хитоси НАКАМУРА
Original Assignee
Сони Корпорейшн
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Сони Корпорейшн filed Critical Сони Корпорейшн
Publication of RU2014152247A publication Critical patent/RU2014152247A/ru
Application granted granted Critical
Publication of RU2630432C2 publication Critical patent/RU2630432C2/ru

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/434—Disassembling of a multiplex stream, e.g. demultiplexing audio and video streams, extraction of additional data from a video stream; Remultiplexing of multiplex streams; Extraction or processing of SI; Disassembling of packetised elementary stream
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/20—Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
    • G06F16/24—Querying
    • G06F16/245—Query processing
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/20—Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
    • G06F16/24—Querying
    • G06F16/248—Presentation of query results
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/25—Management operations performed by the server for facilitating the content distribution or administrating data related to end-users or client devices, e.g. end-user or client device authentication, learning user preferences for recommending movies
    • H04N21/258—Client or end-user data management, e.g. managing client capabilities, user preferences or demographics, processing of multiple end-users preferences to derive collaborative data
    • H04N21/25866—Management of end-user data
    • H04N21/25891—Management of end-user data being end-user preferences
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/41—Structure of client; Structure of client peripherals
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/4302—Content synchronisation processes, e.g. decoder synchronisation
    • H04N21/4307—Synchronising the rendering of multiple content streams or additional data on devices, e.g. synchronisation of audio on a mobile phone with the video output on the TV screen
    • H04N21/43072—Synchronising the rendering of multiple content streams or additional data on devices, e.g. synchronisation of audio on a mobile phone with the video output on the TV screen of multiple content streams on the same device
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/44—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs
    • H04N21/44008—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs involving operations for analysing video streams, e.g. detecting features or characteristics in the video stream
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/45—Management operations performed by the client for facilitating the reception of or the interaction with the content or administrating data related to the end-user or to the client device itself, e.g. learning user preferences for recommending movies, resolving scheduling conflicts
    • H04N21/4508—Management of client data or end-user data
    • H04N21/4532—Management of client data or end-user data involving end-user characteristics, e.g. viewer profile, preferences
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/45—Management operations performed by the client for facilitating the reception of or the interaction with the content or administrating data related to the end-user or to the client device itself, e.g. learning user preferences for recommending movies, resolving scheduling conflicts
    • H04N21/462—Content or additional data management, e.g. creating a master electronic program guide from data received from the Internet and a Head-end, controlling the complexity of a video stream by scaling the resolution or bit-rate based on the client capabilities
    • H04N21/4622—Retrieving content or additional data from different sources, e.g. from a broadcast channel and the Internet
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/47—End-user applications
    • H04N21/472—End-user interface for requesting content, additional data or services; End-user interface for interacting with content, e.g. for content reservation or setting reminders, for requesting event notification, for manipulating displayed content
    • H04N21/4722—End-user interface for requesting content, additional data or services; End-user interface for interacting with content, e.g. for content reservation or setting reminders, for requesting event notification, for manipulating displayed content for requesting additional data associated with the content
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/47—End-user applications
    • H04N21/475—End-user interface for inputting end-user data, e.g. personal identification number [PIN], preference data
    • H04N21/4755—End-user interface for inputting end-user data, e.g. personal identification number [PIN], preference data for defining user preferences, e.g. favourite actors or genre
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/47—End-user applications
    • H04N21/482—End-user interface for program selection
    • H04N21/4828—End-user interface for program selection for searching program descriptors
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/60—Network structure or processes for video distribution between server and client or between remote clients; Control signalling between clients, server and network components; Transmission of management data between server and client, e.g. sending from server to client commands for recording incoming content stream; Communication details between server and client 
    • H04N21/65—Transmission of management data between client and server
    • H04N21/654—Transmission by server directed to the client
    • H04N21/6547—Transmission by server directed to the client comprising parameters, e.g. for client setup
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/60—Network structure or processes for video distribution between server and client or between remote clients; Control signalling between clients, server and network components; Transmission of management data between server and client, e.g. sending from server to client commands for recording incoming content stream; Communication details between server and client 
    • H04N21/65—Transmission of management data between client and server
    • H04N21/658—Transmission by the client directed to the server
    • H04N21/6581—Reference data, e.g. a movie identifier for ordering a movie or a product identifier in a home shopping application
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/60—Network structure or processes for video distribution between server and client or between remote clients; Control signalling between clients, server and network components; Transmission of management data between server and client, e.g. sending from server to client commands for recording incoming content stream; Communication details between server and client 
    • H04N21/65—Transmission of management data between client and server
    • H04N21/658—Transmission by the client directed to the server
    • H04N21/6582—Data stored in the client, e.g. viewing habits, hardware capabilities, credit card number
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/80—Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
    • H04N21/81—Monomedia components thereof
    • H04N21/8166—Monomedia components thereof involving executable data, e.g. software
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/80—Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
    • H04N21/81—Monomedia components thereof
    • H04N21/8166—Monomedia components thereof involving executable data, e.g. software
    • H04N21/8173—End-user applications, e.g. Web browser, game
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/80—Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
    • H04N21/83—Generation or processing of protective or descriptive data associated with content; Content structuring
    • H04N21/835—Generation of protective data, e.g. certificates
    • H04N21/8358—Generation of protective data, e.g. certificates involving watermark

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Databases & Information Systems (AREA)
  • General Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Human Computer Interaction (AREA)
  • Software Systems (AREA)
  • Computational Linguistics (AREA)
  • Data Mining & Analysis (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Computer Graphics (AREA)
  • Computer Security & Cryptography (AREA)
  • Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)
  • Information Transfer Between Computers (AREA)

Abstract

Изобретение относится к приемному устройству и системам взаимодействия прикладных программ. Техническим результатом является выполнение приложения, подходящего для пользователя, которое должно выполняться во взаимодействии с воспроизведением произвольного содержимого, которое просматривается пользователем. Предложено приемное устройство, содержащее: извлекающий модуль для извлечения из воспроизводимого содержимого данных об отличительных признаках объекта, указывающих характеристики содержимого, модуль генерирования профиля для генерирования данных профиля пользователя, модуль генерирования запроса для генерирования запроса, включающего в себя по меньшей мере данные об отличительных признаках объекта и данные профиля пользователя, передачи сгенерированного запроса передающему устройству и приема ответа, согласованного с данными профиля пользователя в передающем устройстве и возвращенного передающим устройством, в соответствии с запросом, и модуль выполнения приложения для сбора данных и выполнения приложения во взаимодействии с воспроизведением содержимого, на основе принятого ответа. 5 н. и 5 з.п. ф-лы, 7 ил.

Description

Область техники, к которой относится изобретение
Настоящее изобретение относится к приемному устройству, способу обработки информации, программе, передающему устройству и системе взаимодействия прикладных программ, и особенно относится к приемному устройству, способу обработки информации, программе, передающему устройству и системе взаимодействия прикладных программ, которые соответствующим образом используются, когда прикладная программа выполняется во взаимодействии с воспроизведением содержимого, в частности такого, как телевизионная программа.
Уровень техники
Например, просматривание на экранах отображаемой информации (исполнители, основная сюжетная линия, объявление на последующий период, и т.п.), относящейся к телевизионной (ТВ) программе (в дальнейшем определяемую просто как программа) передаваемой в эфир, или к информации (новости, прогноз погоды, информация о дорожном движении, и подобная информация) является полезным для зрителей, хотя напрямую не относится к программе и зрителям программы.
Чтобы реализовать описанное выше отображение, команда для сбора данных и запуска соответствующей прикладной программы (в дальнейшем определяемой для краткости как приложение) может передаваться прямо к телевизионным приемникам и во взаимодействии с выполнением программы. Фактически, в Японии и Европе уже команды или приложения передаются с использованием полосы частот для данных телевизионного вещания в сигнале телевизионного вещания, таким образом реализовывая описанное выше отображение (например, см. патентный документ 1).
В то же время в США полоса частот для данных телевизионного вещания в сигнале телевизионного вещания не обеспечивается, и вместо этого не был установлен какой-либо способ. Поэтому выполнение приложения во взаимодействии с воспроизведением программы не было реализовано.
Следует заметить, что в США существует большее количество домохозяйств, которые смотрят программы через CATV (community Antenna Television - абонентское телевидение) или интернет-телевидение (IPTV), по сравнению с домохозяйствами, которые непосредственно принимают волны телевизионного вещания с помощью телевизионных приемников и смотрят телевизионные программы. В абонентском телевидении или интернет-телевидении только видео и звуковой сигнал программы может иногда выделяться и распределяться из сигнала телевизионного вещания, и таким образом, если полоса частот для данных телевизионного вещания обеспечивается в сигнале телевизионного вещания в США, не существует гарантии, что данные телевизионного сигнала, которые включают в себя данные, относящиеся к приложению, передаются к приемным устройствам.
Кроме того, в последние годы, не только в том случае, когда просматривается программа, передаваемая в эфир, но также в случае записанных и воспроизводимых программ, считывание видеозаписи из средства аудиовизуальной информации, такого как DVD (Digital Video Disk - цифровой видеодиск) или BD (диск Блю-Рэй), или когда просматривается произвольное содержимое, такое как движущееся изображение, загружаемое из Интернета, существуют требования для выполнения приложения во взаимодействии с программой, видеозаписью, или произвольным содержимым.
Список ссылок
Патентные документы
Патентный документ 1: выложенная заявка на патент Японии №2006-50237.
Раскрытие изобретения
Проблемы, которые должны быть решены с помощью изобретения
Однако выполнение приложения во взаимодействии с произвольным содержимым реализовано неочевидно.
Кроме того, желательно не только просто вызвать выполнение приложения во взаимодействии с содержимым, но также выполнить приложение, подходящее для пользователя, который просматривает содержимое, а также представить информацию, подходящую для пользователя в выполненном приложении. Однако способ, который реализует требования, не был установлен.
Настоящее раскрываемое изобретение было осуществлено с учетом вышесказанного, и позволяет выполнить приложение, подходящее для пользователя, которое должно выполняться во взаимодействии с воспроизведением произвольного содержимого, которое просматривается пользователем.
Решение проблем
Приемное устройство, в соответствии с первым аспектом настоящего раскрываемого изобретения, включает в себя: извлекающий модуль для извлечения, из воспроизводимого содержимого, данных по отличительным признакам объекта, показывающим характеристики содержимого; модуль генерирования профиля для генерирования данных профиля пользователя; модуль генерирования запроса для генерирования запроса, включающего в себя по меньшей мере отличительные признаки объекта и данные профиля пользователя, для передачи сгенерированного запроса к передающему устройству и приема ответа, согласованного с данными профиля пользователя в передающем устройстве, и возвращаемого от передающего устройства, в соответствии с запросом; и модуль выполнения приложения для сбора данных и выполнения приложения во взаимодействии с воспроизведением содержимого, основываясь на принятом ответе.
Модуль генерирования генерирует данные профиля пользователя, включающие в себя демографические характеристики пользователя.
Модуль генерирования запроса генерирует запрос, включающий в себя по меньшей мере отличительные признаки объекта и данные профиля пользователя, передает сгенерированный запрос на передающее устройство, принимает ответ, согласующийся с данными профиля пользователя в передающем устройстве, и возвращаемый из передающего устройства, в соответствии с запросом, при этом каждый раз отличительные признаки объекта извлекаются в извлекающем модуле.
Модуль генерирования профиля дополнительно генерирует данные профиля пользователя, включающие в себя по меньшей мере одну из характеристик приемного устройства, состояние перегруженности сети связи, и информацию естественного окружения.
Приемное устройство встраивается в устройство воспроизведения, которое воспроизводит содержимое, и дополнительно включает в себя модуль поставки содержимого для подачи всех частей содержимого, которые должны воспроизводиться устройством воспроизведения к извлекающему модулю.
Способ обработки информации приемным устройством, в соответствии с первым аспектом настоящего раскрываемого изобретения, включает в себя этапы, на которых: извлекают из воспроизводимого содержимого с помощью приемного устройства данных по отличительным признакам объекта, показывающих характеристики содержимого; генерируют данные профиля пользователя; генерируют запрос, включающий в себя по меньшей мере отличительные признаки объекта и данные профиля пользователя, передают сгенерированный запрос передающему устройству, и принимают ответ, согласующийся с данными профиля пользователя в передающем устройстве, возвращенный передающим устройством в соответствии с запросом; и собирают данные и выполняют приложение во взаимодействии с воспроизведением содержимого, основываясь на принятом ответе.
Программа, в соответствии с первым аспектом настоящего раскрываемого изобретения, вызывает функционирование компьютера в качестве: извлекающего модуля для извлечения из воспроизводимого содержимого отличительных признаков объекта, показывающих характеристики содержимого; модуля генерирования профиля для генерирования данных профиля пользователя; модуля генерирования запроса для генерирования запроса, включающего в себя по меньшей мере отличительные признаки объекта и данные профиля пользователя, для передачи сгенерированного запроса передающему устройству и приема ответа, согласующегося с данными профиля пользователя в передающем устройстве, и возвращаемого от передающего устройства, в соответствии с запросом; и модуля выполнения приложения для сбора данных и выполнения приложения во взаимодействии с воспроизведением содержимого, основываясь на принятом ответе.
В соответствии с первым аспектом настоящего раскрываемого изобретения, из воспроизводимого содержимого извлекаются отличительные признаки объекта, которые показывают характеристики извлекаемого содержимого, генерируются данные профиля пользователя, запрос, включающий в себя по меньшей мере данные по отличительным признакам объекта и данные профиля пользователя, генерируется и передаются на передающее устройство, при этом принимается ответ, согласующийся с данными профиля пользователя в передающем устройстве и возвращаемый из передающего устройства, в соответствии с запросом. Затем приложение запрашивается и выполняется во взаимодействии с воспроизведением содержимого, основываясь на принятом ответе.
Передающее устройство, в соответствии со вторым аспектом настоящего раскрываемого изобретения, включает в себя: базу данных, показывающую соответствующее соотношение среди данных по отличительным признакам объекта, показывающих характеристики содержимого, выделенных из содержимого, идентификатора содержимого, показывающего содержимое источника для извлечения, и связанные с содержимым метаданные, включающие в себя приложение, подлежащее выполнению во взаимодействии с содержимым; модуль генерирования ответа для идентификации содержимого источника извлечения данных по отличительным признакам объекта, включенных в запрос, передаваемых из приемного устройства в соответствии с базой данных для генерирования ответа, включающего в себя связанные с содержимым метаданные, включающие в себя идентификатор приложения, обозначающий приложение, подлежащее выполнению во взаимодействии с идентифицируемым содержимым, и возвращения сгенерированного ответа на приемное устройство; и согласующий модуль для согласования связанных с содержимым метаданных, включаемых в ответ, перед возвращением с данными профиля пользователя, включенными в запрос.
Согласующий модуль согласовывает связанные с содержимым метаданные, включаемые в ответ, перед возвращением с демографическими характеристиками пользователя приемного устройства, включенными в данные профиля пользователя.
В соответствии со вторым аспектом настоящего раскрываемого изобретения, в соответствии с базой данных, которая показывает соответствующее соотношение из данных по отличительным признакам объекта, обозначающих характеристики содержимого, выделенные из этого содержимого, идентификатора содержимого, показывающего содержимое источника для извлечения, и связанные с содержимым метаданные, включающие в себя идентификатор приложения, показывающий приложение, подлежащее выполнению во взаимодействии с содержимым, при этом содержимое источника для извлечения данных по отличительным признакам объекта, включаемых в запрос, передаваемый из приемного устройства, идентифицируется, а запрос, включающий в себя связанные с содержимым метаданные, включающие в себя идентификатор приложения, показывающий приложение, которое должно выполняться во взаимодействии с идентифицируемым содержимым, генерируется и возвращается в приемное устройство. Следует заметить, что связанные с содержимым метаданные, включенные в ответ перед возвращением, согласовываются с данными профиля пользователя, включенными в запрос.
Система взаимодействия прикладных программ, в соответствии с третьим аспектом настоящего раскрываемого изобретения, выполненная из передающего устройства и приемного устройства для содержимого, при этом система включает в себя: приемное устройство, включающее в себя извлекающий модуль для извлечения из воспроизводимого содержимого данных по отличительным признакам объекта, показывающих характеристики содержимого; модуль генерирования профиля для генерирования данных профиля пользователя; модуль генерирования запроса для генерирования запроса, включающего в себя по меньшей мере данные по отличительным признакам объекта и данные профиля пользователя, чтобы передавать сгенерированный запрос к передающему устройству и принимать ответ, согласованный с данными профиля пользователя в передающем устройстве, и возвращаемый от передающего устройства, в соответствии с запросом; и модуль выполнения приложения для сбора данных и выполнения приложения во взаимодействии с воспроизведением содержимого, основываясь на принятом ответе, и передающее устройство, включающее в себя базу данных, показывающую соответствующее соотношение среди данных по отличительным признакам объекта, показывающих характеристики содержимого, выделенных из этого содержимого, идентификатор содержимого, показывающий содержимое источника для извлечения, и связанные с содержимым метаданные, включающие в себя идентификатор приложения, показывающий приложение, подлежащее выполнению во взаимодействии с содержимым; модуль генерирования ответа для идентификации содержимого источника извлечения отличительных признаков объекта, включенных в запрос, передаваемый приемным устройством в соответствии с базой данных, для генерирования ответа, включающего в себя связанные с содержимым метаданные, включающие в себя идентификатор приложения, показывающий приложение, подлежащее выполнению во взаимодействии с идентифицируемым содержимым, и возвращения сгенерированного ответа на приемное устройство; и согласующий модуль для согласования связанных с содержимым метаданных, включаемых в ответ, до возвращения с данными профиля пользователя, включенными в запрос.
В соответствии с третьим аспектом настоящего раскрываемого изобретения, с помощью приемного устройства из воспроизводимого содержимого извлекаются данные по отличительным признакам объекта, показывающие характеристики содержимого, запрос, включающий в себя по меньшей мере отличительные признаки объекта и данные профиля пользователя, генерируется и передается на передающее устройство, ответ согласовывается с данными профиля пользователя в передающем устройстве, и возвращается от передающего устройства, в соответствии с принимаемым запросом, а приложение запрашивается и выполняется во взаимодействии с воспроизведением содержимого, основываясь на принятом ответе. В то же время, с помощью приемного устройства, в соответствии с базой данных, которая показывает соответствующее соотношение среди данных по отличительным признакам объекта, показывающих характеристики содержимого, извлеченные из указанного содержимого, идентификатора содержимого, показывающего содержимое источника для извлечения, и связанные с содержимым метаданные, включающие в себя идентификатор приложения, показывающий приложение, подлежащее выполнению во взаимодействии с содержимым, при этом содержимое источника для извлечения отличительных признаков объекта, включаемых в запрос, передаваемый от приемного устройства, идентифицируется, а запрос, включающий в себя связанные с содержимым метаданные, включающие в себя идентификатор приложения, показывающий приложение, подлежащее выполнению во взаимодействии с идентифицируемым содержимым, генерируется и возвращается в приемное устройство. Следует заметить, что связанные с содержимым метаданные, включенные в ответ перед возвращением, согласовываются с данными профиля пользователя, включенными в запрос. Эффекты изобретения
В соответствии с первым аспектом настоящего раскрываемого изобретения, приложение, подходящее для пользователя, может выполняться во взаимодействии с воспроизведением просматриваемого содержимого.
В соответствии со вторым аспектом настоящего раскрываемого изобретения, содержимое, которое сейчас просматривается, идентифицируется приемным устройством, а приложение, подходящее для пользователя, может доставляться во взаимодействии с воспроизведением содержимого.
В соответствии с третьим аспектом настоящего раскрываемого изобретения, содержимое, которое сейчас просматривается, идентифицируется приемным устройством, а приложение, подходящее для пользователя, может доставляться от устройства телевизионного вещания к приемному устройству во взаимодействии с воспроизведением содержимого.
Краткое описание чертежей
Фиг. 1 является блок-схемой, иллюстрирующей пример конфигурации системы взаимодействия прикладных программ, которая является вариантом осуществления настоящего изобретения.
Фиг. 2 является блок-схемой, иллюстрирующей пример конфигурации сервера ACR (автоматическое распознавание содержимого).
Фиг. 3 является диаграммой, иллюстрирующей структуру данных опорных данных ACR.
Фиг. 4 является диаграммой, иллюстрирующей структуру данных запроса ACR.
Фиг. 5А и 5В являются диаграммами, иллюстрирующими структуры данных для ответа ACR.
Фиг. 6 является диаграммой последовательности процесса для описания работы системы взаимодействия прикладных программ.
Фиг. 7 является блок-схемой, иллюстрирующей пример конфигурации компьютера.
Осуществление изобретения
В дальнейшем предпочтительные варианты осуществления изобретения (в дальнейшем определяемые как варианты осуществления изобретения) для применения настоящего раскрытия изобретения будут описываться подробно, со ссылками на чертежи.
Пример конфигурации системы взаимодействия приложений
Фиг. 1 иллюстрирует пример конфигурации системы взаимодействия прикладных программ в качестве варианта осуществления настоящего изобретения.
Эта система 10 взаимодействия приложений идентифицирует содержимое, просматриваемое пользователем с использованием экрана телевизионного приемника в качестве монитора, выполняет приложение, подходящее для пользователя во взаимодействии с воспроизведением содержимого, и представляет информацию, подходящую для пользователя с помощью приложения, которое в данный момент выполняется.
Здесь содержимое не ограничивается программой, которая сейчас передается в эфир и которая принимается телевизионным приемником. Например, все виды аудиовизуального (AV) содержимого, такого как программа, записанная и воспроизводимая видеомагнитофоном, видеоизображение, такое как видеофильм, воспроизводимое из медиа-пакета мультимедийным проигрывателем, и движущееся изображение, скачанное через Интернет, также входят в состав содержимого. Кроме того, коммерческое обращение (в дальнейшем определяемое как CM, "commercial message") вставляется между программами или в середине программы и также включается в содержимое.
Для идентификации содержимого используется автоматическое распознавание содержимого (ACR, automatic content recognition), которое идентифицирует содержимое с помощью сравнения данных по отличительным признакам объекта (характеристическая величина), периодически извлекаемых из содержимого, которое просматривается в настоящий момент, при этом отличительные признаки объекта содержимого регистрируются в. базе данных заранее.
Система 10 взаимодействия приложений конфигурируется из передающего устройства 20, и множества приемных устройств 30, соединенных с передающим устройством 20 через широковещательную сеть 11 и двунаправленную сеть 12 связи. Широковещательная сеть 11 обозначает сеть телевизионного вещания, сеть абонентского телевидения (CATV), сеть интернет-телевидения (IPTV), и подобные сети. Двунаправленная сеть 12 связи обозначает сеть IP-связи, представленную Интернетом.
Каждое из приемных устройств 30 располагаются в доме пользователя во встроенном в телевизионный приемник состоянии или в аналогичном состоянии.
Описание передающего устройства 20
Передающее устройство 20 конфигурируется из сервера 21 содержимого, сервера
22 приложения, сервера 23 ACR, сервера 24 соответствия профиля.
Сервер 21 содержимого транслирует содержимое, такое как программа или коммерческое обращение (СМ) через широковещательную сеть 11. Кроме того, сервер 21 содержимого посылает транслируемое содержимое и связанные с содержимым метаданные на сервер 23 ACR. Метаданные включают в себя идентификатор, который обозначает приложение, которое должно выполняться во взаимодействии с воспроизведением содержимого, пункт назначения для собираемых данных, данные, которые должны использоваться в приложении, и подобные данные. Следует заметить, что к серверу 23 ACR могут поставляться данные по отличительным признакам объекта, которые показывают характеристики содержимого, вместо того чтобы поставлять содержимое.
Сервер 22 приложения поставляет приложение и данные, которые должны использоваться в приложении, через двунаправленную сеть 12 связи в ответ на запрос из приемного устройства 30.
Сервер 23 ACR удерживает в базе данных контрольные данные ACR, в которых данные по отличительным признакам объекта, извлекаемые из каждого из различных типов содержимого, которые могут просматриваться на стороне приемного устройства 30 в заданный период дискретизации, взаимодействуют с идентификатором содержимого, идентификатором приложения, и подобными типами данных. Сервер 23 ACR генерирует и возвращает ответ ACR, как ответ на запрос ACR, передаваемый от приемного устройства 30, основываясь на базе данных контрольных данных ACR.
Сервер 24 соответствия профиля выполняет согласование и фильтрацию связанных с содержимым метаданных, которые хранятся в ответе ACR, основываясь на данных профиля пользователя приемного устройства 30, включенных в запрос ACR, когда сервер 23 ACR генерирует ответ ACR, в соответствии с запросом ACR.
Следует заметить, что сервер 21 содержимого, сервер 22 приложения, сервер 23 ACR, и сервер 24 соответствия профиля, которые конфигурируют передающее устройство 30, могут быть расположены централизованно в одном месте, или могут располагаться в распределенном порядке. Кроме того, сервер 21 содержимого, сервер 22 приложения, сервер 23 ACR, и сервер 24 соответствия профиля могут соответствующим образом комбинироваться. Кроме того, может существовать множество серверов 23 ACR, и серверов 24 соответствия профиля.
Описание приемного устройства 30
Приемное устройство 30 включает в себя рендерер 31 содержимого, клиент 32 ACR, пользовательский интерфейс 33, администратор 34 профилей, и администратор 35 приложений.
Рендерер 31 содержимого собирает и ответвляет все части содержимого, отображаемые на экране телевизионного приемника, в который встраивается приемное устройство 30, и поставляет это содержимое к клиенту 32 ACR. То есть, рендерер 31 содержимого собирает и ответвляет не только содержимое, которое транслируется из сервера 21 содержимого, но также содержимое, которое вводится через различные входные терминалы (например, терминал HDMI (зарегистрированная торговая марка), и подобные терминалы) телевизионного приемника, и поставляет содержимое к клиенту 32 ACR.
Клиент 32 ACR извлекает в заданный период дискретизации данные по отличительным признакам объекта, которые показывают характеристики содержимого, из содержимого, входящего от рендерера 31. Здесь в качестве способа извлечения данных по отличительным признакам объекта используется способ извлечения сервера 23 ACR передающего устройства 20 (описывается ниже).
Кроме того, клиент 32 ACR генерирует запрос ACR, который включает в себя извлеченные данные по отличительным признакам объекта и данные профиля пользователя, и передает запрос ACR к серверу 23 ACR передающего устройства 20 через двунаправленную сеть 12 связи. Кроме того, клиент 32 ACR принимает и удерживает ответ ACR, возвращаемый от сервера 23 ACR в соответствии с переданным запросом ACR. Кроме того, клиент 32 ACR анализирует удерживаемый ответ ACR, и вызывает выполнение администратором 35 приложений такого приложения, которое соответствует просматриваемому в настоящий момент содержимому во взаимодействии с воспроизведением содержимого.
Пользовательский интерфейс 33 принимает операцию ввода данных профиля самого пользователя, операцию выбора содержимого, которое должно воспроизводиться, операцию в отношении выполненного приложения, и подобные операции.
Администратор 34 профилей генерирует данные профиля пользователя на основе вводимой информации, используя пользовательский интерфейс 33, историю операции, и подобные операции, и выводит данные профиля пользователя к клиенту 32 ACR.
Сгенерированные данные профиля пользователя могут включать в себя элементы данных, таких как демографическая характеристика пользователя (возраст, пол, профессия, образование, жилой район, адрес электронной почты, увлечения, предпочтения, язык, размер семьи, и склонность к просмотру содержимого), характеристики приемного устройства 30 (тип доступного кодера-декодера (CODEC) и подобная информация), состояние перегрузки двунаправленной сети 12 связи, информация о естественной окружающей среде (погода, температура, влажность, и подобные условия).
Администратор 35 приложений собирает данные о приложении, соответствующем содержимому, просматриваемому в настоящий момент, из сервера 22 приложения через двунаправленную сеть 12 связи и выполняет приложение в соответствии с управлением из клиента 32 ACR. Приложение, выполняемое в администраторе 35 приложений, собирает связанные с содержимым метаданные, соответствующие приложению, выполняемому в настоящий момент, из клиента 32 ACR, используя интерфейс прикладного программирования (API, Application Programming Interface) для сбора связанных с содержимым метаданных.
Пример подробной конфигурации сервера 23 ACR
Фиг. 2 иллюстрирует пример подробной конфигурации сервера 23 ACR.
Сервер 23 ACR конфигурируется из модуля 41 сбора данных содержимого, модуля 42 извлечения контрольных отличительных признаков, базы 43 данных ACR, и модуля 44 генерирования ответа ACR.
Модуль 41 сбора данных содержимого собирает данные от сервера 21 содержимого, причем такого содержимого, которое вносится в расписание для трансляции через широковещательную сеть и метаданные содержимого с помощью сервера 21 содержимого через широковещательную сеть 11, и поставляет собранное содержимое к модулю 42 извлечения контрольных отличительных признаков. Кроме того, модуль 41 сбора данных содержимого собирает различные части содержимого, которые могут просматриваться на стороне приемного устройства 30, и метаданные содержимого извне, и поставляет собранное содержимое к модулю 42 извлечения контрольных отличительных признаков.
Модуль 42 извлечения контрольных отличительных признаков извлекает в заданный период дискретизации с использованием заданного способа извлечения данных по отличительным признакам объекта, которые показывают характеристики содержимого, которое поставляется от модуля 41 сбора данных содержимого и выводит извлеченные данные по отличительным признакам объекта в базу 43 данных ACR. В качестве способа извлечения данных по отличительным признакам объекта может применяться существующий произвольный способ. Например, водяной знак, встроенный в содержимое заранее, может извлекаться и применяться в качестве отличительного признака объекта. Отпечаток пальца также может рассчитываться и применяться в качестве отличительного признака объекта.
При использовании отпечатка пальца в качестве отличительного признака объекта, даже если разрешение, формат изображения, скорость передачи в битах, и формат кодирования содержимого преобразуются, те же самые отличительные признаки объекта могут быть получены и перед, и после преобразования. Поэтому точность идентификации может быть увеличена, когда идентификации содержимого выполняется на основе данных по отличительным признакам объекта.
Следует заметить, что когда существует множество серверов 23 ACR, способы извлечения данных по отличительным признакам объекта в модулях 42 извлечения контрольных отличительных признаков необязательно являются унифицированными. Способ произвольного извлечения может применяться в каждом из серверов 23 ACR.
База 43 данных ACR генерирует и сохраняет контрольные данные ACR, в которых каждый ввод данных по отличительным признакам объекта из модуля 42 извлечения контрольных отличительных признаков взаимодействует с идентификатором содержимого, который показывает содержимое источника для извлечения данных по отличительным признакам объекта и аналогичные данные. Соответственно, данные по отличительным признакам объекта, извлекаемые из содержимого, сохраняются в базе данных. Структура данных для контрольных данных ACR будет описываться в дальнейшем со ссылкой на фиг. 3.
Модуль 44 генерирования ответа ACR идентифицирует содержимое источника для извлечения данных по отличительным признакам объекта, включенных в запрос ACR, передаваемый от клиента 32 ACR в соответствии с базой 43 данных ACR. Кроме того, модуль 44 генерирования ответа ACR генерирует ответ ACR, который включает в себя идентификатор содержимого, связанные с содержимым метаданные, и подобные данные в качестве результата идентификации. Кроме того, модуль 44 генерирования ответа ACR выполняет согласование и фильтрацию связанных с содержимым метаданных, сохраняемых в ответе ACR, в соответствии с управлением сервера 24 соответствия профиля, и передает результат в приемное устройство 30. Структура данных ответа ACR будет описываться в дальнейшем со ссылками на фиг. 5А и 5В.
Структура данных для контрольных данных ACR
Фиг. 3 иллюстрирует структуру данных для контрольных данных ACR, сохраняемых в базе 43 данных ACR сервера 23 ACR.
В контрольных данных 50 ACR идентификатор 52 содержимого, длительность 53 воспроизведения, и связанные с содержимым метаданные 54 взаимодействуют с данными 51 по отличительным признакам объекта.
Данные 51 по отличительным признакам объекта извлекаются из содержимого в модуле 42 извлечения контрольных отличительных признаков. Идентификатор 52 содержимого является информацией для идентификации содержимого источника извлечения данных 51 по отличительным признакам объекта. Длительность 53 воспроизведения показывает распределение во времени протекания процесса для содержимого, когда данные 51 по отличительным признакам объекта извлекаются из содержимого, обозначенного идентификатором 52 содержимого, и выражается с помощью истекшего времени от головной части содержимого.
Связанные с содержимым метаданные 54 включают в себя идентификатор приложения, который показывает приложение, которое должно выполняться во взаимодействии с распределением во времени протекания процесса для содержимого, при этом распределение во времени протекания процесса показывается с помощью времени 83 воспроизведения,, а содержимое показывается идентификатором 82 содержимого, информацию, которая показывает место назначения для сбора данных (сервер 22 приложения) идентификатора приложения, различные данные, которые должны использоваться выполняемым приложением.
Следует заметить, что связанные с содержимым метаданные 54 могут иметь различное содержимое, в соответствии с распределением во времени протекания процесса для содержимого, показываемого длительностью 53 воспроизведения.
Структура данных запроса ACR
Фиг. 4 иллюстрирует структуру данных для запроса ACR, сгенерированного в клиенте 32 ACR.
Запрос 60 ACR включает в себя идентификатор 61 запроса ACR, идентификатор 62 способа извлечения, сервисный идентификатор 63, данные 64 по отличительным признакам объекта, локальную временную отметку 65, данные 66 профиля пользователя, адрес 67 источника передачи, и отличительные признаки 68 объекта.
Идентификатор 61 запроса ACR является информацией для однозначной идентификации запроса 60 ACR. Идентификатор 62 способа извлечения является информацией для идентификации способа извлечения, используемого в том случае, когда извлекаются данные 64 по отличительным признакам объекта. Сервисный идентификатор 63 является информацией для выбора сервера 23 ACR, к которому передается запрос 60 ACR и из которого принимается ответ ACR, когда существует множество серверов 23 ACR.
Данные 64 по отличительным признакам объекта извлекаются из содержимого в клиенте 32 ACR. Локальная временная отметка 65 показывает распределение во времени, в котором данные 64 по отличительным признакам объекта извлекаются из содержимого, и выражается временем, показываемым локальными часами системы приемного устройства 30.
Данные 66 профиля пользователя генерируются в администраторе 34 профиля. Адрес 67 источника передачи является адресом в двунаправленной сети 12 связи клиента 32 ACR, который передает запрос 60 ACR и используется в качестве информации, которая показывает пункт назначения для возвращения ответа ACR, сгенерированный в сервере 23 ACR в соответствии с запросом 60 ACR. Отличительные признаки 68 объекта подавляют искажение запроса 60 ACR. Следует заметить, что в целом запрос 60 ACR может зашифровываться и передаваться.
Структура данных ответа ACR
Фиг. 5А и 5В иллюстрируют структуру данных ответа ACR, сгенерированного в модуле 44 генерирования ответа ACR сервера 23 ACR.
Следует заметить, что фиг. 5А иллюстрирует структуру данных ответа ACR, когда содержимое источника извлечения данных 64 по отличительным признакам объекта, которое включается в запрос 60 ACR, могло быть идентифицировано, т.е. когда содержимое, просматриваемое в данный момент, можно было идентифицировать в приемном устройстве 30. фиг. 5В иллюстрирует структуру данных ответа ACR, когда содержимое не могло быть идентифицировано.
Ответ 70 ACR (фиг. 5А), когда содержимое, просматриваемое в данный момент, можно было идентифицировать в приемном устройстве 30, включает в себя идентификатор 71 запроса ACR, идентификатор 72 способа извлечения, сервисный идентификатор 73, идентификатор 74 содержимого, длительность 75 воспроизведения, локальную временную отметку 76, связанные с содержимым метаданные 77, адрес 78 источника передачи, и отличительные признаки 79 объекта.
В то же время, ответ 70 ACR (фиг. 5В), когда содержимое, просматриваемое в данный момент, невозможно было идентифицировать в приемном устройстве 30, включает в себя идентификатор 71 запроса ACR, сервисный идентификатор 73, адрес 78 источника передачи, отличительные признаки 79 объекта, и флажок 80 идентификации неисправности.
Идентификатор 71 запроса ACR, идентификатор 72 способа извлечения, сервисный идентификатор 73 и локальная временная отметка 76 используются для идентификации запроса 60 ACR, т.е. триггера, с помощью которого генерируется ответ 70 ACR, и описывается со ссылкой на идентификатор 61 запроса ACR, идентификатор 62 способа извлечения, сервисный идентификатор 63, и локальную временную отметку 65 соответствующего запроса 60 ACR.
Идентификатор 74 содержимого, длительность 75 воспроизведения и связанные с содержимым метаданные 77 показывают результат идентификации и описываются со ссылкой на идентификатор 52 содержимого, длительность 53 воспроизведения, и связанные с содержимым метаданные 54 соответствующих контрольных данных 50 ACR.
Адрес 78 источника передачи является адресом в двунаправленной сети 12 связи сервера 23 ACR, который передает ответ 70 ACR. Отличительные признаки 79 объекта подавляют искажение ответа 70 ACR. Следует заметить, что искажение запроса может быть предотвращено за счет шифрования и передачи всего ответа 70 ACR.
Флажок 80 идентификации неисправности является флажком, который показывает содержимое источника извлечения данных 64 по отличительным признакам объекта, включенное в запрос 60 ACR от клиента 32 ACR, которое не могло быть идентифицировано в сервере 23 ACR, т.е. содержимое, просматриваемое в настоящий момент, было невозможно идентифицировать в приемном устройстве 30,
Работа с помощью системы 10 взаимодействия приложений
Далее будет описываться работа системы 10 взаимодействия приложений.
Фиг. 6 является диаграммой последовательности процесса для описания работы системы 10 взаимодействия прикладных программ.
Во время шага S11 передающее устройство 20 поставляет содержимое, которое будет в дальнейшем передаваться, и связанные с содержимым метаданные к серверу 23 ACR, как предварительно обработанная стартовая передача содержимого через широковещательную сеть 11. Сервер 23 ACR генерирует контрольные данные ACR, используя поставляемое содержимое и связанные с ним метаданные, и регистрирует контрольные данные ACR в базе данных ACR.
Как описывалось выше, после того как контрольные данные ACR, соответствующие содержимому, которое будет транслироваться в эфир, сохраняется в базе данных, описываемые ниже шаги с S12 по S15 повторяются.
Во время шага S12 передающее устройство 20 начинает передачу содержимого через широковещательную сеть 11.
В то же время, в приемном устройстве 30 администратор 34 профилей генерирует данные профиля пользователя и поставляет данные профиля пользователя к клиенту 32 ACR, как предварительная обработка приема и воспроизведение содержимого. Следует заметить, что среди элементов, включенных в данные профиля пользователя, динамически изменяемые элементы, такие как состояние перегруженности двунаправленной сети 12 связи и информация естественного окружения, впоследствии обновляются по мере необходимости.
В приемном устройстве 30 в то время как содержимое воспроизводится и просматривается, описываемые ниже шаги с S22 по S25 повторяются. Следует заметить, что содержимое может не быть содержимым, передаваемым сервером 12 содержимого.
Во время шага S22 рендерер 31 содержимого собирает и ответвляет содержимое, просматриваемое в настоящий момент, и выводит содержимое к клиенту 32 ACR. Во время шага S23 клиент 32 ACR извлекает в заданный период дискретизации данные по отличительным признакам объекта из содержимого, просматриваемого в настоящий момент, которые вводятся из рендерера 31 содержимого.
Во время шага S24 клиент 32 ACR генерирует запрос 60 ACR, включающий в себя данные по отличительным признакам объекта и данные профиля пользователя, а также передает запрос 60 ACR к серверу 23 ACR, каждый раз извлекая данные по отличительным признакам объекта.
Во время шага S13 в сервере 23 ACR, который принял запрос 60 ACR от клиента 32 ACR, модуль 44 генерирования ответа ACR ссылается на базу 43 данных ACR и идентифицирует содержимое, соответствующее данным 64 по отличительным признакам объекта, которые включены в принимаемый запрос 60 ACR.
Во время шага S14 модуль 44 генерирования ответа ACR генерирует ответ 70 ACR в соответствии с результатом идентификации содержимого. В это время модуль 44 генерирования ответа ACR выполняет согласование и фильтрацию связанных с содержимым метаданных 77, которые должны быть включены в ответ 70 ACR, основываясь на данных 66 профиля пользователя, включенных в запрос 60 ACR. Во время шага S15 модуль 44 генерирования ответа ACR передает сгенерированный ответ 70 ACR к клиенту 32 ACR.
Во время шага S25 клиент 32 ACR, который принял ответ 70 ACR от сервера 23 ACR, анализирует связанные с содержимым метаданные 77, которые включены в ответ 70 ACR, и вызывает осуществление администратором 35 приложений сбора данных и выполнения приложения, которое должно выполняться во взаимодействии с просматриваемым в настоящий момент содержимым.
Следует заметить, что связанные с содержимым метаданные 77, которые включены в принятый ответ 70 ACR, уже подвергались выполнению согласования и фильтрации в сервере 23 ACR, основываясь на данных профиля пользователя. Однако, согласование и фильтрация могут быть выполнены дополнительно в клиенте 32 ACR, основываясь на данных профиля пользователя.
Администратор 35 приложений собирает данные и выполняет приложение сервера 22 приложений. Приложение, которое выполняется в администраторе 35 приложений, собирает связанные с содержимым метаданные 77 из ответа 70 ACR, удерживаемого клиентом 32 ACR, используя интерфейс прикладного программирования (API) для сбора связанных с содержимым метаданных.
Описанные выше шаги процесса обработки с S12 по S15 и с S22 по S25 выполняются неоднократно, пока просматривается содержимое. Соответственно, подходящая для пользователя работа приложения, во взаимодействии с воспроизведением содержимого, которое просматривается в настоящий момент, становится возможной.
Например, в частном случае, когда существует сцена кормления домашнего животного в качестве подробностей определенного содержимого, если открывается, что пользователь приемного устройства 30 имеет кота, в соответствии с данными профиля пользователя, то связанная с этим информация, такая как коммерческий баннер корма для домашних кошек, место для его приобретения и подобная информация может отображаться во время сцены с помощью приложения, которое должно выполняться во взаимодействии с содержимым.
Кроме того, например когда выясняется, что в соответствии с данными профиля пользователя, родным языком пользователя приемного устройства 30 является испанский, и когда такое содержимое как программа или СМ просматриваются на языке, не являющимся испанским, то на экране могут отображаться испанские субтитры или могут выводиться комментарии на испанском с помощью приложения, которое должно выполняться во взаимодействии с содержимым.
Кроме того, например, когда район просмотра пользователя приемного устройства 30 обнаружился в соответствии с данными профиля пользователя, то для пользователя может быть представлена специфическая для района просмотра информация с помощью приложения, которое должно выполняться во взаимодействии с содержимым.
Следует заметить, что вышеописанные специфические примеры могут быть выполнены с помощью существующих технологий. Однако для действительного выполнения примеров, между приемной стороной и передающей стороной требуется множество операций связи, для того чтобы уменьшить информацию, которая должна быть представлена пользователю, при этом требуемая для пользователя информация не может быть быстро представлена.
Однако в настоящем варианте осуществления изобретения данные 66 профиля пользователя передаются включенными в запрос 60 ACR для запрашиваемой идентификации содержимого. Поэтому согласование и фильтрация могут быть выполнены таким образом, что связанные с содержимым метаданные 77 становятся подходящими для пользователя приемного устройства 70 на той стадии процесса, когда генерируется ответ 70 ACR. Поэтому подходящая для пользователя информация может быть быстро представлена пользователю.
В этой связи, каждое из передающих устройств 20 и приемных устройств 30, которые выполняют вышеописанные последовательности процессов обработки, могут не только конфигурироваться с помощью аппаратной части, но также реализовываться за счет выполнения программного обеспечения компьютера. Компьютер включает в себя следующие варианты: компьютер, встроенный в соответствующее аппаратное обеспечение, компьютер общего назначения, способный выполнять различные функции при выполнении установленных в него различных программ, и аналогичные варианты.
Фиг. 7 является блок-схемой, иллюстрирующей пример конфигурации аппаратной части вышеописанного компьютера.
В компьютере 100 центральный процессор (CPU) 101, постоянное запоминающее устройство (ROM) 102, и оперативное запоминающее устройство (RAM) 103 взаимно соединяются через шину 104.
Интерфейс 105 ввода/вывода присоединяется к шине 104. Вводное устройство 106, выходное устройство 107, запоминающее устройство 108, устройство 109 связи, и накопитель 110 присоединяется к интерфейсу 105 ввода/вывода.
Вводное устройство 106 выполнено в виде клавиатуры, манипулятора мышь, микрофона, и подобных устройств. Выходное устройство 107 выполнено в виде устройства отображения, громкоговорителя, и подобных устройств. Запоминающее устройство 108 выполнено в виде жесткого диска, энергонезависимого запоминающего устройства, и подобных устройств. Устройство 109 связи выполнено в виде сетевого интерфейса, и подобных устройств. Накопитель 110 управляет съемным носителем 111 информации, например таким как магнитный диск, оптический диск, магнитооптический диск, или полупроводниковым запоминающим устройством.
В компьютере 100, сконфигурированном, как описано выше, центральный процессор 100 загружает программу, хранящуюся в запоминающем устройстве 108, через интерфейс 105 ввода/вывода и шину 104 в оперативное запоминающее устройство (RAM) 103, и выполняет программу, таким образом выполняя вышеописанные последовательности процессов обработки.
Программа, выполняемая компьютером 100 (CPV 101), может быть записана на съемный носитель 111 информации такой, как пакетный носитель, и может таким образом обеспечиваться. Кроме того, программа может обеспечиваться через проводную или беспроводную передающую среду, такую как локальная сеть, Интернет или цифровое спутниковое вещание.
В компьютере 100 программа может быть установлена в запоминающем устройстве 108 через интерфейс 105 ввода/вывода за счет установки съемного носителя 211 информации в накопитель 210. Кроме того, программа может приниматься устройством 109 связи и устанавливаться на запоминающее устройство 108 через проводную или беспроводную передающую среду. Альтернативно, программа может устанавливаться в постоянное запоминающее устройство 102 или запоминающее устройство 108 заранее.
Следует заметить, что программа, выполняемая компьютером 100, может быть программой, обработка которой выполняется в виде временных рядов наряду с порядком, приведенном в этом описании, или может быть программой, обработка которой выполняется параллельно, или с необходимым распределением по времени, например таким как при вызове.
Следует заметить, что вариант осуществления настоящего раскрываемого изобретения не ограничивается вышеописанными вариантами осуществления изобретения, и различные изменения могут быть произведены без выхода за пределы сущности настоящего изобретения.
Список ссылочных обозначений
10 - система взаимодействия приложений,
11 - широковещательная сеть,
12 - двунаправленная сеть связи,
20 - передающее устройство,
21 - сервер содержимого,
22 - сервер приложения,
23 - сервер ACR,
24 - сервер соответствия профиля,
30 - приемное устройство,
31 - рендерер содержимого,
32 - клиент ACR,
33 - пользовательский интерфейс,
34 - администратор профилей,
35 - администратор приложений,
41 - модуль сбора данных содержимого,
42 - модуль извлечения контрольных данных,
43 - база данных ACR,
44 - модуль генерирования ответа ACR,
50 - контрольные данные ACR,
60 - запрос ACR,
66 - данные профиля пользователя,
70 - ответ ACR,
100 - компьютер,
101 - центральный процессор.

Claims (31)

1. Приемное устройство, содержащее
извлекающий модуль для извлечения, из воспроизводимого содержимого, данных об отличительных признаках объекта, указывающих характеристики содержимого;
модуль генерирования профиля для генерирования данных профиля пользователя;
модуль генерирования запроса для генерирования запроса, включающего в себя по меньшей мере данные об отличительных признаках объекта и данные профиля пользователя, передачи сгенерированного запроса на передающее устройство и приема ответа, согласованного с данными профиля пользователя в передающем устройстве возвращаемого от передающего устройства, в соответствии с запросом; и
модуль выполнения приложения для сбора данных и выполнения приложения во взаимодействии с воспроизведением содержимого, на основе принятого ответа; при этом
ответ, когда содержимое, просматриваемое в данный момент, невозможно идентифицировать в приемном устройстве, включает в себя флаг идентификации неисправности.
2. Приемное устройство по п. 1, в котором модуль генерирования выполнен с возможностью генерирования данных профиля пользователя, включающих в себя демографические характеристики пользователя.
3. Приемное устройство по п. 2, в котором модуль генерирования выполнен с возможностью генерирования запроса, включающего в себя по меньшей мере данные об отличительных признаках объекта и данные профиля пользователя, передачи сгенерированного запроса на передающее устройство, приема ответа, согласованного с данными профиля пользователя в передающем устройстве и возвращаемого передающим устройством, в соответствии с запросом, при этом данные об отличительных признаках объекта извлекаются извлекающим модулем постоянно.
4. Приемное устройство по п. 2, в котором модуль генерирования профиля дополнительно выполнен с возможностью генерирования данных профиля пользователя, включающих в себя по меньшей мере одну из характеристик приемного устройства, состояние перегруженности сети связи и информацию естественного окружения.
5. Приемное устройство по п. 2, характеризующееся тем, что встроено в устройство воспроизведения, выполненное с возможностью воспроизведения содержимого, и
дополнительно включает в себя модуль подачи содержимого, выполненный с возможностью подачи всех частей содержимого, подлежащих воспроизведению устройством воспроизведения на извлекающий модуль.
6. Способ обработки информации приемным устройством, содержащий этапы, на которых с помощью приемного устройства извлекают из воспроизводимого содержимого данные об отличительных признаках объекта, указывающие характеристики содержимого;
генерируют данные профиля пользователя;
генерируют запрос, включающий в себя по меньшей мере данные об отличительных признаках объекта и данные профиля пользователя, передают сгенерированный запрос на передающее устройство и принимают ответ, согласованный с данными профиля пользователя в передающем устройстве и возвращенный передающим устройством, в соответствии с запросом; и
собирают данные и выполняют приложение во взаимодействии с воспроизведением содержимого, на основании принятого ответа; при этом
ответ, когда содержимое, просматриваемое в данный момент, невозможно идентифицировать в приемном устройстве, включает в себя флаг идентификации неисправности.
7. Носитель данных, хранящий программу, вызывающую функционирование компьютера в качестве:
извлекающего модуля для извлечения из воспроизводимого содержимого данных об отличительных признаках объекта, указывающих характеристики содержимого;
модуля генерирования профиля для генерирования данных профиля пользователя;
модуля генерирования запроса для генерирования запроса, включающего в себя по меньшей мере данные об отличительных признаках объекта и данные профиля пользователя, передачи сгенерированного запроса на передающее устройство и приема ответа, согласованного с данными профиля пользователя в передающем устройстве и возвращаемого передающим устройством, в соответствии с запросом; и
модуля выполнения приложения для сбора данных и выполнения приложения во взаимодействии с воспроизведением содержимого, на основе принятого ответа; при этом
ответ, когда содержимое, просматриваемое в данный момент, невозможно идентифицировать в приемном устройстве, включает в себя флаг идентификации неисправности.
8. Передающее устройство, содержащее:
базу данных, указывающую соответствующее соотношение между данными об отличительных признаках объекта, указывающими характеристики содержимого, извлеченными из содержимого, идентификатором содержимого, указывающим содержимое источника извлечения, и связанными с содержимым метаданными, включающими в себя идентификатор приложения, подлежащего выполнению во взаимодействии с содержимым;
модуль генерирования ответа для идентификации содержимого источника извлечения данных об отличительных признаках объекта, включенных в запрос, передаваемый приемным устройством, в соответствии с базой данных, генерирования ответа, включающего в себя связанные с содержимым метаданные, включающие в себя идентификатор приложения, указывающий приложение, подлежащее выполнению во взаимодействии с идентифицируемым содержимым, и возвращения сгенерированного ответа приемному устройству; и
согласующий модуль для согласования связанных с содержимым метаданных, включаемых в ответ, перед возвращением, с данными профиля пользователя, включенными в запрос; при этом
ответ, когда содержимое, просматриваемое в данный момент, невозможно идентифицировать в приемном устройстве, включает в себя флаг идентификации неисправности.
9. Передающее устройство по п. 8, в котором согласующий модуль выполнен с возможностью согласования связанных с содержимым метаданных, включаемых в ответ, перед возвращением, с демографическими характеристиками пользователя приемного устройства, включенными в данные профиля пользователя.
10. Система взаимодействия прикладных программ, конфигурируемая передающим устройством и приемным устройством содержимого, при этом система содержит:
приемное устройство по п. 1; и
передающее устройство по п. 8.
RU2014152247A 2012-07-12 2013-07-02 Приемное устройство, способ обработки информации, программа, передающее устройство и система взаимодействия передающих программ RU2630432C2 (ru)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
US201261670882P 2012-07-12 2012-07-12
US61/670882 2012-07-12
PCT/JP2013/068147 WO2014010469A1 (ja) 2012-07-12 2013-07-02 受信装置、情報処理方法、プログラム、送信装置、およびアプリケーション連動システム

Publications (2)

Publication Number Publication Date
RU2014152247A RU2014152247A (ru) 2016-07-27
RU2630432C2 true RU2630432C2 (ru) 2017-09-07

Family

ID=49915172

Family Applications (1)

Application Number Title Priority Date Filing Date
RU2014152247A RU2630432C2 (ru) 2012-07-12 2013-07-02 Приемное устройство, способ обработки информации, программа, передающее устройство и система взаимодействия передающих программ

Country Status (9)

Country Link
US (1) US8966533B2 (ru)
EP (1) EP2874403A4 (ru)
JP (1) JPWO2014010469A1 (ru)
KR (1) KR20150030669A (ru)
CN (1) CN104429092B (ru)
BR (1) BR112015000144A2 (ru)
IN (1) IN2014MN02572A (ru)
RU (1) RU2630432C2 (ru)
WO (1) WO2014010469A1 (ru)

Families Citing this family (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
EP2810445B1 (en) * 2012-03-05 2017-08-02 LG Electronics Inc. Video display apparatus and operating method thereof
US10325591B1 (en) * 2014-09-05 2019-06-18 Amazon Technologies, Inc. Identifying and suppressing interfering audio content
WO2018117619A1 (en) 2016-12-21 2018-06-28 Samsung Electronics Co., Ltd. Display apparatus, content recognizing method thereof, and non-transitory computer readable recording medium
US10575950B2 (en) 2017-04-18 2020-03-03 Twelve, Inc. Hydraulic systems for delivering prosthetic heart valve devices and associated methods

Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2002209204A (ja) * 2000-04-14 2002-07-26 Nippon Telegr & Teleph Corp <Ntt> 放送情報に関連した情報の取得方法及びシステム並びに装置
US20020162118A1 (en) * 2001-01-30 2002-10-31 Levy Kenneth L. Efficient interactive TV
US20030192060A1 (en) * 2001-01-30 2003-10-09 Levy Kenneth L. Digital watermarking and television services
US20080092168A1 (en) * 1999-03-29 2008-04-17 Logan James D Audio and video program recording, editing and playback systems using metadata
US20110194730A1 (en) * 1995-07-27 2011-08-11 Rhoads Geoffrey B Control signals in streaming audio or video indicating a watermark
RU2440681C2 (ru) * 2006-09-07 2012-01-20 Майкрософт Корпорейшн Аспекты управления цифровыми правами однорангового распространения цифрового контента
RU2446583C2 (ru) * 2006-06-13 2012-03-27 Конинклейке Филипс Электроникс Н.В. Распространение окружения и контента

Family Cites Families (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US7712123B2 (en) 2000-04-14 2010-05-04 Nippon Telegraph And Telephone Corporation Method, system, and apparatus for acquiring information concerning broadcast information
JP4655534B2 (ja) 2004-08-04 2011-03-23 ソニー株式会社 端末装置およびデータ処理方法、プログラム並びに記録媒体
JP4534791B2 (ja) * 2005-02-23 2010-09-01 ソニー株式会社 Ｃｍ検索方法、ｃｍ検索結果受給方法、ｃｍ検索装置、ｃｍ検索結果受給装置及びｃｍ録画予約システム
US20080112690A1 (en) * 2006-11-09 2008-05-15 Sbc Knowledge Venturses, L.P. Personalized local recorded content
US8667542B1 (en) * 2009-01-05 2014-03-04 Sprint Communications Company L.P. System and method of filtered presentation of broadcast messages by mobile devices
US8458749B2 (en) * 2009-12-02 2013-06-04 At&T Intellectual Property I, Lp System and method for an interactive internet radio application in an internet protocol television system
US9374620B2 (en) 2011-10-21 2016-06-21 Sony Corporation Terminal apparatus, server apparatus, information processing method, program, and interlocked application feed system
US9015785B2 (en) 2011-11-29 2015-04-21 Sony Corporation Terminal apparatus, server apparatus, information processing method, program, and linking application supply system

Patent Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20110194730A1 (en) * 1995-07-27 2011-08-11 Rhoads Geoffrey B Control signals in streaming audio or video indicating a watermark
US20080092168A1 (en) * 1999-03-29 2008-04-17 Logan James D Audio and video program recording, editing and playback systems using metadata
JP2002209204A (ja) * 2000-04-14 2002-07-26 Nippon Telegr & Teleph Corp <Ntt> 放送情報に関連した情報の取得方法及びシステム並びに装置
US20020162118A1 (en) * 2001-01-30 2002-10-31 Levy Kenneth L. Efficient interactive TV
US20030192060A1 (en) * 2001-01-30 2003-10-09 Levy Kenneth L. Digital watermarking and television services
RU2446583C2 (ru) * 2006-06-13 2012-03-27 Конинклейке Филипс Электроникс Н.В. Распространение окружения и контента
RU2440681C2 (ru) * 2006-09-07 2012-01-20 Майкрософт Корпорейшн Аспекты управления цифровыми правами однорангового распространения цифрового контента

Also Published As

Publication number Publication date
EP2874403A1 (en) 2015-05-20
EP2874403A4 (en) 2016-03-02
JPWO2014010469A1 (ja) 2016-06-23
CN104429092B (zh) 2019-02-22
US8966533B2 (en) 2015-02-24
CN104429092A (zh) 2015-03-18
US20140020006A1 (en) 2014-01-16
WO2014010469A1 (ja) 2014-01-16
KR20150030669A (ko) 2015-03-20
RU2014152247A (ru) 2016-07-27
IN2014MN02572A (ru) 2015-07-24
BR112015000144A2 (pt) 2017-06-27

Similar Documents

Publication Publication Date Title
RU2601446C2 (ru) Оконечное устройство, серверное устройство, способ обработки информации, программа и система подачи сцепленного приложения
RU2632403C2 (ru) Оконечное устройство, устройство сервера, способ обработки информации, программа и система поставки связанного приложения
CA2862575C (en) Video display apparatus and operating method thereof
KR102105313B1 (ko) 셋탑 박스에서 오디오 핑거프린트들의 시퀀스 생성
KR20130115389A (ko) 진보된 텔레비전 서비스의 이용을 보고하기 위한 수신기와 방법
JP2015513247A (ja) 音声−映像レンダリングデバイスの番組切替え表示制御
RU2630261C2 (ru) Передающее устройство, способ обработки информации, программа, приемное устройство и система взаимодействия приложения
RU2603629C2 (ru) Оконечное устройство, серверное устройство, способ обработки информации, программа и система предоставления связанных приложений
JP2016514391A (ja) 映像表示装置及びその動作方法
EP2442581A1 (en) Video assets having associated graphical descriptor data
US11930248B2 (en) Information processing apparatus, information processing method, transmission apparatus, and transmission method
KR20180083132A (ko) 전자 장치 및 그 동작방법
CN105530523B (zh) 一种业务实现方法及设备
RU2630432C2 (ru) Приемное устройство, способ обработки информации, программа, передающее устройство и система взаимодействия передающих программ
US11849187B2 (en) System, device, and processes for intelligent start playback of program content
KR20160061019A (ko) 영상 표시 장치 및 그 동작 방법
JP2022183550A (ja) 受信装置、クライアント端末装置、およびプログラム
RU2628773C2 (ru) Устройство обработки информации, способ обработки информации, программа и система совместного использования контента

Legal Events

Date Code Title Description
MM4A The patent is invalid due to non-payment of fees

Effective date: 20200703