KR20200101999A - 디지털 미디어 콘텐츠 관리 시스템 및 방법 - Google Patents
디지털 미디어 콘텐츠 관리 시스템 및 방법 Download PDFInfo
- Publication number
- KR20200101999A KR20200101999A KR1020207024026A KR20207024026A KR20200101999A KR 20200101999 A KR20200101999 A KR 20200101999A KR 1020207024026 A KR1020207024026 A KR 1020207024026A KR 20207024026 A KR20207024026 A KR 20207024026A KR 20200101999 A KR20200101999 A KR 20200101999A
- Authority
- KR
- South Korea
- Prior art keywords
- content
- display
- data communication
- display device
- processor
- Prior art date
Links
- 238000000034 method Methods 0.000 title claims abstract description 60
- 230000006854 communication Effects 0.000 claims description 134
- 238000004891 communication Methods 0.000 claims description 134
- 230000005540 biological transmission Effects 0.000 claims description 26
- 238000012545 processing Methods 0.000 claims description 24
- 238000007726 management method Methods 0.000 abstract description 19
- 238000010411 cooking Methods 0.000 description 16
- 239000004615 ingredient Substances 0.000 description 10
- 230000008569 process Effects 0.000 description 6
- 238000004590 computer program Methods 0.000 description 5
- 230000009471 action Effects 0.000 description 4
- 239000008267 milk Substances 0.000 description 4
- 235000013336 milk Nutrition 0.000 description 4
- 210000004080 milk Anatomy 0.000 description 4
- 238000004422 calculation algorithm Methods 0.000 description 3
- 230000000694 effects Effects 0.000 description 3
- 230000006870 function Effects 0.000 description 3
- 230000008859 change Effects 0.000 description 2
- 230000000295 complement effect Effects 0.000 description 2
- 238000010586 diagram Methods 0.000 description 2
- 230000006872 improvement Effects 0.000 description 2
- 238000012544 monitoring process Methods 0.000 description 2
- 230000006855 networking Effects 0.000 description 2
- 238000012546 transfer Methods 0.000 description 2
- 241000723347 Cinnamomum Species 0.000 description 1
- 230000007175 bidirectional communication Effects 0.000 description 1
- 235000008429 bread Nutrition 0.000 description 1
- 235000017803 cinnamon Nutrition 0.000 description 1
- 230000001419 dependent effect Effects 0.000 description 1
- 238000011161 development Methods 0.000 description 1
- 235000013601 eggs Nutrition 0.000 description 1
- 230000005672 electromagnetic field Effects 0.000 description 1
- 235000012054 meals Nutrition 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 230000003287 optical effect Effects 0.000 description 1
- 230000004044 response Effects 0.000 description 1
- 238000012552 review Methods 0.000 description 1
- 238000013515 script Methods 0.000 description 1
- 230000001360 synchronised effect Effects 0.000 description 1
Images
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
- H04N21/41—Structure of client; Structure of client peripherals
- H04N21/4104—Peripherals receiving signals from specially adapted client devices
- H04N21/4122—Peripherals receiving signals from specially adapted client devices additional display device, e.g. video projector
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
- H04N21/41—Structure of client; Structure of client peripherals
- H04N21/4104—Peripherals receiving signals from specially adapted client devices
- H04N21/4126—The peripheral being portable, e.g. PDAs or mobile phones
- H04N21/41265—The peripheral being portable, e.g. PDAs or mobile phones having a remote control device for bidirectional communication between the remote control device and client device
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
- H04N21/41—Structure of client; Structure of client peripherals
- H04N21/4104—Peripherals receiving signals from specially adapted client devices
- H04N21/4126—The peripheral being portable, e.g. PDAs or mobile phones
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
- H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
- H04N21/4302—Content synchronisation processes, e.g. decoder synchronisation
- H04N21/4307—Synchronising the rendering of multiple content streams or additional data on devices, e.g. synchronisation of audio on a mobile phone with the video output on the TV screen
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
- H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
- H04N21/4302—Content synchronisation processes, e.g. decoder synchronisation
- H04N21/4307—Synchronising the rendering of multiple content streams or additional data on devices, e.g. synchronisation of audio on a mobile phone with the video output on the TV screen
- H04N21/43072—Synchronising the rendering of multiple content streams or additional data on devices, e.g. synchronisation of audio on a mobile phone with the video output on the TV screen of multiple content streams on the same device
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
- H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
- H04N21/4302—Content synchronisation processes, e.g. decoder synchronisation
- H04N21/4307—Synchronising the rendering of multiple content streams or additional data on devices, e.g. synchronisation of audio on a mobile phone with the video output on the TV screen
- H04N21/43079—Synchronising the rendering of multiple content streams or additional data on devices, e.g. synchronisation of audio on a mobile phone with the video output on the TV screen of additional data with content streams on multiple devices
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
- H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
- H04N21/431—Generation of visual interfaces for content selection or interaction; Content or additional data rendering
- H04N21/4312—Generation of visual interfaces for content selection or interaction; Content or additional data rendering involving specific graphical features, e.g. screen layout, special fonts or colors, blinking icons, highlights or animations
- H04N21/4316—Generation of visual interfaces for content selection or interaction; Content or additional data rendering involving specific graphical features, e.g. screen layout, special fonts or colors, blinking icons, highlights or animations for displaying supplemental content in a region of the screen, e.g. an advertisement in a separate window
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
- H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
- H04N21/434—Disassembling of a multiplex stream, e.g. demultiplexing audio and video streams, extraction of additional data from a video stream; Remultiplexing of multiplex streams; Extraction or processing of SI; Disassembling of packetised elementary stream
- H04N21/4345—Extraction or processing of SI, e.g. extracting service information from an MPEG stream
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
- H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
- H04N21/436—Interfacing a local distribution network, e.g. communicating with another STB or one or more peripheral devices inside the home
- H04N21/43615—Interfacing a Home Network, e.g. for connecting the client to a plurality of peripherals
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
- H04N21/45—Management operations performed by the client for facilitating the reception of or the interaction with the content or administrating data related to the end-user or to the client device itself, e.g. learning user preferences for recommending movies, resolving scheduling conflicts
- H04N21/4508—Management of client data or end-user data
- H04N21/4532—Management of client data or end-user data involving end-user characteristics, e.g. viewer profile, preferences
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
- H04N21/45—Management operations performed by the client for facilitating the reception of or the interaction with the content or administrating data related to the end-user or to the client device itself, e.g. learning user preferences for recommending movies, resolving scheduling conflicts
- H04N21/462—Content or additional data management, e.g. creating a master electronic program guide from data received from the Internet and a Head-end, controlling the complexity of a video stream by scaling the resolution or bit-rate based on the client capabilities
- H04N21/4622—Retrieving content or additional data from different sources, e.g. from a broadcast channel and the Internet
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/60—Network structure or processes for video distribution between server and client or between remote clients; Control signalling between clients, server and network components; Transmission of management data between server and client, e.g. sending from server to client commands for recording incoming content stream; Communication details between server and client
- H04N21/63—Control signaling related to video distribution between client, server and network components; Network processes for video distribution between server and clients or between remote clients, e.g. transmitting basic layer and enhancement layers over different transmission paths, setting up a peer-to-peer communication via Internet between remote STB's; Communication protocols; Addressing
- H04N21/643—Communication protocols
- H04N21/64322—IP
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/80—Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
- H04N21/81—Monomedia components thereof
- H04N21/8126—Monomedia components thereof involving additional data, e.g. news, sports, stocks, weather forecasts
- H04N21/8133—Monomedia components thereof involving additional data, e.g. news, sports, stocks, weather forecasts specifically related to the content, e.g. biography of the actors in a movie, detailed information about an article seen in a video program
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
- H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
- H04N21/435—Processing of additional data, e.g. decrypting of additional data, reconstructing software from modules extracted from the transport stream
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
- H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
- H04N21/436—Interfacing a local distribution network, e.g. communicating with another STB or one or more peripheral devices inside the home
- H04N21/4363—Adapting the video stream to a specific local network, e.g. a Bluetooth® network
- H04N21/43637—Adapting the video stream to a specific local network, e.g. a Bluetooth® network involving a wireless protocol, e.g. Bluetooth, RF or wireless LAN [IEEE 802.11]
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/60—Network structure or processes for video distribution between server and client or between remote clients; Control signalling between clients, server and network components; Transmission of management data between server and client, e.g. sending from server to client commands for recording incoming content stream; Communication details between server and client
- H04N21/61—Network physical structure; Signal processing
- H04N21/6156—Network physical structure; Signal processing specially adapted to the upstream path of the transmission network
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/60—Network structure or processes for video distribution between server and client or between remote clients; Control signalling between clients, server and network components; Transmission of management data between server and client, e.g. sending from server to client commands for recording incoming content stream; Communication details between server and client
- H04N21/61—Network physical structure; Signal processing
- H04N21/6156—Network physical structure; Signal processing specially adapted to the upstream path of the transmission network
- H04N21/6168—Network physical structure; Signal processing specially adapted to the upstream path of the transmission network involving cable transmission, e.g. using a cable modem
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/60—Network structure or processes for video distribution between server and client or between remote clients; Control signalling between clients, server and network components; Transmission of management data between server and client, e.g. sending from server to client commands for recording incoming content stream; Communication details between server and client
- H04N21/61—Network physical structure; Signal processing
- H04N21/6156—Network physical structure; Signal processing specially adapted to the upstream path of the transmission network
- H04N21/6175—Network physical structure; Signal processing specially adapted to the upstream path of the transmission network involving transmission via Internet
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/60—Network structure or processes for video distribution between server and client or between remote clients; Control signalling between clients, server and network components; Transmission of management data between server and client, e.g. sending from server to client commands for recording incoming content stream; Communication details between server and client
- H04N21/61—Network physical structure; Signal processing
- H04N21/6156—Network physical structure; Signal processing specially adapted to the upstream path of the transmission network
- H04N21/6193—Network physical structure; Signal processing specially adapted to the upstream path of the transmission network involving transmission via a satellite
Landscapes
- Engineering & Computer Science (AREA)
- Signal Processing (AREA)
- Multimedia (AREA)
- Databases & Information Systems (AREA)
- Computer Networks & Wireless Communication (AREA)
- Business, Economics & Management (AREA)
- Marketing (AREA)
- Information Transfer Between Computers (AREA)
- Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)
- Management, Administration, Business Operations System, And Electronic Commerce (AREA)
- Physics & Mathematics (AREA)
- Astronomy & Astrophysics (AREA)
- General Physics & Mathematics (AREA)
Abstract
원래 콘텐츠, 다른 콘텐츠, 및 연관된 데이터가 일차 디스플레이 디바이스와 하나 이상의 이차 디바이스 사이에서 상호작용하고 플로우할 수 있는 멀티디바이스, 멀티스크린 경험을 제공하는 시스템 및 방법이 본원에 개시된다. 특히, 본원에 개시되는 시스템 및 방법은 원래 콘텐츠, 다른 콘텐츠, 및 연관된 데이터가 디바이스 사이에서 상호작용하고 플로우할 수 있는 멀티디바이스, 멀티스크린 경험을 제공함으로써 디지털 미디어 콘텐츠의 전달 및 관리를 최종 사용자에게 제공한다. 시스템 및 방법은 디바이스를 그의 홈 Wi-Fi 및 콘텐츠 소비 시스템으로 통합함으로써 개인이 가상 범용 홈 상업 및 감시 에코시스템을 생성할 수 있게 한다.
Description
본 특허 문헌은 일반적으로 디지털 미디어 콘텐츠의 전달 및 관리를 제공하는 시스템 및 방법에 관한 것이고, 더욱 특히, 원래 콘텐츠, 다른 콘텐츠, 및 연관된 데이터가 일차 디스플레이 디바이스와 하나 이상의 이차 디바이스 사이에서 상호작용하고 플로우할 수 있는 멀티디바이스, 멀티스크린 경험을 제공하는 시스템 및 방법에 관한 것이다.
휴대용 미디어 플레이어, 소셜 네트워킹 서비스, "스마트" 인터넷 연결 디바이스, 개선 유선 / 무선 데이터 송신 속도 등의 연속된 발달에 따라, 개별 사용자는 점점 더 많은 디지털 미디어 콘텐츠를 생성, 공유, 발견 및 소비하기 위해 더 많은 방법 및 매체를 계속해서 갖는다. 현재, 엔터테인먼트, 교육, 및 상업 목적을 위해 디지털 미디어 콘텐츠와 상호작용하도록 소비자에 의해 사용되는 다수의 전자 디바이스가 존재한다. 이들 전자 디바이스는 인터넷, 케이블, 위성 등으로부터 디지털 미디어 콘텐츠를 획득하고, 텔레비전과 같은 미디어 디바이스 또는 개별 디바이스의 구성요소일 수 있는 오디오 및/또는 비디오 디스플레이(들)를 통해 디지털 미디어 콘텐츠를 사용자에게 제시하거나 스트리밍하는 미디어 디바이스를 포함한다. 이들 미디어 디바이스의 일부 예는 셋톱 박스, 비디오 스트리밍 디바이스(예를 들어, Apple TV® 및 Roku®), 스마트 텔레비전, 및 게임 콘솔(예를 들어, Sony PlayStation® 및 Xbox One®)을 포함한다. 정보를 수집하기 위해 사용되는 다른 널리 공지된 전자 디바이스는 랩톱 및 데스크톱 컴퓨터, 태블릿, 넷북, 및 스마트폰을 포함한다. 이들 디바이스는 스트리밍 비디오를 시청하고, 음악을 듣고, 친구와 채팅하고, 소셜 네트워킹에 참여하고, 쇼핑하고, 및 일반적으로 인터넷을 서핑하기 위해 종종 사용된다.
더욱이, 많은 소비자는 종종 이들 디바이스 중 2개 이상을 동시에 사용한다. 예를 들어, 텔레비전 상에서 라이브 스트리밍 축구 게임을 시청하는 동안, 사용자는 태블릿 또는 스마트폰을 사용하여 그 또는 그녀의 상상 축구 팀의 순위를 체크하고, 그 또는 그녀의 좋아하는 플레이어의 셔츠를 구매하고, 친구가 그에게 말하는 것을 문자로 보내서 게임을 턴 온하는 것 등을 할 수 있다. 더욱이, 사용자가 텔레비전 상에서 콘텐츠의 소비 경험을 증대시킬 수 있는 다른 방식이 있다. 예를 들어, 축구 게임을 시청하는 동안, 사용자는 컴퓨터, 넷북, 태블릿, 스마트폰 등을 사용하여 게임(예를 들어, 현재 플레이오프 스탠딩)과 관련되는 토픽에 관해 온라인 검색을 수행하고, 그 다음, 토픽에 관한 부가 정보를 갖는 사이트를 내비게이션할 수 있다.
현재, 사용자의 텔레비전과 같은 하나의 디바이스 상에서 사용자에게 제시되는 현재 미디어 콘텐츠와 관련되는 부가 정보를 획득하기 위해, 사용자는 그러한 디바이스 또는 이차 디바이스 상에서 이와 같은 부가 정보를 획득하도록 상당한 양의 노력을 가해야 한다. 예를 들어, 사용자는 인터넷 검색 용어를 공식화하고, 검색 결과를 검토하고, 선택된 사이트를 내비게이션하여 정보가 사용자에 의해 요구되는 정보인지를 판단하는 것 등을 해야할 것이다. 사용자는 그/그녀가 원하는 정확한 정보를 발견하기 전에 이와 같은 프로세스를 수회 반복해야 할 수 있다. 이와 같은 프로세스는 지루하고 불편할 수 있다. 2개의 디바이스는 한쪽으로부터의 디지털 미디어 콘텐츠가 다른 쪽으로 흐르는 것 없이 별개이고 독립적이다.
더욱이, 다수의 디바이스 상에서 디지털 미디어 콘텐츠의 소비가 사용자에 의해 조정될 수 있지만, 분리 디지털 미디어 콘텐츠는 단일 디바이스 상에서 사용자에게 동시에 제시될 수 없다. 예를 들어, 사용자가 텔레비전 상에서 일차 소스 콘텐츠, 예컨대 생방송을 시청하고 있지만, 이때 비디오 스트리밍 디바이스, 예컨대 Apple TV®를 사용하여 이차 디지털 미디어 콘텐츠를 시청하기를 원하면, 사용자는 생방송을 수신하는 셋톱 박스가 텔레비전의 제1 고화질 멀티미디어 인터페이스("HDMI") 입력에 연결되는 반면에 비디오 스트리밍 디바이스가 제2 HDMI 입력에 연결되고 텔레비전이 일반적으로 2개의 개별 입력에 의해 수신되는 콘텐츠를 동시에 디스플레이할 수 없으므로 텔레비전의 소스 입력 사이에서 스위칭해야 한다. 다시 말하면, 셋톱 박스 및 비디오 스트리밍 디바이스가 사용자의 텔레비전과 병렬로 연결되기 때문에, 병렬 구성은 소스 입력을 스위칭함으로써 원래 콘텐츠의 대체만을 허용하여, 2개의 디바이스로부터의 디지털 미디어 콘텐츠는 사용자에 의해 동시에 및/또는 동기적으로 소비될 수 없다.
본 발명의 내용 중에 포함되어 있다.
따라서, 원래 콘텐츠(즉, 일차 소스 콘텐츠 및 관련 메타데이터, 다른 콘텐츠(즉, 이차 소스(들) 콘텐츠 및 관련 메타데이터 및 디바이스 제어 명령(집합적 및 개별적 디지털 미디어 콘텐츠 - 콘텐츠))가 일차 디스플레이 디바이스와 하나 이상의 이차 디바이스 사이에서 상호작용하고 플로우할 수 있는 멀티디바이스, 멀티스크린 경험을 제공하는 시스템 및 방법이 본원에 개시된다. 더욱 특히, 본원에 개시되는 시스템 및 방법은 일차 소스 콘텐츠, 일차 소스 콘텐츠 메타데이터, 다른 이차 소스(들) 콘텐츠, 이차 소스(들) 메타데이터 및 디바이스 제어 명령이 디바이스 사이에서 상호작용하고 플로우할 수 있는 멀티디바이스, 멀티스크린 경험을 제공함으로써 콘텐츠의 전달 및 관리를 최종 사용자에게 제공한다. 시스템 및 방법은 디바이스를 그의 홈 Wi-Fi 및 콘텐츠 생성, 분배, 발견 및 소비 시스템으로 통합함으로써 개인이 가상 범용 홈 엔터테인먼트, 교육, 상업 및 감시 에코시스템을 생성할 수 있게 한다.
예시적 구현예에 따르면, 콘텐츠의 프리젠테이션을 관리하는 디바이스가 제공되며 디바이스는 일차 소스 콘텐츠(및 가능하게는 관련 메타데이터)를 수신하는 입력 및 일차 소스 콘텐츠(및 가능하게는 관련 메타데이터)를 제1 디스플레이 디바이스에 송신하여 그 위에 디스플레이되는 출력을 포함한다. 디바이스는 일차 소스 콘텐츠를 식별하기 위해 일차 소스 콘텐츠(및 가능하게는 관련 메타데이터)를 해석하고, 일차 소스 콘텐츠와 연관되는 이차 데이터 소스로부터 부가 디지털 정보에 액세스하고, 식별된 일차 소스 콘텐츠와 연관되는 부가 디지털 정보가 제1 디스플레이 디바이스 또는 제2 디스플레이 디바이스 중 적어도 하나 상에 제시되게 하는 하나 이상의 프로세서를 더 포함한다.
다른 구현예에 따르면, 콘텐츠의 프리젠테이션을 관리하는 방법이 본원에 개시된다. 방법은 입력 포트에 의해 일차 소스 콘텐츠(및 가능하게는 관련 메타데이터)를 수신하는 단계, 일차 소스 콘텐츠(및 가능하게는 관련 메타데이터)를 출력 포트에 의해 제1 디스플레이 디바이스에 송신하여 그 위에 디스플레이되는 단계, 일차 소스 콘텐츠에 의해 데이터 콘텐츠를 식별하기 위해 일차 소스 콘텐츠(및 가능하게는 관련 메타데이터)를 해석하는 단계, 일차 소스 콘텐츠와 연관되는 데이터 소스로부터 부가 디지털 정보에 액세스하는 단계, 및 일차 소스 콘텐츠와 연관되는 부가 디지털 정보를 송신하여 제1 디스플레이 디바이스 또는 제2 디스플레이 디바이스 중 적어도 하나 상에 제시되는 단계를 포함한다.
다른 구현예에 따르면, 콘텐츠의 프리젠테이션을 관리하는 시스템이 본원에 개시되며 시스템은 제1 디스플레이 디바이스, 제2 디스플레이 디바이스, 및 데이터 통신 허브를 포함한다. 데이터 통신 허브는 일차 소스 콘텐츠를 수신하도록 통신 결합되는 입력, 제1 디스플레이 디바이스에 통신 결합되는 출력, 인터넷 및 이차 시스템과 통신 결합되는 적어도 하나의 통신 인터페이스 및 프로세서를 더 포함한다. 더욱이, 프로세서는 소프트웨어를 가지며 소프트웨어는 프로세서 상에 실행될 때, 프로세서는 일차 소스 콘텐츠를 제1 디스플레이 디바이스의 출력을 통해 송신하여 그 위에 디스플레이되게 하고, 일차 소스 콘텐츠의 요소를 식별하기 위해 일차 소스 콘텐츠를 해석하게 하고, 데이터 통신 허브에 통신 결합되는 데이터 소스로부터 전자 정보에 액세스하고, 부가 디지털 정보가 일차 소스 콘텐츠의 식별된 요소와 연관되게 하고, 식별된 요소와 연관되는 부가 디지털 정보를 제1 디스플레이 디바이스 또는 제2 디스플레이 디바이스 중 적어도 하나 상에 제시하게 한다.
구현예의 다양한 새로운 상세 및 요소의 조합을 포함하는 본원에 설명되는 상기 및 다른 바람직한 특징은 이제 첨부 도면을 참조하여 더욱 특히 설명되고 청구항에 언급될 것이다. 특정 방법 및 장치는 예시로서만 도시되고 청구항의 제한으로서 도시되지 않는다는 점이 이해될 것이다. 당업자에 의해 이해되는 바와 같이, 교시의 원리 및 특징은 본원에서 청구항의 범위로부터 벗어나는 것 없이 다양한 및 다수의 구현예에 이용될 수 있다.
본 발명의 내용 중에 포함되어 있다.
본 명세서의 일부로서 포함되는 첨부 도면은 현재 바람직한 구현예를 예시하고 위에 주어진 일반적 설명 및 아래에 주어지는 바람직한 구현예의 상세한 설명과 함께 본원에 설명되는 원리를 설명하고 교시하는 역할을 한다.
도 1은 본 개시의 예시적 구현예에 따른 디지털 미디어 콘텐츠 관리 시스템을 예시한다.
도 2는 본 개시의 예시적 구현예에 따른 데이터 통신 허브의 예시적 구성요소를 예시하는 블록도를 예시한다.
도 3은 본 개시의 예시적 구현예에 따른 디지털 미디어 콘텐츠 관리 방법을 예시한다.
도 4는 본 개시의 예시적 구현예에 따른 다른 디지털 미디어 콘텐츠 관리 방법을 예시한다.
도면은 반드시 축척에 따라 도시되는 것은 아니고 유사한 구조 또는 기능의 요소는 도면 도처에서 예시적 목적을 위해 동일한 참조 숫자에 의해 일반적으로 표현된다. 도면은 본원에 설명되는 다양한 구현예의 설명을 용이하게 하도록 단지 의도되고 도면은 본원에 개시되는 교시의 모든 양태를 설명하지 않고 청구항의 범위를 제한하지 않는다.
도 1은 본 개시의 예시적 구현예에 따른 디지털 미디어 콘텐츠 관리 시스템을 예시한다.
도 2는 본 개시의 예시적 구현예에 따른 데이터 통신 허브의 예시적 구성요소를 예시하는 블록도를 예시한다.
도 3은 본 개시의 예시적 구현예에 따른 디지털 미디어 콘텐츠 관리 방법을 예시한다.
도 4는 본 개시의 예시적 구현예에 따른 다른 디지털 미디어 콘텐츠 관리 방법을 예시한다.
도면은 반드시 축척에 따라 도시되는 것은 아니고 유사한 구조 또는 기능의 요소는 도면 도처에서 예시적 목적을 위해 동일한 참조 숫자에 의해 일반적으로 표현된다. 도면은 본원에 설명되는 다양한 구현예의 설명을 용이하게 하도록 단지 의도되고 도면은 본원에 개시되는 교시의 모든 양태를 설명하지 않고 청구항의 범위를 제한하지 않는다.
본원에 개시되는 특징 및 교시 각각은 개별적으로 또는 다른 특징 및 교시와 함께 이용될 수 있다. 이들 부가 특징 및 교시 중 다수를 개별적으로 및 조합하여 둘 다 이용하는 대표적인 예는 첨부 도면을 참조하여 더 상세히 설명된다. 이와 같은 상세한 설명은 본 교시의 바람직한 양태를 실시하는 추가 상세를 당업자에게 교시하도록 단지 의도되고 청구항의 범위를 제한하도록 의도되지 않는다. 따라서, 이하의 상세한 설명에 개시되는 특징의 조합은 가장 넓은 의미에서 교시를 실시하기 위해 필요하지 않을 수 있고, 본 교시의 특히 대표적인 예를 설명하기 위해 단지 그 대신에 교시된다.
이하의 기재에서, 설명의 목적만을 위해, 특정 명명법은 본 발명의 철저한 이해를 제공하기 위해 진술된다. 그러나, 이들 특정 상세는 본 발명을 실시하도록 요구되지 않는다는 점이 당업자에게 분명할 것이다.
이하의 상세한 설명의 일부 부분은 컴퓨터 메모리 내의 데이터 비트의 동작의 알고리즘 및 심볼 표현에 관해 제시된다. 이들 알고리즘 설명 및 표현은 작업의 본질을 다른 당업자에게 가장 효과적으로 전달하기 위해 데이터 처리 기술에 숙련된 자에 의해 사용되는 수단이다. 알고리즘은 여기서, 및 일반적으로, 원하는 결과를 초래하는 단계의 자기 일관적 시퀀스인 것으로 생각된다. 단계는 물리적 양의 물리적 조작을 필요로 하는 것이다. 통상, 반드시 필요한 것은 아니지만, 이들 양은 저장, 전송, 결합, 비교, 및 다른 방법으로 조작될 수 있는 전기 또는 자기 신호의 형태를 취한다. 이들 신호를 데이터, 비트, 값, 요소, 심볼, 문자, 항, 수 등으로 언급하는 것이 때때로, 주로 통상의 사용의 이유로 편리한 것으로 증명되었다. 그러나, 이들 및 유사한 용어의 모두는 적절한 물리적 양과 연관되고 이들 양에 적용되는 단지 편리한 라벨인 점이 기억되어야 한다. 이하의 논의로부터 분명한 바와 같이 달리 구체적으로 명시되지 않는 한, 설명 도처에서, "처리하는" 또는 "컴퓨팅하는" 또는 "산출하는" 또는 "판단하는" 등과 같은 용어를 이용하는 논의는 컴퓨터 시스템의 레지스터 및 메모리 내에서 물리적(전자적) 양으로 표현되는 디지털 데이터를 컴퓨터 시스템 메모리 또는 레지스터 또는 다른 이와 같은 정보 저장, 송신 또는 디스플레이 디바이스 내에서 물리적 양으로 유사하게 표현되는 다른 디지털 데이터로 조작하고 변환하는 컴퓨터 시스템, 또는 유사한 전자 컴퓨팅 디바이스의 액션 및 프로세스를 언급한다는 점이 이해된다.
본원에 제시되는 알고리즘은 임의의 특정 컴퓨터 또는 다른 장치와 내재적으로 관련되지 않는다. 다양한 일반 목적 시스템은 본원에서의 교시에 따라 프로그램과 사용될 수 있거나, 요구된 방법 단계를 수행하기 위해 더 전문적인 장치를 구성하는 것이 편리한 것으로 증명될 수 있다. 다양한 이들의 시스템에 대한 요구된 구조는 아래의 설명으로부터 나타날 것이다. 다양한 프로그래밍 언어는 본원에 설명되는 바와 같이 본 발명의 교시를 구현하기 위해 사용될 수 있다는 점이 이해될 것이다.
더욱이, 대표적인 예 및 종속항의 다양한 특징은 본 교시의 부가적인 유용한 구현예를 제공하기 위해 구체적으로 및 명시적으로 열거되지 않는 방식으로 조합될 수 있다. 또한 도면에 도시된 구성요소의 치수 및 형상은 본 교시가 어떻게 실시되는지를 이해하는데 도움이 되도록 설계되지만, 예에 도시된 치수 및 형상을 제한하도록 의도되지 않는다는 점이 분명히 주목된다.
본원에 개시되는 시스템 및 방법은 "콘텐츠"의 전달 및 관리를 최종 사용자에게 제공한다. 본 개시의 맥락에 대해, "콘텐츠"는 오디오, 비디오, 이미지, 메타데이터, 맥락 데이터 및 트랜잭션 데이터를 포함하지만, 이에 제한되지 않고, 용어 "사용자" 또는 "최종 사용자"는 "시청자" 및/또는 "개인" 및/또는 "소비자"와 교환 가능하게 사용된다. 본원에 개시되는 시스템 및 방법은 제1 또는 일차 소스 콘텐츠, 일차 소스 콘텐츠 메타데이터, 이차 소스(들) 콘텐츠, 이차 소스(들) 메타데이터 및 디바이스 제어 명령, 집합적 및 개별적 디지털 미디어 콘텐츠로부터의 콘텐츠 - 콘텐츠가 일차 디스플레이 디바이스와 하나 이상의 이차 디바이스 사이에서 상호작용하고 플로우할 수 있는 멀티디바이스, 멀티스크린 경험을 제공한다. 시스템은 디바이스(하드웨어 및 소프트웨어)를 그의 홈 Wi-Fi 및 콘텐츠 생성, 조작, 분배, 발견, 감시 및/또는 소비 시스템(들)으로 통합함으로써 개인이 가상 범용(일반적으로 디바이스 제조자 및/또는 운영 체제에 불가지론적) 홈 엔터테인먼트, 교육, 상업 및 감시 에코시스템을 생성하는 것을 허용한다.
도 1은 본 개시의 예시적 구현예에 따른 디지털 미디어 콘텐츠 관리 시스템을 예시한다. 예시적 시스템은 사용자의 집, 호텔 객실, 상업적 기관 등과 같은 프레미스에서 구현될 수 있는 것이 생각된다. 바람직하게, 시스템은 연결을 일차 소스 콘텐츠, 적어도 하나의 디스플레이 디바이스에 제공하고 바람직하게는 액세스를 유선 또는 무선 Wi-Fi 네트워크 또는 유사한 고속 무선 네트워크(예를 들어, 3G, 4G LTE 타입 인터넷 프로토콜 네트워크 연결성)에 제공하는 임의의 위치에 구현될 수 있다.
도시된 바와 같이, 디지털 미디어 콘텐츠 관리 시스템(100)은 시스템(100)에서 일차 디스플레이 디바이스 및/또는 이차 디바이스에게 제공되는 콘텐츠를 관리하도록 설계되는 디바이스인 데이터 통신 허브(106)를 포함한다. 데이터 통신 허브(106)의 특정 구성요소 및 기능성은 도 2에 대해 아래에 상세히 설명될 것이다. 일반적으로, 데이터 통신 허브(106)는 디지털 미디어 콘텐츠 관리 시스템(100)의 다양한 구성요소와 통신하기 위해 다수의 유선 및 무선 입력 및 출력을 포함한다.
예시적 구현예에서, 데이터 통신 허브(106)는 디스플레이 디바이스(107)에 통신 결합되며, 디스플레이 디바이스는 콘텐츠를 수신하고 디스플레이할 수 있는 임의의 디바이스일 수 있다(이와 같은 콘텐츠는 MPEG-1, MPEG-2, MPEG-4, H.263, H.264, H.265, VP9, WMV, AVI, 퀵타임, 플래시, DivX AAC, MP3 등을 포함하지만 이에 제한되지 않는 다양한 디지털 포맷 중 어느 것일 수 있음). 예를 들어, 디스플레이 디바이스(107)는 예시적 구현예에서 텔레비전이지만, 대안적으로 디스플레이 디바이스(107)는 그 중에서도, 당업자에게 이해되는 바와 같이 표준 콘텐츠 분배 네트워크를 통해 데이터를 수신하고 그 중에서도 사용자에 의한 소비를 위해 제시할 수 있는 태블릿 디바이스, 개인용 컴퓨터("PC"), 이동 전화, 스테레오 또는 임의의 다른 전자 디바이스일 수 있는 것이 고려된다. 디스플레이 디바이스(107)는 본원에 개시되는 예시적 구현예 내의 "제1" 또는 "일차" 디스플레이 디바이스이고 그것은 유선 또는 무선 연결에 의해 데이터 통신 허브(106)에 통신 결합되며, 유선 또는 무선 연결은 예를 들어 USB 케이블, 동축 케이블, RCA 케이블, HDMI 케이블을 포함하지만, 이에 제한되지 않는 다양한 송신 방법, 또는 802.11(다수) 등을 포함하지만 이에 제한되지 않는 무선 프로토콜일 수 있는 것이 고려된다. 유선 또는 무선 연결을 사용하면, 디스플레이 디바이스(107)는 디스플레이 디바이스(107)의 사용자에 의한 디스플레이 및 소비를 위해 데이터 통신 허브(106)로부터 콘텐츠를 수신하도록 구성된다.
데이터 통신 허브(106)는 또한 라우터(105)에의 유선 또는 무선 연결에 의해 통신 결합된다. 예시적 구현예에서, 라우터(105)는 예를 들어 인터넷 및 이차 시스템(101)으로부터 콘텐츠를 수신(또는 송신, 또는 송신 및 수신)하고 콘텐츠를 디지털 미디어 콘텐츠 관리 시스템(100)의 Wi-Fi 네트워크에 연결되는 하나 이상의 디바이스에 분배(또는 수신, 또는 송신 및 수신)하도록 구성되는 임의의 표준 홈 또는 상업 Wi-Fi 라우터일 수 있다. 당업자에게 이해되어야 하는 바와 같이, 인터넷 및 이차 시스템(101)은 월드 와이드 웹 상의 콘텐츠 및/또는 다른 이차 시스템에 포함되는 데이터(프로그래밍 명령 세트를 포함함) 중 어느 것 및 모두인 것이 바람직하다. 아래에 상세히 논의되는 바와 같이, 본원에서의 본 개시는 인터넷 및 이차 시스템(101)이 일차 소스 콘텐츠와 관련되거나 일차 소스 콘텐츠의 대안으로서의 이차 소스 콘텐츠를 제공하는 이차 데이터 소스 콘텐츠 제공자(들)의 역할을 하는 것을 고려한다.
예시적 구현예에서, 데이터 통신 허브(106)는 라우터(105)를 통해 인터넷 및 이차 시스템(101)과 양방향 통신을 갖도록 구성된다. 그러나, 대안 구현예에서, 데이터 통신 허브(106)는 도 2를 참조하여 아래에서 논의되는 Wi-Fi 연결 인터페이스를 사용하여, Wi-Fi 라우터(105)의 역할을, 그것의 다른 설명된 활동에 더하여 수행하도록 구성된다. 다시 말하면, 데이터 통신 허브(106)는 인터넷 및 이차 시스템(101) 및 디지털 미디어 콘텐츠 관리 시스템(100)의 Wi-Fi 네트워크에 연결되는 하나 이상의 디바이스와 직접 통신할 수 있다. 이와 같은 구현예의 변형에서, 데이터 통신 허브(106)는 임의의 이동 전기통신 네트워크 프로토콜(예를 들어, 2G, 3G, 4G LTE 등)을 사용하여 인터넷 및 이차 시스템(101)과 통신하도록 구성될 수 있다.
더 도시된 바와 같이, 데이터 통신 허브(106)는 또한 TV 서비스 제공자 콘텐츠(103)와 통신 결합되며, 이 콘텐츠는 예시적 구현예에서 콘텐츠의 일차 소스 또는 제1 데이터 소스로 간주될 수 있다. TV 서비스 콘텐츠 제공자(103)는 사용자 소비를 위해 콘텐츠를 전달하는 임의의 소스 콘텐츠 제공자(예를 들어, 방송, 케이블, 텔코, DBS, IP, 또는 소스 예컨대 DVD 플레이어)일 수 있고 임의의 디지털 포맷 및 품질, 예컨대 비디오(라이브 또는 녹화), 이미지, 사운드, 순 데이터 또는 이들 중 어느 것 또는 모두의 조합일 수 있다. 예시적 구현예는 일차 소스 콘텐츠가 TV 서비스 제공자(103)로부터의 TV 서비스 콘텐츠로 비롯되는 것을 고려하지만, 당업자는 일차 소스 콘텐츠가 일차 소스의 역할을 하는 원래 데이터 콘텐츠(예를 들어, 웹사이트 등으로부터의 원래 콘텐츠)의 임의의 서비스 제공자에서 비롯될 수 있는 것을 이해한다는 점이 인정되어야 한다.
더욱이, 데이터 통신 허브(106)는 디바이스(104)와 같은 원격 제어에 통신 결합되도록 구성될 수 있으며, 디바이스는 예를 들어 디스플레이 디바이스(107) 등에 대한 구성 가능 원격 제어 디바이스일 수 있다. 더욱 특히, 원격 제어 디바이스(104)는 디바이스가 (적외 광, 블루투스, 지그비, Wi-Fi 등을 통해) 적어도 데이터 통신 허브(106) 및 디스플레이 디바이스(107)를 무선 제어할 수 있고/구성 가능하여 제공되는 디바이스 제조자 또는 TV 서비스 제공자에 의해 제공되는 임의의 타입의 표준 TV 원격 제어, 범용 원격 제어 디바이스, 또는 다른 원격 제어 디바이스일 수 있다.
예시적 구현예에서, 하나 이상의 데이터 송신 디바이스(102)는 또한 데이터 통신 허브(106)에 통신 결합될 수 있다. 바람직하게, 데이터 송신 디바이스(102)는 디지털 데이터를 송신할 수 있는 임의의 디바이스일 수 있으며, 예를 들어 데이터 송신 디바이스는 객체에 관한 데이터(예를 들어, 우유 한 통은 0.5 갤런이고 그것의 유효 기간)를 송신(또는 무선 또는 공진 주파수를 생성)할 수 있는 객체(예를 들어, 우유 한 통)에 맞는 무선 주파수 식별("RFID") 태그일 수 있다. 대안적으로, 데이터 송신 디바이스는 RFID 태그를 "판독"하는 디바이스(예를 들어, 태그 내에 포함되는 우유, 계란 등과 같은 항목의 RFID 태그를 판독하고 그 다음 그러한 정보를 데이터 통신 허브(106)로 전달하는 냉장고)일 수 있다. 부가적으로, 데이터 송신 디바이스는 또한 근거리 무선 통신("NFC") 능력을 갖는 디바이스 또는 판독기의 특정 근접 내에서 디바이스를 물리적으로 터치하거나 가져오는 것을 통해 데이터를 전송할 수 있는 다른 무선 통신 디바이스일 수 있다.
따라서, 도 1에 도시된 바와 같이, 데이터 통신 허브(106)는 데이터 송신 디바이스(102), TV 서비스 콘텐츠 제공자(103), 원격 제어 디바이스(104), 디스플레이 디바이스(107), 및 라우터(105)에 통신 결합된다. 그러나, 데이터 통신 허브(106)는 이들 구성요소의 모두에 결합되도록 요구되지 않고 예시적 시스템은 데이터 통신 허브(106)가 도 1에 도시된 디바이스의 모두보다 더 적은 것에 결합되는 것에 의해 구현될 수 있다는 점이 당업자에 의해 이해되어야 한다.
상기 언급된 바와 같이, 라우터(105)는 인터넷 및 이차 시스템(101)과 데이터 통신 허브(106)를 포함하는 Wi-Fi 네트워크에 연결되는 하나 이상의 디바이스 사이에서 데이터를 통신할 수 있다. 데이터 통신 허브(106)는 예시적 구현예에서 인터넷 또는 이차 시스템(101)으로부터 "부가" 또는 "이차" 소스 콘텐츠를 검색한다. 특히, 이차 소스 콘텐츠에 대한 초기 검색 명령 구조는 일차 소스 콘텐츠 기술 키 워드, 자막 방송 콘텐츠, 일차 소스 콘텐츠와 관련되는 현재 또는 과거 대중적인 검색 용어, 사용자 이력 검색 용어, 사용자 프로파일 정보 등에 기초한 미리 지정된 검색을 포함하지만, 이에 제한되지 않는 다양한 수단을 통해 달성될 수 있다.
게다가, 예시적 시스템(100)은 또한 하나 이상의 "제2" 또는 "이차" 디스플레이 디바이스가 라우터(105)에 결합되고 디지털 미디어 콘텐츠 관리 시스템(100)의 일부로 구현될 수 있는 것을 고려한다. 도시된 바와 같이, 이차 디스플레이 디바이스는 디바이스(108)와 같은 PC, 디바이스(109)와 같은 태블릿 및/또는 디바이스(110)와 같은 스마트폰을 포함할 수 있다. 특히, 당업자에게 이해되는 바와 같이, PC 디바이스(108)는 예를 들어 임의의 타입의 개인용 컴퓨터일 수 있고, 태블릿 디바이스(109)는 예를 들어 임의의 타입의 "태블릿" 컴퓨팅 디바이스(큰 포맷 태블릿으로부터 디바이스와 같은 더 작은 워치 스타일 태블릿으로의 다양한 크기 및 폼 팩터의 태블릿을 포함함)일 수 있고, 스마트폰 디바이스(110)는 예를 들어 임의의 타입의 스마트폰일 수 있다. 개인용 컴퓨터, 태블릿 또는 스마트폰의 특정 운영 체제, 제조, 모델 등은 개시된 시스템을 위해 요구되지 않는다는 점이 이해되어야 한다. 예시적 구현예의 하나의 개선에서, 이들 이차 디바이스(예를 들어, 스마트폰 디바이스(110)) 중 어느 하나는 TV 원격 제어 디바이스(104)의 역할을 할 수 있는 것이 고려된다. 포인팅 디바이스로서 스마트폰의 사용을 설명하는 예시적 출원은 미국 특허 번호 8,717,289에 설명되며, 그의 내용은 이로써 참조로 포함된다. 일 구현예에서, 하나 이상의 이차 디스플레이 디바이스(108, 109 및/또는 110)는 당업자에게 이해되는 바와 같이, Wi-Fi 또는 블루투스 통신을 통해 "올쉐어" 또는 "올조인"와 같은 다양한 페어링 방법 중 어느 것에 의해 데이터 통신 허브(106)에 연결될 수 있다.
도 1에 예시된 바와 같이, 데이터 통신 허브(106)는 표준 유선 또는 무선 연결을 거쳐 라우터(105)를 통하여 홈 Wi-Fi 네트워크에 연결된다. 데이터 통신 허브(106)는 TV 서비스 제공자(103)(예를 들어, 방송, 케이블, 텔코, DBS, IP 등)로부터 원래 데이터 콘텐츠(즉, 일차 소스 콘텐츠)를 수신하도록 구성되고 또한 디스플레이 디바이스(107)(예를 들어, TV, 모니터 등)에 직렬로 연결된다. 유리하게, 데이터 통신 허브(106)를 병렬보다 직렬로 연결함으로써, 데이터 통신 허브(106)는 "다른" 또는 "부가" 또는 "이차" 소스 콘텐츠(예를 들어, 일차 소스 콘텐츠를 증가시킬 수 있는 상보적 또는 대안적 데이터 - 예를 들어 쿠킹 TV 쇼에서 요리되고 있는 어떤 것의 레시피를 설명하는 데이터) 콘텐츠를 "원래" 일차 소스 콘텐츠의 위에, 이에 인접하여, 또는 이 대신에 추가 및/또는 디스플레이할 수 있다. 대조적으로, 종래의 구성은 각각의 데이터 소스가 디스플레이 디바이스(107)의 개별 데이터 입력에 연결되도록 병렬로 연결된다. 그 결과, 병렬 구성은 당업자에게 이해되는 바와 같이, 일차 소스 콘텐츠의 대체만을 허용한다(예를 들어, 셋톱 박스를 통한 TV와 애플 TV를 통한 넷플릭스 영화 사이에서 스위칭하는 것은 시청자가가 2개 사이에서 TV 입력을 스위칭하는 것을 필요로 할 것임). 데이터 통신 허브(106)를 디스플레이 디바이스(107)와 직렬로 연결함으로써, 데이터 통신 허브(106)는 콘텐츠가 최종 사용자/시청자에게 어떻게 제공되는지를 제어할 수 있다. 다시 말하면, 개인은 디스플레이 디바이스(107) 상에서 입력을 변경하는 것 없이 통신 허브(106)에 전달되는 임의의 콘텐츠 또는 일차 소스 콘텐츠 및 다른 이차 소스 콘텐츠의 조합을 소비할 수 있다.
더욱이, 예시적 구현예에서, 데이터 통신 허브(106)는 블루투스, IR 등과 같은 제어 시스템을 통해, 임의의 표준 원격 제어 디바이스(예를 들어, 디스플레이 디바이스(107) 제조자 및/또는 TV 서비스 제공자(103) 등에 의해 제공되는 원격 제어 디바이스)로부터의 내비게이션 명령어를 수신하고 내비게이션 명령어에 작용하도록 더 구성된다. 부가적으로, 데이터 통신 허브(106)는 디바이스 대 디바이스 통신(예를 들어, RFID 태그, NFC 등)을 지원하는 객체로부터 수신되는 데이터를 수신하고 데이터에 작용하도록 구성될 수 있다. 예를 들어, 데이터 통신 허브(106)는 하나 이상의 데이터 송신 디바이스(102)로부터 송신되는 정보를 (연속적으로, 주기적으로 등) 수신하도록 구성될 수 있다.
상기 설명된 바와 같이, 이차 시스템 및 이차 디바이스(예를 들어, PC(108), 태블릿(109), 스마트폰(110) 등)는 디지털 미디어 콘텐츠 관리 시스템(100)의 Wi-Fi 네트워크에 통신 결합된다. 그 결과, 데이터 통신 허브(106)는 라우터(105)를 통해 이차 시스템 및 이차 디스플레이 디바이스와 양방향 통신을 가질 수 있다. 대안적으로, 데이터 통신 허브(106)는 데이터 통신 허브(106)가 이차 디바이스(108, 109, 및 110)와 직접 무선 통신할 수 있게 하는 Wi-Fi 연결, 블루투스 연결, 또는 유사한 타입 연결(아래에 논의됨)을 포함할 수 있다. 어느 하나의 구현예에서, 이와 같은 아키텍처를 통해, 다양한 디바이스는 일차 소스 콘텐츠, 일차 소스 콘텐츠 메타데이터, 이차 소스(들) 콘텐츠, 이차 소스(들) 메타데이터 및 디바이스 제어 명령이 디스플레이 디바이스(107)(즉, 일차 디스플레이 디바이스)와 이차 디바이스(예를 들어, PC(108), 태블릿(109), 스마트폰(110) 등) 사이뿐만 아니라 인터넷 및 이차 시스템(101) 및 역으로 상호작용하고 플로우할 수 있는 통합 멀티디바이스, 멀티스크린 경험을 생성하기 위해 함께 작동하도록 구성된다.
예시적 구현예의 하나의 추가 개선에서, 디지털 미디어 콘텐츠 관리 시스템(100)은 피드백 루프를 지원하는 능력을 제공하며 여기서 TV 서비스 콘텐츠 제공자(103)로부터의 일차 소스 콘텐츠는 데이터 통신 허브(106)에 상주하는 자동화 콘텐츠 인식("ACR"), 이미지 인식, 바코드, QR 코드, 디지털 워터마킹, 디지털 핑거프린팅, 인식 및 쇼핑(미국 특허 공개 번호 2012/0183229) 등에 설명된 바와 같음)등과 같은 시스템을 통해 감시되고 인식될 수 있거나 데이터 통신 허브(106)를 통해 액세스될 수 있는 인터넷 및 이차 시스템(101) 상에 있을 수 있고 그 다음 관련 "부가" 데이터/정보는 디스플레이 디바이스(107) 및/또는 이차 디바이스(108, 109 및 110)에 제공 및 전달된다.
도 2는 본 개시의 예시적 구현예에 따른 데이터 통신 허브(106)의 예시적 구성요소를 예시하는 블록도를 예시한다. 구성요소 및 그 사이의 내부 연결 각각의 특정 회로는 본 개시의 양태를 불필요하게 모호하지 않도록 도 2에 도시되지 않는다는 점이 이해되어야 한다.
도 2에 도시된 바와 같이, 데이터 통신 허브(106)는 전력 소스(202)를 포함한다. 바람직하게, 데이터 통신 허브(106)는 USB, 마이크로 USB, 홈 AC 대 DC 변압기, 배터리, HDMI, Cat-5 등을 포함하지만 이에 제한되지 않는 다양한 수단에 의해 전력 공급된다.
데이터 통신 허브(106)는 원래 콘텐츠 입력(203)(예를 들어, 입력 포트)을 더 포함한다. 상기 설명된 바와 같이, 데이터 통신 허브(106)는 HDMI, 코악스, RCA, S-비디오, USB, 안테나, 무선 등을 포함하지만 이에 제한되지 않는 다양한 수단으로부터 입력되는 일차 소스 콘텐츠를 가질 수 있다. 서비스 제공자가 수신된 신호의 디코딩 및/또는 복호화를 위해 셋톱 박스의 사용을 필요로 하는 경우에, 데이터 통신 허브(106)의 원래 콘텐츠 입력(203)은 예를 들어 케이블 제공자에 의해 발행되는 셋톱 박스에 첨부되고, HDMI 케이블 등에 의해 연결될 수 있다는 점이 이해되어야 한다. 대안 구현예에서, 셋톱 박스는 데이터 통신 허브(106)를 포함하도록 제조될 수 있다.
상기에 더 설명된 바와 같이, 데이터 통신 허브(106)는 유선 또는 무선, Wi-Fi 프로토콜, 이동 프로토콜(예를 들어, 2G, 3G, 4G, LTE 등), 블루투스, NFC, 지그비 등을 포함하지만 이에 제한되지 않는 다양한 수단에 의해 이차 디바이스(108, 109 및 110)뿐만 아니라 인터넷 및 이차 시스템(101)에 연결될 수 있다. 따라서, 예시적 구현예에서, 데이터 통신 허브(106)는 Wi-Fi 연결 또는 인터페이스(204)를 포함한다.
데이터 통신 허브(106)는 하나 이상의 프로세서를 더 포함한다. 도 2에 도시된 바와 같이, 데이터 통신 허브(106)는 프로세서(205)를 포함하며, 프로세서는 콘텐츠(개별 소스 콘텐츠 및/또는 조합된 콘텐츠)를 디스플레이 디바이스(107) 및/또는 이차 디스플레이 디바이스(108, 109 및 110) 중 하나 이상에 전송하기 위해 게이트웨이의 관리를 포함하는 시스템을 관리하기 위해 제공되는 내부 컴퓨터 프로세서이다. 2개의 디바이스에 대한 콘텐츠는 동일 또는 상이할 수 있다. 프로세서(205)는 콘텐츠와 관련되거나 콘텐츠 내에 포함되는 데이터에 액세스하고 데이터에 동작함으로써 액션을 수행하기 위해 하나 이상의 컴퓨터 프로그램을 실행하도록 구성된다. 바람직하게, 프로세서(205)는 요구된 목적을 위해 특별히 구성되고 그 위에 저장되는 컴퓨터 프로그램에 의해 구성될 수 있다. 이와 같은 컴퓨터 프로그램은 컴퓨터 판독 가능 저장 매체(예를 들어, 아래에 논의되는 로컬 스토리지(207))에 저장될 수 있다. 더욱이, 아래에 설명될 바와 같이, 데이터 통신 허브(106)에 의해 실행되는 하나 이상의 컴퓨터 프로그램(즉, 프로그램, 소프트웨어, 소프트웨어 애플리케이션, 스크립트, 또는 코드)은 그것의 동작을 제어하고 컴파일 또는 해석 언어, 선언 또는 절차 언어를 포함하는 임의의 형태의 프로그래밍 언어로 기록될 수 있다. 컴퓨터 프로그램(들)은 또한 독립형 프로그램으로서 또는 컴퓨팅 환경에서의 사용에 적절한 모듈, 구성요소, 서브루틴, 객체, 또는 다른 유닛으로서 포함하는 임의의 형태로 전개될 수 있다.
데이터 통신 허브(106)는 콘텐츠 해석기(206)를 더 포함하며, 콘텐츠 해석기는 TV 일차 소스 콘텐츠 제공자(103)로부터 수신되는 소스 콘텐츠를 감시하고 분석하는 부가 프로세서일 수 있다. 콘텐츠 해석기(206)는 데이터 통신 허브(106)의 전체적인 내부에 있을 수 있거나 그것은 주위 물리 위치 맥락 정보뿐만 아니라 일차 소스 콘텐츠와 관련되는 데이터를 수집하기 위해 마이크로폰, 카메라 등과 같은 디바이스를 포함할 수 있다. 예시적 구현예에서, 콘텐츠 해석기(206)는 이차 소스(들) 콘텐츠 및 조합된 일차 및 이차 소스(들) 콘텐츠를 감시하고 분석하도록 더 구성된다. 콘텐츠 해석기(206)가 도 2에 개별 구성요소로 도시되지만, 프로세서(205)는 일 구현예에서 콘텐츠 해석기(206)의 분석/처리 기능을 수행하도록 구성될 수 있다는 점이 당업자에게 이해되어야 한다.
상기 언급된 바와 같이, 데이터 통신 허브(106)는 로컬 스토리지(207)를 포함한다. 예시적 구현예에서, 로컬 스토리지(207)는 예를 들어, 디스크 형상 매체 예컨대 CD-ROM(콤팩트 디스크 판독 전용 메모리), 자기 광 디스크, 디지털 비디오 디스크 판독 전용 메모리 또는 DVD-ROM, 디지털 비디오 디스크 랜덤 액세스 메모리 또는 DVD-RAM, 플로피 디스크, 메모리 칩 예컨대 랜덤 액세스 메모리 또는 RAM, 판독 전용 메모리 또는 ROM, 소거 가능 프로그램 가능 판독 전용 메모리 또는 E-PROM, 전기적 소거 가능 프로그램 가능 판독 전용 메모리 또는 EE-PROM, 재기록 가능 카드 타입 판독 전용 메모리 예컨대 스마트 카드, 자기 테이프, 하드 디스크, 및 그 안에 프로그램, 콘텐츠 데이터, 및 아래에 논의될 다른 데이터를 저장하는 임의의 다른 적절한 수단을 포함할 수 있다.
데이터 통신 허브(106)는 또한 디스플레이 디바이스(107) 및/또는 이차 디바이스(108, 109 및 110) 중 하나 이상에 전달될 수 있는 패키지로 콘텐츠를 처리하도록 제공되고 구성되는 콘텐츠 프로세서(208)를 포함한다. 콘텐츠 프로세서(208)가 도 2에 개별 구성요소로 도시되지만, 프로세서(205)는 대안 구현예에서 콘텐츠 프로세서(208)의 처리 기능들을 수행하도록 구성될 수 있다는 점이 당업자에게 이해되어야 한다. 더욱이, 일반적으로, 본원에 설명되는 프로세스 및 로직 흐름은 프로세서(205)에 의해 단독으로 또는 콘텐츠 해석기(206) 및/또는 콘텐츠 프로세서(208)와 조합하여 수행될 수 있다는 점이 이해되어야 한다.
더 도시된 바와 같이, 데이터 통신 허브(106)는 RFID 태그 및 다른 정보 방송 소스와 같은 객체(예를 들어, 데이터 송신 디바이스(102))로부터 데이터 콘텐츠를 수신하도록 구성되는 로컬 수신기(209)(예를 들어, RFID 또는 NFC 판독기) 및 또한 콘텐츠를 이차 디바이스(108, 109 및 110)에 송신하도록 구성되는 로컬 송신기(211)를 포함할 수 있다. 더욱이, 데이터 통신 허브(106)는 HDMI, 코악스, RCA, S-비디오, USB, 안테나, 무선 등을 포함하지만 이에 제한되지 않는 다양한 수단 중 어느 하나를 사용하여 콘텐츠를 디스플레이 디바이스(107)에 전달하는 하나 이상의 콘텐츠 출력(210)(예를 들어, HDMI 출력 포트)을 포함한다.
상기 논의된 바와 같이, 예시적 구현예에서, 데이터 통신 허브(106)는 분리된 별개의 하드웨어이지만, 대안 구현예에서 그것은 디지털 미디어 콘텐츠 관리 시스템(100)의 디스플레이 디바이스, 라우터, 셋톱 박스, 또는 다른 구성요소(들)로 통합될 수 있다.
도 3은 본 개시의 예시적 구현예에 따른 데이터 콘텐츠 관리 방법을 예시한다. 도 3에 도시되고 아래에 기재되는 방법(300)은 개시된 방법의 설명을 용이하게 하기 위해 예시적 구현예를 적용함으로써 설명된다. 그러나, 아래에 설명되는 구현예는 예시적 목적만을 위해 제공되고 개시된 방법이 결코 그렇게 제한되지 않아야 한다는 점이 이해되어야 한다.
도 3에 도시된 바와 같이, 초기 단계(305)에서, 콘텐츠는 데이터 통신 허브(106)에 의해 콘텐츠 제공자(예를 들어, TV 서비스 콘텐츠 제공자(103))로부터 수신된다. 특히, 데이터 통신 허브(106)의 원래 콘텐츠 입력(203)은 예를 들어 HDMI 케이블에 의해 케이블 제공자 등에 의해 발행되는 셋톱 박스에 부착되는 HDMI 연결일 수 있다. 따라서, 셋톱 박스는 TV 서비스 콘텐츠 제공자(103)에 의해 제공되는 일차 소스 콘텐츠를 수신하고 이와 같은 일차 소스 콘텐츠를 HDMI 케이블을 통해 출력하며, 그것은 이때 데이터 통신 허브(106)의 원래 콘텐츠 입력(203)에 입력된다. 제1 예에서, 개인은 예를 들어 개인의 텔레비전과 같은 디스플레이 디바이스(107) 상에서 축구 게임을 시청하고 있다. 따라서, 축구 게임은 TV 서비스 콘텐츠 제공자(103)로부터의 라이브 일차 소스 콘텐츠로 생방송되고 데이터 통신 허브(106)에 의해 TV 서비스 콘텐츠 제공자(103) 및 예를 들어 셋톱 박스를 통해 수신된다. 예시적 구현예는 일차 소스 콘텐츠의 디코딩(및 필요하면 복호화)를 위해 셋톱 박스를 이용하지만, 일차 소스 콘텐츠는 대안 구현예에서 데이터 통신 허브(106)에 직접 송신될 수 있거나, 데이터 통신 허브(106)는 셋톱 박스의 일부일 수 있다는 점이 이해되어야 한다.
다음에, 단계(310)에서, 데이터 통신 허브(106)는 수신된 일차 소스 콘텐츠를 일차 디스플레이 디바이스에 송신하거나 또는 "통과"하며, 일차 디스플레이 디바이스는 예시적 구현예에서 디스플레이 디바이스(107) 또는 사용자의 텔레비전이다. 바람직하게, 디스플레이 디바이스(107)는 HDMI 케이블 또는 다른 유선 또는 무선 연결, 예컨대 코악스, RCA, S-비디오, USB, 안테나, 무선 등을 사용하여 데이터 통신 허브(106)의 콘텐츠 출력(210)에 결합된다. 따라서, 일차 소스 콘텐츠를 수신하면, 데이터 통신 허브(106)는 콘텐츠(예를 들어, 축구 게임)를 콘텐츠 출력(210)을 통해 디스플레이 디바이스(107)에 출력한다.
단계(315)에서, 데이터 통신 허브(106)의 콘텐츠 해석기(206)는 디스플레이 디바이스(107) 상에 디스플레이되고 있는 콘텐츠 또는 콘텐츠의 요소를 해석하거나 인식한다. 단계(315)가 단계(310) 후에 발생하는 것으로 도 3에 도시되지만, 단계(315)는 또한 단계(310)과 동시에 수행될 수 있다는 점이 이해되어야 한다. 단계(315)는 콘텐츠 해석기(206)가 예를 들어 콘텐츠의 일반적 주제(예를 들어, 2개의 특정 팀 사이의 특정 날짜의 축구 게임) 또는 하나 이상의 상세한 특정 항목(예를 들어, 팀 로고 또는 플레이어)을 디스플레이 디바이스(107) 상에 디스플레이되는 콘텐츠에서 식별하거나, 위치(미국 특허 공개 번호 2012/0183229에서 설명되는 바와 같이 상세한 특정 항목의 콘텐츠 내의 X/Y 좌표 위치로서)를 식별하는 것을 구체적으로 수반한다. 콘텐츠 및 그것의 관련 요소들은 미리 저장된 이미지(예를 들어, 로컬 스토리지(207) 또는 "클라우드"에 저장되는 이미지)를 갖는 콘텐츠에서 또는 일차 소스 콘텐츠로 송신되는 일차 소스 또는 이차 소스(들) 메타데이터에 기초하여, 미가공 데이터 또는 픽셀과 같은 이미지를 비교함으로써 식별된다.
콘텐츠가 해석되거나 식별되면, 데이터 통신 허브(106)는 사용자에게 제시될 수 있는 해석된 콘텐츠와 관련되는 부가 정보를 식별한다. 더욱 특히, 단계(320)에서, 데이터 통신 허브(106)는 상기 설명된 바와 같이, Wi-Fi 연결 또는 인터페이스(204)에 의해 인터넷 및 이차 시스템(101)에 액세스한다. 예시적 구현예에서, 데이터 통신 허브(106)의 프로세서(205)는 사용자에게 제시되는 정보(예를 들어, 게임에서 플레이어와 관련되는 통계 또는 하이라이트 비디오 또는 사용자가 플레이어의 셔츠를 구입할 수 있는 웹사이트)에 액세스하기 위해 인터넷 및 이차 시스템 상에서 일련의 타겟팅된 질의를 수행한다. 상기 설명된 바와 같이, 소스 콘텐츠에서 항목(또는 항목의 세트)을 인식하고 식별된 항목(들)에 관한 부가 데이터 또는 메타데이터를 식별하는 하나의 예시적 시스템은 미국 특허 공개 번호 2012/0183229이다. 타겟팅된 질의는 일 구현예에서 개별 사용자에게 특정된다는 점이 더 이해되어야 한다. 아래에 더 상세히 설명될 바와 같이, 데이터 통신 허브(106)는 특정 사용자와 관련되는 프로파일 정보 또는 데이터(예를 들어, 좋아하는 축구 팀, 최근의 구매 등)를 로컬 스토리지(207)에 저장하고 사용자 프로파일 데이터에 맞춰지는 질의를 사용하는 것에 적어도 부분적으로 기초하여 인터넷 및 이차 시스템(101) 상에서 정보에 액세스할 수 있다.
다음에, 단계(325)에서, 콘텐츠 프로세서(208)와 함께 데이터 통신 허브(106)의 프로세서(205)는 이때 디스플레이 디바이스(107)의 사용자에게 다른 정보/콘텐츠(또는 그것의 일부)를 제시하며, 다른 정보/콘텐츠는 예를 들어 개인이 관련 제품을 구매하고 또한 브라우징하거나, 제품, 게임, 플레이어 등에 관한 더 상세한 정보를 얻는 축구 관련 제품일 수 있다. 제1 데이터 소스(예를 들어, TV 서비스 콘텐츠 제공자(103))로부터 수신되는 일차 소스 콘텐츠를 해석하고 그 다음 해석된 콘텐츠와 관련되는 부가 정보를 식별함으로써, 데이터 통신 허브(106)는 사용자에게 조정된 프리젠테이션을 위해 일차 소스 콘텐츠 및 부가 정보 둘 다의 송신을 동기화하도록 효과적으로 구성된다. 상기 논의된 바와 같이, 이와 같이 동기화된 송신 및 프리젠테이션은 일차 디스플레이 디바이스 상에만 또는 일차 디스플레이 디바이스 및 이차 디스플레이 디바이스 둘 다 상에 수행될 수 있다.
일 구현예에서, 이와 같은 이차 소스 콘텐츠는 일차 디스플레이 디바이스 및/또는 이차 디스플레이 디바이스 상의 미리 구성된 오버레이 템플릿 및 메뉴에 의해 사용자에게 제시될 수 있으며, 이 디바이스는 표준 원격 제어 디바이스 및/또는 연결된 디바이스를 사용하여 내비게이션될 수 있다. 하나의 개선에서, 미리 구성된 오버레이 템플릿은 사용자가 구매 활동, 소셜 쉐어링 등을 위해 사용자 발생 콘텐츠(예를 들어, 아래에 논의되는 바와 같이 완성된 식사의 사진)를 인터넷 및/또는 이차 시스템(101)에 더 업로드할 수 있게 한다. 더욱이, 하나의 부가 구현예에서, 시스템은 사용자가 디스플레이된 제품 중 하나 이상을 구매할 수 있게 하는 전자 쇼핑 애플리케이션을 자동으로, 또는 사용자 제어에 응답하여 론칭한다. 예시적 애플리케이션은 미국 특허 번호 7,752,083 및 7,756,758, 및 미국 특허 공개 번호 2010/0138875에 개시되는 전자 쇼핑 시스템을 포함하며, 그 각각의 내용은 이로써 참조로 포함된다.
데이터 통신 허브(106)가 TV 서비스 콘텐츠 제공자(103)와 디스플레이 디바이스(107) 사이에 직렬로 연결되기 때문에, 데이터 통신 허브(106)는 사용자에게 TV 서비스 콘텐츠 제공자(103)로부터의 일차 소스 콘텐츠(및 가능하게는 일차 소스 콘텐츠 메타데이터) 및 인터넷 및 이차 시스템(101)으로부터 액세스되는 이차 소스 콘텐츠(및 가능하게는 이차 소스 콘텐츠 메타데이터) 또는 부가 관련 정보를 동시에 제시(예를 들어, 디스플레이)할 수 있다. 예를 들어, 프로세서(205)는 디스플레이 디바이스 상에 디스플레이되는 일차 소스 콘텐츠 위에 또는 일차 소스 콘텐츠에 인접하여 디스플레이되는 오버레이(예를 들어, 이미지, 하이퍼링크 등)를 발생시킬 수 있다. 대안적으로(또는 그것에 더하여), 콘텐츠는 로컬 송신기(211)(예를 들어, 블루투스와 같은 직접 무선 연결 또는 라우터(105)에 의한 Wi-Fi 연결)에 의해 이차 디스플레이 디바이스(108, 109 및 110) 중 하나 이상에 송신될 수 있다. 이와 같은 개선에서, 사용자는 하나의 디바이스(즉, 일차 디바이스 또는 디스플레이 디바이스(107)) 상에서 일차 소스 콘텐츠를 계속 시청하고 또한 제2 디바이스(즉, 이차 디바이스(108,109 및/또는 110) 중 하나 이상) 상에서 인터넷 및 이차 시스템(101)으로부터 액세스되는 이차 소스 콘텐츠를 동시에 시청할 수 있다. 이와 같은 개선에서, 사용자는 콘텐츠를 시청하고, 원한다면, 이와 같은 이차 디바이스를 사용하여 구매를 완성할 수 있다.
도 3에 더 도시된 바와 같이, 단계(315) 내지 단계(325)는 사용자가 예를 들어 디스플레이 디바이스(107) 상에서 TV 서비스 콘텐츠 제공자(103)에 의해 제공되는 일차 소스 콘텐츠를 시청하고 있는 동안 루프로 반복될 수 있다. 따라서, 일차 소스 콘텐츠가 변경(예를 들어, 채널 또는 쇼 변경 등)됨에 따라, 데이터 통신 허브(106)는 사용자에게 제시되는 이차 소스 콘텐츠를 액세스하고 변경할 것이다.
예시적 방법의 하나의 추가 개선에서, 일차 소스 콘텐츠(즉, 축구 게임)와 관련되는 개인에 의해 구매되는 이전 제품에는 개별 RFID 태그(즉, 데이터 송신 디바이스(102))가 설비되어 있다. 이들 태그는 당업자에게 공지되어 있는 바와 같이 RFID 태그에 대한 종래의 데이터 통신 기술을 사용하여 데이터 통신 허브(106)의 로컬 수신기(209)에 의해 수신되는 구매된 제품과 관련되는 정보를 송신할 수 있다. 다시 말하면, 제품이 사용자의 집에 전달되거나 사용자가 제품을 구매하는 것으로부터 집에 돌아오면, 사용자는 로컬 수신기(209)가 RFID 태그에 의해 송신되는 전자기 필드를 수신하도록 필요한 거리 내에 제품을 물리적으로 이동시키고 연관된 제품과 관련되는 항목 데이터를 휴대할 수 있다. 또는, 대안적으로, RFID 태그를 갖는 항목은 태그를 판독할 수 있는 다른 디바이스 내에 배치되고 데이터 통신 허브(106)와 통신 결합된다(예를 들어, 우유에 관한 기술 정보(예를 들어, 용기 크기, 브랜드, 구매 일자, 유효 기간 등)를 제공하는 RFID 태그를 갖는 우유 한 통은 태그를 판독하고 그것을 데이터 통신 허브(106)에 보고하는 능력을 갖는 냉장고에 배치됨). 결과적으로, 로컬 수신기(209)는 데이터 통신 허브(106)의 로컬 스토리지(207)에 결합되며, 로컬 스토리지는 항목의 크기(적용 가능하면), 제품이 인덱싱되는 날짜, 제품의 타입 등과 같은 제품 상세와 관련되는 전자 데이터를 포함하는 사용자에 의해 소유되는 제품을 저장하고 인덱싱할 수 있다. 인덱싱 데이터는 본원에서 "항목 데이터"로 언급된다. 프로세서(205) 및/또는 콘텐츠 해석기(206)는 상기 논의된 바와 같이, 인터넷 및 이차 시스템(101)에 질의되는 제품 검색 기준(예를 들어, 팀, 크기 등)을 개선하기 위해 이와 같은 정보를 사용할 수 있어, 개인에게 제시되는 제품은 그러한 개인에게 맞춤화되고 타겟팅된다.
도 4는 본 개시의 예시적 구현예에 따른 다른 데이터 콘텐츠 관리 방법을 예시한다. 도 3과 유사하게, 도 4에 도시된 방법은 개시된 방법의 설명을 용이하게 하기 위해 예시적 구현예를 적용한다. 그러나, 아래에 설명되는 구현예는 예시적 목적을 위해서만 제공되고 개시된 방법은 결코 그렇게 제한되지 않아야 한다는 점이 이해되어야 한다. 더욱이, 도 4의 방법을 이용하는 특정 기술적 구현예 상세의 다수는 도 3에 대해 상기 설명된 것과 동일하고 아래에 반복되지 않을 것이다.
도 4에 도시된 바와 같이, 초기에 단계(405)에서, 일차 소스 콘텐츠는 데이터 통신 허브(106)에 의해 TV 서비스 콘텐츠 제공자(103)로부터 수신된다. 이와 같은 예에서, 일차 소스 콘텐츠는 쿠킹 쇼일 수 있다. 그 다음, 단계(410)에서, 데이터 통신 허브(106)는 일차 소스 콘텐츠(즉, 쿠킹 쇼)를 제1 일차 디스플레이 디바이스(예를 들어, 디스플레이 디바이스(107))에 송신하여 사용자에게 디스플레이된다.
동시에, 단계(415)에서, 데이터 통신 허브(106)의 콘텐츠 해석기(206)는 디스플레이 디바이스(107) 상의 일차 소스 콘텐츠가 도 3에 대해 상기 설명된 것과 유사한 방식으로 쿠킹 쇼와 관련되는 것을 인식한다. 단계(415)가 단계(410)와 동시에 수행되고 도 4에 병행하여 도시되지만, 단계(415)는 대안 구현예에서 단계(410) 다음에 수행될 수 있다는 점이 이해되어야 한다.
다음에, 단계(420)에서, 데이터 통신 허브(106)는 이때 Wi-Fi 연결(204) 및 라우터(105)를 통해, 인터넷 및 이차 시스템(101)과 통신하고, 쿠킹 쇼에 준비되는 항목에 대한 레시피와 같은 쿠킹 쇼와 관련되는 정보를 식별한다. 그 다음, 단계(425)에서, 데이터 통신 허브(106)의 콘텐츠 프로세서(208)는 상기 설명된 바와 같이, 식별된 레시피가 디스플레이 디바이스(107) 및/또는 이차 디바이스(108, 109 및/또는 110) 중 하나 이상 상에 디스플레이되게 한다. 이차 소스 콘텐츠로 간주되는 레시피는 일차 소스 콘텐츠(즉 쿠킹 쇼)의 위에, 이 콘텐츠에 인접하여, 또는 이 콘텐츠 대신에(즉 오버레이로서) 디스플레이될 수 있다. 이와 같은 동작은 콘텐츠가 디스플레이 디바이스(107) 및/또는 이차 디바이스(108, 109 및/또는 110) 중 하나 이상 상에서 개인에게 어떻게 제공되는지를 관리하는 데이터 통신 허브(106)의 프로세서(205)에 의해 제어된다.
데이터가 사용자에게 어떻게 제시되는지에 대한 관리는 데이터 통신 허브(106)에 의해 실행되는 소프트웨어의 프로그래머, 사용자 정의 설정 등에 의해 제어될 수 있다. 일 구현예에서, "액션에 대한 호출"은 사용자가 일차 디스플레이 디바이스 상에서 이용 가능 이차 소스 콘텐츠를 요청할 수 있게 하는 일차 디스플레이 디바이스 상에 디스플레이될 수 있다. 대안적으로, 일차 디스플레이된 디바이스(아래에 논의됨)와 페어링되는 하나 이상의 이차 디바이스는 이차 소스 콘텐츠의 프리젠테이션을 시작하는 "앱"을 (사용자 제어로 또는 자동으로)을 론칭할 수 있다. 예를 들어, 데이터 통신 허브(106)의 소프트웨어는 이차 소스 콘텐츠가 디바이스(들)의 사용자에게 어떻게 제시되는지에 대한 우선순위의 목록을 포함하기 위해 프로그래밍될 수 있다. 일 구현예에서, 데이터 통신 허브(106)가 이차 디바이스(108, 109 및/또는 110) 중 하나 이상과의 액티브 무선 연결을 검출하면, 데이터 통신 허브(106)는 이차 소스 콘텐츠(예를 들어, 레시피)를 사용자에게 제시하는 소프트웨어 애플리케이션을 론칭(예를 들어, 웹페이지를 개방)하기 위해 명령어를 이와 같은 디바이스에 자동으로 송신할 것이다. 대안적으로, 데이터 통신 허브(106)가 이차 디바이스(108, 109 및/또는 110) 중 하나 이상과의 액티브 무선 연결을 검출하지 않으면, 데이터 통신 허브(106)는 예를 들어 레시피를 디스플레이 디바이스(107)의 스크린의 일부에 제시하는 오버레이로서 디스플레이되는 디지털 이미지를 생성할 것이다. 또 다른 구현예에서, 데이터 통신 허브(106)에 대한 사용자 인터페이스는 이차 디바이스(108, 109 또는 110) 중 하나 상에서 사용자에게 제시될 수 있으며, 이는 이차 소스 콘텐츠가 사용자에게 어떻게 제시되는지를 사용자가 우선순위화 가능하게 할 수 있다. 예를 들어, 사용자는 이차 소스 콘텐츠가 이차 디바이스(108, 109 및/또는 110) 상에만 제시되지만, 디스플레이 디바이스(107)와 같은 제1 또는 일차 디스플레이 디바이스 상에 제시되지 않도록 설정을 정의할 수 있다. 추가 구현예에서, 부가 정보는 제1 또는 제2 디바이스 중 하나 상에 초기에 제시되는 것이 아니라, 그 대신에 사용자에게는 "더 많은 정보" 버튼이 제공되며, 이 버튼은 스크린 상에 디스플레이되거나 리모트 컨트롤 상에 제공되고, 선택될 때 부가 정보를 사용자에게 제시한다.
도 4에 더 도시된 바와 같이, 단계(430)에서, 데이터 통신 허브(106)의 프로세서(205)는 사용자에게 제시되는 이차 소스 콘텐츠와 관련되는 사용자 프로파일 데이터를 식별하기 위해 로컬 스토리지(207)에 액세스한다. 쿠킹 레시피 예에서, 프로세서(205)는 어떤 성분이 레시피를 만드는데 필요한지를 판단하고 또한 사용자가 레시피를 완성할 필요가 있는 그러한 성분뿐만 아니라 현재 사용자의 소유에 있는 그러한 성분을 판단할 수 있다.
상기 설명된 바와 같이, 데이터 통신 허브(106)는 예를 들어 RFID 태그와 같은 데이터 송신 디바이스(102)로부터 NFC를 통해 정보를 수신할 수 있는 로컬 수신기(209)를 포함한다. 따라서, 현재 예에서, 사용자가 구매하는 각각의 성분 또는 식료품 항목은 로컬 수신기(209)에 제품과 관련되는 데이터를 송신하는 RFID 태그를 가지며, 로컬 수신기는 차례로 정보를 "항목 데이터"로서 로컬 스토리지(207)에 저장하는 것이 고려된다. 대안적으로, 사용자는 예를 들어 이차 디바이스(108, 109 및/또는 110) 중 하나 이상에 의해 액세스될 수 있는 데이터 통신 허브(106)에 대한 사용자 인터페이스를 통해 항목의 활성 재고를 갱신할 수 있다. 어느 하나의 경우에, 단계(430)에서, 프로세서는 쿠킹 쇼와 관련되는 레시피를 완성하기 위해 어떤 부가 성분이 사용자에게 요구되는지를 식별하도록 로컬 스토리지에 액세스한다. 이와 같은 이차 소스 콘텐츠는 개인에게 제공될 수 있다. 그 다음, 단계(435)에서, 사용자에게는 이차 디스플레이 디바이스(108, 109 및/또는 110) 중 하나 이상에 관한 부가 정보가 제시될 수 있으며, 부가 정보는 예를 들어 레시피에 대한 부가 성분을 구매하기 위해 식료품 웹사이트에의 링크일 수 있다. 따라서, 개인이 원하면, 폐기된 성분에 대한 주문은 이차 디바이스(108, 109 및/또는 110)를 통해 완성될 수 있다.
본원에 설명되는 시스템 및 방법의 추가 논의로서, 이하는 본 발명의 부가 예시적 구현예이다. 이하의 예에서, 사용자는 도 1에 도시된 바와 같이 데이터 통신 허브(106)를 설정하며 일차 소스 콘텐츠는 셋톱 박스를 통해 케이블 시스템에 의한 TV 프로그래밍이고 데이터 통신 허브(106)는 HDMI 케이블을 통해 TV에 부착되고, 결과적으로 허브(106)는 HDMI 커넥터를 통해 셋톱 박스로 플러깅되는 것이 고려된다. 전술한 예와 유사하게, 이와 같은 부가 구현예는 쿠킹 쇼가 일차 소스 콘텐츠로서 TV를 시청하는 사용자에 의해 선택되고, 쿠킹 쇼가 데이터 통신 허브(106)를 통과할 때, 일차 소스 콘텐츠가 쿠킹 쇼로 인식되는 것을 고려한다. 상기 언급된 바와 같이, 이와 같은 인식은 비디오/오디오 워터마킹/핑거프린팅, 연관된 메타데이터의 판독, 자막 방송 데이터의 매칭, 프로그래밍 가이드에 대한 매칭, ACR 등을 포함하지만 이에 제한되지 않는 다양한 수단에 의해 달성될 수 있다. 부가 구현예에서, 사용자는 일차 소스 콘텐츠에서 요소를 인식하고 이하의 단계를 개시할 수 있다. 일차 소스 콘텐츠가 식별되면, 부가적으로 관련된(상보적 또는 대안적) 이차 소스 콘텐츠는 인터넷 또는 이차 시스템(101)으로부터 검색된다. 이차 소스 콘텐츠에 대한 내부 검색 명령 구조는 일차 소스 콘텐츠 기술 키 워드, 자막 방송 콘텐츠, 일차 소스 콘텐츠와 관련되는 현재 또는 과거 대중적인 검색 용어, 사용자 이력 검색 용어 등에 기초한 템플릿 미리 지정 검색을 포함하지만, 이에 제한되지 않는 다양한 수단을 통해 달성될 수 있다.
다음에, 이용 가능 이차 소스 콘텐츠의 사용자로의 통지는 이차 디바이스(예를 들어, 연결된 이동 디바이스, 예컨대 Wi-Fi 또는 블루투스 등을 통한 다양한 페어링 방법 "올쉐어" 또는 "올조인" 중 어느 것에 의해 데이터 통신 허브(106)에 연결되는 전화 또는 태블릿)로의 통지 또는 일차 디스플레이 디바이스 상의 그래픽 오버레이에 의한 통지(예를 들어, "더 많은 정보를 위해 당신의 TV 또는 태블릿 상에서 OK를 클릭한다")를 포함하지만, 이에 제한되지 않는 다양한 수단에 의해 사용자에게 송신될 수 있다. 페어링 프로세스의 일부로서 또는 독립 액션으로서, 미리 설치된 허브 애플리케이션은 태블릿 상에 활성화된다. 이와 같은 태블릿 애플리케이션은 일차 및 이차 소스 콘텐츠의 본질 및 위치를 제어하고 이차 시스템에 액세스하는 내비게이션 툴뿐만 아니라, 셋톱 박스/TV 리모트 컨트롤, 일차 또는 이차 소스 콘텐츠에 대한 이차 스크린인 것을 포함하는 다양한 활동을 위해 사용될 수 있다. 이와 같은 경우에, 사용자는 일차 디스플레이 디바이스(즉, TV) 상에서 일차 소스 콘텐츠(즉, the 쿠킹 쇼)를 계속 시청하는 것을 선택하고 사용자에게는 태블릿 상에서 더 많은 정보를 위해 클릭하는 옵션이 제시된다. 예를 들어, 쿠킹 쇼는 TV 상에서, 및 동시에, 멀티스크린 상호작용성을 용이하게 하는 허브 애플리케이션 상에서 더 많은 정보를 위해 클릭하는 옵션이 있을 수 있는 연결된 태블릿 상에서 프렌치 토스트를 만드는 법을 증명하고 있을 수 있다. 태블릿/허브 페어링 후에, 부가 정보가 쿠킹 쇼와 관련되는지를 요청하는 메시지가 필요하다. 더 많은 정보가 선택되면, 이때 요구된 성분 및 상세한 레시피의 목록이 제시된다. 사용자가 프렌치 토스트를 만드는 옵션을 선택하면, 일 구현예에 있어서 냉장고 및 컵보드에서 디바이스를 판독하는 RFID에 통신 부착될 수 있는 데이터 통신 허브(106)는 사용자의 집에서 현재 이용 가능 성분의 재고를 취한다. 불행하게도, 이러한 경우에 빵 또는 계피가 없을 때 사용자는 프렌치 토스트를 만들 수 없으며, 사용자에게는 앱을 통해 이것이 통지될 수 있다.
그 다음, 데이터 통신 허브(106) 상에서의 앱 및 관련 프로그래밍 및 인터넷 및 이차 시스템(101)에의 연결을 통해, 사용자는 폐기된 항목을 구매하는 옵션을 제공받는다. 그 다음, 사용자는 자신의 집에서 현재 이용 가능한 것을 사용하여 대안 레시피를 인터넷 및 이차 시스템(101)을 통해 검색한다. 이와 같은 경우에, 사용자는 이용 가능 성분이 주어지면 웨스턴 오믈렛이 최상의 선택인 것을 발견한다. 사용자는 인터넷 상에서 오믈렛의 준비의 비디오를 발견하고 데이터 통신 허브(106)를 통해 TV에서 비디오를 푸시하여 오믈렛을 준비하는 동안 그것을 더 큰 스크린 상에서 시청한다. 오믈렛을 만드는 결정에 따라, 스토브에 통신 연결되는 데이터 통신 허브(106)는 스토브가 원하는 온도로 예열되게 한다. 하나의 개선에서, 오믈렛을 준비하는 완성에 따라, 사용자는 그의 태블릿으로 사진을 찍고 그것을 쿠킹 쇼의 생산자에게 송신하여 프렌치 토스트보다 더 좋은 것을 디스플레이한다. 또한, 오믈렛의 완성에 따라, 사용자는 일차 소스 콘텐츠를 다른 TV 채널 상의 프로그래밍으로 변경하기 위해 태블릿을 이용한다.
상술한 것은 본 발명의 시스템의 예시적 구현예와 함께 설명되었지만, 용어 "예시적"은 최상 또는 최적보다는 오히려, 일 예로서만 의미되는 점이 이해된다는 점이 이해되어야 한다. 따라서, 본원에서의 본 개시는 개시된 시스템의 사상 및 범위 내에 포함될 수 있는 대안들, 수정들 및 균등물들을 망라하도록 의도된다.
부가적으로, 이전 설명에서, 다수의 특정 상세는 본 개시의 철저한 이해를 제공하기 위해 진술되었다. 그러나, 본원에 설명되는 구현예는 이들 특정 상세 없이 실시될 수 있다는 점이 당업자에게 분명해야 한다. 다른 사례에서, 널리 공지된 방법, 절차, 및 구성요소는 본원에서 본 개시의 양태를 불필요하게 모호하지 않도록 상세히 설명되지 않았다.
Claims (21)
- 프레미스(premises)의 하나 이상의 디바이스 상에서 컨텐츠의 표시를 관리하는 방법으로서:
데이터 통신 및 처리 디바이스에 의하여, 컨텐츠 제공자로부터 소스 컨텐츠를 수신하고 소스 컨텐츠 내에 디스플레이되는 항목을 인식하기 위하여 소스 컨텐츠를 분석하는 단계;
소스 컨텐츠 내에서 디스플레이되는 인식된 항목으로 데이터 표시 프로파일 정보를 업데이트하는 단계;
데이터 통신 및 처리 디바이스에 의하여, 소스 컨텐츠 내의 인식된 항목을 포함하는 데이터 표시 프로파일 정보에 기반하여 검색 질의를 획득하는 단계;
데이터 통신 및 처리 디바이스에 의하여, 프레미스의 객체와 연관된 전자 정보 송신 디바이스로부터 전자 정보를 획득하는 단계;
데이터 통신 및 처리 디바이스에 의하여, 프레미스의 디스플레이 디바이스 상에 디스플레이되는 컨텐츠를 식별하도록 검색 질의를 구성하기 위하여 식별된 객체의 타입 및 객체에 관한 특성에 기반하여 검색 질의를 자동으로 개선하는 단계;
데이터 통신 및 처리 디바이스에 의하여, 개선된 검색 질의에 기반하여 추가 미디어 컨텐츠를 식별하는 단계; 및
데이터 통신 및 처리 디바이스에 의하여, 프레미스의 디스플레이 디바이스로 그 위에서 디스플레이되도록 식별된 추가 미디어 컨텐츠를 접근 및 제공하는 단계를 포함하고,
전자 정보는 객체의 타입 및 프레미스의 객체에 대한 특성을 제공하는 기술 정보를 식별하도록 구성되고,
디스플레이 디바이스는 전자 정보 송신 디바이스와 상이한 디바이스인 컨텐츠의 표시를 관리하는 방법. - 청구항 1에 있어서,
데이터 표시 프로파일 정보는 데이터 통신 및 처리 디바이스 및 프레미스의 디스플레이 디바이스의 사용자와 연관된 사용자 프로파일 정보를 포함하는 컨텐츠의 표시를 관리하는 방법. - 청구항 2에 있어서,
전자 데이터베이스에 데이터 통신 및 처리 디바이스의 사용자에 관련된 사용자 프로파일 정보를 저장하는 단계를 더 포함하는 컨텐츠의 표시를 관리하는 방법. - 청구항 1에 있어서,
검색 질의는 소스 컨텐츠의 인식된 항목에 기반하여 복수의 미리 지정된 검색으로부터 접근되는 컨텐츠의 표시를 관리하는 방법. - 청구항 1에 있어서,
데이터 통신 및 처리 디바이스에 의하여, 추가 미디어 컨텐츠를 식별하기 위하여 인터넷 상에 개선된 검색 질의를 적용함으로써 제2 데이터 컨텐츠 소스로부터 추가 미디어 컨텐츠에 접근하는 단계를 더 포함하는 컨텐츠의 표시를 관리하는 방법. - 청구항 1에 있어서,
디스플레이 디바이스 상의 내비게이션 툴에 의하여, 그 위에서 디스플레이되는 추가 미디어 컨텐츠의 적어도 일부를 수신하는 단계; 및
내비게이션 툴에 의하여, 각 디스플레이 디바이스 상에 정보의 조정된 표시를 제공하기 위하여 객체에 관련된 메타데이터 및 추가 미디어 컨텐츠의 디스플레이를 제어하기 위해 다른 디스플레이 디바이스로 전송되는 제어 명령을 생성하는 단계를 더 포함하는 컨텐츠의 표시를 관리하는 방법. - 청구항 1에 있어서,
전자 정보 송신 디바이스는 객체와 연관된 RFID(radio-frequency identification device) 태그를 포함하고,
객체에 관한 특성은 객체의 크기, 브랜드, 구매 일자 및 유효 기간 중 적어도 하나를 포함하는 컨텐츠의 표시를 관리하는 방법. - 프레미스(premises)의 하나 이상의 디바이스 상에서 컨텐츠의 표시를 관리하는 데이터 통신 및 처리 디바이스로서:
적어도 하나의 입력으로서:
컨텐츠 제공자로부터의 소스 컨텐츠; 및
전자 정보 송신 장치로부터의 프레미스의 객체와 연관된 전자 정보를 수신하도록 구성된 적어도 하나의 입력; 및
소프트웨어를 가지는 프로세서를 포함하고, 소프트웨어는 프로세서에 의해 실행될 때, 프로세서로 하여금:
소스 컨텐츠 내에 디스플레이되는 항목을 인식하기 위하여 소스 컨텐츠를 분석하고;
소스 컨텐츠 내에서 디스플레이되는 인식된 항목으로 데이터 표시 프로파일 정보를 업데이트하고;
소스 컨텐츠 내의 인식된 항목을 포함하는 데이터 표시 프로파일 정보에 기반하여 검색 질의를 획득하고;
프레미스의 디스플레이 디바이스 상에 디스플레이되는 컨텐츠를 식별하도록 검색 질의를 구성하기 위하여 식별된 객체의 타입 및 객체에 관한 특성에 기반하여 검색 질의를 자동으로 개선하고;
개선된 검색 질의에 기반하여 추가 미디어 컨텐츠를 식별하고;
데이터 통신 및 처리 디바이스의 적어도 하나의 출력에 의하여, 프레미스의 디스플레이 디바이스로 그 위에서 디스플레이되도록 식별된 추가 미디어 컨텐츠를 전송하도록 야기하고,
전자 정보는 객체의 타입 및 프레미스의 객체에 대한 특성을 제공하는 기술 정보를 식별하도록 구성되고,
디스플레이 디바이스는 전자 정보 송신 디바이스와 상이한 디바이스인 데이터 통신 및 처리 디바이스. - 청구항 8에 있어서,
데이터 표시 프로파일 정보는 프레미스의 디스플레이 디바이스의 사용자와 연관된 사용자 프로파일 정보를 포함하는 데이터 통신 및 처리 디바이스. - 청구항 9에 있어서,
데이터 통신 및 처리 디바이스의 사용자에 관련된 사용자 프로파일 정보를 저장하도록 구성된 전자 메모리를 더 포함하는 데이터 통신 및 처리 디바이스. - 청구항 10에 있어서,
소프트웨어는 프로세서에 의해 실행될 때, 프로세서로 하여금 소스 컨텐츠의 인식된 항목에 기반하여 복수의 미리 지정된 검색으로부터 검색 질의에 접근하도록 더 야기하는 데이터 통신 및 처리 디바이스. - 청구항 10에 있어서,
소프트웨어는 프로세서에 의해 실행될 때, 프로세서로 하여금 추가 미디어 컨텐츠를 식별하기 위하여 인터넷 상에 개선된 검색 질의를 적용함으로써 제2 데이터 컨텐츠 소스로부터 추가 미디어 컨텐츠에 접근하도록 더 야기하는 데이터 통신 및 처리 디바이스. - 청구항 10에 있어서,
소프트웨어는 프로세서에 의해 실행될 때, 프로세서로 하여금:
디스플레이 디바이스 상의 내비게이션 툴에 의하여, 그 위에서 디스플레이되는 추가 미디어 컨텐츠의 적어도 일부를 수신하고;
내비게이션 툴에 의하여, 각 디스플레이 디바이스 상에 정보의 조정된 표시를 제공하기 위하여 객체에 관련된 메타데이터 및 추가 미디어 컨텐츠의 디스플레이를 제어하기 위해 다른 디스플레이 디바이스로 전송되는 제어 명령을 생성하도록 더 야기하는 데이터 통신 및 처리 디바이스. - 청구항 10에 있어서,
전자 정보 송신 디바이스는 객체와 연관된 RFID(radio-frequency identification device) 태그를 포함하고,
객체에 관한 특성은 객체의 크기, 브랜드, 구매 일자 및 유효 기간 중 적어도 하나를 포함하는 데이터 통신 및 처리 디바이스. - 프레미스(premises)의 하나 이상의 디바이스 상에서 컨텐츠의 표시를 관리하는 시스템으로서:
디스플레이 디바이스;
프레미스의 객체와 연관된 전자 정보 송신 디바이스; 및
컨텐츠 제공자로부터의 소스 컨텐츠, 및 전자 정보 송신 장치로부터의 전자 정보를 수신하도록 구성된 적어도 하나의 입력을 포함하는 데이터 통신 및 처리 디바이스를 포함하고,
데이터 통신 및 처리 디바이스는 소프트웨어를 가지는 프로세서를 더 포함하고, 소프트웨어는 프로세서에 의해 실행될 때, 프로세서로 하여금:
소스 컨텐츠 내에 디스플레이되는 항목을 인식하기 위하여 소스 컨텐츠를 분석하고;
소스 컨텐츠 내에서 디스플레이되는 인식된 항목으로 데이터 표시 프로파일 정보를 업데이트하고;
소스 컨텐츠 내의 인식된 항목을 포함하는 데이터 표시 프로파일 정보에 기반하여 검색 질의를 획득하고;
프레미스의 디스플레이 디바이스 상에 디스플레이되는 컨텐츠를 식별하도록 검색 질의를 구성하기 위하여 식별된 객체의 타입 및 객체에 관한 특성에 기반하여 검색 질의를 자동으로 개선하고;
개선된 검색 질의에 기반하여 추가 미디어 컨텐츠를 식별하고;
데이터 통신 및 처리 디바이스의 적어도 하나의 출력에 의하여, 프레미스의 디스플레이 디바이스로 그 위에서 디스플레이되도록 식별된 추가 미디어 컨텐츠를 전송하도록 야기하고,
전자 정보는 객체의 타입 및 프레미스의 객체에 대한 특성을 제공하는 기술 정보를 식별하도록 구성되고,
디스플레이 디바이스는 전자 정보 송신 디바이스와 상이한 디바이스인 컨텐츠의 표시를 관리하는 시스템. - 청구항 15에 있어서,
데이터 표시 프로파일 정보는 프레미스의 디스플레이 디바이스의 사용자와 연관된 사용자 프로파일 정보를 포함하는 컨텐츠의 표시를 관리하는 시스템. - 청구항 16에 있어서,
데이터 통신 및 처리 디바이스의 사용자에 관련된 사용자 프로파일 정보를 저장하도록 구성된 전자 메모리를 더 포함하는 컨텐츠의 표시를 관리하는 시스템. - 청구항 15에 있어서,
소프트웨어는 프로세서에 의해 실행될 때, 프로세서로 하여금 소스 컨텐츠의 인식된 항목에 기반하여 복수의 미리 지정된 검색으로부터 검색 질의에 접근하도록 더 야기하는 컨텐츠의 표시를 관리하는 시스템. - 청구항 15에 있어서,
소프트웨어는 프로세서에 의해 실행될 때, 프로세서로 하여금 추가 미디어 컨텐츠를 식별하기 위하여 인터넷 상에 개선된 검색 질의를 적용함으로써 제2 데이터 컨텐츠 소스로부터 추가 미디어 컨텐츠에 접근하도록 더 야기하는 컨텐츠의 표시를 관리하는 시스템. - 청구항 15에 있어서,
소프트웨어는 프로세서에 의해 실행될 때, 프로세서로 하여금:
디스플레이 디바이스 상의 내비게이션 툴에 의하여, 그 위에서 디스플레이되는 추가 미디어 컨텐츠의 적어도 일부를 수신하고;
내비게이션 툴에 의하여, 각 디스플레이 디바이스 상에 정보의 조정된 표시를 제공하기 위하여 객체에 관련된 메타데이터 및 추가 미디어 컨텐츠의 디스플레이를 제어하기 위해 다른 디스플레이 디바이스로 전송되는 제어 명령을 생성하도록 더 야기하는 컨텐츠의 표시를 관리하는 시스템. - 청구항 15에 있어서,
전자 정보 송신 디바이스는 객체와 연관된 RFID(radio-frequency identification device) 태그를 포함하고,
객체에 관한 특성은 객체의 크기, 브랜드, 구매 일자 및 유효 기간 중 적어도 하나를 포함하는 컨텐츠의 표시를 관리하는 시스템.
Applications Claiming Priority (3)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
US201461925445P | 2014-01-09 | 2014-01-09 | |
US61/925,445 | 2014-01-09 | ||
PCT/US2015/010572 WO2015105940A1 (en) | 2014-01-09 | 2015-01-08 | Digital media content management system and method |
Related Parent Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
KR1020207009915A Division KR102148339B1 (ko) | 2014-01-09 | 2015-01-08 | 디지털 미디어 콘텐츠 관리 시스템 및 방법 |
Publications (1)
Publication Number | Publication Date |
---|---|
KR20200101999A true KR20200101999A (ko) | 2020-08-28 |
Family
ID=53496210
Family Applications (4)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
KR1020207009915A KR102148339B1 (ko) | 2014-01-09 | 2015-01-08 | 디지털 미디어 콘텐츠 관리 시스템 및 방법 |
KR1020207024026A KR20200101999A (ko) | 2014-01-09 | 2015-01-08 | 디지털 미디어 콘텐츠 관리 시스템 및 방법 |
KR1020167020425A KR101925016B1 (ko) | 2014-01-09 | 2015-01-08 | 디지털 미디어 콘텐츠 관리 시스템 및 방법 |
KR1020187034466A KR102099803B1 (ko) | 2014-01-09 | 2015-01-08 | 디지털 미디어 콘텐츠 관리 시스템 및 방법 |
Family Applications Before (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
KR1020207009915A KR102148339B1 (ko) | 2014-01-09 | 2015-01-08 | 디지털 미디어 콘텐츠 관리 시스템 및 방법 |
Family Applications After (2)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
KR1020167020425A KR101925016B1 (ko) | 2014-01-09 | 2015-01-08 | 디지털 미디어 콘텐츠 관리 시스템 및 방법 |
KR1020187034466A KR102099803B1 (ko) | 2014-01-09 | 2015-01-08 | 디지털 미디어 콘텐츠 관리 시스템 및 방법 |
Country Status (6)
Country | Link |
---|---|
US (5) | US9924215B2 (ko) |
EP (1) | EP3087466A4 (ko) |
KR (4) | KR102148339B1 (ko) |
BR (1) | BR112016016010A2 (ko) |
CA (2) | CA2936341C (ko) |
WO (1) | WO2015105940A1 (ko) |
Families Citing this family (146)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US8677377B2 (en) | 2005-09-08 | 2014-03-18 | Apple Inc. | Method and apparatus for building an intelligent automated assistant |
US9318108B2 (en) | 2010-01-18 | 2016-04-19 | Apple Inc. | Intelligent automated assistant |
US8977255B2 (en) | 2007-04-03 | 2015-03-10 | Apple Inc. | Method and system for operating a multi-function portable electronic device using voice-activation |
US10002189B2 (en) | 2007-12-20 | 2018-06-19 | Apple Inc. | Method and apparatus for searching using an active ontology |
US9330720B2 (en) | 2008-01-03 | 2016-05-03 | Apple Inc. | Methods and apparatus for altering audio output signals |
US8996376B2 (en) | 2008-04-05 | 2015-03-31 | Apple Inc. | Intelligent text-to-speech conversion |
US20100030549A1 (en) | 2008-07-31 | 2010-02-04 | Lee Michael M | Mobile device having human language translation capability with positional feedback |
US8676904B2 (en) | 2008-10-02 | 2014-03-18 | Apple Inc. | Electronic devices with voice command and contextual data processing capabilities |
US10241752B2 (en) | 2011-09-30 | 2019-03-26 | Apple Inc. | Interface for a virtual digital assistant |
US10241644B2 (en) | 2011-06-03 | 2019-03-26 | Apple Inc. | Actionable reminder entries |
US10706373B2 (en) | 2011-06-03 | 2020-07-07 | Apple Inc. | Performing actions associated with task items that represent tasks to perform |
US10276170B2 (en) | 2010-01-18 | 2019-04-30 | Apple Inc. | Intelligent automated assistant |
US8682667B2 (en) | 2010-02-25 | 2014-03-25 | Apple Inc. | User profiling for selecting user specific voice input processing information |
KR101839927B1 (ko) * | 2011-01-18 | 2018-03-19 | 에이치에스엔아이 엘엘씨 | 미디어 데이터에 있는 아이템을 인식하고 이와 관련된 정보를 전달하기 위한 시스템 및 방법 |
US9262612B2 (en) | 2011-03-21 | 2016-02-16 | Apple Inc. | Device access using voice authentication |
US10057736B2 (en) | 2011-06-03 | 2018-08-21 | Apple Inc. | Active transport based notifications |
US10134385B2 (en) | 2012-03-02 | 2018-11-20 | Apple Inc. | Systems and methods for name pronunciation |
US10417037B2 (en) | 2012-05-15 | 2019-09-17 | Apple Inc. | Systems and methods for integrating third party services with a digital assistant |
US9721563B2 (en) | 2012-06-08 | 2017-08-01 | Apple Inc. | Name recognition system |
US9547647B2 (en) | 2012-09-19 | 2017-01-17 | Apple Inc. | Voice-based media searching |
KR20240132105A (ko) | 2013-02-07 | 2024-09-02 | 애플 인크. | 디지털 어시스턴트를 위한 음성 트리거 |
US10652394B2 (en) | 2013-03-14 | 2020-05-12 | Apple Inc. | System and method for processing voicemail |
US10748529B1 (en) | 2013-03-15 | 2020-08-18 | Apple Inc. | Voice activated device for use with a voice-based digital assistant |
WO2014197334A2 (en) | 2013-06-07 | 2014-12-11 | Apple Inc. | System and method for user-specified pronunciation of words for speech synthesis and recognition |
WO2014197335A1 (en) | 2013-06-08 | 2014-12-11 | Apple Inc. | Interpreting and acting upon commands that involve sharing information with remote devices |
US10176167B2 (en) | 2013-06-09 | 2019-01-08 | Apple Inc. | System and method for inferring user intent from speech inputs |
KR101772152B1 (ko) | 2013-06-09 | 2017-08-28 | 애플 인크. | 디지털 어시스턴트의 둘 이상의 인스턴스들에 걸친 대화 지속성을 가능하게 하기 위한 디바이스, 방법 및 그래픽 사용자 인터페이스 |
DE112014003653B4 (de) | 2013-08-06 | 2024-04-18 | Apple Inc. | Automatisch aktivierende intelligente Antworten auf der Grundlage von Aktivitäten von entfernt angeordneten Vorrichtungen |
US10296160B2 (en) | 2013-12-06 | 2019-05-21 | Apple Inc. | Method for extracting salient dialog usage from live data |
US9924215B2 (en) * | 2014-01-09 | 2018-03-20 | Hsni, Llc | Digital media content management system and method |
US9633004B2 (en) | 2014-05-30 | 2017-04-25 | Apple Inc. | Better resolution when referencing to concepts |
US9715875B2 (en) | 2014-05-30 | 2017-07-25 | Apple Inc. | Reducing the need for manual start/end-pointing and trigger phrases |
US9430463B2 (en) | 2014-05-30 | 2016-08-30 | Apple Inc. | Exemplar-based natural language processing |
US10170123B2 (en) | 2014-05-30 | 2019-01-01 | Apple Inc. | Intelligent assistant for home automation |
CN110797019B (zh) | 2014-05-30 | 2023-08-29 | 苹果公司 | 多命令单一话语输入方法 |
US9338493B2 (en) | 2014-06-30 | 2016-05-10 | Apple Inc. | Intelligent automated assistant for TV user interactions |
US10659851B2 (en) * | 2014-06-30 | 2020-05-19 | Apple Inc. | Real-time digital assistant knowledge updates |
US9818400B2 (en) | 2014-09-11 | 2017-11-14 | Apple Inc. | Method and apparatus for discovering trending terms in speech requests |
US10074360B2 (en) | 2014-09-30 | 2018-09-11 | Apple Inc. | Providing an indication of the suitability of speech recognition |
US10127911B2 (en) | 2014-09-30 | 2018-11-13 | Apple Inc. | Speaker identification and unsupervised speaker adaptation techniques |
US9668121B2 (en) | 2014-09-30 | 2017-05-30 | Apple Inc. | Social reminders |
US10152299B2 (en) | 2015-03-06 | 2018-12-11 | Apple Inc. | Reducing response latency of intelligent automated assistants |
US9721566B2 (en) | 2015-03-08 | 2017-08-01 | Apple Inc. | Competing devices responding to voice triggers |
US10567477B2 (en) | 2015-03-08 | 2020-02-18 | Apple Inc. | Virtual assistant continuity |
US9886953B2 (en) | 2015-03-08 | 2018-02-06 | Apple Inc. | Virtual assistant activation |
US10460227B2 (en) | 2015-05-15 | 2019-10-29 | Apple Inc. | Virtual assistant in a communication session |
US10200824B2 (en) | 2015-05-27 | 2019-02-05 | Apple Inc. | Systems and methods for proactively identifying and surfacing relevant content on a touch-sensitive device |
US10083688B2 (en) | 2015-05-27 | 2018-09-25 | Apple Inc. | Device voice control for selecting a displayed affordance |
US20160352814A1 (en) * | 2015-05-28 | 2016-12-01 | Brillio LLC | Method and system for template based content projection |
US9578173B2 (en) | 2015-06-05 | 2017-02-21 | Apple Inc. | Virtual assistant aided communication with 3rd party service in a communication session |
US11025565B2 (en) | 2015-06-07 | 2021-06-01 | Apple Inc. | Personalized prediction of responses for instant messaging |
US20160378747A1 (en) | 2015-06-29 | 2016-12-29 | Apple Inc. | Virtual assistant for media playback |
CN106412492B (zh) * | 2015-07-31 | 2020-05-29 | 腾讯科技(深圳)有限公司 | 视频数据处理方法和装置 |
US10743059B2 (en) * | 2015-08-30 | 2020-08-11 | EVA Automation, Inc. | Displaying HDMI content at an arbitrary location |
US10331312B2 (en) | 2015-09-08 | 2019-06-25 | Apple Inc. | Intelligent automated assistant in a media environment |
US10671428B2 (en) | 2015-09-08 | 2020-06-02 | Apple Inc. | Distributed personal assistant |
US10740384B2 (en) | 2015-09-08 | 2020-08-11 | Apple Inc. | Intelligent automated assistant for media search and playback |
US10747498B2 (en) | 2015-09-08 | 2020-08-18 | Apple Inc. | Zero latency digital assistant |
US9798554B2 (en) * | 2015-09-11 | 2017-10-24 | EVA Automation, Inc. | Touch-sensitive remote control with visual feedback |
US11587559B2 (en) | 2015-09-30 | 2023-02-21 | Apple Inc. | Intelligent device identification |
US10691473B2 (en) | 2015-11-06 | 2020-06-23 | Apple Inc. | Intelligent automated assistant in a messaging environment |
US10956666B2 (en) | 2015-11-09 | 2021-03-23 | Apple Inc. | Unconventional virtual assistant interactions |
US10049668B2 (en) | 2015-12-02 | 2018-08-14 | Apple Inc. | Applying neural network language models to weighted finite state transducers for automatic speech recognition |
US10223066B2 (en) | 2015-12-23 | 2019-03-05 | Apple Inc. | Proactive assistance based on dialog communication between devices |
US11227589B2 (en) | 2016-06-06 | 2022-01-18 | Apple Inc. | Intelligent list reading |
US10249300B2 (en) | 2016-06-06 | 2019-04-02 | Apple Inc. | Intelligent list reading |
US10049663B2 (en) | 2016-06-08 | 2018-08-14 | Apple, Inc. | Intelligent automated assistant for media exploration |
DK179588B1 (en) | 2016-06-09 | 2019-02-22 | Apple Inc. | INTELLIGENT AUTOMATED ASSISTANT IN A HOME ENVIRONMENT |
US10586535B2 (en) | 2016-06-10 | 2020-03-10 | Apple Inc. | Intelligent digital assistant in a multi-tasking environment |
US10067938B2 (en) | 2016-06-10 | 2018-09-04 | Apple Inc. | Multilingual word prediction |
DK179415B1 (en) | 2016-06-11 | 2018-06-14 | Apple Inc | Intelligent device arbitration and control |
DK179343B1 (en) | 2016-06-11 | 2018-05-14 | Apple Inc | Intelligent task discovery |
DK201670540A1 (en) | 2016-06-11 | 2018-01-08 | Apple Inc | Application integration with a digital assistant |
CN106331606A (zh) * | 2016-08-17 | 2017-01-11 | 武汉烽火众智数字技术有限责任公司 | 一种用于视频侦查系统的多屏展示系统及方法 |
US20180219810A1 (en) * | 2016-08-29 | 2018-08-02 | Mezzemail Llc | Transmitting tagged electronic messages |
US10474753B2 (en) | 2016-09-07 | 2019-11-12 | Apple Inc. | Language identification using recurrent neural networks |
US10043516B2 (en) | 2016-09-23 | 2018-08-07 | Apple Inc. | Intelligent automated assistant |
US11281993B2 (en) | 2016-12-05 | 2022-03-22 | Apple Inc. | Model and ensemble compression for metric learning |
US10593346B2 (en) | 2016-12-22 | 2020-03-17 | Apple Inc. | Rank-reduced token representation for automatic speech recognition |
US11204787B2 (en) | 2017-01-09 | 2021-12-21 | Apple Inc. | Application integration with a digital assistant |
US10417266B2 (en) | 2017-05-09 | 2019-09-17 | Apple Inc. | Context-aware ranking of intelligent response suggestions |
DK201770383A1 (en) | 2017-05-09 | 2018-12-14 | Apple Inc. | USER INTERFACE FOR CORRECTING RECOGNITION ERRORS |
DK180048B1 (en) | 2017-05-11 | 2020-02-04 | Apple Inc. | MAINTAINING THE DATA PROTECTION OF PERSONAL INFORMATION |
US10726832B2 (en) | 2017-05-11 | 2020-07-28 | Apple Inc. | Maintaining privacy of personal information |
US10395654B2 (en) | 2017-05-11 | 2019-08-27 | Apple Inc. | Text normalization based on a data-driven learning network |
DK201770439A1 (en) | 2017-05-11 | 2018-12-13 | Apple Inc. | Offline personal assistant |
US11301477B2 (en) | 2017-05-12 | 2022-04-12 | Apple Inc. | Feedback analysis of a digital assistant |
DK179745B1 (en) | 2017-05-12 | 2019-05-01 | Apple Inc. | SYNCHRONIZATION AND TASK DELEGATION OF A DIGITAL ASSISTANT |
DK179496B1 (en) | 2017-05-12 | 2019-01-15 | Apple Inc. | USER-SPECIFIC Acoustic Models |
DK201770428A1 (en) | 2017-05-12 | 2019-02-18 | Apple Inc. | LOW-LATENCY INTELLIGENT AUTOMATED ASSISTANT |
DK201770411A1 (en) | 2017-05-15 | 2018-12-20 | Apple Inc. | MULTI-MODAL INTERFACES |
DK201770432A1 (en) | 2017-05-15 | 2018-12-21 | Apple Inc. | Hierarchical belief states for digital assistants |
DK201770431A1 (en) | 2017-05-15 | 2018-12-20 | Apple Inc. | Optimizing dialogue policy decisions for digital assistants using implicit feedback |
US10311144B2 (en) | 2017-05-16 | 2019-06-04 | Apple Inc. | Emoji word sense disambiguation |
US20180336892A1 (en) | 2017-05-16 | 2018-11-22 | Apple Inc. | Detecting a trigger of a digital assistant |
DK179549B1 (en) | 2017-05-16 | 2019-02-12 | Apple Inc. | FAR-FIELD EXTENSION FOR DIGITAL ASSISTANT SERVICES |
US10403278B2 (en) | 2017-05-16 | 2019-09-03 | Apple Inc. | Methods and systems for phonetic matching in digital assistant services |
US20180336275A1 (en) | 2017-05-16 | 2018-11-22 | Apple Inc. | Intelligent automated assistant for media exploration |
US10657328B2 (en) | 2017-06-02 | 2020-05-19 | Apple Inc. | Multi-task recurrent neural network architecture for efficient morphology handling in neural language modeling |
US10445429B2 (en) | 2017-09-21 | 2019-10-15 | Apple Inc. | Natural language understanding using vocabularies with compressed serialized tries |
US10755051B2 (en) | 2017-09-29 | 2020-08-25 | Apple Inc. | Rule-based natural language processing |
US10636424B2 (en) | 2017-11-30 | 2020-04-28 | Apple Inc. | Multi-turn canned dialog |
US10733982B2 (en) | 2018-01-08 | 2020-08-04 | Apple Inc. | Multi-directional dialog |
US10939182B2 (en) * | 2018-01-31 | 2021-03-02 | WowYow, Inc. | Methods and apparatus for media search, characterization, and augmented reality provision |
US10733375B2 (en) | 2018-01-31 | 2020-08-04 | Apple Inc. | Knowledge-based framework for improving natural language understanding |
US10789959B2 (en) | 2018-03-02 | 2020-09-29 | Apple Inc. | Training speaker recognition models for digital assistants |
US10592604B2 (en) | 2018-03-12 | 2020-03-17 | Apple Inc. | Inverse text normalization for automatic speech recognition |
US10818288B2 (en) | 2018-03-26 | 2020-10-27 | Apple Inc. | Natural assistant interaction |
US10909331B2 (en) | 2018-03-30 | 2021-02-02 | Apple Inc. | Implicit identification of translation payload with neural machine translation |
US10928918B2 (en) | 2018-05-07 | 2021-02-23 | Apple Inc. | Raise to speak |
US11145294B2 (en) | 2018-05-07 | 2021-10-12 | Apple Inc. | Intelligent automated assistant for delivering content from user experiences |
US10984780B2 (en) | 2018-05-21 | 2021-04-20 | Apple Inc. | Global semantic word embeddings using bi-directional recurrent neural networks |
DK201870355A1 (en) | 2018-06-01 | 2019-12-16 | Apple Inc. | VIRTUAL ASSISTANT OPERATION IN MULTI-DEVICE ENVIRONMENTS |
DK180639B1 (en) | 2018-06-01 | 2021-11-04 | Apple Inc | DISABILITY OF ATTENTION-ATTENTIVE VIRTUAL ASSISTANT |
US11386266B2 (en) | 2018-06-01 | 2022-07-12 | Apple Inc. | Text correction |
DK179822B1 (da) | 2018-06-01 | 2019-07-12 | Apple Inc. | Voice interaction at a primary device to access call functionality of a companion device |
US10892996B2 (en) | 2018-06-01 | 2021-01-12 | Apple Inc. | Variable latency device coordination |
US11076039B2 (en) | 2018-06-03 | 2021-07-27 | Apple Inc. | Accelerated task performance |
US10871935B2 (en) * | 2018-09-18 | 2020-12-22 | Roku, Inc. | Audio cancellation and content recognition of audio received over HDMI/ARC |
US11010561B2 (en) | 2018-09-27 | 2021-05-18 | Apple Inc. | Sentiment prediction from textual data |
US11170166B2 (en) | 2018-09-28 | 2021-11-09 | Apple Inc. | Neural typographical error modeling via generative adversarial networks |
US10839159B2 (en) | 2018-09-28 | 2020-11-17 | Apple Inc. | Named entity normalization in a spoken dialog system |
US11462215B2 (en) | 2018-09-28 | 2022-10-04 | Apple Inc. | Multi-modal inputs for voice commands |
US11475898B2 (en) | 2018-10-26 | 2022-10-18 | Apple Inc. | Low-latency multi-speaker speech recognition |
US11638059B2 (en) | 2019-01-04 | 2023-04-25 | Apple Inc. | Content playback on multiple devices |
US11294950B2 (en) * | 2019-01-18 | 2022-04-05 | Haier Us Appliance Solutions, Inc. | Cooking engagement system equipped with a recipe application for combining third party recipe content |
US11348573B2 (en) | 2019-03-18 | 2022-05-31 | Apple Inc. | Multimodality in digital assistant systems |
DK201970509A1 (en) | 2019-05-06 | 2021-01-15 | Apple Inc | Spoken notifications |
US11307752B2 (en) | 2019-05-06 | 2022-04-19 | Apple Inc. | User configurable task triggers |
US11423908B2 (en) | 2019-05-06 | 2022-08-23 | Apple Inc. | Interpreting spoken requests |
US11475884B2 (en) | 2019-05-06 | 2022-10-18 | Apple Inc. | Reducing digital assistant latency when a language is incorrectly determined |
US11140099B2 (en) | 2019-05-21 | 2021-10-05 | Apple Inc. | Providing message response suggestions |
US11496600B2 (en) | 2019-05-31 | 2022-11-08 | Apple Inc. | Remote execution of machine-learned models |
US11289073B2 (en) | 2019-05-31 | 2022-03-29 | Apple Inc. | Device text to speech |
DK180129B1 (en) | 2019-05-31 | 2020-06-02 | Apple Inc. | USER ACTIVITY SHORTCUT SUGGESTIONS |
DK201970511A1 (en) | 2019-05-31 | 2021-02-15 | Apple Inc | Voice identification in digital assistant systems |
US11360641B2 (en) | 2019-06-01 | 2022-06-14 | Apple Inc. | Increasing the relevance of new available information |
US11227599B2 (en) | 2019-06-01 | 2022-01-18 | Apple Inc. | Methods and user interfaces for voice-based control of electronic devices |
WO2021056255A1 (en) | 2019-09-25 | 2021-04-01 | Apple Inc. | Text detection using global geometry estimators |
CN113453079B (zh) * | 2020-03-24 | 2022-08-26 | 海信视像科技股份有限公司 | 一种双系统大小双屏应用返回的控制方法及显示设备 |
US11038934B1 (en) | 2020-05-11 | 2021-06-15 | Apple Inc. | Digital assistant hardware abstraction |
US11061543B1 (en) | 2020-05-11 | 2021-07-13 | Apple Inc. | Providing relevant data items based on context |
US11490204B2 (en) | 2020-07-20 | 2022-11-01 | Apple Inc. | Multi-device audio adjustment coordination |
US11438683B2 (en) | 2020-07-21 | 2022-09-06 | Apple Inc. | User identification using headphones |
US20240070993A1 (en) * | 2022-08-31 | 2024-02-29 | Micron Technology, Inc. | Navigation paths for directing users to food items based on meal plans |
US20240340504A1 (en) * | 2023-04-04 | 2024-10-10 | Sony Group Corporation | Television food detection |
Family Cites Families (38)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US20020184195A1 (en) | 2001-05-30 | 2002-12-05 | Qian Richard J. | Integrating content from media sources |
US20030093791A1 (en) * | 2001-11-09 | 2003-05-15 | Julia Luc E. | System and method for interactive television |
US10664138B2 (en) * | 2003-03-14 | 2020-05-26 | Comcast Cable Communications, Llc | Providing supplemental content for a second screen experience |
WO2005109908A2 (en) | 2004-04-30 | 2005-11-17 | Vulcan Inc. | Maintaining a graphical user interface state that is based on a selected piece of content |
US8042048B2 (en) * | 2005-11-17 | 2011-10-18 | Att Knowledge Ventures, L.P. | System and method for home automation |
US20080083003A1 (en) | 2006-09-29 | 2008-04-03 | Bryan Biniak | System for providing promotional content as part of secondary content associated with a primary broadcast |
EP2097862A4 (en) | 2006-12-01 | 2011-11-09 | Hsni Llc | METHOD AND SYSTEM FOR INTERACTIVE TELEVISION PROCESSING |
KR100901020B1 (ko) * | 2007-08-23 | 2009-06-04 | 엘지전자 주식회사 | 냉장고 및 그 제어방법 |
US8027029B2 (en) | 2007-11-07 | 2011-09-27 | Magna Electronics Inc. | Object detection and tracking system |
US8875212B2 (en) * | 2008-04-15 | 2014-10-28 | Shlomo Selim Rakib | Systems and methods for remote control of interactive video |
US20100138875A1 (en) | 2007-11-30 | 2010-06-03 | Johnson Gerard C | Method and system for improved interactive television processing |
DE112008003766T5 (de) | 2008-03-05 | 2011-05-12 | Hewlett-Packard Development Co., L.P., Houston | Synchronisierung und Fensterung von externem Inhalt in digitalen Anzeigesystemen |
US8793256B2 (en) | 2008-03-26 | 2014-07-29 | Tout Industries, Inc. | Method and apparatus for selecting related content for display in conjunction with a media |
KR101523285B1 (ko) * | 2008-07-07 | 2015-05-27 | 엘지전자 주식회사 | 타 휴대 단말기의 화면 표시가 가능한 휴대 단말기 및 그제어방법 |
US7756758B2 (en) | 2008-12-08 | 2010-07-13 | Hsn Lp | Method and system for improved E-commerce shopping |
US8655146B2 (en) * | 2009-03-31 | 2014-02-18 | Broadcom Corporation | Collection and concurrent integration of supplemental information related to currently playing media |
US8717289B2 (en) | 2010-06-22 | 2014-05-06 | Hsni Llc | System and method for integrating an electronic pointing device into digital image data |
US20120081299A1 (en) | 2010-10-04 | 2012-04-05 | Verizon Patent And Licensing Inc. | Method and apparatus for providing remote control via a touchable display |
WO2012070250A1 (ja) * | 2010-11-25 | 2012-05-31 | パナソニック株式会社 | 通信機器 |
US8898310B2 (en) | 2010-12-15 | 2014-11-25 | Microsoft Corporation | Enhanced content consumption |
US8984562B2 (en) | 2011-01-13 | 2015-03-17 | Verizon Patent And Licensing Inc. | Method and apparatus for interacting with a set-top box using widgets |
KR101839927B1 (ko) | 2011-01-18 | 2018-03-19 | 에이치에스엔아이 엘엘씨 | 미디어 데이터에 있는 아이템을 인식하고 이와 관련된 정보를 전달하기 위한 시스템 및 방법 |
US20120226659A1 (en) * | 2011-02-02 | 2012-09-06 | Ball Derek | System and method for monitoring elements and categorizing users within a network |
US8430302B2 (en) * | 2011-02-03 | 2013-04-30 | Echostar Technologies L.L.C. | Enabling interactive activities for content utilizing matrix codes |
KR101249719B1 (ko) * | 2011-05-04 | 2013-04-03 | 주식회사 인프라웨어테크놀러지 | 어플리케이션 클론 실행 방법, 컴퓨터로 판독가능한 기록매체, 및 이를 지원하는 클론단말 |
KR20120124543A (ko) | 2011-05-04 | 2012-11-14 | 이영우 | 패널 조립구조 |
US8917971B2 (en) * | 2011-12-30 | 2014-12-23 | United Video Properties, Inc. | Methods and systems for providing relevant supplemental content to a user device |
US9930094B2 (en) | 2012-03-27 | 2018-03-27 | Industry-Academic Cooperation of Yonsei University | Content complex providing server for a group of terminals |
KR101999182B1 (ko) | 2012-04-08 | 2019-07-11 | 삼성전자주식회사 | 사용자 단말 장치 및 그의 제어 방법 |
US20130347018A1 (en) * | 2012-06-21 | 2013-12-26 | Amazon Technologies, Inc. | Providing supplemental content with active media |
US9788055B2 (en) * | 2012-09-19 | 2017-10-10 | Google Inc. | Identification and presentation of internet-accessible content associated with currently playing television programs |
US8839309B2 (en) * | 2012-12-05 | 2014-09-16 | United Video Properties, Inc. | Methods and systems for displaying contextually relevant information from a plurality of users in real-time regarding a media asset |
US20140245335A1 (en) * | 2013-02-25 | 2014-08-28 | Comcast Cable Communications, Llc | Environment Object Recognition |
US9197915B2 (en) * | 2013-03-15 | 2015-11-24 | Tuneln, Inc. | Providing personalized experiences related to streaming of broadcast content over a network |
US9497497B2 (en) | 2013-10-31 | 2016-11-15 | Verizon Patent And Licensing Inc. | Supplemental content for a video program |
US20150156266A1 (en) * | 2013-11-29 | 2015-06-04 | Qualcomm Incorporated | Discovering cloud-based services for iot devices in an iot network associated with a user |
US9924215B2 (en) * | 2014-01-09 | 2018-03-20 | Hsni, Llc | Digital media content management system and method |
FR3074569B1 (fr) | 2017-12-04 | 2019-12-27 | Jean-Emmanuel Faure | Pompe a chaleur thermochimique et procede de redistribution d'energie calorifique a puissance variable |
-
2015
- 2015-01-07 US US14/591,309 patent/US9924215B2/en active Active
- 2015-01-08 KR KR1020207009915A patent/KR102148339B1/ko active IP Right Grant
- 2015-01-08 CA CA2936341A patent/CA2936341C/en not_active Expired - Fee Related
- 2015-01-08 WO PCT/US2015/010572 patent/WO2015105940A1/en active Application Filing
- 2015-01-08 KR KR1020207024026A patent/KR20200101999A/ko active IP Right Grant
- 2015-01-08 EP EP15735129.7A patent/EP3087466A4/en not_active Withdrawn
- 2015-01-08 KR KR1020167020425A patent/KR101925016B1/ko active IP Right Grant
- 2015-01-08 KR KR1020187034466A patent/KR102099803B1/ko active IP Right Grant
- 2015-01-08 CA CA3040417A patent/CA3040417C/en active Active
- 2015-01-08 BR BR112016016010A patent/BR112016016010A2/pt not_active IP Right Cessation
- 2015-02-18 US US14/624,722 patent/US9571875B2/en active Active
-
2018
- 2018-02-02 US US15/886,922 patent/US10631033B2/en not_active Expired - Fee Related
-
2020
- 2020-04-07 US US16/841,926 patent/US10958960B2/en active Active
-
2021
- 2021-02-16 US US17/176,956 patent/US20220021923A1/en active Pending
Also Published As
Publication number | Publication date |
---|---|
CA3040417C (en) | 2022-02-22 |
WO2015105940A1 (en) | 2015-07-16 |
KR20180132158A (ko) | 2018-12-11 |
US20150195606A1 (en) | 2015-07-09 |
US9924215B2 (en) | 2018-03-20 |
US20180160164A1 (en) | 2018-06-07 |
KR101925016B1 (ko) | 2018-12-04 |
EP3087466A1 (en) | 2016-11-02 |
CA3040417A1 (en) | 2015-07-16 |
KR102099803B1 (ko) | 2020-04-10 |
US20220021923A1 (en) | 2022-01-20 |
US10631033B2 (en) | 2020-04-21 |
US9571875B2 (en) | 2017-02-14 |
KR20160107209A (ko) | 2016-09-13 |
US20150195603A1 (en) | 2015-07-09 |
KR20200053526A (ko) | 2020-05-18 |
US20200304860A1 (en) | 2020-09-24 |
CA2936341A1 (en) | 2015-07-16 |
US10958960B2 (en) | 2021-03-23 |
EP3087466A4 (en) | 2017-06-28 |
CA2936341C (en) | 2019-06-04 |
BR112016016010A2 (pt) | 2017-08-08 |
KR102148339B1 (ko) | 2020-08-26 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US10958960B2 (en) | Digital media content management system and method | |
US11696102B2 (en) | Systems and methods for auto-configuring a user equipment device with content consumption material | |
US9164672B2 (en) | Image display device and method of managing contents using the same | |
US20130173765A1 (en) | Systems and methods for assigning roles between user devices | |
US20140156801A1 (en) | Cowatching and connected platforms using a push architecture | |
US20120278825A1 (en) | Crowd sourcing | |
US11012754B2 (en) | Display apparatus for searching and control method thereof | |
US20150222946A1 (en) | Display apparatus, method for controlling the same, and computer-readable recording medium | |
US20180146257A1 (en) | Electronic apparatus and method of operating the same | |
KR20150068686A (ko) | 선호 컨텐츠 제공 방법 및 장치 | |
EP2519024A1 (en) | Crowd sourcing | |
CN107113455A (zh) | 预览在本地媒体源处可用的内容 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A107 | Divisional application of patent | ||
A201 | Request for examination | ||
E902 | Notification of reason for refusal | ||
E701 | Decision to grant or registration of patent right |