KR20150009986A - 일상 디바이스들을 통해 몰입적 상호작용을 제공하기 위한 방법 및 장치 - Google Patents

일상 디바이스들을 통해 몰입적 상호작용을 제공하기 위한 방법 및 장치 Download PDF

Info

Publication number
KR20150009986A
KR20150009986A KR1020147034213A KR20147034213A KR20150009986A KR 20150009986 A KR20150009986 A KR 20150009986A KR 1020147034213 A KR1020147034213 A KR 1020147034213A KR 20147034213 A KR20147034213 A KR 20147034213A KR 20150009986 A KR20150009986 A KR 20150009986A
Authority
KR
South Korea
Prior art keywords
devices
content
combination
control signals
information
Prior art date
Application number
KR1020147034213A
Other languages
English (en)
Other versions
KR101850179B1 (ko
Inventor
디에고 발디니
스티븐 바우어
스티븐 제임스 롤링스
Original Assignee
노키아 코포레이션
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 노키아 코포레이션 filed Critical 노키아 코포레이션
Publication of KR20150009986A publication Critical patent/KR20150009986A/ko
Application granted granted Critical
Publication of KR101850179B1 publication Critical patent/KR101850179B1/ko

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L67/00—Network arrangements or protocols for supporting network services or applications
    • H04L67/01—Protocols
    • H04L67/08—Protocols specially adapted for terminal emulation, e.g. Telnet
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L69/00—Network arrangements, protocols or services independent of the application payload and not provided for in the other groups of this subclass
    • H04L69/18—Multiprotocol handlers, e.g. single devices capable of handling multiple protocols
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04M—TELEPHONIC COMMUNICATION
    • H04M1/00—Substation equipment, e.g. for use by subscribers
    • H04M1/72—Mobile telephones; Cordless telephones, i.e. devices for establishing wireless links to base stations without route selection
    • H04M1/724—User interfaces specially adapted for cordless or mobile telephones
    • H04M1/72403—User interfaces specially adapted for cordless or mobile telephones with means for local support of applications that increase the functionality
    • H04M1/72409—User interfaces specially adapted for cordless or mobile telephones with means for local support of applications that increase the functionality by interfacing with external accessories
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04W—WIRELESS COMMUNICATION NETWORKS
    • H04W4/00—Services specially adapted for wireless communication networks; Facilities therefor
    • H04W4/18—Information format or content conversion, e.g. adaptation by the network of the transmitted or received information for the purpose of wireless delivery to users or terminals
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04W—WIRELESS COMMUNICATION NETWORKS
    • H04W56/00—Synchronisation arrangements
    • H04W56/001—Synchronization between nodes
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04W—WIRELESS COMMUNICATION NETWORKS
    • H04W8/00—Network data management
    • H04W8/22—Processing or transfer of terminal data, e.g. status or physical capabilities
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/011—Arrangements for interaction with the human body, e.g. for user immersion in virtual reality
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04W—WIRELESS COMMUNICATION NETWORKS
    • H04W88/00—Devices specially adapted for wireless communication networks, e.g. terminals, base stations or access point devices
    • H04W88/02—Terminal devices
    • H04W88/06—Terminal devices adapted for operation in multiple networks or having at least two operational modes, e.g. multi-mode terminals

Landscapes

  • Engineering & Computer Science (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Signal Processing (AREA)
  • Human Computer Interaction (AREA)
  • Computer Security & Cryptography (AREA)
  • General Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Databases & Information Systems (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • User Interface Of Digital Computer (AREA)
  • Telephonic Communication Services (AREA)
  • Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)
  • Telephone Function (AREA)
  • Information Transfer Between Computers (AREA)

Abstract

하나 이상의 몰입적 상호작용 이벤트에 기초하여 일상 디바이스들을 통해 몰입적 상호작용을 제공하기 위한 접근 방법이 제공된다. 몰입 서비스는 디바이스에서 제공되는 콘텐츠를 처리하여 하나 이상의 몰입적 상호작용 이벤트를 결정한다. 몰입 서비스는 또한 (a) 하나 이상의 몰입적 상호작용 이벤트를 적어도 부분적으로 유발하도록 디바이스, 하나 이상의 다른 디바이스 또는 이들의 조합을 제어하기 위한 하나 이상의 제어 신호, (b) 하나 이상의 제어 신호를 전송하기 위한 하나 이상의 프로토콜, 또는 (c) 이들의 조합을 결정한다. 몰입 서비스는 또한 디바이스, 하나 이상의 다른 디바이스 또는 이들의 조합으로의 하나 이상의 제어 신호의 전송을 적어도 부분적으로 유발한다.

Description

일상 디바이스들을 통해 몰입적 상호작용을 제공하기 위한 방법 및 장치{METHOD AND APPARATUS FOR PROVIDING IMMERSIVE INTERACTION VIA EVERYDAY DEVICES}
본 발명은 일상 디바이스들을 통해 몰입적 상호작용을 제공하기 위한 방법 및 장치에 관한 것이다.
서비스 제공자들 및 디바이스 제조자들(예로서, 무선, 셀룰러 등)은 예를 들어 강력한 서비스들을 제공함으로써 소비자들에게 가치와 편의를 제공하도록 계속 요구받고 있다. 서비스 제공자들 및 디바이스 제조자들은 또한 소비자들이 콘텐츠를 경험하는 새로운 방법들을 제공하도록 콘텐츠 제공자들에 의해 계속 요구받고 있다. 서비스 제공자들, 디바이스 제조자들 및 콘텐츠 제공자들의 하나의 관심 영역은 콘텐츠 소비 시에 소비자들에게 더 사실적인 경험을 제공하는 것이다. 예컨대, 디바이스 제조자들은 소비자들에게 멀티미디어 콘텐츠(예로서, 영화, 텔레비전 프로그래밍 등)를 제공하여 소비자들이 콘텐츠를 삼차원으로 볼 수 있게 해주는 디바이스들(예로서, 텔레비전, 프로젝터, 이동 전화 등)을 개발하였다. 또한, 특정 영화관들은 진동 및/또는 유체(예로서, 공기, 물 등)의 스프레이와 같은 소비자들과의 촉각 상호작용들에 추가하여 소비자들이 삼차원으로 인식하는 영화들을 제공할 수 있다. 게다가, 제조자들은 실세계 디바이스들을 시뮬레이션하는 디바이스들을 개발하였으며, 사용자들은 이들을 이용하여 콘텐츠의 제공과 상호작용할 수 있다. 예를 들어, 많은 비디오 게임들은 게임에서 표현되는 하나 이상의 실세계 디바이스를 시뮬레이션하는 라이플(rifles), 골프 클럽, 모션 감지 제어기와 같은 특수 디바이스들과 관련된다. 유사하게, 콘텐츠 제공자들은 시뮬레이션되는 디바이스들과 상호작용할 콘텐츠를 개발하였다. 그러나, 그러한 인식되는 사실성의 증가를 경험하기 위해, 소비자들은 예를 들어 특수 장비(예로서, 삼차원 호환 디스플레이, 시뮬레이션되는 디바이스 등)를 구매하거나, 특수하게 포맷팅된 영화들 및/또는 특수하게 구성된 장비를 갖춘 특수 영화관들에 가야 한다. 그러나, 특수 장비를 이용하는 경우에도, 콘텐츠는 사용자 주위의 사실성을 이용하지 못하며, 사용자와 개인적으로 상호작용하지 못한다. 예를 들어, 사용자가 게임에 관여할 때, 실세계 디바이스를 시뮬레이션하는 디바이스에 관여하는 경우에도, 사용자는 심리적으로 게임에 몰입하지 못한다. 사용자는 여전히 게임 실행과 게임 밖의 실세계 사이의 차이를 이해한다. 따라서, 사용자는 심리적으로 콘텐츠에 몰입하지 못하는데, 그 이유는 적어도 부분적으로는 콘텐츠가 사용자와 관련된 일상 디바이스들과 상호작용하지 않기 때문이다. 따라서, 소비자는 콘텐츠에 완전히 몰입하지 못한다. 따라서, 서비스 제공자들, 디바이스 제조자들 및 콘텐츠 제공자들은 소비자들과 관련된 일상 디바이스들을 이용하여 소비자들과 개인적으로 상호작용하는 콘텐츠에 소비자들을 몰입시키는 데 있어서 커다란 도전에 직면한다.
따라서, 하나 이상의 몰입적 상호작용 이벤트에 기초하여 일상 디바이스들을 통해 몰입적 상호작용을 제공하기 위한 접근 방법이 필요하다.
일 실시예에 따르면, 방법은 디바이스에서 제공되는 콘텐츠를 처리하여 하나 이상의 몰입적 상호작용 이벤트를 결정하는 단계를 포함한다. 방법은 또한 (a) 상기 하나 이상의 몰입적 상호작용 이벤트를 적어도 부분적으로 유발하도록 상기 디바이스, 하나 이상의 다른 디바이스 또는 이들의 조합을 제어하기 위한 하나 이상의 제어 신호; (b) 상기 하나 이상의 제어 신호를 전송하기 위한 하나 이상의 프로토콜; 또는 (c) 이들의 조합을 결정하는 단계를 포함한다. 방법은 상기 디바이스, 상기 하나 이상의 다른 디바이스 또는 이들의 조합으로의 상기 하나 이상의 제어 신호의 전송을 적어도 부분적으로 유발하는 단계를 더 포함한다.
다른 실시예에 따르면, 장치는 적어도 하나의 프로세서, 및 하나 이상의 컴퓨터 프로그램에 대한 컴퓨터 프로그램 코드를 포함하는 적어도 하나의 메모리를 포함하고, 상기 적어도 하나의 메모리 및 상기 컴퓨터 프로그램 코드는 상기 적어도 하나의 프로세서를 이용하여, 적어도 부분적으로 상기 장치로 하여금 디바이스에서 제공되는 콘텐츠를 처리하여 하나 이상의 몰입적 상호작용 이벤트를 결정하게 하도록 구성된다. 상기 장치는 또한 (a) 상기 하나 이상의 몰입적 상호작용 이벤트를 적어도 부분적으로 유발하도록 상기 디바이스, 하나 이상의 다른 디바이스 또는 이들의 조합을 제어하기 위한 하나 이상의 제어 신호; (b) 상기 하나 이상의 제어 신호를 전송하기 위한 하나 이상의 프로토콜; 또는 (c) 이들의 조합을 결정한다. 상기 장치는 또한 상기 디바이스, 상기 하나 이상의 다른 디바이스 또는 이들의 조합으로 상기 하나 이상의 제어 신호를 전송한다.
다른 실시예에 따르면, 컴퓨터 판독 가능 저장 매체는 하나 이상의 프로세서에 의해 실행될 때, 적어도 부분적으로 장치로 하여금 디바이스에서 제공되는 콘텐츠를 처리하여 하나 이상의 몰입적 상호작용 이벤트를 결정하게 하는 하나 이상의 명령어(예로서, 하나 이상의 컴퓨터 프로그램)의 하나 이상의 시퀀스를 갖는다. 상기 장치는 또한 (a) 상기 하나 이상의 몰입적 상호작용 이벤트를 적어도 부분적으로 유발하도록 상기 디바이스, 하나 이상의 다른 디바이스 또는 이들의 조합을 제어하기 위한 하나 이상의 제어 신호; (b) 상기 하나 이상의 제어 신호를 전송하기 위한 하나 이상의 프로토콜; 또는 (c) 이들의 조합을 결정한다. 상기 장치는 또한 상기 디바이스, 상기 하나 이상의 다른 디바이스 또는 이들의 조합으로 상기 하나 이상의 제어 신호를 전송한다.
다른 실시예에 따르면, 장치는 디바이스에서 제공되는 콘텐츠를 처리하여 하나 이상의 몰입적 상호작용 이벤트를 결정하기 위한 수단을 포함한다. 상기 장치는 또한 (a) 상기 하나 이상의 몰입적 상호작용 이벤트를 적어도 부분적으로 유발하도록 상기 디바이스, 하나 이상의 다른 디바이스 또는 이들의 조합을 제어하기 위한 하나 이상의 제어 신호; (b) 상기 하나 이상의 제어 신호를 전송하기 위한 하나 이상의 프로토콜; 또는 (c) 이들의 조합을 결정하기 위한 수단을 포함한다. 상기 장치는 또한 상기 디바이스, 상기 하나 이상의 다른 디바이스 또는 이들의 조합으로의 상기 하나 이상의 제어 신호의 전송을 적어도 부분적으로 유발하기 위한 수단을 더 포함한다.
게다가, 본 발명의 다양한 실시예들에서는, (1) 데이터 및/또는 (2) 정보 및/또는 (3) 적어도 하나의 신호의 처리를 가능하게 하고/하거나 그들을 처리하는 단계를 포함하는 방법이 이용 가능하며, (1) 데이터 및/또는 (2) 정보 및/또는 (3) 적어도 하나의 신호는 본 발명의 임의의 실시예와 관련된 바와 같은 본원에서 개시되는 방법들(프로세스들) 중 어느 하나 또는 임의의 조합에 적어도 부분적으로 기초한다(또는 그로부터 적어도 부분적으로 도출된다).
본 발명의 다양한 실시예들에서는, 적어도 하나의 서비스에 대한 액세스를 허가하도록 구성되는 적어도 하나의 인터페이스에 대한 액세스를 가능하게 하는 단계를 포함하는 방법도 이용 가능하며, 상기 적어도 하나의 서비스는 본원에서 개시되는 네트워크 또는 서비스 제공자 방법들(프로세스들) 중 어느 하나 또는 임의의 조합을 수행하도록 구성된다.
본 발명의 다양한 실시예들에서는, (1) 적어도 하나의 디바이스 사용자 인터페이스 요소 및/또는 (2) 적어도 하나의 디바이스 사용자 인터페이스 기능의 생성 및/또는 변경을 가능하게 하는 단계를 포함하는 방법도 이용 가능하며, (1) 적어도 하나의 디바이스 사용자 인터페이스 요소 및/또는 (2) 적어도 하나의 디바이스 사용자 인터페이스 기능은 본 발명의 임의의 실시예와 관련된 바와 같은 본원에서 개시되는 방법들 또는 프로세스들 중 하나 또는 임의 조합으로부터 생성하는 데이터 및/또는 정보, 및/또는 본 발명의 임의의 실시예와 관련된 바와 같은 본원에서 개시되는 방법들(또는 프로세스들) 중 하나 또는 임의 조합으로부터 생성되는 적어도 하나의 신호에 적어도 부분적으로 기초한다.
다양한 실시예들에서, 방법들(프로세스들)은 서비스 제공자 측에서 또는 이동 디바이스 측에서 또는 양측에서 액션들을 수행하는 서비스 제공자와 이동 디바이스 간의 공유 방식으로 달성될 수 있다.
다양한 예시적 실시예들에서는, 최초 출원된 청구항 1-12, 25-36 및 42-44 중 임의의 청구항의 방법을 수행하기 위한 수단을 포함하는 장치가 적용 가능하다.
본 발명의 또 다른 양태들, 특징들 및 장점들은 단지 본 발명을 실시하기 위해 고려되는 최상의 모드를 포함하는 다수의 특정 실시예들 및 구현들을 설명함으로써 아래의 상세한 설명으로부터 자명해진다. 본 발명은 다른 그리고 상이한 실시예들도 가능하게 하고, 그의 여러 상세 사항은 본 발명의 사상 및 범위에서 전혀 벗어나지 않으면서 다양한 명백한 사항들에서 변경될 수 있다. 따라서, 도면 및 설명은 본질적으로 한정이 아니라 예시적인 것으로 간주되어야 한다.
본 발명의 실시예들은 첨부 도면들에 한정이 아닌 예시로서 도시된다.
도 1은 일 실시예에 따른, 하나 이상의 몰입적 상호작용 이벤트에 기초하여 일상 디바이스들을 통해 몰입적 상호작용을 제공할 수 있는 시스템의 도면이다.
도 2는 일 실시예에 따른, 몰입 서비스의 컴포넌트들의 도면이다.
도 3은 일 실시예에 따른, 하나 이상의 하나 이상의 몰입적 상호작용 이벤트에 기초하여 일상 디바이스들을 통해 몰입적 상호작용을 제공하기 위한 프로세스의 흐름도이다.
도 4는 일 실시예에 따른, 콘텐츠의 제공에 몰입시키고 콘텐츠와 동기화할 디바이스들을 결정하기 위한 프로세스의 흐름도이다.
도 5는 일 실시예에 따른, 콘텐츠를 하나 이상의 디바이스 내에 삽입하기 위한 프로세스의 흐름도이다.
도 6은 일 실시예에 따른, 디바이스에 고유한 정보와 콘텐츠로부터의 정보를 결합하기 위한 프로세스의 흐름도이다.
도 7a 내지 도 7i는 다양한 실시예들에 따른, 도 3 내지 도 6의 프로세스들에서 사용되는 사용자 인터페이스들의 도면들이다.
도 8은 본 발명의 일 실시예를 구현하는 데 사용될 수 있는 하드웨어의 도면이다.
도 9는 본 발명의 일 실시예를 구현하는 데 사용될 수 있는 칩셋의 도면이다.
도 10은 본 발명의 일 실시예를 구현하는 데 사용될 수 있는 이동 단말기(예로서, 핸드셋)의 도면이다.
하나 이상의 몰입적 상호작용 이벤트에 기초하여 일상 디바이스들을 통해 몰입적 상호작용을 제공하기 위한 방법, 장치 및 컴퓨터 프로그램의 예들이 개시된다. 아래의 설명에서는, 설명의 목적으로, 본 발명의 실시예들의 충분한 이해를 제공하기 위해 다수의 특정 상세들이 설명된다. 그러나, 본 발명의 실시예들은 이러한 특정 상세들 없이도 또는 등가 구성을 이용하여 실시될 수 있다는 것이 이 분야의 기술자에게 명백하다. 다른 예들에서는, 본 발명의 실시예들을 불필요하게 불명확하게 하지 않기 위해 공지 구조들 및 디바이스들은 블록도 형태로 도시된다.
도 1은 일 실시예에 따른, 하나 이상의 몰입적 상호작용 이벤트에 기초하여 일상 디바이스들을 통해 몰입적 상호작용을 제공할 수 있는 시스템의 도면이다. 전술한 바와 같이, 서비스 제공자들 및 디바이스 제조자들은 사용자들에게 콘텐츠를 제공할 때 사용자들에게 더 사실적인 경험을 제공하려고 시도한다. 그러한 콘텐츠는 사용자에게 제공되는 임의 타입의 콘텐츠, 예로서 영화, 텔레비전 쇼, 노래, 컴퓨터 게임, 다른 비디오(예로서, 운동 비디오, 훈련 비디오, 교육 비디오 등) 등일 수 있다. 서비스 제공자들 및 디바이스 제공자들은 콘텐츠를 제공받을 때 사용자들이 경험하는 사실성을 증가시키기 위한 능력을 개발하였다. 예를 들어, 디바이스 제조자들은 사용자들이 삼차원으로 인식하는 이미지들을 디바이스들 상에 표시하여 이미지들을 더 사실적이게 하기 위한 능력을 개발하였다. 영화관들과 같은 소정의 서비스 제공자들은 콘텐츠의 그러한 삼차원 제공과, 예를 들어 진동 및/또는 공기 또는 물의 스프레이를 이용하는 촉각 피드백과 같은 다른 감각 피드백을 결합한다. 따라서, 서비스 제공자들 및 디바이스 제조자들은 사용자들이 시각, 오디오 및 촉각 감각 피드백을 경험하기 위한 더 사실적인 방법들을 개발하였다.
이러한 진보에도 불구하고, 사용자들은 여전히 그러한 감각 피드백이 현실이 아님을 이해한다. 사용자들은 디스플레이와 관련하여 인식되는 삼차원이 단지 환상이라는 것을 이해한다. 예를 들어 촉각 피드백을 포함하는 증가된 사실성을 위해, 사용자들은 여전히 특수 장비를 갖춘 영화관에 가서 추가적인 감각 피드백을 포함하는 삼차원 영화를 경험해야 한다. 그러한 영화관 환경은 사용자의 경험을 저하시키는데, 그 이유는 사용자들이 영화관 내의 다른 사용자들과 함께 콘텐츠를 경험해야 하기 때문이다. 따라서, 경험은 개인적이지 않다. 경험은 사용자의 개별 공간과 상호작용하지 않는다. 따라서, 사용자들은 콘텐츠에 의해 제공되는 경험에 완전히 몰입하지 못한다.
또한, 소정의 콘텐츠 타입들을 소비할 때, 콘텐츠는 콘텐츠와 상호작용하기 위해 콘텐츠를 위해 특별히 제조된 하나 이상의 디바이스와 관련될 수 있다. 그러나, 디바이스들이 콘텐츠를 위해 특별히 제조되므로, 디바이스들은 종종 콘텐츠에 대해서만 작동하며, 다른 용도를 갖지 못한다. 더구나, 일부 디바이스들은 기타 또는 라이플의 형상을 갖는 게임 제어기들과 같은 실세계 디바이스들을 시뮬레이션하도록 의도된다. 디바이스들은 시각적으로 유사하지만, 시각적 유사성은 유사성들의 정도이며, 디바이스들은 콘텐츠의 제공과 관련되는 것 외의 어떠한 다른 기능도 갖지 않는다. 예를 들어, 디바이스들은 콘텐츠의 제공에 고유하지 않은 기능을 갖는 일상 디바이스들을 나타내지 않는다. 따라서, 사용자들은 디바이스들이 모방하고 있는 실세계 디바이스들과 시각적으로 유사한 디바이스들을 사용할 수 있지만, 사용자들은 디바이스를 통해 콘텐츠와의 완전한 심리적 관계를 경험하지 못한다. 사용자와 디바이스 사이에는 심리적 관계가 존재하지 않는데, 그 이유는 예를 들어 사용자가 콘텐츠의 제공과 무관하게 실세계에서 사용될 수 있거나 사용자가 일상적으로 사용하는 디바이스가 아니라 콘텐츠를 위해 특별히 제조된 디바이스를 이용하기 때문이다. 따라서, 서비스 제공자들 및 디바이스 제조자들은 콘텐츠의 제공에 사용자들을 완전히 몰입시키는 데 있어서 커다란 도전에 직면한다. 콘텐츠 소비와 관련된 사용자의 경험을 개인화하면서 그러한 개인화된 경험을 달성하는 데 필요한 추가적인 특수 장비를 제한하기 위해 극복되어야 하는 커다란 도전들이 존재한다.
이러한 문제들을 해결하기 위하여, 도 1의 시스템(100)은 하나 이상의 몰입적 상호작용 이벤트에 기초하여 일상 디바이스들을 통해 몰입적 상호작용을 제공하기 위한 능력을 도입한다. 시스템(100)은 콘텐츠(예로서, 영화, 노래, 텔레비전 프로그램, 컴퓨터 게임, 비디오 등)가 사용자와 상호작용하는 것을 가능하게 한다. 시스템(100)은 하나 이상의 프로토콜을 통해 전송되는 하나 이상의 제어 신호를 통해 사용자와 관련되고/되거나 사용자와 관련된 환경과 관련된 하나 이상의 디바이스를 제어한다. 하나 이상의 제어 신호는 콘텐츠 내의 하나 이상의 몰입적 상호작용 이벤트와 관련된다. 디바이스들은 하나 이상의 프로토콜을 통해 하나 이상의 제어 신호를 수신할 수 있는 임의 타입의 일상 디바이스를 나타낼 수 있다. 디바이스들은 콘텐츠의 제공과 무관한 일상 디바이스들일 수 있으며, 따라서 디바이스들은 콘텐츠의 제공과 관련된 기능 외의 기능을 갖는다. 그러나, 일상 디바이스라는 용어는 디바이스가 매일 사용되는 것을 요구하지 않는다. 예를 들어, 콘텐츠 제공과 관련된 기능 외의 기능을 갖는 일상 디바이스는 세탁기, 식기 세척기, 마이크로파 오븐, 토스터, 라디오, 시계 등일 수 있다. 일 실시예에서, 하나 이상의 디바이스는 콘텐츠를 제공하지만 콘텐츠 제공과 무관한 기능을 갖는 디바이스들을 포함할 수 있다. 예를 들어, 디바이스들은 콘텐츠 제공과 무관할 수 있고 하나 이상의 명령 및/또는 제어 신호에 기초하여 제어될 수 있는 다양한 상이한 컴포넌트들을 가질 수 있다. 예를 들어, 최신 이동 전화들은 단지 전화 통화를 행하는 것 외에 향상된 기능을 가지며, 따라서 이동 전화들은 이제 영화, 비디오, 음악 등과 같은 콘텐츠를 제공할 수 있다. 그러나, 통화 기능과 같은 이동 전화들의 기능은 여전히 콘텐츠 제공의 기능과 무관하다. 프로토콜들은 예를 들어 블루투스(등록상표), WLAN, 무선, 또는 본 명세서에서 설명되는 임의의 다른 프로토콜(예로서, 통신 네트워크(105)와 관련하여 설명되는 하나 이상의 프로토콜)일 수 있다. 따라서, 시스템(100)은 특별히 구성되거나 콘텐츠 제공과 관련되지 않은 하나 이상의 디바이스를 검출하거나, 콘텐츠를 제공하는 디바이스 내의, 그러나 콘텐츠 제공과 무관한 하나 이상의 다른 컴포넌트를 사용하고, 디바이스들을 콘텐츠 제공에 몰입시키기 위한 기능을 가능하게 한다. 디바이스들을 콘텐츠 제공에 몰입시킴으로써, 시스템(100)은 콘텐츠를 사용자 주위의 디바이스들과 연관시킴으로써 사용자를 콘텐츠 제공에 몰입시키는 능력을 제공한다.
일 실시예에서, 하나 이상의 디바이스에 의해 제공되는 콘텐츠는 예를 들어 하나 이상의 몰입적 상호작용 이벤트와 관련된 메타데이터를 포함할 수 있다. 일 실시예에서, 하나 이상의 디바이스에 의해 제공되는 콘텐츠는 예를 들어 하나 이상의 몰입적 상호작용 이벤트에 기초하여 동적으로 생성되고 시스템(100) 내의 디바이스들에 의존하는 명시적 코드 명령어들을 포함할 수 있다. 시스템(100)은 콘텐츠 및/또는 명시적 코드 내의 메타데이터의 존재에 기초하여 하나 이상의 몰입적 상호작용 이벤트를 결정할 수 있다. 시스템(100)은 또한 몰입적 상호작용 이벤트들을 처리하여 시스템(100) 내의 어떤 디바이스들이 몰입적 상호작용 이벤트들에 적합한지를 결정할 수 있다. 시스템(100) 내의 하나 이상의 적합한 디바이스의 존재에 기초하여, 시스템(100)은 하나 이상의 프로토콜을 이용하여 하나 이상의 제어 신호를 디바이스들로 전송하여, 디바이스들이 콘텐츠 내의 메타데이터, 명시적 코드 및/또는 몰입적 상호작용 이벤트와 관련된 기능 및/또는 액션을 수행하게 할 수 있다. 따라서, 시스템(100)은 몰입적 상호작용 이벤트들 및 어떤 디바이스들이 그러한 이벤트들과 관련되는지에 대한 결정에 기초하여 디바이스들을 콘텐츠에 몰입시킬 수 있다.
시스템(100)은 또한 콘텐츠를 하나 이상의 디바이스에 몰입시켜 콘텐츠와 하나 이상의 일상 디바이스 간의 공생 관계를 생성할 수 있다. 시스템(100)은 콘텐츠로부터 디바이스들 상의 하나 이상의 사용자 인터페이스로의 정보의 전송 및/또는 검색 및 표시를 가능하게 한다. 또한, 디바이스들의 사용자들은 디바이스들의 디스플레이들의 콘텐츠의 하나 이상의 표현과 상호작용하여, 콘텐츠와 상호작용할 수 있다. 따라서, 사용자들은 그들의 일상 디바이스를 이용하여 콘텐츠와 상호작용함으로써 완전히 몰입된 경험을 생성할 수 있다. 예를 들어, 디바이스의 고유 사용자 인터페이스들과의 상호작용은 사용자가 콘텐츠의 하나 이상의 표현과 인터페이스하여 콘텐츠와 상호작용하는 것을 가능하게 한다. 사용자들이 그들의 일상 디바이스들의 사용자 인터페이스들과 상호작용하므로, 사용자들은 콘텐츠에 완전히 몰입하게 된다.
예를 들어, 텔레비전에 접속된 DVD 플레이어에서 영화를 재생하는 동안, 영화 내에 표현된 이동 전화와 관련된 하나 이상의 액션, 하나 이상의 기능 및/또는 하나 이상의 특성이 영화 내에서 발생할 수 있다. 예를 들어, 영화 내의 캐릭터가 그의 이동 전화 상에서 전화 통화를 수신할 수 있고, 그의 이동 전화가 울릴 수 있다. 시스템(100)은 영화를 보는 사용자와 관련된 이동 전화가 전화 통화를 수신하게 하고, 따라서 영화에서 이동 전화가 울리는 동시에 그의 이동 전화가 울리게 하기 위한 능력을 제공한다. 시스템(100)은 또한 사용자의 이동 전화가 영화 내의 정보에 대응하는 통화에 관한 정보를 표시하는 것을 가능하게 한다. 예를 들어, 캐릭터 로버트 모리스가 영화 내의 캐릭터와 통화하고 있는 경우, 사용자의 디바이스는 착신 통화가 로버트 모리스로부터 온 것임을 표시할 수 있다. 또한, 이어서 사용자가 그의 연락처 애플리케이션을 보는 경우, 그는 캐릭터 로버트 모리스와 관련된 엔트리를 볼 수 있다. 따라서, 시스템(100)은 콘텐츠 제공과 무관하지만 콘텐츠 제공 외의 기능을 갖는, 사용자와 관련된 하나 이상의 일상 디바이스를 이용하여 사용자를 콘텐츠에 몰입시킴으로써 콘텐츠를 즐기는 사용자에 대한 개인화된 경험을 가능하게 한다. 예를 들어, 위의 예에서, DVD 플레이어 및 텔레비전이 영화를 제공하고 있는 경우, 이동 전화는 영화의 제공 외에 다른 액션들 및/또는 다른 기능들을 위해 사용되는 일상 디바이스이다. 따라서, 사용자가 이동 디바이스 상에서 전화 통화를 수신할 때, 사용자는 전화 통화를 임의의 다른 전화 통화로서 취급하고, 전화 통화를 영화의 가상 세계와 관련된 것이 아니라 실세계의 일부인 것으로 인식할 것이다.
시스템(100)은 다수의 몰입 레벨 또는 중첩된 몰입 레벨을 더 생성할 수 있으며, 콘텐츠의 레벨들은 콘텐츠의 다른 레벨들에 몰입될 수 있다. 따라서, 시스템(100)은 콘텐츠의 다수의 레벨로의 디바이스의 몰입을 통해 사용자를 다수의 레벨의 가상 현실에 몰입시킬 수 있다. 예를 들어, 하나의 몰입 레벨과 관련된 도시(예로서, 뉴욕)의 가상 시뮬레이션을 통해 걷기와 관련된 콘텐츠를 경험하는 동안, 사용자는 증강 현실 애플리케이션을 실행할 수 있다. 시스템(100)은 사용자 및 증강 현실 애플리케이션을 몰입시킬 수 있으며, 따라서 애플리케이션은 도시의 가상 시뮬레이션에 몰입된다. 따라서, 사용자가 실제로는 도시 내에 있지 않고 도시의 가상 시뮬레이션 내에 있지만, 증강 현실 애플리케이션은 가상 시뮬레이션에 몰입되고, 도시 내에 실제로 존재하는 것처럼 응답한다. 따라서, 사용자는 증강 현실 애플리케이션과 상호작용할 수 있음으로써 가상 시뮬레이션의 경험 또는 콘텐츠에 완전히 몰입할 수 있다. 예를 들어, 상이한 레벨들에 몰입되는 다수의 게임을 이용하여 동일한 경험이 달성될 수 있다. 예를 들어, 하나의 몰입 레벨은 소정의 콘텐츠(예로서, 비디오 게임, 가상 세계 등)에 기초하여 사용자 및 디바이스를 무중력 세계 내에 배치할 수 있다. 제2 몰입 레벨은 제1 몰입 레벨에 응답하여 컴퓨터 게임이 무중력 세계에서 실행되는 것처럼 응답하게 할 수 있다. 또한, 몰입 서비스(103)가 몰입 레벨들을 독립적으로 실행함으로써 다양한 몰입 레벨들은 서로를 알아차리지 못할 수 있다.
다른 예로서, 콘텐츠에 몰입되는 디바이스들은 일상 디바이스 이상으로서 간주될 수 있지만, 사용자가 그의 주변 환경의 초감각적인 인식을 얻거나 그의 감각을 확장하기 위해 일상적으로 사용하는 디바이스로서 간주될 수 있다. 시스템(100)은 콘텐츠로 하여금 이러한 디바이스들과 상호작용하고, 이러한 디바이스들이 사용자를 가상 세계에 몰입시키기 위해 사용자에게 제공하는 초감각들을 왜곡하는 것을 가능하게 한다. 시스템(100)은 또한 다수의 몰입 레벨이 디바이스들을 통해 수신되는 사용자의 감각들을 훨씬 더 증대시키고/시키거나 왜곡하는 것을 가능하게 한다. 예를 들어, 사용자는 그의 디바이스 상에서 비디오 게임을 실행할 수 있다. 비디오 게임은 예를 들어 비행 시뮬레이션과 관련될 수 있다. 비디오 게임 내에서, 사용자는 고속(예로서, 마하 1)으로 이동할 수 있다. 사용자가 다른 게임과 같은 제2 애플리케이션을 실행하는 경우, 시스템(100)은 제2 애플리케이션이 제1 애플리케이션에 의해 생성된 가상 세계에서 실행되는 것처럼 제2 애플리케이션을 실행할 수 있다. 따라서, 제2 애플리케이션에 의해 얻어지는 초감각들은 제1 애플리케이션에 의해 유발되는 조건들 또는 몰입과 관련될 수 있다. 예를 들어, 제2 애플리케이션은 사용자 및/또는 디바이스가 고중력 조건에 놓여 있는 것처럼 사용자 및/또는 디바이스가 고속으로 이동하는 것을 검출할 수 있다. 따라서, 시스템(100)은 중첩된 몰입 경험을 가능하게 한다. 따라서, 후술하는 바와 같이, 각각의 몰입 경험은 독립적인 몰입 경험일 수 있거나, 하나 이상의 몰입 경험 내에 중첩된 몰입 경험일 수 있다. 예를 들어, 현실은 차원 1로서 간주될 수 있고, 몰입 현실은 차원 N을 통한 차원 2로서 간주될 수 있으며, N은 중첩된 몰입 경험들의 수를 나타낸다.
또한, 시스템(100)이 몰입 경험들을 결합함으로써 중첩된 몰입 경험을 제공하는 경우, 시스템(100)은 통상적인 통신 및/또는 인터페이싱 채널들을 이용하여 몰입 경험들이 상호작용하기 위한 능력을 제공한다. 따라서, 몰입된 상태가 통상적인 플랫폼 인터페이스들을 통해 제삼자 애플리케이션들에 제공될 수 있다. 예를 들어, 위치가 몰입 경험들에 연관되는 경우, 제삼자 애플리케이션은 몰입 위치 정보를 구성하지만, 예를 들어 GPS와 같은 몰입 디바이스 내의 위치 정보를 제공하는 정규 플랫폼으로부터 위치 정보를 수신할 수 있다. 따라서, 제삼자 애플리케이션들은 몰입 정보를 정보와 관련된 통상적인 플랫폼들로부터 수신하므로, 제삼자 애플리케이션들은 몰입 경험을 알지 못할 수 있다.
다른 예로서, 사용자는 그의 이동 전화를 이용하여, 그의 이동 전화 상에서 영화를 보는 것과 같이, 콘텐츠를 제공할 수 있다. 이동 전화 상에서의 영화의 제공은 링어(ringer)와 같은 전화의 다른 컴포넌트들과 통상적으로 인터페이스하지 않거나 그들을 사용하지 않을 수 있다. 그러나, 시스템(100)은 영화의 제공 내에서 하나 이상의 몰입적 상호작용 이벤트를 검출하고, 예를 들어 이동 전화가 영화 속에서 울릴 때, 영화를 제공하는 데 사용되는 실제 이동 전화의 링어도 울리도록 이동 전화 상의 링어와 인터페이스하기 위한 능력을 제공한다. 시스템(100)이 콘텐츠 내에서 하나 이상의 몰입적 상호작용 이벤트를 결정하고, 몰입적 상호작용 이벤트 및 이동 디바이스 내의 링어와 관련된 하나 이상의 제어 신호를 결정하고, 영화의 제공 시에 링어가 울릴 때 하나 이상의 제어 신호를 실행함으로써 링어가 울릴 수 있다.
시스템(100)은 하나 이상의 제어 신호 및/또는 제어 신호들을 전송하는 데 사용되는 프로토콜들에 적합한 임의 타입의 디바이스의 구성을 가능하게 한다. 시스템(100)은 또한 특정 콘텐츠에 고유한 제어 신호들과 관련되거나 관련되지 않을 수 있는 임의 수의 디바이스와의 연관을 가능하게 한다. 따라서, 사용자가 하나 이상의 제어 신호 및/또는 프로토콜에 적합한 디바이스들을 알 수 있지만, 사용자는 콘텐츠 내의 몰입적 상호작용 이벤트들 및 시스템과 상호작용할 특정 디바이스들을 알지 못한다. 결과적인 놀람 효과는 콘텐츠 제공의 사실성을 더하고, 사용자를 콘텐츠에 몰입시키는 것을 돕는다. 또한, 상이한 환경들이 상이한 디바이스들과 연관될 수 있다. 따라서, 하나의 환경에서 실현되는 경험은 상이한 관련 디바이스들로 인해 상이한 환경에서 실현되는 경험과 다를 수 있다. 예를 들어, 사용자의 집이 아닌 다른 디바이스들과 관련되는 친구의 집으로 영화를 가져가는 사용자는 상이한 디바이스들로 인해 콘텐츠와 관련된 상이한 몰입을 경험할 것이다. 이러한 접근 방법에서, 시스템(100)은 콘텐츠와 관련된 표준화되지 않은 경험들을 가능하게 한다. 따라서, 예를 들어 초감각 피드백(예로서, 촉각 피드백)에 더하여 삼차원 영화와 관련된 표준화된 경험을 제공하는 소정의 영화관들과 달리, 시스템(100)은 시스템을 통해 콘텐츠 제공과 관련되는 디바이스들의 수 및 타입에 기초하여 달라질 수 있는 표준화되지 않은 경험들을 가능하게 한다.
또한, 상이한 특징을 갖는 동일 타입의 디바이스들이 상이한 몰입 경험들을 제공할 수 있다. 예를 들어, 진보된 이동 전화는 진보된 이동 전화의 사용자를 콘텐츠에 몰입시키기 위해 콘텐츠와 상호작용할 수 있는 많은 특징을 가질 수 있다. 덜 진보된 이동 전화는 덜 진보된 이동 전화가 콘텐츠에 완전히 몰입되는 것을 방해하는 제한된 수의 여분의 특징을 갖거나, 어떠한 여분의 특징도 갖지 않을 수 있다. 예를 들어, 진보된 이동 전화는 위치 결정 기능(예로서, GPS)을 포함할 수 있는 반면, 덜 진보된 이동 전화는 포함하지 않을 수 있다. 따라서, 진보된 이동 전화는 그의 위치를 표시할 수 있는 반면, 덜 진보된 이동 전화는 표시하지 못한다. 따라서, 진보된 이동 전화는 부분적으로는 사용자 및 진보된 이동 전화의 가상 위치를 표시함으로써 사용자를 콘텐츠에 몰입시킬 수 있다. 그러나, 덜 진보된 이동 전화는 가상 위치를 표시함으로써 사용자를 콘텐츠에 몰입시킬 수 없다. 따라서, 상이한 타입의 디바이스들(예컨대, 이동 전화, 식기 세척기, 마이크로파 오븐, 라이트 스위치 등)은 상이한 몰입 경험들을 제공할 수 있는 것은 물론, 동일 디바이스 타입 내의 상이한 디바이스들(예로서, 상이한 기능을 갖는 상이한 이동 전화들 등)은 유사하게 동일 디바이스 타입 내의 상이한 디바이스들이 지원하는 특징들에 기초하여 상이한 몰입 경험들을 제공할 수 있다.
시스템(100)은 또한 하나의 콘텐츠의 하나 이상의 표현을 디바이스, 하나 이상의 다른 디바이스 또는 이들의 조합 내에 삽입하기 위한 능력을 가능하게 한다. 게다가, 하나 이상의 디바이스는 콘텐츠와 상호작용하는 데 사용될 수 있다. 하나 이상의 디바이스는 사용자와 개인적으로 관련될 수 있다. 따라서, 콘텐츠와 디바이스들 간의 상호작용들은 사용자를 콘텐츠에 몰입시킨다. 또한, 시스템은 사용자를 콘텐츠 제공에 몰입시키기 위해, 콘텐츠 제공과 무관한 사용자의 디바이스 또는 콘텐츠 제공과 무관한 디바이스의 하나 이상의 컴포넌트와 관련된 경험을 증대시키기 위한 능력을 가능하게 한다. 몰입은 콘텐츠와 관련된 정보와 사용자의 디바이스에 고유한 정보의 결합에 적어도 부분적으로 기초할 수 있다. 그러한 고유 정보는 디바이스가 시스템(100)에 의해 콘텐츠와 연관되기 전에 디바이스 상에 존재하였던 정보일 수 있다. 그러한 결합은 사용자를 콘텐츠에 더 몰입시키기 위해 사용자로 하여금 디바이스 상의 어떤 정보가 디바이스에 고유한지 그리고 어떤 정보가 콘텐츠에 기초하는지를 인식하지 못하게 한다. 시스템(100)은 또한 콘텐츠 제공과 무관할 수 있는 사용자의 기존 디바이스를 이용하여 콘텐츠에 의해 생성되는 가상 환경과 상호작용하기 위한 능력을 가능하게 한다. 그러한 상호작용들은 사용자가 실세계에서 수행하는 상호작용들에 기초하여 디바이스와 관련된 동일 기능들에 기초할 수 있지만, 대신에 기능들은 콘텐츠에 의해 생성되는 가상 세계와 상호작용한다. 그러한 가능화는 사용자가 콘텐츠를 그의 디바이스들 내로 가져와서 콘텐츠 안으로서의 사용자의 심리적 몰입 경험을 향상시키는 것을 가능하게 한다. 일 실시예에서, 시스템(100)은 콘텐츠가 몰입 디바이스들(예로서, 일상 디바이스)로부터 정보를 조회하여 몰입 경험을 촉진하는 것을 가능하게 한다. 이어서, 몰입 디바이스들로부터 획득된 조회된 정보가 사용될 수 있고/있거나 콘텐츠 내에 포함될 수 있다. 예를 들어, 몰입 디바이스는 주변광 센서를 포함할 수 있다. 시스템(100)은 콘텐츠가 주변광의 값에 대해 디바이스에 조회하는 것을 가능하게 한다. 이러한 정보에 기초하여, 시스템(100)은 몰입 디바이스로부터의 주변광 값에 기초하여 콘텐츠의 증대를 가능하게 한다. 예를 들어, 사용자가 콘텐츠를 보고 있는 위치에서 창문을 통해 들어오는 광과 매칭하도록 가상 세계 스카이라인이 생성될 수 있으며, 이는 주변광 센서로부터 획득된 값에 기초한다. 콘텐츠가 몰입 디바이스들로부터 정보를 획득하기 위한 능력을 제공함으로써, 시스템(100)은 또한 사용자의 주변의 특성들에 따라 콘텐츠 안으로의 사용자의 몰입을 가능하게 한다.
도 1에 도시된 바와 같이, 시스템(100)은 통신 네트워크(105)를 통해 몰입 서비스(103)에 접속하는 (공동으로 UE(101)로서 지칭되는) 사용자 장비(UE)(101a-101n)를 포함한다. 예컨대, 시스템(100)의 통신 네트워크(105)는 데이터 네트워크, 무선 네트워크, 전화 네트워크 또는 이들의 임의 조합과 같은 하나 이상의 네트워크를 포함한다. 데이터 네트워크는 임의의 근거리 네트워크(LAN), 도시 영역 네트워크(MAN), 광역 네트워크(WAN), 공개 데이터 네트워크(예컨대, 인터넷), 단거리 무선 네트워크, 또는 상업적으로 소유되는 독점 패킷 교환 네트워크와 같은 임의의 다른 적절한 패킷 교환 네트워크, 예로서 독점 케이블 또는 광섬유 네트워크 등, 또는 이들의 임의 조합일 수 있는 것이 고려된다. 게다가, 무선 네트워크는 예를 들어 셀룰러 네트워크일 수 있으며, EDGE(enhanced data rates for global evolution), GPRS(general packet radio service), GSM(global system for mobile communications), IMS(Internet protocol multimedia subsystem), UMTS(universal mobile telecommunications system) 등을 포함하는 다양한 기술들은 물론, 임의의 다른 적절한 무선 매체, 예를 들어 WiMAX(worldwide interoperability for microwave access), LTE(Long Term Evolution) 네트워크들, CDMA(code division multiple access), WCDMA(wideband code division multiple access), WiFi(wireless fidelity), WLAN(wireless LAN), 블루투스(등록상표), NFC(near field communication), IP(Internet Protocol) 데이터 캐스팅, 디지털 무선/텔레비전 방송, 위성, MANET(mobile ad-hoc network) 등 또는 이들의 임의 조합을 이용할 수 있다.
UE(101)는 임의 타입의 이동 단말기, 고정 단말기, 또는 이동 핸드셋을 포함하는 휴대용 단말기, 국, 유닛, 디바이스, 이동 통신 디바이스, 멀티미디어 컴퓨터, 멀티미디어 태블릿, 인터넷 노드, 통신기, 데스크탑 컴퓨터, 랩탑 컴퓨터, 노트북 컴퓨터, 넷북 컴퓨터, 태블릿 컴퓨터, 개인 통신 시스템(PCS) 디바이스, 개인 내비게이션 디바이스, 개인 휴대 단말기(PDA), 오디오/비디오 플레이어, 디지털 카메라/캠코더, 포지셔닝 디바이스, 텔레비전 수신기, 무선 방송 수신기, 전자 서적 디바이스, 게임 디바이스, 또는 이러한 디바이스들의 액세서리들 및 주변 기기들을 포함하는 이들의 임의 조합, 또는 이들의 임의 조합이다. UE(101)가 ("웨어러블" 회로 등과 같은) 사용자에 대한 임의 타입의 인터페이스를 지원할 수 있는 것도 고려된다.
UE(101)는 (공동으로 애플리케이션들(111)로서 지칭되는) 하나 이상의 애플리케이션(111a-111n)을 포함할 수 있다. 애플리케이션들(111)은 임의 타입의 애플리케이션, 예를 들어 하나 이상의 게이밍 애플리케이션, 하나 이상의 멀티미디어 애플리케이션(예로서, 무비 플레이어, 뮤직 플레이어 등) 등일 수 있다. 일 실시예에서, 애플리케이션(111a)은 UE(101)와 콘텐츠의 제공을 연관시키기 위해 몰입 서비스(103)와 인터페이스할 수 있다. 애플리케이션(111a)은 또한 후술하는 바와 같이 몰입 서비스(103)와 상호작용하여, 콘텐츠와 UE(101) 사이에 하나 이상의 이벤트를 실시할 수 있다. 따라서, 일 실시예에서, UE(101)는 콘텐츠에 몰입되는 하나 이상의 디바이스로서 작용할 수 있다. UE(101)는 콘텐츠를 제공하는 하나 이상의 디바이스로도 작용할 수 있다.
시스템(100)은 통신 네트워크(105)를 통해 UE(101) 및 몰입 서비스(103)에 접속하는 호스트 디바이스(117)도 포함할 수 있다. 도 1에는 하나의 디바이스로서 도시되지만, 시스템(100)은 하나 이상의 호스트 디바이스(117)를 포함할 수 있다. 일 실시예에서, 호스트 디바이스(117)는 하나 이상의 유선 및/또는 무선 접속을 통해 UE(101)에 직접 접속한다. 호스트 디바이스(117)는 사용자에게 콘텐츠를 제공하는 것과 관련될 수 있다. 예를 들어, 호스트 디바이스(117)는 영화를 재생하는 DVD 플레이어, 게임을 실행하는 게이밍 콘솔 등일 수 있다. 호스트 디바이스(117)는 또한 사용자에게 콘텐츠를 제공하는 데 사용되는 디바이스들의 조합을 포함할 수 있다. 예를 들어, 호스트 디바이스들은 사용자에게 비주얼 및 오디오 콘텐츠 양자를 제공하기 위한 텔레비전 및 스테레오 장비와 결합된 DVD 플레이어일 수 있다. 일 실시예에서, 호스트 디바이스(117)는 사용자에게 콘텐츠를 제공하는 데 사용되는 UE(101a)일 수 있다. 예를 들어, UE(101a)는 게임 또는 영화와 같은 콘텐츠를 제공할 수 있으며, 시스템(100) 내의 하나 이상의 다른 디바이스는 콘텐츠에 몰입될 수 있다. 일 실시예에서, 호스트 디바이스(117)는 예를 들어 후술하는 하나 이상의 서비스(109) 및/또는 콘텐츠 제공자(113)로부터 스트리밍되는 스트리밍 콘텐츠를 제공할 수 있다. 예를 들어, 콘텐츠는 디지털 비디오 방송 - 핸드헬드(DVB-H) 포맷을 이용하여 스트리밍 콘텐츠로서 제공될 수 있다. 호스트 디바이스(117)는 스트리밍 콘텐츠 신호를 제공할 수 있으며, UE(101a)는 스트리밍 콘텐츠에 몰입될 수 있다. 일례에서, 스트리밍 콘텐츠는 실세계 방송 채널 또는 국(예로서, TV, 라디오, 인터넷 라디오)에서 방송되는 콘텐츠로서 제공될 수 있다. 또한, 일 실시예에서, UE(101a) 및/또는 사용자가 몰입되는 콘텐츠는 또한 다른 콘텐츠가 몰입된 UE(101a)로 스트리밍되게 할 수 있다. 예를 들어, UE(101a)가 몰입되는 콘텐츠가 MMORPG(massively multiplayer online role-playing game)인 경우, 콘텐츠는 실세계 방송 채널 상에서 방송되는 텔레비전 프로그래밍과 같은 다른 콘텐츠가 몰입된 UE(101a)로 스트리밍되게 할 수 있다. 따라서, UE(101a)의 사용자는 콘텐츠(예로서, MMORPG)에 의해 생성되는 몰입 경험에 몰입될 수 있지만, 몰입된 UE(101a)를 통해 실세계 콘텐츠(예로서, 텔레비전 프로그래밍)를 경험할 수 있다. 그러한 실시예에서, 사용자는 몰입된 실세계 콘텐츠를 효과적으로 경험한다.
시스템(100)은 통신 네트워크(105)를 통해 UE(101), 몰입 서비스(103) 및 호스트 디바이스(117)에 접속하는 (공동으로 몰입 디바이스들(119)로서 지칭되는) 하나 이상의 몰입 디바이스(119a-119n)도 포함할 수 있다. 일 실시예에서, 몰입 디바이스들(119)은 하나 이상의 유선 및/또는 무선 접속을 통해 호스트 디바이스(117)에 직접 접속될 수 있다. 몰입 디바이스들(119)은 호스트 디바이스(117), UE(101) 및 몰입 서비스(103)와 상호접속할 수 있는 임의 타입의 디바이스일 수 있다. 예를 들어, 몰입 디바이스들(119)은 라이트/라이트 스위치, 세탁기, 팬, 마이크로파 오븐, 손목 시계, 냉장고, 식기 세척기 등일 수 있다. 몰입 디바이스들(119)은 블루투스, WLAN, 무선 등 또는 본 명세서에서 예를 들어 통신 네트워크(105)와 관련하여 설명되는 임의의 다른 프로토콜과 같은 임의의 타입의 프로토콜을 통해 호스트 디바이스(117), 몰입 서비스(103) 및 UE(101)와 상호작용할 수 있다. 일 실시예에서, UE(101)는 콘텐츠의 제공에 몰입되는 UE(101)를 통해 몰입 디바이스(119)를 나타낼 수 있다. 따라서, UE(101)는 일 실시예에서 특정 타입의 몰입 디바이스(119)를 나타낼 수 있다. 일 실시예에서, UE(101) 또는 임의의 몰입 디바이스(119)는 또한 호스트 디바이스(117)를 나타낼 수 있다. 예를 들어, UE(101a)는 영화와 같은 콘텐츠를 제공할 수 있으며, 따라서 호스트 디바이스에 대응할 수 있다. UE(101a)는 또한 시스템(100)에 의해 결정되는, 콘텐츠 내의 몰입적 상호작용 이벤트들에 기초하여 콘텐츠에 몰입될 수 있다. 예를 들어, UE(101a)와 관련된 하나 이상의 컴포넌트가 콘텐츠의 제공과 관련될 수 있다. UE(101a)와 관련된 하나 이상의 다른 컴포넌트는 콘텐츠 제공과 무관할 수 있지만, 콘텐츠 내의 하나 이상의 몰입적 상호작용 이벤트에 기초하여 하나 이상의 제어 신호에 의해 제어되는 이동 전화의 링어와 같이, 일반적으로 콘텐츠에 기초하여 제어될 수 있다.
일 실시예에서, 콘텐츠의 하나 이상의 표현이 하나 이상의 몰입 디바이스(119)와 결합될 수 있으며, 따라서 콘텐츠는 디바이스들 내에 삽입될 수 있다. 따라서, 하나 이상의 몰입 디바이스(119)는 콘텐츠로부터 정보를 수신하고, 콘텐츠와의 하나 이상의 사용자 상호작용을 통해 하나 이상의 응답을 콘텐츠로 반송함으로써 콘텐츠와 상호작용할 수 있다. 예를 들어, 몰입 디바이스(119d)는 세탁기일 수 있다. 콘텐츠는 세탁기와 관련된 하나 이상의 몰입적 상호작용 이벤트를 포함할 수 있다. 콘텐츠 내의 몰입적 상호작용 이벤트들에 기초하여 결정되는 하나 이상의 제어 신호에 기초하여, 세탁기는 콘텐츠가 세탁기에서의 하나 이상의 액션과 상호작용하는 교육 비디오일 때와 같이 콘텐츠와 상호작용하는 하나 이상의 응답을 이용하여 응답할 수 있다.
UE(101)는 또한 통신 네트워크(105)를 통해 서비스 플랫폼(107)에 접속할 수 있다. 서비스 플랫폼(107)은 (공동으로 서비스들(109)로서 지칭되는) 하나 이상의 서비스(109a-109n)를 포함할 수 있다. 서비스 플랫폼(107)은 하나 이상의 서비스(109)를 UE(101), 몰입 서비스(103), 콘텐츠 제공자들(115) 및 호스트 디바이스(117)에 제공할 수 있다. 서비스들(109)은 게이밍 서비스들, 멀티미디어 서비스들, 소셜 네트워킹 서비스들 등과 관련될 수 있다. 일 실시예에서, 하나 이상의 서비스(109)는 몰입 서비스(103)와 관련된 하나 이상의 기능과 관련될 수 있다.
UE(101)는 또한 통신 네트워크(105)를 통해 (공동으로 콘텐츠 제공자들(115)로서 지칭되는) 하나 이상의 콘텐츠 제공자(115a-115n)에 접속할 수 있다. 콘텐츠 제공자들(115)은 콘텐츠를 UE(101), 몰입 서비스(103), 서비스 플랫폼(107)의 서비스들(109) 및 호스트 디바이스(117)에 제공할 수 있다. 콘텐츠는 호스트 디바이스(117)로부터 몰입 디바이스(119) 및/또는 UE(101)로의 사용자에 대한 콘텐츠의 제공과 관련된 콘텐츠와 같은 임의 타입의 콘텐츠일 수 있다.
몰입 서비스(103)는 사용자에게 제공되는 콘텐츠와 관련된 하나 이상의 몰입적 상호작용 이벤트의 결정에 기초하여 사용자와 관련된 하나 이상의 디바이스에 대한 제어를 가능하게 할 수 있다. 도 1에는 시스템(100)의 개별 컴포넌트로서 도시되지만, 몰입 서비스(103) 및/또는 몰입 서비스(103)의 기능들 중 어느 하나 이상은 시스템(100)의 요소들 중 하나 이상에서 구현될 수 있다. 예를 들어, 일 실시예에서, 몰입 서비스(103)는 콘텐츠의 제공을 실행하는 호스트 디바이스(117)에서 구현될 수 있다. 일 실시예에서, 몰입 서비스(103)는 (하나 이상의 UE(101)를 포함하는) 하나 이상의 몰입 디바이스(119)에서 그리고/또는 하나 이상의 서비스(109)에서 구현될 수 있다. 그러나, 몰입 서비스(103)는 시스템(100)의 임의의 다른 요소와 상호작용하는 시스템(100)의 상이한 요소일 수도 있다.
몰입 서비스(103)는 콘텐츠가 사용자와 관련된 환경과 상호작용하는 것을 가능하게 한다. 몰입 서비스(103)는 디바이스에서 제공되는 콘텐츠를 처리하여, 하나 이상의 몰입적 상호작용 이벤트를 결정한다. 예를 들어, 콘텐츠를 제공하는 디바이스는 예를 들어 무비 플레이어, 오디오 플레이어 등으로서 작용하는 호스트 디바이스(117) 및/또는 UE(101a)일 수 있다. 하나 이상의 다른 디바이스는 (콘텐츠를 제공하는 UE(101)를 포함하는) 하나 이상의 UE(101) 및/또는 하나 이상의 몰입 디바이스(119)를 포함할 수 있다. 콘텐츠는 예를 들어 하나 이상의 영화, 하나 이상의 비디오, 하나 이상의 텔레비전 프로그램, 하나 이상의 노래, 하나 이상의 게임 등을 포함할 수 있다. 몰입 서비스(103)는 또한 (a) 하나 이상의 몰입적 상호작용 이벤트를 유발하도록 디바이스 및/또는 하나 이상의 다른 디바이스를 제어하기 위한 하나 이상의 제어 신호 및/또는 (b) 하나 이상의 제어 신호를 전송하기 위한 하나 이상의 프로토콜을 결정한다. 전술한 바와 같이, 프로토콜들은 예를 들어 블루투스(등록상표), WLAN, 무선 또는 본 명세서에서 설명되는 임의의 다른 프로토콜일 수 있다. 몰입 서비스(103)는 또한 디바이스 및/또는 하나 이상의 다른 디바이스로의 제어 신호들의 전송을 유발하여, 디바이스들을 콘텐츠 제공에 몰입시킨다. 디바이스들에 대한 제어는 디바이스들과 관련된 사용자들이 제공된 콘텐츠에 몰입되어 더 사실적인 경험을 얻게 한다. 몰입 서비스(103)는 디바이스에 의해 제공되는 콘텐츠 내의 하나 이상의 액션, 하나 이상의 기능 및/또는 하나 이상의 특성을 디바이스 및/또는 하나 이상의 다른 디바이스와 연관시키기 위한 하나 이상의 애플리케이션 프로그래밍 인터페이스(API)를 포함한다. 몰입 서비스(103)의 API는 또한 콘텐츠가 디바이스 및/또는 하나 이상의 다른 디바이스 상에서 하나 이상의 이벤트를 개시하는 것을 물론, 디바이스 및/또는 하나 이상의 다른 디바이스로부터 이벤트들에 대한 응답들을 듣고 수신하는 것을 가능하게 한다.
몰입 서비스(103)는 콘텐츠를 제공하는 디바이스(예로서, 호스트 디바이스(117))와 디바이스 자체(예로서, 디바이스 상의 하나 이상의 다른 컴포넌트) 및/또는 콘텐츠에 기초하여 제어될 수 있는 하나 이상의 다른 디바이스(예로서, UE(101), 몰입 디바이스들(119)) 사이의 지원되는 제어 신호들, 지원되는 프로토콜들 또는 이들의 조합을 결정한다. 몰입 서비스(103)는 환경과 최초로 연관될 때, 콘텐츠의 제공과 관련된 정보를 수신할 때, 콘텐츠의 제공과 관련된 정보의 수신과 무관하게 주기적으로, 주문 시에, 또는 이들의 조합 시에 그러한 결정을 수행할 수 있다. 호스트 디바이스 및 몰입 디바이스들과 관련된 제어 신호들 및 프로토콜들을 결정할 때, 몰입 서비스(103)는 더 개인화된 경험을 위한 임의의 환경을 구성할 수 있다.
몰입 서비스(103)는 또한 콘텐츠의 제공 내에 표현되는 가상 디바이스들을 결정한다. 하나 이상의 가상 디바이스는 실세계의 UE(101) 및/또는 몰입 디바이스들(119)에 대응한다. 예를 들어, 콘텐츠는 영화와 관련될 수 있고, 영화 중의 장면은 라이트들을 턴온시킬 수 있다. 따라서, 라이트들 또는 라이트들과 관련된 라이트 스위치는 콘텐츠와 관련된 가상 디바이스를 나타낸다. 콘텐츠는 가상 디바이스들과 관련된 하나 이상의 액션, 기능 및/또는 특성을 포함할 수 있다. 몰입 서비스(103)는 하나 이상의 가상 디바이스의 액션들, 기능들, 특성들 또는 이들의 조합과, 디바이스 및/또는 하나 이상의 다른 디바이스에서의 하나 이상의 제어 신호의 실행의 동기화를 유발할 수 있으며, 따라서 콘텐츠 내의 가상 디바이스들은 실세계의 몰입 디바이스들(119)(예로서, 몰입 디바이스들(119) 및/또는 UE(101))과 동기화된다.
일 실시예에서, 콘텐츠에 몰입된 디바이스는 콘텐츠가 디바이스 내에 삽입되게 할 수 있다. 몰입 서비스(103)는 디바이스 내의 콘텐츠의 삽입을 제어할 수 있다. 이어서, 디바이스는 콘텐츠와 상호작용하는 데 사용될 수 있다. 이어서, 몰입 서비스(103)는 콘텐츠와 하나 이상의 디바이스의 하나 이상의 상호작용을 결정할 수 있다. 상호작용들은 콘텐츠 내의 하나 이상의 몰입적 상호작용 이벤트에 응답함으로써 콘텐츠가 디바이스와 상호작용하는 것을 가능하게 하고, 디바이스가 콘텐츠와 상호작용하는 것을 가능하게 한다. 몰입 서비스(103)는 하나 이상의 상호작용을 처리할 수 있다.
일 실시예에서, 몰입 서비스(103)는 콘텐츠로부터의 데이터와 하나 이상의 디바이스에 고유한 데이터의 결합을 유발할 수 있으며, 따라서 콘텐츠로부터의 데이터는 디바이스들에 고유한 데이터와 구별되지 않는다. 이러한 접근 방법에서, 사용자는 (예로서, 디바이스에 고유한) 사실적인 것과 가상적인 것(예로서, 콘텐츠로부터의 데이터)을 구별하지 못한다. 따라서, 사용자는 사용자 자신의 일상 디바이스를 이용하여 콘텐츠에 완전히 몰입된다. 예를 들어, 콘텐츠로부터의 데이터는 디바이스의 사용자 인터페이스 내에 디바이스에 고유한 데이터 옆에 표시된다. 따라서, 사용자가 연락처 사용자 인터페이스와 같은 사용자 인터페이스들을 볼 때, 사용자는 어떤 연락처들이 디바이스에 고유한지, 따라서 실세계에 고유한지 그리고 어떤 연락처들이 콘텐츠에 고유한지, 따라서 콘텐츠와 관련된 가상 세계에 고유한지를 구별하지 못한다.
일 실시예에서, 몰입 서비스(103)는 또한 제어 신호들에 기초하여 콘텐츠에 의해 생성되는 정보, 콘텐츠를 생성하는 하나 이상의 엔진 또는 이들의 조합을 제공하기 위해 몰입 디바이스들에서의 하나 이상의 사용자 인터페이스의 생성을 유발할 수 있다. 몰입 서비스(103)는 사용자 인터페이스들의 생성을 유발함으로써 디바이스들을 이용하여 통상적으로 경험되는 사용자 인터페이스들을 재생할 수 있으며, 따라서 생성된 사용자 인터페이스들에 기초하는 사용자와 디바이스 사이의 상호작용들은 사용자와 디바이스에 고유한 사용자 인터페이스들 사이의 상호작용들과 구별되지 않는다. 즉, 사용자는 사용자가 디바이스 상에서 실세계에 관한 정보와 상호작용하고 있는지 또는 콘텐츠와 관련된 가상 세계에 관한 정보와 상호작용하고 있는지를 결정하지 못한다. 이것은 콘텐츠와 관련된 심리적 몰입을 달성하며, 사용자 자신의 디바이스를 이용하여 몰입을 사용자에 대해 개인화한다.
일 실시예에서, 몰입 디바이스(119a)는 하나 이상의 몰입적 상호작용 이벤트 및/또는 하나 이상의 몰입적 상호작용 이벤트에 대한 응답들에 기초하여 콘텐츠로부터 정보를 요청할 수 있다. 예를 들어, 몰입 디바이스(119a)는 몰입 디바이스(119a)의 사용자 인터페이스 내에 증대할 정보를 요청하기 위한 메시지를 콘텐츠를 제공하는 호스트 디바이스(117)로 전송할 수 있다. 이어서, 요청된 정보는 몰입 디바이스(119a)로 전송되고, 몰입 디바이스(119a)와 관련된 사용자 인터페이스 상에 표시될 수 있다. 몰입 디바이스(119a)와 콘텐츠 간의 연관성이 종료될 때, 몰입 디바이스(119a)의 임의의 증대도 종료될 수 있으며, 이로써 디바이스는 연관 전의 그의 최초 상태로 복귀한다. 예를 들어, 콘텐츠가 DVD 플레이어에 의해 재생되는 영화인 경우, 영화가 중단될 때, DVD 플레이어와 몰입 디바이스(119a)의 연관성은 종료될 수 있으며, 이는 몰입 디바이스(119a)의 증대의 종료를 유발할 수 있다. 따라서, 몰입 디바이스(119a)가 콘텐츠로부터 검색하였거나 액세스했을 수 있는 임의의 정보가 손실될 수 있으며, 따라서 증대가 종료된다. 일 실시예에서, 호스트 디바이스(117)와 예를 들어 몰입 디바이스(119a) 사이의 접속이 종료될 수 있지만, 몰입 서비스(103)는 여전히 몰입 디바이스(119a)와 통신하여, 몰입 디바이스(119a)로 하여금 몰입 디바이스(119a) 내의 정보의 증대를 종료하게 할 수 있다.
일 실시예에서, 몰입적 상호작용 이벤트들 및/또는 디바이스 및/또는 하나 이상의 다른 디바이스로 전송되는 제어 신호들은 콘텐츠와 관련된 광고들을 생성하는 방식으로 콘텐츠와 연관될 수 있다. 예를 들어, 콘텐츠가 영화를 나타내는 경우, 영화와 관련된 하나 이상의 제품 배치는 하나 이상의 디바이스로 지향되는 하나 이상의 명령과 관련될 수 있다. 예를 들어, 콘텐츠에 기초하여 몰입 서비스(103)에 의해 제어될 수 있는 디바이스는 냉장고일 수 있다. 따라서, 제품이 영화 내에 제공될 때, 예를 들어 음료 브랜드가 영화 내에 포함될 때, 음료 브랜드는 자동으로 그의 제품이 냉장고와 연관되게 할 수 있는데, 예를 들어 제품이 냉장고와 관련된 전자 쇼핑 리스트 내에 배치되게 할 수 있다.
예를 들어, UE(101), 몰입 서비스(103), 서비스 플랫폼(107), 콘텐츠 제공자들(115), 호스트 디바이스(117) 및 몰입 디바이스(119)는 공지된, 새로운 또는 계속 개발되는 프로토콜들을 이용하여 서로 그리고 통신 네트워크(105)의 다른 컴포넌트들과 통신한다. 이와 관련하여, 프로토콜은 통신 링크들을 통해 전송되는 정보에 기초하여 통신 네트워크(105) 내의 네트워크 노드들이 서로 상호작용하는 방식을 정의하는 규칙들의 세트를 포함한다. 프로토콜들은 다양한 타입의 물리 신호들의 생성 및 수신으로부터 그러한 신호들을 전송하기 위한 링크의 선택, 그러한 신호들에 의해 지시되는 정보의 포맷, 컴퓨터 시스템에서 실행되는 어떠한 소프트웨어 애플리케이션이 정보를 송신 또는 수신하는지의 식별에 이르는 각각의 노드 내의 상이한 동작 계층들에서 유효하다. 네트워크를 통해 정보를 교환하기 위한 프로토콜들의 개념적으로 상이한 계층들은 개방 시스템 상호접속(OSI) 참조 모델에서 설명된다.
네트워크 노드들 간의 통신은 통상적으로 개별 데이터 패킷들을 교환함으로써 수행된다. 각각의 패킷은 통상적으로 (1) 특정 프로토콜과 관련된 헤더 정보, 및 (2) 헤더 정보에 이어지고, 그러한 특정 프로토콜과 무관하게 처리될 수 있는 정보를 포함하는 페이로드 정보를 포함한다. 일부 프로토콜들에서, 패킷은 (3)은 페이로드에 이어지고 페이로드 정보의 끝을 지시하는 트레일러 정보를 포함한다. 헤더는 패킷의 소스, 그의 목적지, 페이로드의 길이, 및 프로토콜에 의해 사용되는 다른 특성들과 같은 정보를 포함한다. 종종, 특정 프로토콜에 대한 페이로드 내의 데이터는 OSI 참조 모델의 상이한 상위 계층과 관련된 상이한 프로토콜에 대한 헤더 및 페이로드를 포함한다. 특정 프로토콜에 대한 헤더는 통상적으로 그의 페이로드 내에 포함되는 다음 프로토콜에 대한 타입을 포함한다. 상위 계층 프로토콜은 하위 계층 프로토콜 내에 캡슐화되는 것으로 지칭된다. 인터넷과 같은 다수의 이종 네트워크를 가로지르는 패킷 내에 포함된 헤더들은 통상적으로 물리(계층 1) 헤더, 데이터-링크(계층 2) 헤더, 인터네트워크(계층 3) 헤더 및 전송(계층 4) 헤더, 및 OSI 참조 모델에 의해 정의되는 바와 같은 다양한 애플리케이션(계층 5, 계층 6 및 계층 7) 헤더들을 포함한다.
도 2는 일 실시예에 따른, 몰입 서비스(103)의 요소들의 도면이다. 예를 들어, 몰입 서비스(103)는 하나 이상의 몰입 상호작용 이벤트에 기초하여 일상 디바이스들을 통해 몰입 상호작용을 제공하기 위한 하나 이상의 요소를 포함한다. 이러한 요소들의 기능들은 하나 이상의 요소에서 결합될 수 있거나 등가 기능의 다른 요소들에 의해 수행될 수 있는 것이 고려된다. 전술한 바와 같이, 이러한 컴포넌트들의 기능들은 호스트 디바이스(117), UE(101), 몰입 디바이스들(119) 및/또는 서비스 플랫폼(107) 상의 서비스들(109) 중 하나 이상에서 결합될 수 있다. 따라서, 예를 들어, 몰입 서비스(103)의 기능들은 호스트 디바이스(117) 및 몰입 디바이스(119a)와 통신하는 서비스 플랫폼(107) 상의 서비스(109a)에 의해 수행될 수 있다. 대안으로서, 몰입 플랫폼(103)의 기능들은 몰입 디바이스(119a) 상에서 실행되는 애플리케이션에 의해 수행될 수 있다. 이 실시예에서, 몰입 서비스(103)는 디바이스 모듈(201), API 모듈(203), 이벤트 모듈(205), 정보 모듈(207) 및 사용자 인터페이스 모듈(209)을 포함한다.
디바이스 모듈(201)은 콘텐츠의 제공과 관련된 디바이스들을 결정한다. 디바이스 모듈(201)은 사용자에게 콘텐츠를 제공하는 하나 이상의 호스트 디바이스(117)를 결정한다. 일 실시예에서, 전술한 바와 같이, 몰입 서비스(103)는 호스트 디바이스(117)에서 구현될 수 있다. 어느 경우에나, 디바이스 모듈(201)은 사용자에게 콘텐츠를 제공하는 것과 관련된 호스트 디바이스(117)를 결정할 필요가 없다. 디바이스 모듈(201)은 또한 호스트 디바이스(117)에 의해 제어될 수 있는 하나 이상의 다른 디바이스, 예로서 하나 이상의 UE(101), 호스트 디바이스(117) 자체 및/또는 하나 이상의 몰입 디바이스(119)를 결정한다. 디바이스 모듈(201)은 디바이스들을 검출하기 위한 임의의 방법을 통해 하나 이상의 다른 디바이스를 결정할 수 있다. 예를 들어, 디바이스 모듈(201)은 호스트 디바이스와 하나 이상의 다른 디바이스 사이의 하나 이상의 지원되는 프로토콜 및/또는 지원되는 제어 신호들을 결정하여 관련 디바이스들을 결정할 수 있다. 따라서, 디바이스들을 결정하기 위한 방법은 디바이스들 사이에서 정보를 전송하는 데 사용되는 하나 이상의 프로토콜에 기초할 수 있다.
API 모듈(203)은 콘텐츠 내의 몰입 상호작용 이벤트들에 기초하여 호스트 디바이스(117)와 호스트 디바이스(117)에 의해 제어되는 하나 이상의 다른 디바이스 사이에 링크를 제공한다. API 모듈(203)은 호스트 디바이스(117)와 하나 이상의 다른 디바이스 사이의 하나 이상의 상호작용을 수행하기 위해 호스트 디바이스(117), 호스트 디바이스(117) 상에서 제공되는 콘텐츠, 콘텐츠를 생성하는 하나 이상의 엔진 또는 이들의 조합에 대한 인터페이스들을 제공한다. 일 실시예에서, API 모듈(203)은 콘텐츠를 제공하는 호스트 디바이스(117)의 다양한 컴포넌트들에 대한 인터페이스들을 제공할 수 있으며, 따라서 콘텐츠는 콘텐츠 내의 명령들에 기초하여 제어할 호스트 디바이스(117)의 하나 이상의 다른 컴포넌트에 액세스할 수 있다. API 모듈(203)은 하나 이상의 디바이스 상에서 트랜잭션들을 수행하는 것은 물론, 하나 이상의 디바이스로부터 응답들을 듣고 수신하기 위한 인터페이스들을 제공하기 위해 호스트 디바이스(117)와 인터페이스한다. 일 실시예에서, API 모듈(203)은 하나 이상의 UE(101)가 콘텐츠에 의해 제어될 때 UE(101) 상에 위치하는 하나 이상의 애플리케이션(111)과 인터페이스한다. UE(101) 상의 하나 이상의 애플리케이션(111)은 유사하게 UE(101)에 관한 정보를 수신하고 API 모듈(203)을 통해 몰입 서비스(103)로 전송한다. 애플리케이션들(111)은 UE(101)에서 콘텐츠로부터의 명령들과 관련된 하나 이상의 액션, 하나 이상의 기능, 하나 이상의 특성 또는 이들의 조합을 개시할 수 있다. 애플리케이션들(111)은 또한 명령들에 응답하여 UE(101)에서 하나 이상의 다른 애플리케이션(111)으로부터 명령들에 대한 하나 이상의 응답을 수신할 수 있다. 애플리케이션들(111)은 또한 콘텐츠와 다른 디바이스 사이의 하나 이상의 트랜잭션을 추적하여, 다른 디바이스들에서 수행된 어떤 제어들이 콘텐츠와 관련되는지 그리고 디바이스들에서 수행된 어떤 제어들이 고유 제어들 및/또는 고유 정보와 관련되는지를 결정할 수 있다. 어느 경우에나, 애플리케이션들(111)은 디바이스들의 고유 응답들에 기초하여 또는 콘텐츠에 따른 응답들에 기초하여 다른 디바이스들이 제어들에 응답해야 하는지를 결정할 수 있다.
이벤트 모듈(205)은 사용자에게 제공되는 콘텐츠를 처리하여, 콘텐츠와 관련된 하나 이상의 몰입 상호작용 이벤트를 결정한다. 이벤트 모듈(205)은 또한 하나 이상의 몰입 상호작용 이벤트와, 제어 신호들을 하나 이상의 다른 디바이스, 또는 몰입 디바이스의 하나 이상의 컴포넌트로 전송하는 것과 관련된 하나 이상의 제어 신호 및/또는 하나 이상의 프로토콜을 상관시킨다. 일 실시예에서, 이벤트 모듈(205)은 하나 이상의 가상 디바이스와 관련된 하나 이상의 액션, 하나 이상의 기능, 하나 이상의 특성 또는 이들의 조합과, 몰입 서비스(103)와 관련된 하나 이상의 몰입 디바이스에서의 제어 신호의 실행을 콘텐츠에 기초하여 동기화한다. 이벤트 모듈(205)은 가상 디바이스와 하나 이상의 몰입 디바이스가 동기화되도록 동기화를 수행하며, 이로써 가상 디바이스 및 실제 디바이스의 액션, 기능 및/또는 특성이 동시에 발생하게 한다. 따라서, 동기화는 사용자의 디바이스가 콘텐츠에 몰입된다는 인식을 사용자에게 유발하며, 따라서 사용자를 콘텐츠에 몰입시킨다.
정보 모듈(207)은 하나 이상의 디바이스가 콘텐츠에 몰입될 때 그리고/또는 콘텐츠의 하나 이상의 표현이 디바이스에 몰입될 때 하나 이상의 디바이스로 전달되는 정보를 전송 및 추적하는 기능들을 수행한다. 전술한 바와 같이, 콘텐츠와 관련된 정보는 하나 이상의 몰입 디바이스(119)에 고유한 정보와 결합될 수 있다. 따라서, 정보 모듈(207)은 하나 이상의 몰입 디바이스와 콘텐츠를 제공하는 호스트 디바이스 및/또는 몰입 서비스(103) 사이에서 전송되는 정보를 추적한다. 일 실시예에서, 정보 모듈(207)은 몰입 서비스(103)에 의해 제어되는 하나 이상의 디바이스가 정보를 요청할 때 정보를 디바이스들로 전송한다. 일 실시예에서, 정보 모듈(207)은 하나의 전송에서 모든 정보를 전송하며, 따라서 디바이스는 아래에 더 상세히 설명되는 바와 같이 콘텐츠와 관련된 가상 세계에 디바이스를 몰입시키는 데 필요한 모든 정보를 갖는다.
일 실시예에서, 몰입 디바이스와 호스트 디바이스 사이의 분리시에, 몰입 디바이스는 콘텐츠를 제공하는 호스트 디바이스와 더 이상 통신할 수 없다. 따라서, 콘텐츠로부터 정보를 검색하기 위해 몰입 디바이스에 의해 사용되는 경로들은 더 이상 존재하지 않는다. 따라서, 디바이스에 대한 고유 정보와 결합된 콘텐츠로부터의 가상 정보를 이용하는 몰입 디바이스의 증대가 종료되며, 몰입 디바이스는 가상 정보를 더 이상 제공하지 않는다. 일 실시예에서, 몰입 서비스(103)는 하나의 디바이스에 하나 이상의 명령을 발행하여, 전송된 정보를 삭제할 수 있다. 그러한 실시예에서, 호스트 디바이스와 제어되는 디바이스 사이의 접속이 손실될 수 있지만, 몰입 디바이스와 몰입 서비스(103) 사이의 접속은 유지될 수 있으며, 이로써 몰입 서비스(103)는 명령들을 몰입 디바이스로 계속 전송할 수 있다.
일 실시예에서, 사용자 인터페이스 모듈(209)은 호스트 디바이스(117)에 의해 제공되는 콘텐츠의 가상 환경으로부터의 정보와 몰입 디바이스(119a)의 고유 정보의 결합을 유발한다. 사용자 인터페이스 모듈(209)은 예를 들어 몰입 디바이스(119a)에서 사용자 인터페이스들을 생성하는, 몰입 디바이스(119a)와 관련된 하나 이상의 애플리케이션(111)과 인터페이스함으로써 정보의 결합을 유발할 수 있다.
도 3은 일 실시예에 따른, 하나 이상의 몰입적 상호작용 이벤트에 기초하여 일상 디바이스들을 통해 몰입 상호작용을 제공하기 위한 프로세스의 흐름도이다. 일 실시예에서, 몰입 서비스(103)는 프로세스(300)를 수행하며, 예를 들어 도 9에 도시된 바와 같이 프로세서 및 메모리를 포함하는 칩셋에서 구현된다.
단계 301에서, 몰입 서비스(103)는 디바이스에서 제공되는 콘텐츠를 처리하여 하나 이상의 몰입적 상호작용 이벤트를 결정한다. 콘텐츠는 영화, 비디오, 음악, 텔레비전 프로그램 등과 같은 임의 타입의 콘텐츠를 나타낼 수 있다. 콘텐츠를 제공하는 디바이스는 호스트 디바이스(117)로 간주될 수 있다. 예를 들어, 영화가 DVD 플레이어에 의해 재생될 수 있으며, DVD 플레이어는 호스트 디바이스(117)로 간주될 수 있다. 영화는 하나 이상의 디바이스를 콘텐츠에 몰입시키는 것과 관련된 하나 이상의 몰입적 상호작용 이벤트를 포함할 수 있다. 일 실시예에서, DVD 플레이어는 영화와 관련된 정보를 처리하여, 영화와 관련된 정보 내의 몰입적 상호작용 이벤트들에 관한 정보를 추출할 수 있다. 그러한 실시예에서, 몰입 서비스(103)는 DVD 플레이어 내에 구현될 수 있다. 일 실시예에서, 영화에 관한 정보는 통신 네트워크(105)를 통해 몰입 서비스(103)로 전송될 수 있으며, 이어서 몰입 서비스는 영화에 관한 정보를 처리하여 하나 이상의 몰입적 상호작용 이벤트를 결정할 수 있다. 몰입적 상호작용 이벤트들은 하나 이상의 디바이스를 콘텐츠에 몰입시키기 위한 것일 수 있다. 하나 이상의 디바이스는 하나 이상의 제어 신호에 기초하여 콘텐츠에 의해 제어될 수 있는 임의의 디바이스일 수 있다. 예를 들어, 하나 이상의 디바이스는 UE(101) 및/또는 몰입 디바이스들(119), 또는 심지어는 하나 이상의 다른 컴포넌트가 명령들에 의해 제어되는 호스트 디바이스(117)일 수 있다. 특정 예들로서, 하나 이상의 몰입 디바이스(119)는 마이크로파 오븐, 식기 세척기, 세탁기, 냉장고, 라이트 스위치, 손목 시계, 컴퓨터, UE(101), 또는 하나 이상의 프로토콜(예로서, 블루투스(등록상표))을 통해 몰입 서비스(103) 및/또는 호스트 디바이스(117)와 통신할 수 있는 임의의 디바이스일 수 있다.
단계 303에서, 몰입 서비스(103)는 (a) 하나 이상의 몰입적 상호작용 이벤트를 적어도 부분적으로 유발하도록 디바이스, 하나 이상의 다른 디바이스 또는 이들의 조합을 제어하기 위한 하나 이상의 제어 신호; (b) 하나 이상의 제어 신호를 전송하기 위한 하나 이상의 프로토콜; 또는 (c) 이들의 조합을 결정한다. 하나 이상의 제어 신호는 콘텐츠 내의 하나 이상의 디바이스의 몰입을 수행하는, 제어되는 하나 이상의 디바이스와 관련되는 하나 이상의 신호를 나타낼 수 있다. 하나 이상의 프로토콜은 하나 이상의 제어되는 디바이스에서 하나 이상의 제어 신호에 관한 정보를 교환하는 데 사용되는 프로토콜들이다. 이 단계에 기초하여, 예를 들어, 몰입 서비스(103)는 호스트 디바이스(117)에 의해 제공되는 콘텐츠를 처리하고, 콘텐츠를 제공할 때 더 개인화된 경험을 제공하기 위해 몰입 서비스(103)와 관련되는 하나 이상의 디바이스로 전송될 수 있는 하나 이상의 제어 신호를 결정할 수 있다.몰입 서비스(103)가 제어 신호들 및/또는 프로토콜들을 결정할 수 있으므로, 몰입 서비스(103)는 콘텐츠의 제공과 관련되지 않을 수도 있는 실세계 디바이스들과 인터페이스하고, 이러한 디바이스들과 인터페이스하여, 디바이스들이 디바이스들과 관련된 사용자를 콘텐츠에 몰입시키기 위해 콘텐츠와 관련된, 오디오, 시각, 촉각 또는 이들의 조합인지와 무관한 소정 타입의 정보를 제공하게 할 수 있다. 따라서, 사용자는 특수 장비를 획득하거나, 사용자를 콘텐츠에 몰입시키는 개인화된 경험을 제공할 서비스 제공자(예로서, 영화관)에게 갈 필요가 없다. 오히려, 몰입 서비스(103)는 사용자의 환경 내의 일상 디바이스들을 간단히 사용하여, 디바이스들 및 사용자를 제공된 콘텐츠에 몰입시킬 수 있다.
단계 305에서, 몰입 서비스(103)는 디바이스, 하나 이상의 다른 디바이스 또는 이들의 조합으로의 하나 이상의 제어 신호의 전송을 적어도 부분적으로 유발한다. 하나 이상의 제어 신호를 디바이스(예컨대, 예를 들어 콘텐츠 제공과 무관할 수도 있는, 콘텐츠 제공 디바이스의 다양한 다른 컴포넌트들) 또는 하나 이상의 다른 디바이스로 전송함으로써, 몰입 서비스(103)는 하나 이상의 디바이스를 콘텐츠에 몰입시켜, 콘텐츠의 제공과 관련된 사용자를 콘텐츠에 몰입시킨다.
도 4는 일 실시예에 따른, 콘텐츠의 제공에 몰입시키고 콘텐츠와 동기화할 디바이스들을 결정하기 위한 프로세스의 흐름도이다. 일 실시예에서, 몰입 서비스(103)는 프로세스(400)를 수행하며, 예를 들어 도 9에 도시된 바와 같이 프로세서 및 메모리를 포함하는 칩셋 내에 구현된다.
단계 401에서, 몰입 서비스(103)는 하나 이상의 능력, 하나 이상의 지원되는 제어 신호, 하나 이상의 지원되는 프로토콜 또는 이들의 조합에 대한 하나 이상의 다른 디바이스, 디바이스 또는 이들의 조합의 조회를 적어도 부분적으로 유발한다. 몰입 서비스(103)는 조회를 유발하여, 콘텐츠를 제공하는 디바이스 및 콘텐츠에 의해 제어될 수 있는 하나 이상의 다른 디바이스와 관련된 환경을 결정한다. 일 실시예에서, 몰입 서비스(103)는 콘텐츠를 제공하는 디바이스(예로서, 호스트 디바이스(117))와 관련하여 몰입 서비스(103)의 초기 셋업 동안 조회를 한 번 유발할 수 있다. 따라서, 예를 들어, 몰입 서비스(103)가 새로운 호스트 디바이스(117)를 검출할 때, 몰입 서비스(103)는 지원되는 제어 신호들 및/또는 지원되는 프로토콜들에 대한 조회를 유발할 수 있다. 일 실시예에서, 몰입 서비스(103)는 콘텐츠의 초기 재생시에 한 번 조회를 유발할 수 있다. 따라서, 예를 들어, 호스트 디바이스(117)가 특정 콘텐츠를 처음 제공할 때, 예를 들어 호스트 디바이스(117)가 특정 영화를 처음 재생할 때, 몰입 서비스(103)는 지원되는 제어 신호들 및/또는 지원되는 프로토콜들에 대한 조회를 유발할 수 있다. 일 실시예에서, 몰입 서비스(103)는 콘텐츠의 제공 여부에 관계없이 조회를 계속 유발하여, 지원되는 제어 신호들 및/또는 지원되는 프로토콜들, 및 시간 경과에 따라 발생할 수 있는 지원되는 제어 신호들 및/또는 지원되는 프로토콜들에 대한 임의의 변경들을 결정할 수 있다. 일 실시예에서, 몰입 서비스(103)는 예를 들어 호스트 디바이스(117), 하나 이상의 다른 디바이스(예로서, UE(101) 및/또는 몰입 디바이스들(119))로부터의 명령시에 또는 하나 이상의 서비스(109)에 기초하여 조회를 유발할 수 있다.
지원되는 제어 신호들 및 지원되는 프로토콜들에 대한 조회를 유발함으로써, 몰입 서비스(103)는 호스트 디바이스(117) 및 하나 이상의 다른 디바이스의 능력들을 항상 인식하여, 콘텐츠와 관련된 어떤 몰입적 상호작용 이벤트들이 호스트 디바이스 및 하나 이상의 다른 디바이스에 의해 지원되는지를 결정할 수 있다. 따라서, 단계 403에서, 몰입 서비스(103)는 하나 이상의 지원되는 제어 신호, 하나 이상의 지원되는 프로토콜 또는 이들의 조합에 적어도 부분적으로 기초하여 콘텐츠에 따라 하나 이상의 다른 디바이스를 제어하는 데 사용되는 하나 이상의 제어 신호, 하나 이상의 프로토콜 또는 이들의 조합을 결정한다. 따라서, 몰입 서비스(103)는 호스트 디바이스(117) 및 하나 이상의 다른 디바이스에 의해 지원되는, 콘텐츠와 관련된 몰입적 상호작용 이벤트들을 결정할 수 있다. 콘텐츠 내의 몰입적 상호작용 이벤트들에 의해 지원되는 디바이스가 존재하지 않는 경우, 몰입 서비스(103)는 어떠한 디바이스의 몰입도 없이 콘텐츠의 제공을 허가한다. 지원되는 제어 신호들 및 지원되는 프로토콜들에 기초하여 제어될 수 있는 많은 수의 디바이스가 존재하는 경우, 몰입 서비스(103)는 콘텐츠 내의 몰입적 상호작용 이벤트들에 기초하여 디바이스들을 제어한다.
단계 405에서, 몰입 서비스(103)는 콘텐츠에서 제공되는 하나 이상의 가상 디바이스를 결정하고, 하나 이상의 제어 신호에 적어도 부분적으로 기초하여 디바이스, 하나 이상의 다른 디바이스 또는 이들의 조합에서 하나 이상의 가상 디바이스와 관련된 하나 이상의 액션, 하나 이상의 기능, 하나 이상의 특성 또는 이들의 조합의 시뮬레이션을 적어도 부분적으로 유발한다. 하나 이상의 가상 디바이스들은 몰입 서비스(103)와 관련된 임의의 디바이스에 대응할 수 있다. 그러나, 가상 디바이스들은 콘텐츠 내에 존재하므로 가상적이다. 예를 들어, 영화는 라이트 스위치와 관련된 장면, 예를 들어 영화 내의 캐릭터가 라이트 스위치를 이용하여 라이트를 턴오프하는 장면을 포함할 수 있다. 따라서, 가상 디바이스는 영화 내의 가상 라이트 스위치이다. 가상 디바이스들은 몰입 서비스(103)에 의해 제어되는 하나 이상의 디바이스에 대응할 수 있다. 예를 들어, 실세계와 관련된 라이트 스위치는 지원되는 제어 신호 및/또는 지원되는 프로토콜에 기초하여 몰입 서비스(103)와 통신할 수 있다. 몰입 서비스(103)는 가상 라이트 스위치와 실세계 라이트 스위치를 연관시킬 것이며, 따라서 영화가 가상 라이트 스위치와 관련된 액션, 기능 또는 특성이 존재하는 시점에 이를 때, 몰입 서비스(103)는 실세계 라이트 스위치가 가상 라이트 스위치와 관련된 액션, 기능 및/또는 특성을 시뮬레이션하게 한다. 따라서, 영화와 같은 콘텐츠의 제공과 관련된 사용자는 실세계와 관련된 라이트 스위치가 영화 내의 가상 라이트 스위치와 관련된 이벤트들을 시뮬레이션하게 함으로써 콘텐츠에 몰입된다. 예를 들어, 악인이 라이트를 턴오프하는 공포 영화 동안, 몰입 서비스(103)는 콘텐츠 내의 명령들 및 가상 라이트들과 실세계 라이트들의 연관성에 기초하여 사용자와 관련된 실세계 내의 라이트들을 턴오프할 수 있다.
단계 407에서, 몰입 서비스(103)는 하나 이상의 가상 디바이스의 하나 이상의 액션, 하나 이상의 기능, 하나 이상의 특성 또는 이들의 조합과, 디바이스(예로서, 명령들에 의해 현재 제어되는 디바이스의 하나 이상의 다른 컴포넌트), 하나 이상의 다른 디바이스(예로서, UE(101) 및/또는 몰입 디바이스들(119)) 또는 이들의 조합에서의 하나 이상의 제어 신호의 실행의 동기화를 적어도 부분적으로 유발한다. 몰입 서비스(103)는 사용자가 가상 디바이스 및 제어되는 디바이스와 관련된 액션, 기능 및/또는 특성을 동시에 인식하도록 동기화를 유발하며, 따라서 사용자는 예를 들어 콘텐츠를 단순히 시청하는 것이 아니라 콘텐츠의 일부인 것처럼 느끼게 된다.
일 실시예에서, 콘텐츠와 하나 이상의 제어되는 디바이스 간의 상호작용은 단지 가상 디바이스와 관련된 액션, 기능 및/또는 특성이 실제 디바이스와 동시에 발생하게 하는 것보다 더 많이 연관될 수 있다. 상호작용은 콘텐츠가 디바이스에 몰입되게 하는 다수의 상호작용을 포함할 수 있으며, 따라서 사용자는 예를 들어 디바이스를 통해 콘텐츠와 상호작용할 수 있다. 도 5는 일 실시예에 따른, 콘텐츠를 하나 이상의 디바이스에 삽입하기 위한 프로세스의 흐름도이다. 일 실시예에서, 몰입 서비스(103)는 프로세스(500)를 수행하며, 예를 들어 도 9에 도시된 바와 같이 프로세서 및 메모리를 포함하는 칩셋 내에 구현된다.
단계 501에서, 몰입 서비스(103)는 디바이스, 하나 이상의 다른 디바이스 또는 이들의 조합 내의 콘텐츠의 하나 이상의 표현의 삽입을 적어도 부분적으로 유발한다. 삽입은 콘텐츠가 콘텐츠와 연관될 하나 이상의 디바이스 내에 삽입되게 하며, 따라서 디바이스들은 콘텐츠와 상호작용할 수 있다. 예를 들어, 콘텐츠는 몰입 서비스(103)에 기초하여 UE(101) 내에 삽입될 수 있다. 따라서, 통신(예를 들어, 전화 통화, 텍스트 메시지, 멀티미디어 메시지, 이메일 등)의 수신과 같이 통상적으로 UE(101a)에 의해 수행될 수 있는 기능들은 이제 콘텐츠 또는 실세계와 관련하여 수행될 수 있다. 예를 들어, 사용자는 콘텐츠와 무관한 사용자들로부터의 전화 통화들을 여전히 수신할 수 있다. 그러나, 사용자는 콘텐츠와 관련된 하나 이상의 가상 캐릭터로부터의 전화 통화들도 수신할 수 있다. 그러한 경우에, 콘텐츠가 호스트 디바이스(117)인 게이밍 콘솔에 의해 실행되는 게임과 관련되는 경우, 이제 사용자는 게임 콘텐츠와 관련된 하나 이상의 논-플레이어(non-player)로부터의 전화 통화들을 수신할 수 있다.
이를 수행하기 위해, 단계 503에서, 몰입 서비스(103)는 콘텐츠의 하나 이상의 표현과, 디바이스, 하나 이상의 다른 디바이스 또는 이들의 조합 사이의 하나 이상의 상호작용을 결정한다. 하나 이상의 상호작용은 하나 이상의 제어되는 디바이스와 관련된 액션들, 기능들 및/또는 특성들을 개시하는 몰입적 상호작용 이벤트들과 관련될 수 있다. 하나 이상의 상호작용은 또한 하나 이상의 제어되는 디바이스(또는 호스트 디바이스의 하나 이상의 컴포넌트가 제어될 때 호스트 디바이스 자체)로부터 개시된 액션들, 기능들 및/또는 특성들에 대한 상호작용 응답들을 수신하는 호스트 디바이스(117)와 관련될 수 있다. 트랜잭션들은 또한 콘텐츠 및/또는 콘텐츠를 생성하는 하나 이상의 엔진과 관련된 하나 이상의 제어되는 디바이스와 관련된 액션들, 기능들 및/또는 특성들을 개시하는 하나 이상의 제어되는 디바이스와 관련될 수 있다. 따라서, 호스트 디바이스(117)와 하나 이상의 제어되는 디바이스는 사용자에게 제공되는 콘텐츠에 사용자를 몰입시키는 것과 관련된 정보를 교환하여, 사용자에 대한 더 개인화된 경험을 생성할 수 있다. 단계 505에서, 몰입 서비스(103)는 공생 관계로 디바이스들에 몰입된 콘텐츠와 관련된 하나 이상의 상호작용을 처리하여, 몰입적 상호작용 이벤트들을 결정한다. 이어서, 결정된 몰입적 상호작용 이벤트들은 몰입 디바이스와 호스트 디바이스 사이의 상호작용을 위해 사용될 수 있는 하나 이상의 추가 제어 신호를 결정하는 데 사용될 수 있다.
예를 들어, 호스트 디바이스가 게임을 실행하는 게이밍 콘솔과 관련되고, 하나 이상의 다른 디바이스가 UE(101a)인 경우, 콘텐츠의 하나 이상의 표현과 디바이스 사이의 상호작용들은 가상 게임 세계와 실세계 사이의, 예를 들어 게임과 관련된 하나 이상의 논-플레이어 캐릭터와 UE(101a)와 관련된 사용자 사이의 전화 통화들 및/또는 텍스트 메시지들, UE(101a) 상의 하나 이상의 내비게이션 애플리케이션을 이용하는 가상 세계를 통한 내비게이션, 콘텐츠와 관련된 가상 인터넷을 통한 콘텐츠와 관련된 정보의 브라우징, UE(101a) 상의 연락처 애플리케이션에서의 논-플레이어 캐릭터들의 탐색, UE(101a) 상의 캘린더 애플리케이션들(111)과 게임 내의 가상 세계와 관련된 하나 이상의 이벤트의 연관, UE(101a) 상에서 수행할 활동들의 리스트들과 게임 내의 가상 세계와 관련된 하나 이상의 활동의 연관 및/또는 게임 내의 가상 세계에 고유한 노트들의 작성을 가능하게 한다. 따라서, 프로세스(500)에 기초하여, 사용자는 콘텐츠와 상호작용하기 위해 단지 콘텐츠를 제공하는 것 외의 기능을 갖는 디바이스를 사용할 수 있다. 콘텐츠의 제공과 반드시 관련되지는 않는, 사용자가 이미 가지고 있을 수 있는 디바이스를 사용함으로써, 사용자는 특수 장비를 구매할 필요 없이 콘텐츠에 대한 개인화된 경험을 달성할 수 있다. 또한, 사용자와 일상적으로 상호작용할 수 있는 (UE(101)와 같은) 디바이스와 상호작용함으로써, 사용자는 콘텐츠 내로의 훨씬 더 큰 몰입을 인식한다.
도 6은 일 실시예에 따른, 디바이스에 고유한 정보와 콘텐츠로부터의 정보를 결합하기 위한 프로세스의 흐름도이다. 일 실시예에서, 몰입 서비스(103)는 프로세스(600)를 수행하며, 예를 들어 도 9에 도시된 바와 같이 프로세서 및 메모리를 포함하는 칩셋에서 구현된다.
단계 601에서, 몰입 서비스(103)는 하나 이상의 몰입적 상호작용 이벤트에 적어도 부분적으로 기초하여 디바이스, 하나 이상의 다른 디바이스 또는 이들의 조합과 관련된 하나 이상의 사용자 인터페이스에서 콘텐츠와 관련된 가상 정보와, 디바이스, 하나 이상의 다른 디바이스 또는 이들의 조합과 관련된 고유 정보의 결합을 부분적으로 유발한다. 콘텐츠는 몰입 서비스(103)가 콘텐츠로부터의 가상 정보와 관련된 정보를 몰입 디바이스(119a)로 전송하게 하는 하나 이상의 몰입적 상호작용 이벤트를 포함할 수 있다. 이에 응답하여, 몰입 디바이스(119a)는 전송된 정보가 콘텐츠로부터의 정보가 아니라 디바이스에 고유한 정보인 것처럼 디바이스와 관련된 하나 이상의 인터페이스 상에 정보를 제공할 수 있다. 예를 들어, 하나 이상의 연락처와 관련된 가상 정보가 콘텐츠와 관련된 몰입적 상호작용 이벤트에 기초하여 몰입 디바이스(119a)로 전송될 수 있다. 이어서, 전송된 콘텐츠는 디바이스와 관련된 사용자 인터페이스들 내에 제공될 수 있다. 따라서, 몰입 디바이스(119a)의 사용자가 예를 들어 연락처들을 표시하는 애플리케이션(111b)을 열 때, 연락처들 중 하나 이상은 콘텐츠로부터의 가상 연락처들일 수 있다. 일 실시예에서, 몰입적 상호작용 이벤트는 대신에 예를 들어 몰입 디바이스(119a)와 상호작용할 수 있으며, 따라서 정보는 디바이스가 액션을 수행할 때까지 몰입 디바이스(119a)로 전송되지 않는다. 예를 들어, 몰입 디바이스의 사용자가 연락처들의 표시와 관련된 애플리케이션(111a)을 열 때, 몰입 디바이스(119a)는 콘텐츠로부터의 정보를 포함할 애플리케이션이 개시되고 있는 것으로 결정한다. 따라서, 이어서 몰입 디바이스(119a)는 콘텐츠를 제공하는 호스트 디바이스(117)로부터 그리고/또는 몰입 서비스(103)로부터 가상 정보를 요청할 수 있다. 가상 정보의 수신 시에, 몰입 디바이스(119a)는 연락처들을 제공하기 위해 애플리케이션(111a)과 관련된 사용자 인터페이스 내에 정보를 표시할 수 있다. 디바이스 및/또는 하나 이상의 다른 디바이스가 UE(101)일 때, 고유 정보는 예를 들어 연락처 애플리케이션 내의 연락처들, 브라우저 애플리케이션 내의 북마크들, 캘린더 애플리케이션 내의 캘린더 이벤트들 또는 UE(101a) 상에서 발견될 수 있는 임의의 다른 정보를 나타낼 수 있다. 가상 정보는 유사하게 콘텐츠와 관련된 가상 세계와 모두 관련되는 하나 이상의 연락처, 하나 이상의 북마크, 하나 이상의 이벤트 등일 수 있다.
정보는 필요에 따라 디바이스 및/또는 하나 이상의 다른 디바이스로 전송될 수 있거나, 정보는 디바이스의 표현이 콘텐츠와 연관될 때 디바이스 및/또는 하나 이상의 다른 디바이스로 전송될 수 있거나, 이들의 조합일 수 있다. 예를 들어, 몰입 서비스(103)는 연락처 애플리케이션의 실행에 응답하여 UE(101a)로부터 수신되는 하나 이상의 통지에 기초하여 UE(101a) 상에서의 연락처 애플리케이션의 실행을 검출할 수 있다. 몰입 서비스(103)는 호스트 디바이스(117)로부터 콘텐츠와 관련된 연락처들에 관한 기본 정보를 요청할 수 있다. 기본 정보는 예를 들어 연락처 애플리케이션의 톱 메뉴 내에서 볼 수 있는 이름 및/또는 사진만을 포함할 수 있다. 이어서, 호스트 디바이스(117)는 연락처 정보를 몰입 서비스(103)로 전송할 수 있으며, 이어서 몰입 서비스는 연락처 정보를 UE(101a)로 전송할 수 있다. 이어서, UE(101a)에서의 연락처 애플리케이션은 콘텐츠로부터 제공된 정보를 이용하여 UE(101a)에서의 고유 정보를 증대시켜, 가상 연락처 정보와 고유 연락처 정보를 결합할 수 있다. UE(101a)의 사용자가 연락처 애플리케이션들에 의해 제공되는 바와 같은 연락처들을 볼 때, 연락처들은 실세계와 관련된 고유 연락처들 및 콘텐츠와 관련된 하나 이상의 가상 연락처를 포함할 것이다. 따라서, 연락처들과 관련된 사용자 인터페이스는 UE(101a)의 고유 연락처 애플리케이션과 관련된 사용자 인터페이스와 동일하게 보일 것이며, 따라서 사용자는 어떤 연락처들이 고유 연락처들인지 그리고 어떤 연락처들이 가상 연락처들인지를 결정하지 못한다. 대안으로서, UE(101a)(예를 들어, 몰입 디바이스(119a))는 콘텐츠와 관련된 정보를 요청할 수 있는 애플리케이션(111a)의 실행을 검출할 수 있다. 이어서, UE(101a)는 UE(101a)의 사용자 인터페이스 상에 표시하기 위해 애플리케이션(111a)에 의해 사용될 정보를 몰입 서비스(103) 및/또는 호스트 디바이스(117)로부터 요청할 수 있다. 이어서, 요청된 정보는 애플리케이션(111a)과 관련된 UE(101a) 상의 기존 정보를 증대시킬 수 있다. 다른 예로서, 가상 연락처들과 관련된 모든 정보(또는 콘텐츠와 관련된 임의의 다른 정보)는 연락처 애플리케이션이 UE(101a)에서 처음 실행될 때 UE(101a)로 전송될 수 있다. 다른 예로서, 콘텐츠와 관련된 가상 세계에 관한 모든 정보는 UE(101a)와 콘텐츠의 제공과 관련된 호스트 디바이스(117) 사이의 연관 시에 UE(101a)로 전송될 수 있다.
하나의 대안 실시예로서, 몰입 서비스(103)는 하나 이상의 몰입 디바이스 상의 고유 사용자 인터페이스들을, 고유 사용자 인터페이스들과 동일하게 보이는, 몰입 서비스(103)에 의해 생성된 하나 이상의 사용자 인터페이스를 이용하여 무효화할 수 있다. 일 실시예에서, 몰입 서비스(103)는 사용자 인터페이스들을 병합하여 고유 정보와 콘텐츠로부터의 정보를 병합할 수 있다. 사용자가 추가 정보를 위해 가상 연락처들 중 하나를 선택하는 경우, 정보의 라우팅이 발생할 수 있고, 따라서 몰입 서비스(103)는 콘텐츠로부터 가상 콘텐츠와 관련된 특정 정보를 요청하며, 특정 정보가 UE(101a)로 전송된다.
단계 603에서, 몰입 서비스(103)는 하나 이상의 상호작용, 하나 이상의 몰입적 상호작용 이벤트 또는 이들의 조합에 적어도 부분적으로 기초하여 콘텐츠의 변경, 콘텐츠와의 상호작용 또는 이들의 조합을 적어도 부분적으로 유발한다. 그러한 상호작용들은 예를 들어 전술한 바와 같이 가상 게임 세계와 실세계 사이의, 예를 들어 게임과 관련된 하나 이상의 논-플레이어 캐릭터와 UE(101a)와 관련된 사용자 사이의 전화 통화들 및/또는 텍스트 메시지들, UE(101a) 상의 하나 이상의 내비게이션 애플리케이션을 이용하는 가상 세계를 통한 내비게이팅, 콘텐츠와 관련된 가상 인터넷을 통한 콘텐츠와 관련된 정보의 브라우징, UE(101a) 상의 연락처 애플리케이션에서의 논-플레이어 캐릭터들의 탐색, UE(101a) 상의 캘린더 애플리케이션들(111)과 게임 내의 가상 세계와 관련된 하나 이상의 이벤트의 연관, UE(101a) 상에서 수행할 활동들의 리스트들과 게임 내의 가상 세계와 관련된 하나 이상의 활동의 연관 및/또는 게임 내의 가상 세계에 고유한 노트들의 작성을 포함하는 상호작용들과 관련된 응답들일 수 있다.
예를 들어, 사용자는 호스트 디바이스로서 작용하는 DVD 플레이어에 의해 제공되는 영화를 시청할 수 있다. DVD 플레이어는 콘텐츠를 제공하는 동안 이동 전화를 제어할 수 있다. 영화 내의 장면은 친구에게 전화를 걸어서 친구에게 친구 관계가 끝났다고 말하라고 사용자에게 지시하는 가상 캐릭터를 포함할 수 있다. 장면은 이동 전화 내에 연락처로서 목록화된 친구에 대한 하나 이상의 전화 통화를 듣거나 검출하도록 이동 전화에 지시하는 하나 이상의 명령에 대응할 수 있다. 사용자가 이동 전화를 사용하여 친구와 통화하고, 가상 캐릭터에 의해 요청된 액션들을 수행하는 경우, 이동 전화는 통화가 수행되었음을 지시하는 하나 이상의 응답을 이용하여 DVD 플레이어에 응답할 수 있다. 이 경우에, 가상 캐릭터는 가상 캐릭터의 사용자의 승인을 지시하는 이동 전화로부터의 하나 이상의 응답에 기초하여 응답할 수 있다. 사용자가 가상 캐릭터에 의해 요청된 액션을 수행하지 않는 경우, 가상 캐릭터는 다르게 응답할 수 있는데, 예를 들어 명령을 따르지 않는 것에 대해 사용자를 비난할 수 있다. 따라서, 사용자는 콘텐츠와 직접 상호작용할 수 있음으로써 콘텐츠에 몰입된다. 사용자가 콘텐츠의 제공과 무관한 디바이스(예로서, 이동 전화)를 사용하므로, 사용자는 콘텐츠에 훨씬 더 몰입된 것을 느낀다.
도 7a-7i는 다양한 실시예들에 따른, 도 3-6의 프로세스들에서 사용되는 사용자 인터페이스들의 도면들이다. 도 7a에 도시된 바와 같이, UE(101a)는 사용자 인터페이스(701a)의 확대도(703a)에 도시된 바와 같이 연락처들(707a, 709a, 711a)을 포함하는 연락처 애플리케이션(111b)의 사용자 인터페이스(701a)와 관련될 수 있다. UE(101a)는 또한 다른 디바이스(예로서, 호스트 디바이스(117)) 상에 제공되는 콘텐츠와 관련될 수 있으며, 따라서 콘텐츠로부터의 정보가 UE(101a) 상에 제공될 수 있다. 예를 들어, 연락처들(707a, 711a)은 UE(101a)가 콘텐츠와 관련되기 전에 UE(101a)와 관련된 고유 연락처들일 수 있다. 그러나, 연락처(709a)는 콘텐츠로부터의 가상 캐릭터, 예를 들어 콘텐츠가 게임과 연관되는 경우에 논-플레이어 캐릭터와 관련될 수 있다. 확대도(703a)에 도시된 바와 같이, 다양한 연락처들(707a, 709a, 711a)은 동일하게 포맷팅되며, 그들이 제공하는 정보 외에는 구별되지 않는다. 따라서, 예를 들어, UE(101a)의 사용자가 사용자 인터페이스(710a)에 기초하여 연락처(709a)가 콘텐츠로부터의 가상 캐릭터와 연관되는지를 결정하기 위한 방법이 존재하지 않는다. 연락처(709a)와 연락처들(707a, 711a)의 완전한 통합은 UE(101a)의 사용자를 콘텐츠에 몰입시킨다.
도 7b에 도시된 바와 같이, UE(101a)는 사용자 인터페이스(701b)의 확대도(703b)에 도시된 바와 같이 약속들(707b, 709b, 711b)을 포함하는 캘린더 애플리케이션(111c)의 사용자 인터페이스(701b)와 관련될 수 있다. 전술한 바와 같이, UE(101a)는 또한 다른 디바이스(예로서, 호스트 디바이스(117)) 상에 제공되는 콘텐츠와 연관될 수 있으며, 따라서 콘텐츠로부터의 정보가 UE(101a) 상에 제공될 수 있다. 예를 들어, 약속들(707b, 711b)은 UE(101a)가 콘텐츠와 관련되기 전에 UE(101a)와 관련된 고유 약속들일 수 있다. 그러나, 약속(709a)는 콘텐츠로부터의 가상 약속, 예를 들어 게임 내의 논-플레이어 캐릭터와의 약속과 관련될 수 있다. 확대도(703b)에 도시된 바와 같이, 다양한 약속들(707b, 709b, 711b)은 동일하게 포맷팅되며, 그들이 제공하는 정보 외에는 구별되지 않는다. 따라서, 예를 들어, UE(101a)의 사용자가 사용자 인터페이스(710b)에 기초하여 약속(709b)이 콘텐츠로부터의 가상 캐릭터와 연관되는지를 결정하기 위한 방법이 존재하지 않는다. 약속(709b)와 약속들(707b, 711b)의 완전한 통합은 UE(101a)의 사용자를 콘텐츠에 몰입시킨다.
도 7c에 도시된 바와 같이, UE(101a)는 사용자 인터페이스(701c)의 확대도(703c)에 도시된 바와 같이 메시지들(707c, 709c, 711c)을 포함하는 메시징 애플리케이션(111d)의 사용자 인터페이스(701c)와 관련될 수 있다. 전술한 바와 같이, UE(101a)는 또한 다른 디바이스(예로서, 호스트 디바이스(117)) 상에 제공되는 콘텐츠와 연관될 수 있으며, 따라서 콘텐츠로부터의 정보가 UE(101a) 상에 제공될 수 있다. 예를 들어, 메시지들(707b, 711b)은 UE(101a)가 콘텐츠와 관련되기 전에 UE(101a)와 관련된 고유 메시지들일 수 있다. 그러나, 메시지(709a)는 콘텐츠로부터의 가상 메시지, 예를 들어 게임 내의 논-플레이어 캐릭터로부터의 메시지와 관련될 수 있다. 확대도(703c)에 도시된 바와 같이, 다양한 메시지들(707c, 709c, 711c)은 동일하게 포맷팅되며, 그들이 제공하는 정보 외에는 구별되지 않는다. 따라서, 예를 들어, UE(101a)의 사용자가 사용자 인터페이스(710c)에 기초하여 메시지(709c)가 콘텐츠로부터의 가상 캐릭터와 연관되는지를 결정하기 위한 방법이 존재하지 않는다. 메시지(709b)와 메시지들(707a, 711a)의 완전한 통합은 UE(101a)의 사용자를 콘텐츠에 몰입시킨다.
도 7d에 도시된 바와 같이, UE(101a)는 사용자 인터페이스(701d)의 확대도(703d)에 도시된 바와 같이 Bradley Murphy로부터의 착신 통신을 포함하는 전화 애플리케이션(111e)의 사용자 인터페이스(701d)와 관련될 수 있다. 일 실시예에서, Bradley Murphy는 콘텐츠 내에 포함된 가상 캐릭터에 대응할 수 있다. 그러나, 콘텐츠와 UE(101a) 사이의 트랜잭션은 사용자 인터페이스(701d)가 가상 캐릭터 Bradley Murphy로부터의 가상 통화에 대응하게 한다. 애플리케이션(111e)은 UE(101a)가 가상 캐릭터가 아니라 실제 사람으로부터 통화를 수신하는 경우에 애플리케이션(111e)이 보이는 것과 동일하게 보이므로, UE(101a)의 사용자가 사용자 인터페이스(701d)가 콘텐츠로부터의 가상 캐릭터와 관련되는지를 결정하기 위한 방법이 존재하지 않는다. 사용자 인터페이스(701d)와 UE(101a)의 완전한 통합은 UE(101a)의 사용자를 콘텐츠에 몰입시킨다.
도 7e에 도시된 바와 같이, UE(101a)는 사용자 인터페이스(701e)의 확대도(703e)에 도시된 바와 같이 부재중 통화들(707d, 709d, 711d)을 포함하는 통신 애플리케이션(111f)의 사용자 인터페이스(701e)와 관련될 수 있다. 전술한 바와 같이, UE(101a)는 또한 다른 디바이스(예로서, 호스트 디바이스(117)) 상에 제공되는 콘텐츠와 연관될 수 있으며, 따라서 콘텐츠로부터의 정보가 UE(101a) 상에 제공될 수 있다. 예를 들어, 부재중 통화들(707d, 711d)은 UE(101a)가 콘텐츠와 관련되기 전에 UE(101a)와 관련된 고유 부재중 통화들일 수 있다. 그러나, 부재중 통화(709d)는 콘텐츠로부터의 가상 캐릭터, 예를 들어 게임 내의 논-플레이어 캐릭터로부터의 부재중 통화와 관련될 수 있다. 확대도(703e)에 도시된 바와 같이, 다양한 메시지들(707d, 709d, 711d)은 동일하게 포맷팅되며, 그들이 제공하는 정보 외에는 구별되지 않는다. 따라서, 예를 들어, UE(101a)의 사용자가 사용자 인터페이스(710e)에 기초하여 부재중 통화(709c)가 콘텐츠로부터의 가상 캐릭터와 연관되는지를 결정하기 위한 방법이 존재하지 않는다. 부재중 통화(709b)와 부재중 통화들(707d, 711d)의 완전한 통합은 UE(101a)의 사용자를 콘텐츠에 몰입시킨다.
도 7f에 도시된 바와 같이, UE(101a)는 내비게이션 애플리케이션(111g)과 관련될 수 있는, 확대도(703f)에 도시되는 사용자 인터페이스(701f)와 관련될 수 있다. 내비게이션 애플리케이션(111g)은 UE(101a) 상의 고유 애플리케이션일 수 있지만, 일반적으로 호스트 디바이스로부터 제공되는 콘텐츠와 관련된 정보를 표시할 수 있다. 따라서, 사용자 인터페이스(701f)는 사용자로 하여금 사용자에게 콘텐츠를 제공하는 것과 무관한 UE(101a)를 이용하여 가상 세계를 통해 내비게이션하는 것을 가능하게 할 수 있다.
도 7g에 도시된 바와 같이, 몰입 디바이스(119)의 일례는 마이크로파 오븐(119b)일 수 있다. 마이크로파 오븐(119b)은 콘텐츠의 제공과 관련된 하나 이상의 몰입적 상호작용 이벤트에 기초하여 콘텐츠와 관련된 메시지, 예를 들어 TIME FOR POPCORN!을 제공할 수 있는 사용자 인터페이스(713)를 포함할 수 있다. 일례로서, 그러한 메시지는 호스트 디바이스와 관련된 영화의 재생의 시작에 기초할 수 있다. 또한, 도 7h는 냉장고(119c)와 같은 몰입 디바이스(119)의 다른 예를 나타낸다. 냉장고(119c)는 냉장고(119c)와 인터페이스하는 호스트 디바이스(117)에 의해 제공되는 콘텐츠와 관련된 하나 이상의 몰입적 상호작용 이벤트에 기초하여 콘텐츠 내의 이벤트와 관련된 메시지를 표시할 수 있는 사용자 인터페이스(715)를 포함할 수 있다. 예를 들어, 콘텐츠는 영화 동안 소정 시점에 드링크를 즐길 수 있는 캐릭터를 포함하는 영화일 수 있다. 드링크는 G의 소다 팝(G's Soda Pop)일 수 있다. 캐릭터가 음료를 즐길 때, G의 소다 팝을 식료품 리스트(예로서, 엄마의 쇼핑 리스트)에 추가하기 위한 제어 신호가 냉장고(119c)로 전송될 수 있다. 이 경우에, 제어 신호는 콘텐츠에 포함되는 광고의 형태일 수 있다.
도 7i에 도시된 바와 같이, 세탁기/건조기 조합(119d)과 같은 몰입 디바이스(119)는 콘텐츠가 세탁기/건조기 조합(119d)을 제어하게 하기 위해 콘텐츠 내에 삽입되는 표현을 가질 수 있다. 예를 들어, 콘텐츠는 세탁기/건조기 조합(119d)을 사용하는 방법을 설명하기 위한 교육 비디오를 나타낼 수 있다. 콘텐츠는 세탁기에 대한 세탁 온도를 설정하는 방법을 설명하는 장면을 포함할 수 있다. 장면은 지시자(717)에 의해 지시되는 바와 같이 예를 들어 세탁 온도를 입력하도록 사용자에게 지시하기 위해 세탁기에 제공되는 제어 신호를 포함할 수 있다. 사용자가 세탁 온도를 설정하면, 세탁기는 예를 들어 세탁 온도가 설정된 것을 지시하는 응답에 대응하는, 제어 신호에 대한 응답을 제공할 수 있다. 콘텐츠를 제공하는 호스트 디바이스(117)가 응답을 수신하면, 콘텐츠는 예를 들어 수위를 설정하는 방법을 설명하는 다음 장면으로 진행할 수 있다. 장면은 지시자(719)에 의해 지시되는 바와 같이 예를 들어 세탁과 관련된 수위를 입력하도록 사용자에게 지시하기 위해 세탁기에 제공되는 제어 신호를 포함할 수 있다. 사용자가 수위를 설정하면, 세탁기는 예를 들어 수위가 설정된 것을 지시하는 응답에 대응하는, 수위를 입력하도록 사용자에게 지시하는 제어 신호에 대한 응답을 제공할 수 있다. 호스트 디바이스(117)가 응답을 수신하면, 콘텐츠는 세탁기/건조기 조합(119d)을 사용하는 방법을 사용자에게 훈련시키는 추가 장면들로 진행할 수 있다. 콘텐츠가 세탁기/건조기 조합(119d)과 통신하여 제어 신호들을 제공하고 응답들을 수신하게 함으로써, 사용자는 훈련 비디오에 몰입되며, 세탁기/건조기 조합(119d)을 사용하는 방법에 대한 보다 양호한 이해를 제공받는다.
하나 이상의 몰입적 상호작용 이벤트에 기초하여 일상 디바이스들을 통해 몰입적 상호작용을 제공하기 위한 본 명세서에서 설명되는 프로세스들은 소프트웨어, 하드웨어, 펌웨어 또는 소프트웨어 및/또는 펌웨어 및/또는 하드웨어의 조합을 통해 유리하게 구현될 수 있다. 예를 들어, 본 명세서에서 설명되는 프로세스들은 프로세서(들), 디지털 신호 처리(DSP) 칩, 주문형 집적 회로(ASIC), 필드 프로그래머블 게이트 어레이(FPGA) 등을 통해 유리하게 구현될 수 있다. 설명되는 기능들을 수행하기 위한 그러한 예시적인 하드웨어가 아래에 설명된다.
도 8은 본 발명의 일 실시예를 구현할 수 있는 컴퓨터 시스템(800)을 나타낸다. 컴퓨터 시스템(800)은 특정 디바이스 또는 장비와 관련하여 도시되지만, 도 8 내의 다른 디바이스들 또는 장비(예로서, 네트워크 요소, 서버 등)는 시스템(800)의 도시된 하드웨어 및 컴포넌트들을 배치할 수 있는 것이 고려된다. 컴퓨터 시스템(800)은 본 명세서에서 설명되는 바와 같이 하나 이상의 몰입적 상호작용 이벤트에 기초하여 일상 디바이스들을 통해 몰입적 상호작용을 제공하도록 (예를 들어, 컴퓨터 프로그램 코드 또는 명령어들을 통해) 프로그래밍되며, 컴퓨터 시스템(800)의 다른 내부 및 외부 컴포넌트들 사이에 정보를 전송하기 위한 버스(810)와 같은 통신 메커니즘을 포함한다. (데이터라고도 하는) 정보는 통상적으로 전압들, 그러나 다른 실시예들에서는 자기, 전자기, 압력, 화학, 생체, 분자, 원자, 원자 이하 및 양자 상호작용들과 같은 현상들을 포함하는 측정 가능한 현상의 물리적 표현으로서 표현된다. 예를 들어, 북쪽 및 남쪽 자장들 또는 0 또는 0이 아닌 전압은 이진수(비트)의 2개의 상태(0, 1)를 나타낸다. 다른 현상들은 더 높은 기준의 숫자들을 나타낼 수 있다. 측정 전의 다수의 동시적인 양자 상태들의 중첩은 양자 비트(qubit)를 나타낸다. 하나 이상의 숫자의 시퀀스는 캐릭터에 대한 번호 또는 코드를 나타내는 데 사용되는 디지털 데이터를 구성한다. 일부 실시예들에서, 아날로그 데이터로서 지칭되는 정보는 특정 범위 내의 측정 가능 값들의 근사 연속체에 의해 표현된다. 컴퓨터 시스템(800) 또는 그의 일부는 하나 이상의 몰입적 상호작용 이벤트에 기초하여 일상 디바이스들을 통해 몰입적 상호작용을 제공하는 하나 이상의 단계를 수행하기 위한 수단을 구성한다.
버스(810)는 정보의 하나 이상의 병렬 도체를 포함하며, 따라서 정보는 버스(810)에 결합된 디바이스들 사이에서 빠르게 전송된다. 정보를 처리하기 위한 하나 이상의 프로세서(802)가 버스(810)와 결합된다.
프로세서(또는 다수의 프로세서)(802)는 하나 이상의 몰입적 상호작용 이벤트에 기초하여 일상 디바이스들을 통해 몰입적 상호작용을 제공하는 것과 관련된 컴퓨터 프로그램 코드에 의해 지정되는 바와 같은 한 세트의 연산들을 정보에 대해 수행한다. 컴퓨터 프로그램 코드는 지정된 기능들을 수행하기 위한 프로세서 및/또는 컴퓨터 시스템의 연산을 위한 명령어들을 제공하는 한 세트의 명령어들 또는 명령문들이다. 예를 들어, 코드는 프로세서의 고유 명령어 세트로 컴파일되는 컴퓨터 프로그래밍 언어로 작성될 수 있다. 코드는 또한 고유 명령어 세트(예로서, 기계 언어)를 이용하여 직접 작성될 수 있다. 연산들의 세트는 버스(810)로부터 정보를 가져오고, 정보를 버스(810) 상에 배치하는 것을 포함한다. 연산들의 세트는 통상적으로 둘 이상의 정보 유닛을 비교하고, 정보 유닛들의 위치들을 이동시키고, 예를 들어 가산 또는 승산 또는 OR, 배타적 OR(XOR) 및 AND와 같은 로직 연산들에 의해 둘 이상의 정보 유닛을 결합하는 것도 포함한다. 프로세서에 의해 수행될 수 있는 연산들의 세트의 각각의 연산은 하나 이상의 숫자의 연산 코드와 같은 명령어들로서 지칭되는 정보에 의해 프로세서에 대해 표현된다. 프로세서(802)에 의해 실행될 연산들의 시퀀스, 예를 들어 연산 코드들의 시퀀스는 컴퓨터 시스템 명령어들 또는 간단히 컴퓨터 명령어들이라고도 하는 프로세서 명령어들을 구성한다. 프로세서들은 특히 기계, 전기, 자기, 광학, 화학 또는 양자 컴포넌트들로서 단독으로 또는 조합하여 구현될 수 있다.
컴퓨터 시스템(800)은 버스(810)에 결합되는 메모리(804)도 포함한다. 랜덤 액세스 메모리(RAM) 또는 임의의 다른 동적 저장 디바이스와 같은 메모리(804)는 하나 이상의 몰입적 상호작용 이벤트에 기초하여 일상 디바이스들을 통해 몰입적 상호작용을 제공하기 위한 프로세서 명령어들을 포함하는 정보를 저장한다. 동적 메모리는 그 안에 저장된 정보가 컴퓨터 시스템(800)에 의해 변경되는 것을 가능하게 한다. RAM은 메모리 주소라고 하는 위치에 저장되는 정보의 유닛이 이웃 주소에 있는 정보와 무관하게 저장 및 검색되는 것을 가능하게 한다. 메모리(804)는 프로세서(802)에 의해 프로세서 명령어들의 실행 동안 임시 값들을 저장하는 데에도 사용된다. 컴퓨터 시스템(800)은 컴퓨터 시스템(800)에 의해 변경되지 않는 명령어들을 포함하는 정적 정보를 저장하기 위해 버스(810)에 결합되는 판독 전용 메모리(ROM)(806) 또는 임의의 다른 정적 저장 디바이스도 포함한다. 일부 메모리는 전력이 손실될 때 저장 정보를 잃는 휘발성 저장소로 구성된다. 컴퓨터 시스템(800)이 턴오프되거나 전력을 잃을 때에도 지속되는 명령어들을 포함하는 정보를 저장하기 위한 자기 디스크, 광 디스크 또는 플래시 카드와 같은 비휘발성(지속) 저장 디바이스(808)도 버스(810)에 결합된다.
하나 이상의 몰입적 상호작용 이벤트에 기초하여 일상 디바이스들을 통해 몰입적 상호작용을 제공하기 위한 명령어들을 포함하는 정보가 사람 사용자에 의해 조작되는 영숫자 키들을 포함하는 키보드, 마이크, 적외선(IR) 리모컨, 조이스틱, 게임 패드, 스타일러스 펜, 터치스크린 또는 센서와 같은 외부 입력 디바이스(812)로부터 프로세서에 의한 사용을 위해 버스(810)에 제공된다. 센서는 그의 근처의 조건들을 검출하고, 그러한 검출들을 컴퓨터 시스템(800)에서 정보를 표현하는 데 사용되는 측정 가능 현상에 적합한 물리적 표현으로 변환한다. 주로 사람들과 상호작용하는 데 사용되는, 버스(810)에 결합되는 다른 외부 디바이스들은 디스플레이 디바이스(814), 예를 들어 음극선관(CRT), 액정 디스플레이(LCD), 발광 다이오드(LED) 디스플레이, 유기 LED(OLED) 디스플레이, 플라즈마 스크린, 또는 텍스트 또는 이미지들을 제공하기 위한 프린터, 및 포인팅 디바이스(816), 예를 들어 마우스, 트랙볼, 커서 검출 키들, 또는 디스플레이(814) 상에 제공되는 작은 커서 이미지의 위치를 제어하고, 디스플레이(814) 상에 제공되는 그래픽 요소들과 관련된 명령들을 발행하기 위한 모션 센서를 포함한다. 일부 실시예들에서, 예를 들어, 컴퓨터 시스템(800)이 사람의 입력 없이 자동으로 모든 기능들을 수행하는 실시예들에서는, 외부 입력 디바이스(812), 디스플레이 디바이스(814) 및 포인팅 디바이스(816) 중 하나 이상이 생략된다.
도시된 실시예에서, 주문형 집적 회로(ASIC)(820)와 같은 특수 목적 하드웨어가 버스(810)에 결합된다. 특수 목적 하드웨어는 프로세서(802)에 의해 수행되지 않는 동작들을 특수 목적들을 위해 충분히 빠르게 수행하도록 구성된다. ASIC들의 예는 디스플레이(814)를 위한 이미지들을 생성하기 위한 그래픽 가속기 카드들, 네트워크를 통해 전송된 메시지들을 암호화 및 해독하기 위한 암호 보드들, 음성 인식, 및 하드웨어에서 더 효율적으로 구현되는 동작들의 소정의 복합 시퀀스를 반복 수행하는 로봇 팔들 및 의료 스캐닝 장비와 같은 특수 외부 디바이스들에 대한 인터페이스들을 포함한다.
컴퓨터 시스템(800)은 버스(810)에 결합되는 통신 인터페이스(870)의 하나 이상의 인스턴스도 포함한다. 통신 인터페이스(870)는 자신의 프로세서들을 이용하여 동작하는 다양한 외부 디바이스들, 예를 들어 프린터들, 스캐너들 및 외부 디스크들에 대한 단방향 또는 양방향 통신 결합을 제공한다. 일반적으로, 결합은 자신의 프로세서들을 갖는 다양한 외부 디바이스들에 접속되는 로컬 네트워크(880)에 접속되는 네트워크 링크(878)를 이용한다. 예를 들어, 통신 인터페이스(870)는 개인용 컴퓨터 상의 병렬 포트 또는 직렬 포트 또는 유니버설 직렬 버스(USB) 포트일 수 있다. 일부 실시예들에서, 통신 인터페이스(870)는 통합 서비스 디지털 네트워크(ISDN) 카드 또는 디지털 가입자 회선(DSL) 카드 또는 대응하는 타입의 전화 회선에 대한 정보 통신 접속을 제공하는 전화 모뎀이다. 일부 실시예들에서, 통신 인터페이스(870)는 버스(810) 상의 신호들을 동축 케이블을 통한 통신 접속을 위한 신호들로 또는 광섬유 케이블을 통한 통신 접속을 위한 광 신호들로 변환하는 케이블 모뎀이다. 다른 예로서, 통신 인터페이스(870)는 이더넷과 같은 호환 LAN에 대한 데이터 통신 접속을 제공하기 위한 근거리 네트워크(LAN) 카드일 수 있다. 무선 링크들도 구현될 수 있다. 무선 링크들에 대해, 통신 인터페이스(870)는 디지털 데이터와 같은 정보 스트림들을 운반하는 적외선 및 광 신호들을 포함하는 전기, 음향 또는 전자기 신호들을 송신하거나, 수신하거나, 송신 및 수신한다. 예를 들어, 셀폰들과 같은 이동 전화들과 같은 무선 핸드헬드 디바이스들에서, 통신 인터페이스(870)는 무선 송수신기라고 하는 무선 대역 전자기 송신기 및 수신기를 포함한다. 소정 실시예들에서, 통신 인터페이스(870)는 하나 이상의 몰입적 상호작용 이벤트에 기초하여 UE(101)를 콘텐츠의 제공에 몰입시키기 위한 통신 네트워크(105)에 대한 접속들을 가능하게 한다.
본 명세서에서 사용되는 바와 같은 용어 "컴퓨터 판독 가능 매체"는 실행을 위한 명령어들을 포함하는 정보를 프로세서(802)에 제공하는 것과 관련되는 임의의 매체를 지칭한다. 그러한 매체는 컴퓨터 판독 가능 저장 매체(예로서, 비휘발성 매체, 휘발성 매체) 및 전송 매체를 포함하지만 이에 한정되지 않는 많은 형태를 취할 수 있다. 비휘발성 매체와 같은 비일시적 매체는 예를 들어 저장 디바이스(808)와 같은 광 또는 자기 디스크를 포함한다. 휘발성 매체는 예를 들어 동적 메모리(804)를 포함한다. 전송 매체는 예를 들어 트위스트 쌍 케이블, 동축 케이블, 구리 와이어, 광섬유 케이블, 및 와이어 또는 케이블 없이 공간을 통해 이동하는 반송파, 예를 들어 음파, 및 무선, 광 및 적외선 파동들을 포함하는 전자기파를 포함한다. 신호들은 전송 매체를 통해 전송되는 진폭, 주파수, 위상, 극성 또는 다른 물리적 특성들에 있어서의 사람에 의해 이루어지는 일시적 변화들을 포함한다. 컴퓨터 판독 가능 매체의 일반 형태는 예를 들어 플로피 디스크, 플렉시블 디스크, 하드 디스크, 자기 테이프, 임의의 다른 자기 매체, CD-ROM, CDRW, DVD, 임의의 다른 광학 매체, 펀치 카드, 페이퍼 테이프, 광학 마크 시트, 구멍들의 패턴들 또는 다른 광학적으로 인식 가능한 지시들을 갖는 임의의 다른 물리 매체, RAM, PROM, EPROM, FLASH-EPROM, EEPROM, 플래시 메모리, 임의의 다른 메모리 칩 또는 카트리지, 반송파, 또는 컴퓨터가 판독할 수 있는 임의의 다른 매체를 포함한다. 컴퓨터 판독 가능 저장 매체라는 용어는 본 명세서에서 전송 매체를 제외한 임의의 컴퓨터 판독 가능 매체를 지칭하는 데 사용된다.
하나 이상의 유형 매체 내에 인코딩되는 로직은 컴퓨터 판독 가능 저장 매체 및 ASIC(820)과 같은 특수 목적 하드웨어 상의 프로세서 명령어들 중 하나 또는 양자를 포함한다.
네트워크 링크(878)는 통상적으로 전송 매체를 이용하여 하나 이상의 네트워크를 통해 정보 통신을 정보를 사용하거나 처리하는 다른 디바이스들에 제공한다. 예를 들어, 네트워크 링크(878)는 로컬 네트워크(880)를 통해 호스트 컴퓨터(882)에 대한 또는 인터넷 서비스 제공자(ISP)에 의해 운영되는 장비(884)에 대한 접속을 제공할 수 있다. 또한, ISP 장비(884)는 현재 일반적으로 인터넷(890)으로 지칭되는 네트워크들의 공개 월드-와이드 패킷 교환 통신 네트워크를 통해 데이터 통신 서비스들을 제공한다.
인터넷에 접속되는 서버 호스트(892)라고 하는 컴퓨터는 인터넷을 통해 수신되는 정보에 응답하여 서비스를 제공하는 프로세스를 호스트한다. 예를 들어, 서버 호스트(892)는 디스플레이(814)에서 제공하기 위한 비디오 데이터를 표현하는 정보를 제공하는 프로세스를 호스트한다. 시스템(800)의 컴포넌트들이 다양한 구성들에서 다른 컴퓨터 시스템들, 예로서 호스트(882) 및 서버(892) 내에 배치될 수 있는 것이 고려된다.
본 발명의 적어도 일부 실시예들은 본 명세서에서 설명되는 기술들 중 일부 또는 전부를 구현하기 위한 컴퓨터 시스템(800)의 사용과 관련된다. 본 발명의 일 실시예에 따르면, 그러한 기술들은 프로세서(802)가 메모리(804)에 포함된 하나 이상의 프로세서 명령어의 하나 이상의 시퀀스를 실행하는 것에 응답하여 컴퓨터 시스템(800)에 의해 수행된다. 컴퓨터 명령어들, 소프트웨어 및 프로그램 코드라고도 하는 그러한 명령어들은 저장 디바이스(808) 또는 네트워크 링크(878)와 같은 다른 컴퓨터 판독 가능 매체로부터 메모리(804) 내로 판독될 수 있다. 메모리(804) 내에 포함된 명령어들의 시퀀스들의 실행은 프로세서(802)가 본 명세서에서 설명되는 방법 단계들 중 하나 이상을 수행하게 한다. 대안 실시예들에서, ASIC(820)과 같은 하드웨어는 본 발명을 구현하기 위해 소프트웨어 대신에 또는 소프트웨어와 결합하여 사용될 수 있다. 따라서, 본 발명의 실시예들은 본 명세서에서 달리 명확히 언급되지 않는 한은 하드웨어와 소프트웨어의 임의의 특정 결합으로 한정되지 않는다.
통신 인터페이스(870)를 통해 네트워크 링크(878) 및 다른 네트워크들을 통해 전송되는 신호들은 컴퓨터 시스템(800)으로부터 그리고 컴퓨터 시스템으로 정보를 운반한다. 컴퓨터 시스템(800)은 특히 네트워크들(880, 890)을 통해 네트워크 링크(878) 및 통신 인터페이스(870)를 통해 프로그램 코드를 포함하는 정보를 송신 및 수신할 수 있다. 인터넷(890)을 사용하는 예에서, 서버 호스트(892)는 인터넷(890), ISP 장비(884), 로컬 네트워크(880) 및 통신 인터페이스(870)를 통해 컴퓨터(800)로부터 전송되는 메시지에 의해 요청되는 특정 애플리케이션에 대한 프로그램 코드를 전송한다. 수신되는 코드는 수신되는 대로 프로세서(802)에 의해 실행될 수 있거나, 후속 실행을 위해 메모리(804) 내에 또는 저장 디바이스(808) 또는 임의의 다른 비휘발성 저장소 내에 저장될 수 있거나, 이들 양자일 수 있다. 이러한 방식으로, 컴퓨터 시스템(800)은 반송파 상에서 신호들의 형태로 애플리케이션 프로그램 코드를 획득할 수 있다.
다양한 형태의 컴퓨터 판독 가능 매체가 명령어들 또는 데이터 또는 이들 양자의 하나 이상의 시퀀스를 실행을 위해 프로세서(802)로 운반하는 것과 관련될 수 있다. 예를 들어, 명령어들 또는 데이터는 처음에 호스트(882)와 같은 원격 컴퓨터의 자기 디스크 상에서 운반될 수 있다. 원격 컴퓨터는 명령어들 및 데이터를 그의 동적 메모리 내에 로딩하며, 명령어들 및 데이터를 모뎀을 이용하여 전화 회선을 통해 전송한다. 컴퓨터 시스템(800) 내의 모뎀은 전화 회선 상에서 명령어들 및 데이터를 수신하고, 적외선 송신기를 이용하여, 명령어들 및 데이터를 네트워크 링크(878)로서 사용되는 적외선 반송파 상의 신호로 변환한다. 통신 인터페이스(870)로서 사용되는 적외선 검출기는 적외선 신호 내에서 운반되는 명령어들 및 데이터를 수신하고, 명령어들 및 데이터를 나타내는 정보를 버스(810) 상에 배치한다. 버스(810)는 정보를 메모리(804)로 운반하고, 프로세서(802)는 메모리로부터 이들을 검색하고, 명령어들과 함께 전송된 데이터의 일부를 이용하여 명령어들을 실행한다. 메모리(804)에서 수신된 명령어들 및 데이터는 옵션으로서 프로세서(802)에 의한 실행 전 또는 후에 저장 디바이스(808) 상에 저장될 수 있다.
도 9는 본 발명의 일 실시예를 구현할 수 있는 칩셋 또는 칩(900)을 나타낸다. 칩셋(900)은 본 명세서에서 설명되는 바와 같이 하나 이상의 몰입적 상호작용 이벤트에 기초하여 일상 디바이스들을 통해 몰입적 상호작용을 제공하도록 프로그래밍되며, 예를 들어 하나 이상의 물리 패키지(예로서, 칩) 내에 포함되는 도 8과 관련하여 설명되는 프로세서 및 메모리 컴포넌트들을 포함한다. 예를 들어, 물리 패키지는 물리적 강도, 크기의 유지 및/또는 전기적 상호작용의 제한과 같은 하나 이상의 물리적 특성을 제공하기 위해 구조적 조립체(예로서, 베이스보드) 상의 하나 이상의 재료, 컴포넌트 및/또는 와이어의 배열을 포함한다. 소정 실시예들에서 칩셋(900)은 단일 칩 내에 구현될 수 있는 것이 고려된다. 소정 실시예들에서 칩셋 또는 칩(900)은 단일 "시스템 온 칩"으로서 구현될 수 있는 것도 고려된다. 소정 실시예들에서, 예를 들어 개별 ASIC가 사용되지 않고, 본 명세서에서 개시되는 바와 같은 모든 관련 기능들이 프로세서 또는 프로세서들에 의해 수행되는 것도 고려된다. 칩셋 또는 칩(900) 또는 그 일부는 기능들의 가용성과 관련된 사용자 인터페이스 내비게이션 정보를 제공하는 하나 이상의 단계를 수행하기 위한 수단을 구성한다. 칩셋 또는 칩(900) 또는 그 일부는 하나 이상의 몰입적 상호작용 이벤트에 기초하여 일상 디바이스들을 통해 몰입적 상호작용을 제공하는 하나 이상의 단계를 수행하기 위한 수단을 구성한다.
일 실시예에서, 칩셋 또는 칩(900)은 칩셋(900)의 컴포넌트들 사이에서 정보를 전송하기 위한 버스(901)와 같은 통신 메커니즘을 포함한다. 프로세서(903)는 버스(901)에 접속하여, 명령어들을 실행하고, 예를 들어 메모리(905)에 저장된 정보를 처리한다. 프로세서(903)는 하나 이상의 프로세서 코어를 포함할 수 있으며, 각각의 코어는 독립적으로 동작하도록 구성된다. 다중 코어 프로세서는 단일 물리 패키지 내에서의 다중 처리를 가능하게 한다. 다중 코어 프로세서의 예는 2, 4, 8 또는 더 많은 수의 처리 코어를 포함한다. 대안으로서 또는 추가로, 프로세서(903)는 명령어들, 파이프라이닝 및 멀티스레딩의 독립적인 실행을 가능하게 하기 위해 버스(901)를 통해 직렬로 구성되는 하나 이상의 마이크로프로세서를 포함할 수 있다. 프로세서(903)는 또한 소정의 처리 기능들 및 작업들을 수행하기 위한 하나 이상의 특수 컴포넌트, 예를 들어 하나 이상의 디지털 신호 프로세서(DSP)(907) 또는 하나 이상의 주문형 집적 회로(ASIC)(909)를 동반할 수 있다. DSP(907)는 통상적으로 프로세서(903)와 무관하게 실세계 신호들(예로서, 사운드)을 실시간으로 처리하도록 구성된다. 유사하게, ASIC(909)은 범용 프로세서에 의해 쉽게 수행되지 못하는 특수 기능들을 수행하도록 구성될 수 있다. 본 명세서에서 설명되는 본 발명의 기능들의 수행을 돕기 위한 다른 특수 컴포넌트들은 하나 이상의 필드 프로그래머블 게이트 어레이(FPGA), 하나 이상의 제어기 또는 하나 이상의 다른 특수 목적 컴퓨터 칩을 포함할 수 있다.
일 실시예에서, 칩셋 또는 칩(900)은 단지 하나 이상의 프로세서 및 하나 이상의 프로세서를 지원하고/하거나 그들과 관련되고/되거나 그들을 위한 소정의 소프트웨어 및/또는 펌웨어만을 포함한다.
프로세서(903) 및 관련 컴포넌트들은 버스(901)를 통해 메모리(905)에 접속한다. 메모리(905)는 실행시에 하나 이상의 몰입적 상호작용 이벤트에 기초하여 일상 디바이스들을 통해 몰입적 상호작용을 제공하기 위해 본 명세서에서 설명되는 본 발명의 단계들을 수행하는 실행 가능 명령어들을 저장하기 위한 동적 메모리(예로서, RAM, 자기 디스크, 기록 가능 광 디스크 등) 및 정적 메모리(예로서, ROM, CD-ROM 등) 양자를 포함한다. 메모리(905)는 또한 본 발명의 단계들의 실행과 관련되거나 그에 의해 생성되는 데이터를 저장한다.
도 10은 일 실시예에 따른, 도 1의 시스템에서 동작할 수 있는 통신용 이동 단말기(예로서, 핸드셋)의 예시적인 컴포넌트들의 도면이다. 일부 실시예들에서, 이동 단말기(1001) 또는 그의 일부는 하나 이상의 몰입적 상호작용 이벤트에 기초하여 일상 디바이스들을 통해 몰입적 상호작용을 제공하는 하나 이상의 단계를 수행하기 위한 수단을 구성한다. 일반적으로, 무선 수신기는 종종 프론트엔드 및 백엔드 특성들과 관련하여 정의된다. 수신기의 프론트엔드는 모든 무선 주파수(RF) 회로를 포함하는 반면, 백엔드는 모든 기저대역 처리 회로를 포함한다. 본원에서 사용되는 바와 같이, 용어 "회로"는 (1) (단지 아날로그 및/또는 디지털 회로에서의 구현들과 같은) 하드웨어 전용 구현들, 및 (2) 회로와 소프트웨어(및/또는 펌웨어)의 결합(예를 들어, 특정 상황에 적용 가능한 경우에, 이동 전화 또는 서버와 같은 장치가 다양한 기능들을 수행하게 하기 위해 함께 동작하는 디지털 신호 프로세서(들)를 포함하는 프로세서(들), 소프트웨어 및 메모리(들)의 결합)을 지칭한다. 이러한 "회로"의 정의는 임의의 청구항들을 포함하는 본원에서의 이 용어의 모든 사용들에 적용된다. 추가 예로서, 본원에서 사용되는 바와 같이 그리고 특정 상황에 적용 가능한 경우에, 용어 "회로"는 단지 프로세서(또는 다수의 프로세서) 및 그의(또는 그들의) 관련 소프트웨어 및/또는 펌웨어의 구현도 포함한다. 용어 "회로"는 또한 특정 상황에 적용 가능한 경우에 예를 들어 이동 전화 내의 기저대역 집적 회로 또는 애플리케이션 프로세서 집적 회로, 또는 셀룰러 네트워크 디바이스 또는 다른 네트워크 디바이스들 내의 유사한 집적 회로를 포함한다.
전화의 적절한 내부 컴포넌트들은 메인 제어 유닛(MCU)(1003), 디지털 신호 프로세서(DSP)(1005), 및 마이크 이득 제어 유닛 및 스피커 이득 제어 유닛을 포함하는 수신기/송신기 유닛을 포함한다. 메인 디스플레이 유닛(1007)은 하나 이상의 몰입적 상호작용 이벤트에 기초하여 일상 디바이스들을 통해 몰입적 상호작용을 제공하는 단계들을 수행하거나 지원하는 다양한 애플리케이션들 및 이동 단말기 기능들을 지원하기 위해 사용자에게 디스플레이를 제공한다. 디스플레이(1007)은 이동 단말기(예로서, 이동 전화)의 사용자 인터페이스의 적어도 일부를 표시하도록 구성되는 디스플레이 회로를 포함한다. 게다가, 디스플레이(1007) 및 디스플레이 회로는 이동 단말기의 적어도 일부 기능들의 사용자 제어를 촉진하도록 구성된다. 오디오 기능 회로(1009)는 마이크(1011) 및 마이크(1011)로부터 출력되는 음성 신호를 증폭하는 마이크 증폭기를 포함한다. 마이크(1011)로부터 출력되는 증폭된 음성 신호는 코더/디코더(코덱)(1013)에 제공된다.
무선 섹션(1015)은 전력을 증폭하고, 안테나(1017)를 통해 이동 통신 시스템 내에 포함된 기지국과 통신하기 위해 주파수를 변환한다. 전력 증폭기(PA)(1019) 및 송신기/변조 회로는 MCU(1003)에 동작적으로 응답하며, PA(1019)로부터의 출력은 이 분야에 공지된 바와 같이 듀플렉서(1021) 또는 순환기 또는 안테나 스위치에 결합된다. PA(1019)는 또한 배터리 인터페이스 및 전력 제어 유닛(1020)에 결합된다.
사용 시에, 이동 단말기(1001)의 사용자는 마이크(1011) 안으로 이야기하며, 그의 음성은 임의의 검출된 배경 잡음과 함께 아날로그 전압으로 변환된다. 이어서, 아날로그 전압은 아날로그/디지털 컨버터(ADC)(1023)를 통해 디지털 신호로 변환된다. 제어 유닛(1003)은 디지털 신호를 음성 인코딩, 채널 인코딩, 암호화 및 인터리빙과 같은 그 안에서의 처리를 위해 DSP(1005) 내로 라우팅한다. 일 실시예에서, 처리된 음성 신호들은 별도로 도시되지 않은 유닛들에 의해 셀룰러 전송 프로토콜, 예를 들어 EDGE(enhanced data rates for global evolution), GPRS(general packet radio service), GSM(global system for mobile communications), IMS(Internet protocol multimedia subsystem), UMTS(universal mobile telecommunications system) 등은 물론, 임의의 다른 적절한 무선 매체, 예를 들어 WiMAX(worldwide interoperability for microwave access), LTE(Long Term Evolution) 네트워크들, CDMA(code division multiple access), WCDMA(wideband code division multiple access), WiFi(wireless fidelity), 위성 등 또는 이들의 임의 조합을 이용하여 인코딩된다.
이어서, 인코딩된 신호들은 공기를 통한 전송 동안 발생하는 임의의 주파수 종속 장애들, 예를 들어 위상 및 진폭 왜곡의 보상을 위해 등화기(1025)로 라우팅된다. 비트스트림을 등화한 후, 변조기(1027)는 신호를 RF 인터페이스(1029)에서 생성된 RF 신호와 결합한다. 변조기(1027)는 주파수 또는 위상 변조를 통해 사인파를 생성한다. 전송할 신호를 준비하기 위해, 업-컨버터(1031)는 변조기(1027)로부터 출력된 사인파를 합성기(1033)에 의해 생성된 다른 사인파와 결합하여 원하는 전송 주파수를 달성한다. 이어서, 신호를 PA(1019)로 전송하여, 신호를 적절한 전력 레벨로 증가시킨다. 실제 시스템들에서, PA(1019)는 가변 이득 증폭기로서 작용하며, 이 증폭기의 이득은 네트워크 기지국으로부터 수신된 정보로부터 DSP(1005)에 의해 제어된다. 이어서, 신호는 듀플렉서(1021) 내에서 필터링되며, 옵션으로서 안테나 결합기(1035)로 전송되어 임피던스들을 매칭시켜 최대 전력 전송을 제공한다. 마지막으로, 신호는 안테나(1017)를 통해 로컬 기지국으로 전송된다. 수신기의 최종 스테이지들의 이득을 제어하기 위해 자동 이득 제어(AGC)가 제공될 수 있다. 신호들은 그곳으로부터 다른 셀룰러 전화, 임의의 다른 이동 전화 또는 공중 교환 전화망(PSTN) 또는 다른 전화망들에 접속된 육상 회선일 수 있는 원격 전화로 전송될 수 있다.
이동 단말기(1001)로 전송된 음성 신호들은 안테나(1017)를 통해 수신되며, 저잡음 증폭기(LNA)(1037)에 의해 즉시 증폭된다. 다운-컨버터(1039)가 반송파 주파수를 낮추며, 복조기(1041)는 RF를 제거하여 디지털 비트스트림만을 남긴다. 이어서 신호는 등화기(1025)를 통해 전송되며, DSP(1005)에 의해 처리된다. 디지털-아날로그 컨버터(DAC)(1043)가 신호를 변환하고, 결과적인 출력이 스피커(1045)를 통해 사용자에게 전송되며, 이들 모두는 중앙 처리 유닛(CPU)으로서 구현될 수 있는 메인 제어 유닛(MCU)(1003)의 제어하에 이루어진다.
MCU(1003)는 키보드(1047)로부터 입력 신호들을 포함하는 다양한 신호들을 수신한다. 키보드(1047) 및/또는 MCU(1003)는 다른 사용자 입력 컴포넌트들(예로서, 마이크(1011))과 결합하여 사용자 입력을 관리하기 위한 사용자 인터페이스 회로를 포함한다. MCU(1003)는 사용자 인터페이스 소프트웨어를 실행하여, 이동 단말기(1001)의 적어도 일부 기능들의 사용자 제어를 가능하게 함으로써, 하나 이상의 몰입적 상호작용 이벤트에 기초하여 일상 디바이스들을 통해 몰입적 상호작용을 제공한다. MCU(1003)는 또한 디스플레이 명령 및 스위치 명령을 디스플레이(1007) 및 음성 출력 스위칭 제어기로 각각 전달한다. 또한, MCU(1003)는 DSP(1005)와 정보를 교환하며, 옵션으로 포함된 SIM 카드(1049) 및 메모리(1051)에 액세스할 수 있다. 게다가, MCU(1003)는 단말기에 대해 필요한 다양한 제어 기능들을 실행한다. DSP(1005)는 구현에 따라 음성 신호들에 대해 임의의 다양한 전통적인 디지털 처리 기능들을 수행할 수 있다. 게다가, DSP(1005)는 마이크(1011)에 의해 검출된 신호들로부터 국지적 환경의 배경 잡음 레벨을 결정하고, 이동 단말기(1001)의 사용자의 고유 성향을 보상하도록 선택된 레벨로 마이크(1011)의 이득을 설정한다.
코덱(1013)은 ADC(1023) 및 DAC(1043)를 포함한다. 메모리(1051)는 통화 착신 톤 데이터를 포함하는 다양한 데이터를 저장하며, 예를 들어 글로벌 인터넷을 통해 수신되는 음악 데이터를 포함하는 다른 데이터를 저장할 수 있다. 소프트웨어 모듈은 RAM 메모리, 플래시 메모리, 레지스터들, 또는 이 분야에 공지된 임의의 다른 형태의 기록 가능 저장 매체 내에 존재할 수 있다. 메모리 디바이스(1051)는 단일 메모리, CD, DVD, ROM, RAM, EEPROM, 광학 저장소, 자기 디스크 저장소, 플래시 메모리 저장소, 또는 디지털 데이터를 저장할 수 있는 임의의 다른 비휘발성 저장 매체일 수 있지만, 이에 한정되지 않는다.
선택적으로 포함된 SIM 카드(1049)는 예를 들어 셀룰러 전화 번호, 반송파 제공 서비스, 가입 상세 및 보안 정보와 같은 중요한 정보를 갖는다. SIM 카드(1049)는 주로 무선 네트워크 상에서 이동 단말기(1001)를 식별하는 데 사용된다. 카드(1049)는 또한 개인 전화 번호 레지스트리, 텍스트 메시지 및 사용자 고유 이동 단말기 설정을 저장하기 위한 메모리를 포함한다.
본 발명은 다수의 실시예 및 구현과 관련하여 설명되었지만, 본 발명은 그에 한정되지 않으며, 첨부된 청구항들의 범위 내에 속하는 다양한 명백한 변경들 및 균등한 배열들을 포괄한다. 본 발명의 특징들은 청구항들에서 특정 조합들로 표현되지만, 이러한 특징들은 임의의 조합 및 순서로 배열될 수 있다는 점이 고려된다.

Claims (44)

  1. (1) 데이터 및/또는 (2) 정보 및/또는 (3) 적어도 하나의 신호를 처리하는 및/또는 처리를 가능하게 하는 단계를 포함하는 방법으로서,
    상기 (1) 데이터 및/또는 (2) 정보 및/또는 (3) 적어도 하나의 신호는
    하나 이상의 몰입적 상호작용 이벤트(one or more immersive interaction)를 결정하기 위해, 디바이스에서 제공되는 콘텐츠의 처리와,
    (a) 상기 하나 이상의 몰입적 상호작용 이벤트를 적어도 부분적으로 유발하는, 상기 디바이스, 하나 이상의 다른 디바이스 또는 이들의 조합을 제어하기 위한 하나 이상의 제어 신호, (b) 상기 하나 이상의 제어 신호를 전송하기 위한 하나 이상의 프로토콜, 또는 (c) 이들의 조합 중 적어도 하나의 결정과,
    상기 디바이스, 상기 하나 이상의 다른 디바이스 또는 이들의 조합으로의 상기 하나 이상의 제어 신호의 전송에 적어도 부분적으로 기초하는
    방법.
  2. 제1항에 있어서,
    상기 디바이스, 상기 하나 이상의 다른 디바이스 또는 이들의 조합은 상기 하나 이상의 몰입적 상호작용 이벤트에 기초하여 상기 콘텐츠와 상호작용하도록 특별히 설계되지 않는
    방법.
  3. 제1항 또는 제2항에 있어서,
    상기 (1) 데이터 및/또는 (2) 정보 및/또는 (3) 적어도 하나의 신호는
    상기 디바이스, 상기 하나 이상의 다른 디바이스 또는 이들의 조합의 하나 이상의 능력(capabilities)에 적어도 부분적으로 더 기초하고,
    상기 하나 이상의 몰입적 상호작용 이벤트, 상기 하나 이상의 제어 신호, 상기 하나 이상의 프로토콜 또는 이들의 조합은 상기 하나 이상의 능력에 적어도 부분적으로 기초하는
    방법.
  4. 제1항 내지 제3항 중 어느 한 항에 있어서,
    상기 (1) 데이터 및/또는 (2) 정보 및/또는 (3) 적어도 하나의 신호는
    상기 콘텐츠 내에 표현된 하나 이상의 가상 디바이스와,
    상기 하나 이상의 제어 신호에 적어도 부분적으로 기초하여, 상기 디바이스, 상기 하나 이상의 다른 디바이스 또는 이들의 조합에 의한 상기 콘텐츠 내의 상기 하나 이상의 가상 디바이스와 관련된 하나 이상의 액션, 하나 이상의 기능, 하나 이상의 특성 또는 이들의 조합의 시뮬레이션에 적어도 부분적으로 더 기초하는
    방법.
  5. 제4항에 있어서,
    상기 (1) 데이터 및/또는 (2) 정보 및/또는 (3) 적어도 하나의 신호는
    상기 하나 이상의 가상 디바이스의 상기 하나 이상의 액션, 상기 하나의 기능, 상기 하나 이상의 특성 또는 이들의 조합과, 상기 디바이스, 상기 하나 이상의 다른 디바이스 또는 이들의 조합에서의 상기 하나 이상의 제어 신호의 실행과의 동기화에 적어도 부분적으로 더 기초하는
    방법.
  6. 제1항 내지 제5항 중 어느 한 항에 있어서,
    상기 (1) 데이터 및/또는 (2) 정보 및/또는 (3) 적어도 하나의 신호는
    하나 이상의 지원되는 제어 신호, 하나 이상의 지원되는 프로토콜 또는 이들의 조합에 대한 상기 하나 이상의 다른 디바이스, 상기 디바이스 또는 이들의 조합의 조회(a querying)와,
    상기 하나 이상의 지원되는 제어 신호, 상기 하나 이상의 지원되는 프로토콜 또는 이들의 조합에 적어도 부분적으로 기초하는, 상기 하나 이상의 제어 신호, 상기 하나 이상의 프로토콜 또는 이들의 조합의 적어도 하나의 결정에 적어도 부분적으로 더 기초하는
    방법.
  7. 제1항 내지 제6항 중 어느 한 항에 있어서,
    상기 (1) 데이터 및/또는 (2) 정보 및/또는 (3) 적어도 하나의 신호는
    상기 디바이스, 상기 하나 이상의 다른 디바이스 또는 이들의 조합 내로의 상기 콘텐츠의 하나 이상의 표현의 삽입과,
    상기 콘텐츠의 상기 하나 이상의 표현과 상기 디바이스, 상기 하나 이상의 다른 디바이스 또는 이들의 조합 사이의 하나 이상의 상호작용과,
    상기 하나 이상의 몰입적 상호작용 이벤트를 결정하기 위한, 상기 하나 이상의 상호작용의 처리에 적어도 부분적으로 더 기초하는
    방법.
  8. 제7항에 있어서,
    상기 (1) 데이터 및/또는 (2) 정보 및/또는 (3) 적어도 하나의 신호는
    상기 하나 이상의 몰입적 상호작용 이벤트에 적어도 부분적으로 기초하는 상기 디바이스, 상기 하나 이상의 다른 디바이스 또는 이들의 조합과 관련된 하나 이상의 사용자 인터페이스에서의 상기 콘텐츠와 관련된 가상 정보와, 상기 디바이스, 상기 하나 이상의 다른 디바이스 또는 이들의 조합과 관련된 고유 정보(native information)의 결합에 적어도 부분적으로 더 기초하는
    방법.
  9. 제8항에 있어서,
    상기 하나 이상의 사용자 인터페이스는 상기 디바이스, 상기 하나 이상의 다른 디바이스 또는 이들의 조합의 사용자 인터페이스인
    방법.
  10. 제8항 또는 제9항에 있어서,
    상기 가상 정보는 상기 디바이스, 상기 하나 이상의 다른 디바이스 또는 이들의 조합과 관련된 상기 고유 정보, 상기 고유 정보의 포맷 또는 이들의 조합과 부합되는
    방법.
  11. 제7항 내지 제10항 중 어느 한 항에 있어서,
    상기 (1) 데이터 및/또는 (2) 정보 및/또는 (3) 적어도 하나의 신호는
    상기 하나 이상의 상호작용, 상기 하나 이상의 몰입적 상호작용 이벤트 또는 이들의 조합에 적어도 부분적으로 기초하는 상기 콘텐츠의 변경, 상기 콘텐츠와의 상호작용 또는 이들의 조합에 적어도 부분적으로 더 기초하는
    방법.
  12. 제7항 내지 제11항 중 어느 한 항에 있어서,
    상기 하나 이상의 상호작용은 (a) 상기 디바이스, 상기 하나 이상의 다른 디바이스 또는 이들의 조합과 (b) 상기 콘텐츠 사이의 하나 이상의 가상 통신, 상기 디바이스, 상기 하나 이상의 다른 디바이스 또는 이들의 조합 상의 가상 환경을 통한 내비게이션(a navigation), (a) 상기 디바이스, 상기 하나 이상의 다른 디바이스 또는 이들의 조합과 관련된 하나 이상의 가상 캐릭터와 (b) 상기 콘텐츠 사이의 연관성(an association), 또는 이들의 조합과 관련되는
    방법.
  13. 장치로서,
    적어도 하나의 프로세서와,
    하나 이상의 컴퓨터 프로그램에 대한 컴퓨터 프로그램 코드를 포함하는 적어도 하나의 메모리를 포함하되,
    상기 적어도 하나의 메모리 및 상기 컴퓨터 프로그램 코드는 상기 적어도 하나의 프로세서를 이용하여, 상기 장치로 하여금 적어도
    하나 이상의 몰입적 상호작용 이벤트를 결정하도록, 디바이스에서 제공되는 콘텐츠를 처리하고/하거나 처리를 가능하게 하고,
    (a) 상기 하나 이상의 몰입적 상호작용 이벤트를 적어도 부분적으로 유발하도록 상기 디바이스, 하나 이상의 다른 디바이스 또는 이들의 조합을 제어하기 위한 하나 이상의 제어 신호, (b) 상기 하나 이상의 제어 신호를 전송하기 위한 하나 이상의 프로토콜, 또는 (c) 이들의 조합을 결정하게 하고,
    상기 디바이스, 상기 하나 이상의 다른 디바이스 또는 이들의 조합으로의 상기 하나 이상의 제어 신호의 전송을 적어도 부분적으로 유발하게 하는
    장치.
  14. 제13항에 있어서,
    상기 디바이스, 상기 하나 이상의 다른 디바이스 또는 이들의 조합은 상기 하나 이상의 몰입적 상호작용 이벤트에 기초하여 상기 콘텐츠와 상호작용하도록 특별히 설계되지 않는
    장치.
  15. 제14항 또는 제15항에 있어서,
    상기 장치는 또한,
    상기 디바이스, 상기 하나 이상의 다른 디바이스 또는 이들의 조합의 하나 이상의 능력을 결정하게 되되,
    상기 하나 이상의 몰입적 상호작용 이벤트, 상기 하나 이상의 제어 신호, 상기 하나 이상의 프로토콜 또는 이들의 조합은 상기 하나 이상의 능력에 적어도 부분적으로 기초하는
    장치.
  16. 제13항 내지 제15항 중 어느 한 항에 있어서,
    상기 장치는 또한,
    상기 콘텐츠 내에 표현된 하나 이상의 가상 디바이스를 결정하게 되고,
    상기 하나 이상의 제어 신호에 적어도 부분적으로 기초하여 상기 디바이스, 상기 하나 이상의 다른 디바이스 또는 이들의 조합에 의한 상기 하나 이상의 가상 디바이스와 연관된 하나 이상의 액션, 하나 이상의 기능, 하나 이상의 특성 또는 이들의 조합의 시뮬레이션을 적어도 부분적으로 유발하게 되는
    장치.
  17. 제16항에 있어서,
    상기 장치는 또한,
    상기 하나 이상의 가상 디바이스의 상기 하나 이상의 액션, 상기 하나의 기능, 상기 하나 이상의 특성 또는 이들의 조합과, 상기 디바이스, 상기 하나 이상의 다른 디바이스 또는 이들의 조합에서의 상기 하나 이상의 제어 신호의 실행의 동기화를 적어도 부분적으로 유발하게 되는
    장치.
  18. 제13항 내지 제17항 중 어느 한 항에 있어서,
    상기 장치는 또한,
    하나 이상의 지원되는 제어 신호, 하나 이상의 지원되는 프로토콜 또는 이들의 조합에 대한 상기 하나 이상의 디바이스, 상기 디바이스 또는 이들의 조합의 조회를 적어도 부분적으로 유발하게 되고,
    상기 하나 이상의 지원되는 제어 신호, 상기 하나 이상의 지원되는 프로토콜 또는 이들의 조합에 적어도 부분적으로 기초하여 상기 하나 이상의 제어 신호, 상기 하나 이상의 프로토콜 또는 이들의 조합을 결정하게 되는
    장치.
  19. 제13항 내지 제18항 중 어느 한 항에 있어서,
    상기 장치는 또한,
    상기 디바이스, 상기 하나 이상의 다른 디바이스 또는 이들의 조합에 상기 콘텐츠의 하나 이상의 표현의 삽입을 적어도 부분적으로 유발하게 되고,
    상기 콘텐츠의 상기 하나 이상의 표현과 상기 디바이스, 상기 하나 이상의 다른 디바이스 또는 이들의 조합 사이의 하나 이상의 상호작용을 결정하게 되고,
    상기 하나 이상의 몰입적 상호작용 이벤트를 결정하기 위해 상기 하나 이상의 상호작용을 처리하게 되고/되거나 처리를 가능하게 하는
    장치.
  20. 제19항에 있어서,
    상기 장치는 또한,
    상기 하나 이상의 몰입적 상호작용 이벤트에 적어도 부분적으로 기초하여, 상기 디바이스, 상기 하나 이상의 다른 디바이스 또는 이들의 조합과 관련된 하나 이상의 사용자 인터페이스에서, 상기 콘텐츠와 연관된 가상 정보와, 상기 디바이스, 상기 하나 이상의 다른 디바이스 또는 이들의 조합과 연관된 고유 정보의 결합을 적어도 부분적으로 유발하게 되는
    장치.
  21. 제20항에 있어서,
    상기 하나 이상의 사용자 인터페이스는 상기 디바이스, 상기 하나 이상의 다른 디바이스 또는 이들의 조합의 사용자 인터페이스인
    장치.
  22. 제20항 또는 제21항에 있어서,
    상기 가상 정보는 상기 디바이스, 상기 하나 이상의 다른 디바이스 또는 이들의 조합과 연관된 상기 고유 정보, 상기 고유 정보의 포맷 또는 이들의 조합과 부합되는
    장치.
  23. 제19항 내지 제22항 중 어느 한 항에 있어서,
    상기 장치는 또한,
    상기 하나 이상의 상호작용, 상기 하나 이상의 몰입적 상호작용 이벤트 또는 이들의 조합에 적어도 부분적으로 기초하여 상기 콘텐츠의 변경, 상기 콘텐츠와의 상호작용 또는 이들의 조합을 적어도 부분적으로 유발하게 되는
    장치.
  24. 제19항 내지 제23항 중 어느 한 항에 있어서,
    상기 하나 이상의 상호작용은 (a) 상기 디바이스, 상기 하나 이상의 다른 디바이스 또는 이들의 조합과 (b) 상기 콘텐츠 사이의 하나 이상의 가상 통신, 상기 디바이스, 상기 하나 이상의 다른 디바이스 또는 이들의 조합 상의 가상 환경을 통한 내비게이션, (a) 상기 디바이스, 상기 하나 이상의 다른 디바이스 또는 이들의 조합과 관련된 하나 이상의 가상 캐릭터와 (b) 상기 콘텐츠 사이의 연관성, 또는 이들의 조합과 연관되는
    장치.
  25. 하나 이상의 몰입적 상호작용 이벤트를 결정하도록, 디바이스에서 제공되는 콘텐츠를 처리하고/하거나 처리를 가능하게 하는 단계와,
    (a) 상기 하나 이상의 몰입적 상호작용 이벤트를 적어도 부분적으로 유발하도록 상기 디바이스, 하나 이상의 다른 디바이스 또는 이들의 조합을 제어하기 위한 하나 이상의 제어 신호, (b) 상기 하나 이상의 제어 신호를 전송하기 위한 하나 이상의 프로토콜, 또는 (c) 이들의 조합을 결정하는 단계와,
    상기 디바이스, 상기 하나 이상의 다른 디바이스 또는 이들의 조합으로의 상기 하나 이상의 제어 신호의 전송을 적어도 부분적으로 유발하는 단계를 포함하는
    방법.
  26. 제25항에 있어서,
    상기 디바이스, 상기 하나 이상의 다른 디바이스 또는 이들의 조합은 상기 하나 이상의 몰입적 상호작용 이벤트에 기초하여 상기 콘텐츠와 상호작용하도록 특별히 설계되지 않는
    방법.
  27. 제25항 또는 제26항에 있어서,
    상기 디바이스, 상기 하나 이상의 다른 디바이스 또는 이들의 조합의 하나 이상의 능력을 결정하는 단계를 더 포함하되,
    상기 하나 이상의 몰입적 상호작용 이벤트, 상기 하나 이상의 제어 신호, 상기 하나 이상의 프로토콜 또는 이들의 조합은 상기 하나 이상의 능력에 적어도 부분적으로 기초하는
    방법.
  28. 제25항 내지 제27항 중 어느 한 항에 있어서,
    상기 콘텐츠 내에 표현된 하나 이상의 가상 디바이스를 결정하는 단계와,
    상기 하나 이상의 제어 신호에 적어도 부분적으로 기초하여 상기 디바이스, 상기 하나 이상의 다른 디바이스 또는 이들의 조합에서 상기 하나 이상의 가상 디바이스와 연관된 하나 이상의 액션, 하나 이상의 기능, 하나 이상의 특성 또는 이들의 조합의 시뮬레이션을 적어도 부분적으로 유발하는 단계를 더 포함하는
    방법.
  29. 제28항에 있어서,
    상기 하나 이상의 가상 디바이스의 상기 하나 이상의 액션, 상기 하나의 기능, 상기 하나 이상의 특성 또는 이들의 조합과, 상기 디바이스, 상기 하나 이상의 다른 디바이스 또는 이들의 조합에서의 상기 하나 이상의 제어 신호의 실행의 동기화를 적어도 부분적으로 유발하는 단계를 더 포함하는
    방법.
  30. 제25항 내지 제29항 중 어느 한 항에 있어서,
    하나 이상의 지원되는 제어 신호, 하나 이상의 지원되는 프로토콜 또는 이들의 조합에 대한 상기 하나 이상의 디바이스, 상기 디바이스 또는 이들의 조합의 조회를 적어도 부분적으로 유발하는 단계와,
    상기 하나 이상의 지원되는 제어 신호, 상기 하나 이상의 지원되는 프로토콜 또는 이들의 조합에 적어도 부분적으로 기초하여 상기 하나 이상의 제어 신호, 상기 하나 이상의 프로토콜 또는 이들의 조합을 결정하는 단계를 더 포함하는
    방법.
  31. 제25항 내지 제30항 중 어느 한 항에 있어서,
    상기 디바이스, 상기 하나 이상의 다른 디바이스 또는 이들의 조합에 상기 콘텐츠의 하나 이상의 표현의 삽입을 적어도 부분적으로 유발하는 단계와,
    상기 콘텐츠의 상기 하나 이상의 표현과 상기 디바이스, 상기 하나 이상의 다른 디바이스 또는 이들의 조합 사이의 하나 이상의 상호작용을 결정하는 단계와,
    상기 하나 이상의 몰입적 상호작용 이벤트를 결정하기 위해 상기 하나 이상의 상호작용을 처리하고/하거나 처리를 가능하게 하는 단계를 더 포함하는
    방법.
  32. 제30항에 있어서,
    상기 하나 이상의 몰입적 상호작용 이벤트에 적어도 부분적으로 기초하여 상기 디바이스, 상기 하나 이상의 다른 디바이스 또는 이들의 조합과 관련된 하나 이상의 사용자 인터페이스에서 상기 콘텐츠와 관련된 가상 정보와, 상기 디바이스, 상기 하나 이상의 다른 디바이스 또는 이들의 조합과 관련된 고유 정보의 결합을 적어도 부분적으로 유발하는 단계를 더 포함하는
    방법.
  33. 제32항에 있어서,
    상기 하나 이상의 사용자 인터페이스는 상기 디바이스, 상기 하나 이상의 다른 디바이스 또는 이들의 조합의 사용자 인터페이스인
    방법.
  34. 제32항 또는 제33항에 있어서,
    상기 가상 정보는 상기 디바이스, 상기 하나 이상의 다른 디바이스 또는 이들의 조합과 관련된 상기 고유 정보, 상기 고유 정보의 포맷 또는 이들의 조합과 부합되는
    방법.
  35. 제31항 내지 제34항 중 어느 한 항에 있어서,
    상기 하나 이상의 상호작용, 상기 하나 이상의 몰입적 상호작용 이벤트 또는 이들의 조합에 적어도 부분적으로 기초하여 상기 콘텐츠의 변경, 상기 콘텐츠와의 상호작용 또는 이들의 조합을 적어도 부분적으로 유발하는 단계를 더 포함하는
    방법.
  36. 제31항 내지 제35항 중 어느 한 항에 있어서,
    상기 하나 이상의 상호작용은 (a) 상기 디바이스, 상기 하나 이상의 다른 디바이스 또는 이들의 조합과 (b) 상기 콘텐츠 사이의 하나 이상의 가상 통신, 상기 디바이스, 상기 하나 이상의 다른 디바이스 또는 이들의 조합 상의 가상 환경을 통한 내비게이션, (a) 상기 디바이스, 상기 하나 이상의 다른 디바이스 또는 이들의 조합과 관련된 하나 이상의 가상 캐릭터와 (b) 상기 콘텐츠 사이의 연관성, 또는 이들의 조합과 관련되는
    방법.
  37. 제13항 내지 제24항 중 어느 한 항에 있어서,
    상기 장치는 이동 전화이고,
    상기 장치는
    디스플레이의 사용을 통해 상기 이동 전화의 적어도 일부 기능들의 사용자 제어를 가능하게 하도록 구성되고, 사용자 입력에 응답하도록 구성되는 사용자 인터페이스 회로 및 사용자 인터페이스 소프트웨어와,
    상기 이동 전화의 사용자 인터페이스의 적어도 일부를 디스플레이하도록 구성되는 디스플레이 및 디스플레이 회로 - 상기 디스플레이 및 디스플레이 회로는 상기 이동 전화의 적어도 일부 기능들의 사용자 제어를 가능하게 하도록 구성됨 - 를 더 포함하는
    장치.
  38. 제25항 내지 제36항 중 어느 한 항의 방법을 수행하기 위한 수단을 포함하는
    장치.
  39. 제38항에 있어서,
    상기 장치는 이동 전화이고,
    상기 장치는
    디스플레이의 사용을 통해 상기 이동 전화의 적어도 일부 기능들의 사용자 제어를 가능하게 하도록 구성되고, 사용자 입력에 응답하도록 구성되는 사용자 인터페이스 회로 및 사용자 인터페이스 소프트웨어와,
    상기 이동 전화의 사용자 인터페이스의 적어도 일부를 디스플레이하도록 구성되는 디스플레이 및 디스플레이 회로 - 상기 디스플레이 및 디스플레이 회로는 상기 이동 전화의 적어도 일부 기능들의 사용자 제어를 가능하게 하도록 구성됨 - 를 더 포함하는
    장치.
  40. 하나 이상의 프로세서에 의해 실행될 때, 장치로 하여금 적어도 제25항 내지 제36항 중 어느 한 항의 방법을 수행하게 하는 하나 이상의 명령어의 하나 이상의 시퀀스를 갖는
    컴퓨터 판독 가능 저장 매체.
  41. 하나 이상의 프로세서에 의해 실행될 때, 장치로 하여금 적어도 제25항 내지 제36항 중 어느 한 항의 방법의 단계를 수행하게 하는 하나 이상의 명령어의 하나 이상의 시퀀스를 포함하는
    컴퓨터 프로그램 제품.
  42. 적어도 하나의 서비스에 대한 액세스를 허가하도록 구성되는 적어도 하나의 인터페이스에 대한 액세스를 가능하게 하는 방법으로서,
    상기 적어도 하나의 서비스는 제25항 내지 제36항 중 어느 한 항의 방법을 수행하도록 구성되는
    방법.
  43. (1) 데이터 및/또는 (2) 정보 및/또는 (3) 적어도 하나의 신호를 처리 및/또는 처리를 가능하게 하는 단계를 포함하는 방법으로서,
    상기 (1) 데이터 및/또는 (2) 정보 및/또는 (3) 적어도 하나의 신호는 제25항 내지 제36항 중 어느 한 항의 방법에 적어도 부분적으로 기초하는
    방법.
  44. (1) 적어도 하나의 디바이스 사용자 인터페이스 요소 및/또는 (2) 적어도 하나의 디바이스 사용자 인터페이스 기능을 생성하는 것을 가능하게 하고/하거나 변경하는 것을 가능하게 하는 단계를 포함하는 방법으로서,
    상기 (1) 적어도 하나의 디바이스 사용자 인터페이스 요소 및/또는 (2) 적어도 하나의 디바이스 사용자 인터페이스 기능은 제25항 내지 제36항 중 어느 한 항의 방법에 적어도 부분적으로 기초하는
    방법.
KR1020147034213A 2012-05-08 2012-05-08 일상 디바이스들을 통해 몰입적 상호작용을 제공하기 위한 방법 및 장치 KR101850179B1 (ko)

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
PCT/CN2012/075168 WO2013166649A1 (en) 2012-05-08 2012-05-08 Method and apparatus for providing immersive interaction via everyday devices

Publications (2)

Publication Number Publication Date
KR20150009986A true KR20150009986A (ko) 2015-01-27
KR101850179B1 KR101850179B1 (ko) 2018-04-18

Family

ID=49550056

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020147034213A KR101850179B1 (ko) 2012-05-08 2012-05-08 일상 디바이스들을 통해 몰입적 상호작용을 제공하기 위한 방법 및 장치

Country Status (6)

Country Link
US (1) US9635159B2 (ko)
EP (1) EP2847961B1 (ko)
JP (1) JP6124998B2 (ko)
KR (1) KR101850179B1 (ko)
CN (1) CN104412557B (ko)
WO (1) WO2013166649A1 (ko)

Families Citing this family (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP6587918B2 (ja) * 2015-11-27 2019-10-09 京セラ株式会社 電子機器、電子機器の制御方法、電子機器の制御装置、制御プログラム及び電子機器システム
US10798442B2 (en) * 2017-02-15 2020-10-06 The Directv Group, Inc. Coordination of connected home devices to provide immersive entertainment experiences
US20200108320A1 (en) * 2017-06-08 2020-04-09 Sony Corporation Information processor, information processing method, and program
CN109298776B (zh) * 2017-07-25 2021-02-19 阿里巴巴（中国）有限公司 增强现实互动系统、方法和装置
US10813169B2 (en) 2018-03-22 2020-10-20 GoTenna, Inc. Mesh network deployment kit
KR102663888B1 (ko) 2018-09-18 2024-05-08 삼성전자주식회사 냉장고 및 그의 제어방법
US11353259B2 (en) 2018-09-18 2022-06-07 Samsung Electronics Co., Ltd. Augmented-reality refrigerator and method of controlling thereof

Family Cites Families (37)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US3059519A (en) 1956-09-05 1962-10-23 Austin N Stanton Headgear mounted cathode ray tube and binocular viewing device
US4542291A (en) 1982-09-29 1985-09-17 Vpl Research Inc. Optical flex sensor
US5440326A (en) 1990-03-21 1995-08-08 Gyration, Inc. Gyroscopic pointer
US5670988A (en) 1995-09-05 1997-09-23 Interlink Electronics, Inc. Trigger operated electronic device
EP0864145A4 (en) 1995-11-30 1998-12-16 Virtual Technologies Inc TACTILE FEEDBACK FOR HUMAN / MACHINE INTERFACE
US6181343B1 (en) 1997-12-23 2001-01-30 Philips Electronics North America Corp. System and method for permitting three-dimensional navigation through a virtual reality environment using camera-based gesture inputs
US6280327B1 (en) 1998-06-05 2001-08-28 Arista Interactive Llc Wireless game control units
US6878066B2 (en) 1998-02-13 2005-04-12 Freedom Wave Llc Wireless game control units
US7831930B2 (en) * 2001-11-20 2010-11-09 Universal Electronics Inc. System and method for displaying a user interface for a remote control application
US6215498B1 (en) 1998-09-10 2001-04-10 Lionhearth Technologies, Inc. Virtual command post
JP3548065B2 (ja) * 1999-11-15 2004-07-28 インターナショナル・ビジネス・マシーンズ・コーポレーション リモートコントロールシステム、サーバ・クライアントシステム、製品端末機器の制御用サーバ、製品端末機器操作方法、機器情報共有方法、および記憶媒体
JP2002063505A (ja) * 2000-08-16 2002-02-28 Nippon Telegr & Teleph Corp <Ntt> 情報配信方法、情報配信センタ装置、情報配信端末装置及びキャラクタ人形
US7925703B2 (en) 2000-12-26 2011-04-12 Numedeon, Inc. Graphical interactive interface for immersive online communities
JP2004127226A (ja) * 2002-10-03 2004-04-22 Teglet Gijutsu Kaihatsu:Kk メールを利用したテレビドラマの裏話配信方法とドラマの展開手法
JP2004135051A (ja) * 2002-10-10 2004-04-30 Sony Corp 情報処理システム、サービス提供装置および方法、情報処理装置および方法、記録媒体、並びにプログラム
US7672543B2 (en) 2005-08-23 2010-03-02 Ricoh Co., Ltd. Triggering applications based on a captured text in a mixed media environment
JP2006201912A (ja) * 2005-01-19 2006-08-03 Nippon Telegr & Teleph Corp <Ntt> ３次元仮想オブジェクト情報提供サービス処理方法と３次元仮想オブジェクト提供システムおよびプログラム
US20070184899A1 (en) * 2006-02-03 2007-08-09 Nokia Corporation Gaming device, method, and computer program product for modifying input to a native application to present modified output
US20090010620A1 (en) 2006-03-01 2009-01-08 L.A.B. Inc. Video-Linked Controller of External Target Device and Video Recording Medium Used Teherin
US9088425B2 (en) * 2006-05-04 2015-07-21 Verizon Patent And Licensing Inc. Method and apparatus for collaboration among individuals
KR100836882B1 (ko) 2007-04-04 2008-06-11 에스케이 텔레콤주식회사 가상 세계 캐릭터와의 화상 통화 서비스 시스템 및 방법
US20090210483A1 (en) 2008-02-15 2009-08-20 Sony Ericsson Mobile Communications Ab Systems Methods and Computer Program Products for Remotely Controlling Actions of a Virtual World Identity
KR20090093366A (ko) 2008-02-29 2009-09-02 주식회사 엔씨소프트 온라인 게임에 있어서의 통화 서비스 시스템 및이동통신단말기에서의 통화 시도 처리 방법
US20100030578A1 (en) * 2008-03-21 2010-02-04 Siddique M A Sami System and method for collaborative shopping, business and entertainment
US20100005480A1 (en) 2008-07-07 2010-01-07 International Business Machines Corporation Method for virtual world event notification
US20100008265A1 (en) 2008-07-14 2010-01-14 Carl Johan Freer Augmented reality method and system using logo recognition, wireless application protocol browsing and voice over internet protocol technology
JP2010050630A (ja) * 2008-08-20 2010-03-04 Asahi Satellite Broadcasting Ltd 放送番組演出システム及び放送番組演出方法
US20100199228A1 (en) 2009-01-30 2010-08-05 Microsoft Corporation Gesture Keyboarding
US8732592B2 (en) * 2009-06-08 2014-05-20 Battelle Energy Alliance, Llc Methods and systems relating to an augmented virtuality environment
US8947253B2 (en) * 2009-07-15 2015-02-03 Bayerische Motoren Werke Aktiengesellschaft Immersive vehicle multimedia system
US9059859B2 (en) * 2009-09-03 2015-06-16 Samsung Electronics Co., Ltd Methods and apparatus for remote control service in a network
US8907981B2 (en) * 2009-11-05 2014-12-09 International Business Machines Corporation Method and system for dynamic composing and creating 3D virtual devices
KR20110118421A (ko) 2010-04-23 2011-10-31 엘지전자 주식회사 증강 원격제어장치, 증강 원격제어장치 제어방법 및 그 시스템
US20110221962A1 (en) * 2010-03-10 2011-09-15 Microsoft Corporation Augmented reality via a secondary channel
US9417691B2 (en) * 2010-03-26 2016-08-16 Nokia Technologies Oy Method and apparatus for ad-hoc peer-to-peer augmented reality environment
CN101834856B (zh) * 2010-04-19 2012-11-07 浙江大学 高沉浸感虚拟旅游漫游交互方法及系统
KR101444407B1 (ko) * 2010-11-02 2014-09-29 한국전자통신연구원 근거리 무선 통신을 이용한 증강현실 기반의 기기 제어 장치 및 그 방법

Also Published As

Publication number Publication date
CN104412557B (zh) 2017-06-20
CN104412557A (zh) 2015-03-11
EP2847961A1 (en) 2015-03-18
WO2013166649A1 (en) 2013-11-14
KR101850179B1 (ko) 2018-04-18
US9635159B2 (en) 2017-04-25
JP2015520447A (ja) 2015-07-16
EP2847961B1 (en) 2021-10-06
US20150111547A1 (en) 2015-04-23
JP6124998B2 (ja) 2017-05-10
EP2847961A4 (en) 2016-01-06

Similar Documents

Publication Publication Date Title
KR101850179B1 (ko) 일상 디바이스들을 통해 몰입적 상호작용을 제공하기 위한 방법 및 장치
US10963147B2 (en) Media-aware interface
KR102040754B1 (ko) 추천 콘텐츠에 기초한 상호작용 방법, 단말기 및 서버
JP5281063B2 (ja) ブラウザベースのゲームを代替コントローラおよびインタフェースでプレイする方法
US8463182B2 (en) Wireless device pairing and grouping methods
US20130154958A1 (en) Content system with secondary touch controller
US20120252576A1 (en) Method and system for remote game display
US11331586B2 (en) Joining or replaying a game instance from a game broadcast
WO2014066257A2 (en) Hybrid advertising supported and user-owned content presentation
TW201423451A (zh) 用以處理統一資源定位器（ｕｒｌ）以引動功能性的方法
KR20150084113A (ko) 실감형 멀티미디어 컨텐츠 재생 방법 및 장치
US11845012B2 (en) Selection of video widgets based on computer simulation metadata
US20220254082A1 (en) Method of character animation based on extraction of triggers from an av stream
KR102271323B1 (ko) 방송 효과 제공 장치 및 방법
US20210402297A1 (en) Modifying computer simulation video template based on feedback
WO2020143796A1 (zh) 一种视频播放控制方法、装置、设备和存储介质
US20210402309A1 (en) Generating video clip of computer simulation from multiple views
CN112402943B (en) Joining or replaying game instances from game broadcasts
US11554324B2 (en) Selection of video template based on computer simulation metadata
US20220101749A1 (en) Methods and systems for frictionless new device feature on-boarding
US20210121784A1 (en) Like button

Legal Events

Date Code Title Description
A201 Request for examination
N231 Notification of change of applicant
E902 Notification of reason for refusal
GRNT Written decision to grant