KR101601280B1 - 일반 물체를 이용한 멀티미디어 컨텐츠 관리 방법 - Google Patents

일반 물체를 이용한 멀티미디어 컨텐츠 관리 방법 Download PDF

Info

Publication number
KR101601280B1
KR101601280B1 KR1020090114543A KR20090114543A KR101601280B1 KR 101601280 B1 KR101601280 B1 KR 101601280B1 KR 1020090114543 A KR1020090114543 A KR 1020090114543A KR 20090114543 A KR20090114543 A KR 20090114543A KR 101601280 B1 KR101601280 B1 KR 101601280B1
Authority
KR
South Korea
Prior art keywords
content
delete delete
image
mapping
identification information
Prior art date
Application number
KR1020090114543A
Other languages
English (en)
Other versions
KR20110057919A (ko
Inventor
정재훈
함성훈
백우현
김주민
Original Assignee
엘지전자 주식회사
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 엘지전자 주식회사 filed Critical 엘지전자 주식회사
Priority to KR1020090114543A priority Critical patent/KR101601280B1/ko
Priority to PCT/KR2010/007739 priority patent/WO2011065680A2/en
Priority to US13/511,949 priority patent/US20120314043A1/en
Publication of KR20110057919A publication Critical patent/KR20110057919A/ko
Application granted granted Critical
Publication of KR101601280B1 publication Critical patent/KR101601280B1/ko

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/80—Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
    • H04N21/81—Monomedia components thereof
    • H04N21/8166—Monomedia components thereof involving executable data, e.g. software
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00—Details of television systems
    • H04N5/44—Receiver circuitry for the reception of television signals according to analogue transmission standards
    • H04N5/445—Receiver circuitry for the reception of television signals according to analogue transmission standards for displaying additional information
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/41—Structure of client; Structure of client peripherals
    • H04N21/422—Input-only peripherals, i.e. input devices connected to specially adapted client devices, e.g. global positioning system [GPS]
    • H04N21/42204—User interfaces specially adapted for controlling a client device through a remote control device; Remote control devices therefor
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/47—End-user applications
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00—Details of television systems
    • H04N5/76—Television signal recording
    • H04N5/765—Interface circuits between an apparatus for recording and another apparatus
    • H04N5/77—Interface circuits between an apparatus for recording and another apparatus between a recording apparatus and a television camera
    • H04N5/772—Interface circuits between an apparatus for recording and another apparatus between a recording apparatus and a television camera the recording apparatus and the television camera being placed in the same enclosure
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00—Details of television systems
    • H04N5/76—Television signal recording
    • H04N5/91—Television signal processing therefor
    • H04N5/93—Regeneration of the television signal or of selected parts thereof
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00—Details of television systems
    • H04N5/76—Television signal recording
    • H04N5/765—Interface circuits between an apparatus for recording and another apparatus
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N9/00—Details of colour television systems
    • H04N9/79—Processing of colour television signals in connection with recording
    • H04N9/80—Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback
    • H04N9/82—Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback the individual colour picture signal components being recorded simultaneously only
    • H04N9/8205—Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback the individual colour picture signal components being recorded simultaneously only involving the multiplexing of an additional signal and the colour video signal

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • General Engineering & Computer Science (AREA)
  • Software Systems (AREA)
  • Human Computer Interaction (AREA)
  • Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)
  • User Interface Of Digital Computer (AREA)
  • Information Retrieval, Db Structures And Fs Structures Therefor (AREA)

Abstract

본 발명은 사용자 주변의 일반 사물의 이미지에 특정 멀티 미디어 컨텐츠를 매핑하여 오브젝트를 컨텐츠의 숏컷(shortcut)으로 사용한다. 컨텐츠가 매핑된 오브젝트를 통해 컨텐츠를 재생, 삭제, 이동등의 다양한 조작을 할 수 있다.
멀티 미디어, 컨텐츠, 네트워크, WiFi, 오브젝트, 매핑, 사물, 바로가기, 숏컷

Description

일반 물체를 이용한 멀티미디어 컨텐츠 관리 방법{MANAGING MULTIMEDIA CONTENTS USING GENERAL OBJECTS}
본 발명은 동영상, 이미지 등의 멀티미디어 컨텐츠를 제어하기 위한 사용자 인터페이스에 관한 것이다.
보다 구체적으로, 본 발명은 사용자 주변의 일반 사물(이하 오브젝트 함)을 촬영하여 그 이미지에 특정 멀티미디어 컨텐츠를 매핑하여 오브젝트를 컨텐츠의 바로가기 또는 숏컷(shortcut)으로 사용한다. 컨텐츠가 매핑된 오브젝트를 통해 컨텐츠를 재생하거나, 다양한 조작을 할 수 있다.
스토리지가 대형화 되면서 파일을 분류 저장 하는 것이 쉽지 않은 일이 되어 버렸다. 이에 더해 인터넷 액세스 가능 해지면서 접하는 컨텐츠들이 보다 많아지면서 해당 파일들에 대하여 즐겨찾기, 사용에 따른 분류가 쉽지 않은 일이 되었다.
종래에는 컨텐츠를 재생하기 위해서는 컨텐츠가 저장되어 있는 장치의 파일 시스템을 통해 컨텐츠에 액세스하는 방법을 사용하였으나, 이는 사용자 기반의 시스템이 아니며 사용자에게 직관적이지 못하고, 복잡하고 다양한 컨텐츠를 제어하기에는 매우 어렵고 귀찮은 작업들을 해야한다.
보다 편리하고 직관적인 방식으로 다양한 멀티미디어 컨텐츠들에 액세스하는 방법이 요구된다.
본 발명은 컨텐츠들을 실제 사물에 맵핑하여, 보다 직관적으로 멀티미디어 컨텐츠를 조작하고 저장하는 방법을 제공하는 것을 목적으로 한다.
본 발명에 따르면, 실제 사물을 정리하는 것처럼 직관적인 방법으로 컨텐츠들도 조작할 수 있는 방법을 제공하는 것을 목적으로 한다.
본 발명의 일 실시예에 따라 멀티미디어 재생 장치가 제공된다. 상기 재생 장치는, 오브젝트의 이미지를 수신하는 이미지 수신부; 상기 수신된 이미지로부터 상기 오브젝트의 식별 정보를 추출하고, 상기 추출된 식별 정보를 기반으로 상기 오브젝트와 컨텐츠 간의 매핑 관계와 관련된 동작을 수행하는 제어부; 컨텐츠 및 상기 오브젝트와 컨텐츠 간의 매핑 정보를 저장하는 저장부; 사용자 입력을 수신하는 사용자 입력부; 및 컨텐츠를 출력가능한 신호로 처리하는 영상 처리부를 포함한다.
본 발명의 일 실시예에 따라 다른 멀티미디어 재생 장치가 제공된다. 상기 재생장치는, 오브젝트의 식별 정보를 수신하는 근거리 통신부; 상기 수신된 식별 정보를 기반으로 상기 오브젝트와 컨텐츠 간의 매핑 관계와 관련된 동작을 수행하는 제어부; 컨텐츠 및 상기 오브젝트와 컨텐츠 간의 매핑 정보를 저장하는 저장부; 사용자 입력을 수신하는 사용자 입력부; 및 컨텐츠를 출력가능한 신호로 처리하는 영상 처리부를 포함한다.
본 발명의 일 실시예에 따라, 다른 장치와 무선으로 연결되어 데이터를 송수신할 수 있는 원격제어장치가 제공된다. 상기 원격제어장치는, 오브젝트의 이미지를 촬영하는 카메라; 상기 촬영한 이미지로부터 상기 오브젝트의 식별 정보를 추출하는 제어부; 사용자의 입력을 수신하는 사용자 입력부; 상기 추출한 오브젝트의 식별 정보 또는 사용자 입력을 상기 다른 장치로 전송하고 근거리 통신부; 및 상기 촬영된 오브젝트를 표시하는 디스플레이부를 포함한다.
본 발명의 또 다른 실시예에 따라, 멀티미디어 재생 장치가 제공된다. 상기 재생 장치는, 오브젝트의 이미지를 수신하는 이미지 수신부; 상기 오브젝트의 이미지로부터 식별 정보를 추출하는 제어부; 상기 식별 정보를 송신하고, 상기 오브젝트와 컨텐츠 간의 매핑 관계와 관련된 정보를 수신하는 근거리 통신부; 사용자 입력을 수신하는 사용자 입력부; 및 상기 오브젝트와 컨텐츠 간의 매핑 관계와 관련된 정보를 출력가능한 신호로 처리하는 영상 처리부를 포함한다.
본 발명의 일 실시예에 따라 적어도 하나의 재생 장치 또는 원격제어장치와 무선 통신으로 연결되어, 멀티 미디어 데이터를 관리하는 서버가 제공된다. 상기 멀티미디어 데이터 관리 서버는, 오브젝트의 식별 정보를 수신하는 근거리 통신부; 상기 수신된 오브젝트 식별 정보를 기반으로, 상기 오브젝트와 컨텐츠 간의 매핑 관계와 관련된 동작을 수행하는 제어부; 상기 오브젝트와 컨텐츠 간의 매핑 정보를 저장하는 저장부; 및 사용자 입력을 수신하는 사용자 입력부를 포함한다.
본 발명의 일 실시예에 따라, 컨텐츠 및 오브젝트와 컨텐츠 간의 매핑 정보를 저장하는 재생 장치에서, 멀티미디어 컨텐츠 제어를 위한 사용자 인터페이스 제 공 방법이 제공된다. 상기 방법은, 오브젝트의 이미지를 수신하는 단계; 상기 수신된 이미지로부터 상기 오브젝트의 식별 정보를 추출하는 단계; 상기 오브젝트와 컨텐츠 간의 매핑 관계와 관련된 메뉴를 표시하는 단계; 사용자로부터 수행할 작업 선택 입력을 수신하는 단계; 및 상기 추출된 식별 정보를 기반으로 상기 오브젝트와 컨텐츠 간의 매핑 관계와 관련된 동작을 수행하는 단계를 포함한다.
본 발명의 다른 실시예에 따라, 컨텐츠 및 오브젝트와 컨텐츠 간의 매핑 정보를 저장하는 재생 장치에서, 멀티미디어 컨텐츠 제어를 위한 사용자 인터페이스 제공 방법이 제공된다. 상기 방법은, 오브젝트의 식별 정보를 수신하는 단계; 상기 오브젝트와 컨텐츠 간의 매핑 관계와 관련된 메뉴를 표시하는 단계; 사용자로부터 수행할 작업 선택 입력을 수신하는 단계; 및 상기 추출된 식별 정보를 기반으로 상기 오브젝트와 컨텐츠 간의 매핑 관계와 관련된 동작을 수행하는 단계를 포함한다.
본 발명에 따르면, 컨텐츠들을 주변의 일반 사물에 맵핑하여, 보다 직관적으로 멀티미디어 컨텐츠를 재생하고 조작할 수 있다.
본 발명에 따르면, 실제 사물을 정리하는 것처럼 직관적인 방법으로 컨텐츠들을 재생 및 조작할 수 있다.
이하 도면을 참조하여 본 발명의 실시예들을 보다 상세히 설명한다.
도 1은 본 발명의 일 실시예에 따른 컨텐츠 매핑 개념을 나타낸다.
본 발명의 일 실시예에 따라, 동영상, 이미지, 오디오 파일 등 멀티미디어 컨텐츠(이하 '컨텐츠'라 함)(12)를 주변의 일반 사물(이하 '오브젝트'라 함)(11)에 매핑할 수 있다. 컨텐츠(12)가 매핑된 오브젝트(11)는 컨텐츠의 바로가기 또는 숏컷과 같은 역할을 할 수 있다. 즉, 사용자는 오브젝트(11)를 사용하여 컨텐츠(12)를 제어할 수 있다.
컨텐츠가 매핑된 오브젝트의 이미지를 촬영하고, 이미지 인식 기술에 의해 인식한 다음, 매핑 정보를 참조하면 오브젝트에 어느 컨텐츠가 매핑되어 있는지 알 수 있다. 오브젝트에 매핑된 컨텐츠를 재생, 이동하거나, 오브젝트에 매핑된 컨텐츠를 브라우징하거나, 또는 오브젝트에 추가로 컨텐츠를 매핑하는 등 다양한 동작을 수행할 수 있다.
본 발명의 오브젝트는 매핑되는 컨텐츠와 내용적으로 관련된 것이다. 예를 들어, 애인과의 데이트 사진 컨텐츠는 애인의 사진에 매핑할 수 있고, 영화 컨텐츠는 그 영화의 포스터를 매핑할 수 있고, 단체 모임에서 촬영한 사진들은 그 단체 모임 약속을 메모해 놓은 메모지에 매핑할 수 있다.
이와 같이 컨텐츠를 매핑함으로써, 사용자는 오브젝트를 보고 거기에 매핑된 컨텐츠가 무엇인지를 직관적으로 인식할 수 있다.
도 2는 본 발명의 일 실시예에 따른 오브젝트 인식에 의한 컨텐츠 조작 방법을 나타낸다.
도 2에 도시된 바와 같이, 재생 장치(100)에는 카메라(160)가 장착되어 있으며, 매핑 정보(171)와 컨텐츠(172)가 저장되어 있다. 본 명세서에서 매핑 정보는 오브젝트에 어느 컨텐츠가 매핑되어 있는지를 나타내는 정보를 말한다.
본 발명에 따른 재생 장치(100)는 동영상, 음악, 사진 등의 멀티 미디어 중 하나 이상을 재생할 수 있는 임의의 장치를 포함한다. 예를 들어, TV, 게임기, 디지털 액자, MP3 플레이어, PC 등 임의의 재생 장치를 포함할 수 있다.
재생 장치(100)에 장착된 카메라(160)를 사용하여 일반 사물, 즉 오브젝트(150)를 촬영한다. 본 실시예에서는 오브젝트(150)로 사원증을 예로 들어 설명한다. 그러나, 본 발명의 오브젝트는 카메라로 촬영 가능한 임의의 사물일 수 있으며, 바람직하게는 전술한 바와 같이, 매핑될 컨텐츠와 내용적으로 관련 있는 것이다.
도 3은 본 발명의 일 실시예에 따른 재생 장치의 구성도를 나타낸다.
도 3에 도시된 바와 같이, 본 발명의 오브젝트의 이미지를 수신하는 이미지 수신부(102), 상기 수신된 이미지로부터 상기 오브젝트의 식별 정보를 추출하고, 상기 추출된 식별 정보를 기반으로 상기 오브젝트와 컨텐츠 간의 매핑 관계와 관련된 동작을 수행하는 제어부(101), 컨텐츠 및 상기 오브젝트와 컨텐츠 간의 매핑 정보를 저장하는 저장부(105), 사용자 입력을 수신하는 사용자 입력부(106) 및 컨텐츠를 출력가능한 신호로 처리하는 영상 처리부(107)로 구성될 수 있다.
이미지 수신부(102)는 카메라(160) 또는 카메라가 연결될 수 있는 접속부를 포함한다. 즉, 카메라(160)는 재생 장치(100)에 일체화될 수도 있고, 임의의 연결 수단에 의해 연결될 수도 있다.
제어부(101)는 재생 장치(100)의 동작을 제어하고 컨텐츠를 재생을 위한 신 호 처리를 수행한다. 제어부(101)는 임의의 프로세서, 마이크로 프로세서, 범용 또는 전용 프로세서일 수 있다.
영상 처리부(103)는 컨텐츠를 가능한 신호로 처리하여 디스플레이부(104)에 전달한다. 실시예에 따라서는, 디스플레이부(104)와 영상 처리부(103)가 일체화될 수 있다. 즉, 디스플레이부(104)가 재생 장치(100)에 포함될 수 있다.
저장부(105)에는 매핑 정보와 컨텐츠가 저장될 수 있다. 이외에 재생 장치(100)의 일반적인 동작에 필요한 데이터들이 저장될 수 있다. 저장부(105)는 플래쉬 롬, EEPROM, HDD 등 임의의 저장 매체일 수 있다.
사용자 입력부(106)는 사용자의 입력을 수신하며, 재생 장치(100)의 외부에 장착된 다양한 버튼들, 재생 장치(100)에 연결된 키보드, 마우스 등의 입력 장치들 또는 사용자로부터 리모컨 입력을 수신하기 위한 리모컨 입력 수신부일 수 있다.
도 4는 본 발명의 일 실시예에 따른 오브젝트의 식별 방법을 나타낸다. 본 발명에서는 카메라를 사용하여 오브젝트의 이미지를 촬영하고, 촬영된 이미지로부터 오브젝트를 식별해 낸다. 촬영된 오브젝트의 이미지를 사용하여 오브젝트를 식별할 수도 있으나, 데이터 처리량이 많아지기 때문에, 도 4에 도시된 바와 같이 오브젝트(150)에 식별자(142)를 부착함으로써 인식 오류와 인식에 필요한 데이터 처리량을 감소시킬 수 있다. 식별자(142)는 오브젝트(150)를 나타내는 고유 코드를 포함할 수 있으며, 예컨대 바코드, 고유 문자 또는 고유 번호 등일 수 있다. 오브젝트 전체를 촬영할 필요없이 식별자(142)를 촬영하여 인식함으로써 오브젝트(150)를 식별할 수 있다.
도 2에서, 카메라(160)가 사원증(150)의 이미지를 촬영하면, 재생 장치(100)의 제어부(101)가 이미지로부터 식별 정보를 추출해 낸다. 추출된 식별 정보를 기반으로 매핑 정보(171)에서 매핑되어 있는 컨텐츠를 검색하고, 검색된 컨텐츠에 대해 오브젝트와 컨텐츠 간의 매핑 관계와 관련된 다양한 동작을 수행할 수 있다. 매핑 관계와 관련된 다양한 동작은, 오브젝트에 컨텐츠 매핑, 매핑된 컨텐츠 재생, 매핑된 컨텐츠 브라우징 등을 포함할 수 있다.
도 5는 본 발명의 일 실시예에 따라, 재생 장치(100), 예컨대 카메라가 장착된 TV를 사용하여 사원증(150)을 인식하였을 때, 재생 장치(100)의 디스플레이(104)에 표시되는 메뉴 화면을 나타낸다. 메뉴 화면(111)에는 인식된 오브젝트에 대해 어떤 작업을 수행할 것인지를 묻는 메시지와 선택 메뉴들(112a,112b,112c)가 포함될 수 있다. 컨텐츠 매핑 메뉴(112a)는 식별된 오브젝트에 새로 컨텐츠를 매핑하거나, 매핑된 내용을 삭제하거나, 추가 컨텐츠를 매핑하기 위한 메뉴이다. 컨텐츠 재생 메뉴(112b)는 식별된 오브젝트에 매핑된 컨텐츠를 재생하기 위한 메뉴이다. 컨텐츠 브라우징 메뉴(112c)는 식별된 오브젝트에 매핑된 컨텐츠 리스트를 표시하는 메뉴이다. 컨텐츠 브라우징 메뉴(112c)를 선택하면 도 6과 같이 컨텐츠 리스트가 표시된 다음, 사용자는 리스트 중에서 컨텐츠를 선택하여 재생, 삭제, 이동 등 다양한 조작을 수행할 수 있다.
이와 같은 선택 메뉴들(112a,112b,112c)은 본 발명의 일 실시예에 불과한 것으로서, 다양하게 변형될 수 있다.
도 7은 본 발명의 일 실시예에 따라 도 1의 재생 장치에서 수행되는 방법을 나타내는 순서도이다.
단계(S101)에서, 재생 장치에 부착되거나 카메라로 오브젝트의 이미지를 촬영하거나, 또는 재생 장치에 연결된 카메라를 사용하여 오브젝트의 이미지를 수신한다.
단계(S102)에서, 촬영된 이미지로부터 오브젝트의 식별 정보를 추출한다. 오브젝트의 식별 정보는 오브젝트의 이미지의 일부 또는 전체일 수도 있고, 전술한 바와 같이, 오브젝트에 부착된 식별자에 포함된 고유 코드일 수도 있다.
단계(S103)에서, 사용자에게 메뉴를 표시하고, 식별된 오브젝트 및 그에 매핑된 컨텐츠들에 대해 수행할 작업의 선택 입력을 수신한다. 즉, 식별된 오브젝트와 컨텐츠 간의 매핑 관계와 관련된 동작들 중 어느 것을 수행할 것인지에 대한 선택 입력을 수신한다.
단계(S104)에서, 선택된 작업이 컨텐츠 매핑이면, 단계(S105)에서, 재생 장치에 저장된 매핑 정보에 식별된 오브젝트의 인덱스가 존재하는지 판단한다. 인덱스가 존재하지 않으면 단계(S107)에서, 인덱스를 생성한 다음 단계로 진행한다. 단계(S106)에서, 식별된 오브젝트에 사용자가 지정한 컨텐츠를 매핑한다. 사용자가 지정한 컨텐츠는 별도의 탐색 화면을 표시하여 사용자가 선택하도록 할 수도 있고, 오브젝트를 식별할 때 재생 장치에서 재생되던 컨텐츠일 수도 있다.
단계(S108)에서, 수행할 작업이 컨텐츠 재생이면, 단계(S109)에서, 오브젝트에 매핑된 컨텐츠를 재생한다. 오브젝트에 매핑된 컨텐츠가 복수개이면, 복수개의 컨텐츠들을 순차적으로 재생할 수 있다.
단계(S108)에서, 수행할 작업이 컨텐츠 브라우징이면, 단계(S110)에서, 재생 장치에 저장된 컨텐츠 리스트를 표시한다. 단계(S111)에서, 사용자는 리스트 중에서 컨텐츠를 선택하고, 선택된 컨텐츠에 대해 다양한 조작, 예컨대 재생, 삭제 또는 이동 등의 조작을 수행할 수 있다.
도 8은 본 발명의 다른 실시예에 따른 오브젝트 인식에 의한 컨텐츠 조작 방법을 나타낸다.
도 8에서는 복수개의 재생 장치들(100a,100b,100c)이 있다고 가정한다. 각 재생 장치들(100a,100b,100c)에는 오브젝트와 상기 오브젝트에 매핑된 컨텐츠들의 정보를 나타내는 매핑 정보(171a,171b,171c)와 (컨텐츠(172a,172b,172c)가 저장되어 있다.
원격제어장치(200)에는 카메라가 장착되어 있다. 사용자는 원격제어장치(200)를 사용하여 각 재생 장치들(100a,100b,100c)을 제어할 수 있고, 원격제어장치(200)와 재생 장치들(100a,100b,100c) 각각은 근거리 무선 통신에 의해 데이터를 송수신할 수 있도록 연결된다. 근거리 무선 통신은 데이터를 송수신할 수 있는 임의의 통신 방식을 포함하며, WiFi, 블루투스, RF 통신, Zigbee 또는 NFC(Near Field Communication) 중 하나일 수 있다.
도 8에서, 사용자는 원격제어장치(200)의 카메라(207)로 오브젝트(150)를 촬영하고, 오브젝트(150)의 식별 정보를 추출하며, 추출된 식별 정보를 재생 장치 중 하나로 전송해 준다. 이 때, 식별 정보를 전송할 재생 장치는 카메라(207)가 향하 는 재생 장치일 수 있다. 즉, 사용자는 카메라(207)로 식별 정보를 전송할 재생 장치를 선택할 수 있다. 카메라(207)가 재생 장치를 인식하면, 그 재생 장치로 식별 정보를 전송할 수 잇있다.
식별 정보를 수신한 재생 장치, 예컨대 TV(100b)는 매핑 정보에서 오브젝트에 매핑된 컨텐츠 정보를 다시 원격제어장치(200)로 전송해 준다. 원격제어장치(200)는 수신한 컨텐츠 정보를 원격제어장치(200)에 장착된 디스플레이에 표시한다. 이 때, 후술하는 바와 같이, 원격제어장치(200)는 수신한 컨텐츠 정보를 기반으로 가상 이미지를 생성하여, 식별한 컨텐츠 이미지와 함께 표시할 수 있다. 따라서, 사용자는 원격제어장치(200)를 사용하여 식별된 오브젝트(150)에 매핑된 컨텐츠에 대한 정보를 알 수 있으며, 그 외에도 다양한 조작을 수행할 수 있다.
또한, 사용자는 원격제어장치(200)의 카메라를 오브젝트(150)로 향하게 하여, 오브젝트(150)를 식별한 다음, 바로 재생 장치들 중 하나, 예컨대 TV(100b)를 향하면, 카메라가 TV(100b)를 인식할 수 있다. 오브젝트(150)와 TV(100b)가 연속적으로 인식되면, 별도의 사용자 입력이 없이도, 오브젝트(150)에 매핑된 컨텐츠가 TV(100b)에서 재생되도록 구성할 수도 있다.
도 9는 본 발명의 일 실시예에 따른 도 8의 재생 장치의 구성도를 나타낸다.
도 9에 도시된 바와 같이, 본 발명의 일 실시예에 따른 재생 장치(100)는, 오브젝트의 식별 정보를 수신하는 근거리 통신부(108), 상기 수신된 식별 정보를 기반으로 상기 오브젝트와 컨텐츠 간의 매핑 관계와 관련된 동작을 수행하는 제어부(101), 컨텐츠 및 상기 오브젝트와 컨텐츠 간의 매핑 정보를 저장하는 저장부(105), 사용자 입력을 수신하는 사용자 입력부(106), 컨텐츠를 출력가능한 신호로 처리하는 영상 처리부(103)를 포함한다. 나머지 구성 요소에 대한 설명은 도 3에 대한 것과 동일하며, 이미지 수신부 대신에 근거리 통신부(108)가 장착되어 있는 점이 다르다. 즉, 도 8의 재생 장치에는 카메라가 장착 또는 연결되지 않는다.
도 10은 본 발명의 일 실시예에 따른 원격제어장치의 구성도를 나타낸다.
도 10에 도시된 바와 같이, 본 발명의 일 실시예에 따른 원격제어장치(200)는 재생 장치들과 데이터를 송수신할 수 있도록 연결되며, 오브젝트의 이미지를 촬영하는 카메라(207), 상기 촬영한 이미지로부터 상기 오브젝트의 식별 정보를 추출하는 제어부(201), 사용자의 입력을 수신하는 사용자 입력부(206), 상기 추출한 오브젝트의 식별 정보 또는 사용자 입력을 상기 다른 장치로 전송하고 근거리 통신부(208), 및 상기 촬영된 오브젝트를 표시하는 디스플레이부(204)로 구성될 수 있다.
근거리 통신부(208)는 도 9의 재생 장치의 근거리 통신부(108)와 통신하며, 또한, 도 9의 사용자 입력부(106)가 리모컨 입력 수신부인 경우에는 재생 장치의 제어 명령도 전송한다.
사용자 입력부(206)는 원격제어장치에 장착된 키버튼들을 포함하며, 터치 스크린이 장착된 경우는 터치스크린일 수도 있다.
도 11 및 도 12는 본 발명의 일 실시예에 따른 원격제어장치(200)의 외관을 나타낸다. 도 11은 원격제어장치(200)의 정면을 포함하는 사시도이고, 도 12는 후면을 포함하는 사시도이다. 실시예에 따라, 원격제어장치(200)의 정면은 사용자를 향할 수 있고, 후면은 제어하고자 하는 타겟 장치를 향할 수 있다.
도 11에 도시된 바와 같이, 원격제어장치(200)의 정면에는 디스플레이(204)가 배치된다. 디스플레이(204)는 터치 스크린일 수 있다.
디스플레이(204)를 제외한 나머지 부분들에는 기타 제어 버튼들이 배치될 수 있다. 제어 버튼은 전원버튼(211), 채널 조정 버튼(214), 볼륨 조정 버튼(215), 뮤트 버튼(213), 이전 채널 버튼(212) 등을 포함할 수 있다. 이 외에도, 제어 버튼은 타겟 장치의 종류에 따라 다양한 버튼을 포함할 수 있으며, 실시예에 따라 달라질 수 있다. 실시예에 따라서는, 디스플레이(204)로 터치 스크린을 사용하고, 제어 버튼들 중 한 두개만 남기고, 나머지 버튼들을 터치 스크린에 표시할 수도 있다.
도 12를 참조하면, 원격제어장치(200)의 후면에는 카메라(207)가 배치된다. 카메라(207)는 동작시에 타겟 장치, 즉 재생 장치를 촬영하는 방향을 향할 수 있다. 바람직하게는 카메라(207)와 디스플레이(204)가 향하는 방향은 서로 반대 방향일 수 있다. 즉, 카메라(207)는 제어할 타겟 장치를 향하고, 디스플레이(204)는 사용자를 향할 수 있다.
실시예에 따라서는, 카메라(207)에는 액추에이터가 연결되어 상하(221) 또는 좌우(222) 방향으로 방향 전환이 가능하도록 구성될 수 있다.
도 13은 본 발명의 일 실시예에 따른 재생 장치의 식별 방법을 나타낸다. 전술한 바와 같이 오브젝트를 식별할 때 고유 식별자를 사용한 것과 마찬가지로, 리모컨으로 재생 장치(100b)를 인식할 때도 고유 식별자(143)를 사용할 수 있다. 따라서, 인식 오류와 데이터 처리량을 감소시킬 수 있다.
도 14 및 도 15는 본 발명의 일 실시예에 따라 컨텐츠 정보를 가상 현실로 나타내는 방법을 나타낸다.
먼저 원격제어장치(200)로 오브젝트(150)를 촬영하고, 오브젝트 이미지로부터 식별 정보를 추출한다. 원격제어장치(200)가 오브젝트 이미지를 촬영하면 도 14와 같이 원격제어장치(200)의 디스플레이에는 촬영한 오브젝트의 이미지(151)가 표시될 수 있다. 추출한 식별 정보를 선택된 재생 장치(102b)로 전송하면 재생 장치(102b)는 오브젝트(150)에 매핑되어 있는 컨텐츠에 대한 정보를 원격제어장치(200)로 전송해 준다. 원격제어장치는 수신된 컨텐츠 정보를 기반으로 도 15와 같이 오브젝트 이미지(151)와 함께 가상 현실 이미지(153)로 표시할 수 있다. 즉, 도 15에서 오브젝트 이미지(151)는 원격제어장치(200)의 카메라로 촬영한 실제 이미지이고, 가상 현실 이미지(53)는 원격제어장치(200) 재생 장치(102b)로부터 수신한 컨텐츠 정보를 기반으로 생성한 가상 현실 이미지이다. 실시예에 따라서는, 컨텐츠를 스트리밍하는 대신, 컨텐츠에 대한 정보, 즉 제목, 파일 크기, 저장 위치 등을 가상 현실로 표시할 수도 있다. 이와 같은 구성으로부터, 사용자는 원격제어 장치(200)으로 오브젝트를 촬영하여 오브젝트에 매핑된 콘텐츠를 확인할 수 있다.
실시예에 따라서는, 원격제어장치(200)의 디스플레이(204)가 터치 스크린인 경우에는 도 15와 같은 상태에서, 사용자가 컨텐츠 이미지(153)를 선택하면 메뉴를 표시하고 메뉴를 사용하여 컨텐츠를 재생, 삭제, 이동 등 다양한 조작을 수행할 수 있다.
도 16은 본 발명의 일 실시예에 따라 도 8의 재생 장치에서 수행되는 방법을 나타내는 순서도이다.
단계(S201)에서, 원격제어장치로부터 오브젝트의 식별 정보를 수신한다. 단계(S202)에서, 사용자가 원격제어장치를 통해 수행할 작업을 한다. 그 이후의 단계들(S203~S210)은 도 7의 단계(S104~S111)와 동일하다.
도 17은 본 발명의 일 실시예에 따라 도 8의 원격제어장치에서 수행되는 방법을 나타내는 순서도이다.
단계(S301)에서, 오브젝트의 이미지를 촬영하고, 단계(S302)에서, 촬영한 오브젝트의 이미지를 표시한다. 단계(S303)에서, 촬영된 오브젝트 이미지로부터 식별 정보를 추출한다. 단계(S304)에서, 추출한 식별 정보를 재생 장치 중 하나로 송신한다. 이 때, 송신할 재생 장치는 원격제어장치의 카메라를 향하게 함으로써 선택할 수 있으며, 카메라가 식별한 재생 장치로 식별 정보를 전송할 수 있다.
단계(S305)에서, 재생 장치로부터 오브젝트에 매핑된 컨텐츠 정보를 수신한다. 단계(S306)에서, 수신된 컨텐츠 정보를 기반으로 가상 이미지를 생성하여, 오 브젝트 이미지와 함께 표시한다.
본 발명의 일 실시예에 따라 재생 장치 및/또는 원격제어장치와 무선 통신 예컨대, 근거리 무선 통신으로 연결되는 멀티미디어 데이터 관리 서버를 통해 오브젝트 매핑과 관련된 동작을 수행할 수 있다.
도 18은 본 발명의 일 실시예에 따른 오브젝트 인식을 이용한 컨텐츠 조작 방법을 나타낸다. 본 실시예에서는 멀티미디어 관리 서버(300)에 매핑 정보와 컨텐츠가 저장되어 있다. 또한, 오브젝트와 컨텐츠 간의 매핑 작업, 즉 새로운 컨텐츠의 매핑 및 매핑 정보 제공은 서버(300)에 의해 수행된다. 또한, 각 재생장치들(100a,100b,100c)에는 카메라(107a,107b,107c)가 장착 또는 연결되어 있다.
도 18에서, 사용자가 재생 장치 중 하나, 예컨대 TV(100b)에 장착된 카메라(107b)로 오브젝트(150)의 이미지를 촬영하면, 재생 장치는 오브젝트(150)의 식별 정보를 서버(300)로 전송할 수 있다. 서버(300)는 매핑 정보(311)를 사용하여 수신한 식별 정보에 매핑되는 컨텐츠 정보를 검색하고, 검색된 컨텐츠 정보를 TV(100b)로 다시 전송해 준다. 만일 식별된 오브젝트의 인덱스가 존재하지 않거나, 즉 서버(300)에 등록되지 않은 오브젝트인 경우에는 인덱스를 생성하고 사용자가 지정하거나, 또는 TV(100b)에서 재생 중인 컨텐츠를 매핑할 수 있다.
서버(300)는 오브젝트에 매핑된 컨텐츠에 대한 정보를 TV(100b)로 전송해 준다. TV(100b)는 사용자에게 컨텐츠 제어 메뉴, 예컨대 도 5와 같은 메뉴를 표시할 수 있고, 사용자는 상기 메뉴를 사용하여 컨텐츠 매핑, 컨텐츠 재생 또는 컨텐츠 브라우징 등의 작업을 수행할 수 있다.
사용자가 컨텐츠 재생을 선택하는 경우는 서버(300)는 컨텐츠(312)를 TV(100b)로 전송해주고, TV(100b)에 컨텐츠가 재생된다.
도 19는 본 발명의 일 실시예에 따른 도 18의 멀티미디어 데이터 관리 서버의 구성도이다.
도 19에 도시된 바와 같이, 본 발명의 일 실시예에 따른 멀티미디어 데이터 관리 서버(300)는, 적어도 하나의 재생 장치 또는 원격제어장치와 무선 통신으로 연결되며, 오브젝트의 식별 정보를 수신하는 근거리 통신부(308), 상기 수신된 오브젝트 식별 정보를 기반으로, 상기 오브젝트와 컨텐츠 간의 매핑 관계와 관련된 동작을 수행하는 제어부(301), 상기 오브젝트와 컨텐츠 간의 매핑 정보를 저장하는 저장부(305), 및 사용자 입력을 수신하는 사용자 입력부(306)로 구성될 수 있다. 근거리 통신부는 재생 장치들과 연결되어 식별 정보, 컨텐츠, 또는 컨텐츠 정보를 송수신하며, 후술하는 바와 같이 원격제어장치와 통신할 수도 있다.
도 20은 본 발명의 일 실시예에 따라 도 18의 재생 장치(100a,100b,100c)에서 수행되는 방법을 나타내는 순서도이다.
단계(S401)에서, 재생 장치에 장착되거나 연결된 카메라로부터 오브젝트 이미지를 수신한다. 단계(S402)에서, 수신한 오브젝트 이미지로부터 식별 정보를 추출한다. 단계(S403)에서, 추출한 식별 정보를 서버(300)로 전송한다. 단계(S404)에서, 서버(300)로부터 오브젝트에 매핑된 컨텐츠 유무에 대한 정보를 수신한 다음, 매핑된 컨텐츠가 존재하면 사용자에게 도 5와 같은 메뉴를 표시하여 수행할 작 업을 선택하도록 한다.
단계(S404)에서, 수행할 작업이 컨텐츠 매핑이면, 단계(S406)에서, 서버에게 매핑을 수행하도록 한 다음 그 매핑 결과를 수신한다. 서버(300)는 오브젝트의 인덱스가 존재하면 매핑을 수행할 것이고, 오브젝트의 인덱스가 존재하지 않으면 인덱스를 생성한 다음 매핑을 수행할 것이다.
단계(S407)에서, 수행할 작업이 컨텐츠 재생이면, 단계(S408)에서, 서버(300)로부터 컨텐츠를 수신하여 단계(S409)에서, 재생 및 출력한다.
수행할 작업이 그 외의 작업, 예컨대 컨텐츠 브라우징이면, 단계(S410)에서 서버로부터 컨텐츠 정보를 수신하고, 단계(S411)에서 수신된 정보를 기반으로 컨텐츠 리스트를 표시한다. 단계(S412)에서 사용자는 표시된 컨텐츠 리스트 중에 컨텐츠를 선택하여 재생, 삭제, 이동 등 다양한 조작을 수행할 수 있다.
도 21은 본 발명의 일 실시예에 따라 도 18의 멀티미디어 데이터 관리 서버(300)에서 수행되는 방법을 나타내는 순서도이다.
단계(S501)에서, 재생 장치 중에 오브젝트 이미지를 수신한 재생 장치로부터 오브젝트 식별 정보를 수신한다. 단계(S502)에서, 사용자가 수행할 작업을 선택하고, 단계(S503)에서, 수행할 작업이 컨텐츠 매핑이면, 단계(S504)에서 식별된 오브젝트의 인덱스가 존재하는지를 판단하여, 인덱스가 존재하면 단계(S505)에서 컨텐츠를 매핑하고, 인덱스가 존재하지 않으면 단계(S506)에서 인덱스를 생성하여 컨텐츠를 매핑한다.
단계(S507)에서, 수행할 작업이 컨텐츠 재생이면, 단계(S508)에서, 재생 장치로 컨텐츠를 전송하고, 수행할 작업이 컨텐츠 브라우징이면 단계(S509)에서 컨텐츠 리스트를 포함하는 컨텐츠 정보를 재생 장치로 전송한다.
도 22는 본 발명의 다른 실시예에 따른 오브젝트 인식을 이용한 컨텐츠 조작 방법을 나타낸다. 본 실시예에서는 서버(300)에는 매핑 정보가 저장되어 있고, 각 재생 장치(100a,100b,100c)에는 컨텐츠A,B,C가 저장되어 있다. 재생 장치들에는 카메라(107a,107b,107c)가 장착 또는 연결되어 있고, 상기 카메라 중 오브젝트(150)를 촬영한 카메라가 장착된 재생 장치, 예컨대 TV(100b)는 오브젝트의 이미지를 수신하여 식별 정보를 추출하고, 추출된 식별 정보를 서버(300)로 전송한다. 서버(300)는 매핑 정보로부터 오브젝트에 매핑된 컨텐츠 정보를 TV(100b)로 전송한다. 컨텐츠 정보에는 오브젝트에 매핑된 컨텐츠의 유무 뿐만 아니라, 컨텐츠의 위치, 즉 어느 재생 장치에 저장되어 있는지도 포함된다. TV(100b)는 컨텐츠 정보를 기반으로 도 5와 유사한 메뉴를 표시하여 사용자로 하여금 수행할 작업을 선택하도록 할 수 있다. 만일 오브젝트(150)에 매핑된 컨텐츠가 TV(100b)에 저장되어 있는 컨텐츠B(173b)라면 다른 재생 장치들(100a,100c)과 통신 없이 TV(100b)에서 컨텐츠를 재생 또는 기타 작업을 수행할 수 있다.
그러나, 만일 오브젝트(150)에 매핑된 컨텐츠가 다른 재생 장치 예컨대, 게임기(100a)에 저장된 컨텐츠A(173a)라면, TV(100b)는 서버(300)를 통해서 또는 게임기(100a)로부터 직접 컨텐츠를 수신하여 재생할 수 있다. 실시예에 따라서는, 게임기(100a)에서 컨텐츠를 재생할 수도 있다.
도 23은 본 발명의 일 실시예에 따라 컨텐츠들이 각 재생 장치들에 저장되어 있는 경우, 도 22의 TV(100b)에서 수행되는 방법을 나타내는 순서도이다.
단계(S601)에서, TV(100b)에 장착되거나 연결된 카메라(107b)에 의해 오브젝트(150)를 촬영하여 이미지를 수신한다. 단계(S602)에서, 수신된 이미지로부터 오브젝트의 식별 정보를 추출하고, 단계(S603)에서 추출된 식별 정보를 서버(300)로 전송한다. 단계(S604)에서, 서버(300)로부터 컨텐츠 정보를 수신하고, 단계(S605)에서, 도 5와 같은 메뉴를 표시하여 사용자가 수행할 작업을 선택하도록 한다.
단계(S606)에서, 수행할 작업이 컨텐츠 매핑이면, 단계(S607)에서, 서버(300)에 매핑 작업을 수행하도록 하고, 매핑 결과에 대한 정보를 수신할 수 있다.
단계(S608)에서, 수행할 작업이 컨텐츠 재생이면, 단계(S609)에서, 컨텐츠가 저장된 장치, 예컨대 게임기(100a)로부터 컨텐츠를 수신하고, 단계(S610)에서 재생한다. 수행할 작업이 컨텐츠 브라우징이면, 단계(S611)에서, 수신한 컨텐츠 정보를 기반으로 컨텐츠 리스트를 표시하고, 단계(S612)에서 사용자는 표시된 리스트에서 컨텐츠를 선택하여 재생, 삭제, 이동 등의 조작을 할 수 있다.
도 24는 본 발명의 일 실시예에 따라 도 22의 서버(300)에서 수행되는 방법을 나타내는 순서도이다.
단계(S701)에서, 무선으로 연결된 재생 장치 중 하나로부터 오브젝트의 식별 정보를 수신한다. 단계(S702)에서, 매핑 정보를 검색하여 식별된 오브젝트에 매핑된 컨텐츠 정보를 재생 장치로 전송한다. 단계(S703)에서, 사용자가 수행할 작업을 선택하면, 단계(S704)에서, 수행할 작업이 컨텐츠 매핑인 경우에는 단계(S705)에서, 오브젝트의 인덱스 존재 여부를 판단하고, 인덱스가 존재하면 단계(S706)에서 컨텐츠를 매핑하고, 인덱스가 존재하지 않으면 단계(S707)에서 인덱스를 생성한 다음 컨텐츠를 매핑한다. 단계(S704)에서 수행할 작업이 컨텐츠 매핑 이외의 작업이면 서버(300)에서는 수행할 작업이 없으므로 프로세스를 종료한다.
도 25는 본 발명의 또 다른 실시예에 따른 오브젝트 인식을 이용한 컨텐츠 조작 방법을 나타낸다. 본 실시예에서는 서버(300)에 매핑 정보와 컨텐츠가 저장되어 있고, 사용자는 카메라가 장착된 원격제어장치(200)를 사용하여 오브젝트의 식별 정보를 추출한다.
도 25에서 원격제어장치(200)를 사용하여 오브젝트의 식별 정보를 추출하고, 이를 매핑 정보가 저장된 서버(300)로 전송하여 오브젝트에 매핑된 컨텐츠 정보를 알 수 있다. 컨텐츠 정보를 표시할 때, 도 14 및 도 15와 같이 컨텐츠 정보를 이용하여 증강 이미지를 생성하여 표시할 수도 있다.
컨텐츠 정보를 알아낸 다음, 사용자는 원격제어장치(200)를 통해 컨텐츠 매핑, 컨텐츠 재생, 컨텐츠 브라우징 등의 작업을 제어할 수 있다. 사용자가 컨텐츠 재생을 수행하고자 하는 경우에, 사용자가 원격제어장치(200)를 통해 재생 장치, 예컨대 TV(100b)를 선택하고, 그 선택을 서버(300)에 통지하면, 서버(300)는 선택 된 재생 장치(100b)로 컨텐츠를 전송하고, 선택된 재생 장치(100b)에서 컨텐츠를 재생할 수 있다.
도 26은 본 발명의 일 실시예에 따라 도 25의 서버(300)에서 수행되는 방법을 나타내는 순서도이다.
단계(S801)에서, 원격제어장치(200)로부터 오브젝트의 식별 정보를 수신한다. 단계(S802)에서, 매핑 정보를 검색하여 식별된 오브젝트에 매핑된 컨텐츠 정보를 원격제어장치(200)로 전송한다. 단계(S803)에서, 원격제어장치(200)를 통해 사용자로 하여금 수행할 작업을 선택하도록 한다.
단계(S804)에서, 선택된 작업이 컨텐츠 매핑이면, 단계(S805)에서 인덱스 존재 여부를 판단하여, 인덱스가 존재하면 단계(S806)에서 컨텐츠를 매핑하고, 인덱스가 존재하지 않으면 단계(S807)에서, 인덱스를 생성한 다음 컨텐츠를 매핑한다.
단계(S808)에서, 수행할 작업이 컨텐츠 재생이면, 단계(S809)에서, 사용자로 하여금 재생 장치를 선택하도록 하고, 단계(S810)에서, 선택된 장치로 컨텐츠를 전송하면 재생 장치에서 컨텐츠가 재생된다.
도 27은 본 발명의 또다른 실시예에 따른 오브젝트 인식을 이용한 컨텐츠 조작 방법을 나타낸다. 본 실시예에서는 매핑 정보는 서버(300)에 저장되고, 컨텐츠는 각 재생 장치들(100a,100b,100c)에 저장된다. 사용자는 원격제어장치(200)를 사용하여 오브젝트의 식별 정보를 추출하고, 추출된 식별 정보를 서버(300)로 전송 한다. 서버(300)는 그에 대한 응답으로 컨텐츠 정보를 원격제어장치(200)로 전송한다. 원격제어장치(200)에서는 컨텐츠의 위치를 포함하는 컨텐츠 정보를 표시해 주고, 사용자는 그 컨텐츠 정보를 확인하여, 컨텐츠가 저장되어 있는 재생 장치들을 제어하여, 각 재생 장치에 저장되어 있는 컨텐츠들을 조작할 수 있다.
재생 장치(100), 원격제어장치(200) 및 서버(300)에서 수행되는 방법은 전술한 실시예들과 유사하며, 다만, 서버(300)에서 재생 장치(100)로의 통신은 발생하지 않고, 사용자는 원격제어장치(200)를 통해 서버(300)로부터 컨텐츠 매핑 정보를 수신하고, 그 정보를 기반으로 재생장치들(100)을 제어할 수 있다.
전술한 방법의 단계들의 특정 순서는 예시적인 접근 방법의 하나에 불과하다. 설계 선호도에 따라, 상기 프로세스의 단계들의 특정 순서 또는 계층구조들은 본 명세서의 범위 내에서 재배열될 수 있음이 이해된다. 첨부된 방법 청구항들은 다양한 단계들의 구성요소들을 예시적인 순서로 제공하였지만, 제공된 특정 순서로 제한된다는 의미는 아니다.
또한 당업자는 전술한 실시예들과 관련하여 설명된 다양한 논리 블록, 모듈들, 회로들 및 알고리즘 단계들은 전자 하드웨어, 컴퓨터 소프트웨어 또는 그들의 조합으로 구현될 수 있음을 이해할 것이다. 하드웨어 및 소프트웨어의 상호교환성을 명확히 설명하기 위해, 다양한 설명을 위한 컴포넌트들, 블록들, 모듈들, 회로들, 수단들 및 단계들이 일반적으로 그 기능에 의해 설명되었다. 그러한 기능이 하드웨어 또는 소프트웨어로 구현되는가의 여부는 특정 적용 분야 및 전체 시스템에 부과된 설계 자유도에 따라 달라진다.
전술한 실시예들과 관련된 다양한 설명을 위한 논리 블록들, 모듈들 및 회로들은 범용 프로세서, DSP(digital signal processor), ASIC, FPGA(field programmable gate array) 또는 다른 프로그램 가능한 논리 장치, 이산 게이트 또는 트랜지스터 로직, 이산 하드웨어 컴포넌트 또는 전술한 기능들을 수행하도록 설계된 임의의 조합으로 구현 또는 수행될 수 있다. 범용 프로세서는 마이크로프로세서일 수 있으나, 선택적으로 프로세서는 임의의 통상적인 프로세서, 콘트롤러, 마이크로콘트롤러 또는 스테이트 머신일 수 있다. 프로세서는 또한 컴퓨팅 장치, 예컨대 DSP 및 마이크로프로세서의 조합, 복수의 마이크로프로세서들, DSP 코어와 결합된 하나 이상의 마이크로프로세서들, 또는 임의의 다른 장치로 구현될 수 있다.
본 명세서에 개시된 실시예들과 관련하여 설명된 방법의 단계들 또는 알고리즘은 하드웨어로 직접 구현될 수도 있고, 프로세서에 의해 실행되는 소프트웨어 모듈 또는 이들의 조합으로 구현될 수도 있다. 소프트웨어 모듈은 RAM 메모리, 플래쉬 메모리, ROM 메모리, EPROM 메모리, EEPROM 메모리, 레지스터, 하드디스크, 착탈가능한 디스크, CD-ROM 또는 임의의 다른 형태의 공지된 저장 매체에 상주할 수 있다. 예시적인 저장 매체(미도시)는 프로세서에 연결되어 프로세서는 저장 매체에 정보를 기록하거나, 저장 매체로부터 정보를 읽을 수 있다. 선택적으로, 저장 매체는 프로세서에 통합될 수 있다. 프로세서 및 저장 매체는 ASIC에 위치할 수 있다. ASIC은 사용자 단말기에 위치할 수 있다. 선택적으로, 프로세서 및 저장 매체는 사용자 단말의 독립 컴포넌트로 위치할 수 있다.
전술한 실시예들에서, 설명된 기능들은 하드웨어, 소프트웨어, 펌웨어 또는 이들의 임의의 조합으로 구현될 수 있다.
본 명세서에 설명된 예들은 단지 실시예들일 뿐이고, 당업자라면 본 명세서에 개시된 발명의 개념을 벗어나지 않고, 상술한 실시예들로부터 다양한 변형예를 사용할 수 있을 것이다. 본 명세서의 신규한 실시예들은 이하의 청구범위에 의해서만 정의된다.
도 1은 본 발명의 일 실시예에 따른 컨텐츠 매핑 개념을 나타낸다.
도 2는 본 발명의 일 실시예에 따른 오브젝트 인식에 의한 컨텐츠 조작 방법을 나타낸다.
도 3은 본 발명의 일 실시예에 따른 재생 장치의 구성도를 나타낸다.
도 4는 본 발명의 일 실시예에 따른 오브젝트의 식별 방법을 나타낸다.
도 5는 본 발명의 일 실시예에 따라, 컨텐츠를 조작하기 위한 메뉴 화면을 나타낸다.
도 6은 본 발명의 일 실시예에 따른 오브젝트에 매핑된 컨텐츠 브라우징 화면을 나타낸다.
도 7은 본 발명의 일 실시예에 따라 도 1의 재생 장치에서 수행되는 방법을 나타내는 순서도이다.
도 8은 본 발명의 다른 실시예에 따른 오브젝트 인식에 의한 컨텐츠 조작 방법을 나타낸다.
도 9는 본 발명의 일 실시예에 따른 도 8의 재생 장치의 구성도를 나타낸다.
도 10은 본 발명의 일 실시예에 따른 원격제어장치의 구성도를 나타낸다.
도 11 및 도 12는 본 발명의 일 실시예에 따른 원격제어장치의 외관을 나타낸다.
도 13은 본 발명의 일 실시예에 따른 재생 장치의 식별 방법을 나타낸다.
도 14 및 도 15는 본 발명의 일 실시예에 따라 컨텐츠 정보를 가상 현실로 나타내는 방법을 나타낸다.
도 16은 본 발명의 일 실시예에 따라 도 8의 재생 장치에서 수행되는 방법을 나타내는 순서도이다.
도 17은 본 발명의 일 실시예에 따라 도 8의 원격제어장치에서 수행되는 방법을 나타내는 순서도이다.
도 18은 본 발명의 일 실시예에 따른 오브젝트 인식을 이용한 컨텐츠 조작 방법을 나타낸다.
도 19는 본 발명의 일 실시예에 따른 도 18의 멀티미디어 데이터 관리 서버의 구성도이다.
도 20은 본 발명의 일 실시예에 따라 도 18의 재생 장치에서 수행되는 방법을 나타내는 순서도이다.
도 21은 본 발명의 일 실시예에 따라 도 18의 멀티미디어 데이터 관리 서버에서 수행되는 방법을 나타내는 순서도이다.
도 22는 본 발명의 다른 실시예에 따른 오브젝트 인식을 이용한 컨텐츠 조작 방법을 나타낸다.
도 23은 본 발명의 일 실시예에 따라 도 22의 재생 장치에서 수행되는 방법을 나타내는 순서도이다.
도 24는 본 발명의 일 실시예에 따라 도 22의 서버에서 수행되는 방법을 나타내는 순서도이다.
도 25는 본 발명의 또 다른 실시예에 따른 오브젝트 인식을 이용한 컨텐츠 조작 방법을 나타낸다.
도 26은 본 발명의 일 실시예에 따라 도 25의 서버에서 수행되는 방법을 나타내는 순서도이다.
도 27은 본 발명의 일 실시예에 따른 오브젝트 인식을 이용한 컨텐츠 조작 방법을 나타낸다.

Claims (46)

  1. 오브젝트의 이미지를 수신하는 이미지 수신부;
    컨텐츠 및 상기 오브젝트와 컨텐츠 간의 매핑 정보를 저장하는 저장부;
    상기 수신된 이미지로부터 상기 오브젝트의 식별 정보를 추출하고, 상기 추출된 식별 정보를 기반으로 상기 오브젝트와 상기 저장부에 저장된 컨텐츠 간의 매핑 관계와 관련된 동작을 수행하는 제어부; 및
    컨텐츠를 출력가능한 신호로 처리하는 영상 처리부를 포함하고,
    상기 매핑 관계와 관련된 동작은 상기 오브젝트에 사용자가 지정한 컨텐츠를 매핑하는 동작을 포함하는 재생 장치.
  2. 제1항에 있어서,
    상기 오브젝트의 식별 정보는 상기 오브젝트의 일부 또는 전체의 이미지인 재생 장치.
  3. 제1항에 있어서,
    상기 오브젝트의 식별 정보는 상기 오브젝트를 나타내는 고유 코드인 재생 장치.
  4. 제1항에 있어서,
    상기 이미지 수신부는 상기 재생 장치에 연결된 카메라 또는 카메라 접속부인 재생 장치.
  5. 삭제
  6. 제1항에 있어서,
    상기 매핑 관계와 관련된 동작은 상기 오브젝트에 재생 장치에서 현재 재생 중인 컨텐츠를 매핑하는 동작을 더 포함하는 재생 장치.
  7. 제1항에 있어서,
    상기 매핑 관계와 관련된 동작은 상기 오브젝트에 매핑된 컨텐츠를 재생하는 동작을 더 포함하는 재생 장치.
  8. 제1항에 있어서,
    상기 매핑과 관련된 동작은 상기 오브젝트에 매핑된 컨텐츠의 정보를 출력하는 동작을 더 포함하는 재생 장치.
  9. 제1항에 있어서,
    상기 영상 처리부로부터 출력된 영상을 표시하는 디스플레이부를 더 포함하 는 재생 장치.
  10. 삭제
  11. 다른 장치와 무선으로 연결되어 데이터를 송수신할 수 있는 원격제어장치에 있어서,
    오브젝트의 이미지를 촬영하는 카메라;
    상기 촬영한 이미지로부터 상기 오브젝트의 식별 정보를 추출하는 제어부;
    상기 추출한 오브젝트의 식별 정보를 상기 다른 장치로 전송하고, 상기 다른 장치로부터 상기 오브젝트에 매핑된 컨텐츠 정보를 수신하는 근거리 통신부; 및
    상기 촬영된 오브젝트를 표시하는 디스플레이부를 포함하고,
    상기 제어부는 상기 수신된 컨텐츠 정보를 기반으로 생성된 가상 이미지를 상기 디스플레이부에 표시하는 원격제어장치.
  12. 제11항에 있어서,
    상기 오브젝트의 식별 정보는 상기 오브젝트의 일부 또는 전체의 이미지인 원격제어장치.
  13. 제11항에 있어서,
    상기 오브젝트의 식별 정보는 상기 오브젝트를 나타내는 고유 코드인 원격제어장치.
  14. 삭제
  15. 제11항에 있어서,
    상기 근거리 통신부는 WiFi 통신 모듈, 블루투스 모듈, RF 통신 모듈, Zigbee 통신 모듈 또는 NFC 모듈 중 하나인 원격제어장치.
  16. 컨텐츠 및 오브젝트와 컨텐츠 간의 매핑 정보를 저장하는 재생 장치에서, 멀티미디어 컨텐츠 제어를 위한 사용자 인터페이스 제공 방법에 있어서,
    오브젝트의 이미지를 수신하는 단계;
    상기 수신된 이미지로부터 상기 오브젝트의 식별 정보를 추출하는 단계;
    상기 오브젝트와 상기 재생 장치에 저장된 컨텐츠 간의 매핑 관계와 관련된 메뉴를 표시하는 단계;
    사용자로부터 수행할 작업 선택 입력을 수신하는 단계; 및
    상기 추출된 식별 정보를 기반으로 상기 오브젝트와 상기 재생 장치에 저장된 컨텐츠 간의 매핑 관계와 관련된 동작을 수행하는 단계를 포함하고,
    상기 매핑 관계와 관련된 동작은 상기 오브젝트에 사용자가 지정한 컨텐츠를 매핑하는 동작을 포함하는 사용자 인터페이스 제공 방법.
  17. 삭제
  18. 제16항에 있어서,
    상기 매핑 관계와 관련된 동작은 상기 오브젝트에 재생 장치에서 현재 재생 중인 컨텐츠를 매핑하는 동작을 더 포함하는 사용자 인터페이스 제공 방법.
  19. 제16항에 있어서,
    상기 매핑 관계와 관련된 동작은 상기 오브젝트에 매핑된 컨텐츠를 재생하는 동작을 더 포함하는 사용자 인터페이스 제공 방법.
  20. 삭제
  21. 삭제
  22. 삭제
  23. 삭제
  24. 삭제
  25. 삭제
  26. 삭제
  27. 삭제
  28. 삭제
  29. 삭제
  30. 삭제
  31. 삭제
  32. 삭제
  33. 삭제
  34. 삭제
  35. 삭제
  36. 삭제
  37. 삭제
  38. 삭제
  39. 삭제
  40. 삭제
  41. 삭제
  42. 삭제
  43. 삭제
  44. 삭제
  45. 삭제
  46. 삭제
KR1020090114543A 2009-11-25 2009-11-25 일반 물체를 이용한 멀티미디어 컨텐츠 관리 방법 KR101601280B1 (ko)

Priority Applications (3)

Application Number Priority Date Filing Date Title
KR1020090114543A KR101601280B1 (ko) 2009-11-25 2009-11-25 일반 물체를 이용한 멀티미디어 컨텐츠 관리 방법
PCT/KR2010/007739 WO2011065680A2 (en) 2009-11-25 2010-11-04 Managing multimedia contents using general objects
US13/511,949 US20120314043A1 (en) 2009-11-25 2010-11-04 Managing multimedia contents using general objects

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020090114543A KR101601280B1 (ko) 2009-11-25 2009-11-25 일반 물체를 이용한 멀티미디어 컨텐츠 관리 방법

Publications (2)

Publication Number Publication Date
KR20110057919A KR20110057919A (ko) 2011-06-01
KR101601280B1 true KR101601280B1 (ko) 2016-03-08

Family

ID=44067043

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020090114543A KR101601280B1 (ko) 2009-11-25 2009-11-25 일반 물체를 이용한 멀티미디어 컨텐츠 관리 방법

Country Status (3)

Country Link
US (1) US20120314043A1 (ko)
KR (1) KR101601280B1 (ko)
WO (1) WO2011065680A2 (ko)

Families Citing this family (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
BR102012004645A2 (pt) * 2012-03-01 2013-10-22 Ibope Pesquisa De Midia E Participacoes Ltda Aparelho, processo e sistema de medição de audiência
KR101374385B1 (ko) * 2012-03-07 2014-03-14 주식회사 팬택 단축 아이콘 제공 기능을 갖는 휴대용 디바이스 및 단축 아이콘 제공방법
US9262865B2 (en) 2013-03-15 2016-02-16 Daqri, Llc Content creation tool
JP2019101783A (ja) * 2017-12-04 2019-06-24 キヤノン株式会社 情報処理装置及び方法
CN111241893B (zh) * 2018-11-29 2023-06-16 阿里巴巴集团控股有限公司 一种标识识别方法、装置及系统
WO2021107186A1 (ko) * 2019-11-28 2021-06-03 엘지전자 주식회사 스마트 월 및 그 제어 방법

Family Cites Families (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP4032776B2 (ja) * 2002-03-04 2008-01-16 ソニー株式会社 複合現実感表示装置及び方法、記憶媒体、並びにコンピュータ・プログラム
US7916322B2 (en) * 2002-03-14 2011-03-29 Senshin Capital, Llc Method and apparatus for uploading content from a device to a remote network location
US8707369B2 (en) * 2006-03-01 2014-04-22 Tivo Inc. Recommended recording and downloading guides
KR20090006267A (ko) * 2007-07-11 2009-01-15 (주) 엘지텔레콤 서적의 일부 내용에 대응되는 콘텐츠 송수신 시스템 및제어방법과, 그 시스템에 사용되는 이동통신 단말기
GB2452508A (en) * 2007-09-05 2009-03-11 Sony Corp Generating a three-dimensional representation of a sports game
US9195898B2 (en) * 2009-04-14 2015-11-24 Qualcomm Incorporated Systems and methods for image recognition using mobile devices
WO2012108904A2 (en) * 2011-02-11 2012-08-16 Lightspeed Vt Llc System and method for remote presentation provision

Also Published As

Publication number Publication date
KR20110057919A (ko) 2011-06-01
US20120314043A1 (en) 2012-12-13
WO2011065680A2 (en) 2011-06-03
WO2011065680A3 (en) 2011-10-20

Similar Documents

Publication Publication Date Title
WO2019120068A1 (zh) 缩略图显示控制方法及移动终端
CN103634559B (zh) 用于基于消息收发器的视频通话服务的移动设备和方法
CN103944963B (zh) 数据同步方法、装置、设备及系统
KR101601280B1 (ko) 일반 물체를 이용한 멀티미디어 컨텐츠 관리 방법
CN106804000A (zh) 直播回放方法及装置
JP7393541B2 (ja) ビデオ表示方法、電子機器及び媒体
CN106506448A (zh) 直播显示方法、装置及终端
KR20110100414A (ko) 컨텐츠 전송을 위한 유저 인터페이스를 디스플레이하는 디지털 기기 및 그의 유저 인터페이스 디스플레이 방법
KR20180133743A (ko) 이동 단말기 및 그 제어 방법
JP2016521418A (ja) オブジェクトが挿入された画像を生成して編集する方法及びその装置
CN105488145B (zh) 网页内容的显示方法、装置及终端
CN105657546A (zh) 多媒体文件播放方法、装置及终端
CN111159449B (zh) 一种图像显示方法及电子设备
CN109618192B (zh) 播放视频的方法、装置、系统和存储介质
KR20200091188A (ko) 전자 장치 및 그의 컨텐트 제공 방법
CN107169060A (zh) 终端中的图片处理方法、装置及终端
US10972811B2 (en) Image processing device and image processing method
CN106528632A (zh) 直播界面调整方法、直播界面调整装置和电子设备
JP2012156793A (ja) 情報端末、データ管理方法、関連付け定義データ、およびプログラム
US10976895B2 (en) Electronic apparatus and controlling method thereof
CN106527886A (zh) 图片显示方法及装置
CN107872620A (zh) 视频录制方法及装置
CN110418670B (zh) 服务器装置以及存储介质
CN106980449A (zh) 图像切换过渡效果的呈现方法及装置
KR102113503B1 (ko) 전자 장치 및 전자 장치에서 컨텐츠 제공 방법

Legal Events

Date Code Title Description
AMND Amendment
E902 Notification of reason for refusal
AMND Amendment
E601 Decision to refuse application
AMND Amendment
X701 Decision to grant (after re-examination)
GRNT Written decision to grant
FPAY Annual fee payment

Payment date: 20190214

Year of fee payment: 4