KR20100080386A - 물리적 객체를 물리적 실생활에서 가상 세계로 이송하는 시스템 및 방법 - Google Patents

물리적 객체를 물리적 실생활에서 가상 세계로 이송하는 시스템 및 방법 Download PDF

Info

Publication number
KR20100080386A
KR20100080386A KR1020090130141A KR20090130141A KR20100080386A KR 20100080386 A KR20100080386 A KR 20100080386A KR 1020090130141 A KR1020090130141 A KR 1020090130141A KR 20090130141 A KR20090130141 A KR 20090130141A KR 20100080386 A KR20100080386 A KR 20100080386A
Authority
KR
South Korea
Prior art keywords
component
physical object
virtual world
physical
data
Prior art date
Application number
KR1020090130141A
Other languages
English (en)
Other versions
KR101087390B1 (ko
Inventor
리타 우하이비
믹 에이치. 바우맨
로버트 크나우에하세
Original Assignee
인텔 코오퍼레이션
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 인텔 코오퍼레이션 filed Critical 인텔 코오퍼레이션
Publication of KR20100080386A publication Critical patent/KR20100080386A/ko
Application granted granted Critical
Publication of KR101087390B1 publication Critical patent/KR101087390B1/ko

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/002—Specific input/output arrangements not covered by G06F3/01 - G06F3/16
    • A—HUMAN NECESSITIES
    • A63—SPORTS; GAMES; AMUSEMENTS
    • A63F—CARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
    • A63F13/00—Video games, i.e. games using an electronically generated display having two or more dimensions
    • A63F13/20—Input arrangements for video game devices
    • A—HUMAN NECESSITIES
    • A63—SPORTS; GAMES; AMUSEMENTS
    • A63F—CARD, BOARD, OR ROULETTE GAMES; INDOOR GAMES USING SMALL MOVING PLAYING BODIES; VIDEO GAMES; GAMES NOT OTHERWISE PROVIDED FOR
    • A63F13/00—Video games, i.e. games using an electronically generated display having two or more dimensions
    • A63F13/60—Generating or modifying game content before or while executing the game program, e.g. authoring tools specially adapted for game development or game-integrated level editor
    • A63F13/65—Generating or modifying game content before or while executing the game program, e.g. authoring tools specially adapted for game development or game-integrated level editor automatically by game devices or servers from real world data, e.g. measurement in live racing competition
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/20—Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
    • G06F16/29—Geographical information databases
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/011—Arrangements for interaction with the human body, e.g. for user immersion in virtual reality
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0481—Interaction techniques based on graphical user interfaces [GUI] based on specific properties of the displayed interaction object or a metaphor-based environment, e.g. interaction with desktop elements like windows or icons, or assisted by a cursor's changing behaviour or appearance
    • G06F3/04815—Interaction with a metaphor-based environment or interaction object displayed as three-dimensional, e.g. changing the user viewpoint with respect to the environment or object
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0484—Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T11/00—2D [Two Dimensional] image generation
    • G06T11/001—Texturing; Colouring; Generation of texture or colour
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T11/00—2D [Two Dimensional] image generation
    • G06T11/20—Drawing from basic elements, e.g. lines or circles
    • G06T11/206—Drawing of charts or graphs
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T19/00—Manipulating 3D models or images for computer graphics

Abstract

물리적 실생활로부터의 물리적 객체를 가상 세계로 이송하는 시스템 및 방법이 개시된다. 간략히 설명하면, 이 방법은 실세계에서 구축된 객체로부터 특징 및 구조 데이터를 수신하는 단계를 포함한다. 특징 및 구조 데이터는 객체의 특징 및 구조를 감지하기 위해 객체의 부근에 배치된 다수의 센서를 이용하여 객체로부터 획득된다. 객체의 특징 및 구조 데이터는 가상 세계에서 객체의 등가 표현물을 생성하는 데 필요한 코드를 생성하는 데 사용된다.
물리적 객체, 가상 세계, 비주얼 컴퓨팅, 모듈형 객체, 객체의 특징

Description

물리적 객체를 물리적 실생활에서 가상 세계로 이송하는 시스템 및 방법{SYSTEMS AND METHODS FOR TRANSPORTING PHYSICAL OBJECTS FROM REAL PHYSICAL LIFE INTO VIRTUAL WORLDS}
본 발명은 일반적으로 비주얼 컴퓨팅에 관한 것이다. 특히, 본 발명은 모듈형 물리적 객체를 물리적 실생활에서 가상 세계로 이송(transport)하는 능력에 관한 것이다.
오늘날, 가상 세계에서 일어나는 큰 비율의 금전의 이동 및 거래는 기본적으로 객체를 사고 파는 것과 관련된다. 객체의 생성은 가상 세계 사용자들 중 소수 비율만이 수행할 수 있는 고도로 복잡한 작업이라고 간주된다. 우리는 객체를 먼저 설계한 다음 이 객체를 가상 세계에서 규정하여야 했을 것이다. 흔히 우리는 가상 세계 사용자들이 예술적인 디자이너일 필요가 있을 뿐만 아니라 가상 세계에서 눈으로 즐기는 객체를 제공하는 모듈을 프로그램하는 프로그래밍 기술을 상당히 뛰어나게 장악하고 있을 필요가 있다고 생각한다.
본 명세서에서 포함되고 명세서의 일부를 구성하는 첨부 도면은 본 발명의 실시예를 예시하며, 또한 상세한 설명과 함께 본 발명의 원리를 설명하고 본 기술 분야에서 숙련자가 본 발명을 만들고 이용하게 할 수 있게 해주는 역할을 한다. 도면에서, 같은 참조부호는 대체로 동일하고, 기능적으로 유사, 및/또는 구조적으로 유사한 요소를 나타낸다. 도면은 처음 나오는 요소의 해당 참조부호 중 가장 왼쪽의 숫자로 표시된다.
본 발명이 특정한 응용예의 예시적인 실시예를 참조하여 본 명세서에서 기술되지만, 본 발명은 그것으로 제한되지 않음을 인지하여야 한다. 본 명세서에서 제공된 지침에 접근하는 관련 기술의 숙련자들은 본 발명의 범주 내에서 추가적인 변형, 응용 및 실시예, 그리고 본 발명의 실시예가 상당히 유용해질 부가적인 분야를 인식할 것이다.
명세서에서, 본 발명의 "일 실시예", "실시예" 또는 "다른 실시예"에 대한 참조는 그 실시예와 관련하여 기술된 특정한 특성, 구조 또는 특징이 본 발명의 적어도 한 실시예에 포함된다는 것을 의미한다. 그래서, 명세서의 여러 곳에서 나오는 "일 실시예에서" 또는 "실시예에서"라는 구문이 나타나더라도 반드시 모두 동일한 실시예를 지칭하는 것은 아니다.
앞에서 지적한 바와 같이, 가상 세계에서 객체를 생성하기는 매우 어려울 수 있으며, 단지 소수 비율의 가상 세계 사용자들만이 객체의 멘탈 디스크립션(mental description)으로부터 가상 세계에서 객체를 구현하는 것으로 이동할 수 있다. 본 발명의 실시예는 광범위한 관중에게 접근가능한 가상 세계 객체에 대한 객체 생성 을 하게 해준다. 사용자가 생각한 것을 가상 객체로 직접 변환하는 방법을 이용하여 객체를 생성하여야 하는 대신, 사용자는 이제 가상 객체로의 자동 변환을 통해 생각한 것을 실세계 객체로 진행할 수 있다. 이것은 객체의 실세계 모델을 구성하는 구성 키트와 객체의 실세계 모델의 특징 및 구조를 감지하는 지능형 센서를 이용하여 이러한 정보를 컴퓨팅 디바이스의 소프트웨어 모듈에 전달함으로써 성취된다. 그러면 소프트웨어 모듈은, 이것으로 한정되지는 않지만, 세컨드 라이프(Second Life)와 같은 가상 세계에서 사용하기 위한 가상 객체로 이 정보를 변환할 것이다. 그래서, 본 발명의 실시예는 사용자가 실세계에서 객체를 생성하게 하고 그 실세계 객체를 자동으로 가상 객체에 이전되게 함으로써 물리적 세계와 가상 세계 간의 가교(bridge)를 생성한다.
비록 본 발명이 세컨드 라이프에 대한 가상 세계 객체를 생성하는 것에 관하여 기술될지라도, 본 발명은 세컨드 라이프인 가상 세계 객체로 제한되지 않는다. 사실상, 본 발명은 다른 가상 세계에 대한 가상 세계 객체의 생성에도 또한 적용될 수 있다.
도 1은 본 발명의 실시예에 따라서 사용자가 물리적 실생활 객체를 생성하고 그 물리적 실생활 객체를 가상 세계 객체로 이송할 수 있게 하는 방법을 설명하는 흐름도(100)이다. 본 발명은 본 명세서에서 흐름도(100)에 대하여 기술한 실시예로 한정되지 않는다. 오히려, 본 명세서에 제공된 교시를 읽어본 후 관련 기술 분야에서 숙련된 자들에게는 다른 기능 흐름도가 본 발명의 범주 내에 있다는 것이 명백할 것이다. 본 프로세스는 블록(102)에서 시작하여 바로 블록(104)으로 진행 한다.
블록(104)에서, 사용자는 실제 공간에서 구성 키트(construction kit)를 이용하여 객체를 구성하는 것이 가능해진다. 구성 키트는 본질적으로 서로 상호연결하는 능력을 갖는 다수의 빌딩 블록들을 포함한다는 점에서 LEGO® 집합과 유사할 수 있다. 구성 키트는 실생활 객체를 닮은(resembling) 모듈형 조각들을 포함한다. 일 실시예에서, 모듈형 컴포넌트는 인식을 용이하게 하기 위하여 주석이 달려 있다. 예를 들어, 모듈형 컴포넌트는 본 발명의 다른 컴포넌트에 의한 인식을 용이하게 하기 위하여 텍스처, 패턴, 비주얼 또는 적외선 페인트로 칠해진 코너 마킹(corner markings) 등을 가질 수 있다.
도 2a는 본 발명의 실시예에 따라서 집 또는 어떤 다른 형태의 빌딩을 건축하는데 사용될 수 있는 구성 키트의 예시적인 모듈형 조각들 또는 컴포넌트들을 예시한다. 모듈형 조각은 창(202), 굴뚝(204), 출입구(206), 문(208), 지붕(210), 및 벽돌벽(212)을 포함한다. 사용자는 이들 각각의 모듈형 컴포넌트들 중 적어도 하나 이상을 객체, 예를 들어, 가상 세계에서 사용하기 위한 집과 같은 객체로 조립할 수 있다. 도 2b는 본 발명의 실시예에 따라서 구성 키트의 모듈형 조각들(202, 204, 206, 208, 210 및 212)을 이용하여 실세계에서 건축된 예시적인 집(220)을 예시한다.
일 실시예에서, 각각의 모듈형 컴포넌트 또는 조각은 사전에 규정될 수 있다. 예를 들어, 각각의 모듈형 컴포넌트는 모듈형 컴포넌트의 라이브러리의 일부일 수 있으며, 이때 각각의 모듈형 컴포넌트는 고유 식별자(ID)를 갖는다. 예를 들어, 일 실시예에서, 정사각형을 나타내는 모듈형 컴포넌트는 "1"로 시작하거나 "S"로 시작한 다음 고유 일련번호가 붙는 고유 ID를 이용하여 식별될 수 있다. 본 예에 있어서, "1" 또는 "S"라는 첫번째 문자는 그 모듈형 컴포넌트가 정사각형임을 나타낼 수 있다. "2" 또는 "R"로 시작하는 모듈형 컴포넌트는 직사각형 컴포넌트를 나타낼 수 있다. "3" 또는 "C"로 시작하는 모듈형 컴포넌트는 원형 컴포넌트를 나타낼 수 있다. 다시 말해서, 고유 ID의 첫번째 문자는 모듈형 컴포넌트의 형상을 나타내며 나머지 문자들은 모듈형 컴포넌트의 고유 일련 번호를 나타낸다.
다른 실시예에서, 모듈형 컴포넌트는 형상, 컬러, 텍스처, 및 크기, 뒤이어 붙는 고유 일련 번호에 따라서 식별될 수 있다. 고유 ID의 첫번째 문자는 모듈형 컴포넌트의 형상을 나타낼 수 있다. 고유 ID의 두번째 문자는 모듈형 컴포넌트의 컬러를 나타낼 수 있다. 고유 ID의 세번째 문자는 모듈형 컴포넌트의 텍스처를 나타낼 수 있다. 고유 ID의 네번째 문자는 모듈형 컴포넌트의 크기를 나타낼 수 있다. 예를 들어, 부드러운 텍스처를 갖는 5인치 적색 정사각형은 SRS576942로서 식별될 수 있으며, 여기서 첫번째 문자는 정사각형의 형상을 나타내고, 두번째 문자는 컬러로서 적색을 나타내고, 세번째 문자는 텍스처로서 부드러운 것을 나타내며, 네번째 문자는 크기가 5인치임을 나타내며, 나머지 문자들은 일련번호 76942를 나타낸다.
또 다른 실시예에서, 모듈형 컴포넌트는, 예를 들어, 76942와 같은 고유 어드레스 또는 일련번호를 이용하여 표현될 수 있다. 고유 어드레스 또는 일련번호는 모듈형 컴포넌트의 특징을 고유하게 규정하는 라이브러리 내 컴포넌트에 맵핑될 수 있다.
도 1을 다시 참조하면, 블록(106)에서, 일단 사용자가 실세계에서 객체를 구축하면, 객체의 상이한 특징과 구조를 감지하기 위하여 객체의 부근에 지능형 센서가 배치된다. 센서는 이 정보를 무선 통신 채널을 통하여 컴퓨팅 디바이스에서 실행하는 소프트웨어 모듈에 전달한다. 센서의 개수와 각 센서의 위치는 감지되는 객체의 구조의 외형을 구별하기에 충분하여야 한다.
센서는 비주얼(카메라 기반), 적외선 또는 음성에 기반할 수 있고, 또는 센서가 전달될 객체의 특징과 구조를 적절하게 감지하게 해주는 어떤 다른 감지 기술에 기반한 것일 수 있다. 도 3은 본 발명의 실시예에 따른 센서(300)의 예시적인 블록도를 예시한다. 센서(300)는 물리적 감지 컴포넌트(302), 데이터 합성 컴포넌트(304), 메모리(306), 전송 컴포넌트(308), 및 통신 버스(310)를 포함한다. 물리적 감지 컴포넌트(302), 데이터 합성 컴포넌트(304), 메모리(306), 및 전송 컴포넌트(308)는 통신 버스(310)를 통해 서로 연결된다.
물리적 감지 컴포넌트(302)는 비주얼 센서, 온도 센서, 움직임 센서, 음성 기반 센서, 레이저 센서, 적외선 센서, 이들의 조합, 또는 실세계 객체의 특징과 구조를 적절하게 감지할 수 있는 능력을 가진 임의의 다른 센서 컴포넌트일 수 있다. 데이터 합성 컴포넌트(304)는 소형의 프로세싱 컴포넌트일 수 있다. 일 실시예에서, 데이터 합성 컴포넌트(304)는 물리적 감지 컴포넌트(302)로부터 감지 데이터를 수신하고 그 감지 데이터를 전송 컴포넌트(306)를 통하여 다른 센서(300) 또는 다른 컴퓨팅 디바이스 상의 소프트웨어 모듈로 전송하기 위하여 대기(queue)시 키는 아주 간단한 프로세싱 컴포넌트일 수 있다. 다른 실시예에서, 데이터 합성 컴포넌트(304)는 더 복잡한 프로세싱 컴포넌트일 수 있으며, 이것으로 제한되지 않지만 Intel Corporation에서 제조한 아톰(Atom) 프로세서 또는 컴퓨팅 자원과 성능을 가진 또 다른 소형 프로세서일 수 있다. 메모리는 데이터를 저장하기 위한 불휘발성 메모리 및/또는 휘발성 메모리를 포함할 수 있으며 실세계 객체의 특징과 구조에 관한 실행가능한 명령어를 수행하기 위한 실행가능한 영역을 포함할 수 있다. 전송 컴포넌트(308)는 이것으로 한정되지는 않지만 블루투스, 와이파이(WiFi), 또는 와이맥스(WiMax: Worldwide lnteroperability for Microwave Access)와 같은 무선 통신 기술을 이용할 수 있다.
일 실시예에서, 센서들(300) 중 하나는 다른 센서들(300)과 통신하여 다른 센서들(300)로부터의 데이터를 모두 수신하고 컴퓨팅 디바이스와 통신하여 수신된 데이터를 소프트웨어 모듈에 전달 또는 전송해서 가상 세계 객체로 변환되게 하는 기지국으로서 작용한다. 일 실시예에서, 기지국 센서는 데이터를 소프트웨어 모듈로 전달하기 전에 데이터 합성을 수행하는 보다 실질적인 역할을 수행할 수 있다. 예를 들어, 기지국 센서는 벽에 창문이 있다는 것을 파악할 수 있으며, 소프트웨어 모듈에게 "치수가 X, Y, 및 Z인 창문과 치수가 X1, Y1, 및 Z1인 벽이 있다"라고 알려주는 대신 "치수가 X1, Y1, 및 Z1인 벽과 그 벽의 중간에는 치수가 X, Y, 및 Z인 창문이 있다"라고 말할 수 있다. 기지국 센서는 각 모듈형 컴포넌트의 특징 및 실세계 객체의 구조를 컴퓨팅 디바이스로 전달한다.
도 4는 본 발명의 실시예에 따라서 객체의 부근에 전략적으로 배치된 지능형 센서와 함께 실세계에 구축된 객체를 예시한다. 도 4에 도시된 바와 같이, 집(220)은 지능형 센서들(300)에 의해 둘러싸여 있다. 지능형 센서(300)는 집(220)을 만드는데 사용된 각 모듈형 컴포넌트(202-212)에 기반하여 집(220)의 상이한 특징 및 구조를 감지하는 데 사용된다. 기지국 센서(330)도 역시 도시된다. 기지국 센서(330)는 지능형 센서(300)로부터 데이터를 수집하고 이 데이터를 등가의 가상 객체의 인스턴스화(instantiation)를 가능하게 해주는 소프트웨어 모듈로 전달한다.
도 1을 참조하면, 블록(108)에서, 기지국 센서(330)에 의해 수집된 데이터는 컴퓨팅 디바이스를 통하여 입력으로서 소프트웨어 모듈에 수신된다. 그 다음 본 프로세스는 블록(110)으로 진행한다.
블록(110)에서, 소프트웨어 모듈이 입력으로서 실세계 객체 데이터를 수신한 후 실행되어 실세계 객체에 대한 가상 세계 객체의 등가 표현물(equivalent representation)을 생성하는데 필요한 코드를 생성한다. 생성된 코드의 형태는 객체가 배치될 가상 세계에 의존한다. 일 실시예에서, 맵핑 프로세스는 코드를 획득하는데 사용된다. 객체가 변환될 가상 세계가 선택된다. 실세계 객체로부터의 각 컴포넌트는 선택된 가상 세계의 사전에 규정된 라이브러리 내에서 대응하는 컴포넌트에 맵핑되어 가상 세계 객체에 대한 코드를 획득하게 된다. 실세계 객체의 이미지가 촬영(take)되는 실시예에서, 그 이미지는 선택된 가상 세계의 사전에 규정된 객체 상의 이미지에 맵핑되어 가상 세계 객체에 대한 코드를 획득하게 된다. 실제의 물리적 객체가 기지국 센서에 의해 인식되는 또 다른 실시예에서, 실제의 객체 는 전달되어 선택된 가상 세계 내에서 대응하는 객체 또는 프리미티브(primitive)에 맵핑된다.
일 실시예에서, 생성된 코드는 인스턴스화될 때 예를 들어 세컨드 라이프와 같은 가상 세계 내 가상 객체의 등가 표현물로 만들어지는 결과를 가져온다. 다시 말해서, 코드는 실행될 때 세컨드 라이프 "프림(prims)" 또는 프리미티브를 정확한 배열로 생성하여 실세계 객체를 표현한다. 다른 실시예에서, 코드는 결과적으로 객체의 KML 디스크립션으로 만들어질 수 있다. KML은 그래픽 데이터를 디스플레이하는데 사용된 XML 표준에 기반한 파일 포맷이다. 객체가 사용될 가상 세계에 따라서 다른 코드 포맷이 또한 생성될 수 있다.
도 5는 본 발명의 실시예에 따라서 컴퓨팅 디바이스와 통신하여 실세계 객체 데이터를 컴퓨팅 디바이스로 전송하는 기지국 센서를 예시하는 도면이다. 도 5는 컴퓨팅 디바이스(502)에 무선으로 연결된 기지국 센서(330)를 도시한다. 컴퓨팅 디바이스(502)는 기지국 센서(330)로부터 수신된 실세계 객체에 대한 등가의 가상 세계 객체의 디스플레이를 도시한다.
또 다른 실시예에서, 모듈형 컴포넌트는 그 모듈형 컴포넌트에 삽입된 지능형 센서를 포함할 수 있다. 이러한 예에서, 지능형 센서는 모듈형 컴포넌트의 특징과 구조를 규정하는 정보를 포함할 수 있다. 이들 센서는 도 3을 참조하여 앞에서 설명되었으며, 또한 자가구성 센서로서 규정될 수 있다. 그래서, 센서가 삽입된 각 모듈형 컴포넌트는 그의 특징과 구조를 알고 있으며, 함께 연결될 때, 상대적인 위치와 형상의 라이브러리에서 패턴 인식 또는 간편 추론법(heuristics)을 이 용하여 감지 동작(sense-making)을 수행하여, 형성되는 복합 형상을 검출할 수 있다.
도 6a는 본 발명의 실시예에 따라서 지능형 센서가 삽입된 모듈형 컴포넌트를 예시한다. 도 6a는 창문(602), 굴뚝(604), 출입구(606), 문(608), 지붕(610), 및 벽돌 벽(612)을 도시한다. 각 모듈형 컴포넌트(602, 604, 606, 608, 610 및 612)는 삽입된 지능형 센서(614)를 포함한다. 앞에서 설명한 바와 같이, 지능형 센서(614)는 각 모듈형 컴포넌트(602, 604, 606, 608, 610 및 612)가 그 자신의 특징과 구조를 알게 해준다. 이러한 모듈형 컴포넌트가 연결될 때, 이들은 하나의 객체로 자가구성(self-organize)하기 시작한다. 예를 들어, 도 6b는 모듈형 컴포넌트들(602-612)이 연결될 때 자가구성하여 집(616)이라는 조립체를 검출하는 것을 도시한다.
도 6c는 모듈형 컴포넌트들(618)이 자가구성하여 벽이라는 조립체를 검출하는 것을 예시한다. 도 6c에서, 다수의 벽돌(618)이 연결된다. 각 벽돌(618)은 삽입된 지능형 센서(620)를 포함한다. 삽입된 지능형 센서는 앞에서 도 3을 참조하여 설명되었다. 자가구성 센서들을 갖는 모듈형 컴포넌트들이 그들의 특징, 구조, 위치 및 그들이 상호연결하고 있는 영역들을 통신하므로, 이들 모듈형 컴포넌트는 이들이 전체로서 표현하는 것에 관하여 보다 큰 그림을 검출하기 시작한다. 도 6c에서 알 수 있는 바와 같이, 벽돌(618)은 조립될 때 벽(622)을 표현한다.
도 7a는 본 발명의 실시예에 따라서 모듈형 컴포넌트에 삽입된 자가구성 센서를 이용하여 가상 객체를 구축하는 예시적인 방법을 설명하는 흐름도(700)이다. 본 발명은 본 명세서에서 흐름도(700)에 대하여 기술된 실시예로 제한되지 않는다. 오히려, 본 명세서에 제공된 교시를 읽어본 후 관련 기술의 숙련자에게는 다른 기능적인 흐름도가 본 발명의 범주 내에 있다는 것이 명백할 것이다. 본 프로세스는 블록(702)에서 시작하여, 바로 블록(704)으로 진행한다.
블록(704)에서, 삽입된 자가구성 센서를 갖는 모듈형 컴포넌트는 사용자에 의해 실세계에서 조립되어 객체를 형성한다. 그 다음 본 프로세스는 블록(706)으로 진행한다.
블록(706)에서, 삽입된 자가구성 센서는 모듈형 컴포넌트들이 연결될 때 이들이 전체로서 표현하는 것에 관하여 보다 큰 그림을 전달하기 위하여 이 모듈형 컴포넌트들이 자기들끼리 통신하여 그들 각각의 특징(형상, 컬러, 텍스처, 크기 등), 구조, 위치 및 이들이 상호연결하는 영역들에 관한 정보를 교환하도록 한다. 다시 말하면, 상대적인 위치 및 형상의 라이브러리에서 패턴 인식 또는 간편 추론법을 이용하는 감지 동작이 수행된다. 감지 동작은, 예를 들어, 벽, 집 등과 같은 공통 복합 형상, 그리고, 예를 들어, 벽돌, 지붕 널판지(shingle), 카펫, 페인트의 컬러 등과 같은 텍스처를 검출하게 해준다. 그 다음 본 프로세스는 블록(708)으로 진행한다.
블록(708)에서, 일단 감지 동작을 통해 공통 복합 형상이 결정되었다면, 공통 복합 형상은 선택한 가상 세계에서 대응하는 복합 형상에 맵핑되어 그 객체에 대한 대응하는 코드를 획득한다. 그 다음 본 프로세스는 블록(710)으로 진행한다.
블록(710)에서, 객체는 가상 세계 내에서 인스턴스화되고 사용자에게 제시된 다. 그런 다음 본 프로세스는 판단 블록(712)으로 진행한다.
판단 블록(712)에서, 가상 객체의 해석(interpretation)이 실세계 객체와 등가인지 여부가 판단된다. 만일 사용자가 가상 객체 등가물이 만족스럽지 못하다고 확인하면(예컨대, 보트를 크리스마스 트리로 해석한다면), 본 프로세스는 블록(714)으로 진행한다.
블록(714)에서, 사용자는 객체를 클릭함으로써 가상 객체, 또는 가상 객체의 적어도 일부를 무효화(override)할 수 있다. 객체를 클릭하게 되면 사용자에게 사전에 규정된 라이브러리를 브라우징하는 옵션을 허용하여 보다 나은 표현물일 수 있는 다른 가상 세계 객체를 선택하게 한다. 보다 나은 표현물로서 다른 객체의 선택이 노트(note)되고 이 선택은 센서에 의해 제시된 데이터를 사전에 규정된 라이브러리로부터 사용자가 선택한 객체와 연관시키기 위한 학습 메커니즘(learning mechanism)으로서 사용된다. 그래서, 다음번에 사용자가 동일한 객체를 실세계에서 구축할 때, 사전에 규정된 라이브러리로부터 사용자가 선택한 가상 객체가 인스턴스화될 것이다.
판정 블록(712)으로 되돌아가서, 만일 가상 객체의 해석이 실세계 객체와 등가인 것으로 판단되면, 본 프로세스는 블록(716)으로 진행하고, 여기서 프로세스는 종료한다.
대안의 실시예에서, 사용자는 사용자가 가상 세계에서 보고자하는 객체의 화상 또는 일련의 화상을 촬영할 수 있으며 그 객체를 가상 세계의 객체로 변환시킬 수 있다. 일 실시예에서, 사용자는 카메라를 사용하여 화상(들)을 캡처(capture) 할 수 있다. 다른 실시예에서, 사용자는 책, 잡지 등에서 화상(들)을 획득할 수 있다. 도 7b는 본 발명의 실시예에 따라서 사용자가 실세계의 객체의 화상 또는 일련의 화상으로부터 가상 세계 객체를 생성할 수 있도록 하는 방법을 설명하는 흐름도(720)이다. 본 발명은 흐름도(720)에 대하여 본 명세서에서 기술된 실시예로 제한되지 않는다. 오히려, 본 명세서에 제공된 교시를 읽어본 후 관련 기술의 숙련자에게는 다른 기능 흐름도가 본 발명의 범주 내에 있다는 것이 명백할 것이다. 본 프로세스는 블록(722)에서 시작하여, 바로 블록(724)으로 진행한다.
블록(724)에서, 사용자는 사용자가 가상 세계에서 보고자하는 객체의 화상 또는 일련의 화상을 획득할 수 있다. 일 실시예에서, 사용자는 개인적으로 객체의 화상 또는 객체의 일련의 화상을 촬영함으로써 객체를 구할 수 있다. 예를 들어, 사용자는 박물관을 관람할 수 있고 또는 몰(mall)에서 쇼핑할 수 있으며 이들의 가상 세계에서 갖고자 하는 어떤 고유한 것을 찾을 수 있다. 그 다음 사용자는 객체의 화상 또는 객체의 일련의 화상을 다른 각도에서 촬영할 수 있다. 일 실시예에서, 화상은 저해상도로 촬영될 수 있으며, 그럼으로써 사용자가 화상을 촬영하기 위해 사용한 카메라의 형태에 상당한 융통성을 주게 된다. 예를 들어, 사용자는 셀폰에 내장된 저품질 카메라를 사용할 수 있다. 사용자는 저해상도 카메라를 사용하는 것으로 제한되지 않으며, 고해상도 카메라도 사용할 수 있다.
다른 실시예에서, 사용자는 가상 세계에서 갖고자하는 객체의 화상을 잡지, 책 등에서 찾을 수 있다. 그 다음 본 프로세스는 블록(726)으로 진행한다.
블록(726)에서, 카메라로부터 획득한 화상은 입력으로서 컴퓨팅 디바이스 상 의 소프트웨어 모듈로 전달된다. 이것은 관련 기술의 숙련자에게 잘 알려진 방식으로 무선 연결 또는 유선 연결을 통하여 이루어질 수 있다. 화상을 책, 잡지 등에서 획득하는 실시예에서, 화상은 컴퓨팅 디바이스로 스캔되어 소프트웨어 모듈로의 입력으로서 사용될 수 있다. 그런 다음 본 프로세스는 블록(728)으로 진행한다.
블록(728)에서, 화상은 소프트웨어 모듈을 이용하여 재구성되어 가상 객체를 생성한다. 소프트웨어 모듈은 이미지와 결합된 그래픽 및 시각화(visualization) 기술 및 객체 인식 기술을 사용하여 물리적 객체를 가상 세계의 등가/유사 객체로 맵핑한다. 대안의 실시예에서, 사전에 규정된 객체의 라이브러리는 실세계 객체를 가상 객체의 라이브러리 내 아주 많이 닮은 객체로 맵핑하는데 사용될 수 있다. 그런 다음 본 프로세스는 블록(730)으로 진행하고, 여기서 프로세스는 종료된다.
본 발명의 실시예는 하드웨어, 소프트웨어, 또는 이들의 조합을 이용하여 구현될 수 있으며 하나 이상의 컴퓨터 시스템이나 다른 프로세싱 시스템으로 구현될 수 있다. 실제로, 일 실시예에서, 본 발명은 본 명세서에 기술된 기능을 실행할 수 있는 하나 이상의 컴퓨터 시스템과 관련된다. 컴퓨터 시스템(800)의 구현예는 도 8에 도시된다. 각종 실시예가 예시적인 컴퓨터 시스템(800)에 관하여 기술된다. 이 설명을 읽어본 다음, 관련 기술의 숙련자들은 다른 컴퓨터 시스템 및/또는 컴퓨터 아키텍처를 이용하여 본 발명을 구현하는 방법을 인식할 것이다.
컴퓨터 시스템(800)은 프로세서(803)와 같은 하나 이상의 프로세서를 포함한다. 프로세서(803)는 통신 버스(802)와 접속된다. 컴퓨터 시스템(800)은 또한 메 인 메모리(805), 바람직하게는 랜덤 액세스 메모리(RAM)를 포함하며, 또한 보조 메모리(810)를 포함할 수 있다. 보조 메모리(810)는, 예를 들어, 하드 디스크 드라이브(812) 및/또는 플로피 디스크 드라이브, 자기 테이프 드라이브, 광디스크 드라이브 등을 대표하는 제거가능 저장 드라이브(814)를 포함할 수 있다. 제거가능 저장 드라이브(814)는 공지의 방식으로 제거가능 저장 유닛(818)으로부터 판독하고 및/또는 제거가능 저장 유닛(818)에 기록한다. 제거가능 저장 유닛(818)은 제거가능 저장 드라이브(814)에 의해 판독되고 제거가능 저장 드라이브에 기록되는 플로피 디스크, 자기 테이프, 광디스크 등을 나타낸다. 인식하는 바와 같이, 제거가능 저장 유닛(818)은 컴퓨터 소프트웨어 및/또는 데이터를 저장하는 컴퓨터 사용가능 저장 매체를 포함한다.
대안의 실시예에서, 보조 메모리(810)는 컴퓨터 프로그램 또는 다른 명령어가 컴퓨터 시스템(800)에 로드되게 해주는 다른 유사한 수단을 포함할 수 있다. 그러한 수단은, 예를 들어, 제거가능한 저장 유닛(822) 및 인터페이스(820)를 포함할 수 있다. 이들의 예는 (비디오 게임 기기에 있는 것과 같은) 프로그램 카트리지 및 카트리지 인터페이스, (EPROM(erasable programmable read-only memory) 또는 PROM(programmable read-only memory)와 같은) 제거가능한 메모리 칩과 그와 연관된 소켓, 그리고 소프트웨어 및 데이터가 제거가능 저장 유닛(822)에서 컴퓨터 시스템(800)으로 전달되게 하는 다른 제거가능 저장 유닛(822) 및 인터페이스(820)를 포함할 수 있다.
컴퓨터 시스템(800)은 또한 통신 인터페이스(824)를 포함할 수 있다. 통신 인터페이스(824)는 컴퓨터 시스템(800)과 외부 디바이스 사이에서 소프트웨어 및 데이터가 전달되게 해준다. 통신 인터페이스(824)의 예는 모뎀, (이더넷 카드와 같은) 네트워크 인터페이스, 통신 포트, PCMCIA(personal computer memory card international association) 슬롯 및 카드, 무선 LAN(local area network) 인터페이스 등을 포함할 수 있다. 통신 인터페이스(824)를 통해 전송된 소프트웨어 및 데이터는 통신 인터페이스(824)에 의해 수신될 수 있는 전자, 전자기, 광 또는 다른 신호일 수 있는 신호(828)의 형태를 갖는다. 이들 신호(828)는 통신 경로(즉, 채널)(826)를 통해 통신 인터페이스(824)에 제공된다. 채널(826)은 신호(828)를 운반하며 와이어 또는 케이블, 광섬유, 전화선, 셀룰러 폰 링크, 무선 링크, 및 다른 통신 채널을 이용하여 구현될 수 있다.
본 명세서에서, 용어 "컴퓨터 프로그램 제품"은 제거가능한 저장 유닛(818, 822) 및 신호(828)를 지칭한다. 이들 컴퓨터 프로그램 제품은 소프트웨어를 컴퓨터 시스템(800)에 제공하기 위한 수단이다. 본 발명의 실시예는 그와 같은 컴퓨터 프로그램 제품과 관련된다.
컴퓨터 프로그램(컴퓨터 제어 로직이라고도 함)은 메인 메모리(805) 및/또는 보조 메모리(810)에 저장되며, 및/또는 컴퓨터 프로그램 제품에 저장된다. 컴퓨터 프로그램은 또한 통신 인터페이스(824)를 통하여 수신될 수 있다. 그러한 컴퓨터 프로그램은, 실행될 때, 컴퓨터 시스템(800)으로 하여금 본 명세서에 기술된 바와 같은 본 발명의 특징을 수행하게 할 수 있다. 특히, 컴퓨터 프로그램은, 실행될 때, 프로세서(803)로 하여금 본 발명의 실시예의 특징을 수행하게 할 수 있다. 따 라서, 그러한 컴퓨터 프로그램은 컴퓨터 시스템(800)의 컨트롤러를 나타낸다.
본 발명이 소프트웨어를 이용하여 구현되는 실시예에서, 소프트웨어는 컴퓨터 프로그램 제품에 저장될 수 있으며 제거가능 저장 드라이브(814), 하드 드라이브(812) 또는 통신 인터페이스(824)를 이용하여 컴퓨터 시스템(800)에 로드될 수 있다. 제어 로직(소프트웨어)은 프로세서(803)에 의해 실행될 때 프로세서(803)로 하여금 본 명세서에서 기술된 바와 같은 본 발명의 하나 이상의 기능을 수행하도록 한다.
다른 실시예에서, 기본적으로 본 발명은, 예를 들어, 주문형 반도체(ASIC)와 같은 하드웨어 컴포넌트를 이용하여 하드웨어로 구현된다. 본 명세서에서 기술된 기능을 수행하기 위한 하드웨어 상태 머신(들)의 구현은 관련 기술의 숙련자에게 자명할 것이다. 또 다른 실시예에서, 본 발명은 하드웨어 및 소프트웨어의 조합을 이용하여 구현된다.
앞에서 본 발명의 각종 실시예가 기술되었지만, 이 실시예들은 단지 예를 들어 제시된 것일 뿐이지 제한하는 것은 아님을 이해해야 한다. 본 기술 분야에서 숙련자라면 첨부의 특허청구범위에 규정된 바와 같은 본 발명의 정신과 범주를 벗어나지 않고 형태와 세부사항에서 여러 변경이 이루어질 수 있음을 알 것이다. 그러므로, 본 발명의 범위와 범주는 전술한 예시적인 실시예의 어떤 것으로도 제한되지 않아야 하며, 다음의 특허청구범위 및 이들의 등가물에 따라서 규정되어야 한다.
도 1은 본 발명의 실시예에 따라서 사용자가 물리적 실생활 객체를 생성할 수 있고 그 물리적 실생활 객체를 가상 세계 객체로 이송할 수 있게 하는 방법을 설명하는 흐름도.
도 2a는 본 발명의 실시예에 따라서 집 또는 어떤 다른 형태의 빌딩을 건축하는데 사용될 수 있는 구성 키트의 예시적인 모듈형 조각들 또는 컴포넌트들을 예시한 도면.
도 2b는 본 발명의 실시예에 따라서 구성 키트의 모듈형 컴포넌트를 이용하여 실세계에서 건축된 예시적인 집을 예시한 도면.
도 3은 본 발명의 실시예에 따른 센서의 예시적인 블록도.
도 4는 본 발명의 실시예에 따라서 객체의 특징과 구조를 감지하기 위해 객체의 주변에 배치된 지능형 센서를 구비한 실세계에서 구축된 객체를 예시한 도면.
도 5는 본 발명의 실시예에 따라서 컴퓨팅 디바이스와 통신하여 실세계 객체 데이터를 컴퓨팅 디바이스로 전송하는 기지국 센서를 예시한 도면.
도 6a는 본 발명의 실시예에 따라서 자가구성 센서가 삽입된 모듈형 물리적 객체들을 예시한 도면.
도 6b는 집이라는 조립체를 인지하기 위해 자가구성하는 연결된 모듈형 컴포넌트를 예시한 도면.
도 6c는 벽이라는 조립체를 인지하기 위해 자가구성하는 연결된 모듈형 컴포넌트를 예시한 도면.
도 7a는 본 발명의 실시예에 따라서 모듈형 컴포넌트에 삽입된 자가구성 센서를 이용하여 가상 객체를 구축하는 예시적인 방법을 설명하는 흐름도.
도 7b는 본 발명의 실시예에 따라서 사용자가 카메라를 사용하여 실세계의 객체를 촬영한 화상 또는 일련의 화상으로부터 가상 세계 객체를 생성할 수 있게 하는 방법을 설명하는 흐름도.
도 8은 본 발명의 실시예의 소정 양태가 구현될 수 있는 예시적인 컴퓨터 장치를 예시하는 블록도.
<도면의 주요 부분에 대한 부호의 설명>
220: 집
300: 지능형 센서
330: 기지국 센서
302: 감지 컴포넌트
304: 데이터 합성 컴포넌트
306: 메모리
308: 무선 전송 컴포넌트
802: 통신 버스
803: 프로세서
804: 메인 메모리
805: 보조 메모리
812: 하드 디스크 드라이브
814: 제거가능 저장 드라이브
818: 제거가능 저장 유닛
820: 인터페이스
822: 제거가능 저장 유닛
824: 통신 인터페이스
826: 통신 경로

Claims (30)

  1. 물리적 객체들을 가상 세계로 이송하는(transporting) 방법으로서,
    물리적 객체의 특징 및 구조 데이터를 감지하는 단계; 및
    상기 특징 및 구조 데이터를 컴퓨팅 디바이스에 전송하는 단계
    를 포함하며,
    상기 특징 및 구조 데이터는 가상 세계에서 인스턴스화될 때 가상 세계 객체로 만들어지는 코드로 자동 변환되는 물리적 객체 이송 방법.
  2. 제1항에 있어서, 상기 물리적 객체는 사용자에 의해 구축되며, 함께 연결될 때 물리적 객체로 만들어지는 다수의 모듈형 컴포넌트(modular component)를 포함하는 구성 키트(construction kit)를 갖는 객체를 포함하며, 각각의 상기 모듈형 컴포넌트들은 용이한 인식을 위해 주석이 달린 객체들의 실생활 컴포넌트들(real life components)을 닮은 물리적 객체 이송 방법.
  3. 제2항에 있어서, 각각의 상기 다수의 모듈형 컴포넌트는 고유 식별자를 갖는 사전에 규정된 모듈형 컴포넌트를 포함하며, 상기 주석(annotations)은 텍스처, 패턴들, 컬러, 및 비주얼 또는 적외선 페인트가 칠해진 코너 마킹(corner markings)을 포함하는 물리적 객체 이송 방법.
  4. 제1항에 있어서, 상기 물리적 객체의 특징 및 구조 데이터를 감지하는 단계는, 다수의 지능형 센서를 이용하여 상기 물리적 객체의 특징 및 구조 데이터를 감지하는 단계를 포함하며, 상기 지능형 센서들은 상기 물리적 객체의 근방에 배치되어 상기 객체의 상기 특징 및 구조 데이터를 감지하는 물리적 객체 이송 방법.
  5. 제4항에 있어서, 각각의 상기 다수의 지능형 센서는 감지 컴포넌트, 데이터 합성 컴포넌트, 메모리 컴포넌트, 전송 컴포넌트, 및 상기 감지 컴포넌트와 상기 데이터 합성 컴포넌트와 상기 메모리 컴포넌트와 상기 전송 컴포넌트 사이의 통신을 가능하게 해주는 통신 버스를 포함하는 물리적 객체 이송 방법.
  6. 제5항에 있어서, 상기 감지 컴포넌트는 비주얼 센서, 온도 센서, 움직임 센서, 음성 기반 센서, 레이저 센서, 적외선 센서, 이들의 조합, 또는 상기 물리적 객체의 특징 및 구조를 감지하는 능력을 갖는 임의의 다른 감지 컴포넌트를 포함하는 물리적 객체 이송 방법.
  7. 제5항에 있어서, 상기 데이터 합성 컴포넌트는 상기 감지 컴포넌트로부터 상기 특징 및 구조 데이터를 수신하고 상기 특징 및 구조 데이터를 다른 감지 컴포넌트 또는 컴퓨팅 디바이스 상의 소프트웨어 모듈로 전송하기 위해 대기시키는(queuing) 소형 프로세싱 컴포넌트(tiny processing component)를 포함하며, 상기 소형 프로세싱 컴포넌트는 복잡한 프로세스들을 수행하기에 충분한 계산 능력을 더 포함하는 물리적 객체 이송 방법.
  8. 제5항에 있어서, 상기 전송 컴포넌트는 무선 통신 컴포넌트를 포함하는 물리적 객체 이송 방법.
  9. 제4항에 있어서, 상기 다수의 지능형 센서 중의 하나는 나머지의 다수의 지능형 센서와 통신하기 위한 기지국 센서를 포함하며, 상기 기지국 센서는 상기 나머지의 다수의 지능형 센서로부터의 데이터를 모두 수신하고 상기 데이터를 상기 컴퓨팅 디바이스 상의 소프트웨어 모듈에 입력으로서 전송하는 물리적 객체 이송 방법.
  10. 제9항에 있어서, 상기 기지국 센서는 상기 데이터를 상기 소프트웨어 모듈에 입력으로서 전송하기 전에 데이터 합성을 수행하는 물리적 객체 이송 방법.
  11. 제1항에 있어서, 상기 코드는 상기 객체가 배치될 상기 가상 세계에 기반한 코드를 포함하는 물리적 객체 이송 방법.
  12. 제1항에 있어서, 상기 코드로 자동 변환되는 것은, 상기 가상 세계 객체에 대한 상기 코드를 획득하기 위하여 상기 물리적 객체로부터의 각각의 모듈형 컴포넌트가 가상 세계의 사전에 규정된 라이브러리 내 대응하는 컴포넌트에 맵핑되는 맵핑 프로세스를 포함하는 물리적 객체 이송 방법.
  13. 제1항에 있어서, 상기 실세계 객체의 이미지들이 촬영(take)되는 경우, 상기 코드로 자동 변환되는 것은, 상기 가상 세계 객체에 대한 상기 코드를 획득하기 위해 상기 이미지들이 선택된 가상 세계의 사전에 규정된 객체들 상의 이미지들에 맵핑되는 맵핑 프로세스를 포함하는 물리적 객체 이송 방법.
  14. 제9항에 있어서, 상기 물리적 객체가 상기 기지국 센서에 의해 인식되는 경우, 상기 코드로 자동 변환되는 것은, 상기 물리적 객체가 선택된 가상 세계의 대응하는 객체 또는 프리미티브(primitive)에 맵핑되는 맵핑 프로세스를 포함하는 물리적 객체 이송 방법.
  15. 물리적 객체들을 가상 세계로 이송하는 방법으로서,
    사용자에 의해 조립되어 물리적 객체를 구성하는 삽입된 자가구성(self-organizing) 센서들을 갖는 모듈형 컴포넌트들이 복합 형상들을 검출하는 감지 동작을 수행하기 위해 그들 각각의 특징들, 구조들, 위치들 및 이들이 상호 연결하는 영역들에 관한 정보를 교환할 수 있게 하는 단계;
    상기 복합 형상들을 상기 가상 세계에서 대응하는 복합 형상들에 맵핑하여 상기 객체에 대한 코드를 획득하는 단계;
    상기 가상 세계 내에서 상기 객체에 대한 상기 코드를 인스턴스화하여 가상 객체를 생성하는 단계; 및
    상기 가상 객체를 상기 사용자에게 제시하고, 만일 상기 가상 객체의 해석이 만족스럽지 않으면, 상기 사용자로 하여금 상기 가상 객체를 클릭하게 하여 사전에 규정된 라이브러리를 브라우징하고 상기 물리적 객체를 나타내는 가상 객체를 선택하게 하는 단계
    를 포함하는 물리적 객체 이송 방법.
  16. 제15항에 있어서, 상기 삽입된 자가구성 센서들에 의해 제시된 상기 데이터를 학습 메커니즘으로서 상기 사전에 규정된 라이브러리로부터 상기 선택된 가상 객체와 연관시켜서, 만일 사용자가 동일한 물리적 객체를 다시 구축하는 경우 상기 삽입된 자가구성 센서들에 의해 제시된 상기 데이터는 결과적으로 상기 선택된 가상 객체가 인스턴스화되게 하는 단계를 더 포함하는 물리적 객체 이송 방법.
  17. 제15항에 있어서, 상기 센서들의 특징들은 형상, 컬러, 텍스처, 및 크기를 포함하는 물리적 객체 이송 방법.
  18. 가상 객체들을 생성하는 방법으로서,
    물리적 객체의 하나 이상의 화상(picture)을 컴퓨팅 디바이스 상의 소프트웨어 모듈에 입력으로서 전달하는 단계; 및
    이미지와 결합된 그래픽 및 시각화 기술들과 객체 인식 기술들을 이용하여 상기 물리적 객체를 상기 가상 세계에서 등가의 또는 유사한 객체로 맵핑하는 단계
    를 포함하는 가상 객체 생성 방법.
  19. 제18항에 있어서, 상기 물리적 객체의 상기 하나 이상의 화상은 카메라를 이용하여 촬영되며, 상기 하나 이상의 화상은 무선 또는 유선 접속을 통하여 상기 컴퓨팅 디바이스로 전달되는 가상 객체 생성 방법.
  20. 제18항에 있어서, 상기 물리적 객체의 상기 하나 이상의 화상은 책, 잡지, 또는 어떤 다른 인쇄 출판물 중 하나로부터 획득되며, 상기 하나 이상의 화상은 상기 하나 이상의 화상을 상기 컴퓨팅 디바이스로 스캐닝함으로써 상기 컴퓨팅 디바이스로 전달되는 가상 객체 생성 방법.
  21. 다수의 머신 액세스가능 명령어를 갖는 저장 매체를 포함하는 물품으로서,
    상기 명령어들이 프로세서에 의해 실행될 때, 상기 명령어들은, 물리적 객체의 특징 및 구조 데이터를 감지하고; 및 상기 특징 및 구조 데이터를 컴퓨팅 디바이스로 전송하는 것을 제공하며, 상기 특징 및 구조 데이터는 가상 세계에서 인스턴스화될 때 가상 세계 객체로 만들어지는 코드로 자동 변환되는 물품.
  22. 제21항에 있어서, 상기 물리적 객체는 사용자에 의해 구축되며, 함께 연결될 때 물리적 객체로 만들어지는 다수의 모듈형 컴포넌트를 포함하는 구성 키트를 갖 는 객체를 포함하며, 각각의 상기 모듈형 컴포넌트들은 용이한 인식을 위해 주석이 달린 객체들의 실생활 컴포넌트들을 닮은 물품.
  23. 제21항에 있어서, 각각의 상기 다수의 모듈형 컴포넌트는 고유 식별자를 갖는 사전에 규정된 모듈형 컴포넌트를 포함하며, 상기 주석은 텍스처, 패턴들, 컬러, 및 비주얼 또는 적외선 페인트가 칠해진 코너 마킹을 포함하는 물품.
  24. 제21항에 있어서, 상기 물리적 객체의 특징 및 구조 데이터를 감지하는 명령어들은, 다수의 지능형 센서를 이용하여 상기 물리적 객체의 상기 특징 및 구조 데이터를 감지하는 명령어들을 포함하며, 상기 지능형 센서들은 상기 물리적 객체의 근방에 배치되어 상기 객체의 상기 특징 및 구조 데이터를 감지하는 물품.
  25. 제23항에 있어서, 각각의 상기 다수의 지능형 센서는 감지 컴포넌트, 데이터 합성 컴포넌트, 메모리 컴포넌트, 전송 컴포넌트, 및 상기 감지 컴포넌트와 상기 데이터 합성 컴포넌트와 상기 메모리 컴포넌트와 상기 전송 컴포넌트 사이의 통신을 가능하게 해주는 통신 버스를 포함하는 물품.
  26. 제23항에 있어서, 상기 다수의 지능형 센서 중의 하나는 나머지의 다수의 지능형 센서와 통신하기 위한 적어도 하나의 기지국 센서를 포함하며, 상기 물품은 상기 기지국 센서가 상기 나머지의 다수의 지능형 센서로부터의 데이터를 모두 수 신하고 상기 데이터를 상기 컴퓨팅 디바이스 상의 소프트웨어 모듈에 입력으로서 전송하는 명령어들을 더 포함하는 물품.
  27. 제26항에 있어서, 상기 기지국 센서는 상기 데이터를 상기 소프트웨어 모듈에 입력으로서 전송하기 전에 데이터 합성을 수행하는 물품.
  28. 제21항에 있어서, 상기 코드로 자동 변환되는 것은, 상기 가상 세계 객체에 대한 상기 코드를 획득하기 위하여 상기 물리적 객체로부터의 각각의 모듈형 컴포넌트가 가상 세계의 사전에 규정된 라이브러리 내 대응하는 컴포넌트에 맵핑되는 맵핑 프로세스를 위한 명령어들을 포함하는 물품.
  29. 제21항에 있어서, 상기 실세계 객체의 이미지들이 촬영되는 경우, 코드로 자동 변환되는 것은, 상기 가상 세계 객체에 대한 상기 코드를 획득하기 위해 상기 이미지들이 선택된 가상 세계의 사전에 규정된 객체들 상의 이미지들에 맵핑되는 맵핑 프로세스를 위한 명령어들을 포함하는 물품.
  30. 제26항에 있어서, 상기 물리적 객체가 상기 기지국 센서에 의해 인식되는 경우, 코드로 자동 변환되는 것은, 상기 물리적 객체가 선택된 가상 세계의 대응하는 객체 또는 프리미티브에 맵핑되는 맵핑 프로세스를 위한 명령어들을 포함하는 물품.
KR1020090130141A 2008-12-29 2009-12-23 물리적 객체를 물리적 실생활에서 가상 세계로 이송하는 시스템 및 방법 KR101087390B1 (ko)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
US12/317,737 US8754886B2 (en) 2008-12-29 2008-12-29 Systems and methods for transporting physical objects from real physical life into virtual worlds
US12/317,737 2008-12-29

Publications (2)

Publication Number Publication Date
KR20100080386A true KR20100080386A (ko) 2010-07-08
KR101087390B1 KR101087390B1 (ko) 2011-11-25

Family

ID=42061113

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020090130141A KR101087390B1 (ko) 2008-12-29 2009-12-23 물리적 객체를 물리적 실생활에서 가상 세계로 이송하는 시스템 및 방법

Country Status (5)

Country Link
US (1) US8754886B2 (ko)
EP (1) EP2202608B1 (ko)
JP (3) JP5198423B2 (ko)
KR (1) KR101087390B1 (ko)
CN (2) CN103488275B (ko)

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20140101396A (ko) * 2011-12-01 2014-08-19 퀄컴 인코포레이티드 실세계 객체들의 3ｄ 모델들 및 실제 스케일 메타데이터를 캡처하고 이동시키기 위한 방법들 및 시스템들
KR20150071595A (ko) * 2013-12-18 2015-06-26 마이크로소프트 코포레이션 사전 계산된 조명으로 증강 현실 환경을 구성하는 기법
KR20180055198A (ko) * 2016-11-16 2018-05-25 (주)파인원커뮤니케이션즈 디바이스 가상화 시스템 및 방법

Families Citing this family (32)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US8754886B2 (en) 2008-12-29 2014-06-17 Intel Corporation Systems and methods for transporting physical objects from real physical life into virtual worlds
DK2714223T3 (en) * 2011-05-23 2015-09-14 Lego As Production of building instructions for building element models
US9827507B2 (en) * 2011-05-23 2017-11-28 Lego A/S Toy construction system for augmented reality
WO2013078345A1 (en) * 2011-11-21 2013-05-30 Nant Holdings Ip, Llc Subscription bill service, systems and methods
US9400569B2 (en) 2011-11-23 2016-07-26 At&T Intellectual Property I, L.P. Three dimensional building blocks
FR2984561B1 (fr) * 2011-12-15 2014-01-10 Commissariat Energie Atomique Procede et dispositif de conception solide d'un systeme
US9501700B2 (en) 2012-02-15 2016-11-22 Xactware Solutions, Inc. System and method for construction estimation using aerial images
GB201209176D0 (en) * 2012-05-25 2012-07-04 Lunar Lime Ltd Model card
JP6073110B2 (ja) * 2012-11-12 2017-02-01 株式会社ヴェルト ３次元データ生成システム
EP3541071A1 (en) 2013-08-02 2019-09-18 Xactware Solutions Inc. System and method for detecting features in aerial images using disparity mapping and segmentation techniques
US10583354B2 (en) 2014-06-06 2020-03-10 Lego A/S Interactive game apparatus and toy construction system
US20160085518A1 (en) * 2014-09-21 2016-03-24 Jang Hee I Systems and methods for imaging and generation of executable processor instructions based on ordered objects
CN106999785B (zh) 2014-10-02 2020-10-23 乐高公司 游戏系统
US9728010B2 (en) 2014-12-30 2017-08-08 Microsoft Technology Licensing, Llc Virtual representations of real-world objects
US10552550B2 (en) 2015-09-26 2020-02-04 Intel Corporation Technologies for physical programming
US10037085B2 (en) * 2015-12-21 2018-07-31 Intel Corporation Techniques for real object and hand representation in virtual reality content
US10275222B2 (en) 2016-03-15 2019-04-30 Intel Corporation Technologies for physical programming
WO2017167862A1 (en) 2016-04-01 2017-10-05 Lego A/S Toy scanner
CN105978959B (zh) * 2016-04-29 2019-08-30 腾讯科技（深圳）有限公司 虚拟模型展示方法、装置以及系统
GB2550911B (en) 2016-05-27 2021-02-10 Swap Bots Ltd Augmented reality toy
EP3481520A1 (en) * 2016-07-05 2019-05-15 Lego A/S Method for creating a virtual object
US10074205B2 (en) 2016-08-30 2018-09-11 Intel Corporation Machine creation of program with frame analysis method and apparatus
US10720082B1 (en) 2016-09-08 2020-07-21 Ctskh, Llc Device and system to teach stem lessons using hands-on learning method
CN108245894B (zh) * 2017-12-29 2019-04-30 网易（杭州）网络有限公司 信息处理方法及装置、存储介质、电子设备
US10500496B2 (en) 2018-01-12 2019-12-10 International Business Machines Corporation Physical obstacle avoidance in a virtual reality environment
US11010986B2 (en) * 2018-08-30 2021-05-18 Apple Inc. Virtual object kit
US10888777B2 (en) 2018-10-01 2021-01-12 International Business Machines Corporation Deep learning from real world and digital exemplars
JP6609363B1 (ja) * 2018-11-12 2019-11-20 みんとる合同会社 建造物設計支援装置、建造物設計支援方法、及び建造物設計支援システム
US10994201B2 (en) * 2019-03-21 2021-05-04 Wormhole Labs, Inc. Methods of applying virtual world elements into augmented reality
US11094113B2 (en) 2019-12-04 2021-08-17 Geomni, Inc. Systems and methods for modeling structures using point clouds derived from stereoscopic image pairs
JP7071454B2 (ja) * 2020-08-27 2022-05-19 株式会社バンダイ ゲーム支援システム、プログラム及び情報通信端末
US20220383601A1 (en) * 2021-05-25 2022-12-01 Samsung Electronics Co., Ltd. Virtual avatars and physical object interaction in augmented reality applications

Family Cites Families (24)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2642491B2 (ja) 1989-10-25 1997-08-20 株式会社日立製作所 商品仕様決定方法、並びに商品仕様決定見積方法とその装置
JPH09330336A (ja) * 1996-06-11 1997-12-22 Sony Corp 情報処理装置
JP3611239B2 (ja) * 1999-03-08 2005-01-19 富士通株式会社 三次元ｃｇモデル作成装置および処理プログラムを記録した記録媒体
US6741245B1 (en) * 1999-04-23 2004-05-25 Mitsubishi Electric Research Laboratories, Inc. Method for decorating a virtual model
WO2002035909A2 (en) * 2000-11-03 2002-05-10 Siemens Corporate Research, Inc. Video-supported planning and design with physical marker objects sign
US20020107679A1 (en) 2001-02-05 2002-08-08 Koninklijke Philips Electronics N. V. Virtual model generation via physical components
WO2002102484A1 (en) * 2001-06-15 2002-12-27 Walker Digital, Llc Method and apparatus for planning and customizing a gaming experience
US20020196250A1 (en) 2001-06-20 2002-12-26 Gateway, Inc. Parts assembly for virtual representation and content creation
JP2003216981A (ja) * 2002-01-25 2003-07-31 Iwane Kenkyusho:Kk 自動作業システム
JP2004326384A (ja) 2003-04-24 2004-11-18 Mitsubishi Electric Corp データ変換装置及びデータ変換方法及びデータ変換プログラム
CN1657884A (zh) 2004-02-20 2005-08-24 林金 一种物位传感器的测量方法及其装置
US20050280534A1 (en) * 2004-06-16 2005-12-22 Navarro Pamela W Clothing item registration system
JP2006230603A (ja) * 2005-02-23 2006-09-07 Canon Inc 撮像装置、生体認証システム及び画像取得方法
CN100465999C (zh) 2006-10-26 2009-03-04 上海交通大学 基于激光扫描的沉箱三维场景重建与挖掘机避碰系统
JP2008261755A (ja) * 2007-04-12 2008-10-30 Canon Inc 情報処理装置、情報処理方法
CN201111049Y (zh) * 2007-06-27 2008-09-03 中国科学院遥感应用研究所 一种数字地球原型系统
CN101127657B (zh) * 2007-07-16 2011-01-05 江南大学 自主移动传感器网络动态建模与控制技术
CN101118654B (zh) * 2007-09-19 2010-09-08 中国科学院上海微系统与信息技术研究所 基于传感器网络的机器视觉计算机模拟仿真系统
US8159662B2 (en) * 2007-10-24 2012-04-17 Exelis Inc. Systems and methods for remote unmanned raman spectroscopy
CN101174332B (zh) * 2007-10-29 2010-11-03 张建中 一种将真实世界实时场景与虚拟现实场景结合交互的方法和装置以及系统
US8228170B2 (en) * 2008-01-10 2012-07-24 International Business Machines Corporation Using sensors to identify objects placed on a surface
US8754886B2 (en) 2008-12-29 2014-06-17 Intel Corporation Systems and methods for transporting physical objects from real physical life into virtual worlds
US9827507B2 (en) 2011-05-23 2017-11-28 Lego A/S Toy construction system for augmented reality
DK2714223T3 (en) 2011-05-23 2015-09-14 Lego As Production of building instructions for building element models

Cited By (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20140101396A (ko) * 2011-12-01 2014-08-19 퀄컴 인코포레이티드 실세계 객체들의 3ｄ 모델들 및 실제 스케일 메타데이터를 캡처하고 이동시키기 위한 방법들 및 시스템들
US9443353B2 (en) 2011-12-01 2016-09-13 Qualcomm Incorporated Methods and systems for capturing and moving 3D models and true-scale metadata of real world objects
KR20150071595A (ko) * 2013-12-18 2015-06-26 마이크로소프트 코포레이션 사전 계산된 조명으로 증강 현실 환경을 구성하는 기법
KR20180055198A (ko) * 2016-11-16 2018-05-25 (주)파인원커뮤니케이션즈 디바이스 가상화 시스템 및 방법

Also Published As

Publication number Publication date
CN103488275B (zh) 2018-10-16
JP5198423B2 (ja) 2013-05-15
CN101794423A (zh) 2010-08-04
CN103488275A (zh) 2014-01-01
US20100164953A1 (en) 2010-07-01
CN101794423B (zh) 2013-10-23
JP2010231764A (ja) 2010-10-14
EP2202608A1 (en) 2010-06-30
US8754886B2 (en) 2014-06-17
JP2015018567A (ja) 2015-01-29
EP2202608B1 (en) 2016-08-24
KR101087390B1 (ko) 2011-11-25
JP2013152720A (ja) 2013-08-08
JP5869640B2 (ja) 2016-02-24

Similar Documents

Publication Publication Date Title
KR101087390B1 (ko) 물리적 객체를 물리적 실생활에서 가상 세계로 이송하는 시스템 및 방법
US11887312B2 (en) Fiducial marker patterns, their automatic detection in images, and applications thereof
JP6674192B2 (ja) 画像処理装置と画像処理方法
CN103093658B (zh) 一种面向儿童实物交互的故事创建方法和系统
CN102148917B (zh) 显示处理装置
JP2003256876A (ja) 複合現実感表示装置及び方法、記憶媒体、並びにコンピュータ・プログラム
JP2003132373A (ja) 仮想表示及びコンテンツ作成のための構成素子組立体
CN110908504B (zh) 一种增强现实博物馆协作交互方法与系统
CN104081307A (zh) 图像处理装置、图像处理方法和程序
Goldsmith et al. Augmented reality environmental monitoring using wireless sensor networks
CN107391997A (zh) 数码相框装置及其控制方法
CN110678879A (zh) 数据生成装置、数据生成方法以及程序
CN109919716A (zh) 基于增强现实的网购辅助方法、系统、设备及存储介质
CN114638939A (zh) 模型生成方法、模型生成装置、电子设备和可读存储介质
US20190227776A1 (en) System for co-ordination of logical sequence of instructions across electronic devices using visual programming and wireless communication
CN113065521A (zh) 物体识别方法、装置、设备及介质
KR101784796B1 (ko) 네트워크 기기 시뮬레이션 방법
Kohtala et al. Bringing reality back to virtual reality-a collaborative tool for multidisciplinary teams
Rodriguez Baidez et al. Robot path planning using 2D image processing in a drawing application
CN117974880A (zh) 三维彩色地图构建方法及装置、存储介质、电子设备
KR20220078886A (ko) 촬영된 영상에 기반하여 증강 현실 이미지를 생성하는 방법 및 그 시스템
KR20220078848A (ko) 컨텐츠와 증강현실 사이의 적합도를 판단하는 방법 및 그 시스템
CN113609333A (zh) 一种建筑样板可视化方法、装置、计算机设备及存储介质

Legal Events

Date Code Title Description
A201 Request for examination
E902 Notification of reason for refusal
E701 Decision to grant or registration of patent right
GRNT Written decision to grant
LAPS Lapse due to unpaid annual fee