WO2020242179A1 - 콘텐츠를 제공하는 방법, 시스템 및 비일시성의 컴퓨터 판독 가능 기록 매체 - Google Patents

콘텐츠를 제공하는 방법, 시스템 및 비일시성의 컴퓨터 판독 가능 기록 매체 Download PDF

Info

Publication number
WO2020242179A1
WO2020242179A1 PCT/KR2020/006806 KR2020006806W WO2020242179A1 WO 2020242179 A1 WO2020242179 A1 WO 2020242179A1 KR 2020006806 W KR2020006806 W KR 2020006806W WO 2020242179 A1 WO2020242179 A1 WO 2020242179A1
Authority
WO
WIPO (PCT)
Prior art keywords
vehicle
virtual object
content
image sequence
display
Prior art date
Application number
PCT/KR2020/006806
Other languages
English (en)
French (fr)
Inventor
전재웅
Original Assignee
(주) 애니펜
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Priority claimed from KR1020200056782A external-priority patent/KR20200137992A/ko
Application filed by (주) 애니펜 filed Critical (주) 애니펜
Publication of WO2020242179A1 publication Critical patent/WO2020242179A1/ko

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/80—Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
    • H04N21/85—Assembly of content; Generation of multimedia applications
    • H04N21/854—Content authoring
    • H04N21/8545—Content authoring for generating interactive applications
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/41—Structure of client; Structure of client peripherals
    • H04N21/414—Specialised client platforms, e.g. receiver in car or embedded in a mobile appliance
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/41—Structure of client; Structure of client peripherals
    • H04N21/414—Specialised client platforms, e.g. receiver in car or embedded in a mobile appliance
    • H04N21/41422—Specialised client platforms, e.g. receiver in car or embedded in a mobile appliance located in transportation means, e.g. personal vehicle
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/431—Generation of visual interfaces for content selection or interaction; Content or additional data rendering
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/80—Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
    • H04N21/81—Monomedia components thereof
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/80—Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
    • H04N21/81—Monomedia components thereof
    • H04N21/816—Monomedia components thereof involving special video data, e.g 3D video
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00—Television systems
    • H04N7/18—Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Computer Security & Cryptography (AREA)
  • Processing Or Creating Images (AREA)

Abstract

본 발명의 일 태양에 따르면, 콘텐츠를 제공하는 방법으로서, 적어도 한 명의 차량 탑승자의 상황 정보 및 상기 차량의 주행 정보 중 적어도 하나를 참조하여 가상 객체에 관한 영상 시퀀스를 결정하는 단계, 및 상기 차량의 적어도 하나의 디스플레이를 통하여 투영되는 상기 차량의 외부 실세계를 기반으로 상기 가상 객체에 관한 영상 시퀀스를 정합함으로써, 상기 적어도 한 명의 차량 탑승자에게 제공될 콘텐츠를 결정하는 단계를 포함하는 방법이 제공된다.

Description

콘텐츠를 제공하는 방법, 시스템 및 비일시성의 컴퓨터 판독 가능 기록 매체
본 발명은 콘텐츠를 제공하는 방법, 시스템 및 비일시성의 컴퓨터 판독 가능 기록 매체에 관한 것이다.
근래에 들어, 통신 및 인공지능(AI; Artificial Intelligence) 기술의 발달과 함께 차량 자율 주행 서비스가 상용화되는 등 자율 주행 차량 시장이 활성화되고 있다.
이러한 자율 주행 차량에는 주변의 장애물을 탐지하거나 차량 내부의 상태를 파악하기 위하여 수많은 카메라가 장착되어 있으며, 이를 통해 차량의 내부 또는 외부를 지속적으로 촬영하게 된다.
하지만, 위와 같이 촬영된 영상은 차량 주행 이후에 바로 삭제되거나 새로운 영상으로 덮어씌워질 뿐이고, 다른 용도로 제대로 활용되지 못하고 있는 실정이다.
또한, 근래에 들어, 자율 주행 차량이 상용화 및 보급되어 감에 따라 차량 탑승자가 직접 운전하는 시간이 줄어들기 때문에, 차량 주행 중에 차량 탑승자의 지루함을 달래고 흥미를 북돋을 수 있는 콘텐츠 개발이 절실하게 요구되고 있는 상황이다.
이에, 본 발명자(들)은, 차량 주행 중에 차량 탑승자에게 콘텐츠를 인터랙티브(interactive)하게 제공할 수 있는 신규하고도 진보된 기술을 제안하는 바이다.
<선행기술문헌>
<특허문헌>
(특허문헌 1) 한국 공개특허공보 제2018-0014910호
본 발명은, 전술한 종래 기술의 문제점을 모두 해결하는 것을 그 목적으로 한다.
또한, 본 발명은, 차량 주행 중에 발생할 수 있는 차량 탑승자의 따분함과 지루함을 해소하고 차량 영상의 활용도를 높이는 것을 그 목적으로 한다.
또한, 본 발명은, 차량 내의 적어도 두 디스플레이에서 콘텐츠가 동기화되어 제공될 수 있도록 하는 것을 그 목적으로 한다.
또한, 본 발명은, 차량 탑승자 각각에 대해 또는 차량 탑승자의 소정 그룹 각각에 대해 콘텐츠를 제공하는 것을 그 목적으로 한다.
또한, 본 발명은, 차량 탑승자가 차량 내에서 손쉽게 콘텐츠를 저작하고 이를 공유할 수 있도록 지원하는 것을 그 목적으로 한다.
상기 목적을 달성하기 위한 본 발명의 대표적인 구성은 다음과 같다.
본 발명의 일 태양에 따르면, 콘텐츠를 제공하는 방법으로서, 적어도 한 명의 차량 탑승자의 상황 정보 및 상기 차량의 주행 정보 중 적어도 하나를 참조하여 가상 객체에 관한 영상 시퀀스를 결정하는 단계, 및 상기 차량의 적어도 하나의 디스플레이를 통하여 투영되는 상기 차량의 외부 실세계를 기반으로 상기 가상 객체에 관한 영상 시퀀스를 정합함으로써, 상기 적어도 한 명의 차량 탑승자에게 제공될 콘텐츠를 결정하는 단계를 포함하는 방법이 제공된다.
본 발명의 다른 태양에 따르면, 콘텐츠를 제공하는 시스템으로서, 적어도 한 명의 차량 탑승자의 상황 정보 및 상기 차량의 주행 정보 중 적어도 하나를 참조하여 가상 객체에 관한 영상 시퀀스를 결정하는 가상 객체 시퀀스 관리부, 및 상기 차량의 적어도 하나의 디스플레이를 통하여 투영되는 상기 차량의 외부 실세계를 기반으로 상기 가상 객체에 관한 영상 시퀀스를 정합함으로써, 상기 적어도 한 명의 차량 탑승자에게 제공될 콘텐츠를 결정하는 콘텐츠 관리부를 포함하는 시스템이 제공된다.
이 외에도, 본 발명을 구현하기 위한 다른 방법, 다른 시스템 및 상기 방법을 실행하기 위한 컴퓨터 프로그램을 기록하는 비일시성의 컴퓨터 판독 가능한 기록 매체가 더 제공된다.
본 발명에 의하면, 차량 주행 중에 발생할 수 있는 차량 탑승자의 따분함과 지루함을 해소하고 차량 영상의 활용도를 높일 수 있게 된다.
또한, 본 발명에 의하면, 차량 내의 적어도 두 디스플레이에서 콘텐츠를 동기화하여 제공할 수 있게 된다.
또한, 본 발명에 따르면, 차량 탑승자 각각에 대해 또는 차량 탑승자의 소정 그룹 각각에 대해 콘텐츠를 제공할 수 있게 된다.
또한, 본 발명에 따르면, 차량 탑승자가 차량 내에서 손쉽게 콘텐츠를 저작하고 이를 공유할 수 있도록 지원할 수 있게 된다.
도 1은 본 발명의 일 실시예에 따라 콘텐츠를 제공하기 위한 전체 시스템의 개략적인 구성을 나타내는 도면이다.
도 2는 본 발명의 일 실시예에 따른 콘텐츠 제공 시스템의 내부 구성을 상세하게 도시하는 도면이다.
도 3 내지 도 8은 본 발명의 일 실시예에 따라 콘텐츠가 제공되는 상황을 예시적으로 나타내는 도면이다.
<부호의 설명>
100: 통신망
200: 콘텐츠 제공 시스템
210: 가상 객체 시퀀스 관리부
220: 콘텐츠 관리부
230: 통신부
240: 제어부
300: 디스플레이
후술하는 본 발명에 대한 상세한 설명은, 본 발명이 실시될 수 있는 특정 실시예를 예시로서 도시하는 첨부 도면을 참조한다. 이러한 실시예는 당업자가 본 발명을 실시할 수 있기에 충분하도록 상세히 설명된다. 본 발명의 다양한 실시예는 서로 다르지만 상호 배타적일 필요는 없음이 이해되어야 한다. 예를 들어, 본 명세서에 기재되어 있는 특정 형상, 구조 및 특성은 본 발명의 정신과 범위를 벗어나지 않으면서 일 실시예로부터 다른 실시예로 변경되어 구현될 수 있다. 또한, 각각의 실시예 내의 개별 구성요소의 위치 또는 배치도 본 발명의 정신과 범위를 벗어나지 않으면서 변경될 수 있음이 이해되어야 한다. 따라서, 후술하는 상세한 설명은 한정적인 의미로서 행하여지는 것이 아니며, 본 발명의 범위는 특허청구범위의 청구항들이 청구하는 범위 및 그와 균등한 모든 범위를 포괄하는 것으로 받아들여져야 한다. 도면에서 유사한 참조부호는 여러 측면에 걸쳐서 동일하거나 유사한 구성요소를 나타낸다.
본 명세서에서, 콘텐츠란, 문자, 부호, 음성, 음향, 이미지, 동영상 등으로 이루어지는 디지털 정보 또는 개별 정보 요소를 총칭하는 개념이다. 이러한 콘텐츠는, 예를 들면, 텍스트, 이미지, 동영상, 오디오, 링크(예를 들면, 웹 링크) 등의 데이터 또는 이러한 데이터 중 적어도 두 가지의 조합을 포함하여 구성될 수 있다.
이하에서는, 본 발명이 속하는 기술분야에서 통상의 지식을 가진 자가 본 발명을 용이하게 실시할 수 있도록 하기 위하여, 본 발명의 여러 바람직한 실시예에 관하여 첨부된 도면을 참조하여 상세히 설명하기로 한다.
전체 시스템의 구성
도 1은 본 발명의 일 실시예에 따라 콘텐츠를 제공하기 위한 전체 시스템의 개략적인 구성을 나타내는 도면이다.
도 1에 도시된 바와 같이, 본 발명의 일 실시예에 따른 전체 시스템은 통신망(100), 콘텐츠 제공 시스템(200) 및 적어도 하나의 디스플레이(300)를 포함하여 구성될 수 있다.
먼저, 본 발명의 일 실시예에 따른 통신망(100)은 유선 통신이나 무선 통신과 같은 통신 양태를 가리지 않고 구성될 수 있으며, 근거리 통신망(LAN; Local Area Network), 도시권 통신망(MAN; Metropolitan Area Network), 광역 통신망(WAN; Wide Area Network) 등 다양한 통신망으로 구성될 수 있다. 바람직하게는, 본 명세서에서 말하는 통신망(100)은 공지의 인터넷 또는 월드와이드웹(WWW; World Wide Web)일 수 있다. 그러나, 통신망(100)은, 굳이 이에 국한될 필요 없이, 공지의 유무선 데이터 통신망, 공지의 전화망, 또는 공지의 유무선 텔레비전 통신망을 그 적어도 일부에 있어서 포함할 수도 있다.
예를 들면, 통신망(100)은 무선 데이터 통신망으로서, 무선 주파수(RF; Radio Frequency) 통신, 와이파이(WiFi) 통신, 셀룰러(LTE 등) 통신, 블루투스 통신(더 구체적으로는, 저전력 블루투스(BLE; Bluetooth Low Energy) 통신), 적외선 통신, 초음파 통신 등과 같은 종래의 통신 방법을 적어도 그 일부분에 있어서 구현하는 것일 수 있다.
다음으로, 본 발명의 일 실시예에 따른 콘텐츠 제공 시스템(200)은 메모리 수단을 구비하고 마이크로 프로세서를 탑재하여 연산 능력을 갖춘 디지털 디바이스일 수 있다. 예를 들어, 이러한 콘텐츠 제공 시스템(200)은 서버 시스템 또는 차량의 전자 제어 시스템(ECU; Electronic Control Unit)일 수 있다.
본 발명의 일 실시예에 따른 콘텐츠 제공 시스템(200)은 적어도 한 명의 차량 탑승자의 상황 정보 및 차량의 주행 정보 중 적어도 하나를 참조하여 가상 객체에 관한 영상 시퀀스를 결정하고, 차량의 적어도 하나의 디스플레이(300)를 통하여 투영되는 차량의 외부 실세계를 기반으로 위의 가상 객체에 관한 영상 시퀀스를 정합함으로써, 적어도 한 명의 차량 탑승자에게 제공될 콘텐츠를 결정하는 기능을 수행할 수 있다.
여기서, 본 발명의 일 실시예에 따른 가상 객체는 차량 내의 적어도 하나의 디스플레이 상에 구현될 수 있는 있는 모든 대상을 총칭하는 개념으로서, 예를 들어, 문자, 숫자, 기호, 심볼, 도형, 사진, 이미지, 소리, 동영상, 또는 이들의 조합으로 이루어질 수 있으며, 그에 부여될 수 있는 속성(attribute)(예를 들어, 밝기, 명도, 채도)까지도 포함하는 개념일 수 있다.
본 발명에 따른 콘텐츠 제공 시스템(200)의 구성과 기능에 관하여는 아래에서 더 자세하게 알아보기로 한다. 한편, 콘텐츠 제공 시스템(200)에 관하여 위와 같이 설명되었으나, 이러한 설명은 예시적인 것이고, 콘텐츠 제공 시스템(200)에 요구되는 기능이나 구성요소의 적어도 일부가 필요에 따라 후술할 적어도 하나의 디스플레이(300) 또는 외부 시스템(미도시됨) 내에서 실현되거나 적어도 하나의 디스플레이(300) 또는 위의 외부 시스템 내에 포함될 수도 있음은 당업자에게 자명하다.
다음으로, 본 발명의 일 실시예에 따른 적어도 하나의 디스플레이(300)는 콘텐츠 제공 시스템(200)에 의해 결정되는 콘텐츠를 표시하는 기능을 수행할 수 있다.
예를 들어, 본 발명의 일 실시예에 따른 적어도 하나의 디스플레이(300)는 차량의 외부 실세계의 적어도 일부가 투영될 수 있는 투명(예를 들어, 5 내지 80%의 투명도) 또는 반투명 디스플레이를 포함할 수 있으며, 보다 구체적으로, 투명 또는 반투명 TFELD(Thin Film Electroluminescent Display), OLED, LCD, LED 등으로 구성되는 것일 수 있다.
다른 예를 들어, 본 발명의 일 실시예에 따른 적어도 하나의 디스플레이(300)는 불투명 디스플레이 상에 차량의 외부 실세계에 관한 영상(예를 들어, 실시간 촬영 영상)을 디스플레이함으로써 차량의 외부 실세계를 투영하는 기능을 수행할 수도 있다.
또한, 차량 내에는 위와 같은 디스플레이(300)가 복수 개 배치될 수도 있으며, 예를 들어, 차량(또는 적어도 한 명의 차량 탑승자)을 기준으로 전후좌우 각각에 배치(즉, 적어도 4개의 디스플레이가 배치)될 수 있다. 또한, 이러한 디스플레이(300)는 종래의 차량 유리창(window)을 중심으로 추가 장착되거나 그 유리창을 대체하여 장착될 수 있다.
한편, 본 발명의 일 실시예에 따른 적어도 하나의 디스플레이(300)는, 메모리 수단을 구비하고 마이크로 프로세서를 탑재하여 연산 능력을 갖춘 디지털 디바이스일 수 있으며, 본 발명에 따른 콘텐츠 결정 기능(또는 콘텐츠 제공 기능)을 지원하기 위한 애플리케이션이 포함되어 있을 수 있다. 이와 같은 애플리케이션은 콘텐츠 제공 시스템(200) 또는 외부의 애플리케이션 배포 서버(미도시됨)로부터 다운로드된 것일 수 있다.
콘텐츠 제공 시스템의 구성
이하에서는, 본 발명의 구현을 위하여 중요한 기능을 수행하는 콘텐츠 제공 시스템(200)의 내부 구성 및 각 구성요소의 기능에 대하여 살펴보기로 한다.
도 2는 본 발명의 일 실시예에 따른 콘텐츠 제공 시스템(200)의 내부 구성을 상세하게 도시하는 도면이다.
도 2에 도시된 바와 같이, 가상 객체 시퀀스 관리부(210), 콘텐츠 관리부(220), 통신부(230) 및 제어부(240)를 포함하여 구성될 수 있다. 본 발명의 일 실시예에 따르면, 가상 객체 시퀀스 관리부(210), 콘텐츠 관리부(220), 통신부(230) 및 제어부(240)는 그 중 적어도 일부가 외부의 시스템과 통신하는 프로그램 모듈일 수 있다. 이러한 프로그램 모듈은 운영 시스템, 응용 프로그램 모듈 또는 기타 프로그램 모듈의 형태로 콘텐츠 제공 시스템(200)에 포함될 수 있고, 물리적으로는 여러 가지 공지의 기억 장치에 저장될 수 있다. 또한, 이러한 프로그램 모듈은 콘텐츠 제공 시스템(200)과 통신 가능한 원격 기억 장치에 저장될 수도 있다. 한편, 이러한 프로그램 모듈은 본 발명에 따라 후술할 특정 업무를 수행하거나 특정 추상 데이터 유형을 실행하는 루틴, 서브루틴, 프로그램, 오브젝트, 컴포넌트, 데이터 구조 등을 포괄하지만, 이에 제한되지는 않는다.
먼저, 본 발명의 일 실시예에 따른 가상 객체 시퀀스 관리부(210)는 적어도 한 명의 차량 탑승자의 상황 정보 및 차량의 주행 정보 중 적어도 하나를 참조하여 가상 객체에 관한 영상 시퀀스를 결정하는 기능을 수행할 수 있다. 본 발명의 일 실시예에 따른 차량 탑승자의 상황 정보는 차량 탑승자로부터 추론되는 상황(예를 들어, 차량 탑승자의 시선, 표정, 행위, 동작, 소리 등으로부터 추론되는 상황)을 나타내는 정보를 포함할 수 있다. 예를 들어, 차량 탑승자의 시선, 표정, 행위, 동작 등에 관한 정보와 동일하거나 유사한 정보에 매칭되는 사례를 사례 데이터베이스상에서 검색하거나, 차량 탑승자의 시선, 표정, 행위, 동작, 소리 등에 관하여 기계 학습(machine learning) 또는 딥 러닝(deep learning)을 통해 학습한 결과에 기초하여 대응되는 사례를 특정할 수 있으며, 그 특정되는 사례를 기준으로 위의 상황을 나타내는 정보가 특정될 수 있다. 또한, 본 발명의 일 실시예에 따른 차량의 주행 정보에는 차량의 출발지, 목적지, 현재 위치, 주행 속도, 주행 상태(예를 들어, 출발, 정지 등) 등에 관한 정보가 포함될 수 있다. 한편, 가상 객체 시퀀스 관리부(210)는 차량의 내부 영상을 기준으로 상황 정보 획득의 대상이 되는 적어도 한 명의 차량 탑승자를 특정(예를 들어, 시선, 표정 등의 움직임이 발생되는 차량 탑승자를 특정)하거나, 또는 차량 내에서 소정의 입력 행위(예를 들어, 디스플레이(300) 또는 별도의 외부 시스템을 터치 또는 조작하는 행위)를 하거나 소정의 모션(이러한 경우에, 모션은 소정의 무게 센서, 가속도계 센서 등에 의해 감지될 수 있음)을 취하는 차량 탑승자를 상황 정보 획득의 대상이 되는 적어도 한 명의 차량 탑승자로서 특정할 수 있다. 다만, 본 발명에 따른 위와 같은 특정 방식이 반드시 앞서 열거된 것에만 한정되는 것은 아니며, 본 발명의 목적을 달성할 수 있는 범위 내에서 다양하게 변경될 수 있음을 밝혀 둔다.
예를 들어, 가상 객체 시퀀스 관리부(210)는 차량의 내부 영상에 기초하여 적어도 한 명의 차량 탑승자의 시선, 표정, 동작, 행위 및 소리 중 적어도 하나를 분석하여(또는 차량 내에서 차량 탑승자가 디스플레이(300)를 대상으로 소정의 입력을 행하는 행위를 분석하여) 해당 차량 탑승자의 감정(예를 들어, 기쁨, 화남, 슬픔, 즐거움 등으로 분류될 수 있음)이나 그 주변 분위기를 해당 차량 탑승자의 상황 정보로서 특정하고, 그 상황 정보와 연관되는 가상 객체가 해당 감정 또는 해당 분위기에 대응되는 동작을 행하도록 하는 것을 해당 가상 객체에 관한 영상 시퀀스로서 결정할 수 있다.
보다 구체적으로, 가상 객체 시퀀스 관리부(210)는 차량 탑승자가 화가 난 감정 상태인 경우에, 뿔을 포함하는 악마(즉, 가상 객체 1)가 움직이면서 벼락(즉, 가상 객체 2)을 발생시키고 그 배경으로 비(즉, 가상 객체 3)가 내리는 것을 가상 객체에 관한 영상 시퀀스로서 결정할 수 있다.
다른 예를 들어, 가상 객체 시퀀스 관리부(210)는 적어도 한 명의 차량 탑승자에 의해 설정 또는 저작되는 소정의 가상 객체(예를 들어, 텍스트, 이미지 등)가 해당 차량의 주행 속도와 연동하여 움직이는 것을 해당 가상 객체에 관한 영상 시퀀스로서 결정할 수 있다. 한편, 가상 객체 시퀀스 관리부(210)는 적어도 한 명의 차량 탑승자에게 위의 가상 객체의 설정 또는 저작을 위한 사용자 인터페이스를 더 제공할 수도 있다.
보다 구체적으로, 가상 객체 시퀀스 관리부(210)는 차량 탑승자에 의해 토끼 이미지가 가상 객체로서 특정되는 경우에, 차량의 주행 속도에 맞추어 해당 차량을 따라 토끼가 뛰어오는 것을 해당 가상 객체에 관한 영상 시퀀스로서 결정할 수 있다.
또한, 가상 객체 시퀀스 관리부(210)는 차량 탑승자 각각에 대해 또는 차량 탑승자의 그룹(예를 들어, 차량 탑승자의 그룹 각각은 적어도 한 명의 탑승자로 구성될 수 있음) 각각에 대해 가상 객체에 관한 영상 시퀀스를 결정할 수 있다.
예를 들어, 가상 객체 시퀀스 관리부(210)는 차량 탑승자 각각에 대해 또는 적어도 둘 이상의 차량 탑승자로 구성되는 그룹 각각에 대해 위의 상황 정보를 특정하고, 각각의 상황 정보를 참조하여 가상 객체에 관한 영상 시퀀스를 각각 결정할 수 있다.
또한, 가상 객체 시퀀스 관리부(210)는 차량 내에서 차량 탑승자가 착석하고 있는 좌석 각각에 대해 또는 좌석의 그룹(예를 들어, 좌석의 그룹 각각은 적어도 하나의 좌석으로 구성될 수 있음) 각각에 대해 가상 객체에 관한 영상 시퀀스를 결정할 수도 있다.
예를 들어, 가상 객체 시퀀스 관리부(210)는, 차량 내 좌석이 2행 2열(즉, 4인석)의 배열로 구성되는 경우에, 좌석 중 차량의 좌측을 공유하는 1행 1열 및 2행 1열에 대응되는 가상 객체에 관한 영상 시퀀스와 차량의 우측을 공유하는 1행 2열 및 2행 2열에 대응하는 가상 객체에 관한 영상 시퀀스를 각각 결정할 수 있다.
또한, 가상 객체 시퀀스 관리부(210)는 적어도 한 명의 차량 탑승자의 시점(view point), 차량의 좌석 위치에 따른 시점 및 적어도 하나의 디스플레이의 차량 내 위치에 따른 시점 중 적어도 하나를 참조하여 가상 객체에 관한 영상 시퀀스를 결정할 수 있다.
예를 들어, 가상 객체 시퀀스 관리부(210)는, 차량 내 좌석이 2행 2열(즉, 4인석)의 배열로 구성되는 경우에, 좌석 중 차량의 좌측을 공유하는 1행 1열 및 2행 1열에 대하여, 1행 1열의 차량 탑승자의 시점 및 2행 1열의 차량 탑승자의 시점, 차량의 좌석 위치에 따른 시점, 또는 디스플레이의 차량 내 위치에 따른 시점에 따라, 동일한 가상 객체라도 가상 객체의 원근, 방향 등을 고려하여 가상 객체의 크기, 형상 및 방향이 다르게 특정되도록 함으로써 그 가상 객체에 관한 영상 시퀀스를 결정할 수 있다.
또한, 가상 객체 시퀀스 관리부(210)는 차량의 외부 영상으로부터 특정되는 실세계 객체에 관한 정보를 더 참조하여 가상 객체에 관한 영상 시퀀스를 결정할 수도 있다.
예를 들어, 가상 객체 시퀀스 관리부(210)는 차량의 외부 영상으로부터 해당 차량의 주변에 존재하는 적어도 하나의 실세계 객체를 특정하고, 그 특정되는 적어도 하나의 실세계 객체와 연관되는 가상 객체를 이용하여 위의 가상 객체에 관한 영상 시퀀스를 결정할 수 있다.
보다 구체적으로, 가상 객체 시퀀스 관리부(210)는 차량의 외부 영상에 기초하여 해당 차량의 주변에 존재하는 실세계 객체가 참새인 것으로 특정한 경우에, 그 참새와 연관되는 논 또는 밭 이미지가 해당 차량의 주행 속도(즉, 위의 주행 정보)에 맞추어 해당 차량의 주변에 넓게 펼쳐지는 것으로 위의 가상 객체에 관한 영상 시퀀스를 결정할 수 있다. 또한, 가상 객체 시퀀스 관리부(210)는 차량의 외부 영상에 기초하여 해당 차량의 주변에 존재하는 실세계 객체가 상점인 것으로 특정한 경우에, 그 상점의 운영 시간, 판매 물품 등과 같은 해당 상점과 연관된 정보가 담긴 인포메이션 박스(즉, 가상 객체)가 소정 시간 동안 표시되는 것으로 위의 가상 객체에 관한 영상 시퀀스를 결정할 수 있다.
한편, 가상 객체 시퀀스 관리부(210)는 차량 탑승자의 개인 정보를 더 참조하여 가상 객체에 관한 영상 시퀀스를 결정할 수도 있다. 본 발명의 일 실시예에 따른 차량 탑승자의 개인 정보에는, 차량 탑승자의 연령, 성별, 인종, 지역, 선호 가상 객체, 선호 가상 객체 시퀀스, 관심사 등에 관한 정보가 포함될 수 있다.
예를 들어, 가상 객체 시퀀스 관리부(210)는 차량의 내부 영상에서 차량 탑승자의 얼굴을 기반으로 차량 탑승자의 신원을 특정하고, 그 특정되는 신원에 따라 해당 차량 탑승자가 선호하는 가상 객체 및 그 가상 객체에 관한 영상 시퀀스를 결정할 수 있다. 즉, 차량 탑승자의 개인 정보를 기반으로 가상 객체 또는 그 가상 객체에 관한 영상 시퀀스가 서로 다르게 개별 맞춤화되어 결정될 수 있다.
다음으로, 본 발명의 일 실시예에 따른 콘텐츠 관리부(220)는 차량의 적어도 하나의 디스플레이를 통하여 투영되는 차량의 외부 실세계를 기반으로 가상 객체 시퀀스 관리부(210)에 의해 결정되는 가상 객체에 관한 영상 시퀀스를 정합함으로써, 적어도 한 명의 차량 탑승자에게 제공될 콘텐츠를 결정하는 기능을 수행할 수 있다.
예를 들어, 콘텐츠 관리부(220)는 차량의 적어도 하나의 디스플레이를 통하여 투영되는 차량의 외부 실세계의 객체에 관한 속성(예를 들어, 객체의 유형(예를 들어, 사람, 동물, 식물 등), 객체의 위치, 객체의 형상, 객체의 형태 등)을 참조하여, 위의 결정되는 가상 객체에 관한 영상 시퀀스가 그 속성에 따라 매칭되도록 함으로써 생성되는 증강 현실 콘텐츠(AR; Augmented Reality)를 적어도 한 명의 차량 탑승자에게 제공될 콘텐츠로서 결정할 수 있다.
보다 구체적으로, 콘텐츠 관리부(220)는 SLAM(Simultaneous Localization And Mapping) 기술에 기초하여 위의 적어도 하나의 디스플레이를 통하여 투영되는 차량의 외부 실세계의 좌표(구체적으로는 외부 실세계의 적어도 하나의 객체의 좌표)를 추적하고 3차원 매핑(3D Mapping) 좌표를 추출할 수 있으며, 그 추적된 좌표 및 추출된 3차원 매핑 좌표에 관한 정보를 참조하여 위의 가상 객체에 관한 영상 시퀀스에 따라 움직이는 가상 객체가 위의 적어도 하나의 디스플레이 상에서 표시될 좌표를 결정할 수 있고, 위의 표시될 좌표 상에 위의 가상 객체를 표시하여 그에 관한 영상 시퀀스에 따라 움직이도록 함으로써, 위의 차량의 외부 실세계를 기반으로 하는 증강 현실 콘텐츠를 생성할 수 있다.
다만, 본 발명의 일 실시예에 따른 콘텐츠의 유형이 반드시 상기 증강 현실 콘텐츠에만 한정되는 것은 아니며, 본 발명의 목적을 달성할 수 있는 범위 내에서 가상 현실(Virtual Reality; VR) 콘텐츠, 혼합 현실(Mixed Reality; MR) 콘텐츠 등으로 얼마든지 변경될 수 있음을 밝혀 둔다.
또한, 콘텐츠 관리부(220)는 차량 내의 복수의 디스플레이 중 적어도 한 명의 차량 탑승자와 연관되는 디스플레이에 기초하여 해당 콘텐츠가 제공되도록 할 수 있다.
예를 들어, 콘텐츠 관리부(220)는, 차량 내의 복수의 디스플레이 중 차량 탑승자 각각의 시선에 대응되는 디스플레이를 기준으로 하여 차량의 외부 실세계를 기반으로 해당 차량 탑승자에 대응되는 가상 객체에 관한 영상 시퀀스를 정합함으로써 해당 차량 탑승자에게 제공될 콘텐츠를 결정할 수 있다.
또한, 콘텐츠 관리부(240)는 위의 결정되는 콘텐츠가 저장 또는 공유되도록 하는 기능을 수행할 수 있다.
예를 들어, 콘텐츠 관리부(240)는 위의 결정되는 콘텐츠가 차량 탑승자와 연관되는 디바이스(예를 들어, 차량 탑승자의 스마트폰, 클라우드 등) 내에 저장되도록 하거나, 차량 탑승자와 연관되는 소셜 네트워크 서비스(SNS), 클라우드, 웹 서버(web server) 등을 통해 다른 차량 탑승자와 공유(예를 들어, 실시간 공유)되도록 할 수 있다.
다른 예를 들어, 콘텐츠 관리부(220)는 위의 결정되는 콘텐츠와 연관되는 지리학적(geographical) 위치를 기준으로 하여 해당 콘텐츠가 공유되도록 할 수 있다.
보다 구체적으로, 콘텐츠 관리부(220)는 제1 차량에서 제공되는 제1 콘텐츠가 그 제1 콘텐츠와 연관되는 GPS 좌표 위치를 기준으로 다른 차량의 차량 탑승자와 공유되도록 할 수 있다. 예를 들어, 콘텐츠 관리부(220)는 제2 차량의 차량 탑승자(즉, 다른 차량의 차량 탑승자)에 의해 위의 GPS 좌표 위치와 연관되는 위치가 특정 또는 선택되면, 위의 제1 콘텐츠가 위의 제2 차량(또는 그 제2 차량의 차량 탑승자)에게 공유되도록 할 수 있다.
한편, 콘텐츠 관리부(220)는 위의 제2 차량의 차량 탑승자에 의해 공유되는 제1 콘텐츠에 대해 추가적으로 콘텐츠의 저작(예를 들어, 추가, 삭제, 변경 등)이 이루어지는 경우에, 그 제1 콘텐츠와 연관되는 GPS 좌표를 기준으로 그 추가 저작된 콘텐츠 또는 그 추가 저작된 콘텐츠가 반영된 제1 콘텐츠가 다른 차량의 차량 탑승자와 더 공유되도록 할 수 있다.
또한, 콘텐츠 관리부(220)는 위의 공유되는 콘텐츠에 대하여 부여되는 공유 제한 조건을 참조하여 그 제한 조건을 만족하는 차량 또는 차량 탑승자에게 해당 콘텐츠가 공유되도록 할 수도 있다.
예를 들어, 콘텐츠 관리부(220)는, 특정 차량(또는 특정 차량 탑승자)에게만 콘텐츠가 공유되도록 하는 공유 제한 조건이 부여되는 경우에, 그 제한 조건을 만족시키는 특정 차량(또는 특정 차량 탑승자)에게만 해당 콘텐츠가 공유되도록 할 수 있다.
다음으로, 본 발명의 일 실시예에 따른 통신부(230)는 가상 객체 시퀀스 관리부(210) 및 콘텐츠 관리부(220)로부터의/로의 데이터 송수신이 가능하도록 하는 기능을 수행할 수 있다.
마지막으로, 본 발명의 일 실시예에 따른 제어부(240)는 가상 객체 시퀀스 관리부(210), 콘텐츠 관리부(220) 및 통신부(230) 간의 데이터의 흐름을 제어하는 기능을 수행할 수 있다. 즉, 본 발명에 따른 제어부(240)는 콘텐츠 제공 시스템(200)의 외부로부터의/로의 데이터 흐름 또는 콘텐츠 제공 시스템(200)의 각 구성요소 간의 데이터 흐름을 제어함으로써, 가상 객체 시퀀스 관리부(210), 콘텐츠 관리부(220) 및 통신부(230)에서 각각 고유 기능을 수행하도록 제어할 수 있다.
이하에서는, 도 3 내지 도 8을 참조하여 본 발명의 일 실시예에 따라 콘텐츠가 제공되는 예시적인 상황을 살펴보기로 한다.
제1 실시예
본 발명의 일 실시예에 따른 콘텐츠 제공 시스템(200)이 차량의 전자 제어 시스템(ECU)에 포함되는 상황을 가정해 볼 수 있다.
도 3을 참조하면, 먼저, 차량 주행 중에 차량의 내부 영상으로부터 특정되는 차량 탑승자(510)(또는 차량 주행 중에 디스플레이(300a)를 대상으로 소정의 입력 행위를 수행한 차량 탑승자(510))의 시선, 표정, 동작 및 소리를 분석함으로써 차량 탑승자(510)가 차량 외부를 바라보면서 조용히 생각에 잠겨있고, 차량의 외부 영상으로부터 차량 주변에 넓은 갈대밭(320)이 펼쳐지는 것으로 특정되는 경우에, 차량 탑승자(510)가 생각에 잠겨 있는 상황 및 외부 실세계의 객체인 갈대밭(320)과 연관되는 복수의 기러기(310)가 가상 객체로서 결정되고, 복수의 기러기(310)가 차량의 주행 속도에 맞추어 차량 측면을 따라 날아가는 것으로 가상 객체에 관한 영상 시퀀스가 결정될 수 있다.
그 다음에, 차량의 투명 디스플레이(300a)를 통하여 투영되는 차량의 외부 실세계인 갈대밭(320)을 배경으로 하여 복수의 기러기(310)가 차량의 주행 속도에 맞추어 차량 측면을 따라 날아가는 시퀀스를 정합함으로써 생성되는 증강 현실 콘텐츠가 위의 차량 탑승자에게 제공될 콘텐츠로서 결정될 수 있다.
그 다음에, 위의 결정되는 콘텐츠가 차량의 투명 디스플레이(300a) 상에 표시되어 차량 탑승자(510)에게 제공될 수 있다.
한편, 본 발명의 일 실시예에 따라 차량의 1행 2열(즉, 조수석)에 제1 차량 탑승자(510)가 위치하고(도 3 참조), 차량의 2행 2열(즉, 조수석의 뒷좌석)에 제2 차량 탑승자(520)가 위치하는 경우에(도 4 참조), 차량 탑승자의 각각의 시점(즉, 제1 차량 탑승자(510) 및 제2 차량 탑승자(520) 각각의 시점) 또는 디스플레이의 차량 내 위치에 따른 시점에 따라 위의 가상 객체에 관한 영상 시퀀스(예를 들어, 복수의 기러기(310)의 형상 및 크기를 고려한 가상 객체에 관한 영상 시퀀스)가 결정될 수 있다.
예를 들어, 차량의 우측면(즉, 2열)을 기준으로 제1 차량 탑승자(510)의 시점(또는 시선)이 제2 차량 탑승자(520)의 시점(또는 시선)보다 더 좌측에 존재하게 되므로(또는 차량의 우측면(즉, 2열)을 기준으로 제1 차량 탑승자(510)와 연관되는 투명 디스플레이(300a)가 제2 차량 탑승자(520)와 연관되는 투명 디스플레이(300b)보다 더 좌측에 존재하게 되므로), 제1 차량 탑승자(510)에 대해 복수의 기러기(310)(구체적으로, 복수의 기러기(310)의 측면 형상)가 해당 탑승자의 정면에서 날아가고 있는 것으로 가상 객체에 관한 영상 시퀀스(또는 콘텐츠)가 결정되는 경우에, 제2 차량 탑승자(510)에 대해서는 복수의 기러기(310)(구체적으로, 복수의 기러기(310)의 위의 측면 형상보다 원근 효과로 인해 더 작아진 측후면 형상)가 제1 차량 탑승자(510)에 비해서 좌측에서 날아가고 있는 것으로 가상 객체에 관한 영상 시퀀스(또는 콘텐츠)가 결정될 수 있다. 또한, 제1 차량 탑승자(510)와 연관되는 투명 디스플레이(300a)를 통하여 투영되는 갈대밭(320)을 배경으로 하여 제1 차량 탑승자(510)에 대하여 결정되는 위의 가상 객체에 관한 영상 시퀀스를 정합함으로써 생성되는 증강 현실 콘텐츠가 제1 차량 탑승자(510)에게 제공되고, 제2 차량 탑승자(520)와 연관되는 투명 디스플레이(300b)를 통하여 투영되는 갈대밭(320)을 배경으로 하여 제2 차량 탑승자(520)에 대하여 결정되는 위의 가상 객체에 관한 영상 시퀀스를 정합함으로써 생성되는 증강 현실 콘텐츠가 제2 차량 탑승자(520)에게 제공될 수 있다.
제2 실시예
본 발명의 일 실시예에 따른 콘텐츠 제공 시스템(200)이 차량의 전자 제어 시스템(ECU)에 포함되는 상황을 가정해 볼 수 있다.
도 5를 참조하면, 먼저, 차량 주행 중에 차량의 내부 영상으로부터 특정되는 차량 탑승자(510)(또는 차량 주행 중에 디스플레이(300a)를 대상으로 소정의 입력 행위를 수행한 차량 탑승자(510))의 시선, 표정, 동작 및 소리를 분석함으로써 차량 탑승자(510)가 차량 외부를 바라보면서 눈이 많이 와서 도로가 미끄러워질 것을 걱정하고 있는 상황이 특정될 수 있고, 차량 탑승자(510)에 의해 저작되는 미끄럼 경고 표시 이미지(550)가 가상 객체로서 특정되면, 그 특정되는 미끄럼 경고 표시 이미지(550)가 차량의 주행 속도에 따라 점멸하는 것으로 가상 객체에 관한 영상 시퀀스가 결정될 수 있다.
그 다음에, 차량의 투명 디스플레이(300a)를 통하여 투영되는 차량 외부의 설경(雪景)을 기반으로 미끄럼 경고 표시 이미지(550)가 차량의 주행 속도에 따라 점멸하는 영상 시퀀스를 정합함으로써 생성되는 증강 현실 콘텐츠가 해당 차량 탑승자(510)에게 제공될 콘텐츠로서 결정될 수 있다.
한편, 위의 결정된 콘텐츠가 다른 차량(또는 다른 차량의 차량 탑승자)과 공유될 수 있다.
도 6을 참조하면, 위의 결정된 콘텐츠가 그와 연관되는 지리학적 위치(예를 들어, 해당 도로의 GPS 좌표)를 기준으로 다른 차량의 차량 탑승자와 공유될 수 있고, 다른 차량의 차량 탑승자에 의해 그 지리학적 위치와 연관되는 위치(610)가 특정 또는 선택되면, 위의 결정된 콘텐츠가 다른 차량에게 공유될 수 있다.
예를 들어, 위와 같이 공유되는 콘텐츠 내에 "눈이 많이 와서 미끄러우니 조심하세요."라는 텍스트가 가상 객체로서 포함되어 있고, 그 공유되는 콘텐츠와 연관되는 지리학적 위치를 기준으로 해당 콘텐츠가 다른 차량의 차량 탑승자에게 공유될 수 있다. 그 다음에, 해당 콘텐츠를 공유하는 다른 차량의 차량 탑승자가 해당 콘텐츠에 대해 "이제는 괜찮네요."라는 텍스트를 가상 객체로서 추가 저작하여 재공유하는 경우에, 위의 지리학적 위치를 기준으로 그 추가 저작된 가상 객체(즉, 텍스트)(또는 위의 공유되는 콘텐츠에 대해 위의 추가 저작된 가상 객체가 반영된 콘텐츠)가 공유될 수 있다.
제3 실시예
도 7을 참조하면, 본 발명의 일 실시예에 따른 콘텐츠 제공 시스템(200)이 외부 서버(미도시됨)에 포함되는 상황을 가정해 볼 수 있다. 구체적으로, 차량 내의 적어도 하나의 디스플레이(미도시됨)를 제어하는 전자 제어 시스템(ECU)(미도시됨)과 무선 통신(예를 들어, 와이파이(WiFi), 블루투스(Bluetooth) 등) 등으로 연결되는 위의 외부 서버를 통해 차량 탑승자에게 콘텐츠가 제공되는 상황일 수 있다.
도 7을 참조하면, 먼저, 차량 주행 중에 차량의 내부 영상으로부터 특정되는 복수의 차량 탑승자(또는 차량 주행 중에 디스플레이를 대상으로 소정의 입력 행위를 수행한 복수의 차량 탑승자)의 시선, 표정, 동작 및 소리를 분석함으로써, 제1 차량 탑승자(710)와 제2 차량 탑승자(720)가 서로 다투어 제2 차량 탑승자(720)가 화가 나 있는 상황이고, 제3 차량 탑승자(730)가 창 밖을 바라보면서 웃고 있는 상황이 특정되는 경우에, 제1 차량 탑승자(710) 및 제2 차량 탑승자(720)에 대응하여 두 악마 이미지가 가상 객체로서 특정되고, 그 두 악마가 서로 싸우는 것이 해당 가상 객체에 관한 영상 시퀀스로서 결정될 수 있으며, 제3 차량 탑승자(730)에 대응하여서는 천사가 가상 객체로서 결정되고, 그 천사가 차량 주행 속도에 맞추어 차량을 따라가면서 특정 곡을 연주하는 것이 해당 가상 객체에 관한 영상 시퀀스로서 결정될 수 있다.
그 다음에, 제1 차량 탑승자(710) 및 제2 차량 탑승자의 시선(701, 702)에 대응되는 차량의 투명 디스플레이(300a)를 통하여 투영되는 차량의 주행 도로를 배경으로 위의 결정되는 가상 객체에 관한 영상 시퀀스(즉, 두 악마가 서로 싸우는 것에 관한 영상 시퀀스)를 정합함으로써, 제1 차량 탑승자(710) 및 제2 차량 탑승자에게 제공될 콘텐츠가 결정될 수 있고, 제3 차량 탑승자(730)의 시선(703)에 대응되는 차량의 투명 디스플레이(300b)를 통하여 투영되는 차량의 주행 도로를 배경으로 위의 결정되는 가상 객체에 관한 영상 시퀀스(즉, 천사가 차량 주행 속도에 맞추어 차량을 따라가면서 특정 곡을 연주하는 것에 관한 영상 시퀀스)를 정합함으로써, 제3 차량 탑승자(730)에게 제공될 콘텐츠가 결정될 수 있다.
제4 실시예
도 8을 참조하면, 차량의 복수의 디스플레이(300d, 300e, 300f) 상에서 콘텐츠가 제공되는 상황을 가정해 볼 수 있다.
예를 들어, 오리(즉, 가상 객체)(810)가 헤엄치고 있는 것이 가상 객체에 관한 영상 시퀀스로서 결정되고, 차량의 외부 실세계를 배경으로 하여 그 가상 객체에 관한 영상 시퀀스를 정합함으로써 생성되는 증강 현실 콘텐츠가 차량 탑승자(미도시됨)에게 제공될 콘텐츠로 결정되는 경우에, 복수의 디스플레이 각각(300d, 300e, 300f)에서는 각 차량 탑승자가 바라보는 시점(801, 802, 803)에 따라 오리(810)의 크기, 형상 및 형태 중 적어도 하나가 달라질 수 있다.
제5 실시예
본 발명의 일 실시예에 따르면, 차량의 복수의 디스플레이 상에서 콘텐츠가 제공되는 다른 상황을 가정해 볼 수 있다.
예를 들어, 도 8을 참조하면, 오리(즉, 가상 객체)(810)가 헤엄치고 있는 것이 가상 객체에 관한 영상 시퀀스로서 결정되고, 차량의 외부 실세계를 배경으로 하여 그 가상 객체에 관한 영상 시퀀스를 정합함으로써 생성되는 증강 현실 콘텐츠가 차량 탑승자에게 제공될 콘텐츠로 결정되는 경우에, 차량의 전후좌우의 모든 디스플레이에서 하나의 콘텐츠가 각 디스플레이의 차량 내 위치에 부합되는 시점을 기준으로 동기화되어 제공될 수 있고(예를 들어, 차량의 전면 및 좌측면의 디스플레이에서 오리(810)가 나타나고 차량의 우측면 및 후면의 디스플레이에서는 오리(810)가 나타나지 않게 됨), 이를 통해 차량 탑승자에게 마치 특정 공간에 들어와 있는 것과 같은 사용자 경험을 제공할 수 있게 된다.
이상 설명된 본 발명에 따른 실시예는 다양한 컴퓨터 구성요소를 통하여 실행될 수 있는 프로그램 명령어의 형태로 구현되어 컴퓨터 판독 가능한 기록 매체에 기록될 수 있다. 상기 컴퓨터 판독 가능한 기록 매체는 프로그램 명령어, 데이터 파일, 데이터 구조 등을 단독으로 또는 조합하여 포함할 수 있다. 상기 컴퓨터 판독 가능한 기록 매체에 기록되는 프로그램 명령어는 본 발명을 위하여 특별히 설계되고 구성된 것이거나 컴퓨터 소프트웨어 분야의 당업자에게 공지되어 사용 가능한 것일 수 있다. 컴퓨터 판독 가능한 기록 매체의 예에는, 하드 디스크, 플로피 디스크 및 자기 테이프와 같은 자기 매체, CD-ROM 및 DVD와 같은 광기록 매체, 플롭티컬 디스크(floptical disk)와 같은 자기-광 매체(magneto-optical medium), 및 ROM, RAM, 플래시 메모리 등과 같은, 프로그램 명령어를 저장하고 실행하도록 특별히 구성된 하드웨어 장치가 포함된다. 프로그램 명령어의 예에는, 컴파일러에 의하여 만들어지는 것과 같은 기계어 코드뿐만 아니라 인터프리터 등을 사용하여 컴퓨터에 의해서 실행될 수 있는 고급 언어 코드도 포함된다. 하드웨어 장치는 본 발명에 따른 처리를 수행하기 위하여 하나 이상의 소프트웨어 모듈로 변경될 수 있으며, 그 역도 마찬가지이다.
이상에서 본 발명이 구체적인 구성요소 등과 같은 특정 사항과 한정된 실시예 및 도면에 의하여 설명되었으나, 이는 본 발명의 보다 전반적인 이해를 돕기 위하여 제공된 것일 뿐, 본 발명이 상기 실시예에 한정되는 것은 아니며, 본 발명이 속하는 기술분야에서 통상적인 지식을 가진 자라면 이러한 기재로부터 다양한 수정과 변경을 꾀할 수 있다.
따라서, 본 발명의 사상은 상기 설명된 실시예에 국한되어 정해져서는 아니 되며, 후술하는 특허청구범위뿐만 아니라 이 특허청구범위와 균등한 또는 이로부터 등가적으로 변경된 모든 범위는 본 발명의 사상의 범주에 속한다고 할 것이다.

Claims (23)

  1. 콘텐츠를 제공하는 방법으로서,
    적어도 한 명의 차량 탑승자의 상황 정보 및 상기 차량의 주행 정보 중 적어도 하나를 참조하여 가상 객체에 관한 영상 시퀀스를 결정하는 단계, 및
    상기 차량의 적어도 하나의 디스플레이를 통하여 투영되는 상기 차량의 외부 실세계를 기반으로 상기 가상 객체에 관한 영상 시퀀스를 정합함으로써, 상기 적어도 한 명의 차량 탑승자에게 제공될 콘텐츠를 결정하는 단계를 포함하는
    방법.
  2. 제1항에 있어서,
    상기 영상 시퀀스 결정 단계에서, 상기 적어도 한 명의 차량 탑승자 및 상기 적어도 한 명의 차량 탑승자의 상황 정보 중 적어도 하나는 상기 차량의 내부 영상으로부터 특정되는
    방법.
  3. 제1항에 있어서,
    상기 영상 시퀀스 결정 단계에서, 상기 차량의 외부 영상으로부터 특정되는 실세계 객체에 관한 정보를 더 참조하여 상기 가상 객체에 관한 영상 시퀀스를 결정하는
    방법.
  4. 제1항에 있어서,
    상기 영상 시퀀스 결정 단계에서, 상기 차량 탑승자 각각에 대해 또는 상기 차량 탑승자의 그룹 각각에 대해 상기 가상 객체에 관한 영상 시퀀스를 결정하는
    방법.
  5. 제1항에 있어서,
    상기 영상 시퀀스 결정 단계에서, 상기 차량 탑승자가 상기 차량 내에서 착석하고 있는 좌석 각각에 대해 또는 상기 좌석의 그룹 각각에 대해 상기 가상 객체에 관한 영상 시퀀스를 결정하는
    방법.
  6. 제1항에 있어서,
    상기 영상 시퀀스 결정 단계에서, 상기 차량 탑승자의 시점(view point), 상기 차량의 좌석 위치에 따른 시점 및 상기 적어도 하나의 디스플레이의 차량 내 위치에 따른 시점 중 적어도 하나를 참조하여 상기 가상 객체에 관한 영상 시퀀스를 결정하는
    방법.
  7. 제1항에 있어서,
    상기 영상 시퀀스 결정 단계에서, 상기 차량 탑승자의 개인 정보를 더 참조하여 상기 가상 객체에 관한 영상 시퀀스를 결정하는
    방법.
  8. 제1항에 있어서,
    상기 콘텐츠 결정 단계에서, 상기 적어도 하나의 디스플레이를 통하여 투영되는 상기 차량의 외부 실세계의 객체에 관한 속성을 참조하여 상기 가상 객체에 관한 영상 시퀀스를 정합하는
    방법.
  9. 제1항에 있어서,
    상기 콘텐츠 결정 단계는, 상기 적어도 하나의 디스플레이 중 상기 적어도 한 명의 차량 탑승자와 연관되는 디스플레이에 기초하여 상기 결정되는 콘텐츠를 제공하는 단계를 포함하는
    방법.
  10. 제9항에 있어서,
    상기 적어도 하나의 디스플레이 중 상기 적어도 한 명의 차량 탑승자 각각의 시선에 대응되는 디스플레이를 기준으로 상기 결정되는 콘텐츠를 제공하는
    방법.
  11. 제1항에 있어서,
    상기 콘텐츠 결정 단계는, 상기 적어도 하나의 디스플레이에서 상기 결정되는 콘텐츠를 상기 적어도 하나의 디스플레이 각각의 상기 차량 내 위치에 부합되는 시점을 기준으로 동기화하여 제공하는 단계를 포함하는
    방법.
  12. 제1항에 따른 방법을 실행하기 위한 컴퓨터 프로그램을 기록한 비일시성의 컴퓨터 판독 가능 기록 매체.
  13. 콘텐츠를 제공하는 시스템으로서,
    적어도 한 명의 차량 탑승자의 상황 정보 및 상기 차량의 주행 정보 중 적어도 하나를 참조하여 가상 객체에 관한 영상 시퀀스를 결정하는 가상 객체 시퀀스 관리부, 및
    상기 차량의 적어도 하나의 디스플레이를 통하여 투영되는 상기 차량의 외부 실세계를 기반으로 상기 가상 객체에 관한 영상 시퀀스를 정합함으로써, 상기 적어도 한 명의 차량 탑승자에게 제공될 콘텐츠를 결정하는 콘텐츠 관리부를 포함하는
    시스템.
  14. 제13항에 있어서,
    상기 적어도 한 명의 차량 탑승자 및 상기 적어도 한 명의 차량 탑승자의 상황 정보 중 적어도 하나는 상기 차량의 내부 영상으로부터 특정되는
    시스템.
  15. 제13항에 있어서,
    상기 가상 객체 시퀀스 관리부는, 상기 차량의 외부 영상으로부터 특정되는 실세계 객체에 관한 정보를 더 참조하여 상기 가상 객체에 관한 영상 시퀀스를 결정하는
    시스템.
  16. 제13항에 있어서,
    상기 가상 객체 시퀀스 관리부는, 상기 차량 탑승자 각각에 대해 또는 상기 차량 탑승자의 그룹 각각에 대해 상기 가상 객체에 관한 영상 시퀀스를 결정하는
    시스템.
  17. 제13항에 있어서,
    상기 가상 객체 시퀀스 관리부는, 상기 차량 탑승자가 상기 차량 내에서 착석하고 있는 좌석 각각에 대해 또는 상기 좌석의 그룹 각각에 대해 상기 가상 객체에 관한 영상 시퀀스를 결정하는
    시스템.
  18. 제13항에 있어서,
    상기 가상 객체 시퀀스 관리부는, 상기 차량 탑승자의 시점, 상기 차량의 좌석 위치에 따른 시점 및 상기 적어도 하나의 디스플레이의 차량 내 위치에 따른 시점 중 적어도 하나를 참조하여 상기 가상 객체에 관한 영상 시퀀스를 결정하는
    시스템.
  19. 제13항에 있어서,
    상기 가상 객체 시퀀스 관리부는, 상기 차량 탑승자의 개인 정보를 더 참조하여 상기 가상 객체에 관한 영상 시퀀스를 결정하는
    시스템.
  20. 제13항에 있어서,
    상기 콘텐츠 관리부는, 상기 적어도 하나의 디스플레이를 통하여 투영되는 상기 차량의 외부 실세계의 객체에 관한 속성을 참조하여 상기 가상 객체에 관한 영상 시퀀스를 정합하는
    시스템.
  21. 제13항에 있어서,
    상기 콘텐츠 관리부는, 상기 적어도 하나의 디스플레이 중 상기 적어도 한 명의 차량 탑승자와 연관되는 디스플레이에 기초하여 상기 결정되는 콘텐츠를 제공하는
    시스템.
  22. 제21항에 있어서,
    상기 콘텐츠 관리부는, 상기 적어도 하나의 디스플레이 중 상기 적어도 한 명의 차량 탑승자 각각의 시선에 대응되는 디스플레이를 기준으로 상기 결정되는 콘텐츠를 제공하는
    시스템.
  23. 제13항에 있어서,
    상기 콘텐츠 관리부는, 상기 적어도 하나의 디스플레이에서 상기 결정되는 콘텐츠를 상기 적어도 하나의 디스플레이 각각의 상기 차량 내 위치에 부합되는 시점을 기준으로 동기화하여 제공하는
    시스템.
PCT/KR2020/006806 2019-05-29 2020-05-26 콘텐츠를 제공하는 방법, 시스템 및 비일시성의 컴퓨터 판독 가능 기록 매체 WO2020242179A1 (ko)

Applications Claiming Priority (4)

Application Number Priority Date Filing Date Title
KR20190063491 2019-05-29
KR10-2019-0063491 2019-05-29
KR10-2020-0056782 2020-05-12
KR1020200056782A KR20200137992A (ko) 2019-05-29 2020-05-12 콘텐츠를 제공하는 방법, 시스템 및 비일시성의 컴퓨터 판독 가능 기록 매체

Publications (1)

Publication Number Publication Date
WO2020242179A1 true WO2020242179A1 (ko) 2020-12-03

Family

ID=73554101

Family Applications (1)

Application Number Title Priority Date Filing Date
PCT/KR2020/006806 WO2020242179A1 (ko) 2019-05-29 2020-05-26 콘텐츠를 제공하는 방법, 시스템 및 비일시성의 컴퓨터 판독 가능 기록 매체

Country Status (2)

Country Link
KR (1) KR102592675B1 (ko)
WO (1) WO2020242179A1 (ko)

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20140354684A1 (en) * 2013-05-28 2014-12-04 Honda Motor Co., Ltd. Symbology system and augmented reality heads up display (hud) for communicating safety information
KR20160039258A (ko) * 2013-07-26 2016-04-08 아베엘 리스트 게엠베하 테스트 벤치에서의 시운전을 수행하기 위한 방법
KR20170024904A (ko) * 2015-08-26 2017-03-08 엘지전자 주식회사 운전 보조 장치 및 그 제어 방법
KR20180082739A (ko) * 2017-01-11 2018-07-19 전자부품연구원 단일 카메라를 이용한 영상에서 움직이는 객체 검출 방법 및 시스템
KR20180125885A (ko) * 2017-05-16 2018-11-26 삼성전자주식회사 차량의 주행 이벤트를 검출하는 전자 장치 및 방법

Family Cites Families (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20180014910A (ko) 2016-08-02 2018-02-12 김지현 가상현실 속 증강현실을 이용한 관광 콘텐츠 및 그 제공시스템
JP6612707B2 (ja) * 2016-09-30 2019-11-27 本田技研工業株式会社 情報提供装置

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20140354684A1 (en) * 2013-05-28 2014-12-04 Honda Motor Co., Ltd. Symbology system and augmented reality heads up display (hud) for communicating safety information
KR20160039258A (ko) * 2013-07-26 2016-04-08 아베엘 리스트 게엠베하 테스트 벤치에서의 시운전을 수행하기 위한 방법
KR20170024904A (ko) * 2015-08-26 2017-03-08 엘지전자 주식회사 운전 보조 장치 및 그 제어 방법
KR20180082739A (ko) * 2017-01-11 2018-07-19 전자부품연구원 단일 카메라를 이용한 영상에서 움직이는 객체 검출 방법 및 시스템
KR20180125885A (ko) * 2017-05-16 2018-11-26 삼성전자주식회사 차량의 주행 이벤트를 검출하는 전자 장치 및 방법

Also Published As

Publication number Publication date
KR20220065733A (ko) 2022-05-20
KR102592675B1 (ko) 2023-10-23

Similar Documents

Publication Publication Date Title
US20130249947A1 (en) Communication using augmented reality
US20130219357A1 (en) Coherent presentation of multiple reality and interaction models
US20130232430A1 (en) Interactive user interface
US20130226758A1 (en) Delivering aggregated social media with third party apis
KR20190110498A (ko) 영상 파일에서 불특정 인물의 얼굴 영역을 비식별화 처리하는 인공 지능 서버 및 그 방법
WO2021002519A1 (ko) 차량용 광고 제공 장치 및 차량용 광고 제공 방법
CN106240456A (zh) 驾驶员辅助设备及其控制方法
CN105654808A (zh) 一种基于实际机动车的机动车驾驶人智能化训练系统
CN110009720A (zh) Ar场景中的图像处理方法、装置、电子设备及存储介质
WO2021002687A1 (ko) 사용자 간의 경험 공유를 지원하기 위한 방법, 시스템 및 비일시성의 컴퓨터 판독 가능 기록 매체
WO2018155931A1 (ko) 지식 맵 기반의 멀티 유저 게임 서비스 제공 장치 및 그 방법
WO2020130692A1 (ko) 애니메이션 시퀀스를 생성하는 방법, 시스템 및 비일시성의 컴퓨터 판독 가능 기록 매체
WO2018155929A1 (ko) 지식 맵 상의 레슨 경로 기반의 게임 서비스 제공 장치 및 그 방법
US11592303B2 (en) Processing apparatus, processing method, and program
CN113589938A (zh) 具备弹幕功能的车载终端信息分享系统
JP2021508844A (ja) 複数のデバイスの協働によりホログラフィ・オブジェクト経路及びオブジェクトの移動を決定及び投影するための方法、コンピュータ・システム及びコンピュータ・プログラム
JP7205457B2 (ja) 装置、システム、方法およびプログラム
CN114937296A (zh) 基于用户识别的声光匹配方法、系统、设备及存储介质
WO2022114820A1 (ko) 사용자 간의 경험 공유를 지원하기 위한 방법, 시스템 및 비일시성의 컴퓨터 판독 가능 기록 매체
WO2020242179A1 (ko) 콘텐츠를 제공하는 방법, 시스템 및 비일시성의 컴퓨터 판독 가능 기록 매체
CN108564394B (zh) 一种有声广告投放方法和终端
CN114648624A (zh) 显示系统、显示装置及程序
CN108881846A (zh) 信息融合方法、装置及计算机可读存储介质
WO2022019692A1 (ko) 애니메이션을 저작하기 위한 방법, 시스템 및 비일시성의 컴퓨터 판독 가능 기록 매체
KR20200137992A (ko) 콘텐츠를 제공하는 방법, 시스템 및 비일시성의 컴퓨터 판독 가능 기록 매체

Legal Events

Date Code Title Description
121 Ep: the epo has been informed by wipo that ep was designated in this application

Ref document number: 20815093

Country of ref document: EP

Kind code of ref document: A1

NENP Non-entry into the national phase

Ref country code: DE

122 Ep: pct application non-entry in european phase

Ref document number: 20815093

Country of ref document: EP

Kind code of ref document: A1