KR101906711B1 - 차량 정보 및 가상 현실을 위한 활성 윈도우 - Google Patents

차량 정보 및 가상 현실을 위한 활성 윈도우 Download PDF

Info

Publication number
KR101906711B1
KR101906711B1 KR1020170018134A KR20170018134A KR101906711B1 KR 101906711 B1 KR101906711 B1 KR 101906711B1 KR 1020170018134 A KR1020170018134 A KR 1020170018134A KR 20170018134 A KR20170018134 A KR 20170018134A KR 101906711 B1 KR101906711 B1 KR 101906711B1
Authority
KR
South Korea
Prior art keywords
vehicle
display
image
window
camera
Prior art date
Application number
KR1020170018134A
Other languages
English (en)
Other versions
KR20170097560A (ko
Inventor
브랜트 켄델로어
Original Assignee
소니 주식회사
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 소니 주식회사 filed Critical 소니 주식회사
Publication of KR20170097560A publication Critical patent/KR20170097560A/ko
Application granted granted Critical
Publication of KR101906711B1 publication Critical patent/KR101906711B1/ko

Links

Images

Classifications

    • G—PHYSICS
    • G02—OPTICS
    • G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B27/00—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
    • G02B27/01—Head-up displays
    • G—PHYSICS
    • G02—OPTICS
    • G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B27/00—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
    • G02B27/01—Head-up displays
    • G02B27/0101—Head-up displays characterised by optical features
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60R—VEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
    • B60R1/00—Optical viewing arrangements; Real-time viewing arrangements for drivers or passengers using optical image capturing systems, e.g. cameras or video systems specially adapted for use in or on vehicles
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60J—WINDOWS, WINDSCREENS, NON-FIXED ROOFS, DOORS, OR SIMILAR DEVICES FOR VEHICLES; REMOVABLE EXTERNAL PROTECTIVE COVERINGS SPECIALLY ADAPTED FOR VEHICLES
    • B60J1/00—Windows; Windscreens; Accessories therefor
    • B60J1/08—Windows; Windscreens; Accessories therefor arranged at vehicle sides
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60J—WINDOWS, WINDSCREENS, NON-FIXED ROOFS, DOORS, OR SIMILAR DEVICES FOR VEHICLES; REMOVABLE EXTERNAL PROTECTIVE COVERINGS SPECIALLY ADAPTED FOR VEHICLES
    • B60J3/00—Antiglare equipment associated with windows or windscreens; Sun visors for vehicles
    • B60J3/04—Antiglare equipment associated with windows or windscreens; Sun visors for vehicles adjustable in transparency
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60J—WINDOWS, WINDSCREENS, NON-FIXED ROOFS, DOORS, OR SIMILAR DEVICES FOR VEHICLES; REMOVABLE EXTERNAL PROTECTIVE COVERINGS SPECIALLY ADAPTED FOR VEHICLES
    • B60J7/00—Non-fixed roofs; Roofs with movable panels, e.g. rotary sunroofs
    • B60J7/02—Non-fixed roofs; Roofs with movable panels, e.g. rotary sunroofs of sliding type, e.g. comprising guide shoes
    • B60J7/04—Non-fixed roofs; Roofs with movable panels, e.g. rotary sunroofs of sliding type, e.g. comprising guide shoes with rigid plate-like element or elements, e.g. open roofs with harmonica-type folding rigid panels
    • B60J7/043—Sunroofs e.g. sliding above the roof
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60K—ARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K35/00—Instruments specially adapted for vehicles; Arrangement of instruments in or on vehicles
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60K—ARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K35/00—Instruments specially adapted for vehicles; Arrangement of instruments in or on vehicles
    • B60K35/10—Input arrangements, i.e. from user to vehicle, associated with vehicle functions or specially adapted therefor
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60K—ARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K35/00—Instruments specially adapted for vehicles; Arrangement of instruments in or on vehicles
    • B60K35/60—Instruments characterised by their location or relative disposition in or on vehicles
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/011—Arrangements for interaction with the human body, e.g. for user immersion in virtual reality
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T11/00—2D [Two Dimensional] image generation
    • G06T11/60—Editing figures and text; Combining figures or text
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T19/00—Manipulating 3D models or images for computer graphics
    • G06T19/003—Navigation within 3D models or images
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00—Image analysis
    • G06T7/70—Determining position or orientation of objects or cameras
    • B60K2350/2013—
    • B60K2350/2056—
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60K—ARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K2360/00—Indexing scheme associated with groups B60K35/00 or B60K37/00 relating to details of instruments or dashboards
    • B60K2360/143—Touch sensitive instrument input devices
    • B60K2360/1438—Touch screens
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60K—ARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K2360/00—Indexing scheme associated with groups B60K35/00 or B60K37/00 relating to details of instruments or dashboards
    • B60K2360/20—Optical features of instruments
    • B60K2360/21—Optical features of instruments using cameras
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60K—ARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K2360/00—Indexing scheme associated with groups B60K35/00 or B60K37/00 relating to details of instruments or dashboards
    • B60K2360/20—Optical features of instruments
    • B60K2360/27—Optical features of instruments using semi-transparent optical elements
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60K—ARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K2360/00—Indexing scheme associated with groups B60K35/00 or B60K37/00 relating to details of instruments or dashboards
    • B60K2360/77—Instrument locations other than the dashboard
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60R—VEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
    • B60R2300/00—Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle
    • B60R2300/10—Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle characterised by the type of camera system used
    • B60R2300/105—Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle characterised by the type of camera system used using multiple cameras
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60R—VEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
    • B60R2300/00—Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle
    • B60R2300/20—Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle characterised by the type of display used
    • B60R2300/205—Details of viewing arrangements using cameras and displays, specially adapted for use in a vehicle characterised by the type of display used using a head-up display
    • G—PHYSICS
    • G02—OPTICS
    • G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B27/00—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
    • G02B27/01—Head-up displays
    • G02B27/0101—Head-up displays characterised by optical features
    • G02B2027/013—Head-up displays characterised by optical features comprising a combiner of particular shape, e.g. curvature
    • G—PHYSICS
    • G02—OPTICS
    • G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B27/00—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
    • G02B27/01—Head-up displays
    • G02B27/0101—Head-up displays characterised by optical features
    • G02B2027/0138—Head-up displays characterised by optical features comprising image capture systems, e.g. camera
    • G—PHYSICS
    • G02—OPTICS
    • G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B27/00—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
    • G02B27/01—Head-up displays
    • G02B27/0101—Head-up displays characterised by optical features
    • G02B2027/014—Head-up displays characterised by optical features comprising information/image processing systems
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00—Indexing scheme for image analysis or image enhancement
    • G06T2207/30—Subject of image; Context of image processing
    • G06T2207/30248—Vehicle exterior or interior

Landscapes

  • Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • Mechanical Engineering (AREA)
  • General Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • General Engineering & Computer Science (AREA)
  • Transportation (AREA)
  • Combustion & Propulsion (AREA)
  • Chemical & Material Sciences (AREA)
  • Optics & Photonics (AREA)
  • Software Systems (AREA)
  • Human Computer Interaction (AREA)
  • Computer Hardware Design (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Computer Graphics (AREA)
  • Remote Sensing (AREA)
  • Radar, Positioning & Navigation (AREA)
  • Multimedia (AREA)
  • Controls And Circuits For Display Device (AREA)
  • User Interface Of Digital Computer (AREA)
  • Liquid Crystal (AREA)
  • Processing Or Creating Images (AREA)
  • Studio Devices (AREA)

Abstract

차량 상의 카메라는 주변의 이미지를 캡쳐하고, 이미지는 OLED 디스플레이 또는 투명 LCD 디스플레이와 같은 투명 디스플레이에 의해 설정된 차량의 윈도우에 제시된다. 카메라로부터의 이미지는 차량에 대한 카메라의 각도에 따라 디스플레이 상에 제시되어, 탑승자가 윈도우를 통해 이미지 내의 물체를 볼 수 있는 것과 주변에 대해 실질적으로 동일한 상대 위치의 윈도우 상의 이미지를 차량의 탑승자가 볼 수 있게 한다. 다른 실시예에서, 데이터베이스로부터의 이미지들은 윈도우를 통해 보이는 배경 물체들 상에 중첩된 윈도우 상에 제시된다.

Description

차량 정보 및 가상 현실을 위한 활성 윈도우{ACTIVE WINDOW FOR VEHICLE INFOMATICS AND VIRTUAL REALITY}
본 출원은 일반적으로 차량용 활성 윈도우에 관한 것이다.
차량들은 윈도우 유리가 차지하는 상당한 양의 표면적을 갖는다. 예를 들어, 차량에는 비교적 큰 전면 유리, 측면 윈도우, 후면 윈도우, 및 선 루프가 있다.
본 명세서에서 이해되는 바와 같이, 차량 윈도우 유리는 수동적이며 달리 정보를 제공하는데 사용되지 않는다. 또한, 본 명세서에서 이해되는 바와 같이, 활성 차량 윈도우 유리는 원하는 대로 투명하거나 불투명한 능력을 유지하면서 비디오, 이미지, 텍스트, 및 다른 정보를 나타낼 수 있다.
따라서, 장치는 일시적인 신호가 아닌 적어도 하나의 컴퓨터 메모리를 포함하고, 이 적어도 하나의 컴퓨터 메모리는 차량의 주변을 캡쳐하기 위해 장착된 카메라로부터 이미지를 수신하기 위한 적어도 하나의 프로세서에 의해 실행 가능한 명령어들을 포함한다. 명령어들은 차량에 대한 카메라의 방향을 나타내는 데이터에 액세스하도록 실행 가능하고, 차량에 대한 카메라의 방향을 나타내는 데이터에 적어도 부분적으로 기초하여, 차량 상의 디스플레이 상에 물체를 제시한다.
본 발명의 일 실시예에서, 방법은 실내 탑승자에 대한 차량 유리의 경사 및 각도를 보상하기 위해 디스플레이된 이미지를 처리하는 단계를 포함한다. 이러한 방식으로, 차량의 탑승자는 실질적으로 이미지를 똑바로 보는 것처럼 윈도우 상의 이미지를 본다.
예에서, 디스플레이는 차량의 윈도우이다. 디스플레이는 투명 유기 발광 다이오드(OLED) 디스플레이일 수 있다. 또는, 디스플레이는 투명 액정 디스플레이(LCD)일 수 있다. 다시, 디스플레이는 차량의 윈도우가 아닐 수도 있으며, 불투명한, 예를 들어 차량의 돔 루프 또는 차량 정면 대시 또는 측면 패널일 수 있다.
이미지는 카메라에 의해 생성될 수 있다. 다른 실시예들에서, 이미지는 카메라에 의해 생성되지 않고 대신에 카메라로부터의 적어도 하나의 이미지에서 적어도 하나의 물체의 물체 인식을 사용하여 데이터베이스로부터 선택된다. 또 다른 실시예에서, 이미지에 합성된 소정 물체 및 장면을 갖는 이미지가 카메라에 의해 생성된다. 결과로 얻어진 이미지는 외부 주변과 합성 물체의 혼합이다.
다른 실시예들에서, 이미지는 카메라에 의해 생성되지 않고 풍경 및 파노라마의 데이터베이스로부터 선택된다. 풍경과 파노라마를 통해 차량의 움직임을 반영하도록 이미지가 변경될 수 있다.
또 다른 양태에서, 방법은 카메라를 사용하여, 적어도 하나의 이미지를 생성하기 위해 차량의 주변을 이미지화하는 단계와, 차량에 대한 카메라의 각도에 따라 차량의 적어도 하나의 윈도우 상에 이미지를 제시하는 단계를 포함한다. 이러한 방식으로, 차량의 탑승자는 탑승자가 윈도우를 통해 물체들을 볼 수 있는 것과 주변에 대해 실질적으로 동일한 상대 위치의 윈도우 상의 이미지를 본다.
또 다른 양태에서, 어셈블리는 자동차, 차량에 장착된 적어도 하나의 카메라, 탑승자의 눈 높이에서 차량에 장착된 적어도 하나의 디스플레이를 포함한다. 적어도 하나의 프로세서는 차량에 대한 카메라의 방향을 나타내는 적어도 방향 데이터를 포함하는 데이터를 수신하기 위한 명령어들로 구성된다. 프로세서는 그에 기초하여 디스플레이 상에 적어도 하나의 이미지를 제공하도록 구성된다.
또 다른 양태에서, 장치는 차량 윈도우의 곡률 및 윤곽에 매칭되도록 구성된 디스플레이를 포함한다. 디스플레이는 차량의 실내 탑승자에게 텍스트, 비디오 및 이미지들을 렌더링할 수 있다. 디스플레이는 투명 유기 발광 다이오드(OLED) 또는 투명 액정 디스플레이(LCD)이다.
본 발명의 구조 및 동작 양자에 관한 상세들은 첨부 도면들을 참조하여 최상으로 이해될 수 있으며, 도면들에서 동일한 참조 번호들은 동일한 부분들을 참조하며, 도면들에서:
도 1은 본 원리에 따른 예를 포함하는 예시적인 시스템의 블록도이다.
도 2는 윈도우 디스플레이 상에 제시된 이미지 및 윈도우를 통해 보여지는 물리적 물체를 나타내는 차량의 윈도우 디스플레이의 개략도이며, 디스플레이 영역은 점선으로 나타나 있다.
도 3은 일 실시예에 따른 예시적인 로직의 흐름도이다.
도 4는 향상된 시청을 선택하기 위한 예시적인 사용자 인터페이스(UI)의 스크린 샷이다.
도 5는 또 다른 실시예에 따른 예시적인 로직의 흐름도이다.
본 개시내용은 일반적으로 소비자 가전제품(CE) 디바이스를 포함할 수 있는 컴퓨터 네트워크의 양태를 포함하는 컴퓨터 생태계에 관한 것이다. 본 명세서의 시스템은 데이터가 클라이언트와 서버 컴포넌트들 사이에서 교환될 수 있도록 네트워크를 통해 연결된 서버 및 클라이언트 컴포넌트들을 포함할 수 있다. 클라이언트 컴포넌트들은 휴대용 텔레비전(예를 들어, 스마트 TV, 인터넷 가능 TV), 랩톱 및 태블릿 컴퓨터와 같은 휴대용 컴퓨터, 및 스마트 폰을 포함하는 다른 모바일 디바이스 및 이하에 설명되는 추가의 예를 포함하는 하나 이상의 컴퓨팅 디바이스를 포함할 수 있다. 이러한 클라이언트 디바이스는 다양한 운영 환경에서 작동할 수 있다. 예를 들어, 일부 클라이언트 컴퓨터는 마이크로소프트(Microsoft)로부터의 운영 체제, 또는 유닉스(Unix) 운영 체제, 또는 애플 컴퓨터(Apple Computer) 또는 구글(Google)이 운영하는 운영 체제를 예로 들 수 있다. 이러한 운영 환경은 마이크로소프트(Microsoft), 구글(Google) 또는 모질라(Mozilla)가 만든 브라우저 또는 이하에 설명되는 인터넷 서버에 의해 호스팅되는 웹 사이트에 액세스할 수 있는 다른 브라우저 프로그램과 같은 하나 이상의 브라우징 프로그램을 실행하는데 사용될 수 있다.
서버 및/또는 게이트웨이는 인터넷과 같은 네트워크를 통해 데이터를 수신 및 송신하도록 서버를 구성하는 명령어들을 실행하는 하나 이상의 프로세서를 포함할 수 있다. 또는, 클라이언트 및 서버는 로컬 인트라넷 또는 가상 사설 네트워크를 통해 연결될 수 있다. 서버 또는 제어기가 Sony Playstation(상표등록)과 같은 게임 콘솔, 개인용 컴퓨터 등에 의해 인스턴스화될 수 있다.
네트워크를 통해 클라이언트와 서버 사이에서 정보가 교환될 수 있다. 이를 위해 그리고 보안을 위해, 서버 및/또는 클라이언트는 신뢰성 및 보안을 위해 방화벽, 부하 분산기, 임시 저장소, 및 프록시, 그리고 다른 네트워크 인프라를 포함할 수 있다.
본 명세서에서 사용된 바와 같은, 명령어들은 시스템에서 정보를 처리하기 위한 컴퓨터로 구현된 단계를 말한다. 명령어들은 소프트웨어, 펌웨어 또는 하드웨어로 구현될 수 있고, 시스템의 컴포넌트들에 의해 실시되는 임의의 유형의 프로그램된 단계를 포함할 수 있다.
프로세서는 주소 라인, 데이터 라인, 및 제어 라인과 같은 다양한 라인과 레지스터 및 시프트 레지스터에 의해 로직을 실행할 수 있는 임의의 종래의 범용 단일 칩 또는 다중 칩 프로세서일 수 있다.
본 명세서의 흐름도 및 사용자 인터페이스에 의해 기술된 소프트웨어 모듈들은 다양한 서브 루틴, 절차 등을 포함할 수 있다. 개시내용을 제한하지 않으면서, 특정 모듈에 의해 실행되도록 명시된 로직은 다른 소프트웨어 모듈로 재분배될 수 있고 및/또는 함께 단일 모듈에 결합될 수 있고 및/또는 공유 가능한 라이브러리에서 활용 가능하다.
본 명세서에 기술되는 본 원리는 하드웨어, 소프트웨어, 펌웨어, 또는 이들의 조합으로 구현될 수 있고; 따라서 예시적인 컴포넌트, 블록, 모듈, 회로, 및 단계가 그의 기능의 측면에서 기재되어 있다.
상술한 것에 더하여, 후술하는 로직 블록들, 모듈들 및 회로들은 본 명세서에서 설명되는 기능들을 수행하도록 설계되는 범용 프로세서, 디지털 신호 프로세서(DSP), 필드 프로그래머블 게이트 어레이(FPGA), 또는 주문형 집적 회로(ASIC)와 같은 다른 프로그램가능 로직 디바이스, 개별 게이트 또는 트랜지스터 로직, 개별 하드웨어 컴포넌트들, 또는 이들의 임의 조합을 이용하여 구현 또는 수행될 수 있다. 프로세서는 제어기 또는 상태 머신 또는 컴퓨팅 디바이스들의 조합에 의해 구현될 수 있다.
이하에서 기술되는 기능 및 방법은, 소프트웨어로 구현될 때, C# 또는 C++와 같은, 그러나 이에 제한되지 않는 적절한 언어로 작성될 수 있고, RAM(random access memory), ROM(read-only memory), EEPROM(electrically erasable programmable read-only memory), CD-ROM(compact disk read-only memory) 또는 DVD(digital versatile disc)와 같은 다른 광 디스크 저장소, 자기 디스크 저장소 또는 이동식 썸 드라이브(removable thumb drive)를 포함하는 다른 자기 저장 디바이스 등과 같은 컴퓨터 판독 가능 저장 매체 상에 저장되거나 그를 통해 전송될 수 있다. 연결은 컴퓨터 판독 가능 매체를 설정할 수 있다. 이러한 연결은, 예로서, 광섬유 및 동축 와이어 및 DSL(digital subscriber line) 및 연선(twisted pair wire)을 비롯한 유선 케이블을 포함할 수 있다.
일 실시예에 포함된 컴포넌트들은 임의의 적절한 조합으로 다른 실시예에서 사용될 수 있다. 예를 들어, 본 명세서에 기술되고 및/또는 도면들에 도시되는 다양한 컴포넌트들 중 임의의 것이 결합되거나 교체되거나 다른 실시예들로부터 배제될 수 있다.
"A, B, 및 C 중 적어도 하나를 갖는 시스템"(마찬가지로 "A, B, 또는 C 중 적어도 하나를 갖는 시스템" 및 "A, B, C 중 적어도 하나를 갖는 시스템")은 A만, B만, C만, A와 B를 함께, A와 C를 함께, B와 C를 함께, 및/또는 A, B 및 C를 함께, 기타 등등을 갖는 시스템을 포함한다.
이제 도 1을 구체적으로 참조하면, 본 원리에 따른, 앞서 언급되고 이하에서 추가로 기술되는 예시적인 디바이스들 중 하나 이상을 포함할 수 있는 예시적인 생태계(10)가 도시되어 있다. 시스템(10)에 포함된 예시적인 디바이스들 중 제1 디바이스는 예시적인 주 디스플레이 디바이스(primary display device)로서 구성된 CE(consumer electronics) 디바이스이고, 도시된 실시예에서, TV 튜너(이와 동등하게, TV를 제어하는 셋톱 박스)를 갖는 인터넷 가능 TV와 같은, 그러나 이에 한정되지 않는 AVDD(audio video display device: 오디오 비디오 디스플레이 디바이스)(12)이다. 또한, AVDD(12)는 대안적으로 컴퓨터화된 인터넷 가능("스마트") 전화기, 태블릿 컴퓨터, 노트북 컴퓨터, 착용형 컴퓨터화된 디바이스, 예를 들면, 컴퓨터화된 인터넷 가능 시계, 컴퓨터화된 인터넷 가능 팔찌, 다른 컴퓨터화된 인터넷 가능 디바이스, 컴퓨터화된 인터넷 가능 음악 플레이어, 컴퓨터화된 인터넷 가능 헤드폰, 컴퓨터화된 인터넷 가능 이식 가능한 디바이스, 예를 들어 이식 가능한 피부 디바이스, 등일 수 있다. 이에 무관하게, AVDD(12) 및/또는 본 명세서에 설명된 다른 컴퓨터는 본 원리를 수행하도록(예를 들어, 다른 CE 디바이스들과 통신하여 본 원리를 수행하고, 본 명세서에 기술된 로직을 실행하며, 본 명세서에 기술된 임의의 다른 기능 및/또는 동작을 수행하도록) 구성되는 것으로 이해된다. 도 1에 도시된 컴포넌트들의 일부 또는 전부를 갖는 AVDD(12)는 이하에서 더 설명되는 바와 같이 차량에 장착되거나 차량에 통합될 수 있다. 차량은 사람이 차량을 운전하기 위한 스티어링 휠을 갖는 자동차 또는 트럭과 같은 자동차이거나 또는 인간이 차량을 제어하기 위한 스티어링 휠 또는 다른 수단이 없는 전동 무인 차량일 수 있다.
따라서, 이런 원리들을 수행하기 위하여, AVDD(12)는 도 1에 도시된 컴포넌트들의 일부 또는 모두에 의해 구축될 수 있다. 예를 들어, AVDD(12)는 HD(high definition) 또는 UHD(ultra-high definition) "4K" 이상 평판 스크린에 의해 구현될 수 있는 그리고 디스플레이 상에서의 터치를 통해 사용자 입력 신호를 수신하기 위해 터치 가능일 수 있는 하나 이상의 디스플레이(14)를 포함할 수 있다. AVDD(12)는 본 원리에 따라 오디오를 출력하기 위한 하나 이상의 스피커(16), 및 예를 들어, AVDD(12)를 제어하기 위해 가청 명령을 AVDD(12)에 입력하기 위한 예를 들어, 오디오 수신기/마이크로폰 등의 적어도 하나의 부가 입력 디바이스(18)를 포함할 수 있다. 예시적인 AVDD(12)는 또한 하나 이상의 프로세서(24)의 제어 하에서 인터넷, WAN, LAN, 기타 등등과 같은 적어도 하나의 네트워크(22)를 통한 통신을 위한 하나 이상의 네트워크 인터페이스(20)를 포함할 수 있다. 따라서, 인터페이스(20)는 메쉬 네트워크 송수신기와 같은, 그러나 이에 한정되지 않는 무선 컴퓨터 네트워크 인터페이스의 일 예인, Wi-Fi 송수신기일 수 있으며, 이에 제한되지 않는다. 프로세서(24)가 본 원리를 수행하기 위해, 본 명세서에 기술되는 AVDD(12)의 다른 요소들(예를 들어, 디스플레이(14) 상에 이미지들을 제시하고 그로부터 입력을 수신하기 위해 디스플레이(14)를 제어하는 것 등)을 비롯하여, AVDD(12)를 제어한다는 것을 이해할 것이다. 게다가, 유의할 점은, 네트워크 인터페이스(20)가, 예를 들어, 유선 또는 무선 모뎀 또는 라우터, 또는 다른 적절한 인터페이스(예를 들어, 무선 전화 송수신기, 또는 앞서 언급된 바와 같은 Wi-Fi 송수신기, 기타 등등)일 수 있다는 것이다.
전술한 바에 부가하여, AVDD(12)는 또한, 예를 들어, 다른 CE 디바이스에(예를 들어, 유선 연결을 사용하여) 물리적으로 연결하기 위한 HDMI(high definition multimedia interface) 포트 또는 USB 포트 및/또는 AVDD(12)로부터의 오디오를 헤드폰을 통해 사용자에게 제공하기 위해 헤드폰을 AVDD(12)에 연결하기 위한 헤드폰 포트와 같은, 하나 이상의 입력 포트(26)를 포함할 수 있다. 예를 들어, 입력 포트(26)는 유선을 통해 또는 무선으로 오디오 비디오 콘텐츠의 셀룰러 방송, 케이블 또는 위성 소스(26a)에 연결될 수 있다. 따라서, 소스(26a)는, 예를 들어, 별개의 또는 통합된 셋톱 박스 또는 위성 수신기일 수 있다. 또는, 소스(26a)는 사용자에 의해 이하에서 추가로 기술되는 채널 할당을 위해 좋아하는 것으로서 간주될 수 있는 콘텐츠를 포함하는 게임 콘솔 또는 디스크 플레이어일 수 있다.
AVDD(12)는, 어떤 경우에, AVDD의 섀시 내에 독립형 디바이스로서 또는 AV 프로그램을 재생하기 위한 AVDD의 섀시 내부 또는 외부에 있는 PVR(personal video recording device) 또는 비디오 디스크 플레이어로서 또는 이동식 메모리 매체로서 구현되는, 일시적 신호가 아닌 디스크 기반 또는 고상 저장소와 같은 하나 이상의 컴퓨터 메모리(28)를 추가로 포함할 수 있다. 또한 일부 실시예에서, AVDD(12)는, 예를 들어, 적어도 하나의 위성 또는 휴대폰 타워로부터 지리적 위치 정보를 수신하고 이 정보를 프로세서(24)에 제공하도록 및/또는 프로세서(24)와 관련하여 AVDD(12)가 배치되어 있는 고도를 결정하도록 구성되어 있는 휴대폰 수신기, GPS 수신기 및/또는 고도계(30)와 같은, 그러나 이에 한정되지 않는 위치 또는 장소 수신기를 포함할 수 있다. 그러나, 휴대폰 수신기, GPS 수신기 및/또는 고도계 이외의 다른 적당한 위치 수신기가, 예를 들어, 3개의 차원 모두에서, 예를 들어, AVDD(12)의 위치를 결정하기 위해 본 원리에 따라 사용될 수 있다는 것을 이해할 것이다.
AVDD(12)의 설명을 계속하면, 일부 실시예에서, AVDD(12)는 본 원리에 따라 사진/이미지 및/또는 비디오를 수집하기 위해, 예를 들어, 열 이미지 카메라, 웹캠과 같은 디지털 카메라, 및/또는 AVDD(12) 내에 통합되고 프로세서(24)에 의해 제어 가능한 카메라일 수 있는 하나 이상의 카메라(32)를 포함할 수 있다. 블루투스 및/또는 NFC(Near Field Communication: 근거리 통신) 기술을, 각각, 사용하여 다른 디바이스들과 통신하기 위한 블루투스 송수신기(34) 및 다른 NFC 요소(36)가 또한 AVDD(12) 상에 포함될 수 있다. 예시적인 NFC 요소는 RFID(radio frequency identification) 요소일 수 있다.
게다가, AVDD(12)는 프로세서(24)에 입력을 제공하는 하나 이상의 보조 센서(37)(예를 들어, 움직임 센서(가속도계, 자이로스코프, 회전 기록계(cyclometer), 또는 자기 센서 등), IR(infrared) 센서, 광 센서, 속도 및/또는 케이던스(cadence) 센서,(예를 들어, 제스처 명령을 감지하기 위한) 제스처 센서 등)를 포함할 수 있다. AVDD(12)는 프로세서(24)에 입력을 제공하는 OTH TV 방송을 수신하기 위한 공중파(over-the-air) TV 방송 포트(38)를 포함할 수 있다. 전술한 바에 부가하여, 유의할 점은, AVDD(12)가 또한 IR(infrared) 송신기 및/또는 IR 수신기 및/또는 IR 송수신기(42)(IRDA(IR data association) 디바이스 등)를 포함할 수 있다는 것이다. AVDD(12)에 전력을 공급하기 위해 배터리(도시 생략)가 제공될 수 있다.
도 1을 여전히 참조하면, AVDD(12) 이외에, 시스템(10)은 AVDD(12)에 대해 나타낸 컴포넌트들의 일부 또는 모두를 포함할 수 있는 하나 이상의 다른 컴퓨터 디바이스 유형들을 포함할 수 있다. 일 예에서, 제1 디바이스(44)는 빌트인 차량 컴퓨터 시스템에 의해 구현될 수 있다. 제2 디바이스(46)는 AVDD(12) 또는 제1 디바이스(44)와 유사한 컴포넌트를 포함할 수 있으므로 상세하게 논의되지 않을 것이다. 도시된 것보다 더 적거나 더 많은 디바이스가 사용될 수도 있다.
도시된 예에서, 본 원리들을 예시하기 위해, 3개의 모든 디바이스(12, 44, 46)는 예를 들어, 파선으로 도시된 차량(48) 내의 로컬 네트워크의 멤버들인 것으로 가정된다.
예시적인 비-한정적 제1 디바이스(44)는 디스플레이상의 터치를 통해 사용자 입력 신호를 수신하기 위해 터치 가능일 수 있는 하나 이상의 디스플레이(50)를 포함할 수 있다. 디스플레이(50)는 차량(48)의 윈도우들 중 하나로서 구성된 투명한 활성 디스플레이일 수 있다.
일 예에서, 디스플레이 자체는 관련 차량 규정에 적합한 안전 유리로 구성된다. 다른 실시예에서, 디스플레이(50)는 표준 차량 윈도우 상에 중첩되는 가요성 유기 발광 다이오드(OLED) 디스플레이일 수 있다. 투명 액정 디스플레이(LCD)가 또한 사용될 수 있다. 투명 투영 스크린을 사용할 수도 있다.
제1 디바이스(44)는 본 원리에 따라 오디오를 출력하기 위한 하나 이상의 스피커(52), 및 예를 들어, 디바이스(44)를 제어하기 위해 가청 명령을 제1 디바이스(44)에 입력하기 위한 적어도 하나의 부가 입력 디바이스(54)(예를 들어, 오디오 수신기/마이크로폰 등)를 포함할 수 있다. 예시적인 제1 디바이스(44)는 또한 엔진 제어 모듈(ECM)과 같은 하나 이상의 차량 프로세서(58)의 제어하에 네트워크(22)를 통한 통신을 위한 하나 이상의 네트워크 인터페이스(56)를 포함할 수 있다. 따라서, 인터페이스(56)는 메쉬 네트워크 인터페이스를 비롯한, 무선 컴퓨터 네트워크 인터페이스의 일 예인, Wi-Fi 송수신기일 수 있으며, 이에 한정되지 않는다. 프로세서(58)가 본 원리를 수행하기 위해, 본 명세서에 기술되는 제1 디바이스(44)의 다른 요소(예를 들어, 디스플레이(50) 상에 이미지들을 제시하고 그로부터 입력을 수신하기 위해 디스플레이(50)를 제어하는 것 등)를 비롯하여, 제1 디바이스(44)를 제어한다는 것을 이해할 것이다. 게다가, 유의할 점은, 네트워크 인터페이스(56)가, 예를 들어, 유선 또는 무선 모뎀 또는 라우터, 또는 다른 적절한 인터페이스(예를 들어, 무선 전화 송수신기, 또는 앞서 언급된 바와 같은 Wi-Fi 송수신기, 기타 등등)일 수 있다는 것이다.
전술한 바에 부가하여, 제1 디바이스(44)는 또한, 예를 들어, 다른 컴퓨터 디바이스에(예를 들어, 유선 연결을 사용하여) 물리적으로 연결하기 위한 HDMI 포트 또는 USB 포트 및/또는 제1 디바이스(44)로부터의 오디오를 헤드폰을 통해 사용자에게 제공하기 위해 헤드폰을 제1 디바이스(44)에 연결하기 위한 헤드폰 포트와 같은, 하나 이상의 입력 포트(60)를 포함할 수 있다. 제1 디바이스(44)는 디스크 기반 또는 고상 저장소와 같은 하나 이상의 유형적 컴퓨터 판독 가능 저장 매체(62)를 추가로 포함할 수 있다. 또한 일부 실시예에서, 제1 디바이스(44)는 예를 들어, 삼각 측량을 사용하여, 적어도 하나의 위성 또는 셀 타워로부터 지리적 위치 정보를 수신하고, 이 정보를 디바이스 프로세서(58)에 제공하도록 및/또는 디바이스 프로세서(58)와 관련하여 제1 디바이스(44)가 배치되어 있는 고도를 결정하도록 구성되어 있는 휴대폰, GPS 수신기 및/또는 고도계(64)와 같은, 그러나 이에 한정되지 않는 위치 또는 장소 수신기를 포함할 수 있다. 그러나, 휴대폰, GPS 수신기 및/또는 고도계 이외의 다른 적당한 위치 수신기가, 예를 들어, 3개의 차원 모두에서, 예를 들어, 제1 디바이스(44)의 위치를 결정하기 위해 본 원리에 따라 사용될 수 있다는 것을 이해할 것이다.
제1 디바이스(44)의 설명을 계속하면, 일부 실시예에서, 제1 디바이스(44)는 본 원리에 따라 사진/이미지 및/또는 비디오를 수집하기 위해, 예를 들어, 열 이미지 카메라, 웹캠과 같은 디지털 카메라, 및/또는 제1 디바이스(44) 내에 포함되고 디바이스 프로세서(58)에 의해 제어 가능한 차량(48)에 통합된 카메라일 수 있는 하나 이상의 카메라(66)를 포함할 수 있다. 블루투스 및/또는 NFC 기술을, 각각, 사용하여 다른 디바이스들과 통신하기 위한 블루투스 송수신기(68) 및 다른 NFC 요소(70)가 또한 제1 디바이스(44) 상에 포함될 수 있다. 예시적인 NFC 요소는 RFID(radio frequency identification) 요소일 수 있다.
게다가, 제1 디바이스(44)는 CE 디바이스 프로세서(58)에 입력을 제공하는 하나 이상의 보조 센서(72)(예를 들어, 움직임 센서(가속도계, 자이로스코프, 회전 기록계(cyclometer), 또는 자기 센서 등), IR(infrared) 센서, 광 센서, 속도 및/또는 케이던스(cadence) 센서, (예를 들어, 제스처 명령을 감지하기 위한) 제스처 센서 등)를 포함할 수 있다. 제1 디바이스(44)는 디바이스 프로세서(58)에 입력을 제공하는, 예를 들어, 하나 이상의 기후 센서(74)(예를 들어, 기압계, 습도 센서, 바람 센서, 광 센서, 온도 센서 등) 및/또는 하나 이상의 생체 측정 센서(76)와 같은 또 다른 센서를 포함할 수 있다. 전술한 바에 부가하여, 유의할 점은, 일부 실시예에서, 제1 디바이스(44)가 또한 IR(infrared) 송신기 및/또는 IR 수신기 및/또는 IR 송수신기(42)(IRDA(IR data association) 디바이스 등)를 포함할 수 있다는 것이다. 차량 배터리(도시 생략)와 같은 배터리는 제1 디바이스(44)에 전력을 공급하도록 제공될 수 있다. 디바이스(44)는 전술한 통신 모드 및 관련 컴포넌트들 중 임의의 것을 통해 AVDD(12)와 통신할 수 있다.
차량내 디바이스(44)의 컴포넌트들은 공통 하우징 내에 수납되거나 수납되지 않을 수 있다.
제2 디바이스(46)는 전술한 컴포넌트들의 일부 또는 전부를 포함할 수 있다.
지금 전술한 적어도 하나의 서버(80)를 참고하면, 서버는 적어도 하나의 서버 프로세서(82), 디스크-기반 또는 고상 저장소와 같은 적어도 하나의 유형의 컴퓨터 판독 가능 저장 매체(84), 및 서버 프로세서(82)의 제어 하에서 네트워크(22)를 통해 도 1의 다른 디바이스들과 통신하는 것을 허용하는 적어도 하나의 네트워크 인터페이스(86)를 포함하며, 사실 본 발명의 원리들에 따라서 서버들과 클라이언트 디바이스들 간의 통신을 촉진할 수 있다. 유의할 점은, 네트워크 인터페이스(86)가, 예를 들어, 유선 또는 무선 모뎀 또는 라우터, Wi-Fi 송수신기, 또는 다른 적절한 인터페이스(예를 들어, 무선 전화 송수신기 등)일 수 있다는 것이다.
따라서, 일부 실시예에서, 서버(80)는 인터넷 서버일 수 있으며, 시스템(10)의 디바이스들이 예시적인 실시예들에서 서버(80)를 통해 "클라우드(cloud)" 환경에 액세스할 수 있도록 "클라우드" 기능을 포함하고 수행할 수 있다. 또는, 서버(80)는 도 1에 도시된 다른 디바이스들과 동일한 방에 있거나 근방에 있는 게임 콘솔 또는 다른 컴퓨터에 의해 구현될 수 있다.
활성 디스플레이(50)는 전술한 컴포넌트들(12, 44, 46, 80) 중 임의의 하나에 의해 제어되거나, 단독으로 또는 다른 디바이스들과 협력하여 동작할 수 있다. 예를 들어, 이미지들은 WiFi 또는 블루투스를 통해 AVDD(12)로부터 ECM 프로세서(58)로 전달되어, 예를 들어 윈도우형 디스플레이(50) 상에 제시될 수 있다. 또는, ECM 프로세서(58)는 차량 카메라(66)로부터의 입력을 사용하여 이미지들을 제공할 수 있다. 다시, 윈도우형 디스플레이 상에 제시된 이미지들은 서버(80)로부터 발생되어 WiFi 또는 무선 전화 전송을 사용하여 ECM 프로세서(58)로 전송되어 윈도우형 디스플레이 (50) 상에 제시될 수 있다.
본 명세서에서 이해되는 바와 같이, 활성 디스플레이는 차량 윈도우에 적합한 곡률, 형상, 크기 및 두께로 구성될 수 있다. 차량 윈도우에 이미지들을 제시하는 것은 무인 차의 출현으로 특히 유리할 수 있는데, 차량의 승차자 중 누구도 공간을 통한 차량의 네비게이션에 주의를 기울일 필요가 없다. 따라서, 도 1에 도시된 차량(48)은 무인 차량일 수 있다.
윈도우형 활성 디스플레이(50)는 디스플레이가 컴퓨터 스크린 또는 태블릿인 것처럼 영화 및/또는 웹 페이지와 같은 비디오를 제시할 수 있다.
본 명세서에서 더 이해되는 바와 같이, 윈도우형 디스플레이(50) 상에 제시된 콘텐츠는 투명 디스플레이(50)를 통해 보여지는 자연적 뷰를 보강하기 위해 "가상화"될 수 있다. 예를 들어, 텍스트를 외부 이미지에 중첩시켜서 뷰(view)의 랜드마크 및 관심 항목들을 식별할 수 있다. 외부 세계는 "가상 현실"에서 렌더링되어 외부 세계의 네비게이션을 단순화시킬 수 있다. 윈도우형 디스플레이(50)를 통해 보이는 "현실"은 즐거운 일의 발생, 예를 들어, 2개의 나무 또는 바위 사이에 나타나는 공룡의 이미지를 제시하거나, 풀, 호수 및 꽃의 이미지를 차량(48)이 통과하고 차량의 탑승자가 투명 디스플레이(50)를 통해 관측하는 사막 풍경 상에 중첩시키는 것을 허용하도록 향상될 수 있다. 윈도우 디스플레이(50)를 통해 볼 수 있는 자연적 물체 위에 겹쳐지는 윈도우 디스플레이(50) 상에 제시될 수 있는 다른 예시적인 이미지들은 자연 산 위에 겹쳐지는 스키어의 이미지 또는 텍스트를 나타내는 배너 라이트와 함께 주위를 돌고 있는 블림프(blimp)의 이미지를 포함한다.
일부 실시예에서, AVDD 카메라(32) 또는 차량 디바이스 카메라(66)는 차량(48) 외부의 이미지들을 캡쳐하는데 사용될 수 있고, 그 다음으로 이미지들은 예를 들어, 이미지들을 캡쳐했을 때 카메라가 지향하는 방위각 및 고도에 대응하는 디스플레이(50) 상의 위치에서 차량 프로세서(58)에 의해 디스플레이(50) 상에 렌더링된다. 원한다면, 이미지는 윈도우 디스플레이 상에 제시되기 전에 차량 프로세서(38) 또는 AVDD 프로세서(24)에 의해 처리되어 "향상(enhanced)"될 수 있다.
도 2는 위의 원리의 예를 도시한다. 도 1에 도시된 카메라(66)는 카메라가 배치된 차량(201)에 대해 카메라(66)를 이동시키도록 하나 이상의 모터(200)에 결합될 수 있으며, 윈도우 디스플레이(50)는 도시된 비-제한적인 예에서 차량의 전면 유리를 설정한다. 하나 이상의 윈도우 디스플레이(50)는 차량의 후면 윈도우 및 측면 윈도우을 설정할 수 있음은 물론이고, 본 원리에 따라 동작할 수도 있다.
하나 이상의 모터(200)는 화살표(202) 및/또는 화살표(204)로 표시된 수직, 또는 고도의 차원으로 표시된 수평 또는 방위각 차원으로 카메라를 회전시킬 수 있다. 예를 들어, 이들 차원들 중 하나 또는 둘 모두에서 차량(201)의 헤딩(heading)에 대한 카메라의 각도는 예를 들어, 하나 이상의 모터(200)에 결합되어 차량 프로세서(58)로 전송되는 하나 이상의 인코더에 의해 검출될 수 있다. 또는, 카메라가 특정한 고도 및 방위각에서 차량 내에 고정적으로 부착되면, 각도는 프로세서(58)에 프로그래밍될 수 있다. 카메라는 또한 차량의 모든 주위를 360도로 캡쳐하는 차량 상단에 장착될 수 있다. 차량 내부의 시야가 조정될 것이다. 방위각은 프로세서(58)에 의해 추적될 수 있다.
도 2에 도시된 바와 같이, 도시된 산(206)과 같은 차량의 물리적 주변에서의 배경의 물리적 물체는, 윈도우 디스플레이(50)가 투명 OLED 또는 LCD 또는 다른 유형의 활성 디스플레이로 제조될 수 있기 때문에, 차량의 탑승자가 윈도우 디스플레이(50)를 통해 볼 수 있다. 후술되는 하나 이상의 기술에 따르면, 프로세서(58)는 이미지(208)가 물리적 물체(206) 상에 겹쳐진 것처럼 보이도록 예시적인 스키어 이미지(208)와 같은 이미지를 윈도우 디스플레이(50)의 영역(210)에 제공할 수 있다. 이미지(208)가 제시되는 영역(210)은 차량에 대한 카메라의 방향을 나타내는 데이터에 적어도 부분적으로 기초할 수 있다. 그러나, 이하에서 더 설명되는 바와 같이, 이미지(208)는 카메라(66)에 의해 생성되거나 생성되지 않을 수 있다.
도 3은 카메라(66)를 사용하여 이미지(208)를 생성하기 위한 본 명세서에서의 프로세서들 중 임의의 하나 이상의 프로세서에 의해 실행될 수 있는 로직을 도시한다. 블록(300)에서 시작하여, 카메라는 물리적 주변에서 적어도 하나의 물리적 물체의 이미지(208)와 같은 적어도 하나의 이미지를 생성하기 위해 차량의 물리적 주변을 이미지화하는데 사용된다. 방위각 및/또는 고도 차원에서 차량(201)에 대한 카메라(66)의 방향은 블록(302)에서 액세스된다. 이 방향은 블록(304)에서 윈도우 영역(210)과 상관된다.
일 실시예에서, 윈도우 영역(210)은 카메라(66)의 위치에 위치하고 차량에 대해 동일한 각도 방향으로 윈도우를 바라보는 관찰자가 보게 될 윈도우 디스플레이(50)의 영역인 것으로 결정된다. 다른 실시예에서, 가정된 관찰자 위치는 운전석 또는 조수석로부터의 것일 수 있으며, 각도 방향은 프로세서(58)에 프로그래밍될 수 있는, 가정된 관찰자 위치와 카메라의 실제 위치 사이의 시차를 고려한 오프셋된 영역(210)을 선택하는데 사용된다.
가정된 관찰자 위치는 예를 들어, 차량의 시트 센서로부터의 신호를 사용하여 동적으로 선택될 수 있다. 사람이 시트 벨트 경고 신호를 위해 차량 시트에 앉아 있는지 여부를 ECM에 신호하는 동일한 시트 센서가 사용될 수 있다. 따라서, 운전석만이 점유된 것으로 표시된다면, 가정된 관찰자 위치는 운전석일 수 있는 반면에, 운전석 및 조수석 모두가 점유되면, 가정된 관찰자 위치는 차량의 탑승자가 그렇지 않다는 것을 표시하기 위해 디폴트를 오버라이드하지 않는 한 조수석으로 디폴트될 수 있다. 다시, 운전자 뒤의 임의의 좌석이 점유되면, 디폴트로 가정되는 관찰자 위치는 점유된 뒷좌석의 위치일 수 있다.
블록(304)에서 블록(306)으로 진행하여, 이미지(208)는 블록(302)에서 액세스되는 차량에 대한 카메라의 각도에 따라 차량의 적어도 하나의 윈도우 상에 및 바람직하게는 영역(210)에 제시된다. 이러한 방식으로, 차량의 탑승자는 탑승자가 윈도우를 통해 이미지의 물체를 보게 되는 것과 주변(206)에 대해 실질적으로 동일한 상대 위치의 윈도우 디스플레이(50) 상의 이미지(208)를 본다. 대안적인 실시예에서, 카메라(66)는 주변의 360도 이미지를 제공하기 위해 차량의 상부에 장착된다. 이 실시예에서, 윈도우 디스플레이(50) 내의 이미지(208)는 특히 차량에 의해 가까운 풍경을 약간 위쪽으로 시프트한 것처럼 보일 수 있다.
도 4는 본 명세서에 개시된 다양한 동작을 선택하기 위해, 디스플레이(14)를 포함하는, 본 명세서에 도시된 디스플레이들 중 임의의 디스플레이 상에 제시될 수 있는 사용자 인터페이스의 예시적인 스크린 샷이다. 선택은 윈도우 디스플레이(50)를 제어하는 프로세서와 통신할 수 있다.
400에 도시된 바와 같이, 사용자는 본 명세서에서의 로직을 디스에이블하는 옵션이 주어질 수 있고 대신에 상부에 이미지가 제공되지 않는 투명 윈도우로서 독점적으로 윈도우 디스플레이(50)를 채택할 수 있다. 또한, 사용자에게는, 도 3의 로직이 그에 따라 비디오 이미지를 제시할 수 있게 하는 비디오 선택기(402)와, 도 3의 로직이 그에 따라 사진 스틸 이미지를 제시할 수 있게 하는 사진 선택기(404)가 제공될 수 있다. 또한, 사용자에게는 도 5의 로직을 가능하게 하는 재미 선택기(406)가 제공될 수 있다.
따라서, 이제 도 5로 돌아가면, 블록(500)에서, 카메라(66)로부터의 이미지가 수신될 수 있다. 필요하다면, 블록(502)에서, 차량의 헤딩(heading)에 대한 카메라 방향이 수신될 수 있다. 물체 인식은 카메라로부터의 이미지 내의 하나 이상의 물체에 대해 블록(504)에서 수행될 수 있다.
일 실시예에서, 블록(506)에서 추가 처리를 위해 선택된 물체는 경계 인식에 의해 결정된 바와 같이, 이미지 내에서 가장 큰 물체이다. 다른 실시예에서, 선택된 물체는 히스토그램 분석에 의해 지시된 바와 같이, 가장 밝은 물체 또는 가장 다양한 컬러의 물체일 수 있다. 또는, 이미지에서 가장 가운데에 있는 물체를 선택할 수 있다.
물체가 선택되면, 로직은 블록(508)으로 이동한다. 블록(508)에서, 물체의 명칭 또는 다른 설명은 예를 들어, 물체에 대응하는 이미지를 선택하기위한 룩업 테이블 또는 다른 데이터 구조에 대한 입력 인수(entering argument)로서 사용될 수 있다. 예를 들어, 선택된 물체가 "산"인 경우, 데이터 구조는 스키어 또는 산 정상을 통해 나타나는 공룡의 이미지와 연관시킬 수 있다. 다시, 이미지는 산 명칭의 텍스트 및 기타 특성일 수 있다. 다수의 이미지가 물체와 연관되면, 프로세서는 무작위로 하나를 선택할 수 있다. 다음으로, 이미지는 블록(510)에서, 윈도우를 통해 보이는 물리적 물체 상에 겹쳐지는, 기발한 방식으로 또는 정보 방식으로 보강하기 위해 카메라 각도에 대응하는 윈도우 디스플레이(50)의 영역(210)에 제시된다.
대안적으로, "라이브" 이미지를 향상시키기 위해 활성화된 영역 및 세그먼트와 함께 윈도우 디스플레이를 통해 외부에서 직접적으로 광이 올 수 있다.
윈도우 디스플레이(50) 외부로부터 수신된 광은 디스플레이 픽셀에 의해 다소 가려질 수 있지만, 디스플레이는 "투명한"상태로 유지되며, 이미 많은 사람들이 자신의 자동차 유리를 상당히 어두운 색조로 틴팅(tint)하고 있으므로 이러한 면은 수용될 수 있다.
상술한 개시내용은 차량의 윈도우로서 구체화된 디스플레이(50)에 초점을 맞추었지만, 차량의 다른 표면이 투명한 디스플레이 재료로도 제조될 수 있으며, 예를 들어 관찰자가 차량의 바닥을 내려다 볼 수 있게 하는 심리스 뷰(seamless view)를 만들 수 있고 그 방향으로 뷰에 대응하는 이미지를 볼 수 있다.
또 다른 실시예에서, 차량에는 투명 윈도우가 전혀 제공되지 않을 수 있다. 대신에, 불투명 디스플레이는 통상적으로 투명한 윈도우가 배치될 위치에 장착될 수 있고, 차량의 실질적으로 360도 주위를 이미지화하기 위해 차량 상에 배치된 다수의 카메라(66)는 차량 내부에 "외부 세계"의 이미지를 렌더링하는 불투명 디스플레이 상에 이미지를 생성할 수 있다. 자동차의 내부 돔은 모두가 곡면 디스플레이 유리인 디스플레이이거나 이미지를 투영할 수 있다.
실제로, 차량이 무인 차량인 경우, 인간에 의해 구동될 수 없을 수도 있다. 이러한 환경에서, 차량의 실제 환경을 -안전상의 이유로 렌더링할 필요가 없을 수도 있다. 따라서, 차량의 물리적 물체의 이미지는 렌더링될 필요가 없다. 대신에, 일반적으로 윈도우가 있는 차 안을 둘러싸는 불투명한 디스플레이 상에 환상적인 이미지 또는 영화를 제공할 수 있다. 예를 들어, 앞에 나타나는 별, 지구, 태양 및 화성의 이미지가 불투명한 디스플레이에 표시될 수 있는 "화성 접근법" 프로그램을 선택할 수 있다. 동반된 오디오는 "X" 마일의 화성 궤도 위치에 도착한 임박한 도착을 탑승자에게 알릴 수 있다.
이러한 모든 가상 시나리오가 여행에 필요한 것은 아니다. 예를 들어, 투명한 윈도우 대신에 불투명한 디스플레이가 있는 무인 차량에 앉은 채로, 새가 울부짖는 소리를 내며 빈터의 개울에 앉아 있는 사람이 볼 것인 비디오가 재생되거나 또 다른 자연적인 뷰가 재생될 수 있다.
이상의 방법들은 프로세서, 적당히 구성된 ASIC(application specific integrated circuit) 또는 FPGA(field programmable gate array) 모듈에 의해 실행되는 소프트웨어 명령어들로서, 또는 본 기술 분야의 통상의 기술자라면 잘 알 것인 임의의 다른 편리한 방식으로 구현될 수 있다. 채택되는 경우, 소프트웨어 명령어들은 CD ROM 또는 플래시 드라이브와 같은 비일시적 디바이스에 구현될 수 있다. 소프트웨어 코드 명령어들은 대안적으로 무선 또는 광 신호와 같은 일시적 구성으로 또는 인터넷을 통한 다운로드를 통해 구체화될 수 있다.
본 원리들이 일부 예시적인 실시예를 참조하여 기술되었지만, 이들이 제한하는 것으로 의도되어 있지 않다는 것과, 다양한 대안의 구성이 본 명세서에 청구된 발명 요지를 구현하는 데 사용될 수 있다는 것을 잘 알 것이다.

Claims (22)

  1. 장치로서,
    일시적인 신호가 아니며 적어도 하나의 프로세서에 의해 실행 가능한 명령어들을 포함하는 적어도 하나의 컴퓨터 메모리를 포함하되, 상기 명령어들은,
    차량의 배경 주변의 이미지를 차량 상의 카메라로부터 수신하고;
    차량에 대한 카메라의 제1 방향을 나타내는 데이터에 액세스하며;
    차량에 대한 카메라의 제1 방향을 나타내는 데이터에 적어도 부분적으로 기초하여, 차량 상의 디스플레이 상에 제1 물체를 제시하고;
    차량에 대한 카메라를 움직이게 하고;
    차량에 대한 카메라의 제2 방향을 나타내는 데이터에 액세스하며;
    차량에 대한 카메라의 제2 방향을 나타내는 데이터에 적어도 부분적으로 기초하여, 차량 상의 디스플레이 상에 제2 물체를 제시하고;
    적어도 하나의 사용자 인터페이스(UI)에, 디스플레이 상에 카메라로부터의 이미지를 제시하는 것을 인에이블 하는 것 및 디스에이블 하는 것 중 적어도 하나를 선택할 수 있는 제1 선택기, 비디오가 디스플레이 상에 제시되도록 선택할 수 있는 제2 선택기, 스틸 사진들이 디스플레이 상에 제시되게 하는 옵션, 및 프로세서로 하여금 이미지 내의 제3 물체를 자동차의 주변의 물리적 물체와 연관시키고, 이미지 내의 제3 물체를 물리적 물체와 연관시킨 것에 적어도 부분적으로 기초하여 이미지 내의 제3 물체를 물리적 물체에 중첩시키는 옵션을 제시하도록 실행 가능한 장치.
  2. 제1항에 있어서,
    상기 디스플레이는 차량의 윈도우인 장치.
  3. 제2항에 있어서,
    상기 디스플레이는 투명 유기 발광 다이오드(OLED) 디스플레이와 투명 액정 디스플레이(LCD) 중 하나인 장치.
  4. 제1항에 있어서,
    상기 디스플레이는 차량의 선 루프(sunroof)인 장치.
  5. 제1항에 있어서,
    상기 디스플레이는 차량의 윈도우와 다른 장치.
  6. 삭제
  7. 삭제
  8. 제1항에 있어서,
    상기 적어도 하나의 프로세서를 포함하는 장치.
  9. 방법으로서,
    무인 자동차에서, 차량의 적어도 하나의 측면 윈도우 상에 적어도 하나의 이미지를 제시하여, 윈도우 뒤의 자연적 뷰가 윈도우 상에 제시된 이미지에 의해 가상화 되는 단계 - 상기 이미지는 차량에 대한 카메라의 각도에 따라 차량에 움직일 수 있도록 장착된 카메라로부터의 이미지를 포함하여, 탑승자가 윈도우를 통해 카메라로부터 이미지 내의 물체를 볼 수 있는 것과 상기 자연적 뷰에 대해 실질적으로 동일한 상대 위치의 상기 윈도우 상에 제시된 카메라로부터 상기 이미지를 차량의 탑승자가 볼 수 있게 하고, 상기 이미지는 카메라가 이미지를 캡쳐할 때 카메라가 지향하는 방위각 및 고도에 대응하는 윈도우 상의 위치에서 윈도우 상에 렌더링됨 - 를 포함하는 방법.
  10. 제9항에 있어서,
    상기 윈도우는 투명 유기 발광 다이오드(OLED) 디스플레이를 포함하는 방법.
  11. 제9항에 있어서,
    상기 윈도우는 투명 액정 디스플레이(LCD)를 포함하는 방법.
  12. 제9항에 있어서,
    차량에 대한 상기 카메라의 고도각(elevational angle)에 따라 차량의 적어도 하나의 윈도우 상에 상기 이미지를 제시하는 단계를 포함하는 방법.
  13. 제9항에 있어서,
    차량에 대한 상기 카메라의 방위각에 따라 차량의 적어도 하나의 윈도우 상에 상기 이미지를 제시하는 단계를 포함하는 방법.
  14. 제12항에 있어서,
    차량에 대한 상기 카메라의 방위각에 따라 차량의 적어도 하나의 윈도우 상에 상기 이미지를 제시하는 단계를 포함하는 방법.
  15. 장치로서,
    차량 윈도우의 곡률 및 윤곽에 매칭되도록 구성된 디스플레이를 포함하고;
    상기 디스플레이는 차량의 실내 탑승자에게 텍스트, 비디오 및 이미지들을 렌더링할 수 있고;
    상기 장치는, 차량의 배경 주변의 이미지를 차량 상의 카메라로부터 수신하고, 차량에 대한 카메라의 방향을 나타내는 데이터에 액세스하며, 차량에 대한 카메라의 방향을 나타내는 데이터에 적어도 부분적으로 기초하여 차량의 자연적 주변 앞의 디스플레이 상의 이미지로부터 물체를 제시하도록 실행 가능한 명령어로 구성되고, 상기 명령어는 관찰자 위치를 식별하고, 관찰자 위치와 카메라 위치 사이의 시차를 고려하도록 물체의 제시의 위치를 오프셋하도록 더 실행 가능한, 장치.
  16. 제15항에 있어서,
    상기 디스플레이의 유리는 규정 안전 가이드라인을 따르는 장치.
  17. 제15항에 있어서,
    상기 이미지들은 차량 상의 적어도 하나의 카메라에 의해 생성되는 장치.
  18. 제15항에 있어서,
    상기 이미지들 중 적어도 일부는 상기 차량 상에 장착된 카메라에 의해 생성되지 않고, 차량 상에 장착된 상기 카메라로부터의 적어도 하나의 이미지에서 적어도 하나의 물체의 물체 인식을 사용하여 데이터베이스로부터 선택되는 장치.
  19. 제15항에 있어서,
    상기 디스플레이는 적어도 하나의 투명 유기 발광 다이오드(OLED)를 포함하는 장치.
  20. 제15항에 있어서,
    상기 디스플레이는 적어도 하나의 투명 액정 디스플레이(LCD)를 포함하는 장치.
  21. 제15항에 있어서, 상기 명령어는,
    오직 차량 내의 운전석이 점유된 것을 식별하는 것에 응답하여, 관찰자 위치를 운전석의 위치로서 설정하고,
    차량의 운전석과 조수석이 점유된 것을 식별하는 것에 응답하여, 관찰자 위치를 조수석의 위치로서 디폴트하도록 실행 가능한 장치.
  22. 제15항에 있어서, 상기 명령어는,
    운전석 뒤의 차량 내의 좌석이 점유된 것을 식별하는 것에 응답하여, 관찰자의 위치를 점유된 운전석 뒤의 차량 내의 좌석의 위치로 디폴트하도록 실행 가능한 장치.
KR1020170018134A 2016-02-18 2017-02-09 차량 정보 및 가상 현실을 위한 활성 윈도우 KR101906711B1 (ko)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
US15/046,804 US10682911B2 (en) 2016-02-18 2016-02-18 Active window for vehicle infomatics and virtual reality
US15/046,804 2016-02-18

Publications (2)

Publication Number Publication Date
KR20170097560A KR20170097560A (ko) 2017-08-28
KR101906711B1 true KR101906711B1 (ko) 2018-12-05

Family

ID=58016594

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020170018134A KR101906711B1 (ko) 2016-02-18 2017-02-09 차량 정보 및 가상 현실을 위한 활성 윈도우

Country Status (6)

Country Link
US (1) US10682911B2 (ko)
EP (1) EP3208650A1 (ko)
JP (1) JP6485654B2 (ko)
KR (1) KR101906711B1 (ko)
CN (1) CN107089191B (ko)
CA (1) CA2957047C (ko)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20220135657A (ko) * 2021-03-31 2022-10-07 인하대학교 산학협력단 가독성을 높이는 초보 운전자 표시 스티커

Families Citing this family (19)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
GB2565763A (en) * 2017-08-04 2019-02-27 Ersal Mehmet Ahmet Display for a vehicle windscreen
US10303045B1 (en) * 2017-12-20 2019-05-28 Micron Technology, Inc. Control of display device for autonomous vehicle
KR102549932B1 (ko) * 2018-01-22 2023-07-03 애플 인크. 합성 현실 컴패니언 콘텐츠를 프레젠테이션하기 위한 방법 및 디바이스
US10935818B2 (en) * 2018-05-10 2021-03-02 International Business Machines Corporation Event-based, automated control of visual light transmission through vehicle window
WO2020013519A1 (en) 2018-07-10 2020-01-16 Samsung Electronics Co., Ltd. Method and system of displaying multimedia content on glass window of vehicle
KR102617120B1 (ko) * 2018-07-10 2023-12-27 삼성전자주식회사 차량의 글래스 윈도우 상에 멀티미디어 컨텐트를 디스플레이하는 방법 및 시스템
US10901416B2 (en) * 2018-07-19 2021-01-26 Honda Motor Co., Ltd. Scene creation system for autonomous vehicles and methods thereof
CN110281847A (zh) * 2019-06-28 2019-09-27 大陆投资(中国)有限公司 车载交互系统
CN113103955A (zh) * 2020-01-10 2021-07-13 未来（北京）黑科技有限公司 一种多层次成像系统
CN112373302B (zh) * 2020-11-10 2022-07-12 广州小鹏汽车科技有限公司 显示控制方法、装置、车辆及存储介质
GB2602262A (en) * 2020-12-17 2022-06-29 Continental Automotive Gmbh An entertainment system for a motor vehicle and method thereof
CN112793508B (zh) * 2021-01-11 2022-12-13 恒大新能源汽车投资控股集团有限公司 一种车顶显示设备及其控制方法
EP4307237A1 (en) * 2021-03-08 2024-01-17 Sony Group Corporation Information processing device, information processing method, program, and information processing system
WO2022201783A1 (ja) * 2021-03-26 2022-09-29 ソニーグループ株式会社 画像処理装置および画像処理方法
US11783708B2 (en) * 2021-05-10 2023-10-10 Ford Global Technologies, Llc User-tailored roadway complexity awareness
CN113619476A (zh) * 2021-08-27 2021-11-09 中国第一汽车股份有限公司 一种车辆控制方法、装置、设备和存储介质
CN113986165B (zh) * 2021-10-09 2024-04-26 上海瑾盛通信科技有限公司 显示控制方法、电子装置及可读存储介质
DE202022101579U1 (de) 2022-03-25 2022-06-27 Joynext Gmbh Scheibe mit einer Anzeigeeinheit, Fenster, Transportmittel und Gebäude
US20240005359A1 (en) * 2022-06-30 2024-01-04 Gm Cruise Holdings Llc Projected Advertisement Modification

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2004354792A (ja) * 2003-05-30 2004-12-16 Semiconductor Energy Lab Co Ltd 車両用表示装置
JP2005283407A (ja) 2004-03-30 2005-10-13 Seiko Epson Corp 解説付き画像の投写表示
US20140168608A1 (en) 2012-12-18 2014-06-19 Volvo Car Corporation Vehicle adaptation to automatic driver independent control mode

Family Cites Families (24)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US7126583B1 (en) * 1999-12-15 2006-10-24 Automotive Technologies International, Inc. Interactive vehicle display system
JPH1165431A (ja) 1997-08-25 1999-03-05 Nippon Telegr & Teleph Corp <Ntt> 景観ラベル付カーナビゲーション装置およびシステム
JP3796704B2 (ja) 1998-03-26 2006-07-12 中部電力株式会社 ビデオカメラ位置角度測定装置
JP4052741B2 (ja) * 1998-09-30 2008-02-27 セントラル硝子株式会社 反射型ディスプレイ用積層ガラス
US7920102B2 (en) * 1999-12-15 2011-04-05 Automotive Technologies International, Inc. Vehicular heads-up display system
US6727807B2 (en) * 2001-12-14 2004-04-27 Koninklijke Philips Electronics N.V. Driver's aid using image processing
JP2003200755A (ja) * 2001-12-28 2003-07-15 Yazaki Corp 車両用表示装置
JP4567941B2 (ja) * 2001-12-28 2010-10-27 株式会社半導体エネルギー研究所 半導体装置の作製方法及び表示装置の作製方法
AU2003214595A1 (en) * 2002-03-07 2003-09-16 Yechezkal Evan Spero Enhanced vision for driving
US6956503B2 (en) 2002-09-13 2005-10-18 Canon Kabushiki Kaisha Image display apparatus, image display method, measurement apparatus, measurement method, information processing method, information processing apparatus, and identification method
JP4250391B2 (ja) * 2002-09-13 2009-04-08 キヤノン株式会社 指標検出装置、指標検出方法
JP4136859B2 (ja) * 2003-01-10 2008-08-20 キヤノン株式会社 位置姿勢計測方法
ATE552478T1 (de) 2004-06-03 2012-04-15 Making Virtual Solid L L C Navigationsanzeigeverfahren und vorrichtung für unterwegs unter verwendung eines head-up-displays
JP2010256878A (ja) 2009-03-30 2010-11-11 Equos Research Co Ltd 情報表示装置
US8384531B2 (en) 2009-04-02 2013-02-26 GM Global Technology Operations LLC Recommended following distance on full-windshield head-up display
US8412413B1 (en) * 2011-12-21 2013-04-02 Delphi Technologies, Inc. Vehicle windshield display with obstruction detection
US20140309876A1 (en) * 2013-04-15 2014-10-16 Flextronics Ap, Llc Universal vehicle voice command system
FR3000026B1 (fr) 2012-12-21 2016-12-09 Airbus Aeronef comprenant un poste de pilotage dote d'une surface de vision pour le pilotage au moins partiellement virtuelle
US20140178029A1 (en) 2012-12-26 2014-06-26 Ali Fazal Raheman Novel Augmented Reality Kiosks
US9550419B2 (en) 2014-01-21 2017-01-24 Honda Motor Co., Ltd. System and method for providing an augmented reality vehicle interface
KR101561917B1 (ko) * 2014-04-10 2015-11-20 엘지전자 주식회사 차량 제어 장치 및 그 제어 방법
DE112014006621B4 (de) * 2014-04-25 2019-09-05 Mitsubishi Electric Corporation Automatische Einstellvorrichtung, automatisches Einstellsystem und automatisches Einstellverfahren
CA3049801C (en) 2014-07-10 2023-02-28 Lusospace, Projectos Engenharia Lda Display device
KR101677648B1 (ko) * 2014-12-22 2016-11-18 엘지전자 주식회사 차량 제어 장치 및 그 제어 방법

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2004354792A (ja) * 2003-05-30 2004-12-16 Semiconductor Energy Lab Co Ltd 車両用表示装置
JP2005283407A (ja) 2004-03-30 2005-10-13 Seiko Epson Corp 解説付き画像の投写表示
US20140168608A1 (en) 2012-12-18 2014-06-19 Volvo Car Corporation Vehicle adaptation to automatic driver independent control mode

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20220135657A (ko) * 2021-03-31 2022-10-07 인하대학교 산학협력단 가독성을 높이는 초보 운전자 표시 스티커
KR102466320B1 (ko) 2021-03-31 2022-11-14 인하대학교 산학협력단 가독성을 높이는 초보 운전자 표시 스티커

Also Published As

Publication number Publication date
US20170240047A1 (en) 2017-08-24
CA2957047A1 (en) 2017-08-18
KR20170097560A (ko) 2017-08-28
CN107089191B (zh) 2020-10-02
JP2017151981A (ja) 2017-08-31
EP3208650A1 (en) 2017-08-23
JP6485654B2 (ja) 2019-03-20
CN107089191A (zh) 2017-08-25
US10682911B2 (en) 2020-06-16
CA2957047C (en) 2019-06-11

Similar Documents

Publication Publication Date Title
KR101906711B1 (ko) 차량 정보 및 가상 현실을 위한 활성 윈도우
EP3338136B1 (en) Augmented reality in vehicle platforms
US11094132B2 (en) System and method for presentation and control of augmented vehicle surround views
US20140002357A1 (en) Enabling and Disabling Features of a Headset Computer Based on Real-Time Image Analysis
CN109478094B (zh) 用于运行机动车的显示装置的方法
KR101809924B1 (ko) 차량 디스플레이 장치 및 이를 구비한 차량
KR20150122975A (ko) Hmd 및 그 제어 방법
CN105991942B (zh) 车辆及用于控制车辆的方法
CN111480194A (zh) 信息处理装置、信息处理方法、程序、显示系统和移动物体
CN109448050B (zh) 一种目标点的位置的确定方法及终端
US20210321169A1 (en) Smart glasses closed captioning
KR20170027162A (ko) 차량 디스플레이 장치 및 이를 구비한 차량
KR101736820B1 (ko) 이동 단말기 및 그 제어 방법
US9316828B2 (en) Three-dimensional vehicle backup camera display system and method
JP6930541B2 (ja) 画像処理装置および画像処理方法
TW201333753A (zh) 具有實景導覽功能之透明顯示器
JP7155280B2 (ja) ビデオストリームからコンテキスト固有ｈｕｄをパースするためのプロゲーミングａｒバイザー及び方法
GB2526515A (en) Image capture system
US20200011695A1 (en) Information presentation device, information presentation method, and storage medium
JP6783420B2 (ja) 表示制御装置及び表示制御方法
KR102540574B1 (ko) 스트레처블 디스플레이를 사용하여 자동차에서 증강 현실을 제공하는 방법, 이를 수행하기 위한 기록 매체 및 장치
KR20160082060A (ko) 차량용 디스플레이 장치 및 이를 구비한 차량 통신 시스템
KR20230091870A (ko) 카메라 모듈, 정보 처리 시스템, 정보 처리 방법 및 정보 처리 장치
JP2020145612A (ja) 画像処理装置、画像処理システム、画像処理方法、及びプログラム
Betts Software Reviews: See the world through your smartphone

Legal Events

Date Code Title Description
A201 Request for examination
E902 Notification of reason for refusal
E701 Decision to grant or registration of patent right
GRNT Written decision to grant