KR20170091714A - 이미지를 픽셀 단위로 투영하기 위한 투영 장치 및 방법 - Google Patents

이미지를 픽셀 단위로 투영하기 위한 투영 장치 및 방법 Download PDF

Info

Publication number
KR20170091714A
KR20170091714A KR1020177018217A KR20177018217A KR20170091714A KR 20170091714 A KR20170091714 A KR 20170091714A KR 1020177018217 A KR1020177018217 A KR 1020177018217A KR 20177018217 A KR20177018217 A KR 20177018217A KR 20170091714 A KR20170091714 A KR 20170091714A
Authority
KR
South Korea
Prior art keywords
pixel
backward
image
visible light
measurement signal
Prior art date
Application number
KR1020177018217A
Other languages
English (en)
Inventor
알렉산더 엘러트
니클라스 디트리히
펠릭스 슈미트
가엘 필라드
Original Assignee
로베르트 보쉬 게엠베하
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 로베르트 보쉬 게엠베하 filed Critical 로베르트 보쉬 게엠베하
Publication of KR20170091714A publication Critical patent/KR20170091714A/ko

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/017—Gesture based interaction, e.g. based on a set of recognized hand gestures
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/03—Arrangements for converting the position or the displacement of a member into a coded form
    • G06F3/041—Digitisers, e.g. for touch screens or touch pads, characterised by the transducing means
    • G06F3/0416—Control or interface arrangements specially adapted for digitisers
    • G06F3/0418—Control or interface arrangements specially adapted for digitisers for error correction or compensation, e.g. based on parallax, calibration or alignment
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/03—Arrangements for converting the position or the displacement of a member into a coded form
    • G06F3/041—Digitisers, e.g. for touch screens or touch pads, characterised by the transducing means
    • G06F3/042—Digitisers, e.g. for touch screens or touch pads, characterised by the transducing means by opto-electronic means
    • G06F3/0425—Digitisers, e.g. for touch screens or touch pads, characterised by the transducing means by opto-electronic means using a single imaging device like a video camera for tracking the absolute position of a single or a plurality of objects with respect to an imaged reference surface, e.g. video camera imaging a display or a projection screen, a table or a wall surface, on which a computer generated image is displayed or projected
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/10—Cameras or camera modules comprising electronic image sensors; Control thereof for generating image signals from different wavelengths
    • H04N23/11—Cameras or camera modules comprising electronic image sensors; Control thereof for generating image signals from different wavelengths for generating image signals from visible and infrared light wavelengths
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N9/00—Details of colour television systems
    • H04N9/12—Picture reproducers
    • H04N9/31—Projection devices for colour picture display, e.g. using electronic spatial light modulators [ESLM]
    • H04N9/3129—Projection devices for colour picture display, e.g. using electronic spatial light modulators [ESLM] scanning a light beam on the display screen
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N9/00—Details of colour television systems
    • H04N9/12—Picture reproducers
    • H04N9/31—Projection devices for colour picture display, e.g. using electronic spatial light modulators [ESLM]
    • H04N9/3129—Projection devices for colour picture display, e.g. using electronic spatial light modulators [ESLM] scanning a light beam on the display screen
    • H04N9/3135—Driving therefor
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N9/00—Details of colour television systems
    • H04N9/12—Picture reproducers
    • H04N9/31—Projection devices for colour picture display, e.g. using electronic spatial light modulators [ESLM]
    • H04N9/3141—Constructional details thereof
    • H04N9/315—Modulator illumination systems
    • H04N9/3155—Modulator illumination systems for controlling the light source
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N9/00—Details of colour television systems
    • H04N9/12—Picture reproducers
    • H04N9/31—Projection devices for colour picture display, e.g. using electronic spatial light modulators [ESLM]
    • H04N9/3141—Constructional details thereof
    • H04N9/3173—Constructional details thereof wherein the projection device is specially adapted for enhanced portability
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N9/00—Details of colour television systems
    • H04N9/12—Picture reproducers
    • H04N9/31—Projection devices for colour picture display, e.g. using electronic spatial light modulators [ESLM]
    • H04N9/3191—Testing thereof
    • H04N9/3194—Testing thereof including sensor feedback

Landscapes

  • Engineering & Computer Science (AREA)
  • General Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Human Computer Interaction (AREA)
  • Optics & Photonics (AREA)
  • Projection Apparatus (AREA)
  • Transforming Electric Information Into Light Information (AREA)
  • Controls And Circuits For Display Device (AREA)
  • Mechanical Optical Scanning Systems (AREA)
  • Control Of Indicators Other Than Cathode Ray Tubes (AREA)

Abstract

본 발명은, 이미지(50)를 픽셀 단위로 투영하기 위한 방법 및 투영 장치에 관한 것이다. 투영 장치는 이미지(50)를 픽셀 단위로 투영하기 위한 투영 장치로 설계되며, 이 투영 장치는, 가시광(32)을 픽셀 단위로 방출하기 위한 광 다이오드 장치(12)와; 적외선(34)을 픽셀 단위로 방출하기 위한 적외선 다이오드 장치(14)와; 후방 방사된 가시광(42) 및 후방 방사된 적외선(44)의 후방 방사 세기를 픽셀 단위로 검출하고, 검출된 후방 방사 세기를 토대로 실제 후방 방사 세기 측정 신호를 픽셀 단위로 발생시키기 위한 방사 세기 검출 장치(16)와; 투영할 이미지(50)에 상응하는 가시광(32)을 방출하기 위하여 광 다이오드 장치(12)를 픽셀 단위로 제어하도록 설계된 제어 장치(18);를 구비하며, 상기 제어 장치는 또한, 적외선(34)을 방출하기 위하여, 실제 후방 방사 세기 측정 신호에 대해 픽셀 단위로 예상되는 목표 후방 방사 세기 측정 신호가 예정된 픽셀(54)에 대해 예정된 값을 갖는 방식으로, 적외선 다이오드 장치(14)를 투영할 이미지(50) 및 후방 방사 모델에 기반하여 픽셀 단위로 제어하도록 설계된다.

Description

이미지를 픽셀 단위로 투영하기 위한 투영 장치 및 방법{PROJECTION APPARATUS AND METHOD FOR PROJECTING AN IMAGE PIXEL BY PIXEL}
본 발명은, 이미지를 픽셀 단위로 투영하기 위한 투영 장치, 더 정확하게는 광 투영 장치와, 이미지를 픽셀 단위로 투영하기 위한 방법에 관한 것이다.
종래의 프로젝터(projector)는 대개 비교적 크고, 무거우며, 민감하기 때문에, 이동식으로 사용하기에는 거의 부적합하다. 또한, 이와 같은 장치는 비교적 에너지 소모가 많고, 생성되는 컬러들이 예컨대 투영면에 태양광이 충돌하는 경우 때때로 흐릿해지게 하는 작용을 한다.
소형화된 프로젝터에 사용될 수 있는 기술에는, 소위 레이저 스캐너 또는 스캔 기능이 있는 레이저 프로젝터가 속한다. 레이저 스캐너의 경우에는, 레이저 다이오드로부터 방출되는 레이저 빔이 이동하면서 픽셀 단위로 투영면을 "스캐닝", 즉 주사한다. 상이한 컬러의 레이저 빔들이 중첩됨으로써, 그리고 레이저 빔들이 원하는 대로 픽셀 단위로 시간 의존적으로 투영 및 비투영됨으로써, 컬러 이미지가 생셩될 수 있다. 스캐닝 실행들은, 진공관 TV의 발광층을 전자빔으로 스캐닝하는 경우에서와 유사하게, 육안으로 볼 때 전체 이미지가 생성될 정도의 높은 반복 주파수로 수행될 수 있다. 이러한 레이저 스캐너는 크기가 작으며, 강한 컬러의 이미지를 생성한다. 또한, 상기 레이저 스캐너는 매우 에너지 효율적으로 작동하는데, 그 이유는 실제로 투영을 위해서 필요한 경우에만 레이저 빔이 스위치-온되기 때문이다.
소형화된 레이저 스캐너, 예컨대 이른바 피코 프로젝터는 예를 들어 이동 전화, 태블릿 PC 및 다른 이동 단말기에 내장될 수 있거나, 이동 전화, 태블릿 PC 또는 다른 이동 단말기로서 형성될 수 있다. 통상적으로, 프로젝터는 특수 원격 조작으로써 또는 입력 면에 있는 키를 누름으로써 제어된다. 대안적으로, 레이저 스캐너의 빔 영역 내에 투입된 물체를 나타내는 제스처(gesture)에 의해 레이저 스캐너를 제어하는 것도 공지되어 있다. 이를 위해, 물체, 예를 들어 손에 의해, 후방 산란된 광 혹은 레이저 광이 검출되고, 이에 기반해서 제어 제스처가 결정된다. 이러한 과정은 시간 경과에 따라, 특히 투영된 복수의 전체 이미지에 걸쳐서 수행될 수 있으며, 이로 인해 예를 들어 손동작이 검출되어 제어 제스처로서 해석될 수 있다. 예컨대, 좌측으로부터 레이저 스캐너의 빔 영역 내부로 진입했다가 다시 밖으로 빼내진 손은 포토 쇼(photo show)의 다음 사진으로 넘기기 위한 제어 제스처로서 해석될 수 있다.
DE 10 2012 206 851 A1호에는, 투영된 이미지의 광 원뿔 내에서 실행된 제스처를 검출하기 위한 방법 및 장치가 기술되어 있다. 이 경우, 투영된 이미지의 모든 화소 및 투영된 이미지의 화소들 중 각각 하나 또는 복수의 파라미터 값이 검출되고, 이들 파라미터 값이 각각 하나의 파라미터 비교 값과 비교되며, 비교 결과에 따라 화소량에 할당된다. 할당된 화소량에 기반해서, 투영된 이미지의 광 원뿔 내에서 실행된 제스처가 검출된다.
프로젝터 또는 레이저 스캐너의 광 원뿔 혹은 방사선 영역 내에서의 제스처를 검출하는 경우에는 통상적으로, 검출된 광에 대한 반사 특성이 의도된 투영면의 반사 특성과 상이한 빔 영역으로 물체, 예컨대 손이 진입함으로써 나타나는 광 출력차가 평가된다. 특정 제스처가 검출되는 속도 및 정확도는, 종래 방식에 따르면 투영할 이미지에 의해 영향을 받는다. 예를 들면 장시간에 걸쳐 순수 흑색의 이미지가 "투영"될 수 있는데, 이는 다시 말해 광 방출이 전혀 이루어지지 않고 있어서 상응하는 기간 동안 제스처가 전혀 검출될 수 없게 된다.
본 발명은, 특허 청구항 1의 특징들을 갖는 투영 장치 및 특허 청구항 7의 특징들을 갖는 방법을 개시한다.
그에 따라, 이미지를 픽셀 단위로 투영하기 위한 투영 장치가 제공되며, 이 투영 장치는, 가시광을 픽셀 단위로 방출하기 위한 광 다이오드 장치; 적외선을 픽셀 단위로 방출하기 위한 적외선 다이오드 장치; 후방 방사된 가시광 및 후방 방사된 적외선의 후방 방사 세기를 픽셀 단위로 검출하고, 픽셀 단위로 검출된 후방 방사 세기에 기반해서 실제 후방 방사 세기 측정 신호를 픽셀 단위로 발생시키기 위한 방사선 세기 검출 장치; 투영할 이미지에 상응하는 가시광을 방출하기 위하여 광 다이오드 장치를 픽셀 단위로 제어하도록 설계된 제어 장치;를 구비하며, 상기 제어 장치는 또한, 적외선을 방출하기 위하여, 실제 후방 방사 세기 측정 신호에 대해 픽셀 단위로 예상되는 목표 후방 방사 세기 측정 신호가 예정된 픽셀에 대해 예정된, 특히 일정한 값을 갖고, 이 값이 바람직하게 모든 예정된 픽셀에 대해 동일하도록, 투영할 이미지 및 후방 방사 모델에 기반해서 픽셀 단위로 적외선 다이오드 장치를 제어하도록 설계된다.
다른 말로 표현하자면, 실제 후방 방사 세기 측정 신호는 적외선 및 가시광의 파장 범위 안에서 방사선 세기 검출 장치에 의해 검출된 후방 방사 세기에 대해 실제로 측정된 세기 값을 기술한다. 목표 후방 방사 세기 측정 신호는 측정 신호 자체가 아니며, 오히려 실제 후방 방사 세기 측정 신호에 대한 예비 설정 혹은 추정이다. 특히 후방 방사 모델이 부정확하고/부정확하거나 물체가 투영 장치의 빔 영역 내부로 삽입되는 경우에는, 실제 후방 방사 세기 측정 신호가 목표 후방 방사 세기 측정 신호와 상이할 수 있다. 후자의 경우의 효과는 예를 들어 실행된 제어 제스처를 검출하기 위해서 활용될 수 있다.
"픽셀 단위로"라는 표현은 특히, 각각의 픽셀에 대한 측정 또는 계산이 별도로 실시될 수 있고, 예컨대 평균값 산출 또는 적분이 이루어질 필요가 없는 것, 그리고 각각의 픽셀에 대한 후방 방사 세기 측정 신호가 별도로 발생할 수 있고 평가될 수 있다는 것을 의미한다. 픽셀 단위로 검출된 후방 방사 세기에 기반해서 실제 후방 방사 세기 측정 신호를 픽셀 단위로 발생시킨다는 표현은 특히, 각각의 픽셀에 대해 이 픽셀에 의해서 후방 방사된 후방 방사 세기에 기반해서 실제 후방 방사 세기 측정 신호가 발생하는 것을 의미한다.
픽셀이란 특히, 투영할 이미지에 상응하게 변조된 광선이 방출되고, 특히 발생하고, 그리고/또는 편향되는 정해진 위치를 의미한다. 투영할 이미지에 따라, 예를 들어 맨 왼쪽 상부에 있는 제1 픽셀이 흑색으로 디스플레이될 수 있다. 각각의 새로운 스캐닝 실행 때마다, 다시 말해 레이저 스캐너가 순차적인 스캐닝 시 상기 픽셀을 투영할 때에는 항상, 본 발명에 따라, 제1 픽셀이 예정된 픽셀에 속한다면, 목표 후방 방사 세기 측정 신호에 대해 예정된 동일한 값이 사용된다. 정지 이미지를 투영해야 하는지 아니면 움직이는 이미지를 투영해야 하는지는 중요치 않다. 복수의 스캐닝 실행 후, 예를 들어 투영할 이미지에 상응하게 제1 픽셀을 백색으로 디스플레이해야 하는 경우에는, 제1 픽셀에 대한 목표 후방 방사 세기 측정 신호가 예정된 일정한 값에 머무른다.
일정한 값은 바람직하게, 광 다이오드 장치가 광을 전혀 방출하지 않는 경우에도 적외선 다이오드 장치에 의해 달성될 수 있는 방식으로 정해진다.
광 다이오드 장치 및 적외선 다이오드 장치는 특히 하나의 공통 광학 편향 장치 또는 각각 고유한 광학 편향 장치, 예를 들어 마이크로 미러 및 렌즈, 조리개 등을 포함할 수 있으며, 상기 마이크로 미러에 의해서는, 발생한 가시광 및 발생한 적외선이 픽셀 단위의 "스캐닝"을 위해, 다시 말해 투영할 이미지를 시간차를 두고 투영하기 위해 편향될 수 있다.
방사 세기 검출 장치는 예를 들어, 가시광뿐만 아니라 적외선 범위 안에 있는, 바람직하게는 근 적외선 범위 안에 있는 파장을 갖는 광까지도 검출하도록 설계되어 있는 포토다이오드일 수 있다. 이때, 근 적외선으로서는, 예를 들어 DIN 5031에 따라, 780 나노미터 내지 3 마이크로미터의 범위가 지시된다. 적외선 다이오드 장치로부터 방출되는 적외선은 특히 완전히, 780 나노미터 내지 1400 나노미터의 파장에 달하는 IR-A-범위 내에 놓일 수 있거나 그곳에서 최댓값을 가질 수 있다.
또한, 이미지를 픽셀 단위로 투영하기 위한 방법이 제공되며, 이 방법은, 투영할 이미지에 상응하는 가시광을 픽셀 단위로 방출하기 위해 투영 장치의 광 다이오드 장치를 제어하는 단계; 예정된 픽셀에 대해 후방 방사된 가시광 및 후방 방사된 적외선의 후방 방사 세기를 픽셀 단위로 검출하는 단계; 검출된 후방 방사 세기에 기반해서 실제 후방 방사 세기 측정 신호를 픽셀 단위로 발생시키는 단계; 및 실제 후방 방사 세기 측정 신호에 대해 픽셀 단위로 예상되는 목표 후방 방사 세기 측정 신호가 예정된 픽셀에 대해 예정된, 특히 일정한 값을 갖는 방식으로, 투영할 이미지 및 후방 방사 모델에 기반해서 적외선을 픽셀 단위로 방출하기 위하여, 투영 장치의 적외선 다이오드 장치를 제어하는 단계를 포함한다.
예컨대 현재 투영 면의 성질로 인해 예정된 최소 기간을 초과한 경우 예정된 값에 도달할 수 없다면, 그 예정된 값이 검출된 실제 후방 방사 세기 측정 신호에 기반해서 자동으로 감소할 수 있다.
본 발명은, 투영할 이미지의 각각의 픽셀이 상이한 방사 세기로 투영되지만, 이 방사 세기가 관찰자에게 보이지 않는 적외선에 의해서 상기 이미지의 복수의 또는 모든 픽셀에 대해 각각 예정된 값에 보충될 수 있다는 인식에 기반한다. 이로써, 검출된 광선 및 검출된 적외선의 후방 방사에 의해서 생성되고 특히 빔 경로 내에 있는 물체에 의한 이들의 가능한 차단에 의해서 또는 증가된 반사에 의해서 불균일해지는, 불균일한 후방 방사 세기의 공간적으로 분해된 검출 및 평가를 기반으로 하는 방법이 특히 신뢰할만하게 그리고 정확하게 진행될 수 있다.
본 발명에 따르면, 예컨대 후방 방사 모델의 부분으로서, 투영면이 완벽하게 반사하는 것으로서 가정되고 방사 세기 검출 장치가 완벽하게 감지하는 것으로서 가정되는 경우에는, 적외선의 추가 방사 세기가 투영할 이미지에 상응하게 방출될 가시광의 방사 세기와 더해져서 예정된 값을 형성하게 되는 추가의 방사선 세기로, 적외선이 픽셀 단위로 각각 정확하게 방출될 수 있다. 이로써, 투영할 이미지만을 토대로 하는 후방 방사 세기의 전체 불균일성이 제거되며, 그 결과 잔존하는 불균일성은 예컨대 투영 장치의 빔 영역 내부에 진입된 물체로 되돌아간다. 이와 같은 물체는 예를 들어 손 또는 포인터(pointer)일 수 있다. 이와 같은 방식으로 불균일해진 후방 방사 세기를 토대로 하면, 예컨대 진입된 물체에 기반해서 제스처를 제어하기 위한 방법이 특히 정확하고 신뢰할만하게 실행될 수 있다.
이로써, 예정된 픽셀의 특정한 일 픽셀에서 발생하는, 전체적으로 방출된 방사 세기는, 가시 파장 스펙트럼 내에 있는 어느 색조 및 어느 휘도 값이 현재 디스플레이할 이미지에 상응하는 특정 픽셀을 구비하는지와 무관하게, 각각의 스캐닝 실행에서 동일하게, 다시 말하자면 일정하게 유지된다.
본 발명의 바람직한 개선예들은 또한 후방 방사 모델에서, 투영 면이 통상적으로는 이상적으로 반사하는 투영 면이 아니라는 것을 고려하고 있는데, 특히 그 이유는 소형화된 프로젝터의 강도는 거의 어디서든 사용할 수 있는 수준이기 때문이다. 이로써, 몇몇 실시예들에 따라, 투영에 선행하는 그리고/또는 투영 동안에 영구적으로 진행하는 후방 방사 모델의 조정이 이루어지며, 이 조정은, 투영할 이미지가 실제로 투영되어야 하는 투영 면의 구체적인 특성 및 선택적으로는 투영 장치의 빔 영역 내부로 진입될 예상 물체를 고려한다. 이와 같은 물체의 광학 특성, 예컨대 반사 계수도 검출되어 제어 제스처의 더욱 정확한 결정을 위해 사용될 수 있다.
매우 간단한 한 사례에서, 후방 방사 모델은, 각각 방출된 가시광 및 각각 방출된 적외선이 고정된 백분율인 R%까지, 예를 들어 50%, 80% 또는 100%까지 후방 방사되고, 사용된 방사선의 모든 파장에 대한 방사 세기 검출 장치의 감도(S)가 동일하다는 정보, 다시 말해 목표 후방 방사 세기 측정 신호가 전체 방사 출력(P-Aus-Ist)의 상응하는 백분율 및 감도에 따라 모든 파장 범위에 걸쳐서 동일하다는 정보를 포함한다. 공식들 중에, 일 픽셀(
Figure pct00001
)(이 경우 "i"는 상기 픽셀이 배치되어 있는 투영할 이미지의 하나의 행을 나타내고, "j"는 상기 픽셀이 배치되어 있는 투영할 이미지의 하나의 열을 나타냄)에 대해서는 아래의 공식이 적용된다:
Figure pct00002
상기 공식에서 는 예정된 값을 지시하고,
Figure pct00004
은 픽셀(
Figure pct00005
)에 대한 목표 후방 방사 세기 측정 신호를 지시하며, ⅠR은 적색 파장 범위 안에 있는 방출된 가시광의 방사 세기를 지시하고, ⅠG는 녹색 파장 범위 안에 있는 방출된 가시광의 방사 세기를 지시하며, ⅠB는 청색 파장 범위 안에 있는 파장을 갖는 가시광의 방사 세기를 지시하고, ⅡR은 방출선 적외선의 방사 세기를 지시하며, 그리고
Figure pct00006
는 모든 방출된 전자기파를 위한 각각의 개별 픽셀(
Figure pct00007
)에 대해 각각 공통인 방사 세기를 지시한다.
상기 공식으로부터는, 투영할 이미지에 상응하게, 각각의 픽셀(
Figure pct00008
)에 대해 공지된 값[
Figure pct00009
] 및 예정된 값(
Figure pct00010
)으로부터 방사 세기[
Figure pct00011
]가 검출될 수 있고, 이 방사 세기에 의해서는 각각의 픽셀(
Figure pct00012
) 쪽으로의 적외선이 검출되어야만 한다. 유사하게, 이와 같은 내용은 또한 더 복잡한 후방 방사 모델로부터 나타나는 다음의 공식들에 대해서도 적용된다.
개선된 후방 방사 모델은 예를 들어, 방사 세기 검출 장치, 예를 들어 포토다이오드가 통상적으로는 다양한 파장을 갖는 광 혹은 전자기 광선에 대해 상이하게 민감하다는 것을 고려한다. 그 다음에, 후방 방사 모델을 이용해서 계산된, 픽셀(
Figure pct00013
)에 대해 예상되는 목표 후방 방사 세기 측정 신호(
Figure pct00014
)는 다음과 같이 구성되며,
Figure pct00015
상기 공식에서 SR, SG 및 SB는 적색, 녹색 및 청색 파장 범위 안에 있는 광에 대한 방사 세기 검출 장치의 감도를 지시하고, SIR은 적외선 파장 범위 안에서 방사 세기 검출 장치의 감도를 지시하며, 이 경우
Figure pct00016
는 본 발명에 따라, 각각의 예정된 픽셀(
Figure pct00017
)에 대한
Figure pct00018
가 일정하도록 선택된다. 감도 SR, SG, SB, SIR은 일정할 수 있지만, 이들은 또한 예를 들어 방향 의존성, 출력 의존성 등을 가질 수 있다.
예정된 픽셀은 예를 들어 투영할 특정 이미지 혹은 투영할 모든 이미지의 모든 픽셀을 포함할 수 있다. 그러나 또한, 예정된 픽셀이 하나 또는 복수의 픽셀만큼 넓은 투영할 이미지의 에지 및/또는 투영 이미지 내부에 있는 매트릭스 형태의 격자를 형성하는 것도 제공될 수 있다.
더욱 세밀하게 미분된 후방 방사 모델은 또한 파장 의존적 반사 계수(RR, RG, RB, RIR)를 고려할 수도 있는데, 그 이유는 예를 들어 유색의 투영 면 또는 투영 장치의 빔 영역 안으로 진입된 신체 부분의 다양한 피부색이 방출된 가시광선 및 방출된 적외선을 각각 상이하게 반사할 수 있기 때문이다. 이와 같은 내용은 다음의 공식에 의해서 표현될 수 있으며,
Figure pct00019
상기 식에서
Figure pct00020
및
Figure pct00021
은 각각 적색, 청색, 녹색 혹은 적외선 파장 범위 안에 있는 광에 대한, 투영 면에 걸쳐 일정한 반사 계수를 지시한다.
투영 면의 반사 계수는 바람직하게 투영할 이미지의 투영 전 교정시에 픽셀 단위로 검출될 수 있으며, 이렇게 함으로써 후방 방사 모델 내에서는 가시광선 범위 안에서뿐만 아니라 적외선 범위 안에서도 방출된 파장을 갖는 광에 대하여 반사 계수[
Figure pct00022
및
Figure pct00023
)]가 픽셀별로 정확하게 고려될 수 있다. 이와 같은 내용은 다음과 같은 공식으로 나타내지며,
Figure pct00024
상기 식에서
Figure pct00025
은 픽셀(
Figure pct00026
)의 목표 후방 방사 세기 측정 신호를 기술한다.
후방 방사 모델은 또한, 예를 들어 투영 장치의 빔 영역 안에 진입된 물체가 검출되면, 단시간에도 조정될 수 있다. 예를 들면 물체의 검출 직후에, 투영할 이미지의 픽셀의 하부 영역에 대한 후방 방사 모델의 재교정 혹은 조정이 이루어질 수 있다. 이 경우 하부 영역은, 투영 장치의 빔 영역 안으로 진입된 물체에 의해서 영향을 받은 모든 픽셀이 픽셀의 하부 영역 안으로 떨어지도록 선택될 수 있다. 픽셀의 하부 영역은 각각 진입된 물체의 움직임에 따라 확장 또는 축소될 수 있다. 픽셀의 하부 영역에 있는 픽셀에 대해 후방 방사 모델은, 투영 면의 파장 의존적 반사 계수가 진입된 물체의 파장 의존적이거나, 예정되었거나 특정할 수 있는 반사 계수로 대체되는 방식으로, 픽셀 단위로 또는 평균적으로 조정될 수 있다.
바람직한 실시예들 및 개선예들은 종속 청구항들 그리고 도면을 참조하는 상세한 설명으로부터 드러난다.
또 다른 바람직한 일 개선예에 따르면, 투영 장치는 제스처 검출 장치를 포함하며, 이 제스처 검출 장치는, 예정된 픽셀의 픽셀 단위로 발생한 실제 후방 방사 세기 측정 신호에 기반해서 제어 제스처를 검출하도록 그리고 검출된 제어 제스처에 기반하는 제어 신호를 발생하도록 설계되어 있다. 선택적으로, 제스처 검출 장치는 또한, 발생한 제어 신호를 제어 장치로 그리고/또는 외부 장치로 전송하도록 설계될 수도 있으며, 이 외부 장치는 전송된 제어 신호에 기반해서 작동될 수 있거나 조정될 수 있다. 이로써, 투영 장치는 제어 제스처에 의해서, 예컨대 투영 장치의 빔 영역 안으로 삽입되는 손 또는 물체에 의해서 간단히 제어될 수 있다. 예정된 픽셀에 대해 예상되는 일정한 목표 후방 방사 세기 측정 신호가 나타나는 방식의 가시광선 및 적외선의 검출은, 완벽한 후방 방사 모델의 이상적인 경우에는, 예정된 픽셀에 대해, 실제로 발생한 실제 후방 방사 세기 측정 신호도 일정하다는 것을 의미한다. 실제로 불완전한 후방 방사 모델의 경우에는 항상, 예정된 픽셀에 대해, 제어 제스처의 특히 정확하고 견고한 검출을 가능하게 하는, 실제 후방 방사 세기 측정 신호의 바람직하고 광범위한 연속성이 나타난다.
또 다른 바람직한 일 개선예에 따르면, 투영 장치는 교정 장치를 포함하며, 이 교정 장치에 의해서는, 예정된 픽셀의 하나 이상의 픽셀의 하나 이상의 실제 후방 방사 세기 측정 신호와 동일 픽셀의 상응하는 목표 후방 방사 세기 측정 신호 간의 하나 이상의 차에 기반해서 후방 방사 모델이 자동으로 생성될 수 있거나 자동으로 조정될 수 있다. 투영 장치의 교정이라고도 말할 수 있는 후방 방사 모델의 조정은 연속적으로, 규칙적으로 그리고/또는 사용자의 요구 사항에 맞추어 이루어질 수 있다. 투영 장치가 스위치 온 될 때, 또는 투영할 이미지의 투영 시작 전에 이루어지는 추가의 또는 대안적인 교정도 생각할 수 있다.
또 다른 바람직한 일 개선예에 따르면, 투영 장치는 프로그래밍 장치를 포함하며, 이 프로그래밍 장치에 의해서는, 후방 방사 모델의 하나 이상의 파라미터가 사용자에 의해서, 특히 수동으로 조정될 수 있다. 예를 들면, 사용할 투영면의 하나 이상의 반사 계수가 조정될 수 있다. 또한, 제어 제스처를 실행해야만 하는 손의 피부 색조도 지정될 수 있는데, 이와 같은 피부 색조에 기반해서는, 투영 장치의 반사 계수 데이터 뱅크를 사용하여, 투영할 이미지의 하부 영역 또는 모든 픽셀에 대한 반사 계수가 조정될 수 있다. 조정된 반사 계수는 자동으로, 부분적으로 또는 모두 후방 방사 모델의 조정을 위해서 그리고/또는 부분적으로 또는 모두, 제스처 검출 장치가 제어 제스처를 검출할 때 토대가 되는 제어 제스처 검출 모델의 조정을 위해서 사용될 수 있다.
또 다른 바람직한 일 개선예에 따르면, 후방 방사 모델은, 가시광의 하나 이상의 파장에 대해 그리고/또는 적외선에 대해, 특히 가시광의 모든 파장에 대해 그리고/또는 적외선의 모든 파장에 대해, 방사 세기 검출 장치의 파장에 따른 감소를 고려한다. 예를 들어, 현재 투영할 전체 이미지가 방사 세기 검출 장치에 의해서 다만 10%까지만 검출되는 파장의 광으로, 다시 말해 상기 10%의 파장에 대한 감도로 투영될 수 있는 픽셀로 이루어지면, 적외선이 상응하게 높은 방사 세기로 방출될 수 있으며, 그 결과 제어 제스처가 정확하게 검출될 수 있다. 적외선이 전혀 방출되지 않거나, 변조되지 않은, 다시 말해 고정된 방사 세기를 갖는 적외선만 방출되면, 정확한 제어 제스처 검출을 위해 바람직하지 않은 적은 실제 후방 방사 세기 측정 신호가 나타날 수 있다.
또 다른 바람직한 일 개선예에 따르면, 후방 방사 모델은 각각 가시광의 하나 이상의 파장에 대하여 그리고 적외선에 대하여, 투영 면 및/또는 물체 또는 신체 부분의 파장에 따른 예정된 그리고/또는 결정 가능한 반사 계수를 고려한다.
또 다른 바람직한 일 개선예에 따르면, 방법은, 예정된 픽셀의 픽셀 단위로 발생한 실제 후방 방사 세기 측정 신호에 기반해서 제어 제스처를 검출하는 단계, 검출된 제어 제스처에 기반하는 제어 신호를 발생시키는 단계를 포함한다. 추가로, 발생한 제어 신호를 투영 장치의 제어 장치로 전송하는 단계 및 전송된 제어 신호에 기반해서 제어 장치를 조정 또는 작동하는 단계가 실시될 수 있다. 그러나 제어 신호는 또한 외부 장치를 제어하기 위한 인터페이스를 통해서도 출력될 수 있다.
또 다른 바람직한 일 개선예에 따르면, 방법은, 예정된 픽셀의 하나 이상의 픽셀의 하나 이상의 발생한 실제 후방 방사 세기 측정 신호와 예정된 값 간의 하나 이상의 차에 기반해서 후방 방사 모델을 자동으로 생성 또는 조정하는 단계를 포함한다.
또 다른 바람직한 일 개선예에 따르면, 후방 방사 모델을 자동으로 생성 또는 조정하는 단계는, 가시광의 하나 이상의 파장에 대한 그리고/또는 적외선에 대한 방사 세기 검출 장치의 하나 이상의 파장 의존적 감도(SR, SG, SB, SIR)에 대한 값의 자동 결정 또는 조정을 포함한다.
또 다른 바람직한 일 개선예에 따르면, 후방 방사 모델을 자동으로 생성 또는 조정하는 단계는, 각각 가시광의 하나 이상의 파장에 대하여 그리고 적외선에 대하여 투영 면 및/또는 물체 또는 신체 부분의 파장 의존적 반사 계수(R%R, R%G, R%B, R%IR)의 자동 결정 또는 조정을 포함한다.
본 발명은, 도면부의 각각의 개략도에 도시된 실시예들을 참조하여 이하에서 더욱 상세하게 설명될 것이다.
도 1은 본 발명의 제1 실시예에 따른, 이미지를 픽셀 단위로 투영하기 위한 투영 장치의 개략적인 블록 다이어그램이다.
도 2는 본 발명의 제2 실시예에 따른, 이미지를 픽셀 단위로 투영하기 위한 투영 장치이다.
도 3은 본 발명의 제3 실시예에 따른, 투영할 이미지를 픽셀 단위로 투영하기 위한 방법을 설명하기 위한 개략적인 흐름도이다.
모든 도면에서는, 달리 명시되어 있지 않는 한, 동일하거나 기능적으로 동일한 요소들 및 장치들에 동일한 참조 부호가 제공되어 있다. 방법 단계들의 넘버링은 개관을 용이하게 할 목적으로 이용되며, 특히 달리 명시되어 있지 않은 한, 특정한 시간적인 순서를 암시하지 않는다. 특히, 복수의 방법 단계들이 동시에 실시될 수도 있다.
도 1은, 본 발명의 제1 실시예에 따른, 이미지(50)를 픽셀 단위로 투영하기 위한 투영 장치(10)의 개략적인 블록 다이어그램을 보여준다.
도 1에 따르면, 투영 장치(10)는 가시광(32)을 픽셀 단위로 방출하기 위한 광 다이오드 장치(12)를 구비한다. 광 다이오드 장치(12)는, 단색의 광(32)을 발생시킬 수 있는 광 발생 다이오드(1), 및 투영 면(56) 상에 이미지(50)를 투영하기 위하여 광 발생 다이오드(1)에 의해 발생한 광(32)을 픽셀 단위로 편향시킬 수 있는 광학 편향 장치(2)를 포함한다. 광학 편향 장치(2)는 예를 들어 하나 또는 2개 또는 그 이상의 마이크로 미러, 렌즈, 조리개 등을 포함할 수 있다. 단색의 광 대신에, 예를 들어 백색의 광도 방출될 수 있다.
투영 장치(10)는 또한, 적외선(34)을 발생하는 다이오드(4) 및 발생한 적외선(34)을 위한 광학 편향 장치(3)를 포함하는 적외선 다이오드 장치(14)도 포함하며, 이로써 발생한 적외선은 투영할 이미지에 상응하는 적외선(34)을 픽셀 단위로 방출하기 위해 편향될 수 있다. 적외선(34)을 위한 광학 편향 장치(3)도 예를 들어 하나 또는 2개 또는 그 이상의 마이크로 미러, 렌즈, 조리개 등을 포함할 수 있다.
투영 장치(10)의 제어 장치(18)는, 투영할 이미지(50)에 상응하는 가시광(32)을 방출하기 위해 광 다이오드 장치(12)를 픽셀 단위로 제어하도록 설계되어 있다. 이 경우에는, 도 1에서 개략적으로 적은 개수로 정면도에 도시된 픽셀(52)이 투영 면(56)에 차례로 투영되며, 이렇게 함으로써 투영할 전체 이미지(50)가 사람 관찰자에게 나타나게 된다. 투영은 특히 반복적으로 그리고 연속적으로 이루어질 수 있으며, 이 경우 투영할 이미지(50)는, 예를 들어 포토 쇼 또는 비디오를 디스플레이하기 위해, 제어 장치(18)의 시간 프로파일에 상응하게 존재하는 이미지 데이터에 맞추어 조정될 수 있다.
투영 장치(10)는, 후방 방사된 가시광(42) 및 후방 방사된 적외선(44)의 후방 방사 세기를 픽셀 단위로 검출하기 위한 방사 세기 검출 장치(16)를 포함한다. 제1 실시예에 따르면, 예정된 픽셀(54)의 모든 파장 및 모든 픽셀에 걸쳐서 항상 일정한 반사 계수가 추정된다. 방사 세기 검출 장치(16)에 의해서는, 검출된 후방 방사 세기에 기반해서 실제 후방 방사 세기 측정 신호가 픽셀 단위로 발생한다.
제어 장치(18)는 또한, 실제 후방 방사 세기 측정 신호에 대해 픽셀 단위로 예상되는 목표 후방 방사 세기 측정 신호가 예정된 픽셀(54)에 대해 예정된 값(
Figure pct00027
)을 갖는 방식으로, 투영할 이미지(50) 및 후방 방사 모델에 기반해서 적외선(34)을 방출하기 위해 적외선 다이오드 장치(14)를 픽셀 단위로 제어하도록 설계되어 있다. 제1 실시예에 따르면, 예정된 픽셀(54)은 투영할 이미지(50)의 최외곽 주변 에지에 배치되어 있다. 대안적으로는, 모든 픽셀(52)도 예정된 픽셀(54)로서 정의될 수 있다.
제1 실시예에 따른 후방 방사 모델은, 가시광(32)이 방출되는 파장 또는 파장들에 대해 그리고 적외선(34)이 방출되는 파장 또는 파장들에 대해, 방사 세기 검출 장치(16)의 파장에 따른 감도를 고려한다. 그에 따라, 제어 장치(18)는, 픽셀 단위로 예상되는 목표 후방 방사 세기 측정 신호가 예정된 픽셀(54)에 대해 예정된 값(
Figure pct00028
)을 갖는 방식으로, 광 다이오드 장치(12) 및 적외선 다이오드 장치(14)를 제어한다.
도 2는 본 발명의 제2 실시예에 따른, 이미지(50)를 픽셀 단위로 투영하기 위한 투영 장치(10")를 도시한다. 제2 실시예에 따른 투영 장치는 제1 실시예에 따른 투영 장치(10)의 일 변형예이다.
제2 실시예에 따르면, 투영할 이미지(50)의 전체 픽셀(52)은 예정된 픽셀(54), 즉 적외선 다이오드 장치(14)가 적외선(34)을 방출할 때의 방사 세기이며, 제어 장치(18')에 의해서 투영할 이미지(50)의 각각의 픽셀(52)에 대해 변조된다.
제1 실시예와 달리, 광 다이오드 장치(12')는 광을 발생하는 3개의 개별 다이오드(13-1, 13-2, 13-3) - 이하에서는 공동으로 13-i로서 언급됨 - 를 포함하며, 이 경우 제1 광 발생 다이오드(13-1)는 적색 광에 할당된 파장 범위 안에서 가시광을 발생하도록 설계되어 있고, 이 경우 제2 광 발생 다이오드(13-2)는 녹색 광에 할당된 파장 범위 안에서 가시광을 발생하도록 설계되어 있으며, 그리고 이 경우 제3 광 발생 다이오드(13-3)는 청색 광에 할당된 파장 범위 안에서 가시광을 발생하도록 설계되어 있다.
광 다이오드 장치(12')는 광학 편향 장치(2 및 3) 대신에 광학 편향 장치(5)를 포함하며, 이 광학 편향 장치에 의해서는, 광 발생 다이오드(13-i)에 의해서 발생한 광(32-i) 뿐만 아니라 적외선(34)을 발생하는 다이오드(4)에 의해서 발생한 적외선(34)도 투영면(56) 상에 이미지(50)를 투영하기 위해 픽셀 단위로 편향될 수 있다. 광학 편향 장치(5)는 예를 들어 하나 또는 2개 또는 그보다 더 많은 마이크로 미러, 렌즈, 조리개 등을 포함할 수 있고, 광을 발생하는 3개의 다이오드(13-i)에 대해 공동인 그리고/또는 각각 개별적인 광학 요소들을 구비할 수 있다. 바람직하게는, 발생한 모든 광선(32-i)에 대해서 그리고 발생한 적외선(34)에 대해서 광학 편향 장치(5)의 동일한 마이크로 미러가 사용된다. 광 다이오드 장치(12')는 제어 장치(18')에 의해서, 투영할 이미지(50)에 상응하는 가시광(32-i)을 방출하기 위해 픽셀 단위로 제어될 수 있다.
제2 실시예에 따르면, 투영 장치(10')는 또한, 예정된 픽셀(54)의 픽셀 당 검출된 후방 방사 세기에 기반해서 제어 제스처를 검출하도록 그리고 검출된 제어 제스처에 기반하는 제어 신호를 제어 장치(18')로 전송하도록 설계되어 있는 제스처 검출 장치(20)를 구비하며, 상기 제어 장치는 전송된 제어 신호에 기반해서 작동될 수 있거나 조정될 수 있다. 제스처의 검출은 예를 들어, 픽셀을 기준으로 한 개별 목표 후방 방사 세기 측정 신호와 비교되는 예정된 픽셀(54)의 픽셀 단위로 발생한 실제 후방 방사 세기 측정 신호 내에서의 차에 기반해서 이루어질 수 있다. 본 발명의 제2 실시예에 따라 픽셀을 기준으로 한 픽셀 당 목표 후방 방사 세기 측정 신호가 투영할 이미지(50)의 모든 픽셀에 대해 일정하다는 사실에 의해서는, 픽셀을 기준으로 한 실제 후방 방사 세기 측정 신호의 변동이 항상 명확하게, 특히 개별 픽셀이 가시광(32-i)의 어느 방사 세기로 투영되었는지와 무관하게 검출될 수 있다.
투영 장치(10')는 또한 교정 장치(22)를 구비하며, 이 교정 장치에 의해서는, 예정된 픽셀(54)의 하나 이상의 픽셀의 하나 이상의 실제 후방 방사 세기 측정 신호와 상기 픽셀의 상응하는 목표 후방 방사 세기 측정 신호 간의 하나 이상의 차에 기반해서 후방 방사 모델이 생성될 수 있거나 자동으로 조정될 수 있다.
특정의 투영할 이미지(50) 또는 복수의 투영할 이미지(50) 또는 투영할 이미지의 시간적인 순서가 인터페이스(26)를 통해서 제어 장치(18')로 전송될 수 있는 동안에는, 장치(18')의 영구적인 데이터 기억 장치(17) 내에 하나 이상의 테스트 이미지 데이터 레코드가 영구적으로 기억될 수 있다. 교정의 범주에서, 광 다이오드 장치(12) 및 적외선 다이오드 장치(14)가 하나 이상의 테스트 이미지를 픽셀 단위로 투영하도록, 제어 장치(18')가 상기 광 다이오드 장치 및 적외선 다이오드 장치를 제어하는 것이 제공될 수 있다. 하나 이상의 테스트 이미지에 따라, 하나 이상의 픽셀의 하나 이상의 실제 후방 방사 세기 측정 신호와 예정된 값 간의 하나 이상의 차에 기반해서, 후방 방사 모델이 적어도 테스트 이미지의 하나 이상의 픽셀에 대하여 조정될 수 있다. 이와 같은 방식으로, 예를 들어 투영할 이미지(50)의 투영 시작 전에 현재 투영면(56)의 성질이 자신의 반사 계수와 관련해서 픽셀 단위로 검출될 수 있고, 현재 사용할 후방 방사 모델의 교정을 위해 사용될 수 있다.
대안적으로 또는 추가로, 후방 방사 모델은 예정된 픽셀(54)의 하나 이상의 픽셀의 하나 이상의 실제 후방 방사 세기 측정 신호와 예정된 값 간의 차에 기반해서 연속적으로 또는 규칙적으로 조정될 수 있다. 이 경우에는 바람직하게, 예정된 픽셀(54)의 하나 이상의 픽셀은, 현재 제어 제스처가 검출되어 있는 픽셀의 하부 영역의 부분이 아니다. 따라서, 후방 방사 모델이 연속으로 개선될 수 있고/있거나 변경된 투영 면(56)에 맞추어 조정될 수 있다.
대안적으로 또는 추가로는, 사용자가 투영 장치(10')의 프로그래밍 장치(24)를 통해서 교정 명령을 제어 장치(18')로 송신할 수 있고, 그 결과로 예컨대 전술된 바와 같은 예정에 없던 교정이 실행되는 것이 제공될 수 있다.
대안적으로 또는 추가로, 프로그래밍 장치(24)에 의해서는 또한 후방 방사 모델의 하나 이상의 파라미터가 사용자에 의해 조정될 수 있다. 예를 들어, 흐르는 물과 같이 투영 면(56)이 계속해서 변하는 경우 또는 투영 면에 추가의 움직이는 이미지가 제공된 경우에는, 후방 방사 모델의 바람직한 설정이 사용자에 의해 수동으로 선택될 수 있다. 또한, 예를 들어 사용자 피부의 피부 색조가 입력될 수 있으며, 이 피부 색조에 기반해서, 적어도 제어 제스처가 검출되어 있는 픽셀이 입력된 피부 색조의 반사 계수를 고려하여 평가되는 방식으로, 교정 장치(22)가 후방 방사 모델을 조정할 수 있다.
도 3은 본 발명의 제3 실시예에 따른, 투영할 이미지(50)를 픽셀 단위로 투영하기 위한 방법을 설명하기 위한 개략적인 흐름도를 보여준다. 제3 실시예에 따른 방법은 바람직한 방식으로, 예를 들어 제2 실시예에 상응하는 본 발명에 따른 장치에 의해서 실시될 수 있다. 그에 상응하게, 이 방법은 본 발명에 따른 장치의 모든 기술된 개선예들에 따라 조정될 수 있으며, 그 반대도 역시 가능하다. 그렇기 때문에, 기술된 방법 단계들에 대한 세부 사항을 위해서는, 제2 실시예에 따른 장치에 대한 선행하는 상세한 설명도 참조된다.
제1 단계 S01에서는, 투영 장치(10; 10')의 광 다이오드 장치(12)가 투영할 이미지(50)에 상응하는 가시광(32; 32-1, 32-2, 32-3)을 픽셀 단위로 방출하기 위해 제어된다.
단계 S02에서는, 예정된 픽셀(54)에 대한 후방 방사된 가시광(42; 42-i) 및 후방 방사된 적외선(44)의 후방 방사 세기가 픽셀 단위로 검출된다. 단계 S03에서는, 검출된 후방 방사 세기에 기반해서 실제 후방 방사 세기 측정 신호가 픽셀 단위로 발생된다.
단계 S04에서는, 투영 장치(10; 10')의 적외선 다이오드 장치(14)가 적외선(34)을 픽셀 단위로 방출하기 위하여, 후방 방사 모델에 의해서 픽셀 단위로 계산되었고 실제 후방 방사 세기 측정 신호에 대해 예상되는 목표 후방 방사 세기 측정 신호가 예정된 픽셀(54)에 대해 일정하도록 제어된다. 예를 들면, 그 이미지의 모든 픽셀이 예정된 픽셀(54)일 수 있다.
단계 S05에서는, 예정된 픽셀(54)의 검출된 실제 후방 방사 세기 측정 신호에 기반해서 제어 제스처가 검출된다. 단계 S06에서는, 검출된 제어 제스처에 기반하는 제어 신호가 발생된다. 단계 S07에서는, 발생한 제어 신호가 투영 장치(10; 10')의 제어 장치(18')로 전송된다. 단계 S08에서는, 전송된 제어 신호에 기반해서 제어 장치(18')의 조정 또는 작동이 이루어진다. 대안적으로, 단계 S07에서는, 발생한 제어 신호가 또한 예를 들어 유선 또는 무선 인터페이스를 통해서 외부 장치로 전송될 수도 있다.
단계 S09에서는, 예정된 픽셀(54)의 하나 이상의 픽셀의 하나 이상의 실제 후방 방사 세기 측정 신호와 예정된 일정한 값(
Figure pct00029
) 간의 하나 이상의 차에 기반해서 후방 방사 모델의 자동 조정이 이루어진다. 이 단계는 특히, 예를 들어 레이저 스캐너의 각각의 스캐닝 실행 후에 여러 번 실시될 수 있다.
본 발명이 바람직한 실시예를 참조하여 본원에서 기술되었지만, 본 발명은 이와 같은 실시예에 한정되지 않으며, 오히려 다양한 유형 및 방식으로 변형될 수 있다. 특히, 본 발명은, 본 발명의 핵심을 벗어나지 않으면서 여러 가지 방식으로 변경 또는 변형될 수 있다.
예를 들어, 방사 세기 검출 장치는 투영 장치의 하우징 외부에 배치될 수 있고, 유선 또는 무선 인터페이스를 통해서 제어 장치 및/또는 제스처 검출 장치와 결합될 수 있다.

Claims (11)

  1. 이미지(50)를 픽셀 단위로 투영하기 위한 투영 장치로서, 이 장치는,
    가시광(32; 32-1, 32-2, 32-3)을 픽셀 단위로 방출하기 위한 광 다이오드 장치(12)와;
    적외선(34)을 픽셀 단위로 방출하기 위한 적외선 다이오드 장치(14)와;
    후방 방사된 가시광(42; 42-1, 42-2, 42-3) 및 후방 방사된 적외선(44)의 후방 방사 세기를 픽셀 단위로 검출하고, 검출된 후방 방사 세기를 토대로 실제 후방 방사 세기 측정 신호를 픽셀 단위로 발생시키기 위한 방사 세기 검출 장치(16)와;
    투영할 이미지(50)에 상응하는 가시광(32; 32-1, 32-2, 32-3)을 방출하기 위하여 광 다이오드 장치(12)를 픽셀 단위로 제어하도록 설계된 제어 장치(18; 18');를 구비하며,
    상기 제어 장치는 또한, 적외선(34)을 방출하기 위하여, 실제 후방 방사 세기 측정 신호에 대해 픽셀 단위로 예상되는 목표 후방 방사 세기 측정 신호가 예정된 픽셀(54)에 대해 예정된 값을 갖는 방식으로, 상기 적외선 다이오드 장치(14)를 투영할 이미지(50) 및 후방 방사 모델에 기반하여 해서 픽셀 단위로 제어하도록 설계된, 이미지의 픽셀 단위 투영 장치.
  2. 제1항에 있어서, 상기 투영 장치는,
    예정된 픽셀(54)의 픽셀 단위로 발생한 실제 후방 방사 세기 측정 신호에 기반해서 제어 제스처를 검출하고, 상기 검출된 제어 제스처에 기반하는 제어 신호를 제어 장치(18')로 전송하도록 설계된 제스처 검출 장치(20)를 구비하며, 이 제어 장치는 전송된 제어 신호에 기반하여 작동될 수 있거나 조정될 수 있는, 이미지의 픽셀 단위 투영 장치.
  3. 제1항 또는 제2항에 있어서, 예정된 픽셀(54)의 하나 이상의 픽셀의 하나 이상의 실제 후방 방사 세기 측정 신호와 상기 픽셀의 상응하는 목표 후방 방사 세기 측정 신호 간의 하나 이상의 차에 기반해서 후방 방사 모델을 자동으로 작성하거나 자동으로 조정할 수 있는 교정 장치(22)를 구비한 투영 장치.
  4. 제1항 내지 제3항 중 어느 한 항에 있어서, 후방 방사 모델의 하나 이상의 파라미터를 이용하여 사용자에 의해 조정될 수 있는 프로그래밍 장치(24)를 구비한 투영 장치.
  5. 제1항 내지 제4항 중 어느 한 항에 있어서, 후방 방사 모델은, 가시광(32, 42; 32-1, 32-2, 32-3, 42-1, 42-2, 42-3)의 하나 이상의 파장 및/또는 적외선(34, 44)에 대한 방사 세기 검출 장치(16)의 파장 의존적 감도(SR, SG, SB, SIR)를 고려하는, 이미지의 픽셀 단위 투영 장치.
  6. 제1항 내지 제5항 중 어느 한 항에 있어서, 후방 방사 모델은, 가시광(32, 42)의 하나 이상의 파장 및 적외선에 대해 각각, 투영 면 및/또는 물체 또는 신체 부위의 파장 의존적인 예정된 그리고/또는 결정 가능한 반사 계수(RR, RG, RB, RIR)를 고려하는, 이미지의 픽셀 단위 투영 장치.
  7. 이미지(50)를 픽셀 단위로 투영하기 위한 방법으로서,
    투영할 이미지(50)에 상응하는 가시광(32; 32-1, 32-2, 32-3)을 픽셀 단위로 방출하기 위해, 투영 장치(10; 10')의 광 다이오드 장치(12)를 제어하는 단계(S01)와,
    예정된 픽셀(54)에 대해 후방 방사된 가시광(42; 42-1, 42-2, 42-3) 및 후방 방사된 적외선(44)의 후방 방사 세기를 픽셀 단위로 검출하는 단계(S02)와,
    상기 검출된 후방 방사 세기에 기반해서 실제 후방 방사 세기 측정 신호를 픽셀 단위로 발생시키는 단계(S03)와,
    상기 실제 후방 방사 세기 측정 신호에 대해 픽셀 단위로 예상될 목표 후방 방사 세기 측정 신호가 예정된 픽셀(54)에 대해 예정된 값을 갖는 방식으로, 투영할 이미지(50) 및 후방 방사 모델에 기반해서 적외선(34)을 픽셀 단위로 방출하기 위하여, 투영 장치(10; 10')의 적외선 다이오드 장치(14)를 제어하는 단계(S04)를 포함하는, 이미지의 픽셀 단위 투영 방법.
  8. 제7항에 있어서,
    예정된 픽셀(54)의 픽셀 단위로 발생한 실제 후방 방사 세기 측정 신호에 기반해서 제어 제스처를 검출하는 단계(S05), 및
    상기 검출된 제어 제스처에 기반하는 제어 신호를 발생시키는 단계(S06)를 포함하는, 이미지의 픽셀 단위 투영 방법.
  9. 제7항 또는 제8항에 있어서, 예정된 픽셀(54)의 하나 이상의 픽셀의 하나 이상의 발생한 실제 후방 방사 세기 측정 신호와 예정된 값 간의 하나 이상의 차에 기반해서, 후방 방사 모델을 자동으로 작성 또는 조정하는 단계(S08)를 포함하는, 이미지의 픽셀 단위 투영 방법.
  10. 제9항에 있어서, 후방 방사 모델을 자동으로 작성 또는 조정하는 단계(S08)는, 가시광(32, 42; 32-1, 32-2, 32-3, 42-1, 42-2, 42-3)의 하나 이상의 파장 및/또는 적외선(34, 44)에 대한 방사 세기 검출 장치(16)의 하나 이상의 파장 의존적 감도(SR, SG, SB, SIR)에 대한 값의 자동 결정 또는 조정을 포함하는, 이미지의 픽셀 단위 투영 방법.
  11. 제9항에 있어서, 후방 방사 모델을 자동으로 작성 또는 조정하는 단계(S08)는, 각각 가시광(32, 42; 32-1, 32-2, 32-3, 42-1, 42-2, 42-3)의 하나 이상의 파장 및 적외선에 대해 각각, 투영 면 및/또는 물체 또는 신체 부위의 파장 의존적 반사 계수(R%R, R%G, R%B, R%IR)의 자동 결정 또는 조정을 포함하는, 이미지의 픽셀 단위 투영 방법.
KR1020177018217A 2014-12-01 2015-11-23 이미지를 픽셀 단위로 투영하기 위한 투영 장치 및 방법 KR20170091714A (ko)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
DE102014224552.4A DE102014224552A1 (de) 2014-12-01 2014-12-01 Projektionsvorrichtung und Verfahren zum pixelweisen Projizieren eines Bildes
DE102014224552.4 2014-12-01
PCT/EP2015/077352 WO2016087249A1 (de) 2014-12-01 2015-11-23 Projektionsvorrichtung und verfahren zum pixelweisen projizieren eines bildes

Publications (1)

Publication Number Publication Date
KR20170091714A true KR20170091714A (ko) 2017-08-09

Family

ID=54703957

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020177018217A KR20170091714A (ko) 2014-12-01 2015-11-23 이미지를 픽셀 단위로 투영하기 위한 투영 장치 및 방법

Country Status (7)

Country Link
US (1) US10652508B2 (ko)
JP (1) JP6545263B2 (ko)
KR (1) KR20170091714A (ko)
CN (1) CN107005684B (ko)
DE (1) DE102014224552A1 (ko)
TW (1) TWI678588B (ko)
WO (1) WO2016087249A1 (ko)

Families Citing this family (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN107561833B (zh) * 2017-09-13 2020-08-18 明基智能科技（上海）有限公司 投影机
JP2019184707A (ja) * 2018-04-04 2019-10-24 パナソニック株式会社 画像投影装置
JP7062341B2 (ja) * 2018-09-14 2022-05-06 アルパイン株式会社 表示装置及び補正方法

Family Cites Families (32)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US7594609B2 (en) * 2003-11-13 2009-09-29 Metrologic Instruments, Inc. Automatic digital video image capture and processing system supporting image-processing based code symbol reading during a pass-through mode of system operation at a retail point of sale (POS) station
US6597504B2 (en) 2000-12-29 2003-07-22 Honeywell International Inc. Optical devices employing beam folding with polarizing splitters
US7133022B2 (en) * 2001-11-06 2006-11-07 Keyotee, Inc. Apparatus for image projection
JP2005181731A (ja) 2003-12-19 2005-07-07 Sharp Corp 映像投射装置
US7364306B2 (en) * 2005-06-20 2008-04-29 Digital Display Innovations, Llc Field sequential light source modulation for a digital display system
TWI281989B (en) 2005-09-07 2007-06-01 Young Optics Inc Lamp module and projecting apparatus using the same
WO2007108387A1 (ja) * 2006-03-16 2007-09-27 Matsushita Electric Industrial Co., Ltd. 画像投射装置、画像投射スクリーンおよび画像表示システム
EP2179593A1 (en) * 2007-07-17 2010-04-28 Explay Ltd. Optical projection method and system
JP2013501247A (ja) * 2009-07-31 2013-01-10 レモプティックス ソシエテ アノニム 光学マイクロプロジェクションシステムおよび投影方法
WO2011065555A1 (ja) * 2009-11-30 2011-06-03 シャープ株式会社 表示装置
JP5488306B2 (ja) * 2010-07-29 2014-05-14 船井電機株式会社 プロジェクタ
CN105023550B (zh) * 2010-12-17 2017-07-11 杜比实验室特许公司 用于宽色域和高亮度的n 调制
US8676937B2 (en) * 2011-05-12 2014-03-18 Jeffrey Alan Rapaport Social-topical adaptive networking (STAN) system allowing for group based contextual transaction offers and acceptances and hot topic watchdogging
US8928735B2 (en) * 2011-06-14 2015-01-06 Microsoft Corporation Combined lighting, projection, and image capture without video feedback
JP2013003859A (ja) 2011-06-16 2013-01-07 Sony Corp 投影装置、投影方法、及びプログラム
US8730210B2 (en) * 2011-10-19 2014-05-20 Microvision, Inc. Multipoint source detection in a scanned beam display
EP2635022A1 (en) * 2012-02-29 2013-09-04 Flir Systems AB A method and system for performing alignment of a projection image to detected infrared (IR) radiation information
EP2634747A1 (en) * 2012-02-29 2013-09-04 Flir Systems AB A method and system for projecting a visible representation of infrared radiation
DE102012206851A1 (de) 2012-04-25 2013-10-31 Robert Bosch Gmbh Verfahren und Vorrichtung zum Ermitteln einer im Lichtkegel eines projizierten Bildes ausgeführten Geste
US10073336B2 (en) * 2012-09-11 2018-09-11 Barco N.V. Projection system with safety detection
US8982261B2 (en) * 2012-10-13 2015-03-17 Hewlett-Packard Development Company, L.P. Imaging with interleaved detection accumulations
CN103076983B (zh) * 2013-01-28 2015-09-09 中国科学技术大学 一种基于激光投影的触摸屏人机交互系统
JP6120611B2 (ja) * 2013-02-27 2017-04-26 日立マクセル株式会社 ビーム走査型表示装置
KR102082702B1 (ko) * 2013-03-28 2020-02-28 엘지전자 주식회사 레이저 영상표시장치
US9285894B1 (en) * 2013-05-24 2016-03-15 Amazon Technologies, Inc. Multi-path reduction for optical time-of-flight
US9519975B2 (en) * 2014-01-08 2016-12-13 Hong Kong Applied Science And Technology Research Institute Co. Ltd. Method of detecting edge under non-uniform lighting background
US20160025979A1 (en) * 2014-08-28 2016-01-28 Osterhout Group, Inc. External user interface for head worn computing
US20160025977A1 (en) * 2014-07-22 2016-01-28 Osterhout Group, Inc. External user interface for head worn computing
US20160062118A1 (en) * 2014-07-22 2016-03-03 Osterhout Group, Inc. External user interface for head worn computing
US20160027414A1 (en) * 2014-07-22 2016-01-28 Osterhout Group, Inc. External user interface for head worn computing
JP6468509B2 (ja) * 2014-08-27 2019-02-13 パナソニックＩｐマネジメント株式会社 物質検出センサ、物質検出方法及び物質検出システム
US9710160B2 (en) * 2014-10-21 2017-07-18 International Business Machines Corporation Boundless projected interactive virtual desktop

Also Published As

Publication number Publication date
TW201621451A (zh) 2016-06-16
TWI678588B (zh) 2019-12-01
CN107005684A (zh) 2017-08-01
JP2018507573A (ja) 2018-03-15
US10652508B2 (en) 2020-05-12
DE102014224552A1 (de) 2016-06-02
US20170272713A1 (en) 2017-09-21
JP6545263B2 (ja) 2019-07-17
WO2016087249A1 (de) 2016-06-09
CN107005684B (zh) 2021-02-02

Similar Documents

Publication Publication Date Title
US10412352B2 (en) Projector apparatus with distance image acquisition device and projection mapping method
US9912923B2 (en) Optical micro-projection system and projection method
JP6784295B2 (ja) 距離測定システム、距離測定方法およびプログラム
US9843781B1 (en) Projector
JP5396012B2 (ja) 投射前に画像を自動的に修正するシステム
WO2020150131A1 (en) Three-dimensional sensor including bandpass filter having multiple passbands
US20090219493A1 (en) Projection type display apparatus and method of controlling the same
JP2004503188A (ja) スルー・ザ・レンズ・イルミネータを有するカメラ
JP6467516B2 (ja) 距離画像取得装置付きプロジェクタ装置及びプロジェクション方法
JP7401013B2 (ja) 情報処理装置、制御装置、情報処理方法及びプログラム
KR20170091714A (ko) 이미지를 픽셀 단위로 투영하기 위한 투영 장치 및 방법
JP7005175B2 (ja) 距離測定装置、距離測定方法及び撮像装置
KR20210029269A (ko) 3차원 영상 생성 장치 및 방법
CN110235442B (zh) 投射型影像显示装置
JP5875953B2 (ja) 光学装置
JP5200599B2 (ja) スクリーン、光学特性測定システム、および光学特性測定方法
KR102549434B1 (ko) 깊이 센서 제어 시스템
JP2009300811A (ja) 被写体情報測定方法及び被写体情報測定装置、並びに露光制御方法及び、露光制御装置
JP2022120606A (ja) 投影装置及び投影方法