KR102254564B1 - 몸짓 인식을 위한 이미지 매트릭스를 생성하기 위한 모듈, 시스템 및 방법 - Google Patents

몸짓 인식을 위한 이미지 매트릭스를 생성하기 위한 모듈, 시스템 및 방법 Download PDF

Info

Publication number
KR102254564B1
KR102254564B1 KR1020177000191A KR20177000191A KR102254564B1 KR 102254564 B1 KR102254564 B1 KR 102254564B1 KR 1020177000191 A KR1020177000191 A KR 1020177000191A KR 20177000191 A KR20177000191 A KR 20177000191A KR 102254564 B1 KR102254564 B1 KR 102254564B1
Authority
KR
South Korea
Prior art keywords
image
module
data signal
synchronization data
another
Prior art date
Application number
KR1020177000191A
Other languages
English (en)
Other versions
KR20170012549A (ko
Inventor
알렉산더 엘러트
프랑크 피셔
니클라스 디트리히
펠릭스 슈미트
Original Assignee
로베르트 보쉬 게엠베하
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 로베르트 보쉬 게엠베하 filed Critical 로베르트 보쉬 게엠베하
Publication of KR20170012549A publication Critical patent/KR20170012549A/ko
Application granted granted Critical
Publication of KR102254564B1 publication Critical patent/KR102254564B1/ko

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/03—Arrangements for converting the position or the displacement of a member into a coded form
    • G06F3/0304—Detection arrangements using opto-electronic means
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/017—Gesture based interaction, e.g. based on a set of recognized hand gestures
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/03—Arrangements for converting the position or the displacement of a member into a coded form
    • G06F3/041—Digitisers, e.g. for touch screens or touch pads, characterised by the transducing means
    • G06F3/042—Digitisers, e.g. for touch screens or touch pads, characterised by the transducing means by opto-electronic means
    • G06F3/0421—Digitisers, e.g. for touch screens or touch pads, characterised by the transducing means by opto-electronic means by interrupting or reflecting a light beam, e.g. optical touch-screen
    • G06F3/0423—Digitisers, e.g. for touch screens or touch pads, characterised by the transducing means by opto-electronic means by interrupting or reflecting a light beam, e.g. optical touch-screen using sweeping light beams, e.g. using rotating or vibrating mirror

Landscapes

  • Engineering & Computer Science (AREA)
  • General Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Human Computer Interaction (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Control Of Indicators Other Than Cathode Ray Tubes (AREA)
  • Transforming Electric Information Into Light Information (AREA)
  • Controls And Circuits For Display Device (AREA)
  • User Interface Of Digital Computer (AREA)
  • Mechanical Optical Scanning Systems (AREA)

Abstract

본 발명은, 몸짓 인식을 위한 이미지 매트릭스를 생성하기 위한 모듈에 관한 것이며, 이 경우 이 모듈은 레이저 프로젝터 모듈의 하나 이상의 동기화 데이터 신호를 입력하기 위한 하나 이상의 제1 데이터 입력 수단, 광 센서 모듈의 이미지 데이터 신호를 입력하기 위한 제2 데이터 입력 수단, 기억 수단 및 기억 제어 수단을 구비하며, 이 경우 기억 제어 수단은, 이미지 데이터 신호의 이미지 데이터가 하나 이상의 동기화 데이터 신호에 따라 기억 수단 내에 이미지 매트릭스로서 저장되도록 구성되어 있으며, 이 경우 기억 제어 수단은, 하나 이상의 동기화 데이터 신호와 함께 전송되는 이미지 라인 방향 정보에 따라 이미지 데이터로부터 이미지 매트릭스가 생성되도록 구성되어 있다.

Description

몸짓 인식을 위한 이미지 매트릭스를 생성하기 위한 모듈, 시스템 및 방법{MODULE, SYSTEM, AND METHOD FOR PRODUCING AN IMAGE MATRIX FOR GESTURE RECOGNITION}
본 발명은, 청구항 1의 전제부에 따른, 몸짓 인식을 위한 이미지 매트릭스를 생성하기 위한 모듈로부터 출발한다. 또한, 본 발명은, 몸짓 인식을 위한 이미지 매트릭스를 생성하기 위한 시스템 및 방법으로부터 출발한다.
이와 같은 장치는 일반적으로 공지되어 있다. 예를 들면, 레이저 프로젝터 및 감광 센서의 사용에 의해서, 레이저 프로젝터에 의해 조명된 경치의 이미지가 생성되는 것이 공지되어 있다. 이 경우, 이미지는 예를 들어 레이저 프로젝터의 광 내에서 실행되는 몸짓을 인식하기 위해 사용된다. 하지만, 공지된 레이저 프로젝터는, 레이저 프로젝터에 의해 생성된 투영 이미지의 화질이 개선되어야만 하는 경우에는 비교적 큰 비용을 들여서 구성될 수밖에 없다.
본 발명의 과제는, 몸짓 인식을 위한 이미지 매트릭스를 생성하기 위한 모듈, 시스템 및 방법을 제안하는 것이며, 이 경우에는 투영 이미지의 화질이 개선되고, 그럼에도 구성 비용은 비교적 적다.
독립 청구항들에 따라 몸짓 인식을 위한 이미지 매트릭스를 생성하기 위한 본 발명에 따른 모듈, 본 발명에 따른 시스템 및 본 발명에 따른 방법은 선행 기술에 비해, 하나 이상의 동기화 데이터 신호와 함께 전송된 이미지 라인 방향 정보에 따라 이미지 데이터로부터 이미지 매트릭스가 생성되기 때문에, 레이저 프로젝터에 의해 비교적 높은 화질을 갖는 투영 이미지가 생성되는 경우에도, 그 이미지 매트릭스를 참조해서 몸짓 인식이 가능해진다는 장점을 갖는다. 화질을 높이기 위해, 레이저 프로젝터는 특히 인터레이싱 방법(interlacing method)을 사용하도록 구성되어 있으며, 이 경우 본 발명의 틀 안에서의 인터레이싱 방법은, 곧바로 연속해서 생성되는 투영 이미지들의 처음 혹은 제1 이미지 라인의 각각의 기록 방향이 교체되는 것으로 이해될 수 있다. 모듈에 의해서 이미지 라인 방향 정보를 사용하기 때문에, 레이저 프로젝터에 의해서 인터레이싱 방법이 실시되는 경우에, 실행된 몸짓의 이동 방향이 구별될 수 있는 것이 바람직하게 가능하다. 바람직하게, 이미지 매트릭스는 강도 매트릭스(intensity matrix), 특히 래스터 그래픽(raster graphic)이며, 이 경우에는 투영 이미지의 각각 하나의 픽셀에 하나의 강도 값이 명확하게 할당되어 있다. 더 나아가, 하나 이상의 동기화 데이터 신호를 이용한 이미지 라인 방향 정보의 전송에 의해서는 바람직하게 비교적 적은 구성 비용으로 시스템이 제공된다. 특히, 하나 이상의 동기화 데이터 신호는 레이저의 방사 방향에 대한 정보 및 라인의 기록 방향에 대한 정보(이미지 라인 방향 정보)를 코딩된 형태로 포함함으로써, 결과적으로 간단한 동기화 데이터 신호의 이용에 의해서 다양한 결과(예를 들어 프레임 스타트 홀수, 프레임 스타트 짝수 및 라인 스타트)가 전송될 수 있다. 이미지 매트릭스는 특히, 레이저의 방사 방향에 대한 상세한 각도 표시를 필요로 하지 않으면서 인터레이싱 방법에 따라 작동되는 레이저 프로젝터에서 몸짓 인식이 가능해지도록, 그리고 기록 방향에 대한 정보(이미지 라인 방향 정보)가 간단한 방식으로 전송되도록 생성된다.
본 발명의 바람직한 실시예들 및 개선예들은 종속 청구항들, 그리고 도면을 참조하는 상세한 설명으로부터 끌어낼 수 있다.
바람직한 일 개선예에 따라, 이미지 라인 방향 정보가 레이저 프로젝터 모듈에 의해서 투영된 일 투영 이미지의 이미지 라인의 기록 방향과 관련이 있으며, 이 경우 이미지 라인은 특히 투영 이미지의 처음 이미지 라인인 것이 제공되었다.
그럼으로써, 본 발명에 따라 바람직하게는, 실행된 몸짓의 이동 방향이 이미지 매트릭스의 생성으로 인해 이미지 라인 방향 정보에 따라 구별될 수 있는 것이 가능하다.
또 다른 바람직한 일 개선예에 따라, 하나 이상의 동기화 데이터 신호가 투영 이미지와 관련된 수직 동기화 데이터 신호 및 투영 이미지의 이미지 라인과 관련된 수평 동기화 데이터 신호를 포함하는 것이 제공되었다.
그럼으로써, 본 발명에 따라 바람직하게는, 이미지 라인 방향 정보가 투영 이미지의 각각의 이미지 라인을 위한 모듈에 제공될 수 있는 것이 가능하다. 특히, 수평 동기화 데이터 신호는 이미지 라인 방향 정보를 포함한다.
또 다른 바람직한 일 개선예에 따라, 모듈이, 수직 동기화 데이터 신호를 수평 동기화 데이터 신호와 동기화하기 위한 동기화 수단을 구비하는 것이 제공되었다.
그럼으로써, 본 발명에 따라 바람직하게는, 모듈과 레이저 프로젝터 모듈이 상호 독립적으로, 특히 비동기적으로 작동될 수 있는 것이 가능한데, 그 이유는 수평 동기화 데이터 신호와 수직 동기화 데이터 신호의 동기화가 모듈 내에서 실행되기 때문이다.
또 다른 바람직한 일 개선예에 따라, 모듈이, 기억 수단 내에 이미지 매트릭스로서 기억된 이미지 데이터에 따라 몸짓을 인식하기 위한 몸짓 인식 수단을 구비하는 것이 제공되었다.
그럼으로써, 본 발명에 따라 바람직하게는, 몸짓 인식을 위해 기억 수단 내에 저장된 이미지 매트릭스에 대한 액세스가 이루어짐으로써, 결과적으로 인터레이싱 방법에 따라 작동되는 레이저 프로젝터에서도 몸짓 인식이 비교적 신뢰할 만하게 실행될 수 있는 것이 가능하다.
특히 본 발명에 따른 시스템의 바람직한 일 개선예에 따라, 연속하는 투영 이미지들을 투영할 때 처음 이미지 라인의 기록 방향이 교체되도록 레이저 프로젝터 모듈이 구성되어 있는 것이 제공되었다.
그럼으로써, 본 발명에 따라 바람직하게는, 인터레이싱 방법이 레이저 프로젝터에 의해서 실행되도록 레이저 프로젝터가 구성되어 있음으로써, 결과적으로 비교적 높은 화질에 도달하게 되고, 그럼에도 신뢰할만한 몸짓 인식이 구현되는 것이 가능해진다.
특히 본 발명에 따른 방법의 바람직한 일 개선예에 따라, 제4 방법 단계에서 하나 이상의 동기화 데이터 신호가 본 발명에 따른 모듈로 전송되는 것이 제공되었으며, 이 경우 제5 방법 단계에서는 이미지 데이터 신호의 이미지 데이터가 모듈의 기억 제어 수단에 의해서 하나 이상의 동기화 데이터 신호에 따라 이미지 매트릭스의 형태로 기억 수단 내에 저장되며, 이 경우 기억 제어 수단에 의해서는 이미지 라인 방향 정보에 따라 이미지 데이터로부터 이미지 매트릭스가 생성된다.
그럼으로써, 본 발명에 따라 바람직하게는, 투영 이미지의 화질이 개선되고, 그럼에도 구성 비용이 비교적 적은 것이 가능하다. 하나 이상의 동기화 데이터 신호와 함께 전송되는 이미지 라인 방향 정보에 따라 이미지 데이터로부터 이미지 매트릭스가 생성되기 때문에, - 특히 이미지 매트릭스의 평가에 의한 - 몸짓의 인식은 레이저 프로젝터에 의해서 비교적 높은 화질로 생성된 투영 이미지에서도 구현된다.
특히 본 발명에 따른 방법의 또 다른 바람직한 일 개선예에 따라, 제6 방법 단계에서는 레이저 프로젝터에 의해, 또 다른 투영 이미지의 또 다른 이미지 라인이 또 다른 기록 방향을 따라 투영 레이저 빔으로써 투영되며, 이 경우 제7 방법 단계에서는 광 센서 모듈에 의해, 또 다른 이미지 데이터 신호가 또 다른 이미지 라인과 관련된 또 다른 이미지 데이터를 포함하도록 또 다른 이미지 데이터 신호가 생성되며, 이 경우 제8 방법 단계에서는 레이저 프로젝터 모듈에 의해, 하나 이상의 또 다른 동기화 데이터 신호가 또 다른 이미지 라인의 또 다른 기록 방향과 관련된 또 다른 이미지 라인 방향 정보를 갖도록 하나 이상의 또 다른 동기화 데이터 신호가 생성되며, 이 경우 특히 제9 방법 단계에서는 기억 제어 수단에 의해, 또 다른 이미지 라인 방향 정보에 따라 또 다른 이미지 데이터로부터 또 다른 이미지 매트릭스가 생성되는 것이 제공되었다.
그럼으로써, 본 발명에 따라 바람직하게는, 레이저 프로젝터가 인터레이싱 방법을 실행하도록 구성되어 있음으로써, 결과적으로 투영 이미지의 비교적 높은 화질에 도달하게 되고, 그럼에도 실행된 몸짓의 이동 방향이 구별될 수 있는 것이 가능해진다.
특히 본 발명에 따른 방법의 또 다른 바람직한 일 개선예에 따라, 이미지 라인이 투영 이미지의 처음 이미지 라인이고, 또 다른 이미지 라인이 또 다른 투영 이미지의 처음 이미지 라인이며, 이 경우 이미지 라인 및 또 다른 이미지 라인은, 또 다른 투영 이미지가 투영 이미지 뒤에 곧바로 투영되는 경우에는 또 다른 이미지 라인의 또 다른 기록 방향이 이미지 라인의 기록 방향에 대해 반대가 되도록 투영되는 것이 제공되었다.
그럼으로써, 본 발명에 따라 바람직하게는, 투영 이미지의 화질이 비교적 높은 경우에도 신뢰할만한 몸짓 인식에 도달하는 것이 가능하다.
본 발명의 실시예들은 도면에 도시되어 있고, 이하의 설명부에서 상세하게 설명될 것이다.
도 1은, 본 발명의 방법의 일 실시예에 따라 생성된 투영 이미지를 개략도로 도시하고,
도 2는, 본 발명의 일 실시예에 따른 시스템을 개략도로 도시하며,
도 3은, 본 발명의 일 실시예에 따른 시스템에 의해서 생성된 동기화 데이터 신호를 개략도로 도시하고,
도 4는, 본 발명의 일 실시예에 따른 방법을 개략도로 도시하며, 그리고
도 5는, 본 발명의 일 실시예에 따른 방법에서 사용되는 파라미터 세트를 도시한다.
다양한 도면에서 동일한 부분에는 항상 동일한 참조 부호가 제공되어 있기 때문에 일반적으로는 또한 각각 단 한 번만 지칭되거나 언급된다.
도 1에는, 본 발명의 방법의 일 실시예에 따라 생성된 투영 이미지(50)가 개략도로 도시되어 있다. 이 방법에서는, 본 발명에 따른 시스템(예를 들어 도 2에 도시되어 있음)의 레이저 프로젝터(10)의 투영 레이저 빔(2)으로써 투영 이미지(50)가 투영 면(3)에 라인 방식으로 투영되며, 이 경우 투영 레이저 빔(2)은, 투영 이미지(50)의 처음 이미지 라인(51)이 기록 방향(101)을 따라서 (도면에서는 좌측으로부터 우측으로) 기록되고, 그 다음에 이어서 투영 이미지(50)의 곧바로 연속하는 2개의 이미지 라인(51, 52)이 각각 실질적으로는 반대의(즉, 역-평행한) 기록 방향(101, 102)을 따라서 기록되도록 이동된다. 투영 이미지(50)의 투영에 이어서, 투영 레이저 빔(2)으로써 또 다른 투영 이미지(50')가 투영 면(3)에 행 방식으로 투영되며, 이 경우에는 특히 바람직하게 인터레이싱 방법이 실행된다. 이와 같은 내용이 의미하는 바는, 또 다른 투영 이미지(50')의 또 다른 처음 이미지 라인(51')이 (바로) 전에 투영된 투영 이미지(50)의 처음 이미지 라인(51)의 기록 방향(101)에 대해 실질적으로 반대로(역-평행하게) 방향 설정된 또 다른 기록 방향(101')을 따라서 (도면에서는 우측으로부터 좌측으로) 기록되도록, 투영 레이저 빔(2)이 이동된다는 것이다. 또 다른 투영 이미지(50')를 투영하는 경우에도 마찬가지로, 또 다른 투영 이미지(50')의 곧바로 연속하는 2개의 또 다른 이미지 라인(51', 52')이 각각 실질적으로는 반대의(역-평행한) 또 다른 기록 방향(101', 102')을 따라서 기록된다.
도 2에는, 본 발명의 일 실시예에 따른 시스템(1)이 개략도로 도시되어 있으며, 이 경우 본 실시예는 다른 실시예들과 실질적으로 동일하다. 시스템(1)은 레이저 프로젝터 모듈(10), 광 센서 모듈(20) 및 본 발명에 따른 모듈(30)을 포함한다.
레이저 프로젝터 모듈(10)은, 투영 이미지(50)가 투영 레이저 빔(2)으로써 투영 면(3)에 라인 방식으로 투영되도록 구성되어 있으며, 이 경우에는 투영 레이저 빔(2)이 (도면에서는 좌측으로부터 우측으로) 이동됨으로써, 투영 이미지의 이미지 라인(51)이 - 본 실시예에 도시되어 있는 바와 같이 - 기록 방향(101)을 따라서 기록된다. 물체(4) - 예를 들어 손 - 가 빔 경로 내에서 정지되면, 투영 레이저 빔(2)이 물체(4)에서 반사되고, 이로 인해 반사 신호(2')가 발생된다. 레이저 프로젝터 모듈(10)은 또한 하나 이상의 동기화 데이터 신호(11, 12)를 발생하도록 구성되어 있으며, 이 경우에는 하나 이상의 동기화 데이터 신호(11, 12)가 이미지 라인 방향 정보를 갖도록, 상기 하나 이상의 동기화 데이터 신호(11, 12)가 레이저 프로젝터 모듈(10)에 의해서 구성된다. 바람직하게, 동기화 데이터 신호(11, 12)는 수직 동기화 데이터 신호(11) 및 수평 동기화 데이터 신호(12)를 포함한다.
광 센서 모듈(20)은, 투영 이미지(50)를 투영하는 동안 반사 신호(2')가 검출되도록 구성되어 있으며, 이 경우에는 이미지 데이터 신호 - 즉, 특히 강도 값을 갖는 강도 데이터 흐름 - 가 검출된 반사 신호(2')에 따라 발생된다. 예를 들어, 광 센서 모듈(20)은 감광성 센서(21) - 예를 들어 포토 다이오드(21) - 및/또는 이미지 데이터 신호를 발생하기 위한 센서 접속 수단(22)을 포함한다. 이미지 데이터 신호는 예를 들어 디지털 이미지 데이터 신호 또는 아날로그 이미지 데이터 신호이다[이 경우 이미지 데이터 신호는 예를 들어 모듈(30) 내에서 디지털화됨]. 이하에서 측정 데이터로서도 지칭되는 이미지 데이터 신호의 이미지 데이터가 레이저 프로젝터(10) 앞에 있는 경치의 2차원적인 이미지 매트릭스의 생성을 위해 이용될 수 있도록 하기 위하여, 이미지 데이터 신호의 이미지 데이터는 특히 각각 상응하는 좌표에 할당된다. 포토 다이오드는 특히 반사된 광[반사 신호(2')]의 강도를 측정하도록 구성되어 있지만, 바람직하게는 그 반사된 광이 어느 방향으로부터 유래하는지에 대한 정보는 제공하지 않는다. 이와 같은 정보는 본 발명에 따라 레이저 프로젝터(10)의 하나 이상의 동기화 데이터 신호(11, 12)로부터 획득된다.
또한, 시스템(1)은, 몸짓 인식을 위한 이미지 매트릭스를 생성하기 위한 모듈(30) - 특히 이미지 생성 모듈(30) - 을 포함한다. 모듈(30)은, 레이저 프로젝터 모듈(10)의 하나 이상의 동기화 데이터 신호를 입력하기 위한 하나 이상의 제1 데이터 입력 수단(31) - 예를 들어 레이저 프로젝터 모듈(10) 또는 프로세서 입력과 통신하기 위한 제1 통신 인터페이스 - 을 구비한다. 이때에는, 하나 이상의 동기화 데이터 신호가 제1 데이터 전송 수단(41)을 통해서 레이저 프로젝터 모듈(10)로부터 모듈(30)로 전송된다. 예를 들어, 데이터 전송 수단(41)은, 하나 이상의 동기화 데이터 신호(11, 12)의 [수평 그리고 수직 동기화 데이터 신호(11, 12)의] 직렬 전송시에는 (단) 1개의 데이터 라인을 포함하거나, 하나 이상의 동기화 데이터 신호(11, 12)의 [수평 그리고 수직 동기화 데이터 신호(11, 12)의] 병렬 전송시에는 (단) 2개의 데이터 라인을 포함한다. 또한, 모듈(30)은, 광 센서 모듈(20)의 이미지 데이터 신호를 입력하기 위한 제2 데이터 입력 수단(32) - 예를 들어 광 센서 모듈(20) 또는 프로세서 입력과 통신하기 위한 제2 통신 인터페이스 - 을 포함한다.
추가로, 모듈(30)은 기억 수단(33) - 예를 들어 작업 메모리 혹은 랜덤 액세스 메모리(RAM) - 및 기억 제어 수단(34) - 예를 들어 작업 메모리 컨트롤러(RAM-Controller)의 기능을 갖춘 상태 자동 조작 장치 - 을 포함한다. 본 발명의 틀 안에서, 기억 제어 수단(34)은 특히 상태 기계로서도 지칭된다. 기억 제어 수단(34)은, 이미지 데이터 신호의 이미지 데이터가 하나 이상의 동기화 데이터 신호(11, 12)에 따라 기억 수단(33) 내부에 이미지 매트릭스(즉, 특히 래스터 그래픽 형태로 기억된 강도 값 매트릭스)로서 저장되도록 구성되어 있다. 이 경우에는, 이미지 매트릭스가 하나 이상의 동기화 데이터 신호(11, 12)와 함께 전송되는 이미지 라인 방향 정보에 따라 이미지 데이터로부터 발생 되거나 이와 같은 이미지 데이터로 구성됨으로써, 결과적으로 특히 이미지 데이터는 개별 이미지 라인(51, 52, 51', 52')의 기록 방향(101, 102, 101', 102')과 무관하게 (규칙적으로) 이미지 매트릭스 내에 저장된다.
모듈(30)은, 수직 동기화 데이터 신호(11)를 수평 동기화 데이터 신호(12)와 동기화하기 위한 동기화 수단(35), 및 기억 수단(33) 내부에 이미지 매트릭스로서 기억된 이미지 데이터에 따라 몸짓을 인식하기 위한 몸짓 인식 수단(36)을 더 포함한다.
레이저 프로젝터(10) 및 모듈(30)[특히 이미지 생성 모듈(30)]은 바람직하게 별도의 장치로서 구현되어 있으며, 이 경우 하나 이상의 동기화 데이터 신호(11, 12)의 전송은 통신 인터페이스로서 형성된 데이터 입력 수단(31)을 통해서 이루어진다. 대안적으로, 레이저 프로젝터(10) 및 이미지 생성 모듈(30)은 하나의 전기 장치(1) 내에 집적되어 있으며, 이 경우 데이터 입력 수단(31)은 예를 들어 프로세서 입력이다.
도 3에는, 본 발명의 일 실시예에 따른 시스템(1)에 의해서 생성된 동기화 데이터 신호(11, 12, 11', 12')가 개략도로 도시되어 있으며, 이 경우 본 실시예는 다른 실시예들과 실질적으로 동일하다. 본 실시예에서, 하나 이상의 (외부) 동기화 데이터 신호(11, 12)는 수직 (외부) 동기화 데이터 신호(11)(vSync) 및 수평 (외부) 동기화 데이터 신호(12)(hSync)를 포함한다. 예를 들어, 레이저 프로젝터(10)가 다른 프로세서 펄싱으로 작동되는 경우에는, (외부) 수직 그리고 수평 동기화 데이터 신호(11 및 12)가 시간 오프셋 된 상태로 모듈(30)에 도달한다. 그렇기 때문에, 바람직하게 하나 이상의 동기화 데이터 신호(11, 12)는 먼저 이미지 생성 모듈(30) 내에서 동기화되는데, 다시 말하자면 하나 이상의 또 다른 (내부) 동기화 데이터 신호(11', 12') - 즉, 또 다른 (내부) 수직 동기화 데이터 신호(11') 및 또 다른 (내부) 수평 동기화 데이터 신호(12') - 가 발생 되도록, 모듈(30) 내에서 수직 동기화 데이터 신호(11)가 수평 동기화 데이터 신호(12)와 동기화된다. 바람직하게, 동기화 수단(35)(특히 동기화 블록)은, 시프트 레지스터를 이용해서 하나 이상의 (외부) 동기화 데이터 신호(11, 12)로부터 동기적인 (내부) 수직 그리고 수평 동기화 데이터 신호(11', 12')가 생성되도록 모듈(30) 내에서 구현되어 있다. 바람직하게, 이와 같은 구현은, 제1 클럭[참조 부호 (201) 참고] 동안 수직 또는 수평 동기화 데이터 신호(11, 12)의 측선이 증가할 때에는, 각각 다른 동기화 데이터 신호의 값이 제어 값보다 1 클럭 늦게[참조 부호 (202) 참고] 체크 되어, 결과적으로 예를 들어 투영 이미지(50)와 관련된 상이한 결과들 혹은 상황들이 구별될 수 있음으로써 달성된다. 도 3에는, 이와 같은 4개의 결과 혹은 상황이 도시되어 있으며, 이 경우 (도면의 좌측 열에는) 상황 혹은 결과마다 하나의 외부 수직 동기화 데이터 신호(11) 및 하나의 외부 수평 동기화 데이터 신호(12)가 도시되어 있으며, 이 경우 (도면의 우측 열에는) 상황 혹은 결과마다 (시프트 레지스터 내에서 발생 된) 하나의 내부 수직 동기화 데이터 신호(11') 및 (시프트 레지스터 내에서 발생 된) 하나의 외부 수평 동기화 데이터 신호(12')가 도시되어 있다.
제1의 상황(도면의 제1 행)은 [예를 들어 투영 이미지(50)]의 이미지 스타트와 관련이 있으며, 이 경우 처음 혹은 제1 이미지 라인(51)은 기록 방향(101)을 따라서 (예를 들어 좌측으로부터 우측으로) 기록된다. 제2의 상황(도면의 제2 행)은 [예를 들어 또 다른 투영 이미지(50')]의 이미지 스타트와 관련이 있으며, 이 경우 또 다른 처음 혹은 제1 이미지 라인(51')은 (역-평행한) 또 다른 기록 방향(101')을 따라서 (예를 들어 우측으로부터 좌측으로) 기록된다. 제3의 상황(제3 행)은 라인 스타트와 관련이 있다. 제4의 상황(제4 행)은 기록 방향(101, 102, 101', 102')의 방향 지시를 위해 동기화 데이터 신호(12)(hSync)를 사용하는 것과 관련이 있으며, 이 경우에는 특히 라인 스타트가 전혀 지시되지 않는다.
(내부) 수평 그리고/또는 수직 동기화 데이터 신호(11', 12') - 본 실시예에서는 또한 내부 동기화 신호로서도 지칭됨 - 는, 투영 레이저 빔(2)의 기록 방향(101, 101')에 상응하는 측정 데이터(이미지 데이터 신호의 이미지 데이터)를 모듈(30)의 기억 수단(33) 내부에 기록하기 위해서 사용된다. 바람직하게, 이 방법 단계는 기억 제어 수단(34) - 이 기억 제어 수단은 특히 RAM-컨트롤러의 기능을 갖춘 상태 자동 조작 장치로서 구성되어 있음 - 에 의해서 실행된다. 바람직하게, 이 경우에는, 투영 이미지(50)의 연속하는 이미지 라인(51, 52)의 이미지 데이터가 각각 기억 수단(33) 내부에 차례로 저장되도록, 기억 제어 수단(34)에 의해서 측정값이 기억 수단(33) 내부에 저장됨으로써, 결과적으로 이미지 데이터는 기록 방향(101, 101')과 무관하게 규칙적인 방식으로 기억된다.
도 4에는, 본 발명의 일 실시예에 따른 방법이 개략도로 도시되어 있으며, 이 경우 본 실시예는 다른 실시예들과 실질적으로 동일하며, 이 경우 본 실시예에는 기억 제어 수단(34)의 [특히 측정 데이터-RAM-컨트롤러(34)]의 상태 다이어그램이 도시되어 있다. 바람직하게, 기억 제어 수단(34)은 각각의 투영 이미지(50, 50')를 위해 (즉, 각각의 프레임을 위해) 시작된다. 바람직하게, 이미지 데이터 신호의 이미지 데이터는 기억 제어 수단(34)에 의해서 기억 수단(33)[특히 원형 버퍼(circular buffer)] 내부에 기록된다. 바람직하게, 모듈(30)의 몸짓 인식 수단(36)은 몸짓 인식 프로그램을 실행하기 위하여, 몸짓 인식을 위한 몸짓 인식 프로그램에 의해서 원형 버퍼에 액세스 되도록 구성되어 있다. 바람직하게, 몸짓 인식 프로그램에 의해서는, 몸짓 인식을 위해 새로운 이미지 매트릭스가 요청되자마자, 스타트 신호[참조 부호 (311) 참고]가 기억 제어 수단(34)으로 전송된다. 추가로, 특히 기억 수단(33) 내에 있는 데이터 이미지(즉, 이미지 매트릭스)는, 데이터 이미지를 예를 들어 스크린(도시되어 있지 않음) 상에 디스플레이하기 위하여, 이미지 메모리(마찬가지로 도시되어 있지 않음) 내부로 복사된다.
바람직하게, 기억 제어 수단(34)에 의해서는, 이미지 매트릭스를 생성하기 위한 후술되는 방법 단계들이 실행된다. 스타트 신호가 - 특히 몸짓 인식 수단(36)에 의해서 - 수신되면[참조 부호 (311)], 기억 제어 수단(34)이 먼저 제1 방법 상태(310)(기본 상태)로부터 제2 방법 상태(320)(메모리 복사)로 전환되며, 이 경우 제2 방법 상태(320)에서는, 복사 과정이 종료될 때까지[참조 부호 (321)에 의해서 도시됨], 이미지 매트릭스의 이미지 데이터가 기억 수단(33)으로부터 이미지 메모리 내부로 복사된다.
그 다음에, 기억 제어 수단(34)이 제3 방법 상태(330)(vSync 모니터링)로 전환되며, 이 경우에는 (내부) 수직 동기화 신호(11')가 활성 상태를 지시하는지의 여부가 검사되며, 이때 이미지 스타트가 존재하는 경우에는[vSync 활성, 참조 부호 (331) 참고], (내부) 수평 동기화 신호(12')에 따라 [이미지 라인(51)과 관련된] 기록 방향(101)이 검출되며, 이 경우에는 하나의 부정 값(negated value)이 하나의 변수에 할당되며, 이 경우 픽셀 메모리 어드레스는 "0"으로 설정된다.
그 다음에, 기억 제어 수단(34)이 제4 방법 상태(340)(hSync 모니터링)로 전환되며, 이 경우에는 이미지 라인이 계수되고, 방향 변수가 교체되며, 행 오프셋에 도달하여 행 도약이 전혀 존재하지 않는 경우에는, 기억 제어 수단(34)이 제5 방법 상태(350)(픽셀 오프셋 대기)로 전환된다.
제5 방법 상태(350)(픽셀 오프셋 대기)에서는 픽셀이 계수되며, 이때 픽셀 오프셋 값에 도달하는 경우에는[참조 부호 (351) 참고], 기억 제어 수단(34)이 제6 방법 상태(360)(행 기록)로 전환되며, 이 경우 제6 방법 상태(360)에서는 이미지 데이터 라인이 기억 수단(33) 내부에 저장되며, 이때 제6 방법 상태(360)에서는 픽셀이 계수되며, 이 경우에는 하나의 픽셀 값이 기억되고, 이때에는 하나의 픽셀 메모리 어드레스가 증가하며, 이때 이미지 폭에 도달하여 행 번호가 이미지 높이보다 작은 경우에는 기억 제어 수단(34)이 제4 방법 상태(340)(hSync 모니터링)로 전환되고, 그렇지 않은 경우에는 제1 상태(310)(기본 상태)가 취해진다.
도 5에는, 본 발명의 일 실시예에 따른 방법에서 사용되는 파라미터 세트가 개략도로 도시되어 있으며, 이 경우 본 실시예는 다른 실시예들과 실질적으로 동일하다. 스타트 신호의 수신 후에 그리고 버퍼 혹은 기억 수단(33) 내에 기억된 이미지 매트릭스의 이미지 데이터가 이미지 메모리 내부로 복사된 후에는, 기억 제어 수단(34)이 새로운 측정 데이터 혹은 이미지 데이터를 이미지 매트릭스로서 저장하는 과정을 시작한다. 다양한 상태(310, 320, 330, 340, 350, 360)는 특히, 기억 제어 수단(34)이 투영 이미지(50)의 임의로 구성될 수 있는 이미지 섹션을 기억 수단(33) 내부에 기록하도록 구성되어 있으며, 이 경우 그 이미지 섹션은 도 5에 도시되어 있는 파라미터 세트에 의해서 규정된다. 본 실시예에는, 광 센서 모듈(20)의 이미지 데이터 신호[참조 부호 (5) 참고] 및 이미지 매트릭스 내에 기억된 이미지 데이터[참조 부호 (6) 참고]가 도시되어 있다. 예를 들어, 파라미터 세트는 이미지 높이(401), 행 오프셋(401'), 이미지 폭(402), 픽셀 오프셋(402'), 수직 그리고 수평 동기화 신호(11', 12')를 포함한다. 예를 들어, 이미지 매트릭스의 해상도는 설정 가능하며, 이 경우 수직 방향을 기준으로 하는 해상도의 설정은 행 도약에 의해서 이루어지며[예를 들어 참조 부호 (500) 참고], 이 경우 수평 방향을 기준으로 하는 해상도의 설정은 측정 데이터를 디지털화할 때 샘플 레이트(sample rate)를 설정함으로써 이루어진다.

Claims (11)

  1. 모듈(30)이 레이저 프로젝터 모듈(10)의 하나 이상의 동기화 데이터 신호를 입력하기 위한 하나 이상의 제1 데이터 입력 수단(31), 광 센서 모듈(20)의 이미지 데이터 신호를 입력하기 위한 제2 데이터 입력 수단(32), 기억 수단(33) 및 기억 제어 수단(34)을 구비하며, 상기 기억 제어 수단(34)은, 이미지 데이터 신호의 이미지 데이터가 하나 이상의 동기화 데이터 신호에 따라 기억 수단(33) 내에 이미지 매트릭스로서 저장되도록 구성되어 있는, 몸짓 인식을 위한 이미지 매트릭스를 생성하기 위한 모듈(30)에 있어서,
    상기 기억 제어 수단(34)은, 하나 이상의 동기화 데이터 신호와 함께 전송되는 이미지 라인 방향 정보에 따라 이미지 데이터로부터 이미지 매트릭스가 생성되도록 구성되어 있고,
    이미지 라인 방향 정보는, 레이저 프로젝터 모듈(10)에 의해서 투영된 투영 이미지(50)의 이미지 라인(51)의 기록 방향(101, 101')과 관련이 있는 것을 특징으로 하는, 모듈(30).
  2. 삭제
  3. 제1항에 있어서, 하나 이상의 동기화 데이터 신호가 투영 이미지(50)와 관련된 수직 동기화 데이터 신호 및 투영 이미지(50)의 이미지 라인(51)과 관련된 수평 동기화 데이터 신호를 포함하는 것을 특징으로 하는, 모듈(30).
  4. 제1항에 있어서, 모듈(30)이, 수직 동기화 데이터 신호를 수평 동기화 데이터 신호와 동기화하기 위한 동기화 수단(35)을 구비하는 것을 특징으로 하는, 모듈(30).
  5. 제1항에 있어서, 모듈(30)이, 기억 수단(33) 내부에 이미지 매트릭스로서 기억된 이미지 데이터에 따라 몸짓을 인식하기 위한 몸짓 인식 수단(36)을 구비하는 것을 특징으로 하는, 모듈(30).
  6. 시스템(1)이 레이저 프로젝터 모듈(10), 광 센서 모듈(20) 및 제1항에 따른 모듈(30)을 구비하며, 상기 레이저 프로젝터 모듈(10)은 하나 이상의 동기화 데이터 신호를 발생하도록 구성되어 있으며, 상기 광 센서 모듈(20)은 이미지 데이터 신호를 발생하도록 구성되어 있으며, 하나 이상의 동기화 데이터 신호는 레이저 프로젝터 모듈(10)에 의해서, 하나 이상의 동기화 데이터 신호가 이미지 라인 방향 정보를 갖도록 구성되는, 몸짓 인식을 위한 이미지 매트릭스를 생성하기 위한 시스템(1).
  7. 제6항에 있어서, 레이저 프로젝터 모듈(10)이, 연속하는 투영 이미지(50, 50')를 투영할 때 처음 이미지 라인(51, 51')의 기록 방향(101, 101')이 교체되도록 구성되어 있는 것을 특징으로 하는, 시스템(1).
  8. 제1 방법 단계에서는 투영 이미지(50)의 이미지 라인(51)이 레이저 프로젝터(10)에 의해 기록 방향(101)을 따라서 투영 레이저 빔(2)으로써 투영되며, 제2 방법 단계에서는 투영 레이저 빔(2)의 반사에 의해서 발생되는 반사 신호(2')가 광 센서 모듈(20)에 의해 검출되며, 이때 상기 광 센서 모듈(20)에 의해서는 이미지 데이터 신호가 상기 검출된 반사 신호(2')에 따라, 상기 이미지 데이터 신호가 이미지 라인(51)과 관련된 이미지 데이터를 포함하도록 발생되며, 제3 방법 단계에서는 레이저 프로젝터 모듈(10)에 의해서, 하나 이상의 동기화 데이터 신호가 이미지 라인(51)의 기록 방향(101)과 관련된 이미지 라인 방향 정보를 갖도록, 하나 이상의 동기화 데이터 신호가 발생되는, 몸짓 인식을 위한 이미지 매트릭스를 생성하기 위한 방법.
  9. 제8항에 있어서, 제4 방법 단계에서는 하나 이상의 동기화 데이터 신호가 모듈(30)로 전송되며, 제5 방법 단계에서는 이미지 데이터 신호의 이미지 데이터가 상기 모듈(30)의 기억 제어 수단(34)에 의해서 하나 이상의 동기화 데이터 신호에 따라 이미지 매트릭스의 형태로 기억 수단(33) 내부에 저장되며, 상기 기억 제어 수단(34)에 의해서는 이미지 매트릭스가 이미지 라인 방향 정보에 따라 이미지 데이터로부터 생성되는 것을 특징으로 하는, 방법.
  10. 제8항 또는 제9항에 있어서, 제6 방법 단계에서는 레이저 프로젝터(10)에 의해서 투영 레이저 빔(2)으로써 또 다른 투영 이미지(50')의 또 다른 이미지 라인(51')이 또 다른 기록 방향(101')을 따라서 투영되며, 제7 방법 단계에서는 광 센서 모듈(20)에 의해서, 또 다른 이미지 데이터 신호가 또 다른 이미지 라인(51')과 관련된 또 다른 이미지 데이터를 포함하도록 또 다른 이미지 데이터 신호가 발생되며, 제8 방법 단계에서는 상기 레이저 프로젝터 모듈(10)에 의해서, 하나 이상의 또 다른 동기화 데이터 신호가 또 다른 이미지 라인(51')의 또 다른 기록 방향(101')과 관련된 또 다른 이미지 라인 방향 정보를 갖도록, 하나 이상의 또 다른 동기화 데이터 신호가 발생되는 것을 특징으로 하는, 방법.
  11. 제10항에 있어서, 이미지 라인(51)이 투영 이미지(50)의 처음 이미지 라인이고, 또 다른 이미지 라인(51')이 또 다른 투영 이미지(50')의 처음 이미지 라인이며, 상기 이미지 라인(51) 및 상기 또 다른 이미지 라인(51')은, 또 다른 투영 이미지(50')가 투영 이미지(50) 바로 다음에 투영될 때, 상기 또 다른 이미지 라인(51')의 또 다른 기록 방향(101')이 상기 이미지 라인(51)의 기록 방향(101)과 반대가 되도록 투영되는 것을 특징으로 하는, 방법.
KR1020177000191A 2014-06-03 2015-04-07 몸짓 인식을 위한 이미지 매트릭스를 생성하기 위한 모듈, 시스템 및 방법 KR102254564B1 (ko)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
DE102014210399.1A DE102014210399A1 (de) 2014-06-03 2014-06-03 Modul, System und Verfahren für die Erzeugung einer Bildmatrix zur Gestenerkennung
DE102014210399.1 2014-06-03
PCT/EP2015/057457 WO2015185247A1 (de) 2014-06-03 2015-04-07 Modul, system und verfahren für die erzeugung einer bildmatrix zur gestenerkennung

Publications (2)

Publication Number Publication Date
KR20170012549A KR20170012549A (ko) 2017-02-02
KR102254564B1 true KR102254564B1 (ko) 2021-05-21

Family

ID=53015763

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020177000191A KR102254564B1 (ko) 2014-06-03 2015-04-07 몸짓 인식을 위한 이미지 매트릭스를 생성하기 위한 모듈, 시스템 및 방법

Country Status (5)

Country Link
JP (1) JP6423013B2 (ko)
KR (1) KR102254564B1 (ko)
CN (1) CN106415450B (ko)
DE (1) DE102014210399A1 (ko)
WO (1) WO2015185247A1 (ko)

Families Citing this family (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
DE102016215746A1 (de) * 2016-08-23 2018-03-01 Robert Bosch Gmbh Projektor mit berührungsfreier Steuerung
US10943079B2 (en) 2017-07-27 2021-03-09 Robert Bosch Gmbh Device for implementing a detection function and method for operating such a device
CN111540448A (zh) * 2020-04-20 2020-08-14 深圳市华智信息科技有限公司 用户行为的智能检测方法、电子装置及计算机可读存储介质

Family Cites Families (14)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP3321053B2 (ja) * 1996-10-18 2002-09-03 株式会社東芝 情報入力装置及び情報入力方法及び補正データ生成装置
US8456506B2 (en) * 2004-08-03 2013-06-04 Applied Minds, Llc Systems and methods for enhancing teleconferencing collaboration
DE102004044999A1 (de) * 2004-09-16 2006-04-06 Fraunhofer-Gesellschaft zur Förderung der angewandten Forschung e.V. Eingabesteuerung für Geräte
DE102004047960A1 (de) * 2004-10-01 2006-04-06 Siemens Ag Strahlprojektions-Anzeigeeinrichtung und Verfahren zum Betreiben einer Strahlprojektions-Anzeigeeinrichtung
JP4612853B2 (ja) * 2005-03-29 2011-01-12 キヤノン株式会社 指示位置認識装置及びそれを有する情報入力装置
US8519983B2 (en) * 2007-12-29 2013-08-27 Microvision, Inc. Input device for a scanned beam display
JP2010008614A (ja) * 2008-06-25 2010-01-14 Panasonic Electric Works Co Ltd 投影型表示装置及びそれに用いられる表示方法
KR20110071349A (ko) * 2009-12-21 2011-06-29 삼성전자주식회사 휴대단말의 외부 출력 제어 방법 및 장치
DE102010018083B4 (de) * 2010-04-23 2013-05-08 Tridelity Ag Gleichzeitige Wiedergabe einer Mehrzahl von Bildern mittels einer zweidimensionalen Bilddarstellungs-Matrix
JP5408026B2 (ja) * 2010-04-28 2014-02-05 セイコーエプソン株式会社 位置検出機能付き機器
US20110267262A1 (en) * 2010-04-30 2011-11-03 Jacques Gollier Laser Scanning Projector Device for Interactive Screen Applications
JP2011257338A (ja) * 2010-06-11 2011-12-22 Seiko Epson Corp 光学式位置検出装置および位置検出機能付き表示装置
CN102096469B (zh) * 2011-01-21 2012-04-18 中科芯集成电路股份有限公司 一种多功能手势互动系统
CN103310233B (zh) * 2013-06-28 2016-03-23 青岛科技大学 同类行为多视图间相似度挖掘方法及行为识别方法

Also Published As

Publication number Publication date
CN106415450B (zh) 2020-12-08
CN106415450A (zh) 2017-02-15
JP2017520049A (ja) 2017-07-20
KR20170012549A (ko) 2017-02-02
WO2015185247A1 (de) 2015-12-10
DE102014210399A1 (de) 2015-12-03
JP6423013B2 (ja) 2018-11-14

Similar Documents

Publication Publication Date Title
CN112739980B (zh) 多阶段有源光深度系统
KR102254564B1 (ko) 몸짓 인식을 위한 이미지 매트릭스를 생성하기 위한 모듈, 시스템 및 방법
US20170300176A1 (en) Method of determining a touch position and touch projection system using the method
WO2014108976A1 (ja) 物体検出装置
JP2015127668A (ja) 計測装置、システムおよびプログラム
US11416978B2 (en) Image processing apparatus, control method and non-transitory computer-readable recording medium therefor
JP2014137762A (ja) 物体検出装置
US11877056B2 (en) Information processing apparatus, information processing method, and program
JP6314688B2 (ja) 入力装置
JP2021128657A (ja) 位置検出方法、位置検出装置及び位置検出システム
JP2016218893A (ja) 入力操作検出装置、画像表示装置、プロジェクタ装置、プロジェクタシステム、及び入力操作検出方法
EP3051492B1 (en) Method and apparatus for determining disparity
JP2012177768A (ja) 投写型映像表示装置
US10623610B2 (en) Display processing device and display processing method
JP2015166854A (ja) 投影装置の投影制御装置、投影装置の投影制御方法、投影システム、投影システムの投影制御方法及びプログラム
JP2007315777A (ja) 三次元形状計測システム
US20140313381A1 (en) Image pickup apparatus
JP6740614B2 (ja) 物体検出装置、及び物体検出装置を備えた画像表示装置
JPWO2015141185A1 (ja) 撮像制御装置、撮像制御方法およびプログラム
WO2021124730A1 (ja) 情報処理装置、撮像装置、情報処理方法、及びプログラム
JP6379646B2 (ja) 情報処理装置、測定方法及びプログラム
JP2018055257A (ja) 情報処理装置、およびその制御方法ならびにプログラム
JP6427888B2 (ja) 画像表示システム、画像表示装置及び画像表示方法
CN114762318A (zh) 图像处理装置、图像处理方法和图像投影系统
JP6838705B2 (ja) レーザレーダ装置及びそれに用いる強度画像取得方法

Legal Events

Date Code Title Description
E902 Notification of reason for refusal
E701 Decision to grant or registration of patent right