KR20050009668A - 컴퓨팅 장치용 투사식 사용자 인터페이스를 제공하기 위한방법 및 장치 - Google Patents
컴퓨팅 장치용 투사식 사용자 인터페이스를 제공하기 위한방법 및 장치 Download PDFInfo
- Publication number
- KR20050009668A KR20050009668A KR1020040053394A KR20040053394A KR20050009668A KR 20050009668 A KR20050009668 A KR 20050009668A KR 1020040053394 A KR1020040053394 A KR 1020040053394A KR 20040053394 A KR20040053394 A KR 20040053394A KR 20050009668 A KR20050009668 A KR 20050009668A
- Authority
- KR
- South Korea
- Prior art keywords
- computing device
- image
- user
- user input
- projector
- Prior art date
Links
- 238000000034 method Methods 0.000 title claims abstract description 38
- 238000001514 detection method Methods 0.000 claims description 12
- 230000008713 feedback mechanism Effects 0.000 claims description 2
- 230000000007 visual effect Effects 0.000 claims 4
- 229920001690 polydopamine Polymers 0.000 description 5
- 230000008901 benefit Effects 0.000 description 4
- 238000010586 diagram Methods 0.000 description 3
- 230000000903 blocking effect Effects 0.000 description 1
- 230000008859 change Effects 0.000 description 1
- 230000000694 effects Effects 0.000 description 1
- 230000006872 improvement Effects 0.000 description 1
- 230000007246 mechanism Effects 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 238000005549 size reduction Methods 0.000 description 1
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N5/00—Details of television systems
- H04N5/74—Projection arrangements for image reproduction, e.g. using eidophor
-
- G—PHYSICS
- G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
- G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
- G09G3/00—Control arrangements or circuits, of interest only in connection with visual indicators other than cathode-ray tubes
- G09G3/001—Control arrangements or circuits, of interest only in connection with visual indicators other than cathode-ray tubes using specific devices not provided for in groups G09G3/02 - G09G3/36, e.g. using an intermediate record carrier such as a film slide; Projection systems; Display of non-alphanumerical information, solely or in combination with alphanumerical information, e.g. digital display on projected diapositive as background
- G09G3/002—Control arrangements or circuits, of interest only in connection with visual indicators other than cathode-ray tubes using specific devices not provided for in groups G09G3/02 - G09G3/36, e.g. using an intermediate record carrier such as a film slide; Projection systems; Display of non-alphanumerical information, solely or in combination with alphanumerical information, e.g. digital display on projected diapositive as background to project the image of a two-dimensional display, such as an array of light emitting or modulating elements or a CRT
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/03—Arrangements for converting the position or the displacement of a member into a coded form
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N9/00—Details of colour television systems
- H04N9/12—Picture reproducers
- H04N9/31—Projection devices for colour picture display, e.g. using electronic spatial light modulators [ESLM]
Landscapes
- Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- General Physics & Mathematics (AREA)
- Physics & Mathematics (AREA)
- Computer Hardware Design (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- General Engineering & Computer Science (AREA)
- Human Computer Interaction (AREA)
- User Interface Of Digital Computer (AREA)
- Position Input By Displaying (AREA)
- Transforming Electric Information Into Light Information (AREA)
- Input From Keyboards Or The Like (AREA)
- Projection Apparatus (AREA)
- Digital Computer Display Output (AREA)
- Controls And Circuits For Display Device (AREA)
Abstract
퍼베이시브 컴퓨팅 장치와 같은 컴퓨팅 장치용 사용자 인터페이스를 제공하는 장치 및 방법이 개시된다. 컴퓨팅 장치는 프로젝터로부터 표면상으로 사용자 입력 디스플레이를 투사한다. 사용자 출력 디스플레이는 상기 컴퓨팅 장치의 프로젝터로부터 표면상으로 투사된다. 사용자 입력 디스플레이 및 사용자 출력 디스플레이는 동일한 프로젝터로부터 투사될 수 있다. 사용자 입력 디스플레이와 사용자 출력 디스플레이는 상이한 표면상에 투사될 수 있다. 단일의 투사 이미지가 거울 시스템을 이용하여 분할되고 조작될 수 있다.
Description
본 발명은 퍼베이시브(pervasive) 컴퓨팅 장치와 같은 컴퓨팅 장치를 위해사용자 인터페이스를 투사하기 위한 방법 및 장치에 관한 것으로서, 더 구체적으로는, 사용자 입력 디스플레이 및 사용자 출력 디스플레이를 투사하기 위한 방법 및 장치에 관한 것이다.
PDA, 포켓 PC(개인용 컴퓨터), 타블렛 PC 및 스마트 카메라/PDA 전화와 같은 퍼베이시브 컴퓨팅 장치들은 꾸준히 대중성을 얻고 있다. 칩 기술은 이들 장치가 작지만 기능적으로는 강력해지는 것을 가능케 하였다. 그러나, 장치들의 크기 축소로 인하여 키보드용 공간이 거의 없으며, 대부분은 매우 작은 디스플레이를 포함한다.
이들 퍼베이시브 컴퓨팅 장치들의 사용성 및 휴대성을 향상시키기 위한 시도로서 입력용 가상 키보드 이미지 및/또는 사용자 출력용 가상 디스플레이의 추가가 제안되었다. 예를 들어, 미국특허번호 제6,323,942호는 가상 키보드를 개시한다. 또한, 미국특허번호 제6,266,048호는 PDA용 가상 디스플레이/키보드를 개시하며, 이는 퍼베이시브 컴퓨팅 장치의 크기로 인해 유발되는 제약에 대한 해법을 제공한다. 키보드 이미지가 사용자에 근접한 표면에 투사되고, 디스플레이 이미지가 가상 키보드 이미지와 투사 장치사이의 동일한 표면상에 투사된다. 이는 키보드 이미지 및 디스플레이 모두의 크기를 증가시킬 수 있지만, 양쪽 이미지를 동일한 표면상에 배치하는 것은 사용자가 사용자 출력 디스플레이를 읽기 위해 아래쪽으로 쳐다보아야 한다는 점에서 사용자를 불편하게 한다. 이는 습관상의 컴퓨터 스크린 배치가 아니며, 사용자는 새로운 배치에 익숙해져야만 한다. 미국특허번호 제6,266,048의 시스템은 키보드용 이미지를 위해 제1 투사기와 디스플레이를 위한 제2 투사기를 또한 이용한다.
상기 접근 방식은 최적으로 인간공학적이고 경제적인 가상 입력 및 출력을 산출하는 시스템을 제공하지 못한다. 따라서, 이러한 제약 및 기타 다른 제약들을 극복하는 개선된 가상 입출력 시스템에 대한 필요성이 존재한다.
도 1은 본 발명의 일실시예에 따라 사용자 입력 디스플레이와 사용자 출력 디스플레이를 별개의 표면상에 투사하는 퍼베이시브 컴퓨팅 장치를 예시하는 도면이다.
도 2는 본 발명의 실시예에 따른 퍼베이시브 컴퓨팅 장치내의 거울 시스템, 마이크로 프로젝터 및 그 결과의 분할 이미지를 예시하는 도면이다.
도 3은 본 발명의 일실시예에 따라, 사용자 입력 디스플레이 및 키 피드백을 투사하는 퍼베이시브 컴퓨팅 장치를 예시하는 도면이다.
도 4는 본 발명의 일실시예에 따라, 사용자 앞의 단일 표면상에 사용자 입력 디스플레이 및 사용자 출력 디스플레이를 투사하는 퍼베이시브 컴퓨팅 장치를 예시하는 도면이다.
본 발명은 퍼베이시브(pervasive) 컴퓨팅 장치와 같은 컴퓨팅 장치를 위해 사용자 인터페이스를 투사하기 위한 방법 및 장치, 더 구체적으로는, 사용자 입력 디스플레이 및 사용자 출력 디스플레이를 투사하기 위한 방법 및 장치를 제공한다.
예를 들어, 본 발명의 제1 측면에 따르면, 컴퓨팅 장치용 사용자 인터페이스를 제공하기 위한 기술은 다음의 단계를 포함한다. 사용자 입력 디스플레이가 제1 표면상에 컴퓨팅 장치의 프로젝터로부터 투사되고, 사용자 출력 디스플레이는 제2 표면상에 컴퓨팅 장치의 프로젝터로부터 투사된다. 제1 표면과 제2 표면은 상이한 평면상에 위치한다.
유익하게, 상기 기술은 사용자 입력 디스플레이가 사용자 출력 디스플레와 상이한 표면상에 투사되는 것을 가능케 한다. 이는 단일의 투사 이미지를 사용자 입력 디스플레이와 사용자 출력 디스플레이로 분할하는 컴퓨팅 장치의 거울 시스템의 사용을 통해 달성된다. 사용자 입력 디스플레이는 사용자와 컴퓨팅 장치사이의 편평한 수평면상에 투사되는 반면에, 사용자 출력 디스플레이는 컴퓨팅 장치 뒤쪽의 수직면상에 투사될 수 있다. 이는 사용자에게 컴퓨팅 장치가 사용될 때 여전히편안하고 통상적인 위치에 있도록 하면서 입력 및 출력 디스플레이 모두의 크기 확대라는 장점을 유지할 수 있도록 해준다.
본 발명의 제2 측면에 따르면, 컴퓨팅 장치용 사용자 인터페이스를 제공하기 위한 기술은 다음의 단계를 포함한다. 사용자 입력 디스플레이가 컴퓨팅 장치의 프로젝터로부터 표면으로 투사되고, 사용자 출력 디스플레이는 프로젝터로부터 동일한 표면상으로 투사된다. 단일 프로젝터가 사용자 입력 디스플레이 및 출력 디스플레이 모두를 위해 사용된다. 또한, 사용자 입력 디스플레이 또는 가상 키보드 이미지상에서 키스트로크가 검출되면 타이핑(typing) 피드백이 발산될 수 있다. 이러한 피드백은 오디오 및/또는 가상 포맷으로 이루어질 수 있다.
본 발명의 전술한 목적, 특징 및 장점은 예시적인 실시예에 대한 이하의 상세한 설명을 첨부된 도면과 함께 판독할 때 자명해질 것이다.
이하에 후술되는 바와 같이, 본 발명은 컴퓨팅 장치용 사용자 인터페이스를 투사하기 위한 장치 및 기법을 소개한다. 퍼베이시브 컴퓨팅 장치의 단일 프로젝터를 이용하여 사용자 입력 디스플레이는 제1 표면상에 투사되고 사용자 출력 디스플레이는 제2 표면상에 투사될 수 있다. 사용자 입력 디스플레이는 바람직하게는 가상 키보드 이미지이다. 가상 키보드는 키보드를 닮았으며, 키스트로크 검출 시스템의 지원을 통해 키보드와 동일한 기능을 수행하는 표면상의 투사 이미지이다. 실시예들은 "퍼베이시브(pervasive)" 컴퓨팅 장치를 언급하지만, 본 발명이 반드시 이에 제한되는 것은 아니며, 가상 입/출력 장치의 사용을 통해 이익을 얻을 수 있는 다른 컴퓨팅 장치들에도 구현될 수 있다.
도 1을 우선 참조하면, 도면은 본 발명의 실시예에 따라 별개의 표면상에 사용자 입력 디스플레이와 사용자 출력 디스플레이를 투사하는 퍼베이시브 컴퓨팅 장치를 예시한다. 퍼베이시브 컴퓨팅 장치(101)은 퍼베이시브 컴퓨팅 장치(101)과 사용자 사이에 있는, 퍼베이시브 컴퓨팅 장치(101) 앞의 제1 표면상에 가상 키보드 이미지(105)를 투사한다. 사용자 출력 디스플레이 이미지(104)는 퍼베이시브 컴퓨팅 장치(101)의 뒤편에 편평 가상 표면(103)상으로 투사된다. 제1 표면은 바람직하게는 제2 표면과 수직인 평면상에 위치한다. 단일의 마이크로 프로젝터(102)가 거울 시스템(도시되어 있지 않지만 도 2를 참조하여 상세히 설명됨)과 사용되어 사용자 출력 디스플레이 이미지(104)를 뒤쪽으로 반사하고 가상 키보드 이미지(105)를 사용자의 앞에 투사한다. 상이한 표면상에 2개의 이미지를 생성하기 위해 복수개의 프로젝터 시스템이 사용될 수 도 있다. 가상 키보드 이미지(105)는 또한 가상 스크래치 패드 또는 다른 포인팅 장치를 포함할 수 있다. 여러개의 마이크로 프로젝터중 하나의 예는 텍사스 인스트루먼트사(Texas Instruments)의 디지털 마이크로 미러 디스플레이(Digital Micro mirror Display:DMD)를 이용하는 프로젝션 시스템이다.
이제, 도 2를 참조하면, 상기 도면은 본 발명의 실시예에 따른 퍼베이시브 컴퓨팅 장치내의 거울 시스템, 마이크로 프로젝터 및 그 결과의 분할 이미지를 예시한다. 거울 시스템 및 마이크로 프로젝터는 컴퓨팅 장치에 통합될 수 있음을 이해할 것이다. 마이크로 프로젝터(102)로부터의 이미지는 그의 낮은 부분(202)에 있는 가상 키보드 이미지(105)와, 그의 높은 부분에 있는 사용자 출력 디스플레이이미지(104)를 포함한다. 거울 시스템의 낮은쪽 거울(204)은 윗부분(203)을 포착하여 그것을 위쪽 거울(201)에 반사하고, 이는 사용자 출력 디스플레이(104)를 후면(103)상에 투사한다. 낮은 부분(202)은, 거울 시스템(201, 204)으로부터의 간섭없이, 퍼베이시브 컴퓨팅 장치(101)의 앞에 투사된다.
동작에 있어서, 가상 키보드 이미지(105)를 갖는 투사 이미지의 낮은 부분(202)은 키스트로크 검출 시스템(미도시됨)상에 겹쳐 놓인다. 이러한 키스트로크 검출 시스템은 본 기술 분야에 공지된 것으로서 미국특허번호 제6,266,048호에 개시되어 있으며, 이는 본 명세서의 일부로서 참조된다. 이 시스템은 가상 키보드 이미지(105)가 투사되는 표면과 실질적으로 평행하게, 가상 키보드 이미지(105)의 전역에 퍼베이시브 컴퓨팅 장치(101)로부터 발산되는 레이점 빔과 관련된다. 레이저 빔이 가상 키보드 이미지(105)의 가상 키 위에서 차단될 때, 이러한 차단은 센서에 의해 검출되고, 입력은 퍼베이시브 컴퓨팅 장치에 의한 처리를 위해 생성된다. 그러나, 본 발명이 특정의 키스트로크 검출 시스템과 사용되도록 국한되는 것은 아님을 이해할 것이다.
가상 키보드 이미지(105)는 양호한 인간공학을 위한 사각형의 물리적 키보드를 시뮬레이션한다. 투사 이미지의 윗부분(203)은 컴퓨터 스크린상에 통상적으로 디스플레이되는 이미지와 동일하다. 또한, 위부분(203)은 사용자가 전통적인 컴퓨터 스크린으로 작업하는 경우에 쳐다보는 위치내에 있다. 단일 프로젝터를 사용하는 장점에 부가하여, 거울 시스템은 퍼베이시브 컴퓨팅 장치와 가상 디스플레이 표면사이에 짧은 거리만이 존재하는 경우에도 커다란 이미지가 산출될 수 있도록 또한 설계된다. 투사 이미지의 크기는 마이크로 프로젝터(102)에서 낮은쪽 거울(203), 높은쪽 거울(201) 및 가상 디스플레이 표면(103)에 이르는 전체 거리에 따라 달라진다. 거울 시스템의 폴딩 효과(folding effect)로 인하여, 이렇게 투사된 이미지의 크기는 이미지가 마이크로 프로젝터로부터 디스플레이 표면으로 직접 투사되는 경우보다 크다. 프로젝터와 거울 시스템간의 거리가 조정가능하다면 투사 이미지를 더 크게 확대하는 것도 가능하다.
도 3을 참조하면, 본 발명의 실시예에 따라 사용자 입력 디스플레이이와 키스트로크 피드백을 투사하는 퍼베이시브 컴퓨팅 장치가 도시되어 있다. 본 발명의 부가적인 개선은 키 스크로크가 키스트로크 검출 시스템에 의해 검출될 때 타이핑 피드백을 추가한 것이다. 이러한 피드백은 구성가능한 오디오 클릭 또는 가상 키보드 이미지(105) 또는 사용자 출력 디스플레이(104)중 하나 위의 가상 디스플레이일 수 있다. 실제 키의 결여로 인하여 사용자가 키 스트로크가 시스템에 입력되었는지 여부가 불확실하기 때문에 사용자에게 키(105)가 입력되었음을 알려주는 것은 필요하다. 이러한 가상 및/또는 가청 피드백은 사용자가 소정의 입력이 생성되었는지 여부를 신속하게 인식할 수 있도록 해준다. 가청 피드백은 퍼베이시브 장치(101)로부터 나오는 삑소리(beep) 또는 클릭의 형태일 수 있다. 가상 피드백은 가상 키보드 이미지(105)위의 키(106)의 색상 또는 모양을 바꾸는 것일 수 있다. 키(106)의 모양을 바꾸는 것은 도 3에 도시된 바와 같이 키를 확대하는 것을 포함한다. 가상 피드백은 또한 사용자 출력 디스플레이(104)위에 표시 심볼을 디스플레이하는 것을 포함한다. 본 발명은 키스트로크 피드백을 제공하기 위해 사용되는특정 유형의 메커니즘에 국한되는 것이 아님을 이해할 것이다.
이러한 피드백 기술은 소프트웨어 어플리케이션으로서 퍼베이시브 컴퓨팅 장치(101)내에 통합될 수 있다. 피드백 메커니즘은 또한 전술한 기능을 제공하기 위해 구성가능한 회로 또는 제어기에 의해 구현될 수도 있다.
도 4를 참조하면, 사용자 앞의 단일 표면상에 사용자 입력 디스플레이와 사용자 출력 디스플레이를 투사하는 퍼베이시브 컴퓨팅 장치가 도시되어 있다. 이 실시예는 정면 투사 시스템이다. 유익하게, 본 발명의 구성은 단일 프로젝터를 이용한다. 가상 키보드 이미지(105)는 사용자에게 근접하여 투사되고 사용자 출력 디스플레이 이미지(104)는 가상 키보드 이미지(105)와 퍼베이시브 컴퓨팅 장치(101) 사이에 투사된다. 정면 투사 시스템은 가상 키보드 이미지(105)와 상이한 평면인 별개의 표면상에 사용자 출력 디스플레이 이미지(104)를 투사할 수도 있다. 예를 들어, 퍼베이시브 컴퓨팅 장치(101)과 가상 키보드 이미지(105)는 사용자의 앞에 존재하면서, 사용자 출력 디스플레이 이미지(104)가 프레젠테이션 목적을 위해 사용자의 뒤쪽 벽에 디스플레이될 수 있다. 이러한 경우에, 퍼베이시브 컴퓨팅 장치(101)은 사용자가 출력 디스플레이 이미지(104)의 투사 경로에 있지 않도록 삼각대(tripod)에 의해 올려질 수 있다. 키스트로크 검출 시스템과 타이핑 피드백 또한 상기 시스템에 적용될 수 있다.
따라서, 전술한 바와 같이, 본 발명은 퍼베이시브 컴퓨팅 장치와 같은 컴퓨팅 장치를 위한 인터페이스를 투사하기 위한 장치 및 방법, 좀더 구체적으로는, 사용자 입력 디스플레이 및 사용자 출력 디스플레이를 투사하기 위한 장치 및 방법을 제공한다. 본 발명의 일 측면에 따르면, 사용자 입력 디스플레이와 사용자 출력 디스플레이는 상이한 표면상에 투사된다. 본 발명의 다른 특징으로는 단일 프로젝터의 이용과 키스트로크가 가상 키보드 이미지상에서 검출될 때 피드백의 방사이다. 투사식 사용자 인터페이스를 제공하기 위한 본 발명의 장치 및 방법은 PDA, 포켓 PC, 타블렛 PC, 스마트 카메라/PDA 전화와 같은 다수의 어플리케이션들에 적용될 수 있다.
본 발명의 실시예가 첨부된 도면을 참조하여 설명되었지만, 본 발명은 전술한 실시예에 국한되는 것이 아니며, 본 발명의 정신 및 범위를 벗어나지 않고 기타 다양한 변화 및 변경이 당업자에 의해 이루어질 수 있음을 이해하여야 할 것이다.
Claims (37)
- 컴퓨팅 장치용 사용자 인터페이스를 제공하는 방법에 있어서,상기 컴퓨팅 장치의 프로젝터로부터 제1 표면상으로 사용자 입력 디스플레이를 투사하는 단계와,상기 컴퓨팅 장치의 프로젝터로부터 제2 표면상으로 사용자 출력 디스플레이를 투사하는 단계를 포함하고, 상기 제1 표면과 상기 제2 표면은 상이한 평면에 위치하는 방법.
- 제1항에 있어서, 상기 컴퓨팅 장치는 퍼베이시브(pervasive) 컴퓨팅 장치인 방법.
- 제1항에 있어서, 상기 사용자 입력 디스플레이와 상기 사용자 출력 디스플레이는 최초에 단일 프로젝터로부터 단일 이미지로서 투사되는 방법.
- 제3항에 있어서, 상기 최초에 투사된 단일 이미지의 일부를 상기 컴퓨팅 장치내의 거울 시스템을 이용하여 반사하는 단계를 더 포함하고, 이로 인해, 상기 최초에 투사된 단일 이미지가 상기 사용자 입력 디스플레이와 상기 사용자 출력 디스플레이로 분할되는 방법.
- 제4항에 있어서, 상기 최초에 투사된 단일 이미지의 일부를 반사하는 상기 단계에서, 상기 이미지의 반사된 부분은 사용자 출력 디스플레이이고 상기 이미지의 비반사된 부분이 사용자 입력 디스플레이인 방법.
- 제4항에 있어서, 상기 최초에 투사된 단일 이미지의 일부를 반사하는 단계는,상기 거울 시스템의 제1 거울을 이용하여 상기 사용자 입력 디스플레이로부터 상기 사용자 출력 디스플레이를 분할하는 단계와,상기 거울 시스템의 제2 거울에서 상기 제1 거울로부터 상기 사용자 출력 디스플레이의 반사를 수신하는 단계와,상기 제2 거울로부터 상기 제2 표면으로 상기 사용자 출력 디스플레이를 투사하는 단계를 더 포함하는 방법.
- 제4항에 있어서, 상기 사용자 출력 디스플레이를 투사하는 단계는 상기 컴퓨팅 장치와 상기 제2 표면사이에 짧은 거리가 존재하는 경우에 상기 거울 시스템으로부터 커다란 이미지를 투사하는 단계를 포함하는 방법.
- 제1항에 있어서, 상기 프로젝터는 마이크로 프로젝터인 방법.
- 제1항에 있어서, 상기 제1 표면은 상기 컴퓨팅 장치의 정면에 위치하는 평면에 있고, 상기 제2 표면은 상기 컴퓨팅 장치의 뒤에 위치하는 평면에 있으며, 상기 제2 표면은 상기 제1 표면에 직교하는 방법.
- 제1항에 있어서, 상기 사용자 입력 디스플레이는 키보드 이미지를 포함하는 방법.
- 제1항에 있어서, 상기 제1 표면은 수평면이고 상기 제2 표면은 수직면인 방법.
- 제1항에 있어서, 상기 사용자 입력 디스플레이의 가상 키위에서, 가상 키 스트로크 검출 시스템의 인터셉트(intercepting) 센서에 응답하여 상기 컴퓨팅 장치로부터 오디오 피드백을 제공하는 단계를 더 포함하는 방법.
- 제1항에 있어서, 상기 사용자 입력 디스플레이의 가상 키위에서, 가상 키 스트로크 검출 시스템의 인터셉트 센서에 응답하여 상기 사용자 출력 디스플레이상에 가시적 피드백을 제공하는 단계를 더 포함하는 방법.
- 제1항에 있어서, 상기 사용자 입력 디스플레이의 가상 키위에서, 가상 키 스트로크 검출 시스템의 인터셉트 센서에 응답하여 상기 사용자 입력 디스플레이상에가시적 피드백을 제공하는 단계를 더 포함하는 방법.
- 제1항에 있어서, 상기 사용자 입력 디스플레이는 스크래치 패드의 이미지를 포함하는 방법.
- 제1항에 있어서, 상기 사용자 입력 디스플레이는 포인팅 장치의 이미지를 포함하는 방법.
- 컴퓨팅 장치용 사용자 인터페이스를 제공하는 방법에 있어서,컴퓨팅 장치의 프로젝터로부터 표면상으로 사용자 입력 디스플레이를 투사하는 단계와,상기 컴퓨팅 장치의 프로젝터로부터 상기 표면상으로 사용자 출력 디스플레이를 투사하는 단계를 포함하고, 상기 사용자 입력 디스플레이와 상기 사용자 출력 디스플레이는 단일 프로젝터로부터 상기 표면상으로 투사되는 방법.
- 제17항에 있어서, 상기 컴퓨팅 장치는 퍼베이시브 컴퓨팅 장치인 방법.
- 제17항에 있어서, 상기 프로젝터는 마이크로 프로젝터인 방법.
- 제17항에 있어서, 상기 사용자 입력 디스플레이 및 사용자 출력 디스플레이를 투사하는 상기 단계는 사용자와 컴퓨팅 장치 사이에 상기 사용자 입력 디스플레이를 투사하고 상기 사용자 입력 디스플레이와 컴퓨팅 장치 사이에 상기 사용자 출력 디스플레이를 투사하는 단계를 포함하는 방법.
- 제17항에 있어서, 상기 사용자 입력 디스플레이의 가상 키위에서, 가상 키 스트로크 검출 시스템의 인터셉트 센서에 응답하여 상기 컴퓨팅 장치로부터 오디오 피드백을 제공하는 단계를 더 포함하는 방법.
- 제17항에 있어서, 상기 사용자 입력 디스플레이의 가상 키위에서, 가상 키 스트로크 검출 시스템의 인터셉트 센서에 응답하여 상기 사용자 출력 디스플레이상에 가시적 피드백을 제공하는 단계를 더 포함하는 방법.
- 제17항에 있어서, 상기 사용자 입력 디스플레이의 가상 키위에서, 가상 키 스트로크 검출 시스템의 인터셉트 센서에 응답하여 상기 사용자 입력 디스플레이상에 가시적 피드백을 제공하는 단계를 더 포함하는 방법.
- 이미지를 투사하는 프로젝터와,상기 프로젝터와 일치하게 배치된 거울 시스템 - 상기 거울 시스템은 상기 프로젝터로부터 이미지의 일부를 반사하고, 상기 이미지의 비-반사된 부분을 제1 표면에 투사하고 상기 이미지의 반사된 부분을 제2 표면으로 반사하며, 상기 투사된 이미지의 반사 부분과 상기 투사된 이미지의 비-반사 부분은 컴퓨팅 장치용 가상 사용자 인터페이스를 제공함-을 포함하는 컴퓨팅 장치.
- 제24항에 있어서, 상기 컴퓨팅 장치는 퍼베이시브 컴퓨팅 장치인 장치.
- 제24항에 있어서, 상기 거울 시스템은,상기 프로젝터로부터 이미지의 일부를 인터셉트하는 제1 거울과,상기 제1 거울로부터 상기 이미지의 반사된 부분을 수신하고 상기 이미지의 반사된 부분을 제2 표면으로 투사하는 제2 거울을 포함하는 컴퓨팅 장치.
- 제24항에 있어서, 상기 프로젝터는 마이크로 프로젝터인 컴퓨팅 장치.
- 제24항에 있어서, 상기 이미지의 비-반사 부분은 상기 퍼베이시브 컴퓨팅 장치와 사용자 사이의 상기 컴퓨팅 장치의 정면에 투사되는 컴퓨팅 장치.
- 제24항에 있어서, 상기 이미지의 반사된 부분은 상기 컴퓨팅 장치의 뒤에 투사되는 컴퓨팅 장치.
- 제24항에 있어서, 상기 제1 표면은 상기 제2 표면에 수직인 컴퓨팅 장치.
- 제24항에 있어서, 상기 투사 이미지의 비-반사 부분은 가상 키보드 이미지를 포함하는 컴퓨팅 장치.
- 제24항에 있어서, 상기 투사 이미지의 반사 부분은 사용자 출력 디스플레이를 포함하는 컴퓨팅 장치.
- 제24항에 있어서, 키 피드백 메커니즘을 더 포함하는 컴퓨팅 장치.
- 컴퓨팅 장치로부터 표면에 사용자 입력 디스플레이와 사용자 출력 디스플레이를 포함하는 이미지를 투사하는 프로젝터를 포함하는 컴퓨팅 장치.
- 제34항에 있어서, 상기 컴퓨팅 장치는 퍼베이시브 컴퓨팅 장치인 컴퓨팅 장치.
- 제34항에 있어서, 상기 프로젝터는 마이크로 프로젝터인 컴퓨팅 장치.
- 제34항에 있어서, 상기 사용자 입력 디스플레이는 사용자와 컴퓨팅 장치사이에 배치되고, 상기 사용자 출력 디스플레이는 상기 사용자 입력 디스플레이와 상기컴퓨팅 장치 사이에 배치되는 컴퓨팅 장치.
Applications Claiming Priority (2)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
US10/622,656 | 2003-07-18 | ||
US10/622,656 US7173605B2 (en) | 2003-07-18 | 2003-07-18 | Method and apparatus for providing projected user interface for computing device |
Publications (2)
Publication Number | Publication Date |
---|---|
KR20050009668A true KR20050009668A (ko) | 2005-01-25 |
KR100648368B1 KR100648368B1 (ko) | 2006-11-23 |
Family
ID=34063240
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
KR1020040053394A KR100648368B1 (ko) | 2003-07-18 | 2004-07-09 | 컴퓨팅 장치용 투사식 사용자 인터페이스를 제공하기 위한방법 및 장치 |
Country Status (5)
Country | Link |
---|---|
US (1) | US7173605B2 (ko) |
JP (1) | JP4158917B2 (ko) |
KR (1) | KR100648368B1 (ko) |
CN (1) | CN1284074C (ko) |
TW (1) | TWI357591B (ko) |
Cited By (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
KR101385263B1 (ko) * | 2012-08-23 | 2014-04-16 | 주식회사 셀루온 | 가상 키보드를 위한 시스템 및 방법 |
Families Citing this family (74)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO2005069114A1 (ja) * | 2004-01-15 | 2005-07-28 | Vodafone K.K. | 移動体通信端末 |
US20050273201A1 (en) * | 2004-06-06 | 2005-12-08 | Zukowski Deborra J | Method and system for deployment of sensors |
TW200627244A (en) * | 2005-01-17 | 2006-08-01 | Era Optoelectronics Inc | Data input device |
EP1696306A1 (de) * | 2005-02-25 | 2006-08-30 | Siemens Aktiengesellschaft | Mobiles Endgerät mit skalierbarer Anzeige |
US20070063979A1 (en) * | 2005-09-19 | 2007-03-22 | Available For Licensing | Systems and methods to provide input/output for a portable data processing device |
KR100756521B1 (ko) | 2006-05-03 | 2007-09-10 | 포텍마이크로시스템(주) | 유아 교육용 프로젝션 키보드 시스템 및 이를 이용한 키입력 방법 |
JP4941887B2 (ja) * | 2006-07-26 | 2012-05-30 | 東芝ホームテクノ株式会社 | 表示装置 |
KR100925720B1 (ko) * | 2007-02-20 | 2009-11-10 | 재단법인대구경북과학기술원 | 듀얼 모드 기능을 갖는 투사형 디스플레이 장치 |
US8297758B2 (en) | 2007-02-20 | 2012-10-30 | Daegu Gyeongbuk Institute Of Science And Technology | Multimedia player displaying 2 projection images |
US8963828B2 (en) * | 2007-06-04 | 2015-02-24 | Shimane Prefectural Government | Information inputting device, information outputting device and method |
JP5214223B2 (ja) * | 2007-11-15 | 2013-06-19 | 船井電機株式会社 | プロジェクタ |
US20090129048A1 (en) * | 2007-11-20 | 2009-05-21 | Mitac Technology Corp. | Brightness adjustable keyboard illuminating module of electronic device |
CN101581951B (zh) * | 2008-05-14 | 2011-11-09 | 富准精密工业(深圳)有限公司 | 电脑 |
US20090313153A1 (en) * | 2008-06-17 | 2009-12-17 | Searete Llc, A Limited Liability Corporation Of The State Of Delaware. | Systems associated with projection system billing |
US20090313151A1 (en) * | 2008-06-17 | 2009-12-17 | Searete Llc, A Limited Liability Corporation Of The State Of Delaware | Methods associated with projection system billing |
US20110176119A1 (en) * | 2008-06-17 | 2011-07-21 | Searete Llc, A Limited Liability Corporation Of The State Of Delaware | Methods and systems for projecting in response to conformation |
US8267526B2 (en) * | 2008-06-17 | 2012-09-18 | The Invention Science Fund I, Llc | Methods associated with receiving and transmitting information related to projection |
US8641203B2 (en) * | 2008-06-17 | 2014-02-04 | The Invention Science Fund I, Llc | Methods and systems for receiving and transmitting signals between server and projector apparatuses |
US20100066689A1 (en) * | 2008-06-17 | 2010-03-18 | Jung Edward K Y | Devices related to projection input surfaces |
US20090310103A1 (en) * | 2008-06-17 | 2009-12-17 | Searete Llc, A Limited Liability Corporation Of The State Of Delaware | Methods and systems for receiving information associated with the coordinated use of two or more user responsive projectors |
US8384005B2 (en) * | 2008-06-17 | 2013-02-26 | The Invention Science Fund I, Llc | Systems and methods for selectively projecting information in response to at least one specified motion associated with pressure applied to at least one projection surface |
US8936367B2 (en) * | 2008-06-17 | 2015-01-20 | The Invention Science Fund I, Llc | Systems and methods associated with projecting in response to conformation |
US8608321B2 (en) * | 2008-06-17 | 2013-12-17 | The Invention Science Fund I, Llc | Systems and methods for projecting in response to conformation |
US8403501B2 (en) | 2008-06-17 | 2013-03-26 | The Invention Science Fund, I, LLC | Motion responsive devices and systems |
US20090310039A1 (en) * | 2008-06-17 | 2009-12-17 | Searete Llc, A Limited Liability Corporation Of The State Of Delaware | Methods and systems for user parameter responsive projection |
US20100066983A1 (en) * | 2008-06-17 | 2010-03-18 | Jun Edward K Y | Methods and systems related to a projection surface |
US20090310038A1 (en) * | 2008-06-17 | 2009-12-17 | Searete Llc, A Limited Liability Corporation Of The State Of Delaware | Projection in response to position |
US8820939B2 (en) * | 2008-06-17 | 2014-09-02 | The Invention Science Fund I, Llc | Projection associated methods and systems |
US20090310040A1 (en) * | 2008-06-17 | 2009-12-17 | Searete Llc, A Limited Liability Corporation Of The State Of Delaware | Methods and systems for receiving instructions associated with user parameter responsive projection |
US8262236B2 (en) * | 2008-06-17 | 2012-09-11 | The Invention Science Fund I, Llc | Systems and methods for transmitting information associated with change of a projection surface |
US20090312854A1 (en) * | 2008-06-17 | 2009-12-17 | Searete Llc, A Limited Liability Corporation Of The State Of Delaware | Methods and systems for transmitting information associated with the coordinated use of two or more user responsive projectors |
US20090310098A1 (en) * | 2008-06-17 | 2009-12-17 | Searete Llc, A Limited Liability Corporation Of The State Of Delaware | Methods and systems for projecting in response to conformation |
US8308304B2 (en) * | 2008-06-17 | 2012-11-13 | The Invention Science Fund I, Llc | Systems associated with receiving and transmitting information related to projection |
US8733952B2 (en) * | 2008-06-17 | 2014-05-27 | The Invention Science Fund I, Llc | Methods and systems for coordinated use of two or more user responsive projectors |
US8723787B2 (en) * | 2008-06-17 | 2014-05-13 | The Invention Science Fund I, Llc | Methods and systems related to an image capture projection surface |
US8944608B2 (en) * | 2008-06-17 | 2015-02-03 | The Invention Science Fund I, Llc | Systems and methods associated with projecting in response to conformation |
US20090309826A1 (en) * | 2008-06-17 | 2009-12-17 | Searete Llc, A Limited Liability Corporation Of The State Of Delaware | Systems and devices |
US7967451B2 (en) * | 2008-06-27 | 2011-06-28 | Microsoft Corporation | Multi-directional image displaying device |
KR101548997B1 (ko) * | 2008-09-03 | 2015-09-01 | 엘지전자 주식회사 | 투사 표시 장치 |
CN101685250B (zh) * | 2008-09-24 | 2012-09-19 | 深圳富泰宏精密工业有限公司 | 便携式电子装置 |
GB2466497B (en) | 2008-12-24 | 2011-09-14 | Light Blue Optics Ltd | Touch sensitive holographic displays |
JP5396975B2 (ja) * | 2009-04-01 | 2014-01-22 | 船井電機株式会社 | 画像表示装置 |
JP5646148B2 (ja) * | 2009-04-07 | 2014-12-24 | 船井電機株式会社 | プロジェクタ |
JP2010244484A (ja) | 2009-04-10 | 2010-10-28 | Funai Electric Co Ltd | 画像表示装置、画像表示方法および画像表示プログラム |
TWI371681B (en) * | 2009-09-18 | 2012-09-01 | Primax Electronics Ltd | Notebook computer with multi-image capture function |
GB2479858A (en) * | 2010-03-23 | 2011-11-02 | Secretpc Ltd | Projector with virtual keyboard |
TWI423096B (zh) * | 2010-04-01 | 2014-01-11 | Compal Communication Inc | 具可觸控投影畫面之投影系統 |
GB2479720A (en) * | 2010-04-17 | 2011-10-26 | Brian Maxdell Miller | Handheld computing device with projected Input Output interfaces. |
HK1147905A2 (en) * | 2010-06-30 | 2011-08-19 | Chi Ching Lee | System and method for virtual touch sensing |
JP5601083B2 (ja) | 2010-08-16 | 2014-10-08 | ソニー株式会社 | 情報処理装置、情報処理方法及びプログラム |
DE112010005854T5 (de) * | 2010-10-05 | 2013-08-14 | Hewlett-Packard Development Company, L.P. | Eingeben eines Befehls |
JP5609566B2 (ja) * | 2010-11-10 | 2014-10-22 | 船井電機株式会社 | プロジェクタ |
KR20120051831A (ko) | 2010-11-15 | 2012-05-23 | 삼성전자주식회사 | 프로젝터 및 그 구동 방법 |
US9035940B2 (en) * | 2011-03-08 | 2015-05-19 | Nokia Corporation | Apparatus and associated methods |
CN102693066B (zh) * | 2011-03-25 | 2015-05-27 | 国基电子(上海)有限公司 | 触控式电子装置及其虚拟键盘操作方法 |
US8228315B1 (en) | 2011-07-12 | 2012-07-24 | Google Inc. | Methods and systems for a virtual input device |
US9069164B2 (en) | 2011-07-12 | 2015-06-30 | Google Inc. | Methods and systems for a virtual input device |
US9030487B2 (en) * | 2011-08-01 | 2015-05-12 | Lg Electronics Inc. | Electronic device for displaying three-dimensional image and method of using the same |
JP2013061598A (ja) * | 2011-09-15 | 2013-04-04 | Funai Electric Co Ltd | プロジェクタおよびプロジェクタ機能を有する電子機器 |
CN103376889A (zh) * | 2012-04-16 | 2013-10-30 | 黄泽艺 | 虚拟投影技术 |
US20150169134A1 (en) * | 2012-05-20 | 2015-06-18 | Extreme Reality Ltd. | Methods circuits apparatuses systems and associated computer executable code for providing projection based human machine interfaces |
US9329679B1 (en) * | 2012-08-23 | 2016-05-03 | Amazon Technologies, Inc. | Projection system with multi-surface projection screen |
CN104865778A (zh) * | 2014-02-24 | 2015-08-26 | 联想(北京)有限公司 | 一种投影装置及电子设备 |
DE102014207959A1 (de) * | 2014-04-28 | 2015-10-29 | Robert Bosch Gmbh | Programmierbare Bedienflächen |
CN104461004B (zh) * | 2014-12-12 | 2018-04-10 | 北京奇宝科技有限公司 | 一种可穿戴智能设备 |
CN105045406A (zh) * | 2015-09-12 | 2015-11-11 | 侯明鑫 | 一种光投影键盘和鼠标 |
CN106125923B (zh) | 2016-06-22 | 2019-05-17 | 京东方科技集团股份有限公司 | 电子设备、输入输出装置及其使用方法 |
US10650621B1 (en) | 2016-09-13 | 2020-05-12 | Iocurrents, Inc. | Interfacing with a vehicular controller area network |
JPWO2018207235A1 (ja) * | 2017-05-08 | 2020-03-12 | 株式会社ネットアプリ | 入出力システム、スクリーンセット、入出力方法、及び、プログラム |
KR102464366B1 (ko) * | 2017-07-31 | 2022-11-07 | 삼성전자주식회사 | 메타 프로젝터 및 이를 포함하는 전자 장치 |
WO2019056353A1 (zh) * | 2017-09-25 | 2019-03-28 | 深圳传音通讯有限公司 | 一种虚拟键盘的实现方法及系统 |
CN110032028B (zh) * | 2019-04-23 | 2021-03-12 | 江苏爱立克信息科技有限公司 | 一种虚拟键盘的摄像头 |
CN115729380A (zh) * | 2021-08-28 | 2023-03-03 | 华为技术有限公司 | 显示装置以及电子设备 |
CN117492192A (zh) * | 2023-12-04 | 2024-02-02 | 宜宾市极米光电有限公司 | 投影镜头 |
Family Cites Families (8)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US4575722A (en) * | 1982-05-05 | 1986-03-11 | Litton Systems, Inc. | Magneto-optic display |
US6266048B1 (en) | 1998-08-27 | 2001-07-24 | Hewlett-Packard Company | Method and apparatus for a virtual display/keyboard for a PDA |
US6323942B1 (en) | 1999-04-30 | 2001-11-27 | Canesta, Inc. | CMOS-compatible three-dimensional image sensor IC |
US6614422B1 (en) * | 1999-11-04 | 2003-09-02 | Canesta, Inc. | Method and apparatus for entering data using a virtual input device |
FI113094B (fi) | 2000-12-15 | 2004-02-27 | Nokia Corp | Parannettu menetelmä ja järjestely toiminnon aikaansaamiseksi elektronisessa laitteessa ja elektroninen laite |
US7071924B2 (en) | 2002-01-10 | 2006-07-04 | International Business Machines Corporation | User input method and apparatus for handheld computers |
US6937210B1 (en) * | 2002-11-06 | 2005-08-30 | The United States Of America As Represented By The Secretary Of Commerce | Projecting images on a sphere |
TW594549B (en) * | 2002-12-31 | 2004-06-21 | Ind Tech Res Inst | Device and method for generating virtual keyboard/display |
-
2003
- 2003-07-18 US US10/622,656 patent/US7173605B2/en not_active Expired - Fee Related
-
2004
- 2004-07-07 JP JP2004200033A patent/JP4158917B2/ja not_active Expired - Fee Related
- 2004-07-09 TW TW093120696A patent/TWI357591B/zh not_active IP Right Cessation
- 2004-07-09 KR KR1020040053394A patent/KR100648368B1/ko not_active IP Right Cessation
- 2004-07-16 CN CNB2004100712816A patent/CN1284074C/zh not_active Expired - Fee Related
Cited By (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
KR101385263B1 (ko) * | 2012-08-23 | 2014-04-16 | 주식회사 셀루온 | 가상 키보드를 위한 시스템 및 방법 |
Also Published As
Publication number | Publication date |
---|---|
JP2005038422A (ja) | 2005-02-10 |
JP4158917B2 (ja) | 2008-10-01 |
TW200521952A (en) | 2005-07-01 |
CN1284074C (zh) | 2006-11-08 |
CN1577235A (zh) | 2005-02-09 |
US20050012721A1 (en) | 2005-01-20 |
KR100648368B1 (ko) | 2006-11-23 |
TWI357591B (en) | 2012-02-01 |
US7173605B2 (en) | 2007-02-06 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
KR100648368B1 (ko) | 컴퓨팅 장치용 투사식 사용자 인터페이스를 제공하기 위한방법 및 장치 | |
US7433179B2 (en) | Electronic apparatus having universal human interface | |
US6710770B2 (en) | Quasi-three-dimensional method and apparatus to detect and localize interaction of user-object and virtual transfer device | |
EP1336172B1 (en) | Quasi-three-dimensional method and apparatus to detect and localize interaction of user-object and virtual transfer device | |
EP2548103B1 (en) | Pointer device to navigate a projected user interface | |
KR101108743B1 (ko) | 홀로그래픽 사용자 인터페이스 통신을 위한 방법 및 장치 | |
US20080018591A1 (en) | User Interfacing | |
US20120194738A1 (en) | Dual mode projection docking device for portable electronic devices | |
US20170249015A1 (en) | Gesture based manipulation of three-dimensional images | |
US9052583B2 (en) | Portable electronic device with multiple projecting functions | |
JPH0862722A (ja) | スクリーン一体型電子机 | |
US9946333B2 (en) | Interactive image projection | |
US11619973B2 (en) | Mobile device display and input expansion apparatus | |
WO2012100660A1 (en) | Dual mode projection docking device for portable electronic devices | |
CN107979748A (zh) | 投影机、投影系统以及影像投影方法 | |
US20080111793A1 (en) | Method and apparatus for implementing magnification and extension of keypads using a dynamic touch screen | |
TWM408047U (en) | Display structure | |
KR200350864Y1 (ko) | 프로젝터형 키오스크 | |
WO2019056353A1 (zh) | 一种虚拟键盘的实现方法及系统 | |
TW201437848A (zh) | 電子裝置及其控制方法 | |
JP2001290583A (ja) | 座標入力/検出装置及び電子黒板システム |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A201 | Request for examination | ||
E701 | Decision to grant or registration of patent right | ||
GRNT | Written decision to grant | ||
FPAY | Annual fee payment |
Payment date: 20101102 Year of fee payment: 5 |
|
LAPS | Lapse due to unpaid annual fee |