KR20200081718A - 홀로그램 기반의 문자 인식 방법 및 그 장치 - Google Patents

홀로그램 기반의 문자 인식 방법 및 그 장치 Download PDF

Info

Publication number
KR20200081718A
KR20200081718A KR1020180171529A KR20180171529A KR20200081718A KR 20200081718 A KR20200081718 A KR 20200081718A KR 1020180171529 A KR1020180171529 A KR 1020180171529A KR 20180171529 A KR20180171529 A KR 20180171529A KR 20200081718 A KR20200081718 A KR 20200081718A
Authority
KR
South Korea
Prior art keywords
specific
finger
representative
character
movement
Prior art date
Application number
KR1020180171529A
Other languages
English (en)
Other versions
KR102207067B1 (ko
Inventor
이진우
Original Assignee
이진우
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 이진우 filed Critical 이진우
Priority to KR1020180171529A priority Critical patent/KR102207067B1/ko
Priority to US16/727,001 priority patent/US11244138B2/en
Publication of KR20200081718A publication Critical patent/KR20200081718A/ko
Application granted granted Critical
Publication of KR102207067B1 publication Critical patent/KR102207067B1/ko

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/017—Gesture based interaction, e.g. based on a set of recognized hand gestures
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/10—Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
    • G06V40/12—Fingerprints or palmprints
    • G06V40/1335—Combining adjacent partial images (e.g. slices) to create a composite input or reference pattern; Tracking a sweeping finger movement
    • G—PHYSICS
    • G03—PHOTOGRAPHY; CINEMATOGRAPHY; ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ELECTROGRAPHY; HOLOGRAPHY
    • G03H—HOLOGRAPHIC PROCESSES OR APPARATUS
    • G03H1/00—Holographic processes or apparatus using light, infrared or ultraviolet waves for obtaining holograms or for obtaining an image from them; Details peculiar thereto
    • G03H1/0005—Adaptation of holography to specific applications
    • G—PHYSICS
    • G03—PHOTOGRAPHY; CINEMATOGRAPHY; ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ELECTROGRAPHY; HOLOGRAPHY
    • G03H—HOLOGRAPHIC PROCESSES OR APPARATUS
    • G03H1/00—Holographic processes or apparatus using light, infrared or ultraviolet waves for obtaining holograms or for obtaining an image from them; Details peculiar thereto
    • G03H1/22—Processes or apparatus for obtaining an optical image from holograms
    • G—PHYSICS
    • G03—PHOTOGRAPHY; CINEMATOGRAPHY; ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ELECTROGRAPHY; HOLOGRAPHY
    • G03H—HOLOGRAPHIC PROCESSES OR APPARATUS
    • G03H1/00—Holographic processes or apparatus using light, infrared or ultraviolet waves for obtaining holograms or for obtaining an image from them; Details peculiar thereto
    • G03H1/22—Processes or apparatus for obtaining an optical image from holograms
    • G03H1/2249—Holobject properties
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/011—Arrangements for interaction with the human body, e.g. for user immersion in virtual reality
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/018—Input/output arrangements for oriental characters
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/02—Input arrangements using manually operated switches, e.g. using keyboards or dials
    • G06F3/023—Arrangements for converting discrete items of information into a coded form, e.g. arrangements for interpreting keyboard generated codes as alphanumeric codes, operand codes or instruction codes
    • G06F3/0233—Character input methods
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0484—Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range
    • G06F3/0486—Drag-and-drop
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0487—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser
    • G06F3/0488—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0487—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser
    • G06F3/0488—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures
    • G06F3/04886—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures by partitioning the display area of the touch-screen or the surface of the digitising tablet into independently controllable areas, e.g. virtual keyboards or menus
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/20—Movements or behaviour, e.g. gesture recognition
    • G06V40/28—Recognition of hand or arm movements, e.g. recognition of deaf sign language
    • G—PHYSICS
    • G03—PHOTOGRAPHY; CINEMATOGRAPHY; ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ELECTROGRAPHY; HOLOGRAPHY
    • G03H—HOLOGRAPHIC PROCESSES OR APPARATUS
    • G03H1/00—Holographic processes or apparatus using light, infrared or ultraviolet waves for obtaining holograms or for obtaining an image from them; Details peculiar thereto
    • G03H1/0005—Adaptation of holography to specific applications
    • G03H2001/0061—Adaptation of holography to specific applications in haptic applications when the observer interacts with the holobject
    • G—PHYSICS
    • G03—PHOTOGRAPHY; CINEMATOGRAPHY; ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ELECTROGRAPHY; HOLOGRAPHY
    • G03H—HOLOGRAPHIC PROCESSES OR APPARATUS
    • G03H1/00—Holographic processes or apparatus using light, infrared or ultraviolet waves for obtaining holograms or for obtaining an image from them; Details peculiar thereto
    • G03H1/22—Processes or apparatus for obtaining an optical image from holograms
    • G03H1/2249—Holobject properties
    • G03H2001/2252—Location of the holobject
    • G03H2001/226—Virtual or real

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • General Engineering & Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Physics & Mathematics (AREA)
  • Human Computer Interaction (AREA)
  • Multimedia (AREA)
  • Social Psychology (AREA)
  • Psychiatry (AREA)
  • Health & Medical Sciences (AREA)
  • General Health & Medical Sciences (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • User Interface Of Digital Computer (AREA)
  • Input From Keyboards Or The Like (AREA)

Abstract

본 발명에 따른 홀로그램 기반의 문자 인식 방법은, 각 손가락에 각각 하나의 대표문자가 매칭되고, 각 대표문자에 적어도 하나 이상의 문자 객체를 포함하는 문자 그룹이 매칭되며, 특정 손가락의 제 1 움직임이 감지되면 상기 특정 손가락에 매칭된 특정 대표문자가 배치되고, 그 주변에 상기 특정 대표문자에 매칭된 특정 문자 그룹에 속하는 복수의 문자 객체가 배치되는 홀로그램 영상을 공간상에 표출시키는 단계와, 상기 특정 손가락의 제 2 움직임이 감지되면 상기 특정 대표문자를 입력으로 인식하는 단계와, 상기 특정 손가락이 복수의 문자 객체 중 하나의 문자 객체로 드래그 또는 이동된 후 상기 특정 손가락의 상기 제 2 움직임이 감지되면 상기 하나의 문자 객체를 입력으로 인식하는 단계를 포함할 수 있다.

Description

홀로그램 기반의 문자 인식 방법 및 그 장치{METHOD AND APPARATUS FOR RECOGNIZING CHARACTER BASED ON HOLOGRAM}
본 발명은 문자 인식 기법에 관한 것으로, 더욱 상세하게는 각 손가락에 대표문자 또는 문자 객체를 매칭시킨 각 손가락의 동작 인식을 홀로그램 영상에 연계시킴으로써 입력 문자를 인식할 수 있는 홀로그램 기반의 문자 인식 방법 및 그 장치에 관한 것이다.
알려진 바와 같이, 휴대 단말(예컨대, 스마트워치, 휴대폰, 스마트폰, 스마트기기, 네비게이션, 워치 폰, 웨어러블 기기 등) 등과 같은 대부분의 휴대용 정보 기기는 터치식의 소형 키패드(터치 패널)를 구비하는 것이 일반적인데, 이러한 소형 키패드는 종래의 단문(SMS) 입력뿐만 아니라 메모, 휴대용 정보 기기를 이용한 각종 데이터 처리 등 활용 범위를 점점 넓혀가고 있다.
현재, 소형 키패드를 이용한 문자 입력 방식은 크게 쿼티 키보드 방식과 3X4 키보드 또는 이의 변형된 방식을 이용한 방식으로 나눌 수 있는데, 쿼티 자판은 모든 문자를 자판에 표시하여 자판을 1번 터치로 입력할 수 있는 장점이 있으나 한 문자에 할당되는 자판의 면적이 작아 입력 오류가 많이 발생하고 있다.
특히, 손을 사용하는 것이 다소 불편한 지체 장애인들의 경우에는 소형 키패드를 이용한 문자 입력이 매우 어렵다는 문제가 있다.
한국공개실용신안 제20-2008-0003343호(공개일 : 2008. 08. 18.)
본 발명은 각 손가락에 대표문자 또는 대표 객체를 매칭 시킨 각 손가락의 동작 인식을 홀로그램 영상에 연계시킴으로써 입력 문자를 인식할 수 있는 홀로그램 기반의 문자 인식 방법 및 그 장치를 제공하고자 한다.
본 발명은 홀로그램 기반의 문자 인식 방법을 프로세서가 수행하도록 하는 컴퓨터 프로그램이 저장된 컴퓨터 판독 가능한 기록매체를 제공하고자 한다.
본 발명은, 홀로그램 기반의 문자 인식 방법을 프로세서가 수행할 수 있도록 컴퓨터 판독 가능한 기록매체에 저장된 컴퓨터 프로그램을 제공하고자 한다.
본 발명이 해결하고자 하는 과제는 상기에서 언급한 것으로 제한되지 않으며, 언급되지 않은 또 다른 해결하고자 하는 과제는 아래의 기재들로부터 본 발명이 속하는 통상의 지식을 가진 자에 의해 명확하게 이해될 수 있을 것이다.
본 발명은, 일 관점에 따라, 각 손가락에 각각 하나의 대표문자가 매칭되고, 각 대표문자에 적어도 하나 이상의 문자 객체를 포함하는 문자 그룹이 매칭되며, 특정 손가락의 제 1 움직임이 감지되면 상기 특정 손가락에 매칭된 특정 대표문자가 중앙에 배치되고, 그 주변에 상기 특정 대표문자에 매칭된 특정 문자 그룹에 속하는 복수의 문자 객체가 배치되는 홀로그램 영상을 공간상에 표출시키는 단계와, 상기 특정 손가락의 제 2 움직임이 감지되면 상기 특정 대표문자를 입력으로 인식하는 단계와, 상기 특정 손가락이 복수의 문자 객체 중 하나의 문자 객체로 드래그 또는 이동된 후 상기 특정 손가락의 상기 제 2 움직임이 감지되면 상기 하나의 문자 객체를 입력으로 인식하는 단계를 포함하는 홀로그램 기반의 문자 인식 방법을 제공할 수 있다.
본 발명의 상기 제 1 움직임이 상기 특정 손가락의 구부림 움직임일 때, 상기 제 2 움직임은 상기 특정 손가락의 펴짐 움직임일 수 있다.
본 발명은, 상기 제 2 움직임이 감지될 때 홀로그램 색의 변화 또는 요철의 변화를 통해 입력으로 인식되었음을 표시하는 단계를 더 포함할 수 있다.
본 발명의 상기 홀로그램 영상은, 원형 구조 또는 사각형 구조일 수 있다.
본 발명의 상기 제 2 움직임에 의해 입력으로 인식된 상기 특정 대표문자 또는 상기 하나의 문자 객체는, 상기 홀로그램 영상의 소정 부분에 배치된 문자 출력 영역에 표출될 수 있다.
본 발명은, 상기 각 손가락 중 어느 한 손가락에 대표 기능키가 매칭 되고, 상기 대표 기능키에 적어도 하나 이상의 기능키 객체를 포함하는 기능키 그룹이 매칭 될 수 있다.
본 발명은, 다른 관점에 따라, 각 손가락에 각각 하나의 대표문자가 매칭되고, 각 대표문자에 적어도 하나 이상의 문자 객체를 포함하는 문자 그룹이 매칭되며, 특정 손가락의 제 1 움직임이 감지되면 상기 특정 손가락에 매칭된 특정 대표문자가 중앙에 배치되고, 그 주변에 상기 특정 대표문자에 매칭된 특정 문자 그룹에 속하는 복수의 문자 객체가 배치되는 홀로그램 영상을 공간상에 표출시키는 단계와, 상기 특정 손가락의 제 2 움직임이 감지되면 상기 특정 대표문자를 입력으로 인식하는 단계와, 상기 특정 손가락이 복수의 문자 객체 중 하나의 문자 객체로 드래그 또는 이동된 후 상기 특정 손가락의 상기 제 2 움직임이 감지되면 상기 하나의 문자 객체를 입력으로 인식하는 단계를 포함하는 홀로그램 기반의 문자 인식 방법을 프로세서가 수행하도록 하는 컴퓨터 프로그램이 저장된 컴퓨터 판독 가능한 기록매체를 제공할 수 있다.
본 발명은, 또 다른 관점에 따라, 각 손가락에 각각 하나의 대표문자가 매칭되고, 각 대표문자에 적어도 하나 이상의 문자 객체를 포함하는 문자 그룹이 매칭되며, 특정 손가락의 제 1 움직임이 감지되면 상기 특정 손가락에 매칭된 특정 대표문자가 중앙에 배치되고, 그 주변에 상기 특정 대표문자에 매칭된 특정 문자 그룹에 속하는 복수의 문자 객체가 배치되는 홀로그램 영상을 공간상에 표출시키는 단계와, 상기 특정 손가락의 제 2 움직임이 감지되면 상기 특정 대표문자를 입력으로 인식하는 단계와, 상기 특정 손가락이 복수의 문자 객체 중 하나의 문자 객체로 드래그 또는 이동된 후 상기 특정 손가락의 상기 제 2 움직임이 감지되면 상기 하나의 문자 객체를 입력으로 인식하는 단계를 포함하는 홀로그램 기반의 문자 인식 방법을 프로세서가 수행할 수 있도록 컴퓨터 판독 가능한 기록매체에 저장된 컴퓨터 프로그램을 제공할 수 있다.
본 발명은, 또 다른 관점에 따라, 각 손가락에 각각 하나의 대표문자가 매칭되고, 각 대표문자에 적어도 하나 이상의 문자 객체를 포함하는 문자 그룹이 매칭되며, 상기 각 손가락 중 특정 손가락의 움직임 또는 드래그를 감지하는 동작 인식부와, 상기 특정 손가락의 제 1 움직임이 감지되면 상기 특정 손가락에 매칭된 특정 대표문자가 중앙에 배치되고, 그 주변에 상기 특정 대표문자에 매칭된 특정 문자 그룹에 속하는 복수의 문자 객체가 배치되는 홀로그램 영상을 공간상에 표출시키는 가상 화면 표출부와, 상기 특정 손가락의 제 2 움직임이 감지되면 상기 특정 대표문자를 입력으로 인식하고, 상기 특정 손가락이 상기 복수의 문자 객체 중 하나의 문자 객체로 드래그 또는 이동된 후 상기 특정 손가락의 상기 제 2 움직임이 감지되면 상기 하나의 문자 객체를 입력으로 인식하는 객체 인식부와, 인식된 상기 특정 대표문자 또는 상기 하나의 문자 객체를 상기 홀로그램 영상의 소정 부분에 배치된 문자 출력 영역에 표출시키는 객체 표출부를 포함하는 홀로그램 기반의 문자 인식 장치를 제공할 수 있다.
본 발명의 상기 제 1 움직임이 상기 특정 손가락의 구부림 움직임일 때, 상기 제 2 움직임은 상기 특정 손가락의 펴짐 움직임일 수 있다.
본 발명의 상기 홀로그램 영상은, 원형 구조 또는 사각형 구조일 수 있다.
본 발명은, 상기 각 손가락 중 어느 한 손가락에 대표 기능키가 매칭 되고, 상기 대표 기능키에 적어도 하나 이상의 기능키 객체를 포함하는 기능키 그룹이 매칭 될 수 있다.
본 발명은, 또 다른 관점에 따라, 각 손가락에 문자의 대표 객체와 기능키의 대표 객체가 각각 매칭되고, 상기 문자의 대표 객체에 나머지 문자 객체들을 포함하는 문자 그룹이 매칭되며, 상기 기능키의 대표 객체에 나머지 기능키 객체들을 포함하는 기능키 그룹이 매칭되고, 특정 손가락의 제 1 움직임이 감지되면 상기 특정 손가락에 매칭 된 특정 대표 객체가 중앙에 배치되고, 그 주변에 다수의 원형 고리 형상으로 구성되어 원형의 둘레에 상기 특정 대표 객체에 대응되는 나머지 객체들이 배치되는 홀로그램 영상을 공간상에 표출시키는 단계와, 상기 특정 손가락의 제 2 움직임이 감지되면 상기 특정 대표 객체를 입력으로 인식하는 단계와, 상기 특정 손가락이 상기 나머지 객체들 중 하나의 객체로 드래그 또는 이동된 후 상기 특정 손가락의 제 2 움직임이 감지되면 상기 하나의 객체를 입력으로 인식하는 단계를 포함하는 홀로그램 기반의 문자 인식 방법을 제공할 수 있다.
본 발명의 상기 문자의 대표 객체는, 서로 다른 손가락에 각각 매칭된 한글 자음의 대표 객체와 한글 모음의 대표 객체를 포함할 수 있다.
본 발명의 상기 제 1 움직임이 상기 특정 손가락의 구부림 움직임일 때, 상기 제 2 움직임은 상기 특정 손가락의 펴짐 움직임일 수 있다.
본 발명의 상기 제 2 움직임에 의해 입력으로 인식된 상기 특정 대표 객체 또는 상기 하나의 객체는, 상기 홀로그램 영상의 소정 부분에 배치된 문자 출력 영역에 표출될 수 있다.
본 발명은, 또 다른 관점에 따라, 각 손가락에 문자의 대표 객체와 기능키의 대표 객체가 각각 매칭되고, 상기 문자의 대표 객체에 나머지 문자 객체들을 포함하는 문자 그룹이 매칭되며, 상기 기능키의 대표 객체에 나머지 기능키 객체들을 포함하는 기능키 그룹이 매칭되고, 상기 각 손가락 중 특정 손가락의 움직임 또는 드래그를 감지하는 동작 인식부와, 상기 특정 손가락의 제 1 움직임이 감지되면 상기 특정 손가락에 매칭된 특정 대표 객체가 중앙에 배치되고, 그 주변에 다수의 원형 고리 형상으로 구성되어 원형의 둘레에 상기 특정 대표 객체에 대응되는 나머지 객체들이 배치되는 홀로그램 영상을 공간상에 표출시키는 가상 화면 표출부와, 상기 특정 손가락의 제 2 움직임이 감지되면 상기 특정 대표 객체를 입력으로 인식하고, 상기 특정 손가락이 상기 나머지 객체들 중 하나의 객체로 드래그 또는 이동된 후 상기 특정 손가락의 상기 제 2 움직임이 감지되면 상기 하나의 객체를 입력으로 인식하는 객체 인식부와, 인식된 상기 특정 대표 객체 또는 상기 하나의 객체를 상기 홀로그램 영상의 소정 부분에 배치된 문자 출력 영역에 표출시키는 객체 표출부를 포함하는 홀로그램 기반의 문자 인식 장치를 제공할 수 있다.
본 발명의 상기 문자의 대표 객체는, 서로 다른 손가락에 각각 매칭된 한글 자음의 대표 객체와 한글 모음의 대표 객체를 포함할 수 있다.
본 발명은, 또 다른 관점에 따라, 쿼티(쿼티) 자판을 구성하는 각 열 또는 각 행의 객체들 중 하나가 각 손가락에 각각의 대표 객체로 매칭되고, 각 대표 객체에 상기 각 열 또는 상기 각 행의 나머지 객체들을 포함하는 객체 그룹들이 각각 매칭되며, 특정 손가락의 제 1 움직임이 감지되면 상기 특정 손가락에 매칭된 특정 대표 객체와 상기 특정 대표 객체에 매칭된 객체 그룹에 속하는 복수의 객체가 쿼티 자판 형태로 배치되는 홀로그램 영상을 공간상에 표출시키는 단계와, 상기 특정 손가락의 제 2 움직임이 감지되면 상기 특정 대표 객체를 입력으로 인식하는 단계와, 상기 특정 손가락이 상기 복수의 객체 중 하나의 객체로 드래그 또는 이동된 후 상기 특정 손가락의 상기 제 2 움직임이 감지되면 상기 하나의 객체를 입력으로 인식하는 단계를 포함하는 홀로그램 기반의 문자 인식 방법을 제공할 수 있다.
본 발명의 상기 제 1 움직임이 상기 특정 손가락의 구부림 움직임일 때, 상기 제 2 움직임은 상기 특정 손가락의 펴짐 움직임일 수 있다.
본 발명의 상기 제 2 움직임에 의해 입력으로 인식된 상기 특정 대표 객체 또는 상기 하나의 객체는, 상기 홀로그램 영상의 소정 부분에 배치된 문자 출력 영역에 표출될 수 있다.
본 발명은, 또 다른 관점에 따라, 쿼티(쿼티) 자판을 구성하는 각 열 또는 각 행의 객체들 중 하나가 각 손가락에 각각의 대표 객체로 매칭되고, 각 대표 객체에 상기 각 열 또는 상기 각 행의 나머지 객체들을 포함하는 객체 그룹들이 각각 매칭되며, 상기 각 손가락 중 특정 손가락의 움직임 또는 드래그를 감지하는 동작 인식부와, 상기 특정 손가락의 제 1 움직임이 감지되면 상기 특정 손가락에 매칭된 특정 대표 객체와 상기 특정 대표 객체에 매칭 된 객체 그룹에 속하는 복수의 객체가 쿼티 자판 형태로 배치되는 홀로그램 영상을 공간상에 표출시키는 가상 화면 표출부와, 상기 특정 손가락의 제 2 움직임이 감지되면 상기 특정 대표 객체를 입력으로 인식하고, 상기 특정 손가락이 상기 복수의 객체 중 하나의 객체로 드래그 또는 이동된 후 상기 특정 손가락의 상기 제 2 움직임이 감지되면 상기 하나의 객체를 입력으로 인식하는 객체 인식부와, 인식된 상기 특정 대표 객체 또는 상기 하나의 객체를 상기 홀로그램 영상의 소정 부분에 배치된 문자 출력 영역에 표출시키는 객체 표출부를 포함하는 홀로그램 기반의 문자 인식 장치를 제공할 수 있다.
본 발명은, 또 다른 관점에 따라, 쿼티(쿼티) 자판을 구성하는 각 열의 일부의 객체들 중 하나가 왼손의 각 손가락에 각각의 대표 객체로 매칭되고, 각 대표 객체에 상기 각 열의 상기 일부의 객체들 중 나머지 객체들을 포함하는 객체 그룹들이 각각 매칭되며, 쿼티 자판을 구성하는 각 열의 다른 일부의 객체들 중 하나가 오른손의 각 손가락에 각각의 대표 객체로 매칭되고, 각 대표 객체에 상기 각 열의 상기 다른 일부의 객체들 중 나머지 객체들을 포함하는 객체 그룹들이 각각 매칭되며, 상기 왼손 또는 상기 오른손의 특정 손가락의 제 1 움직임이 감지되면 상기 특정 손가락에 매칭된 특정 대표 객체와 상기 특정 대표 객체에 매칭된 객체 그룹에 속하는 복수의 객체가 쿼티 자판 형태로 배치되는 홀로그램 영상을 공간상에 표출시키는 단계와, 상기 특정 손가락의 제 2 움직임이 감지되면 상기 특정 대표 객체를 입력으로 인식하는 단계와, 상기 특정 손가락이 상기 복수의 객체 중 하나의 객체로 드래그 또는 이동된 후 상기 특정 손가락의 상기 제 2 움직임이 감지되면 상기 하나의 객체를 입력으로 인식하는 단계를 포함하는 홀로그램 기반의 문자 인식 방법을 제공할 수 있다.
본 발명의 상기 제 1 움직임이 상기 특정 손가락의 구부림 움직임일 때, 상기 제 2 움직임은 상기 특정 손가락의 펴짐 움직임일 수 있다.
본 발명의 상기 제 2 움직임에 의해 입력으로 인식된 상기 특정 대표 객체 또는 상기 하나의 객체는, 상기 홀로그램 영상의 소정 부분에 배치된 문자 출력 영역에 표출될 수 있다.
본 발명은, 또 다른 관점에 따라, 쿼티(쿼티) 자판을 구성하는 각 열의 일부의 객체들 중 하나가 왼손의 각 손가락에 각각의 대표 객체로 매칭되고, 각 대표 객체에 상기 각 열의 상기 일부의 객체들 중 나머지 객체들을 포함하는 객체 그룹들이 각각 매칭되며, 쿼티 자판을 구성하는 상기 각 열의 다른 일부의 객체들 중 하나가 오른손의 각 손가락에 각각의 대표 객체로 매칭되고, 각 대표 객체에 상기 각 열의 상기 다른 일부의 객체들 중 나머지 객체들을 포함하는 객체 그룹들이 각각 매칭되며, 상기 왼손 또는 상기 오른손의 각 손가락 중 특정 손가락의 움직임 또는 드래그를 감지하는 동작 인식부와, 상기 특정 손가락의 제 1 움직임이 감지되면 특정 대표 객체와 상기 특정 대표 객체에 매칭된 객체 그룹에 속하는 복수의 객체가 쿼티 자판 형태로 배치되는 홀로그램 영상을 공간상에 표출시키는 가상 화면 표출부와, 상기 특정 손가락의 제 2 움직임이 감지되면 상기 특정 손가락에 매칭된 상기 특정 대표 객체를 입력으로 인식하고, 상기 특정 손가락이 상기 복수의 객체 중 하나의 객체로 드래그 또는 이동된 후 상기 특정 손가락의 상기 제 2 움직임이 감지되면 상기 하나의 객체를 입력으로 인식하는 객체 인식부와, 인식된 상기 특정 대표 객체 또는 상기 하나의 객체를 상기 홀로그램 영상의 소정 부분에 배치된 문자 출력 영역에 표출시키는 객체 표출부를 포함하는 홀로그램 기반의 문자 인식 장치를 제공할 수 있다.
본 발명의 실시예에 따르면, 각 손가락에 대표문자 또는 대표 객체를 매칭시킨 각 손가락의 동작 인식을 홀로그램 영상에 연계시켜 입력 문자를 인식함으로써, 기존의 평면상 자판이 아닌 공간상에서 상대적으로 우수한 문자 입력의 직관성을 제공함과 동시에 문자 입력의 오류 절감과 더불어 빠른 문자 입력을 실현할 수 있다.
도 1은 본 발명의 다양한 실시예에 따른 홀로그램 기반의 문자 인식 장치에 대한 블록 구성도이다.
도 2는 본 발명의 제 1 실시예에 따라 홀로그램 기반으로 문자 인식을 수행하는 주요 과정을 도시한 순서도이다.
도 3은 본 발명의 제 1 실시예에 따라 수행되는 홀로그램 기반의 쿼티(qwert) 자판 순서에 따른 한글 문자 입력에 대한 예시를 보여주는 화면 예시도이다.
도 4는 본 발명의 제 1 실시예에 따라 수행되는 홀로그램 기반의 사전적 순서에 따른 영문자 입력에 대한 예시를 보여주는 화면 예시도이다.
도 5는 본 발명의 제 2 실시예에 따라 홀로그램 기반으로 문자 인식을 수행하는 주요 과정을 도시한 순서도이다.
도 6은 본 발명의 제 2 실시예에 따라 수행되는 홀로그램 기반의 한글 문자 입력에 대한 예시를 보여주는 화면 예시도이다.
도 7은 본 발명의 제 2 실시예에 따라 수행되는 홀로그램 기반의 영문자 입력에 대한 예시를 보여주는 화면 예시도이다.
도 8은 본 발명의 제 3 실시예에 따라 홀로그램 기반으로 문자 인식을 수행하는 주요 과정을 도시한 순서도이다.
도 9 및 도 10은 본 발명의 제 3 실시예에 따라 한손으로 수행되는 홀로그램 기반의 수평 방향으로의 쿼티 문자 입력에 대한 예시를 보여주는 화면 예시도이다.
도 11은 본 발명의 제 3 실시예에 따라 수행되는 홀로그램 기반의 수직 방향으로의 쿼티 문자 입력에 대한 예시를 보여주는 화면 예시도이다.
도 12는 본 발명의 제 4 실시예에 따라 양손으로 수행되는 홀로그램 기반의 수평 방향으로의 쿼티 문자 입력에 대한 예시를 보여주는 화면 예시도이다.
도 13은 본 발명의 제 4 실시예에 따라 양손으로 수행되는 홀로그램 기반의 수직 방향으로의 쿼티 문자 입력에 대한 예시를 보여주는 화면 예시도이다.
먼저, 본 발명의 장점 및 특징, 그리고 그것들을 달성하는 방법은 첨부되는 도면과 함께 상세하게 후술되어지는 실시예들을 참조하면 명확해질 것이다. 여기에서, 본 발명은 이하에서 개시되는 실시예들에 한정되는 것이 아니라 서로 다른 다양한 형태로 구현될 수 있으며, 단지 본 실시예들은 본 발명의 개시가 완전하도록 하고, 본 발명이 속하는 기술 분야에서 통상의 지식을 가진 자가 발명의 범주를 명확하게 이해할 수 있도록 하기 위해 예시적으로 제공되는 것이므로, 본 발명의 기술적 범위는 청구항들에 의해 정의되어야 할 것이다.
아울러, 아래의 본 발명을 설명함에 있어서 공지 기능 또는 구성 등에 대한 구체적인 설명이 본 발명의 요지를 불필요하게 흐릴 수 있다고 판단되는 경우에는 그 상세한 설명을 생략할 것이다. 그리고, 후술되는 용어들은 본 발명에서의 기능을 고려하여 정의된 용어들인 것으로, 이는 사용자, 운용자 등의 의도 또는 관례 등에 따라 달라질 수 있음은 물론이다. 그러므로, 그 정의는 본 발명의 설명 전반에 걸쳐 기술되는 기술사상을 토대로 이루어져야 할 것이다.
이하, 첨부된 도면을 참조하여 본 발명의 바람직한 실시예에 대하여 상세하게 설명한다.
도 1은 본 발명의 다양한 실시예에 따른 홀로그램 기반의 문자 인식 장치에 대한 블록 구성도이다.
도 1을 참조하면, 본 발명의 다양한 실시예에 따른 홀로그램 기반의 문자 인식 장치는 동작 인식부(102), 가상 화면 표출부(104), 객체 인식부(106) 및 객체 표출부(108) 등을 포함할 수 있다.
먼저, 본 발명의 제 1 실시예에 따르면, 각 손가락에 각각 하나의 대표문자(예컨대, 'ㄱ'등)가 매칭 되고, 각 대표문자에 적어도 하나 이상의 문자 객체(예컨대, 대표문자에 사전 순서적으로 후행하는 문자 등)를 포함하는 문자 그룹이 매칭 될 수 있다.
예컨대, 한글 입력일 때, 좌측 손의 1st 손가락에 대표문자'ㄱ'을 매칭시키고, 이 대표문자에 나머지 자음들(사전 순서적으로 후행하는 ㄴ,ㄷ,ㄹ,ㅁ,ㅂ,ㅅ,ㅇ,ㅈ)을 문자 객체로서 매칭시킬 수 있고, 좌측 손의 2nd 손가락에 대표문자 'ㅏ'를 매칭시키고, 이 대표문자에 나머지 모음들(사전 순서적으로 후행하는 ㅓ,ㅗ,ㅜ,ㅡ,ㅣ)을 문자 객체로서 매칭시킬 수 있다.
또한, 좌측 손의 3rd 손가락에 자음의 격음과 경음들 또는 모음의 중모음들을 매칭시킬 수 있는데, 이것은 앞에 표출된 문자가 자음일 때 격음과 경음들로 매칭 되고, 앞에 표출된 문자가 모음일 때 중모음들로 매칭된다.
그리고, 좌측 손의 4th 손가락에 대표문자로서 숫자 '1'을 매칭시키고, 이 대표문자에 나머지 숫자들(2, 3, 4, 5, 6, 7, 8, 9, 0)을 문자 객체로서 매칭시킬 수 있고, 좌측 손의 5th 손가락에 대표문자로서 기능키 'space function'를 매칭시키고, 이 대표문자에 나머지 기능키들(예컨대, back space, enter, shift, capslock 등) 및 기호 등을 매칭시킬 수 있다.
한편, 영문 입력일 때, 좌측 손의 1st 손가락에 대표문자'a'를 매칭시키고, 이 대표문자에 일부 문자 객체(예컨대, 사전 순서적으로 후행하는 b, c, d, e, f, g, h)를 매칭시킬 수 있다.
또한, 좌측 손의 2nd 손가락에 대표문자'i'를 매칭시키고, 이 대표문자에 일부 문자 객체(예컨대, 사전 순서적으로 후행하는 j, k, l, m, n, o, p, q)를 매칭시킬 수 있다.
또한, 좌측 손의 3rd 손가락에 대표문자'r'을 매칭시키고, 이 대표문자에 일부 문자 객체(예컨대, 사전 순서적으로 후행하는 s, t, u, v, w, x, y, z)를 매칭시킬 수 있다.
그리고, 좌측 손의 4th 손가락과 5th 손가락에는 한글 입력에서와 마찬가지로 숫자와 기호 및 기능키 등을 매칭시킬 수 있다.
또한, 사전적 순서가 아니라 쿼티(쿼티) 자판을 구성하는 각 열의 객체들 중 하나가 각 손가락에 각각의 대표 객체로 매칭되고, 각 대표 객체에 각 열의 나머지 객체들을 포함하는 객체 그룹들이 각각 매칭될 수도 있다.
한편, 본 발명의 제 2 실시예에 따르면, 각 손가락에 문자의 대표 객체와 기능키의 대표 객체가 각각 매칭 되고, 문자의 대표 객체에 나머지 문자 객체들을 포함하는 문자 그룹이 매칭 되며, 기능키의 대표 객체에 나머지 기능키 객체들을 포함하는 기능키 그룹이 매칭 될 수 있다.
예컨대, 한글 입력일 때, 좌측 손의 1st 손가락에 한글 자음의 'ㄱ'을 대표 객체로 매칭시키고, 사전 순서적으로 후행하는 나머지 자음들과 모음들(나머지 객체들)을 대표 객체에 대응하는 문자 객체들로 매칭시킬 수 있다.
한편, 영문 입력일 때, 좌측 손의 2nd 손가락에 'a'를 대표 객체로 매칭시키고, 사전 순서적으로 후행하는 나머지 객체들(b ~ z)을 대표 객체에 대응하는 문자 객체들로 매칭시킬 수 있다.
또한, 문자 객체를 포함하는 원형 고리의 중앙에 사용 빈도가 높은 기능키(예를 들어 + 키: 한글의 격음, 경음, 중모음 변환키, shift 키: 영어의 대소문자 변환키)를 배치하여 입력의 효율성을 높일 수 있다.
또한, 좌측 손의 3rd 손가락과 4th 손가락에는 전술한 제 1 실시예에서와 마찬가지 숫자와 기호 및 기능키 등을 매칭시킬 수 있다.
이러한 방법으로 한글과 영문을 변환키 없이 한 손으로 동시에 입력이 가능하다.
또한, 사전적 순서가 아니라 쿼티(쿼티) 자판을 구성하는 각 열의 객체들 중 하나가 각 손가락에 각각의 대표 객체로 매칭되고, 각 대표 객체에 각 열의 나머지 객체들을 포함하는 객체 그룹들이 각각 매칭될 수도 있다.
다른 한편, 본 발명의 제 3 실시예에 따르면, 쿼티(쿼티) 자판을 구성하는 각 열 또는 각 행의 객체들 중 하나가 각 손가락에 각각의 대표 객체로 매칭 되고, 각 대표 객체에 각 열 또는 각 행의 나머지 객체들을 포함하는 객체 그룹들이 각각 매칭 될 수 있다.
예컨대, 좌측 5th 손가락에 숫자'1'을 대표 객체로 매칭시키고, 쿼티 자판 순서로 나머지 숫자 객체들(2 ~ 0)을 대표 객체에 대응하는 숫자 객체들로 매칭시킬 수 있다.
또한, 좌측 4th 손가락에 문자'ㅂ 또는 q'를 대표 객체로 매칭시키고, 쿼티 자판 순서로 나머지 문자 객체들(ㅈ ~ ㅔ 또는 w ~ p)을 대표 객체에 대응하는 문자 객체들로 매칭시킬 수 있다.
마찬가지로, 좌측 3rd 손가락에 문자'ㅁ 또는 a'를 대표 객체로 매칭시키고, 쿼티 자판 순서로 나머지 문자 객체들(ㄴ ~ ㅣ 또는 s ~ l)을 대표 객체에 대응하는 문자 객체들로 매칭시킬 수 있다.
또한, 좌측 2nd 손가락에 문자'ㅋ 또는 z'를 대표 객체로 매칭시키고, 쿼티 자판 순서로 나머지 문자 객체들(ㅌ ~ ㅡ 또는 x ~ m)을 대표 객체에 대응하는 문자 객체들로 매칭시킬 수 있다.
그리고, 좌측 1st 손가락에 기능키'shift function'을 대표 객체(대표 기능키 객체)로 매칭시키고, 쿼티 자판 순서로 나머지 기능키 객체들(예컨대, space, back space, enter, capslock 등)을 대표 객체에 대응하는 기능키 객체들로 매칭시킬 수 있다.
다른 방법으로, 쿼티(쿼티) 자판을 구성하는 각 열의 객체들 중 하나가 아니라 각 손가락에 각각 하나의 대표문자(예컨대, 'ㄱ'등)가 매칭되고, 각 대표문자에 적어도 하나 이상의 문자 객체(예컨대, 대표문자에 사전 순서적으로 후행하는 문자 등)를 포함하는 문자 그룹이 매칭되게 할 수도 있다.
다른 한편, 본 발명의 제 4 실시예에 따르면, 쿼티(쿼티) 자판을 구성하는 각 열의 일부(예컨대, 각 열의 객체 절반)의 객체들 중 하나가 왼손의 각 손가락에 각각의 대표 객체로 매칭 되고, 각 대표 객체에 각 열의 일부의 객체들 중 나머지 객체들을 포함하는 객체 그룹들이 각각 매칭 되며, 쿼티 자판을 구성하는 각 열의 다른 일부의 객체들 중 하나가 오른손의 각 손가락에 각각의 대표 객체로 매칭 되고, 각 대표 객체에 각 열의 다른 일부의 객체들 중 나머지 객체들을 포함하는 객체 그룹들이 각각 매칭 될 수 있다.
즉, 제 4 실시예에 따른 문자 인식 방법은 쿼티(쿼티) 자판 구성의 홀로그램 영상을 이용하여 양손으로 문자를 입력할 수 있는 서비스 모델이다.
예컨대, 좌측 5th 손가락에 숫자'1'을 대표 객체로 매칭시키고, 쿼티 자판 순서로 일부의 나머지 숫자 객체들(2 ~ 5)을 대표 객체에 대응하는 숫자 객체들로 매칭시키며, 우측 5th 손가락에 숫자'6'을 대표 객체로 매칭시키고, 쿼티 자판 순서로 일부의 나머지 숫자 객체들(7 ~ 0)을 대표 객체에 대응하는 숫자 객체들로 매칭시킬 수 있다.
그리고, 나머지의 좌측 및 우측 손가락(좌측 및 우측의 4th ~ 1st 손가락)에 대해서도 상술한 바와 마찬가지로 쿼티 자판의 각 열을 대략 절반으로 나누어 각 대표 객체 및 각 대표 객체에 대응하는 나머지 객체들로 매칭시킬 수 있다.
다른 방법으로, 쿼티(쿼티) 자판을 구성하는 각 열의 객체들 중 하나가 아니라 각 손가락에 각각 하나의 대표문자(예컨대, 'ㄱ'등)가 매칭되고, 각 대표문자에 적어도 하나 이상의 문자 객체(예컨대, 대표문자에 사전 순서적으로 후행하는 문자 등)를 포함하는 문자 그룹이 매칭되게 할 수도 있다.
다시 도 1을 참조하면, 동작 인식부(102)는 입체적 공간(홀로그램 영상)상에서 사용자의 각 손가
락 중 특정 손가락이 움직이는(예컨대, 손가락의 구부림 움직임, 손가락의 펴짐 움직임 등) 지의 여부를 감지하거나 혹은 특정 손가락의 드래그 발생 여부를 감지하는 등의 기능(동작 인식 기능)을 제공할 수 있는데, 이를 위해, 예컨대 카메라 센서, 초음파 센서, 적외선 센서 3차원 동작인식, 자이로스코프 센서, 멀티호버링 등을 포함할 수 있다.
다음에, 가상 화면 표출부(104)는, 본 발명의 제 1 실시예에 따라, 특정 손가락의 제 1 움직임(예컨대, 손가락의 구부림 움직임)이 감지되면 특정 손가락에 매칭 된 특정 대표문자가 중앙에 배치되고, 그 주변에 특정 대표문자에 매칭 된 특정 문자 그룹에 속하는 복수의 문자 객체가 배치되는 형태의 홀로그램 영상을 생성하여 공간상에 표출시키는 등의 기능을 제공할 수 있다.
일례로서, 도 3에 도시된 바와 같이, 왼손의 4th 손가락에 매칭 된 대표문자가 한글 자음의 'ㅂ'이라고 가정할 때, 'ㅂ'의 주변에 쿼티 자판의 ㅂ 열에 있는'ㄱ, ㄷ, ㅈ, ㅅ'의 문자 객체가 배치되는 형태의 홀로그램 영상이 임의의 공간상에 표출될 수 있다.
다른 예로서, 도 4에 도시된 바와 같이, 왼손의 4th 손가락에 매칭 된 대표문자가 영어의 'i'라고 가정할 때, 'i'의 주변에 사전적으로 후행하는'j, k, l, m, n, o, p, q'의 문자 객체가 배치되는 형태의 홀로그램 영상이 임의의 공간상에 표출될 수 있다.
또한, 가상 화면 표출부(104)는, 본 발명의 제 2 실시예에 따라, 특정 손가락의 제 1 움직임(예컨대, 손가락의 구부림 움직임)이 감지되면 특정 손가락에 매칭 된 특정 대표 객체가 중앙에 배치되고, 그 주변에 다수의 원형 고리 형상으로 구성되어 원형의 둘레에 특정 대표 객체에 대응되는 나머지 객체들이 배치되는 홀로그램 영상을 생성하여 공간상에 표출시키는 등의 기능을 제공할 수 있다.
일례로서, 도 6에 도시된 바와 같이, 특정 손가락에 매칭 된 대표 객체가 한글 자음의 'ㄱ'이라고 가정할 때, 'ㄱ'의 주변에 4개의 원형 고리 형상으로 구성되어 원형의 둘레에 다른 자음들과 모음들이 배치되는 형태의 홀로그램 영상이 임의의 공간상에 표출될 수 있다.
다른 예로서, 도 7에 도시된 바와 같이, 특정 손가락에 매칭 된 대표 객체가 영어의 'a'라고 가정할 때, 'a'의 주변에 4개의 원형 고리 형상으로 구성되어 원형의 둘레에 다른 영어 문자들이 배치되는 형태의 홀로그램 영상이 임의의 공간상에 표출될 수 있다.
또한, 가상 화면 표출부(104)는, 본 발명의 제 3 실시예에 따라, 특정 손가락의 제 1 움직임(예컨대, 손가락의 구부림 움직임)이 감지되면 특정 손가락에 매칭 된 특정 대표 객체(쿼티(쿼티) 자판을 구성하는 각 열(수평 방향 구조) 또는 각 행(수직 방향 구조)의 대표 객체)와 특정 대표 객체에 매칭 된 객체 그룹에 속하는 복수의 객체가 쿼티 자판 형태로 배치되는 홀로그램 영상을 생성하여 공간상에 표출시키는 등의 기능을 제공할 수 있다.
일례로서, 도 9에 도시된 바와 같이, 왼손 4th 손가락에 매칭 된 대표 객체가 쿼티 자판의 위에서 두 번째 열의 'ㅂ'이라고 가정할 때, 'ㅂ'을 포함하는 열의 객체들이 쿼티 자판의 열 구조(수평 방향 구조)로 배치되는 형태의 홀로그램 영상이 임의의 공간상에 표출될 수 있다.
다른 예로서, 도 10에 도시된 바와 같이, 왼손 3rd 손가락에 매칭 된 대표 객체가 쿼티 자판의 위에서 세 번째 열의 'A'라고 가정할 때, 'A'을 포함하는 열의 객체들이 쿼티 자판의 열 구조로 배치되는 형태의 홀로그램 영상이 임의의 공간상에 표출될 수 있다.
또 다른 예로서, 도 11 및 도 13에 도시된 바와 같이, 쿼티 자판의 행 구조를 왼손과 오른손의 각 손가락에 매칭시켜 쿼티 자판의 행 구조(수직 방향 구조)로 배치되는 형태의 홀로그램 영상이 임의의 공간상에 표출되도록 적용할 수도 있다.
즉, 도 11은 왼쪽 4th 손가락에 매칭 된 쿼티 자판의 행 구조의 객체 그룹을 보여주는 것으로, 여기에서 숫자 '2'가 대표 객체로 정의될 수 있다.
한편, 가상 화면 표출부(104)는, 본 발명의 제 4 실시예에 따라, 특정 손가락의 제 1 움직임(손가락의 구부림 움직임)이 감지되면 특정 대표 객체와 특정 대표 객체에 매칭 된 객체 그룹(왼손의 각 손가락에 매칭 된 객체 그룹 또는 오른손의 각 손가락에 매칭 된 객체 그룹)에 속하는 복수의 객체가 쿼티 자판의 열 구조 형태로 배치되는 홀로그램 영상을 공간상에 표출시키는 등의 기능을 제공할 수 있다.
일례로서, 도 12에 도시된 왼쪽 그림은 왼손 4th 손가락에 매칭 된 객체 그룹으로, 자음'ㅂ'이 대표 객체로 정의될 수 있으며, 도 12에 도시된 오른쪽 그림은 오른손 4th 손가락에 매칭 된 객체 그룹으로, 모음 'ㅛ'가 대표 객체로 정의될 수 있으며, 도 13은 오른쪽 2nd 손가락에 매칭 된 쿼티 자판의 행 구조의 객체 그룹을 보여주는 것으로, 여기에서 숫자 '7'이 대표 객체로 정의될 수 있다.
다시 도 1을 참조하면, 객체 인식부(106)는, 본 발명의 다양한 실시예에 따라, 동작 인식부(102)를 통해 특정 손가락의 제 2 움직임(예컨대, 손가락의 펴짐 움직임)이 감지되면 특정 대표문자(또는 특정 대표 객체)를 입력으로 인식하고, 동작 인식부(102)를 통해 특정 손가락이 복수의 문자 객체 중 하나의 문자 객체로 드래그 또는 이동된 후 특정 손가락의 제 2 움직임(예컨대, 손가락의 펴짐 움직임)이 감지되면 하나의 문자 객체를 입력으로 인식하는 등의 기능을 제공할 수 있다.
그리고, 객체 표출부(108)는 객체 인식부(106)를 통해 인식된 특정 대표문자(특정 대표 객체) 또는 하나의 문자 객체를 홀로그램 영상의 소정 부분(예컨대, 홀로그램 영상의 상하좌우의 소정 위치 등)에 배치된 문자 출력 영역에 시각적으로 표출시키는 등의 기능을 제공할 수 있다.
다음에, 상술한 바와 같은 구성을 갖는 본 실시예의 문자 인식 장치를 이용하여 다양한 실시예에 따라 홀로그램 기반으로 문자를 인식하는 주요 과정에 대하여 상세하게 설명한다.
[제 1 실시예]
도 2는 본 발명의 제 1 실시예에 따라 홀로그램 기반으로 문자 인식을 수행하는 주요 과정을 도시한 순서도이고, 도 3은 본 발명의 제 1 실시예에 따라 수행되는 홀로그램 기반의 한글 문자 입력에 대한 예시를 보여주는 화면 예시도이며, 도 4는 본 발명의 제 1 실시예에 따라 수행되는 홀로그램 기반의 영문자 입력에 대한 예시를 보여주는 화면 예시도이다.
본 실시예에 따르면, 각 손가락에 각각 하나의 대표문자(예컨대, 'ㄱ'등)가 매칭 되고, 각 대표문자에 적어도 하나 이상의 문자 객체(예컨대, 대표문자에 사전 순서적으로 후행하는 문자 등)를 포함하는 문자 그룹이 매칭 될 수 있다(단계 202).
일례로서, 도 3에 도시된 바와 같이, 왼손의 4th 손가락에 쿼티 자판의 한글 자음의 'ㅂ'을 대표문자로 매칭시키고, 대표 문자 'ㅂ'에 좌측부터 차례로 'ㄱ, ㄷ, ㅈ, ㅅ'의 문자 객체들로 된 문자 그룹을 매칭시킬 수 있다.
다음에, 동작 인식부(102)에서는 입체적 공간(홀로그램 영상)상에서 사용자의 각 손가락 중 특정 손가락의 제 1 움직임(예컨대, 특정 손가락의 구부림 움직임)이 발생하는 지의 여부를 감지한다(단계 204).
상기 단계(204)에서의 체크 결과, 특정 손가락의 제 1 움직임이 감지되는 것으로 판단되면, 가상 화면 표출부(104)에서는, 일례로서 도 3 및 도 4에 각각 도시된 바와 같이, 특정 손가락에 매칭 된 특정 대표문자가 중앙에 배치되고, 그 주변에 특정 대표문자에 매칭 된 특정 문자 그룹에 속하는 복수의 문자 객체가 배치되는 형태의 홀로그램 영상을 생성하여 공간상에 표출시킨다(단계 206).
이후, 동작 인식부(102)에서는 특정 손가락의 제 2 움직임(특정 손가락의 펴짐 움직임)이 감지되는 지의 여부를 체크하는데(단계 208), 여기에서의 체크 결과 특정 손가락의 제 2 움직임이 감지되면, 객체 인식부(106)에서는 특정 손가락에 매칭 된 특정 대표문자(예컨대, 도 3의 'ㅂ', 도 4의 'i' 등)를 입력으로 인식하며(단계 210), 그 결과 객체 표출부(108)에서는 입력으로 인식된 특정 대표문자를 홀로그램 영상의 소정 부분(예컨대, 홀로그램 영상의 상하좌우의 소정 위치 등)에 배치된 문자 출력 영역에 시각적으로 표출시킨다(단계 216).
상기 단계(208)에서의 체크 결과, 특정 손가락의 제 2 움직임이 감지되지 않으며, 특정 손가락의 대표문자에 매칭 된 복수의 문자 객체 중 하나의 문자 객체(예컨대, 도 3의 'ㄷ')로 특정 손가락이 드래그 또는 이동 된 후 특정 손가락의 제 2 움직임(예컨대, 손가락의 펴짐 움직임)이 감지되는 지의 여부를 체크한다(단계 212).
상기 단계(212)에서의 체크 결과, 복수의 문가 객체 중 하나의 문자 객체(예컨대, 도 3의 'ㄷ')로 드래그되어 제 2 움직임이 감지된 것으로 판단되면, 객체 인식부(106)에서는 하나의 문자 객체를 입력으로 인식하며(단계 214), 그 결과 객체 표출부(108)에서는 입력으로 인식된 하나의 문자 객체를 홀로그램 영상의 소정 부분(예컨대, 홀로그램 영상의 상하좌우의 소정 위치 등)에 배치된 문자 출력 영역에 시각적으로 표출시킨다(단계 216).
즉, 본 실시예에 따르면, 원하는 대표문자가 매칭 된 손가락을 구부린 후 해당 손가락을 펴면 대표문자가 입력으로 인식되고, 구부린 손가락을 문자 그룹 내의 원하는 문자 객체의 위치로 드래그 또는 이동한 후 해당 손가락을 펴면 해당 문자 객체가 입력으로 인식되는 방식으로 문자(객체)를 입력할 수 있다.
부가하여, 본 실시예에 따르면, 한글과 영어 입력 시 1st 손가락(첫 번째 보조 입력 기구)의 기능키 역할은 1st 손가락(첫 번째 보조 입력 기구)을 구부렸다 펴면 스페이스, 구부린 상태로 우측으로 움직인 후 펴면 백스페이스, 좌측으로 움직인 후 펴면 엔터, 상방으로 움직인 후 펴면 쉬프트 키, 하방으로 움직인 후 펴면 편집기능 등을 시행하는 모드로 바뀌도록 설계될 수 있다.
그리고, 생성된 홀로그램 상 제 2 움직임이 감지될 때 색의 변화(예컨대 적색 또는 청색)또는 요철의 변화를 통해 입력이 인식되었음을 표시하여 시각적인 도움을 줄 수 있다.
[제 2 실시예]
도 5는 본 발명의 제 2 실시예에 따라 홀로그램 기반으로 문자 인식을 수행하는 주요 과정을 도시한 순서도이고, 도 6은 본 발명의 제 2 실시예에 따라 수행되는 홀로그램 기반의 한글 문자 입력에 대한 예시를 보여주는 화면 예시도이며, 도 7은 본 발명의 제 2 실시예에 따라 수행되는 홀로그램 기반의 영문자 입력에 대한 예시를 보여주는 화면 예시도이다.
본 실시예에 따르면, 각 손가락에 문자의 대표 객체와 기능키의 대표 객체가 각각 매칭 되고, 문자의 대표 객체에 나머지 객체들을 포함하는 문자 그룹이 매칭 되며, 기능키의 대표 객체에 나머지 기능키 객체들을 포함하는 기능키 그룹이 매칭 될 수 있다(단계 502).
여기에서, 홀로그램 영상은 특정 손가락에 매칭 된 특정 대표 객체가 중앙에 배치되고, 그 주변에 다수의 원형 고리 형상으로 구성되어 원형의 둘레에 특정 대표 객체에 대응되는 나머지 객체들이 배치되는 형태로 표출될 수 있다.
일례로서, 도 6에 도시된 바와 같이, 특정 손가락에 한글 자음의 'ㄱ'을 대표문자로 매칭시키고, 나머지 자음들 및 모음들을 문자 객체들로 된 문자 그룹으로 매칭시킬 수 있으며, 다른 예로서, 도 7에 도시된 바와 같이, 특정 손가락에 영어의 'a'을 대표문자로 매칭시키고, 나머지 영어 알파벳들을 문자 객체들로 된 문자 그룹으로 매칭시킬 수 있다.
다음에, 동작 인식부(102)에서는 입체적 공간(홀로그램 영상)상에서 사용자의 각 손가락 중 특정 손가락의 제 1 움직임(예컨대, 특정 손가락의 구부림 움직임)이 발생하는 지의 여부를 감지한다(단계 504).
상기 단계(504)에서의 체크 결과, 특정 손가락의 제 1 움직임이 감지되는 것으로 판단되면, 가상 화면 표출부(104)에서는, 일례로서 도 6 및 도 7에 각각 도시된 바와 같이, 특정 손가락에 매칭된 특정 대표 객체가 중앙에 배치되고, 그 주변에 다수의(예컨대, 4개) 원형 고리 형상으로 구성되어 원형의 둘레에 특정 대표 객체에 대응되는 나머지 객체들이 배치되는 홀로그램 영상을 생성하여 공간상에 표출시킨다(단계 506).
이후, 동작 인식부(102)에서는 특정 손가락의 제 2 움직임(특정 손가락의 펴짐 움직임)이 감지되는 지의 여부를 체크하는데(단계 508), 여기에서의 체크 결과 특정 손가락의 제 2 움직임이 감지되면, 객체 인식부(106)에서는 특정 손가락에 매칭 된 특정 대표문자(예컨대, 도 6의 'ㄱ', 도 7의 'a' 등)를 입력으로 인식하며(단계 510), 그 결과 객체 표출부(108)에서는 입력으로 인식된 특정 대표문자를 홀로그램 영상의 소정 부분(예컨대, 홀로그램 영상의 상하좌우의 소정 위치 등)에 배치된 문자 출력 영역에 시각적으로 표출시킨다(단계 516).
상기 단계(508)에서의 체크 결과, 특정 손가락의 제 2 움직임이 감지되지 않으며, 특정 손가락의 대표 객체에 매칭 된 복수의 객체 중 하나의 객체(예컨대, 도 6의 'ㅜ'등)로 특정 손가락이 드래그 또는 이동 된 후 특정 손가락의 제 2 움직임(예컨대, 손가락의 펴짐 움직임)이 감지되는 지의 여부를 체크한다(단계 512).
상기 단계(512)에서의 체크 결과, 복수의 객체 중 하나의 객체(예컨대, 도 6의 'ㅜ')로 드래그되어 제 2 움직임이 감지된 것으로 판단되면, 객체 인식부(106)에서는 하나의 객체를 입력으로 인식하며(단계 514), 그 결과 객체 표출부(108)에서는 입력으로 인식된 하나의 객체를 홀로그램 영상의 소정 부분(예컨대, 홀로그램 영상의 상하좌우의 소정 위치 등)에 배치된 문자 출력 영역에 시각적으로 표출시킨다(단계 516).
즉, 본 실시예에 따르면, 원하는 대표 객체가 매칭 된 손가락을 구부린 후 해당 손가락을 펴면 대표 객체가 입력으로 인식되고, 구부린 손가락을 문자 그룹 내의 원하는 하나의 객체의 위치로 드래그 또는 이동한 후 해당 손가락을 펴면 해당 객체가 입력으로 인식되는 방식으로 객체(문자)를 입력할 수 있다.
그리고, 생성된 홀로그램 상 제 2 움직임이 감지될 때 홀로그램 색의 변화(예컨대 적색 또는 청색)또는 요철의 변화를 통해 움직임이 입력으로 인식되었음을 표시하여 터치감을 대신하여 시각적으로 도움을 줄 수 있다.
[제 3 실시예]
도 8은 본 발명의 제 3 실시예에 따라 홀로그램 기반으로 문자 인식을 수행하는 주요 과정을 도시한 순서도이고, 도 9 및 도 10은 본 발명의 제 3 실시예에 따라 수행되는 홀로그램 기반의 수평 방향으로의 쿼티 문자 입력에 대한 예시를 보여주는 화면 예시도이며, 도 11 및 도 12는 본 발명의 제 3 실시예에 따라 수행되는 홀로그램 기반의 수직 방향으로의 쿼티 문자 입력에 대한 예시를 보여주는 화면 예시도이다.
본 실시예에 따르면, 쿼티(쿼티) 자판을 구성하는 각 열 또는 각 행의 객체들 중 하나가 각 손가락에 각각의 대표 객체로 매칭 되고, 각 대표 객체에 각 열 또는 각 행의 나머지 객체들을 포함하는 객체 그룹들이 각각 매칭 될 수 있다(단계 802).
일례로서, 도 9에 도시된 바와 같이, 한글 입력에서 왼손 4th 손가락에 쿼티 자판의 위로부터 두 번째 열을 매칭시키고, 자음 ㅂ'을 해당 열의 대표 객체로 매칭시킬 수 있으며, 다른 예로서, 도 10에 도시된 바와 같이, 영어 입력에서 3rd 손가락에 쿼티 자판의 위로부터 세 번째 열을 매칭시키고, 알파벳 'A'을 해당 열의 대표 객체로 매칭시킬 수 있다.
다음에, 동작 인식부(102)에서는 입체적 공간(홀로그램 영상)상에서 사용자의 각 손가락 중 특정 손가락의 제 1 움직임(예컨대, 특정 손가락의 구부림 움직임)이 발생하는 지의 여부를 감지한다(단계 804).
상기 단계(804)에서의 체크 결과, 특정 손가락의 제 1 움직임이 감지되는 것으로 판단되면, 가상 화면 표출부(104)에서는, 일례로서 도 9 및 도 10에 각각 도시된 바와 같이, 특정 손가락에 매칭 된 특정 대표 객체를 포함하는 복수의 객체들이 쿼티 자판 형태로 배치되는 홀로그램 영상을 생성하여 공간상에 표출시킨다(단계 806).
이후, 동작 인식부(102)에서는 특정 손가락의 제 2 움직임(특정 손가락의 펴짐 움직임)이 감지되는 지의 여부를 체크하는데(단계 808), 여기에서의 체크 결과 특정 손가락의 제 2 움직임이 감지되면, 객체 인식부(106)에서는 특정 손가락에 매칭 된 특정 대표문자(예컨대, 도 9의 'ㅂ', 도 10의 'A' 등)를 입력으로 인식하며(단계 810), 그 결과 객체 표출부(108)에서는 입력으로 인식된 특정 대표문자를 홀로그램 영상의 소정 부분(예컨대, 홀로그램 영상의 상하좌우의 소정 위치 등)에 배치된 문자 출력 영역에 시각적으로 표출시킨다(단계 816).
상기 단계(808)에서의 체크 결과, 특정 손가락의 제 2 움직임이 감지되지 않으며, 특정 손가락의 대표 객체에 매칭 된 복수의 객체 중 하나의 객체(예컨대, 도 9의 'ㅔ'등)로 특정 손가락이 드래그 또는 이동 된 후 특정 손가락의 제 2 움직임(예컨대, 손가락의 펴짐 움직임)이 감지되는 지의 여부를 체크한다(단계 812).
상기 단계(812)에서의 체크 결과, 복수의 객체 중 하나의 객체(예컨대, 도 9의 'ㅔ')로 드래그되어 제 2 움직임이 감지된 것으로 판단되면, 객체 인식부(106)에서는 하나의 객체를 입력으로 인식하며(단계 814), 그 결과 객체 표출부(108)에서는 입력으로 인식된 하나의 객체를 홀로그램 영상의 소정 부분(예컨대, 홀로그램 영상의 상하좌우의 소정 위치 등)에 배치된 문자 출력 영역에 시각적으로 표출시킨다(단계 816).
즉, 본 실시예에 따르면, 원하는 대표 객체가 매칭 된 손가락을 구부린 후 해당 손가락을 펴면 대표 객체가 입력으로 인식되고, 구부린 손가락을 문자 그룹 내의 원하는 하나의 객체의 위치로 드래그 또는 이동한 후 해당 손가락을 펴면 해당 객체가 입력으로 인식되는 방식으로 객체(문자)를 입력할 수 있다.
그리고, 생성된 홀로그램 상 제 2 움직임이 감지될 때 홀로그램 색의 변화(예컨대 적색 또는 청색) 또는 요철의 변화를 통해 움직임이 입력으로 인식되었음을 표시하여 터치감을 대신하여 시각적으로 도움을 줄 수 있다.
한편, 본 실시예에 따르면, 일례로서, 도 11 및 도 13에 도시된 바와 같이, 쿼티 자판의 행 구조를 왼손과 오른손의 각 손가락에 매칭시켜 쿼티 자판의 행 구조(수직 방향 구조)로 배치되는 형태의 홀로그램 영상이 임의의 공간상에 표출되도록 적용할 수도 있다.
도 11은 왼쪽 4th 손가락에 매칭 된 쿼티 자판의 행 구조의 객체 그룹을 보여주는 것으로, 여기에서 숫자 '2'가 해당 행 구조의 대표 객체로 정의될 수 있다.
[제 4 실시예]
본 실시예에 따르면, 쿼티(쿼티) 자판을 구성하는 각 열의 일부(쿼티 자판의 각 열의 왼쪽 일부)의 객체들 중 하나가 왼손의 각 손가락에 각각의 대표 객체로 매칭 되고, 각 대표 객체에 각 열의 일부의 객체들 중 나머지 객체들을 포함하는 객체 그룹들이 각각 매칭 되며, 쿼티 자판을 구성하는 각 열의 다른 일부(쿼티 자판의 각 열의 오른쪽 일부)의 객체들 중 하나가 오른손의 각 손가락에 각각의 대표 객체로 매칭 되고, 각 대표 객체에 각 열의 다른 일부의 객체들 중 나머지 객체들을 포함하는 객체 그룹들이 각각 매칭 될 수 있다.
도 12는 본 발명의 제 4 실시예에 따라 양손으로 수행되는 홀로그램 기반의 수평 방향으로의 쿼티 문자 입력에 대한 예시를 보여주는 화면 예시도이다.
도 12를 참조하면, 도면의 왼쪽 그림은 왼손 4th 손가락에 매칭 된 객체 그룹으로, 자음'ㅂ'이 대표 객체로 정의될 수 있으며, 도면의 오른쪽 그림은 오른손 4th 손가락에 매칭 된 객체 그룹으로, 모음 'ㅛ'가 대표 객체로 정의될 수 있다.
즉, 가상 화면 표출부(104)에서는, 본 실시예에 따라, 특정 손가락의 제 1 움직임(손가락의 구부림 움직임)이 감지되면 특정 대표 객체와 특정 대표 객체에 매칭 된 객체 그룹(왼손의 각 손가락에 매칭 된 객체 그룹 또는 오른손의 각 손가락에 매칭 된 객체 그룹)에 속하는 복수의 객체가 쿼티 자판의 열 구조 형태로 배치되는 홀로그램 영상을 공간상에 표출시킨다.
도 13은 오른쪽 2nd 손가락에 매칭 된 쿼티 자판의 행 구조의 객체 그룹을 보여주는 것으로, 여기에서 숫자 '7'이 대표 객체로 정의될 수 있다.
그리고, 생성된 홀로그램상 제 2 움직임이 감지될 때 홀로그램 색의 변화(예컨대 적색 또는 청색)또는 요철의 변화를 통해 움직임이 입력으로 인식되었음을 표시하여 터치감을 대신하여 시각적으로 도움을 줄 수 있다.
이후, 본 실시예에 따라 양손을 이용하여 대표 객체 또는 원하는 객체를 입력하는 과정들은 도 8을 참조하는 전술한 제 3 실시예에서와 실질적으로 동일하므로, 명세서의 간결화를 위한 불필요한 중복기재를 피하기 위하여 여기에서의 상세 설명은 생략한다.
한편, 첨부된 블록도의 각 블록과 흐름도의 각 단계의 조합들은 컴퓨터 프로그램 인스트럭션들에 의해 수행될 수도 있다. 이들 컴퓨터 프로그램 인스트럭션들은 범용 컴퓨터, 특수용 컴퓨터 또는 기타 프로그램 가능한 데이터 프로세싱 장비의 프로세서에 탑재될 수 있으므로, 컴퓨터 또는 기타 프로그램 가능한 데이터 프로세싱 장비의 프로세서를 통해 수행되는 그 인스트럭션들이 블록도의 각 블록 또는 흐름도의 각 단계에서 설명된 기능들을 수행하는 수단을 생성하게 된다.
이들 컴퓨터 프로그램 인스트럭션들은 특정 방식으로 기능을 구현하기 위해 컴퓨터 또는 기타 프로그램 가능한 데이터 프로세싱 장비를 지향할 수 있는 컴퓨터 이용 가능 또는 컴퓨터 판독 가능 기록매체에 저장되는 것도 가능하므로, 그 컴퓨터 이용 가능 또는 컴퓨터 판독 가능 기록매체에 저장된 인스트럭션들은 블록도의 각 블록 또는 흐름도 각 단계에서 설명된 기능을 수행하는 인스트럭션 수단을 내포하는 제조 품목을 생산하는 것도 가능하다.
그리고, 컴퓨터 프로그램 인스트럭션들은 컴퓨터 또는 기타 프로그램 가능한 데이터 프로세싱 장비 상에 탑재되는 것도 가능하므로, 컴퓨터 또는 기타 프로그램 가능한 데이터 프로세싱 장비 상에서 일련의 동작 단계들이 수행되어 컴퓨터로 실행되는 프로세스를 생성해서 컴퓨터 또는 기타 프로그램 가능한 데이터 프로세싱 장비를 수행하는 인스트럭션들은 블록도의 각 블록 및 흐름도의 각 단계에서 설명된 기능들을 실행하기 위한 단계들을 제공하는 것도 가능하다.
또한, 각 블록 또는 각 단계는 특정된 논리적 기능(들)을 실행하기 위한 적어도 하나 이상의 실행 가능한 인스트럭션들을 포함하는 모듈, 세그먼트 또는 코드의 일부를 나타낼 수 있다. 또, 몇 가지 대체 실시예들에서는 블록들 또는 단계들에서 언급된 기능들이 순서를 벗어나서 발생하는 것도 가능함을 주목해야 한다. 예컨대, 잇달아 도시되어 있는 두 개의 블록들 또는 단계들은 사실 실질적으로 동시에 수행되는 것도 가능하고 또는 그 블록들 또는 단계들이 때때로 해당하는 기능에 따라 역순으로 수행되는 것도 가능하다.
이상의 설명은 본 발명의 기술사상을 예시적으로 설명한 것에 불과한 것으로서, 본 발명이 속하는 기술 분야에서 통상의 지식을 가진 자라면 본 발명의 본질적인 특성에서 벗어나지 않는 범위 내에서 여러 가지 치환, 변형 및 변경 등이 가능함을 쉽게 알 수 있을 것이다. 즉, 본 발명에 개시된 실시 예들은 본 발명의 기술 사상을 한정하기 위한 것이 아니라 설명하기 위한 것으로서, 이러한 실시 예에 의하여 본 발명의 기술 사상의 범위가 한정되는 것은 아니다.
따라서, 본 발명의 보호 범위는 후술되는 청구범위에 의하여 해석되어야 하며, 그와 동등한 범위 내에 있는 모든 기술사상은 본 발명의 권리범위에 포함되는 것으로 해석되어야 할 것이다.
102 : 동작 인식부
104 : 가상 화면 표출부
106 : 객체 인식부
108 : 객체 표출부

Claims (26)

  1. 각 손가락에 각각 하나의 대표문자가 매칭 되고, 각 대표문자에 적어도 하나 이상의 문자 객체를 포함하는 문자 그룹이 매칭되며,
    특정 손가락의 제 1 움직임이 감`지되면 상기 특정 손가락에 매칭된 특정 대표문자가 중앙에 배치되고, 그 주변에 상기 특정 대표문자에 매칭된 특정 문자 그룹에 속하는 복수의 문자 객체가 배치되는 홀로그램 영상을 공간상에 표출시키는 단계와,
    상기 특정 손가락의 제 2 움직임이 감지되면 상기 특정 대표문자를 입력으로 인식하는 단계와,
    상기 특정 손가락이 복수의 문자 객체 중 하나의 문자 객체로 드래그 또는 이동된 후 상기 특정 손가락의 상기 제 2 움직임이 감지되면 상기 하나의 문자 객체를 입력으로 인식하는 단계
    를 포함하는 홀로그램 기반의 문자 인식 방법.
  2. 제 1 항에 있어서,
    상기 제 1 움직임이 상기 특정 손가락의 구부림 움직임일 때, 상기 제 2 움직임은 상기 특정 손가락의 펴짐 움직임인
    홀로그램 기반의 문자 인식 방법.
  3. 제 1 항에 있어서,
    상기 제 2 움직임이 감지될 때 홀로그램 색의 변화 또는 요철의 변화를 통해 입력으로 인식되었음을 표시하는 단계
    를 더 포함하는 홀로그램 기반의 문자 인식 방법.
  4. 제 1 항에 있어서,
    상기 홀로그램 영상은,
    원형 구조 또는 사각형 구조인
    홀로그램 기반의 문자 인식 방법.
  5. 제 1 항에 있어서,
    상기 제 2 움직임에 의해 입력으로 인식된 상기 특정 대표문자 또는 상기 하나의 문자 객체는,
    상기 홀로그램 영상의 소정 부분에 배치된 문자 출력 영역에 표출되는
    홀로그램 기반의 문자 인식 방법.
  6. 제 1 항에 있어서,
    상기 각 손가락 중 어느 한 손가락에 대표 기능키가 매칭되고, 상기 대표 기능키에 적어도 하나 이상의 기능키 객체를 포함하는 기능키 그룹이 매칭되는
    홀로그램 기반의 문자 인식 방법.
  7. 각 손가락에 각각 하나의 대표문자가 매칭 되고, 각 대표문자에 적어도 하나 이상의 문자 객체를 포함하는 문자 그룹이 매칭되며,
    특정 손가락의 제 1 움직임이 감지되면 상기 특정 손가락에 매칭된 특정 대표문자가 중앙에 배치되고, 그 주변에 상기 특정 대표문자에 매칭된 특정 문자 그룹에 속하는 복수의 문자 객체가 배치되는 홀로그램 영상을 공간상에 표출시키는 단계와,
    상기 특정 손가락의 제 2 움직임이 감지되면 상기 특정 대표문자를 입력으로 인식하는 단계와,
    상기 특정 손가락이 복수의 문자 객체 중 하나의 문자 객체로 드래그 또는 이동된 후 상기 특정 손가락의 상기 제 2 움직임이 감지되면 상기 하나의 문자 객체를 입력으로 인식하는 단계
    를 포함하는 홀로그램 기반의 문자 인식 방법을 프로세서가 수행하도록 하는 컴퓨터 프로그램이 저장된 컴퓨터 판독 가능한 기록매체.
  8. 각 손가락에 각각 하나의 대표문자가 매칭 되고, 각 대표문자에 적어도 하나 이상의 문자 객체를 포함하는 문자 그룹이 매칭되며,
    특정 손가락의 제 1 움직임이 감지되면 상기 특정 손가락에 매칭된 특정 대표문자가 중앙에 배치되고, 그 주변에 상기 특정 대표문자에 매칭된 특정 문자 그룹에 속하는 복수의 문자 객체가 배치되는 홀로그램 영상을 공간상에 표출시키는 단계와,
    상기 특정 손가락의 제 2 움직임이 감지되면 상기 특정 대표문자를 입력으로 인식하는 단계와,
    상기 특정 손가락이 복수의 문자 객체 중 하나의 문자 객체로 드래그 또는 이동된 후 상기 특정 손가락의 상기 제 2 움직임이 감지되면 상기 하나의 문자 객체를 입력으로 인식하는 단계
    를 포함하는 홀로그램 기반의 문자 인식 방법을 프로세서가 수행할 수 있도록 컴퓨터 판독 가능한 기록매체에 저장된 컴퓨터 프로그램.
  9. 각 손가락에 각각 하나의 대표문자가 매칭 되고, 각 대표문자에 적어도 하나 이상의 문자 객체를 포함하는 문자 그룹이 매칭되며,
    상기 각 손가락 중 특정 손가락의 움직임 또는 드래그를 감지하는 동작 인식부와,
    상기 특정 손가락의 제 1 움직임이 감지되면 상기 특정 손가락에 매칭된 특정 대표문자가 중앙에 배치되고, 그 주변에 상기 특정 대표문자에 매칭된 특정 문자 그룹에 속하는 복수의 문자 객체가 배치되는 홀로그램 영상을 공간상에 표출시키는 가상 화면 표출부와,
    상기 특정 손가락의 제 2 움직임이 감지되면 상기 특정 대표문자를 입력으로 인식하고, 상기 특정 손가락이 상기 복수의 문자 객체 중 하나의 문자 객체로 드래그 또는 이동된 후 상기 특정 손가락의 상기 제 2 움직임이 감지되면 상기 하나의 문자 객체를 입력으로 인식하는 객체 인식부와,
    인식된 상기 특정 대표문자 또는 상기 하나의 문자 객체를 상기 홀로그램 영상의 소정 부분에 배치된 문자 출력 영역에 표출시키는 객체 표출부
    를 포함하는 홀로그램 기반의 문자 인식 장치.
  10. 제 9 항에 있어서,
    상기 제 1 움직임이 상기 특정 손가락의 구부림 움직임일 때, 상기 제 2 움직임은 상기 특정 손가락의 펴짐 움직임인
    홀로그램 기반의 문자 인식 장치.
  11. 제 9 항에 있어서,
    상기 홀로그램 영상은,
    원형 구조 또는 사각형 구조인
    홀로그램 기반의 문자 인식 장치.
  12. 제 9 항에 있어서,
    상기 각 손가락 중 어느 한 손가락에 대표 기능키가 매칭되고, 상기 대표 기능키에 적어도 하나 이상의 기능키 객체를 포함하는 기능키 그룹이 매칭되는
    홀로그램 기반의 문자 인식 장치.
  13. 각 손가락에 문자의 대표 객체와 기능키의 대표 객체가 각각 매칭되고, 상기 문자의 대표 객체에 나머지 문자 객체들을 포함하는 문자 그룹이 매칭되며, 상기 기능키의 대표 객체에 나머지 기능키 객체들을 포함하는 기능키 그룹이 매칭되고,
    특정 손가락의 제 1 움직임이 감지되면 상기 특정 손가락에 매칭된 특정 대표 객체가 중앙에 배치되고, 그 주변에 다수의 원형 고리 형상으로 구성되어 원형의 둘레에 상기 특정 대표 객체에 대응되는 나머지 객체들이 배치되는 홀로그램 영상을 공간상에 표출시키는 단계와,
    상기 특정 손가락의 제 2 움직임이 감지되면 상기 특정 대표 객체를 입력으로 인식하는 단계와,
    상기 특정 손가락이 상기 나머지 객체들 중 하나의 객체로 드래그 또는 이동된 후 상기 특정 손가락의 제 2 움직임이 감지되면 상기 하나의 객체를 입력으로 인식하는 단계
    를 포함하는 홀로그램 기반의 문자 인식 방법.
  14. 제 13 항에 있어서,
    상기 문자의 대표 객체는,
    서로 다른 손가락에 각각 매칭된 한글 자음의 대표 객체와 한글 모음의 대표 객체를 포함하는
    홀로그램 기반의 문자 인식 방법.
  15. 제 13 항에 있어서,
    상기 제 1 움직임이 상기 특정 손가락의 구부림 움직임일 때, 상기 제 2 움직임은 상기 특정 손가락의 펴짐 움직임인
    홀로그램 기반의 문자 인식 방법.
  16. 제 13 항에 있어서,
    상기 제 2 움직임에 의해 입력으로 인식된 상기 특정 대표 객체 또는 상기 하나의 객체는,
    상기 홀로그램 영상의 소정 부분에 배치된 문자 출력 영역에 표출되는
    홀로그램 기반의 문자 인식 방법.
  17. 각 손가락에 문자의 대표 객체와 기능키의 대표 객체가 각각 매칭되고, 상기 문자의 대표 객체에 나머지 문자 객체들을 포함하는 문자 그룹이 매칭되며, 상기 기능키의 대표 객체에 나머지 기능키 객체들을 포함하는 기능키 그룹이 매칭되고,
    상기 각 손가락 중 특정 손가락의 움직임 또는 드래그를 감지하는 동작 인식부와,
    상기 특정 손가락의 제 1 움직임이 감지되면 상기 특정 손가락에 매칭된 특정 대표 객체가 중앙에 배치되고, 그 주변에 다수의 원형 고리 형상으로 구성되어 원형의 둘레에 상기 특정 대표 객체에 대응되는 나머지 객체들이 배치되는 홀로그램 영상을 공간상에 표출시키는 가상 화면 표출부와,
    상기 특정 손가락의 제 2 움직임이 감지되면 상기 특정 대표 객체를 입력으로 인식하고, 상기 특정 손가락이 상기 나머지 객체들 중 하나의 객체로 드래그 또는 이동된 후 상기 특정 손가락의 상기 제 2 움직임이 감지되면 상기 하나의 객체를 입력으로 인식하는 객체 인식부와,
    인식된 상기 특정 대표 객체 또는 상기 하나의 객체를 상기 홀로그램 영상의 소정 부분에 배치된 문자 출력 영역에 표출시키는 객체 표출부
    를 포함하는 홀로그램 기반의 문자 인식 장치.
  18. 제 17 항에 있어서,
    상기 문자의 대표 객체는,
    서로 다른 손가락에 각각 매칭된 한글 대표 객체와 영어 대표 객체를 포함하는
    홀로그램 기반의 문자 인식 장치.
  19. 쿼티(쿼티) 자판을 구성하는 각 열 또는 각 행의 객체들 중 하나가 각 손가락에 각각의 대표 객체로 매칭되고, 각 대표 객체에 상기 각 열 또는 상기 각 행의 나머지 객체들을 포함하는 객체 그룹들이 각각 매칭되며,
    특정 손가락의 제 1 움직임이 감지되면 상기 특정 손가락에 매칭된 특정 대표 객체와 상기 특정 대표 객체에 매칭된 객체 그룹에 속하는 복수의 객체가 쿼티 자판 형태로 배치되는 홀로그램 영상을 공간상에 표출시키는 단계와,
    상기 특정 손가락의 제 2 움직임이 감지되면 상기 특정 대표 객체를 입력으로 인식하는 단계와,
    상기 특정 손가락이 상기 복수의 객체 중 하나의 객체로 드래그 또는 이동된 후 상기 특정 손가락의 상기 제 2 움직임이 감지되면 상기 하나의 객체를 입력으로 인식하는 단계
    를 포함하는 홀로그램 기반의 문자 인식 방법.
  20. 제 19 항에 있어서,
    상기 제 1 움직임이 상기 특정 손가락의 구부림 움직임일 때, 상기 제 2 움직임은 상기 특정 손가락의 펴짐 움직임인
    홀로그램 기반의 문자 인식 방법.
  21. 제 19 항에 있어서,
    상기 제 2 움직임에 의해 입력으로 인식된 상기 특정 대표 객체 또는 상기 하나의 객체는,
    상기 홀로그램 영상의 소정 부분에 배치된 문자 출력 영역에 표출되는
    홀로그램 기반의 문자 인식 방법.
  22. 쿼티(쿼티) 자판을 구성하는 각 열 또는 각 행의 객체들 중 하나가 각 손가락에 각각의 대표 객체로 매칭되고, 각 대표 객체에 상기 각 열 또는 상기 각 행의 나머지 객체들을 포함하는 객체 그룹들이 각각 매칭되며,
    상기 각 손가락 중 특정 손가락의 움직임 또는 드래그를 감지하는 동작 인식부와,
    상기 특정 손가락의 제 1 움직임이 감지되면 상기 특정 손가락에 매칭된 특정 대표 객체와 상기 특정 대표 객체에 매칭된 객체 그룹에 속하는 복수의 객체가 쿼티 자판 형태로 배치되는 홀로그램 영상을 공간상에 표출시키는 가상 화면 표출부와,
    상기 특정 손가락의 제 2 움직임이 감지되면 상기 특정 대표 객체를 입력으로 인식하고, 상기 특정 손가락이 상기 복수의 객체 중 하나의 객체로 드래그 또는 이동된 후 상기 특정 손가락의 상기 제 2 움직임이 감지되면 상기 하나의 객체를 입력으로 인식하는 객체 인식부와,
    인식된 상기 특정 대표 객체 또는 상기 하나의 객체를 상기 홀로그램 영상의 소정 부분에 배치된 문자 출력 영역에 표출시키는 객체 표출부
    를 포함하는 홀로그램 기반의 문자 인식 장치.
  23. 쿼티(쿼티) 자판을 구성하는 각 열의 일부의 객체들 중 하나가 왼손의 각 손가락에 각각의 대표 객체로 매칭되고, 각 대표 객체에 상기 각 열의 상기 일부의 객체들 중 나머지 객체들을 포함하는 객체 그룹들이 각각 매칭되며,
    쿼티 자판을 구성하는 각 열의 다른 일부의 객체들 중 하나가 오른손의 각 손가락에 각각의 대표 객체로 매칭되고, 각 대표 객체에 상기 각 열의 상기 다른 일부의 객체들 중 나머지 객체들을 포함하는 객체 그룹들이 각각 매칭되며,
    상기 왼손 또는 상기 오른손의 특정 손가락의 제 1 움직임이 감지되면 상기 특정 손가락에 매칭된 특정 대표 객체와 상기 특정 대표 객체에 매칭된 객체 그룹에 속하는 복수의 객체가 쿼티 자판 형태로 배치되는 홀로그램 영상을 공간상에 표출시키는 단계와,
    상기 특정 손가락의 제 2 움직임이 감지되면 상기 특정 대표 객체를 입력으로 인식하는 단계와,
    상기 특정 손가락이 상기 복수의 객체 중 하나의 객체로 드래그 또는 이동된 후 상기 특정 손가락의 상기 제 2 움직임이 감지되면 상기 하나의 객체를 입력으로 인식하는 단계
    를 포함하는 홀로그램 기반의 문자 인식 방법.
  24. 제 23 항에 있어서,
    상기 제 1 움직임이 상기 특정 손가락의 구부림 움직임일 때, 상기 제 2 움직임은 상기 특정 손가락의 펴짐 움직임인
    홀로그램 기반의 문자 인식 방법.
  25. 제 23 항에 있어서,
    상기 제 2 움직임에 의해 입력으로 인식된 상기 특정 대표 객체 또는 상기 하나의 객체는,
    상기 홀로그램 영상의 소정 부분에 배치된 문자 출력 영역에 표출되는
    홀로그램 기반의 문자 인식 방법.
  26. 쿼티(쿼티) 자판을 구성하는 각 열의 일부의 객체들 중 하나가 왼손의 각 손가락에 각각의 대표 객체로 매칭되고, 각 대표 객체에 상기 각 열의 상기 일부의 객체들 중 나머지 객체들을 포함하는 객체 그룹들이 각각 매칭되며,
    쿼티 자판을 구성하는 상기 각 열의 다른 일부의 객체들 중 하나가 오른손의 각 손가락에 각각의 대표 객체로 매칭되고, 각 대표 객체에 상기 각 열의 상기 다른 일부의 객체들 중 나머지 객체들을 포함하는 객체 그룹들이 각각 매칭되며,
    상기 왼손 또는 상기 오른손의 각 손가락 중 특정 손가락의 움직임 또는 드래그를 감지하는 동작 인식부와,
    상기 특정 손가락의 제 1 움직임이 감지되면 특정 대표 객체와 상기 특정 대표 객체에 매칭된 객체 그룹에 속하는 복수의 객체가 쿼티 자판 형태로 배치되는 홀로그램 영상을 공간상에 표출시키는 가상 화면 표출부와,
    상기 특정 손가락의 제 2 움직임이 감지되면 상기 특정 손가락에 매칭된 상기 특정 대표 객체를 입력으로 인식하고, 상기 특정 손가락이 상기 복수의 객체 중 하나의 객체로 드래그 또는 이동된 후 상기 특정 손가락의 상기 제 2 움직임이 감지되면 상기 하나의 객체를 입력으로 인식하는 객체 인식부와,
    인식된 상기 특정 대표 객체 또는 상기 하나의 객체를 상기 홀로그램 영상의 소정 부분에 배치된 문자 출력 영역에 표출시키는 객체 표출부
    를 포함하는 홀로그램 기반의 문자 인식 장치.
KR1020180171529A 2018-12-28 2018-12-28 홀로그램 기반의 문자 인식 방법 및 그 장치 KR102207067B1 (ko)

Priority Applications (2)

Application Number Priority Date Filing Date Title
KR1020180171529A KR102207067B1 (ko) 2018-12-28 2018-12-28 홀로그램 기반의 문자 인식 방법 및 그 장치
US16/727,001 US11244138B2 (en) 2018-12-28 2019-12-26 Hologram-based character recognition method and apparatus

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020180171529A KR102207067B1 (ko) 2018-12-28 2018-12-28 홀로그램 기반의 문자 인식 방법 및 그 장치

Publications (2)

Publication Number Publication Date
KR20200081718A true KR20200081718A (ko) 2020-07-08
KR102207067B1 KR102207067B1 (ko) 2021-01-25

Family

ID=71123063

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020180171529A KR102207067B1 (ko) 2018-12-28 2018-12-28 홀로그램 기반의 문자 인식 방법 및 그 장치

Country Status (2)

Country Link
US (1) US11244138B2 (ko)
KR (1) KR102207067B1 (ko)

Families Citing this family (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US11914789B2 (en) * 2022-01-20 2024-02-27 Htc Corporation Method for inputting letters, host, and computer readable storage medium

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20040016365A (ko) * 2002-08-16 2004-02-21 강윤기 터치스크린용 문자입력장치
KR20080003343U (ko) 2007-02-12 2008-08-18 하이즈 주식회사 홀로그램을 이용한 이동통신 단말기용 키패드 필름
KR20110088969A (ko) * 2010-01-29 2011-08-04 주식회사 팬택 다차원 영상을 이용한 사용자 인터페이스 장치
KR101411569B1 (ko) * 2013-06-05 2014-06-27 고려대학교 산학협력단 가상 키보드를 이용한 정보 처리 장치 및 방법
KR20140147747A (ko) * 2013-06-20 2014-12-30 엘에스아이 코포레이션 방사형 레이아웃 소프트 키패드를 포함하는 사용자 인터페이스

Family Cites Families (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20150121287A1 (en) * 2006-07-03 2015-04-30 Yoram Ben-Meir System for generating and controlling a variably displayable mobile device keypad/virtual keyboard
KR100923755B1 (ko) * 2009-07-06 2009-10-27 라오넥스(주) 멀티터치 방식 문자입력 방법
WO2011096702A2 (ko) * 2010-02-03 2011-08-11 고려대학교 산학협력단 문자 입력 장치 및 방법
US20160349926A1 (en) * 2014-01-10 2016-12-01 Nec Corporation Interface device, portable device, control device and module
US9304599B2 (en) * 2014-03-21 2016-04-05 Dell Products L.P. Gesture controlled adaptive projected information handling system input and output devices

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20040016365A (ko) * 2002-08-16 2004-02-21 강윤기 터치스크린용 문자입력장치
KR20080003343U (ko) 2007-02-12 2008-08-18 하이즈 주식회사 홀로그램을 이용한 이동통신 단말기용 키패드 필름
KR20110088969A (ko) * 2010-01-29 2011-08-04 주식회사 팬택 다차원 영상을 이용한 사용자 인터페이스 장치
KR101411569B1 (ko) * 2013-06-05 2014-06-27 고려대학교 산학협력단 가상 키보드를 이용한 정보 처리 장치 및 방법
KR20140147747A (ko) * 2013-06-20 2014-12-30 엘에스아이 코포레이션 방사형 레이아웃 소프트 키패드를 포함하는 사용자 인터페이스

Also Published As

Publication number Publication date
US20200210675A1 (en) 2020-07-02
US11244138B2 (en) 2022-02-08
KR102207067B1 (ko) 2021-01-25

Similar Documents

Publication Publication Date Title
US10268370B2 (en) Character input device and character input method with a plurality of keypads
US7170430B2 (en) System, method, and computer program product for single-handed data entry
KR102269466B1 (ko) 동작 인식 기반의 문자 입력 방법 및 그 장치
KR101846238B1 (ko) 한자 입력 장치 및 제어 방법
US20140173522A1 (en) Novel Character Specification System and Method that Uses Remote Selection Menu and Touch Screen Movements
Goguey et al. Leveraging finger identification to integrate multi-touch command selection and parameter manipulation
JP2017509080A (ja) 漢字入力装置と漢字入力方法、及びこれを用いた漢字検索方法
TWI634438B (zh) 輸入漢字的整合程式
US10387032B2 (en) User interface input method and system for handheld and mobile devices
KR101039284B1 (ko) 터치식 문자 입력 장치 및 방법
KR102207067B1 (ko) 홀로그램 기반의 문자 인식 방법 및 그 장치
KR102332178B1 (ko) 장애인을 위한 단축 키보드 시스템 및 이의 사용 방법
KR20130069363A (ko) 소형 일문키보드 및 방법
Fennedy et al. Investigating performance and usage of input methods for soft keyboard hotkeys
KR102065532B1 (ko) 한글 입력용 안구인식 키보드
KR101821125B1 (ko) 터치앤드래그를 이용한 한글 입력 방법 및 장치
KR20150131662A (ko) 문자입력시 문자 조합 조건 확장
Kurosu Human-Computer Interaction. Interaction Technologies: 20th International Conference, HCI International 2018, Las Vegas, NV, USA, July 15–20, 2018, Proceedings, Part III
JP6924752B2 (ja) 端末機のタッチスクリーンを用いた漢字と数字の入力キーボード及びその入力方法
KR20130004648A (ko) 터치스크린패널기기에서의 문서편집기능이 있는 다국어 문자입력장치
EP3021231A1 (en) Method for providing sign image search service and sign image search server used for same
KR20240002560A (ko) 초간편 한글 자판 및 이를 이용한 문자 입력방법
JP6605288B2 (ja) データ入力装置
KR20210039342A (ko) 터치스크린 상에서 터치 버튼의 멀티터치 인식방법, 문자 입력 방법 및 객체 변형 방법
KR20150066204A (ko) 터치스크린을 이용한 드래그 방식 문자입력방법 및 그 장치

Legal Events

Date Code Title Description
E902 Notification of reason for refusal
AMND Amendment
E601 Decision to refuse application
X091 Application refused [patent]
AMND Amendment
X701 Decision to grant (after re-examination)
GRNT Written decision to grant