KR20180081330A - 적외선 센서를 이용한 동작 인식 디지털 아트 생성 시스템 및 방법 - Google Patents

적외선 센서를 이용한 동작 인식 디지털 아트 생성 시스템 및 방법 Download PDF

Info

Publication number
KR20180081330A
KR20180081330A KR1020170002441A KR20170002441A KR20180081330A KR 20180081330 A KR20180081330 A KR 20180081330A KR 1020170002441 A KR1020170002441 A KR 1020170002441A KR 20170002441 A KR20170002441 A KR 20170002441A KR 20180081330 A KR20180081330 A KR 20180081330A
Authority
KR
South Korea
Prior art keywords
digital art
infrared sensor
line
motion
hand
Prior art date
Application number
KR1020170002441A
Other languages
English (en)
Inventor
오수열
박진관
이경지
성진주
임진아
김광진
Original Assignee
목포대학교산학협력단
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 목포대학교산학협력단 filed Critical 목포대학교산학협력단
Priority to KR1020170002441A priority Critical patent/KR20180081330A/ko
Publication of KR20180081330A publication Critical patent/KR20180081330A/ko

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/017—Gesture based interaction, e.g. based on a set of recognized hand gestures
    • G—PHYSICS
    • G01—MEASURING; TESTING
    • G01J—MEASUREMENT OF INTENSITY, VELOCITY, SPECTRAL CONTENT, POLARISATION, PHASE OR PULSE CHARACTERISTICS OF INFRARED, VISIBLE OR ULTRAVIOLET LIGHT; COLORIMETRY; RADIATION PYROMETRY
    • G01J1/00—Photometry, e.g. photographic exposure meter
    • G01J1/42—Photometry, e.g. photographic exposure meter using electric radiation detectors
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0484—Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range
    • G06K9/00375—
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/10—Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
    • G06V40/107—Static hand or arm
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F2203/00—Indexing scheme relating to G06F3/00 - G06F3/048
    • G06F2203/048—Indexing scheme relating to G06F3/048
    • G06F2203/04804—Transparency, e.g. transparent or translucent windows

Abstract

본 발명의 일면에 따른 적외선 센서를 이용한 동작 인식 디지털 아트 생성 시스템은, 적외선 센서를 이용한 동작 인식 디지털 아트 생성 모듈을 제공하기 위한 프로그램이 저장된 메모리; 및 상기 프로그램을 실행시키는 프로세서를 포함하되, 상기 프로세서는 상기 프로그램을 실행시킴에 따라, 적외선 센서가 생성한 3D 영상을 분석하여, 오른손 및 왼손을 인식하고, 각 손의 동작을 인식하고, 인식된 동작에 대응하여 그림판에 디지털 아트를 생성하는 것을 특징으로 한다.

Description

적외선 센서를 이용한 동작 인식 디지털 아트 생성 시스템 및 방법{System and Method for Generating Motion-Recognized Digital Art By Using Infrared Sensor}
본 발명은 실감 미디어 콘텐츠(Immersive Media Contents) 분야에 관한 것으로서, 구체적으로 사용자의 오감을 활용한 콘텐츠 구현하여 사용자의 몰입감을 증대시키는 적외선 센서를 이용한 동작 인식 디지털 아트 생성 시스템 및 방법에 관한 것이다.
현재 전자 기기에 입력하는 사용자 인터페이스로서 키보드, 마우스 등의 IT 기기가 많이 사용되고 있다. 또한 근래 들어 사용자가 터치 스크린을 통하여 편리하게 전자 기기에 입력할 수 있는 디스플레이 장치가 널리 사용되고 있다.
또한 최근에는 키보드, 마우스, 터치 스크린과 같은 전형적인 입력 장치가 아닌 동작 인식을 통하여 전자기기에 정보를 입력할 수 있는 기술이 활발히 개발되고 있고, 터치가 없는(touchless) 장치의 필요성이 증가하고 있다.
동작 인식뿐만 아니라, 음성 인식, 안면 인식, 생체 인식, 뇌파 인식 등과 관련하여 다양한 입력 인터페이스에 대한 연구가 활발히 진행되고 있으며, 다양한 기업 및 공공기관에 관련 기술에 대한 투자가 증대되고 시장화가 급속하게 진행되고 있다.
사용자 인터페이스(User Interface)로서, 종래 명령어 라인 인터페이스(CLI, Command Line Interface), 그래픽 사용자 인터페이스(GUI, Graphic User Interface) 와 구별되는 자연스러운 사용자 인터페이스(NUI, Natural User Interface)에 대한 연구가 활발하게 진행되고 있다.
본 발명은 전술한 문제를 해결하기 위하여, 적외선 센서를 이용한 동작 인식 디지털 아트 생성 시스템과 방법을 제공하는 것을 그 목적으로 한다.
본 발명의 다른 목적은, 동작 인식 중 특히 손동작을 정밀하게 인식하여 선 그리기 및 도형 그리기를 지원하고, 선의 두께와 투명도와 같은 선을 특성을 조정할 수 있도록 하여, NUI 응용 프로그램을 이용하여, 디지털 아트를 편리하게 생성하는 도구를 제공하는 것이다.
본 발명의 목적은 이상에서 언급한 목적으로 제한되지 않으며, 언급되지 않은 또 다른 목적들은 아래의 기재로부터 당업자에게 명확하게 이해될 수 있을 것이다.
전술한 목적을 달성하기 위한 본 발명의 일면에 따른 적외선 센서를 이용한 동작 인식 디지털 아트 생성 시스템은, 적외선 센서를 이용한 동작 인식 디지털 아트 생성 모듈을 제공하기 위한 프로그램이 저장된 메모리; 및 상기 프로그램을 실행시키는 프로세서를 포함하되, 상기 프로세서는 상기 프로그램을 실행시킴에 따라, 적외선 센서가 생성한 3D 영상을 분석하여, 오른손 및 왼손을 인식하고, 각 손의 동작을 인식하고, 인식된 동작에 대응하여 그림판에 디지털 아트를 생성하는 것을 특징으로 한다.
본 발명의 다른 일면에 따른 적외선 센서를 이용한 동작 인식 디지털 아트 생성 시스템은 일정 영역 내에서 움직이는 오른손, 왼손 및 손에 들린 도구의 움직임을 3D영상으로 생성하는 적외선 센서부; 상기 3D 영상으로부터 제스처 정보를 추출하는 제스처 추출부; 상기 제스처 정보를 디지털 아트 제어 코드로 변환하는 API부; 및 상기 디지털 아트 제어 코드를 입력받아 디지털 아트를 생성하는 그림판;을 포함한다.
본 발명에 따르면, 디지털 아트 생성의 전 과정이 적외선 센서를 이용한 동작 인식에 의하여 이루어지므로, 직관적인 UX(User Experience) 인터페이스를 제공할 수 있다.
실감 미디어 콘텐츠의 교육용 프로그램을 활용할 수 있다. 키보드나 마우스를 사용하지 않고, 사용자의 움직임을 적외선 센서를 통하여 직접 인식하여 반영하는 실감 미디어 콘텐츠 응용 기술은 기존의 GUI 환경에서 경험하기 어려운 인간 중심의 사용법 및 몰입감을 제공할 수 있다.
실감 미디어 콘텐츠는 미디어 산업의 확대로 인하여 게임, 시뮬레이션, 과학기술분야에 NUI로서 응용이 가능하다.
도 1은 본 발명에 따른 적외선 센서를 이용한 동작 인식 디지털 아트 생성 방법이 구현되는 컴퓨터 시스템의 구성을 설명하기 위한 예시도.
도 2는 본 발명에 따른 적외선 센서를 이용한 동작 인식 디지털 아트 생성 시스템의 실행 화면을 표시한 도면.
도 3은 본 발명의 부분 실시예에 따른 원을 그리는 제스처를 설명하기 위한 예시도.
도 4는 본 발명의 부분 실시예에 따른 선을 그리는 제스처를 설명하기 위한 예시도.
도 5는 본 발명의 부분 실시예에 따른 선의 두께(속성)을 변경하는 제스처를 설명하기 위한 예시도.
도 6은 본 발명의 부분 실시예에 따른 선의 색상(속성)을 변경하는 제스처를 설명하기 위한 예시도.
도 7은 본 발명의 부분 실시예에 따른 선의 투명도(속성)을 변경하는 제스처를 설명하기 위한 예시도.
도 8은 본 발명의 부분 실시예에 따른 생성한 디지털 아트를 삭제하는 제스처를 설명하기 위한 예시도 예시도.
도 9는 본 발명의 부분 실시예에 따른 생성한 디지털 아트를 저장하는 제스처를 설명하기 위한 예시도 예시도.
도 10은 본 발명에 적외선 센서를 이용한 동작 인식 디지털 아트 생성 시스템의 구성도.
본 발명의 이점 및 특징, 그리고 그것들을 달성하는 방법은 첨부되는 도면과 함께 상세하게 후술되어 있는 실시예들을 참조하면 명확해질 것이다. 그러나 본 발명은 이하에서 개시되는 실시예들에 한정되는 것이 아니라 서로 다른 다양한 형태로 구현될 것이며, 단지 본 실시예들은 본 발명의 개시가 완전하도록 하며, 본 발명이 속하는 기술분야에서 통상의 지식을 가진 자에게 발명의 범주를 완전하게 알려주기 위해 제공되는 것이며, 본 발명은 청구항의 범주에 의해 정의될 뿐이다. 한편, 본 명세서에서 사용된 용어는 실시예들을 설명하기 위한 것이며 본 발명을 제한하고자 하는 것은 아니다. 본 명세서에서, 단수형은 문구에서 특별히 언급하지 않는 한 복수형도 포함한다. 명세서에서 사용되는 "포함한다(comprises)" 및/또는 "포함하는(comprising)"은 언급된 구성소자, 단계, 동작 및/또는 소자는 하나 이상의 다른 구성소자, 단계, 동작 및/또는 소자의 존재 또는 추가를 배제하지 않는다.
이하, 본 발명의 바람직한 실시예에 대하여 첨부한 도면을 참조하여 상세히 설명하기로 한다.
도 1은 본 발명에 따른 적외선 센서를 이용한 동작 인식 디지털 아트 생성 방법이 구현되는 컴퓨터 시스템의 구성을 설명하기 위한 예시도이다.
한편, 본 발명의 실시예에 따른 적외선 센서를 이용한 동작 인식 디지털 아트 생성 방법은 컴퓨터 시스템에서 구현되거나, 또는 기록매체에 기록될 수 있다. 도 1에 도시된 바와 같이, 컴퓨터 시스템은 적어도 하나 이상의 프로세서(110)와, 메모리(120)와, 사용자 입력 장치(150)와, 데이터 통신 버스(130)와, 사용자 출력 장치(160)와, 저장소(140)를 포함할 수 있다. 전술한 각각의 구성 요소는 데이터 통신 버스(130)를 통해 데이터 통신을 한다.
컴퓨터 시스템은 네트워크(180)에 연결된 네트워크 인터페이스(170)를 더 포함할 수 있다. 상기 프로세서(110)는 중앙처리 장치(central processing unit (CPU))이거나, 혹은 메모리(120) 및/또는 저장소(140)에 저장된 명령어를 처리하는 반도체 장치일 수 있다.
상기 메모리(120) 및 상기 저장소(140)는 다양한 형태의 휘발성 혹은 비휘발성 저장매체를 포함할 수 있다. 예컨대, 상기 메모리(120)는 ROM(123) 및 RAM(126)을 포함할 수 있다.
따라서, 본 발명의 실시예에 따른 적외선 센서를 이용한 동작 인식 디지털 아트 생성 방법은 컴퓨터에서 실행 가능한 방법으로 구현될 수 있다. 본 발명의 실시예에 따른 적외선 센서를 이용한 동작 인식 디지털 아트 생성 방법이 컴퓨터 장치에서 수행될 때, 컴퓨터로 판독 가능한 명령어들이 본 발명에 따른 운영 방법을 수행할 수 있다.
한편, 상술한 본 발명에 따른 적외선 센서를 이용한 동작 인식 디지털 아트 생성 방법은 컴퓨터로 읽을 수 있는 기록매체에 컴퓨터가 읽을 수 있는 코드로서 구현되는 것이 가능하다. 컴퓨터가 읽을 수 있는 기록 매체로는 컴퓨터 시스템에 의하여 해독될 수 있는 데이터가 저장된 모든 종류의 기록 매체를 포함한다. 예를 들어, ROM(Read Only Memory), RAM(Random Access Memory), 자기 테이프, 자기 디스크, 플래시 메모리, 광 데이터 저장장치 등이 있을 수 있다. 또한, 컴퓨터로 판독 가능한 기록매체는 컴퓨터 통신망으로 연결된 컴퓨터 시스템에 분산되어, 분산방식으로 읽을 수 있는 코드로서 저장되고 실행될 수 있다.
도 2는 본 발명에 따른 적외선 센서를 이용한 동작 인식 디지털 아트 생성 시스템의 실행 화면을 표시한 도면을 나타낸다.
Processing은 인터랙티브한 이미지와 애니메이션을 프로그래밍으로 제작할 수 있는 환경을 제공하는 오픈 소스 프로그래밍 언어이다. 도 2는 Processing을 이용하여 구축한 그림판 환경을 나타낸다.
NUI(자연스러운 사용자 인터페이스)의 영역에는 음성 인터페이스(Voice Interface), 감각 인터페이스(Sensory Interface), 터치 인터페이스(Touch Interface), 동작 인터페이스(Gesture Interface) 등이 있는데, 본 발명은 동작 인터페이스(Gesture Interface)와 관련하여 사용자의 움직임을 센서 또는 카메라를 이용하여 분석하여 사용자의 의도를 시스템이 이해하고 반응하는 기술을 제공하고자 한다. 동작 인터페이스 중에서도 본 발명에서는 손 동작을 인식하여 정밀한 입력 표현을 제공할 것이다.
손 동작을 인식하기 위한 동작 인터페이스는 고감도 센서를 필요로 한다. 대표적인 장치로서 키넥트(Kinect)와 리프 모션(Leap Motion)이 있다. 키넥트는 모션 센서를 이용하여 몸 전체의 동작을 추적한다. 신체 전반에 걸친 데이터를 캡쳐하여 움직임에 대한 깊이(depth)를 토대로 사용자의 의도를 파악하고, 애플리케이션에 적용시킨다. 반면, 리프 모션은 손 동작은 3D로 캡쳐하여 분석 후 애플리케이션에서 모션 컨트롤을 수행할 수 있다.
키넥트가 전신을 대상으로 하는 대신 정밀한 손 동작을 캡쳐하기 어려운 점이 있는 반면, 리프 모션은 키넥트와 유사한 원리를 이용하나, 수백배 높은 감도를 제공하고, 10 ㎛ 수준의 움직임 감지가 가능하며 290 FPS(Frame per second) 수준의 정밀도를 제공한다.
리프 모션의 라이브러리를 이용하여 손동작을 인식하며, 손으로 들고 있는 도구가 있다면, 도구의 동작도 인식할 수 있다. 통상 리프 모션의 라이브러리는 (1) 손바닥 좌표 인식, (2) 손가락 개수 인식, (3) 왼손, 오른손 인식, (4) 제스처 인식 등의 기능을 지원한다.
본 발명은 손 동작의 동작 인터페이스로서 리프 모션을 이용하여 얻은 정보를 토대로, Processing을 이용하여 그림판 형태로 제공되는 디지털 아트를 생성하는 시스템 및 방법을 제시할 것이다. 도 2 내지 도 9에서는 리프 모션의 인식 동작을 Processing에서 디지털 아트를 생성하는 구체적인 예시를 제시할 것이다. 이는 예시적인 것이며, 발명의 범위를 제한하는 것은 아니다.
도 3은 본 발명의 부분 실시예에 따른 원을 그리는 제스처를 설명하기 위한 예시도이다.
본 발명에 따라서, 그림판에 원을 그리기 위하여, 오른손의 집게 손가락을 편 상태에서 원을 그리면 된다. 리프 모션의 라이브러리에서는 인식 대상이 되는 객체를 인식한다. 예컨대, 상기 객체는 오른손, 왼손, 손에 들린 도구를 의미할 수 있다. 이는 예시적인 것이며, 발명의 범위를 제한하지 아니한다. 라이브러리가 제공하는 함수 hand.isRight()를 이용하여 객체가 오른손임을 인식할 수 있고, 라이브러리가 제공하는 함수 hand.isLeft()를 이용하여 객체가 왼손임을 인식할 수 있고, hand.isTool()을 이용하여 객체가 도구임을 인식할 수 있다.
동작을 인식하는 공간적 범위 내에서 두 사람 이상이 오른손을 사용하는 경우, 동시에 복수의 오른손을 인식할 수도 있으나, 명령어의 충돌을 방지하기 위하여, 인식된 순서에 따라 가장 먼저 인식된 오른손을 입력 인터페이스로 결정할 수 있고, 인식된 오른손의 정보를 저장하여, 그림을 그리는 중에 입력 인터페이스가 변경되는 것(다른 사람의 오른손을 입력 인터페이스로 변경하는 것)을 방지할 수 있다.
리프 모션에서 입력 인터페이스로 사용할 객체가 오른손임을 인식하고, 인식된 집게 손가락이 원을 그리는 동작이 수행되면, 그림판에 디지털 아트로서 원을 생성한다.
도 4는 본 발명의 부분 실시예에 따른 선을 그리는 제스처를 설명하기 위한 예시도이다.
도 3과 유사하게 오른손의 집게 손가락을 편 상태에서 상하좌우 방향으로 집게 손가락을 움직이면, 집게 손가락의 움직임에 따라 선이 그려지게 된다. 선을 다 그린 후에 주먹을 쥐면, 선 그리기가 종료된다.
리프 모션이 제공하는 라이브러리인 hand.isRight()을 이용하여 객체가 오른손임을 파악하고, hand.getPosition()으로부터 오른손의 위치 좌표를 얻을 수 있고, hand.getIndexFinger()로부터, 펴진 손가락을 알 수 있다. 통상 다섯자리의 이진수 형태로 손가락의 상태를 표현할 수 있다. 예컨대, 00000의 경우, 주먹을 쥔 상태이고, 11111은 손가락 5개를 모두 편 상태, 00011은 엄지와 검지 손가락을 편 상태, 00110은 검지와 중지를 편 상태, 10001은 엄지와 소지를 편 상태를 나타낼 수 있다.
리프 모션은 초당 290 프레임의 정보를 얻을 수 있으므로, 실시간으로 수집되는 손의 위치 정보(hand.getPosition())을 이용하여 좌표를 연결하면, 선이 그리지게 된다. 그림판에 그림이 그려지도록 하는 것은 Processing을 이용하여 프로그래밍된다.
도 5는 본 발명의 부분 실시예에 따른 선의 두께(속성)을 변경하는 제스처를 설명하기 위한 예시도이다.
도 4에서 그려지는 선의 두께를 변경할 수 있다. 예컨대, 오른손은 주먹을 쥔 상태에서 왼손 집게 손가락을 펴고, 왼손을 상하 방향으로 움직임에 따라 선의 두께의 변화를 디스플레이해주고, 적절한 선의 두께가 선택되었을 때, 왼손을 주먹 쥐면, 해당 두께로 변경되어, 변경된 두께의 선을 그릴 수 있게 된다.
도 6은 본 발명의 부분 실시예에 따른 선의 색상(속성)을 변경하는 제스처를 설명하기 위한 예시도이다.
도 4에서 그려지는 선의 색상을 변경할 수 있다.
예컨대, 왼손을 모두 펴게 되면, 2차원 평면 형태의 색상 테이블이 디스플레이되고, 왼손을 상하좌우로 움직여 원하는 색상을 선택할 수 있다. 원하는 색상을 선택되었을 때, 왼손을 주먹 쥐면, 해당 색상으로 변경된다.
도 7은 본 발명의 부분 실시예에 따른 선의 투명도(속성)을 변경하는 제스처를 설명하기 위한 예시도이다.
도 4에서 그려지는 선의 투명도를 변경할 수 있다.
예컨대, 오른손 주먹을 쥔 상태에서, 왼손 검지 및 중지를 펴고, 왼손을 상하로 움직이는 방법으로 선의 투명도를 변경할 수 있다.
도 8은 본 발명의 부분 실시예에 따른 생성한 디지털 아트를 삭제하는 제스처를 설명하기 위한 예시도 예시도이다.
예컨대, 오른손을 모두 펴면, 그림판에 그려진 그림이 삭제된다. 다만, 작업한 디지털 아트가 쉽게 삭제되는 것을 방지하기 위하여, 삭제하기 전에 확인하는 메시지를 표시할 수 있고, 삭제하는 것과 삭제하지 않는 것을 선택하는 방법 역시 손의 동작을 인식하여 입력할 수 있다.
도 9는 본 발명의 부분 실시예에 따른 생성한 디지털 아트를 저장하는 제스처를 설명하기 위한 예시도 예시도이다.
오른손 엄지를 편 상태에서 오른손으로 원을 그리스 제스처를 취하면 그림판의 그림이 저장된다.
도 10은 본 발명에 적외선 센서를 이용한 동작 인식 디지털 아트 생성 시스템의 구성도를 나타낸다.
본 발명에 따른 적외선 센서를 이용한 동작 인식 디지털 아트 생성 시스템은 일정 영역 내에서 움직이는 오른손, 왼손 및 손에 들린 도구의 움직임을 3D영상으로 생성하는 적외선 센서부; 상기 3D 영상으로부터 제스처 정보를 추출하는 제스처 추출부; 상기 제스처 정보를 디지털 아트 제어 코드로 변환하는 API부; 및 상기 디지털 아트 제어 코드를 입력받아 디지털 아트를 생성하는 그림판;을 포함한다.
바람직하게는, 상기 제스처 추출부는, 리프 모션을 이용하여 3D 영상을 2D 영상으로 변환한 후 상기 제스처 정보를 추출할 수 있다.
바람직하게는, 상기 API부는, 변환한 디지털 아트 제어 코드를 상기 그림판에 입력하는 것이고, 상기 디지털 아트 생성 코드는, 원 그리기 코드, 선 그리기 코드, 선의 두께 선택 코드, 선의 색상 선택 코드, 선의 투명도 선택 코드, 그림 삭제 코드 및 그림 저장 코드를 포함한다.
바람직하게는, 상기 그림판은, 상기 입력된 디지털 아트 제어 코드에 따라,
생성할 선의 두께, 생성할 선의 색상 및 생성할 선의 투명도를 변경하는 기능; 생성된 디지털 아트를 삭제하는 기능; 및 생성된 디지털 아트를 저장하는 기능; 을 포함할 수 있다.
이상, 본 발명의 구성에 대하여 첨부 도면을 참조하여 상세히 설명하였으나, 이는 예시에 불과한 것으로서, 본 발명이 속하는 기술 분야에 통상의 지식을 가진 자라면 본 발명의 기술적 사상의 범위 내에서 다양한 변형과 변경이 가능함은 물론이다. 따라서 본 발명의 보호 범위는 전술한 실시예에 국한되어서는 아니 되며 이하의 특허청구범위의 기재에 의하여 정해져야 할 것이다.
100: 컴퓨터 시스템
110: 프로세서
120: 메모리
123: ROM
126: RAM
130: 데이터 통신 버스
140: 저장소
150: 사용자 입력 장치
160: 사용자 출력 장치
170: 네트워크 인터페이스
180: 네트워크
1010: 적외선 카메라부
1020: 제스처 추출부
1030: API부
1040: 그림판

Claims (12)

  1. 적외선 센서를 이용한 동작 인식 디지털 아트 생성 시스템에 있어서,
    적외선 센서를 이용한 동작 인식 디지털 아트 생성 모듈을 제공하기 위한 프로그램이 저장된 메모리; 및
    상기 프로그램을 실행시키는 프로세서를 포함하되,
    상기 프로세서는 상기 프로그램을 실행시킴에 따라,
    적외선 센서가 생성한 3D 영상을 분석하여, 오른손 및 왼손을 인식하고, 각 손의 동작을 인식하고, 인식된 동작에 대응하여 그림판에 디지털 아트를 생성하는 것을 특징으로 하는
    적외선 센서를 이용한 동작 인식 디지털 아트 생성 시스템.
  2. 제1항에 있어서,
    상기 프로세서는,
    상기 인식된 동작이 오른손 검지를 펴고, 오른손이 원을 그리는 동작을 하면, 그림판에 원 형상의 디지털 아트를 생성하는 것
    인 적외선 센서를 이용한 동작 인식 디지털 아트 생성 시스템.
  3. 제1항에 있어서,
    상기 프로세서는,
    상기 인식된 동작이 오른손 검지를 펴고, 오른손을 상하좌우로 움직이는 경우, 그림판에 움직이는 방향대로 선 형상의 디지털 아트를 생성하고, 상기 선 형상의 디지털 아트를 생성하는 중에, 오른손을 주먹 쥐는 동작이 인식되면, 선 형상의 디지털 아트를 생성하는 것을 중단하는 것
    인 적외선 센서를 이용한 동작 인식 디지털 아트 생성 시스템.
  4. 제1항에 있어서,
    상기 프로세서는,
    상기 인식된 동작이 오른손을 주먹 쥔 상태에서 왼손 검지를 펴고 상하로 움직이는 경우, 선의 두께가 변화되는 화면을 보여주고, 상기 선의 두께가 변화되는 상황에서 왼손 주먹을 쥐면, 선택되는 두께의 선이 그림판에 그려지는 것
    인 적외선 센서를 이용한 동작 인식 디지털 아트 생성 시스템.
  5. 제1항에 있어서,
    상기 프로세서는,
    상기 인식된 동작이 왼손을 모두 편 상태에서 상하좌우로 움직여 색상을 선택하는 것
    인 적외선 센서를 이용한 동작 인식 디지털 아트 생성 시스템.
  6. 제1항에 있어서,
    상기 프로세서는,
    상기 인식된 동작이 오른손을 주먹 쥔 상태에서 왼손 검지 및 중지를 펴고, 왼손을 상하로 움직이는 경우, 선의 투명도가 변화되는 화면을 보여주고, 상기 선의 투명도가 변화되는 상황에서 왼손 주먹을 쥐면, 선의 투명도 선택되고, 상기 선을 그릴 때, 선택되는 투명도의 선이 그림판에 그려지는 것
    인 적외선 센서를 이용한 동작 인식 디지털 아트 생성 시스템.
  7. 제1항에 있어서,
    상기 프로세서는,
    상기 인식된 동작이 오른손을 모두 편 것인 경우, 현재 생성된 디지털 아트가 삭제되는 것
    인 적외선 센서를 이용한 동작 인식 디지털 아트 생성 시스템.
  8. 제1항에 있어서,
    상기 프로세서는,
    상기 인식된 동작이 오른손 엄지를 편 상태에서, 오른손이 원을 그리는 동작을 하면, 그림판의 디지털 아트가 저장되는 것
    인 적외선 센서를 이용한 동작 인식 디지털 아트 생성 시스템.
  9. 일정 영역 내에서 움직이는 오른손, 왼손 및 손에 들린 도구의 움직임을 3D영상으로 생성하는 적외선 센서부;
    상기 3D 영상으로부터 제스처 정보를 추출하는 제스처 추출부;
    상기 제스처 정보를 디지털 아트 제어 코드로 변환하는 API부; 및
    상기 디지털 아트 제어 코드를 입력받아 디지털 아트를 생성하는 그림판;
    을 포함하는 적외선 센서를 이용한 동작 인식 디지털 아트 생성 시스템.
  10. 제9항에 있어서,
    상기 제스처 추출부는,
    리프 모션을 이용하여 3D 영상을 2D 영상으로 변환한 후 상기 제스처 정보를 추출하는 것을 특징으로 하는
    적외선 센서를 이용한 동작 인식 디지털 아트 생성 시스템.
  11. 제9항에 있어서,
    상기 API부는,
    변환한 디지털 아트 제어 코드를 상기 그림판에 입력하는 것이고,
    상기 디지털 아트 제어 코드는,
    원 그리기 코드, 선 그리기 코드, 선의 두께 선택 코드, 선의 색상 선택 코드, 선의 투명도 선택 코드, 그림 삭제 코드 및 그림 저장 코드를 포함하는 것
    인 적외선 센서를 이용한 동작 인식 디지털 아트 생성 시스템.
  12. 제9항에 있어서,
    상기 그림판은,
    상기 입력된 디지털 아트 제어 코드에 따라,
    생성할 선의 두께, 생성할 선의 색상 및 생성할 선의 투명도를 변경하는 기능;
    생성된 디지털 아트를 삭제하는 기능; 및
    생성된 디지털 아트를 저장하는 기능;
    을 포함하는 것
    인 적외선 센서를 이용한 동작 인식 디지털 아트 생성 시스템.

KR1020170002441A 2017-01-06 2017-01-06 적외선 센서를 이용한 동작 인식 디지털 아트 생성 시스템 및 방법 KR20180081330A (ko)

Priority Applications (1)

Application Number Priority Date Filing Date Title
KR1020170002441A KR20180081330A (ko) 2017-01-06 2017-01-06 적외선 센서를 이용한 동작 인식 디지털 아트 생성 시스템 및 방법

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020170002441A KR20180081330A (ko) 2017-01-06 2017-01-06 적외선 센서를 이용한 동작 인식 디지털 아트 생성 시스템 및 방법

Publications (1)

Publication Number Publication Date
KR20180081330A true KR20180081330A (ko) 2018-07-16

Family

ID=63048226

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020170002441A KR20180081330A (ko) 2017-01-06 2017-01-06 적외선 센서를 이용한 동작 인식 디지털 아트 생성 시스템 및 방법

Country Status (1)

Country Link
KR (1) KR20180081330A (ko)

Similar Documents

Publication Publication Date Title
US10866632B2 (en) Interaction engine for creating a realistic experience in virtual reality/augmented reality environments
US10817130B2 (en) Dynamic user interactions for display control and measuring degree of completeness of user gestures
US11048333B2 (en) System and method for close-range movement tracking
US9910498B2 (en) System and method for close-range movement tracking
EP1615109B1 (en) Recognizing gestures and using gestures for interacting with software applications
US20150084859A1 (en) System and Method for Recognition and Response to Gesture Based Input
JP2013037675A5 (ko)
US10372229B2 (en) Information processing system, information processing apparatus, control method, and program
Matlani et al. Virtual mouse using hand gestures
Saoji et al. Air canvas application using Opencv and numpy in python
Ismail et al. Vision-based technique and issues for multimodal interaction in augmented reality
Tosas et al. Virtual touch screen for mixed reality
CN111860086A (zh) 基于深度神经网络的手势识别方法、装置及系统
Sharma et al. Interactive projector screen with hand detection using gestures
KR101211178B1 (ko) 증강 현실 컨텐츠 재생 시스템 및 방법
KR20180081330A (ko) 적외선 센서를 이용한 동작 인식 디지털 아트 생성 시스템 및 방법
CN114327063A (zh) 目标虚拟对象的交互方法、装置、电子设备及存储介质
Raees et al. Thumb inclination-based manipulation and exploration, a machine learning based interaction technique for virtual environments
KR101506197B1 (ko) 양손을 이용한 동작인식 입력방법
WO2020170851A1 (ja) 情報処理装置、および情報処理方法、並びにプログラム
Singh et al. Digitized Interaction: A Gesture-Controlled Whiteboard System with OpenCV, MediaPipe and NumPy
Chahare et al. Hand Recognition and Gesture Control Using a Wi-Fi Application in Smart Toye's
Aeini Natural Interaction with Projected Screen on Surfaces using Infrared Depth Camera
Ali et al. Finger Gesture Based Natural User Interface
Padliya Gesture Recognition and Recommendations