KR100952603B1 - 카메라를 이용한 화면 스크롤 장치 및 방법 - Google Patents

카메라를 이용한 화면 스크롤 장치 및 방법 Download PDF

Info

Publication number
KR100952603B1
KR100952603B1 KR1020090106581A KR20090106581A KR100952603B1 KR 100952603 B1 KR100952603 B1 KR 100952603B1 KR 1020090106581 A KR1020090106581 A KR 1020090106581A KR 20090106581 A KR20090106581 A KR 20090106581A KR 100952603 B1 KR100952603 B1 KR 100952603B1
Authority
KR
South Korea
Prior art keywords
finger
camera
screen
portable terminal
coordinates
Prior art date
Application number
KR1020090106581A
Other languages
English (en)
Inventor
김유석
제영희
조동원
Original Assignee
팬터로그인터액티브 주식회사
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 팬터로그인터액티브 주식회사 filed Critical 팬터로그인터액티브 주식회사
Priority to KR1020090106581A priority Critical patent/KR100952603B1/ko
Application granted granted Critical
Publication of KR100952603B1 publication Critical patent/KR100952603B1/ko

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0484Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range
    • G06F3/0485Scrolling or panning
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/002Specific input/output arrangements not covered by G06F3/01 - G06F3/16
    • G06F3/005Input arrangements through a video camera
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/017Gesture based interaction, e.g. based on a set of recognized hand gestures
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0487Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/20Movements or behaviour, e.g. gesture recognition
    • G06V40/28Recognition of hand or arm movements, e.g. recognition of deaf sign language

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • General Engineering & Computer Science (AREA)
  • Human Computer Interaction (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Multimedia (AREA)
  • Health & Medical Sciences (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • General Health & Medical Sciences (AREA)
  • Psychiatry (AREA)
  • Social Psychology (AREA)
  • User Interface Of Digital Computer (AREA)
  • Position Input By Displaying (AREA)

Abstract

본 발명의 화면 스크롤 장치는 휴대용 단말기에 부착되어 있는 카메라로 입력되는 화면을 분석하여 손가락의 이동 방향을 인식하고, 이를 이용하여 손가락의 이동 방향에 따라 휴대용 단말기에 표시되는 화면을 스크롤 하는 것을 특징으로 한다. 예를 들어서, 휴대용 단말기에 설치되어 있는 카메라를 손가락으로 가린 후에 손가락을 아래쪽으로 움직이면 휴대용 단말기의 화면이 아래쪽으로 스크롤 되고, 손가락을 위쪽으로 움직이면 휴대용 단말기의 화면이 위쪽으로 스크롤 된다. 동일한 방법으로 카메라를 손가락으로 가린 후에 손가락을 오른쪽으로 움직이면 휴대용 단말기의 화면이 오른쪽으로 스크롤 되고, 손가락을 왼쪽으로 움직이면 휴대용 단말기의 화면이 왼쪽으로 스크롤 되는 것을 특징으로 한다.
카메라, 화면 스크롤, 손가락 인식, 휠 기능

Description

카메라를 이용한 화면 스크롤 장치 및 방법{Screen scroll method and device using camera}
본 발명은 휴대용 단말기에 부착되어 있는 카메라를 이용하여 휴대용 단말기의 화면을 스크롤 할 수 있는 화면 스크롤 장치 및 방법에 관한 것이다.
최근 들어 휴대용 단말기의 기능이 향상되면서 거의 모든 휴대용 단말기에는 카메라가 내장되어 있다. 또한, 무선 인터넷 기술의 발전으로 휴대용 단말기에서 인터넷 이용이 증대되고 있다.
그러나, 휴대용 단말기는 상대적으로 작은 디스플레이 장치를 내장하고 있어 휴대용 단말기에서 인터넷 화면을 한 번에 출력할 수 없기 때문에 사용자가 원하는 정보를 얻기 위해서는 터치 패드 또는 특별히 할당된 버튼을 이용하여 인터넷 화면을 스크롤 해야만 하는 문제점이 있어왔다.
본 발명은 상기의 인터넷 화면 스크롤 장치가 가지고 있는 문제점을 해결하기 위한 것으로, 휴대용 단말기에 내장되어 있는 카메라 앞에서 손가락을 움직이는 것만으로 인터넷 화면을 스크롤 할 수 있는 화면 스크롤 장치 및 방법을 제공하는 것을 그 목적으로 한다.
본 발명의 화면 스크롤 장치는 휴대용 단말기에 내장되어 있는 카메라로 입력되는 영상을 분석하여 어두운 부분과 밝은 부분으로 나누고 어두운 부분의 이동 방향을 인식하여 화면을 스크롤 하는 것을 특징으로 한다. 예를 들어서, 손가락으로 카메라를 모두 가린 후에 손가락을 아래쪽으로 이동시키면 휴대용 단말기의 화면도 아래쪽으로 스크롤 되고, 손가락을 위쪽으로 이동시키면 휴대용 단말기의 화면도 위쪽으로 스크롤 되는 것을 특징으로 한다. 마찬가지 방법으로 손가락으로 카메라를 모두 가린 후에 손가락으로 오른쪽으로 이동시키면 휴대용 단말기의 화면도 오른쪽으로 스크롤 되고, 손가락을 왼쪽으로 이동시키면 휴대용 단말기의 화면도 왼쪽으로 스크롤 되는 것을 특징으로 한다.
상기와 같이 본 발명의 화면 스크롤 장치는 휴대용 단말기에 내장되어 있는 카메라 앞에서 손가락을 움직이는 것만으로 휴대용 단말기의 화면을 스크롤할 수 있기 때문에 상대적으로 작은 디스플레이 장치를 구비하고 있는 휴대용 단말기 등 에서 인터넷이나 고 해상도의 영상을 감상할 때 매우 유용할 것으로 사료된다.
본 발명은 다양한 변환을 가할 수 있고 여러 가지 실시 예를 가질 수 있는 바, 특정 실시 예들을 도면에 예시하고 상세한 설명에 상세하게 설명하고자 한다. 그러나, 이는 본 발명을 특정한 실시 형태에 대해 한정하려는 것이 아니며, 본 발명의 사상 및 기술 범위에 포함되는 모든 변환, 균등물 내지 대체물을 포함하는 것으로 이해되어야 한다. 본 발명을 설명함에 있어서 관련된 공지 기술에 대한 구체적인 설명이 본 발명의 요지를 흐릴 수 있다고 판단되는 경우 그 상세한 설명을 생략한다. 이하 본 발명에 의한 일 실시 예에 따라 그 구성과 작용을 상세히 설명한다.
도 1은 본 발명의 화면 스크롤 장치의 손가락 움직임 감지 방법의 개략도이다. 도 2는 본 발명의 화면 스크롤 장치에서 위쪽 방향으로 화면을 스크롤 하기 위한 일 실시 예의 순서도이다. 도 3은 본 발명의 화면 스크롤 장치의 상,하 스크롤 기능의 실시 예이다. 도 4는 본 발명의 화면 스크롤 장치의 좌,우 스크롤 기능의 실시 예이다.
본 발명의 화면 스크롤 장치는 휴대용 단말기에 내장되어 있는 카메라를 이용한다. 본 발명의 화면 스크롤 장치는 카메라로 입력되는 영상을 분석하여 손가락의 움직임을 검출한다. 본 발명의 화면 스크롤 장치의 손가락 움직임 검출 장치는 카메라로 입력되는 영상을 가로,세로 방향으로 10등분하여 10*10의 픽셀 값을 추출하고, 추출된 픽셀 값의 밝기 정도(0~255 : 255-white , 0-black)가 30 이상이면 밝은 픽셀로 간주하고 상기 값이 30 이하이면 어두운 픽셀로 간주한다. 어두운 픽셀과 밝은 픽셀을 판단하는 기준값인 30은 카메라의 종류에 따라서 변경될 수 있는 값이다. 우선 가로 방향을 기준으로 세로 방향으로 상기 어두운 픽셀의 시작점과 끝점의 좌표를 계산한다. 그 다음에 세로 방향을 기준으로 가로 방향으로 상기 어두운 픽셀의 시작점과 끝점의 좌표를 계산한다. 이렇게 계산된 가로,세로 방향의 어두운 픽셀의 시작점과 끝점 좌표 평균을 계산하여 손가락에 의해서 가려진 평균 영역의 좌표를 계산한다. 즉, 본 발명의 화면 스크롤 장치는 손가락이 비스듬하게 카메라를 가렸을 경우 손가락에 의해서 가려진 영역의 좌표만을 계산하기 위해서 어두운 픽셀의 시작점과 끝점 좌표의 평균값을 이용하여 계산하며, 계산된 값들 중에서 가로,세로 방향으로 최대값과 최소값을 계산하면 도 1과 같이 손가락에 의해서 카메라가 가려진 평균 영역의 좌표를 계산한다. 상기 평균 영역의 좌표를 연속적으로 계산하여 상기 좌표가 위쪽으로 이동하면 카메라를 가린 손가락이 위쪽으로 이동한 것으로 판단하여 휴대용 단말기의 화면을 위쪽으로 이동시키고, 상기 좌표가 아래쪽으로 이동하면 카메라를 가린 손가락이 아래쪽으로 이동한 것으로 판단하여 휴대용 단말기의 화면을 아래쪽으로 이동시키며, 상기 좌표가 오른쪽으로 이동하면 카메라를 가린 손가락이 오른쪽으로 이동한 것으로 판단하여 휴대용 단말기의 화면을 오른쪽으로 이동시키고, 상기 좌표가 왼쪽으로 이동하면 카메라를 가린 손가락이 왼쪽으로 이동한 것으로 판단하여 휴대용 단말기의 화면을 왼쪽으로 이동시킨다. 상기 손가락 움직임 검출 장치는 카메라의 전체 영역이 손가락으로 가려진 것으로 판단된 후에 이동 방향 인식을 시작하며, 손가락이 기준값 이상 이동하여 카메라 영역을 완전히 벗어난 것으로 인식된 경우에 휴대용 단말기의 화면을 이동 방향으로 이동시킨다. 따라서 카메라로 입력되는 여러 가지 종류의 노이즈에 의한 오작동을 최소화 하였다.
본 발명은 카메라가 내장된 휴대용 단말기에서 카메라 앞에서 손가락을 움직이는 것만으로 편리하게 화면을 상,하,좌,우 움직일 수 있는 휴대용 단말기 화면 스크롤 장치 및 방법을 기재하고 있어 상대적으로 작은 디스플레이 장치를 구비하고 있는 휴대용 단말기 등에서 편리하게 인터넷이나 고 해상도의 영상을 감상할 수 있어 관련 제품의 매출 증대를 가져올 것으로 기대된다.
도 1은 본 발명의 손가락 움직임 감지 방법.
도 2는 본 발명의 스크롤 장치의 개략적인 순서도.
도 3은 상,하 스크롤 장치의 구체적인 실시 예.
도 4는 좌,우 스크롤 장치의 구체적인 실시 예.

Claims (6)

  1. 휴대용 단말기의 카메라로 입력되는 영상을 분석하여 휴대용 단말기의 화면을 스크롤하는 휴대용 단말기 화면 스크롤 장치에 있어서,
    상기 카메라로 입력되는 영상을 분석하여 손가락의 움직임을 검출하는 손가락 움직임 검출 장치를 구비하고,
    상기 손가락 움직임 검출 장치는 카메라로 입력되는 영상을 가로세로 방향으로 10등분하여 10*10의 픽셀 값을 추출하여 그 값이 소정의 값 이하이면 어두운 영역으로 인식하고,
    가로 방향을 기준으로 세로 방향으로 상기 어두운 픽셀의 시작점과 끝점의 좌표를 계산하고,
    세로 방향을 기준으로 가로 방향으로 상기 어두운 픽셀의 시작점과 끝점의 좌표를 계산하며,
    상기 계산된 가로세로 방향의 어두운 픽셀의 시작점과 끝점 좌표 평균을 계산한 후 상기 좌표 평균의 최대,최소값으로 손가락에 의해서 가려진 평균 영역의 좌표를 계산하고,
    상기 손가락 움직임 검출 장치는 카메라의 전체 영역이 손가락으로 가려진 것으로 판단된 후에 이동 방향 인식을 시작하고,
    손가락이 기준값 이상 이동하여 카메라 영역을 완전히 벗어나면 상기 이동 방향으로 휴대용 단말기의 화면을 이동시키고,
    상기 손가락의 움직임을 상하좌우 네 방향으로 인식하고 이에 따라 휴대용 단말기의 화면을 상하좌우 네 방향으로 스크롤하는 것을 특징으로 하는 휴대용 단말기 화면 스크롤 장치.
  2. 휴대용 단말기의 카메라로 입력되는 영상을 분석하여 휴대용 단말기의 화면을 스크롤하는 휴대용 단말기 화면 스크롤 방법에 있어서,
    상기 카메라로 입력되는 영상을 분석하여 손가락의 움직임을 검출하는 손가락 움직임 검출 수단을 구비하고,
    상기 손가락 움직임 검출 수단은 카메라로 입력되는 영상을 가로,세로 방향으로 10등분하여 10*10의 픽셀 값을 추출하여 그 값이 소정의 값 이하이면 어두운 영역으로 인식하고,
    가로 방향을 기준으로 세로 방향으로 상기 어두운 픽셀의 시작점과 끝점의 좌표를 계산하고,
    세로 방향을 기준으로 가로 방향으로 상기 어두운 픽셀의 시작점과 끝점의 좌표를 계산하며,
    상기 계산된 가로,세로 방향의 어두운 픽셀의 시작점과 끝점 좌표 평균을 계산한 후 상기 좌표 평균의 최대,최소값으로 손가락에 의해서 가려진 평균 영역의 좌표를 계산하고,
    상기 손가락 움직임 검출 수단은 카메라의 전체 영역이 손가락으로 가려진 것으로 판단된 후에 이동 방향 인식을 시작하고,
    손가락이 기준값 이상 이동하여 카메라 영역을 완전히 벗어나면 상기 이동 방향으로 휴대용 단말기의 화면을 이동시키고,
    상기 손가락의 움직임을 상,하,좌,우 네 방향으로 인식하고 이에 따라 휴대용 단말기의 화면을 상,하,좌,우 네 방향으로 스크롤하는 것을 특징으로 하는 휴대용 단말기 화면 스크롤 방법.
  3. 삭제
  4. 삭제
  5. 삭제
  6. 삭제
KR1020090106581A 2009-11-05 2009-11-05 카메라를 이용한 화면 스크롤 장치 및 방법 KR100952603B1 (ko)

Priority Applications (1)

Application Number Priority Date Filing Date Title
KR1020090106581A KR100952603B1 (ko) 2009-11-05 2009-11-05 카메라를 이용한 화면 스크롤 장치 및 방법

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020090106581A KR100952603B1 (ko) 2009-11-05 2009-11-05 카메라를 이용한 화면 스크롤 장치 및 방법

Publications (1)

Publication Number Publication Date
KR100952603B1 true KR100952603B1 (ko) 2010-04-15

Family

ID=42219843

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020090106581A KR100952603B1 (ko) 2009-11-05 2009-11-05 카메라를 이용한 화면 스크롤 장치 및 방법

Country Status (1)

Country Link
KR (1) KR100952603B1 (ko)

Cited By (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR101068281B1 (ko) 2010-01-07 2011-09-28 성균관대학교산학협력단 후면부 손가락 움직임 및 제스처 인식을 이용한 휴대형 정보 단말기 및 콘텐츠 제어 방법
CN102368197A (zh) * 2011-10-02 2012-03-07 上海量明科技发展有限公司 用以触摸屏操作的方法及系统
CN102508595A (zh) * 2011-10-02 2012-06-20 上海量明科技发展有限公司 一种用以触摸屏操作的方法及终端
CN104978131A (zh) * 2015-06-18 2015-10-14 Tcl移动通信科技(宁波)有限公司 一种基于相机图像的电子书翻页检测方法及系统

Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20020073432A (ko) * 2001-03-16 2002-09-26 애질런트 테크놀로지스, 인크. 휴대용 전자 장치의 메뉴 항목 선택 제어 방법과 사용자식별 방법 및 휴대용 전자 장치

Patent Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20020073432A (ko) * 2001-03-16 2002-09-26 애질런트 테크놀로지스, 인크. 휴대용 전자 장치의 메뉴 항목 선택 제어 방법과 사용자식별 방법 및 휴대용 전자 장치

Cited By (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR101068281B1 (ko) 2010-01-07 2011-09-28 성균관대학교산학협력단 후면부 손가락 움직임 및 제스처 인식을 이용한 휴대형 정보 단말기 및 콘텐츠 제어 방법
CN102368197A (zh) * 2011-10-02 2012-03-07 上海量明科技发展有限公司 用以触摸屏操作的方法及系统
CN102508595A (zh) * 2011-10-02 2012-06-20 上海量明科技发展有限公司 一种用以触摸屏操作的方法及终端
CN104978131A (zh) * 2015-06-18 2015-10-14 Tcl移动通信科技(宁波)有限公司 一种基于相机图像的电子书翻页检测方法及系统
CN104978131B (zh) * 2015-06-18 2018-09-18 Tcl移动通信科技(宁波)有限公司 一种基于相机图像的电子书翻页检测方法及系统

Similar Documents

Publication Publication Date Title
US9706108B2 (en) Information processing apparatus and associated methodology for determining imaging modes
US10057501B2 (en) Imaging apparatus, flicker detection method, and flicker detection program
US8188987B2 (en) Display and imaging apparatus and object detecting method
US9799251B2 (en) Display device, mobile device, system including the same, and image quality matching method thereof
US10379610B2 (en) Information processing device and information processing method
JP2015508539A (ja) 表示装置及びその制御方法
US10276133B2 (en) Projector and display control method for displaying split images
US10126632B2 (en) Imaging apparatus, flicker detection method, and flicker detection program
US20150331491A1 (en) System and method for gesture based touchscreen control of displays
US10104309B2 (en) Imaging apparatus, flicker detection method, and flicker detection program
US20140104161A1 (en) Gesture control device and method for setting and cancelling gesture operating region in gesture control device
KR100952603B1 (ko) 카메라를 이용한 화면 스크롤 장치 및 방법
CN105872816A (zh) 一种放大视频图像的方法及装置
Ravoor et al. Detection of multiple points of contact on an imaging touch-screen
KR20120044783A (ko) 프로젝터를 이용한 터치 스크린 장치 및 그 터치 스크린 장치의 터치 위치 검출방법
US20170011713A1 (en) Image outputting device
JP6349886B2 (ja) 画像投射装置、画像投射装置の制御方法、および画像投射装置の制御プログラム
US8866929B2 (en) Method of producing a still image
US20140152545A1 (en) Display device and notification method
KR20070054569A (ko) 휴대폰 카메라를 이용한 사용자 인터페이스 장치 및 그제공 방법
KR101265296B1 (ko) 카메라를 이용한 사용자 입력 인식 장치 및 방법
US20150015510A1 (en) Electronic device and method for drawing pictures
KR200452031Y1 (ko) 공간 터치를 이용한 선택 메뉴 인식 시스템
KR20130081975A (ko) 조도 조절 기능을 포함하는 이동단말 및 조도 조절 방법
CN111492646B (zh) 电子设备以及其操作方法

Legal Events

Date Code Title Description
A201 Request for examination
A302 Request for accelerated examination
E902 Notification of reason for refusal
E701 Decision to grant or registration of patent right
GRNT Written decision to grant
FPAY Annual fee payment

Payment date: 20130405

Year of fee payment: 4

FPAY Annual fee payment

Payment date: 20140502

Year of fee payment: 5

LAPS Lapse due to unpaid annual fee