KR101941644B1 - 휴대 단말기의 피드백 제공 방법 및 장치 - Google Patents

휴대 단말기의 피드백 제공 방법 및 장치 Download PDF

Info

Publication number
KR101941644B1
KR101941644B1 KR1020110071229A KR20110071229A KR101941644B1 KR 101941644 B1 KR101941644 B1 KR 101941644B1 KR 1020110071229 A KR1020110071229 A KR 1020110071229A KR 20110071229 A KR20110071229 A KR 20110071229A KR 101941644 B1 KR101941644 B1 KR 101941644B1
Authority
KR
South Korea
Prior art keywords
feedback
user
parallax
pattern
dimensional stereoscopic
Prior art date
Application number
KR1020110071229A
Other languages
English (en)
Other versions
KR20130010538A (ko
Inventor
이연희
심정현
이용연
Original Assignee
삼성전자 주식회사
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 삼성전자 주식회사 filed Critical 삼성전자 주식회사
Priority to KR1020110071229A priority Critical patent/KR101941644B1/ko
Priority to US13/553,183 priority patent/US20130021279A1/en
Priority to PCT/KR2012/005752 priority patent/WO2013012257A2/en
Priority to EP12814409.4A priority patent/EP2734911B1/en
Priority to CN201280035968.7A priority patent/CN103688234B/zh
Priority to AU2012284736A priority patent/AU2012284736B2/en
Publication of KR20130010538A publication Critical patent/KR20130010538A/ko
Application granted granted Critical
Publication of KR101941644B1 publication Critical patent/KR101941644B1/ko

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/011Arrangements for interaction with the human body, e.g. for user immersion in virtual reality
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/016Input arrangements with force or tactile feedback as computer generated output to the user
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/14Digital output to display device ; Cooperation and interconnection of the display device with other functional units
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00Stereoscopic video systems; Multi-view video systems; Details thereof
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F2203/00Indexing scheme relating to G06F3/00 - G06F3/048
    • G06F2203/01Indexing scheme relating to G06F3/01
    • G06F2203/014Force feedback applied to GUI

Abstract

본 발명은 3차원 입체 화면에서 시차(disparity)에 대응하여 피드백(Feedback)을 상이하게 제공하는 휴대 단말기의 피드백 제공 방법 및 장치에 관한 것이다. 이러한 본 발명은 휴대 단말기의 피드백 제공 방법에 있어서, 3차원 입체 화면을 표시하는 단계; 상기 3차원 입체 화면에 대한 사용자 입력이 감지되는지 확인하는 단계; 상기 사용자 입력에 대응하는 특정 컨텐츠 또는 특정 컨텐츠 출력 영역의 시차를 추출하는 단계; 상기 추출된 시차에 대응하는 피드백의 크기 및 패턴 중 적어도 하나를 결정하는 단계; 및 상기 결정된 피드백의 크기 및 패턴 중 적어도 하나에 따라 피드백을 제공하는 단계를 포함하는 것을 특징으로 한다.

Description

휴대 단말기의 피드백 제공 방법 및 장치{METHOD AND APPARATUS FOR PROVIDING FEEDBACK IN PORTABLE TERMINAL}
본 발명은 휴대 단말기의 피드백 제공 방법 및 장치에 관한 것으로, 특히 3차원 입체 화면에서 시차(disparity)에 대응하여 피드백(Feedback)을 상이하게 제공하는 휴대 단말기의 피드백 제공 방법 및 장치에 관한 것이다.
최근 정보통신 기술과 반도체 기술 등의 눈부신 발전에 힘입어 휴대 단말기의 보급과 이용이 급속도로 증가하고 있다. 이에 따라 상기 휴대 단말기는 현대인에게 필수품이 되었다. 상기 휴대 단말기는 음성 통화나 메시지 송수신과 같은 일반적인 통신 기능 외에도 TV 시청 기능(예컨대, DMB(Digital Multimedia Broadcasting)나 DVB(Digital Video Broadcasting)와 같은 이동 방송), 음악 재생 기능(예컨대, MP3(MPEG Audio Layer-3), 사진 촬영 기능, 데이터 통신 기능, 인터넷 접속 기능 및 근거리 무선 통신 기능 등 다양한 기능들을 제공하고 있다. 특히, 최근의 휴대 단말기는 사용자 입력(예컨대 터치)이 인식되었음을 사용자에게 통지하기 위한 피드백(Feedback) 기능을 제공하고 있다. 예를 들어, 사용자 입력이 감지되었을 때, 상기 휴대 단말기는 진동을 발생시켜 사용자 입력이 인식되었음을 사용자에게 피드백해주는 햅틱(Haptic) 기능을 제공하고 있다. 다른 예로, 상기 휴대 단말기는 음향을 출력하여 사용자 입력이 인식되었음을 사용자에게 피드백하고 있다. 즉, 종래의 휴대 단말기는 사용자 입력 감지 시 진동 발생 및 음향 출력 중 적어도 하나를 통해 사용자 입력이 인식되었음을 피드백 해주고 있다.
한편, 최근에는 3차원으로 영상을 출력하는 3차원 입체 영상 출력 기능을 제공하는 휴대 단말기가 개발되고 있다. 즉, 최근의 휴대 단말기는 가로 및 세로의 2차원 정보 이외에 공간 정보를 더하여 입체적이고, 현실감 있는 3차원 입체 영상을 제공할 수 있게 되었다. 하지만, 상기 휴대 단말기는 입체적이고, 현실감 있는 3차원 입체 영상을 제공하는데 비하여, 사용자 입력 감지 시 음향 출력 및 진동 발생 중 적어도 하나를 기 설정된 크기로 출력하는 단조로운 피드백만을 제공하고 있다. 즉, 종래의 휴대 단말기는 3차원 입체 화면 출력 시 사용자 입력에 대한 입체적이고, 직관적이며, 현실감 있는 피드백을 제공하지 못하고 있다.
따라서 본 발명은 전술한 종래 기술의 문제점을 해결하기 위하여 창안된 것으로, 본 발명의 목적은 3차원 입체 화면에서 사용자 입력에 대한 입체적이고, 직관적이며, 현실감 있게 피드백을 제공할 수 있는 휴대 단말기의 피드백 제공 방법 및 장치를 제공하는데 있다.
본 발명의 다른 목적은 3차원 입체 화면 출력 시 시차에 따라 피드백을 다르게 제공하는 휴대 단말기의 피드백 제공 방법 및 장치를 제공하는데 있다.
본 발명의 또 다른 목적은 3차원 입체 화면에서 시차의 변화에 따라 제1피드백의 크기 및 패턴 중 적어도 하나를 변화시켜 시차의 변화를 사용자에게 피드백하고, 상기 변화된 시차가 특정 값에 도달하였을 때, 이를 알리는 제2피드백을 사용자에게 제공하는 휴대 단말기의 피드백 제공 방법 및 장치를 제공하는데 있다.
상술한 바와 같은 목적을 달성하기 위한 본 발명의 바람직한 실시 예에 따른 휴대 단말기의 피드백 제공 방법은 3차원 입체 화면을 표시하는 단계; 상기 3차원 입체 화면에 대한 사용자 입력이 감지되는지 확인하는 단계; 상기 사용자 입력에 대응하는 특정 컨텐츠 또는 특정 컨텐츠 출력 영역의 시차를 추출하는 단계; 상기 추출된 시차에 대응하는 피드백의 크기 및 패턴 중 적어도 하나를 결정하는 단계; 및 상기 결정된 피드백의 크기 및 패턴 중 적어도 하나에 따라 피드백을 제공하는 단계를 포함하는 것을 특징으로 한다.
상술한 바와 같은 목적을 달성하기 위한 본 발명의 바람직한 실시 예에 따른 휴대 단말기의 피드백 제공 장치는 3차원 입체 화면을 표시하는 표시 패널; 상기 3차원 입체 화면에 대한 사용자 입력을 입력하는 입력부; 상기 사용자 입력에 대응하여 특정 컨텐츠 또는 특정 컨텐츠 출력 영역의 시차를 추출하고, 상기 추출된 시차에 대응하는 피드백의 크기 및 패턴 중 적어도 하나를 결정하는 피드백 제어부; 및 상기 결정된 피드백의 크기 및 패턴 중 적어도 하나에 따라 피드백을 발생하는 피드백 발생부를 포함하는 것을 특징으로 한다.
상술한 바와 같이 본 발명의 실시 예에 따른 휴대 단말기의 피드백 제공 방법 및 장치는 3차원 입체 화면에서 발생하는 사용자 입력에 대한 피드백을 직관적이고, 입체적이며, 현실감 있게 제공할 수 있다. 즉, 본 발명은 3차원 입체 화면 표시 시 시각적 효과뿐만 아니라, 청각, 촉각 및 후각을 통한 피드백을 함께 제공할 수 있다. 이로 인하여, 본 발명은 3차원 입체 화면 조작 시 사용자에게 보다 높은 현실감을 제공할 수 있다.
도 1은 본 발명의 실시 예에 따른 휴대 단말기의 구성을 개략적으로 도시한 블록도이다.
도 2는 본 발명의 실시 예에 따른 3차원 입체 화면의 원리를 개략적으로 설명하기 위한 도면이다.
도 3은 본 발명의 실시 예에 따른 휴대 단말기의 피드백 제공 방법을 설명하기 위한 순서도이다.
도 4는 본 발명의 실시 예에 따른 3차원 입체 화면에서 특정 컨텐츠 터치 시 피드백 제공 모습을 도시한 화면 예시도이다.
도 5는 본 발명의 실시 예에 따른 3차원 입체 화면에서 특정 컨텐츠 이동 시 피드백 제공 모습을 도시한 화면 예시도이다.
도 6은 본 발명의 실시 예에 따른 다수의 레이어로 구성된 3차원 입체 화면에서 레이어 이동 시 피드백 제공 모습을 도시한 화면 예시도이다.
이하, 첨부된 도면을 참조하여 본 발명의 바람직한 실시 예들을 상세히 설명한다. 이때, 첨부된 도면에서 동일한 구성 요소는 가능한 동일한 부호로 나타내고 있음에 유의해야 한다. 또한, 본 발명의 요지를 흐리게 할 수 있는 공지 기능 및 구성에 대한 상세한 설명은 생략할 것이다.
한편, 본 명세서와 도면에 개시된 본 발명의 실시 예들은 본 발명의 기술 내용을 쉽게 설명하고 본 발명의 이해를 돕기 위해 특정 예를 제시한 것일 뿐이며, 본 발명의 범위를 한정하고자 하는 것은 아니다. 여기에 개시된 실시 예들 이외에도 본 발명의 기술적 사상에 바탕을 둔 다른 변형 예들이 실시 가능하다는 것은 본 발명이 속하는 기술 분야에서 통상의 지식을 가진 자에게 자명한 것이다.
상세한 설명에 앞서, 본 발명의 실시 예에 따른 휴대 단말기는 3차원 입체 영상을 출력할 수 있는 표시 패널을 구비하는 장치로써, 개인 정보 단말기(PDA), 이동통신 단말기, 스마트폰(Smart Phone), 태블릿(Tablet) PC, 노트북(Notebook), 넷북(Netbook), PMP(Portable Multimedia Player) 등이 될 수 있다.
도 1은 본 발명의 실시 예에 따른 휴대 단말기의 구성을 개략적으로 도시한 블록도이고, 도 2는 본 발명의 실시 예에 따른 3차원 입체 화면의 원리를 개략적으로 설명하기 위한 도면이다.
상기 도 1 및 도 2를 참조하면, 본 발명의 실시 예에 따른 휴대 단말기(100)는 오디오 처리부(160), 진동 발생부(150), 입력부(140), 터치스크린(130), 저장부(120) 및 제어부(110)를 포함할 수 있다. 상기 터치스크린(130)은 표시 패널(131) 및 터치 패널(132)을 포함할 수 있고, 상기 제어부(110)는 피드백 제어부(111)를 포함하며, 상기 저장부(120)는 피드백 패턴 저장 영역(121)을 포함할 수 있다.
상기 터치스크린(130)은 입력 기능 및 표시 기능을 수행할 수 있다. 이를 위하여 상기 터치스크린(130)은 표시 패널(131) 및 터치 패널(132)을 포함할 수 있다.
상기 표시 패널(131)은 휴대 단말기(100)의 각종 메뉴를 비롯하여 사용자가 입력한 정보 또는 사용자에게 제공하기 위한 정보를 표시한다. 예를 들어, 상기 표시 패널(131)은 휴대 단말기(100)의 이용에 따른 다양한 화면 예컨대 홈 화면, 메시지 작성 화면, 통화 화면 등을 제공할 수 있다. 이러한 상기 표시 패널(131)은 액정 표시 장치(Liquid Crystal Display), OLED(Organic Light Emitted Diode), AMOLED(Active Matrix Organic Light Emitted Diode) 등으로 형성될 수 있다. 특히, 본 발명에 따른 표시 패널(131)은 3차원 입체 화면을 제공할 수 있다. 상기 3차원 입체 화면은 사용자가 사물을 바라볼 때 좌측 눈에 보이는 모습과 우측 눈에 보이는 모습이 상이하다는 원리를 이용하여 3차원 공간에 있는 것처럼 이미지를 표시하는 화면을 의미한다. 상기 3차원으로 입체를 표시하는 방식은 크게 특수 안경(예컨대 편광(Polarized) 안경, 색 필터 안경, 셔터(Shutter) 안경 등)을 이용하여 좌측 눈에는 좌측 영상만이 입력되고, 우측 눈에는 우측 영상만이 입력되도록 하는 안경 방식과, 상기 특수 안경을 이용하지 않고 표시 패널(131)에 렌티큘러 렌즈(Lenticular Lens) 또는 패럴랙스 베리어(Parallax Barrier)를 부착하여 사용자의 좌측 눈과 우측 눈에 보이는 이미지를 다르게 하는 무안경 방식으로 분류할 수 있다.
여기서, 상기 도 2를 참조하여 3차원 입체 영상 원리에 대하여 좀 더 설명하면, 하나의 3차원 입체 이미지를 표시하기 위하여 상기 표시 패널(131)은 사용자의 좌측 눈에 보여지는 이미지(이하 좌 이미지) 및 사용자의 우측 눈에 보여지는 이미지(이하 우 이미지) 즉, 2개의 이미지를 표시해야 한다. 이때, 상기 좌 이미지와 우 이미지 사이의 거리를 시차(Disparity)라고 부른다. 상기 도 2의 (a)를 참조하면, 제1입체 이미지(1) 및 제2입체 이미지(2)를 사용자와 표시 패널(131) 사이에 표시하기 위해서는 제1좌 이미지(L1) 및 제2좌 이미지(L2)를 우측에 표시하고, 제1우 이미지(R1) 및 제2우 이미지(R2)를 좌측에 표시해야 함을 알 수 있다. 상기 제1입체 이미지(1)와 관련된 시차(D1)와 제2입체 이미지(2)와 관련된 시차(D2)를 비교하면, 시차가 클수록 입체 이미지가 사용자 가까이 즉, 표시 패널(131)로부터 멀리 표시됨을 알 수 있다.
한편, 도 2의 (b)를 참조하면, 제3입체 이미지(3) 및 제4입체 이미지(4)를 표시 패널(131)의 뒤에 표시하기 위해서는 제3좌 이미지(L3) 및 제3좌 이미지(L3)를 좌측에 표시하고, 제3우 이미지(R3) 및 제4우 이미지(R4)를 우측에 표시해야 함을 알 수 있다. 상기 제3입체 이미지(3)와 관련된 시차(D3)와 제4입체 이미지(4)와 관련된 시차(D4)를 비교하면, 시차가 클수록 입체 이미지가 사용자 및 표시 패널(131)로부터 멀리 표시됨을 알 수 있다. 이하에서는, 상기 시차는 좌 이미지를 기준으로 계산하는 것으로 설명하기로 한다. 즉, 입체 이미지가 사용자와 표시 패널(131) 사이에 표시되는 경우 상기 시차는 양의 값을 가지며, 입체 이미지가 표시 패널(131) 뒤에 표시되는 경우 상기 시차는 음의 값을 가진다.
상기 터치 패널(132)은 표시부(131)의 전면에 장착되며, 터치입력장치 예컨대 사용자의 손가락 또는 스타일러스(Stylus) 등이 접촉되는 경우 터치 이벤트를 생성하고, 생성된 터치 이벤트를 제어부(110)에 전달할 수 있다. 상세하게는, 상기 터치 패널(132)은 터치입력장치의 접촉에 따른 물리량(예컨대 정전 용량, 저항값 등)의 변화를 통해 터치를 인식하고, 터치의 종류(터치, 더블 터치, 터치 이동(드래그, 플릭), 멀티 터치 등) 및 터치 위치 정보를 제어부(110)에 전달할 수 있다. 특히, 본 발명에 따른 터치 패널(132)은 3차원 입체 화면에서 사용자 입력(터치, 터치 이동)을 감지하고, 이를 상기 제어부(110)에 전달할 수 있다. 이러한 상기 터치 패널(132)은 본 발명의 기술 분야에서 통상의 지식을 가진 자에게 있어 자명한 것이므로 상세한 설명은 생략하기로 한다.
상기 입력부(140)는 숫자 또는 다양한 문자 정보를 입력받고, 각종 기능들의 설정 및 상기 휴대 단말기(100)의 기능 제어를 위한 입력키 및 기능키들을 포함할 수 있다. 특히, 본 발명에 따른 상기 입력부(140)는 3차원 입체 화면에서 컨텐츠 선택 및 컨텐츠의 이동 또는 컨텐츠 출력 영역(이하 레이어)의 이동을 요청하는 다양한 사용자 입력 신호를 제어부(110)에 입력할 수 있다. 이러한 입력부(140)는 버튼식 키패드(Key Pad), 볼 조이스틱(Ball Joystick), 옵티컬 조이스틱(Optical Joystick), 휠 키(Wheel Key), 터치 키(Touch key), 터치 패드(Touch Pad), 터치스크린(Touch Screen) 등과 같은 입력 수단들 중 어느 하나 또는 이들의 조합으로 형성될 수 있다.
상기 오디오 처리부(160)는 오디오 신호를 송수신하여 인코딩(Encoding) 및 디코딩(Decoding)을 수행하는 음향 부품으로 형성될 수 있다. 이러한 상기 오디오 처리부(160)는 코덱(Codec) 및 오디오 앰프(Amp) 등을 포함할 수 있다. 상기 오디오 처리부(160)는 마이크(MIC) 및 스피커(SPK)와 연결되며, 상기 마이크(MIC)로부터 입력되는 음성 신호를 데이터화하여 상기 제어부(110)로 전송하고, 상기 제어부(110)로부터 입력되는 음성 신호를 아날로그 신호로 변환하여 스피커(SPK)를 통해 출력할 수 있다. 또한, 상기 오디오 처리부(160)는 휴대 단말기(100)에서 발생하는 다양한 오디오 신호(예컨대, MP3 파일, 동영상 파일 재생 등에 따른 오디오 신호 등)를 스피커(SPK)를 통해 출력할 수 있다. 특히, 본 발명에 따른 오디오 처리부(160)는 3차원 입체 화면에서 사용자 입력에 대한 청각 피드백(예컨대 음향 출력)을 제공할 수 있다. 상기 오디오 처리부(160)는 시차에 따라 음향의 크기 및 패턴을 다르게 출력할 수 있다. 예를 들어, 상기 오디오 처리부(160)는 사용자로부터 멀리 있는 컨텐츠 즉, 시차가 작은 컨텐츠 선택 시 상대적으로 작은 크기의 음향을 출력하고, 사용자와 가까이 있는 컨텐츠 즉, 시차가 큰 컨텐츠 선택 시 상대적으로 큰 크기의 음향을 출력할 수 있다. 또한, 상기 오디오 처리부(160)는 3차원 입체 화면에서 선택된 컨텐츠 또는 레이어의 시차가 연속적으로 변하는 경우 시차의 변화에 대응하여 제1음향의 크기를 변화시키고, 시차가 특정 값이 되었을 때 예를 들어, 시차가 0이 되었을 때 이를 알리는 제2음향을 출력할 수 있다.
상기 진동 발생부(150)는 3차원 입체 화면에서 사용자 입력에 대한 촉각(Haptic) 피드백(예컨대 진동 출력)을 제공할 수 있다. 상기 진동 발생부(150)는 시차에 따라 진동의 크기 및 패턴을 다르게 출력할 수 있다. 예를 들어, 상기 진동 발생부(150)는 시차가 작은 컨텐츠 선택 시 상대적으로 작은 크기로 진동을 발생하고, 시차가 큰 컨텐츠 선택 시 상대적으로 큰 크기로 진동을 발생할 수 있다. 또한, 상기 진동 발생부(150)는 3차원 입체 화면에서 선택된 컨텐츠 또는 레이어의 시차가 연속적으로 변하는 경우 시차의 변화에 대응하여 제1진동 패턴의 크기를 연속적으로 변화시키고, 시차가 특정 값이 되었을 때 예를 들어, 시차가 0이 되었을 때 이를 알리는 제2진동 패턴을 발생할 수 있다.
상기 저장부(120)는 본 발명의 실시 예에 따른 기능 동작에 필요한 프로그램을 비롯하여, 사용자 데이터 등을 저장할 수 있다. 예를 들어, 상기 저장부(120)는 휴대 단말기(100)의 전반적인 동작을 제어하는 프로그램 및 휴대 단말기(100)를 부팅시키는 운영체제(OS, Operating System), 휴대 단말기(100)의 기타 옵션(Options) 기능 예컨대, 카메라 기능, 이미지 또는 동영상 재생 기능, 근거리 무선 통신 기능 등에 필요한 응용 프로그램 및 다수의 컨텐츠 등을 저장할 수 있다. 또한, 상기 저장부(120)는 터치스크린(130) 운용을 위한 키 맵이나 메뉴 맵 등을 저장할 수 있다. 여기서 키 맵, 메뉴 맵은 각각 다양한 형태로 구성될 수 있다. 예를 들어, 상기 키 맵은 키보드 맵이나, 3*4 키 맵, 쿼티 키 맵 등이 될 수 있고, 현재 활성화되고 있는 응용 프로그램의 운용 제어를 위한 제어키 맵이 될 수 도 있다. 또한, 상기 메뉴 맵은 현재 활성화되고 있는 응용 프로그램 운용 제어를 위한 메뉴 맵이 될 수 있다. 특히, 본 발명의 실시 예에 따른 상기 저장부(120)는 3차원 입체 화면에서 사용자 입력에 대한 피드백을 제어하는 피드백 제어 프로그램을 저장할 수 있다. 이를 위하여, 상기 저장부(120)는 시차에 따른 피드백의 세기(예컨대 진동 세기 및 음향 크기)를 계산하기 위한 계산식을 저장할 수 있다. 예를 들어, 상기 계산식은 아래 <식 1>과 같이 설정될 수 있다.
<식 1> 피드백의 세기 = Z0 + k*D
여기서, 상기 D는 시차이다. 상기 시차는 상술한 바와 같이 사용자의 좌측 눈에 보여지는 좌 이미지를 기준으로 한 값이다. 상기 Z0는 상수 값으로, 시차가 0일 때 피드백의 크기로 기 설정된 디폴트 값이 될 수 있다. 상기 k는 비례 상수로 0보다 큰 값으로 설정되는 것이 바람직하다. 상기 <식 1>에 따라 피드백의 크기가 결정되는 경우 컨텐츠가 사용자와 가까이 위치할수록 컨텐츠에 대한 피드백의 크기는 증가하고, 사용자와 멀어질수록 컨텐츠에 대한 피드백의 크기는 감소할 수 있다. 이때, 상기 피드백의 최소 세기가 음의 값이 될 수 없도록 상기 피드백의 최소 세기는 0보다 큰 값을 가지도록 제한하는 것이 바람직하다. 또는, 상기 계산식은 아래 <식 2>와 같이 설정될 수 있다.
<식 2> 피드백의 세기 = Z0 - ┃k*D┃
상기 <식 2> 를 참조하면, 피드백의 세기는 시차가 0일 때 즉, 표시 패널(131)상에 컨텐츠가 위치할 때 가장 크다. 상기 <식 2>는 다수의 컨텐츠를 회전 방식으로 표시하는 경우 사용될 수 있다. 즉, 컨텐츠가 회전하여 사용자와 가장 가까운 위치 예컨대 표시 패널(131)의 중앙으로 이동하는 경우 피드백 세기는 커지고, 상기 중앙에서 멀어질수록 피드백 세기는 작아질 수 있다.
또는, 상기 저장부(120)는 시차와 피드백 패턴을 매핑한 테이블을 아래 <표 1>과 같이 저장할 수 있다. 이를 위하여 상기 저장부(120)는 피드백 패턴 저장 영역(121)을 포함할 수 있다.
시차(D) 피드백 패턴
.
.
.
.
.
.
-3 패턴 -3
-2 패턴 -2
-1 패턴 -1
0 디폴트 패턴/제2피드백 패턴
1 패턴 1
2 패턴 2
3 패턴 3
.
.
.
.
.
.
상기 <표 1>을 참조하면, 각 시차에 서로 다른 피드백 패턴(Pattern)이 매핑되어있다. 상기 각 패턴은 세기 정보를 포함할 수 있다. 이때, 기 설정된 기준 시차(D=0)에는 2 가지 패턴 즉, 디폴트 패턴 및 제2피드백 패턴이 매핑되어 있음을 알 수 있다. 상기 디폴트 패턴의 세기는 상기 <식 1> 또는 <식 2>의 Z0 값으로 사용될 수 있다. 상기 제2피드백 패턴은 사용자 입력에 대응하여 컨텐츠의 시차가 연속적으로 변하는 상황에서 상기 컨텐츠가 기준 위치(D=0)로 이동되었을 때, 이를 사용자에게 피드백하기 위해 사용된다. 예를 들어, "-3"의 시차를 가지는 컨텐츠가 사용자 입력(터치 이동, 휴대 단말기의 움직임)에 따라 "0"의 시차를 가지게 되는 경우 제2피드백 패턴이 사용될 수 있다. 상기 피드백 패턴은 진동을 발생하는 촉각 피드백 및 음향을 출력하는 청각 피드백 중 적어도 하나를 포함할 수 있다. 또한, 상기 제2피드백 패턴이 매핑되는 시차(예컨대 "0)")는 설계자의 의도 또는 사용자의 의도에 따라 달라질 수 있다. 또한, 상기 제2피드백 패턴은 다수의 시차에 매핑될 수 있다. 예를 들어, 상기 제2피드백 패턴은 "-3"의 시차에 매핑되고, "0"의 시차에 매핑되며, "3"의 시차에 매핑될 수 있다. 이때, 시차"-3, 0, 3)에 매핑되는 제2피드백 패턴은 동일한 패턴으로 설정되거나, 서로 다른 패턴으로 설정될 수 있다.
상기 제어부(110)는 휴대 단말기(100)의 전반적인 동작 및 휴대 단말기(100)의 내부 블록들 간 신호 흐름을 제어할 수 있다. 특히, 본 발명에 따른 제어부(110)는 3차원 입체 화면에서 사용자의 입력이 감지되는 경우 해당 이미지의 시차를 추출하고, 추출된 시차를 기반으로 피드백 패턴을 결정하며, 결정된 피드백 패턴을 제공할 수 있다. 이를 위하여 상기 제어부(110)는 피드백 제어부(111)를 포함할 수 있다.
상기 피드백 제어부(111)는 3차원 입체 화면에서 사용자의 입력이 감지되는 경우 해당 컨텐츠 또는 레이어의 시차를 추출할 수 있다. 이후, 상기 피드백 제어부(111)는 추출된 시차에 대응하는 피드백의 세기를 상기 <식 1> 또는 <식 2>를 이용하여 계산할 수 있다. 또는, 상기 피드백 제어부(111)는 상기 추출된 시차에 매핑된 피드백 패턴을 상기 저장부(120)로부터 검색할 수 있다. 상기 피드백의 세기 또는 피드백의 패턴이 결정되면, 상기 피드백 제어부(111)는 진동 발생부(150) 및 오디오 처리부(160)가 상기 결정된 피드백을 제공하도록 제어할 수 있다. 이에 대한 상세한 설명은 도 3 내지 도 6을 참조하여 후술하기로 한다.
한편, 상기 휴대 단말기(100)는 휴대 단말기(100)의 기울기 또는 움직임을 인식할 수 있는 모션 센서(미도시)를 포함할 수 있다. 이때, 상기 제어부(110)는 상기 모센 센서(미도시)에서 인식된 기울기 또는 휴대 단말기의 움직임에 대응하여 표시 패널(131)에 출력 중인 화면을 이동시킬 수 있다. 예를 들어, 사용자가 휴대 단말기(100)를 사용자에게서 멀어지도록 움직이는 경우 제어부(110)는 화면이 사용자로부터 멀어지도록 표시할 수 있다. 즉, 상기 제어부(110)는 시차(Disparity)를 감소시킬 수 있다.
또한, 상기 도 1에서는 청각 및 촉각을 통해 피드백을 제공하는 것으로 설명하였지만, 본 발명이 이에 한정되지는 않는다. 예를 들어, 본 발명에 따른 휴대 단말기(100)는 향기 센서(미도시)를 이용하여 사용자와 가까이 위치하는 컨텐츠에 대응하는 향기를 강하게 발생시키고, 사용자와 멀리 있는 컨텐츠에 대응하는 향기를 약하게 발생시켜 후각 피드백을 제공할 수도 있을 것이다. 이하에서는 상기 오디오 처리부(160), 진동 발생부(150) 및 향기 센서(미도시)를 피드백 발생부(10)로 통칭하여 설명하기로 하며, 상황에 따라 적절하게 분리하여 설명하기로 한다.
상기 도 1에서 도시하지 않았지만 본 발명에 따른 휴대 단말기(100)는 이미지 또는 동영상 촬영을 위한 카메라 모듈, 방송 수신을 위한 방송 수신 모듈, MP3(MPeg audio layer-3) 모듈과 같은 디지털 음원 재생 모듈 및 근접 센싱을 위한 근접 센서 모듈 등 부가 기능을 제공하기 위한 구성 요소들을 선택적으로 더 포함할 수 있다. 이러한 구성 요소들은 디지털 기기의 컨버전스(convergence) 추세에 따라 변형이 매우 다양하여 모두 열거할 수는 없으나, 본 발명에 따른 휴대 단말기(100)는 상기 언급된 구성 요소들과 동등한 수준의 구성 요소들을 더 포함할 수 있다.
도 3는 본 발명의 실시 예에 따른 휴대 단말기의 피드백 제공 방법을 설명하기 위한 순서도이다.
상기 도 1 내치 도 3을 참조하면, 본 발명의 실시 예에 따른 제어부(110)는 201 단계에서 3차원 입체 화면을 표시할 수 있다. 상기 3차원 입체 화면은 안경 방식 또는 무안경(노안) 방식으로 표시될 수 있다. 이때, 안경 방식인 경우 사용자는 편광 안경, 색 필터 안경, 셔터 안경 등을 착용해야 한다. 반면에 무안경(노안) 방식인 경우 상기 표시 패널(131)은 렌티큘러 렌즈(Lenticular Lens) 또는 패럴랙스 베리어(Parallax Barrier)를 포함해야 한다.
이와 같이 3차원 입체 화면이 표시된 상태에서, 상기 제어부(110)는 203 단계에서 사용자 입력이 감지되는지 확인할 수 있다. 상기 사용자 입력은 터치 패널(132)를 통해 입력될 수 있다. 또는, 상기 사용자 입력은 입력부(140)의 키패드의 키 눌림에 의해 발생할 수 있다. 또는, 상기 휴대 단말기(100)가 모션 센서(미도시)를 포함하는 경우 상기 사용자 입력은 모션 센서(미도시)로부터 입력될 수 있다. 예를 들어, 상기 사용자 입력은 3차원 입체 화면에 출력된 특정 컨텐츠 터치 시 발생할 수 있다. 또는, 상기 사용자 입력은 3차원 입체 화면에서 특정 컨텐츠를 터치하여 드래그(Drag)하는 경우 발생하거나, 다수의 레이어로 구성된 3차원 입체 화면에서 사용자와 멀리 떨어진 레이어가 기준 위치(D=0)로 이동되도록 요청하는 제스처, 기 설정된 키 입력 시 발생할 수 있다. 또는, 상기 휴대 단말기(100)가 모션 센서(미도시)를 포함하는 경우 상기 사용자 입력은 휴대 단말기(100)의 움직임 예컨대 사용자쪽으로 휴대 단말기를 이동시키는 모션 신호가 모션 센서(미도시)를 통해 감지되었을 때 발생할 수 있다.
상기 사용자 입력이 감지되지 않으면, 상기 제어부(110)는 205 단계로 진행하여 해당 기능을 수행할 수 있다. 예를 들어, 상기 제어부(110)는 3차원 입체 화면 출력 상태를 유지하거나, 일정 시간 동안 입력이 없는 경우 화면을 오프할 수 있다. 반면에, 사용자 입력이 감지되면, 상기 제어부(110)는 207 단계로 진행하여 사용자 입력에 대응하는 특정 컨텐츠 또는 특정 컨텐츠 출력 영역(이하 레이어)의 시차를 추출할 수 있다. 상기 시차가 추출되면, 상기 제어부(110)는 209 단계에서 추출된 시차에 대응하는 피드백 크기 및 패턴 중 적어도 하나를 결정할 수 있다. 이를 위하여 상기 제어부(110)는 상기 <식 1> 또는 <식 2>를 이용하여 피드백 크기를 계산하거나, <표 1>을 검색하여 상기 추출된 시차에 매핑된 패턴을 결정할 수 있다.
상기 피드백 크기 및 패턴 중 적어도 하나가 결정되면, 상기 제어부(110)는 211 단계에서 결정된 피드백 크기 및 패턴 중 적어도 하나에 따라 피드백을 제공하도록 피드백 발생부(10)를 제어할 수 있다. 예를 들어, 상기 제어부(110)는 결정된 피드백 크기 및 패턴 중 적어도 하나로 진동을 발생하도록 진동 발생부(150)를 제어하거나, 음향을 출력하도록 오디오 처리부(160)를 제어할 수 있다. 또는, 상기 제어부(110)는 결정된 피드백 크기 및 패턴으로 진동을 발생함과 동시에 음향을 함께 출력하도록 제어할 수 있다. 이때, 상기 피드백은 설계자의 의도에 따라 사용자 입력 감지 후 기 설정된 시간 동안 제공되거나, 기 설정된 조건을 만족할 때까지 예컨대 사용자 입력 해제되거나, 시차가 "0"이 될 때까지 제공될 수 있다.
다음으로, 상기 제어부(110)는 213 단계에서 시차가 변화하는지 확인할 수 있다. 상기 시차 변화는 사용자가 특정 컨텐츠를 터치 후 드래그하거나, 키 입력 또는 모션 센서에 의해 특정 레이어가 기준 위치로 이동되도록 요청되었을 때 발생할 수 있다. 상기 시차가 변화되는 경우 상기 제어부(110)는 상기 207 단계로 복귀하여 상술한 단계를 반복할 수 있다. 반면에 시차 변화가 없는 경우 상기 제어부(110)는 215 단계로 진행하여 사용자의 입력이 종료되는지 확인할 수 있다. 상기 사용자 입력이 터치인 경우 상기 사용자 입력 종료는 터치 해제 시 발생할 수 있다. 또는, 상기 사용자 입력 종료는 기 정의된 조건 만족 시 발생할 수 있다. 상기 사용자 입력이 종료되지 않으면, 상기 제어부(110)는 상기 213 단계로 복귀하여 상술한 단계를 반복하고, 상기 사용자 입력이 종료되면 상기 제어부(110)는 201 단계로 리턴할 수 있다.
도 4는 본 발명의 실시 예에 따른 3차원 입체 화면에서 특정 컨텐츠 터치 시 피드백 제공 모습을 도시한 화면 예시도이다. 이하에서는 설명의 편의를 위하여 진동 피드백을 제공하는 경우를 예로 하여 설명하기로 한다.
상기 도 1 내지 도 4를 참조하면, 상기 터치스크린(130)은 식별 부호 410의 화면 예시도에 도시된 바와 같이 제어부(110)의 제어 하에 서로 다른 시차를 가지는 다수의 컨텐츠(41, 42, 43, 44)를 3차원 입체 화면으로 표시할 수 있다. 여기서, 상기 제1컨텐츠(41)의 시차에는 제1크기의 진동 패턴, 제2컨텐츠(42)에는 제2크기의 진동 패턴, 제3컨텐츠(43)에는 제3크기의 진동 패턴 및 제4컨텐츠(44)에는 제4크기의 진동 패턴이 각각 매핑되어 있는 것으로 가정하기로 한다.
이러한 상태에서 상기 식별 부호 410의 화면 예시도에 도시된 바와 같이 사용자가 가장 멀리 있는 제1컨텐츠(41)를 터치하는 경우 상기 피드백 제어부(111)는 제1크기의 진동 패턴을 발생하도록 진동 발생부(150)를 제어할 수 있다. 한편, 식별 부호 420의 화면 예시도에 도시된 바와 같이 사용자가 제4컨텐츠(44)를 터치하는 경우 상기 피드백 제어부(111)는 제4크기의 진동 패턴을 발생하도록 진동 발생부(150)를 제어할 수 있다. 이와 같이 본 발명은 3차원 입체 화면에서 컨텐츠를 터치하는 경우 상기 컨텐츠의 시차에 따라 진동 크기를 다르게 제공함으로써, 보다 현실감 있는 피드백을 제공할 수 있다.
상기 도 5는 본 발명의 실시 예에 따른 3차원 입체 화면에서 특정 컨텐츠 이동 시 피드백 제공 모습을 도시한 화면 예시도이다.
상기 도 1 내지 도 5를 참조하면, 상기 터치 스크린(130)은 식별 부호 510의 화면 예시도에 도시된 바와 같이 제어부(110)의 제어 하에 다수의 컨텐츠를 나선형으로 배치한 3차원 입체 화면을 표시할 수 있다. 여기서, 상기 다수의 컨텐츠들은 상기 도 4에서 상술한 바와 같이 시차에 따라 서로 다른 크기의 진동 패턴이 각각 매핑되어 있다.
상기 식별 부호 510의 화면 예시도에 도시된 바와 같이 3차원 입체 화면에서 사용자가 특정 컨텐츠를 터치하는 경우 상기 피드백 제어부(111)는 터치된 지점의 컨텐츠의 시차에 대응하는 크기로 진동을 발생하도록 진동 발생부(150)를 제어할 수 있다. 이후, 식별 부호 520 및 530의 화면 예시도에 도시된 바와 같이 사용자가 3차원 입체 화면을 회전 시키기 위하여 좌측 방향으로 터치 이동(드래그)하는 경우 상기 피드백 제어부(111)는 터치 이동에 따른 시차의 변화에 대응하여 진동 세기를 변화시키도록 상기 진동 발생부(150)를 제어할 수 있다. 예를 들어, 상기 식별 부호 510 내지 530의 화면 예시도에 도시된 바와 같이 상기 피드백 제어부(111)는 터치 이동에 대응하여 제1세기, 제2세기 및 제3세기로 진동 세기를 증가시키도록 진동 발생부(150)를 제어할 수 있다. 이와 같이 본 발명은 3차원 입체 화면에서 컨텐츠 이동에 대응하여 시차가 변화는 경우 진동 세기를 실시간으로 변경하여 제공함으로써, 보다 현실감 있는 피드백을 제공할 수 있다.
도 6은 본 발명의 실시 예에 따른 다수의 레이어로 구성된 3차원 입체 화면에서 레이어 이동 시 피드백 제공 모습을 도시한 화면 예시도이다. 이하에서는 설명의 편의를 위하여 3차원 입체 화면이 3개의 레이어로 구성된 경우를 예로 하여 설명하기로 한다.
상기 도 1 내지 도 6을 참조하면, 상기 터치스크린(130)은 식별 부호 610의 화면 예시도에 도시된 바와 같이 3개의 레이어(11, 12, 13)로 구성된 3차원 입체 화면을 표시할 수 있다. 이때, 제1레이어(11)는 "0"의 시차를 가지고, 제2레이어(12)는 "-1"의 시차를 가지며, 제3레이어(13)는 "-3"의 시차를 가지는 것으로 가정하기로 한다.
상기 식별 부호 610의 화면 예시도와 같은 상태에서 제2레이어(12)를 제1레이어(11) 위치로 이동하도록 요청하는 사용자 입력이 감지되면, 상기 터치스크린(130)은 식별 부호 620, 630 및 640의 화면 예시도에 도시된 바와 같이 제1레이어(11) 내지 제3레이어(13)를 양의 Z축 방향으로 서서히 이동 시킬 수 있다. 이때, 상기 식별 부호 620 및 630의 화면 예시도에 도시된 바와 같이 제1레이어(11) 내지 제3레이어(13)가 이동되는 동안 상기 피드백 제어부(110)는 제1크기에서 제2크기로 증가시켜 제1진동 패턴을 발생시킬 수 있다. 한편, 상기 식별 부호 640의 화면 예시도에 도시된 바와 같이 제2레이어(12)의 시차가 "0"이되면, 상기 피드백 제어부(111)는 기 설정된 제2진동 패턴을 발생하도록 진동 발생부(150)를 제어할 수 있다. 이와 같이 본 발명은 다수의 레이어로 구성된 3차원 입체 화면에서 레이어 이동에 따라 제1진동 패턴의 세기를 변화시키고, 상기 이동된 레이어가 기 설정한 시차 값을 가지는 기준 위치까지 이동한 경우 제2진동 패턴을 발생하여 상기 레이어가 기준 위치로 이동되었음을 사용자가 용이하게 인지하도록 할 수 있다.
한편, 상기 도 4 내지 도 6에서는 진동을 이용한 촉각 피드백을 제공하는 경우를 예로 하여 설명하였다. 하지만 본 발명이 이에 한정되지는 않는다. 예를 들어, 본 발명은 음향을 이용한 청각 피드백 및 향기를 이용한 후각 피드백을 함께 제공할 수 있다.
상술한 바와 같은 본 발명의 실시 예에 따른 휴대 단말기의 피드백 제공 방법은 다양한 컴퓨터 수단을 통하여 수행될 수 있는 프로그램 명령 형태로 구현되어 컴퓨터로 판독 가능한 기록 매체에 기록될 수 있다. 이때, 상기 컴퓨터로 판독 가능한 기록매체는 프로그램 명령, 데이터 파일, 데이터 구조 등을 단독으로 또는 조합하여 포함할 수 있다. 한편, 기록매체에 기록되는 프로그램 명령은 본 발명을 위하여 특별히 설계되고 구성된 것들이거나 컴퓨터 소프트웨어 당업자에게 공지되어 사용 가능한 것일 수도 있다.
상기 컴퓨터로 판독 가능한 기록매체에는 하드디스크, 플로피디스크 및 자기 테이프와 같은 자기매체(Magnetic Media), CD-ROM, DVD와 같은 광기록 매체(Optical Media), 플롭티컬 디스크(Floptical Disk)와 같은 자기-광 매체(Magneto-Optical Media), 및 롬(ROM), 램(RAM), 플래시 메모리 등과 같은 프로그램 명령을 저장하고 수행하도록 특별히 구성된 하드웨어 장치가 포함된다. 또한, 프로그램 명령에는 컴파일러에 의해 만들어지는 것과 같은 기계어 코드뿐만 아니라 인터프리터 등을 사용해서 컴퓨터에 의해서 실행될 수 있는 고급 언어 코드를 포함한다. 상술한 하드웨어 장치는 본 발명의 동작을 수행하기 위해 하나 이상의 소프트웨어 모듈로서 작동하도록 구성될 수 있다.
이상에서는 본 발명의 실시 예에 따른 휴대 단말기의 피드백 제공 방법 및 장치에 대하여 본명세서 및 도면을 통해 바람직한 실시 예들에 대하여 설명하였으며, 비록 특정 용어들이 사용되었으나 이는 단지 본 발명의 기술 내용을 쉽게 설명하고 발명의 이해를 돕기 위해 일반적인 의미에서 사용된 것일 뿐, 본 발명이 전술한 실시 예에 한정되는 것은 아니다. 즉, 본 발명의 기술적 사상에 바탕을 둔 다양한 실시 예가 가능함은 본 발명이 속하는 기술 분야에서 통상의 지식을 가진 자에게 자명한 것이다.
100 : 휴대 단말기 110 : 제어부
111 : 피드백 제어부 120 : 저장부
121 : 피드백 저장 영역 130 : 터치스크린
131 : 표시패널 132 : 터치 패널
140 : 입력부 150 : 진동 발생부
160 : 오디오 처리부

Claims (19)

  1. 휴대 단말기의 피드백 제공 방법에 있어서,
    3차원 입체 화면을 표시하는 단계;
    상기 3차원 입체 화면에 대한 사용자 입력이 감지되는지 확인하는 단계;
    상기 사용자 입력에 대응하는 특정 컨텐츠 또는 특정 컨텐츠 출력 영역의 시차를 추출하는 단계;
    상기 추출된 시차에 대응하는 피드백의 크기 및 패턴 중 적어도 하나를 결정하는 단계;
    상기 결정된 피드백의 크기 및 패턴 중 적어도 하나에 따라 피드백을 제공하는 단계;
    상기 시차가 변화하는지 확인하는 단계; 및
    상기 시차 변화에 대응하여 상기 피드백의 크기 및 패턴 중 적어도 하나를 변경하는 단계를 포함하는 것을 특징으로 하는 휴대 단말기의 피드백 제공 방법.
  2. 삭제
  3. 제1항에 있어서,
    상기 사용자 입력은
    상기 3차원 입체 화면에 표시된 특정 컨텐츠의 터치 감지 및 터치 이동 감지, 키패드를 통한 키 입력 및 모션 센서를 통한 상기 휴대 단말기의 움직임 감지 시 발생하는 것을 특징으로 하는 휴대 단말기의 피드백 제공 방법.
  4. 제1항에 있어서,
    상기 피드백의 크기를 결정하는 단계는
    기 정의된 수학식을 이용하는 피드백의 크기를 계산하는 단계; 및
    상기 시차와 피드백 패턴을 매핑하여 기 저장한 테이블을 검색하는 단계 중 어느 하나를 포함하는 것을 특징으로 하는 휴대 단말기의 피드백 제공 방법.
  5. 제1항에 있어서,
    상기 피드백을 제공하는 단계는
    상기 사용자 입력에 대응하여 상기 컨텐츠 또는 상기 컨텐츠 출력 영역이 사용자와 가까워질수록 피드백의 크기를 증가시키고, 사용자와 멀어질수록 피드백의 크기를 감소시키는 단계인 것을 특징으로 하는 휴대 단말기의 피드백 제공 방법.
  6. 제1항에 있어서,
    상기 피드백을 제공하는 단계는
    상기 사용자 입력에 의해 상기 특정 컨텐츠 또는 상기 특정 컨텐츠 출력 영역이 기 설정된 기준 위치에 도달하는 경우 이전 피드백과 구분되는 타피드백을 제공하는 단계를 더 포함하는 것을 특징으로 하는 휴대 단말기의 피드백 제공 방법.
  7. 제1항에 있어서,
    상기 피드백은
    진동을 발생하는 촉각 피드백;
    음향을 출력하는 청각 피드백; 및
    향기를 발생시키는 후각 피드백 중 적어도 하나를 포함하는 것을 특징으로 하는 휴대 단말기의 피드백 제공 방법.
  8. 제1항에 있어서,
    상기 3차원 입체 화면은
    사용자의 좌측 눈에 보여지는 좌 이미지와 사용자의 우측 눈에 보여지는 우 이미지를 포함하는 것을 특징으로 하는 휴대 단말기의 피드백 제공 방법.
  9. 제8항에 있어서,
    상기 시차를 추출하는 단계는
    상기 좌 이미지와 상기 우 이미지 사이의 거리를 확인하는 단계인 것을 특징으로 휴대 단말기의 피드백 제공 방법.
  10. 휴대 단말기의 피드백 제공 장치에 있어서,
    3차원 입체 화면을 표시하는 표시 패널;
    상기 3차원 입체 화면에 대한 사용자 입력을 입력하는 입력부;
    상기 사용자 입력에 대응하여 특정 컨텐츠 또는 특정 컨텐츠 출력 영역의 시차를 추출하고, 상기 추출된 시차에 대응하는 피드백의 크기 및 패턴 중 적어도 하나를 결정하는 피드백 제어부; 및
    상기 결정된 피드백의 크기 및 패턴 중 적어도 하나에 따라 피드백을 발생하는 피드백 발생부를 포함하되,
    상기 피드백 제어부는
    상기 시차가 변하는 경우 상기 시차의 변화에 따라 상기 피드백의 크기 및 패턴 중 적어도 하나를 변경하도록 상기 피드백 발생부를 제어하는 것을 특징으로 하는 휴대 단말기의 피드백 제공 장치.
  11. 제10항에 있어서,
    상기 입력부는
    키 입력을 위한 키패드, 터치 및 터치 이동을 감지하기 위한 터치 패널 및 상기 휴대 단말기의 움직임을 감지하는 모션 센서 중 적어도 하나를 포함하는 것을 특징으로 하는 휴대 단말기의 피드백 제공 장치.
  12. 제10항에 있어서,
    상기 피드백 발생부는
    음향 피드백을 출력하는 오디오 출력부;
    촉각 피드백을 발생하는 진동 발생부; 및
    후각 피드백을 발생하는 향기 센서를 포함하는 것을 특징으로 하는 휴대 단말기의 피드백 제공 장치.
  13. 삭제
  14. 제10항에 있어서,
    상기 피드백 제어부는
    상기 사용자 입력에 따라 상기 특정 컨텐츠 또는 상기 특정 컨텐츠 출력 영역이 사용자와 가까워질수록 피드백의 크기를 증가시키고, 사용자와 멀어질수록 피드백의 크기를 감소시키도록 상기 피드백 발생부를 제어하는 것을 특징으로 하는 휴대 단말기의 피드백 제공 장치.
  15. 제10항에 있어서,
    상기 피드백 제어부는
    상기 사용자 입력에 의해 상기 특정 컨텐츠 또는 상기 특정 컨텐츠의 출력 영역의 시차가 기 설정된 값을 가지는 경우 이전 피드백과 구분되는 타피드백을 발생하도록 상기 피드백 발생부를 제어하는 것을 특징으로 하는 휴대 단말기의 피드백 제공 장치.
  16. 제15항에 있어서,
    상기 시차 및 피드백 패턴을 매핑하여 저장한 테이블 및 상기 타피드백을 저장하는 피드백 패턴 저장 영역을 포함하는 저장부를 더 포함하는 것을 특징으로 하는 휴대 단말기의 피드백 제공 장치.
  17. 제16항에 있어서,
    상기 피드백 제어부는
    기 정의된 수학식에 따라 상기 피드백의 크기를 계산하거나, 상기 테이블을 검색하여 상기 피드백의 크기 및 패턴 중 적어도 하나를 결정하는 것을 특징으로 하는 휴대 단말기의 피드백 제공 장치.
  18. 제10항에 있어서,
    상기 3차원 입체 화면은
    사용자의 좌측 눈에 보여지는 좌 이미지와 사용자의 우측 눈에 보여지는 우 이미지를 포함하는 것을 특징으로 하는 휴대 단말기의 피드백 제공 장치.
  19. 제18항에 있어서,
    상기 시차는
    상기 좌 이미지와 상기 우 이미지 사이의 거리인 것을 특징으로 휴대 단말기의 피드백 제공 장치.
KR1020110071229A 2011-07-19 2011-07-19 휴대 단말기의 피드백 제공 방법 및 장치 KR101941644B1 (ko)

Priority Applications (6)

Application Number Priority Date Filing Date Title
KR1020110071229A KR101941644B1 (ko) 2011-07-19 2011-07-19 휴대 단말기의 피드백 제공 방법 및 장치
US13/553,183 US20130021279A1 (en) 2011-07-19 2012-07-19 Method and apparatus for providing feedback in portable terminal
PCT/KR2012/005752 WO2013012257A2 (en) 2011-07-19 2012-07-19 Method and apparatus for providing feedback in portable terminal
EP12814409.4A EP2734911B1 (en) 2011-07-19 2012-07-19 Method and apparatus for providing feedback in portable terminal
CN201280035968.7A CN103688234B (zh) 2011-07-19 2012-07-19 用于在便携式终端中提供反馈的方法和设备
AU2012284736A AU2012284736B2 (en) 2011-07-19 2012-07-19 Method and apparatus for providing feedback in portable terminal

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020110071229A KR101941644B1 (ko) 2011-07-19 2011-07-19 휴대 단말기의 피드백 제공 방법 및 장치

Publications (2)

Publication Number Publication Date
KR20130010538A KR20130010538A (ko) 2013-01-29
KR101941644B1 true KR101941644B1 (ko) 2019-01-23

Family

ID=47555441

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020110071229A KR101941644B1 (ko) 2011-07-19 2011-07-19 휴대 단말기의 피드백 제공 방법 및 장치

Country Status (6)

Country Link
US (1) US20130021279A1 (ko)
EP (1) EP2734911B1 (ko)
KR (1) KR101941644B1 (ko)
CN (1) CN103688234B (ko)
AU (1) AU2012284736B2 (ko)
WO (1) WO2013012257A2 (ko)

Families Citing this family (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR102263593B1 (ko) 2017-02-08 2021-06-10 현대자동차주식회사 차량, 및 그 제어방법
US10977910B1 (en) * 2017-09-06 2021-04-13 Apple Inc. Tactile outputs for input structures of electronic devices

Family Cites Families (18)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CA2411193C (en) * 2000-06-16 2009-02-03 Imagnosis Inc. Point inputting device and method for three-dimensional images
EP1406150A1 (en) * 2002-10-01 2004-04-07 Sony Ericsson Mobile Communications AB Tactile feedback method and device and portable device incorporating same
JP4384926B2 (ja) * 2004-02-17 2009-12-16 財団法人 中部科学技術センター タッチパネルのための触覚提示装置
CN101308442B (zh) * 2004-10-12 2012-04-04 日本电信电话株式会社 三维指示方法和三维指示装置
WO2007122933A1 (ja) * 2006-04-24 2007-11-01 Panasonic Corporation 3次元映像表示装置
US8432365B2 (en) 2007-08-30 2013-04-30 Lg Electronics Inc. Apparatus and method for providing feedback for three-dimensional touchscreen
US20090102805A1 (en) * 2007-10-18 2009-04-23 Microsoft Corporation Three-dimensional object simulation using audio, visual, and tactile feedback
US9857872B2 (en) * 2007-12-31 2018-01-02 Apple Inc. Multi-touch display screen with localized tactile feedback
KR101456001B1 (ko) * 2008-05-23 2014-11-03 엘지전자 주식회사 단말기 및 그 제어 방법
US20100128112A1 (en) * 2008-11-26 2010-05-27 Samsung Electronics Co., Ltd Immersive display system for interacting with three-dimensional content
CA2762888C (en) * 2009-06-19 2013-09-17 Andrew Mahoney System and method for alerting visually impaired users of nearby objects
EP2333778A1 (en) * 2009-12-04 2011-06-15 Lg Electronics Inc. Digital data reproducing apparatus and method for controlling the same
CN101866243A (zh) * 2010-07-09 2010-10-20 苏州瀚瑞微电子有限公司 三维空间触控操作的方法及其手势
KR101709497B1 (ko) * 2010-07-29 2017-02-23 엘지전자 주식회사 휴대 단말기 및 그 동작 제어방법
WO2012037157A2 (en) * 2010-09-13 2012-03-22 Alt Software (Us) Llc System and method for displaying data having spatial coordinates
US9207859B2 (en) * 2010-09-14 2015-12-08 Lg Electronics Inc. Method and mobile terminal for displaying fixed objects independent of shifting background images on a touchscreen
KR101708696B1 (ko) * 2010-09-15 2017-02-21 엘지전자 주식회사 휴대 단말기 및 그 동작 제어방법
KR101660505B1 (ko) * 2011-03-08 2016-10-10 엘지전자 주식회사 이동 단말기 및 그 제어방법

Also Published As

Publication number Publication date
KR20130010538A (ko) 2013-01-29
CN103688234A (zh) 2014-03-26
AU2012284736B2 (en) 2016-12-22
WO2013012257A3 (en) 2013-04-11
CN103688234B (zh) 2017-09-22
EP2734911A2 (en) 2014-05-28
AU2012284736A1 (en) 2013-12-19
US20130021279A1 (en) 2013-01-24
WO2013012257A2 (en) 2013-01-24
EP2734911B1 (en) 2018-09-05
EP2734911A4 (en) 2015-03-25

Similar Documents

Publication Publication Date Title
US10101874B2 (en) Apparatus and method for controlling user interface to select object within image and image input device
US10146426B2 (en) Apparatus and method for user input for controlling displayed information
US20200364897A1 (en) Method and device for detecting planes and/or quadtrees for use as a virtual substrate
KR102097452B1 (ko) 프로젝터를 포함하는 전자 장치 및 그 제어 방법
EP2428882A2 (en) Mobile terminal and controlling method thereof
KR101873759B1 (ko) 영상 표시 장치 및 그 제어방법
US9582144B2 (en) Three-dimensional, multi-depth presentation of icons associated with a user interface
JP6273081B2 (ja) ポインティング装置を用いたコンテンツ移動方法および装置
US11954245B2 (en) Displaying physical input devices as virtual objects
KR101909132B1 (ko) 영상 정보에 기초하여 음향을 처리하는 방법, 및 그에 따른 디바이스
KR101873746B1 (ko) 이동 단말기 및 그 제어방법
KR20140090074A (ko) 영상표시장치 및 그것의 제어방법
KR101941644B1 (ko) 휴대 단말기의 피드백 제공 방법 및 장치
KR101546598B1 (ko) 사용자 인터페이스와 연관된 아이콘들의 3-차원적 다중-깊이 프리젠테이션
KR101825442B1 (ko) 스크롤 방법 및 장치
KR101978760B1 (ko) 3차원 이미지의 표시 기능을 구비한 단말기에서 사용자 인터페이스 방법 및 장치
US10970922B2 (en) Generating a 3D model of a fingertip for visual touch detection
KR101723413B1 (ko) 이동 단말기 및 그 제어방법
KR101629313B1 (ko) 이동 단말기 및 그 제어 방법
KR101833826B1 (ko) 이동 단말기 및 그 제어방법
KR101515912B1 (ko) 이미지 공유가 가능한 사용자 단말기 및 이의 제어 방법
KR20150047020A (ko) 영상 출력 장치
KR20190135958A (ko) 영상에 포함된 객체를 선택하기 위한 사용자 인터페이스 제어 장치 및 그 방법 그리고 영상 입력 장치
US20130162624A1 (en) Method and apparatus pertaining to modification of a three-dimensional presentation of a user-interaction opportunity

Legal Events

Date Code Title Description
A201 Request for examination
E902 Notification of reason for refusal
E701 Decision to grant or registration of patent right
GRNT Written decision to grant