KR101161586B1 - 이미지 기반의 햅틱 프리미티브를 이용하여 사용자 정의된 햅틱 효과를 제공하는 이미지 기반 햅틱 효과 설계 및 생성 방법 - Google Patents

이미지 기반의 햅틱 프리미티브를 이용하여 사용자 정의된 햅틱 효과를 제공하는 이미지 기반 햅틱 효과 설계 및 생성 방법 Download PDF

Info

Publication number
KR101161586B1
KR101161586B1 KR1020120005547A KR20120005547A KR101161586B1 KR 101161586 B1 KR101161586 B1 KR 101161586B1 KR 1020120005547 A KR1020120005547 A KR 1020120005547A KR 20120005547 A KR20120005547 A KR 20120005547A KR 101161586 B1 KR101161586 B1 KR 101161586B1
Authority
KR
South Korea
Prior art keywords
haptic
primitive
user
image
haptic effect
Prior art date
Application number
KR1020120005547A
Other languages
English (en)
Inventor
배한얼
박인환
김상연
김다혜
박원형
윤인호
Original Assignee
(주)이미지스테크놀로지
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by (주)이미지스테크놀로지 filed Critical (주)이미지스테크놀로지
Priority to KR1020120005547A priority Critical patent/KR101161586B1/ko
Application granted granted Critical
Publication of KR101161586B1 publication Critical patent/KR101161586B1/ko
Priority to PCT/KR2013/000444 priority patent/WO2013109106A1/ko

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/016—Input arrangements with force or tactile feedback as computer generated output to the user
    • A—HUMAN NECESSITIES
    • A47—FURNITURE; DOMESTIC ARTICLES OR APPLIANCES; COFFEE MILLS; SPICE MILLS; SUCTION CLEANERS IN GENERAL
    • A47G—HOUSEHOLD OR TABLE EQUIPMENT
    • A47G9/00—Bed-covers; Counterpanes; Travelling rugs; Sleeping rugs; Sleeping bags; Pillows
    • A47G9/06—Travelling rugs; Sleeping rugs
    • A—HUMAN NECESSITIES
    • A44—HABERDASHERY; JEWELLERY
    • A44B—BUTTONS, PINS, BUCKLES, SLIDE FASTENERS, OR THE LIKE
    • A44B17/00—Press-button or snap fasteners
    • A—HUMAN NECESSITIES
    • A44—HABERDASHERY; JEWELLERY
    • A44B—BUTTONS, PINS, BUCKLES, SLIDE FASTENERS, OR THE LIKE
    • A44B18/00—Fasteners of the touch-and-close type; Making such fasteners
    • A—HUMAN NECESSITIES
    • A44—HABERDASHERY; JEWELLERY
    • A44B—BUTTONS, PINS, BUCKLES, SLIDE FASTENERS, OR THE LIKE
    • A44B19/00—Slide fasteners
    • A—HUMAN NECESSITIES
    • A47—FURNITURE; DOMESTIC ARTICLES OR APPLIANCES; COFFEE MILLS; SPICE MILLS; SUCTION CLEANERS IN GENERAL
    • A47G—HOUSEHOLD OR TABLE EQUIPMENT
    • A47G9/00—Bed-covers; Counterpanes; Travelling rugs; Sleeping rugs; Sleeping bags; Pillows
    • A47G9/02—Bed linen; Blankets; Counterpanes
    • A47G9/0207—Blankets; Duvets
    • A47G9/0223—Blankets
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0487—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser
    • G06F3/0488—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures
    • G06F3/04883—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures for inputting data by handwriting, e.g. gesture or text
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F30/00—Computer-aided design [CAD]

Landscapes

  • Engineering & Computer Science (AREA)
  • General Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Human Computer Interaction (AREA)
  • Computer Hardware Design (AREA)
  • Evolutionary Computation (AREA)
  • Geometry (AREA)
  • User Interface Of Digital Computer (AREA)

Abstract

본 발명은 이미지 기반의 햅틱 프리미티브를 이용하여 사용자 정의된 햅틱 효과를 제공하는 이미지 기반 햅틱 효과 설계 및 생성 방법에 관한 것으로서, 보다 구체적으로는 (1) 2 이상의 햅틱 프리미티브를 설정하며, 상기 햅틱 프리미티브에 대하여 서로 다른 햅틱 효과를 매칭하는 단계; (2) 상기 설정된 햅틱 프리미티브 중 적어도 어느 하나의 햅틱 프리미티브에 대하여 사용자 인터페이스를 통해 사용자로부터 선택을 입력받는 단계; 및 (3) 상기 사용자 인터페이스의 일부 영역으로서, 상기 선택된 햅틱 프리미티브가 적용되는 영역을 상기 사용자로부터 설정받는 단계를 포함하는 것을 그 구성상의 특징으로 한다.
본 발명에서 제안하고 있는 이미지 기반의 햅틱 프리미티브를 이용하여 사용자 정의된 햅틱 효과를 제공하는 이미지 기반 햅틱 효과 설계 및 생성 방법에 따르면, 사용자 인터페이스를 포함하며, 햅틱 효과를 제공할 수 있는 전자기기에 대하여, 햅틱 효과 설계의 구성성분인 다양한 햅틱 프리미티브(haptic primitive)를 설정하고, 설정된 햅틱 프리미티브 가운데 사용자가 선택한 햅틱 프리미티브에 대응한 햅틱 효과가, 사용자의 의도에 따라 사용자 인터페이스의 일정한 영역에 적용되도록 함으로써, 이미지에 따라 구현되는 다양한 햅틱 피드백을 사용자가 직접 설계할 수 있다.
또한, 본 발명에 따르면, 복잡한 이미지의 재현에 있어 기본 뼈대가 되는 몇몇의 이미지 기반 햅틱 프리미티브 및 그에 대응한 기본적인 햅틱 효과를 설정함으로써, 사용자 인터페이스에서 발생 가능한 다양한 이미지 관련 이벤트에 대하여 사용자가 원하는 햅틱 효과를 쉽고 간편하게 설계할 수 있다.

Description

이미지 기반의 햅틱 프리미티브를 이용하여 사용자 정의된 햅틱 효과를 제공하는 이미지 기반 햅틱 효과 설계 및 생성 방법{IMAGE-BASED HAPTIC EFFECT DESIGNING AND GENERATING METHOD FOR PROVIDING USER-DEFINED HAPTIC EFFECTS USING IMAGE-BASED HAPTIC PRIMITIVES}
본 발명은 이미지 기반 햅틱 효과 설계 및 생성 방법에 관한 것으로서, 보다 구체적으로는 이미지 기반의 햅틱 프리미티브를 이용하여 사용자 정의된 햅틱 효과를 제공하는 이미지 기반 햅틱 효과 설계 및 생성 방법에 관한 것이다.
노트북, 스마트폰, 태블릿 PC 등의 정보통신 단말기나 비디오 게임 콘솔, 리모트 컨트롤 등의 전자기기가 발달함에 따라, 최근에는 이들 기기를 이용하여 사용자에게 보다 다양한 사용자 경험(User eXperience, UX)을 제공하기 위한 연구가 활발하게 진행되고 있다. 예를 들어, 기존의 사용자 단말기가 2차원의 평면적 화면을 보여주고, 화면에 보이는 내용에 맞추어 소리를 들려주는 단순한 수준의 시청각 피드백을 제공하는 데에 머물렀다면, 최근의 사용자 단말기는 3차원의 입체감 있는 화면을 제공하고, 제공되는 화면 내용과 함께 사용자에게 힘, 운동감, 질감 등을 함께 느끼게 하는, 더욱 복잡한 시각 피드백, 햅틱(haptic) 피드백 등을 제공할 수 있게 되었다.
특히, 햅틱 피드백을 제공하기 위한 기술은, 진동 효과가 제공되는 비디오 게임 콘솔이나 파일럿을 양성하는 모의 비행 훈련 시설 등에서 꾸준히 적용되어 왔는데, 일례로, 비디오 게임 콘솔을 사용할 때, 게임 화면상에 나타나는 충돌 장면과 함께 조이스틱에 대하여 미리 설정된 힘 피드백(force feedback)이나 진동 피드백(vibrotactile feedback)을 제공하는 경우 등을 들 수 있다.
그러나 종래에 햅틱 피드백을 제공하는 기술은 주로, 재생 가능한 여러 가지 햅틱 효과를 단말기에 미리 설정해 둔 다음, 사용자가 단말기를 사용함에 따라 발생하는 개개의 이벤트에 대하여, 미리 설정된(predefined) 햅틱 효과의 풀(pool) 가운데 어느 하나의 햅틱 효과만을 선택적으로 발생시킴에 따라, 발생 가능한 모든 이벤트에 대하여 사용자의 요구에 맞게 다양한 햅틱 효과를 제공할 수 없는 한계가 있었다.
이러한 한계는 특히, 햅틱 효과가 제공되는 단말기에서 운용되는 게임, 애니메이션 등과 같은 애플리케이션의 개발자가, 애플리케이션이 실행되는 동안 자신의 의도에 부합하는 완벽한 햅틱 효과를 구현시키는 데에 있어서, 큰 제한 사항으로 작용한다. 아무리 뛰어난 개발 능력을 가진 프로그래머라도, 단말기에서 발생 가능한 모든 이벤트에 대하여 각각의 이벤트별로 가장 적절한 햅틱 효과가 제공되도록 설계하는 것은 매우 어렵고, 많은 시간이 소요되기 때문이다.
이와 같은 한계를 극복하기 위하여 최근에는 언제, 어떠한 햅틱 효과가 발생되도록 할 것인지 사용자가 직접 설계할 수 있는, 사용자 정의된 햅틱 피드백의 설계 및 생성 방법이 제안되고 있다. 그러나 현재의 사용자 정의된 햅틱 피드백 설계 및 생성 기술은, 햅틱 액추에이터로 하여금 정해진 시간에 따라 진폭을 변경하도록 설계하는 데에 그치고 있어서, 단말기의 사용자 인터페이스(User Interface)에서 발생 가능한 다양한 이미지에 대하여, 이미지를 기초로 한 햅틱 효과의 설계 및 재생을 구현할 수 없는 문제점이 있다.
본 발명은 기존에 제안된 방법들의 상기와 같은 문제점들을 해결하기 위해 제안된 것으로서, 사용자 인터페이스를 포함하며, 햅틱 효과를 제공할 수 있는 전자기기에 대하여, 햅틱 효과 설계의 구성성분인 다양한 햅틱 프리미티브(haptic primitive)를 설정하고, 설정된 햅틱 프리미티브 가운데 사용자가 선택한 햅틱 프리미티브에 대응한 햅틱 효과가, 사용자의 의도에 따라 사용자 인터페이스의 일정한 영역에 적용되도록 함으로써, 이미지에 따라 구현되는 다양한 햅틱 피드백을 사용자가 직접 설계할 수 있는, 이미지 기반의 햅틱 프리미티브를 이용하여 사용자 정의된 햅틱 효과를 제공하는 이미지 기반 햅틱 효과 설계 및 생성 방법을 제공하는 것을 그 목적으로 한다.
또한, 본 발명은, 복잡한 이미지의 재현에 있어 기본 뼈대가 되는 몇몇의 이미지 기반 햅틱 프리미티브 및 그에 대응한 기본적인 햅틱 효과를 설정함으로써, 사용자 인터페이스에서 발생 가능한 다양한 이미지 관련 이벤트에 대하여 사용자가 원하는 햅틱 효과를 쉽고 간편하게 설계할 수 있는, 이미지 기반의 햅틱 프리미티브를 이용하여 사용자 정의된 햅틱 효과를 제공하는 이미지 기반 햅틱 효과 설계 및 생성 방법을 제공하는 것을 다른 목적으로 한다.
상기한 목적을 달성하기 위한 본 발명의 특징에 따른 이미지 기반의 햅틱 프리미티브를 이용하여 사용자 정의된 햅틱 효과를 제공하는 이미지 기반 햅틱 효과 설계 및 생성 방법은,
(1) 2 이상의 햅틱 프리미티브를 설정하며, 상기 햅틱 프리미티브에 대하여 서로 다른 햅틱 효과를 매칭하는 단계;
(2) 상기 설정된 햅틱 프리미티브 중 적어도 어느 하나의 햅틱 프리미티브에 대하여 사용자 인터페이스를 통해 사용자로부터 선택을 입력받는 단계; 및
(3) 상기 사용자 인터페이스의 일부 영역으로서, 상기 선택된 햅틱 프리미티브가 적용되는 영역을 상기 사용자로부터 설정받는 단계를 포함하는 것을 그 구성상의 특징으로 한다.
바람직하게는, 상기 단계 (1)에서는,
상기 사용자로부터 상기 사용자 인터페이스에 대하여 점(dot), 선(line), 및 면(face) 중 적어도 어느 하나의 이미지를 입력받아 햅틱 프리미티브를 설정할 수 있다.
바람직하게는, 상기 사용자 인터페이스는,
터치스크린 또는 터치 패널을 포함할 수 있다.
바람직하게는, 상기 햅틱 프리미티브는,
점(dot) 프리미티브, 선(line) 프리미티브, 및 면(face) 프리미티브를 포함할 수 있다.
더욱 바람직하게는,
(4) 상기 설정된 햅틱 프리미티브가 적용되는 영역 내에서 상기 사용자로부터 위치 신호를 입력받는 경우, 상기 사용자 인터페이스에 대하여 상기 햅틱 프리미티브에 매칭된 햅틱 효과를 생성하는 단계를 더 포함할 수 있다.
더욱더 바람직하게는,
상기 단계 (2)에서 상기 사용자로부터 점 프리미티브의 선택을 입력받은 경우, 상기 단계 (4)에서는, 상기 사용자 인터페이스에 대하여 미리 설정된 지름을 갖는 원 형태의 햅틱 효과를 생성할 수 있다.
더욱더 바람직하게는,
상기 단계 (2)에서 상기 사용자로부터 선 프리미티브의 선택을 입력받은 경우, 상기 단계 (4)에서는, 상기 사용자 인터페이스에 대하여 가변의 폭을 갖는 세그먼트 형태의 햅틱 효과를 생성할 수 있다.
더욱더 바람직하게는,
상기 단계 (2)에서 상기 사용자로부터 면 프리미티브의 선택을 입력받은 경우, 상기 단계 (4)에서는, 상기 사용자 인터페이스에 대하여 동일한 재질을 갖는 영역 형태의 햅틱 효과를 생성할 수 있다.
본 발명은 기존에 제안된 방법들의 상기와 같은 문제점들을 해결하기 위해 제안된 것으로서, 사용자 인터페이스를 포함하며, 햅틱 효과를 제공할 수 있는 전자기기에 대하여, 햅틱 효과 설계의 구성성분인 다양한 햅틱 프리미티브(haptic primitive)를 설정하고, 설정된 햅틱 프리미티브 가운데 사용자가 선택한 햅틱 프리미티브에 대응한 햅틱 효과가, 사용자의 의도에 따라 사용자 인터페이스의 일정한 영역에 적용되도록 함으로써, 이미지에 따라 구현되는 다양한 햅틱 피드백을 사용자가 직접 설계할 수 있다.
또한, 본 발명에 따르면, 복잡한 이미지의 재현에 있어 기본 뼈대가 되는 몇몇의 이미지 기반 햅틱 프리미티브 및 그에 대응한 기본적인 햅틱 효과를 설정함으로써, 사용자 인터페이스에서 발생 가능한 다양한 이미지 관련 이벤트에 대하여 사용자가 원하는 햅틱 효과를 쉽고 간편하게 설계할 수 있다.
도 1은 본 발명의 일 실시예에 따른 이미지 기반의 햅틱 프리미티브를 이용하여 사용자 정의된 햅틱 효과를 제공하는 이미지 기반 햅틱 효과 설계 및 생성 방법의 흐름을 도시한 도면.
도 2는 본 발명의 일 실시예에 따른 이미지 기반의 햅틱 프리미티브를 이용하여 사용자 정의된 햅틱 효과를 제공하는 이미지 기반 햅틱 효과 설계 및 생성 방법이 구현되는 사용자 단말기에 대하여, 단말기의 구성 요소와 사용자 간에 이루어지는 피드백 과정을 도시한 도면.
도 3은 본 발명의 일 실시예에 따른 이미지 기반의 햅틱 프리미티브를 이용하여 사용자 정의된 햅틱 효과를 제공하는 이미지 기반 햅틱 효과 설계 및 생성 방법이 구현되는 사용자 단말기에 대하여, 사용자 설계 모드 및 감각 재생 모드에서의 사용자 인터페이스를 도시한 도면.
도 4는 본 발명의 일 실시예에 따른 이미지 기반의 햅틱 프리미티브를 이용하여 사용자 정의된 햅틱 효과를 제공하는 이미지 기반 햅틱 효과 설계 및 생성 방법이 구현되는 사용자 단말기에 대하여, 사용자 설계 모드에서의 사용자 인터페이스를 도시한 도면.
도 5는 본 발명의 일 실시예에 따른 이미지 기반의 햅틱 프리미티브를 이용하여 사용자 정의된 햅틱 효과를 제공하는 이미지 기반 햅틱 효과 설계 및 생성 방법이 구현되는 사용자 단말기에 대하여, 감각 재생 모드에서의 사용자 인터페이스를 도시한 도면.
이하, 첨부된 도면을 참조하여 본 발명이 속하는 기술분야에서 통상의 지식을 가진 자가 본 발명을 용이하게 실시할 수 있도록 바람직한 실시예를 상세히 설명한다. 다만, 본 발명의 바람직한 실시예를 상세하게 설명함에 있어, 관련된 공지 기능 또는 구성에 대한 구체적인 설명이 본 발명의 요지를 불필요하게 흐릴 수 있다고 판단되는 경우에는 그 상세한 설명을 생략한다. 또한, 유사한 기능 및 작용을 하는 부분에 대해서는 도면 전체에 걸쳐 동일한 부호를 사용한다.
덧붙여, 명세서 전체에서, 어떤 부분이 다른 부분과 ‘연결’ 되어 있다고 할 때, 이는 ‘직접적으로 연결’ 되어 있는 경우뿐만 아니라, 그 중간에 다른 소자를 사이에 두고 ‘간접적으로 연결’ 되어 있는 경우도 포함한다. 또한, 어떤 구성요소를 ‘포함’ 한다는 것은, 특별히 반대되는 기재가 없는 한 다른 구성요소를 제외하는 것이 아니라 다른 구성요소를 더 포함할 수 있다는 것을 의미한다.
도 1은 본 발명의 일 실시예에 따른 이미지 기반의 햅틱 프리미티브를 이용하여 사용자 정의된 햅틱 효과를 제공하는 이미지 기반 햅틱 효과 설계 및 생성 방법의 흐름을 도시한 도면이다. 도 1에 도시된 바와 같이, 본 발명의 일 실시예에 따른 이미지 기반의 햅틱 프리미티브를 이용하여 사용자 정의된 햅틱 효과를 제공하는 이미지 기반 햅틱 효과 설계 및 생성 방법은, 2 이상의 햅틱 프리미티브를 설정하며, 각 프리미티브에 대하여 서로 다른 햅틱 효과를 매칭하는 단계(S100), 적어도 하나의 햅틱 프리미티브에 대하여 사용자 인터페이스를 통해 사용자로부터 선택을 입력받는 단계(S200), 및 사용자 인터페이스의 일부 영역으로서, 선택된 햅틱 프리미티브가 적용되는 영역을 사용자로부터 설정받는 단계(S300)를 포함하여 구현될 수 있으며, 설정된 햅틱 프리미티브의 적용 영역 내에서 사용자로부터 위치 신호를 입력받는 경우, 해당 햅틱 프리미티브에 매칭된 햅틱 효과를 생성하는 단계(S400)를 더 포함하여 구현될 수 있다.
본 발명은 상기와 같은 구성을 채택함으로써, 사용자 인터페이스를 포함하며, 햅틱 효과를 제공할 수 있는 전자기기에 대하여, 이미지에 따라 구현되는 다양한 햅틱 피드백을 사용자가 직접 설계하도록 함과 동시에, 사용자 인터페이스에서 발생 가능한 다양한 이미지 관련 이벤트에 대하여 사용자가 원하는 햅틱 효과를 쉽고 간편하게 설계하도록 할 수 있다. 한편, 본 발명은 터치스크린, 터치 패드 등을 포함하는 사용자 인터페이스; CPU(Central Processing Unit) 등과 같은 프로세서를 포함하는 입력 신호 제어부; 및 햅틱 효과를 생성할 수 있는 솔레노이드 액추에이터, 피에조 액추에이터, 초음파 액추에이터, 세라믹 액추에이터, 전기활성폴리머 액추에이터, 형상기억합금 액추에이터(shape memory alloy) 등을 포함하는 햅틱 액추에이터가 구비된 전자기기에 대하여 적용될 수 있다.
도 2는 본 발명의 일 실시예에 따른 이미지 기반의 햅틱 프리미티브를 이용하여 사용자 정의된 햅틱 효과를 제공하는 이미지 기반 햅틱 효과 설계 및 생성 방법이 구현되는 사용자 단말기에 대하여, 단말기의 구성 요소와 사용자 간에 이루어지는 피드백 과정을 도시한 도면이다. 도 2에서 확인할 수 있듯이, 사용자는, 사용자 인터페이스, 입력 신호 제어부 및 햅틱 피드백 제어부를 포함하는 단말기에 대하여, 위치 신호를 입력할 수 있다. 사용자로부터 입력된 입력 신호는 입력 신호 제어부를 통하여 사용자 인터페이스상에 구현되는데, 이때, 사용자는 사용자 인터페이스에 나타나는 내용을 확인하면서, 프리미티브를 설계하거나 수정할 수 있다. 프리미티브에 대해서는 후술할 단계 S100의 과정에서 더욱 상세하게 설명하도록 한다. 한편, 이렇게 설계 또는 수정한 프리미티브로 구성되는 이미지에 대하여 사용자의 위치 신호를 입력받는 경우, 입력 신호 제어부를 통하여 측정된, 입력 이벤트의 위치 및 이동 속도에 따라, 햅틱 액추에이터로 하여금 미리 대응된 햅틱 효과를 생성하도록 설정할 수 있다. 즉, 사용자의 입력 신호에 의하여 햅틱 프리미티브로부터 이미지를 구현함과 동시에, 구현되는 이미지상에 햅틱 효과가 함께 발생되도록 설계할 수 있다. 이하에서는, 본 발명의 일 실시예에 따른 이미지 기반의 햅틱 프리미티브를 이용하여 사용자 정의된 햅틱 효과를 제공하는 이미지 기반 햅틱 효과 설계 및 생성 방법의 각 단계에 대하여 상세히 설명하도록 한다.
단계 S100에서는, 2 이상의 햅틱 프리미티브를 설정하며, 각 프리미티브에 대하여 서로 다른 햅틱 효과를 매칭할 수 있다. 프리미티브(primitive)란, 사용자 단말기의 사용자 인터페이스(user interface) 상에서 구현되는 그래픽에 있어서 가장 단순화된 기하학적 형상의 객체로서, 보다 구체적으로는, 점, 직선, 곡선, 원, 삼각형, 사각형, 육면체, 피라미드(pyramid), 원통, 원뿔, 구, 토러스(torus) 등과 같은 기본형의 객체를 사용자 인터페이스상에 재현하는 서브루틴(subroutine) 프로그램 내지 그에 대응하여 사용자 인터페이스상에서 재현되는 기하학적 형상 자체를 가리킨다. 즉, 단계 S100에서 설정하는 햅틱 프리미티브는, 힘, 진동, 온도 변화, 풍력 등 촉각으로 감지 가능한 햅틱 효과를 제공하기 위하여 사용자 인터페이스상에 표현되는 기본형의 객체로서, 햅틱 프리미티브는, 예를 들어, 점 프리미티브(dot primitive), 선 프리미티브(line primitive), 면 프리미티브(face primitive) 등을 포함할 수 있다. 또한, 실시예에 따라서는, 점 프리미티브, 선 프리미티브, 면 프리미티브 등을 조합함으로써, 새로운 형태의 햅틱 프리미티브를 사용자가 직접 설정할 수도 있다. 이와 같이 설정된 햅틱 프리미티브에는, 서로 다른 햅틱 효과가 매칭될 수 있는데, 예를 들어, 점 프리미티브에 대하여 일정한 지름을 갖는 원 형태의 햅틱 효과를 매칭하거나, 선 프리미티브에 대하여 가변의 폭을 갖는 세그먼트 형태의 햅틱 효과를 매칭할 수 있고, 나아가, 면 프리미티브에 대하여 동일한 재질을 갖는 영역 형태의 햅틱 효과를 매칭할 수 있다.
단계 S200에서는, 적어도 하나의 햅틱 프리미티브에 대하여 사용자 인터페이스를 통해 사용자로부터 선택을 입력받을 수 있다. 즉, 사용자는 단계 S100에서 설정된 햅틱 프리미티브를 빌딩 블록(building block)으로 하여, 사용자 인터페이스를 통하여 다양한 형태의 이미지를 재현할 수 있는데, 이때, 사용자가 의도하는 이미지의 구현을 위해 복수의 햅틱 프리미티브 중 어느 하나의 프리미티브에 대하여 선택을 입력받을 수 있다. 예를 들어, 단계 S100에서 햅틱 프리미티브로서, 점 프리미티브, 선 프리미티브 및 면 프리미티브가 설정된 경우, 단계 S200에서 사용자는 점 프리미티브, 선 프리미티브, 및 면 프리미티브 중 어느 하나의 프리미티브를 선택할 수 있다.
단계 S300에서는, 사용자 인터페이스의 일부 영역으로서, 선택된 햅틱 프리미티브가 적용되는 영역을 사용자로부터 설정받을 수 있다. 즉, 본 발명의 목적 중 하나는 이미지 기반의 햅틱 피드백을 사용자 스스로 설계하도록 하는 것이므로, 단계 S300에서 사용자는 사용자 인터페이스의 모든 영역이 아닌, 일부 영역에 대해서만 햅틱 효과가 발생하도록 설계할 수 있는데, 이 경우, 단계 S200에서 선택한 햅틱 프리미티브를 이용하여 햅틱 효과 생성 영역을 설정할 수 있다. 예를 들어, 단계 S200에서 사용자가 점 프리미티브를 선택한 경우, 사용자 인터페이스상에서 사용자가 입력하는 신호의 위치상에는 점(dot) 형태, 즉, 일정한 지름을 갖는 원 형태의 햅틱 효과가 발생하도록 설계할 수 있다. 또한, 단계 S200에서 사용자가 선 프리미티브를 선택한 경우, 사용자 인터페이스상에서 사용자가 입력하는 신호의 위치상에는 선(line) 형태, 즉, 가변의 폭을 갖는 세그먼트 형태의 햅틱 효과가 발생하도록 설계할 수 있으며, 사용자가 면 프리미티브를 선택한 경우, 사용자가 입력하는 신호의 위치상에는 면(face) 형태, 즉, 동일한 재질을 갖는 영역 형태의 햅틱 효과가 발생하도록 설계할 수 있다.
단계 S400에서는, 설정된 햅틱 프리미티브의 적용 영역 내에서 사용자로부터 위치 신호를 입력받는 경우, 해당 햅틱 프리미티브에 매칭된 햅틱 효과를 생성할 수 있다. 즉, 햅틱 프리미티브에 매칭된 햅틱 효과가, 사용자에 의하여 사용자 인터페이스상에 지정된 특정 영역에서만 발생하도록 설계됨에 따라, 사용자는, 해당 햅틱 프리미티브가 적용되는 영역에 대하여 위치 신호를 입력할 때에만, 그에 상응하는 햅틱 효과를 느낄 수 있고, 나머지 영역에 대하여 위치 신호를 입력할 때에는 햅틱 효과를 느끼지 못할 수 있다. 예를 들어, 사용자가 점 프리미티브의 영역에 대하여 위치 신호를 입력하는 경우, 일정한 지름을 갖는 원 형태의 햅틱 효과가 발생할 수 있고, 사용자가 선 프리미티브의 영역에 대하여 위치 신호를 입력하는 경우, 가변의 폭을 갖는 세그먼트 형태의 햅틱 효과가 발생할 수 있으며, 사용자가 면 프리미티브의 영역에 대하여 위치 신호를 입력하는 경우, 동일한 재질을 갖는 영역 형태의 햅틱 효과가 발생할 수 있다.
도 3은 본 발명의 일 실시예에 따른 이미지 기반의 햅틱 프리미티브를 이용하여 사용자 정의된 햅틱 효과를 제공하는 이미지 기반 햅틱 효과 설계 및 생성 방법이 구현되는 사용자 단말기에 대하여, 사용자 설계 모드 및 감각 재생 모드에서의 사용자 인터페이스를 도시한 도면이다. 도 3에 도시된 바와 같이, 사용자 인터페이스 내의 메뉴(320, 321, 322)를 통해 사용자 설계 모드 및 감각 재생 모드에 접근할 수 있으며, 사용자 설계 모드(330)에서는, 미리 설정된 햅틱 프리미티브(321) 가운데 어느 하나를 선택하여, 햅틱 효과를 발생시키는 이미지를 사용자 인터페이스 상(310)에 구현할 수 있다. 이어서, 재생 모드(340)에서는 사용자 설계 모드(330)에서 설정된 대로, 이미지의 구현과 동시에 햅틱 효과가 발생할 수 있는데, 이때, 사용자의 신호(350)가 어느 위치에 입력되는지에 따라 그에 대응한 햅틱 효과가 발생하거나 또는, 햅틱 효과가 발생하지 않을 수 있다.
도 4는 본 발명의 일 실시예에 따른 이미지 기반의 햅틱 프리미티브를 이용하여 사용자 정의된 햅틱 효과를 제공하는 이미지 기반 햅틱 효과 설계 및 생성 방법이 구현되는 사용자 단말기에 대하여, 사용자 설계 모드에서의 사용자 인터페이스를 도시한 도면이다. 도 4에 도시된 바와 같이, 사용자는 사용자 인터페이스(400)의 일부 영역에 대하여 점 프리미티브(410), 선 프리미티브(420) 및 면 프리미티브(430) 중 어느 하나의 프리미티브에 대하여 햅틱 효과가 적용될 영역을 직접 설정할 수 있다. 도 4에서는 사용자가 선 프리미티브(420)를 선택하여 사용자 인터페이스상에 이미지를 구현하는 모습이 도시되었다.
도 5는 본 발명의 일 실시예에 따른 이미지 기반의 햅틱 프리미티브를 이용하여 사용자 정의된 햅틱 효과를 제공하는 이미지 기반 햅틱 효과 설계 및 생성 방법이 구현되는 사용자 단말기에 대하여, 감각 재생 모드에서의 사용자 인터페이스를 도시한 도면이다. 도 5에서 확인할 수 있듯이, 사용자 인터페이스(500)의 일부 영역으로서, 햅틱 프리미티브를 적용한 영역에 대하여 사용자가 위치 신호를 입력하는 경우, 사용자에게는 해당 햅틱 프리미티브에 대응하는 햅틱 효과가 제공될 수 있다. 도 5에서는, 선 프리미티브(420)가 적용된 영역에 대하여 사용자가 터치 신호를 입력함에 따라, 선 프리미티브에 해당하는 햅틱 효과가 발생하는 모습이 도시되었다.
이상 설명한 본 발명은 본 발명이 속한 기술분야에서 통상의 지식을 가진 자에 의하여 다양한 변형이나 응용이 가능하며, 본 발명에 따른 기술적 사상의 범위는 아래의 특허청구범위에 의하여 정해져야 할 것이다.
S100: 2 이상의 햅틱 프리미티브를 설정하며, 각 프리미티브에 대하여 서로 다른 햅틱 효과를 매칭하는 단계
S200: 적어도 하나의 햅틱 프리미티브에 대하여 사용자 인터페이스를 통해 사용자로부터 선택을 입력받는 단계
S300: 사용자 인터페이스의 일부 영역으로서, 선택된 햅틱 프리미티브가 적용되는 영역을 사용자로부터 설정받는 단계
S400: 설정된 햅틱 프리미티브의 적용 영역 내에서 사용자로부터 위치 신호를 입력받는 경우, 해당 햅틱 프리미티브에 매칭된 햅틱 효과를 생성하는 단계
100: 사용자 인터페이스 및 햅틱 액추에이터를 포함하는 전자기기
210: 사용자 인터페이스 220: 입력 이벤트 제어부
230: 햅틱 피드백 제어부
310: 사용자 인터페이스 내의 그리기 영역
320, 321, 322: 사용자 설계 모드 및 감각 재생 모드에 접근하기 위한 사용자 인터페이스 내의 메뉴
330: 사용자 설계 모드에서의 사용자 인터페이스
340: 감각 재생 모드에서의 사용자 인터페이스
350: 사용자 입력 신호의 위치
400: 사용자 설계 모드에서의 사용자 인터페이스
410: 점 프리미티브 420: 선 프리미티브
430: 면 프리미티브
500: 감각 재생 모드에서의 사용자 인터페이스

Claims (8)

  1. 사용자 인터페이스를 구비하며, 햅틱 효과를 제공할 수 있는 전자기기에 대하여,
    (1) 2 이상의 햅틱 프리미티브를 설정하며, 상기 햅틱 프리미티브에 대하여 서로 다른 햅틱 효과를 매칭하는 단계;
    (2) 상기 설정된 햅틱 프리미티브 중 적어도 어느 하나의 햅틱 프리미티브에 대하여 사용자 인터페이스를 통해 사용자로부터 선택을 입력받는 단계; 및
    (3) 상기 사용자 인터페이스의 일부 영역으로서, 상기 선택된 햅틱 프리미티브가 적용되는 영역을 상기 사용자로부터 설정받는 단계를 포함하되,
    상기 햅틱 프리미티브는,
    점(dot) 프리미티브, 선(line) 프리미티브, 및 면(face) 프리미티브를 포함하는 것을 특징으로 하는, 이미지 기반의 햅틱 프리미티브를 이용하여 사용자 정의된 햅틱 효과를 제공하는 이미지 기반 햅틱 효과 설계 및 생성 방법.
  2. 제1항에 있어서, 상기 단계 (1)에서는,
    상기 사용자로부터 상기 사용자 인터페이스에 대하여 점(dot), 선(line), 및 면(face) 중 적어도 어느 하나의 이미지를 입력받아 햅틱 프리미티브를 설정하는 것을 특징으로 하는, 이미지 기반의 햅틱 프리미티브를 이용하여 사용자 정의된 햅틱 효과를 제공하는 이미지 기반 햅틱 효과 설계 및 생성 방법.
  3. 제1항에 있어서, 상기 사용자 인터페이스는,
    터치스크린 또는 터치 패널을 포함하는 것을 특징으로 하는, 이미지 기반의 햅틱 프리미티브를 이용하여 사용자 정의된 햅틱 효과를 제공하는 이미지 기반 햅틱 효과 설계 및 생성 방법.
  4. 삭제
  5. 제1항에 있어서,
    (4) 상기 설정된 햅틱 프리미티브가 적용되는 영역 내에서 상기 사용자로부터 위치 신호를 입력받는 경우, 상기 사용자 인터페이스에 대하여 상기 햅틱 프리미티브에 매칭된 햅틱 효과를 생성하는 단계를 더 포함하는 것을 특징으로 하는, 이미지 기반의 햅틱 프리미티브를 이용하여 사용자 정의된 햅틱 효과를 제공하는 이미지 기반 햅틱 효과 설계 및 생성 방법.
  6. 제5항에 있어서,
    상기 단계 (2)에서 상기 사용자로부터 점 프리미티브의 선택을 입력받은 경우, 상기 단계 (4)에서는, 상기 사용자 인터페이스에 대하여 미리 설정된 지름을 갖는 원 형태의 햅틱 효과를 생성하는 것을 특징으로 하는, 이미지 기반의 햅틱 프리미티브를 이용하여 사용자 정의된 햅틱 효과를 제공하는 이미지 기반 햅틱 효과 설계 및 생성 방법.
  7. 제5항에 있어서,
    상기 단계 (2)에서 상기 사용자로부터 선 프리미티브의 선택을 입력받은 경우, 상기 단계 (4)에서는, 상기 사용자 인터페이스에 대하여 가변의 폭을 갖는 세그먼트 형태의 햅틱 효과를 생성하는 것을 특징으로 하는, 이미지 기반의 햅틱 프리미티브를 이용하여 사용자 정의된 햅틱 효과를 제공하는 이미지 기반 햅틱 효과 설계 및 생성 방법.
  8. 제5항에 있어서,
    상기 단계 (2)에서 상기 사용자로부터 면 프리미티브의 선택을 입력받은 경우, 상기 단계 (4)에서는, 상기 사용자 인터페이스에 대하여 동일한 재질을 갖는 영역 형태의 햅틱 효과를 생성하는 것을 특징으로 하는, 이미지 기반의 햅틱 프리미티브를 이용하여 사용자 정의된 햅틱 효과를 제공하는 이미지 기반 햅틱 효과 설계 및 생성 방법.
KR1020120005547A 2012-01-18 2012-01-18 이미지 기반의 햅틱 프리미티브를 이용하여 사용자 정의된 햅틱 효과를 제공하는 이미지 기반 햅틱 효과 설계 및 생성 방법 KR101161586B1 (ko)

Priority Applications (2)

Application Number Priority Date Filing Date Title
KR1020120005547A KR101161586B1 (ko) 2012-01-18 2012-01-18 이미지 기반의 햅틱 프리미티브를 이용하여 사용자 정의된 햅틱 효과를 제공하는 이미지 기반 햅틱 효과 설계 및 생성 방법
PCT/KR2013/000444 WO2013109106A1 (ko) 2012-01-18 2013-01-18 이미지 기반의 햅틱 프리미티브를 이용하여 사용자 정의된 햅틱 효과를 제공하는 이미지 기반 햅틱 효과 설계 및 생성 방법

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020120005547A KR101161586B1 (ko) 2012-01-18 2012-01-18 이미지 기반의 햅틱 프리미티브를 이용하여 사용자 정의된 햅틱 효과를 제공하는 이미지 기반 햅틱 효과 설계 및 생성 방법

Publications (1)

Publication Number Publication Date
KR101161586B1 true KR101161586B1 (ko) 2012-07-03

Family

ID=46716104

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020120005547A KR101161586B1 (ko) 2012-01-18 2012-01-18 이미지 기반의 햅틱 프리미티브를 이용하여 사용자 정의된 햅틱 효과를 제공하는 이미지 기반 햅틱 효과 설계 및 생성 방법

Country Status (2)

Country Link
KR (1) KR101161586B1 (ko)
WO (1) WO2013109106A1 (ko)

Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20070130212A1 (en) 1996-05-21 2007-06-07 Peurach Thomas M Haptic authoring

Family Cites Families (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR101324687B1 (ko) * 2009-08-10 2013-11-04 한국과학기술원 이미지에 햅틱 정보를 인코딩하는 방법, 이미지로부터 햅틱 정보를 디코딩하는 방법 및 이를 위한 햅틱 정보 처리 장치
KR101135186B1 (ko) * 2010-03-03 2012-04-16 광주과학기술원 상호작용형 실시간 증강현실 시스템과 그 방법, 및 상기 방법을 구현하는 프로그램이 기록된 기록매체
KR101121787B1 (ko) * 2011-09-29 2012-03-09 (주)이미지스테크놀로지 이미지 기반의 진동 감각 프리미티브를 이용한 모바일 디바이스 환경에서의 진동 감각 재생 방법

Patent Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20070130212A1 (en) 1996-05-21 2007-06-07 Peurach Thomas M Haptic authoring

Non-Patent Citations (3)

* Cited by examiner, † Cited by third party
Title
서용원 외 4명, "촉감 모델링 및 편집툴 개발". 한국HCI학회, 2007
진도형 외 2명, "PRELIMINARY PROGRAMMING FOR LIBRARIZATION OF HAPTIC PRIMITIVES BASED ON CONSTRUCTIVE SOLID GEOMETRY AND GOD-OBJECT, ICCAS2004, 2004
착석형, " 시뮬레이션 게임에서의 체감형 촉각 피드백 디자인에 관한 연구", 2006

Also Published As

Publication number Publication date
WO2013109106A1 (ko) 2013-07-25

Similar Documents

Publication Publication Date Title
US20200349982A1 (en) Haptic effect generation for space-dependent content
US9715281B2 (en) Systems and methods for haptically-enabled conformed and multifaceted displays
KR102260705B1 (ko) 햅틱 디바이스에서의 3차원 릴리프를 위한 마찰 변조
KR20200000803A (ko) 가상 현실 사용자를 위한 실세계 햅틱 상호작용
US10474238B2 (en) Systems and methods for virtual affective touch
US10976819B2 (en) Haptic feedback for non-touch surface interaction
KR20170037530A (ko) 오디오-햅틱 간섭을 보상하기 위해 햅틱 효과들을 수정하기 위한 프로그램 가능 햅틱 디바이스 및 방법
US20080204420A1 (en) Low relief tactile interface with visual overlay
US20180011538A1 (en) Multimodal haptic effects
EP3367216A1 (en) Systems and methods for virtual affective touch
CN109656353A (zh) 利用多个外围设备的触觉效果
WO2017185502A1 (zh) 一种终端及在终端上实现触觉反馈的方法、装置
JP5876600B1 (ja) 情報処理プログラム、及び情報処理方法
JP2000047567A (ja) 物体の接触感シミュレーション装置
KR101161586B1 (ko) 이미지 기반의 햅틱 프리미티브를 이용하여 사용자 정의된 햅틱 효과를 제공하는 이미지 기반 햅틱 효과 설계 및 생성 방법
CN115068929A (zh) 游戏信息获取方法、装置、电子设备和存储介质
JPH11272157A (ja) 物体の把持動作シミュレーション装置
CN117671201A (zh) 信息刷新方法、装置、存储介质及设备

Legal Events

Date Code Title Description
A201 Request for examination
A302 Request for accelerated examination
E902 Notification of reason for refusal
E701 Decision to grant or registration of patent right
GRNT Written decision to grant
FPAY Annual fee payment

Payment date: 20150603

Year of fee payment: 4

FPAY Annual fee payment

Payment date: 20160603

Year of fee payment: 5

FPAY Annual fee payment

Payment date: 20170613

Year of fee payment: 6

FPAY Annual fee payment

Payment date: 20180705

Year of fee payment: 7

FPAY Annual fee payment

Payment date: 20190709

Year of fee payment: 8