KR20200073951A - 포스 피드백 방법 및 시스템, 기계로 읽을 수 있는 저장 매체 - Google Patents

포스 피드백 방법 및 시스템, 기계로 읽을 수 있는 저장 매체 Download PDF

Info

Publication number
KR20200073951A
KR20200073951A KR1020187038215A KR20187038215A KR20200073951A KR 20200073951 A KR20200073951 A KR 20200073951A KR 1020187038215 A KR1020187038215 A KR 1020187038215A KR 20187038215 A KR20187038215 A KR 20187038215A KR 20200073951 A KR20200073951 A KR 20200073951A
Authority
KR
South Korea
Prior art keywords
force feedback
user
virtual object
user object
control
Prior art date
Application number
KR1020187038215A
Other languages
English (en)
Inventor
오복성
이윤호
정연우
Original Assignee
(주)리얼감
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by (주)리얼감 filed Critical (주)리얼감
Publication of KR20200073951A publication Critical patent/KR20200073951A/ko

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/016—Input arrangements with force or tactile feedback as computer generated output to the user
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/011—Arrangements for interaction with the human body, e.g. for user immersion in virtual reality
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T19/00—Manipulating 3D models or images for computer graphics
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T19/00—Manipulating 3D models or images for computer graphics
    • G06T19/006—Mixed reality

Landscapes

  • Engineering & Computer Science (AREA)
  • General Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Human Computer Interaction (AREA)
  • Computer Graphics (AREA)
  • Computer Hardware Design (AREA)
  • Software Systems (AREA)
  • User Interface Of Digital Computer (AREA)

Abstract

실시 예에 따른 포스 피드백 방법은 확장현실환경을 생성하는 초기화 단계, 확장현실환경 상에 사용자 객체 및 적어도 하나 이상의 가상객체를 설정하는 단계, 사용자 객체와 적어도 하나 이상의 가상객체의 상호작용 이벤트를 검출하는 단계, 사용자 객체와 적어도 하나 이상의 가상객체의 상호작용 이벤트에 따른 상대속도를 포함하는 제어인자에 대응하여 포스 피드백 제어변수를 변경하는 단계 및 변경된 포스 피드백 제어변수에 따라 출력장치를 통해 역감을 제공하는 단계를 포함한다.

Description

포스 피드백 방법 및 시스템, 기계로 읽을 수 있는 저장 매체
본 발명은 포스 피드백 방법 및 시스템, 기계로 읽을 수 있는 저장 매체에 관한 것으로, 보다 구체적으로 사용자 객체와 가상객체의 강도에 의한 역감(Kinesthesia)을 제공하기 위한 포스 피드백 방법 및 시스템, 기계로 읽을 수 있는 저장매체에 관한 것이다.
4차 산업 혁명과 관련하여 증강현실(Augmented Reality), 혼합현실(Mixed Reality) 및 가상현실(Virtual Reality)관련 기술이 급속도로 발전하고 있다. 이러한, 증강현실, 혼합현실 및 가상현실은 현실의 감각을 시공간을 넘어 확장 증폭하려는 시도와 맞닿아 있다. 따라서, 이들의 기술을 통칭해 확장현실(Extended Reality)로 부르기도 한다.
이러한, 확장현실 기술은 일반적으로 교육, 오락, 훈련, 의학 등의 분야의 컴퓨팅 시스템 (computing system)에서 사용된다. 특히, 확장현실 기술을 게임과 접목시켜 기존의 게임의 한계인 현실감을 해결할 수 있는 대안으로 떠오르면서, 게임에 현실감을 더하여 사용자가 직접 체험하는 듯한 효과로 인해 각광받고 있다.
이러한, 확장현실 기술 기반의 게임에 몰입감을 더하고자, 영상 내에서 물리적인 변화인 충돌, 위치 변화 등을 사용자에게 현실감 있게 전달하는 포스 피드백을 제공하는 컨트롤러가 발전하고 있다. 종래의 대부분의 컨트롤러는 진동을 주는 방법이 사용되고 있다. 이러한 진동이 주는 햅틱 피드백을 사용하는 컨트롤러는 몰입감을 제공하기는 하나 진동이 제공하는 감각의 한계에 의해 실감을 제공하기 어려웠다. 따라서 최근에는 진동이 주는 햅틱 피드백의 한계에 의해, 사용자에게 직접적인 힘을 제공하는 역감형 포스 피드백 시스템이 개발되고 있다.
하지만 대부분의 포스 피드백 시스템은 특정 이벤트에 적합한 포스 피드백을 매뉴얼 작업으로 만들어 놓고 게임에서 이벤트 발생시 그 라이브러리를 불러 실행되게 하는 방식이 대부분이었다. 따라서, 역감형 포스 피드백은 특정 이벤트에 의한 역감만을 제공할 뿐, 환경적인 요소 변화를 포함하여 역감을 제공하지 못하는 실정이다. 특히, 게임에서 점차 사실적인 표현이 늘어나고 있고, 동일 이벤트에서도 다양한 포스 피드백이 구현되어야 하나 이러한 기술이 부족한 실정이다.
실시 예의 목적은, 확장현실에서 실감, 몰입감을 증대시키기 위해, 객체의 물리적 제어인자를 이용하여 포스 피드백 제어신호를 생성하여, 사용자에게 역감을 제공하는 포스 피드백 방법 및 시스템, 기계로 읽을 수 있는 저장 매체를 제공하는 것이다.
또한, 확장현실을 사용하는 환경에서 사용자 객체와 가상객체의 상대 속도에대한 역감을 사용자에게 제공함으로서, 확장현실환경에서의 변화에 대한 감각을 실제로 느낄 수 있는 강도를 이용한 포스 피드백 방법 및 시스템, 기계로 읽을 수 있는 저장 매체를 제공하는 것이다.
실시 예들에서 해결하려는 과제들은 이상에서 언급한 과제로 제한되지 않으며, 언급되지 않은 또 다른 과제들은 아래의 기재로부터 당업자에게 명확하게 이해될 수 있을 것이다.
실시 예에 따른 포스 피드백 방법에 대해 설명한다.
실시 예의 일 측면에 따른 포스 피드백 방법은 확장현실환경을 생성하는 초기화 단계, 상기 확장현실환경 상에 사용자 객체 및 적어도 하나 이상의 가상객체를 설정하는 단계, 상기 사용자 객체와 상기 적어도 하나 이상의 가상객체의 상호작용 이벤트를 검출하는 단계, 상기 사용자 객체와 상기 적어도 하나 이상의 가상객체의 상호작용 이벤트에 따른 상대속도를 포함하는 제어인자에 대응하여 포스 피드백 제어변수를 변경하는 단계 및 상기 변경된 포스 피드백 제어변수에 따라 출력장치를 통해 역감을 제공하는 단계를 포함한다.
실시 예의 다른 측면에 따라 포스 피드백 방법을 실행하기 위한 프로그램을 기록한 기계로 읽을 수 있는 저장매체가 제공된다.
또한, 실시 예의 또 다른 측면에 따른 포스 피드백 시스템은 확장현실환경 상에서 사용자 객체와 가상객체의 상호작용 이벤트를 검출하고, 상기 사용자 객체와 상기 가상객체의 상대속도를 포함하는 제어인자에 따라 포스 피드백 제어변수를 변경하여 포스 피드백 제어신호를 생성하는 제어장치 및 상기 포스 피드백 제어신호를 수신하여 역감을 사용자에게 제공하는 출력장치를 포함한다.
실시 예에 따르면, 확장현실에서 실감, 몰입감을 증대시키기 위해, 객체의 물리적 제어인자를 이용하여 포스 피드백 제어신호를 생성하여, 사용자에게 역감을 제공함으로써 확장현실환경에서의 실감과 몰입감을 더욱 증대시킬 수 있다.
또한, 확장현실을 사용하는 환경에서 사용자 객체와 가상객체와의 상호작용시 사용자 객체와 가상객체와의 상대속도에 대한 역감을 사용자에게 제공함으로서, 확장현실환경에서의 물리적인 감각을 실제로 느낄 수 있다.
실시예에 따른 포스 피드백 방법 및 시스템, 기계로 읽을 수 있는 저장 매체는 이상에서 언급된 것들에 한정되지 않으며, 언급되지 아니한 다른 효과들은 아래의 기재로부터 통상의 기술자에게 명확하게 이해될 수 있을 것이다.
본 명세서에 첨부되는 다음의 도면들은 본 발명의 바람직한 실시예를 예시하는 것이며, 발명의 상세한 설명과 함께 본 발명의 기술적 사상을 더욱 이해시키는 역할을 하는 것이므로, 본 발명은 그러한 도면에 기재된 사항에만 한정되어 해석되어서는 아니된다.
도 1은 실시 예에 따른 포스 피드백 시스템을 나타내는 도면이다.
도 2는 실시 예에 따른 제어부를 나타내는 도면이다.
도 3은 실시 예에 따른 사용자 객체와 가상객체의 상대속도가 발생하는 모습을 예시적으로 나타내는 도면이다.
도 4는 도 3의 실시 예에 따른 상대속도와 출력장치에 제공되는 부하의 힘과의 그래프를 나타내는 도면이다.
도 5는 도 3의 실시 예에 따른 면적과 힘과의 그래프를 나타내는 도면이다.
도 6은 다른 실시 예에 따른 사용자 객체와 가상객체의 상대속도 발생을 예시적으로 나타내는 도면이다.
도 7은 또 다른 실시 예에 따른 사용자 객체와 복수의 가상객체의 상대속도(V) 발생을 예시적으로 나타내는 도면이다.
도 8은 또 다른 실시 예에 따른 사용자 객체와 복수의 가상객체의 상대속도(V) 발생을 예시적으로 나타내는 도면이다.
도 9는 도 8의 실시 예에 따른 사용자 객체의 이동거리에 대한 힘의 크기 변화를 보여주는 그래프이다.
도 10은 실시 예에 따른 포스 피드백 방법을 나타내는 흐름도이다.
이하, 실시 예들을 예시적인 도면을 통해 상세하게 설명한다. 각 도면의 구성요소들에 참조부호를 부가함에 있어서, 동일한 구성요소들에 대해서는 비록 다른 도면상에 표시되더라도 가능한 한 동일한 부호를 가지도록 하고 있음에 유의해야 한다. 또한, 실시 예를 설명함에 있어, 관련된 공지 구성 또는 기능에 대한 구체적인 설명이 실시 예에 대한 이해를 방해한다고 판단되는 경우에는 그 상세한 설명은 생략한다.
또한, 실시 예의 구성 요소를 설명하는 데 있어서, 제 1, 제 2, A, B, (a), (b) 등의 용어를 사용할 수 있다. 이러한 용어는 그 구성 요소를 다른 구성 요소와 구별하기 위한 것일 뿐, 그 용어에 의해 해당 구성 요소의 본질이나 차례 또는 순서 등이 한정되지 않는다. 어떤 구성 요소가 다른 구성요소에 "연결", "결합" 또는 "접속"된다고 기재된 경우, 그 구성 요소는 그 다른 구성요소에 직접적으로 연결되거나 접속될 수 있지만, 각 구성 요소 사이에 또 다른 구성 요소가 "연결", "결합" 또는 "접속"될 수도 있다고 이해되어야 할 것이다.
어느 하나의 실시 예에 포함된 구성요소와, 공통적인 기능을 포함하는 구성요소는, 다른 실시 예에서 동일한 명칭을 사용하여 설명하기로 한다. 반대되는 기재가 없는 이상, 어느 하나의 실시 예에 기재한 설명은 다른 실시 예에도 적용될 수 있으며, 중복되는 범위에서 구체적인 설명은 생략하기로 한다.
본 명세서를 설명하기에 앞서 사용자 객체(U)는 사용자의 입력 또는 동작에 따라 확장현실환경에서 구현되는 실제 사용자의 신체, 가상의 사용자 신체, 사용자가 파지 또는 장착한 실제 또는 가상의 도구를 의미한다.
또한, 가상객체(O)는 확장 현실상에서 사용자 객체(U)와 상호작용이 가능한 가상의 객체를 의미한다. 여기서, 가상객체(O)는 일정한 진행방향을 가져 흐름, 속도 또는 가속도를 가지는 가상의 물질일 수 있다. 예를 들어, 가상객체(O)는 기체 액체 등과 같은 유체로 사용자 객체(U) 주변의 환경을 구성하는 물질일 수 있다. 또한, 가상객체(O)는 빛을 표현하기 위한 가상의 입자가 구성하는 물질일 수 있다.
그리고, 확장현실(Extended Reality)은 증강현실(Augmented Reality), 혼합현실(Mixed Reality) 및 가상현실(Virtual Reality)을 통칭한다.
도 1은 실시 예에 따른 포스 피드백 시스템(10)을 나타내는 도면이다.
도 1을 참조하면, 포스 피드백 시스템(10)은 입력장치(100), 제어장치(200), 출력장치(300) 및 표시장치(400)를 포함한다. 이외에, 포스 피드백 시스템(10)은 카메라(미도시), 마이크(미도시) 등을 더 구비할 수 있다.
입력장치(100)는 사용자의 입력의 위치, 방향, 가속도, 압력, 키 정보를 등을 입력 받아 입력데이터를 생성하는 장치일 수 있다. 입력장치(100)는 자이로 센서, 엔코더, 터치패널, 다수의 키버튼을 구비한 키패드 등이 구비되어 사용자의 입력을 검출하여 입력데이터를 생성하는 장치일 수 있다. 예를 들어, 입력장치(100)는 게임패드, 패들 컨트롤러, 트랙볼, 조이스틱, 아케이드 스타일 조이스틱, 자동차 핸들, 마우스, 데이터 글러브 등 일 수 있다. 또한, 입력장치(100)는 사용자의 손 동작, 팔 동작, 다리 동작, 발 동작 등의 움직임을 검출하고, 이러한 움직임을 사용자 입력으로 인식하는 카메라, 모션센서 등으로 구현될 수도 있다.
제어장치(200)는 확장현실환경을 생성하여 제공하는 물리엔진이 기록된 저장매체를 포함하는 장치일 수 있다. 예를 들어, 제어장치(200)는 물리엔진이 기록된 저장매체를 포함하는 컴퓨터, 핸드폰과 같은 휴대용 통신 단말, 콘솔, PDA, 태블릿 PC, 서버 등일 수 있다. 제어장치(200)는 통신부(210), 제어부(220) 및 메모리(230)를 포함한다.
제어장치(200)는 확장현실환경을 제공하고, 사용자 객체(U)가 가상객체(O)와 상호작용하는 이벤트를 검출하고, 포스 피드백 제어변수를 변경하여 역감(Kinesthesia)을 제공하기 위한 포스 피드백 제어신호를 생성한다. 여기서, 제어장치(200)는 입력데이터를 전달받아 입력데이터에 따라 사용자 객체(U)가 확장현실환경 상에서 이동 또는 각도 조절 등이 구현되도록 제어한다.
통신부(210)는 입력장치(100), 출력장치(300) 또는 표시장치(400)와 통신하여, 입력데이터, 포스 피드백 제어신호, 영상 데이터 및 음성 데이터를 송수신 할 수 있다. 통신부(210)는 LAN, 데이터 케이블 등을 이용한 유선방식 또는 RF통신(Radio Frequency), WiFi(Wireless Fidelity), LTE(Long Term Evolution), 블루투스, IrDA (Infrared Data Association), 지그비, UWB(Ultra-wideband), 부호분할다중접속방식(code division multiple access: CDMA), 주파수분할다중방식(frequency division multiplexing: FDM), 시분할다중방식(time division multiplexing: TDM) 등에 따라 무선방식으로 입력장치(100), 출력장치(300) 또는 표시장치(400)와 통신할 수 있다. 또한, 통신부는 인터넷에 접속하여 입력장치(100), 출력장치(300) 또는 표시장치(400)와 통신하는 것도 가능하다.
여기서, 입력장치(100), 출력장치(300) 또는 표시장치(400)는 통신부(210)와 통신할 수 있는 통신모듈(미도시)이 구비될 수 있다. 통신모듈은 통신부(210)와 동일한 방식으로 통신하거나 인터넷에 연결되어 통신부에 접속할 수 있다.
제어부(220)는 사용자의 선택에 따른 게임 등의 확장현실환경을 제공하는 프로그램 또는 어플리케이션을 실행한다. 여기서, 제어부(220)는 확장현실환경 상에서 사용자 객체(U)가 가상객체(O)와 상호작용하는 이벤트를 검출하고, 각각의 객체가 가지는 현실과 동일하거나 사용자에 의해 설정된 물리적 특성의 제어인자에 따라 포스 피드백 제어변수를 변경하고 이에 따라 포스 피드백 제어신호를 생성한다. 또한, 제어부(220)는 입력장치(100)를 통해 입력되는 제어인자에 대한 정보를 메모리(230)에 전달하여 저장하는 것도 가능하다. 제어부(220)에 대한 상세한 설명은 도 2를 참조하여 후술한다.
메모리(230)는 게임, 통신 등 다양한 기능들의 애플리케이션들과 이와 관련된 그래픽 사용자 인터페이스(graphical user interface: GUI)를 제공하기 위한 영상들, 사용자 정보, 문서 등과 관련된 데이터베이스들, 포스 피드백 시스템(10)을 구동하는데 필요한 배경 영상들(메뉴 화면, 대기 화면 등) 또는 운영 프로그램들 등을 저장할 수 있다. 또한, 메모리(230)는 각각의 제어인자들에 따른 포스 피드백 제어변수의 데이터가 저장되어 있을 수 있다.
여기서, 메모리(230)는 제어인자 중 상대속도(V)에 따른 포스 피드백 제어 변수 데이터를 저장할 수 있다. 또한, 메모리(230)는 사용자 객체(U) 또는 가상객체(O)의 형상, 재질, 점성계수 또는 마찰계수에 따라 변화되는 포스 피드백 제어변수 데이터를 입력하여 저장하거나, 기 저장하여 보유할 수 있다.
출력장치(300)는 물리적인 힘을 제공하는 역감형 출력장치(300)이다. 출력장치(300)는 포스 피드백 제어신호를 수신하여 역감으로 출력하여 사용자에게 제공한다. 출력장치(300)는 사용자에게 힘의 크기, 방향, 및 각도를 제공함으로써 사용자에게 실감을 제공한다.
또한, 출력장치(300)는 역감형 출력장치(300) 중에서도 클러치를 구비하여 모터 등의 구동부와 연결이 완전히 차단되어 모터에 의한 부하가 전혀 없는 프리휠링(Freewheeling)이 가능하여 섬세한 힘의 변화를 출력할 수 있는 출력장치(300)인 것이 더 바람직할 수 있다. 이러한, 프리휠링이 가능한 역감형 출력장치(300)는 출력축이 모터의 작동으로 인한 부하상태, 모터의 작동은 없으나 출력축이 모터와 연결되어 모터의 자기장에 의한 무부하상태 및 프리휠링 상태의 3가지 상태로 구현이 가능하면 가장 바람직한 형태일 수 있다.
본 실시 예에서 입력장치(100) 및 출력장치(300)가 따로 구비되는 것으로 도시하였지만 이는 설명의 편의를 위한 것일 뿐 이에 한정되는 것은 아니다. 입력장치(100)는 출력장치(300)와 일체형으로 구비되어 입력 및 출력이 하나의 장치에서 가능할 수 있다.
표시장치(400)는 제어장치(200)로부터 수신한 영상 데이터 및 음성 데이터를 사용자에게 표시한다. 예를 들어, 표시장치(400)는 디스플레이와 스피커를 구비한 TV, 모니터, 및 머리 장착 디스플레이(이하, VR 헤드셋)등 일 수 있다. 표시장치(400)는 주기적 또는 이벤트에 따라 업데이트 되는 영상을 사용자에게 제공할 수 있다.
도 2는 실시 예에 따른 제어부를 나타내는 도면이다.
도2를 참조하면, 제어부(220)는 확장현실 제공부(221), 이벤트 검출부(222) 및 제어변수부(223)를 포함한다.
확장현실 제공부(221)는 사용자 객체(U) 데이터 및 가상객체(O) 데이터를 포함하는 확장현실을 구현한다. 예를 들어, 확장현실 제공부(221)는 사용자 객체(U), 가상객체(O)를 제어인자와 함께 데이터로 생성하여 시각적인 확장현실환경을 생성하여 제공할 수 있다. 여기서 제어인자는 사용자 객체(U)와 가상객체(O)의 상대속도(V)를 포함한다. 또한, 제어인자는 사용자 객체(U)의 점성계수, 사용자 객체(U)의 마찰계수, 사용자 객체(U)의 형상, 사용자 객체(U)의 재질, 가상객체(O)의 점성계수, 가상객체(O)의 마찰계수, 가상객체(O)의 형상, 가상객체(O)의 재질을 포함한다.
또한, 확장현실 제공부(221)는 확장현실환경 상에 적어도 하나 이상의 압력, 온도, 인력 또는 척력의 작용점 중 적어도 하나 이상의 환경특성을 포함하는 환경데이터를 형성한다. 여기서, 확장현실 제공부(221)는 환경데이터에 따라 적어도 하나 이상의 가상객체(O)의 유동, 상대속도(V), 사용자 객체(U) 또는 적어도 하나 이상의 가상객체(O)의 점성계수, 사용자 객체(U) 또는 적어도 하나 이상의 가상객체(O)의 마찰계수 중 적어도 어느 하나 이상이 변화하도록 설정할 수 있다.
확장현실 제공부(221)는 확장현실환경상의 환경특성을 실제와 동일하게 구현이 가능하다. 또한, 확장현실 제공부(221)는 현실환경 특성과는 다른 임의의 환경도 구현이 가능하다. 예를 들어, 확장현실 제공부(221)는 환경특성을 임의로 설정하여 각기 다른 온도 특성을 가지는 복수의 구역이 인접하여 형성되는 것도 가능할 수 있다.
확장현실 제공부(221)는 생성된 확장현실환경을 영상 데이터 및 음성데이터로 생성하여 통신부(210)를 통해 표시장치(400)에 제공하여 사용자가 영상 및 소리로 제공받을 수 있다. 또한, 확장현실 제공부(221)는 이벤트에 따라 업데이트되는 영상데이터 및 음성데이터를 실시간으로 표시장치(400)에 제공할 수 있다.
한편, 사용자 객체(U) 데이터는 사용자 객체(U)의 확장현실에서의 물리적 특성의 제어인자를 포함하는 데이터를 의미한다. 또한, 가상객체(O) 데이터는 확장현실에서의 가상객체(O)의 물리적 특성의 제어인자를 포함하는 데이터를 의미한다. 여기서, 사용자 객체(U), 또는 가상객체(O)는 모두가 가상의 객체로 구현되는 것도 가능하며, 둘 중 어느 하나 이상이 증강현실 또는 혼합현실에서 홀로그램 또는 가상의 객체로 구현되는 것도 가능하다.
이벤트 검출부(222)는 사용자 객체(U)와 가상객체(O) 사이의 상호작용 이벤트를 판단하여 이벤트를 검출한다. 예를 들어, 이벤트 검출부(222)는 사용자 입력 또는 실행중인 프로세스에 의해 발생하는 사용자 객체(U)와 가상객체(O) 사이의 충돌, 접촉, 통과, 침투, 또는 탈출 중 적어도 어느 하나 이상을 포함하는 상호작용 이벤트를 감지할 수 있다. 이벤트 검출부(222)는 이벤트를 검출하여 이벤트 데이터를 생성하여 제어변수부(223)에 전달한다.
또한, 이벤트 검출부(222)는 환경데이터에 따라 변화하도록 설정된 적어도 하나 이상의 가상객체(O)의 유동, 상대속도(V), 사용자 객체(U) 또는 적어도 하나 이상의 가상객체(O)의 점성계수, 사용자 객체(U) 또는 적어도 하나 이상의 가상객체(O)의 마찰계수 중 적어도 어느 하나 이상의 변화를 이벤트로 검출하여 이벤트 데이터를 생성할 수 있다.
제어변수부(223)는 이벤트 데이터를 전달받아 포스 피드백 제어변수를 변경한다. 제어변수부(223)는 사용자 객체(U) 또는 가상객체(O)의 상대속도(V)를 물리적 제어인자로 포스 피드백 제어변수를 변경한다. 여기서, 상대속도(V)는 사용자 객체(U)와 가상객체(O)가 가지는 속도와 진행방향에 대응하는 상대속도(V)를 의미한다.
제어변수부(223)는 사용자 객체(U)에 가상객체(O)의 이벤트가 발생하고, 이때, 사용자 객체(U)와 가상객체(O)간의 상대속도(V)가 발생할 때, 이 상대속도(V)에 대응하는 역감이 제공되도록 포스 피드백 제어변수를 변경함으로써 사용자에게 역감을 제공한다.
여기서, 제어변수부(223)는 사용자 객체(U) 또는 적어도 하나 이상의 가상객체(O)의 점성계수, 마찰계수, 사용자 객체(U)와 적어도 하나 이상의 가상객체(O)의 접촉표면의 면적 또는 접촉 표면의 형상을 제어인자로 더 포함하여 포스 피드백 제어변수를 변경하게 된다.
제어변수부(223)는 사용자 객체(U) 또는 적어도 하나 이상의 가상객체(O)의 환경특성 변화에 따른 제어인자의 변화를 이벤트 데이터로 제공받아 확장현실의 환경변화에 따른 물리적 특성변화를 사용자에게 실감나게 제공할 수 있다.
예를 들어, 확장현실 제공부(221)는 압력 또는 온도 분포를 설정할 수 있다. 이 경우, 확장현실환경 상에서 압력 또는 온도 분포에 따라 가상객체(O)의 유동, 속도, 점성계수, 마찰계수가 변형될 수 있다. 이벤트 검출부(222)는 제어인자의 변화를 검출하여 이벤트 데이터로 제어변수부(223)에 제공하고, 제어변수부(223)는 제어인자에 따라 포스 피드백 제어변수를 변경하여 제어신호를 생성할 수 있다.
한편, 제어변수부(223)는 오픈루프 제어, 온오프 제어, PID 제어, 임피던스 제어 중 어느 하나의 제어방법의 제어변수를 설정한다. 다만 이에 한정되는 것은 아니며, 포스 피드백을 제공할 수 있는 제어방법이면 모두 가능할 수 있다.
예를 들어, 제어변수부(223)는 역감의 크기 및 방향, 제어인자에 따라 임피던스 제어변수를 변화시킨다. 여기서, 임피던스 제어변수는 스프링상수 k, 질량상수 m 및 감쇠상수 c를 포함할 수 있다. 제어변수부(223)는 마찰 계수 또는 점도에 따라 감쇠상수를 변화시키거나, 역감의 크기 및 방향에 따라 스프링 상수k 및 질량상수 m을 변화시킴으로써 출력장치(300)에 제공할 역감을 결정하고, 포스 피드백 제어신호로 생성하여 출력장치(300)에 제공한다.
또한, 제어변수부(223)는 출력장치(300)의 제어방법에 따라 제어인자에 따른 제어변수를 변경할 수 있다. 다시 말하면, 제어변수부(223)는 서로 다른 제어방법을 가지는 복수의 출력장치(300)의 제어방법에 따라 메모리(230)의 데이터를 참조하여 제어신호를 각각 생성하여 역감을 제공하기 위한 포스 피드백 제어신호를 생성하여 제공할 수 있다.
제어변수부(223)는 포스 피드백 제어신호를 통신부를 통해 출력장치(300)에 제공함으로써 역감을 출력장치(300)를 통해 사용자에게 제공한다.
도 3은 실시 예에 따른 사용자 객체(U)와 가상객체(O)의 상대속도(V)가 발생하는 모습을 예시적으로 나타내는 도면이고, 도 4는 도 3의 실시 예에 따른 상대속도(V)와 출력장치(300)에 제공되는 부하의 힘과의 그래프를 나타내는 도면이고, 도 5는 도 3의 실시 예에 따른 면적과 힘과의 그래프를 나타내는 도면이다.
도 3을 참조하면, 사용자 객체(U)는 가상객체(O)와 접촉이벤트를 통해 상대속도(V)가 발생할 수 있다. 예를 들어, 사용자 객체(U)는 낚시대, 작살, 방패 등의 도구일 수 있으며, 가상객체(O)는 흐름이 있는 물 또는 물줄기 등일 수 있다. 이벤트 검출부(222)는 사용자 객체(U)와 가상객체(O)의 접촉을 상호작용 이벤트로 검출하고, 이벤트 데이터로 생성하여 제어변수부(223)에 전달한다.
여기서, 가상객체(O)는 임의의 빛을 구현할 수 있으며, 이때 빛 입자에 임의의 질량을 설정하고 진행방향으로만 힘을 가지며 중력에는 영향을 받지 않는 구성으로 확장현실 제공부(221)에서 설정함으로써 빛이 힘을 가지는 것을 물리엔진으로 구현할 수 있다. 이 경우, 빛으로 구현된 가상객체(O)도 상대속도(V)에 대한 부하가 발생하여 사용자 객체(U)에 힘을 작용하는 것으로 구현이 가능할 수 있다.
여기서, 사용자 객체(U)의 속도(V1)와 가상객체(O)의 속도(V2)가 설정된 경우, 사용자 객체(U)는 가상객체(O)에 의해 상대속도(V)가 발생한다. 도 4와 도시된 바와 같이 상대속도(V)에 의해 사용자객체에 발생하는 부하에 대한 힘(F)은 상대속도(V)가 클수록 더 크게 발생하도록 메모리(230)에 저장될 수 있다. 또한, 도 5에 도시된 바와 같이 접촉면적(A)이 큰 경우에 사용자 객체(U)에 발생하는 부하에 대한 힘은 더 크게 발생할 수 있다. 여기서, 부하에 대한 힘(F)은 상대속도(V) 및 면적(A) 증가에 대해 역감의 세기 즉, 힘(F)이 증가하는 그래프를 보인다. 인체는 비선형적 감각 특성, 즉 힘(F)의 증가를 느끼는 감각이 힘(F)의 증가에 따라 선형을 가지지 않고 힘(F)의 증가가 2차 함수 형태를 가져야 감각을 힘(F)의 증가를 선형으로 느끼게 된다. 실시 예에 따른 메모리(230)에 저장된 상대속도(V) 및 면적(A) 증가에 따른 역감(F)의 세기는 2차함수 형태를 가져 사용자가 출력장치의 힘(F)의 변화가 더 확실하게 느끼게 되어 실감을 느낄 수 있다. 하지만, 상대속도V) 및 면적(A) 증가에 따른 역감의 세기는 이에 한정되는 것은 아니며, 상대속도 및 면적 증가에 따른 힘의 증가는 일차함수 형태의 그래프를 가지는 것도 가능할 수 있다.
제어변수부(223)는 이 사용자 객체(U)에 발생하는 부하에 대한 힘(F)과 방향을 역감으로 출력장치(300)에 제공하도록 제어변수를 변경하여 포스 피드백 제어신호를 생성한다. 또한, 제어변수부(223)는 사용자 객체(U)에 속도가 형성되는 경우 상대속도(V)에 대한 역감을 이동방향에 따라 크거나 작게 변경할 수 있다.
포스 피드백 시스템(10)은 컨텐츠로 낚시와 같이 물로 구현된 가상객체(O)의 흐름속도에 따라 낚시대로 구현된 사용자 객체(U)가 끌려가는 역감을 사용자에게 제공하거나, 배트, 라켓 등으로 구현된 사용자 객체(U)와 공으로 구현된 가상객체(O)가 부딪히거나 치는 경우에 상대 속도에 따라 역감을 조절할 수 있다.
도 6은 다른 실시 예에 따른 사용자 객체(U)와 가상객체(O)의 상대속도(V) 발생을 예시적으로 나타내는 도면이다.
도 6을 참조하면, 사용자 객체(U)는 일방향으로 일정한 속도(V3)로 이동하는 상태이고, 가상객체(O)는 사용자 객체(U)를 향해 타방향으로 일정한 속도(V2)로 유동한다. 이때, 사용자 객체(U)의 가상객체(O)와 접촉하는 표면의 형상은 상향경사를 가질 수 있다. 이 경우, 사용자 객체(U)는 가상객체(O)와 접촉에 의해 상대속도(V)를 가지게 된다. 이때, 사용자 객체(U)접촉면의 형상으로 인해 상대속도에 대응하는 부하의 방향은 상향경사를 가진 접촉면에 수직한 방향으로 발생하게 된다. 제어변수부(223)는 이 부하에 대응되는 힘(F)에 대해 상대속도(V)를 제어인자로 세기를 조절하고, 방향은 부하의 발생방향으로 역감으로 제공하도록 제어변수를 변경한다.
한편, 사용자 객체(U)와 가상객체(O)의 상면도 접촉이 발생하게 되는데, 제어변수부(223)는 사용자 객체(U)의 점성계수, 사용자 객체(U)의 마찰계수, 사용자 객체(U)의 형상, 가상객체(O)의 점성계수, 가상객체(O)의 마찰계수, 가상객체(O)의 형상을 제어인자로 포함하여 제어변수를 변경할 수 있다. 예를 들어, 제어변수부(223)는 상대속도(V) 뿐 아니라 사용자 객체(U)의 상면과 가상객체(O)의 점성계수에 의한 점성마찰을 고려하여 부하의 세기 및 방향에 대해 제어변수를 변경함으로써 사용자에게 실감을 제공할 수 있다.
여기서, 사용자 객체(U)의 형상이 유선형을 가지는 경우에는 가상객체(O) 점성마찰을 적게 받기 때문에 부하의 세기가 낮게 형성될 수 있다.
도 7은 또 다른 실시 예에 따른 사용자 객체(U)와 복수의 가상객체(O1, O2)의 상대속도(V) 발생을 예시적으로 나타내는 도면이다.
도 7을 참조하면, 사용자 객체(U)는 복수의 가상객체(O1, O2)에 걸쳐져 구비될 수 있다. 이때, 사용자 객체(U)는 사용자 객체(U)의 속도(V3), 복수의 가상객체(O1, O2)의 각각의 속도(V1, V2)에 따라 사용자 객체(U)가 받는 상대속도(V)가 발생하게 된다. 제어변수부(223)는 사용자 객체(U)의 속도(V3)와 복수의 가상객체(O1, O2)의 속도(V1, V2)를 조합하여 상대속도(V)를 제어인자로 산출하여 제어변수를 변경하여 제어신호를 생성하는 것도 가능하다.
예를 들어, 포스 피드백 시스템(10)은 컨텐츠로 구현된 항해 시의 사용자 객체(U)의 일부분이 물로 구현된 일 가상물체(O1)에 잠기고, 타부분이 공기로 구현된 타 가상물체(O2)와 접촉하는 경우 각각의 가상객체(O1, O2)의 속도(V1, V2) 및 방향을 조합하여 상대속도를 산출하고, 이에 따른 역감의 크기 및 방향을 사용자에게 제공함으로써 실감을 제공할 수 있다.
도 8은 또 다른 실시 예에 따른 사용자 객체(U)와 복수의 가상객체(O)의 상대속도(V) 발생을 예시적으로 나타내는 도면이고, 도 9는 도 8의 실시 예에 따른 사용자 객체(U)의 이동거리(S)에 대한 힘의 크기 변화를 보여주는 그래프이다.
도 8을 참조하면, 일 가상물체(O1)와 타 가상물체(O2)는 각각 동일방향으로 속도(V1, V2)를 가지며, 사용자 객체(U)가 일정한 속도(V3)로 일 가상물체(O1)에서 타 가상물체(O2)를 통과하게 된다. 이때, 사용자 객체(U)에 발생하는 역감은 일 가상물체(O1)와 타 가상물체(O2)의 경계에서 순간적으로 증가 또는 감소시켜 경계효과를 표현할 수 있다.
예를 들어, 일 가상물체(O1)보다 타 가상물체(O2)의 이동속도가 더 빠를 수 있다. 이때, 사용자 객체(U)는 타 가상물체(O2)로 이동했을 때 상대속도(V) 차이로 인해 더 큰 힘을 받게 된다. 여기서, 경계에서의 힘을 타 가상물체(O2)에서 받는 힘보다 순간적으로 증가시켜 제공함으로써 사용자에게 실감을 제공할 수 있다.
이하에서는 도 1 및 도 9의 실시 예에 따른 포스 피드백 시스템(10)을 이용한 포스 피드백 방법에 대해 도 10을 참조하여 설명한다.
도 10은 실시 예에 따른 포스 피드백 방법을 나타내는 흐름도이다.
도 10을 참조하면, 포스 피드백 방법은 초기화 단계(S51), 객체를 설정하는 단계(S52), 이벤트를 검출하는 단계(S53), 포스 피드백 제어변수를 변경하는 단계(S54) 및 역감을 제공하는 단계(S55)를 포함할 수 있다.
초기화 단계(S51)에서 확장현실 제공부(221)는 어플리케이션 또는 프로그램을 로딩하면서, 확장현실환경, 사용자 객체(U)및 가상객체(O)를 생성한다. 다시 말하면, 확장현실 제공부(221)는 사용자 객체(U) 데이터 및 가상객체(O) 데이터를 포함하는 확장현실을 구현한다.
예를 들어, 확장현실 제공부(221)는 사용자 객체(U), 가상객체(O)를 제어인자와 함께 데이터로 생성하여 시각적인 확장현실환경을 생성하여 제공할 수 있다.
객체를 설정하는 단계(S52)에서는 확장현실환경 상에 사용자 객체(U)와 가상객체(O)를 설정한다. 예를 들어, 확장현실 제공부(221)는 메모리(230)에 저장된 사용자 객체(U)와 가상객체(O)의 상대속도(V)를 포함하는 제어인자를 추출하여 사용자 객체(U) 데이터 및 가상객체(O) 데이터에 적용하여 설정한다. 여기서 제어인자는 사용자 객체(U)와 가상객체(O)의 상대속도(V)를 포함한다. 또한, 제어인자는 사용자 객체(U)의 점성계수, 사용자 객체(U)의 마찰계수, 사용자 객체(U)의 형상, 사용자 객체(U)의 재질, 가상객체(O)의 점성계수, 가상객체(O)의 마찰계수, 가상객체(O)의 형상, 가상객체(O)의 재질을 포함한다
또한, 확장현실 제공부(221)는 확장현실환경 상에 적어도 하나 이상의 압력, 온도, 인력 또는 척력의 작용점 중 적어도 하나 이상의 환경특성을 포함하는 환경데이터를 형성한다. 여기서, 확장현실 제공부(221)는 환경데이터에 따라 적어도 하나 이상의 가상객체(O)의 유동, 상대속도(V), 사용자 객체(U) 또는 적어도 하나 이상의 가상객체(O)의 점성계수, 사용자 객체(U) 또는 적어도 하나 이상의 가상객체(O)의 마찰계수 중 적어도 어느 하나 이상이 변화하도록 설정할 수 있다.
이벤트를 검출하는 단계(S53)에서는 사용자 객체(U)와 가상객체(O)의 상호작용 이벤트를 검출한다. 이때, 이벤트 검출부(222)는 입력데이터, 사용자 객체(U) 데이터 및 가상객체(O) 데이터를 포함하는 이벤트 데이터를 생성한다. 여기서, 상호작용 이벤트는 사용자 객체(U)와 상기 가상객체(O)의 충돌, 접촉, 타격, 통과, 침투, 탈출 중 적어도 어느 하나 이상을 포함한다.
충돌은 사용자 객체(U)와 가상객체(O)의 순각적인 충돌을 의미한다. 접촉은 사용자 객체(U)와 가상객체(O)의 지속적인 접촉을 의미한다. 또한, 타격은 사용자 객체(U)에 의한 가상객체(O)와 충돌을 의미한다. 통과는 사용자 객체(U)가 가상객체(O)를 뚫고 지나치거나, 가상객체(O)가 사용자 객체(U)를 뚫고 지나치는 것을 의미한다. 또한, 침투는 사용자 객체(U)가 가상객체(O)에 삽입되는 것을 의미하고, 탈출은 사용자 객체(U)가 가상객체(O)에서 빠져나오는 것을 의미한다.
한편, 도면에는 도시하지 않았지만, 이벤트 데이터를 생성하는 단계 이전에 입력장치(100)에 입력되는 입력데이터를 수신하는 단계를 더 포함할 수 있다. 입력데이터를 수신하는 단계는 사용자의 입력에 따른 입력데이터를 수신할 수 있다. 예를 들어, 통신부(210)를 통해 입력장치(100)에서 입력되는 사용자의 입력에 따라 사용자 객체(U)의 위치, 각도, 속도, 가속도를 조절할 수 있다. 이후, 이벤트를 검출하는 단계(S53)에서 수신된 입력데이터에 따라 상호작용 이벤트를 검출할 수 있다.
또한, 이벤트 데이터에는 환경특성에 따른 제어인자의 변화에 대한 이벤트가 포함될 수 있다.
이벤트를 검출하는 단계(S53)에서 이벤트가 검출되면, 포스 피드백 제어변수를 변경하는 단계(S54)를 진행한다. 또한, 이벤트를 검출하는 단계(S53)에서 이벤트가 검출되지 않으면 포스 피드백 방법을 종료한다.
포스 피드백 제어변수를 변경하는 단계(S54)에서 제어변수부(223)는 사용자 객체(U) 데이터, 가상객체(O) 데이터 및 이벤트 데이터에 근거하여 포스 피드백 제어변수를 변경한다. 예를 들어, 제어변수부(223)는 상대속도(V)를 포함하는 제어인자에 따라 포스 피드백 제어변수를 변경할 수 있다.
여기서, 포스 피드백 제어변수를 변경하는 단계에서는 제어변수부(223)는 사용자 객체(U) 또는 적어도 하나 이상의 가상객체(O)의 점성계수, 마찰계수, 사용자 객체(U)와 적어도 하나 이상의 가상객체(O)의 접촉표면의 면적 또는 접촉 표면의 형상을 제어인자로 더 포함하여 포스 피드백 제어변수를 변경할 수 있다.
제어변수부(223)는 출력장치(300)의 제어방법에 맞춰 제어변수를 변경한다. 예를 들어, 출력장치(300)의 제어방법이 임피던스 제어방법일 경우 제어변수부(223)는 상대속도(V), 사용자 객체(U) 또는 적어도 하나 이상의 가상객체(O)의 점성계수, 마찰계수, 사용자 객체(U)와 적어도 하나 이상의 가상객체(O)의 접촉표면의 면적 또는 접촉 표면의 형상 중 적어도 어느 하나의 제어인자에 따라 제어변수 스프링상수 k, 질량상수 m 및 감쇠상수 c를 변경하여 제어신호를 생성한다. 또한, 제어변수부(223)는 상대속도(V)의 크기, 부하의 방향에 따라 출력장치(300)의 포스 피드백의 방향 및 크기를 제공하도록 제어신호를 생성한다.
역감을 제공하는 단계(S55)에서 제어변수부(223)는 포스 피드백 제어변수에 따라 포스 피드백 제어신호를 생성하고, 제어신호를 출력장치(300)에 전달하여 역감을 출력한다.
또한, 포스 피드백 방법은 이벤트에 따라 업데이트되는 영상을 사용자에게 제공하는 단계(미도시)를 더 포함할 수 있다.
포스 피드백 방법은 상기의 단계를 반복하여 역감을 실시간으로 출력할 수 있다.
실시 예에 따른 포스 피드백 방법은 다양한 기계 수단을 통하여 수행될 수 있는 프로그램 명령 형태로 구현되어 프로그램을 기록한 기계로 읽을 수 있는 저장 매체에 기록될 수 있다. 상기 기계로 읽을 수 있는 저장 매체는 프로그램 명령, 데이터 파일, 데이터 구조 등을 단독으로 또는 조합하여 포함할 수 있다. 상기 매체에 기록되는 프로그램 명령은 실시 예를 위하여 특별히 설계되고 구성된 것들이거나 컴퓨터 소프트웨어 등 통상의 기술자에게 공지되어 사용 가능한 것일 수도 있다. 기계로 읽을 수 있는 저장 매체의 예에는 하드 디스크, 플로피 디스크 및 자기 테이프와 같은 자기 매체(magnetic media), CD-ROM, DVD와 같은 광기록 매체(optical media), 플롭티컬 디스크(floptical disk)와 같은 자기-광 매체(magneto-optical media), 및 롬(ROM), 램(RAM), 플래시 메모리 등과 같은 프로그램 명령을 저장하고 수행하도록 특별히 구성된 하드웨어 장치가 포함된다. 프로그램 명령의 예에는 컴파일러에 의해 만들어지는 것과 같은 기계어 코드뿐만 아니라 인터프리터 등을 사용해서 기계에 의해서 실행될 수 있는 고급 언어 코드를 포함한다. 상기된 하드웨어 장치는 실시 예의 동작을 수행하기 위해 하나 이상의 소프트웨어 모듈로서 작동하도록 구성될 수 있으며, 그 역도 마찬가지이다.
이상과 같이 비록 한정된 도면에 의해 실시 예들이 설명되었으나, 해당 기술분야에서 통상의 지식을 가진 자라면 상기의 기재로부터 다양한 수정 및 변형이 가능하다. 예를 들어, 설명된 기술들이 설명된 방법과 다른 순서로 수행되거나, 및/또는 설명된 구조, 장치 등의 구성요소들이 설명된 방법과 다른 형태로 결합 또는 조합되거나, 다른 구성요소 또는 균등물에 의하여 대치되거나 치환되더라도 적절한 결과가 달성될 수 있다.

Claims (15)

  1. 확장현실환경을 생성하는 초기화 단계;
    상기 확장현실환경 상에 사용자 객체 및 적어도 하나 이상의 가상객체를 설정하는 단계;
    상기 사용자 객체와 상기 적어도 하나 이상의 가상객체의 상호작용 이벤트를 검출하는 단계;
    상기 사용자 객체와 상기 적어도 하나 이상의 가상객체의 상호작용 이벤트에 따른 상대속도를 포함하는 제어인자에 대응하여 포스 피드백 제어변수를 변경하는 단계; 및
    상기 변경된 포스 피드백 제어변수에 따라 출력장치를 통해 역감을 제공하는 단계;
    를 포함하는 포스 피드백 방법.
  2. 제1항에 있어서,
    사용자 객체 및 적어도 하나 이상의 가상객체를 설정하는 단계는,
    상기 사용자 객체 또는 상기 적어도 하나 이상의 가상객체의 점성계수, 마찰계수 중 적어도 어느 하나 이상을 제어인자로 더 설정하는 단계를 포함하는 포스 피드백 방법.
  3. 제2항에 있어서,
    포스 피드백 제어변수를 변경하는 단계는,
    상기 사용자 객체와 상기 적어도 하나 이상의 가상객체의 접촉표면의 면적 또는 접촉 표면의 형상을 제어인자로 더 포함하여 포스 피드백 제어변수를 변경하는 포스 피드백 방법.
  4. 제2항에 있어서,
    확장현실환경을 제공하는 단계는,
    확장현실환경상에 적어도 하나 이상의 압력, 온도, 인력 또는 척력의 작용점 중 적어도 하나 이상의 환경데이터를 형성하는 단계를 포함하는 포스 피드백 방법.
  5. 제4항에 있어서,
    사용자 객체 및 적어도 하나 이상의 가상객체를 설정하는 단계는,
    상기 환경데이터에 따라 상기 적어도 하나 이상의 가상객체의 유동 또는 상기 상대속도, 상기 사용자 객체 또는 상기 적어도 하나 이상의 가상객체의 점성계수, 마찰계수 중 적어도 어느 하나 이상이 변화하도록 설정하는 포스 피드백 방법.
  6. 제1항에 있어서,
    입력장치에 입력되는 입력데이터를 수신하는 단계;를 더 포함하고,
    상기 상호작용 이벤트를 검출하는 단계는,
    상기 상호작용 이벤트를 상기 수신된 입력데이터에 따라 검출하는 포스 피드백 방법.
  7. 제1항에 있어서,
    상기 이벤트에 따라 업데이트되는 영상을 사용자에게 제공하는 단계;
    를 더 포함하는 포스 피드백 방법.
  8. 청구항 제1항 내지 제7항 중 어느 한 항에 따른 포스 피드백 방법을 실행하기 위한 프로그램을 기록한 기계로 읽을 수 있는 저장매체.
  9. 확장현실환경 상에서 사용자 객체와 적어도 하나 이상의 가상객체의 상호작용 이벤트를 검출하고, 상기 사용자 객체와 상기 적어도 하나 이상의 가상객체의 상대속도를 포함하는 제어인자에 따라 포스 피드백 제어변수를 변경하여 포스 피드백 제어신호를 생성하는 제어장치; 및
    상기 포스 피드백 제어신호를 수신하여 역감을 사용자에게 제공하는 출력장치;
    를 포함하는 포스 피드백 시스템.
  10. 제9항에 있어서,
    상기 제어인자는,
    상기 사용자 객체 또는 상기 적어도 하나 이상의 가상객체의 점성계수, 마찰계수 중 적어도 어느 하나 이상을 더 포함하는 포스 피드백 시스템.
  11. 제10항에 있어서,
    상기 제어장치는,
    상기 사용자 객체와 상기 적어도 하나 이상의 가상객체의 접촉표면의 면적 또는 접촉 표면의 형상을 제어인자로 더 포함하여 포스 피드백 제어변수를 변경하는 포스 피드백 시스템.
  12. 제10항에 있어서,
    상기 제어장치는,
    확장현실환경 상에 적어도 하나 이상의 압력, 온도, 인력 또는 척력의 작용점 중 적어도 하나 이상의 환경특성을 포함하는 환경데이터를 형성하는 포스 피드백 시스템.
  13. 제12항에 있어서,
    상기 제어장치는,
    상기 환경데이터에 따라 상기 적어도 하나 이상의 가상객체의 유동 또는 상기 상대속도, 상기 사용자 객체 또는 상기 적어도 하나 이상의 가상객체의 점성계수, 마찰계수 중 적어도 어느 하나 이상이 변화하도록 설정하는 포스 피드백 시스템.
  14. 제9항에 있어서,
    상기 사용자의 입력을 입력데이터로 생성하는 입력장치;를 더 포함하고,
    상기 사용자 객체는 상기 입력장치에서 생성된 입력데이터에 따라 상기 확장현실환경 상에서 이동하는 포스 피드백 시스템.
  15. 제9항에 있어서,
    상기 이벤트에 따라 업데이트되는 영상을 사용자에게 제공하는 표시장치
    를 더 포함하는 포스 피드백 시스템.
KR1020187038215A 2018-12-13 2018-12-13 포스 피드백 방법 및 시스템, 기계로 읽을 수 있는 저장 매체 KR20200073951A (ko)

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
PCT/KR2018/015848 WO2020122282A1 (ko) 2018-12-13 2018-12-13 포스 피드백 방법 및 시스템, 기계로 읽을 수 있는 저장 매체

Publications (1)

Publication Number Publication Date
KR20200073951A true KR20200073951A (ko) 2020-06-24

Family

ID=71076890

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020187038215A KR20200073951A (ko) 2018-12-13 2018-12-13 포스 피드백 방법 및 시스템, 기계로 읽을 수 있는 저장 매체

Country Status (2)

Country Link
KR (1) KR20200073951A (ko)
WO (1) WO2020122282A1 (ko)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2024154921A1 (ko) * 2023-01-18 2024-07-25 삼성전자주식회사 햅틱 정보를 생성하기 위한 전자 장치 및 방법

Families Citing this family (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN113296605B (zh) * 2021-05-24 2023-03-17 中国科学院深圳先进技术研究院 力反馈方法、力反馈装置及电子设备

Family Cites Families (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR100944027B1 (ko) * 2008-06-16 2010-02-24 전남대학교산학협력단 테이블 탑 구조의 증강현실 제공 시스템
JP2013114323A (ja) * 2011-11-25 2013-06-10 Mitsubishi Electric Corp ３次元空間座標入力装置
WO2017043400A1 (ja) * 2015-09-08 2017-03-16 ソニー株式会社 情報処理装置、方法およびコンピュータプログラム
US10324530B2 (en) * 2015-12-14 2019-06-18 Facebook Technologies, Llc Haptic devices that simulate rigidity of virtual objects
JP2017182495A (ja) * 2016-03-30 2017-10-05 ソニー株式会社 情報処理装置、情報処理方法及びプログラム

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2024154921A1 (ko) * 2023-01-18 2024-07-25 삼성전자주식회사 햅틱 정보를 생성하기 위한 전자 장치 및 방법

Also Published As

Publication number Publication date
WO2020122282A1 (ko) 2020-06-18

Similar Documents

Publication Publication Date Title
US6147674A (en) Method and apparatus for designing force sensations in force feedback computer applications
EP3040807B1 (en) Virtual sensor in a virtual environment
US11379054B2 (en) Apparatus for use in a virtual reality system
US6697086B2 (en) Designing force sensations for force feedback computer applications
US7843424B2 (en) Method and apparatus for designing force sensations in force feedback computer applications
KR20150085801A (ko) 사용자에 의해 생성되는 콘텐츠 저작을 위한 시스템 및 방법
JP2018142313A (ja) 仮想感情タッチのためのシステム及び方法
Riecke et al. 3D user interfaces for virtual reality and games: 3D selection, manipulation, and spatial navigation
KR20200073951A (ko) 포스 피드백 방법 및 시스템, 기계로 읽을 수 있는 저장 매체
CA2923867C (en) Haptic rendering for a flexible computing device
Kortemeyer Writing virtual reality teaching resources
KR20200052540A (ko) 밀도를 이용한 포스 피드백 방법 및 시스템, 기계로 읽을 수 있는 저장 매체
Butnariu et al. DEVELOPMENT OF A NATURAL USER INTERFACE FOR INTUITIVE PRESENTATIONS IN EDUCATIONAL PROCESS.
KR20200033388A (ko) 포스 피드백 방법 및 시스템, 기계로 읽을 수 있는 저장 매체
Kokkonis Designing Haptic Interfaces with Depth Cameras and H3D Depth Mapping
KR20200070607A (ko) 강도를 이용한 포스 피드백 방법 및 시스템, 기계로 읽을 수 있는 저장 매체
Gay et al. Using Force-Feedback Haptic Effects to Develop Serious and Entertainment Games Accessible for Visually Impaired People
US20200142486A1 (en) Force feedback method and system using density
KR20110040128A (ko) 헵틱 콘텐츠 스트리밍 시스템
Hendricks et al. EEG: the missing gap between controllers and gestures
Pissaloux Using Force-Feedback Haptic Effects to Develop Serious and Entertainment Games Accessible for Visually Impaired People
Rodrigues et al. Collaborative virtual training using force feedback devices
Kinzinger Design of a Platform for Interaction With Unmanned Aerial Vehicles Using Virtual Reality Technology
Melles Interaction in Virtual Worlds for Digital Storytelling
Back et al. Using the Nintendo Wii Remote in an Engineering Context: Presentation of a Specific Implementation and Applications

Legal Events

Date Code Title Description
E902 Notification of reason for refusal
E601 Decision to refuse application