KR101626949B1 - 자기장을 이용한 감각 생성 시스템 및 이를 이용한 방법 - Google Patents

자기장을 이용한 감각 생성 시스템 및 이를 이용한 방법 Download PDF

Info

Publication number
KR101626949B1
KR101626949B1 KR1020140167882A KR20140167882A KR101626949B1 KR 101626949 B1 KR101626949 B1 KR 101626949B1 KR 1020140167882 A KR1020140167882 A KR 1020140167882A KR 20140167882 A KR20140167882 A KR 20140167882A KR 101626949 B1 KR101626949 B1 KR 101626949B1
Authority
KR
South Korea
Prior art keywords
magnetic field
haptic feedback
information
unit
content
Prior art date
Application number
KR1020140167882A
Other languages
English (en)
Inventor
박정민
김도익
이중재
장효종
Original Assignee
한국과학기술연구원
재단법인 실감교류인체감응솔루션연구단
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 한국과학기술연구원, 재단법인 실감교류인체감응솔루션연구단 filed Critical 한국과학기술연구원
Priority to KR1020140167882A priority Critical patent/KR101626949B1/ko
Application granted granted Critical
Publication of KR101626949B1 publication Critical patent/KR101626949B1/ko

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/016—Input arrangements with force or tactile feedback as computer generated output to the user
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F1/00—Details not covered by groups G06F3/00 - G06F13/00 and G06F21/00
    • G06F1/16—Constructional details or arrangements
    • G06F1/1613—Constructional details or arrangements for portable computers
    • G06F1/163—Wearable computers, e.g. on a belt

Abstract

본 발명의 일 측면에 따르면, 컨텐츠를 디스플레이하는 디스플레이 유닛,
상기 디스플레이 유닛에 대응되는 위치에 형성되어 자기장을 발생시키는 자기장 발생 유닛, 사용자의 신체의 일부에 착용할 수 있으며, 전류가 흐를 수 있는 전선이 형성되어 있는 햅틱 피드백 유닛, 상기 컨텐츠의 3D 정보, 상기 햅틱 피드백 유닛에 형성된 상기 전선의 상기 자기장 내에서의 방향 정보, 및 상기 자기장의 방향 정보를 참조로 하여, 상기 전선에 흘릴 전류의 세기, 방향 및 상기 자기장 발생 유닛에 의해 발생되는 자기장의 세기 중 적어도 하나를 제어하는 제어부를 포함하는 자기장을 이용한 감각 생성 시스템이 제공된다. 본 발명에 의하면, 일반적인 컨텐츠에 대하여 적절한 햅틱 피드백을 제공 받을 수 있는바, 보다 실감 있게 컨텐츠를 감상할 수 있게 되는 효과가 달성된다.

Description

자기장을 이용한 감각 생성 시스템 및 이를 이용한 방법{SYSTEM FOR PROVIDING HAPTIC FEEDBACK USING MAGNETIC FIELD AND METHOD USING THE SAME}
본 발명은 자기장을 이용한 감각 생성 시스템 및 이를 이용한 방법에 관한 것으로, 보다 상세하게는, 컨텐츠를 디스플레이하는 디스플레이 유닛, 상기 디스플레이 유닛에 대응되는 위치에 형성되어 자기장을 발생시키는 자기장 발생 유닛, 사용자의 신체의 일부에 착용할 수 있으며, 전류가 흐를 수 있는 전선이 형성되어 있는 햅틱 피드백 유닛, 상기 컨텐츠의 3D 정보, 상기 햅틱 피드백 유닛에 형성된 상기 전선의 상기 자기장 내에서의 방향 정보, 및 상기 자기장의 방향 정보를 참조로 하여, 상기 전선에 흘릴 전류의 세기, 방향 및 상기 자기장 발생 유닛에 의해 발생되는 자기장의 세기 중 적어도 하나를 제어하는 제어부를 포함하는 시스템 및 이를 이용한 방법에 관한 것이다.
근래에 들어, 화상회의, 원격 존재 로봇 제어, 가상현실, 스마트 폰, 게임 등의 다양한 분야에서 사용자에게 제공되는 영상에 대하여 촉감을 생성하는 기술에 대한 개발이 활발하게 이루어지고 있다.
멀티미디어의 발달과 더불어 사용자들은 보다 실감 있는 컨텐츠를 제공 받기를 원하고 있고, 보다 실감 있는 컨텐츠의 제공이 앞으로 시장 선점을 위한 매우 중요한 요인이 될 수 있기에, 많은 연구원들이 이를 위해 노력하고 있다.
가령, 한국공개특허 10-2014-0113496 은 비디오 컨텐츠 분석으로부터 햅틱 피드백을 생성하는 방법 및 기기에 관한 것으로서, 이에 따르면, 비디오 컨텐츠 분석, 비디오 상의 하나 이상의 개체의 모션에 대한 하나 이상의 측정을 포함하는 센서 정보, 및/또는 하나 이상의 이미지 캡처 장치의 모션에 대한 하나 이상의 측정을 포함하는 센서 정보에 기초하여 햅틱 피드백을 생성하는 것에 대하여 개시하고 있다. 보다 구체적으로, 상기 특허에서는 비디오 컨텐츠 분석은 비디오의 이미지 프로세싱을 포함할 수 있다고 말하고 있고, 시스템은 이미지 프로세싱에 기초하여 하나 이상의 이벤트를 식별할 수 있고 하나 이상의 이벤트에 기초하여 햅틱 피드백을 일으킬 수 있다고 개시하고 있다. 또한, 햅틱 피드백은 비디오 장면의 개체에 대해 추정된 가속도를 기초로 달라질 수 있고, 여기서 추정된 가속도는 이미지 프로세싱에 기초한다고 되어 있다. 여기서, 추정된 가속도는 고속에서 센서 정보를 사용하여 더 정확해질 수 있고 센서 정보에 기초한 추정된 가속도는 저속에서 이미지 프로세싱에 기초하여 더 정확해질 수 있다고도 언급하고 있다.
하지만, 이에 따르면, 비디오 컨텐츠에 나오는 개체의 모션을 일일이 분석해야 하고 이를 위하여 많은 연산량의 이미지 프로세싱을 거쳐야 하므로 실시간성을 담보하기가 어려웠다.
이에 본 발명자는 이와 같은 문제점을 극복하고 간편한 시스템으로도 직관적이고 편리하게 사용자에게 햅틱 피드백을 제공하기 위한 기술을 개발하기에 이르렀다.
본 발명은 상술한 문제점을 모두 해결하는 것을 그 목적으로 한다.
또한, 본 발명은 사용자가 단순한 구조의 골무 형태의 햅틱 피드백 유닛을 착용하여 햅틱 피드백을 제공 받음으로써 사용자가 직관적으로 실감 있는 컨텐츠 감상을 할 수 있도록 지원하는 것을 다른 목적으로 한다.
또한, 본 발명은 2D 컨텐츠라고 하더라도 각각의 컨텐츠에 높낮이 관련 메타데이터를 연동함으로써 3D 컨텐츠화(化)하여 사용자에게 제공할 수 있는 것을 다른 목적으로 한다.
상기 목적을 달성하기 위한 본 발명의 대표적인 구성은 다음과 같다.
본 발명의 일 측면에 따르면, 컨텐츠를 디스플레이하는 디스플레이 유닛, 상기 디스플레이 유닛에 대응되는 위치에 형성되어 자기장을 발생시키는 자기장 발생 유닛, 사용자의 신체의 일부에 착용할 수 있으며, 전류가 흐를 수 있는 전선이 형성되어 있는 햅틱 피드백 유닛, 상기 컨텐츠의 3D 정보, 상기 햅틱 피드백 유닛에 형성된 상기 전선의 상기 자기장 내에서의 방향 정보, 및 상기 자기장의 방향 정보를 참조로 하여, 상기 전선에 흘릴 전류의 세기, 방향 및 상기 자기장 발생 유닛에 의해 발생되는 자기장의 세기 중 적어도 하나를 제어하는 제어부를 포함하는 자기장을 이용한 감각 생성 시스템이 제공된다.
본 발명의 다른 측면에 따르면, 자기장을 이용한 감각 생성 방법에 있어서, (a) 제어부가, 디스플레이 유닛을 통해 디스플레이되는 컨텐츠의 3D 정보를 획득하는 단계, (b) 자기장 발생 유닛이 상기 디스플레이 유닛에 대응되는 위치에 형성되어 자기장을 발생시키는 상태에서, 사용자의 신체의 일부에 착용할 수 있으며 전류가 흐를 수 있는 전선이 형성되어 있는 햅틱 피드백 유닛이 상기 자기장 내에 진입하였음이 감지되면, 상기 제어부가, 상기 컨텐츠의 3D 정보, 상기 햅틱 피드백 유닛에 형성된 상기 전선의 상기 자기장 내에서의 방향 정보, 및 상기 자기장의 방향 정보를 참조로 하여, 상기 전선에 흘릴 전류의 세기, 방향 및 상기 자기장 발생 유닛에 의해 발생되는 자기장의 세기 중 적어도 하나를 제어하는 단계를 포함하는 자기장을 이용한 감각 생성 방법이 제공된다.
이 외에도, 본 발명을 구현하기 위한 다른 방법, 장치, 시스템 및 상기 방법을 실행하기 위한 컴퓨터 프로그램을 기록하기 위한 컴퓨터 판독 가능한 기록 매체가 더 제공된다.
본 발명에 의하면, 단순한 구조의 골무 형태의 햅틱 피드백 유닛에 제공되는 전류의 세기 및 방향을 적절히 조절함으로써 사용자에게 컨텐츠에 적합한 햅틱 피드백을 제공할 수 있는 효과가 달성된다.
또한, 본 발명은 사용자 직관적으로 2D 컨텐츠를 3D 컨텐츠로서 느낄 수 있도록 할 수 있는 효과가 달성된다.
도 1은 본 발명의 일 실시예에 따른 자기장을 이용하여 힘을 발생하기 위한 전체 시스템을 개략적으로 도시한다.
도 2는 도 1의 전체 시스템의 구성도를 도시한다.
도 3은 본 발명의 일 실시예에 자기장 발생 유닛과 햅틱 피드백 유닛의 배치 상태에 대한 예시를 도시한다.
도 4a 내지 도 4c는 햅틱 피드백 유닛의 다양한 예를 도시한다.
도 5는 본 발명의 일 실시예에 따라 햅틱 피드백 유닛이 자기장 발생 유닛에 의해 발생되고 있는 자기장 내에 진입한 상태를 나타내는 도면이다.
도 6은 컨텐츠의 3D 정보를 바탕으로 하여 사용자에게 높낮이를 느낄 수 있게끔 해 주는 예를 나타낸 도면이다.
후술하는 본 발명에 대한 상세한 설명은, 본 발명이 실시될 수 있는 특정 실시예를 예시로서 도시하는 첨부 도면을 참조한다. 이들 실시예는 당업자가 본 발명을 실시할 수 있기에 충분하도록 상세히 설명된다. 본 발명의 다양한 실시예는 서로 다르지만 상호 배타적일 필요는 없음이 이해되어야 한다. 예를 들어, 여기에 기재되어 있는 특정 형상, 구조 및 특성은 일 실시예에 관련하여 본 발명의 정신 및 범위를 벗어나지 않으면서 다른 실시예로 구현될 수 있다. 또한, 각각의 개시된 실시예 내의 개별 구성요소의 위치 또는 배치는 본 발명의 정신 및 범위를 벗어나지 않으면서 변경될 수 있음이 이해되어야 한다. 따라서, 후술하는 상세한 설명은 한정적인 의미로서 취하려는 것이 아니며, 본 발명의 범위는, 적절하게 설명된다면, 그 청구항들이 주장하는 것과 균등한 모든 범위와 더불어 첨부된 청구항에 의해서만 한정된다. 도면에서 유사한 참조부호는 여러 측면에 걸쳐서 동일하거나 유사한 기능을 지칭한다.
이하에서는, 본 발명이 속하는 기술분야에서 통상의 지식을 가진 자가 본 발명을 용이하게 실시할 수 있도록 하기 위하여, 본 발명의 바람직한 실시예들에 관하여 첨부된 도면을 참조하여 상세히 설명하기로 한다.
도 1은 본 발명의 일 실시예에 따른 자기장을 이용하여 힘을 발생하기 위한 전체 시스템을 개략적으로 도시한다.
도 1을 참조하면, 전체 시스템(100)은 디스플레이 유닛(110), 자기장 발생 유닛(120), 햅틱 피드백 유닛(130)을 포함한다. 또한, 이들을 제어하기 위한 통신부(140) 및 제어부(150)를 더 포함할 수 있으며, 이에 대해서는 도 2를 참조로 후술한다.
다시 도 1을 참조하면, 디스플레이 유닛(110)에 동영상 컨텐츠가 재생되거나 화상통화 시 상대방의 영상 모습 등이 재생되고 있고, 디스플레이 유닛(110)의 전면(前面)에 자기장 발생 유닛(120)이 설치되어 있음을 알 수 있다. 이와 같은 상태에서, 사용자가 햅틱 피드백 유닛(130)을 착용한 상태로 자기장 발생 유닛(120)에 의해 생성된 자기장 내로 진입하고 있는 모습이 도시되어 있다.
구체적으로, 자기장 발생 유닛(120)은 소위 가상 평면에 자기장 막을 형성하여 그 자기장 내에 진입하는 햅틱 피드백 유닛(130)의 위치 및 방향에 따라 소정의 힘을 발생시켜 사용자가 디스플레이 유닛(110)을 통해 제공되는 컨텐츠 등에 대하여 입체감을 느끼게 할 수 있다.
또한, 자기장 발생 유닛(120)은 영구자석 혹은 코일(즉, 전자석)을 사용하여 특정 영역에 일정한 자기장이 형성되도록 할 수 있으며, 후술할 제어부(150)의 제어에 따라 자기장의 세기 및/또는 방향을 바꿀 수 있도록 설계될 수도 있다. 설명의 편의상, 본 명세서에서는 영구자석이 설치되어 있는 것으로 도시되었고 자기장의 방향이 고정되어 있는 것으로 도시되었으나, 이에 한정되는 것은 아님을 명확히 밝힌다.
다음으로, 햅틱 피드백 유닛(130)은 골무 형태의 장치로 손가락 끝에 장착될 수 있으나, 반드시 이에 한정되는 것은 아니다. 햅틱 피드백 유닛(130)의 표면에는 전선이 배열될 수 있으며, 후술할 제어부(150)는 이와 같은 전선에 전류를 흘려 햅틱 피드백 유닛(130)이 소정의 힘을 받을 수 있도록 제어할 수 있다. 후술하겠지만, 햅틱 피드백 유닛(130)이 받는 힘은 자기장의 세기 및 방향과 햅틱 피드백 유닛(130)의 전선에 흐르는 전류의 세기 및 방향 등에 따라 달라질 것이다. 쉽게 설명하자면, 플레밍의 왼손법칙에 의해 힘의 세기 및 방향이 결정될 것이다.
도 2는 도 1의 전체 시스템(100)의 구성도를 도시한다.
도 2를 참조하면, 본 발명의 일 실시예에 따른 전체 시스템(100)은 디스플레이 유닛(110), 자기장 발생 유닛(120), 햅틱 피드백 유닛(130), 통신부(140) 및 제어부(150)를 포함할 수 있다.
본 발명의 일 실시예에 따르면, 디스플레이 유닛(110), 자기장 발생 유닛(120), 햅틱 피드백 유닛(130), 통신부(140) 및 제어부(150)는 그 중 적어도 일부가 전체 시스템(100)에 포함되거나 전체 시스템(100)과 통신하는 모듈들일 수 있다. 다만, 도 2에서는 디스플레이 유닛(110), 자기장 발생 유닛(120), 햅틱 피드백 유닛(130), 통신부(140) 및 제어부(150)가 모두 시스템(100)에 포함된 것으로 예시하고 있다.
앞서 언급하였듯이, 디스플레이 유닛(110)은 각종의 컨텐츠를 제공하는 기능을 수행할 수 있다. 참고로, 본 명세서에서 "컨텐츠"란 일반적인 동영상 컨텐츠뿐만 아니라 화상통화 시의 상대방의 모습이라든가 기타 다양한 정지 영상(가령, 디지털 이미지) 및 동영상 등을 전부 포함하는 개념이다.
다음으로, 자기장 발생 유닛(120)은 디스플레이 유닛(110)에 대응되는 위치에 형성되어 자기장을 발생시키는 기능을 수행할 수 있다. 구체적으로, 자기장 발생 유닛(120)은 디스플레이 유닛(110)의 화면을 커버할 수 있는 공간에 자기장을 발생시킬 수 있다. 가령, 자기장 발생 유닛(120)에 의해 발생되는 자기장, 즉 자기장이 가상의 평면 상에 형성되도록 할 수 있고, 상기 가상의 평면은 디스플레이 유닛(110)의 화면의 평면과 평행하고, 이를 겹쳤을 때 서로 오버랩(overlap)되는 것을 상정할 수 있을 것이다. 물론, 이에 한정되는 것은 아닐 것이며, 평행하지 않는 경우라든가 일부만 오버랩되는 경우 등을 추가로 상정할 수도 있을 것이다.
다시 설명하면, 도 1에서 볼 수 있듯이, 사용자의 입장에서 볼 때, 자기장 발생 유닛(120)에 의해 발생되는 자기장(점선으로 표시)은 디스플레이 유닛(110)의 화면의 적어도 일부 영역을 커버할 수 있도록 설치되어 있음을 알 수 있다.
이와 같이 디스플레이 유닛(110)과 자기장 발생 유닛(120)이 배치된 상태에서 사용자는 자신의 신체의 일부에 햅틱 피드백 유닛(130)을 착용한 상태로 자기장 내에 햅틱 피드백 유닛(130)이 진입하도록 할 수 있다. 이때, 햅틱 피드백 유닛(130)에는 전류가 흐를 수 있는 전선이 형성되어 있으며, 이에 대해서는 보다 자세하게 후술한다.
도 3은 본 발명의 일 실시예에 자기장 발생 유닛과 햅틱 피드백 유닛의 배치 상태에 대한 예시를 도시한다.
도 3을 참조하면, 자기장 발생 유닛(120)을 간략하게 도시하기 위하여 N극과 S극으로 표시하였고 자기장 발생 유닛(120)에 의해 발생되는 자기장을 가로지르는 전선(햅틱 피드백 유닛(130)에 설치된 전선)에 전류가 흐르고 있음을 나타내고 있다. 플레밍의 왼손법칙에 의하면, F = iLB 의 관계식을 만족해야 한다. 여기서, F는 전선(130)이 받는 힘의 방향 및 세기를 나타내고, i 는 전선(130)에 흐르는 전류의 방향 및 세기를 나타내며, L 은 자기장의 영향을 받는 전선(130)의 해당 부위의 길이를 나타내고, B 는 자기장의 방향 및 세기를 나타낸다.
다시 도 3을 참조하면, i 는 아래 방향으로 흐르고 있는 것으로 도시되어 있고 L 은 전선(130)의 전체 부분 중 자기장이 통과하는 부분만의 길이를 나타내는 것으로 도시되어 있으며 B 가 좌측에서 우측으로 향하는 방향일 경우, 전선(130)은 지면의 뒤에서부터 앞으로 튀어나오는 방향으로 힘을 받을 것이다. 도 3에서는 편의 상 지면의 앞으로 튀어나오는 방향을 사선과 같이 그렸음을 밝혀둔다.
도 4a 내지 도 4c는 햅틱 피드백 유닛의 다양한 예를 도시한다.
도 4a를 참조하면, 골무 형태의 햅틱 피드백 유닛(130)이 손가락 끝에 착용될 수 있도록 되어 있고, 도 3에서와 같이 자기장에 수직인 부분의 전선의 길이가 가능한 길도록 하기 위하여는 도 4에서와 같이 앞 부분이 뭉툭한 형태로 형성하는 것이 보다 유리할 것이다. 다만, 이에 한정되는 것은 아닐 것이다.
또한, 도 4a에서는 수직방향의 배치 전선과 수평방향의 배치 전선을 도시하였으나, 이에 한정되는 것은 아니며, 수직/수평 및 대각선 방향으로 각각 전선을 배치할 수도 있을 것이다. 이에 대해서는 도 4b에 도시하였으며, 도 4b는 손가락에 골무를 착용한 상태에서 손가락의 끝 부분을 정면에서 봤을 때의 손 끝의 골무에 전선이 지나가는 상태를 도시한 것이다.
골무에는 각 방향별로 여러 개의 전선이 지나도록 하여 힘의 전달을 보다 정밀하게 조절할 수도 있고, 각 방향별로 전류 전달을 독립적으로 제어하여 골무가 자기장 내에서 어떠한 방향을 취하고 있는지에 상관 없이 원하는 힘을 전달할 수 있도록 할 수 있다. 다만, 이를 위하여서는 골무의 방향을 알 수 있는 센서(가령, IMU 센서 등)가 필요할 수도 있다.
이와 같은 골무, 즉, 햅틱 피드백 유닛(130)에 형성된 각각의 방향의 전선에 흐르는 전류량을 조정하거나 각각의 방향마다 감긴 전선 수를 조정하여 힘의 크기를 제어할 수 있을 것이다. 물론, 자기장 발생 유닛(120)에 의해 발생되는 자기장의 세기 및/또는 방향을 제어할 수도 있음은 물론이라 할 것이다.
또한, 이와 같이 햅틱 피드백 유닛(130)에 가해지는 힘의 크기 및 방향의 제어를 통해 앞서 언급하였던 컨텐츠, 즉, 디스플레이 유닛(110)을 통해 제공되는 컨텐츠에 포함된 각각의 픽셀에 대응되는 부분마다의 높낮이 정보(즉, 메타데이터)에 대한 구별 정보를 사용자에게 제공할 수 있다.
도 4c는 사용자가 이와 같은 골무 타입의 햅틱 피드백 유닛(130)을 착용하고 있는 상태를 도시하고 있다.
도 5는 본 발명의 일 실시예에 따라 햅틱 피드백 유닛이 자기장 발생 유닛에 의해 발생되는 자기장 내에 진입한 상태를 나타내는 도면이다.
도 5의 좌측 및 우측 그림 각각은 단면을 나타낸다. 즉, 자기장 평면을 잘랐을 때의 한 면을 나타내었다. 이때, 자기장은 지면 방향으로 들어가고 있다고 가정하였다. 또한, 골무가 "ㄷ"자 형태를 이루는 것으로 가정하였다.
도 5의 좌측 그림을 보면, 손가락(골무를 착용한 손가락)이 자기장의 방향에 수직으로 들어올 경우를 나타내며, 이 경우 자기장 내에 존재하는 전선의 부분 중 자기장과 수직의 방향을 이루는 전선의 길이는 l1 과 동일할 것이다. 여기서, l2, l3 역시 전선이지만, 자기장의 방향과 수평이므로, 골무가 힘을 받는데에 기여를 하지 못하는 부분이다.
다음으로, 도 5의 우측 그림을 보면, 골무를 착용한 손가락이 θ의 각도로 자기장 내로 들어오는 경우를 도시한다.
θ 각도로 비스듬히 들어 올 때, 자기장 내에 있는 각 부분별 도선의 길이를 l1, d2(<=l2), d3(<= l3)로 가정하면, 자기장에 수직인 도선의 길이 L 은
L = l1 cos θ+ (d2―d3)sin θ
가 된다. 여기서, d3의 경우, 전류 방향이 d2의 전류 방향과 반대가 되기 때문에 ­로 적었다. 참고로, 여기서, θ=0 이라면 도 5의 좌측 그림과 같은 상황이 될 것이다.
또한, 참고로, θ=90 이고, l2만 자기장 안에 있다면 L=d2=l2가 될 것이다. 다른 예로서, θ=90 이고, l2,l3가 동시에 자기장 안에 있다면, L=d2―d3=l2―l3가 되어, 서로 힘이 상쇄될 것이다. 다만, d2 쪽 면과 d3쪽 면의 힘의 반대가 되기 때문에 손에서는 다른 힘이 느껴질 수도 있을 것이다.
다음으로, 0<θ<90 인 경우 (도 5의 우측 그림과 같은 경우), 자기장 안에 있는 도선에 따라 작용하는 힘이 달라질 것이다.
d2와 d3는 전류 방향 때문에 서로 반대의 힘을 생성할 것이지만, 자기장 내에 위치하는 d2, d3 길이가 다르고 힘의 위치가 다름으로 인하여 약간의 회전력이 작용할 수도 있으며, 이와 같은 회전력이 필요할 경우 이를 그대로 이용하면 되며 이와 같은 회전력이 필요하지 않을 경우에는 다른 방향으로 흐르는 전류에 대한 보정을 함으로써 회전력을 상쇄되도록 할 수도 있을 것이다.
한편, 여기서, l1=l2=l3 라고 가정하면, 자기장에 수직인 도선의 길이 L은 다음과 같은 수식으로 정해질 것이다.
L = l1 cos θ+ (d2―d3)sin θ
여기서, l1 cos θ<= L <= l1 cos θ+ l2 sin θ= l1(cos θ+sin θ) 이 될 것이다. 즉, 0≤θ≤ 90 인 경우 l1 <= L <= l1 * √2　 범위에 있게 된다.
이와 같이 자기장에 수직인 도선의 길이(즉, net의 수직 길이)를 실시간으로 모니터링하면서 이와 함께 컨텐츠의 3D 정보를 같이 참조로 하여 해당되는 전류를 흘리도록 할 수 있을 것이다.
도 6은 컨텐츠의 3D 정보를 바탕으로 하여 사용자에게 높낮이를 느낄 수 있게끔 해 주는 예를 나타낸 도면이다.
도 6을 참조하면, 자기장과 골무에 흐르는 전류의 조정으로 평면 상에 도 6의 그림과 같이 높낮이를 제공할 수 있으며, 이에 따라 사용자에게 다양한 3차원 입체감을 제공할 수 있다.
참고로, 손에 힘을 빼고 가만히 있을 때 앞에서 힘을 줘서 밀어내면 사용자가 느끼기에 뭔가가 밀어내고 있다라고 생각할 것이다. 사용자는 그 느낌을 높낮이로 인식할 수 있다. 자기장 발생 유닛(120)에 의해 발생하는 자기장이 소위 가상의 모니터와 같은 역할을 하고, 자기장 내에서 햅틱 피드백 유닛(130)을 착용한 손가락을 움직이면 손가락의 위치 및 방향에 따라 힘을 다르게 느낄 것이고 사용자는 이를 높낮이로 느낄 수 있다. 따라서, 디스플레이 유닛(110)을 통해 제공되는 컨텐츠에 대하여 사용자에게 올록볼록한 느낌을 전달할 수 있다.
다시 도 6을 참조하면, 도 6과 같이 가령 지형을 나타내는 형태로 힘을 나타내면 지형의 고도가 높은 곳에서는 사용자의 손을 밀어내고, 지형의 고도가 낮은 곳에서는 사용자의 손을 덜 밀어냄으로써 지형의 고도를 인지할 수 있다. 기존의 방식은 한 위치에서의 힘을 생성하는 것이 대다수이지만, 본 발명은 평면에서 힘을 생성할 수 있기 때문에 2차원의 면에 힘의 분포를 정의하고 제공하여 컨텐츠를 3차원화(化) 할 수 있으므로 입체감이 있는 컨텐츠를 표현할 수 있는 것이다.
구체적으로, 컨텐츠의 3D 정보를 참조로 하여(즉, 컨텐츠에 대응되는 화면의 각 픽셀에 대응되는 높낮이 정보를 참조로 하여), 각 픽셀에 대응되는 자기장의 영역마다 해당되는 힘을 제공할 수 있다. 예를 들어 높이가 -1m~1m 사이에서 변하는 컨텐츠에서 (물론 이는 상대적이고, 그림에 따라서 다른 스케일을 가질 수 있음), 가령 -1m 는 100N의 힘으로 사용자의 손가락을 당기는 힘에 매핑되어 있고 1m는 100N의 힘으로 사용자의 손가락을 밀어내는 힘에 매핑되어 있다고 가정하면 각 높이와 힘간의 관계를 선형 보간을 한다거나 혹은 다른 방법을 통해서 컨텐츠의 -1m~1m 사이의 각 높이에 대하여 각 높이와 인가되는 힘과의 관계를 매핑할 수 있을 것이다. 그래서 컨텐츠의 특정 부분의 높이 정보가 높은 높이를 가리키면 사용자의 손가락에 인가하는 힘을 증가시키고, 높이 정보가 낮은 높이를 가리키면 사용자의 손가락에 인가하는 힘을 감소시켜서 높낮이의 변화를 느낄 수 있도록 할 수 있다. 여기서, 컨텐츠 자체는 반드시 3차원 컨텐츠일 필요는 없고, 2차원 컨텐츠일 수도 있으며, 2차원 컨텐츠라고 하더라도 3D 정보(즉, 2차원 컨텐츠에 대응되는 각각의 픽셀에 대한 영역마다의 높낮이 정보)를 메타데이터로서 포함함으로써 3D 컨텐츠화될 수 있는 것이다. 또한, 이와 같은 2차원 컨텐츠의 화면과 본 발명을 연계 시켜도 되고, 디스플레이는 다른 곳에서 되더라도, 높낮이 감각은 이를 통해 느낄 수도 있는 등의 다양한 형태의 연계도 가능할 것이다.
다시 도 1로 되돌아가면, 제어부(150)는 디스플레이 유닛(110)을 통해 제공되는 컨텐츠의 3D 정보, 상기 햅틱 피드백 유닛(130)에 형성된 상기 전선의 상기 자기장 내에서의 방향 정보, 및 상기 자기장의 방향 정보를 참조로 하여, 상기 전선에 흘릴 전류의 세기, 방향 및 상기 자기장 발생 유닛에 의해 발생되는 자기장의 세기 중 적어도 하나를 제어하는 기능을 수행할 수 있다. 물론, 추가적으로 자기장의 방향 역시 제어할 수도 있을 것이다. 또한, 여기서는 자기장 내에 위치하는 전선의 net 수직 길이가 일정하다고 가정하였지만, 만약 net 수직 길이가 변하는 상태라면, 제어부(150)는 이에 대한 정보도 같이 참조로 하여, 상기 전선에 흘릴 전류의 세기, 방향 및 상기 자기장 발생 유닛에 의해 발생되는 자기장의 세기 중 적어도 하나를 제어하는 기능을 수행할 수 있다. 여기서, 상기 컨텐츠의 3D 정보는, 특정 시각에서 상기 디스플레이 상에 표시되는 상기 컨텐츠의 각각의 부분의 화면 상의 위치 정보 및 해당 위치에서의 3D 정보(가령, 높낮이 정보)를 포함할 수 있을 것이나, 이에 한정되는 것은 아니다.
구체적으로, 제어부(150)는, 상기 컨텐츠의 3D 정보를 참조로 할 때, 상기 컨텐츠의 가상의 기준면으로부터 상기 사용자 측으로 많이 튀어나온 정도에 따라 햅틱 피드백 유닛(130)에 가해지는 피드백으로서 사용자를 밀어내는 힘(해당 양의 높이 정보에 매핑되어 있는 힘)을 제공하기 위하여 제어하는 것을 특징으로 한다.
일례로서, 제어부(150)는, 상기 컨텐츠의 3D 정보를 참조로 할 때 상기 가상의 기준면으로부터 떨어진 높이와 상기 사용자에게 가해지는 힘 사이의 관계를 선형 보간하여 결정할 수도 있을 것이나, 이에 한정되는 것은 아닐 것이다.
한편, 상기에서 언급하였듯이 햅틱 피드백 유닛(130)의 자기장 내에서의 방향을 검출하기 위한 방향 센서를 더 포함할 수 있으며, 이 경우 제어부(150)는, 햅틱 피드백 유닛(130)에 형성된 복수 개의 전선 중 적어도 하나에 흐르는 전류를 제어하되, 복수 개의 전선 중 자기장 내에서의 방향이 자기장을 수직으로 가로지르는 방향의 성분을 포함하는 전선에 대해서만 전류를 흘리도록 제어할 수도 있을 것이다. 또한, 햅틱 피드백 유닛(130)의 전체 부분 중 자기장 영역에 진입한 상태의 부분을 감지하기 위한 위치판단 센서를 더 포함할 수 있을 것이며, 햅틱 피드백 유닛(130)이 기설정된 영역(가령, 자기장 영역) 내로부터 벗어나 있을 경우, 위치판단 센서가 사용자에게 이를 알려줄 수도 있을 것이다.
또한, 경우에 따라, 제어부(150)는, 자기장 발생 유닛(120)에 의해 발생되는 자기장의 세기를 거시적으로 제어한 상태에서, 햅틱 피드백 유닛(130)의 전선에 흘릴 전류의 세기 및 방향에 대해서는 미시적으로 제어할 수도 있을 것이다.
다음으로, 본 발명의 일 실시예에 따른 통신부(140)는 본 발명의 디스플레이 유닛(110), 자기장 발생 유닛(120), 햅틱 피드백 유닛(130), 및 제어부(150)가 통신망(미도시)을 이용하여 서로 통신할 수 있도록 하는 기능을 수행할 수 있다.
본 발명의 일 실시예에 따른 통신망은 유선 또는 무선 통신의 양태로 구성될 수 있으며 WAN(Wide Area Network), LAN(Local Area Network), 이동 통신망, 인공 위성 통신망 등 다양한 통신망으로 구성될 수 있다. 보다 구체적으로, 본 발명에서 말하는 통신망은 IEEE 802.11, CDMA(Code Division Multiple Access), WCDMA(Wideband Code Division Multiple Access), GSM(Global System for Mobile communications), LTE(Long Term Evolution) 등의 기술에 의하여 구현되는 무선 통신망을 포함할 수도 있다. 그러나, 통신망은, 굳이 이에 국한될 필요 없이, 공지의 유무선 데이터 통신망, 공지의 전화망 또는 공지의 유무선 텔레비전 통신망을 그 적어도 일부에 있어서 포함할 수도 있다.
마지막으로, 본 발명의 일 실시예에 따른 제어부(150)는, 디스플레이 유닛(110), 자기장 발생 유닛(120), 햅틱 피드백 유닛(130), 및 통신부(140) 간의 데이터의 흐름을 제어하는 기능을 수행한다. 즉, 본 발명에 따른 제어부(150)는 외부로부터의/로의 또는 정보 제공 서버(200)의 각 구성요소 간의 데이터의 흐름을 제어함으로써, 디스플레이 유닛(110), 자기장 발생 유닛(120), 햅틱 피드백 유닛(130), 및 통신부(140)에서 각각 고유 기능을 수행하도록 제어한다.
이상 설명된 본 발명에 따른 실시예들은 다양한 컴퓨터 구성요소를 통하여 수행될 수 있는 프로그램 명령어의 형태로 구현되어 컴퓨터 판독 가능한 기록 매체에 기록될 수 있다. 상기 컴퓨터 판독 가능한 기록 매체는 프로그램 명령어, 데이터 파일, 데이터 구조 등을 단독으로 또는 조합하여 포함할 수 있다. 상기 컴퓨터 판독 가능한 기록 매체에 기록되는 프로그램 명령어는 본 발명을 위하여 특별히 설계되고 구성된 것들이거나 컴퓨터 소프트웨어 분야의 당업자에게 공지되어 사용 가능한 것일 수도 있다. 컴퓨터 판독 가능한 기록 매체의 예에는, 하드 디스크, 플로피 디스크 및 자기 테이프와 같은 자기 매체, CD-ROM, DVD와 같은 광기록 매체, 플롭티컬 디스크(floptical disk)와 같은 자기-광 매체(magneto-optical media), 및 ROM, RAM, 플래시 메모리 등과 같은 프로그램 명령어를 저장하고 수행하도록 특별히 구성된 하드웨어 장치가 포함된다. 프로그램 명령어의 예에는, 컴파일러에 의해 만들어지는 것과 같은 기계어 코드뿐만 아니라 인터프리터 등을 사용해서 컴퓨터에 의해서 실행될 수 있는 고급 언어 코드도 포함된다. 상기 하드웨어 장치는 본 발명에 따른 처리를 수행하기 위해 하나 이상의 소프트웨어 모듈로서 작동하도록 구성될 수 있으며, 그 역도 마찬가지이다.
이상에서 본 발명이 구체적인 구성요소 등과 같은 특정 사항들과 한정된 실시예 및 도면에 의해 설명되었으나, 이는 본 발명의 보다 전반적인 이해를 돕기 위해서 제공된 것일 뿐, 본 발명이 상기 실시예들에 한정되는 것은 아니며, 본 발명이 속하는 기술분야에서 통상적인 지식을 가진 자라면 이러한 기재로부터 다양한 수정 및 변형을 꾀할 수 있다.
따라서, 본 발명의 사상은 상기 설명된 실시예에 국한되어 정해져서는 아니 되며, 후술하는 특허청구범위뿐만 아니라 이 특허청구범위와 균등하게 또는 등가적으로 변형된 모든 것들은 본 발명의 사상의 범주에 속한다고 할 것이다.
100: 전체 시스템
110: 디스플레이 유닛
120: 자기장 발생 유닛
130: 햅틱 피드백 유닛
140: 통신부
150: 제어부

Claims (17)

  1. 컨텐츠를 디스플레이하는 디스플레이 유닛,
    상기 디스플레이 유닛에 대응되는 위치에 형성되어 자기장을 발생시키는 자기장 발생 유닛,
    사용자의 신체의 일부에 착용할 수 있으며, 전류가 흐를 수 있는 전선이 형성되어 있는 햅틱 피드백 유닛,
    상기 컨텐츠의 3D 정보, 상기 햅틱 피드백 유닛에 형성된 상기 전선의 상기 자기장 내에서의 방향 정보, 및 상기 자기장의 방향 정보를 참조로 하여, 상기 전선에 흘릴 전류의 세기, 방향 및 상기 자기장 발생 유닛에 의해 발생되는 자기장의 세기 중 적어도 하나를 제어하는 제어부를 포함하되,
    상기 햅틱 피드백 유닛에 형성된 전선은 복수 개이며, 상기 복수 개의 전선은 각각 다른 복수의 방향으로 형성되어 있으며,
    상기 햅틱 피드백 유닛의 상기 자기장 내에서의 방향을 검출하기 위한 방향 센서를 더 포함하고,
    상기 제어부는,
    상기 햅틱 피드백 유닛에 형성된 상기 복수 개의 전선 중 적어도 하나에 흐르는 전류를 제어하되, 상기 복수 개의 전선 중 상기 자기장 내에서의 방향이 상기 자기장을 수직으로 가로지르는 방향의 성분을 포함하는 전선에 대해서만 상기 전류를 흘리도록 제어하는 것을 특징으로 하는 시스템.
  2. 제1항에 있어서,
    상기 제어부는,
    상기 컨텐츠의 3D 정보를 참조로 할 때, 상기 컨텐츠의 가상의 기준면으로부터 상기 사용자 측으로 많이 튀어나온 정도에 따라 상기 햅틱 피드백 유닛에 가해지는 피드백으로서 상기 사용자를 밀어내는 힘을 제공하기 위하여 제어하는 것을 특징으로 하는 시스템.
  3. 제2항에 있어서,
    상기 컨텐츠의 3D 정보를 참조로 할 때 상기 가상의 기준면으로부터 떨어진 높이와 상기 사용자에게 가해지는 힘 사이의 관계를 선형 보간하여 결정하는 것을 특징으로 하는 시스템.
  4. 삭제
  5. 삭제
  6. 제1항에 있어서,
    상기 컨텐츠의 3D 정보는, 특정 시각에서 상기 디스플레이 상에 표시되는 상기 컨텐츠의 각각의 부분의 화면 상의 위치 및 해당 위치에서의 3D 정보에 대한 정보를 포함하는 것을 특징으로 하는 시스템.
  7. 컨텐츠를 디스플레이하는 디스플레이 유닛,
    상기 디스플레이 유닛에 대응되는 위치에 형성되어 자기장을 발생시키는 자기장 발생 유닛,
    사용자의 신체의 일부에 착용할 수 있으며, 전류가 흐를 수 있는 전선이 형성되어 있는 햅틱 피드백 유닛,
    상기 컨텐츠의 3D 정보, 상기 햅틱 피드백 유닛에 형성된 상기 전선의 상기 자기장 내에서의 방향 정보, 및 상기 자기장의 방향 정보를 참조로 하여, 상기 전선에 흘릴 전류의 세기, 방향 및 상기 자기장 발생 유닛에 의해 발생되는 자기장의 세기 중 적어도 하나를 제어하는 제어부를 포함하되,
    상기 햅틱 피드백 유닛의 전체 부분 중 상기 자기장 영역에 진입한 상태의 부분을 감지하기 위한 위치판단 센서를 더 포함하는 시스템.
  8. 제7항에 있어서,
    상기 햅틱 피드백 유닛이 기설정된 영역 내로부터 벗어나 있을 경우, 상기 위치판단 센서는 상기 사용자에게 피드백을 제공하는 것을 특징으로 하는 시스템.
  9. 제1항에 있어서,
    상기 자기장 발생 유닛은 상기 자기장의 방향을 가변시킬 수 있는 것을 특징으로 하는 시스템.
  10. 제1항에 있어서,
    상기 제어부는,
    상기 자기장 발생 유닛에 의해 발생되는 자기장의 세기를 거시적으로 제어한 상태에서, 상기 전선에 흘릴 전류의 세기 및 방향에 대해서는 미시적으로 제어하는 것을 특징으로 하는 시스템.
  11. 자기장을 이용한 감각 생성 방법에 있어서,
    (a) 제어부가, 디스플레이 유닛을 통해 디스플레이되는 컨텐츠의 3D 정보를 획득하는 단계,
    (b) 자기장 발생 유닛이 상기 디스플레이 유닛에 대응되는 위치에 형성되어 자기장을 발생시키는 상태에서, 사용자의 신체의 일부에 착용할 수 있으며 전류가 흐를 수 있는 전선이 형성되어 있는 햅틱 피드백 유닛이 상기 자기장 내에 진입하였음이 감지되면, 상기 제어부가, 상기 컨텐츠의 3D 정보, 상기 햅틱 피드백 유닛에 형성된 상기 전선의 상기 자기장 내에서의 방향 정보, 및 상기 자기장의 방향 정보를 참조로 하여, 상기 전선에 흘릴 전류의 세기, 방향 및 상기 자기장 발생 유닛에 의해 발생되는 자기장의 세기 중 적어도 하나를 제어하는 단계를 포함하되,
    상기 햅틱 피드백 유닛에 형성된 전선은 복수 개이며, 상기 복수 개의 전선은 각각 다른 복수의 방향으로 형성되어 있고, 상기 햅틱 피드백 유닛의 상기 자기장 내에서의 방향을 검출하기 위한 방향 센서를 더 포함할 때,
    상기 (b) 단계는,
    상기 햅틱 피드백 유닛에 형성된 상기 복수 개의 전선 중 적어도 하나에 흐르는 전류를 제어하되, 상기 복수 개의 전선 중 상기 자기장 내에서의 방향이 상기 자기장을 수직으로 가로지르는 방향의 성분을 포함하는 전선에 대해서만 상기 전류를 흘리도록 제어하는 것을 특징으로 하는 방법.
  12. 제11항에 있어서,
    상기 (b) 단계는,
    상기 컨텐츠의 3D 정보를 참조로 할 때, 상기 컨텐츠의 가상의 기준면으로부터 상기 사용자 측으로 많이 튀어나온 정도에 따라 상기 햅틱 피드백 유닛에 가해지는 피드백으로서 상기 사용자를 밀어내는 힘을 제공하기 위하여 제어하는 것을 특징으로 하는 방법.
  13. 제12항에 있어서,
    상기 (b) 단계는,
    상기 컨텐츠의 3D 정보를 참조로 할 때 상기 가상의 기준면으로부터 떨어진 높이와 상기 사용자에게 가해지는 힘 사이의 관계를 선형 보간하여 결정하는 것을 특징으로 하는 방법.
  14. 삭제
  15. 제11항에 있어서,
    상기 컨텐츠의 3D 정보는, 특정 시각에서 상기 디스플레이 상에 표시되는 상기 컨텐츠의 각각의 부분의 화면 상의 위치 및 해당 위치에서의 3D 정보에 대한 정보를 포함하는 것을 특징으로 하는 방법.
  16. 제11항에 있어서,
    상기 (b) 단계는,
    상기 자기장 발생 유닛에 의해 발생되는 자기장의 세기를 거시적으로 제어한 상태에서, 상기 전선에 흘릴 전류의 세기 및 방향에 대해서는 미시적으로 제어하는 것을 특징으로 하는 방법.
  17. 자기장을 이용한 감각 생성 방법에 있어서,
    (a) 제어부가, 디스플레이 유닛을 통해 디스플레이되는 컨텐츠의 3D 정보를 획득하는 단계,
    (b) 자기장 발생 유닛이 상기 디스플레이 유닛에 대응되는 위치에 형성되어 자기장을 발생시키는 상태에서, 사용자의 신체의 일부에 착용할 수 있으며 전류가 흐를 수 있는 전선이 형성되어 있는 햅틱 피드백 유닛이 상기 자기장 내에 진입하였음이 감지되면, 상기 제어부가, 상기 컨텐츠의 3D 정보, 상기 햅틱 피드백 유닛에 형성된 상기 전선의 상기 자기장 내에서의 방향 정보, 및 상기 자기장의 방향 정보를 참조로 하여, 상기 전선에 흘릴 전류의 세기, 방향 및 상기 자기장 발생 유닛에 의해 발생되는 자기장의 세기 중 적어도 하나를 제어하는 단계를 포함하되,
    상기 (b) 단계는,
    상기 햅틱 피드백 유닛의 전체 부분 중 상기 자기장 영역에 진입한 상태의 부분을 위치판단 센서를 통해 감지하는 것을 특징으로 하는 방법.
KR1020140167882A 2014-11-27 2014-11-27 자기장을 이용한 감각 생성 시스템 및 이를 이용한 방법 KR101626949B1 (ko)

Priority Applications (1)

Application Number Priority Date Filing Date Title
KR1020140167882A KR101626949B1 (ko) 2014-11-27 2014-11-27 자기장을 이용한 감각 생성 시스템 및 이를 이용한 방법

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020140167882A KR101626949B1 (ko) 2014-11-27 2014-11-27 자기장을 이용한 감각 생성 시스템 및 이를 이용한 방법

Publications (1)

Publication Number Publication Date
KR101626949B1 true KR101626949B1 (ko) 2016-06-03

Family

ID=56192511

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020140167882A KR101626949B1 (ko) 2014-11-27 2014-11-27 자기장을 이용한 감각 생성 시스템 및 이를 이용한 방법

Country Status (1)

Country Link
KR (1) KR101626949B1 (ko)

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN108921983A (zh) * 2018-05-22 2018-11-30 浙江大学山东工业技术研究院 复杂装备煤矿系统等候室人流量统计方法
US10692637B2 (en) 2017-03-27 2020-06-23 Ecole Plytechnique Federale De Lausanne (Epfl) Electromagnetic actuator

Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20130091140A (ko) * 2012-02-07 2013-08-16 연세대학교 산학협력단 터치스크린 기기와 보조 기기 간 햅틱 피드백 장치 및 방법
KR20140105953A (ko) * 2013-02-25 2014-09-03 삼성전자주식회사 동적 자기장 제어를 이용하여 입출력 인터페이스를 제공하는 입체 영상 장치 및 그 장치를 이용한 방법

Patent Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20130091140A (ko) * 2012-02-07 2013-08-16 연세대학교 산학협력단 터치스크린 기기와 보조 기기 간 햅틱 피드백 장치 및 방법
KR20140105953A (ko) * 2013-02-25 2014-09-03 삼성전자주식회사 동적 자기장 제어를 이용하여 입출력 인터페이스를 제공하는 입체 영상 장치 및 그 장치를 이용한 방법

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US10692637B2 (en) 2017-03-27 2020-06-23 Ecole Plytechnique Federale De Lausanne (Epfl) Electromagnetic actuator
CN108921983A (zh) * 2018-05-22 2018-11-30 浙江大学山东工业技术研究院 复杂装备煤矿系统等候室人流量统计方法
CN108921983B (zh) * 2018-05-22 2020-11-03 浙江大学山东工业技术研究院 复杂装备煤矿系统等候室人流量统计方法

Similar Documents

Publication Publication Date Title
US11523103B2 (en) Providing a three-dimensional preview of a three-dimensional reality video
US10681341B2 (en) Using a sphere to reorient a location of a user in a three-dimensional virtual reality video
US10681342B2 (en) Behavioral directional encoding of three-dimensional video
US10440407B2 (en) Adaptive control for immersive experience delivery
CN108304063B (zh) 信息处理装置、信息处理方法和计算机可读介质
US10701282B2 (en) View interpolation for visual storytelling
US11032535B2 (en) Generating a three-dimensional preview of a three-dimensional video
KR20220119494A (ko) 가상 객체 제어 방법 및 장치, 기기, 컴퓨터 판독 가능 저장 매체
JP7392105B2 (ja) 没入型ビデオコンテンツをフォービエイテッドメッシュを用いてレンダリングするための方法、システム、および媒体
KR20170086203A (ko) 스포츠 중계 서비스 제공 방법
EP3276982B1 (en) Information processing apparatus, information processing method, and program
KR101626949B1 (ko) 자기장을 이용한 감각 생성 시스템 및 이를 이용한 방법
KR20200005591A (ko) 몰입형 비디오 컨텐츠를 생성 및 렌더링하기 위한 방법들, 시스템들 및 매체들
EP3961571A1 (en) Virtual paintbrush implementing method and apparatus, and computer readable storage medium
CN111045586B (zh) 基于三维场景的界面切换方法、车机设备及车辆
US20200241300A1 (en) Stabilized and tracked enhanced reality images
US11846783B2 (en) Information processing apparatus, information processing method, and program
US11393161B2 (en) Heat map presentation device and heat map presentation program
US20230316675A1 (en) Traveling in time and space continuum
US20220337805A1 (en) Reproduction device, reproduction method, and recording medium
CN110998566B (zh) 基于眼睛跟踪和生理测量而生成和显示360度视频的方法和装置
WO2020121844A1 (en) Image processing device, image processing method, and program
CN115134649B (zh) 用于在视频内容内呈现交互式元素的方法和系统
KR20210107631A (ko) 영상 재생 장치, 재생 방법 및 프로그램
CN117420907A (zh) 一种交互控制方法、装置、电子设备及存储介质

Legal Events

Date Code Title Description
E701 Decision to grant or registration of patent right
GRNT Written decision to grant
FPAY Annual fee payment

Payment date: 20190527

Year of fee payment: 4