KR102088345B1 - 헤드마운트 디스플레이(hmd) 디바이스와 연동하는 작동형 기기에 대한 테마제어장치 - Google Patents

헤드마운트 디스플레이(hmd) 디바이스와 연동하는 작동형 기기에 대한 테마제어장치 Download PDF

Info

Publication number
KR102088345B1
KR102088345B1 KR1020180021105A KR20180021105A KR102088345B1 KR 102088345 B1 KR102088345 B1 KR 102088345B1 KR 1020180021105 A KR1020180021105 A KR 1020180021105A KR 20180021105 A KR20180021105 A KR 20180021105A KR 102088345 B1 KR102088345 B1 KR 102088345B1
Authority
KR
South Korea
Prior art keywords
theme
comp
general
display device
information
Prior art date
Application number
KR1020180021105A
Other languages
English (en)
Other versions
KR20190046598A (ko
Inventor
한성호
박용
Original Assignee
주식회사 한국에이치엠디
한성호
박용
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 주식회사 한국에이치엠디, 한성호, 박용 filed Critical 주식회사 한국에이치엠디
Publication of KR20190046598A publication Critical patent/KR20190046598A/ko
Application granted granted Critical
Publication of KR102088345B1 publication Critical patent/KR102088345B1/ko

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/011—Arrangements for interaction with the human body, e.g. for user immersion in virtual reality
    • G—PHYSICS
    • G02—OPTICS
    • G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B27/00—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
    • G02B27/01—Head-up displays
    • G02B27/017—Head mounted
    • G—PHYSICS
    • G02—OPTICS
    • G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B27/00—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
    • G02B27/01—Head-up displays
    • G02B27/0101—Head-up displays characterised by optical features
    • G02B2027/014—Head-up displays characterised by optical features comprising information/image processing systems

Abstract

본 발명에 따른 헤드마운트 디스플레이 디바이스와 연동하는 작동형 기기에 대한 테마 제어장치는 사용자에게 가상현실영상을 제공하는 헤드마운트 디스플레이(Head Mounted Display) 디바이스로부터 작동형 기기와 연동하기 위한 설정명령을 인터페이스하는 인터페이스부; 상기 사용자의 일반 설정명령에 따라, 상기 작동형 기기의 일반 동작패턴, 상기 헤드마운트 디스플레이 디바이스의 일반 사용자 인터페이스(UI) 및 상기 가상현실영상에 관한 일반 컨텐츠를 포함하는 일반 컴프정보를 생성하는 컴프 생성부; 상기 사용자의 테마 설정명령에 따라, 상기 작동형 기기의 테마별 동작패턴, 상기 헤드마운트 디스플레이 디바이스의 테마별 사용자 인터페이스(UI), 및 상기 가상현실영상에 관한 테마별 컨텐츠의 등록을 위한 테마 인자값정보를 이용하여 상기 일반 컴프정보를 상기 테마별 동작패턴, 상기 테마별 사용자 인터페이스(UI) 및 상기 테마별 컨텐츠를 포함하는 테마 컴프정보로 변경하여 등록하는 테마 등록부; 상기 사용자의 제어명령에 따라, 상기 일반 컴프정보 및 상기 테마 컴프정보 중 적어도 어느 하나의 정보에 대응하는 컴프 제어신호를 생성하고, 상기 생성된 컴프 제어신호에 따라 상기 작동형 기기의 동작을 제어하는 제어부를 포함한다.

Description

헤드마운트 디스플레이(HMD) 디바이스와 연동하는 작동형 기기에 대한 테마제어장치{Controlling apparatus based on theme for operation type equipment interlocked with Head Mounted Display device}
본 발명은 HMD(Head Mounted Display) 디바이스와 연동되는 작동형 기기를 제어하기 위한 기술에 관한 것이다.
최근 가상현실 관련 서비스들이 개발 및 보급되면서 가상현실영상 제공기기와 가상현실영상 콘텐츠들에 대해서도 많은 주목이 쏠리고 있다. 가상현실영상은 사용자의 시야를 밀폐하는 가상현실영상 디스플레이기기를 통하여 제공되어, 사용자가 마치 눈앞에 펼쳐진 영상 내에 존재하는 것과 같은 리얼리티를 줄 수 있는 영상을 의미한다. 예를 들어, 가상현실영상은 사용자가 아프리카 초원에 위치해 있거나 바다 한가운데에 위치해 있는 것과 같은 착각을 불러일으킬 만큼 사용자에게 고차원적인 시각 또는 청각적 만족을 가져다 준다. 이러한 가상현실영상 제공기기들은 게임 기기뿐만 아니라, 자동차 시뮬레이션 기기, 비행용 시뮬레이션 기기 등을 포함할 수도 있다.
한편, 최근에는 가정이나 헬스클럽 등에서 자신의 건강 및 체력을 유지 또는 증진하거나, 혹은 피로회복 또는 스트레스 해소를 위해 안마 의자, 런닝 머신, 실내용 자전거, 승마용 기기 등이 널리 사용되고 있다.
그러나, 현재 보급되는 안마 의자, 런닝 머신, 실내용 자전거, 승마용 기기 등의 작동형 기기가 헤드마운트 디스플레이(HMD) 디바이스와 연동하는 것에 대해 구체화되어 있지 않으며, 연동하는 것이 있다 하더라도 작동형 기기가 헤드마운트 디스플레이(HMD) 디바이스의 제어에 따라 단순한 동작을 반복하도록 구성되어 있을 뿐이다. 이에 따라, 종래의 작동형 기기는 헤드마운트 디스플레이(HMD) 디바이스의 제어신호에 따라 단순한 동작을 수행할 뿐, 다양한 서비스 즉, 동작을 수행하는데 있어서 한계가 있다.
본 발명은 안마의자, 런닝머신, 승마기기, 자동차 시뮬레이션 기기, 비행용 시뮬레이션 기기 등을 포함하는 작동형 기기가 헤드마운트 디스플레이(HMD) 디바이스와 연동하여 테마에 따라 다양한 기능을 수행할 수 있도록 하는 헤드마운트 디스플레이 디바이스와 연동하는 작동형 기기에 대한 테마 제어장치에 관한 것이다.
상기 과제를 해결하기 위한 본 발명에 따른 헤드마운트 디스플레이 디바이스와 연동하는 작동형 기기에 대한 테마 제어장치는 사용자에게 가상현실영상을 제공하는 헤드마운트 디스플레이(Head Mounted Display) 디바이스로부터 작동형 기기와 연동하기 위한 설정명령을 인터페이스하는 인터페이스부; 상기 사용자의 일반 설정명령에 따라, 상기 작동형 기기의 일반 동작패턴, 상기 헤드마운트 디스플레이 디바이스의 일반 사용자 인터페이스(UI) 및 상기 가상현실영상에 관한 일반 컨텐츠를 포함하는 일반 컴프정보를 생성하는 컴프 생성부; 상기 사용자의 테마 설정명령에 따라, 상기 작동형 기기의 테마별 동작패턴, 상기 헤드마운트 디스플레이 디바이스의 테마별 사용자 인터페이스(UI), 및 상기 가상현실영상에 관한 테마별 컨텐츠의 등록을 위한 테마 인자값정보를 이용하여 상기 일반 컴프정보를 상기 테마별 동작패턴, 상기 테마별 사용자 인터페이스(UI) 및 상기 테마별 컨텐츠를 포함하는 테마 컴프정보로 변경하여 등록하는 테마 등록부; 상기 사용자의 제어명령에 따라, 상기 일반 컴프정보 및 상기 테마 컴프정보 중 적어도 어느 하나의 정보에 대응하는 컴프 제어신호를 생성하고, 상기 생성된 컴프 제어신호에 따라 상기 작동형 기기의 동작을 제어하는 제어부; 상기 컴프 생성부 및 상기 테마 등록부의 동작을 위한 프로그램 정보를 저장하고, 상기 일반 컴프정보 및 상기 테마 컴프정보를 저장하는 메모리; 및 상기 생성된 컴프 제어신호를 상기 작동형 기기로 전송하는 통신부를 포함한다.
상기 테마 인자값정보는 사람의 감성에 따른 감성 키워드별로 감성 정도에 대응하는 감성 가중치가 차등적으로 설정된 것을 특징으로 한다.
상기 감성 키워드는 명랑함, 우울함, 산뜻함, 무거움, 조용함, 시끄러움, 억압됨, 자유로움, 새로움, 낡음, 밝음, 어두움 중 적어도 하나 이상을 포함하는 것을 특징으로 한다.
상기 테마 등록부는, 상기 감성 가중치에 따라, 상기 작동형 기기의 동작 강도, 동작 방향, 동작 속도, 동작 시간 및 동작 음향 중 적어도 하나 이상을 포함하는 테마별 동작패턴을 상기 테마 컴프정보로 등록시키는 것을 특징으로 한다.
상기 테마 등록부는, 상기 감성 가중치에 따라, 상기 헤드마운트 디스플레이 디바이스의 사용자 인터페이스 디자인, 사용자 인터페이스 효과음, 사용자 인터페이스 화면 밝기, 사용자 인터페이스 반응시간 및 사용자 인터페이스 색상 중 적어도 하나 이상을 포함하는 테마별 인터페이스를 상기 테마 컴프정보로 등록시키는 것을 특징으로 한다.
상기 테마 등록부는, 상기 감성 가중치에 따라, 상기 가상현실영상에 관한 영상톤, 배경음, 자막, 영상밝기 및 효과음 중 적어도 하나 이상을 포함하는 테마별 컨텐츠를 상기 테마 컴프정보로 등록시키는 것을 특징으로 한다.
상기 제어부는, 복수개의 일반 컴프정보들 및 테마 컴프정보들 중 상기 제어명령에 대응하는 조합 및 실행순서에 따라, 적어도 2 이상의 컴프정보들에 대응하는 컴프 제어신호를 생성하고, 상기 생성된 컴프 제어신호에 따라 상기 작동형 기기를 제어하는 것을 특징으로 한다.
상기 제어부는, 상기 제어명령에 따라, 상기 작동형 기기가 정상 동작하는지 여부에 대한 동작확인 요청신호를 상기 작동형 기기로 전송하도록 제어하고, 상기 작동형 기기로부터 수신된 상기 동작확인 요청신호에 대응하는 동작확인 응답신호에 따라 상기 작동형 기기의 정상 동작 여부를 결정하는 것을 특징으로 한다.
상기 통신부는, 무선 통신망을 통해 상기 컴프 제어신호를 상기 작동형 기기로 전송하는 것을 특징으로 한다.
본 발명에 따르면, 작동형 기기의 제어를 위한 사용자 인터페이스, 작동 패턴 및 컨텐츠를 포함하는 일반 컴프정보를 생성하고, 또한, 테마 인자값정보를 이용하여 일반 컴프정보를 테마 컴프정보로 변경하여 등록하고, 등록된 컴프정보들에 대응하는 컴프 제어신호에 따라 작동형 기기를 제어할 수 있도록 함으로써, 종래의 단순한 동작을 수행하던 작동형 기기에 대해 테마별로 다양한 기능을 수행할 수 있도록 하는 효과가 있다.
이에 따라, 종래의 단순한 동작을 수행하는 작동형 기기들에 대해 다양한 동작이 수행될 수 있도록 함으로써, 작동형 기기를 체험하는 사용자에게 기기 이용의 효용성을 높이며, 작동형 기기에 대한 흥미를 지속적으로 유지시킬 수 있도록 하는 효과가 있다.
도 1은 본 발명에 따른 헤드마운트 디스플레이(HMD) 디바이스와 연동하는 작동형 기기에 대한 테마 제어장치를 설명하기 위한 시스템 구성 블록도이다.
도 2는 도 1에 도시된 테마 제어장치를 설명하기 위한 일 실시예의 구성 블록도이다.
도 3은 컴프 생성부에서 생성되는 일반 컴프정보에 포함되는 세부 정보를 예시하는 참조도이다.
도 4a는 헤드마운트 디스플레이 디바이스의 인터페이스 화면을 통해 표시되는 작동형 기기들의 종류를 예시하는 참조도이다.
도 4b는 작동형 기기들 중 도 4a에서 선택된 안마 의자의 타입을 예시하는 참조도이다.
도 5는 헤드마운트 디스플레이 디바이스의 인터페이스 화면을 통해 표시되는 작동형 기기의 동작패턴의 종류를 예시하는 참조도이다.
도 6은 헤드마운트 디스플레이 디바이스의 인터페이스 화면을 통해 표시되는 다양한 사용자 인터페이스를 예시하는 참조도이다.
도 7은 헤드마운트 디스플레이 디바이스의 인터페이스 화면을 통해 표시되는 다양한 컨텐츠를 예시하는 참조도이다.
도 8은 테마 등록부에 의해 등록되는 테마 컴프정보에 포함되는 세부 정보를 예시하는 참조도이다.
도 9는 테마 인자값정보를 예시하는 일 실시예의 참조도이다.
도 10은 일반 컴프정보에 테마 인자값정보가 반영되어 테마 컴프정보가 생성되는 것을 도식화한 참조도이다.
도 11a는 사용자의 테마 설정명령을 위해, 헤드마운트 디스플레이 디바이스의 인터페이스 화면에 표시되는 이용공간별 테마를 예시하는 참조도이다.
도 11b는 헤드마운트 디스플레이 디바이스의 인터페이스 화면에 표시되는 스포츠별 테마를 예시하는 참조도이다.
도 12는 헤드마운트 디스플레이 디바이스에 제공되는 제어명령 설정을 위한 사용자 인터페이스를 예시하는 참조도이다.
도 13은 제어부의 동작 확인 요청에 따른 작동형 기기(예를 들어, 안마 의자)의 동작 오류 체크를 예시하는 참조도이다.
이하, 첨부된 도면을 참조하여 본 발명의 바람직한 실시예를 상세히 설명하기로 한다.　
본 발명의 실시예들은 당해 기술 분야에서 통상의 지식을 가진 자에게 본 발명을 더욱 완전하게 설명하기 위하여 제공되는 것이며, 아래의 실시예들은 여러 가지 다른 형태로 변형될 수 있으며, 본 발명의 범위가 아래의 실시예들로 한정되는 것은 아니다. 오히려, 이들 실시예는 본 개시를 더욱 충실하고 완전하게 하며 당업자에게 본 발명의 사상을 완전하게 전달하기 위하여 제공되는 것이다.　
본 명세서에서 사용된 용어는 특정 실시예를 설명하기 위하여 사용되며, 본 발명을 제한하기 위한 것이 아니다. 본 명세서에서 사용된 바와 같이 단수 형태는 문맥상 다른 경우를 분명히 지적하는 것이 아니라면, 복수의 형태를 포함할 수 있다. 또한, 본 명세서에서 사용되는 경우 "포함한다(comprise)" 및/또는"포함하는(comprising)"은 언급한 형상들, 숫자, 단계, 동작, 부재, 요소 및/또는 이들 그룹의 존재를 특정하는 것이며, 하나 이상의 다른 형상, 숫자, 동작, 부재, 요소 및/또는 그룹들의 존재 또는 부가를 배제하는 것이 아니다. 본 명세서에서 사용된 바와 같이, 용어 "및/또는"은 해당 열거된 항목 중 어느 하나 및 하나 이상의 모든 조합을 포함한다.　
본 명세서에서 제1, 제2 등의 용어가 다양한 부재, 영역 및/또는 부위들을 설명하기 위하여 사용되지만, 이들 부재, 부품, 영역, 층들 및/또는 부위들은 이들 용어에 의해 한정되어서는 안됨은 자명하다. 이들 용어는 특정 순서나 상하, 또는 우열을 의미하지 않으며, 하나의 부재, 영역 또는 부위를 다른 부재, 영역 또는 부위와 구별하기 위하여만 사용된다. 따라서, 이하 상술할 제1 부재, 영역 또는 부위는 본 발명의 가르침으로부터 벗어나지 않고서도 제2 부재, 영역 또는 부위를 지칭할 수 있다.
이하, 본 발명의 실시예들은 본 발명의 실시예들을 개략적으로 도시하는 도면들을 참조하여 설명한다. 도면들에 있어서, 예를 들면, 제조 기술 및/또는 공차에 따라, 도시된 형상의 변형들이 예상될 수 있다. 따라서, 본 발명의 실시예는 본 명세서에 도시된 영역의 특정 형상에 제한된 것으로 해석되어서는 아니 되며, 예를 들면 제조상 초래되는 형상의 변화를 포함하여야 한다.
최근 다양한 VR 체험룸 등이 대형 놀이시설(예를 들어, 롯데월드, 서울랜드, 스타필드 등)에 설립되고 있는데, 헤드마운트 디스플레이(HMD) 디바이스와 다양한 작동형 기기 간의 제어와 관련한 통합화된 시스템이 요구되고 있다. 본 발명을 통해 가상현실이 결합된 작동형 기기들을 제어함에 있어서 단순 동작 방식이 아니라, 다양한 테마 모드로 동작할 수 있도록 하는 테마 제어장치를 제공한다.
도 1은 본 발명에 따른 헤드마운트 디스플레이 디바이스와 연동하는 작동형 기기에 대한 테마 제어장치를 설명하기 위한 시스템 구성 블록도이다.
도 1을 참조하면, 시스템은 헤드마운트 디스플레이 디바이스(10), 테마 제어장치(20), 통신망(30) 및 작동형 기기(40)를 포함한다.
헤드마운트 디스플레이 디바이스(10)는 사용자의 머리에 착용되어 상기 사용자에게 컨텐츠를 제공하고, 상기 사용자의 설정 명령 또는 제어 명령에 따른 신호를 생성하고, 생성된 신호를 테마 제어장치(20)로 전송한다. 헤드마운트 디스플레이 디바이스(10)는 컨텐츠 예를 들어, 가상현실영상 등을 입출력을 위한 사용자 인터페이스를 통해 표시함으로써, 사용자의 눈앞에서 가상현실영상을 제공할 수 있다.
헤드마운트 디스플레이 디바이스(10)는 안경, 헤드셋 또는 헬멧 등의 형상을 가지며, 사용자의 양안에 영상을 제공할 수 있다. 이 경우, 헤드마운트 디스플레이 디바이스(10)의 조작용 트랙 패드, 리턴 버튼, 음량 조정 키 등이 탑재될 수 있다. 헤드마운트 디스플레이 디바이스(10)는 별도의 디스플레이를 필요로 하는 디바이스로 구현될 수도 있다. 예를 들어, 헤드마운트 디스플레이 디바이스(10)는 안경, 헤드셋 또는 헬멧 등의 형상을 갖는 본체이고, 스마트폰 또는 태블릿 등이 본체의 전면에 부착되어 사용자의 양안에 영상을 제공할 수도 있다.
헤드마운트 디스플레이 디바이스(10)는 사용자의 머리 움직임을 추적하여 가상현실영상을 표시할 수 있다. 예를 들어, 사용자가 헤드마운트 디스플레이 디바이스(10)를 머리에 착용하면 360도 입체 영상과 음향을 제공하며, 헤드마운트 디스플레이 디바이스(10)에 구비된 자이로 센서와 가속도 센서 등을 통해 사용자의 고개 움직임을 감지하여 그 방향에 알맞은 시각효과를 표시할 수 있다.
이를 위해, 헤드마운트 디스플레이 디바이스(10)은 감지모듈로서, 지자기 센서, 자이로 센서, 가속도 센서, 근접 센서 등을 포함한다. 감지모듈은 회전, 기울기, 압력, 접근 등과 같은 다양한 동작을 감지할 수 있다. 지자기 센서는 헤드마운트 디스플레이 디바이스(10)의 회전 상태 및 이동 방향 등을 감지하기 위한 센서이다. 자이로 센서는 헤드마운트 디스플레이 디바이스(10)의 회전각을 감지하기 위한 센서이다. 가속도 센서는 헤드마운트 디스플레이 디바이스(10)의 기울어진 정도를 감지하기 위한 센서이다. 근접 센서는 디스플레이 표면에 직접 접촉되지 않고 접근하는 모션을 감지하기 위한 센서이다. 근접 센서는 고주파 자계를 형성하여, 물체 접근 시에 변화되는 자계특성에 의해 유도되는 전류를 감지하는 고주파 발진형, 자석을 이용하는 자기형, 대상체의 접근으로 인해 변화되는 정전 용량을 감지하는 정전 용량형과 같은 다양한 형태의 센서로 구현될 수 있다.
테마 제어장치(20)는 헤드마운트 디스플레이 디바이스(10)와 작동형 기기(40) 사이에서 헤드마운트 디스플레이 디바이스(10)에서 제공되는 설정 명령 또는 제어 명령에 따라 작동형 기기(40)의 동작을 제어할 수 있도록 한다. 테마 제어장치(20)에 상세한 내용은 후술한다.
통신망(30)은 테마 제어장치(20)와 작동형 기기(40) 사이에서 데이터를 송수신하기 위한 망으로, 유선통신망 또는 무선통신망을 포함한다. 예를 들어, 통신망(30)은 HDMI (high-definition multimedia interface), USB (universal serial bus) 등의 유선 케이블을 이용한 유선 통신망을 포함할 수 있다. 또한, 통신망(30)은 와이파이 통신망, 블루투스 통신망, NFC 통신망 등의 근거리 무선 통신망을 포함할 수 있다. 또한, 통신망(30)은 무선 통신망로서 WiFi(wireless fidelity)와 같은 무선인터넷, WiBro(wireless broadband internet) 또는 WiMax(world interoperability for microwave access)와 같은 휴대인터넷, GSM(global system for mobile communication) 또는 CDMA(code division multiple access)와 같은 2G 이동통신망, WCDMA(wideband code division multiple access) 또는 CDMA2000과 같은 3G 이동통신망, HSDPA(high speed downlink packet access) 또는 HSUPA(high speed uplink packet access)와 같은 3.5G 이동통신망, LTE(long term evolution)망 또는 LTE-Advanced망과 같은 4G 이동통신망, 및 5G 이동통신망 등을 포함할 수 있다.
작동형 기기(40)는 헤드마운트 디스플레이 디바이스(10)에 의해 제어되어 동작하는 기기이다. 이를 위해, 작동형 기기(40)는 테마 제어장치(20)를 통해 전송된 제어신호를 수신한다. 작동형 기기(40)는 통신망(30)을 통해 테마 제어장치(20)와 유선 또는 무선으로 연결되어 있다. 작동형 기기(40)는 유선 통신망 또는 무선 통신망을 지원하는 유선 통신모듈 또는 무선 통신모듈을 포함할 수 있다. 작동형 기기(40)는 통신망(30)을 통해 전송된 제어신호를 수신하고, 수신된 제어신호에 따라, 이에 대응하는 기기 동작을 수행한다.
작동형 기기(40)는 예를 들어, 안마 의자, 런닝 머신, 실내용 자전거, 승마용 기기, 자동차 시뮬레이션 기기, 비행용 시뮬레이션 기기 등을 포함할 수 있다. 다만, 여기에 열거된 작동형 기기(40)는 예시적인 것일 뿐이며, 다양한 시뮬레이션 기기 등이 포함될 수 있다.
도 2는 도 1에 도시된 테마 제어장치(20)를 설명하기 위한 일 실시예의 구성 블록도이다.
도 2를 참조하면, 테마 제어장치(20)는 인터페이스부(100), 컴프 생성부(110), 테마 등록부(120), 제어부(130), 메모리(140) 및 통신부(150)를 포함할 수 있다.
인터페이스부(100)는 사용자에게 컨텐츠를 제공하는 헤드마운트 디스플레이 디바이스(10)로부터 작동형 기기(40)와 연동하기 위한 설정명령 또는 제어명령을 인터페이스한다. 이를 위해, 인터페이스부(100)는 유선 또는 무선으로 헤드마운트 디스플레이 디바이스(10)와 연결되어 있다.
인터페이스부(100)는 HDMI, USB, 광 인터페이스(optical interface), 또는 D-sub(D-subminiature) 인터페이스, MHL(mobile high-definition link) 인터페이스 등의 유선 통신망을 지원하는 통신모듈을 포함할 수 있다. 또한, 인터페이스부(100)는 헤드마운트 디스플레이 디바이스(10)와의 근거리 무선 통신을 위해, 와이파이 통신망, 블루투스 통신망, 또는 NFC 통신망을 지원하는 통신모듈을 포함할 수 있다. 또한, 인터페이스부(100)는 무선 통신망로서 WiFi와 같은 무선인터넷, WiBro 또는 WiMax와 같은 휴대인터넷, GSM 또는 CDMA와 같은 2G 이동통신망, WCDMA 또는 CDMA2000과 같은 3G 이동통신망, HSDPA 또는 HSUPA와 같은 3.5G 이동통신망, LTE망 또는 LTE-Advanced망과 같은 4G 이동통신망, 및 5G 이동통신망 등을 지원하는 통신모듈을 포함할 수도 있다.
컴프 생성부(110)는 인터페이스부(100)를 통해 수신된 사용자의 일반 설정명령에 따라, 작동형 기기(40)의 종류와 일반 동작패턴, 헤드마운트 디스플레이 디바이스(10)의 일반 사용자 인터페이스(UI), 및 가상현실영상에 관한 일반 컨텐츠를 포함하는 일반 컴프정보를 생성한다.
여기서, 일반 컴프정보는 작동형 기기(40)의 일반 동작패턴, 헤드마운트 디스플레이 디바이스(10)의 일반 사용자 인터페이스(UI), 및 가상현실영상에 관한 일반 컨텐츠가 관계형으로 매핑되어 결합된 정보를 의미한다.
도 3은 컴프 생성부(110)에서 생성되는 일반 컴프정보에 포함되는 세부적인 정보를 예시하는 참조도이다.
도 3을 참조하면, 작동형 기기(40)의 일반 동작패턴은 사용자의 명령에 따라 동작하는 작동형 기기(40)에서의 선택 가능한 범용의 개별적인 동작패턴을 의미한다. 또한, 일반 사용자 인터페이스(UI)는 사용자의 선택에 따라 헤드마운트 디스플레이 디바이스(10)에서 제공되는 범용의 사용자 인터페이스를 의미한다. 또한, 일반 컨텐츠는 헤드마운트 디스플레이 디바이스(10)에서 제공되는 범용의 컨텐츠를 의미한다.
컴프 생성부(110)는 헤드마운트 디스플레이 디바이스(10)에 작동형 기기(10)의 종류를 설정하기 위한 인터페이스 화면을 제공할 수 있다. 이에 따라, 헤드마운트 디스플레이 디바이스(10)의 사용자 인터페이스를 통해 작동형 기기(40)의 종류 및 이에 대한 세부 항목들이 화면이 표시될 수 있다.
도 4a는 헤드마운트 디스플레이 디바이스(10)의 인터페이스 화면을 통해 표시되는 복수의 작동형 기기들에 대한 종류를 예시하는 참조도이고, 도 4b는 도 4a의 작동형 기기들 중 선택된 안마 의자의 타입을 예시하는 참조도이다.
도 4a 및 도 4b를 참조하면, 사용자는 인터페이스 화면을 통해 표시되는 작동형 기기들 중에서 어느 하나를 설정할 수 있으며, 설정된 작동형 기기의 세부적인 타입에 대응하는 세부 항목을 설정할 수도 있다. 헤드마운트 디스플레이 디바이스(10)로부터 사용자의 설정명령이 인터페이스부(100)을 통해 수신되면, 컴프 생성부(110)는 사용자가 설정한 작동형 기기의 종류 및 작동형 기기에 대응하는 세부 항목에 대한 정보를 일반 컴프정보로 등록할 수 있다.
그 후, 컴프 생성부(110)는 작동형 기기(40)의 일반 동작패턴 설정을 위한 인터페이스 화면, 헤드마운트 디스플레이 디바이스(10)의 일반 사용자 인터페이스(UI) 설정을 위한 인터페이스 화면, 또는 가상현실영상에 관한 일반 컨텐츠 설정을 위한 인터페이스 화면을 헤드마운트 디스플레이 디바이스(10)에 제공한다.
도 5는 헤드마운트 디스플레이 디바이스(10)의 인터페이스 화면을 통해 표시되는 작동형 기기(예를 들어, 안마 의자)의 동작패턴의 종류를 예시하는 참조도이다. 도 5를 참조하면, 도 5(a)는 안마 의자의 동작으로서 목, 무릎, 어깨, 종아리, 허리를 포함하는 동작패턴의 종류가 예시되어 있으며, 도 5(b)는 안마 의자의 동작으로서 전신, 상방신 집중, 하반신 집중, 랜덤 셔플, 근육 이완, 재활 도움을 포함하는 동작패턴의 종류가 예시되어 있다. 이중 어느 하나의 동작패턴이 설정되어, 해당 설정명령이 인터페이스부(100)을 통해 수신되면, 컴프 생성부(110)는 사용자가 설정한 작동형 기기의 동작패턴을 일반 컴프정보를 구성하는 일반 동작패턴으로 등록할 수 있다.
도 6은 헤드마운트 디스플레이 디바이스(10)의 인터페이스 화면을 통해 표시되는 다양한 사용자 인터페이스를 예시하는 참조도이다. 도 6을 참조하면, 헤드마운트 디스플레이 디바이스(10)의 인터페이스 화면을 통해 표시되는 사용자 인터페이스로서 스타필드 인터페이스, 인체구조 인터페이스, 가상리모콘 인터페이스가 예시되어 있다. 이중 어느 하나의 사용자 인터페이스가 설정되어, 해당 설정명령이 인터페이스부(100)을 통해 수신되면, 컴프 생성부(110)는 사용자가 설정한 사용자 인터페이스를 일반 컴프정보를 구성하는 일반 사용자 인터페이스로 등록할 수 있다.
도 7은 헤드마운트 디스플레이 디바이스(10)의 인터페이스 화면을 통해 표시되는 다양한 컨텐츠를 예시하는 참조도이다. 도 7을 참조하면, 인터페이스 화면을 통해 표시되는 컨텐츠으로서 3D 캐릭터 또는 POV(point of view) 방식의 가상현실영상이 예시되어 있다. 이중 어느 하나의 컨텐츠가 설정되어, 해당 설정명령이 인터페이스부(100)을 통해 수신되면, 컴프 생성부(110)는 사용자가 설정한 컨텐츠를 일반 컴프정보를 구성하는 일반 컨텐츠로 등록할 수 있다.
컴프 생성부(110)는 등록된 일반 동작패턴, 일반 인터페이스 및 일반 컨텐츠에 대해 매핑함으로서, 상호 관계형을 갖는 일반 컴프정보를 생성한다. 컴프 생성부(110)에서 생성된 일반 컴프정보는 메모리(140)에 저장될 수 있다.
테마 등록부(120)는 사용자의 테마 설정명령에 따라, 작동형 기기(40)의 테마별 동작패턴, 헤드마운트 디스플레이 디바이스(10)의 테마별 사용자 인터페이스(UI), 및 가상현실영상에 관한 테마별 컨텐츠의 등록을 위한 테마 인자값정보를 이용하여 기 등록된 일반 컴프정보를 테마별 동작패턴, 테마별 사용자 인터페이스(UI) 및 테마별 컨텐츠를 포함하는 테마 컴프정보로 변경하여 등록한다.
도 8은 테마 등록부(120)에 의해 등록되는 테마 컴프정보에 포함되는 세부적인 정보를 예시하는 참조도이다.
도 8을 참조하면, 테마 컴프정보는 작동형 기기(40)의 테마별 동작패턴, 헤드마운트 디스플레이 디바이스(10)의 테마별 사용자 인터페이스(UI), 및 가상현실영상에 관한 테마별 컨텐츠를 포함한다.
테마별 동작패턴은 사용자의 테마 설정에 따른 테마 인자값정보의 적용에 의해 테마별로 변경되는 작동형 기기(40)의 동작패턴을 의미한다. 또한, 테마별 사용자 인터페이스는 사용자의 테마 설정에 따른 테마 인자값정보의 적용에 의해 테마별로 변경되는 헤드마운트 디스플레이 디바이스(10)의 사용자 인터페이스를 의미한다. 또한, 테마별 컨텐츠는 사용자의 테마 설정에 따른 테마 인자값정보의 적용에 의해 테마별로 변경되는 가상현실영상의 컨텐츠를 의미한다.
여기서, 테마 인자값정보는 사람의 감성에 따른 감성 키워드별로 감성 정도에 대응하는 감성 가중치가 차등적으로 설정된 값일 수 있다. 감성 키워드는 명랑함, 우울함, 산뜻함, 무거움, 조용함, 시끄러움, 억압됨, 자유로움, 새로움, 낡음, 밝음, 어두움 중 적어도 하나 이상을 포함할 수 있다. 이러한, 테마 인자값정보는 메모리(140)에 저장되어 있다.
도 9는 테마 인자값정보를 예시하는 일 실시예의 참조도이다.
도 9를 참조하면, 테마 인자값정보는 감성 키워드로서, 명랑함, 우울함, 산뜻함, 무거움, 조용함, 시끄러움, 억압됨, 자유로움, 새로움, 낡음, 밝음, 어두움에 대한 각각의 감성 가중치가 차등적으로 설정되어 있다. 예를 들어, 감성 키워드 '명랑함'에 대응하는 감성 가중치는 -4 내지 +4 범위 내일 수 있다. 이때, 감상 가중치가 높을수록(즉, +4에 가까울수록) 감성 키워드에 대응하는 감정상태가 극대화 될 수 있으며, 감성 가중치가 낮을수록(즉, -4에 가까울수록) 감성 키워드에 대응하는 감정 상태가 최소화 될 수 있다.
테마 컴프정보는 일반 동작패턴, 일반 사용자 인터페이스 및 일반 컨텐츠를 포함하는 일반 컴프정보가 사용자의 테마 설정명령에 따라 테마별 동작패턴, 테마별 사용자 인터페이스 및 테마별 컨텐츠로 변경되어 관계형으로 매핑되어 결합된 정보를 의미한다.
도 10은 일반 컴프정보에 테마 인자값정보가 반영되어 테마 컴프정보가 생성되는 것을 도식화한 참조도이다.
도 10을 참조하면, 일반 컴프정보에 해당하는 일반 동작패턴, 일반 사용자 인터페이스 또는 일반 컨텐츠에 테마 인자값이 적용됨으로써, 각각 테마별 동작패턴, 테마별 사용자 인터페이스 및 테마별 컨텐츠를 포함하는 테마 컴프정보로 변경되어 등록됨을 나타내고 있다.
테마 등록부(120)는 작동형 기기(40)의 테마별 동작패턴 설정을 위한 인터페이스 화면, 헤드마운트 디스플레이 디바이스(10)의 테마별 사용자 인터페이스(UI) 설정을 위한 인터페이스 화면, 또는 가상현실영상에 관한 테마별 컨텐츠 설정을 위한 인터페이스 화면을 헤드마운트 디스플레이 디바이스(10)에 제공한다.
도 11a는 사용자의 테마 설정명령을 위해, 헤드마운트 디스플레이 디바이스(10)의 인터페이스 화면에 표시되는 이용공간별 테마를 예시하는 참조도이고, 도 11b는 헤드마운트 디스플레이 디바이스(10)의 인터페이스 화면에 표시되는 스포츠별 테마를 예시하는 참조도이다.
도 11a 및 도 11b를 참조하면, 테마 등록부(120)에서 제공되는 테마별 동작패턴 설정을 위한 인터페이스 화면, 테마별 사용자 인터페이스(UI) 설정을 위한 인터페이스 화면, 테마별 컨텐츠 설정을 위한 인터페이스 화면이 헤드마운트 디스플레이 디바이스(10)의 사용자 인터페이스를 통해 표시될 수 있다. 이에 따라, 사용자는 헤드마운트 디스플레이 디바이스(10)의 인터페이스 화면을 통해 이용공간별 테마 또는 스프츠별 테마 중에서 어느 하나를 자신의 취향에 따라 설정할 수 있다.
사용자의 테마 설정에 따라, 테마 등록부(120)는 도 9에 도시된 바와 같은 테마 인자값정보를 이용하여 기 등록된 일반 컴프정보를 테마별 사용자 인터페이스, 테마별 동작패턴 및 테마별 컨텐츠를 포함하는 테마 컴프정보로 변경하여 등록할 수 있다. 이를 위해, 테마 인자값정보는 테마별로 매핑되어 등록되어 있다. 예를 들어, 도 11a에 도시된 테마 중에 '노래방'에 해당하는 테마는 테마 인자값정보로서, 감성 키워드 및 감성 가중치가 각각 명랑함(가중치: 3), 시끄러움(가중치: 4), 자유로움(가중치: 2), 어두움(가중치: -1)로 등록된 것일 수 있다. 다만, 전술한 노래방과 테마 인자값정보의 매핑은 예시적인 것일 뿐이다. 이와 같이, 테마별로 각각 테마 인정값정보가 매핑되어 있으며, 이러한 정보는 메모리(140)에 저장되어 있다.
테마 등록부(120)는 사용자의 테마 설정에 대응하는 감성 키워드 및 이에 따른 감성 가중치에 따라, 작동형 기기(40)에 관한 일반 컴프정보의 일반 동작패턴을 테마별 동작패턴으로 변경하여 등록할 수 있다. 즉, 테마 등록부(120)는 테마별 동작패턴으로서, 작동형 기기(40)의 동작 강도, 동작 방향, 동작 속도, 동작 시간 및 동작 음향 등을 변경시킬 수 있다.
다음의 표 1은 테마 인자값정보에 매핑되는 테마별 동작패턴을 예시하는 테이블 정보이다. 이러한 테이블 정보는 메모리(140)에 저장될 수 있다.
테마별 동작패턴 테마 인자값정보
동작 강도 밝음, 어두움, 명랑함, 우울함
동작 방향 시끄러움, 조용함, 자유로움
동작 속도 명랑함, 우울함, 새로움,
동작 시간 억압됨, 명랑함, 우울함, 밝음
동작 음향 밝음, 어두움, 명랑함, 우울함, 자유로움
기타 랜덤
표 1에 따르면, 테마 등록부(120)는 테마 설정에 대응하는 테마 인자값정보 즉, 감성 키워드와 매핑되는 작동형 기기(40)의 동작 강도, 동작 방향, 동작 속도, 동작 시간 및 동작 음향 등을 해당 감성 가중치에 대응하도록 변경하여 등록시킬 수 있다.
또한, 테마 등록부(120)는 사용자의 테마 설정에 대응하는 감성 키워드 및 이에 대응하는 감성 가중치에 따라, 일반 컴프정보의 일반 사용자 인터페이스를 테마별 사용자 인터페이스로 변경하여 등록할 수 있다. 즉, 테마 등록부(120)는 테마별 사용자 인터페이스로서, 인터페이스 디자인, 인터페이스 효과음, 인터페이스 화면밝기, 인터페이스 반응시간 또는 인터페이스 색상 등을 변경시킬 수 있다.
다음의 표 2는 테마 인자값정보에 매핑되는 테마별 사용자 인터페이스를 예시하는 테이블 정보이다. 이러한 테이블 정보는 메모리(140)에 저장될 수 있다.
테마별 사용자 인터페이스 테마 인자값정보
인터페이스 디자인 명랑함, 우울함, 밝음
인터페이스 효과음 시끄러움, 조용함, 자유로움
인터페이스 화면 밝기 어두움, 우울함, 낡음
인터페이스 반응 시간 시끄러움, 조용함
인터페이스 색상 밝음, 어두움
기타 랜덤
표 2에 따르면, 테마 등록부(120)는 테마 설정에 대응하는 감성 키워드와 매핑되는 헤드마운트 디스플레이 디바이스(10)의 인터페이스 디자인, 인터페이스 효과음, 인터페이스 화면밝기, 인터페이스 반응시간 또는 인터페이스 색상 등을 해당 감성 가중치에 대응하도록 변경하여 등록시킬 수 있다.
또한, 테마 등록부(120)는 사용자의 테마 설정에 대응하는 감성 키워드 및 이에 대응하는 감성 가중치에 따라, 일반 컴프정보의 일반 컨텐츠를 테마별 컨텐츠로 변경하여 등록할 수 있다. 즉, 테마 등록부(120)는 테마별 컨텐츠로서, 가상현실영상에 관한 영상톤, 배경음, 자막, 영상밝기 및 효과음 등을 변경시킬 수 있다.
다음의 표 3은 테마 인자값정보에 매핑되는 테마별 컨텐츠를 예시하는 테이블 정보이다. 이러한 테이블 정보는 메모리(140)에 저장될 수 있다.
테마별 컨텐츠 테마 인자값정보
영상톤 밝음, 어두움
배경음 시끄러움, 조용함
자막 밝음, 어두움
영상 밝기 밝음, 어두움, 명랑함, 우울함
효과음 명랑함, 우울함, 자유로움
기타 랜덤
표 3에 따르면, 테마 등록부(120)는 테마 설정에 대응하는 감성 키워드와 매핑되는 가상현실영상에 관한 영상톤, 배경음, 자막, 영상밝기 및 효과음 등을 해당 감성 가중치에 대응하도록 변경하여 등록시킬 수 있다.
제어부(130)는 메모리(140)에 저장된 각종 프로그램을 이용하여 헤드마운트 디스플레이 디바이스(10), 컴프 생성부(110), 테마 등록부(120) 및 통신부(150)의 의 동작을 제어한다. 이를 위해, 제어부(130)는 RAM, ROM, 메인 CPU, 그래픽 처리부 등을 포함할 수 있으며, 각 구성요소와 데이터 교환을 위해 연결되어 있다.
제어부(130)는 사용자의 제어명령에 따라, 등록된 일반 컴프정보 또는 테마 컴프정보 중 적어도 어느 하나의 정보에 대응하는 컴프 제어신호를 생성하고, 생성된 컴프 제어신호에 따라 작동형 기기(40)의 동작을 제어한다.
전술한 바와 같이, 사용자의 설정에 따라 적어도 하나 이상의 다양한 일반 컴프정보들 또는 테마 컴프정보들이 컴프 생성부(110) 및 테마 등록부(120)에 의해 등록될 수 있다. 사용자는 작동형 기기(40)의 동작을 위해 등록된 일반 컴프정보들 또는 테마 컴프정보들 중 적어도 하나 이상의 동작을 위한 제어명령을 설정할 수 있다.
이를 위해, 제어부(130)는 등록된 복수개의 일반 컴프정보들 또는 테마 컴프정보들에 대한 목록정보를 표시하는 사용자 인터페이스를 헤드마운트 디스플레이 디바이스(10)에 제공할 수 있다. 이에 따라, 헤드마운트 디스플레이 디바이스(10)의 인터페이스 화면 상에 복수의 일반 컴프정보들 또는 테마 컴프정보들에 대한 목록정보가 표시될 수 있다.
도 12는 헤드마운트 디스플레이(HMD) 디바이스에 제공되는 제어명령 설정을 위한 사용자 인터페이스를 예시하는 참조도이다.
도 12를 참조하면, 제어명령 설정을 위한 사용자 인터페이스로서 일반 또는 테마 컴프정보들에 대한 목록정보가 표시될 수 있다. 예를 들어, 일반 또는 테마 컴프정보 1 내지 4가 표시될 수 있으며, 이중에서 일부 또는 전부가 사용자에 의해 선택될 수 있다. 사용자의 선택에 의해 일반 또는 테마 컴프정보들 중에서 일반 또는 테마 컴프정보 1 및 2의 실행 순서가 상호 교체됨을 확인할 수 있다. 또한, 사용자의 선택에 의해 일반 또는 테마 컴프정보 4가 삭제됨을 확인할 수 있다. 이와 같이, 사용자는 제어명령 설정을 위한 사용자 인터페이스를 통해 복수개의 일반 컴프정보들 또는 테마 컴프정보들 중 자신의 취향에 따라 컴프정보들을 조합하여 선택할 수 있으며, 이때 조합된 컴프정보들의 실행 순서도 필요에 따라 조정되거나 삭제될 수 있다. 사용자 인터페이스를 통해 선택된 일반 또는 테마 컴프정보의 조합 및 실행 순서는 사용자의 제어명령 설정으로 인식되며, 이러한 제어명령은 인터페이스부(100)을 통해서 제어부(130)에 전달된다.
제어부(130)는 수신된 제어명령에 따라 해당 일반 컴프정보 또는 테마 컴프정보에 대응하는 컴프 제어신호를 생성한다. 컴프 제어신호는 작동형 기기(40)의 일반 동작패턴 또는 테마별 동작패턴의 수행을 위한 기기 제어신호일 수 있고, 헤드마운트 디스플레이 디바이스(10)의 일반 사용자 인터페이스 또는 테마별 사용자 인터페이스의 제공를 위한 사용자인터페이스 제어신호일 수도 있고, 헤드마운트 디스플레이 디바이스(10)에 표시되는 일반 컨텐츠 또는 테마별 컨텐츠의 출력을 위한 컨텐츠 제어신호일 수도 있다.
제어부(130)는 작동형 기기(40)의 실행을 위한 기기 제어신호(즉, 컴프 제어신호)를 통신부(150)를 통해 작동형 기기(40)로 전송할 수 있다. 이에 따라, 자동형 기기(40)는 컴프 제어신호를 수신하고, 컴프 제어신호에 따라 일반 동작패턴 또는 테마별 동작패턴에 대응하는 동작을 실행한다.
또한, 제어부(130)는 헤드마운트 디스플레이 디바이스(10)의 사용자 인터페이스 제어신호(즉, 컴프 제어신호)를 인터페이스부(100)를 통해 헤드마운트 디스플레이 디바이스(10)에 전송할 수 있다. 이에 따라, 헤드마운트 디스플레이 디바이스(10)는 사용자 인터페이스 제어신호에 따라 일반 사용자 인터페이스 또는 테마별 사용자 인터페이스를 인터페이스 화면을 통해 표시할 수 있다.
또한, 제어부(130)는 헤드마운트 디스플레이 디바이스(10)에 대한 컨텐츠 제어신호(즉, 컴프 제어신호)를 인터페이스부(100)를 통해 헤드마운트 디스플레이 디바이스(10)에 전송할 수 있다. 이에 따라, 헤드마운트 디스플레이 디바이스(10)는 컨텐츠 제어신호에 따라 일반 컨텐츠 또는 테마별 컨텐츠를 인터페이스 화면을 통해 출력할 수 있다.
한편, 제어부(130)는 컴프 제어신호에 따라 작동형 기기(40)가 정상 동작하는지 여부에 대한 동작확인 요청신호를 작동형 기기(40)로 전송하고, 작동형 기기(40)로부터 수신된 동작확인 요청신호에 대응하는 동작확인 응답신호에 따라 작동형 기기(40)의 정상 동작 여부를 결정할 수 있다.
도 13은 제어부(130)의 동작 확인 요청에 따른 작동형 기기(예를 들어, 안마 의자)의 동작 오류 체크를 예시하는 참조도이다.
제어부(130)는 작동형 기기(40)의 오류 체크를 위한 사용자 인터페이스를 헤드마운트 디스플레이 디바이스(10)에 제공한다. 사용자가 헤드마운트 디스플레이 디바이스(10)의 인터페이스 화면을 통해 일반 컴프정보 또는 테마 컴프정보에 따른 작동형 기기(40)의 정상 동작여부를 판단하기 위한 오류 체크명령이 입력되면, 입력된 오류 체크명령이 인터페이스부(100)을 통해 제어부(130)에 수신된다. 이에 따라, 제어부(130)는 일반 컴프정보 또는 테마 컴프정보에 따른 컴프 제어신호와 함께 해당 컴프 제어신호에 대응하는 동작이 수행되고 있는지 여부에 대한 동작확인 요청신호를 생성하여 작동형 기기(40)로 전송하도록 제어한다. 이에 따라, 동작확인 요청신호가 통신부(150)을 통해 작동형 기기(40)로 전송된다. 그 후, 작동형 기기(40)에서 동작확인 요청신호에 따른 동작확인 응답신호를 생성하여 테마 제어장치(20)로 전송하면, 통신부(150)가 동작확인 응답신호를 수신하여 제어부(130)에 전달한다. 이에 따라, 제어부(130)는 동작확인 응답신호를 분석하여, 해당 기기 제어신호에 대응하는 동작이 정상적으로 실행되고 있는지를 결정하여 헤드마운트 디스플레이 디바이스(10)의 인터페이스 화면을 통해표시하도록 한다. 도 13에 따르면, 제어부(130)의 작동형 기기(40)에 대한 동작 오류 체크의 결과에 대한 내용이 헤드마운트 디스플레이 디바이스(10)의 인터페이스 화면상에 표시된 것을 예시하고 있다. 즉, 안마 의자에 해당하는 작동형 기기의 일반 컴프정보 또는 테마 컴프정보의 종류는 각각 목, 허리, 팔, 및 다리 컴프를 예시하고 있으며, 이러한 컴프 종류 중에서 정상적인 동작이 수행되고 있는지 여부에 대한 상태를 표시하고 있다.
메모리(140)는 헤드마운트 디스플레이 디바이스(10)의 동작을 위한 다양한 프로그램 정보를 저장하고 있다. 특히, 메모리(140)는 컴프 생성부(110) 및 테마 등록부(120)의 동작을 위한 프로그램 정보를 저장하고, 일반 컴프정보 및 테마 컴프정보를 저장하고 있다. 메모리(140)는 제어부(130)의 액세스에 따라 저장된 정보를 제공한다.
예를 들어, 메모리(140)는 작동형 기기(40)에 대한 종류 및 이에 대응하는 세부 항목들에 대한 정보를 저장하고 있다. 또한, 메모리(140)는 헤드마운트 디스플레이 디바이스(10)의 사용자 인터페이스정보, 작동형 기기(40)의 작동패턴정보, 가상현실영상에 관한 컨텐츠정보 등을 저장하고 있다. 또한, 메모리(140)는 테마 인자값정보, 테마 인자값정보에 매핑되는 테마별 인터페이스 정보, 테마 인자값정보에 매핑되는 테마별 작동패턴 정보, 테마 인자값정보에 매핑되는 테마별 컨텐츠 정보를 저장하고 있다. 또한, 메모리(140)는 등록된 복수의 일반 컴프정보들 또는 테마 컴프정보들의 조합 및 실행 순서에 관한 정보를 저장할 수도 있다.
통신부(150)는 유선 또는 무선 통신방식에 따라 작동형 기기(40)와 통신을 수행한다. 통신부(150)는 작동형 기기(40)와 연결 가능한 통신망(30)을 확인한다. 제어부(130)는 작동형 기기(40)와 연결 가능한 통신망(30)을 표시하기 위한 사용자 인터페이스를 헤드마운트 디스플레이 디바이스(10)에 제공한다. 헤드마운트 디스플레이 디바이스(10)는 인터페이스 화면을 통해 작동형 기기(40)와 연결 가능한 통신망을 표시하며, 사용자의 통신망(30) 선택에 따라 통신부(150)는 작동형 기기(40)와 통신을 수행할 수 있다.
통신부(150)는 제어부(130)의 제어에 따라 컴프 제어신호를 연결 가능한 통신망(30)을 통해 작동형 기기(40)로 전송한다. 이에 따라, 작동형 기기(40)는 테마 제어장치(20)로부터 전송된 컴프 제어신호에 대응하는 기기의 동작을 수행한다.
통신부(150)는 유선 통신모듈을 포함할 수 있다. 또한, 통신부(150)는 와이파이 모듈, 블루투스 모듈, NFC 모듈 등의 근거리 무선통신모듈을 포함하거나, WCDMA 또는 CDMA2000과 같은 3G 이동통신망, HSDPA 또는 HSUPA와 같은 3.5G 이동통신망, LTE망 또는 LTE-Advanced망과 같은 4G 이동통신망, 및 5G 이동통신망 등을 지원하는 무선통신모듈을 포함할 수 있다. 여기서, 와이파이 모듈, 블루투스 모듈 등은 SSID 및 세션 키 등과 같은 각종 연결 정보를 먼저 송수신하여, 이를 이용하여 통신 연결한 후 각종 정보들을 송수신할 수 있다. 무선 통신 모듈은 IEEE, 지그비, 3G, 3GPP, LTE 등과 같은 다양한 통신 규격에 따라 통신을 수행하는 칩을 의미한다.
본 발명은 소프트웨어적인 프로그램으로 구현하여 컴퓨터로 읽을 수 있는 소정 기록매체에 기록해 둠으로써 다양한 전자장치에 적용할 수 있다. 다양한 전자장치는 PC, 노트북, 휴대용 단말 등일 수 있다. 예컨대, 기록매체는 각 저장장치의 내장형으로 하드디스크, 플래시 메모리, RAM, ROM 등이거나, 외장형으로 CD-R, CD-RW와 같은 광디스크, 콤팩트 플래시 카드, 스마트 미디어, 메모리 스틱, 멀티미디어 카드일 수 있다.
이상과 같이 본 발명의 실시예를 설명하였으나, 본 발명의 명세서에 개시된 실시예들은 본 발명을 한정하는 것이 아니다. 본 발명의 범위는 아래의 특허청구범위에 의해 해석되어야 하며, 그와 균등한 범위 내에 있는 모든 기술도 본 발명의 범위에 포함되는 것으로 해석해야 할 것이다.
10: 헤드마운트 디스플레이 디바이스
20: 테마 제어장치
30: 통신망
40: 작동형 기기
100: 인터페이스부
110: 컴프 생성부
120: 테마 등록부
130: 제어부
140: 메모리
150: 통신부

Claims (9)

  1. 사용자에게 가상현실영상을 제공하는 헤드마운트 디스플레이(Head Mounted Display) 디바이스로부터 작동형 기기와 연동하기 위한 설정명령을 인터페이스하는 인터페이스부;
    상기 사용자의 일반 설정명령에 따라, 상기 작동형 기기의 일반 동작패턴, 상기 헤드마운트 디스플레이 디바이스의 일반 사용자 인터페이스(UI) 및 상기 가상현실영상에 관한 일반 컨텐츠를 포함하는 일반 컴프정보를 생성하는 컴프 생성부;
    상기 사용자의 테마 설정명령에 따라, 상기 작동형 기기의 테마별 동작패턴, 상기 헤드마운트 디스플레이 디바이스의 테마별 사용자 인터페이스(UI), 및 상기 가상현실영상에 관한 테마별 컨텐츠의 등록을 위한 테마 인자값정보를 이용하여 상기 일반 컴프정보를 상기 테마별 동작패턴, 상기 테마별 사용자 인터페이스(UI) 및 상기 테마별 컨텐츠를 포함하는 테마 컴프정보로 변경하여 등록하는 테마 등록부;
    상기 사용자의 제어명령에 따라, 상기 일반 컴프정보 및 상기 테마 컴프정보 중 적어도 어느 하나의 정보에 대응하는 컴프 제어신호를 생성하고, 상기 생성된 컴프 제어신호에 따라 상기 작동형 기기의 동작을 제어하는 제어부;
    상기 컴프 생성부 및 상기 테마 등록부의 동작을 위한 프로그램 정보를 저장하고, 상기 일반 컴프정보 및 상기 테마 컴프정보를 저장하는 메모리; 및
    상기 생성된 컴프 제어신호를 상기 작동형 기기로 전송하는 통신부를 포함하고,
    상기 제어부는,
    복수개의 일반 컴프정보들 및 테마 컴프정보들 중 상기 제어명령에 대응하는 조합 및 실행순서에 따라, 적어도 2 이상의 컴프정보들에 대응하는 컴프 제어신호를 생성하고, 상기 생성된 컴프 제어신호에 따라 상기 작동형 기기를 제어하는 것을 특징으로 하는 헤드마운트 디스플레이 디바이스와 연동하는 작동형 기기에 대한 테마 제어장치.
  2. 청구항 1에 있어서,
    상기 테마 인자값정보는 사람의 감성에 따른 감성 키워드별로 감성 정도에 대응하는 감성 가중치가 차등적으로 설정된 것을 특징으로 하는 헤드마운트 디스플레이 디바이스와 연동하는 작동형 기기에 대한 테마 제어장치.
  3. 청구항 2에 있어서,
    상기 감성 키워드는 명랑함, 우울함, 산뜻함, 무거움, 조용함, 시끄러움, 억압됨, 자유로움, 새로움, 낡음, 밝음, 어두움 중 적어도 하나 이상을 포함하는 것을 특징으로 하는 헤드마운트 디스플레이 디바이스와 연동하는 작동형 기기에 대한 테마 제어장치.
  4. 청구항 2에 있어서,
    상기 테마 등록부는,
    상기 감성 가중치에 따라, 상기 작동형 기기의 동작 강도, 동작 방향, 동작 속도, 동작 시간 및 동작 음향 중 적어도 하나 이상을 포함하는 테마별 동작패턴을 상기 테마 컴프정보로 등록시키는 것을 특징으로 하는 헤드마운트 디스플레이 디바이스와 연동하는 작동형 기기에 대한 테마 제어장치.
  5. 청구항 2에 있어서,
    상기 테마 등록부는,
    상기 감성 가중치에 따라, 상기 헤드마운트 디스플레이 디바이스의 사용자 인터페이스 디자인, 사용자 인터페이스 효과음, 사용자 인터페이스 화면 밝기, 사용자 인터페이스 반응시간 및 사용자 인터페이스 색상 중 적어도 하나 이상을 포함하는 테마별 인터페이스를 상기 테마 컴프정보로 등록시키는 것을 특징으로 하는 헤드마운트 디스플레이 디바이스와 연동하는 작동형 기기에 대한 테마 제어장치.
  6. 청구항 2에 있어서,
    상기 테마 등록부는,
    상기 감성 가중치에 따라, 상기 가상현실영상에 관한 영상톤, 배경음, 자막, 영상밝기 및 효과음 중 적어도 하나 이상을 포함하는 테마별 컨텐츠를 상기 테마 컴프정보로 등록시키는 것을 특징으로 하는 헤드마운트 디스플레이 디바이스와 연동하는 작동형 기기에 대한 테마 제어장치.
  7. 삭제
  8. 청구항 1에 있어서,
    상기 제어부는,
    상기 제어명령에 따라, 상기 작동형 기기가 정상 동작하는지 여부에 대한 동작확인 요청신호를 상기 작동형 기기로 전송하도록 제어하고, 상기 작동형 기기로부터 수신된 상기 동작확인 요청신호에 대응하는 동작확인 응답신호에 따라 상기 작동형 기기의 정상 동작 여부를 결정하는 것을 특징으로 하는 헤드마운트 디스플레이 디바이스와 연동하는 작동형 기기에 대한 테마 제어장치.
  9. 청구항 1에 있어서,
    상기 통신부는,
    무선 통신망을 통해 상기 컴프 제어신호를 상기 작동형 기기로 전송하는 것을 특징으로 하는 헤드마운트 디스플레이 디바이스와 연동하는 작동형 기기에 대한 테마 제어장치.
KR1020180021105A 2017-10-26 2018-02-22 헤드마운트 디스플레이(hmd) 디바이스와 연동하는 작동형 기기에 대한 테마제어장치 KR102088345B1 (ko)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
KR1020170140500 2017-10-26
KR20170140500 2017-10-26

Publications (2)

Publication Number Publication Date
KR20190046598A KR20190046598A (ko) 2019-05-07
KR102088345B1 true KR102088345B1 (ko) 2020-03-12

Family

ID=66656651

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020180021105A KR102088345B1 (ko) 2017-10-26 2018-02-22 헤드마운트 디스플레이(hmd) 디바이스와 연동하는 작동형 기기에 대한 테마제어장치

Country Status (1)

Country Link
KR (1) KR102088345B1 (ko)

Families Citing this family (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR102127179B1 (ko) 2019-06-05 2020-06-26 서울과학기술대학교 산학협력단 플렉서블 렌더링을 이용한 가상 현실 기반 음향 시뮬레이션 시스템

Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR101288413B1 (ko) * 2013-02-28 2013-07-22 주식회사 바디프랜드 안마의자의 고장진단 장치
KR101766892B1 (ko) * 2017-01-16 2017-08-23 안병문 연동장치, 이를 포함하는 전동장치 시스템 및 그 제어방법

Family Cites Families (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR101724643B1 (ko) * 2015-06-17 2017-04-07 정승호 가상현실영상 기반 안마의자 제어방법, 제어장치 및 이를 위한 컴퓨터 판독가능 기록매체

Patent Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR101288413B1 (ko) * 2013-02-28 2013-07-22 주식회사 바디프랜드 안마의자의 고장진단 장치
KR101766892B1 (ko) * 2017-01-16 2017-08-23 안병문 연동장치, 이를 포함하는 전동장치 시스템 및 그 제어방법

Also Published As

Publication number Publication date
KR20190046598A (ko) 2019-05-07

Similar Documents

Publication Publication Date Title
JP6266736B1 (ja) 仮想空間を介して通信するための方法、当該方法をコンピュータに実行させるためのプログラム、および当該プログラムを実行するための情報処理装置
JP6240301B1 (ja) 仮想空間を介して通信するための方法、当該方法をコンピュータに実行させるためのプログラム、および当該プログラムを実行するための情報処理装置
US9692756B2 (en) Magic wand methods, apparatuses and systems for authenticating a user of a wand
JP6263252B1 (ja) 情報処理方法、装置、および当該情報処理方法をコンピュータに実行させるためのプログラム
US20180011682A1 (en) Variable computing engine for interactive media based upon user biometrics
JP6342038B1 (ja) 仮想空間を提供するためのプログラム、当該プログラムを実行するための情報処理装置、および仮想空間を提供するための方法
US10223064B2 (en) Method for providing virtual space, program and apparatus therefor
US11132067B2 (en) Simulation experience with physical objects
KR20160128119A (ko) 이동 단말기 및 이의 제어방법
US10410395B2 (en) Method for communicating via virtual space and system for executing the method
KR101792715B1 (ko) 실제 환경 구현 운동 관리 시스템
JP6201028B1 (ja) 情報処理方法、装置、および当該情報処理方法をコンピュータに実行させるためのプログラム
JP6321263B1 (ja) 情報処理方法、装置、および当該情報処理方法をコンピュータに実行させるためのプログラム
JP2018124826A (ja) 情報処理方法、装置、および当該情報処理方法をコンピュータに実行させるプログラム
US20180329603A1 (en) Method executed on computer for moving in virtual space, program and information processing apparatus for executing the method on computer
JP2018120520A (ja) 仮想空間を介して通信するための方法、当該方法をコンピュータに実行させるためのプログラム、および当該プログラムを実行するための情報処理装置
KR102088345B1 (ko) 헤드마운트 디스플레이(hmd) 디바이스와 연동하는 작동형 기기에 대한 테마제어장치
JP6306678B1 (ja) 仮想空間にオブジェクトを提示するためにコンピュータによって実行される方法、当該方法をコンピュータに実行させるプログラム、および、コンピュータ装置
JP6113897B1 (ja) 仮想空間を提供する方法、仮想体験を提供する方法、プログラム、および記録媒体
JP6225242B1 (ja) 情報処理方法、装置、および当該情報処理方法をコンピュータに実行させるプログラム
JP2019030638A (ja) 情報処理方法、装置、および当該情報処理方法をコンピュータに実行させるためのプログラム
US11882172B2 (en) Non-transitory computer-readable medium, information processing method and information processing apparatus
JP2019033906A (ja) 情報処理方法、プログラム及びコンピュータ
JP2019020836A (ja) 情報処理方法、装置、および当該情報処理方法をコンピュータに実行させるためのプログラム
JP6321247B1 (ja) 仮想空間を移動するためにコンピュータで実行される方法、当該方法をコンピュータに実行させるプログラムおよび情報処理装置

Legal Events

Date Code Title Description
A201 Request for examination
E902 Notification of reason for refusal
E701 Decision to grant or registration of patent right