KR102219464B1 - 보안 운용 방법 및 이를 지원하는 전자 장치 - Google Patents

보안 운용 방법 및 이를 지원하는 전자 장치 Download PDF

Info

Publication number
KR102219464B1
KR102219464B1 KR1020140062468A KR20140062468A KR102219464B1 KR 102219464 B1 KR102219464 B1 KR 102219464B1 KR 1020140062468 A KR1020140062468 A KR 1020140062468A KR 20140062468 A KR20140062468 A KR 20140062468A KR 102219464 B1 KR102219464 B1 KR 102219464B1
Authority
KR
South Korea
Prior art keywords
security
module
electronic device
information
content
Prior art date
Application number
KR1020140062468A
Other languages
English (en)
Other versions
KR20150134952A (ko
Inventor
손동일
최종철
김양욱
조치현
한필규
허창룡
Original Assignee
삼성전자주식회사
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 삼성전자주식회사 filed Critical 삼성전자주식회사
Priority to KR1020140062468A priority Critical patent/KR102219464B1/ko
Priority to US14/719,512 priority patent/US9922179B2/en
Publication of KR20150134952A publication Critical patent/KR20150134952A/ko
Application granted granted Critical
Publication of KR102219464B1 publication Critical patent/KR102219464B1/ko

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F21/00—Security arrangements for protecting computers, components thereof, programs or data against unauthorised activity
    • G06F21/30—Authentication, i.e. establishing the identity or authorisation of security principals
    • G06F21/31—User authentication
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/011—Arrangements for interaction with the human body, e.g. for user immersion in virtual reality
    • G06F3/013—Eye tracking input arrangements
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F1/00—Details not covered by groups G06F3/00 - G06F13/00 and G06F21/00
    • G06F1/16—Constructional details or arrangements
    • G06F1/1613—Constructional details or arrangements for portable computers
    • G06F1/163—Wearable computers, e.g. on a belt
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F21/00—Security arrangements for protecting computers, components thereof, programs or data against unauthorised activity
    • G06F21/30—Authentication, i.e. establishing the identity or authorisation of security principals
    • G06F21/31—User authentication
    • G06F21/36—User authentication by graphic or iconic representation
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/011—Arrangements for interaction with the human body, e.g. for user immersion in virtual reality
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/011—Arrangements for interaction with the human body, e.g. for user immersion in virtual reality
    • G06F3/012—Head tracking input arrangements
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/017—Gesture based interaction, e.g. based on a set of recognized hand gestures
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0484—Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range
    • G06F3/04842—Selection of displayed objects or displayed text elements

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • General Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Human Computer Interaction (AREA)
  • Computer Security & Cryptography (AREA)
  • Computer Hardware Design (AREA)
  • Software Systems (AREA)
  • User Interface Of Digital Computer (AREA)

Abstract

본 발명의 다양한 실시 예는 보안 해제를 위한 보안 관련 컨텐츠를 디스플레이 하는 동작, 상기 보안 관련 컨텐츠가 출력된 상태에서 센서 신호 또는 입력 신호 중 적어도 하나를 수신하는 동작, 수신된 상기 센서 신호 또는 입력 신호 중 적어도 하나에 대응하여 상기 보안 관련 컨텐츠와 연관된 오브젝트를 수집하는 동작, 상기 오브젝트와 관련된 정보와 지정된 보안 설정 정보를 비교하는 동작, 상기 비교 결과에 대응하여 설정된 보안 해제 여부를 결정하는 동작을 포함하는 보안 운용 방법 및 이를 지원하는 전자 장치를 개시할 수 있다. 여기서 본 발명이 상술한 구성에 한정되는 것은 아니며, 발명의 상세한 설명에 기재된 다양한 실시 예들로서 이해되어야 할 것이다.

Description

보안 운용 방법 및 이를 지원하는 전자 장치{Operating method and Electronic device for security}
다양한 실시 예들은 보안 운용에 관한 것이다.
최근 디지털 기술의 발달과 함께 이동통신 장치, PDA(personal digital assistant), 전자수첩, 스마트 폰, 태블릿 PC(personal computer) 등과 같이 이동하면서 통신 및 개인정보 처리가 가능한 전자 장치가 다양하게 출시되고 있다. 이러한 전자 장치들은 운용과 관련된 락 설정을 지원하고 있다.
종래 전자 장치는 디스플레이에 락 설정과 관련된 락 스크린을 출력하고, 입력 정보에 대응하여 설정된 락을 해제하도록 지원한다. 한편, 최근 들어 전자 장치는 가상 현실과 관련된 컨텐츠를 제공할 수 있다. 이에 따라, 사용자는 전자 장치를 기반으로 가상 현실에서 다양한 컨텐츠를 이용할 수 있다. 이러한 종래 전자 장치는 사용자를 가리지 않고 가상 현실 컨텐츠를 제공하는 문제가 있다.
이에 따라, 다양한 실시 예에서는 가상 현실 환경에서 보안 운용이 가능한 보안 운용 방법 및 이를 지원하는 전자 장치를 제공함에 있다.
상기와 같은 과제를 해결하기 위한 다양한 실시 예 중 한 실시 예의 보안 운용 방법은 가상 현실 기반의 보안 관련 컨텐츠가 출력된 상태에서 센서 신호 또는 입력 신호 중 적어도 하나를 수신하는 동작, 수신된 상기 센서 신호 또는 입력 신호 중 적어도 하나에 대응하여 상기 보안 관련 컨텐츠와 관련된 화면 정보를 수집하는 동작, 상기 화면 정보와 지정된 보안 설정 정보를 비교하는 동작, 상기 비교 결과에 대응하여 설정된 보안 해제 여부를 결정하는 동작을 설정할 수 있다.
한 실시 예에 따르면, 전자 장치는 가상 현실 기반의 보안 관련 컨텐츠를 출력하는 디스플레이, 상기 디스플레이와 관련된 센서 신호 또는 입력 신호 중 적어도 하나가 수신되면, 수신된 상기 센서 신호 또는 입력 신호 중 적어도 하나에 대응하여 상기 보안 관련 컨텐츠와 관련된 화면 정보를 수집하고, 상기 화면 정보와 지정된 보안 설정 정보를 비교하여 상기 보안 관련 컨텐츠에 설정된 보안 해제 여부를 결정하는 VR 운용 모듈을 포함할 수 있다.
한 실시 예에 따르면, 컴퓨터 기록 매체는 명령들을 저장하고 있는 저장하고, 상기 명령들은 적어도 하나의 프로세서에 의하여 실행될 때에 상기 적어도 하나의 프로세서로 하여금 적어도 하나의 동작을 수행하도록 설정된 것으로서, 상기 적어도 하나의 동작은, 보안 해제를 위한 보안 관련 컨텐츠를 디스플레이 하는 동작, 상기 보안 관련 컨텐츠가 출력된 상태에서 센서 신호 또는 입력 신호 중 적어도 하나를 수신하는 동작, 수신된 상기 센서 신호 또는 입력 신호 중 적어도 하나에 대응하여 상기 보안 관련 컨텐츠와 연관된 오브젝트를 수집하는 동작, 상기 오브젝트와 관련된 정보와 지정된 보안 설정 정보를 비교하는 동작, 상기 비교 결과에 대응하여 설정된 보안 해제 여부를 결정하는 동작을 포함할 수 있다.
전술한 바와 같은 내용들은 당해 분야 통상의 지식을 가진 자가 후술되는 다양한 실시 예의 구체적인 설명으로부터 보다 잘 이해할 수 있도록 하기 위하여 다양한 실시 예들의 특징들 및 기술적인 장점들을 다소 넓게 약술한 것이다. 이러한 특징들 및 장점들 이외에도 청구범위의 주제를 형성하는 다양한 실시 예들의 추가적인 특징들 및 장점들이 후술되는 구체적인 설명으로부터 잘 이해될 것이다.
상술한 바와 같이 다양한 실시 예에 따른 보안 운용 방법 및 이를 지원하는 전자 장치에 따르면, 다양한 실시 예는 가상 현실 환경 또는 증강 현실 환경에서도 컨텐츠 접근과 관련된 보안 기능을 적용할 수 있다.
또한, 다양한 실시 예는 가상 현실 환경에서의 다양한 형태의 보안 설정 및 해제를 제공할 수 있다.
도 1은 다양한 실시 예에 따른 특정 타입의 가상 현실 지원 시스템을 나타낸 도면이다.
도 2는 다양한 실시 예에 따른 다른 타입의 가상 현실 지원 시스템을 나타낸 도면이다.
도 3은 다양한 실시 예에 따른 가상 현실 지원 시스템의 각 장치를 도시한다.
도 4는 다양한 실시 예에 따른 VR 운용 모듈을 도시한다.
도 5는 다양한 실시 예에 따른 뷰 화면 기반 보안 운용 방법을 도시한다.
도 6은 다양한 실시 예에 따른 복합 신호 기반 보안 운용 방법을 도시한다.
도 7a는 다양한 실시 예에 따른 뷰 포인터 기반의 보안 해제를 설명하는 도면이다.
도 7b는 다양한 실시 예에 따른 뷰 포인터 이동 및 그에 따른 보안 해제를 설명하는 도면이다.
도 8a는 다양한 실시 예에 따른 오브젝트 기반의 보안 해제를 설명하는 도면이다.
도 8b는 다양한 실시 예에 따른 오브젝트 기반의 보안 해제를 설명하는 도면이다.
도 9a는 다양한 실시 예에 따른 전체 화면 영역 중 일부 영역에 배치된 뷰 포트를 설명하는 도면이다.
도 9b는 다양한 실시 예에 따른 뷰 포트 이동을 설명하는 도면이다.
도 9c는 다양한 실시 예에 따른 선택된 보안 관련 오브젝트 실행을 설명하는 도면이다.
도 9d는 다양한 실시 예에 따른 선택된 가상 현실 오브젝트 실행을 설명하는 도면이다.
도 10은 다양한 실시 예에 따른 뷰 포트 이동 기반의 보안 해제를 설명하는 도면이다.
도 11a는 다양한 실시 예에 따른 보안 관련 오브젝트가 포함된 컨텐츠 출력을 도시한다.
도 11b는 다양한 실시 예에 따른 보안 관련 오브젝트 확대를 도시한다.
도 12는 다양한 실시 예에 따른 전자 장치의 블록도이다.
이하, 본 발명의 다양한 실시예가 첨부된 도면과 연관되어 기재된다. 본 발명의 다양한 실시예는 다양한 변경을 가할 수 있고 여러 가지 실시예를 가질 수 있는 바, 특정 실시예들이 도면에 예시되고 관련된 상세한 설명이 기재되어 있다. 그러나, 이는 본 발명의 다양한 실시예를 특정한 실시 형태에 대해 한정하려는 것이 아니며, 본 발명의 다양한 실시예의 사상 및 기술 범위에 포함되는 모든 변경 및/또는 균등물 내지 대체물을 포함하는 것으로 이해되어야 한다. 도면의 설명과 관련하여, 유사한 구성요소에 대해서는 유사한 참조 부호가 사용되었다.
본 발명의 다양한 실시예에서 사용될 수 있는“포함한다” 또는 “포함할 수 있다” 등의 표현은 개시(disclosure)된 해당 기능, 동작 또는 구성요소 등의 존재를 가리키며, 추가적인 하나 이상의 기능, 동작 또는 구성요소 등을 제한하지 않는다. 또한, 본 발명의 다양한 실시예에서, "포함하다" 또는 "가지다" 등의 용어는 명세서상에 기재된 특징, 숫자, 단계, 동작, 구성요소, 부품 또는 이들을 조합한 것이 존재함을 지정하려는 것이지, 하나 또는 그 이상의 다른 특징들이나 숫자, 단계, 동작, 구성요소, 부품 또는 이들을 조합한 것들의 존재 또는 부가 가능성을 미리 배제하지 않는 것으로 이해되어야 한다.
본 발명의 다양한 실시예에서 “또는” 또는 “ A 또는/및 B 중 적어도 하나” 등의 표현은 함께 나열된 단어들의 어떠한, 그리고 모든 조합을 포함한다. 예를 들어, “A 또는 B” 또는 “ A 또는/및 B 중 적어도 하나” 각각은, A를 포함할 수도, B를 포함할 수도, 또는 A 와 B 모두를 포함할 수도 있다.
본 발명의 다양한 실시예에서 사용된 “제 1,”“제2,”“첫째,”또는“둘째,”등의 표현들은 다양한 실시예들의 다양한 구성요소들을 수식할 수 있지만, 해당 구성요소들을 한정하지 않는다. 예를 들어, 상기 표현들은 해당 구성요소들의 순서 및/또는 중요도 등을 한정하지 않는다. 상기 표현들은 한 구성요소를 다른 구성요소와 구분하기 위해 사용될 수 있다. 예를 들어, 제1 사용자 기기와 제 2 사용자 기기는 모두 사용자 기기이며, 서로 다른 사용자 기기를 나타낸다. 예를 들어, 본 발명의 다양한 실시예의 권리 범위를 벗어나지 않으면서 제1 구성요소는 제2 구성요소로 명명될 수 있고, 유사하게 제2 구성요소도 제1 구성요소로 명명될 수 있다.
어떤 구성요소가 다른 구성요소에 "연결되어" 있다거나 "접속되어" 있다고 언급된 때에는, 상기 어떤 구성요소가 상기 다른 구성요소에 직접적으로 연결되어 있거나 또는 접속되어 있을 수도 있지만, 상기 어떤 구성요소와 상기 다른 구성요소 사이에 새로운 다른 구성요소가 존재할 수도 있다고 이해되어야 할 것이다. 반면에, 어떤 구성요소가 다른 구성요소에 "직접 연결되어" 있다거나 "직접 접속되어" 있다고 언급된 때에는, 상기 어떤 구성요소와 상기 다른 구성요소 사이에 새로운 다른 구성요소가 존재하지 않는 것으로 이해될 수 있어야 할 것이다. 본 발명의 다양한 실시예에서 사용한 용어는 단지 특정한 실시예를 설명하기 위해 사용된 것으로, 본 발명의 다양한 실시예를 한정하려는 의도가 아니다. 단수의 표현은 문맥상 명백하게 다르게 뜻하지 않는 한, 복수의 표현을 포함한다.
다르게 정의되지 않는 한, 기술적이거나 과학적인 용어를 포함해서 여기서 사용되는 모든 용어들은 본 발명의 다양한 실시예가 속하는 기술 분야에서 통상의 지식을 가진 자에 의해 일반적으로 이해되는 것과 동일한 의미를 가지고 있다. 일반적으로 사용되는 사전에 정의되어 있는 것과 같은 용어들은 관련 기술의 문맥 상 가지는 의미와 일치하는 의미를 가지는 것으로 해석되어야 하며, 본 발명의 다양한 실시예에서 명백하게 정의되지 않는 한, 이상적이거나 과도하게 형식적인 의미로 해석되지 않는다.
본 발명의 다양한 실시예에 따른 전자 장치는, 영상 처리 기능이 포함된 장치일 수 있다. 예를 들면, 전자 장치는 스마트 폰(smartphone), 태블릿 PC(tablet personal computer), 이동 전화기(mobile phone), 화상전화기, 전자북 리더기(e-book reader), 데스크탑 PC(desktop personal computer), 랩탑 PC(laptop personal computer), 넷북 컴퓨터(netbook computer), PDA(personal digital assistant), PMP(portable multimedia player), MP3 플레이어, 모바일 의료기기, 카메라(camera), 또는 웨어러블 장치(wearable device)(예: 전자 안경과 같은 head-mounted-device(HMD), 전자 의복, 전자 팔찌, 전자 목걸이, 전자 앱세서리(appcessory), 전자 문신, 또는 스마트 와치(smart watch))중 적어도 하나를 포함할 수 있다.
어떤 실시예들에 따르면, 전자 장치는 영상 처리 기능을 갖춘 스마트 가전 제품(smart home appliance)일 수 있다. 스마트 가전 제품은, 예를 들자면, 전자 장치는 텔레비전, DVD(digital video disk) 플레이어, 오디오, 냉장고, 에어컨, 청소기, 오븐, 전자레인지, 세탁기, 공기 청정기, 셋톱 박스(set-top box), TV 박스(예를 들면, 삼성 HomeSync™, 애플TV™, 또는 구글 TV™), 게임 콘솔(game consoles), 전자 사전, 전자 키, 캠코더(camcorder), 또는 전자 액자 중 적어도 하나를 포함할 수 있다.
어떤 실시예들에 따르면, 전자 장치는 각종 의료기기(예: MRA(magnetic resonance angiography), MRI(magnetic resonance imaging), CT(computed tomography), 촬영기, 초음파기 등), 네비게이션(navigation) 장치, GPS 수신기(global positioning system receiver), EDR(event data recorder), FDR(flight data recorder), 자동차 인포테인먼트(infotainment) 장치, 선박용 전자 장비(예: 선박용 항법 장치 및 자이로 콤파스 등), 항공 전자기기(avionics), 보안 기기, 차량용 헤드 유닛, 산업용 또는 가정용 로봇, 금융 기관의 ATM(automatic teller’s machine) 또는 상점의 POS(point of sales) 중 적어도 하나를 포함할 수 있다.
어떤 실시예들에 따르면, 전자 장치는 영상 처리 기능을 포함한 가구(furniture) 또는 건물/구조물의 일부, 전자 보드(electronic board), 전자 사인 입력장치(electronic signature receiving device), 프로젝터(projector), 또는 각종 계측기기(예: 수도, 전기, 가스, 또는 전파 계측 기기 등) 중 적어도 하나를 포함할 수 있다. 본 발명의 다양한 실시예에 따른 전자 장치는 전술한 다양한 장치들 중 하나 또는 그 이상의 조합일 수 있다. 또한, 본 발명의 다양한 실시예에 따른 전자 장치는 플렉서블 장치일 수 있다. 또한, 본 발명의 다양한 실시예에 따른 전자 장치는 전술한 기기들에 한정되지 않음은 당업자에게 자명하다.
이하, 첨부된 도면을 참조하여 다양한 실시예에 따른 전자 장치에 대해서 살펴본다. 다양한 실시예에서 이용되는 사용자라는 용어는 전자 장치를 사용하는 사람 또는 전자 장치를 사용하는 장치(예: 인공지능 전자 장치)를 지칭할 수 있다.
도 1은 다양한 실시 예에 따른 특정 타입의 가상 현실 지원 시스템을 나타낸 도면이다.
도 1을 참조하면, 한 실시 예에 따르면, 특정 타입의 가상 현실 지원 시스템 10a는 장착 프레임 200a와 전자 장치 100a를 포함할 수 있다.
장착 프레임 200a는 가상 현실 지원 시스템 10a를 신체 부위의 특정 장소(예: 머리 등)에 착용할 수 있도록 마련될 수 있다. 이와 관련하여, 장착 프레임 200a는 고정부 230a 및 장착부 250a를 포함할 수 있다. 또한, 장착 프레임 200a는 입력 장치 220a를 포함할 수 있다.
고정부 230a는 내측의 적어도 일부가 사용자의 신체에 대면되도록 일정한 테두리를 가질 수 있다. 고정부 230a는 사용자의 머리 뒤쪽에 배치되는 패드부 231a, 패드부 231a와 연결되는 두 개의 리드부들 232a, 233a를 포함할 수 있다. 패드부 231a는 일정 면을 가지며 사용자 머리 뒤쪽에 접촉되도록 배치될 수 있다. 두 개의 리드부들 232a, 233a는 패드부 231a의 양쪽 가장자리에 각각 연결되는 일측과 장착부 250a의 양쪽 가장자리에 각각 연결 고정되는 타측을 포함할 수 있다. 두 개의 리드부들 232a, 233a는 길이 조정이 가능하도록 마련될 수 있다. 두 개의 리드부들 232a, 233a는 장착부 250a가 일정 체적을 가지도록 마련됨에 따라 장착부 250a의 양측 가장자리에서 상하단을 각각 고정하는 형태로 마련될 수 있다.
장착부 250a는 고정부 230a에 마련된 리드부들 232a, 233a와 고정 연결될 수 있다. 장착부 250a의 일측에는 사용자의 신체 일부 예컨대 이마에 접촉되는 지지부 240a를 포함할 수 있다. 여기서 지지부 240a는 장착부 250a의 외관 케이스가 변형되어 마련될 수 있다. 장착부 250a는 일측 예컨대 측부에 입력 장치 220a가 배치될 수 있다. 장착부 250a의 전면에는 전자 장치 100a가 결합될 수 있다. 도시된 도면에서는 전자 장치 100a가 장착부 250a에 완전 결합된 상태를 도시하였으나, 장착부 250a는 전자 장치 100a가 탈착 가능하도록 마련될 수 있다. 장착부 250a의 내부에는 적어도 하나의 렌즈 및 렌즈들이 배치된 경통이 마련될 수 있다. 적어도 하나의 렌즈들의 간격은 확장 배율에 따라 변경될 수 있다. 이에 따라, 장착부 250a는 전면에 배치된 전자 장치 100a의 화면을 확장하여 볼 수 있도록 지원한다.
입력 장치 220a는 적어도 하나가 장착부 250a의 일측에 배치되고, 전기적으로 전자 장치 100a와 연결될 수 있다. 다양한 실시 예에 따르면, 입력 장치 220a는 고정부 230a 일측에 적어도 하나가 마련될 수도 있다. 입력 장치 220a는 터치 타입(예: 터치스크린, 터치패드 등) 또는 버튼 타입(예: 물리 키, 시작 키, 전원 키 등) 중 적어도 하나로 마련될 수 있다. 다양한 실시 예에 따르면, 입력 장치 220a가 배치된 장착부 250a 일측에 센서 모듈이 더 배치될 수도 있다. 입력 장치 220a는 사용자의 손가락 등의 접촉에 반응하여 이벤트를 생성하고, 생성된 이벤트를 전자 장치 100a에 전달할 수 있다. 입력 장치 220a가 복수개로 마련되는 경우, 각각의 고유 ID 정보를 포함할 수 있다. 이에 따라, 복수개의 입력 장치 220a에서 발생한 신호가 전자 장치 100a에서 구별될 수 있다.
상술한 구조를 가지는 다양한 실시 예에 따른 가상 현실 지원 시스템 10a는 전자 장치 100a의 디스플레이에 보안 관련 컨텐츠가 디스플레이에 출력되면, 장착 프레임 200a를 통해 이를 확인할 수 있다. 이때, 가상 현실 지원 시스템 10a는 장착 프레임 200a에 마련된 입력 장치 220a 또는 센서 모듈 중 적어도 하나 또는 전자 장치 100a에 마련된 입출력 인터페이스 또는 센서 모듈 중 적어도 하나에서 생성된 신호에 대응하여 보안 관련 컨텐츠의 보안 해제를 지원할 수 있다. 가상 현실 지원 시스템 10a는 보안이 해제되면 보안 해제 관련 컨텐츠 이동을 지원할 수 있다.
도 2는 다양한 실시 예에 따른 다른 타입의 가상 현실 지원 시스템을 나타낸 도면이다.
도 2를 참조하면, 한 실시 예에 따르면, 다른 타입의 가상 현실 지원 시스템 10b는 장착 프레임 200b와 전자 장치 100b를 포함할 수 있다.
장착 프레임 200b는 가상 현실 지원 시스템 10b를 신체 부위의 특정 장소(예: 머리 등)에 착용할 수 있도록 마련될 수 있다. 이와 관련하여, 장착 프레임 200b는 고정부 230b 및 장착부 250b를 포함할 수 있다. 또한, 장착 프레임 200b는 입력 장치 220b를 포함할 수 있다.
고정부 230b는 적어도 일부가 사용자의 신체에 대면되도록 일정한 테두리를 가질 수 있다. 한 실시 예에 따르면, 고정부 230b는 사용자의 머리 뒤쪽에 배치되는 라인부 231b, 라인부 231b와 연결되는 두 개의 지지부들 232b, 233b를 포함할 수 있다. 라인부 231b는 사용자의 신체 일부 예컨대 머리 뒤쪽에 배치될 수 있다. 라인부 231b는 두 개의 지지부들 232b, 233b를 축으로 길이 조정이 가능하도록 마련될 수 있다. 두 개의 지지부들 232b, 233b는 라인부 231b의 양측 가장자리에 각각에 연결되며 또는 장착부 250b의 케이스에 각각 고정 연결될 수 있다. 두 개의 지지부들 232b, 233b는 라인부 231b의 길이 조정을 지원하기 위하여 내측의 적어도 일부가 빈 형태로 마련될 수 있다. 두 개의 지지부들 232b, 233b 중 적어도 하나에는 입력 장치 220b가 배치될 수 있다.
장착부 250b는 고정부 230b에 마련된 리드부들 232a, 233a와 고정 연결될 수 있다. 장착부 250b의 일측에는 사용자의 신체 일부 예컨대 이마와 대면되는 지지부 240b를 포함할 수 있다. 여기서 지지부 240b는 장착부 250b의 외관 케이스가 변형되어 마련될 수 있다. 또는 도시된 바와 같이 지지부 240b는 별도 마련되어 장착부 250b의 외관 케이스 일측에 고정 배치될 수 있다. 설계 방식의 변형에 따라 지지부 240b는 탈착 가능하도록 마련될 수도 있다. 장착부 250b의 전면에는 전자 장치 100b가 탈착 가능하도록 마련되는 안착부 251이 배치될 수 있다. 안착부 251은 전자 장치 100b의 크기에 대응하는 크기를 가질 수 있다. 다양한 실시 예에 따르면, 안착부 251 일측에는 전자 장치 100b가 삽탈될 수 있는 삽탈부가 마련될 수 있다. 안착부 251의 일측에는 전자 장치 100b의 커넥터와 연결될 수 있는 잭이 배치될 수 있다. 전자 장치 100b가 안착부 251에 안착되면서 전자 장치 100b의 커넥터와 잭이 서로 전기적으로 연결될 수 있다. 상기 잭은 입력 장치 220b의 입력 신호를 전자 장치 100b로 전송하는 통신 인터페이스 역할을 수행할 수 있다. 안착부 251에 마련된 통신 인터페이스는 장착 프레임 200b 및 전자 장치 100b 간의 무선 통신 인터페이스로 대체될 수 있다. 장착부 250b의 적어도 일부는 탄성 재질 예컨대 실리콘으로 마련될 수 있다. 예컨대, 장착부 250b 중 사용자의 눈 부위와 접촉되는 영역은 탄성 재질로 마련될 수 있다. 장착부 250b의 내부에는 적어도 하나의 렌즈 및 렌즈들이 배치된 경통이 마련될 수 있다. 적어도 하나의 렌즈들의 간격은 확장 배율에 따라 변경될 수 있다. 이에 따라, 장착부 250b는 전면 안착부 251에 배치된 전자 장치 100b의 화면을 확장하여 볼 수 있도록 지원한다.
입력 장치 220b는 지지부들 232b, 233b 중 적어도 하나에 배치되고, 전기적으로 전자 장치 100b와 연결될 수 있다. 다양한 실시 예에 따르면, 입력 장치 220b는 장착부 250b 일측에 마련될 수도 있다. 입력 장치 220b는 터치 타입(예: 터치스크린, 터치패드 등) 또는 버튼 타입(예: 물리 키, 시작 키, 전원 키 등) 중 적어도 하나로 마련될 수 있다. 다양한 실시 예에 따르면, 입력 장치 220b가 배치된 지지부들 232b, 233b 일측에 센서 모듈이 더 배치될 수도 있다. 또는 입력 장치 220b는 적어도 하나의 센서를 포함할 수 있다. 입력 장치 220b는 사용자의 손가락 등의 접촉에 반응하여 이벤트를 생성하고, 생성된 이벤트를 전자 장치 100b에 전달할 수 있다.
상술한 구조를 가지는 다양한 실시 예에 따른 가상 현실 지원 시스템 10b는 전자 장치 100b의 디스플레이에 보안 관련 컨텐츠가 디스플레이에 출력되면, 장착 프레임 200b를 통해 이를 확인할 수 있다. 이때, 가상 현실 지원 시스템 10b는 장착 프레임 200b에 마련된 입력 장치 220b 또는 센서 모듈 중 적어도 하나 또는 전자 장치 100b에 마련된 입출력 인터페이스 또는 센서 모듈 중 적어도 하나에서 생성된 신호에 대응하여 보안 관련 컨텐츠의 보안 해제를 지원할 수 있다. 가상 현실 지원 시스템 10b는 보안이 해제되면 보안 해제 관련 컨텐츠 이동을 지원할 수 있다.
상술한 가상 현실 지원 시스템 10a 또는 가상 현실 지원 시스템 10b는 설계 방식에 따라 보다 다양한 형태로 마련될 수 있다. 이하에서는 보안 설정과 해제와 관련하여 가상 현실 지원 시스템에 대하여 하나의 도면 번호를 할당하고, 그에 관한 장치들을 설명하기로 한다. 이에 따라, 장착 프레임 200a 및 장착 프레임 200b는 장착 프레임 200으로 기재하며, 전자 장치 100a 또는 전자 장치 100b는 전자 장치 100으로 기재하여 설명하기로 한다.
도 3은 다양한 실시 예에 따른 가상 현실 지원 시스템의 각 장치를 도시한다.
도 3을 참조하면, 가상 현실 지원 시스템 10은 장착 프레임 200, 전자 장치 100을 포함하고, 추가적으로 또는 대체적으로 입력 장치 300을 더 포함할 수 있다. 또한 가상 현실 지원 시스템 10은 네트워크 162, 외부 전자 장치 104, 서버 장치 106 등을 더 포함할 수 있다.
장착 프레임 200은 앞서 설명한 바와 같이 외관 케이스에 내측에 적어도 하나의 렌즈가 일정 간격으로 배치되고, 전면에 전자 장치 100이 배치되거나 안착될 수 있다. 장착 프레임 200의 일측을 통해 전자 장치 100의 디스플레이 140에 출력된 영상이 제공될 수 있다. 이러한 장착 프레임 200은 추가적으로 또는 대체적으로 통신 모듈 210, 센서 모듈 280, 입력 장치 220, 장착 프레임 제어 모듈 260을 포함할 수 있다.
통신 모듈 210은 전자 장치 100과 통신 채널을 형성할 수 있다. 예컨대, 통신 모듈 210은 근거리 통신 모듈(예: 블루투스 통신 모듈, 와이파이 다이렉트 통신 모듈, 지그비 통신 모듈 등)을 포함하고, 전자 장치 100과 근거리 통신 채널을 형성할 수 있다. 또는 통신 모듈 210은 유선 통신 인터페이스를 포함하고, 케이블 등을 통해 전자 장치 100과 유선 통신 채널을 형성할 수 있다. 다양한 실시 예에 따르면, 통신 모듈 210은 입력 장치 220에서 생성된 입력 이벤트를 전자 장치 100에 전송할 수 있다. 또는 통신 모듈 210은 센서 모듈 280에서 생성된 센서 신호를 전자 장치 100에 전송할 수 있다. 한 실시 예에 따르면, 통신 모듈 210은 전자 장치 100이 장착 프레임 200에 장착되는 경우 자동으로 활성화될 수 있다. 통신 모듈 210은 장착 프레임 200에서 전자 장치 100이 장착 해제되는 경우 자동으로 비활성화될 수 있다. 다양한 실시 예에 따르면, 통신 모듈 210은 입력 장치 220에서 발생하는 입력 이벤트에 대응하여 턴-온 또는 턴-오프가 제어될 수 있다.
센서 모듈 280은 적어도 하나의 센서를 포함할 수 있다. 예컨대, 센서 모듈 280은 자이로 센서, 가속도 센서, 지자기 센서 등을 포함할 수 있다. 센서 모듈 280은 장착 프레임 200의 움직임에 대응하는 센서 신호를 생성하고, 이를 통신 모듈 210에 전달할 수 있다. 센서 모듈 280은 전자 장치 100이 장착 프레임 200에 장착되거나 입력 장치 220에서 발생하는 입력 이벤트 중 적어도 하나에 대응하여 활성화될 수 있다. 센서 모듈 280은 전자 장치 100이 장착 프레임 200으로부터 장착 해제되거나 입력 장치 220에서 발생하는 입력 이벤트 중 적어도 하나에 대응하여 비활성화될 수 있다.
입력 장치 220은 장착 프레임 200의 장치 제어와 관련된 적어도 하나의 입력 이벤트를 사용자 제어에 대응하여 생성할 수 있다. 이와 관련하여, 입력 장치 220은 장착 프레임 200의 일정 위치 예컨대 장착부들 중 적어도 일측에 적어도 하나가 배치될 수 있다. 한 실시 예에 따르면, 입력 장치 220은 적어도 하나의 물리 키 버튼을 포함할 수 있다. 적어도 하나의 물리 키 버튼은 장착 프레임 200의 턴-온 또는 턴-오프를 제어하는 전원 키, 숫자 입력이 가능한 키 버튼, 방향 제어와 관련된 방향 키 등을 포함할 수 있다. 한 실시 예에 따르면, 입력 장치 220은 적어도 하나의 터치 패드를 포함할 수 있다. 터치 패드에서 생성되는 터치 이벤트는 통신 모듈 210을 통해 전자 장치 100에 제공될 수 있다. 상기 터치 이벤트는 터치 패드를 두드리는 탭 이벤트, 터치 패드의 특정 지점을 터치 다운하는 동작에 대응한 이벤트, 터치 패드 상에서 드래그 동작에 대응한 드래그 이벤트 등을 포함할 수 있다. 다양한 실시 예에 따르면, 터치 패드 형상의 입력 장치 220은 호버링 이벤트 발생을 지원할 수 있다. 상기 터치 패드는 사용자의 손가락 이외에 다양한 터치 수단(예: 전자 펜 등)에 의한 터치 이벤트 발생을 지원할 수 있다.
다양한 실시 예에 따르면, 입력 장치 220은 전자 장치 100의 디스플레이 140에 출력된 화면 제어와 관련된 입력 이벤트를 생성할 수 있다. 예컨대, 입력 장치 220은 전자 장치 100의 디스플레이 140에 출력되는 가상 뷰 포인터의 움직임 제어와 관련된 이벤트, 가상 뷰 포인터가 지시하는 특정 영역을 선택하는 이벤트를 생성할 수 있다. 또는 입력 장치 220은 디스플레이 140에 출력된 컨텐츠를 이동시키거나 복사하거나 제거하는 등의 제어와 관련된 이벤트를 생성할 수 있다. 다양한 실시 예에 따르면, 입력 장치 220은 보안 해제와 관련된 초기화 이벤트를 생성할 수 있다. 입력 장치 220은 보안 해제 정보 입력과 관련된 이벤트를 생성할 수 있다. 입력 장치 220은 보안 해제 이후 제공된 컨텐츠 검색과 관련된 이벤트를 생성할 수 있다.
장착 프레임 제어 모듈 260은 장착 프레임 200의 장치 제어를 수행할 수 있다. 예컨대, 장착 프레임 제어 모듈 260은 입력 장치 220에서 발생하는 입력 이벤트 또는 전자 장치 100의 장착에 대응하여 장착 프레임 200의 초기화를 수행할 수 있다. 이 동작에서 장착 프레임 제어 모듈 260은 통신 모듈 210을 제어하여 전자 장치 100과 통신 채널을 형성하도록 제어할 수 있다. 장착 프레임 제어 모듈 260은 입력 장치 220 또는 센서 모듈 280 중 적어도 하나에서 발생하는 입력 이벤트 또는 센서 신호 중 적어도 하나를 전자 장치 100에 전달하도록 제어할 수 있다.
입력 장치 300은 전자 장치 100의 통신 인터페이스 110을 통해 연결될 수 있다. 입력 장치 300은 전자 장치 100에 탈착 가능하도록 마련될 수 있다. 입력 장치 300은 전자 장치 100의 보안 관련 컨텐츠 출력 제어 또는 보안 관련 입력 이벤트 생성을 지원할 수 있다. 예컨대, 입력 장치 300은 전자 장치 100의 디스플레이 140에 특정 컨텐츠가 출력되고 있는 상태에서 해당 컨텐츠에 적용되는 입력 이벤트 생성을 지원할 수 있다. 한 실시 예에 따르면 입력 장치 300은 시작 키 버튼, 숫자 키 버튼 등을 포함할 수 있다. 입력 장치 300에서 발생한 시작 키 버튼에 해당하는 입력 이벤트는 전자 장치 100의 보안 관련 컨텐츠 출력 또는 보안 해제 정보 입력 초기화에 이용될 수 있다. 입력 장치 300에서 발생한 숫자 키 버튼 선택에 해당하는 입력 이벤트는 보안 해제와 관련된 보안 해제 정보 입력 이벤트로 이용될 수 있다. 입력 장치 300은 터치스크린 또는 터치 패드 중 적어도 하나를 포함할 수 있다. 다양한 실시 예에 따르면, 입력 장치 300은 네비게이션 키를 포함하는 리모트 제어 장치일 수 있다. 입력 장치 300에서 발생한 방향 제어 이벤트는 전자 장치 100의 디스플레이 140에 표시되는 적어도 하나의 가상 뷰 포인터를 이동시키거나 선택하는 이벤트로 작용할 수 있다. 또는 방향 제어 이벤트는 디스플레이 140에 표시되는 적어도 하나의 컨텐츠 지시, 선택, 실행, 이동, 복사, 제거 중 적어도 하나의 동작에 이용될 수 있다.
전자 장치 104는 전자 장치 100의 통신 인터페이스 110과 직접 통신 채널을 형성할 수 있다. 또는 전자 장치 104는 네트워크 162를 통하여 전자 장치 100과 통신 채널을 형성할 수 있다. 예컨대, 전자 장치 104는 셀룰러 통신 모듈을 포함하고, 전자 장치 100과 이동통신 채널을 형성할 수 있다. 또는 전자 장치 104는 와이파이 통신 모듈을 포함하고, 전자 장치 100과 이동통신 채널을 형성할 수 있다. 전자 장치 104는 형성된 통신 채널을 이용하여 전자 장치 100에 적어도 하나의 컨텐츠를 제공할 수 있다. 예컨대, 전자 장치 104는 보안 관련 컨텐츠를 전자 장치 100에 제공할 수 있다. 보안 관련 컨텐츠는 보안 설정 및 보안 해제와 관련된 컨텐츠일 수 있다. 다양한 실시 예에 따르면, 전자 장치 104는 전자 장치 100의 요청에 대응하여 보안 해제 정보를 전자 장치 100에 전달할 수 있다. 전자 장치 104가 전달한 보안 해제 정보는 전자 장치 100에 설정된 보안 설정을 해제하는 정보로 이용될 수 있다. 한 실시 예에 따르면, 전자 장치 100의 가상 현실 기반의 보안 관련 컨텐츠가 출력되고 있는 상태에서, 전자 장치 104는 전자 장치 100에 보안 해제 정보를 제공할 수 있다. 전자 장치 104는 전송한 보안 해제 정보가 유효하지 않은 정보인 경우 그에 대응하는 피드백 정보를 수신할 수 있다.
네트워크 162는 전자 장치 100과 전자 장치 104 사이의 통신 채널을 형성할 수 있다. 네트워크 162는 예컨대 이동통신 채널 형성과 관련된 네트워크 장치 요소들을 포함할 수 있다. 또는 네트워크 162는 인터넷 통신 채널 형성과 관련된 네트워크 장치 요소들을 포함할 수 있다. 네트워크 162는 전자 장치 100의 보안 해제 정보 입력 요청을 전자 장치 100에 전송할 수 있다. 네트워크 162는 전자 장치 104의 보안 해제 정보를 전자 장치 100에 전송할 수 있다. 네트워크 162는 전달된 보안 해제 정보의 인증 결과를 전자 장치 104에 전송할 수 있다.
도 3을 참조하면, 상기 전자 장치 100은 통신 인터페이스 110, 입출력 인터페이스 120, 버스 190, 디스플레이 140, 메모리 150, 프로세서 160, VR(virtual reality) 운용 모듈 170을 포함할 수 있다. 추가적으로 또는 대체적으로 전자 장치 100은 센서 모듈 180을 더 포함할 수 있다. 또한 전자 장치 100은 추가적으로 또는 대체적으로 적어도 하나의 카메라 모듈을 더 포함할 수 있다. 카메라 모듈은 가상 현실 또는 증강 현실 지원과 관련하여 영상을 수집할 수 있다.
상술한 구성의 전자 장치 100은 VR 운용 모듈 170 제어에 따라 보안 관련 컨텐츠를 디스플레이 140에 출력할 수 있다. 전자 장치 100은 통신 인터페이스 110, 입출력 인터페이스 120, 또는 센서 모듈 180 중 적어도 하나를 통해 전달된 보안 해제 정보에 대응하여 보안 관련 컨텐츠에 설정된 보안을 해제할 수 있다. 전자 장치 100은 보안 관련 컨텐츠의 보안이 해제되면 보안 관련 컨텐츠의 출력을 제거하고, 가상 현실 또는 증강 현실과 관련된 컨텐츠를 디스플레이 140에 출력하도록 제어할 수 있다. 다양한 실시 예에 따르면, 전자 장치 100은 장착 프레임 200에 장착된 상태에서 보안 관련 컨텐츠를 디스플레이 140에 출력하고, 통신 인터페이스 110을 통해 장착 프레임 200이 제공하는 입력 이벤트 또는 센서 모듈 180이 제공하는 센서 이벤트 중 적어도 하나의 이벤트에 대응하여 보안 해제를 제어할 수 있다.
상기 통신 인터페이스 110은 상기 전자 장치 100과 외부 장치(예: 장착 프레임 200, 입력 장치 300, 전자 장치 104 또는 서버 장치 106 중 적어도 하나) 간의 통신을 연결할 수 있다. 예를 들면, 상기 통신 인터페이스 110은 무선 통신 또는 유선 통신을 통해서 네트워크 162에 연결되어 상기 외부 장치와 통신할 수 있다. 상기 무선 통신은, 예를 들어, Wifi(wireless fidelity), BT(Bluetooth), NFC(near field communication), GPS(global positioning system) 또는 cellular 통신(예: LTE, LTE-A, CDMA, WCDMA, UMTS, WiBro 또는 GSM 등) 중 적어도 하나를 포함할 수 있다. 상기 유선 통신은, 예를 들어, USB(universal serial bus), HDMI(high definition multimedia interface), RS-232(recommended standard 232) 또는 POTS(plain old telephone service) 중 적어도 하나를 포함할 수 있다.
한 실시예에 따르면, 상기 네트워크 162는 통신 네트워크(telecommunications network)일 수 있다. 상기 통신 네트워크 는 컴퓨터 네트워크(computer network), 인터넷(internet), 사물 인터넷(internet of things) 또는 전화망(telephone network) 중 적어도 하나를 포함할 수 있다. 한 실시예에 따르면, 상기 전자 장치 100과 외부 장치 간의 통신을 위한 프로토콜(예: transport layer protocol, data link layer protocol 또는 physical layer protocol))은 어플리케이션 154, 어플리케이션 프로그래밍 인터페이스 153, 상기 미들웨어 152, 커널 151 또는 통신 인터페이스 110 중 적어도 하나에서 지원될 수 있다.
통신 인터페이스 110은 전자 장치 100이 복수의 통신 방식을 지원하는 경우 복수개의 통신 모듈을 포함할 수 있다. 예컨대, 전자 장치 100은 장착 프레임 200, 입력 장치 300, 또는 전자 장치 104 중 적어도 하나와 직접 통신 채널을 형성할 수 있는 통신 모듈 예컨대, 근거리 통신 모듈 또는 직접 통신 모듈을 포함할 수 있다. 근거리 통신 모듈 또는 직접 통신 모듈은 와이파이 다이렉트 통신 모듈, 블루투스 통신 모듈, 지그비 통신 모듈 등 다양한 통신 모듈 중 적어도 하나를 포함할 수 있다. 또한 직접 통신 모듈은 케이블 등의 유선 통신 모듈을 포함할 수 있다.
한 실시 예에 따르면, 통신 인터페이스 110은 전자 장치 104 또는 서버 장치 106 중 적어도 하나로부터 보안 관련 컨텐츠 또는 보안 해제 정보 중 적어도 하나를 수신할 수 있다. 통신 인터페이스 110은 수신된 보안 관련 컨텐츠 또는 보안 해제 정보를 VR 운용 모듈 170에 전달할 수 있다. 한 실시 예에 따르면, 통신 인터페이스 110은 VR 운용 모듈 170의 제어에 대응하여 보안 해제 여부에 대한 피드백 정보를 전자 장치 104 또는 서버 장치 106 중 적어도 하나에 전송할 수 있다.
상기 입출력 인터페이스 120은, 입출력 장치(예: 센서, 키보드 또는 터치스크린)를 통하여 사용자로부터 입력된 명령 또는 데이터를, 예를 들면, 상기 버스 190을 통해 상기 프로세서 160, 상기 메모리 150, 상기 통신 인터페이스 110, 또는 상기 VR 운용 모듈 170에 전달할 수 있다. 예를 들면, 상기 입출력 인터페이스 120은 터치스크린을 통하여 입력된 사용자의 터치에 대한 데이터를 상기 프로세서 160으로 제공할 수 있다. 또한, 상기 입출력 인터페이스 120은, 예를 들면, 상기 버스 190을 통해 상기 프로세서 160, 상기 메모리 150, 상기 통신 인터페이스 110, 또는 상기 VR 운용 모듈 170으로부터 수신된 명령 또는 데이터를 상기 입출력 장치(예: 스피커 또는 디스플레이)를 통하여 출력할 수 있다. 예를 들면, 상기 입출력 인터페이스 120은 상기 VR 운용 모듈 170 제어에 따라 보안 관련 컨텐츠에 포함된 오디오 데이터를 스피커를 통하여 출력할 수 있다. 또는 입출력 인터페이스 120은 VR 운용 모듈 170에서 처리한 가상 현실 컨텐츠 또는 증강 현실 컨텐츠에 포함된 오디오 데이터를 스피커를 통하여 출력할 수 있다.
다양한 실시 예에 따르면, 입출력 인터페이스 120은 물리 키 버튼(예: 홈 키, 사이드 키, 전원 키 등), 죠그 키, 키패드 등을 포함할 수 있다. 입출력 인터페이스 120은 디스플레이 140에 출력되는 가상 키 패드를 입력 장치로 포함할 수 있다. 입출력 인터페이스 120은 보안 관련 컨텐츠, 가상 현실 또는 증강 현실 컨텐츠 출력 또는 출력 중지, 또는 종료 등과 관련된 입력 신호를 사용자 제어에 대응하여 생성할 수 있다. 예컨대, 입출력 인터페이스 120은
다양한 실시 예에 따르면, 입출력 인터페이스 120은 오디오 처리와 관련된 기능을 수행할 수 있다. 이와 관련하여 입출력 인터페이스 120은 스피커 및 마이크 중 적어도 하나를 단수 개 또는 복수 개 포함할 수 있다. 입출력 인터페이스 120은 예컨대, 보안 관련 컨텐츠가 출력된 상태에서 입력되는 입력 정보에 설정된 안내음이나 효과음 출력을 수행할 수 있다. 입출력 인터페이스 120은 보안 해제 여부를 안내하는 안내음이나 효과음을 출력할 수 있다. 상술한 입출력 인터페이스 120의 안내음이나 효과음 출력은 사용자 설정 또는 전자 장치 100 지원 여부에 대응하여 생략될 수도 있다.
상기 버스 190은 전술한 구성요소들을 서로 연결하고, 전술한 구성요소들 간의 통신(예: 제어 메시지)을 전달하는 회로일 수 있다. 예컨대, 버스 190은 입출력 인터페이스 120 또는 센서 모듈 180 중 적어도 하나에서 입력된 입력 신호 또는 센서 신호를 프로세서 160 또는 VR 운용 모듈 170 중 적어도 하나에 전달할 수 있다. 버스 190은 통신 인터페이스 110을 통해 수신한 보안 관련 컨텐츠 또는 보안 해제 정보 중 적어도 하나를 메모리 150, 디스플레이 140, 프로세서 160, 또는 VR 운용 모듈 170 중 적어도 하나에 전달할 수 있다. 버스 190은 메모리 150에 저장된 보안 관련 컨텐츠 또는 가상 현실 컨텐츠 중 적어도 하나를 VR 운용 모듈 170 제어에 대응하여 디스플레이 140에 전달할 수 있다.
상기 디스플레이 140은 각종 정보(예: 멀티미디어 데이터 또는 텍스트 데이터 등)를 표시할 수 있다. 예컨대, 디스플레이 140은 락 스크린, 대기 화면 등을 출력할 수 있다. 디스플레이 140은 특정 기능 수행 화면 예컨대 음원 재생 앱(application) 실행 화면, 동영상 재생 앱 실행 화면, 방송 수신 화면 등을 기능 수행에 대응하여 출력할 수 있다. 한 실시 예에 따르면, 디스플레이 140은 전자 장치 100이 장착 프레임 200에 장착되는 경우 보안 관련 컨텐츠를 출력할 수 있다. 또는 디스플레이 140은 입출력 인터페이스 120에서의 사용자 입력에 대응하여 보안 관련 컨텐츠를 출력할 수 있다. 디스플레이 140은 보안 관련 컨텐츠가 출력된 상태에서 입력 정보(예: 입출력 인터페이스 120에서 입력된 입력 신호, 센서 모듈 180에서 전달된 센서 신호, 또는 통신 인터페이스 110이 수신한 보안 해제 정보 중 적어도 하나)를 출력할 수 있다.
다양한 실시 예에 따르면, 디스플레이 140은 보안 관련 컨텐츠가 출력된 상태에서 유효한 보안 해제 정보 입력에 대응하여 보안 해제와 관련된 화면을 출력할 수 있다. 디스플레이 140은 보안 해제 시, 설정된 스케줄 정보에 따라 또는 사용자 입력에 따라 선택된 가상 현실 컨텐츠를 출력할 수 있다. 또는 디스플레이 140은 보안 해제 시, 새로운 보안 관련 컨텐츠를 출력할 수 있다. 다양한 실시 예에 따르면, 디스플레이 140에 출력되는 가상 현실 컨텐츠는 적어도 일부가 보안 관련 컨텐츠를 포함할 수 있다. 디스플레이 140은 사용자 입력에 대응하여 또는 설정에 대응하여 가상 현실 컨텐츠 재생 또는 출력을 수행하다가, 보안 관련 컨텐츠가 배치된 영역과 관련하여 유효한 보안 해제 정보가 입력되면 해당 보안 관련 컨텐츠에 의해 보안 설정된 가상 현실 컨텐츠를 출력할 수 있다.
상기 메모리 150은, 상기 프로세서 160 또는 다른 구성요소들(예: 상기 입출력 인터페이스 120, 상기 디스플레이 140, 상기 통신 인터페이스 110, 또는 상기 VR 운용 모듈 170 등)로부터 수신되거나 상기 프로세서 160 또는 다른 구성요소들에 의해 생성된 명령 또는 데이터를 저장할 수 있다. 상기 메모리 150은, 예를 들면, 커널 151, 미들웨어 152, 어플리케이션 프로그래밍 인터페이스(API: application programming interface) 153 또는 어플리케이션 154 등의 프로그래밍 모듈들을 포함할 수 있다. 전술한 각각의 프로그래밍 모듈들은 소프트웨어, 펌웨어, 하드웨어 또는 이들 중 적어도 둘 이상의 조합으로 구성될 수 있다.
상기 커널 151은 나머지 다른 프로그래밍 모듈들, 예를 들면, 상기 미들웨어 152, 상기 API 153 또는 상기 어플리케이션 154에 구현된 동작 또는 기능을 실행하는 데 사용되는 시스템 리소스들(예: 상기 버스 190, 상기 프로세서 160 또는 상기 메모리 150 등)을 제어 또는 관리할 수 있다. 또한, 상기 커널 151은 상기 미들웨어 152, 상기 API 153 또는 상기 어플리케이션 154에서 상기 전자 장치 100의 개별 구성요소에 접근하여 제어 또는 관리할 수 있는 인터페이스를 제공할 수 있다.
상기 미들웨어 152는 상기 API 153 또는 상기 어플리케이션 154가 상기 커널 151과 통신하여 데이터를 주고받을 수 있도록 중개 역할을 수행할 수 있다. 또한, 상기 미들웨어 152는 상기 어플리케이션 154로부터 수신된 작업 요청들과 관련하여, 예를 들면, 상기 어플리케이션 154 중 적어도 하나의 어플리케이션에 상기 전자 장치 100의 시스템 리소스(예: 상기 버스 190, 상기 프로세서 160 또는 상기 메모리 150 등)를 사용할 수 있는 우선 순위를 배정하는 등의 방법을 이용하여 작업 요청에 대한 제어(예: 스케쥴링 또는 로드 밸런싱)을 수행할 수 있다.
상기 API 153은 상기 어플리케이션 154가 상기 커널 151 또는 상기 미들웨어 152에서 제공되는 기능을 제어하기 위한 인터페이스로, 예를 들면, 파일 제어, 창 제어, 화상 처리 또는 문자 제어 등을 위한 적어도 하나의 인터페이스 또는 함수(예: 명령어)를 포함할 수 있다.
다양한 실시예에 따르면, 상기 어플리케이션 154는 SMS/MMS 어플리케이션, 이메일 어플리케이션, 달력 어플리케이션, 알람 어플리케이션, 건강 관리(health care) 어플리케이션(예: 운동량 또는 혈당 등을 측정하는 어플리케이션) 또는 환경 정보 어플리케이션(예: 기압, 습도 또는 온도 정보 등을 제공하는 어플리케이션) 등을 포함할 수 있다. 추가적으로 또는 대체적으로, 상기 어플리케이션 154는 상기 전자 장치 100과 외부 전자 장치(예: 전자 장치 104) 사이의 정보 교환과 관련된 어플리케이션일 수 있다. 상기 정보 교환과 관련된 어플리케이션은, 예를 들어, 상기 외부 전자 장치에 특정 정보를 전달하기 위한 알림 전달(notification relay) 어플리케이션, 또는 상기 외부 전자 장치를 관리하기 위한 장치 관리(device management) 어플리케이션을 포함할 수 있다.
예를 들면, 상기 알림 전달 어플리케이션은 상기 전자 장치 100 의 다른 어플리케이션(예: SMS/MMS 어플리케이션, 이메일 어플리케이션, 건강 관리 어플리케이션 또는 환경 정보 어플리케이션 등)에서 발생한 알림 정보를 외부 전자 장치(예: 전자 장치 104)로 전달하는 기능을 포함할 수 있다. 추가적으로 또는 대체적으로, 상기 알림 전달 어플리케이션은, 예를 들면, 외부 전자 장치(예: 전자 장치 104)로부터 알림 정보를 수신하여 사용자에게 제공할 수 있다. 상기 장치 관리 어플리케이션은, 예를 들면, 상기 전자 장치 100과 통신하는 외부 전자 장치(예: 전자 장치 104)의 적어도 일부에 대한 기능(예: 외부 전자 장치 자체(또는, 일부 구성 부품)의 턴온/턴오프 또는 디스플레이의 밝기(또는, 해상도) 조절), 상기 외부 전자 장치에서 동작하는 어플리케이션 또는 상기 외부 전자 장치에서 제공되는 서비스(예: 통화 서비스 또는 메시지 서비스)를 관리(예: 설치, 삭제 또는 업데이트)할 수 있다.
다양한 실시예에 따르면, 상기 어플리케이션 154는 상기 외부 전자 장치(예: 전자 장치 104)의 속성(예: 전자 장치의 종류)에 따라 지정된 어플리케이션을 포함할 수 있다. 예를 들어, 외부 전자 장치가 MP3 플레이어인 경우, 상기 어플리케이션 154는 음악 재생과 관련된 어플리케이션을 포함할 수 있다. 유사하게, 외부 전자 장치가 모바일 의료기기인 경우, 상기 어플리케이션 154는 건강 관리와 관련된 어플리케이션을 포함할 수 있다. 한 실시예에 따르면, 상기 어플리케이션 154는 전자 장치 100에 지정된 어플리케이션 또는 외부 전자 장치(예: 서버 장치 106 또는 전자 장치 104)로부터 수신된 어플리케이션 중 적어도 하나를 포함할 수 있다.
다양한 실시 예에 따르면, 메모리 150은 보안 관련 컨텐츠, 가상 현실 컨텐츠(또는 증강 현실 컨텐츠), 보안 관련 컨텐츠를 포함하는 가상 현실 컨텐츠를 저장할 수 있다. 메모리 150은 가상 현실 컨텐츠 재생 어플리케이션을 저장할 수 있다. 메모리 150은 보안 설정 정보 151을 저장할 수 있다. 가상 현실 컨텐츠 재생 어플리케이션은 사용자 제어에 대응하여 활성화되거나 또는 장착 프레임 200에 전자 장치 100이 장착되는 경우 자동으로 활성화될 수 있다. 가상 현실 컨텐츠 재생 어플리케이션은 메모리 150에 저장된 적어도 하나의 가상 현실 컨텐츠를 선택할 수 있는 메뉴 기능, 선택된 가상 현실 컨텐츠의 출력 제어와 관련된 화면 제공 기능을 지원할 수 있다. 가상 현실 컨텐츠 재생 어플리케이션은 적어도 하나의 보안 관련 컨텐츠 선택 지원 기능, 선택된 보안 관련 컨텐츠의 보안 설정과 관련된 기능을 지원할 수 있다. 가상 현실 컨텐츠 재생 어플리케이션 기반으로 설정된 보안 설정 정보 151은 메모리 150에 저장될 수 있다.
보안 설정 정보 151은 특정 보안 관련 컨텐츠의 보안 설정과 관련된 정보일 수 있다. 예컨대, 보안 설정 정보 151은 특정 보안 관련 컨텐츠의 보안 해제와 관련된 숫자 정보나 문자 정보를 포함할 수 있다. 또는 보안 설정 정보 151은 특정 보안 관련 컨텐츠의 보안 해제와 관련된 다양한 컨텐츠 운용 정보 또는 컨텐츠 제어 정보를 포함할 수 있다. 보안 설정 정보 151은 사용자 제어에 대응하여 새로 생성되거나, 생성된 정보가 갱신되거나 또는 폐기될 수 있다.
센서 모듈 180은 적어도 하나의 센서(예: 자이로 센서, 근접 센서, 가속도 센서, 포토 센서, 지자기 센서 중 적어도 하나)를 이용한 센서 신호 생성을 수행할 수 있다. 센서 모듈 180은 생성된 센서 신호를 프로세서 160 또는 VR 운용 모듈 170에 제공할 수 있다. 다양한 실시 예에 따르면, 센서 모듈 180은 가상 현실 컨텐츠 재생이 요청되거나, 전자 장치 100이 장착 프레임 200에 장착되는 경우 자동으로 활성화될 수 있다. 센서 모듈 180은 장착 프레임 200에 탑재된 후, 장착 프레임 200의 움직임에 대응하는 센서 신호를 수집하고 이를 프로세서 160 또는 VR 운용 모듈 170 중 적어도 하나에 전달할 수 있다. 전자 장치 100이 장착 프레임 200으로부터 장착 해제되거나, 가상 현실 컨텐츠 어플리케이션이 종료되는 경우 센서 모듈 180은 자동으로 비활성화될 수 있다. 다양한 실시 예에 따르면, 센서 모듈 180은 입력 장치 300, 입력 장치 220 중 적어도 하나에서 생성된 입력 신호에 대응하여 활성화 또는 비활성화가 제어될 수 있다.
상기 프로세서 160은, 예를 들면, 상기 버스 190을 통해 전술한 다른 구성요소들(예: 상기 메모리 150, 상기 입출력 인터페이스 120, 상기 디스플레이 140, 상기 통신 인터페이스 110, 또는 상기 VR 운용 모듈 170 등)로부터 명령을 수신하여, 수신된 명령을 해독하고, 해독된 명령에 따른 연산이나 데이터 처리를 실행할 수 있다. 이러한 프로세서 160은 VR 운용 모듈 170을 포함하는 형태로 마련되거나 또는 VR 운용 모듈 170과 독립적인 형태로 마련되고, 버스 190을 기반으로 또는 직접적으로 통신을 수행하는 형태로 마련될 수 있다.
상기 VR 운용 모듈 170은, 다른 구성요소들(예: 상기 프로세서 160, 상기 메모리 150, 상기 입출력 인터페이스 120, 또는 상기 통신 인터페이스 110 등)로부터 획득된 정보 중 적어도 일부를 처리하고, 이를 다양한 방법으로 사용자에게 제공 할 수 있다. 예를 들면, VR 운용 모듈 170은 사용자 입력에 대응하여 또는 전자 장치 100의 장착 프레임 200 탑재에 대응하여 보안 관련 컨텐츠의 출력 제어를 수행할 수 있다. VR 운용 모듈 170은 보안 관련 컨텐츠가 출력된 상태에서 입력되는 보안 해제 정보와 메모리 150에 저장된 보안 설정 정보 151을 상호 비교하여, 보안 해제 정보의 인증 여부를 확인할 수 있다. VR 운용 모듈 170은 보안 해제 정보가 유효한 경우, 보안 관련 컨텐츠에 의한 보안 설정을 해제할 수 있다. 이 동작에서 VR 운용 모듈 170은 새로운 보안 관련 컨텐츠를 출력하거나 또는 특정 가상 현실 컨텐츠를 출력하도록 제어할 수 있다.
도 4는 다양한 실시 예에 따른 VR 운용 모듈을 도시한다.
도 4를 참조하면, VR 운용 모듈 170은 센서 신호 수집 모듈 171, VR 처리 모듈 173, 보안 처리 모듈 175, 입력 신호 수집 모듈 177을 포함할 수 있다.
센서 신호 수집 모듈 171은 센서 모듈 180에서 발생한 센서 신호를 수신할 수 있다. 또는 센서 신호 수집 모듈 171은 장착 프레임 200에 마련된 센서 모듈 280이 제공한 센서 신호를 통신 인터페이스 110을 통하여 수신할 수 있다. 센서 신호 수집 모듈 171은 수집된 센서 신호를 분석하여 장착 프레임 200 또는 장착 프레임 200에 장착된 전자 장치 100의 움직임 방향과 거리 정보를 획득할 수 있다. 센서 신호 수집 모듈 171은 획득된 방향과 거리 정보를 VR 처리 모듈 173에 전달할 수 있다.
VR 처리 모듈 173은 전자 장치 100의 가상 현실 컨텐츠(또는 증강 현실 컨텐츠) 처리를 지원할 수 있다. 예컨대, VR 처리 모듈 173은 가상 현실 컨텐츠 어플리케이션이 활성화되면 사용자 입력에 대응하여 보안 관련 컨텐츠 또는 가상 현실 컨텐츠 중 적어도 하나의 영상 처리를 제어할 수 있다. 한 실시 예에 따르면, VR 처리 모듈 173은 디스플레이 140 영역을 복수개의 영역으로 가상 분할하고, 분할된 각 영역에 가상 현실 컨텐츠에 해당하는 영상을 분할하여 출력하도록 처리할 수 있다. 한 실시 예에 따르면, VR 처리 모듈 173은 VR 운용 모듈 170의 요청에 대응하여 특정 보안 관련 컨텐츠에 대한 영상 처리를 수행하고, 영상 처리된 데이터를 디스플레이 140에 출력하도록 제어할 수 있다. 예컨대, 가상 현실 컨텐츠에서와 같이 VR 처리 모듈 173은 보안 관련 컨텐츠를 복수개의 분할된 디스플레이 140 영역에 동시에 또는 순차 또는 교번되게 출력하도록 제어할 수 있다. VR 처리 모듈 173은 입출력 인터페이스 120 또는 센서 모듈 180에서의 신호에 대응하여 해당 컨텐츠의 변경 예컨대 줌인 또는 줌아웃 영상 처리를 지원할 수 있다.
다양한 실시 예에 따르면, VR 처리 모듈 173은 보안 관련 컨텐츠 또는 가상 현실 컨텐츠를 디스플레이 140에 출력하고 있는 상태에서 뷰 포트 처리 또는 뷰 포인터 처리를 수행할 수 있다. 뷰 포트는 전체 화면 영역 중 디스플레이 140에 표시된 영역을 포함할 수 있다. 또는 뷰 포트는 디스플레이 140에 표시된 영역 중 일부 영역을 포함할 수 있다. 뷰 포인터는 디스플레이 140 상에 특정 지점을 지시하거나 오브젝트를 선택하는 가상 뷰 포인터(예: 화살표, 하이라이트 박스 등)일 수 있다.
뷰 포트 처리와 관련하여, VR 처리 모듈 173은 센서 신호로부터 수신한 방향 정보 또는 거리 정보 중 적어도 하나에 대응하여 뷰 포트의 이동 및 그에 따른 화면 변환을 제어할 수 있다. 이와 유사한 방식으로 VR 처리 모듈 173은 센서 신호로부터 수신한 방향 정보 또는 거리 정보 중 적어도 하나에 대응하여 뷰 포인터의 이동 표시를 제어할 수 있다.
다양한 실시 예에 따르면, VR 처리 모듈 173은 가상 현실 컨텐츠 또는 보안 관련 컨텐츠의 종류나 특성에 따라 전체 화면 영역(예: 디스플레이 140에 표시된 일부 화면 및 일부 화면과 연이어진 전체 화면)을 정의하고 이를 메모리 150에 저장할 수 있다. VR 처리 모듈 173은 센서 신호 수집 모듈 171이 전달한 방향 정보 또는 거리 정보 중 적어도 하나에 대응하여 전체 화면 영역에서의 뷰 포트 영역을 변경할 수 있다. VR 처리 모듈 173은 전체 화면 영역 중 뷰 포트에 의해 지정된 영역과 관련하여 줌 인 기능을 실행하거나 또는 해당 뷰 포트에 의해 지정된 영역에 할당된 특정 링크 기능(예: 뷰 포트 영역에 배치된 컨텐츠 재생 기능, 뷰 포트 영역에 배치된 링크로 이동하는 기능 등)을 실행하도록 제어할 수 있다. 다양한 실시 예에 따르면, VR 처리 모듈 173은 센서 신호 수집 모듈 171이 전달한 방향 정보 또는 거리 정보 중 적어도 하나에 대응하여 뷰 포트 영역 내에서의 뷰 포인터 이동을 제어할 수 있다. 이와 관련하여, VR 처리 모듈 173은 컨텐츠의 전체 화면이 뷰 포트 영역으로 고정된 경우, 움직임 방향 정보 또는 거리 정보에 대응하여 뷰 포인터를 뷰 포트 영역 내에서 이동 표시할 수 있다.
다양한 실시 예에 따르면, 입출력 인터페이스 120이 전달한 입력 신호 또는 장착 프레임 200에 마련된 입력 장치 220이 전달한 입력 신호 또는 입력 장치 300이 전달한 입력 신호 중 적어도 하나에 따라 VR 처리 모듈 173은 전체 화면 영역에서 뷰 포트 영역을 일시적으로 또는 반 영구적으로 고정시킬 수 있다. 이후 VR 처리 모듈 173은 방향 정보 또는 거리 정보 중 적어도 하나에 대응하여 뷰 포인터를 뷰 포트 영역 내에서 이동 시킬 수 있다. 다양한 실시 예에 따르면, VR 처리 모듈 173은 입력 신호가 유지된 상태에서는 방향 정보 또는 거리 정보 중 적어도 하나에 대응하여 뷰 포인터를 이동시키고, 입력 신호가 해제되면 방향 정보 또는 거리 정보 중 적어도 하나에 대응하여 뷰 포트를 이동시키도록 제어할 수도 있다.
다양한 실시 예에 따르면, VR 처리 모듈 173은 뷰 포인터에 의해 지시되거나 선택된 영역에 배치된 오브젝트와 관련된 기능을 실행하거나, 오브젝트의 표시 변경(예: 컨텐츠를 확대하거나 축소 표시)을 제어할 수 있다. 또는 VR 처리 모듈 173은 뷰 포인터에 의해 선택된 오브젝트를 방향 정보 또는 거리 정보에 대응하여 이동, 복사, 또는 제거 중 적어도 하나를 수행할 수 있다.
다양한 실시 예에 따르면, VR 처리 모듈 173은 보안 관련 컨텐츠가 출력된 환경에서 뷰 포트 또는 뷰 포인터 중 적어도 하나에 의해 지시된 오브젝트와 관련된 정보 또는 화면 영역과 관련된 화면 정보(예: 전체 화면 영역에서 뷰 포트가 위치한 위치 정보, 뷰 포트의 이동 경로, 뷰 포인터에 의해 지시되거나 선택된 위치 정보, 뷰 포인터의 이동 정보, 뷰 포인터에 의해 선택된 오브젝트와 관련된 정보)를 보안 처리 모듈 175에 전달할 수 있다. VR 처리 모듈 173은 보안 처리 모듈 175로부터 보안 해제 요청을 수신하면, 보안 관련 컨텐츠의 표시를 중지하고, 스케줄 정보에 따른 또는 사용자 입력에 따른 가상 현실 컨텐츠를 출력할 수 있다.
다양한 실시 예에 따르면, VR 처리 모듈 173은 보안 관련 오브젝트가 일부 포함된 가상 현실 컨텐츠를 디스플레이 140에 출력하도록 제어할 수 있다. VR 처리 모듈 173은 뷰 포트가 보안 관련 오브젝트가 배치된 영역 이외의 영역에 배치되면 해당 가상 현실 컨텐츠 재생 기능 또는 가상 현실 컨텐츠 기능 실행을 지원할 수 있다. 또는 VR 처리 모듈 173은 뷰 포인터에 의해 보안 관련 오브젝트가 지시 또는 선택되기 이전까지 가상 현실 컨텐츠 관련 기능을 지원할 수 있다.
보안 처리 모듈 175는 보안 관련 컨텐츠가 디스플레이 140에 출력되고 있는 상태에서, VR 처리 모듈 173으로부터 적어도 하나의 오브젝트와 관련된 정보를 포함하는 화면 정보를 수신할 수 있다. 또는 보안 처리 모듈 175는 보안 관련 오브젝트가 포함된 가상 현실 컨텐츠가 디스플레이 140에 출력되고 있는 상태에서 VR 처리 모듈 173으로부터 화면 정보를 수신할 수 있다. 보안 처리 모듈 175는 수신된 화면 정보와 메모리 150에 저장된 보안 설정 정보 151을 비교하고, 수신된 화면 정보가 유효한 경우(예: 화면 정보가 보안 설정 정보 151과 일치하는 경우) 보안 설정을 해제할 수 있다. 보안 처리 모듈 175는 보안 설정 해제와 관련된 메시지 또는 명령어를 VR 처리 모듈 173에 전달할 수 있다.
다양한 실시 예에 따르면, 보안 처리 모듈 175는 장착 프레임 200 또는 입력 장치 300, 입출력 인터페이스 120, 타 전자 장치(예: 전자 장치 104 등) 중 적어도 하나로부터 보안 해제 정보를 수신할 수 있다. 여기서 보안 해제 정보는 예컨대, 입력 장치 300 또는 입출력 인터페이스 120 등으로부터 수신된 특정 숫자 정보나 문자 정보를 포함할 수 있다. 또한 보안 해제 정보는 타 전자 장치가 전송한 숫자 정보나 문자 정보를 포함할 수 있다. 다양한 실시 예에 따르면, 보안 해제 정보는 장착 프레임 200의 특정 움직임(예: 장착 프레임 200을 착용한 사용자의 머리 제스처) 정보를 포함할 수 있다. 보안 처리 모듈 175는 수신된 보안 해제 정보와 보안 설정 정보 151을 비교하고, 보안 해제 정보가 유효한 경우, 보안 설정 해제와 관련된 메시지 또는 명령어를 VR 처리 모듈 173에 전달할 수 있다.
입력 신호 수집 모듈 177은 입력 장치 300, 입출력 인터페이스 120, 장착 프레임 200의 입력 장치 220으로부터 전달된 입력 신호를 수집할 수 있다. 입력 신호 수집 모듈 177은 전달된 입력 신호를 상황에 따라 VR 처리 모듈 173 또는 보안 처리 모듈 175에 전달할 수 있다. 예컨대, 입력 신호 수집 모듈 177은 가상 현실 컨텐츠를 출력하고 있는 상태에서 입력 신호가 수신되면, 해당 입력 신호를 VR 처리 모듈 173에 전달할 수 있다. 또는 입력 신호 수집 모듈 177은 보안 관련 컨텐츠를 출력하고 있는 상태에서 입력 신호가 수신되면, 해당 입력 신호를 보안 처리 모듈 175 또는 VR 처리 모듈 173 중 적어도 하나에 전달할 수 있다. 보안 관련 오브젝트가 포함된 가상 현실 컨텐츠가 출력되고 있는 상태에서 입력 신호가 수신되면, 뷰 포트 또는 뷰 포인터 중 적어도 하나가 보안 관련 오브젝트를 지시하거나 선택하는 경우 해당 입력 신호를 보안 처리 모듈 175에 전달할 수 있다. 또는 VR 처리 모듈 173은 보안 관련 오브젝트 이외의 영역을 뷰 포트가 출력하고 있거나, 뷰 포인터가 지시하거나 선택하는 경우 입력 신호를 VR 처리 모듈 173에 전달할 수 있다.
다양한 실시 예에 따르면, 입력 신호 수집 모듈 177이 수신한 입력 신호는 보안 설정 정보 151과 비교되는 보안 해제 정보일 수 있다. 또한 입력 신호 수집 모듈 177이 수신한 입력 신호는 보안 설정 정보 151과 비교되는 보안 해제 정보의 일부 일 수 있다. 예컨대, 보안 처리 모듈 175는 VR 처리 모듈 173이 전달한 화면 정보 및 입력 신호 수집 모듈 177이 전달한 입력 신호를 복합적으로 보안 설정 정보 151과 비교할 수 있다. 다양한 실시 예에 따르면, 입력 신호 수집 모듈 177이 제공한 입력 신호는 보안 관련하여 화면 정보를 수집하는 초기화 신호로 이용될 수 있다. 또한, 입력 신호 수집 모듈 177이 제공한 입력 신호는 보안 관련하여 화면 정보 수집을 종료하는 신호로 이용될 수 있다.
다양한 실시 예에 따르면, 한 실시 예에 따른 전자 장치는 보안 해제를 위한 보안 관련 컨텐츠를 출력하는 디스플레이, 상기 디스플레이와 관련된 센서 신호 또는 입력 신호 중 적어도 하나가 수신되면, 상기 보안 관련 컨텐츠 상에서 수신된 상기 센서 신호 또는 입력 신호와 연관된 오브젝트를 수집하고, 상기 오브젝트와 관련된 정보와 지정된 보안 설정 정보를 비교하여 상기 보안 관련 컨텐츠에 설정된 보안 해제 여부를 결정하는 VR 운용 모듈을 포함할 수 있다.
다양한 실시 예에 따르면, 상기 VR 운용 모듈은 상기 보안 관련 컨텐츠를 출력하는 전자 장치가 장착된 장착 프레임의 움직임과 관련된 센서 신호, 상기 장착 프레임에 마련된 입력 장치, 상기 전자 장치에 마련된 입력 장치, 상기 전자 장치와 통신 가능한 입력 장치 중 적어도 하나의 입력 장치로부터 수신된 입력 신호를 수신할 수 있다.
다양한 실시 예에 따르면, 상기 VR 운용 모듈은 상기 보안 관련 컨텐츠의 적어도 일부 영역을 표시하는 뷰 포트 내에 지정된 적어도 하나의 오브젝트가 있는지 확인하거나, 지정된 적어도 하나의 오브젝트가 상기 뷰 포트에 의해 지정된 시간 동안 지시되는지 확인하거나, 지정된 적어도 하나의 오브젝트가 상기 뷰 포트 내에 지정된 위치에 배치되는지 확인할 수 있다.
다양한 실시 예에 따르면, 상기 VR 운용 모듈은 상기 보안 관련 컨텐츠의 적어도 일부 영역을 표시하는 뷰 포트와 관련된 뷰 포트 관련 정보, 상기 뷰 포트 내에 일정 지점을 지시하는 뷰 포인터와 관련된 뷰 포인터 관련 정보 중 적어도 하나의 수집이 설정될 수 있다.
다양한 실시 예에 따르면, 상기 VR 운용 모듈은 상기 입력 신호에 의해 상기 보안 관련 컨텐츠에 해당하는 화면 영역 중 일부 화면 영역을 표시하는 뷰 포트를 고정하고 상기 뷰 포트 내에 가상 뷰 포인터가 지시하거나 선택하는 오브젝트와 관련된 정보 수집이 설정될 수 있다.
다양한 실시 예에 따르면, 상기 VR 운용 모듈은 상기 보안 관련 컨텐츠에 포함된 적어도 하나의 오브젝트를 가상 뷰 포인터가 지시한 상태에서 지정된 입력 신호 발생에 대응하여 상기 지시된 상기 오브젝트와 관련된 정보 수집이 설정될 수 있다.
다양한 실시 예에 따르면, 상기 VR 운용 모듈은 지정된 입력 신호가 입력되면 보안 관련 정보 수집을 초기화하거나, 보안 관련 정보 수집을 종료하도록 설정될 수 있다.
다양한 실시 예에 따르면, 상기 VR 운용 모듈은 지정된 입력 신호가 유지되는 동안 상기 보안 관련 컨텐츠에 해당하는 화면 영역 중 뷰 포트에 의해 표시된 영역의 화면 정보의 수집, 입력 신호들이 입력된 시간 차 동안 상기 보안 관련 컨텐츠에 해당하는 화면 영역 중 뷰 포트에 의해 표시된 영역의 화면 정보 수집, 지정된 입력 신호가 유지되는 동안 뷰 포인터에 의해 선택된 적어도 하나의 오브젝트와 관련된 정보 수집, 입력 신호들이 입력된 시간 차 동안 상기 보안 관련 컨텐츠에 해당하는 화면 영역 중 뷰 포인터에 의해 선택된 오브젝트와 관련된 정보 수집 중 적어도 하나가 설정될 수 있다.
다양한 실시 예에 따르면, 상기 VR 운용 모듈은 상기 보안 관련 컨텐츠에 포함된 적어도 하나의 오브젝트를 선택되면, 상기 센서 신호 또는 입력 신호 중 적어도 하나에 대응하여 상기 적어도 하나의 오브젝트를 변경하고, 상기 변경된 오브젝트와 관련된 정보 수집이 설정될 수 있다.
다양한 실시 예에 따르면, 상기 VR 운용 모듈은 상기 보안 관련 컨텐츠에 포함된 이동 오브젝트와 관련하여 상기 보안 관련 컨텐츠의 일부 영역을 표시하는 뷰 포트 이동 관련 정보 수집이 설정될 수 있다.
다양한 실시 예에 따르면, 상기 VR 운용 모듈은 상기 보안 해제 시 새로운 보안 관련 컨텐츠, 보안 관련 오브젝트가 포함된 가상 현실 컨텐츠, 또는 가상 현실 컨텐츠 중 어느 하나의 출력 제어가 설정될 수 있다.
다양한 실시 예에 따르면, 상기 VR 운용 모듈은 상기 보안 관련 컨텐츠를 가상 현실 기반으로 출력하도록 설정될 수 있다.
도 5는 다양한 실시 예에 따른 뷰 화면 기반 보안 운용 방법을 도시한다.
도 5를 참조하면, 다양한 실시 예에 따르면, 뷰 화면 기반 보안 운용 방법은 동작 501에서 예컨대, VR 운용 모듈 170이 설정된 스케줄 정보 또는 사용자 입력에 대응하여 특정 기능 운용 또는 기능 대기를 수행할 수 있다. 예컨대, VR 운용 모듈 170은 스케줄 정보 또는 사용자 입력에 대응하여 락 스크린 출력 기능, 음원 재생 기능, 웹 접속 기능, 날씨 정보 제공 기능 등을 수행할 수 있다. 또는 VR 운용 모듈 170은 스케줄 정보 또는 사용자 입력이 없는 경우 슬립 모드(예: 디스플레이 140이 턴-오프된 상태) 상태를 유지하도록 제어하거나, 이전 실행 중인 기능을 유지하도록 제어할 수 있다. 이 동작에서 VR 운용 모듈 170은 VR 관련 기능(가상 현실 컨텐츠 출력 기능 또는 가상 현실 기반의 보안 관련 컨텐츠 출력 기능)을 선택할 수 있는 아이콘이나 메뉴 항목을 출력할 수 있다. 또는 VR 운용 모듈 170은 장착 프레임 200과의 기능 연동 설정 항목을 제공할 수 있다.
동작 503에서, VR 운용 모듈 170은 VR 기능 활성화와 관련된 이벤트 발생이 있는지 확인할 수 있다. 예컨대, VR 운용 모듈 170은 VR 기능 관련된 메뉴 항목이나 아이콘 선택과 관련된 이벤트 발생이 있는지 확인할 수 있다. 또는 VR 운용 모듈 170은 전자 장치 100을 장착 프레임 200에 장착한 상태인지 여부를 확인할 수 있다. 또는 VR 운용 모듈 170은 가상 현실 컨텐츠 또는 가상 현실 기반의 보안 관련 컨텐츠 재생과 관련된 이벤트 발생이 있는지 확인할 수 있다.
VR 기능 활성화와 관련된 이벤트 발생이 없으면, 동작 505에서 VR 운용 모듈 170은 발생한 이벤트의 종류에 대응하는 기능 수행을 제어할 수 있다. 또는 별도의 이벤트 발생이 없으면, VR 운용 모듈 170은 이전 기능 운용 상태 또는 기능 대기 상태를 유지하도록 제어하거나, 지정된 시간 경과에 대응하여 슬립 모드(예: 디스플레이 140이 꺼진 상태)로 천이되도록 제어할 수 있다.
VR 기능 활성화와 관련된 이벤트가 발생하면, 동작 507에서 VR 운용 모듈 170은 VR 보안 영상(또는 보안 관련 컨텐츠) 출력을 제어할 수 있다. 이 동작에서 VR 운용 모듈 170은 보안 영상 출력을 기본(Default)으로 출력할 수 있다. 또는 VR 운용 모듈 170은 가상 현실 컨텐츠를 출력하고, 보안 관련 오브젝트를 지시하거나 선택하는 이벤트가 발생하면, 보안 관련 영상을 출력하도록 제어할 수 있다. 한 실시 예에 따르면, VR 보안 영상 출력과 관련하여, VR 운용 모듈 170은 장착 프레임 200에 대응되도록 보안 영상을 화면 분할된 디스플레이 140에 출력할 수 있다. 보안 관련 영상은 다양한 형태 예컨대, 숫자들이 배열된 이미지, 문자들이 배열된 이미지, 적어도 하나의 특정 형상을 가지는 오브젝트가 배치된 이미지, 적어도 일부가 움직임을 가지거나 입력 신호나 센서 신호에 대응하여 움직이는 오브젝트가 배치된 이미지 중 적어도 하나를 포함할 수 있다.
동작 509에서, VR 운용 모듈 170은 센서 신호에 따른 뷰 포인터 또는 뷰 포트 중 적어도 하나를 수집할 수 있다. 한 실시 예에 따르면, VR 운용 모듈 170은 보안 관련 영상이 디스플레이 140의 화면 크기에 대응하는 크기인 경우 뷰 포트를 고정하도록 제어할 수 있다. VR 운용 모듈 170은 뷰 포인터를 디스플레이 140에 출력하고, 센서 모듈 180으로부터 전달된 움직임 방향 정보 또는 움직임 거리 정보 중 적어도 하나에 대응하여 뷰 포인터의 이동 표시를 제어할 수 있다. VR 운용 모듈 170은 뷰 포인터의 이동 경로 정보, 뷰 포인터의 위치 정보, 뷰 포인터가 선택 또는 지시하는 오브젝트와 관련된 정보를 포함하는 뷰 포인터 관련 정보를 수집할 수 있다.
다양한 실시 예에 따르면, VR 운용 모듈 170은 디스플레이 140에 표시된 컨텐츠의 전체 화면 영역이 디스플레이 140의 크기보다 큰 경우 전체 화면 영역에서의 뷰 포트 위치 정보를 수집할 수 있다. 여기서 VR 운용 모듈 170은 움직임에 따른 방향 정보 또는 거리 정보 중 적어도 하나에 대응하여 뷰 포트를 이동시킬 수 있다. VR 운용 모듈 170은 뷰 포트 관련 정보를 수집할 수 있다. 뷰 포트 관련 정보는 보안 관련 컨텐츠 또는 가상 현실 컨텐츠에 포함된 적어도 하나의 오브젝트와 관련된 정보를 포함할 수 있다. 예컨대, 뷰 포트 관련 정보는 뷰 포트가 지정된 시간 이상 고정된 지점의 위치 정보, 뷰 포트의 이동 경로 정보, 또는 뷰 포트에 포함된 적어도 하나의 오브젝트 중 적어도 하나를 포함할 수 있다. 다양한 실시 예에 따르면, VR 운용 모듈 170은 지정된 입력 신호가 수신된 이후 뷰 포트 관련 정보를 수집하도록 제어할 수 있다. 또한 VR 운용 모듈 170은 지정된 입력 신호가 수신되면 뷰 포트 관련 정보 수집을 중지하도록 제어할 수 있다.
다양한 실시 예에 따르면, VR 운용 모듈 170은 특정 입력 신호가 수신되면, 전체 화면 영역에서 현재 뷰 포트 영역을 일시 또는 반영구적으로 고정할 수 있다. VR 운용 모듈 170은 일시 고정된 뷰 포트 영역 내에 배치된 적어도 하나의 오브젝트와 관련된 정보 예컨대 뷰 포인터 관련 정보를 수집할 수 있다. 다양한 실시 예에 따르면, VR 운용 모듈 170은 지정된 입력 신호가 수신되면 뷰 포인터 관련 정보 수집을 중지할 수 있다.
동작 511에서, VR 운용 모듈 170은 수집된 뷰 포인터/뷰 포트 인증을 수행할 수 있다. 예컨대, VR 운용 모듈 170은 수집된 뷰 포인터 관련 정보 또는 뷰 포트 관련 정보 중 적어도 하나를 보안 설정 정보 151과 비교할 수 있다. 이와 관련하여, 사용자는 특정 보안 관련 컨텐츠에 대한 보안 설정 정보 151 생성 또는 변경을 수행할 수 있다. 전자 장치 100은 보안 설정 정보 151 생성 또는 변경과 관련된 화면 인터페이스를 제공할 수 있다. 사용자는 보안 설정 정보 151 생성 또는 변경 화면에서 특정 보안 관련 컨텐츠에 적용할 보안 설정 정보 151을 생성하거나 변경할 수 있다. 보안 설정 정보 151 생성 또는 변경과 관련된 화면 인터페이스는 전자 장치 100의 디스플레이 140에 표시되고, 입출력 인터페이스 120에서 입력된 정보로 정의될 수 있다. 또는 보안 설정 정보 151 생성 또는 변경과 관련된 화면 인터페이스는 장착 프레임 200 기반으로 제공될 수 있다. 이와 관련하여, 장착 프레임 200에 장착된 전자 장치 100은 특정 보안 관련 컨텐츠의 보안 설정 정보 151 생성 또는 변경과 관련된 메뉴 항목이나 메뉴 아이템을 제공할 수 있다.
동작 513에서, VR 운용 모듈 170은 인증 결과가 유효한지 여부를 확인할 수 있다. 예컨대, VR 운용 모듈 170은 뷰 포인터 관련 정보 또는 뷰 포트 관련 정보 중 적어도 하나를 포함하는 화면 정보 또는 보안 해제 정보가 보안 설정 정보 151과 동일한 경우 유효한 정보 입력으로 판단할 수 있다.
이 동작에서 인증 결과가 유효하지 않은 경우, 동작 515에서 VR 운용 모듈 170은 가이드 정보 출력을 제어할 수 있다. 예컨대, VR 운용 모듈 170은 정보 입력 오류를 알리는 메시지 출력을 제어할 수 있다. 또는 VR 운용 모듈 170은 정보 입력 오류를 알리는 메시지를 보안 해제 정보를 전송한 타 전자 장치에 전송할 수 있다. VR 운용 모듈 170은 입력 장치 300을 통해 적어도 일부 보안 해제 정보가 입력되는 경우 입력 장치 300에 정보 입력 오류에 대응하는 패턴의 진동 메시지를 전송할 수 있다. 입력 장치 300은 수신된 진동 메시지에 대응하는 진동을 수행할 수 있다. 다양한 실시 예에 따르면, 진동 메시지는 장착 프레임 200에 전달될 수도 있으며, 장착 프레임 200은 내장된 진동 모듈을 기반으로 진동 메시지에 대응하는 진동을 발생시킬 수 있다. 이와 관련하여, 장착 프레임 200은 진동 모듈을 더 포함할 수 있다.
인증 결과가 유효한 경우, 동작 517에서 VR 운용 모듈 170은 VR 보안 해제 및 VR 기능 지원을 수행할 수 있다. 예컨대, VR 운용 모듈 170은 보안 관련 컨텐츠에 대응하는 화면 표시를 중지하고 스케줄 정보에 따른 또는 사용자 입력에 따른 가상 현실 컨텐츠를 디스플레이 140에 표시하도록 제어할 수 있다. 다양한 실시 예에 따르면, VR 운용 모듈 170은 설정에 대응하여 새로운 보안 관련 컨텐츠를 디스플레이 140에 출력하도록 제어할 수 있다. 다양한 실시 예에 따르면, VR 운용 모듈 170은 보안 관련 오브젝트가 포함된 가상 현실 컨텐츠를 출력하도록 제어할 수 있다.
동작 519에서 VR 운용 모듈 170은 기능 종료와 관련된 이벤트가 발생하는지 확인할 수 있다. VR 운용 모듈 170은 기능 종료와 관련된 이벤트가 발생한 경우 VR 기능을 종료하도록 제어할 수 있다. VR 운용 모듈 170은 VR 기능 종료에 대응하여 동작 501 또는 동작 505로 분기하여 특정 스케줄 정보 또는 사용자 입력에 따른 기능 운용 또는 기능 대기를 제어할 수 있다. 기능 종료 관련 이벤트가 발생하면, VR 운용 모듈 170은 동작 503 이전으로 분기하여 이하 과정을 재수행하도록 제어할 수 있다.
도 6은 다양한 실시 예에 따른 복합 신호 기반 보안 운용 방법을 도시한다.
도 6을 참조하면, 동작 601에서 예컨대, VR 운용 모듈 170은 설정된 스케줄 정보 또는 사용자 입력에 대응하여 특정 기능 운용 또는 기능 대기를 수행할 수 있다. 예컨대, VR 운용 모듈 170은 스케줄 정보에 설정된 특정 기능을 자동 실행하도록 제어하거나, 사용자 입력이 없고 지정된 시간이 경과하면 슬립 모드로 진입하여 기능 대기를 수행하도록 제어할 수 있다. 또는 VR 운용 모듈 170은 메뉴 화면이나 대기 화면을 디스플레이 140에 출력하고, 사용자 입력에 따른 기능을 실행할 수 있도록 기능 대기를 제어할 수 있다. 한 실시 예에 따르면, VR 운용 모듈 170은 VR 기능 활성화와 관련된 적어도 하나의 아이템을 제공할 수 있다. 예컨대, VR 운용 모듈 170은 가상 현실 컨텐츠 실행과 관련된 메뉴나 아이콘 출력, 가상 현실 컨텐츠 실행 모드로 전환하도록 키 버튼 설정 등을 수행할 수 있다. 다양한 실시 예에 따르면, VR 운용 모듈 170은 장착 프레임 200과의 통신 채널 형성이 이루어질 수 있도록 관련 통신 인터페이스 110을 대기(예: 전원 유지) 상태로 유지할 수 있다.
동작 603에서, VR 운용 모듈 170은 VR 기능 활성화와 관련된 이벤트 발생이 있는지 확인할 수 있다. 예컨대, VR 운용 모듈 170은 전자 장치 100이 장착 프레임 200에 탑재되어 통신 인터페이스 110을 통해 장착 프레임 200 장착을 인식하는 이벤트가 발생하는지 확인할 수 있다. 또는 VR 운용 모듈 170은 앞서 설명한 메뉴나 아이콘 또는 키 버튼 선택에 대응하는 이벤트가 발생하는지 확인할 수 있다. 다양한 실시 예에 따르면, VR 운용 모듈 170은 가상 현실 컨텐츠 운용과 관련된 입력 장치 300으로부터 지정된 입력 신호(예: 가상 현실 컨텐츠 운용을 요청하는 입력 신호) 발생이 있는지 확인할 수 있다.
VR 기능 활성화와 관련된 이벤트 발생이 없으면, 동작 605에서 VR 운용 모듈 170은 발생한 이벤트의 종류에 대응하는 기능 수행을 제어(예: 음원 재생 제어, 방송 수신 제어, 컨텐츠 검색 제어 등)할 수 있다. 또는 별도의 이벤트 발생이 없으면, VR 운용 모듈 170은 이전 기능 운용 상태 또는 기능 대기 상태를 유지하도록 제어하거나, 지정된 시간 경과에 대응하여 슬립 모드(예: 디스플레이 140이 꺼진 상태)로 천이되도록 제어할 수 있다.
VR 기능 활성화와 관련된 이벤트가 발생하면, 동작 607에서 VR 운용 모듈 170은 VR 보안 영상 출력을 제어할 수 있다. VR 운용 모듈 170은 가상 현실 컨텐츠 재생과 관련하여 기본적(default)으로 VR 보안 영상(또는 보안 관련 컨텐츠)을 출력하도록 제어할 수 있다. 또는 VR 운용 모듈 170은 보안 관련 오브젝트를 포함하는 가상 현실 컨텐츠를 출력하고, 보안 관련 오브젝트를 지시하거나 선택하는 이벤트가 발생하는 경우 VR 보안 영상 출력을 제어할 수 있다. 보안 관련 오브젝트 지시 또는 선택 이전까지 VR 운용 모듈 170은 가상 현실 컨텐츠에 포함된 기능이나 오브젝트 검색 등의 기능을 지원할 수 있다.
동작 609에서, VR 운용 모듈 170은 입력 신호 또는 센서 신호 중 적어도 하나를 수집할 수 있다. 예컨대, VR 운용 모듈 170은 입력 장치 300 또는 입력 장치 220 중 적어도 하나로부터 입력되는 입력 신호와 장착 프레임 200의 센서 모듈 280이 제공하는 센서 신호를 수집할 수 있다. 이 동작에서 VR 운용 모듈 170은 전자 장치 100에 마련된 센서 모듈 180을 비활성화하도록 제어할 수 있다. 다양한 실시 예에 따르면, VR 운용 모듈 170은 장착 프레임 200의 센서 모듈 280을 비활성화하고 전자 장치 100의 센서 모듈 180이 제공하는 센서 신호를 수집할 수도 있다. 다양한 실시 예에 따르면, VR 운용 모듈 170은 장착 프레임 200의 센서 모듈 280이 제공하는 센서 신호와 전자 장치 100에 마련된 센서 모듈 180이 제공하는 센서 신호를 복합적으로 분석하여 장착 프레임 200의 움직임 방향 정보 또는 움직임 거리 정보 중 적어도 하나를 획득할 수 있다. VR 운용 모듈 170은 움직임 방향 정보 또는 움직임 거리 정보 중 적어도 하나에 대응하여 변화되는 뷰 포트 관련 정보 또는 뷰 포인터 관련 정보 중 적어도 하나를 포함하는 화면 정보를 획득할 수 있다.
동작 611에서, VR 운용 모듈 170은 복합 신호 기반 인증 수행을 제어할 수 있다. 한 실시 예에 따르면, VR 운용 모듈 170은 입력 신호와 획득된 화면 정보가 보안 설정 정보 151과 일치하는지 확인할 수 있다. 다양한 실시 예에 따르면, VR 운용 모듈 170은 화면 정보를 실시간 획득하되, 지정된 입력 신호가 발생한 시점부터 획득된 화면 정보를 추출하고, 이를 보안 설정 정보 151과 일치하는지 확인할 수 있다. 다양한 실시 예에 따르면, VR 운용 모듈 170은 화면 정보를 실시간 획득하되, 지정된 입력 신호가 유지되는 시간 동안 획득된 화면 정보를 보안 설정 정보 151과 비교할 수 있다. 다양한 실시 예에 따르면, VR 운용 모듈 170은 제1 입력 신호와 제2 입력 신호가 입력된 사이 시간 동안 획득된 화면 정보를 보안 설정 정보 151과 비교할 수 있다. 다양한 실시 예에 따르면, VR 운용 모듈 170은 지정된 입력 신호에 대한 보안 설정 정보 151 비교를 수행한 후, 해당 입력 신호가 유효한 경우, 화면 정보 획득 및 보안 설정 정보 151 비교를 수행할 수 있다. 다양한 실시 예에 따르면, VR 운용 모듈 170은 획득된 화면 정보와 보안 설정 정보 151을 비교하여 해당 화면 정보가 유효한 경우(예: 보안 설정 정보 151에 저장된 화면 정보와 일치하는 경우), 보안 설정 정보 151에 저장된 입력 신호와 유사한 입력 신호가 수집되는지 확인할 수 있다.
동작 613에서, VR 운용 모듈 170은 인증 결과가 유효한지 여부를 확인할 수 있다. 예컨대, VR 운용 모듈 170은 보안 설정 정보 151에 저장된 정보와 동일한 정보 또는 일정 오차율 이내의 정보가 수집되는지 확인할 수 있다.
인증 결과가 유효하지 않은 경우, 동작 615에서 VR 운용 모듈 170은 가이드 정보 출력을 제어할 수 있다. 예컨대, VR 운용 모듈 170은 잘못된 정보 입력이 수행되었음을 알리는 메시지를 디스플레이 140에 출력하도록 제어할 수 있다. 다양한 실시 예에 따르면, VR 운용 모듈 170은 전자 장치 100 또는 장착 프레임 200 중 적어도 하나에 오류 발생에 대응하는 진동 패턴을 출력하도록 제어할 수 있다. 다양한 실시 예에 따르면, VR 운용 모듈 170은 오류 발생에 대응하는 오디오 데이터를 출력하도록 제어할 수 있다.
인증 결과가 유효한 경우, 동작 617에서 VR 운용 모듈 170은 VR 보안 해제 및 VR 기능 지원을 수행할 수 있다. 예컨대, VR 운용 모듈 170은 보안 해제 성공을 안내하는 메시지를 시각 정보, 오디오 정보, 진동 정보 중 적어도 하나의 형태로 출력하도록 제어할 수 있다. VR 운용 모듈 170은 보안 해제 후 설정된 메뉴 화면이나 아이콘 배치 화면을 제공하거나 지정된 특정 컨텐츠 재생 또는 영상 화면을 출력하도록 제어할 수 있다.
동작 619에서 VR 운용 모듈 170은 기능 종료와 관련된 이벤트가 발생하는지 확인할 수 있다. VR 운용 모듈 170은 기능 종료와 관련된 이벤트가 발생한 경우 VR 기능을 종료하도록 제어할 수 있다. VR 운용 모듈 170은 VR 기능 종료에 대응하여 동작 601 또는 동작 605로 분기하여 특정 스케줄 정보 또는 사용자 입력에 따른 기능 운용 또는 기능 대기를 제어할 수 있다. 기능 종료 관련 이벤트가 발생하면, VR 운용 모듈 170은 동작 603 이전으로 분기하여 이하 과정을 재수행하도록 제어할 수 있다.
다양한 실시 예에 따르면, 한 실시 예에 따른 보안 운용 방법은 전자 장치에 있어서,보안 해제를 위한 보안 관련 컨텐츠를 디스플레이 하는 동작, 상기 보안 관련 컨텐츠가 출력된 상태에서 센서 신호 또는 입력 신호 중 적어도 하나를 수신하는 동작, 수신된 상기 센서 신호 또는 입력 신호 중 적어도 하나에 대응하여 상기 보안 관련 컨텐츠와 연관된 오브젝트를 수집하는 동작, 상기 오브젝트와 관련된 정보와 지정된 보안 설정 정보를 비교하는 동작, 상기 비교 결과에 대응하여 설정된 보안 해제 여부를 결정하는 동작을 포함할 수 있다.
다양한 실시 예에 따르면, 상기 수신하는 동작은 상기 보안 관련 컨텐츠를 출력하는 전자 장치 또는 전자 장치가 장착된 장착 프레임의 움직임과 관련된 센서 신호를 수신하는 동작, 상기 장착 프레임에 마련된 입력 장치, 상기 전자 장치에 마련된 입력 장치, 상기 전자 장치와 통신 가능한 입력 장치 중 적어도 하나의 입력 장치로부터 입력 신호를 수신하는 동작 중 적어도 하나를 포함할 수 있다.
다양한 실시 예에 따르면, 상기 비교하는 동작은 상기 보안 관련 컨텐츠의 적어도 일부 영역을 표시하는 뷰 포트와 관련된 뷰 포트 관련 정보를 확인하고, 뷰 포트 내에 위치하는 지정된 적어도 하나의 오브젝트가 상기 뷰 포트 내에 있는지 확인하는 동작; 지정된 적어도 하나의 오브젝트가 상기 뷰 포트에 의해 지정된 시간 동안 지시되는지 확인하는 동작, 지정된 적어도 하나의 오브젝트가 상기 뷰 포트 내에 지정된 위치에 배치되는지 확인하는 동작 중 적어도 하나의 동작을 포함할 수 있다.
다양한 실시 예에 따르면, 상기 수집하는 동작은 상기 뷰 포트 내에 일정 지점을 지시하는 뷰 포인터와 관련된 뷰 포인터 관련 정보 중 적어도 하나를 수집하는 동작; 중 적어도 하나를 포함할 수 있다.
다양한 실시 예에 따르면, 상기 수집하는 동작은 상기 입력 신호에 의해 상기 보안 관련 컨텐츠에 해당하는 화면 영역 중 일부 화면 영역을 표시하는 뷰 포트를 고정하는 동작, 상기 뷰 포트 내에 가상 뷰 포인터가 지시하거나 선택하는 오브젝트와 관련된 정보를 수집하는 동작 중 적어도 하나의 동작을 포함할 수 있다.
다양한 실시 예에 따르면, 상기 수집하는 동작은 상기 보안 관련 컨텐츠에 포함된 적어도 하나의 오브젝트를 가상 뷰 포인터가 지시하는 동작, 지정된 입력 신호 발생에 대응하여 상기 지시된 오브젝트와 관련된 정보를 수집하는 동작을 포함할 수 있다.
다양한 실시 예에 따르면, 상기 결정하는 동작은 지정된 입력 신호가 입력되면 보안 관련 정보 수집을 초기화하는 동작, 지정된 입력 신호가 입력되면 보안 관련 정보 수집을 종료하는 동작 중 적어도 하나를 포함할 수 있다.
다양한 실시 예에 따르면, 상기 수집하는 동작은 지정된 입력 신호가 유지되는 동안 상기 보안 관련 컨텐츠에 해당하는 화면 영역 중 뷰 포트에 의해 표시된 영역의 오브젝트와 관련된 정보를 수집하는 동작, 입력 신호들의 시간 차 동안 상기 보안 관련 컨텐츠에 해당하는 화면 영역 중 뷰 포트에 의해 표시된 영역의 오브젝트와 관련된 정보를 수집하는 동작, 지정된 입력 신호가 유지되는 동안 뷰 포인터에 의해 선택된 적어도 하나의 오브젝트와 관련된 정보를 수집하는 동작, 입력 신호들의 시간 차 동안 상기 보안 관련 컨텐츠에 해당하는 화면 영역 중 뷰 포인터에 의해 선택된 오브젝트와 관련된 정보를 수집하는 동작 중 적어도 하나의 동작을 포함할 수 있다.
다양한 실시 예에 따르면, 상기 수집하는 동작은 상기 보안 관련 컨텐츠에 포함된 적어도 하나의 오브젝트를 선택하는 동작, 상기 센서 신호 또는 입력 신호 중 적어도 하나에 대응하여 상기 적어도 하나의 오브젝트를 변경하는 동작, 상기 변경된 오브젝트와 관련된 정보를 수집하는 동작을 포함할 수 있다.
다양한 실시 예에 따르면, 상기 수집하는 동작은 상기 보안 관련 컨텐츠에 포함된 이동 오브젝트와 관련하여 상기 보안 관련 컨텐츠의 일부 영역을 표시하는 뷰 포트 이동 관련 정보를 수집하는 동작을 포함할 수 있다.
다양한 실시 예에 따르면, 상기 방법은 상기 보안 해제 시 새로운 보안 관련 컨텐츠를 출력하는 동작, 상기 보안 해제 시 보안 관련 오브젝트가 포함된 가상 현실 컨텐츠를 출력하는 동작, 상기 보안 해제 시 설정된 정보 또는 사용자 입력에 대응하는 가상 현실 컨텐츠를 출력하는 동작 중 어느 하나의 동작을 더 포함할 수 있다.
다양한 실시 예에 따르면, 상기 디스플레이 하는 동작은 가상 현실 기반의 보안 관련 컨텐츠를 디스플레이 하는 동작을 포함할 수 있다.
도 7a는 다양한 실시 예에 따른 뷰 포인터 기반의 보안 해제를 설명하는 도면이다.
도 7a를 참조하면, 전자 장치 100을 탑재한 장착 프레임 200은 사용자의 신체 중 적어도 일부에 배치될 수 있다. 예컨대, 도시된 바와 같이 장착 프레임 200은 사용자의 머리 부분에 배치될 수 있다. 사용자는 장착 프레임 200에 마련된 일정 영역을 통하여 전자 장치 100의 디스플레이 140에 표시된 영상을 시청할 수 있다. 여기서 디스플레이 140에 출력되는 영상은 가상 현실 컨텐츠일 수 있다. 예컨대, 가상 현실 컨텐츠는 디스플레이 140의 분할된 영역에 동일한 영상 또는 시간차를 가지는 영상이 출력되는 컨텐츠일 수 있다. 디스플레이 140에 가상 현실 컨텐츠 재생에 따른 화면이 출력되면, 사용자는 장착 프레임 200을 통해 디스플레이 140에 출력된 화면을 보게 되어 디스플레이 140에 표시된 화면보다 확대된 형태로, 또는 입체적으로 또는 공감각적으로 느낄 수 있다.
한 실시 예에 따르면, 전자 장치 100을 탑재한 장착 프레임 200은 도시된 바와 같이 확대된 또는 입체적인 영상을 느끼도록 지원할 수 있다. 여기서, VR 운용 모듈 170은 설정에 대응하여 보안 관련 컨텐츠 710(또는 보안 관련 영상)를 출력할 수 있다. 보안 관련 컨텐츠 710은 전자 장치 100이 장착 프레임 200에 탑재되면 기본적으로 제공될 수 있다. 또는 보안 관련 컨텐츠 710은 가상 현실 컨텐츠를 전자 장치 100에 출력하는 중 특정 이벤트 발생에 대응하여 출력될 수 있다.
보안 관련 컨텐츠 710은 도시된 바와 같이 뷰 포트 701 크기와 일치 또는 유사한 크기를 가질 수 있다. 이에 대응하여, VR 운용 모듈 170은 출력된 보안 관련 컨텐츠 710에 대하여 고정된 뷰 포트 701을 제공할 수 있다. 다양한 실시 예에 따르면, 보안 관련 컨텐츠 710은 뷰 포트 701 크기보다 큰 화면 영역을 가질 수 있다. 이 경우 뷰 포트 701에 출력 중인 영역은 보안 관련 컨텐츠 710의 전체 화면 영역 중 일부 영역일 수 있다. 뷰 포트 701이 전체 화면 영역 중 일부 영역을 표시하는 경우, VR 운용 모듈 170은 입력 신호 또는 센서 신호 중 적어도 하나에 대응하여 뷰 포트 701 이동을 지원할 수 있다. 보안 관련 컨텐츠 710은 예컨대 적어도 하나의 숫자 오브젝트가 배치된 영상일 수 있다.
다양한 실시 예에 따르면, VR 운용 모듈 170은 보안 관련 컨텐츠 710 상에 뷰 포인터 702를 출력할 수 있다. 뷰 포인터 702는 기본적으로 특정 영역을 지시할 수 있다. 다양한 실시 예에 따르면, VR 운용 모듈 170은 입력 장치 300 또는 입력 장치 220으로부터 지정된 입력 신호가 발생하면 VR 운용 모듈 170은 뷰 포인터 702를 출력할 수 있다. VR 운용 모듈 170은 뷰 포인터 702가 일정 시간 이상 지시한 또는 뷰 포인터 702가 선택(예: 뷰 포인터 702가 위치한 지점에서 지정된 입력 신호가 발생한 경우 이를 선택으로 간주)한 오브젝트 711(예: 숫자 6)를 보안 해제와 관련된 화면 정보로 수집할 수 있다.
도 7b는 다양한 실시 예에 따른 뷰 포인터 이동 및 그에 따른 보안 해제를 설명하는 도면이다.
도 7b를 참조하면, VR 운용 모듈 170은 보안 관련 컨텐츠 710을 디스플레이 140을 통해 출력하도록 제어할 수 있다. 보안 관련 컨텐츠 710은 예컨대 뷰 포트 701 크기에 대응하는 크기로 표시될 수 있다. VR 운용 모듈 170은 장착 프레임 200의 움직임에 따른 센서 신호를 수집할 수 있다. VR 운용 모듈 170은 수집된 센서 신호를 분석하여 장착 프레임 200의 움직임 방향 정보 또는 움직임 거리 정보 중 적어도 하나를 추출할 수 있다. VR 운용 모듈 170은 움직임 방향 정보와 움직임 거리 정보에 대응하도록 뷰 포인터 702를 이동표시할 수 있다. 예컨대, VR 운용 모듈 170은 장착 프레임 200이 우하 대각선 방향으로 일정 거리만큼 이동한 경우, 뷰 포인터 702를 해당 방향과 거리만큼 이동 표시할 수 있다. 이에 따라, 뷰 포인터 702는 오브젝트 712(예: 숫자 8) 상에 위치할 수 있다. VR 운용 모듈 170은 뷰 포인터 702가 지정된 오브젝트 712 상에 지정된 시간 이상 위치한 경우 또는 지정된 입력 신호가 발생한 경우, 또는 지정된 장착 프레임 200의 움직임 동작이 발생한 경우 오브젝트 712를 보안 해제를 위한 화면 정보로 획득할 수 있다.
추가적으로 또는 대체적으로, VR 운용 모듈 170은 장착 프레임 200의 움직임 변화에 대응하여 뷰 포인터 702를 이동 표시할 수 있다. VR 운용 모듈 170은 뷰 포인터 702의 이동 표시 후 지시 또는 선택된 오브젝트에 해당하는 화면 정보를 획득할 수 있다. 예컨대, VR 운용 모듈 170은 뷰 포인터 702 이동에 대응하여 다른 숫자 오브젝트들(예: 1, 2, 3, 4 등)에 해당하는 화면 정보를 획득할 수 있다. 여기서 VR 운용 모듈 170은 특정 오브젝트에 해당하는 화면 정보가 획득되면 보안 관련 컨텐츠 710을 변경하도록 제어할 수 있다. 예컨대, VR 운용 모듈 170은 숫자 오브젝트들의 위치를 변경하거나 숫자 값을 변경하여 출력하도록 제어할 수 있다.
VR 운용 모듈 170은 화면 정보가 수집되면, 수집된 화면 정보에 할당된 값(예: 숫자 값)을 검출할 수 있다. VR 운용 모듈 170은 검출된 값들을 보안 설정 정보 151과 비교하여 일치 여부에 따라 보안 해제 여부를 결정할 수 있다. 보안 해제 시 VR 운용 모듈 170은 보안 관련 컨텐츠 710 출력을 중지하고, 설정된 또는 사용자 입력에 대응하는 가상 현실 컨텐츠를 출력하거나 다른 보안 관련 컨텐츠를 출력하도록 제어할 수 있다.
도 8a는 다양한 실시 예에 따른 오브젝트 기반의 보안 해제를 설명하는 도면이다.
도 8a를 참조하면, 한 실시 예에 따르면, 장착 프레임 200에 장착된 전자 장치 100은 보안 관련 컨텐츠 810을 디스플레이 140에 출력할 수 있다. 보안 관련 컨텐츠 810은 도시된 바와 같이 적어도 하나의 오브젝트 811, 812를 포함할 수 있다. 한 실시 예에 따르면, 적어도 하나의 오브젝트 811, 812는 액체류 813이 담긴 용기에 해당하는 오브젝트 811 및 빈 상태의 용기에 해당하는 오브젝트 812를 포함할 수 있다. 오브젝트 811 및 오브젝트 812 중 적어도 하나는 입력 신호 또는 센서 신호 중 적어도 하나에 대응하여 이동 가능한 오브젝트일 수 있다.
다양한 실시 예에 따르면, 보안 관련 컨텐츠 810은 가상 현실 컨텐츠 재생 기능이 실행되는 초기 화면으로 제공될 수 있다. 또는 보안 관련 컨텐츠 810은 앞서 도 7a 또는 도 7b 등에서 설명한 보안 관련 컨텐츠 710의 보안 해제 시 출력될 수 있다. 또는 보안 관련 컨텐츠 810은 가상 현실 컨텐츠에 포함된 특정 오브젝트를 선택하는 경우 출력될 수 있다. 상술한 보안 관련 컨텐츠 810은 보다 다양한 형태로 교체되거나 다른 오브젝트가 추가적으로 더 배치될 수도 있다.
도 8b는 다양한 실시 예에 따른 오브젝트 기반의 보안 해제를 설명하는 도면이다.
도 8b를 참조하면, 한 실시 예에 따르면, 오브젝트 811은 입력 신호 또는 센서 신호에 대응하여 보안 관련 컨텐츠 810 상에서 이동 가능하도록 배치될 수 있다. 예컨대, 오브젝트 811은 도 8a에 도시된 상태에서 위치 변경되어 일정 각도로 기울어진 상태로 배치될 수 있다. 이와 관련하여, VR 운용 모듈 170은 뷰 포인터를 이용하여 오브젝트 811을 선택할 수 있도록 지원하거나, 또는 이동 가능한 오브젝트 811이 선택된 상태를 기본적으로 제공할 수 있다. VR 운용 모듈 170은 예컨대 장착 프레임 200의 회전 동작(예: 머리 회전 또는 기울임 동작에 대응한 동작)에 대응하여 오브젝트 811을 도시된 바와 같이 위치 이동시키고 기울어진 상태로 배치할 수 있다.
VR 운용 모듈 170은 오브젝트 811이 일정 각도 이상 기울어지는 경우 오브젝트 811 내에 배치된 액체류 813의 표시 형태를 변경할 수 있다. VR 운용 모듈 170은 오브젝트 811이 지정된 각도 이상으로 기울어지는 경우 오브젝트 811 내에 배치된 액체류 813을 오브젝트 811로부터 이동되도록 처리할 수 있다. 여기서 VR 운용 모듈 170은 제81 오브젝트에 위치한 액체류 813을 오브젝트 712로 이동시킬 수 있다. VR 운용 모듈 170은 오브젝트 811의 기울어짐 각도에 대응하여 이동되는 액체류 813의 크기와 속도를 조정할 수 있다. 이에 대응하여, VR 운용 모듈 170은 오브젝트 812에 액체류 813b가 채워지는 속도를 조정할 수 있다.
VR 운용 모듈 170은 오브젝트 811에 남겨지는 액체류 813a의 양과 관련된 정보 또는 오브젝트 812에 채워진 액체류 813b의 양과 관련된 정보 중 적어도 하나의 정보와 보안 설정 정보 151을 비교할 수 있다. VR 운용 모듈 170은 수집된 정보와 보안 설정 정보 151이 일치하면 보안을 해제하고, 보안 관련 컨텐츠 810의 출력을 중지할 수 있다. 이후 VR 운용 모듈 170은 설정된 또는 사용자 입력에 따른 가상 현실 컨텐츠 출력을 지원할 수 있다. 또는 VR 운용 모듈 170은 새로운 보안 관련 컨텐츠를 출력하도록 제어할 수 있다.
도 9a는 다양한 실시 예에 따른 전체 화면 영역 중 일부 영역에 배치된 뷰 포트를 설명하는 도면이다.
도 9a를 참조하면, VR 운용 모듈 170은 VR 기능 실행과 관련된 이벤트(예: 전자 장치 100을 장착 프레임 200에 탑재하는 이벤트, 가상 현실 컨텐츠 선택 및 실행 요청하는 이벤트, 장착 프레임 200을 턴-온하는 이벤트, 입력 장치 300 또는 입력 장치 220으로부터 발생한 이벤트 등)가 발생하면, 상태 910에서와 같이 지정된 보안 관련 컨텐츠 910을 디스플레이 140에 출력하도록 제어할 수 있다. 보안 관련 컨텐츠 910은 뷰 포트 911 영역에 비하여 넓은 화면 영역을 가질 수 있다. 이에 따라, 디스플레이 140에 표시되는 뷰 포트 911 영역은 보안 관련 컨텐츠 910의 일부 영역일 수 있다. 한 실시 예에 따르면, 보안 관련 컨텐츠 910은 가상 현실 오브젝트 901과 보안 관련 오브젝트 902를 포함할 수 있다. VR 운용 모듈 170은 가상 현실 오브젝트 901 상에 뷰 포트 911이 배치되면 해당 가상 현실 오브젝트 901에 설정된 화면 출력 또는 가상 현실 오브젝트 901에 설정된 기능 실행 등을 제어할 수 있다.
도 9b는 다양한 실시 예에 따른 뷰 포트 이동을 설명하는 도면이다.
도 9b를 참조하면, VR 운용 모듈 170은 전자 장치 100을 탑재한 장착 프레임 200의 움직임에 대응하여 뷰 포트 911을 보안 관련 컨텐츠 910 상에서 이동시킬 수 있다. 한 실시 예에 따르면, VR 운용 모듈 170은 상기 움직임에 대응하여 뷰 포트 911을 보안 관련 오브젝트 902가 배치된 영역을 포함하도록 이동시킬 수 있다. VR 운용 모듈 170은 보안 관련 오브젝트 902가 배치된 영역 상에 뷰 포트 911이 지정된 시간 이상 머문 경우, 해당 화면 정보를 획득할 수 있다. 또는 VR 운용 모듈 170은 뷰 포트 911의 이동 경로에 따른 화면 정보를 획득할 수 있다. 또는 VR 운용 모듈 170은 뷰 포트 911의 위치가 가상 현실 컨텐츠의 지정된 위치에 지정된 시간 이상으로 고정된 경우, 또는 뷰 포트 911 내에서 상기 오브젝트 902가 지정된 위치에 배치된 경우 해당 화면 정보를 획득하거나 또는 해당 경우에 따라 보안 해제를 처리할 수 있다.
도 9c는 다양한 실시 예에 따른 선택된 보안 관련 오브젝트 실행을 설명하는 도면이다.
도 9c를 참조하면, VR 운용 모듈 170은 보안 관련 컨텐츠 910에서 획득된 화면 정보와 저장된 보안 설정 정보 151을 비교할 수 있다. VR 운용 모듈 170은 정보가 일치하는 경우 설정된 보안을 해제할 수 있다. 이에 대응하여, VR 운용 모듈 170은 보안 관련 컨텐츠 910 출력을 중지하고 가상 현실 컨텐츠 920을 출력할 수 있다. 가상 현실 컨텐츠 920은 예컨대 적어도 하나의 컨텐츠 항목들이 배치된 영상일 수 있다. VR 운용 모듈 170은 가상 현실 컨텐츠 920 상에 뷰 포트 921을 출력할 수 있다. VR 운용 모듈 170은 장착 프레임 200 움직임에 대응하여 가상 현실 컨텐츠 920 상에서의 뷰 포트 921을 이동시킬 수 있다. 다양한 실시 예에 따르면, VR 운용 모듈 170은 기본적으로 뷰 포트 921이 가상 현실 오브젝트 930을 포함하도록 배치하고, 장착 프레임 200의 움직임 여부에 대응하여 뷰 포트 921의 위치를 변경하여 다른 가상 현실 오브젝트를 검색할 수 있도록 지원할 수 있다.
VR 운용 모듈 170은 지정된 시간 동안 뷰 포트 921이 고정되거나 뷰 포트 921에 가상 현실 오브젝트 930이 배치된 상태에서 지정된 입력 신호 또는 지정된 장착 프레임 200 움직임이 수신되면, 가상 현실 오브젝트 930과 관련된 기능 실행을 제어할 수 있다.
도 9d는 다양한 실시 예에 따른 선택된 가상 현실 오브젝트 실행을 설명하는 도면이다.
도 9d를 참조하면, 다양한 실시 예에 따르면, 도 9c에서 설명한 가상 현실 오브젝트 930이 동영상 컨텐츠이면, VR 운용 모듈 170은 동영상 재생 화면을 출력하도록 제어할 수 있다. 이 동작에서 VR 운용 모듈 170은 장착 프레임 200을 통한 동영상 시청에 대응하도록 디스플레이 140의 분할된 화면에 각각 영상을 출력하도록 제어할 수 있다. 다양한 실시 예에 따르면, 가상 현실 오브젝트 930이 정지 영상 컨텐츠이면, VR 운용 모듈 170은 정지 영상을 디스플레이 140에 출력하도록 제어할 수 있다. 이 동작에서 VR 운용 모듈 170은 가상 현실 오브젝트 930이 동영상과 같이 고정된 뷰 포트 기반의 컨텐츠 제공이 필요한 경우 뷰 포트 931과 일치된 크기의 영상을 출력할 수 있다. 예컨대, 가상 현실 오브젝트 930의 화면 영역이 뷰 포트 931보다 큰 경우, VR 운용 모듈 170은 가상 현실 오브젝트 930의 화면 영역을 뷰 포트 931 크기에 대응하도록 조정하고, 조정된 화면을 출력하도록 제어할 수 있다.
도 10은 다양한 실시 예에 따른 뷰 포트 이동 기반의 보안 해제를 설명하는 도면이다.
도 10을 참조하면, VR 운용 모듈 170은 보안 관련 오브젝트 1020이 포함된 가상 현실 컨텐츠 1010을 제공할 수 있다. 가상 현실 컨텐츠 1010은 뷰 포트 1011보다 큰 화면 영역을 가지며, 원통형의 화면 영역을 가지는 컨텐츠일 수 있다. 장착 프레임 200의 움직임이 발생하는 경우, VR 운용 모듈 170은 장착 프레임 200 움직임에 대응하여 뷰 포트 1011을 가상 현실 컨텐츠 1010 내에서 이동 표시하도록 제어할 수 있다.
다양한 실시 예에 따르면, 가상 현실 컨텐츠 1010에 포함된 오브젝트들 중 적어도 하나는 이동 가능하도록 설정된 오브젝트이거나 움직임을 가지는 오브젝트(예: 동영상 컨텐츠)일 수 있다. 다양한 실시 예에 따르면, 가상 현실 컨텐츠 1010에 포함된 적어도 하나의 오브젝트는 보안 관련 오브젝트일 수 있다. 예컨대, 가상 현실 컨텐츠 1010에서 보안 관련 오브젝트 1020은 이동 중인 오브젝트일 수 있다.
장착 프레임 200의 움직임에 대응하여 특정 센서 신호가 수집되거나 특정 입력 신호가 수집되면, VR 운용 모듈 170은 뷰 포트 1011의 위치를 변경할 수 있다. 예컨대, VR 운용 모듈 170은 수신된 신호에 대응하여 뷰 포트 1011에 보안 관련 오브젝트 1020이 포함되도록 배치할 수 있다. 이 동작에서 보안 관련 오브젝트 1020이 이동 오브젝트이면, 장착 프레임 200은 사용자 동작에 대응하여 움직임을 가질 수 있다. VR 운용 모듈 170은 장착 프레임 200 움직임에 대응하여 뷰 포트 1011을 이동 표시하도록 제어할 수 있으며, 이에 따라 이동 중인 보안 관련 오브젝트 1020이 뷰 포트 1011에 포함될 수 있다. VR 운용 모듈 170은 보안 관련 오브젝트인 보안 관련 오브젝트 1020이 뷰 포트 1011에 포함되는 경우 화면 정보를 획득할 수 있다. VR 운용 모듈 170은 획득된 화면 정보와 보안 설정 정보 151을 비교할 수 있다. 한 실시 예에 따르면, VR 운용 모듈 170은 보안 관련 오브젝트 1020이 뷰 포트 1011에 지정된 시간 이상 포함되거나, 뷰 포트 1011의 이동 경로가 이동 중인 보안 관련 오브젝트 1020의 적어도 일부를 일정 시간 동안 포함하는 경우 유효한 보안 해제 정보 입력으로 판단할 수 있다. 이 경우, VR 운용 모듈 170은 가상 현실 컨텐츠 1010의 출력을 중지하고, 설정된 스케줄 정보에 따른 또는 사용자 입력에 따른 가상 현실 컨텐츠를 출력하도록 제어할 수 있다. 또는 VR 운용 모듈 170은 보안 관련 오브젝트가 포함된 가상 현실 컨텐츠를 출력하도록 제어할 수도 있다.
도 11a는 다양한 실시 예에 따른 보안 관련 오브젝트가 포함된 컨텐츠 출력을 도시한다.
도 11a을 참조하면, VR 운용 모듈 170은 가상 현실 컨텐츠 기능 실행 요청에 대응하여 1110 상태에서와 같이 가상 현실 컨텐츠 1110을 출력하도록 제어할 수 있다. 가상 현실 컨텐츠 1110은 뷰 포트 1111 영역에 비하여 넓은 화면 영역을 가지는 컨텐츠일 수 있다. 가상 현실 컨텐츠 1110은 적어도 하나의 보안 관련 오브젝트 1112를 포함할 수 있다.
VR 운용 모듈 170은 장착 프레임 200의 이동에 대응하여 또는 입력 신호에 대응하여 뷰 포트 1111를 가상 현실 컨텐츠 1110 상에서 이동 표시하도록 제어할 수 있다. 한 실시 예에 따르면, VR 운용 모듈 170은 뷰 포트 1111을 이동 시켜 보안 관련 오브젝트 1112가 포함된 영역을 표시하도록 제어할 수 있다.
VR 운용 모듈 170은 보안 관련 오브젝트 1112가 배치된 영역을 뷰 포트 1111이 지정된 시간 이상 표시하고 있거나, 뷰 포트 1111이 보안 관련 오브젝트 1112를 포함한 상태에서 지정된 입력 신호 또는 센서 신호가 수집되면, 보안 설정 정보 151 비교를 수행할 수 있다. 예컨대, VR 운용 모듈 170은 보안 관련 오브젝트 1112와 보안 설정 정보 151을 상호 비교하고, 그 결과에 대응하여 보안 해제 여부를 결정할 수 있다. 다양한 실시 예에 따르면, VR 운용 모듈 170은 특정 오브젝트(예: 보안 관련 오브젝트 1112)가 뷰 포트 1111 내에서 지정된 위치에 배치되는지 판단하고, 이를 기준으로 보안 해제 여부를 결정할 수 있다. 이와 관련하여, 전자 장치는 보안 해제와 관련하여 특정 가상 현실 컨텐츠 1110 상에서 보안 해제와 관련되어 지정된 위치 정보를 저장 관리할 수 있다. 이에 대응하여 VR 운용 모듈 170은 가상 현실 컨텐츠 1110 상에서 뷰 포트 1111이 위치하는 위치 정보를 추출하고, 추출된 위치 정보와 저장된 위치 정보를 비교하여 결과에 따라 보안 해제를 수행할 수 있다.
도 11b는 다양한 실시 예에 따른 보안 관련 오브젝트 확대를 도시한다.
도 11b를 참조하면, 다양한 실시 예에 따르면, VR 운용 모듈 170은 보안 관련 오브젝트 1112가 포함된 영역을 뷰 포트 1111이 지정된 시간 이상 표시하는 경우 또는 지정된 입력을 수신하는 경우 보안 관련 오브젝트 1112를 포함한 일정 영역을 확대 표시하도록 제어할 수 있다. 이 동작에서 VR 운용 모듈 170은 보안 관련 오브젝트 1112 관련 영역을 뷰 포트 1111 보다 크게 확대하여 표시할 수 있다. 또는 VR 운용 모듈 170은 보안 관련 오브젝트 1112를 포함한 영역을 뷰 포트 1111에 맞게 확대하여 표시할 수 있다.
보안 관련 오브젝트 1112 관련 영역을 뷰 포트 1111 보다 크게 확대한 상태에서, 보안 관련 오브젝트 1122가 뷰 포트 1111에 포함되어 표시될 수 있다. VR 운용 모듈 170은 보안 관련 오브젝트 1122가 지정된 시간 이상 뷰 포트 1111에 포함된 경우 설정된 보안을 해제할 수 있다.
도 11c는 다양한 실시 예에 따른 확대된 보안 관련 오브젝트에서의 오브젝트 관련 기능 실행을 도시한다.
도 11c를 참조하면, 다양한 실시 예에 따르면, VR 운용 모듈 170은 도 11b에서 보안 관련 오브젝트 1122 선택과 관련된 이벤트가 발생하면 보안 관련 오브젝트 1122와 관련된 가상 현실 컨텐츠 1130을 출력하도록 제어할 수 있다.
다양한 실시 예에 따르면, 보안 관련 오브젝트 1112를 뷰 포트 1111에 대응하도록 확대한 상태에서, 뷰 포인터 등을 이용하여 보안 관련 오브젝트 1122를 선택하는 이벤트가 발생하면, VR 운용 모듈 170은 보안 관련 오브젝트 1122와 관련된 기능을 실행할 수 있다. 예컨대, VR 운용 모듈 170은 보안 관련 오브젝트 1122에 링크된 가상 현실 컨텐츠 1130을 출력하도록 제어할 수 있다.
가상 현실 컨텐츠 1130은 뷰 포트 1131에 비하여 큰 화면 영역을 가질 수 있다. 가상 현실 컨텐츠 1130은 적어도 하나의 오브젝트를 포함할 수 있다. 예컨대, 오브젝트 1140은 보안 관련 오브젝트일 수 있다. 오브젝트 1140을 선택하는 이벤트(예: 뷰 포인터를 이용하여 오브젝트 1140을 지시하거나, 오브젝트 1140을 포함하는 뷰 포트가 지정된 시간 이상 유지되는 경우)가 발생하면 VR 운용 모듈 170은 보안 관련 컨텐츠를 출력하도록 제어할 수 있다. 예컨대, VR 운용 모듈 170은 도 7a 내지 도 8b에서 설명한 보안 관련 컨텐츠들을 출력하도록 제어할 수 있다. 다양한 실시 예에 따르면, 오브젝트 1150은 보안 설정이 없는 오브젝트일 수 있다. 오브젝트 1150이 선택되면, VR 운용 모듈 170은 관련 기능 예컨대 갤러리 기능을 실행하도록 제어할 수 있다.
다양한 실시 예에 따르면, 오브젝트 1160은 깊이(depth) 변경과 관련된 오브젝트일 수 있다. 오브젝트 1160이 선택되는 경우 VR 운용 모듈 170은 이전 상태 예컨대 도 11b 상태로 이동(단계 또는 깊이 이동) 표시하도록 제어할 수 있다. 도시하지는 않았으나, 도 11b 에서 VR 운용 모듈 170은 이전 상태인 도 11c 상태로 이동되도록 설정된 오브젝트를 표시하도록 제어할 수 있다.
도 12는 다양한 실시 예에 따른 전자 장치의 블록도이다.
도 12를 참조하면, 전자 장치 1200은, 예를 들면, 도 1에 도시된 전자 장치 100의 전체 또는 일부를 구성할 수 있다. 도 12에 도시된 바와 같이, 상기 전자 장치 1200은 하나 이상의 어플리케이션 프로세서(AP: application processor) 1210(예: 프로세서 160, VR 운용 모듈 170), 통신 모듈 1220(예: 통신 인터페이스 110, 통신 모듈 210 등), SIM(subscriber identification module) 카드 1224, 메모리 1230(예: 메모리 150), 센서 모듈 1240(예: 센서 모듈 180, 센서 모듈 280), 입력 장치 1250(예: 입출력 인터페이스 120, 입력 장치 300, 입력 장치 220), 디스플레이 1260(예: 디스플레이 140), 인터페이스 1270, 오디오 모듈 1280(예: 입출력 인터페이스 120), 카메라 모듈 1291, 전력관리 모듈 1295, 배터리 1296, 인디케이터 1297 및 모터 1298들 포함할 수 있다.
상기 AP 1210은 운영체제 또는 응용 프로그램을 구동하여 상기 AP 1210에 연결된 다수의 하드웨어 또는 소프트웨어 구성요소들을 제어할 수 있고, 멀티미디어 데이터를 포함한 각종 데이터 처리 및 연산을 수행할 수 있다. 상기 AP 1210은, 예를 들면, SoC(system on chip) 로 구현될 수 있다. 한 실시 예에 따르면, 상기 AP 1210은 GPU(graphic processing unit, 미도시)를 더 포함할 수 있다.
한 실시 예에 따르면, 상술한 가상 현실 컨텐츠 또는 보안 관련 컨텐츠 중 적어도 하나를 출력하는 기능과 연관된 다양한 모듈들이 AP 1210에 구현될 수 있다. AP 1210은 관련 모듈들의 제어를 수행하여, 보안 관련 컨텐츠 또는 가상 현실 컨텐츠의 출력 조건을 확인하고, 출력 조건에 따라 보안 관련 컨텐츠 또는 가상 현실 컨텐츠 또는 보안 관련 오브젝트가 포함된 가상 현실 컨텐츠의 출력 처리 및 보안 해제를 제어할 수 있다.
한 실시 예에 따르면, 가상 현실 기반의 보안 관련 컨텐츠 출력과 연관된 다양한 모듈들은 CP(Communication Processor) 및 AP 중 적어도 하나에 분리되어 배치될 수 있다. 이 과정에서 CP가 제어하는 모듈들은 CP와 동일 칩셋 내에서 직접 통신(direct communication)이 가능하도록 배치되거나, CP와 외부 인터페이스(external interface)를 통해 연결되도록 하드웨어가 구성될 수 있다.
한 실시 예에 따르면, 가상 현실 기반의 보안 관련 컨텐츠 또는 가상 현실 컨텐츠 출력 처리와 연관된 다양한 모듈들은 CP에 배치될 수 있다. 관련 모듈들의 제어는 CP가 수행할 수 있다. 이 경우 CP와 WiFi, 센서 허브(sensor hub), GPS 모듈이 서로 직접 통신(direct communication)이 가능하도록 연결될 수 있다. 이와 관련하여, 각 구성들은 동일 칩셋 내에서 시스템 버스(system bus)로 연결되어 AP(Application processor)가 전원 절약 모드(power saving mode)인 경우에도 서로 통신 가능하도록 연결될 수 있다. 각 구성들은 서로 다른 칩셋으로 구성될 경우 외부 인터페이스(external interface)로 연결되어 AP(Application processor)를 통하지 않는 직접 통신(direct communication)이 가능하도록 하드웨어가 구성될 수 있다.
상기 통신 모듈 1220은 상기 전자 장치 1200(예: 상기 전자 장치 100)과 네트워크를 통해 연결된 다른 전자 장치들(예: 전자 장치 104, 서버 장치 106 등) 간의 통신에서 데이터 송수신을 수행할 수 있다. 통신 모듈 1220은 서버 장치 106과 통신 채널을 형성하고, 서버 장치 106로부터 연관 컨텐츠를 수신할 수 있다. 또한 통신 모듈 1220은 외부 장치(예: 전자 장치 104, 장착 프레임 200, 입력 장치 300)과 통신 채널을 형성할 수 있다. 통신 모듈 1220은 외부 장치로부터 센서 신호 또는 입력 신호 중 적어도 하나, 보안 해제 정보 등을 수신할 수 있다. 한 실시 예에 따르면, 상기 통신 모듈 1220은 셀룰러 모듈 1221, Wifi 모듈 1223, BT 모듈 1225, GPS 모듈 1227, NFC 모듈 1228 및 RF(radio frequency) 모듈 1229를 포함할 수 있다.
상기 셀룰러 모듈 1221은 통신망(예: LTE, LTE-A, CDMA, WCDMA, UMTS, WiBro 또는 GSM 등)을 통해서 음성 통화, 영상 통화, 문자 서비스 또는 인터넷 서비스 등을 제공할 수 있다. 또한, 상기 셀룰러 모듈 1221은, 예를 들면, 가입자 식별 모듈(예: SIM 카드 1224)을 이용하여 통신 네트워크 내에서 전자 장치의 구별 및 인증을 수행할 수 있다. 한 실시 예에 따르면, 상기 셀룰러 모듈 1221은 상기 AP 1210이 제공할 수 있는 기능 중 적어도 일부 기능을 수행할 수 있다. 예를 들면, 상기 셀룰러 모듈 1221은 멀티미디어 제어 기능의 적어도 일부를 수행할 수 있다.
한 실시 예에 따르면, 상기 셀룰러 모듈 1221은 커뮤니케이션 프로세서(CP: communication processor)를 포함할 수 있다. 또한, 상기 셀룰러 모듈 1221은, 예를 들면, SoC로 구현될 수 있다. 도 12에서는 상기 셀룰러 모듈 1221(예: 커뮤니케이션 프로세서), 상기 메모리 1230 또는 상기 전력관리 모듈 1295 등의 구성요소들이 상기 AP 1210과 별개의 구성요소로 도시되어 있으나, 한 실시 예에 따르면, 상기 AP 1210이 전술한 구성요소들의 적어도 일부(예: 셀룰러 모듈 1221)를 포함하도록 구현될 수 있다.
한 실시 예에 따르면, 상기 AP 1210 또는 상기 셀룰러 모듈 1221(예: 커뮤니케이션 프로세서)은 각각에 연결된 비휘발성 메모리 또는 다른 구성요소 중 적어도 하나로부터 수신한 명령 또는 데이터를 휘발성 메모리에 로드(load)하여 처리할 수 있다. 또한, 상기 AP 1210 또는 상기 셀룰러 모듈 1221은 다른 구성요소 중 적어도 하나로부터 수신하거나 다른 구성요소 중 적어도 하나에 의해 생성된 데이터를 비휘발성 메모리에 저장(store)할 수 있다.
다양한 실시 예에 따르면, 셀룰러 모듈 1221은 전자 장치 104 또는 서버 장치 106 등으로부터 보안 관련 컨텐츠를 수신할 수 있다. 또한 셀룰러 모듈 1221은 전자 장치 104로부터 보안 해제 정보를 수신할 수 있다. 셀룰러 모듈 1221은 보안 해제 정보에 대응하여 보안 설정 또는 해제 여부에 대한 피드백을 전자 장치 104에 전달할 수 있다.
상기 Wifi 모듈 1223, 상기 BT 모듈 1225, 상기 GPS 모듈 1227 또는 상기 NFC 모듈 1228 각각은, 예를 들면, 해당하는 모듈을 통해서 송수신되는 데이터를 처리하기 위한 프로세서를 포함할 수 있다. Wifi 모듈 1223, 상기 BT 모듈 1225는 통신 인터페이스 110 및 통신 모듈 210 중 적어도 하나에 포함될 수 있다. GPS 모듈 1227은 통신 인터페이스 110에 포함될 수 있다.
도 12에서는 셀룰러 모듈 1221, Wifi 모듈 1223, BT 모듈 1225, GPS 모듈 1227 또는 NFC 모듈 1228이 각각 별개의 블록으로 도시되었으나, 한 실시 예에 따르면, 셀룰러 모듈 1221, Wifi 모듈 1223, BT 모듈 1225, GPS 모듈 1227 또는 NFC 모듈 1228 중 적어도 일부(예: 두 개 이상)는 하나의 integrated chip(IC) 또는 IC 패키지 내에 포함될 수 있다. 예를 들면, 셀룰러 모듈 1221, Wifi 모듈 1223, BT 모듈 1225, GPS 모듈 1227 또는 NFC 모듈 1228 각각에 대응하는 프로세서들 중 적어도 일부(예: 셀룰러 모듈 1221에 대응하는 커뮤니케이션 프로세서 및 Wifi 모듈 1223에 대응하는 Wifi 프로세서)는 하나의 SoC로 구현될 수 있다.
다양한 실시 예에 따르면, Wifi 모듈 1223은 도 1에서 설명한 통신 인터페이스 110 또는 통신 모듈 210 중 적어도 하나에 포함될 수 있다. Wifi 모듈 1223은 외부 장치(예: 입력 장치 300, 장착 프레임 200 등)와 직접 통신 채널을 형성할 수 있다. Wifi 모듈 1223은 입력 장치 300이 제공하는 입력 신호를 수신할 수 있다. Wifi 모듈 1223은 장착 프레임 200이 제공하는 센서 신호 또는 입력 신호 중 적어도 하나를 수신할 수 있다.
상기 RF 모듈 1229는 데이터의 송수신, 예를 들면, RF 신호의 송수신을 할 수 있다. 상기 RF 모듈 1229는, 도시되지는 않았으나, 예를 들면, 트랜시버(transceiver), PAM(power amp module), 주파수 필터(frequency filter) 또는 LNA(low noise amplifier) 등을 포함할 수 있다. 또한, 상기 RF 모듈 1229는 무선 통신에서 자유 공간상의 전자파를 송수신하기 위한 부품, 예를 들면, 도체 또는 도선 등을 더 포함할 수 있다. 도 12에서는 셀룰러 모듈 1221, Wifi 모듈 1223, BT 모듈 1225, GPS 모듈 1227 및 NFC 모듈 1228이 하나의 RF 모듈 1229를 서로 공유하는 것으로 도시되어 있으나, 한 실시 예에 따르면, 셀룰러 모듈 1221, Wifi 모듈 1223, BT 모듈 1225, GPS 모듈 1227 또는 NFC 모듈 1228 중 적어도 하나는 별개의 RF 모듈을 통하여 RF 신호의 송수신을 수행할 수 있다.
상기 SIM 카드 1224는 가입자 식별 모듈을 포함하는 카드일 수 있으며, 전자 장치의 특정 위치에 형성된 슬롯에 삽입될 수 있다. 상기 SIM 카드 1224는 고유한 식별 정보(예: ICCID(integrated circuit card identifier)) 또는 가입자 정보(예: IMSI(international mobile subscriber identity))를 포함할 수 있다. 한 실시 예에 따르면, SIM 카드 1224는 메모리 장치 120의 일부 구성일 수 있다. SIM 카드 1224가 슬롯에 삽입되면 AP 1210은 SIM 카드 1224의 초기화 과정을 수행할 수 있다.
상기 메모리 1230(예: 상기 메모리 150)은 내장 메모리 1232 또는 외장 메모리 1234를 포함할 수 있다. 상기 내장 메모리 1232는, 예를 들면, 휘발성 메모리(예를 들면, DRAM(dynamic RAM), SRAM(static RAM), SDRAM(synchronous dynamic RAM) 등) 또는 비휘발성 메모리(non-volatile Memory, 예를 들면, OTPROM(one time programmable ROM), PROM(programmable ROM), EPROM(erasable and programmable ROM), EEPROM(electrically erasable and programmable ROM), mask ROM, flash ROM, NAND flash memory, NOR flash memory 등) 중 적어도 하나를 포함할 수 있다. 한 실시 예에 따르면, 상기 내장 메모리 1232는 Solid State Drive (SSD)일 수 있다.
상기 외장 메모리 1234는 flash drive, 예를 들면, CF(compact flash), SD(secure digital), Micro-SD(micro secure digital), Mini-SD(mini secure digital), xD(extreme digital) 또는 Memory Stick 등을 더 포함할 수 있다. 상기 외장 메모리 1234는 다양한 인터페이스를 통하여 상기 전자 장치 1200과 기능적으로 연결될 수 있다. 한 실시 예에 따르면, 상기 전자 장치 1200은 하드 드라이브와 같은 저장 장치(또는 저장 매체)를 더 포함할 수 있다. 다양한 실시 예에 따르면, 메모리 1230은 보안 관련 컨텐츠, 보안 관련 오브젝트가 포함된 가상 현실 컨텐츠, 가상 현실 컨텐츠 중 적어도 하나를 저장할 수 있다. 메모리 1230은 보안 설정 정보를 저장할 수 있다.
상기 센서 모듈 1240(예: 센서 모듈 180, 센서 모듈 280)은 물리량을 계측하거나 전자 장치 1200의 작동 상태를 감지하여, 계측 또는 감지된 정보를 전기 신호로 변환할 수 있다. 상기 센서 모듈 1240은, 예를 들면, 제스처 센서 1240A, 자이로 센서 1240B, 기압 센서 1240C, 마그네틱 센서 1240D, 가속도 센서 1240E, 그립 센서 1240F, 근접 센서 1240G, color 센서 1240H(예: RGB(red, green, blue) 센서), 생체 센서 1240I, 온/습도 센서 1240J, 조도 센서 1240K 또는 UV(ultra violet) 센서 1240M 중의 적어도 하나를 포함할 수 있다. 추가적으로 또는 대체적으로, 상기 센서 모듈 1240은, 예를 들면, 후각 센서(E-nose sensor, 미도시), EMG 센서(electromyography sensor, 미도시), EEG 센서(electroencephalogram sensor, 미도시), ECG 센서(electrocardiogram sensor, 미도시), IR(infra red) 센서(미도시), 홍채 센서(미도시) 또는 지문 센서(미도시) 등을 포함할 수 있다. 상기 센서 모듈 1240은 그 안에 속한 적어도 하나 이상의 센서들을 제어하기 위한 제어 회로를 더 포함할 수 있다.
다양한 실시 예에 따르면, 센서 모듈 1240은 전자 장치 1200의 동작 관련 센서 신호를 수집할 수 있다. 센서 모듈 1240이 수집한 센서 신호는 AP 1210에 전달될 수 있다. AP 1210은 전달된 센서 신호를 기반으로 장착 프레임 200의 움직임을 감지할 수 있다. AP 1210은 장착 프레임 200의 움직임에 대응하여 뷰 포트 또는 뷰 포인터 중 적어도 하나를 출력된 컨텐츠 상에 이동 표시하도록 제어할 수 있다.
상기 입력 장치 1250(예: 입력 장치 300, 입력 장치 220, 입출력 인터페이스 120 등)은 터치 패널(touch panel) 1252, (디지털) 펜 센서(pen sensor) 1254, 키(key) 1256 또는 초음파(ultrasonic) 입력 장치 1258을 포함할 수 있다.
상기 터치 패널 1252는, 예를 들면, 정전식, 감압식, 적외선 방식 또는 초음파 방식 중 적어도 하나의 방식으로 터치 입력을 인식할 수 있다. 또한, 상기 터치 패널 1252는 제어 회로를 더 포함할 수도 있다. 정전식의 경우, 물리적 접촉 또는 근접 인식이 가능하다. 상기 터치 패널 1252는 택타일 레이어(tactile layer)를 더 포함할 수도 있다. 이 경우, 상기 터치 패널 1252는 사용자에게 촉각 반응을 제공할 수 있다.
상기 (디지털) 펜 센서 1254는, 예를 들면, 사용자의 터치 입력을 받는 것과 동일 또는 유사한 방법 또는 별도의 인식용 쉬트(sheet)를 이용하여 구현될 수 있다. 상기 키 1256은, 예를 들면, 물리적인 버튼, 광학식 키 또는 키패드를 포함할 수 있다. 상기 초음파(ultrasonic) 입력 장치 1258은 초음파 신호를 발생하는 입력 도구를 통해, 전자 장치 1200에서 마이크(예: 마이크 1288)로 음파를 감지하여 데이터를 확인할 수 있는 장치로서, 무선 인식이 가능하다. 한 실시 예에 따르면, 상기 전자 장치 1200은 상기 통신 모듈 1220을 이용하여 이와 연결된 외부 장치(예: 컴퓨터 또는 서버)로부터 사용자 입력을 수신할 수도 있다.
상기 디스플레이 1260(예: 디스플레이 140)은 패널 1262, 홀로그램 장치 1264 또는 프로젝터 1266을 포함할 수 있다. 상기 패널 1262는, 예를 들면, LCD(liquid-crystal display) 또는 AM-OLED(active-matrix organic light-emitting diode) 등일 수 있다. 상기 패널 1262는, 예를 들면, 유연하게(flexible), 투명하게(transparent) 또는 착용할 수 있게(wearable) 구현될 수 있다. 상기 패널 1262는 상기 터치 패널 1252와 하나의 모듈로 구성될 수도 있다. 상기 홀로그램 장치 1264는 빛의 간섭을 이용하여 입체 영상을 허공에 보여줄 수 있다. 상기 프로젝터 1266은 스크린에 빛을 투사하여 영상을 표시할 수 있다. 상기 스크린은, 예를 들면, 상기 전자 장치 1200의 내부 또는 외부에 위치할 수 있다. 한 실시 예에 따르면, 상기 디스플레이 1260은 상기 패널 1262, 상기 홀로그램 장치 1264, 또는 프로젝터 1266을 제어하기 위한 제어 회로를 더 포함할 수 있다. 다양한 실시 예에 따르면 디스플레이 1260은 두 개의 화면 영역으로 분할되고, 각 영역에 동일한 영상이 동시에 또는 시간차를 가지고 출력될 수 있다.
상기 인터페이스 1270은, 예를 들면, HDMI(high-definition multimedia interface) 1272, USB(universal serial bus) 1274, 광 인터페이스(optical interface) 1276 또는 D-sub(D-subminiature) 1278을 포함할 수 있다. 추가적으로 또는 대체적으로, 상기 인터페이스 1270은, 예를 들면, MHL(mobile high-definition link) 인터페이스, SD(secure Digital) 카드/MMC(multi-media card) 인터페이스 또는 IrDA(infrared data association) 규격 인터페이스를 포함할 수 있다.
상기 오디오 모듈 1280(예: 입출력 인터페이스 120)은 소리(sound)와 전기신호를 쌍방향으로 변환시킬 수 있다. 상기 오디오 모듈 1280은, 예를 들면, 스피커 1282, 리시버 1284, 이어폰 1286 또는 마이크 1288 등을 통해 입력 또는 출력되는 소리 정보를 처리할 수 있다. 한 실시 예에 따르면, 오디오 모듈 1280은 보안 관련 컨텐츠 또는 가상 현실 컨텐츠 출력 제어 및 보안 설정 해제와 관련하여 음성 명령어 수집 및 처리를 지원할 수 있다. 오디오 모듈 1280이 인식한 음성 명령어는 앞서 설명한 입력 신호에 준하는 형태로 이용될 수 있다. 예컨대, 앞서 설명한 입력 신호와 관련하여 음성 명령어는 추가적으로 또는 대체적으로 보안 관련 컨텐츠의 보안 설정과 보안 해제 등에 이용될 수 있다.
상기 카메라 모듈 1291은 정지 영상 및 동영상을 촬영할 수 있는 장치로서, 한 실시 예에 따르면, 하나 이상의 이미지 센서(예: 전면 센서 또는 후면 센서), 렌즈(미도시), ISP(image signal processor, 미도시) 또는 플래쉬(flash, 미도시)(예: LED 또는 xenon lamp)를 포함할 수 있다. 카메라 모듈 1291은 사용자의 눈동자를 추적하는데 이용될 수 있다. 카메라 모듈 1291이 추적한 사용자의 눈동자 궤적은 앞서 설명한 입력 신호에 추가적으로 또는 대체적으로 이용될 수 있다. 예컨대, 눈동자 궤적 정보는 보안 관련 컨텐츠의 보안 설정 또는 설정된 보안 해제에 이용될 수 있다.
상기 전력 관리 모듈 1295는 상기 전자 장치 1200의 전력을 관리할 수 있다. 한 실시 예에 따르면, 전력 관리 모듈 1295는 전자 장치 1200의 적어도 하나의 장치 요소의 전력 공급을 제어할 수 있다. 예컨대, 전력 관리 모듈 1295는 전자 장치 1200의 배터리 전원이 설정 값 이하인 경우 특정 장치 요소들(예: 센서 모듈 190, 통신 모듈, GPS 모듈 등)의 전원 공급을 차단할 수 있다. 전력 관리 모듈 1295는 도시하지는 않았으나, 상기 전력 관리 모듈 1295는, 예를 들면, PMIC(power management integrated circuit), 충전 IC(charger integrated circuit) 또는 배터리 또는 연료 게이지(battery or fuel gauge)를 포함할 수 있다.
상기 PMIC는, 예를 들면, 집적회로 또는 SoC 반도체 내에 탑재될 수 있다. 충전 방식은 유선과 무선으로 구분될 수 있다. 상기 충전 IC는 배터리를 충전시킬 수 있으며, 충전기로부터의 과전압 또는 과전류 유입을 방지할 수 있다. 한 실시 예에 따르면, 상기 충전 IC는 유선 충전 방식 또는 무선 충전 방식 중 적어도 하나를 위한 충전 IC를 포함할 수 있다. 무선 충전 방식으로는, 예를 들면, 자기공명 방식, 자기유도 방식 또는 전자기파 방식 등이 있으며, 무선 충전을 위한 부가적인 회로, 예를 들면, 코일 루프, 공진 회로 또는 정류기 등의 회로가 추가될 수 있다.
상기 배터리 게이지는, 예를 들면, 상기 배터리 1296의 잔량, 충전 중 전압, 전류 또는 온도를 측정할 수 있다. 상기 배터리 1296은 전기를 저장 또는 생성할 수 있고, 그 저장 또는 생성된 전기를 이용하여 상기 전자 장치 1200에 전원을 공급할 수 있다. 상기 배터리 1296은, 예를 들면, 충전식 전지(rechargeable battery) 또는 태양 전지(solar battery)를 포함할 수 있다.
상기 인디케이터 1297은 상기 전자 장치 1200 혹은 그 일부(예: 상기 AP 1210)의 특정 상태, 예를 들면, 부팅 상태, 메시지 상태 또는 충전 상태 등을 표시할 수 있다. 한 실시 예에 다르면, 인디케이터 1297은 보안 관련 컨텐츠 출력 상태, 가상 현실 컨텐츠 출력 상태 등과 관련된 지시자를 표시할 수 있다. 상기 모터 1298은 전기적 신호를 기계적 진동으로 변환할 수 있다. 도시되지는 않았으나, 상기 전자 장치 1200은 모바일 TV 지원을 위한 처리 장치(예: GPU)를 포함할 수 있다. 상기 모바일 TV지원을 위한 처리 장치는, 예를 들면, DMB(digital multimedia broadcasting), DVB(digital video broadcasting) 또는 미디어플로우(media flow) 등의 규격에 따른 미디어 데이터를 처리할 수 있다.
본 발명의 다양한 실시예에 따른 전자 장치의 전술한 구성요소들 각각은 하나 또는 그 이상의 부품(component)으로 구성될 수 있으며, 해당 구성 요소의 명칭은 전자 장치의 종류에 따라서 달라질 수 있다. 본 발명의 다양한 실시예에 따른 전자 장치는 전술한 구성요소 중 적어도 하나를 포함하여 구성될 수 있으며, 일부 구성요소가 생략되거나 또는 추가적인 다른 구성요소를 더 포함할 수 있다. 또한, 본 발명의 다양한 실시예에 따른 전자 장치의 구성 요소들 중 일부가 결합되어 하나의 개체(entity)로 구성됨으로써, 결합되기 이전의 해당 구성 요소들의 기능을 동일하게 수행할 수 있다.
본 발명의 다양한 실시예에 사용된 용어 “모듈”은, 예를 들어, 하드웨어, 소프트웨어 또는 펌웨어(firmware) 중 하나 또는 둘 이상의 조합을 포함하는 단위(unit)를 의미할 수 있다. “모듈”은 예를 들어, 유닛(unit), 로직(logic), 논리 블록(logical block), 부품(component) 또는 회로(circuit) 등의 용어와 바꾸어 사용(interchangeably use)될 수 있다. “모듈”은, 일체로 구성된 부품의 최소 단위 또는 그 일부가 될 수 있다. “모듈”은 하나 또는 그 이상의 기능을 수행하는 최소 단위 또는 그 일부가 될 수도 있다. “모듈”은 기계적으로 또는 전자적으로 구현될 수 있다. 예를 들면, 본 발명의 다양한 실시예에 따른 “모듈”은, 알려졌거나 앞으로 개발될, 어떤 동작들을 수행하는 ASIC(application-specific integrated circuit) 칩, FPGAs(field-programmable gate arrays) 또는 프로그램 가능 논리 장치(programmable-logic device) 중 적어도 하나를 포함할 수 있다.
다양한 실시예에 따르면, 본 발명의 다양한 실시예에 따른 장치(예: 모듈들 또는 그 기능들) 또는 방법(예: 동작들)의 적어도 일부는, 예컨대, 프로그래밍 모듈의 형태로 컴퓨터로 읽을 수 있는 저장매체(computer-readable storage media)에 저장된 명령어로 구현될 수 있다. 상기 명령어는, 하나 이상의 프로세서 (예: 상기 프로세서 160)에 의해 실행될 경우, 상기 하나 이상의 프로세서가 상기 명령어에 해당하는 기능을 수행할 수 있다. 컴퓨터로 읽을 수 있는 저장매체는, 예를 들면, 상기 메모리 150이 될 수 있다. 상기 프로그래밍 모듈의 적어도 일부는, 예를 들면, 상기 프로세서120에 의해 구현(implement)(예: 실행)될 수 있다. 상기 프로그래밍 모듈 의 적어도 일부는 하나 이상의 기능을 수행하기 위한, 예를 들면, 모듈, 프로그램, 루틴, 명령어 세트 (sets of instructions) 또는 프로세스 등을 포함할 수 있다.
상기 컴퓨터로 판독 가능한 기록 매체에는 하드디스크, 플로피디스크 및 자기 테이프와 같은 마그네틱 매체(Magnetic Media)와, CD-ROM(Compact Disc Read Only Memory), DVD(Digital Versatile Disc)와 같은 광기록 매체(Optical Media)와, 플롭티컬 디스크(Floptical Disk)와 같은 자기-광 매체(Magneto-Optical Media)와, 그리고 ROM(Read Only Memory), RAM(Random Access Memory), 플래시 메모리 등과 같은 프로그램 명령(예: 프로그래밍 모듈)을 저장하고 수행하도록 특별히 구성된 하드웨어 장치가 포함될 수 있다. 또한, 프로그램 명령에는 컴파일러에 의해 만들어지는 것과 같은 기계어 코드뿐만 아니라 인터프리터 등을 사용해서 컴퓨터에 의해서 실행될 수 있는 고급 언어 코드를 포함할 수 있다. 상술한 하드웨어 장치는 본 발명의 다양한 실시예의 동작을 수행하기 위해 하나 이상의 소프트웨어 모듈로서 작동하도록 구성될 수 있으며, 그 역도 마찬가지다.
본 발명의 다양한 실시예에 따른 모듈 또는 프로그래밍 모듈은 전술한 구성요소들 중 적어도 하나 이상을 포함하거나, 일부가 생략되거나, 또는 추가적인 다른 구성요소를 더 포함할 수 있다. 본 발명의 다양한 실시예에 따른 모듈, 프로그래밍 모듈 또는 다른 구성요소에 의해 수행되는 동작들은 순차적, 병렬적, 반복적 또는 휴리스틱(heuristic)한 방법으로 실행될 수 있다. 또한, 일부 동작은 다른 순서로 실행되거나, 생략되거나, 또는 다른 동작이 추가될 수 있다.
다양한 실시예에 따르면, 명령들을 저장하고 있는 저장 매체에 있어서, 상기 명령들은 적어도 하나의 프로세서에 의하여 실행될 때에 상기 적어도 하나의 프로세서로 하여금 적어도 하나의 동작을 수행하도록 설정된 것으로서, 상기 적어도 하나의 동작은, 보안 해제를 위한 보안 관련 컨텐츠를 디스플레이 하는 동작, 상기 보안 관련 컨텐츠가 출력된 상태에서 센서 신호 또는 입력 신호 중 적어도 하나를 수신하는 동작, 수신된 상기 센서 신호 또는 입력 신호 중 적어도 하나에 대응하여 상기 보안 관련 컨텐츠와 연관된 오브젝트를 수집하는 동작, 상기 오브젝트와 관련된 정보와 지정된 보안 설정 정보를 비교하는 동작, 상기 비교 결과에 대응하여 설정된 보안 해제 여부를 결정하는 동작을 포함할 수 있다.
그리고 본 명세서와 도면에 개시된 본 발명의 실시예들은 본 발명의 실시예에 따른 의 기술 내용을 쉽게 설명하고 본 발명의 실시예의 이해를 돕기 위해 특정 예를 제시한 것일 뿐이며, 본 발명의 실시예의 범위를 한정하고자 하는 것은 아니다. 따라서 본 발명의 다양한 실시예의 범위는 여기에 개시된 실시예들 이외에도 본 발명의 다양한 실시예의 기술적 사상을 바탕으로 도출되는 모든 변경 또는 변형된 형태가 본 발명의 다양한 실시예의 범위에 포함되는 것으로 해석되어야 한다.
10 : 가상 현실 지원 시스템
100 : 전자 장치 110 : 통신 인터페이스
120 : 입출력 인터페이스
140 : 디스플레이 150 : 메모리
160 : 프로세서 170 : VR 운용 모듈
180 : 센서 모듈 190 : 버스
200 : 장착 프레임 210 : 통신 모듈
280 : 센서 모듈 300, 220 : 입력 장치

Claims (25)

  1. 전자 장치의 보안 운용 방법에 있어서,
    보안 해제를 위한 보안 관련 컨텐츠를 디스플레이 하는 동작;
    상기 보안 관련 컨텐츠가 출력된 상태에서 상기 전자 장치를 통해 상기 보안 관련 컨텐츠를 바라보는 방향에 대한 센서 신호를 수신하는 동작;
    수신된 상기 센서 신호에 대응하여 상기 보안 관련 컨텐츠와 연관된 적어도 하나의 오브젝트와 관련된 정보를 수집하는 동작;
    상기 적어도 하나의 오브젝트와 관련된 정보와 지정된 보안 설정 정보를 비교하는 동작;
    상기 비교 결과에 대응하여 설정된 보안 해제 여부를 결정하는 동작;을 포함하고, 상기 수집하는 동작은
    상기 센서 신호를 기반으로, 상기 보안 관련 컨텐츠의 적어도 일부 영역을 표시하는 뷰 포트 내에 상기 전자 장치를 착용한 사용자의 시각 방향을 지시하는 뷰 포인트를 확인하는 동작;
    상기 뷰 포인트가 지정된 시간 동안 지시한 적어도 하나의 오브젝트와 관련된 정보를 수집하는 동작;을 포함하는 보안 운용 방법.
  2. 제1항에 있어서,
    상기 수신하는 동작은
    상기 보안 관련 컨텐츠를 출력하는 전자 장치 또는 상기 전자 장치가 장착된 장착 프레임의 움직임과 관련된 센서 신호를 수신하는 동작을 포함하는 보안 운용 방법.
  3. 삭제
  4. 삭제
  5. 삭제
  6. 삭제
  7. 제1항에 있어서,
    상기 결정하는 동작은
    지정된 입력 신호가 입력되면 보안 관련 정보 수집을 초기화하는 동작;
    지정된 입력 신호가 입력되면 보안 관련 정보 수집을 종료하는 동작; 중 적어도 하나를 설정하는 보안 운용 방법.
  8. 삭제
  9. 제1항에 있어서,
    상기 수집하는 동작은
    상기 센서 신호에 대응하여 지정된 시간 동안 지시한 상기 적어도 하나의 오브젝트를 변경하는 동작;
    상기 변경된 오브젝트와 관련된 정보를 수집하는 동작;을 포함하는 보안 운용 방법.
  10. 제1항에 있어서,
    상기 수집하는 동작은
    상기 보안 관련 컨텐츠에 포함된 이동 오브젝트와 관련하여 상기 보안 관련 컨텐츠의 일부 영역을 표시하는 상기 뷰 포트 이동 관련 정보를 수집하는 동작;을 포함하는 보안 운용 방법.
  11. 제1항에 있어서,
    상기 보안 해제 시 새로운 보안 관련 컨텐츠를 출력하는 동작;
    상기 보안 해제 시 보안 관련 오브젝트가 포함된 가상 현실 컨텐츠를 출력하는 동작;
    상기 보안 해제 시 설정된 정보에 대응하는 가상 현실 컨텐츠를 출력하는 동작; 중 어느 하나의 동작을 더 포함하는 보안 운용 방법.
  12. 제1항에 있어서,
    상기 디스플레이 하는 동작은
    가상 현실 기반의 보안 관련 컨텐츠를 디스플레이 하는 동작인 보안 운용 방법.
  13. 보안 해제를 위한 보안 관련 컨텐츠를 출력하는 디스플레이;
    상기 디스플레이를 바라보는 방향에 관련된 센서 신호가 수신되면, 상기 보안 관련 컨텐츠 상에서 수신된 상기 센서 신호와 연관된 적어도 하나의 오브젝트와 관련한 정보를 수집하고, 상기 적어도 하나의 오브젝트와 관련된 정보와 지정된 보안 설정 정보를 비교하여 상기 보안 관련 컨텐츠에 설정된 보안 해제 여부를 결정하는 VR 운용 모듈;을 포함하고,
    상기 VR 운용 모듈은
    상기 센서 신호를 기반으로, 상기 보안 관련 컨텐츠의 적어도 일부 영역을 표시하는 뷰 포트 내에 전자 장치를 착용한 사용자의 시각 방향을 지시하는 뷰 포인트를 확인하고, 상기 뷰 포인트가 지정된 시간 동안 지시한 적어도 하나의 오브젝트와 관련된 정보를 수집하는 전자 장치.
  14. 제13항에 있어서,
    상기 VR 운용 모듈은
    상기 보안 관련 컨텐츠를 출력하는 상기 전자 장치가 장착된 장착 프레임의 움직임과 관련된 센서 신호를 수신하는 전자 장치.
  15. 삭제
  16. 삭제
  17. 삭제
  18. 삭제
  19. 제13항에 있어서,
    상기 VR 운용 모듈은
    지정된 입력 신호가 입력되면 보안 관련 정보 수집을 초기화하거나, 보안 관련 정보 수집을 종료하도록 설정된 전자 장치.
  20. 삭제
  21. 제13항에 있어서,
    상기 VR 운용 모듈은
    상기 보안 관련 컨텐츠에 포함된 적어도 하나의 오브젝트를 선택되면, 상기 센서 신호에 대응하여 상기 적어도 하나의 오브젝트를 변경하고, 상기 변경된 오브젝트와 관련된 정보 수집이 설정된 전자 장치.
  22. 제13항에 있어서,
    상기 VR 운용 모듈은
    상기 보안 관련 컨텐츠에 포함된 이동 오브젝트와 관련하여 상기 보안 관련 컨텐츠의 일부 영역을 표시하는 상기 뷰 포트 이동 관련 정보 수집이 설정된 전자 장치.
  23. 제13항에 있어서,
    상기 VR 운용 모듈은
    상기 보안 해제 시 새로운 보안 관련 컨텐츠를 출력하거나, 보안 관련 오브젝트가 포함된 가상 현실 컨텐츠를 출력하거나, 또는 가상 현실 컨텐츠를 출력하도록 설정된 전자 장치.
  24. 제13항에 있어서,
    상기 VR 운용 모듈은
    상기 보안 관련 컨텐츠를 가상 현실 기반으로 출력하도록 설정된 전자 장치.
  25. 명령들을 저장하고 있는 기록 매체에 있어서, 상기 명령들은 적어도 하나의 프로세서에 의하여 실행될 때에 상기 적어도 하나의 프로세서로 하여금 적어도 하나의 동작을 수행하도록 설정된 것으로서,
    상기 적어도 하나의 동작은,
    보안 해제를 위한 보안 관련 컨텐츠를 디스플레이 하는 동작,
    상기 보안 관련 컨텐츠가 출력된 상태에서 상기 보안 관련 컨텐츠를 바라보는 방향에 대한 센서 신호를 수신하는 동작,
    수신된 상기 센서 신호에 대응하여 상기 보안 관련 컨텐츠와 연관된 적어도 하나의 오브젝트와 관련된 정보를 수집하는 동작,
    상기 적어도 하나의 오브젝트와 관련된 정보와 지정된 보안 설정 정보를 비교하는 동작,
    상기 비교 결과에 대응하여 설정된 보안 해제 여부를 결정하는 동작을 포함하고,
    상기 수집하는 동작은
    상기 센서 신호를 기반으로, 상기 보안 관련 컨텐츠의 적어도 일부 영역을 표시하는 뷰 포트 내에 전자 장치를 착용한 사용자의 시각 방향을 지시하는 뷰 포인트를 확인하는 동작;
    상기 뷰 포인트가 지정된 시간 동안 지시한 적어도 하나의 오브젝트와 관련된 정보를 수집하는 동작;을 포함하는 컴퓨터 기록 매체.
KR1020140062468A 2014-05-23 2014-05-23 보안 운용 방법 및 이를 지원하는 전자 장치 KR102219464B1 (ko)

Priority Applications (2)

Application Number Priority Date Filing Date Title
KR1020140062468A KR102219464B1 (ko) 2014-05-23 2014-05-23 보안 운용 방법 및 이를 지원하는 전자 장치
US14/719,512 US9922179B2 (en) 2014-05-23 2015-05-22 Method and apparatus for user authentication

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020140062468A KR102219464B1 (ko) 2014-05-23 2014-05-23 보안 운용 방법 및 이를 지원하는 전자 장치

Publications (2)

Publication Number Publication Date
KR20150134952A KR20150134952A (ko) 2015-12-02
KR102219464B1 true KR102219464B1 (ko) 2021-02-25

Family

ID=54556263

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020140062468A KR102219464B1 (ko) 2014-05-23 2014-05-23 보안 운용 방법 및 이를 지원하는 전자 장치

Country Status (2)

Country Link
US (1) US9922179B2 (ko)
KR (1) KR102219464B1 (ko)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20230072303A (ko) * 2021-11-17 2023-05-24 주식회사 엘지유플러스 증강 현실 글라스를 이용한 증강 현실 보안 키보드 제공 방법 및 그를 위한 장치 및 시스템

Families Citing this family (44)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US9420075B2 (en) 2014-07-16 2016-08-16 DODOcase, Inc. Virtual reality viewer and input mechanism
KR20160141982A (ko) * 2015-06-02 2016-12-12 삼성전자주식회사 제어 패널을 포함하는 인체 착용형 장치
US10962780B2 (en) * 2015-10-26 2021-03-30 Microsoft Technology Licensing, Llc Remote rendering for virtual images
WO2017075100A1 (en) * 2015-10-26 2017-05-04 Pillantas Inc. Systems and methods for eye vergence control
KR20170067058A (ko) * 2015-12-07 2017-06-15 엘지전자 주식회사 이동 단말기 및 그 제어방법
JP6518582B2 (ja) * 2015-12-21 2019-05-22 株式会社ソニー・インタラクティブエンタテインメント 情報処理装置および操作受付方法
US20170199994A1 (en) * 2016-01-13 2017-07-13 Microsoft Technology Licensing, Llc Imaging devices and methods for authenticating a user
CN105652651B (zh) * 2016-03-28 2018-01-16 京东方科技集团股份有限公司 可穿戴物品
US10095311B2 (en) 2016-06-15 2018-10-09 Immersion Corporation Systems and methods for providing haptic feedback via a case
CN106125940A (zh) * 2016-07-05 2016-11-16 乐视控股（北京）有限公司 虚拟现实交互界面管理方法和装置
WO2018032970A1 (zh) * 2016-08-19 2018-02-22 腾讯科技（深圳）有限公司 基于虚拟现实场景的认证方法、虚拟现实设备及存储介质
US10212157B2 (en) 2016-11-16 2019-02-19 Bank Of America Corporation Facilitating digital data transfers using augmented reality display devices
US10158634B2 (en) 2016-11-16 2018-12-18 Bank Of America Corporation Remote document execution and network transfer using augmented reality display devices
CN111783046A (zh) * 2016-11-25 2020-10-16 阿里巴巴集团控股有限公司 身份验证方法及装置
US10943229B2 (en) 2016-11-29 2021-03-09 Bank Of America Corporation Augmented reality headset and digital wallet
US10685386B2 (en) 2016-11-30 2020-06-16 Bank Of America Corporation Virtual assessments using augmented reality user devices
US10600111B2 (en) 2016-11-30 2020-03-24 Bank Of America Corporation Geolocation notifications using augmented reality user devices
US10339583B2 (en) 2016-11-30 2019-07-02 Bank Of America Corporation Object recognition and analysis using augmented reality user devices
US10607230B2 (en) 2016-12-02 2020-03-31 Bank Of America Corporation Augmented reality dynamic authentication for electronic transactions
US10481862B2 (en) * 2016-12-02 2019-11-19 Bank Of America Corporation Facilitating network security analysis using virtual reality display devices
US10586220B2 (en) 2016-12-02 2020-03-10 Bank Of America Corporation Augmented reality dynamic authentication
US10311223B2 (en) 2016-12-02 2019-06-04 Bank Of America Corporation Virtual reality dynamic authentication
US10109095B2 (en) 2016-12-08 2018-10-23 Bank Of America Corporation Facilitating dynamic across-network location determination using augmented reality display devices
US10109096B2 (en) 2016-12-08 2018-10-23 Bank Of America Corporation Facilitating dynamic across-network location determination using augmented reality display devices
US10210767B2 (en) 2016-12-13 2019-02-19 Bank Of America Corporation Real world gamification using augmented reality user devices
US10217375B2 (en) 2016-12-13 2019-02-26 Bank Of America Corporation Virtual behavior training using augmented reality user devices
JP6903998B2 (ja) * 2017-03-29 2021-07-14 セイコーエプソン株式会社 ヘッドマウントディスプレイ
US10902101B2 (en) * 2017-05-16 2021-01-26 Apple Inc. Techniques for displaying secure content for an application through user interface context file switching
CN109246800B (zh) * 2017-06-08 2020-07-10 上海连尚网络科技有限公司 一种无线连接的方法及设备
US11595381B2 (en) * 2017-08-23 2023-02-28 Visa International Service Association Secure authorization for access to private data in virtual reality
CN107508826B (zh) * 2017-09-14 2020-05-05 阿里巴巴集团控股有限公司 基于vr场景的认证方法、装置、vr终端及vr服务端
CN109725782B (zh) * 2017-10-27 2021-08-24 腾讯科技（深圳）有限公司 一种实现虚拟现实的方法、装置及智能设备、存储介质
US11500452B2 (en) * 2018-06-05 2022-11-15 Apple Inc. Displaying physical input devices as virtual objects
US11733824B2 (en) * 2018-06-22 2023-08-22 Apple Inc. User interaction interpreter
US11281760B2 (en) 2018-07-18 2022-03-22 Samsung Electronics Co., Ltd. Method and apparatus for performing user authentication
CN109062649A (zh) * 2018-07-27 2018-12-21 维沃移动通信有限公司 一种显示充电位置信息的方法及设备
KR20200098034A (ko) * 2019-02-11 2020-08-20 삼성전자주식회사 가상 현실 유저 인터페이스를 제공하기 위한 전자 장치 및 그의 동작 방법
US11475117B2 (en) * 2019-06-18 2022-10-18 Citrix Systems, Inc. Eye and head tracking authentication
JP7392370B2 (ja) * 2019-10-03 2023-12-06 オムロン株式会社 制御システム、サポート装置およびサポートプログラム
CN110908120B (zh) 2019-12-06 2021-11-09 Oppo广东移动通信有限公司 头戴式设备
CN114355612A (zh) * 2019-12-06 2022-04-15 Oppo广东移动通信有限公司 保护壳体及头戴式设备
US11849184B2 (en) * 2020-07-31 2023-12-19 Spotible Labs LLC System for dynamic multimedia analysis, matching and decision-making
CN114531602B (zh) * 2020-11-23 2024-02-23 中国移动通信集团安徽有限公司 基于动态资源释放的视频直播性能优化方法及装置
US11809680B2 (en) * 2021-12-30 2023-11-07 Snap Inc. Interface for engaging IoT devices with AR camera

Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20110162066A1 (en) * 2009-12-29 2011-06-30 Bizmodeline Co., Ltd. Password processing method and apparatus

Family Cites Families (23)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US5806072A (en) * 1991-12-20 1998-09-08 Olympus Optical Co., Ltd. Electronic imaging apparatus having hierarchical image data storage structure for computer-compatible image data management
US6127990A (en) * 1995-11-28 2000-10-03 Vega Vista, Inc. Wearable display and methods for controlling same
US6600480B2 (en) * 1998-12-31 2003-07-29 Anthony James Francis Natoli Virtual reality keyboard system and method
US7168051B2 (en) * 2000-10-10 2007-01-23 Addnclick, Inc. System and method to configure and provide a network-enabled three-dimensional computing environment
WO2004044664A1 (en) * 2002-11-06 2004-05-27 Julius Lin Virtual workstation
US7774075B2 (en) * 2002-11-06 2010-08-10 Lin Julius J Y Audio-visual three-dimensional input/output
US8957835B2 (en) * 2008-09-30 2015-02-17 Apple Inc. Head-mounted display apparatus for retaining a portable electronic device with display
KR101694159B1 (ko) * 2010-04-21 2017-01-09 엘지전자 주식회사 증강 원격제어장치 및 그 동작 방법
US20130314303A1 (en) * 2010-02-28 2013-11-28 Osterhout Group, Inc. Ar glasses with user action control of and between internal and external applications with feedback
KR101788598B1 (ko) * 2010-09-01 2017-11-15 엘지전자 주식회사 이동 단말기 및 그의 정보보안 설정방법
KR102084695B1 (ko) 2011-09-01 2020-03-04 삼성전자주식회사 움직임에 기반하여 화면 잠금 해제를 실행하는 휴대용 단말기 및 그 잠금해제 방법
KR20130027774A (ko) 2011-09-08 2013-03-18 삼성전자주식회사 잠금 상태 제어를 위한 사용자 인터페이스 제공 방법 및 장치
US8894484B2 (en) * 2012-01-30 2014-11-25 Microsoft Corporation Multiplayer game invitation system
KR101413286B1 (ko) 2012-05-02 2014-07-01 주식회사 팬택 전자 장치 및 이를 위한 잠금 해제 장치와 방법
US9152226B2 (en) * 2012-06-15 2015-10-06 Qualcomm Incorporated Input method designed for augmented reality goggles
US8532675B1 (en) * 2012-06-27 2013-09-10 Blackberry Limited Mobile communication device user interface for manipulation of data items in a physical space
US9092600B2 (en) * 2012-11-05 2015-07-28 Microsoft Technology Licensing, Llc User authentication on augmented reality display device
CN105188516B (zh) * 2013-03-11 2017-12-22 奇跃公司 用于增强和虚拟现实的系统与方法
US9172692B2 (en) * 2013-03-14 2015-10-27 William M. Langley Systems and methods for securely transferring authentication information between a user and an electronic resource
US9875351B2 (en) * 2013-07-16 2018-01-23 Nokia Technologies Oy Methods, apparatuses, and computer program products for hiding access to information in an image
US20150138065A1 (en) * 2013-11-21 2015-05-21 Nvidia Corporation Head-mounted integrated interface
US9348420B2 (en) * 2014-03-21 2016-05-24 Dell Products L.P. Adaptive projected information handling system output devices
US9727136B2 (en) * 2014-05-19 2017-08-08 Microsoft Technology Licensing, Llc Gaze detection calibration

Patent Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20110162066A1 (en) * 2009-12-29 2011-06-30 Bizmodeline Co., Ltd. Password processing method and apparatus

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20230072303A (ko) * 2021-11-17 2023-05-24 주식회사 엘지유플러스 증강 현실 글라스를 이용한 증강 현실 보안 키보드 제공 방법 및 그를 위한 장치 및 시스템
KR102593934B1 (ko) * 2021-11-17 2023-10-26 주식회사 엘지유플러스 증강 현실 글라스를 이용한 증강 현실 보안 키보드 제공 방법 및 그를 위한 장치 및 시스템

Also Published As

Publication number Publication date
US20150339468A1 (en) 2015-11-26
US9922179B2 (en) 2018-03-20
KR20150134952A (ko) 2015-12-02

Similar Documents

Publication Publication Date Title
KR102219464B1 (ko) 보안 운용 방법 및 이를 지원하는 전자 장치
US10114514B2 (en) Electronic device, method for controlling the electronic device, and recording medium
KR102264808B1 (ko) 지문 처리 방법 및 그 전자 장치
KR102183212B1 (ko) 화면 제어 방법 및 그 방법을 처리하는 전자 장치
KR102383103B1 (ko) 전자 장치 및 이의 화면 표시 방법
KR102414356B1 (ko) 전자 장치 및 그의 햅틱 피드백 제공 방법
KR102294945B1 (ko) 기능 제어 방법 및 그 전자 장치
CN105653084B (zh) 屏幕配置方法、电子设备和存储介质
KR102213190B1 (ko) 홈스크린 구성 방법 및 이를 이용한 전자 장치
KR20160011915A (ko) 화면 제어 방법 및 이를 사용하는 전자 장치
KR102282498B1 (ko) 디스플레이를 이용한 입력 처리 방법 및 장치
KR102126568B1 (ko) 입력 데이터 처리 방법 및 그 전자 장치
KR102206877B1 (ko) 생체 정보디스플레이 방법 및 장치
KR20150127989A (ko) 사용자 인터페이스 제공 방법 및 장치
KR20150135837A (ko) 디스플레이 운용 전자장치 및 방법
KR20150085351A (ko) 입력 처리 방법 및 그 전자 장치
KR20150117962A (ko) 안테나 방사 전력 제어 방법 및 이를 지원하는 전자 장치
KR102381445B1 (ko) 전자 장치의 플립 커버 인식 방법, 전자 장치, 및 플립 커버
KR20150091839A (ko) 전자 장치 및 이의 정보 제공 방법
KR20160017904A (ko) 전자장치의 화면 표시 방법
KR102194787B1 (ko) 사용자 기반 센서 정보 획득 방법 및 그 전자 장치
KR102656425B1 (ko) 영상을 표시하는 전자 장치 및 방법
KR102246645B1 (ko) 영상 획득을 위한 장치 및 방법
KR20150096956A (ko) 전자 장치에서 정보를 표시하는 방법 및 장치
KR102332468B1 (ko) 기능 제어 방법 및 그 전자 장치

Legal Events

Date Code Title Description
A201 Request for examination
E902 Notification of reason for refusal
E701 Decision to grant or registration of patent right