KR20170004825A

KR20170004825A - 가상 현실에서 컨텍스트에 기반한 어플리케이션 그룹화를 위한 방법 및 장치

Info

Publication number: KR20170004825A
Application number: KR1020160015685A
Authority: KR
Inventors: 코차르라코타 스리드하
Original assignee: 삼성전자주식회사
Priority date: 2015-07-01
Filing date: 2016-02-11
Publication date: 2017-01-11
Also published as: KR102566154B1; US20170003858A1; US10067656B2

Abstract

가상 현실 모드에서 어플리케이션 선택을 위한 방법 및 장치가 제공된다. 본 개시의 실시 예들에 따른 가상 현실 모드에서 어플리케이션 선택을 위한 방법은, 어플리케이션의 선택을 수신하는 과정과, 단말이 가상 현실 모드에 있는지 여부를 판단하는 과정과, 상기 단말이 가상 현실 모드에 있는 경우, 상기 선택된 어플리케이션이 어플리케이션들의 그룹에 포함되었는지 여부를 판단하는 과정과, 여기에서 상기 그룹은 상기 선택된 어플리케이션들과 관련된 하나 이상의 어플리케이션들을 포함하고, 상기 선택된 어플리케이션이 어플리케이션들의 그룹에 포함된 경우, 상기 어플리케이션들의 그룹을 실행하는 과정과, 상기 단말의 디스플레이에 상기 실행된 어플리케이션들의 그룹을 제공하는 과정을 포함한다.

Description

가상 현실에서 컨텍스트에 기반한 어플리케이션 그룹화를 위한 방법 및 장치{METHOD AND APPARATUS FOR CONTEXT BASED APPLICATION GROUPING IN VIRTUAL REALITY}

본 개시는 일반적으로 헤드-마운트 디스플레이(head-mountable display, HMD)에 관한 것으로, 보다 상세하게는 HMD에서 3차원 사용자 인터페이스(user interface, UI)에 관한 것이다.

HMD (head-mountable display) 기술이 오랫동안 개발되어 왔고 웨어러블 기술이 적용된 제품들이 점점 더 가시화 되고 있지만, 가상 현실(virtual reality, VR) 및 증강 현실(augmented reality) 모두를 위한 HMD에 대한 구체적인 사용자 인터페이스(user interface, UI) 프레임워크는 부족하다. 현재 HMD 기술은 주요 컨텐츠 디스플레이의 구현 및 취급에 집중되어 있고, UI에 대한 관심은 부족하다.

본 개시의 일 실시 예는 HMD (head-mountable display)에서 3차원 사용자 인터페이스를 위한 방법 및 장치를 제공한다.

본 개시의 다른 실시 예는 가상 현실 모드(virtual reality, VR)에서 어플리케이션 그룹화를 위한 방법 및 장치를 제공한다.

본 개시의 또 다른 실시 예는 가상 현실 모드에서 그룹화된 어플리케이션들을 HMD에 표시하기 위한 방법 및 장치를 제공한다.

상술한 목적을 달성하기 위한 본 개시의 일 실시 예에 따른 가상 현실 모드에서 어플리케이션 선택을 위한 방법은, 어플리케이션의 선택을 수신하는 과정과, 단말이 가상 현실 모드에 있는지 여부를 판단하는 과정과, 상기 단말이 가상 현실 모드에 있는 경우, 상기 선택된 어플리케이션이 어플리케이션들의 그룹에 포함되었는지 여부를 판단하는 과정과, 여기에서 상기 그룹은 상기 선택된 어플리케이션들과 관련된 하나 이상의 어플리케이션들을 포함하고, 상기 선택된 어플리케이션이 어플리케이션들의 그룹에 포함된 경우, 상기 어플리케이션들의 그룹을 실행하는 과정과, 상기 단말의 디스플레이에 상기 실행된 어플리케이션들의 그룹을 제공하는 과정을 포함한다.

본 개시의 다른 실시 예에 따른 단말은, 어플리케이션들의 그룹을 저장하도록 구성된 메모리 구성요소와, 상기 어플리케이션들의 그룹을 표시하도록 구성된 표시부와, 상기 메모리 구성요소 및 표시부에 결합된 처리 회로를 포함하고, 상기 처리 회로는, 어플리케이션의 선택을 수신하고, 상기 단말이 상기 가상 현실 모드에 있는지 여부를 판단하고, 상기 단말이 가상 현실 모드에 있는 경우, 상기 선택된 어플리케이션이 상기 어플리케이션들의 그룹에 포함되었는지 여부를 판단하고, 여기에서 상기 그룹은 상기 선택된 어플리케이션들과 관련된 하나 이상의 어플리케이션들을 포함하고, 상기 선택된 어플리케이션이 상기 어플리케이션들의 그룹에 포함된 경우, 상기 어플리케이션들의 그룹을 실행하고, 상기 단말의 디스플레이에 상기 실행된 어플리케이션들의 그룹을 제공한다.

본 개시의 실시 예들에 따르면, 컨텍스트에 기반한 어플리케이션들의 그룹화는 가상 현실 모드에서 HMD (head-mountable display)에 관련된 어플리케이션들의 그룹을 표시하여 사용자가 가상 현실 모드에서도 효율적으로 현실 세계의 작업들을 처리할 수 있도록 하는 효과가 있다.

도 1은 본 개시의 실시 예들에 따라 본 개시의 실시 예들이 구현되는 HMD(head-mountable display)의 일 예를 나타낸다.
도 2는 본 개시의 일 실시 예에 따른 HMD의 일 예를 나타낸다.
도 3은 본 개시의 일 실시 예에 따라 HMD를 통한 화면(view)을 나타낸다.
도 4는 본 개시의 일 실시 예에 따라 복수 개의 윈도우가 표시된 화면을 나타낸다.
도 5는 본 개시의 일 실시 예에 따라 어플리케이션들의 그룹을 나타낸다.
도 6은 본 개시의 일 실시 예에 따라 가상 현실(virtual reality, VR) 모드에서 어플리케이션 선택을 위한 흐름도이다.

이하 첨부된 도면을 참조하여 다양한 실시 예들의 동작 원리를 상세히 설명한다. 하기에서 다양한 실시 예들을 설명에 있어 관련된 공지 기능 또는 구성에 대한 구체적인 설명이 발명의 요지를 불필요하게 흐릴 수 있다고 판단되는 경우에는 그 상세한 설명을 생략할 것이다. 그리고 후술되는 용어들은 다양한 실시 예들에서의 기능을 고려하여 정의된 용어들로서 이는 사용자, 운용자의 의도 또는 관례 등에 따라 달라질 수 있다. 그러므로 그 정의는 본 명세서 전반에 걸친 내용을 토대로 내려져야 할 것이다.

이하 설명에서 사용되는 제어 정보를 지칭하는 용어, 망 객체(network entity)들을 지칭하는 용어, 디스플레이를 지칭하는 용어, 장치의 구성 요소를 지칭하는 용어 등은 설명의 편의를 위해 예시된 것이다. 따라서, 본 발명이 후술되는 용어들에 한정되는 것은 아니며, 동등한 기술적 의미를 가지는 다른 용어가 사용될 수 있다.

이하 사용되는 '~부', '~기' 등의 용어는 적어도 하나의 기능이나 동작을 처리하는 단위를 의미하며, 이는 하드웨어나 소프트웨어, 또는, 하드웨어 및 소프트웨어의 결합으로 구현될 수 있다.

본 개시에서 본 발명의 원리들을 설명하는데 사용되는 다양한 실시 예들과 하기에 도시된 도 1 내지 도 6은 단지 설명을 위한 것이고, 본 개시의 범위를 제한하는 방법으로 이해되어서는 안 된다. 당업자는 본 발명의 원리들이 어떠한 적절하게 준비된 시스템이나 장치에서 구현될 수 있음을 이해할 것이다.

도 1은 본 개시의 실시 예들에 따라 본 개시의 실시 예들이 구현되는 HMD(head-mountable display) 100의 일 예를 나타낸다. 도 1에 나타난 HMD 100의 실시 예는 단지 예시적인 것이다. HMD 100은 다양한 구성을 갖출 수 있으며, 도 1은 본 개시의 범위를 HMD 100의 어떠한 특정 구현으로 한정하지 않는다.

다양한 실시 예들에서, HMD 100은 다른 형태를 가질 수 있고, 본 개시에서 HMD 100은 어떠한 특정 형태로 제한되지 않는다. 예를 들면, HMD 100은 이동 통신 장치(mobile communication device), 이동 장치(mobile device), 사용자 장치(user equipment), 이동국(mobile station), 가입자국(subscriber station), 무선 단말(wireless terminal), 스마트 폰(smart phone), 태블릿(tablet), 휴대용 전자 장치(portable electronic device), 휴대용 단말기(portable terminal), 단말(terminal), 이동 전화(mobile phone), 이동 패드(mobile pad), 미디어 플레이어(media player), 핸드헬드 컴퓨터(handheld computer) 또는 PDA(personal digital assistant)중 어느 하나이거나, 상술한 장치들 중 둘 이상의 기능들을 결합한 장치일 수 있다. HMD 100은 가상 현실(virtual reality, VR) 및/또는 증강 현실(augmented reality, AR) 어플리케이션들을 위한 헤드셋에 장착될 수 있는 것일 수 있다. 다른 예에서, HMD 100은 헤드셋을 포함할 수 있고, 글래스, 고글, 헬멧 등과 같이 VR 및/또는 AR을 위한 웨어러블 전자 장치의 형태일 수 있다.

도 1에 나타나 있듯이, HMD 100은 안테나 105, 라디오 주파수(radio frequency, RF) 송수신기 110, TX 처리 회로 115, 마이크 120, 수신 처리 회로 125를 포함한다. HMD 100은 또한 스피커(speaker) 130, 프로세서(processor) 140, 입/출력(I/O) 인터페이스(IF) 145, 터치스크린(keypad) 150, 디스플레이(display) 155, 메모리(memory) 160 및 하나 이상의 센서들 165를 포함한다. 메모리 160은 운영체제(operating system, OS) 161과 하나 이상의 어플리케이션(application) 162를 포함한다.

RF 송수신기 110은 안테나 105로부터 네트워크(예를 들면, WiFi(wireless fidelity), 블루투스, 셀룰러(cellular), 5G LTE(5^th generation long-term evolution), LTE-A(LTE-advanced), WiMAX(Worldwide Interoperability for Microwave Access) 또는 다른 유형의 무선 네트워크)를 위한 엑세스 포인트(예를 들면, 기지국, WiFi 라우터, 블루투스 장치)에서 송신되는 수신을 위한 RF 신호를 수신한다. RF 송수신기 110은 중간 주파수(intermediate frequency, IF) 또는 기저대역 신호를 생성하기 위해 수신을 위한 RF 신호를 하향 변환(down-convert)한다. IF 또는 기저대역 신호는 기저대역 또는 IF 신호를 필터링(filtering), 디코딩(decoding), 및/또는 디지털화(digitizing)함으로써 처리된 기저대역 신호를 생성하는 RX 처리 회로 125으로 송신된다. RX 처리 회로 125는 처리된 기저대역 신호를 스피커 130에 송신하거나(음성 데이터를 위한 것 같이) 처리를 더 하기 위해(웹 브라우징 데이터(web browsing data) 같은) 프로세서 140에 송신할 수 있다.

TX 처리 회로 115는 마이크 120으로부터 아날로그 또는 디지털 음성 데이터를 수신하거나 프로세서 140으로부터 다른 송신을 위한(outgoing) 기저대역 데이터(웹 데이터, 이메일(e-mail), 쌍방향 비디오 게임 데이터 같은)를 수신한다. TX 처리 회로 115는 처리된 기저대역 또는 중간주파수 신호를 생성하기 위해 송신을 위한 기저대역 데이터를 인코드(encode)하고, 멀티플렉스(multiplex)하고, 디지털화한다. RF 송수신기 110은 TX 처리 회로 115로부터 송신을 위한 처리된 기저대역 또는 중간주파수 신호를 수신하고, 기저대역 또는 중간주파수 신호를 안테나 105를 통해 송신되는 RF 신호로 상향변환(up-convert)한다.

프로세서 140은 하나 이상의 프로세서 또는 다른 처리 장치를 포함할 수 있고 HMD 100의 전체적인 동작을 제어하기 위해 메모리 160에 저장되어 있는 OS(operation system) 161을 실행한다. 예를 들면, 프로세서 140은 잘 알려진 원리와 함께 RF 송수신기 110, RX 처리 회로 125, TX 처리 회로 115을 이용하여 정방향(forward)의 채널 신호의 수신과 역방향(reverse)의 채널 신호의 송신을 제어한다. 어떤 실시 예들에서는, 프로세서 140은 최소한 하나의 마이크로프로세서(microprocessor) 또는 마이크로제어기(microcontroller)를 포함한다.

프로세서 140은 또한 메모리 160에 존재하는 다른 프로세스나 프로그램을 실행할 수 있다. 프로세서 140은 실행 프로세스에서 요구됨에 따라 데이터를 메모리 160으로 이동시키거나 불러올 수 있다. 어떤 실시 예들에서는, 프로세서 140은 OS 161에 기반하여 또는 eNB(eNodeB)나 작동자(operator)로부터 수신되는 신호에 응답하여 어플리케이션 162를 실행하도록 구성된다. 프로세서 140은 또한 I/O 인터페이스 145에 결합되어 있는데, I/O 인터페이스 145는 HMD 100이 랩톱 컴퓨터(laptop computer)와 휴대용 컴퓨터(handheld computer)같은 다른 장치에 연결할 수 있도록 한다. I/O 인터페이스 145는 프로세서 140과 다른 장치들 간의 통신 경로이다.

프로세서 140은 또한 터치스크린 150과 디스플레이 155와 결합되어 있다. HMD 100의 작동자는 HMD 100에 데이터 및/또는 입력 값들을 입력하기 위해 터치스크린 150을 사용할 수 있다. 디스플레이 155는 텍스트 및/또는 웹사이트, 비디오, 게임 등을 위한 그래픽을 표시할 수 있는 액정(liquid crystal) 디스플레이, 발광 다이오드(light emitting diode, LED) 디스플레이, 광학 LED(optical LED, OLED), 능동형 격자 OLED(active matrix OLED, AMOLED) 또는 다른 디스플레이일 수 있다.

메모리 160은 프로세서 140에 결합되어 있다. 메모리 160의 일부는 임의 접근 기억장치(random access memory, RAM)을 포함할 수 있고, 메모리 160의 또 다른 부분은 플래시 메모리(flash memory) 또는 다른 읽기용 기억장치(read-only memory, ROM)을 포함할 수 있다.

HMD 100은 물리량(physical quantity)를 측정하거나 HMD 100의 활성 상태(activation state)를 검출하고 측정된 또는 검출된 정보를 전기적인 신호로 변환할 수 있는 하나이상의 센서 165를 더 포함한다. 예를 들면, 센서 165는 터치 입력(touch input)을 위한 하나 이상의 버튼을 포함할 수 있는데, 하나 이상의 버튼은 헤드셋, HMD 100, 제스쳐 센서(gesture sensor), 자이로센서(gyroscope or gyro sensor), 기압 센서(air pressure sensor), 자기 센서(magnetic sensor or magnetometer), 가속 센서(acceleration or accelerometer), 그립 센서(grip sensor), 근접 센서(proximity sensor), 컬러 센서(color sensor) 165H(예를 들면, 적녹청(RGB) 센서), 생물물리학 센서, 기온/습도 센서, 조도 센서(illumination sensor) 165K, 자외선(ultra violet, UV)센서, 근전위(electromyography sensor, EMG)센서, 뇌전도(Electroencephalogram) 센서, 심전도(electrocardiogram) 센서, 적외선(infra red, IR) 센서, 초음파(ultrasound) 센서, 홍채(iris) 센서, 지문(fingerprint) 센서 등에 있다. 센서 165는 그 안에 포함돼 있는 적어도 하나의 센서를 제어하기 위한 제어 회로를 더 포함할 수 있다. 하기에서 보다 상세하게 검토되듯이, 하나 이상의 센서 165는 UI를 제어하고, UI 입력을 검출하고, 3D 컨텐츠 디스플레이 식별을 위해 사용자의 방위(orientation)와 마주하는 방향을 결정하는 것 등에 사용될 수 있다. 센서 165중 어떤 것도 HMD 100 내부, HMD 100을 고정하도록 구성된 헤드셋 내부에, HMD 100이 헤드셋을 포함하는 실시 예에서 헤드셋 및 HMD 100 모두의 내부에 위치할 수 있다.

터치스크린 150은 터치 패널(touch panel),(디지털) 펜 센서(pen sensor), 키(key), 또는 초음파 입력 장치를 포함할 수 있다. 터치스크린 150은, 예를 들면, 정전(capacitive) 방식, 압력 감지 방식, 적외선 방식, 또는 초음파 방식 중 적어도 하나의 방식의 터치 입력을 인식할 수 있다. 터치스크린 150은 또한 제어 회로를 포함할 수 있다. 상기 정전 방식에서는, 터치스크린 150은 터치 또는 근접성(proximity)을 인식할 수 있다.

하기에서 더욱 상세히 설명 되듯이, HMD 100은 HMD를 위한 3D UI를 제공하는 어플리케이션들과 회로를 포함할 수 있다. 도 1은 HMD 100의 일 예를 나타내지만, 도 1에 다양한 변화가 주어질 수 있다. 예를 들면, 도 1의 다양한 구성요소들은 조합되거나, 더 세분화되거나, 생략될 수 있고 추가적인 구성요소가 특정 요구에 따라 추가될 수 있다. 특정 예를 들자면, 프로세서 140은 하나 이상의 중앙 처리 장치(central processing unit, CPU)들과 하나 이상의 그래픽 처리 유닛(graphics processing unit, GPU)같은 다수개의 프로세서들로 나누어 질 수 있다. 또한, 도 1이 HMD 100을 휴대용 전화, 태블릿 또는 스마트폰으로 구성된 것처럼 나타내지만, HMD 100은 다른 유형의 이동 또는 정적 장치로서 작동하도록 구성될 수 있다.

도 2는 본 개시의 일 실시 예에 따른 HMD 200의 일 예를 나타낸다. HMD 200은, 예를 들면, 도 1에 도시된 것과 같은 HMD 100의 구성을 가질 수 있다. 도 2에서는 HMD의 일 면만이 도시되었다. 도 2에 도시된 HMD 100의 형태는 단지 예시적인 것이고, HMD 100은 다양한 다른 형태를 포함할 수 있다.

도 3은 본 개시의 일 실시 에에 따라 HMD 304를 통한 화면(view) 302의 일 예를 나타낸다. 도 3에서, 사용자는 HMD 304를 착용하고 화면 302를 관측하고 있다. 화면 302는 96도의 시야 각을 포함한다. 다른 실시 예들에서, 다른 시야 각들이 사용될 수 있다.

본 개시의 다양한 실시 예들은 큰 사이즈의 스크린과 96도의 시야 각을 구비한 HMD 304는 사용자가 주변 시야(peripheral vision) 너머로 세상을 느낄 수 있게 한다는 것을 인식하고 고려한다. 이동 기기 LCD(liquid crystal display)를 스크린으로 하는 HMD 304의 응용이 존재한다. 다시 말해서, HMD 304는 이동 기기 LCD에 표시된 것을 HMD 304의 스크린에 표시하도록 적용될 수 있다. 사용자들은 HMD 304를 탈착하지 않고 이동 기기를 사용하고자 할 수 있다. 사용자는 VR 과 실제 세계간의 매끄러운 전환을 원할 수 있다. 예를 들면, 사용자가 HMD 304를 통해 영화를 보다가 전자 메일(e-mail) 작성을 원할 수 있다. 본 예에서, 사용자는 HMD 304를 탈착하지 않고 VR 환경에서 전자 메일을 작성할 수 있다. 이동 기기는 VR 세계에서 이동 기기 환경을 디스플레이 할 수 있다.

도 4는 본 개시의 일 실시 예에 따라 복수 개의 윈도우가 표시된 화면 400을 나타낸다. 도 4에서, 화면 400은 복수 개의 윈도우 402 내지 406을 포함한다. 본 개시의 다양한 실시 예들은 VR 환경에서 실행되는 복수 개의 윈도우들을 효율적으로 사용하는 것이 어렵다는 것을 인식하고 고려한다. 본 개시의 다양한 실시 예들은 VR 상단의 일부로 복수 개의 스크린들을 제공한다. 본 실시 예에서, 윈도우 402는 날씨를, 윈도우 404는 비디오를, 윈도우 406은 회사의 주식 가격을 나타낸다. 윈도우 402 내지 406 각각에서 실행되는 세 개의 어플리케이션은 VR 기어에 장착된 이동 기기로부터 실행된 것이다. 윈도우 402 내지 406에서 실행되는 어플리케이션들은 사용자의 상황 정보(context) 및/또는 그룹화에 기반할 수 있다. 일 실시 예로, 도 4는 복수 개의 윈도우들 402 내지 406에서 그룹화된 관련 어플리케이션들이 각각 실행되는 것을 도시한다.

다양한 실시 예들에서, 어플리케이션들의 그룹화는 미리 정의될 수 있다. 예를 들면, 사용자는 함께 사용될 가능성이 높은 어플리케이션들을 직접 선택하여 선택한 어플리케이션들을 그룹화 할 수 있다.

또한, 어플리케이션들의 그룹화는 사용자의 상황 정보에 기반할 수 있다. 다시 말해서, 어플리케이션의 그룹화는 사용 패턴에 기반하여 동적으로 설정 되거나, 위치에 따라 설정되거나, 시간에 따라 설정되거나, 또는 그들의 조합으로 설정될 수 있다. 본 실시 예는 함께 사용될 가능성이 높은 어플리케이션들이 사용 패턴, 위치, 시간과 같은 사용자의 상황 정보에 따라 달라질 수 있음을 인식한다. 사용 패턴은 사용자 장치 또는 네트워크 서버의 메모리 구성요소에 있는 데이터로부터 획득될 수 있다. 예를 들면, 사용자 장치 또는 네트워크 서버는 사용 패턴을 주기적으로 확인하여 사용자 장치 또는 네트워크 서버의 메모리 구성요소에 저장할 수 있고, 저장된 사용 패턴에 기반하여 함께 사용될 가능성이 높은 어플리케이션들이 추정되어 그룹화 될 수 있다.

사용자가 그룹화된 어플리케이션의 일부를 실행할 경우, 다시 말해서, 사용자가 어플리케이션들의 그룹에 속한 어플리케이션들 중 어느 하나를 실행할 경우, 그룹에 속한 다른 어플리케이션들이 자동적으로 함께 실행될 수 있다. 실행된 어플리케이션들은, 예를 들면, HMD의 디스플레이에 표시될 수 있다.

도 5는 본 개시의 일 실시 예에 따른 어플리케이션들의 그룹 500을 나타낸다. 도 5에서, 사진 어플리케이션 502, 전자 메일 어플리케이션 504, 및 문서 저장 어플리케이션 506은 그룹 500의 일부이다.

일 실시 예에서, 사용자가 전자 메일을 작성하면서 사진과 문서를 작성중인 전자 메일에 첨부하고자 하는 경우, 사용자는 그림과 문서를 첨부하기 위해 세 개의 어플리케이션에 접근해야 할 필요가 있다. 세 개의 어플리케이션은 전자 메일 어플리케이션 502, 사진 어플리케이션 504, 및 문서 저장 어플리케이션 506일 수 있다. 본 실시 예에서, 전자 메일 어플리케이션 502는 주요한 어플리케이션에 해당하는 반면, 사진 어플리케이션 504 및 문서 저장 어플리케이션 506은 사용자가 주요한 어플리케이션에 복사하거나 삽입할 내용을 선택하기 위한 관련 어플리케이션에 해당한다. 사용자가 전자 메일 어플리케이션 502를 실행하는 경우, 사진 어플리케이션 504 및 문서 저장 어플리케이션 506이 자동적으로 실행된다.

도 6은 본 개시의 일 실시 예에 따라 가상 현실 모드에서 어플리케이션 선택을 위한 흐름도 600을 나타낸다. 도 6에서, 가상 현실 모드는 HMD가 가상 현실 또는 증강 현실(augmented reality)을 위해 사용되는 모드로 정의될 수 있다. 어떤 실시 예들에서, HMD의 시야 각 또는 사용자 장치에서 복수 개의 어플리케이션들이 동시에 표시될 수 있다. 흐름도 600은, 도 1의 하나 이상의 구성요소, 예를 들면, 제어부, 프로세서 및/또는 처리 회로에 의해 수행될 수 있다.

단계 602에서, 프로세서는 어플리케이션의 선택을 수신한다. 어플리케이션의 선택은 사용자의 입력에 따라 정해질 수 있고, 프로세서는, 예를 들면, 터치 스크린과 같은 사용자 입력 장치로부터 어플리케이션의 선택을 수신할 수 있다.

단계 604에서, 프로세서는 사용자 장치의 운영 체제의 모드가 가상 현실 모드인지 여부를 판단한다. 사용자 장치의 운영 체제의 모드가 가상 현실 모드가 아닐 경우, 본 알고리즘은 종료되고 어플리케이션은 통상적인 경우와 같이 실행된다. 사용자 장치의 운영 체제의 모드가 가상 현실 모드일 경우, 단계 606으로 이동하여, 프로세서는 선택된 어플리케이션이 어플리케이션들의 그룹의 일부인지 여부를 판단한다. 어플리케이션의 그룹은 미리 정의되거나, 사용 패턴에 기반하여 동적으로 설정 되거나, 위치에 따라 설정되거나, 시간에 따라 설정되거나, 또는 그들의 조합으로 설정될 수 있다. 다른 실시 예들에서, 어떤 어플리케이션들의 그룹은 미리 정해지는 반면, 다른 어플리케이션들의 그룹은 사용 패턴에 기반하여 동적으로 설정되거나, 위치에 따라 설정되거나, 시간에 따라 설정될 수 있다.

선택된 어플리케이션이 어플리케이션들의 그룹의 일부가 아닐 경우, 단계 610으로 이동하여, 프로세서는 사용자가 선택된 어플리케이션과 함께 표시될 추가적인 어플리케이션을 선택할 수 있도록 한다. 가상 현실 모드에서 사용자 장치의 시야 각으로 인해, 선택된 어플리케이션 및 추가적인 어플리케이션들은 동시에 표시될 수 있다. 선택된 어플리케이션이 그룹화된 어플리케이션의 일부일 경우, 단계 612로 이동하여, 프로세서는 그룹화된 어플리케이션들을 실행하고 사용자 장치의 디스플레이에 그룹화된 어플리케이션들을 제공한다.

본 개시의 청구항 또는 명세서에 기재된 실시 예들에 따른 방법들은 하드웨어, 소프트웨어, 또는 하드웨어와 소프트웨어의 조합의 형태로 구현될(implemented) 수 있다.

그러한 소프트웨어는 컴퓨터 판독 가능 저장 매체에 저장될 수 있다. 컴퓨터 판독 가능 저장 매체는, 적어도 하나의 프로그램(소프트웨어 모듈), 전자 장치에서 적어도 하나의 프로세서에 의해 실행될 때 전자 장치가 본 개시의 방법을 실시하게 하는 명령어들(instructions)을 포함하는 적어도 하나의 프로그램을 저장한다.

이러한 소프트웨어는, 휘발성(volatile) 또는(ROM: Read Only Memory)과 같은 불휘발성(non-volatile) 저장장치의 형태로, 또는 램(RAM: random access memory), 메모리 칩(memory chips), 장치 또는 집적 회로(integrated circuits)와 같은 메모리의 형태로, 또는 컴팩트 디스크 롬(CD-ROM: Compact Disc-ROM), 디지털 다목적 디스크(DVDs: Digital Versatile Discs), 자기 디스크(magnetic disk) 또는 자기 테이프(magnetic tape) 등과 같은 광학 또는 자기적 판독 가능 매체에, 저장될 수 있다.

저장 장치 및 저장 미디어는, 실행될 때 일 실시 예들을 구현하는 명령어들을 포함하는 프로그램 또는 프로그램들을 저장하기에 적절한 기계-판독 가능 저장 수단의 실시 예들이다. 실시 예들은 본 명세서의 청구항들 중 어느 하나에 청구된 바와 같은 장치 또는 방법을 구현하기 위한 코드를 포함하는 프로그램, 및 그러한 프로그램을 저장하는 기계-판독 가능 저장 매체를 제공한다. 나아가, 그러한 프로그램들은 유선 또는 무선 연결을 통해 전달되는 통신 신호와 같은 어떠한 매체에 의해 전자적으로 전달될 수 있으며, 실시 예들은 동등한 것을 적절히 포함한다.

상술한 구체적인 실시 예들에서, 발명에 포함되는 구성 요소는 제시된 구체적인 실시 예에 따라 단수 또는 복수로 표현되었다. 그러나, 단수 또는 복수의 표현은 설명의 편의를 위해 제시한 상황에 적합하게 선택된 것으로서, 상술한 실시 예들이 단수 또는 복수의 구성 요소에 제한되는 것은 아니며, 복수로 표현된 구성 요소라 하더라도 단수로 구성되거나, 단수로 표현된 구성 요소라 하더라도 복수로 구성될 수 있다.

한편 발명의 설명에서는 구체적인 실시 예에 관해 설명하였으나, 다양한 실시 예들이 내포하는 기술적 사상의 범위에서 벗어나지 않는 한도 내에서 여러 가지 변형이 가능함은 물론이다. 그러므로 본 발명의 범위는 설명된 실시 예에 국한되어 정해져서는 아니 되며 후술하는 청구범위뿐만 아니라 이 청구범위와 균등한 것들에 의해 정해져야 한다.

Claims

단말에서 어플리케이션 선택을 위한 방법에 있어서,
어플리케이션의 선택을 감지하는 과정과,
단말이 가상 현실 모드에 있는지 여부를 판단하는 과정과,
상기 단말이 가상 현실 모드에 있는 경우, 상기 선택된 어플리케이션이 어플리케이션들의 그룹에 포함되었는지 여부를 판단하는 과정과, 여기에서 상기 그룹은 상기 선택된 어플리케이션과 관련된 하나 이상의 어플리케이션들을 포함하고,
상기 선택된 어플리케이션이 상기 그룹에 포함된 경우, 상기 그룹에 포함된 어플리케이션들을 실행하는 과정과,
상기 단말의 디스플레이에 상기 실행된 어플리케이션들을 표시하는 과정을 포함하는 방법.
제 1항에 있어서, 상기 하나 이상의 어플리케이션들은 상기 디스플레이에서 서로 인접하게 표시되는 방법.
제 1항에 있어서, 상기 그룹은 미리 정의되는 방법.
제 1항에 있어서, 상기 그룹은 사용자 패턴에 기반하여 유동적으로 설정되는 방법.
제 1항에 있어서, 상기 그룹은 상기 단말의 위치에 기반하여 유동적으로 설정되는 방법.
제 1항에 있어서, 상기 그룹은 시간에 기반하여 유동적으로 설정되는 방법.
제 4항에 있어서, 상기 사용 패턴은 네트워크 서버의 사용 데이터로부터 획득되는 방법.
제 4항에 있어서, 상기 사용 패턴은 상기 단말의 메모리 구성요소에 있는 사용 데이터로부터 획득되는 방법.
제 1항에 있어서, 상기 선택된 어플리케이션이 상기 그룹에 포함되지 않은 경우, 적어도 하나의 추가적인 어플리케이션의 선택을 감지하는 과정과,
상기 선택된 어플리케이션 및 상기 적어도 하나의 추가적인 어플리케이션들을 상기 단말의 디스플레이에 표시하는 과정을 포함하는 방법.
제 1항에 있어서, 상기 그룹에 속한 제1 어플리케이션의 내용은 상기 그룹에 속한 제2 어플리케이션으로 복사되는 방법.
단말에서 어플리케이션 선택을 위한 장치에 있어서,
어플리케이션들의 그룹을 저장하도록 구성된 메모리 구성요소와,
상기 그룹에 속한 어플리케이션들을 표시하도록 구성된 표시부와,
상기 메모리 구성요소 및 상기 표시부에 결합된 처리 회로를 포함하고,
상기 처리 회로는, 어플리케이션의 선택을 감지하고, 상기 단말이 상기 가상 현실 모드에 있는지 여부를 판단하고, 상기 단말이 가상 현실 모드에 있는 경우, 상기 선택된 어플리케이션이 상기 어플리케이션들의 그룹에 포함되었는지 여부를 판단하고, 여기에서 상기 그룹은 상기 선택된 어플리케이션들과 관련된 하나 이상의 어플리케이션들을 포함하고, 상기 선택된 어플리케이션이 상기 그룹에 포함된 경우, 상기 그룹에 포함된 어플리케이션들을 실행하고, 상기 단말의 표시부에 상기 실행된 어플리케이션들을 표시하는 장치.
제 11항에 있어서, 상기 하나 이상의 어플리케이션들은 상기 디스플레이에서 서로 인접하게 표시되는 장치.
제 11항에 있어서, 상기 그룹은 미리 정의되는 장치.
제 11항에 있어서, 상기 그룹은 사용자 패턴에 기반하여 유동적으로 설정되는 장치.
제 11항에 있어서, 상기 그룹은 상기 단말의 위치에 기반하여 유동적으로 설정되는 장치.
제 1항에 있어서, 상기 그룹은 시간에 기반하여 유동적으로 설정되는 장치.
제 4항에 있어서, 상기 사용 패턴은 네트워크 서버의 사용 데이터로부터 획득되는 장치.
제 4항에 있어서, 상기 사용 패턴은 상기 단말의 메모리 구성요소에 있는 사용 데이터로부터 획득되는 장치.
제 1항에 있어서, 상기 처리 회로는 상기 선택된 어플리케이션이 상기 그룹에 포함되지 않은 경우, 적어도 하나의 추가적인 어플리케이션의 선택을 감지하고,
상기 표시부는, 상기 선택된 어플리케이션 및 상기 적어도 하나의 추가적인 어플리케이션들을 표시하는 장치.
제 11항에 있어서, 상기 그룹에 속한 제1 어플리케이션의 내용은 상기 그룹에 속한 제2 어플리케이션으로 복사되는 장치.