CN105900051A - 电子装置以及在虚拟现实模式下的事件显示方法 - Google Patents

电子装置以及在虚拟现实模式下的事件显示方法 Download PDF

Info

Publication number
CN105900051A
CN105900051A CN201580003868.XA CN201580003868A CN105900051A CN 105900051 A CN105900051 A CN 105900051A CN 201580003868 A CN201580003868 A CN 201580003868A CN 105900051 A CN105900051 A CN 105900051A
Authority
CN
China
Prior art keywords
event
electronic installation
virtual real
real mode
picture
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN201580003868.XA
Other languages
English (en)
Other versions
CN105900051B (zh
Inventor
尹荣晟
姜相源
李镇求
崔成勋
崔又锡
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Samsung Electronics Co Ltd
Original Assignee
Samsung Electronics Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Samsung Electronics Co Ltd filed Critical Samsung Electronics Co Ltd
Priority claimed from PCT/KR2015/000097 external-priority patent/WO2015102464A1/ko
Publication of CN105900051A publication Critical patent/CN105900051A/zh
Application granted granted Critical
Publication of CN105900051B publication Critical patent/CN105900051B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G—PHYSICS
    • G02—OPTICS
    • G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B27/00—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
    • G02B27/01—Head-up displays
    • G02B27/017—Head mounted
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/011—Arrangements for interaction with the human body, e.g. for user immersion in virtual reality
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0481—Interaction techniques based on graphical user interfaces [GUI] based on specific properties of the displayed interaction object or a metaphor-based environment, e.g. interaction with desktop elements like windows or icons, or assisted by a cursor's changing behaviour or appearance
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0484—Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range
    • G06F3/04842—Selection of displayed objects or displayed text elements
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0487—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser
    • G06F3/0488—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures
    • G06F3/04883—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures for inputting data by handwriting, e.g. gesture or text
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T19/00—Manipulating 3D models or images for computer graphics
    • G06T19/006—Mixed reality
    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G5/00—Control arrangements or circuits for visual indicators common to cathode-ray tube indicators and other visual indicators
    • G09G5/003—Details of a display terminal, the details relating to the control arrangement of the display terminal and to the interfaces thereto
    • G09G5/006—Details of the interface to the display terminal
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L51/00—User-to-user messaging in packet-switching networks, transmitted according to store-and-forward or real-time protocols, e.g. e-mail
    • H04L51/21—Monitoring or handling of messages
    • H04L51/224—Monitoring or handling of messages providing notification on incoming messages, e.g. pushed notifications of received messages
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/30—Image reproducers
    • H04N13/332—Displays for viewing with the aid of special glasses or head-mounted displays [HMD]
    • G—PHYSICS
    • G02—OPTICS
    • G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B27/00—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
    • G02B27/01—Head-up displays
    • G02B27/0101—Head-up displays characterised by optical features
    • G02B2027/0132—Head-up displays characterised by optical features comprising binocular systems
    • G—PHYSICS
    • G02—OPTICS
    • G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B27/00—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
    • G02B27/01—Head-up displays
    • G02B27/0101—Head-up displays characterised by optical features
    • G02B2027/0132—Head-up displays characterised by optical features comprising binocular systems
    • G02B2027/0136—Head-up displays characterised by optical features comprising binocular systems with a single image source for both eyes
    • G—PHYSICS
    • G02—OPTICS
    • G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B27/00—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
    • G02B27/01—Head-up displays
    • G02B27/0101—Head-up displays characterised by optical features
    • G02B2027/014—Head-up displays characterised by optical features comprising information/image processing systems
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2200/00—Indexing scheme for image data processing or generation, in general
    • G06T2200/04—Indexing scheme for image data processing or generation, in general involving 3D image data
    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G2370/00—Aspects of data communication
    • G09G2370/16—Use of wireless transmission of display information
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L51/00—User-to-user messaging in packet-switching networks, transmitted according to store-and-forward or real-time protocols, e.g. e-mail
    • H04L51/21—Monitoring or handling of messages
    • H04L51/214—Monitoring or handling of messages using selective forwarding

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • General Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Human Computer Interaction (AREA)
  • Computer Hardware Design (AREA)
  • Computer Graphics (AREA)
  • Software Systems (AREA)
  • Optics & Photonics (AREA)
  • Signal Processing (AREA)
  • Multimedia (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • User Interface Of Digital Computer (AREA)

Abstract

本发明的多样的实施例可以包括：显示部，用于显示与虚拟现实模式对应的画面；以及控制部，通过控制，感测由至少一个事件的发生所导致的中断，将与所述发生的事件相关的事件相关信息变更为与所述虚拟现实模式对应的形态，并将所述变更后的事件相关信息显示在与所述虚拟现实模式对应而运行的画面中。此外，本发明的多样的实施例还可以实现其他实施例。

Description

电子装置以及在虚拟现实模式下的事件显示方法
技术领域
本发明的多样的实施例涉及一种电子装置以及在虚拟现实模式下的事件现实方法。
背景技术
通常，虚拟现实(virtual reality：VR)表示具有与实际类似的环境的通过计算机绘图绘出的环境或情况，其表示一种使人能够通过感官器官来感受，仿佛在进行实际的交互的接口。用户可以通过操作设备而实时地与虚拟现实进行交互，从而可以进行与实际类似的感官体验。
而且，增强现实(augmented reality：AR)是虚拟现实的一领域，是一种将虚拟事物或信息合成到实际环境而使其看起来像是存在于原来的环境的事物的计算机绘图技术。这种增强现实是将用户利用肉眼看到的现实世界与虚拟物体叠加而显示的技术，因该技术实时地将现实世界与附加信息和虚拟世界叠加而显示为一个图像，因此也称之为混合现实(mixed reality：MR)。
此外，随着移动设备(例如，智能手机、平板PC等)的普遍化，经常且容易地在诸如教育、游戏、导航、广告或博客之类的多样的服务中接触虚拟现实技术。近年来，随着能够穿戴于身体的可穿戴装置(wearable device)的商用化，针对虚拟现实技术的研究也越来越活跃。
例如，所述可穿戴装置以头部安装型、眼镜型、手表型、绑带(band)型、隐形眼镜型、戒指型、鞋型、服装型等可可装卸于身体及服装的多样的形态提供。所述可穿戴装置使电子装置如同衣服或眼镜等能够穿戴于身体，从而可以提高便携性以及接近性(accessibility)。
可穿戴于身体的电子装置的形态中，例如，头戴式显示器(head mounteddisplay：HMD)等头部穿戴型可穿戴装置被广为开发。头戴式设备可以以用于提供增强现实(augmented reality：AR)的透视(see-through)形态和用于提供虚拟现实(virtual reality：VR)的非透视(see-closed)形态提供图像。
透视形态利用半透过性镜头的特性，在现实世界的基础上合成及结合虚拟的对象或事物，从而可以增强仅通过现实世界难以获得的额外的信息。非透视形态是两个显示器放置在眼前的形态，其可以单独地在独立的画面中观看通过外部输入而提供的内容(游戏、电影、流媒体、广播等)，使得用户能够专注于内容。
发明内容
技术问题
根据现有技术，例如，在电子装置(例如，手机)等以虚拟现实模式(virtualreality mode)进行操作的过程中，如果由于特定事件(event)而发生中断，则将会独立于所述虚拟现实模式而执行针对所述事件的应用，因此存在着妨碍基于虚拟现实模式的画面显示的问题。
此外，如果在以虚拟现实模式进行操作的过程中发生中断，则用另外的画面显示关于所述事件的通知，或者在虚拟现实模式的画面上以二维的方式显示该通知，从而导致感觉到该通知与虚拟现实画面之间的不谐调。
为解决该问题，根据本发明的多样的实施例，可以提供一种电子装置及在虚拟现实模式下的事件显示方法，其如果在以虚拟现实模式进行操作的情况下发生事件，则通过对所发生的事件进行加工，从而以适合虚拟现实模式的方式显示该事件。
此外，根据本发明的多样的实施例，可以提供一种电子装置及虚拟现实模式下的事件显示方法，其如果在以虚拟现实模式进行操作的情况下发生事件，则以与普通模式不同的方式通过虚拟现实画面显示针对所发生的事件的通知方法。
此外，根据本发明的多样的实施例，可以提供一种电子装置及虚拟现实模式下的事件显示方法，其如果在以虚拟现实模式进行操作的过程中发生事件，则禁止在当前的操作系统上运行的与所述事件相关的应用，并对所发生的事件进行加工，从而以适合虚拟现实模式的方式显示所发生的事件。
技术手段
用于解决上述的课题或其他课题的，根据一实施例的电子装置可以包括：显示部，用于显示与虚拟现实模式对应的画面；以及控制部，通过控制，感测由至少一个事件的发生所导致的中断，将与所述发生的事件相关的事件相关信息变更为与所述虚拟现实模式对应的形态，并将所述变更后的事件相关信息显示在与所述虚拟现实模式对应而运行的画面中。
此外，根据多样的实施例中的某一个实施例的在虚拟现实模式下的事件显示方法可以包括如下操作：在电子装置执行虚拟现实模式；感测由至少一个事件的发生所导致的中断；将与所述事件相关的事件相关信息变更为与所述虚拟现实模式对应的形态；以及在与所述虚拟现实模式对应而运行的画面中显示所述变更后的事件相关信息。
技术效果
对根据本发明的多样的实施例的虚拟现实模式下的事件显示方法而言，在以虚拟现实模式进行操作的过程中由于特定的事件(event)而发生中断(interrupt)的情况下，在虚拟现实模式下禁止与所述事件相关的应用的运行，并将其加工成适合于所述虚拟现实模式的形态而通知事件，据此可以有效地向用户显示虚拟现实模式下的通知。
此外，根据本发明的多样的实施例，在在以虚拟现实模式进行操作的过程中由于特定的事件而发生中断的情况下，可以最大限度地减少针对电子装置的性能的影响，同时在虚拟现实模式下可以有效地通知事件。
附图说明
图1是示出根据本发明的一实施例的网络环境的图。
图2是示出根据本发明的多样的实施例的电子装置的结构示例的图。
图3是根据本发明的多样的实施例的程序模块的框图。
图4是示出根据本发明的多样的实施例的在虚拟现实模式下的事件显示步骤的流程图。
图5是示出根据本发明的多样的实施例的在可穿戴装置中安装电子装置的示例的图。
图6是示出用户根据本发明的多样的实施例而穿戴安装有电子装置的可穿戴装置的示例的图。
图7是根据本发明的多样的实施例的电子装置的画面模式的图。
图8是示出在普通模式下的事件显示方法的画面示例。
图9是示出在虚拟现实模式下的事件显示方法的画面示例。
图10是示出根据本发明的多样的实施例的虚拟现实模式下的事件显示方法的画面示例。
图11是示出根据本发明的多样的实施例的控制部的细部结构的框图。
图12是示出根据本发明的多样的实施例的在虚拟现实模式下的事件显示步骤的流程图。
图13是示出根据本发明的多样的实施例的在虚拟现实模式下显示事件的画面的一例的图。
图14是示出根据本发明的多样的实施例的在虚拟现实模式下显示事件的画面的一例的图。
图15是示出根据本发明的多样的实施例的在虚拟现实模式下显示事件的画面的一例的图。
图16是示出根据本发明的多样的实施例的在虚拟现实模式下显示事件的画面的一例的图。
图17是示出根据本发明的多样的实施例的在虚拟现实模式下显示事件的画面的一例的图。
图18是示出根据本发明的多样的实施例的在虚拟现实模式下显示事件的画面的一例的图。
图19是示出根据本发明的多样的实施例的在虚拟现实模式下显示事件的画面的一例的图。
图20是示出根据本发明的多样的实施例的在虚拟现实模式下显示事件的画面的一例的图。
图21是示出根据本发明的多样的实施例的在虚拟现实模式下显示事件的画面的一例的图。
图22是示出根据本发明的多样的实施例的在虚拟现实模式下显示事件的画面的一例的图。
图23是示出根据本发明的多样的实施例的在虚拟现实模式下显示事件的画面的一例的图。
图24是示出根据本发明的多样的实施例的在虚拟现实模式下显示事件的画面的一例的图。
图25是示出根据本发明的多样的实施例的在虚拟现实模式下显示事件的画面的一例的图。
图26是示出根据本发明的实施例的电子装置的细部结构的框图。
图27是示出根据本发明的多样的实施例的程序模块的框图。
图28是示出根据本发明的多样的实施例的可穿戴装置的结构例的框图。
具体实施方式
以下，参照附图而记载本说明书的多样的实施例。然而，这并不是要将本说明书中记载的技术局限在特定的实施形态的，而是应当理解为包含本说明书的实施例的多种变更(modifications)、等同物(equivalents)、以及/或者替代物(alternatives)的概念。在有关附图的说明中，针对类似的构成要素可以使用类似的参照符号。
本文中，诸如“具有”、“可以具有”、“包含”、“可以包含”等表述指的是相关特征(例如，数值、功能、操作或者部件等构成要素)的存在，而且并不排除额外的功能的存在。
本文中，“A或者B”、“A或者/以及B中的至少一个”、或者“A或者/以及B中的一个或一个以上”等表述可以包括一起被列出的项目的所有可能的组合。例如，“A或者B”、“A以及B中的至少一个”、或者“A或者B中的至少一个”可以指如下的所有的情况：(1)包含至少一个A；(2)包含至少一个B；或者(3)将至少一个A以及至少一个B均包含在内。
在各种实施例中使用的“第一”、“第二”、“首先”、“其次”等表述可以与顺序以及/或者重要程度无关地修饰多样的构成要素，而且只是为了将一个构成要素区分于另一构成要素而使用，并不限定相关构成要素。例如，第一用户设备和第二用户设备可以与顺序或者重要程度无关地表示互不相同的用户设备。例如，在不脱离本文中所记载的权利范围内，第一构成要素可被命名为第二构成要素，与此类似地，第二构成要素也可以被名命名为第一构成要素。
在被提及为某一构成要素(例如，第一构成要素)“(功能性地或者通信地)结合于((operatively or communicatively)coupled with/to)”或者“连接于(connected to)”另一构成要素(例如，第二构成要素)的情况下，应当理解为某一构成要素可以直接连接于其他构成要素，或者通过其他构成要素(例如，第三构成要素)而连接。相反，在被提及为某一构成要素(例如，第一构成要素)“直接结合于”或者“直接连接于”另一构成要素(例如，第二构成要素)的情况下，可以理解为上述某一构成要素和上述另一构成要素之间不存在其他构成要素(例如，第三构成要素)。
在本文中用到的表述“构成为(或者设定为)……的(configured to)”可以根据情况而被替换为如下的表述而使用，例如：“适合于……的(suitablefor)”、“具有……能力的(having the capacity to)”、“为……而设计的(designedto)”、“为……而变更的(adapted to)”、“为……而制造的(made to)”或者“可进行……的(capable of)”。术语“构成为(或者设定为)……的”不一定只意味着以硬件形式“专门设计的(specifically designed)”情况。然而，在某些情况下，“构成为……的装置”这一表述可以意味着其装置能够与其他装置或者部件一同“可以进行……”。例如，句子“构成为(或者设定为)执行A、B、以及C的处理器”可以意味着用于执行相关操作的专用处理器(例如，嵌入式处理器)，或者可通过执行存储于存储装置的一个以上的软件程序而执行先关操作的通用处理器(generic-purpose processor)(例如，CPU或者应用程序处理器(application processor))。
在本文中使用的术语仅仅是为了对特定的实施例进行说明而被使用，其意图可以不是为了限定其他实施例的范围的。当单数的表述在文脉上没有明显的其他含义时，也可以包括复数的含义。包含技术或科学的术语在内，在此所用到的所有的术语的含义可以与本文中所记载的技术领域中具有通常的知识的人所理解的一般的含义相同。在本通常使用的词典中所定义的术语可以被解释为具有与相关技术的文脉上的含义相同或者类似的含义，而且在本文中没有明确地定义的情况下，并不会被解释为理想的或者过度的形式性的含义。根据情况，即使是本文中所定义的术语，也不能被解释为排除本发明的实施例的含义。
根据本公开的多样的实施例的电子装置可以包括以下项中的至少一个：智能手机(smartphone)、平板个人计算机(tablet personal computer)、移动电话(mobile phone)、视频电话、电子书阅读器(e-book reader)、台式个人计算机(desktop personal computer)、膝上型(laptop)个人计算机、笔记本计算机(netbook computer)、工作站(workstation)、服务器、个人数字助理(Personal digital assistant：PDA)、便携式多媒体播放器(Portable MultimediaPlayer：PMP)、MP3播放器、移动医疗装置、相机或可穿戴装置(wearable device)(例如，诸如智能眼镜、头戴式装置(head-mounted-device：HMD)、电子服装、电子手环、电子项链、电子应用配件(appcessory)、电子纹身、智能镜子或智能手表等)。
在某一实施例中，电子装置可以是智能家用电器(smart home application)。智能家用电器可包括以下项中的至少一项：例如，电视机、数字视频盘(digitalvideo disk：DVD)播放器、音响、冰箱、空调、吸尘器、烤箱、微波炉、洗衣机、空气净化器、机顶盒(set-top box)、家庭自动化控制板(home automationcontrol panel)、安全控制板(security control panel)、TV盒子(例如，三星HomeSyncTM、苹果TVTM或谷歌TVTM)、游戏控制台(Xbox控、PlayStationn)、电子词典、电子钥匙、摄像机(camcorder)和电子相框。
在另一实施例中，电子装置可包括以下项中的至少一项：各种医疗设备(例如，各种便携式医疗测量设备(血糖测量仪、心率测量仪、血压测量仪或者体温测量仪等)、磁共振血管造影(Magnetic Resonance Angiography：MRA)、磁共振成像(Magnetic Resonance Imaging：MRI)、计算机断层(Computed Tomography：CT)扫描机、摄像机、超声仪等)、导航设备、全球定位系统(Global Positioning System：GPS)接收器、事件数据记录器(EventData Recorder：EDR)、飞行数据记录器(Flight Data Recorder：FDR)、车辆信息娱乐(infotainment)装置、用于船舶的电子设备(例如，船舶导航设备和回转罗盘等)、航空电子设备(avionics)、安全设备、车辆用音响本体(headunit)、工业机器人或家用机器人、金融机构的ATM(automatic teller’smachine)、商店的POS(point of sales)或者物联网装置(internet of things)(例如、灯泡、各种传感器、电或煤气表、喷水装置、火灾报警器、温控器(自动调温器)、路灯、烤面包机、运动器材、热水箱、暖风机、锅炉等)。
根据某一实施例，电子装置可包括以下项中的至少一项：家具或建筑/结构物的一部分、电子板(electronic board)、电子签名接收装置(electronicsignature receiving device)、投影仪(projector)或者各种测量仪器(例如有，诸如水表、电表、煤气表、无线电波表等)。在多样的实施例中，电子装置可以是上述各种装置中的一个或一个以上的组合。根据某一实施例的电子装置可以是柔性电子装置。此外，根据本公开的实施例的电子装置不限于上述装置，其可以包含根据技术发展的新的电子装置。
以下，参照附图对根据多样的实施例的电子装置进行说明。在本文中，术语“用户”表示使用电子装置的人或使用电子装置的装置(例如，人工智能电子装置)。
参照图1，记载了多样的实施例中的网络环境100内的电子装置101。所述电子装置101可以包含如下项中的至少一个：总线110、处理器120、存储器130、输入/输出接口150、显示器160以及通信接口170和事件处理模块180。在某一实施例中，电子装置101可以省略所述构成要素中的至少一个，或者可以额外地具备其他构成要素。
所述总线110例如可以包含如下电路，该电路用于使所述构成要素120-180相互连接，并传递所述构成要素之间的通信(例如，控制消息以及/或者数据)。
所述处理器120可以包含中央处理装置(Central Processing Unit：CPU)、应用处理器(Application Processor：AP)或者通信处理器(CommunicationProcessor：CP)中的一个或者一个以上。所述处理器120可以执行与所述电子装置101的至少一个其他构成要素的控制以及/或者通信相关的运算或数据处理。
所述存储器130可以包含易失性以及/或者非易失性存储器。所述存储器130中可以存储与所述电子装置101的至少一个其他构成要素相关的指令或数据。根据一实施例，所述存储器130可以存储软件以及/或者程序140。例如，所述程序140可以包含内核(kernel)141、中间件(middleware)143、应用程序编程接口(Application Programming Interface：API)145以及/或者应用程序(或“应用”)147等。所述内核141、中间件143或者API 145中的至少一部分可以被称为操作系统(Operating System：OS)。
例如，所述内核141可以控制或管理在执行其他程序(例如，中间件143、API 145或应用程序147)所实现的操作或功能时使用的系统资源(例如，总线110、处理器120或存储器130等)。此外，所述内核141可以提供接口，以用于在所述中间件143、所述API 145或所述应用程序147中访问所述电子装置101的个别构成要素，据此可以可以控制并管理系统资源。
所述中间件143例如可以执行中继的作用，以使所述API 145或所述应用程序147能够与所述内核141进行通信而收发数据。此外，例如，关于从所述应用程序147接收的作业请求，所述中间件143可以利用如下的方法而执行针对作业请求的控制(例如，调度(scheduling)或负载均衡(loadbalancing))：对所述应用程序147中的至少一个应用赋予可使用所述电子装置101的系统资源(例如，总线110、处理器120或存储器130等)的优先级的顺序。
所述API 145例如是用于使应用147控制所述内核141或所述中间件143所提供的功能的接口，例如，其可以包含用于文件控制、窗口控制、图像处理或文字控制等的至少一个接口或函数(例如，指令)。
所述输入/输出接口150例如可以执行将由用户或其他外部设备输入的指令或数据传递到所述电子装置101的其他(多个)构成要素的接口的功能。此外，所述输入/输出接口150可以将从电子装置101的其他(多个)构成要素接收到的指令或数据输出给用户或其他外部设备。
所述显示器160例如可以包括：液晶显示器(Liquid Crystal Display：LCD)、发光二极管(Light-Emitting Diode：LED)显示器、有机发光二极管(OrganicLED：OLED)显示器、微机电系统(microelectromechanical systems：MEMS)显示器、或者电子纸(electronic paper)显示器。所述显示器160例如可以向用户显示各种内容(例如，文本、图像、视频、图标或符号等)。所述显示器160可以包含触摸屏幕，例如，可以接收如下的输入：利用电子笔或者用户身体的一部分的触摸、手势、接近或者悬浮(hovering)输入。
所述通信接口170例如可以设定所述电子装置101和外部装置(例如，第一外部电子装置102、第二外部电子装置104或者服务器106)之间的通信。例如，所述通信接口170可以通过无线通信或有线通信而连接到网络162、164，从而与所述外部装置(例如，第二外部电子装置104或者服务器106)进行通信。
所述第一外部电子装置102或所述第二外部电子装置104可以是可穿戴装置或者能够安装电子装置101的可穿戴装置(例如，头戴式显示器(headmounted display：HMD)等)。当所述电子装置101被安装到HMD装置(例如，所述电子装置102)时，所述电子装置101可以检测被安装到所述HMD装置的情况，并以虚拟现实模式(virtual reality mode)进行操作。当所述电子装置101被安装到所述电子装置102(例如，HMD装置)的情况下，所述电子装置101可以通过通信接口170而与所述电子装置102进行通信。此外，所述电子装置101可以通过直接连接而与所述电子装置102进行通信，而不是通过另外的网络进行通信。
所述无线通信例如为蜂窝通信协议，其例如可以使用如下项中的至少一个：LTE(长期演进：Long-Term Evolution)、LTE-A(LTE-Advanced)、CDMA(码分多址：Code Division Multiple Access)、WCDMA(宽带CDMA：WidebandCDMA)、UMTS(通用移动通信系统：Universal Mobile TelecommunicationsSystem)、WiBro(无线宽带：Wireless Broadband)或者GSM(全球移动通讯系统：Global System for Mobile Communications)等。所述有线通信例如可以包括如下项中的至少一个：USB(通用串行总线：universal serial bus)、HDMI(高清晰度多媒体介面：high definition multimedia interface)、RS-232(recommended standard-232)或POTS(普通老式电话业务：plain old telephoneservice)。所述网络162可以包括通信网络(telecommunications network)，例如，可以包括如下项中的至少一个：计算机网络(computer network)(例如，LAN或者WAN)、互联网或电话网络(telephone network)。
所述第一外部电子装置102以及第二外部电子装置104可分别是与所述电子装置101相同或不同的种类的装置。根据一实施例，所述服务器106可以包含一个或一个以上的服务器的组合。根据多样的实施例，在所述电子装置101中执行的全部或一部分操作可以在另一个或多个电子装置(例如，电子装置102、104或服务器106)中执行。根据一实施例，在所述电子装置101需要自动地或者根据请求执行某一种功能或服务的情况下，所述电子装置101可以代替自主执行功能或服务而向另一电子装置(例如，电子装置102、104或服务器106)请求与其相关的至少一部分功能，或者追加地向另一电子装置(例如，电子装置102、104或服务器106)请求与其相关的至少一部分功能。所述另一电子装置(例如，电子装置102、104或服务器106)可以执行所述被请求的功能或附加的功能，并将其结果传递给所述电子装置101。所述电子装置101可直接地或者附加地处理所接收到的结果而提供所述请求的功能或服务。为此，例如，可以利用云计算技术、分散计算技术或者客户端-服务器计算技术。
在所述图1中表示为电子装置101具备通信接口170，通过网络162与外部电子装置104或服务器106等进行通信，然而根据本发明的多样的实施例，所述电子装置101可以被体现为无专门的通信功能的情况下在电子装置101内独立地进行操作。
根据一实施例，所述服务器106可以执行在所述电子装置101中实现的操作(或功能)中的至少一个操作(或功能)，从而支持所述电子装置101的驱动。例如，所述服务器106可以包含可支持所述电子装置101所实现的事件处理模块180的事件处理服务器模块(未图示)。例如，所述事件处理服务器模块可以包含所述事件处理模块180的至少一个构成要素，以执行(或代行)事件处理模块180所执行的操作(或功能)中的至少一个操作。
所述事件处理模块180可以对从其他构成要素(例如，所述处理器120、所述存储器130、所述输入输出接口150或所述通信接口170等)获取的信息中的至少一部分进行处理，并以多样的方法将该信息提供给用户。
例如，所述事件处理模块180可以根据本发明的多样的实施例而以如下方式进行操作：使所述电子装置101被安装到可穿戴装置(例如，电子装置102)而执行作为显示装置的功能，并对与在虚拟现实模块下操作的过程中发生的事件相关的信息加工成适合于虚拟现实模式而将其显示。此外，如果在虚拟现实模式下操作的过程中发生的事件为与应用的运行相关的事件，则所述事件处理模块180还可以处理成禁止所述应用的运行或者使其在后台运行。通过下述的图2，可以提供与所述事件处理模块180相关的额外的信息。
在所述图1中，事件处理模块180被图示为独立于处理器120的模块，然而所述事件处理模块180的至少一部分还可以包含在处理器120或其他至少一个模块内而体现，或者所述事件处理模块180的整体的功能也可以包含在所图示的处理器120或其他处理器内而体现。此外，所述事件处理模块180可以与存储于所述存储器130的至少一个程序140联动而执行根据本发明的多样的实施例的操作。
图2是示出根据本发明的一实施例的电子装置的结构示例的图。参照图2，根据本发明的多样的实施例的电子装置220可以是具备至少一个显示单元的电子装置220。在下述的说明中，电子装置220可以是将显示功能作为主要功能的装置，其还可以表示包含至少一个显示单元的一般的电子装置。例如，所述电子装置220可以是具备触摸屏幕230的电子装置(例如，智能手机)。
根据本发明的多样的实施例的电子装置220可以包含触摸屏230、控制部240、存储部250或通信部260中的至少一个。触摸屏230可以包含显示面板231以及/或者触面板232。控制部240可以包含如下项中的至少一个：虚拟现实模式处理部241、事件判断部242、事件信息加工部243和应用控制部244。
例如，如果所述电子装置220被安装到可穿戴装置210，则所述电子装置220例如可以被操作为HMD装置，并执行虚拟现实模式。此外，根据本发明的多样的实施例，即使所述电子装置220不被安装到所述可穿戴装置210也可以根据用户的设定或与虚拟现实模式相关的应用的运行而执行虚拟现实模式。在下述的实施例中，设定为所述电子装置220被安装到可穿戴装置210而执行虚拟现实模式，然而本发明的多样的实施例并不局限于此。
在所述电子装置220根据本发明的多样的实施例而以虚拟现实模式进行操作的情况下(例如，在电子装置220被安装到所述可穿戴设备210而以头戴式影院(head mounted theater：HMT)模式进行操作的情况下)，通过所述显示面板231而显示的画面可以显示与用户的左眼及右眼对应的两个画面(例如，如图7所示的画面)。
在所述电子装置220根据本发明的多样的实施例而以虚拟现实模式进行操作时，控制部240可以通过控制而将与在虚拟现实模式操作中发生的事件相关的信息加工为适合于所述虚拟现实模式的信息，并将其显示在画面中。此外，根据本发明的多样的实施例，如果在虚拟现实模式操作中下发生的事件是与应用的运行相关的事件，则在所述控制部240可以通过处理而禁止所述应用的运行，或使所述应用在后台运行。
如果进一步具体地说明，则根据本发明的多样的实施例，控制部340可以包含虚拟现实模式处理部241、事件判断部242、事件信息加工部243或者应用控制部244中的一个而执行根据本发明的多样的实施例的功能。此外，还可以实现为：利用构成所述电子装置220的至少一个构成(例如，触摸屏230、控制部240、存储部250等)而执行与下述的图3至图25相关的多样的操作或功能。
根据本发明的多样的实施例，如果所述电子装置220被安装到可穿戴装置210，或者根据用户的设定或根据虚拟现实模式相关应用的运行而执行虚拟现实模式，则所述虚拟现实模式处理部241可以处理与所述虚拟现实模式的操作相关的多样的功能。所述虚拟现实模式处理部241可以加载存储于存储部250的至少一个虚拟现实程序251而执行多样的功能。
事件判断部242可以针对借助所述虚拟现实模式处理部241而以虚拟现实模式操作的过程中发生的事件执行判断。此外，所述事件判断部242还可以判断关于在以所述虚拟现实模式进行操作的过程中所发生的事件，是否有需要显示在画面的信息。此外，所述事件判断部242还可以判断将与在虚拟现实模式下进行操作的过程中发生的事件相关而运行的应用。与所述事件的类型相关的应用的多样的实施例将参照图13至图25而在下文中进行说明。
根据所述事件判断部242的判断结果，如果关于在虚拟现实模式下进行操作的过程中发生的事件，在画面中具有要显示的信息，则事件信息加工部243可以执行适合于虚拟现实模式地对即将显示在所述画面的事件相关信息进行加工的功能。所述事件相关信息的加工方法可以采用多样的方法。例如，如图7所述，如果所述电子装置220在虚拟现实模式下体现为三维图像，则可以以适合于三维图像的方式转换所述事件相关信息。例如，将以平面形态显示的事件相关信息转换为对应于三维图像的左眼的信息以及对应于右眼的信息，并可以将所述转换后的信息与当前执行的虚拟现实模式的画面合成之后进行显示。
根据所述事件判断部242的判断结果，如果有将与在虚拟现实模式下进行操作的过程中发生的事件相关而运行的应用，则应用控制部244可以通过控制而禁止与所述事件相关的应用运行。此外，根据本发明的多样的实施例，根据所述事件判断部242的判断结果，如果有将与在虚拟现实模式下进行操作的过程中发生的事件相关而运行的应用，则在执行与所述事件相关的应用时，应用控制部244可以通过控制使所述应用在后台(background)运行，以免使影响与所述虚拟现实模式对应的应用的运行或者画面显示。
在所述存储部250中可以存储有虚拟现实程序251，而且所述虚拟现实程序251可以是与电子装置220的虚拟现实模式操作相关的应用。此外，在所述存储部250中可以存储有事件相关信息252，而且所述事件判断部242可以参照存储于所述存储部250的事件相关信息252，确认关于所发生的事件的画面显示与否或者将与所发生的事件相关而运行的应用等的信息。
所述可穿戴装置210可以是包含图示于图1的电子装置101的至少一个功能的任意的电子装置，而且可以是能够安装电子装置220的可穿戴的安装台。在所述可穿戴装置210为电子装置的情况下，如果所述电子装置220被安装到所述可穿戴装置210，则可以通过所述电子装置220的通信部260而提供各种功能。例如，如果所述电子装置220被安装到所述可穿戴装置210，则在所述电子装置220中可通过与所述可穿戴装置210之间的通信而检测与可穿戴装置210的安装与否，并可以判断是否操作为虚拟现实模式(或者HMT模式)。
根据本发明的多样的实施例，在所述电子装置220被安装到可穿戴装置210时，如果无法自动判断所述电子装置220的安装与否，则用户可以根据虚拟现实程序251的运行或虚拟现实模式(或者，HMT模式)的选择而采用本发明的多样的实施例。此外，根据本发明的多样的实施例，在所述可穿戴装置210包含作为电子装置101的功能的情况下，可以实现为：所述电子装置220自动判断是否被安装到所述可穿戴装置210，并且使所述电子装置220的执行模式自动转换为虚拟现实模式(或者HMT模式)。
图示在所述图2中的控制部240的至少一部分功能可以包含在所述图1所图示的电子装置101的事件处理模块180或处理器120。此外，图示于所述图2中的触摸屏230或显示面板231可以与所述图1中的显示器160对应。此外，图示于所述图2中的存储部250可以与所述图1中的存储器130对应。
在所述图2中图示为包含显示面板231以及触摸面板232的触摸屏230，然而根据多样的实施例，显示面板231或者触摸面板232可以配备成另外的面板形态，而不是一个触摸屏230的形态。此外，根据多样的实施例，在电子装置220中可以不具备触摸面板232而只具备显示面板231。
此外，根据本发明的多样的实施例，为了方便说明，可以将所述电子装置220称为第一装置(或第一电子装置)，并将所述可穿戴装置210称为第二装置(或第二电子装置)。
根据本发明的多样的实施例中的某一个的电子装置可以包含：显示部，用于显示与虚拟现实模式对应的画面；以及控制部，检测由至少一个事件的发生所导致的中断，将与所述发生的事件相关的事件相关信息变更为与所述虚拟现实模式对应的形态，并使所述变更后的事件相关信息显示在与所述虚拟现实模式对应而运行的画面中。
根据本发明的多样的实施例，所述事件可以是从如下项中选择的一个以上：呼叫接收事件、消息接收事件、闹钟通知、调度(scheduler)通知、WiFi连接、WiFi断开、低电量通知、数据允许或使用限制通知、应用无响应通知、以及应用异常终止通知。
根据本发明的多样的实施例，所述电子装置还可以包含存储部，如果所述事件不是将在所述虚拟现实模式下显示的事件，则所述存储部存储与所述事件相关的信息，而且如果所述电子装置从虚拟现实模式转换为透视模式，则所述控制部可以通过控制而在画面中显示与存储于所述存储部的所述事件相关的信息。
根据本发明的多样的实施例，所述电子装置还可以包含：存储部，用于存储关于将在所述虚拟现实模式下显示的至少一个以上的事件的信息。
根据本发明的多样的实施例，所述事件可以是即时消息接收通知事件。
根据本发明的多样的实施例，在所述事件为与至少一个应用的运行相关的事件时，所述控制部可以通过控制而禁止由发生所述事件引起的所述应用的运行。
根据本发明的多样的实施例，如果所述电子装置的画面模式从所述虚拟现实模式转换为透视模式，则所述控制部可以通过控制而使所述被禁止的应用运行。
根据本发明的多样的实施例，如果所述事件是与至少一个应用的运行相关的事件，则所述控制部可以通过控制而使由所述事件的发生引起的所述应用的运行在所述虚拟现实模式画面的后台中运行。
根据本发明的多样的实施例，所述控制部可以通过控制而使所述虚拟现实模式在所述电子装置连接到可穿戴装置时执行。
根据本发明的多样的实施例，所述控制部布置并加工与所述时间相关的信息，以使与所述时间相关的信息显示在当前的画面所显示的所述虚拟现实画面的三维空间上。
图3是根据本发明的多样的实施例的程序模块的框图。参照图3，根据多样的实施例，程序模块可以包含系统操作系统(例如，操作系统(operatingsystem：OS))310、框架(framework)320、应用330等而构成。
系统操作系统310可以包含至少一个系统资源管理器或者至少一个设备驱动程序。所述系统资源管理器可以执行诸如系统资源的控制、分配或恢复的功能，其可以包含诸如进程管理部、存储器管理部或者文件系统管理部之类的至少一个管理部。所述设备驱动程序例如可以包含如下驱动程序中的至少一个驱动程序：显示驱动程序、相机驱动程序、蓝牙驱动程序、共享存储器驱动程序、USB驱动程序、键盘驱动程序、WiFi驱动程序、音频驱动程序或者进程间通信(inter process communication：IPC)驱动程序等。
根据本发明的多样的实施例，框架320(例如，中间件)例如可以提供所述应用所共同需要的功能，或者可以通过所述API将多样的功能提供给所述应用，以使所述应用能够有效地利用电子装置内部的有限的系统资源。
根据本发明的多样的实施例，包含在所述框架320的VR框架可以控制与电子装置中的虚拟现实模式操作相关的功能。例如，根据虚拟现实模式的操作的执行，所述VR框架320可以对应用330中的与虚拟现实相关的至少一个VR应用351进行控制，从而在电子装置中提供虚拟现实模式。
应用330可以包含多个应用，而且可以包含以虚拟现实模式执行的至少一个VR应用351和以非虚拟现实模式的普通模式执行的至少一个普通应用352。
此外，根据本发明的多样的实施例，应用330还可以包含VR控制应用340，并且可以根据所述VR控制应用340的控制而控制至少一个VR应用351以及/或者至少一个普通应用352的操作。
根据本发明的多样的实施例，如果在电子装置以虚拟现实模式进行操作的过程中发生至少一个事件，则系统操作系统310可以向框架320(例如，VR框架)通知事件的发生。
在框架320中，可以针对在非虚拟现实模式的普通模式下发生的事件，控制相关的普通应用352的运行，以将与事件相关的信息显示于画面。此外，如果存在将与所述普通模式下发生的事件相关而运行的应用，则所述框架320可以通过控制而运行相关的至少一个普通应用352。
根据本发明的多样的实施例，如果在以虚拟现实模式进行操作的过程中发生事件，则所述框架320(例如，VR框架)可以禁止用于显示与所发生的事件相关的信息的至少一个普通应用352的操作。在所述框架320中，可以将以虚拟现实模式进行操作的过程中发生的事件提供给VR控制应用340。
在VR控制应用340中，可以对与所述虚拟现实模式的操作中所发生的事件相关的信息进行加工，以使其适合于虚拟现实模式。例如，可以将二维的平面形态的事件相关信息加工为三维的信息。所述VR控制应用340可以控制当前运行的至少一个VR应用351，并且可以通过控制而将所述被加工的事件相关信息合并到借助VR应用351运行的画面而将其进行显示。
此外，根据本发明的多样的实施例，如果在虚拟现实模式下进行操作的过程中发生了事件，则所述框架320可以通过控制而禁止与所发生的事件相关的至少一个普通应用352的运行。
此外，根据本发明的多样的实施例，如果在虚拟现实模式下进行操作的过程中发生了事件，则所述框架320可以通过控制而暂时禁止与所发生的事件相关的至少一个普通应用352的运行，而且如果所述虚拟现实模式终止，则通过控制而运行所述被禁止的普通应用352。
此外，根据本发明的多样的实施例，如果在以虚拟现实模式进行操作的过程中发生事件，则所述框架320控制针对与所发生的事件相关的至少一个应用352的运行，从而控制为使与所述事件相关的至少一个普通应用352在后台运行，以免影响借助当前运行的VR应用351而显示的画面。
所述图3的实施例是用于以程序形态实现本发明的多样的实施例的一例，本发明的多样的实施例并不局限于所述图3的形态，可以根据本发明的多样的实施例而实现为其他形态。
图4是示出根据本发明的多样的实施例的在虚拟现实模式下的事件显示步骤的流程图。参照图4，如果在电子装置执行虚拟现实模式，或者如图5以及图6所示，将电子装置安装或结合到可穿戴设备，或者与所述可穿戴设备联动，则在402操作中，电子装置的模式可以从普通模式转换为虚拟现实模式而进行操作。此外，可以在所述电子装置执行虚拟现实模式(例如，通过用户的操作)之后将其连接到所述可穿戴装置，从而在所述可穿戴装置显示所述电子装置的虚拟现实模式。
在以虚拟现实模式进行操作的过程中，如果随着在404操作中发生一个事件而发生中断，则可以根据本发明的多样的实施例而执行与所述事件的发生相关的处理。
例如，如果在所述406操作中，所述发生的事件为与画面显示相关的事件，则在412操作中，可以根据本发明的多样的实施例而加工与所述发生的事件相关的信息，并在414操作中将其合成到当前操作中的虚拟现实模式的画面而显示。
此外，在408操作中，如果根据本发明的多样的实施例而所述发生的事件是与另外的应用的运行相关的事件，则在410操作中，可以通过控制而禁止所述应用的运行。此外，根据本发明的多样的实施例，可以通过控制而使所述应用在后台运行，以免该应用的运行影响由虚拟现实模式的操作产生的画面。此外，根据本发明的多样的实施例，通过控制而禁止所述应用的运行之后，如果正在运行的虚拟现实模式被终止或中断，则可以通过控制而运行所述被禁止的应用。
所述图4所图示的操作中的至少一个操作可以被省略而执行，或者可以将至少一个其他操作添加到所述操作之间。此外，所述图4的操作可以按图示的顺序得到处理，而且也可以是针对至少一个操作的执行顺序与其他操作的执行顺序变更而得到处理。此外，述图4所图示的操作可以在电子装置内执行所，也可以在服务器中执行。此外，还可以实现为：使所述图4所图示的操作中的至少一个操作在电子装置内执行，且使其他操作在服务器中执行。
根据本发明的多样的实施例中的某一个的电子装置的操作方法可以包含如下的操作：在电子装置执行虚拟现实模式；感测由至少一个事件的发生所导致的中断；将与所述发生的事件相关的事件相关信息变更为对应于所述虚拟现实模式的形态；以及将所述变更后的事件相关信息显示在对应于所述虚拟现实模式而执行的画面上。
根据本发明的多样的实施例，所述事件可以是从如下项中选择的至少一个：呼叫接收事件、消息接收事件、闹钟通知、调度通知、WiFi连接、WiFi断开、低电量通知、数据允许或使用限制通知、应用无响应通知、和应用异常终止通知。
根据本发明的多样的实施例，可以包含如下的操作：如果所述事件不是将在所述虚拟现实模式下显示的事件，则存储与所述事件相关的信息；以及如果所述电子装置的画面模式从虚拟现实模式转换为透视模式，则在画面中显示与所述存储的所述事件相关的信息。
根据本发明的多样的实施例，还可以包含如下的操作：设定将在所述虚拟现实模式下显示的至少一个的事件。
根据本发明的多样的实施例，所存储的所述将要显示的事件可以是即时消息接收通知事件。
根据本发明的多样的实施例，还可以包含如下的操作：在所述事件为与至少一个应用的运行相关的事件时，通过控制而禁止由所述事件的发生引起的所述应用的运行。
根据本发明的多样的实施例，包含如下的操作：如果所述电子装置的画面模式从所述虚拟现实模式转换为透视模式，则运行所述被禁止的应用。
根据本发明的多样的实施例，还可以包含如下的操作：如果所述事件是与至少一个应用的运行相关的事件，则通过控制而使由所述事件的发生引起的所述应用的运行在所述虚拟现实模式画面的后台中运行。
根据本发明的多样的实施例，特征可以在于，在所述电子装置连接到可穿戴装置时执行所述虚拟现实模式。
根据本发明的多样的实施例，对与所述事件相关的信息进行加工的操作可以包含如下的操作：将与所述事件相关的信息布置为显示在当前画面上所显示的所述虚拟现实画面的三维空间上。
在下文中，参照图5以及图6对电子装置(例如，智能手机)被安装到可穿戴装置的例进行说明。
图5是示出根据本发明的多样的实施例的在可穿戴装置510的示例的图。
参照图5，可穿戴装置510例如可以是图1中的电子装置102。此外，如上所述，所述可穿戴装置510还可以只提供与电子装置520之间无通信功能的安装台的功能。可穿戴装置510可以包含主体以及盖而构成。
在电子装置520被安装到可穿戴装置510的情况下，如图所示，盖可以覆盖电子装置520的后表面边缘而固定于可穿戴装置510，以使电子装置520保持被安装的状态。所述可穿戴装置510可以具备用户将电子装置510穿戴到头部时可得到使用的支撑部。
此外，所述可穿戴装置510可以在与穿戴者的双眼所对应的位置分别具备镜头。穿戴者可以在所述电子装置520被安装到可穿戴装置510的状态下通过所述镜头观察所述电子装置520的显示器(未图示)的画面。所述可穿戴装置510可以是如图所示的能够可拆卸地安装电子装置520的机构性结构。
根据本发明的多样的实施例，所述可穿戴装置510可以包含图1的电子装置101的构成中的至少一个。例如，所述可穿戴装置510还可以包含触摸面板、按键、滚轮键(wheel key)以及触摸面板中的至少一个。触摸面板可以接收用户的触摸输入。触摸输入可以是用户直接触摸触摸面板的输入或接近触摸面板的悬浮(hovering)输入。在电子装置520得到安装时，可穿戴装置510也可以通过USB等接口而连接，从而与电子装置520执行通信。
电子装置520可以响应从可穿戴装置510接收的输入而控制与输入对应的功能。例如，电子装置520可以响应接收到的输入而调整音量或控制画面(例如，虚拟现实模式的图像再现画面)。例如，在电子装置520被安装到可穿戴装置510时，所述电子装置520的外部装置连接部521可以与所述可穿戴装置510的连接部511电连接，从而在装置之间彼此进行通信。
此外，根据本发明的多样的实施例，如果在所述电子装置520中显示基于虚拟现实模式的画面的过程中发生至少一个事件，则可以将与所述发生的事件相关的信息加工为适合于虚拟现实模式的信息并显示。
图6是示出用户根据本发明的多样的实施例而穿戴安装有电子装置620的可穿戴装置610的示例的图。如图6所示，用户可以在头部穿戴安装有电子装置620的可穿戴装置610。穿戴者可以通过具备于可穿戴装置610的镜头而观看所安装的电子装置620的显示器的画面。
此外，如图6所示，可以通过具备于所述可穿戴装置630的侧表面的触摸面板630控制可穿戴装置630的功能，或者还可以控制电子装置620的功能。
根据本发明的多样的实施例，在虚拟现实模式下的事件的显示可以在智能手机或者移动电话等中实现，还可以在可穿戴装置(例如，眼镜型装置)中实现。此外，根据本发明的多样的实施例，如图5以及图6所示，电子装置(例如，移动电话)还可以实现为安装(dock)或结合于所述可穿戴装置的形态。例如，如果在移动电话的画面显示为普通模式的状态下被安装到所述可穿戴装置，则移动电话的画面可以转换为虚拟现实模式，而且所述转换后的虚拟现实模式的画面可以通过所述可穿戴装置的显示部显示。
被安装到所述可穿戴装置的移动电话虽然支持虚拟现实模式，但是其根据普通的移动电话的操作系统(operating system)来进行操作，因此，如果在虚拟现实模式下发生事件，则会显示与虚拟现实模式不谐调的通知，或者执行另外的应用，从而影响虚拟现实模式的显示。
在本发明的多样的实施例中，可以提供如下的方法：在如上所述地设置有以普通模式进行操作的操作系统的电子装置提供虚拟现实模式时，将与在所述虚拟现实模式下操作的过程中所发生的事件相关的信息加工为适合于所述虚拟现实模式，从而可以将其有效地进行显示。
图7是根据本发明的多样的实施例的电子装置的画面模式的图。
参照图7，电子装置700可以是图5以及图6的电子装置520、620。在电子装置700以普通模式进行操作的情况下，如图7的上端所示，可以显示为一个操作画面710。
根据本发明的多样的实施例，在所述电子装置700被安装到可穿戴装置时，如图7的下端所示，可以以虚拟现实模式(例如，HMT模式)进行操作。在所述电子装置700以虚拟现实模式进行操作的情况下，可以被区分为对应于用户的左眼的画面720a和对应于右眼的画面720b而显示。在所述虚拟现实模式的画面中，一个图像可以被分离为两个图像720a、720b而显示。
在本发明的多样的实施例中，在所述电子装置700被安装到可穿戴装置而以虚拟现实模式进行操作时，可以对与所述发生的事件相关的信息进行加工而显示于与所述虚拟现实模式对应的画面(对应于左眼的画面720a和对应于右眼的画面720b)中。
图8是示出在普通模式下的事件显示方法的画面的一例。参照图8，在电子装置800以普通模式进行操作的情况下，如图8的上端所示，在普通模式下运行的应用可以显示为一个操作画面810。
如果在所述电子装置800以普通模式进行操作的过程中发生至少一个事件(例如，来电事件(incoming call event))(从对方来电)，则与所述事件相关的事件相关信息820可以显示在应用的操作画面810中的已设定的位置。
图9是示出在虚拟现实模式下的事件显示方法的画面的一例。参照图9，在电子装置900以虚拟现实模式进行操作的情况下，如图9的上端所示，在虚拟现实模式下运行的应用可以被区分为对应于用户的左眼的画面920a和对应于右眼的画面920b而显示。在所述虚拟现实模式的画面中，一个图像可以被分离为两个图像920a、920b而显示。
如果在所述电子装置900以虚拟现实模式进行操作的过程中发生至少一个事件(例如，来电事件(incoming call event))(从对方来电)，则与所述事件相关的事件相关信息930可以被显示在应用的操作画面910中的已设定的位置。
如果所述事件相关信息930为在普通模式下显示的信息，则在如图9的下端所示的那样不进行加工的状态下直接显示以所述普通模式显示的信息的情况下，在当前执行的虚拟现实模式下可能无法正常地显示所述事件相关信息930。
图10是示出根据本发明的多样的实施例的虚拟现实模式下的事件显示方法的画面的一例。参照图10，在电子装置1000以虚拟现实模式进行操作的情况下，如图10的上端所示，在虚拟现实模式下运行的应用可以被区分为对应于用户的左眼的画面1020a和对应于右眼的画面1020b而显示。在所述虚拟现实模式的画面中，一个图像可以被分离为两个图像1020a、1020b而显示。
如果在所述电子装置1000以虚拟现实模式进行操作的过程中发生至少一个事件(例如，来电事件(incoming call event))(从对方来电)，则可以根据本发明的多样的实施例而将与所述发生的事件相关的事件相关信息1030a、1030b加工成适合于虚拟现实模式之后进行显示。
图11是示出根据本发明的多样的实施例的控制部的细部结构的框图。参照图11，根据本发明的实施例的控制部可以包含如下项而构成：系统管理部1110、虚拟现实(virtual reality：VR)服务处理部1120、应用程序处理部1130等。
所述系统管理部1110对应于系统层(system layer)，并且可以是电子装置的操作系统(OS)或操作系统的至少一部分。所述VR服务器处理部1120可以根据本发明的实施例而执行基于虚拟现实模式的各种处理。所述VR服务器处理部1120可以由与框架(framework)层对应的中间件来实现。所述应用程序处理部1130可以对应于应用层，并执行针对被设置在电子装置而运行的各种应用程序(或应用)进行处理的功能。
如果在电子装置中执行虚拟现实模式或者电子装置被安装在可穿戴装置，则本发明的VR服务处理部1120使其从普通模式转换为虚拟现实模式，并通过显示部显示基于虚拟现实模式的画面。
此外，所述VR服务处理部1120还可以根据本发明的多样的实施例而执行对系统管理部1110的由事件的发生所导致的中断发生情况进行监视的功能。例如，如果在电子装置中发生特定的事件，导致在系统管理部1110发生中断，则VR服务处理部1120可以根据本发明的多样的实施例而感测所述事件的发生，并将与该事件相关的信息包含在虚拟现实模式的画面上而提供。
此外，根据本发明的多样的实施例，在所述系统管理部1110中，如果有将与所述已发生的事件相关而运行的应用，则在普通模式(而不是所述虚拟现实模式)下可以进行处理以通过应用处理部1130运行相关的应用。
如果根据本发明的实施例而在虚拟现实模式下发生与所述事件相同的事件，则与所述发生的事件相关的应用的运行可以被禁止。例如，如在所述图4中表示为X那样，系统管理部1110可以禁止通过程序处理部1130而运行与所述发生的事件相关的应用程序的处理过程。在所述虚拟现实模式下发生事件时的相关应用的运行的禁止功能可以通过修改系统管理部1110的功能或VR服务处理部1120的系统控制而实现。据此，根据本发明的多样的实施例，通过禁止与在虚拟现实模式下发生的事件相关的应用的运行，可以防止针对虚拟现实模式的画面的专注度降低。
另外，在本发明的实施例中，各个功能部以及模块可以意指用于执行本发明的实施例的技术思想的硬件以及用于驱动所述硬件的软件的功能性、结构性结合。例如，在本发明所属的技术领域中具有平均知识的技术人员皆可容易地推论出如下结论：所述各个功能部可以意指预定的代码和用于执行所述预定的代码的硬件源的逻辑单位，其并不一定意指物理连接的代码或某一种类的硬件。
图12是示出根据本发明的多样的实施例的在虚拟现实模式下的事件显示步骤的流程图。如果在电子装置执行虚拟现实模式，或者将电子装置安装或结合到如图5以及图6所示的可穿戴装置，或者使其与所述可穿戴装置联动，则在1202操作中，电子装置可以从普通模式转换为虚拟现实模式而进行操作。此外，在所述电子装置中执行(例如，通过用户的操作)虚拟现实模式之后，将其连接到可穿戴装置，据此可以实现为在所述可穿戴装置中显示所述电子装置的虚拟现实模式。
在以所述虚拟现实模式进行操作的过程中，如果在1204操作中发生特定的事件而导致在操作系统上发生中断，则可以根据本发明的实施例而在VR服务处理部1120执行与所述事件的发生相关的处理。
例如，在1206操作中，在所述发生的事件是与当前操作中的虚拟现实模式下的画面显示相关的事件的情况下，在1212操作中，根据本发明的多样的实施例而对与所述发生的事件相关的事件相关信息进行加工，并在1214操作中，可以在所述当前操作中的虚拟现实模式的画面上显示所述加工后的事件相关信息。
此外，根据本发明的多样的实施例，如果在1208操作中所述发生的事件是与另外的应用的运行相关的事件，则在1210操作中，在系统管理部(例如，操作系统)1110或VR服务处理部1120中可以通过控制而禁止所述应用运行。
此外，根据本发明的另一个实施例，如果在1216操作中所述发生的事件是将在透视(see-through)模式下显示的事件(例如，信使通知事件)，则可以实现为：在1218操作中，存储与所述发生的事件相关的信息，并在当前操作中的虚拟现实模式下不显示该信息。之后，在1220操作中，如果所述电子装置在所述虚拟现实模式下以透视模式进行操作，则在1222操作中，可以将与所述发生的事件相关的事件相关信息或与累积并存储的与事件相关的信息显示在画面中。
所述透视模式意指用户能够通过显示部的画面观看到前方的模式。例如，可以通过专门具备于电子装置或可穿戴装置的相机而实时地将拍摄到的前方的图像显示在画面上，而且本发明的透视模式的实现方法并不局限于所述方法。
此外，在所述透视模式下，与在所述虚拟现实模式下显示的事件相关的信息在被转换为透视模式以后也可以连续地显示。此外，根据本发明的实施例，与在所述虚拟现实模式下显示的事件相关的信息在被转换为透视模式时可以被转换为适合于所述透视模式的另一形态而显示。
另外，在所述透视模式下，还可以将未在所述虚拟现实模式下显示的事件全部显示，或者还可以使未在所述虚拟现实模式下显示的事件中的预先设定的至少一部分分的事件得到显示。例如，在虚拟现实模式下显示的事件中，可以在透视模式下仅显示通知(notification)事件。
此外，根据本发明的实施例，如果所述发生的事件是可以不进行额外的加工而直接显示在当前显示的虚拟现实模式下的画面上的事件，则可以在所述当前的虚拟现实模式的画面上显示与所述发生的事件相关的信息。然而，如果所述发生的事件不是可以直接显示在当前显示的虚拟现实模式的画面上的事件，则可以重新运行用于执行虚拟现实模式的应用，或者可以额外地运行用于在虚拟现实模式下显示与所述事件相关的信息的新的虚拟现实应用。
在所述1206操作中，可以以多样的方式设定针对将要在虚拟现实模式下显示的事件的区分。例如，可以将必须要在虚拟现实模式下执行的事件(例如，呼叫接收事件等)设定为将要在虚拟现实模式下显示的事件。此外，根据本发明的实施例，还可以实现为：通过对所述必须要执行的事件或用户所设定的至少一个事件进行禁止(blocking)设定，从而即使在虚拟现实模式下发生该事件也可以不显示或不通知与所述发生的事件相关的信息。
另外，根据上述的本发明的一实施例的虚拟现实模式下的事件显示方法可以由可通过多样的计算机单元执行的程序指令形态来实现，从而可以被记录在计算机可读介质中。所述计算机可读介质可以以独立或组合的形式包含程序指令、数据文件、数据结构等。被记录到所述介质的程序指令可以是针对本发明而特别地设计并构成的指令，或者可以是计算机软件技术人员所公知而能够使用的指令。计算机可读记录介质的示例包括如下的为了存储并执行程序命令而特别构成的硬件装置：磁介质(magnetic media)，诸如硬盘、软盘和磁带；光学介质(optical media)，诸如CD-ROM、DVD；磁光介质(magneto-optical media)，诸如光磁软盘(floptical disk)；以及ROM、RAM、闪速存储器等。作为程序指令的一例，除了利用编译器制作的机器码以外，还可以包括可利用解释器等而通过计算机执行的高级语言代码。上述的硬件装置可被配置为作为一个以上的软件模块而进行操作，以便执行本发明的操作，或者反之亦然。
针对上述的各种事件的虚拟现实模式下的通知方法可以以下述的<表1>的形式得到设定。然而，在下述的<表1>的实施例是为了帮助理解本发明的多样的实施例而用示例进行设定的实施例，本发明的多样的实施例并不局限于下述的示例。
表1
[Table 1]
参照所述<表1>，在针对各种事件发生中断时，可以根据用户的通知方法的设定而确定虚拟现实模式下的通知方法。将要在所述虚拟现实模式下显示的至少一个事件相关信息可以以在电子装置上通过额外的设定功能而得到设定的方式实现。
例如，在针对伴随应用的运行的事件(例如，闹钟/调度应用、接收数据呼叫等)设定通知的情况下，在以虚拟现实模式进行操作时则禁止与所述事件相关的应用的运行，并在虚拟现实模式画面中以弹出(虚拟现实弹出(VRpopup))形态进行通知(notification)。
此外，根据本发明的多样的实施例，可以实现为如下：使与所述事件相关的应用在后台运行，以免影响当前执行的虚拟现实画面。此时，还可以在所述虚拟现实模式的画面上以弹出形态通知在后台正在运行相关的应用。
此外，根据本发明的多样的实施例，如果针对伴随应用的运行以及用户的选择的事件(例如，语音或视频通话相关事件)设定通知，则可以在虚拟现实模式的画面上显示能够实现与所述事件相关的用户的选择(例如，通话或拒绝)的弹出画面。
此外，根据本发明的多样的实施例，诸如WiFi断开或连接之类的事件可以以消息条通知(toast notification)的形态显示。根据本发明的多样的实施例，在虚拟现实模式的画面上也可以包含所述消息条通知并显示。所述消息条(Toast)通知意指在画面上显示弹出之后经过预定时间便消失的通知。
此外，根据本发明的实施例，在发生不伴随应用的运行而单纯地提供通知的事件的情况下，无需进行专门的应用禁止步骤，而且可以对与所述事件相关的信息进行加工而使其能够在虚拟现实画面上显示，并以弹出的形态显示该信息。
此外，根据本发明的多样的实施例，诸如通知音之类的声音形式的通知可以以能够根据通知设定而在虚拟现实模式中允许或禁止的方式实现。此外，根据本发明的多样的实施例，可以设定为在虚拟现实模式中使在应用运行或通知时伴随的振动形态的通知被禁止。
图13至图25是示出根据本发明的多样的实施例的在虚拟现实模式下显示与事件相关的信息的画面的图。
参照图13，如果在虚拟现实模式下发生诸如呼叫接收之类的事件，则可以根据本发明的实施例而禁止呼叫应用的运行，并可以如图所示，以弹出形态包含在虚拟现实模式画面的方式进行显示。
此时，所述弹出画面可以是包含在虚拟现实的画面。例如，根据本发明的实施例，所述弹出画面和虚拟现实模式画面在三维空间上以重新布置的一个虚拟现实模式画面显示，而不是所述弹出画面和虚拟现实模式画面在同一个平面上以重叠的画面显示。
例如，如上所述，如果在电子装置以虚拟现实模式进行操作的过程中发生所述呼叫接收事件，则在电子装置的系统管理部或VR服务处理部禁止另外的呼叫接收应用的运行，并对与所述发生的事件相关的信息进行加工之后将其包含在当前显示的虚拟现实模式的画面，从而显示为一个虚拟现实画面。用户可以通过选择显示在所述弹出内的按键而接收或拒绝通话。此外，如果在所述图13中选择接收，则如图14所示，可以对与电话通话状态相关的信息进行加工之后将其显示在虚拟现实模式画面上。
另外，参照所述图15，可以根据所述图13的事件显示画面中的呼叫接收或拒绝而在虚拟现实画面内显示相关的事件相关信息。此外，如图16所述，如果通话终止，则可以重新使事件相关信息从虚拟现实画面中消失。
图17、图18、图19、图20以及图21示出在虚拟现实画面以多样的通知形态(例如，弹出或消息条通知形态)显示与事件的发生相关的信息(例如，与消息、应用、闹钟、互联网连接等相关的信息)的例，而且图22、图23、图24以及图25示出在转换为透视模式之后显示与在虚拟现实模式下发生的事件相关的信息的例。
在下文中，参照图26、图27以及图28对第一装置(例如，电子装置)或第二装置(可穿戴装置)的实现例进行说明。图26以及图27是执行显示装置的功能的电子装置的实现例，图28是可穿戴装置的实现例。
图26是根据多样的实施例的电子装置2601的框图2600。所述电子装置2601例如可以包含如图1所述的电子装置101的整体或一部分。所述电子装置2601可以包含：一个以上的应用处理器(application processor：AP)2610、通信模块2620、会员识别模块(subscriber identification module：SIM)卡2624、存储器2630、传感器模块2640、输入装置2650、显示器2660、接口2670、音频模块2680、相机模块2691、电源管理模块2695、电池2696、指示器(indicator)2697以及电机2698。
所述应用处理器(AP)2610例如可以驱动操作系统或应用程序，从而控制连接于应用处理器2610的多个硬件或者软件构成要素，并执行各种数据处理以及运算。所述应用处理器2610例如可以用片上系统(system on chip：SoC)来实现。根据一实施例，所述应用处理器2610还可以包含图形处理单元(graphic processing unit：GPU)以及/或者图像信号处理器(image signalprocessor)。所述应用处理器2610还可以包含图26所图示的构成要素中的至少一部分(例如，蜂窝模块2621)。所述应用处理器2610可以将从其他构成要素(例如，非易失性存储器)中的至少一个接收到的指令或者数据装载(load)到易失性存储器而进行处理，并将多样的数据存储(store)到非易失性存储器。
所述通信模块2620可以具有与图1的所述通信接口170相同或类似的构成。所述通信模块2620例如可以包括：蜂窝模块2621、Wi-Fi模块2623、蓝牙模块2625、GPS模块2627、NFC模块2628以及射频(radio frequency：RF)模块2629。
所述蜂窝模块2621例如可以通过通信网提供语音通话、视频通话、短消息服务或者互联网服务等。根据一实施例，所述蜂窝模块2621可以利用会员识别模块(例如，SIM卡2624)而在通信网络内执行针对电子装置2601的区别及验证。根据一实施例，所述蜂窝模块2621可以执行所述应用处理器2610可提供的功能中的至少一部分功能。在一实施例中，所述蜂窝模块2621可以包含通信处理器(communication processor：CP)。
所述WiFi模块2623、所述蓝牙模块2625、所述GPS模块2627、所述NFC模块2628分别可以包含用于对通过相关的模块收发的数据进行处理的处理器。根据某一实施例，蜂窝模块2621、WiFi模块2623、蓝牙模块2625、GPS模块2627或NFC模块2628中的至少一部分(例如，两个以上)可以包含在一个集成芯片(integrated chip：IC)或者IC封装件内。
所述射频(RF)模块2629例如可以收发通信信号(例如，RF信号)。所述射频模块2629例如可以包含收发器(transceiver)、功率放大模块(power ampmodule：PAM)、频率滤波器(frequency filter)、低噪声放大器(low noiseamplifier：LNA)或者天线等。根据另一实施例，蜂窝模块2621、WiFi模块2623、蓝牙模块2625、GPS模块2627或NFC模块2628中的至少一个可以通过独立的RF模块而收发RF信号。
所述SIM卡2624例如可以包含将用户识别模块包含在内的卡以及/或者内置SIM(embedded SIM)，并可以包含固有的识别信息(例如，集成电路卡识别码(integrated circuit card identifier：ICCID))或者会员信息(例如，国际移动用户识别码(international mobile subscriber identity：IMSI))。
所述存储器2630(例如，存储器130)例如可以包括内置存储器2632或外置存储器2634。所述内置存储器2632例如可包括易失性存储器(例如，动态随机存取存储器(dynamic RAM：DRAM)、静态RAM(static RAM：SRAM)或同步DRAM(synchronous dynamic RAM：SDRAM))、非易失性存储器(non-volatile Memory)(例如，一次性可编程只读存储器(one timeprogrammable ROM：OTPROM)、可编程ROM(programmable ROM：PROM)、可擦除和可编程ROM(erasable and programmable ROM：EPROM)、电可擦除和可编程ROM(electrically erasable and programmable ROM：EEPROM)、掩模ROM、闪速ROM、闪速存储器(例如，储存型快闪记忆体(NAND flash)或编码型快闪记忆体(NOR flash))等)、硬盘驱动器或固态驱动器(solid statedrive：SSD)中的至少一个。
所述外置存储器2634可以包括闪存驱动器(flash drive)，例如，紧凑型闪存(compact flash：CF)、安全数字(secure digital：SD)、微安全数字(Micro-SD)、迷你安全数字(Mini-SD)、极限数字(extreme digital：xD)或者记忆棒(memory stick)等。所述外置存储器2634可通过多样的接口而功能地和/或物理地连接于电子设备2601。
所述传感器模块2640例如可以测量物理量，或可以检测电子装置2601的操作状态，并将测量的或检测的信息转换成电信号。例如，所述传感器模块2640包括如下项中的至少一个：手势传感器2640A、陀螺仪传感器2640B、气压传感器2640C、磁传感器2640D、加速度传感器2640E、握持传感器2640F、接近传感器2640G、颜色传感器(例如，红、绿、蓝(RGB)传感器)2640H、生物传感器2640I、温度/湿度传感器2640J、照度传感器2640K或紫外线(ultravoilet：UV)传感器2640M。追加地或可替代地，所述传感器模块2640例如可包括电子鼻传感器(E-nose sensor)、肌电图(electromyography：EMG)传感器、脑电图(electroencephalogram：EEG)传感器、心电图(electrocardiogram：ECG)传感器、红外(infrared：IR)传感器、虹膜传感器以及/或者指纹传感器。所述传感器模块2640还可包括用于控制包括在其中的至少一个传感器的控制电路。在某一实施例中，电子装置2601还可包括如下的处理器(其为处理器2610的一部分或独立于应用处理器2610的处理器)，该处理器构成为控制传感器模块2640，从而可在所述应用处理器2610处于睡眠状态的期间内控制传感器模块2640。
所述输入装置2650例如包括触摸面板(touch panel)2652、(数字)笔传感器(pen sensor)2654、按键(key)2656或超声波(ultrasonic)输入装置2658。所述触摸面板2652例如可利用电容式、压感式、红外线方式或超声波方式中的至少一种方式。另外，所述触摸面板2652还可包括控制电路。所述触摸面板2652还可包括触觉层(tactile layer)，以向用户提供触觉反应。
所述(数字)笔传感器2654例如可以是触摸面板的一部分，或者可以包括单独的识别用片(sheet)。所述按键2656可以包含例如物理按钮、光学键、键盘等。所述超声波输入装置2658可以通过发出超声波信号的输入工具，在电子装置2601中利用麦克风(例如，麦克风2688)检测超声波，从而确认数据。
所述显示器2660(例如，显示器160)可以包括面板2662、全息图装置2664和投影仪2666。例如，所述面板2662可以包含与图1的显示器160相同或类似的构成。所述面板2662例如可以以柔性的(flexible)、透明的(transparent)或可穿戴的(wearable)方式来实现。所述面板2662和所述触摸面板2652可以被集成为单个模块。所述全息图装置2664可利用光干涉现象在空间中显示立体图像。所述投影仪2666可将光投射到屏幕上，以显示图像。所述屏幕例如可以位于所述电子设备2601的内部或外部。根据一实施例，所述显示器2660还可以包含用于控制所述面板2662、所述全息图装置2664或所述投影机2666的控制电路。
所述接口2670例如包括高清晰度多媒体接口(high-definition-multimediainterface：HDMI)2672、通用串行总线(universal serial bus：USB)2674、光学接口(optical interface)2676和D-suB(D-subminiature)2678。所述接口2670例如可以包含于图1所图示的通信接口170。追加地或可替代地，所述接口2670例如可以包括移动高清影音标准接口(mobile high-definition link：MHL)、SD卡/多媒体卡(MMC)接口或红外数据协会(infrared data association：IrDA)标准接口。
所述音频模块2680例如可以双向转换声音(sound)和电信号。所述音频模块2680的至少一部分构成要素例如可以包含在图1所图示的输入/输出接口150。所述音频模块2680例如可处理通过扬声器2682、接收器2684、耳机2686或麦克风2688等输入或输出的声音信息。
所述相机模块2691例如是能够拍摄静止图像或视频的装置，根据一实施例，其可以包括一个以上的图像传感器(例如，前面传感器或后面传感器)、透镜、图像信号处理器(image signal processor：ISP)或闪光灯(例如，LED或氙灯(xenon lamp))。
所述电源管理模块2695例如可管理电子装置2601的电源。根据一实施例，所述电源管理模块2695可包含电源管理集成电路(power managementintegrated circuit：PMIC)，充电IC(charger integrated circuit)或电池电量计(battery or fuel gauge)。所述PMIC可具有有线充电方式以及/或者无线充电方式。无线充电方式可以包括例如磁共振式、磁感应式或电磁式，并且还可包括附加的电路，例如，线圈回路、谐振电路，或整流器等。所述电池电量计例如可测量所述电池2696的剩余容量以及充电时的电压、电流或温度。所述电池2696可包括，例如，充电式电池(rechargeable battery)以及/或者太阳能电池(solar battery)。
所述指示器2697可显示所述电子装置2601或其一部分(例如，应用处理器(AP)2610)的特定的状态，例如，启动状态、短消息状态或充电状态等。所述电机2698可将电信号转换成机械振动，并且可以产生振动(vibration)或触觉(haptic)效果等。尽管未图示，所述电子装置2601可包括用于支持移动TV的处理装置(例如，GPU)。所述用于支持移动TV的处理装置可处理基于数字多媒体广播(Digital Multimedia Broadcasting：DMB)标准、数字视频广播(Digital Video Broadcasting：DVB)标准、MediaFlow标准的媒体数据。
所述电子装置的上述的构成要素分别可以由一个或一个以上的部件(component)构成，并且相关构成要素的名称可根据电子装置的类型而不同。在多样的实施例中，电子装置可以包括本文所描述的构成要素中的至少一个而构成，并且可以省略一些构成要素或者可以添加其他附加的构成要素。此外，根据多样的实施例的电子装置的构成要素中一部分构成要素结合而构成一个物体(entity)，据此使结合之前的相关构成要素的功能能够照样执行。
图27表示根据一实施例的程序模块2710的框图2700。根据一实施例，所述程序模块2710(例如，程序140)可以包括用于控制与电子装置(例如，电子装置101)相关的资源的操作系统(OS)以及/或者在OS上运行的多样的应用(例如，应用程序147)。操作系统例如可以包括安卓(Android)、iOS、Windows、塞班(Symbian)、泰泽(Tizen)或bada等。
程序模块2710可以包括内核2720、中间件2730、应用程序编程接口(application programming interface：API)2760、以及/或者应用2770。所述程序模块2710的至少一部分可预先加载(preload)在电子装置上或者可从服务器(例如，服务器106等)下载。
所述内核2720(例如，图1的内核141)例如可以包括系统资源管理器2721或装置驱动器2723。所述系统资源管理器2721可以执行系统资源的控制、分配或恢复等。根据一实施例，所述系统资源管理器2721可以包括进程管理部、存储器管理部或文件系统管理部等。所述装置驱动器2723例如可以包括显示器驱动器、相机驱动器、蓝牙驱动器、共享存储器驱动器、USB驱动器、键盘驱动器、Wi-Fi驱动器、音频驱动器或进程间通信(inter-processcommunication：IPC)驱动器。
所述中间件2730例如可以提供所述应用2770共同需要的功能，或者可以通过所述API 2760向所述应用2770提供多样的功能，以使所述应用2770能够有效使用电子装置内部的有限的系统资源。根据一实施例，所述中间件2730(例如，中间件143)可包括运行时库2735、应用管理器(applicationmanager)2741、窗口管理器(window manager)2742、多媒体管理器(multimediamanager)2743、资源管理器(resource manager)2744、电源管理器(powermanager)2745、数据库管理器(database manager)2746、包管理器(packagemanager)2747、连接管理器(connectivity manager)2748、通知管理器(notification manager)2749、位置管理器(location manager)2750、图形管理器(graphic manager)2751或安全管理器(security manager)2752中的至少一个。
所述运行时库2735例如可包括库模块，其中，为了在执行所述应用2770期间通过编程语言追加新的功能，编译器使用库模块。所述运行时库2735可执行输入/输出管理、存储器管理或关于数学函数的功能等。
所述应用管理器2741例如可以管理所述应用2770之中的至少一个应用的生命周期(life cycle)。所述窗口管理器2742可以管理画面上使用的GUI资源。所述多媒体管理器2743可以识别再现多样的媒体文件所需的格式，并通过使用对应于相应格式的编解码器(codec)来对媒体文件进行编码(encoding)或解码(decoding)。所述资源管理器2744可以管理所述应用2770中的至少任意一个应用的源代码、存储器、或存储空间等的资源。
所述电源管理器2745例如可与基本输入/输出系统(basic input/outputsystem：BIOS)一起进行操作而管理电池或电源，并且可以提供电子装置的操作所需要的电源信息等。所述数据库管理器2746可以生成、搜索或修改将要在应用2770中的至少一个应用中使用的数据库。所述包管理器2747可以管理以包文件格式分布的应用的安装或更新。
所述连接管理器2748例如可以管理WiFi或蓝牙等无线连接。所述通知管理器2749可以以不干扰用户的方式向用户显示或通知诸如到达消息、预约、和接近通知之类的事件。所述位置管理器2750可以管理电子装置的位置信息。所述图形管理器2751可以管理将提供给用户的图形效果或与图形效果相关的用户接口。所述安全管理器2752可以提供系统安全或用户认证等所需要的各种安全功能。根据一实施例，当电子装置(例如，电子装置101)包括电话功能时，所述中间件2730还可包括用于管理电子装置的语音或视频通话功能的电话管理器(telephony manager)。
所述中间件2730可以包括用于形成以上提到的构成要素的多样的功能的组合的中间件模块。所述中间件2730可以按照每个操作系统的类型提供专门化的模块，以提供差异化的功能。另外，所述中间件2730可以动态地删除部分现有的构成要素或者添加新的构成要素。
所述API 2760(例如，API 145)例如为API编程函数集，可以根据操作系统而被设置为其它构成。例如，对Android或iOS的情况而言，可以按每个平台提供一个API集，而且对Tizen的情况而言，可以按每个平台提供两个以上的API集。
所述应用2770(例如，应用程序147)可以包括如下的至少一个应用，所述至少一个应用能够执行如下功能：主画面2771、拨号器2772、SMS/MMS2773、即时消息(instant message：IM)2774、浏览器2775、相机2776、闹钟2777、联系人2778、语音拨号2779、电子邮件2780、日历2781、媒体播放器2782、相册2783、时钟2784、健康管理(health care)(例如，测量锻炼量或血糖等)或环境信息提供(例如，提供气压、湿度或温度信息等)等。
根据一实施例，所述应用2770可以包括用于支持所述电子装置(例如，电子装置101)和外部电子装置(例如，电子装置102、104)之间的信息交换的应用(在下文中，为了便于描述，称之为“信息交换应用”)。所述信息交换应用例如可包括用于将特定信息传递给所述外部装置的通知转达(notification relay)应用或者用于管理外部电子装置的装置管理(devicemanagement)应用。
例如，通知转达应用包括用于将电子装置的另一应用(例如，SMS/MMS应用、电子邮件应用、健康护理应用或环境信息应用等)生成的通知信息传递给外部电子装置(例如，电子装置102、104)的功能。另外，通知转达应用例如可以从外部电子装置接收通知信息并将该通知信息提供给用户。所述装置管理应用例如可以管理(例如，安装、删除或更新)与所述电子装置进行通信的外部电子装置(例如，电子装置104)的至少一个功能(例如，外部电子装置本身(或一些组件)的开启/关闭或显示器的亮度(或分辨率)的调节)、在所述外部电子装置中操作的应用或从所述外部装置提供的服务(例如，呼叫服务或消息服务)。
根据一实施例，所述应用2770可包括根据所述外部电子装置(例如，电子装置102、104)的属性(例如，作为电子装置的属性，电子装置的种类为移动医疗装置)而指定的应用(例如，健康管理应用)。根据一实施例，所述应用2770可以包括从外部电子装置(例如，服务器106或电子装置102、104)接收的应用。根据一实施例，所述应用2770可以包括预先加载的应用(preloaded application)或能够从服务器下载的第三方应用(third partyapplication)。根据图示实施例的程序模块2710中的构成要素的名称可根据操作系统的类型而不同。
根据多样的实施例，所述程序模块2710的至少一部分可以用软件、固件、硬件、或其组合中的至少两个的组合来实现。所述程序模块2710的至少一部分例如可以通过处理器(例如，应用处理器(AP)2610)来实现(implement)(例如，执行)。例如，所述程序模块2710的至少一部分可以包括用于执行至少一个功能的模块、程序、例程、指令集(sets of instructions)或进程等。
图28是示出根据本发明的多样的实施例的可穿戴装置2800的另一结构例的框图。
参照图28，可穿戴装置2800可以独立于所安装的显示装置地向穿戴者提供与上述的电子装置相同或类似的操作。可穿戴装置2800可以包含：MCU2810、通信模块2820、传感器模块2830、输入模块2840、视线追踪模块2850、振动器2852、焦点调整模块2854、电源管理模块2860、电池2862、显示器2870、相机2880。
通信模块2820例如可以包含USB模块2821、WiFi模块2822、蓝牙模块2823、NFC模块2824、GPS模块2825。
传感器模块2830例如可以包括如下项中的至少一个：加速度传感器2831、陀螺仪传感器2832、地磁传感器2833、磁传感器2834、近距离传感器2835、手势传感器2836、握持传感器2837、生物传感器2838、接近传感器2839。
输入模块2840可以包含触摸板2841、按键2842。
可穿戴装置2800还可以包含可固定地设置在主体的显示器2870以代替拆卸电子装置(例如，显示器装置)的结构。显示器2870可以以能够通过图5以及图6所表示的镜头部(以代替所被安装的电子装置的显示器)向用户提供画面的形式被设置在主体。显示器2870可以根据本发明的多样的实施例而显示基于增强现实操作或透视操作的画面。相机2880例如可以被设置在主体的前表面而拍摄穿戴者的前方。
可穿戴装置2800可以以独立于被安装的电子装置的方式提供与电子装置相同或类似的增强现实操作以及透视操作。
在本文中使用的术语“模块”或“功能部”例如可意指包括硬件、软件和固件(firmware)中的一个或两个以上的组合的单元(unit)。“模块”或“功能部”例如可以和术语“单元(unit)”、“逻辑(logic)”、“逻辑块(logical block)”、“部件(component)”或“电路(circuit)”等术语互换而使用(interchangeablyuse)。“模块”或“功能部”可以是构成为一体的部件的最小单元或其一部分。“模块”可以是执行一个或一个以上功能的最小单元或其一部分。“模块”或“功能部”可通过机械方式或电子方式来实现。例如，“模块”或“功能部”可包括执行某些操作的专用集成电路(application-specific integrated circuit：ASIC)芯片、现场可编程门阵列(field-programmable gate arrays：FPGAs)、或可编程逻辑装置(programmable-logic device)中的至少一个，这些都是已知的或者今后将开发的。
根据多样的实施例的装置(例如，模块或其功能)或者方法(例如，操作)中的至少一部分例如可以由以编程模块形式存储在计算机可读存储介质(computer-readable storage media)中的指令来实现。当所述指令被处理器(例如，处理器120)执行时，所述一个以上的处理器可执行对应于所述指令的功能。计算机可读存储介质例如可以是存储器130。
所述计算机可读存储介质可包括硬盘、软盘、磁介质(magnetic media)(例如，磁带)、光记录介质(optical media)(例如，光盘只读存储器(CD-ROM)和数字多功能盘(Digital Versatile Disc：DVD))、磁光介质(magneto-opticalmedia)(例如，软盘(floptical disk))和硬件装置(例如，只读存储器(readonly memory：ROM)、随机存取存储器(random access memory：RAM)或闪存存储器等)。另外，程序指令除了可包括由编译器创建的机器代码之外，还可包括可由计算机使用解释器而执行的高级语言代码。如上所述的硬件装置可被构造成作为至少一个软件模块而操作，以执行各种实施例的操作，反之亦然。
根据多样的实施例的模块或编程模块可包括在上文中提到的构成要素中的至少一个，可省略在上文中提到的组件中的一部分，或者还可包括其他附加的构成要素。根据多样的实施例的由模块、程序模块或其它构成要素执行的操作可通过顺序的、并行的、重复的或启发性(heuristic)的方法来执行。另外，一些操作可按不同次序执行，或者可被省略，或者可添加其它操作。
根据多样的实施例，对存储有指令的存储介质而言，所述指令是以在由一个处理器来执行时使所述至少一个处理器执行至少一个操作的方式被设定的指令，所述至少一个操作可以包含如下的过程：在电子装置中执行虚拟现实模式；感测至少一个事件的发生所导致的中断；将与所述发生的事件相关的事件相关信息变更为与所述虚拟现实模式对应的形态；以及在与所述虚拟现实模式对应地运行的画面中显示所述变更后的事件相关信息。
而且，本说明书和附图所发明的本发明的实施例仅仅是为了更为容易地说明根据本发明的实施例的技术内容并帮助本发明的实施例的理解而提供的特定的实施例，其并非旨在限制本发明的实施例的范围。因此，本发明的多样的实施例的范围需要被解释为：本文所发明的实施例以及基于本发明的多样的实施例的技术思想来导出的所有的变更或变形的形态均包含在本发明的多样的实施例的范围内。

Claims (20)

1.一种电子装置，包括：
显示部，用于显示与虚拟现实模式对应的画面；以及
控制部，通过控制，感测由至少一个事件的发生所导致的中断，将与所述发生的事件相关的事件相关信息变更为与所述虚拟现实模式对应的形态，并将所述变更后的事件相关信息显示在与所述虚拟现实模式对应而运行的画面中。
2.如权利要求1的电子装置，其中，
所述事件是从如下项中选择的一个以上：呼叫接收事件、消息接收事件、闹钟通知、调度通知、WiFi连接、WiFi断开、低电量通知、数据允许或使用限制通知、应用无响应通知、和应用异常终止通知。
3.如权利要求1的电子装置，其中，
所述电子装置还包括：存储部，当所述事件不是将在所述虚拟现实模式下显示的事件时，存储与所述事件相关的信息，
如果所述电子装置从虚拟现实模式转换为透视模式，则所述控制部通过控制而使存储于所述存储部的与所述事件相关的信息显示于画面。
4.如权利要求1的电子装置，其中，
所述电子装置还包括：存储部，用于存储关于将在所述虚拟现实模式下显示的至少一个事件的信息。
5.如权利要求4的电子装置，其中，
所述事件是即时消息接收通知事件。
6.如权利要求1的电子装置，其中，
在所述事件是与至少一个应用的运行相关的事件的情况下，所述控制部通过控制而禁止由所述事件的发生引起的所述应用的运行。
7.如权利要求6的电子装置，其中，
如果所述电子装置的画面模式从所述虚拟现实模式转换为透视模式，则所述控制部通过控制而运行被禁止的所述应用。
8.如权利要求1的电子装置，其中，
如果所述事件是与至少一个应用的运行相关的事件，则所述控制部通过控制而使由所述事件的发生引起的所述应用的运行在所述虚拟现实模式画面的后台运行。
9.如权利要求1的电子装置，其中，
所述控制部通过控制而在所述电子装置连接到可穿戴装置时运行所述虚拟现实模式。
10.如权利要求1的电子装置，其中，
所述控制部对与所述事件相关的信息进行布置并加工，以使与所述事件相关的信息显示在当前画面所显示的所述虚拟现实画面的三维空间上。
11.一种在虚拟现实模式下的事件显示方法，包括如下操作：
在电子装置执行虚拟现实模式；
感测由至少一个事件的发生所导致的中断；
将与所述事件相关的事件相关信息变更为与所述虚拟现实模式对应的形态；以及
在与所述虚拟现实模式对应而运行的画面中显示所述变更后的事件相关信息。
12.如权利要求11所述的在虚拟现实模式下的事件显示方法，其中，
所述事件是从如下项中选择的一个以上：呼叫接收事件、消息接收事件、闹钟通知、调度通知、WiFi连接、WiFi断开、低电量通知、数据允许或使用限制通知、应用无应答通知、和应用异常终止通知。
13.如权利要求11所述的在虚拟现实模式下的事件显示方法，其中，
包括如下操作：当所述事件不是将在所述虚拟现实模式下显示的事件时，存储与所述事件相关的信息；以及
如果所述电子装置的画面模式从虚拟现实模式转换为透视模式，则使存储于所述存储部的与所述事件相关的信息显示在画面。
14.如权利要求11所述的在虚拟现实模式下的事件显示方法，其中
还包括如下的操作：对将在所述虚拟现实模式下显示的至少一个事件的信息进行设定。
15.如权利要求13所述的在虚拟现实模式下的事件显示方法，其中，
已存储的将要显示的所述事件是即时消息接收通知事件。
16.如权利要求11所述的在虚拟现实模式下的事件显示方法，其中，
还包括如下的操作：在所述事件是与至少一个应用的运行相关的事件的情况下，禁止由所述事件的发生引起的所述应用的运行。
17.如权利要求16所述的在虚拟现实模式下的事件显示方法，其中，
包括如下的操作：如果所述电子装置的画面模式从所述虚拟现实模式转换为透视模式，则运行被禁止的所述应用。
18.如权利要求11所述的在虚拟现实模式下的事件显示方法，其中，
还包括如下的操作：如果所述事件是与至少一个应用的运行相关的事件，则通过控制而使由所述事件的发生引起的所述应用的运行在所述虚拟现实模式画面的后台运行。
19.如权利要求11所述的在虚拟现实模式下的事件显示方法，其特征在于，
在所述电子装置连接到可穿戴装置时运行所述虚拟现实模式。
20.如权利要求11所述的在虚拟现实模式下的事件显示方法，其中，
对与所述事件相关的信息进行加工的操作包括如下的操作：对与所述事件相关的信息进行布置，以使与所述事件相关的信息显示在当前画面所显示的所述虚拟现实画面的三维空间上。
CN201580003868.XA 2014-01-06 2015-01-06 电子装置以及在虚拟现实模式下的事件显示方法 Active CN105900051B (zh)

Applications Claiming Priority (5)

Application Number Priority Date Filing Date Title
KR20140001552 2014-01-06
KR10-2014-0001552 2014-01-06
KR1020150000892A KR102355118B1 (ko) 2014-01-06 2015-01-05 전자 장치 및 가상 현실 모드에서의 이벤트 표시 방법
KR10-2015-0000892 2015-01-05
PCT/KR2015/000097 WO2015102464A1 (ko) 2014-01-06 2015-01-06 전자 장치 및 가상 현실 모드에서의 이벤트 표시 방법

Publications (2)

Publication Number Publication Date
CN105900051A true CN105900051A (zh) 2016-08-24
CN105900051B CN105900051B (zh) 2020-10-16

Family

ID=53793753

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201580003868.XA Active CN105900051B (zh) 2014-01-06 2015-01-06 电子装置以及在虚拟现实模式下的事件显示方法

Country Status (4)

Country Link
US (1) US10431004B2 (zh)
EP (1) EP3093743B1 (zh)
KR (1) KR102355118B1 (zh)
CN (1) CN105900051B (zh)

Cited By (12)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN106388785A (zh) * 2016-11-11 2017-02-15 武汉智普天创科技有限公司 基于vr和脑电信号采集的认知评估设备
CN106445160A (zh) * 2016-09-30 2017-02-22 珠海市魅族科技有限公司 一种信息展示的方法以及装置
CN106708258A (zh) * 2016-11-29 2017-05-24 维沃移动通信有限公司 一种虚拟现实终端的数据处理方法和虚拟现实终端
CN106851240A (zh) * 2016-12-26 2017-06-13 网易（杭州）网络有限公司 图像数据处理的方法及装置
CN106896920A (zh) * 2017-03-01 2017-06-27 网易（杭州）网络有限公司 虚拟现实系统、虚拟现实设备、虚拟现实控制装置及方法
CN106903695A (zh) * 2017-01-16 2017-06-30 北京光年无限科技有限公司 应用于智能机器人的投影交互方法及系统
CN106980500A (zh) * 2017-02-17 2017-07-25 福建天泉教育科技有限公司 一种安卓虚拟现实模式和裸眼模式切换方法和系统
CN107219922A (zh) * 2017-05-22 2017-09-29 三体次元信息科技（宁波）有限公司 虚拟现实场景中展示推送消息的系统和包括该系统的终端
CN107436932A (zh) * 2017-07-17 2017-12-05 小草数语（北京）科技有限公司 带有虚拟现实交互的数据挖掘方法和系统
WO2018045699A1 (zh) * 2016-09-12 2018-03-15 中兴通讯股份有限公司 显示处理方法及装置
CN110362203A (zh) * 2019-07-11 2019-10-22 Oppo广东移动通信有限公司 信息处理方法、装置、存储介质及增强现实设备
CN112166412A (zh) * 2018-03-30 2021-01-01 因福莱特虚拟实境软件有限公司 用于管理传送至虚拟现实装置的通知的方法、设备和计算机可读介质

Families Citing this family (29)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20150101612A (ko) * 2014-02-27 2015-09-04 엘지전자 주식회사 폐쇄형 시야(Closed-view)를 제공하는 헤드 마운티드 디스플레이 및 그 제어 방법
WO2017051564A1 (ja) 2015-09-25 2017-03-30 株式会社ソニー・インタラクティブエンタテインメント 情報処理装置
US10229540B2 (en) * 2015-12-22 2019-03-12 Google Llc Adjusting video rendering rate of virtual reality content and processing of a stereoscopic image
US9924238B2 (en) * 2016-03-21 2018-03-20 Screenovate Technologies Ltd. Method and a system for using a computerized source device within the virtual environment of a head mounted device
KR102595078B1 (ko) * 2016-07-08 2023-10-26 주식회사 넥슨코리아 게임 관전을 제공하는 게임제공방법 및 장치
US20180095618A1 (en) * 2016-10-04 2018-04-05 Facebook, Inc. Controls and Interfaces for User Interactions in Virtual Spaces
US10481678B2 (en) * 2017-01-11 2019-11-19 Daqri Llc Interface-based modeling and design of three dimensional spaces using two dimensional representations
WO2018137304A1 (zh) * 2017-01-26 2018-08-02 华为技术有限公司 一种2d应用在vr设备中的显示方法及终端
US11140116B2 (en) 2017-01-31 2021-10-05 Samsung Electronics Co., Ltd Method for providing notification to uncover execution screen and electronic apparatus for performing same
US11863510B2 (en) 2017-03-29 2024-01-02 Samsung Electronics Co., Ltd. Systems and methods for notification delivery
US11494986B2 (en) * 2017-04-20 2022-11-08 Samsung Electronics Co., Ltd. System and method for two dimensional application usage in three dimensional virtual reality environment
US10936147B2 (en) 2017-04-28 2021-03-02 Hewlett-Packard Development Company, L.P. Tablet computing device with display dock
CN109308863B (zh) * 2017-07-28 2022-04-22 昆山国显光电有限公司 终端设备及其显示驱动控制方法、计算机可读存储介质
EP3639523A4 (en) 2017-11-14 2020-04-22 Samsung Electronics Co., Ltd. WIDE VIEW CONTENT MANAGEMENT METHOD AND APPARATUS IN A VIRTUAL REALITY ENVIRONMENT
WO2019143189A1 (en) * 2018-01-18 2019-07-25 Samsung Electronics Co., Ltd. Electronic device and method of operating electronic device in virtual reality
US10617566B2 (en) * 2018-06-14 2020-04-14 Vestibular First, Llc Modular headset for diagnosis and treatment of vestibular disorders
US11733824B2 (en) * 2018-06-22 2023-08-22 Apple Inc. User interaction interpreter
KR102508286B1 (ko) * 2018-08-27 2023-03-09 삼성전자 주식회사 가상 현실에서 정보를 제공하는 전자 장치 및 방법
PH12018000297A1 (en) * 2018-10-04 2020-04-13 Samsung Electronics Co Ltd Input operations in mobile computing devices coupled to head-mounted display devices
US11032532B2 (en) * 2018-10-04 2021-06-08 Samsung Electronics Co., Ltd. Electronic device and method for providing virtual device via at least portion of content
US10946279B1 (en) 2019-08-30 2021-03-16 Sony Interactive Entertainment Inc. Context-based notifications on a user display
US10946294B1 (en) 2019-08-30 2021-03-16 Sony Interactive Entertainment Inc. Summarizing notifications on a user display
US11991263B2 (en) 2019-09-17 2024-05-21 Hewlett-Packard Development Company, L.P. Notification delivery in a virtual space based on a user being in a flow state
KR102583960B1 (ko) 2020-01-06 2023-09-27 한국전자통신연구원 무인 비행체의 데이터 세트 생성 방법 및 장치
US11481965B2 (en) 2020-04-10 2022-10-25 Samsung Electronics Co., Ltd. Electronic device for communicating in augmented reality and method thereof
DE102021114661A1 (de) 2021-01-29 2022-08-04 Sean Grant Tragbare biometrische Vorrichtung
US20230072905A1 (en) * 2021-09-07 2023-03-09 Comcast Cable Communications, Llc Managing event notifications
KR102570343B1 (ko) * 2022-02-25 2023-08-25 (주)어나더리얼 가상환경에 연결된 사용자 단말에게 알람을 제공하기 위한 방법
WO2024010226A1 (en) * 2022-07-06 2024-01-11 Samsung Electronics Co., Ltd. Method and apparatus for managing a virtual session

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20090300122A1 (en) * 2008-05-30 2009-12-03 Carl Johan Freer Augmented reality collaborative messaging system
US20120302289A1 (en) * 2011-05-27 2012-11-29 Kang Heejoon Mobile terminal and method of controlling operation thereof
CN103149669A (zh) * 2011-12-23 2013-06-12 微软公司 反射阵列波导

Family Cites Families (12)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US9349183B1 (en) * 2006-12-28 2016-05-24 David Byron Douglas Method and apparatus for three dimensional viewing of images
US20110169927A1 (en) * 2010-01-13 2011-07-14 Coco Studios Content Presentation in a Three Dimensional Environment
GB2477787B (en) 2010-02-15 2014-09-24 Marcus Alexander Mawson Cavalier Use of portable electonic devices with head-mounted display devices
CN102859470B (zh) * 2011-03-15 2015-12-02 松下电器（美国）知识产权公司 对象控制装置、对象控制方法以及集成电路
KR20130005108A (ko) 2011-07-05 2013-01-15 현대자동차주식회사 운전중 휴대폰 사용 제한 장치 및 그 방법
AU2013200187B9 (en) 2011-07-22 2013-07-25 Microsoft Technology Licensing, Llc Automatic text scrolling on a head-mounted display
US9323325B2 (en) 2011-08-30 2016-04-26 Microsoft Technology Licensing, Llc Enhancing an object of interest in a see-through, mixed reality display device
US9081177B2 (en) 2011-10-07 2015-07-14 Google Inc. Wearable computer with nearby object response
CA3164530C (en) 2011-10-28 2023-09-19 Magic Leap, Inc. System and method for augmented and virtual reality
KR20130064458A (ko) * 2011-12-08 2013-06-18 삼성전자주식회사 복수 개의 영역으로 구분된 화면을 디스플레이하는 디스플레이 장치 및 그 방법
US20140085316A1 (en) * 2012-09-25 2014-03-27 Avaya Inc. Follow me notification and widgets
US9908048B2 (en) * 2013-06-08 2018-03-06 Sony Interactive Entertainment Inc. Systems and methods for transitioning between transparent mode and non-transparent mode in a head mounted display

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20090300122A1 (en) * 2008-05-30 2009-12-03 Carl Johan Freer Augmented reality collaborative messaging system
US20120302289A1 (en) * 2011-05-27 2012-11-29 Kang Heejoon Mobile terminal and method of controlling operation thereof
CN103149669A (zh) * 2011-12-23 2013-06-12 微软公司 反射阵列波导

Cited By (18)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN107817894A (zh) * 2016-09-12 2018-03-20 中兴通讯股份有限公司 显示处理方法及装置
WO2018045699A1 (zh) * 2016-09-12 2018-03-15 中兴通讯股份有限公司 显示处理方法及装置
CN106445160A (zh) * 2016-09-30 2017-02-22 珠海市魅族科技有限公司 一种信息展示的方法以及装置
CN106388785A (zh) * 2016-11-11 2017-02-15 武汉智普天创科技有限公司 基于vr和脑电信号采集的认知评估设备
CN106388785B (zh) * 2016-11-11 2019-08-09 武汉智普天创科技有限公司 基于vr和脑电信号采集的认知评估设备
CN106708258A (zh) * 2016-11-29 2017-05-24 维沃移动通信有限公司 一种虚拟现实终端的数据处理方法和虚拟现实终端
CN106851240A (zh) * 2016-12-26 2017-06-13 网易（杭州）网络有限公司 图像数据处理的方法及装置
CN106903695A (zh) * 2017-01-16 2017-06-30 北京光年无限科技有限公司 应用于智能机器人的投影交互方法及系统
CN106980500A (zh) * 2017-02-17 2017-07-25 福建天泉教育科技有限公司 一种安卓虚拟现实模式和裸眼模式切换方法和系统
CN106980500B (zh) * 2017-02-17 2019-12-10 福建天泉教育科技有限公司 一种安卓虚拟现实模式和裸眼模式切换方法和系统
CN106896920A (zh) * 2017-03-01 2017-06-27 网易（杭州）网络有限公司 虚拟现实系统、虚拟现实设备、虚拟现实控制装置及方法
CN106896920B (zh) * 2017-03-01 2020-09-25 网易（杭州）网络有限公司 虚拟现实系统、虚拟现实设备、虚拟现实控制装置及方法
CN107219922A (zh) * 2017-05-22 2017-09-29 三体次元信息科技（宁波）有限公司 虚拟现实场景中展示推送消息的系统和包括该系统的终端
CN107436932A (zh) * 2017-07-17 2017-12-05 小草数语（北京）科技有限公司 带有虚拟现实交互的数据挖掘方法和系统
CN107436932B (zh) * 2017-07-17 2020-11-13 绿湾网络科技有限公司 带有虚拟现实交互的数据挖掘方法和系统
CN112166412A (zh) * 2018-03-30 2021-01-01 因福莱特虚拟实境软件有限公司 用于管理传送至虚拟现实装置的通知的方法、设备和计算机可读介质
CN112166412B (zh) * 2018-03-30 2024-04-12 因福莱特虚拟实境软件有限公司 用于管理传送至虚拟现实装置的通知的方法、设备和计算机可读介质
CN110362203A (zh) * 2019-07-11 2019-10-22 Oppo广东移动通信有限公司 信息处理方法、装置、存储介质及增强现实设备

Also Published As

Publication number Publication date
CN105900051B (zh) 2020-10-16
US10431004B2 (en) 2019-10-01
KR102355118B1 (ko) 2022-01-26
EP3093743B1 (en) 2019-06-19
EP3093743A4 (en) 2017-09-13
KR20150082120A (ko) 2015-07-15
US20160335801A1 (en) 2016-11-17
EP3093743A1 (en) 2016-11-16

Similar Documents

Publication Publication Date Title
CN105900051A (zh) 电子装置以及在虚拟现实模式下的事件显示方法
KR102576929B1 (ko) 전자 장치
US9952711B2 (en) Electronic device and method of processing screen area of electronic device
CN105590577B (zh) 显示器驱动方法、显示器驱动集成电路及电子设备
US20160011738A1 (en) Electronic device, method of providing interface of the same, and accessory for the same
US20170041272A1 (en) Electronic device and method for transmitting and receiving content
CN110383570A (zh) 用于确定电池的异常状态的方法和装置
CN107924216A (zh) 包括隐藏显示器的可折叠电子设备及其信息显示方法
KR20180047800A (ko) 무선 충전을 수행하는 전자 장치 및 방법
KR20180095409A (ko) 전자 장치 및 전자 장치의 화면 표시 방법
KR20170085344A (ko) 전자 장치
CN114977399A (zh) 电子设备和电子设备中有线和无线充电的方法
CN106293055A (zh) 电子设备以及用于提供其触觉反馈的方法
CN105589336A (zh) 多处理器设备
KR20160054840A (ko) 정보를 공유하기 위한 가상 환경
KR20160061105A (ko) 전력 소모를 줄이기 위한 전력 제어 방법 및 장치
CN105388988A (zh) 低功率模式下的显示方法和支持该方法的电子设备
KR20180056218A (ko) 인터페이스 장치
CN107665485A (zh) 用于显示图形对象的电子装置和计算机可读记录介质
CN105607882A (zh) 显示方法和电子装置
CN106062688A (zh) 用于使用触摸屏处理输入的方法和装置
CN107085507A (zh) 数据收发方法及装置
CN107037966A (zh) 感测输入的压力的电子设备和用于操作电子设备的方法
CN106250738A (zh) 用于执行个人认证的电子装置及其方法
CN106355393A (zh) 支付操作方法和用于支持该支付操作方法的电子设备

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant