CN105892572B - 用于显示内容的方法和装置 - Google Patents

用于显示内容的方法和装置 Download PDF

Info

Publication number
CN105892572B
CN105892572B CN201610084886.1A CN201610084886A CN105892572B CN 105892572 B CN105892572 B CN 105892572B CN 201610084886 A CN201610084886 A CN 201610084886A CN 105892572 B CN105892572 B CN 105892572B
Authority
CN
China
Prior art keywords
electronic device
wearable device
light receiving
window
light
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201610084886.1A
Other languages
English (en)
Other versions
CN105892572A (zh
Inventor
郑圣勋
金泰宣
金珉永
金泰均
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Samsung Electronics Co Ltd
Original Assignee
Samsung Electronics Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Samsung Electronics Co Ltd filed Critical Samsung Electronics Co Ltd
Publication of CN105892572A publication Critical patent/CN105892572A/zh
Application granted granted Critical
Publication of CN105892572B publication Critical patent/CN105892572B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • GPHYSICS
    • G02OPTICS
    • G02BOPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B27/00Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
    • G02B27/01Head-up displays
    • G02B27/0179Display position adjusting means not related to the information to be displayed
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F1/00Details not covered by groups G06F3/00 - G06F13/00 and G06F21/00
    • G06F1/16Constructional details or arrangements
    • G06F1/1613Constructional details or arrangements for portable computers
    • G06F1/163Wearable computers, e.g. on a belt
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/14Digital output to display device ; Cooperation and interconnection of the display device with other functional units
    • GPHYSICS
    • G02OPTICS
    • G02BOPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B27/00Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
    • G02B27/01Head-up displays
    • G02B27/017Head mounted
    • GPHYSICS
    • G02OPTICS
    • G02BOPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B27/00Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
    • G02B27/01Head-up displays
    • G02B27/017Head mounted
    • G02B27/0172Head mounted characterised by optical features
    • GPHYSICS
    • G02OPTICS
    • G02BOPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B27/00Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
    • G02B27/02Viewing or reading apparatus
    • GPHYSICS
    • G02OPTICS
    • G02BOPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B30/00Optical systems or apparatus for producing three-dimensional [3D] effects, e.g. stereoscopic images
    • G02B30/20Optical systems or apparatus for producing three-dimensional [3D] effects, e.g. stereoscopic images by providing first and second parallax images to an observer's left and right eyes
    • G02B30/34Stereoscopes providing a stereoscopic pair of separated images corresponding to parallactically displaced views of the same object, e.g. 3D slide viewers
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0481Interaction techniques based on graphical user interfaces [GUI] based on specific properties of the displayed interaction object or a metaphor-based environment, e.g. interaction with desktop elements like windows or icons, or assisted by a cursor's changing behaviour or appearance
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/14Digital output to display device ; Cooperation and interconnection of the display device with other functional units
    • G06F3/1423Digital output to display device ; Cooperation and interconnection of the display device with other functional units controlling a plurality of local displays, e.g. CRT and flat panel display
    • G06F3/1431Digital output to display device ; Cooperation and interconnection of the display device with other functional units controlling a plurality of local displays, e.g. CRT and flat panel display using a single graphics controller
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/14Digital output to display device ; Cooperation and interconnection of the display device with other functional units
    • G06F3/147Digital output to display device ; Cooperation and interconnection of the display device with other functional units using display panels
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T3/00Geometric image transformations in the plane of the image
    • G06T3/20Linear translation of whole images or parts thereof, e.g. panning
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T3/00Geometric image transformations in the plane of the image
    • G06T3/40Scaling of whole images or parts thereof, e.g. expanding or contracting
    • GPHYSICS
    • G09EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09GARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G3/00Control arrangements or circuits, of interest only in connection with visual indicators other than cathode-ray tubes
    • G09G3/001Control arrangements or circuits, of interest only in connection with visual indicators other than cathode-ray tubes using specific devices not provided for in groups G09G3/02 - G09G3/36, e.g. using an intermediate record carrier such as a film slide; Projection systems; Display of non-alphanumerical information, solely or in combination with alphanumerical information, e.g. digital display on projected diapositive as background
    • G09G3/003Control arrangements or circuits, of interest only in connection with visual indicators other than cathode-ray tubes using specific devices not provided for in groups G09G3/02 - G09G3/36, e.g. using an intermediate record carrier such as a film slide; Projection systems; Display of non-alphanumerical information, solely or in combination with alphanumerical information, e.g. digital display on projected diapositive as background to produce spatial visual effects
    • GPHYSICS
    • G02OPTICS
    • G02BOPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B27/00Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
    • G02B27/01Head-up displays
    • G02B27/0101Head-up displays characterised by optical features
    • G02B2027/0132Head-up displays characterised by optical features comprising binocular systems
    • G02B2027/0136Head-up displays characterised by optical features comprising binocular systems with a single image source for both eyes
    • GPHYSICS
    • G02OPTICS
    • G02BOPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B27/00Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
    • G02B27/01Head-up displays
    • G02B27/0101Head-up displays characterised by optical features
    • G02B2027/014Head-up displays characterised by optical features comprising information/image processing systems
    • GPHYSICS
    • G09EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09GARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G2320/00Control of display operating conditions
    • G09G2320/06Adjustment of display parameters
    • G09G2320/0693Calibration of display systems
    • GPHYSICS
    • G09EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09GARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G2340/00Aspects of display data processing
    • G09G2340/04Changes in size, position or resolution of an image
    • G09G2340/0464Positioning

Landscapes

  • Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • Optics & Photonics (AREA)
  • General Engineering & Computer Science (AREA)
  • Human Computer Interaction (AREA)
  • Computer Hardware Design (AREA)
  • Computer Graphics (AREA)
  • User Interface Of Digital Computer (AREA)

Abstract

一种电子设备,包括:存储器;显示单元;通信单元;以及至少一个处理器,可操作耦接到所述存储器、所述显示单元和所述通信单元,所述至少一个处理器被配置为:通过使用作为显示单元的一部分的一个或多个像素来输出光图案;响应于所述光图案,经由通信单元接收由可佩戴设备发送的一个或多个信号;基于所述一个或多个像素的相应位置和所述一个或多个信号来识别与所述可佩戴设备相对应的画面显示区域。

Description

用于显示内容的方法和装置
技术领域
本公开总体上涉及电子设备,且更具体地涉及用于显示内容的方法和装置。
背景技术
提供一些电子设备用于佩戴在身体上。这种电子设备一般被称作可佩戴设备,且开发了各种类型的可佩戴设备。例如,提供头戴式(例如,眼镜)、手腕佩戴式(例如,手表或腕带)、隐形眼镜式、指环式、鞋式、或衣物式的可佩戴设备,使得可以将可佩戴设备附连到身体或衣服或与其分离。可佩戴设备允许佩戴到身上的电子设备(诸如,衣服或眼镜),以便改善电子设备的便携性和可访问性。
在可佩戴设备中,广泛开发了头戴式可佩戴设备(诸如HMD(头戴式显示器))。HMD可以提供用于提供增强现实(AR)的透视(see-through)型屏幕,或用于提供虚拟现实(VR)的非透视(see-closed)型屏幕。
透视型HMD可以通过使用半透明透镜的特性来合成和组合基于真实世界的画面和虚拟对象来提供具有附加信息的画面,该附加信息是难以在真实世界中获得的。非透视型HMD可以提供两个显示器,使得从外部接收到的内容(游戏、电影、流传输或广播数据)可以被显示在单独的显示器上,以便允许用户将注意力集中在内容上。
发明内容
根据本公开的方案,提供了一种电子设备,包括:存储器;显示单元;通信单元;以及至少一个处理器,可操作耦接到所述存储器、所述显示单元和所述通信单元,所述至少一个处理器被配置为:通过使用作为所述显示单元的一部分的一个或多个像素来输出光图案;经由所述通信单元来接收由可佩戴设备响应于所述光图案发送的一个或多个信号;基于所述一个或多个像素的相应位置和所述一个或多个信号来识别与所述可佩戴设备相对应的画面显示区域。
根据本公开的方案,提供了一种方法,包括:由电子设备通过使用作为显示单元的一部分的一个或多个像素来输出光图案;由所述电子设备接收由可佩戴设备响应于所述光图案发送的一个或多个信号;由所述电子设备基于所述一个或多个像素的相应位置和所述一个或多个信号来识别与所述可佩戴设备相对应的画面显示区域。
根据本公开的方案,一种电子设备,包括:存储器;显示单元,包括多个光接收元件;以及至少一个处理器,可操作耦接到所述存储器和所述显示单元,所述至少一个处理器被配置为:将所述电子设备转变为与可佩戴设备相对应的画面显示模式;以及
基于来自多个光接收元件中的感测到由所述可佩戴设备发出的光的一个或多个光接收元件的相应位置来识别与所述可佩戴设备相对应的画面显示区域。
根据本公开的方案,提供了一种在具有显示单元的电子设备中使用的方法,其中,所述显示单元具有多个光接收元件,所述方法包括:将所述电子设备转变为与可佩戴设备相对应的画面显示模式;由所述多个光接收元件中的一个或多个光接收元件来感测光;以及基于所述一个或多个光接收元件的相应位置来识别与所述可佩戴设备相对应的画面显示区域。
根据本公开的方案,提供了一种可佩戴设备,包括:存储器;通信单元;一个或多个光接收元件,设置在所述可佩戴设备的被布置为面向电子设备的显示单元的一侧;至少一个处理器,可操作耦接到所述存储器、所述通信单元以及所述一个或多个光接收元件,所述至少一个处理器被配置为:当所述一个或多个光接收元件感测到从所述电子设备的显示单元发出的光时,产生一个或多个信号;以及经由所述通信单元向所述电子设备发送所述一个或多个信号。
根据本公开的方案,提供了一种可佩戴设备,包括:存储器;一个或多个发光元件,设置在所述可佩戴设备的被布置为面向电子设备的显示单元的一侧;以及至少一个处理器,可操作耦接到所述存储器以及所述一个或多个发光元件,被配置为响应于检测到将所述电子设备安装在所述可佩戴设备上,所述一个或多个发光元件输出光图案。
附图说明
根据结合附图的以下具体实施方式,将更清楚本公开的上述和其他方案、特征和优点,附图中:
图1是根据本公开各种实施例的网络环境的示例的图;
图2是根据本公开各种实施例的电子设备的示例的框图;
图3是根据本公开各种实施例的过程的示例的流程图;
图4是根据本公开各种实施例的过程的示例的流程图;
图5A示出了根据本公开各种实施例的将电子设备安装到可佩戴设备上的示例;
图5B示出了根据本公开各种实施例的将电子设备安装到可佩戴设备上的示例;
图6示出了根据本公开各种实施例的用户佩戴其上安装有电子设备的可佩戴设备的示例;
图7是示出了根据本公开各种实施例的电子设备的不同显示模式的示例的图;
图8是示出了根据本公开各种实施例的用于在电子设备中检测参考点的方法的图;
图9是根据本公开各种实施例的可佩戴设备的示例的图;
图10是根据本公开各种实施例的画面显示区域的示例的图;
图11是根据本公开各种实施例的画面显示区域的示例的图;
图12是示出了根据本公开各种实施例的用于识别与具体可佩戴设备相对应的画面显示区域的方法的图;
图13A是示出了根据本公开各种实施例的用于识别与可佩戴设备相对应的画面显示区域的方法的图;
图13B是示出了根据本公开各种实施例的用于识别与可佩戴设备相对应的画面显示区域的方法的图;
图13C是示出了根据本公开各种实施例的用于识别与可佩戴设备相对应的画面显示区域的方法的图;
图14A是示出了根据本公开各种实施例的用于识别与可佩戴设备相对应的画面显示区域的方法的图;
图14B是示出了根据本公开各种实施例的用于识别与可佩戴设备相对应的画面显示区域的方法的图;
图14C是示出了根据本公开各种实施例的用于识别与可佩戴设备相对应的画面显示区域的方法的图;
图15A是示出了根据本公开各种实施例的用于识别与可佩戴设备相对应的画面显示区域的方法的图;
图15B是示出了根据本公开各种实施例的用于识别与可佩戴设备相对应的画面显示区域的方法的图;
图15C是示出了根据本公开各种实施例的用于识别与可佩戴设备相对应的画面显示区域的方法的图;
图15D是示出了根据本公开各种实施例的用于识别与可佩戴设备相对应的画面显示区域的方法的图;
图15E是示出了根据本公开各种实施例的用于识别与可佩戴设备相对应的画面显示区域的方法的图;
图16是根据本公开各种实施例的电子设备的示例的图;
图17是根据本公开各种实施例的可佩戴设备的示例的图;
图18是根据本公开各种实施例的电子设备的示例的方框图;
图19是根据本公开各种实施例的程序模块的示例的框图;以及
图20是根据本公开各种实施例的可佩戴设备的示例的框图。
具体实施方式
下文中,将参考附图来描述本公开的各种实施例。然而,应理解,不意图将本公开限制为本文公开的特定形式,而是应将本公开理解为本公开实施例的各种修改、等同物和/或备选。在描述附图的过程中,可以将相似的附图标记用于表示相似的组成要素。
在本公开中,表述“具有”、“可以具有”、“包括”或“可以包括”是指存在相应特征(例如,数值、功能、操作或组件,诸如元素),而不排除存在其他特征。
在本公开中,表达方式“A或B”、“A或/和B中至少一项”或“A或/和B中一个或多个”可以包括所列出项目的所有可能组合。例如,表达方式“A或B”、“A和B中至少一项”或“A或B中至少一项”可以包括:(1)至少一个A,(2)至少一个B,或(3)至少一个A和至少一个B二者。
在本公开的各种实施例中使用的表达方式“第一”或“第二”可以修饰各种组件,而不管顺序和/或重要性如何,且不限制对应组件。上述表述仅用于将一个元件与其他元件进行区分的目的。例如,第一用户设备和第二用户设备指示不同的用户设备,但它们都是用户设备。例如,可以将第一要素称为第二要素,以及类似地也可以将第二要素称为第一要素,而不脱离本公开的范围。
应当理解:当将一要素(例如,第一要素)称为(可操作或可通信)“连接”或“耦接”到另一要素(例如,第二要素)时,该要素可以直接连接或直接耦接到该另一要素,或者可以在它们之间插入任何其他要素(例如,第三要素)。相反,可以理解:在将一要素(例如,第一要素)称为“直接连接”或“直接耦接”到另一要素(第二要素)时,则不存在插入在它们之间的要素(例如,第三要素)。
如本文中所用,表达方式“被配置为”可与表达方式“适用于”、“具有……的能力”、“设计为”、“用于”、“制造为”或“能够……”。就硬件而言,术语“(被)配置为”可能不一定意味着“(被)专门设计为”。备选地,在一些情况下,表达方式“(被)配置为...的设备”可以意味着该设备与其它设备或组件一起“能够...”。例如,短语“适于(或(被)配置为)执行A、B和C的处理器”可以意味着仅用于执行对应操作的专用处理器(例如,嵌入式处理器),或可以通过执行存储在存储设备中的一个或多个软件程序来执行对应操作的通用处理器(例如,中央处理单元(CPU)或应用处理器(AP))。
本公开中使用的术语仅用于描述具体实施例,并不旨在限制本公开。除非上下文另行明确指示,否则单数形式也意在包括复数形式。除非另行明确定义,否则本文所用的所有术语(包括技术术语和科学术语)与本公开所属技术领域的普通技术人员通常理解的含义相同。除非本公开中明确定义,否则如在常用词典中定义的术语之类的术语应解释为具有与相关技术领域中的上下文含义相同的含义,而不应解释为具有理想的或过分正式的含义。在一些情况下,即使在本公开中定义的术语,仍不应被解释为排除本公开的实施例。
例如,电子设备可以是智能电话、平板个人计算机(PC)、移动电话、视频电话、电子书(e-book)阅读器、台式PC、膝上型PC、上网计算机、个人数字助手(PDA)、便携式多媒体播放器(PMP)、MP3播放器、便携式医疗设备、数字摄像机和可佩戴设备(例如,头戴式设备(HDM),诸如电子眼镜、电子衣、电子手环、电子项链、电子配饰、电子纹身或智能手表)中的至少一个。
根据一些实施例,电子设备可以是智能家用电器。智能家庭设备可以包括例如电视、数字视频盘(DVD)播放器、音频设备、冰箱、空调、吸尘器、烤箱、微波炉、洗衣机、空气净化器、机顶盒、家庭自动控制面板、安全控制面板、TV盒(例如,Samsung HomeSyncTM、AppleTVTM或Google TVTM)、游戏机(例如,XboxTM和PlayStationTM)、电子词典、电子钥匙、摄像机和电子相框中的至少一个。
根据另一实施例,电子设备可以是多种医疗设备(例如,多种便携式医疗测试设备(血糖监控设备、心率监控设备、血压测量设备、体温测量设备等)、核磁共振血管造影(MRA)、核磁共振成像(MRI)、断层扫描(CT)机和超声波扫描机)、导航设备、全球定位系统(GPS)接收机、时间数据记录仪(EDR)、飞行数据记录仪(FDR)、车辆信息娱乐设备、船用电子设备(例如,航海导航设备和罗盘)、航空电子设备、安全设备、车辆头单元、工业或家用机器人、银行的自动柜员机(ATM)、商店的销售点或物联网(例如,灯泡、多种传感器、电表或燃气表、洒水器、火警、恒温器、街灯、烤面包机、运动器材、热水箱、加热器、锅炉等)中的至少一个。
根据一些实施例,电子设备可以包括以下至少一项:家具或建筑物/结构的一部分、电子板、电子签名接收设备、投影仪、以及各种测量仪器(例如水表、电表、气表、和无线电波表)。根据本公开的各种实施例的电子设备可以是上述各种设备之一或者其组合。根据本公开一些实施例的电子设备可以是柔性设备。此外,根据本公开实施例的电子设备不限于上述设备,并可以包括根据技术发展的新型电子设备。
下文中,将参考附图来描述根据各种实施例的电子设备。本文所使用的术语“用户”可以指示使用电子设备的人或使用电子设备的设备(例如,人工智能电子设备)。
参考图1,示出了根据本公开各种实施例的在网络环境100下的电子设备101。电子设备101包括以下至少一项:总线110、处理器120、存储器130、输入/输出接口150、显示器160、通信接口170或区域确定模块180。在一些情况中,电子设备101可以省略上述元件中的至少一个,或者还可以包括其他元件。
总线110可以是用于将上述元件110到180彼此相连并在所述元件之间发送通信数据(例如,控制消息和/或数据)的电路。
处理器130可包括任意合适类型的处理电路,诸如一个或多个通用处理器(例如基于ARM的处理器)、数字信号处理器(DSP)、可编程逻辑器件(PLD)、专用集成电路(ASIC)、现场可编程门阵列(FPGA)。例如,在一些实施方案中,处理器120可以包括中央处理单元(CPU)、应用处理器(AP)或通信处理器(CP)中至少一项。处理器120例如可以执行与电子设备101的一个或多个其它组件的控制和/或通信有关的计算或数据处理。
存储器130可以包括任意合适类型的易失性存储器或非易失性存储器,例如随机存取存储器(RAM)、只读存储器(ROM)、网络可访问存储器(NAS)、云存储器、固态驱动器(SSD)等。存储器130例如可以存储与电子设备101的一个或多个其他元件相关的指令或数据。根据实施例,存储器130可以存储软件和/或程序140。例如,程序140可以包括内核141、中间件143、应用编程接口(API)145、和/或应用程序(例如,“应用”)147。内核141、中间件143和API 145中的至少一些可以称作操作系统(OS)。
内核141可以控制或管理用于执行其它程序(例如,中间件143、API 145或应用147)实现的操作或功能的系统资源(例如,总线110、处理器120、存储器130等)。此外,内核141可以提供接口,其中中间件143、API 145或应用147可以通过所述接口访问电子设备101的每个元件以便进行控制或管理。
中间件143例如可以在API 145或应用程序147和内核141之间扮演中间体的作用,以便彼此进行通信,从而发送并接收数据。此外,关于从应用程序147接收到的操作的请求,中间件143可以例如通过向应用程序147中的至少一个应用分配使用电子设备101的系统资源(例如,总线110、处理器120或存储器130)的优先级,来控制(例如,调度或负载均衡)所述请求。
API 145例如可以是允许应用147控制由内核141或中间件143提供的功能的接口,它可以包括例如一个或多个接口或功能(例如,命令),以便进行文件控制、窗口控制、图像处理或文本控制。
输入/输出接口150例如可以向电子设备101的其他元件由用户或其他外部设备输入的指令或数据。此外,输入/输出接口150可以向用户或外部设备输出从电子设备101的其他元件接收到的指令或数据。
例如,显示器160可以包括液晶显示器(LCD)、发光二极管(LED)显示器、有机发光二极管(OLED)显示器、微机电系统(MEMS)显示器、或电子纸显示器。例如,显示器160可以向用户显示各种内容(例如,文本、画面、视频、图标、符号等)。显示器160可以包括触摸屏,例如可以接收通过使用电子笔或用户身体的一部分进行的触摸输入、手势输入、接近输入或悬停输入。
例如,通信接口170可以在电子设备101与外部设备(例如,第一外部电子设备102、第二外部电子设备104、或服务器106)之间配置通信。例如,通信接口170可以通过经由有线或无线通信与网络162相连,以便与外部设备(例如,第二外部电子设备104或服务器106)进行通信。第一外部电子设备102或第二外部电子设备104可以是可佩戴设备或安装有电子设备101的可佩戴设备。
无线通信例如可以将以下至少一项用作蜂窝通信协议:例如,LTE、LTE-A、CDMA、WCDMA、UMTS、WiBro或GSM。有线通信例如可以包括以下至少一项:USB(通用穿行总线)、HDMI(高清多媒体接口)、RS-232(推荐标准232)或POTS(简易老式电话服务)。网络162可包括一个或多个通信网络,诸如计算机网络(例如LAN或WAN)、互联网和电话网络。
第一外部电子设备102和第二外部电子设备104可以是与电子设备101相同或不同。根据实施例,服务器106可包括具有一个或多个服务器的组。根据各种实施例,电子设备101中执行的全部或部分操作可以在一个或多个其他电子设备(例如,电子设备102或104、或服务器106)中执行。根据实施例,当要求电子设备101自动地或依请求地执行特定功能或服务时,电子设备101可以请求其他电子设备(例如,电子设备102或104、或服务器106)执行所述功能或服务,此外,连同与所述其他电子设备相关的至少一部分功能,而不是自身执行所述功能或服务。另一电子设备(例如,电子设备102或104,或服务器106)可以执行电子设备101所请求的功能或者附加功能,并且可以向电子设备101发送其结果。附加地,电子设备101可以处理接收到的结果,以随后提供所请求的功能或服务。为此,可使用例如云计算、分布式计算或客户端-服务器计算技术。
尽管根据本公开各种实施例将电子设备101示出为具有通信接口170以便通过网络162与外部电子设备104或服务器106进行通信,然而可以将电子设备101实现为在没有单独通信功能的情况下独立地操作在电子设备101中。
根据实施例,服务器106可以执行在电子设备101中实现的各操作(或各功能)中的至少一项,以支持电子设备101的操作。例如,服务器106可以包括区域确定服务器模块(未示出),支持电子设备101中的区域确定模块180。例如,区域确定服务器模块可以包括区域确定模块180中的一个或多个元件,且可以执行由区域确定模块180执行的各操作(或功能)中的至少一项,或可以用作代理。
区域确定模块180可以处理从其它元件(例如,处理器120、存储器130、输入/输出接口150或通信接口170)获得的信息的至少一部分,并可以以各种方式将其提供给用户。
例如,根据本公开各种实施例,当电子设备101被安装在可佩戴设备上以便操作作为显示设备时,区域确定模块180可以调整在显示器160上显示的画面的区域或位置。下文将参考图2提供区域确定模块180的详情。
尽管将区域确定模块180示出为与处理器20相分离,然而,区域确定模块180的至少一部分可以被包括在处理器120或一个或多个其他模块中,或区域确定模块180的全部功能可以实现为被包括在处理器120或其他处理器中。
图2是根据本发明各种实施例的电子设备的示例的方框图。参考图2,根据本公开各种实施例的电子设备220可以采用一个或多个显示装置。在以下描述中,电子设备220可以是主要执行显示功能的设备,或可以是包括一个或多个显示装置的普通电子设备。例如,电子设备220可以是采用触摸屏230的电子设备(例如,智能电话)。
根据本公开各种实施例的电子设备220可以包括以下至少一项:触摸屏230、控制器240、存储单元250或通信单元260。触摸屏230可以包括显示面板231和/或触摸面板232。控制器240可以包括以下至少一项:耦接确定单元241、参考点检测单元242、画面区域确定单元243、或画面区域更新单元244。
当将电子设备220安装在可佩戴设备210上时,电子设备220例如可以操作作为HMD设备。根据本公开的各种实施例,可以调整显示在电子设备220的显示面板231上的画面的位置或尺寸,以便适应佩戴所述可佩戴设备210的用户。例如,当将电子设备220安装在可佩戴设备210上以便操作在头戴式影院(HMT)模式下时,可以将分别与用户的左眼和右眼相对应的两个画面显示在显示面板231(参见图7)上。
根据本公开的多个实施例,当电子设备220操作在HMT模式下时,控制器240可以通过使用在安装有电子设备220的可佩戴设备210中设置的传感器来检测参考点,并且可以基于检测到的参考点,确定在HMT模式下显示的画面的位置。
更具体地,根据本公开各种实施例,控制器240可以包括以下至少一项:耦接确定单元241、参考点检测单元242、画面区域确定单元243、或画面区域更新单元244。
根据本公开各种实施例,当将电子设备220安装在可佩戴设备210上以便操作在HMT模式下并执行画面显示区域确定操作时,控制器240可以控制在显示面板231内设置的多个像素中的一个或多个像素根据预定图案发光。
响应于一个或多个像素发光,设置在可佩戴设备210前侧上的一个或多个光接收元件(例如,光电二极管)可以感测从相应像素发出的光,并可以将对感测到光加以指示的一个或多个信号发送到电子设备220,其中电子设备220被安装在所述可佩戴设备210上。
电子设备220的通信单元260可以接收从可佩戴设备210发射的信号,并可以基于当从可佩戴设备210接收到所述信号时发光的一个或多个像素的位置,来确定与可佩戴设备相对应的画面显示区域。
参考点检测单元242可以检测参考点,以便基于当从可佩戴设备210接收到信号时发光的一个或多个像素的位置,来确定画面显示区域。
画面区域确定单元243可以根据检测到的参考点确定要根据HMT模式显示的画面位置(例如,与左眼相对应的左平面位置画面以及与右眼相对应的右眼画面)。根据本公开的各种实施例,除了确定画面显示区域的位置之外,还可以确定画面显示区域的尺寸。
通过针对HMT模式的用户执行或由耦接确定单元241确定电子设备200的HMT模式操作。例如,当将电子设备220安装在可佩戴设备210上时,耦接确定单元241可以检测到电子设备220已被安装在可佩戴设备210上,并可以将电子设备220转变到HMT模式。
此外,根据各种实施例,耦接确定单元241可以基于参考点检测单元242的检测结果,确定电子设备220没有被正确安装在可佩戴设备210上,并经由声音、振动或图像可以向用户提供对这种效果的指示。例如,作为参考点检测单元242的位置确定的结果,如果确定电子设备220没有被正确安装在可佩戴设备220上且不能正常地向用户显示画面,则无法确定画面位置,并可以向用户提供表示没有正确安装电子设备的通知。
由画面区域确定单元243确定的画面区域信息252可以被存储在存储单元250中。可以针对每个用户将画面区域信息252单独存储在存储单元250中,当改变电子设备220的用户时,可以检索改变后的用户的画面区域信息,并将其应用到画面显示。此外,画面区域信息252可以被存储为根据电子设备220的类型或可佩戴设备210的类型而划分的。
存储单元250可以存储应用程序251,应用程序251可以与电子设备220的HMT模式操作相关。例如,根据本公开各种实施例,当用户执行与HMT模式操作相关的应用程序251时,可以通过参考点检测单元242来检测参考点。
可佩戴设备210可以是能够执行图1的电子设备101的一个或多个功能的特定电子设备,或可以是支撑电子设备220的可佩戴支撑件。在可佩戴设备210是电子设备的实例中,如果将电子设备220安装在可佩戴设备210上,则可以通过电子设备220的通信单元260提供各种功能。例如,当将电子设备220安装在可佩戴设备210上时,电子设备220可以通过与可佩戴设备210进行通信来感测其与可佩戴设备210的耦接,并可以确定是否转变到HMT模式。
根据本公开各种实施例,当电子设备220被安装在可佩戴设备210上时,如果无法自动确定电子设备220的耦接,则用户可以手动地将电子设备220转变到HMT模式。此外,根据本公开各种实施例,如果可佩戴设备210包括电子设备101的功能,则电子设备220的耦接确定单元241可以自动确定与可佩戴设备210的耦接,然后自动切换到HMT模式。
当电子设备220在被安装在可佩戴设备210上的同时操作在HMT模式下时,画面区域更新单元244可以通过以预定时间间隔、实时地、或当满足用于更新画面位置的预定条件时检测相对可佩戴设备210的参考点,来重新确定根据HMT模式的画面显示位置。可以将更新后的画面区域信息存储在存储单元250中。例如,当在将电子设备220安装在可佩戴设备210上的同时用户在HMT模式下观看内容时,如果由于外部冲击改变了电子设备220的安装位置,则可以通过由画面区域更新单元244来更新画面位置,将画面设置为符合改变后的安装位置。因此,在一些实施例中,可以响应于来自加速度计或电子设备的其他组件的信号,重新计算画面显示区域的位置和/或尺寸,其中所述信号指示电子设备受到了外部冲击。
图2所示的控制器240的功能中的至少一部分可以被包括在图1所示的电子设备101的区域确定模块180或处理器120中。此外,图2的显示面板231或触摸屏230可以与图1的显示器160相对应。此外,图2的存储单元250可以与图1所示的存储器130相对应。
尽管根据本公开的各种实施例将显示面板231和触摸面板232示出为图2的触摸屏230,然而显示面板231和触摸屏232可以是彼此分离的。
此外,根据本公开各种实施例,为了便于解释,电子设备220可以被称作第一设备(或第一电子设备),且可佩戴设备210可以是第二设备(或第二电子设备)。
在一些实施例中,电子设备可以包括:显示单元,包括多个像素,其中所述多个像素中的一个或多个像素根据预定图案发光;通信单元,在所述一个或多个像素发光时,接收响应于来自可佩戴设备的像素的发光而产生的信号;以及控制器,基于在从可佩戴设备接收信号时发光的一个或多个像素的位置,来确定与可佩戴设备相对应的画面显示区域。
根据本公开各种实施例,所述控制器可以从所述一个或多个像素的位置中确定一个或多个参考点,其中所述一个或多个像素在接收到信号时发光;以及可以根据所述一个或多个参考点,确定与可佩戴设备相对应的画面显示区域。
根据本公开的各种实施例,响应于像素的发光而产生的信号可以是当将设置在可佩戴设备的前侧上的一个或多个光接收元件感测到光时产生的信号。
根据本公开的各种实施例,响应于像素的发光而产生的信号可以包括关于所述一个或多个光接收元件的信息。
根据本公开的各种实施例,所述控制器可以配置与显示单元中的至少一部分区域相对应的窗口,并可以控制属于所述窗口区域的一个或多个像素发光。
根据本公开的各种实施例,所述控制器可以控制所述配置好的窗口根据预定图案来移动或变化。
在一些实施例中,电子设备可以包括:显示单元,具有布置在所述显示单元上的多个发光元件和多个光接收元件;以及控制器,当执行与可佩戴设备相对应的画面显示模式时,基于所多个光接收元件中的感测到光的一个或多个光接收元件的位置,确定与可佩戴设备相对应的画面显示区域。
根据本公开的各种实施例,所述控制器可以从感测到的光接收元件的位置中确定一个或多个参考点;以及可以根据所述一个或多个参考点,确定与可佩戴设备相对应的画面显示区域。
根据本公开的各种实施例,所述一个或多个光接收元件可以感测由设置在可佩戴设备前侧上的一个或多个发光元件发出的光。
图3是根据本发明各种实施例的过程示例的流程图。根据所述过程,在操作302,第一设备(例如,用于提供显示功能的智能电话)被安装在第二设备(例如,可佩戴设备)上,此后,第一设备通过使用设置在第二设备前侧上的发光传感器或光接收传感器,来检测一个或多个参考点。
在操作304,当第一设备处于HMT模式下时,第一设备可以确定要使用的画面显示区域的位置。可以基于检测到的参考点来确定所述位置。例如,根据本公开的各种实施例,电子设备可以识别第一设备的显示器的第一部分,在该部分中第一设备将显示专门为用户左眼指定的图像,和/或识别第一设备的显示器的第二部分,在该部分中第一设备将显示专门为用户右眼指定的图像。
在操作306,当第一设备处于HMT模式下时,第一设备可以在所确定的画面显示区域中显示内容。如上所述,所述内容可以包括三维(3D)静止图像或3D视频和/或任何其他适合类型的虚拟现实(VR)内容。
图4是根据本发明各种实施例的过程示例的流程图。根据所述处理,在操作402,电子设备被安装在可佩戴设备上,为了确定HMT模式的画面显示区域,控制器可以控制显示单元中的一个或多个像素,以便根据预定图案发光。
在所述一个或多个像素发光的同时,当在操作404从可佩戴设备接收到响应于像素的发光产生的信号时,在操作406,电子设备可以识别与所述一个或多个像素相关的信息,其中当从可佩戴设备接收到所述信号时,将所述一个或多个像素用于发射所述光图案。
在操作408,电子设备可以确定是否应结束区域确定过程。根据本公开的各种实施例,当完成根据预定图案的多个像素的发光操作时,可以结束区域确定过程,或即使在结束所述发光操作之前,当从可佩戴设备接收到全部的期望信号时(例如,当接收到进行画面显示区域确定所需的全部信号时),可以确定结束所述区域确定过程。此外,根据本公开的各种实施例,如果在完成多个像素的发光操作之后没有从可佩戴设备接收到全部的期望信号,则可以重复根据预定图案的发光操作。
如果在操作408确定结束了区域确定过程,则在操作410,电子设备可以根据在操作406获得的像素信息,确定HMT模式的画面显示区域。如上所述,确定画面显示区域可以包括以下项之一或多个:(1)识别电子设备的显示器的第一部分,在该部分中所述电子设备将显示专门为用户左眼指定的图像;以及(2)识别电子设备的显示器的第二部分,在该部分中第一设备将显示专门为用户右眼指定的图像。在一些实现方案中,基于用于发光的一个或多个像素的位置,和/或当可佩戴设备感测到光时从所述可佩戴设备接收的一个或多个信号,来识别第一部分和第二部分的任何一个。
可以省略图3和图4的一个或多个操作,或可以将一个或多个其他操作添加到上述操作。此外,可以根据附图所示的顺序来执行图3和图4的操作,或可以改变一个或多个操作的顺序。此外,可以在电子设备中或在服务器中执行图3和图4所示的操作。此外,可以在电子设备中执行图3和图4所示的一个或多个操作,且可以在服务器中执行其余操作。
在一些实施例中,电子设备的画面区域控制方法可以包括:在电子设备的包括多个像素的显示单元中,使所述多个像素中的一个或多个像素根据预定图案发光;当所述一个或多个像素发光时,从可佩戴设备接收响应于像素的发光而产生的信号;以及基于当从可佩戴设备接收到信号时发光的一个或多个像素的位置,确定与可佩戴设备相对应的画面显示区域。
根据本公开各种实施例,所述方法还可以包括:从所述一个或多个像素的位置中确定一个或多个参考点,其中所述一个或多个像素在接收到信号时发光;以及根据所述一个或多个参考点,确定与可佩戴设备相对应的画面显示区域。
根据本公开的各种实施例,响应于像素的发光而产生的信号可以是当将设置在可佩戴设备的前侧上的一个或多个光接收元件感测到光时产生的信号。
根据本公开的各种实施例,响应于像素的发光而产生的信号可以包括关于所述一个或多个光接收元件的信息。
根据本公开的各种实施例,所述方法还可以包括:配置与显示单元中的至少一部分区域相对应的窗口,并控制属于所述窗口区域的一个或多个像素发光。
根据本公开的各种实施例,所述方法还可以包括:控制所述配置好的窗口根据预定图案来移动或变化。
在一些实施例中,电子设备的画面区域控制方法可以包括:执行与可佩戴设备相对应的画面显示模式;在具有多个发光元件和多个光接收元件的显示单元中,其中所述多个发光元件和多个光接收元件布置在所述显示单元上,通过多个光接收元件中的一个或多个光接收元件来感测光;以及基于所述多个光接收元件中的感测到光的一个或多个光接收元件的位置,确定与可佩戴设备相对应的画面显示区域。
根据本公开的各种实施例,所述方法还可以包括:从感测到的光接收元件的位置中确定一个或多个参考点;以及根据所述一个或多个参考点,确定与可佩戴设备相对应的画面显示区域。
根据本公开的各种实施例,所述一个或多个光接收元件可以感测由设置在可佩戴设备前侧上的一个或多个发光元件发出的光。
下文中,将参考图5A、图5B和图6来描述将电子设备(例如,智能电话)安装在可佩戴设备上的示例。
图5A和图5B示出了根据本公开各种实施例的将电子设备520(例如,第一设备)安装在可佩戴设备510(例如,第二设备)的示例,图6示出了根据本公开各种实施例的用户佩戴安装有电子设备620的可佩戴设备610的示例。
参考图5A和图5B,可佩戴设备510例如是图1的电子设备102。此外,如上所述,在一些实现方案中,可佩戴设备510仅用作支撑物,且它可以缺乏与电子设备520进行通信的能力。可佩戴设备510可以包括主体和外壳。
当电子设备520被安装在可佩戴设备510上时,所述外壳可以覆盖电子设备520的后缘(rear edge),以便支撑电子设备520。可佩戴设备510可以具有腕带,其中用户使用腕带以便将可佩戴设备510佩戴在用户头部。
此外,可佩戴设备510可以包括设置在与用户的双眼分别相对应的位置处的镜片。当电子设备520被安装在可佩戴设备510上时,佩戴者可以通过所述镜片观看电子设备520的显示器(未示出)的画面。附加地或备选地,可佩戴设备510可以包括一个或多个机械结构,以便可拆卸性地将所述电子设备520安装在所述可佩戴设备510上。
根据本公开的各种实施例,可佩戴设备510可以包括参考图1的电子设备101讨论的一个或多个元件。例如,可佩戴设备510可以包括以下至少一项:触摸面板、键按钮、滚轮键或触摸板。触摸面板可以接收用户的触摸输入。触摸输入可以是用户输入的直接触摸,或可以是靠近触摸面板的悬停输入。当电子设备520被安装在可佩戴设备510上时,可佩戴设备510可以通过接口(诸如,USB)连接到电子设备520,以便与其进行通信。
电子设备520可以响应于从可佩戴设备510接收到输入,执行各种功能。例如,电子设备520可以响应于接收到的输入,调整各种声音和图像特征(例如,音量、低音、亮度、对比度等)。例如,当电子设备520被安装到可佩戴设备510上时,电子设备520的外部设备连接单元521可以与可佩戴设备510的连接单元511电学相连,以便使所述设备510和520能够彼此进行通信。此外,根据本公开的各种实施例,当如上所述电子设备520确定画面显示区域以便在HMT模式下呈现内容时,构成显示设备520的显示单元的多个像素中的一个或多个像素根据预定图案发光,设置在电子设备510前侧上的光接收元件感测光,此后电子设备520可以通过连接单元511发送一个或多个信号,其中所述信号指示光接收元件中的至少一部分感测到由所述一个或多个像素发射的光。
参考图6,电子设备620可以是图1的电子设备101,例如,可以是包括显示单元的智能电话。可佩戴设备610可以是图1的第二电子设备102,且可以是可佩戴机械支撑件。
用户可以将电子设备620安装在可佩戴设备610上,使得电子设备620的显示单元(例如,触摸屏)朝向用户面部,如图6所示。用户可以闭合可佩戴设备610的外壳,以便将电子设备620固定到可佩戴设备610。如图6所示,用户可以将可佩戴设备610佩戴在用户手上,其中将所述电子设备620安装在所述可佩戴设备610上。用户可以通过设置在可佩戴设备610中的镜片观看电子设备620的显示器的画面。
此外,如图6所示,用户可以通过设置在可佩戴设备610侧面上的触摸板630,来控制可佩戴设备610或电子设备620的操作。
在一些实施例中,可佩戴设备可以包括:一个或多个光接收元件,设置在所述可佩戴设备的侧面上,其中所述可佩戴设备面向电子设备的显示单元;控制器,控制根据所述一个或多个光接收元件的感测来产生信号;以及通信单元,向所述电子设备发送所产生的信号。
在一些实施例中,可佩戴设备可以包括:一个或多个发光元件,设置在面向电子设备的显示单元一侧的至少一部分上;以及当执行与可佩戴设备相对应的画面显示模式时,产生控制信号以便控制所述一个或多个发光元件的发光。
图7是示出了根据本发明各种实施例的电子设备的不同显示模式的示例的图。
参考图7,电子设备700可以是图5A、图5B和图6中的电子设备520和620。当电子设备700操作在正常模式下时,电子设备可以显示如图7的上图所示的单个画面710。
根据本公开的各种实施例,当电子设备700被安装在可佩戴设备时,电子设备可以操作在所示的HMT模式下。当电子设备700操作在HMT模式下时,电子设备可以单独地显示与用户的左眼相对应的画面720a以及与用户的右眼相对应的画面720b。换言之,在HMT模式下,可以将能够在正常模式下显示的单个画面分为两个画面720a和720b,以便支持用户以3D方式观看所述单个画面。
在本公开的各种实施例中,当电子设备700被安装在可佩戴设备上以便操作在HMT模式下时,电子设备可以在电子设备700的显示单元中确定画面720a和720b的位置(下文中,“显示位置”)。下文中,参考图8-17描述了用于当将电子设备700安装在可佩戴设备上以便随后操作在HMT模式下时确定HMT模式下的画面(与左眼相对应的画面720a和与右眼相对应的画面720b)的尺寸或位置的各种实施例。
图8是根据本公开各种实施例的用于在电子设备中检测参考点的方法的图。如图所示,当将电子设备820安装在可佩戴设备810上以便在电子设备820的显示单元上显示HMT模式下的两个画面821a和821b时,电子设备可以从可佩戴设备810检测参考点,以便确定画面821a和821b的显示位置。
根据本公开的各种实施例,可佩戴设备810可以具有一个或多个光接收元件812a、812b、812c和812d,所述光接收元件设置在可佩戴设备810的前侧(例如,面向显示设备820的显示单元的表面)上。可以通过使用光电二极管、雪崩光电二极管或光电晶体管,来实现所述光接收元件812,且本公开的实施例不限于此。根据本公开的各种实施例,可以将能够感测光并将光转换为电信号的任何元件用作光接收元件812。
当根据本公开的各种实施例将电子设备820安装在可佩戴设备810上且电子设备820的触摸屏面向可佩戴设备810的前侧时,电子设备820的显示单元中的一个或多个像素可以根据预定光图案发光。如果所述像素与可佩戴设备810的光接收元件812中的任何光接收元件相对准,则这些光接收元件可以感测从所述像素发出的光。当光接收元件812感测到光时,可佩戴设备810可以产生电信号,并可以将所产生的电信号发送给电子设备820。此后,电子设备820可以识别当从可佩戴设备810接收到信号时发光的一个或多个像素的位置,以便在电子设备810的显示单元上确定画面821a和821b的位置。
如下所述,在电子设备820输出光图案的同时,电子设备820可以从可佩戴设备810接收一个或多个信号作为反馈,并基于所述信号,确定在可佩戴设备810中设置的一个或多个光接收元件812的位置。在识别到光接收元件812的位置之后,电子设备820可以基于所确定的位置,来确定与可佩戴设备810相对应的画面显示区域。换言之,光接收元件可以用作参考点,其中所述参考点相对电子设备中的一个或多个镜片(或其他开口)位于已知位置处。基于所述参考点,电子设备可以确定可佩戴设备的镜片所在的位置,并在电子设备的显示画面上的多个位置处显示一个或多个图像,其中所述电子设备的显示画面适合于通过所述镜片来进行观看。
光接收元件812可以实现为各种类型、形式、位置、数目、形状或图案。例如,图8示出了设置在可佩戴设备810前侧的左上部812a、中心812b、右上部812c、左下部812d和右下部812e处设置的五个光接收元件。
佩戴了将电子设备820安装在其上的可佩戴设备810的用户可以通过可佩戴设备810的镜片811a和811b,观看显示在电子设备820的显示单元上的画面821a和821b。根据本公开的各种实施例,如上所述,可以根据电子设备820的安装状态来确定画面位置,使得可以将画面显示为适合用户眼睛的位置,而无论电子设备820的尺寸、形状、类型、安装精度或安装结构。
图9是根据本发明各种实施例的可佩戴设备的示例的图。参考图9,光接收元件910可以位于设置在可佩戴设备900前侧上的镜片部周围。
在一些实施例中,镜片部可以只包括两个开口,而其中没有任何镜片。例如,根据本公开的各种实施例,光接收元件可以在所述开口四周布置一圈。尽管在本示例中将五个光接收元件910布置在图9的镜片部周围,任意适合数目的光接收元件可以被布置在所述镜片部周围。此外,可以将光元件布置在可佩戴设备表面上的任意适合位置处。
尽管可佩戴设备具有布置在其上的光接收元件,然而可佩戴设备可以具有布置在其上的发光元件,如下文所述。与光接收元件相同,可以以各种位置、方法或图案将发光元件设置在所述可佩戴设备上。
图10和11是根据本发明各种实施例的画面显示区域的示例的图.参考图10和图11,可以分别将电子设备1000和1100的显示单元1010和1110的至少一部分指定为针对HMT模式的画面显示区域1020和1120。
可以根据可佩戴设备中的用于观看显示在电子设备1000和1100上的内容的镜片的尺寸和焦距,来确定显示区域1020和1120的尺寸和/或位置。如图10和图11所示,当画面尺寸大于固定画面尺寸的电子设备1000和1100被安装在可佩戴设备时,电子设备的显示单元1010和1110应将画面1020和1120的参考点1030和1130布置在特定位置处,以便符合可佩戴设备的尺寸。
下文中,下文将参考图12到17来描述根据本公开各种实施例的用于在显示设备的显示单元中确定与HMT模式相对应的画面显示区域或画面位置的实施例。
图12是示出了根据本公开各种实施例的用于识别与具体可佩戴设备相对应的画面显示区域的方法的图。参考图12,假设将五个光接收元件1231a、1231b、1231c、1231d、1231e设置在可佩戴设备的前侧上。
当将电子设备安装在可佩戴设备上并布置为操作在HMT模式下时,电子设备可以在电子设备的整个画面1210中确定与HMT模式相对应的画面显示区域1230。
例如,电子设备可以在电子设备的画面1210中配置与HMT模式相对应的画面尺寸的窗口220,并可以允许布置在该窗口1220的区域中的像素发光。窗口1220在保持大小固定的同时可以根据预定图案上下左右移动。应容易理解,移动窗口1220可以引起不同像素发光,如同从窗口1220遗漏了一部分像素同时带入了其他像素。
当与该窗口相对应的像素发光时,如果可佩戴设备的一个或多个光接收元件1231与该窗口区域相对齐,则光接收元件1232可以感测由窗口区域中的像素发出的光。
如图12所示,当全部光接收元件1231感测由窗口1220中的像素发出的光时,可佩戴设备可以输出一个或多个信号,其中所述信号指示窗口1220与光接收元件1231相对齐。此后,响应于所述一个或多个信号,电子设备1220可以将该窗口选择作为画面显示区域,以便当电子设备处于HMT模式时呈现内容。
图13A-C是示出了根据本公开各种实施例的用于识别与可佩戴设备相对应的画面显示区域的方法的图。参考图13A-C,如图12所示,设置在可佩戴设备中的一个或多个光接收元件1321可以在移动窗口1310时感测由像素发出的光。在这种示例中,窗口310可以具有与HMT模式相对应的固定尺寸。
例如,当将窗口1310布置为如图13A所示时,多个光接收元件中只有左上角的光接收元件1321a可以感测到光。例如,当将窗口1310移动到如图13B所示的位置时,多个光接收元件中只有左上角的光接收元件1321a和中心的光接收元件1321b可以感测到光。
此外,如果窗口1310移动到如图13C所示的位置,则全部五个接收元件1321a、1321b、1321c、1321d和1321e可以感测到光。当全部五个光接收元件感测到光时,可以将一个或多个信号从可佩戴设备1320发送到电子设备。所述信号可以指示将全部(或足够数量的)光接收元件与窗口1310相对齐。此后,当接收到信号时,电子设备可以选择窗口1310的位置和/或尺寸,作为画面显示区域的位置和/或尺寸,其中当所述设备处于HMT模式下时在所述画面显示区域中显示所述内容。
图14A-C是示出了根据本公开各种实施例的用于识别与可佩戴设备相对应的画面显示区域的方法的图。参考图14a、图14b和图14c,电子设备1400可以改变像素发光的窗口1420的尺寸和/或位置,以便有效地确定当所述设备操作在HMT模式下时显示内容的画面显示区域的位置。假设在图14A、图14B和图14C的实施例中,将单个光接收元件设置在可佩戴设备前侧的中心。
参考图14A,有可能从电子设备1400的整个画面的上方增加窗口的尺寸。例如,开始时,窗口1410的高度可以等于至少一个像素线。然后,窗口1410的高度可以向下逐渐增加。附加地或备选地,在一些实现方案中,窗口的尺寸可以保持为是相同的(例如,最小高度是一个像素线),且可以从上向下移动所述窗口。
如上所述,如果窗口尺寸向下增加或将预定尺寸的窗口(例如,高度为一个或多个像素线的窗口)向下移动到图14A所示的位置,则中心的光接收传感器1411可以最终感测由窗口1410中的像素发出的光。响应于用光接收传感器1411感测到光,可佩戴设备可以向电子设备1400发送指示感测到光的信号。当从可佩戴设备接收到信号时,电子设备1400可以识别所述窗口,以便获得该位置在画面上的y坐标,其中所述位置与光接收传感器1411的位置相对应。根据对图14A的方法的修改,还可以通过从下向上(除了从上向下之外)扩展或移动窗口,来获得y坐标。
参考图14B,窗口尺寸可以从左向右地增加,直到该窗口覆盖电子设备1400的整个画面为止。例如,开始时,该窗口可以是一个像素宽度。然后,在一些实施例中,窗口的宽度可以向右侧逐渐增加。附加地或备选地,在一些实现方案中,窗口的尺寸可以保持为是相同的,且可以从左向右地移动所述窗口。
如上所述,如果向右增加窗口尺寸,或将预定尺寸的窗口向右移动到图14B所示的位置,则中心的光接收传感器1411可以感测从窗口中的一个或多个像素发出的光。响应于用光接收传感器1411感测到光,可佩戴设备可以向电子设备1400发送指示感测到光的信号。当从可佩戴设备接收到信号时,电子设备1400可以识别所述窗口,以便获得该位置在画面上的x坐标,其中所述位置与光接收传感器1411的位置相对应。根据对图14B的方法的修改,还可以通过从右向左(除了从左向右之外)扩展或移动窗口,来获得x坐标。
参考图14C,可以根据图14A和图14B的过程来获得与光接收传感器1411的位置相对应的画面位置的坐标(x,y),并且可以根据HMT模式下的预定画面尺寸以及与左眼和/或右眼相对应的画面显示区域,在电子设备1400的整个画面中确定与HMT模式相对应的画面显示区域1410。
图15A-E是示出了根据本公开各种实施例的用于识别与可佩戴设备相对应的画面显示区域的方法的图。参考图15A-E,可以创建具有最小单位尺寸的窗口1520。可以在电子设备1500的中心创建窗口1520,此后,可以确定光接收元件1511是否在增加窗口1520的尺寸的同时感测到光,以便确定用于当所述设备处于HMT模式时呈现内容的画面显示区域的位置。
假设在图15A-E的实施例中,将光接收元件1511a、1511b、1511c和1511d分别布置在可佩戴设备前侧上的上、下、左、右部分。
参考图15A,首先,窗口1520可以在电子设备1500的中心具有最小单位尺寸。接着,可以增加窗口1520的尺寸。
由于窗口1520的尺寸增加,当上方的光接收元件1511a与图15B所示的窗口1520的区域相对齐时,上方的光接收元件1511a可以感测从窗口1520中的一个或多个像素发出的光。响应于用上方的光接收元件1511a感测到光,可佩戴设备可以向电子设备1500发送指示感测到光的信号。电子设备1500可以接收来自所述可佩戴设备的信号,并且可以在固定窗口的上侧的位置的同时继续增加窗口1520的尺寸。
参考图15C,可以在将窗口1520的上侧保持固定的同时,扩展窗口1520的左侧、右侧和下侧。因此,在一些实现方案中,可以沿第一方向扩展所述窗口,直到接收到对特定光接收元件已感测到从窗口中的一个或多个像素发出的光加以指示的信号为止。此后,响应于所述信号,电子设备可以停止向第一方向扩展窗口,并开始向一个或多个其他方向扩展窗口。
由于窗口1520的尺寸增加,当下方的光接收元件1511d变得与图15C所示的窗口1520相对齐时,除了上方的光接收元件1511a之外,下方的光接收元件1511d也可以感测光。响应于用下方的光接收元件1511d感测到来自窗口中的一个或多个像素的光,可佩戴设备可以向该电子设备1500发送信号。电子设备1500可以接收来自所述可佩戴设备的信号,并且可以在固定窗口上侧和下侧的位置的同时继续增加窗口1520的尺寸。例如,电子设备可以沿着左右方向继续增加该窗口。
由于窗口1520的尺寸增加,当左侧的光接收元件1511b变得与图15D所示的窗口1520相对齐时,除了上方的光接收元件1511a和下方的光接收元件1511d之外,左侧的光接收元件1511b也可以感测从所述窗口中的一个或多个像素发出的光。响应于用左侧的光接收元件1511b感测到光,可佩戴设备可以向电子设备1500发送对光接收元件1511已感测到从该窗口中的一个或多个像素发出的光加以指示的信号。电子设备1500可以接收来自所述可佩戴设备的信号,并且可以在固定窗口上侧、下侧和左侧的位置的同时继续增加窗口1520的尺寸。例如,电子设备可以继续向着右侧扩展该窗口。
由于窗口1520的尺寸增加,当右侧的光接收元件1511c变得与图15E所示的窗口1520相对齐时,除了上方的光接收元件1511a、下方的光接收元件1511d和左侧的光接收元件1511b之外,右侧的光接收元件1511c也可以感测从所述窗口中的一个或多个像素发出的光。响应于用光接收元件1511c感测到光,可佩戴设备可以向该电子设备1500发送信号。
响应于接收到这种信号(例如,指示该窗口在全部四个方向上都与光接收元件1511相对齐的信号),电子设备1500可以选择窗口1520,其中当从可佩戴设备接收到与上、下、左、右侧的光接收元件的感测相对应的全部信号时形成所述窗口1520,作为用于当电子设备1500处于HMT模式时显示内容的画面显示区域。
图16是根据本发明各种实施例的电子设备的示例的图。如图所示,光接收元件1621b可以位于电子设备1600的显示单元1620中的像素之间,并被用于识别画面显示区域1610。
例如,显示单元1620可以具有与根据显示方法的颜色(例如,红(R)、绿(G)和蓝(B))相对应的多个像素1621a,并可以控制与每个颜色相对应的像素的发光,以便显示图像。
根据本公开的各种实施例,一个或多个光接收元件1621b可以根据预定图案布置在多个颜色像素1621a之间。
图17是根据本发明各种实施例的可佩戴设备的示例的图。如图所示,发光元件1710可以位于设置在可佩戴设备1700前侧上的镜片部周围。
根据各种实施例,镜片部可以包括可以将镜片布置在其中的开口。例如,根据本公开的各种实施例,发光元件可以以环形形式布置在所述开口四周。尽管五个发光元件1710被布置在图17的镜片部周围,然而可以将多个发光元件布置在镜片部周围,或可以将其布置在特定区域。
根据本公开的各种实施例,当将电子设备1600安装在可佩戴设备1700上并且被设置在可佩戴设备1700前侧上的一个或多个发光元件1710发光时,在被布置于电子设备1600的显示单元1620内的多个光接收元件1621b中,与所述发光元件1710的位置相对应的光接收元件1621b可以感测到光。此后,电子设备可以基于在多个光接收元件1621中感测到光的光接收元件1621b的位置(参考点),来确定针对HMT模式的画面显示区域。
下文中,将参考图18到图20来描述执行第一设备(例如,电子设备)或第二设备(例如,可佩戴设备)的示例。图18和图19示出了操作为显示设备的电子设备的示例,图20示出了可佩戴设备的示例。
图18是根据本公开实施例的电子设备1801的示例的框图1800。电子设备1801可以构成图1所示的电子设备101的一部分或全部。电子设备1801可以包括一个或多个应用处理器(AP)1810、通信模块1820、订户识别模块(SIM)卡1824、存储器1830、传感器模块1840、输入设备1850、显示器1860、接口1870、音频模块1880、相机模块1891、电源管理模块1895、电池1896、指示器1897和电机1898。
例如AP 1810可以控制连接到AP 1810的多个硬件或软件组件,并且还可以通过执行操作系统或应用程序来执行数据处理和计算。AP 1810可通过例如片上系统(SoC)来实现。根据实施例,AP 1810还可以包括图形处理单元(GPU)和/或图像信号处理器。AP 1810可以包括图18所示的组件(例如,蜂窝模块1821)中的至少一部分。AP 1810可以将从一个或多个其他元件(例如,非易失性存储器)接收到的指令或数据加载在易失性存储器中,以便随后进行处理,并将各种类型的数据存储在非易失性存储器中。
通信模块1820可以具有与图1的通信接口170相同或相似的元件。通信模块1820可以例如包括蜂窝模块1821、Wi-Fi模块1823、BT模块1825、GPS模块1827、NFC模块1828、以及射频(RF)模块1829。
例如,蜂窝模块1821可以通过通信网络来提供语音呼叫、视频呼叫和文本信使的服务或互联网服务。根据一个实施例,蜂窝模块1821可以通过使用订户识别模块(例如,SIM卡1824)来执行在通信网络中对电子设备1801的识别和认证。根据实施例,蜂窝模块1821可以执行由AP 1810提供的功能中的至少一部分。根据实施例,蜂窝模块1821可以包括通信处理器(CP)。
Wi-Fi模块1823、BT模块1825、GPS模块1827或NFC模块1828中的每一个可以包括用于处理通过对应模块发送和接收的数据的处理器。根据实施例,蜂窝模块1821、Wi-Fi模块1823、BT模块1825、GPS模块1827、或NFC模块1828中的至少一些(例如,超过两个)可以包括在单个集成芯片(IC)或IC封装中。
RF模块1829可以例如发送和接收通信信号(例如,RF信号)。RF模块1829可以包括例如收发机、功率放大模块(PAM)、频率滤波器、低噪声放大器(LNA)、天线等。根据另一个实施例,蜂窝模块1821、Wi-Fi模块1823、BT模块1825、GPS模块1827或NFC模块1828中的至少一个通过分离的RF模块发送和接收RF信号。
SIM卡1824可以包括含有用户标识模块和/或嵌入式SIM的卡,并可以包含固有标识信息(例如,集成电路卡标识符(ICCID))或订户信息(例如,国际移动订户标识(IMSI))。
存储器1830可以例如包括内部存储器1832或外部存储器1834。内部存储器1832可以包括以下至少一项:易失性存储器(例如,动态RAM(DRAM)、静态RAM(SRAM)、同步动态RAM(SDRAM)等)、或非易失性存储器(例如,一次性可编程ROM(OTPROM)、可编程ROM(PROM)、可擦除可编程ROM(EPROM)、电可擦除可编程ROM(EEPROM)、掩膜ROM、闪存ROM、闪存(例如,NAND闪存或NOR闪存)、硬盘驱动器、固态驱动器(SSD)等)。
外部存储器1834还可以包括闪存驱动,例如,紧凑型闪存(CF)、安全数字(SD)、微型安全数字(Micro-SD)、迷你型安全数字(Mini-SD)、极限数字(xD)、存储棒等。外部存储器1834可以通过各种接口与电子设备1801功能连接和/或物理连接。
传感器模块1840例如可以测量物理量,并可以检测电子设备1801的操作状态,以便将测量或检测到的信息转换为电信号。传感器模块1840可以包括以下至少一项:例如,手势传感器1840A、陀螺仪传感器1840B、大气压传感器1840C、磁性传感器1840D、加速度传感器1840E、握力传感器1840F、接近传感器1840G、颜色传感器1840H(例如,红-绿-蓝(RGB)传感器)、生物特征传感器1840I、温度/湿度传感器1840J、照明传感器1840K、或紫外(UV)传感器1840M。附加地或备选地,传感器模块1840还可以包括电子鼻传感器、肌电图(EMG)传感器、脑电图(EEG)传感器、心电图(ECG)传感器、红外线(IR)传感器、虹膜传感器、和/或指纹传感器。传感器模块1840还可以包括用于控制其中包括的至少一个传感器的控制电路。在一些情况下,电子设备1801还可以包括配置为控制传感器模块1840的处理器,作为AP 1810的一部分或独立于AP 1810,以便在AP 1810处于睡眠状态期间控制传感器模块1840。
输入设备1850可以包括例如触摸面板1852、(数字)笔传感器1854、按键1856或超声输入单元1858。触摸面板1852可以使用例如电容型、压力敏感型、红外型或超声型中的至少一种。此外,触摸面板1852还可包括控制电路。触摸面板1852还可以包括触觉层,以便向用户提供触觉反馈。
可以通过使用与用来检测触摸输入的硬件相同的硬件,或通过使用单独的识别片,来实现(数字)笔传感器1854。按键1856可以包括例如物理按钮、光学按键或键区。超声输入设备1858使用电子设备1801中的麦克风(例如,麦克风1888)检测由产生超声信号的输入装置产生的声波,从而识别数据。
显示器1860(例如,显示器160)可以包括面板1862、全息设备1864或投影仪1866。面板1862可以包括与图1的显示器160相同或相似的元件。面板1862例如可以实现为例如柔性、透明或可佩戴。面板1862还可以与触摸面板1852配置为单个模块。全息设备1864可以通过使用光的干涉在空中显示3D图像。投影仪1866可以通过在画面上投影光来显示图像。画面可位于例如电子设备1801内部或外部。根据实施例,显示器1860还可包括用于控制面板1862、全息图设备1864或投影仪1866的控制电路。
接口1870可以包括例如高清多媒体接口(HDMI)1872、通用串行总线(USB)1874、光学接口1876、或D-超小型(D-sub)1878。例如,可以在图1所示的通信接口170中包括所述接口1870。附加地或备选地,接口1870可包括例如移动高清链接(MHL)接口、安全数字(SD)卡/多媒体卡(MMC)接口或红外数据协会(IrDA)标准接口。
音频模块1880将声音转换为电信号,且反之亦然。音频模块1880的至少一部分可以包含在例如图1所示的输入/输出接口150中。例如,音频模块1880可以处理通过例如扬声器1882、接收机1884、耳机1886或麦克风1888输入或输出的语音信息。
相机模块1891作为用于捕捉静止图像和运动图像的设备,且根据本公开实施例,它可以包括至少一个图像传感器(例如,前部传感器或后部传感器)、镜头、图像信号处理器(ISP)、或闪光灯(例如,LED或氙灯)。
电源控制模块1895可以管理电子设备1801的电源。根据实施例,电源管理模块1895可以包括电源管理集成电路(PMIC)、充电器集成电路(IC)、或电池或燃料表。PMIC可以使用有线充电类型和/或无线充电类型。无线充电类型可以包括例如磁谐振式、磁感应式或电磁波式,且还可以包括用于无线充电的附加电路,例如,线圈回路、谐振电路、整流器等。电池表可以测量例如电池1896的剩余量、充电电压和电流、或温度。电池1896可以包括例如可充电电池或太阳能电池。
指示器1897可以显示电子设备1801的整体或电子设备1801的一部分(例如,AP1810)的具体状态,例如引导状态、消息状态或充电状态。电机1898可以将电信号转换成机械振动,并可以生成振动效果或触觉效果。尽管图中未示出,电子设备1801可以包括用于支持移动TV的处理设备(例如,GPU)。用于支持移动TV的处理设备可以根据标准(例如,数字多媒体广播(DMB)、数字视频广播(DVB)、或媒体流)来处理媒体数据。
根据本公开的电子设备的每个组件可以实现为一个或多个组件,且相应组件的名称可以根据电子设备的类型而改变。在多种实施例中,电子设备可以包括上述元件中的至少一个元件。电子设备可以省略上述元件中的一部分,或该电子设备还可以包括附加元件。此外,可以组合根据本公开的多种实施例的电子设备的组件的一部分,以便形成单个实体,且可以等同地执行对应元件在进行组合之前的功能。
图19是示出了根据本公开各个实施例的程序模块1910的示例的框图1900。根据实施例,程序模块1910(例如,程序140)可以包括对与电子设备(例如,电子设备101)相关联的资源进行控制的操作系统(OS)和/或在OS下执行的各种应用(例如,应用程序147)。OS可以是例如Android、iOS、Windows、Symbian、Tizen、Bada等。
程序模块1910可以包括内核1920、中间件1930、API(应用编程接口)1960、和/或应用1970。程序模块1910的至少一部分可以预先加载到电子设备中,或者从服务器(例如,服务器106)下载。
内核1920(例如,图1的内核141)例如可以包括系统资源管理器1921或设备驱动器1923。系统资源管理器1921可以执行系统资源的控制、分配或收集。根据实施例,系统资源管理器1921可以包括进程管理单元、存储器管理单元、或文件系统管理单元。设备驱动器1923可以例如包括显示器驱动器、摄像机驱动器、蓝牙驱动器、共享存储器驱动器、USB驱动器、键区驱动器、Wi-Fi驱动器、音频驱动器或进程间通信(IPC)驱动器。
中间件1930例如可以提供应用1970要求的通用功能,或可以通过API 1960向应用1970提供各种功能,使得应用1970有效地使用电子设备内的有限系统资源。根据一个实施例,中间件1930(例如,中间件143)可以包括以下至少一项:运行库1935、应用管理器1941、窗口管理器1942、多媒体管理器1943、资源管理器1944、电源管理器1945、数据库管理器1946、包管理器1947、连接管理器1948、通知管理器1949、位置管理器1950、图形管理器1951或安全管理器1952。
运行库1935可以包括例如由编译器用来在执行应用1970期间通过编程语言来添加新功能的库模块。运行库1935可以执行输入/输出管理、存储器管理或算数运算的功能。
应用管理器1941可以管理应用1970中的至少一个的生命周期。窗口管理器1942可以管理在画面上使用的GUI资源。多媒体管理器1943可以识别用于重现各种媒体文件所需的格式,并可以使用与所述格式相对应的编解码器来执行对媒体文件的编码或解码。资源管理器1944可以管理各种资源,诸如,一个或多个应用1970的源代码、存储器或存储设备。
电源管理器1945可以与基本输入/输出系统(BIOS)一起操作以管理电池或电源,并且提供电子设备的操作所需的功率信息。数据库管理器1946可以创建、搜索或改变在一个或多个应用1970中使用的数据库。包管理器1947可管理以包文件的形式分发的应用的安装和/或更新。
连接管理器1948可以管理例如Wi-Fi或蓝牙的无线连接。通知管理器1949可以用不打扰用户的方式来显示或通知事件,例如接收到消息、约会、或接近通知。位置管理器1950可以管理电子设备的位置信息。图形管理器1951可以管理将向用户提供的图形效果以及与其相关的界面。安全管理器1952可以提供用于系统安全或用户认证所需的普通安全功能。根据实施例,在电子设备(例如,电子设备101)采用电话呼叫功能的情况下,中间件1930还可以包括电话管理器,用于管理电子设备的语音或视频电话呼叫功能。
中间件1930可以包括中间件模块,所述中间件模块包括上述元件的各种功能的组合。中间件1930可以提供根据操作系统的类型来特殊化的模块,以便提供差异化的功能。此外,中间件可以动态排除现有元件中的一部分,或还可以包括新的元件。
API 1960(例如,API 145)可以根据操作系统而具有不同配置,其中所述API 1960是API编程功能的集合。例如,在Android或iOS的情况下,可以将单个API设置用于每个平台。在Tizen的情况下,可以提供两个或多个API设置。
应用1970(例如,应用程序147)例如可以包括以下至少一项:家庭应用1971、拨号器应用1972、短消息服务(SMS)/多媒体消息服务(MMS)应用1973、即时消息(IM)应用1974、浏览器应用1975、摄像机应用1976、告警应用1977、联系人列表应用1978、语音拨号应用1979、电子邮件应用1980、日历应用1981、媒体播放器应用1980、相簿应用1983、时钟应用1984、健康应用(例如,用于测量锻炼量或血糖)、或环境信息提供应用(例如,提供气压信息、湿度信息或温度信息)。
根据实施例,应用1970可以包括支持在电子设备(例如,电子设备101)和外部电子设备(例如,电子设备102或104)之间交换信息的应用(为了便于描述,下文中称作“信息交换应用”)。例如,信息交换应用可以包括用于向外部电子设备中继特定信息的通知中继应用,或者用于管理外部电子设备的设备管理应用。
例如,通知中继应用可以包括将电子设备的其他应用(例如,SMS/MMS应用、电子邮件应用、健康应用、或环境信息应用)产生的通知信息发送到外部电子设备(例如,电子设备102或104)的功能。另外,通知中继应用从外部电子设备接收通知信息,以便将接收到的通知信息提供给用户。例如,设备管理应用程序可以管理(例如,安装、删除或更新)与所述电子设备101通信的外部电子设备的至少一部分功能(例如,接通或关断外部电子设备(或一部分元件),或调整显示器的亮度(或分辨率))、在外部电子设备上执行的应用、或者由外部电子设备提供的服务(例如,电话呼叫服务或信使服务)。
根据实施例,应用1970可以包括根据外部电子设备(例如,电子设备102或104)的属性(例如,电子设备的类型,诸如,移动医疗设备)而指定的应用(例如,健康应用)。根据实施例,应用1970可以包括从外部电子设备(例如,电子设备102或106、或服务器106)接收到的应用。根据实施例,应用1970可以包括预加载的应用或可从服务器下载的第三方应用。根据所示实施例的程序模块1910的元件名称可根据操作系统的类型而变化。
根据各种实施例,程序模块1910的至少一部分可以通过软件、固件、硬件或者其组合来实现。例如,程序模块1910的至少一部分可以由处理器(例如,AP 1810)来实现(例如,执行)。程序模块1910的至少一部分可以包括用于执行一个或多个功能的例如模块、程序、例程、指令集或进程。
图20是根据本发明各种实施例的可佩戴设备2000的示例的框图。
参考图20,可佩戴设备2000可以向佩戴者提供与电子设备相同或相似的功能,独立于安装在其上的显示设备。可佩戴设备2000可以包括MCU 2010、通信模块2020、传感器模块2030、输入模块2040、眼睛追踪模块2050、振动器2052、聚焦控制模块2054、电源管理模块2060、电池2062、显示器2070和摄像机2080。
MCU 2010可包括任意合适类型的处理电路,诸如一个或多个通用处理器(例如基于ARM的处理器)、数字信号处理器(DSP)、可编程逻辑器件(PLD)、专用集成电路(ASIC)、现场可编程门阵列(FPGA)。
通信模块2020可以例如包括USB模块2021、Wi-Fi模块2022、BT模块2023、NFC模块2024、或GPS模块2025。
传感器模块2030例如可以包括加速度传感器2031、陀螺传感器2032、地磁传感器2033、磁性传感器2034、接近传感器2035、手势传感器2036、握力传感器2037、生物传感器2038或靠近传感器2039。
触摸屏2040可以包括触摸板2041或按钮2042。
可佩戴设备2000可以包括显示器2070,所述显示器2070被固定到可佩戴设备的主体,或可从可佩戴设备拆卸,而不是被固定到所安装的电子设备(例如,显示设备)上或从中拆卸。显示器2070可以设置在主体中,以便通过图4到图9所示的镜片部(而非可安装的电子设备显示器)提供画面。根据本公开的各种实施例,显示器2070可以根据AR操作或看透式操作显示画面。例如摄像机2080可以被安装在主体的前侧上,以便拍摄佩戴者的正面图像。
可佩戴设备2000可以独立于所安装的电子设备,向佩戴者提供与电子设备相同或相似的AR操作或看透式操作。
本文所使用的术语“模块”或“功能单元”可以例如意味着包括硬件、软件和固件之一或者其中两种或更多种的组合在内的单元。“模块”可以与例如术语“单元”、“逻辑”、“逻辑块”、“组件”或“电路”交换使用。“模块”或“功能单元”可以是集成组件要素的最小单元或其部分。“模块″可以是用于执行一个或多个功能的最小单元或其一部分。可以从机械上或电学上实现“模块”或“功能单元”。例如,根据本公开的“模块”或“功能单元”可以包括以下至少一项:已知的或将来研发的专用集成电路(ASIC)芯片、现场可编程门阵列(FPGA)和用于执行操作的可编程逻辑器件。
根据各种实施例,可以通过以编程模块形式存储在计算机可读存储介质中的命令,来实现根据本公开的设备的至少一部分(例如,其模块或功能)或方法的至少一部分(例如,操作)。当一个或多个处理器(例如处理器120)执行命令时,一个或多个处理器可以执行对应于该命令的功能。计算机可读存储介质可以例如是存储器130。
图1-20仅作为示例提供。可以同时地执行、以不同顺序执行、和/或一同省略结合这些图所述的操作的至少一部分。应理解,不应将本文所述的示例以及用“诸如”、“例如”、“包括”、“在一些方面”、“在一些实现方案中”等表述的从句理解为将所要求保护的主体事物限制为具体示例。
贯穿本公开所用,术语画面显示区域可以表示电子设备的显示器中的区域,其中当电子设备操作在HMT模式下时在所述区域中显示一个或多个画面。尽管在上述示例中可以在给定画面显示区域中显示两个画面(例如,画面821a和821b),然而在一些实现方案中,可以将画面显示区域用于仅显示一个画面。在这种示例中,当电子设备用于呈现3D内容时,可以彼此独立地确定两个不同画面显示区域。
本发明的上述方面可以按照硬件、固件或者经由可以存储在记录介质中的软件或计算机代码的执行而实现,所述记录介质例如CD-ROM、数字通用盘(DVD)、磁带、RAM、软盘、硬盘、磁光盘或原始存储在远程记录介质或非临时机器可读介质上并且将要存储在本地记录介质上的通过网络下载的计算机代码,使得这里描述的方法可以使用通用计算机、或者专用处理器或者在可编程或专用硬件(例如,ASIC或FPGA)经由在记录介质上存储的这种软件来渲染。本领域技术人员应理解,计算机、处理器、微处理器控制器或可编程硬件包括存储组件,例如RAM、ROM、闪存等,其可以存储或接收软件或计算机代码,这些软件或计算机代码在被计算机、处理器或硬件访问和执行时实现这里所述的处理方法。此外,将认识到,当通用计算机访问用于执行在此所示处理的代码时,所述代码的执行将该通用计算机转化为用于执行在此所示处理的专用计算机。附图中提供的功能和步骤的任一个可以以硬件、软件或者两者的结合来实现,并且可以在计算机的可编程指令内整体地或者部分地执行。除非使用短语″用于...的装置″来明确限定元件,否则不应按照35U.S.C.112第六段的规定来理解权利要求中的元件。
说明书和附图中所公开的本公开的各种实施例仅是为了便于描述本公开的技术内容并帮助理解本公开而呈现的具体示例,而不是为了限制本公开的范围。因此,应理解,除了本文公开的实施例之外,从本公开各种实施例的技术构思得到的所有修改和改变或者修改和改变的形式落入本公开的范围内。

Claims (13)

1.一种电子设备,包括:
显示单元;
存储器;以及
至少一个处理器,与所述存储器可操作性耦接,所述至少一个处理器配置为:
通过所述显示单元的像素来输出预定图案;
响应于包括光接收元件的可佩戴设备的光接收元件中的至少一个光接收元件感测到所输出的预定图案,接收来自所述可佩戴设备的信号,所述信号指示所述可佩戴设备感测到所输出的预定图案;
基于在接收到所述信号时所述像素中发出所述图案的至少一个像素的至少一个位置来识别画面显示区域。
2.根据权利要求1所述的电子设备,其中:
所述至少一个处理器还配置为基于所述像素的相应位置,识别一个或多个参考点;以及
基于所述一个或多个参考点,识别画面显示区域。
3.根据权利要求1所述的电子设备,其中响应于设置在可佩戴设备的前侧上的所述至少一个光接收元件感测到由所述至少一个像素发出的图案,发送所述信号。
4.根据权利要求3所述的电子设备,其中所述信号包括与所述至少一个光接收元件相关联的信息。
5.根据权利要求1所述的电子设备,其中所述至少一个处理器被配置为识别与所述显示单元的至少一部分相对应的窗口,所述窗口包括所述至少一个像素。
6.根据权利要求5所述的电子设备,其中所述至少一个处理器还配置为基于所述信号中包括的信息,移动或改变所述窗口的尺寸。
7.一种方法,包括:
由电子设备通过显示单元的像素来输出预定图案;
响应于包括光接收元件的可佩戴设备的光接收元件中的至少一个光接收元件感测到所输出的预定图案,由所述电子设备接收信号,所述信号指示所述可佩戴设备感测到所输出的预定图案;
由所述电子设备基于在接收到所述信号时所述像素中发出所述图案的至少一个像素的至少一个位置来识别画面显示区域。
8.根据权利要求7所述的方法,还包括:
基于所述像素的相应位置,识别一个或多个参考点,
其中,基于所述一个或多个参考点,识别画面显示区域。
9.根据权利要求7所述的方法,其中响应于设置在可佩戴设备的前侧上的所述至少一个光接收元件感测到由所述至少一个像素发出的图案,发送所述信号。
10.根据权利要求9所述的方法,其中所述信号包括与所述至少一个光接收元件相关联的信息。
11.根据权利要求7所述的方法,其中还包括:识别与所述显示单元的至少一部分相对应的窗口,所述窗口包括所述至少一个像素。
12.根据权利要求11所述的方法,还包括以下至少一项:
基于所信号中包括的信息,移动所述窗口;以及
基于所述信号中包括的所述信息,重新调整所述窗口的大小。
13.一种电子设备,包括:
存储器;
显示单元;
通信单元;
多个光接收元件,布置在所述电子设备的一侧上以面向在外部与所述电子设备相连的外部设备的显示单元;以及
至少一个处理器,可操作耦接到所述存储器和所述显示单元,所述至少一个处理器被配置为:
将所述电子设备转变为与可佩戴设备相对应的画面显示模式;
由所述光接收元件检测从所述外部设备的显示单元发出的预定图案;
识别所述多个光接收元件中的感测到所述预定图案的至少一个光接收元件;以及
经由所述通信单元向所述外部设备发送信号,所述信号包括指示所述电子设备中使用所述多个光接收元件中的预定数目的光接收元件感测到所述预定图案的信息。
CN201610084886.1A 2015-02-12 2016-02-14 用于显示内容的方法和装置 Active CN105892572B (zh)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
KR10-2015-0021677 2015-02-12
KR1020150021677A KR102277272B1 (ko) 2015-02-12 2015-02-12 전자 장치, 웨어러블 장치 및 전자 장치의 화면 영역 제어 방법

Publications (2)

Publication Number Publication Date
CN105892572A CN105892572A (zh) 2016-08-24
CN105892572B true CN105892572B (zh) 2021-05-07

Family

ID=55453002

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201610084886.1A Active CN105892572B (zh) 2015-02-12 2016-02-14 用于显示内容的方法和装置

Country Status (4)

Country Link
US (1) US10088687B2 (zh)
EP (1) EP3057083B1 (zh)
KR (1) KR102277272B1 (zh)
CN (1) CN105892572B (zh)

Families Citing this family (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US9420075B2 (en) 2014-07-16 2016-08-16 DODOcase, Inc. Virtual reality viewer and input mechanism
CN105573495B (zh) * 2015-12-14 2020-06-23 联想(北京)有限公司 一种信息处理方法及穿戴式设备
US20170285863A1 (en) * 2016-03-31 2017-10-05 Google Inc. Conductive contacts for alignment of portable user device in vr viewer
US10650621B1 (en) 2016-09-13 2020-05-12 Iocurrents, Inc. Interfacing with a vehicular controller area network
CN106383520A (zh) * 2016-11-30 2017-02-08 福建农林大学 一种基于arm和mcu的喷药机器人实时控制系统及方法
CN111766939A (zh) * 2019-03-15 2020-10-13 苹果公司 在光学透传显示器上的注意力方向
EP4082391B1 (en) * 2021-04-29 2024-01-10 BSH Hausgeräte GmbH Cabinet with a holographic system

Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN104423837A (zh) * 2013-09-03 2015-03-18 三星电子株式会社 用于显示控制的方法及其电子设备
CN105229514A (zh) * 2013-01-28 2016-01-06 微软技术许可有限责任公司 用于将图像光耦合到近眼显示器的投影光学系统

Family Cites Families (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
IL183637A (en) 2007-06-04 2013-06-27 Zvi Lapidot Head display system
US8957835B2 (en) * 2008-09-30 2015-02-17 Apple Inc. Head-mounted display apparatus for retaining a portable electronic device with display
KR20120040946A (ko) 2010-10-20 2012-04-30 삼성전자주식회사 휴대단말기의 도트 led 이미지 생성 장치 및 방법
JP5742355B2 (ja) * 2011-03-24 2015-07-01 セイコーエプソン株式会社 頭部装着型表示装置
US9230473B2 (en) * 2013-06-24 2016-01-05 Microsoft Technology Licensing, Llc Dual duty cycle OLED to enable dynamic control for reduced motion blur control with constant brightness in augmented reality experiences
US9625723B2 (en) * 2013-06-25 2017-04-18 Microsoft Technology Licensing, Llc Eye-tracking system using a freeform prism
US9910504B2 (en) * 2014-08-21 2018-03-06 Samsung Electronics Co., Ltd. Sensor based UI in HMD incorporating light turning element

Patent Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN105229514A (zh) * 2013-01-28 2016-01-06 微软技术许可有限责任公司 用于将图像光耦合到近眼显示器的投影光学系统
CN104423837A (zh) * 2013-09-03 2015-03-18 三星电子株式会社 用于显示控制的方法及其电子设备

Also Published As

Publication number Publication date
KR20160099338A (ko) 2016-08-22
EP3057083B1 (en) 2019-10-02
KR102277272B1 (ko) 2021-07-15
EP3057083A1 (en) 2016-08-17
US20160238851A1 (en) 2016-08-18
US10088687B2 (en) 2018-10-02
CN105892572A (zh) 2016-08-24

Similar Documents

Publication Publication Date Title
KR102425818B1 (ko) 스크린 미러링 서비스 제공장치 및 방법
US20180077409A1 (en) Method, storage medium, and electronic device for displaying images
CN105900051B (zh) 电子装置以及在虚拟现实模式下的事件显示方法
KR102360453B1 (ko) 카메라 설정 방법 및 장치
US20160063767A1 (en) Method for providing visual reality service and apparatus for the same
CN105892572B (zh) 用于显示内容的方法和装置
KR102274743B1 (ko) 전자 장치 및 전자 장치의 화면 영역 처리 방법
US10929005B2 (en) Electronic device, wearable device, and method of controlling displayed object in electronic device
US10254883B2 (en) Electronic device for sensing pressure of input and method for operating the electronic device
US10694139B2 (en) Method for driving display including curved display area, display driving circuit supporting the same, and electronic device including the same
KR20160096422A (ko) 화면 표시 방법 및 전자 장치
KR20160059264A (ko) 화면 제어 방법 및 그 방법을 처리하는 전자 장치
US10943404B2 (en) Content output method and electronic device for supporting same
KR20160063812A (ko) 화면 구성 방법, 전자 장치 및 저장 매체
KR20160101600A (ko) 스크린 미러링 서비스 제공방법 및 장치
US11199709B2 (en) Electronic device, external electronic device and method for connecting electronic device and external electronic device
KR20160046426A (ko) 전자 장치
US9880617B2 (en) Electronic device and method of controlling display of electronic device
US20180176536A1 (en) Electronic device and method for controlling the same
KR20160051411A (ko) 외부의 물체를 제어하는 전자 장치 및 그 방법
US11006048B2 (en) Method and apparatus for acquiring omnidirectional video
KR20160125783A (ko) 컨텐츠를 표시하기 위한 방법 및 전자 장치
KR20170052984A (ko) 사용자의 위치를 결정하는 전자 장치 및 그 제어 방법
CN109845251B (zh) 用于显示图像的电子设备和方法
US20200090704A1 (en) Electronic device and screen image display method for electronic device

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant