CN104428729A - 头戴式计算机基于实时影像分析的启用和停用特征 - Google Patents

头戴式计算机基于实时影像分析的启用和停用特征 Download PDF

Info

Publication number
CN104428729A
CN104428729A CN201380034874.2A CN201380034874A CN104428729A CN 104428729 A CN104428729 A CN 104428729A CN 201380034874 A CN201380034874 A CN 201380034874A CN 104428729 A CN104428729 A CN 104428729A
Authority
CN
China
Prior art keywords
wearing
head type
type computer
image
computer
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN201380034874.2A
Other languages
English (en)
Inventor
史帝芬·A.·庞博
杰佛瑞·J.·贾寇伯森
克里斯多福·帕金森
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Kopin Corp
Original Assignee
Kopin Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Kopin Corp filed Critical Kopin Corp
Publication of CN104428729A publication Critical patent/CN104428729A/zh
Pending legal-status Critical Current

Links

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F1/00Details not covered by groups G06F3/00 - G06F13/00 and G06F21/00
    • G06F1/16Constructional details or arrangements
    • G06F1/1613Constructional details or arrangements for portable computers
    • G06F1/163Wearable computers, e.g. on a belt
    • GPHYSICS
    • G02OPTICS
    • G02BOPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B27/00Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
    • G02B27/01Head-up displays
    • G02B27/017Head mounted
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/011Arrangements for interaction with the human body, e.g. for user immersion in virtual reality
    • G06F3/012Head tracking input arrangements
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04WWIRELESS COMMUNICATION NETWORKS
    • H04W4/00Services specially adapted for wireless communication networks; Facilities therefor
    • H04W4/02Services making use of location information
    • H04W4/025Services making use of location information using location based information parameters
    • H04W4/027Services making use of location information using location based information parameters using movement velocity, acceleration information
    • GPHYSICS
    • G02OPTICS
    • G02BOPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B27/00Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
    • G02B27/01Head-up displays
    • G02B27/0101Head-up displays characterised by optical features
    • G02B2027/0138Head-up displays characterised by optical features comprising image capture systems, e.g. camera
    • GPHYSICS
    • G02OPTICS
    • G02BOPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B27/00Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
    • G02B27/01Head-up displays
    • G02B27/0101Head-up displays characterised by optical features
    • G02B2027/014Head-up displays characterised by optical features comprising information/image processing systems

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Engineering & Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Human Computer Interaction (AREA)
  • Computer Hardware Design (AREA)
  • Signal Processing (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Optics & Photonics (AREA)
  • User Interface Of Digital Computer (AREA)
  • Navigation (AREA)
  • Telephone Function (AREA)
  • Traffic Control Systems (AREA)

Abstract

用于头戴式计算机的操作条件是使用来自速度传感器或加速计的输入连同在影像上执行的场景分析的结果来确定,所述影像通过嵌入在所述头戴式计算机中的摄像机所捕获。如果头戴式装置高于预定速度行进,并且所述场景分析返回佩戴者正坐在汽车的驾驶员座位中的决策,那么所述头戴式计算机的一个或多个特征停用或受到限制。所述头戴式计算机可以停用显示器操作、移动电话操作,或改变音频接口选项,或采用其它动作。

Description

头戴式计算机基于实时影像分析的启用和停用特征
相关申请案
本申请案是2013年3月15日提交的第13/837,048号美国申请案的接续申请案,第13/837,048号美国申请案主张2012年6月28日提交的第61/665,400号美国申请案的权益,全部教示内容以全文引用的方式并入本文中。
背景技术
如今在商业和个人生活中,例如笔记本式个人计算机(PC’s)、智能电话以及平板计算装置等移动计算装置是用于产生、分析、传送以及使用数据的常用工具。由于随着高速无线通信技术变得随处可见而更加易于存取数字信息,因此消费者继续乐于接受移动数字生活方式。移动计算装置的流行用途包含显示大量高分辨率计算机图形信息和视频内容,这些计算机图形信息和视频内容通常无线串流到所述装置。虽然这些装置通常包含显示屏幕,但是在此类移动装置中不易复制高分辨率的大型显示器的优选视觉体验,因为为提升移动性而此类装置的物理大小受到限制。上述装置类型的另一缺点是用户接口是依赖于手部的,通常需要用户输入数据或使用键盘(物理的或虚拟的)或触摸屏显示器来作出选择。因此,消费者现在正寻求一种免提的高质量、便携式、彩色显示器解决方案,以加强或替换他们的依赖于手部的移动装置。
发明内容
本发明涉及人机交互,并且更确切地说涉及一种头戴式计算机,所述头戴式计算机确定可能佩戴头戴式计算机的用户同时处于潜在地不安全的情况的时间,例如,当驾驶汽车时。如果检测到潜在地不安全的情况,那么头戴式计算机的一个或多个可操作特征被停用。
最近开发的微型显示器可以在极小的外观尺寸中提供大型高分辨率的彩色图片和串流视频。此类显示器的一个应用可以包含整合到无线头戴式计算机中,无线头戴式计算机佩戴在用户的头部上,具有放置在用户的视野内的显示器,形式类似于眼镜、音频耳机或视频护目镜。“无线计算头戴式”装置包含一个或多个小的高分辨率的微型显示器和光学器件以放大影像。WVGA微型显示器可以提供高级视频图形阵列(SVGA)(800×600)分辨率或扩充图型阵列(XGA)(1024×768)或甚至更高分辨率。无线计算头戴式装置包含一个或多个无线计算和通信接口,从而确保数据和串流视频能力,并且比依赖于手部的装置提供更大的便利性和移动性。
关于此些装置的更多信息,请查看帕金森(Parkinson)等人在2009年1月5日递交的名称为“用于控制其它系统和装置的移动式无线显示软件平台(Mobile Wireless Display Software Platform for Controlling Other Systems andDevices)”的第12/348,646号共同待决美国申请案、雅各布森(Jacobsen)等人在2009年3月27日递交的名称为“具有适用于作为移动互联网装置使用的高分辨率显示器的手持式无线显示装置(Handheld Wireless Display DevicesHaving High Resolution Display Suitable For Use as a Mobile Internet Device)”的第PCT/US09/38601号PCT国际申请案以及雅各布森(Jacobsen)等人在2012年4月25日递交的名称为“改良的头戴式计算机(Improved Headset Computer)”的第61/638,419号美国申请案,所述申请案中的每一者以全文引用的方式并入本文中。
本文中头戴式计算机(HSC)也可被称作头戴式计算装置或头盔式装置(HMD)。头戴式计算机可配备有摄像机和其它传感器,例如,速度或加速度传感器。影像可由摄像机捕获。所捕获的影像可使用影像处理技术来处理以执行特征提取。特征提取可在头戴式计算机(例如,通过HSC处理器)处本地地执行或通过网络连接的处理器(例如,在云中的)远程地执行。所检测到的影像特征和当前速度和/或加速度信息的组合可用于确定当前环境对于操作头戴式计算机是否是安全的。头戴式计算机功能或特征所述操作可基于安全性判定所述结果来修改。如果检测到不安全状况,那么受到控制的操作、功能和/或特征可包含将HSC断电到“断开状态”,或在“仅音频”模式中操作HSC,其中显示器是停用并且关闭。如果未检测到不安全状况,那么HSC可无限制地操作。
在一个实例实施例中,用于头戴式计算机的操作条件是使用来自速度传感器或加速计的输入与场景分析(例如,具体特征提取的影像处理)的结果一起确定的,所述场景分析在通过与头戴式计算机整合的摄像机捕获的影像上执行。如果HSC高于预定速度或加速度阈值行进,并且如果场景分析返回佩戴者明显坐在机动车的驾驶员座位的决策,那么头戴式计算机的一个或多个操作特征或功能可以停用或受到限制。例如,显示器可以停用或移动电话操作可以受到限制,音频接口选项可以发生变化,或其它动作可以受到控制。
场景分析可以检测方向盘、制造商标识、手把、仪表、杠杆或指示汽车的驾驶员在驾驶汽车时通常看到的其它元件的存在。
另外,当确定头戴式计算机的用户是否驾驶时,场景分析可以考虑从汽车的乘客的角度的典型视野。
通常,根据本发明的原理,当佩戴HSC的用户尝试驾驶或正在驾驶移动的汽车时,HSC可以自动关闭其显示器或控制其它特征。因此,驾驶员/用户免除在驾驶的同时使用HSC的诱惑,并且因此这种诱惑引起潜在地危险情况。同时,乘客可以在汽车行进的同时继续使用全面功能的HSC。
使用(i)速度和/或加速度数据和(ii)场景分析结果这两者的实例实施例提供与单独使用任一者相比更加有用的额外的保真度。
根据本发明的原理控制头戴式计算机的操作的实例方法包含:确定头戴式计算机的加速度或速度是否大于预定阈值;使用头戴式计算机的摄像机从头戴式计算机的用户的视角捕获影像;比较所捕获的影像与表示由汽车的乘员看到的汽车的元件的一个或多个模板影像;并且基于所捕获的影像和指示头戴式计算机的用户正在驾驶汽车的模板影像的比较停用头戴式计算机的一个或多个特征。
举例来说,所述停用的一个或多个特征可以包含微型显示器或3G/4G蜂窝无线电的操作。
头戴式计算机的控制操作的实例方法可进一步包含基于所捕获的影像和指示头戴式计算机的用户未在驾驶汽车的模板影像的比较启用头戴式计算机的一个或多个特征。
另外,所述启用的一个或多个特征可以包含仅在音频模式下的头戴式计算机的操作或仅在蓝牙模式下的头戴式计算机无线通信的操作。
所述一个或多个模板影像中的一个或多个可以存储在头戴式计算机的本地存储器中或存储在HSC可存取的非本地存储器中。
实例方法可以进一步包含确定头戴式计算机的当前全球定位位置和基于当前位置的相关联的管辖区,并且基于所确定的管辖区更新一个或多个模板影像以反映右侧驾驶或左侧汽车。
进行比较的元件可以包含以下中的任一者:方向盘、制造商标识、速度计、转速计、燃油液位仪表、电池仪表、油压力表、温度仪表、变速杆、加热/空气调节通风口、相对于侧窗、汽车门的挡风玻璃取向,以及导航系统。
根据本发明的原理,具有微型显示器、音频组件、摄像机、运动传感器、数据存储媒体和可编程数据处理器的头戴式计算机可以用于:(i)确定从运动传感器接收的加速度或速度是否大于预定阈值,(ii)使用摄像机捕获影像数据,(iii)处理影像数据以提取一个或多个影像特征,(iv)组合所述影像特征以及速度和/或加速度信息以确定当前环境是否对于头戴式计算机的至少一个功能的操作是安全的,以及(v)取决于确定当前环境是否安全的结果来选择性地启用或停用头戴式计算机功能,所述可编程数据处理器包含执行从数据存储媒体中检索的指令的一个或多个数据处理机器。
对于当前环境是不安全的判定的所述实例实施例,微型显示器可以停用,仅音频功能可以启用,3G/4G蜂窝无线电功能可以停用,并且蓝牙无线通信功能可以启用。对于当前环境确定为安全的判定,可以全面启用HSC功能。
实例实施例可以进一步包含在判定当前环境安全时存取来自基于网络的存储媒体的一个或多个影像特征。
另一实例实施例可以进一步包含全球定位系统(GPS)接收器以确定当前位置并且基于当前位置确定与其相关联的管辖区,并且进一步基于管辖区组合右侧驾驶或左侧驾驶判定,以确定当前环境是否安全或更新影像模板。
所提取的一个或多个影像特征可以表示以下中的任一者:方向盘、制造商标识、速度计、转速计、燃油液位仪表、电池仪表、油压力表、温度仪表、变速杆、加热/空气调节通风口、相对于侧窗、汽车门的挡风玻璃取向,以及导航系统。
再一实例实施例包含用于控制头戴式计算机操作的非暂时性计算机程序产品,所述计算机程序产品包括其上存储有计算机可读指令的计算机可读媒体,所述计算机可读指令在通过处理器加载并且执行时使所述处理器:确定头戴式计算机的加速度或速度是否大于预定阈值;从头戴式计算机的用户的视角捕获影像;针对如同汽车的乘员所看到的表示汽车的元件的一个或多个模板影像比较所捕获的影像;以及基于所捕获的影像和指示头戴式计算机的用户正在驾驶汽车的模板影像的比较,来停用或启用头戴式计算机的一个或多个特征。
附图说明
以上内容将从本发明的实例实施例的以下更具体描述中显而易见,如附图中所示,其中相同的参考符号在不同视图中始终指代相同的部分。附图不必按比例绘制,而是强调图示本发明的实施例。
图1A是其中可以实施本文所描述的方法的头戴式计算机的一个实例实施例的透视图。
图1B说明头戴式计算机的一个实例实施例,所述头戴式计算机与主机计算装置(例如,智能电话,PC等)无线通信并且采用响应于语音命令、头部动作和手部移动的用户介面。
图2是头戴式计算机的组件的高层级电子系统框图。
图3A和图3B是包含分别从驾驶员和乘客的角度从汽车内部获得的影像特征的实例场景。
图4是包含从的摩托车驾驶员的角度的影像特征的实例场景。
图5是包含来自古董拖拉机的驾驶员的影像特征的实例场景。
图6是由头戴式装置中的处理器执行的用于基于速度和场景信息控制操作的过程的流程图。
具体实施方式
图1A和1B示出了无线免提计算头戴式装置100(在本文中也被称为头戴式计算装置、头戴式计算机(HSC)或头盔式装置(HMD))的一个实例实施例,所述装置并入有高分辨率(VGA或更好地)微型显示器元件1010,以及下文描述的其它特征。
图1A描绘了HSC 100,并且通常包含框架1000、绑带1002、外壳部分1004、扬声器1006、悬臂或臂1008、微显示器1010和摄像机1020。并且,如同不久将理解的,位于外壳1004内的是各种电子电路包含:微型计算机(单核或多核处理器)、一个或多个有线或无线接口和/或光学接口、相关联的存储器和/或存储装置,以及各种传感器。
头戴式框架1000和绑带1002通常经配置使得用户可以将头戴式计算机装置100佩戴在用户的头部上。外壳1004通常是低轮廓的单元,其容纳电子装置(例如微处理器、存储器或其它存储装置)、低功率无线通信装置连同其它相关联电路。扬声器1006向用户提供音频输出因此用户可以听到信息,例如多媒体演示的音频部分,或音频提示、报警,或用户命令的反馈信令识别。
微型显示器子组件1010用于呈现视觉信息(例如,影像和视频)给用户。微型显示器1010耦合到臂1008。臂1008通常提供物理支撑使得微型显示器子组件能够放置在用户的视野内,优选地在用户的眼睛的前方或在其外周视觉内优选地略微地在眼睛的下方或上方。臂1008还提供在微型显示器子组件1010与容纳在外壳单元1004内的控制电路之间的电气或光学连接。
位于外壳1004内的电子电路可以包含用于微型显示器元件1010以及输入和/或输出装置的显示器驱动器,所述输入和/或输出装置例如一个或多个麦克风、扬声器、地理位置传感器、3轴到9轴的自由度取向感测、大气传感器、健康状况传感器、GPS、数字指南针、压力传感器、环境传感器、能量传感器、加速度、位置、海拔高度、动作、速度或光学传感器、摄像机(可见光、红外(IR)、紫外(UV)等)、额外的无线电(LTE、3G蜂窝式、4G蜂窝式、NFC、FM等)、辅助照明系统、测距仪等,和/或一排嵌入在头戴式框架中和/或通过一个或多个外周端口附接的传感器。(Bluetooth是华盛顿柯克兰的蓝牙技术联盟有限公司的注册商标;并且Wi-Fi是德克萨斯奥斯汀的Wi-Fi联盟公司的注册商标。)
如图1B中所说明,HSC 100的实例实施例可以通过识别语音命令、感测头部移动110、111、112和手势113或其任何组合来接收用户输入。操作性地耦合或优选地整合到HSC 100中的麦克风可用于捕获语音命令,所述语音命令随后使用自动语音识别(ASR)技术进行数字化和处理(2310,图2)。语音可以是到HSC 100的主要输入接口,其能够检测用户的语音,并且使用语音识别、推导命令。HSC 100随后使用从语音识别中衍生的命令来执行各种功能。
陀螺仪、加速计以及其它微型机电系统传感器可以整合到HSC 100中,并且用于追踪用户的头部移动以提供用户输入命令。摄像机或其它动作追踪传感器可用于监测用户进行用户输入命令的手势。摄像机、运动传感器和/或位置传感器用于追踪至少在第一轴111(水平)中的用户的头部、手部和/或身体的动作和/或位置,但是优选地还是在第二(竖直)112、第三(深度)113、第四(纵摇)、第五(滚动)和第六(横摇)中。可以添加三轴磁强计(数字罗盘),从而对无线计算头戴式或外周装置提供完全的9轴自由度位置精确性。此类用户接口的语音命令自动语音识别和头部动作追踪特征胜过其它移动装置的依赖于手部的形式。
头戴式计算装置100可以与远程主机计算装置200无线通信。此类通信可以包含串流从主机200接收的媒体信号,使得HSC 100可用作远程辅助显示器。主机200可以是(例如)笔记本式PC、智能电话、平板计算机装置,或具有足够的计算复杂性以与HSC 100通信的其它计算装置。主机可以能够进一步连接到其它网络210,例如互联网。HSC 100和主机200可以通过一个或多个无线协议,例如,蓝牙、WiMAX或其它无线式无线电链路150无线地通信。
HSC 100可以用作单机且全功能的无线互联网连接的计算机系统。
具有微型显示器1010的HSC 100可以使用户能够在虚拟显示器400界定的大得多的区域内选择视野300。用户可以控制视野300的位置、程度(例如,X-Y或3D范围)和/或放大率。
HSC可以各种物理形式实施,例如如图所示的单眼头戴式计算机,而且还可以实施为可佩带式计算机、数字护目镜、电子眼镜,以及其它形式。
在一个实施例中,HSC可采用雅各布森(Jacobsen)等人在2011年2月1日递交的名称为“具有可通过动作、身体姿势和/或声音命令控制的可拆卸附件的无线免提头戴式计算装置(Wireless Hands-Free Computing Headset WithDetachable Accessories Controllable By Motion,Body Gesture And/Or VocalCommands)”的第13/018,999号共同待决美国专利申请案中描述的HSC形式,所述申请案以全文引用的方式并入本文中。
图2是头戴式计算机100的电子系统的高层级框图。电子系统包含处理器2100、存储器2102和大容量存储装置2104,如同任何可编程数字计算机系统中典型的。还包含在电子系统中的是微型显示器2110、一个或多个麦克风2112、2114、扬声器2106、2108、无线通信模块2105、摄像机2120以及加速计2150或其它速度传感器2200,例如,可以输送速度和/或加速度信息的全球定位系统(GPS)接收器。
为了确定由于不安全环境而是否限制或抑制HSC 100的特定特征,例如,通过HSC 100用户的汽车的操作,处理器2100执行储存在存储器2102中的指令2510并且存取储存在存储器2102和/或存储装置2104中的数据。处理器2100可以例如执行实施为软件代码的指令2510。处理器2100也可以利用操作系统2400和在操作系统2400方面运行的应用程序2410以提供各种功能。
在一个实例实施例中,处理器2100可以执行存储的指令2510以执行影像捕获2350并且执行场景分析2360。执行影像捕获2360的指令可以包含调用摄像机2120(图1A中的1020)以首先激活自动调焦、自动平衡和/或其它影像捕获特征,随后拍摄图片。执行场景分析2360可以确定影像数据是否含有一些特定的目标、特征、元素或活动。场景分析2360可以任何种类的方式执行,包含,例如,目标或特征识别、判别或检测,并且可以包含基于内容的影像检索。影像捕获2350和场景分析2360优选地实时出现,并且因此优选地实施为低层级系统调用,或甚至是操作系统2400中的内核层级功能。但是在一些情况下影像捕获2350和场景分析2360也可以实施为在操作系统2400的上层运行的应用程序2410。
存储器2102和/或存储装置不仅储存指令2510供处理器来执行,而且也可以储存一个或多个场景数据模板2300。场景数据模板2300是通常可以被机动车的驾驶员和/或乘员看到的影像的数字表示。
更确切地说,处理器2100经编程以自动地使用嵌入式摄像机2120和加速计2150来确定汽车驾驶员何时佩戴头戴式计算机100。当HSC 100确定存在此类状况时,随后停用HSC 100的一个或多个特征。然而,即使当加速计2150(或GPS 2200等)指示汽车高于预定速度移动时,如果场景分析2360作出头戴式计算机的用户未驾驶汽车而实际上是汽车中的乘客的结论,那么HSC可以保持全面的功能。速度或加速度传感器2150、2200和场景分析2360的组合为驾驶员提供有用的安全特征,同时为乘客提供令人愉快的体验。乘客能够在机动车行进的同时全面地使用并且享受HSC 100,但是自动关闭安全特征防止汽车的驾驶员完全地使用HSC 100,或至少仅启用在所述情况下已知为安全的特定特征。在此类减少操作模式下,HSC 100可仅启用音频功能,和/或其它功能,例如仅仅是蓝牙连接功能。因此,驾驶员仍然可能使用构建在汽车中的蓝牙音频系统以作出使用HSC 100中的3G/4G蜂窝式无线电的调用或串流其它音频内容。
图3A和图3B说明表示可以存储在HSC 100中的典型场景数据2300的影像数据并且表示由摄像机2120捕获的影像。
图3A是从驾驶员的角度获得的汽车内部的组件的场景3000。场景3000的主要可辨识组成元件或影像特征是方向盘3010。但是场景3000的其它元件或影像特征可以对场景分析2360有用并且可以包含制造商标识3012(在方向盘3010的中心)、速度计3014、转速计3016、燃油液位3018和其它标度、驾驶员控制,例如,变速杆3021、加热/空气调节通风口3023、挡风玻璃3025和侧窗3027的相对取向、汽车门3029、地板3031、位于仪表盘侧面的其它仪器(例如,导航系统3033)的存在。对于左侧驾驶汽车和右侧驾驶汽车来说规定门3029、挡风玻璃3025和侧窗3027的相对取向的影像特征可以包含在影像模板和场景数据2300中。
存储场景数据2300或模板影像可包含用于右侧驾驶汽车和左侧驾驶汽车两者的数据。另外,此类存储场景数据2300可包含管辖区数据。管辖区数据可包含管辖区的地理位置和它是否是左侧驾驶或右侧驾驶管辖区。举例来说,具有GPS的HSC 100可提供位置信息,所述位置信息随后可用于确定HSC 100所位于的管辖区。此类管辖区信息可用于针对左侧驾驶汽车或右侧驾驶汽车来对场景分析进行优先排序。举例来说,如果GPS确定HSC 100位于加拿大,那么可对针对右侧驾驶汽车的场景分析进行优先排序。
存储场景元件2300也可说明摄像机2120的可能的变焦设置。举例来说,在一些变焦设置上仅仪表盘的一部分可以是可见的(例如,仅方向盘3010的一部分和若干仪表3018),而在其它变焦设置上,挡风玻璃3025、侧窗3027、门3029及甚至是底层3031的部分可以是可见的。此类各种可能性可通过以尤其有效方式储存场景数据来说明,例如,通过针对不同变焦水平储存给定场景的多个版本或通过使用分层场景元件模型。
存储场景数据2300还可包含汽车乘员场景的表示,例如图3B的场景3100,所述场景是前座上的乘客观看到的典型场景。虽然一些元件仍然是相同的(例如,导航系统3033和变速杆3021的存在),但是与图3A的驾驶员场景3000相比它们位于视野或场景3100的相对侧。然而,最显著的是场景3100缺失方向盘3010和仪表3018,并且包含其它指示物品,例如,杂物箱3110的存在。
任何适宜的已知场景分析(影像识别)算法可通过场景分析2360使用以比较通过影像捕获2350获得的影像与场景数据模板2300。此类算法优选地可以是相对高速度的,这是因为用户对装置或装置特征的存取是受到控制的。算法优选地是实时执行的,并且因此可以实施为较高优先级操作系统调用、中断或甚至嵌入在操作系统内核中,这取决于处理器类型和选择用于实施的操作系统。
在一个替代实例实施例中,处理器2100可以执行存储的指令2510以执行影像捕获2350,并且上传场景数据到主机200以进行基于云的场景分析并且接收场景分析决策。通过利用基于云的资源,基于云的场景分析可执行与在HSC 100上机载(即,本地)执行的场景分析2360相比在计算上更加密集的场景分析。基于云的场景分析可以存取大量的汽车场景库,由于资源局限性,将所述汽车场景库储存在本地存储器2102中可能是不切实际的。基于云的场景分析与适当的场景分析(影像识别)算法协作,所述算法是确保足够快速的处理和决策制定的设计决策,所述设计决策也可以用于限制用户对HSC 100的可操作特征的存取。此类基于云的分析可以用于释放和卸载来自HSC 100的存储器密集且计算上密集的过程中的一些。
图4是典型的摩托车的驾驶员的场景4000。此处,例如手把4010、气槽和仪表4014、镜子4028以及移位器4021等元件可以包含在场景数据模板2300中。
图5是从古董拖拉机的驾驶员的角度的场景5000。在场景5000中,驾驶员可以坐的非常靠近非常大的方向盘5010并且因此,仅可以看到方向盘5010的若干部分5012。其它元件可以包含拖拉机的仪表5018、杠杆5021和罩盖部分5033,这些部分可以作为用于场景5000的识别的影像特征来提取。
图6是可以通过处理器2100执行以使用速度传感器2150和场景分析2360实施对HSC 100的控制的过程6000的流程图。在第一阶段600中,速度和/或加速度是通过与阈值进行比较确定的。举例来说,加速计2150或GPS 2200可以指示一定量上的快速加速度或恒定速度,例如,4英里/小时(MPH)。
如果速度和/或加速度较低(即,低于阈值),那么过程前向移动到阶段610,其中可以启用头戴式计算机100的所有特征、模式和功能。
然而,如果加速度或速度高于预定的量(即,大于阈值),那么进入阶段602。在阶段602,使用摄像机2120捕获一个或多个影像。在阶段602捕获的影像随后在阶段604通过场景分析2360处理。场景分析阶段604可以利用各种场景数据模板606,所述场景数据模板是通过存储器2102或存储装置2104存取的。场景数据模板606(或2300)可以表示通常由机动车的驾驶员和乘客观看到的场景,例如上文相对于场景3000、3100、4000、5000描述的那些。
阶段608可以作出HSC 100的用户是否在汽车中行进的判定。如果并非是这种情况,那么可以进入阶段610,其中所有可用的操作模式是活动的。
如果阶段608的场景分析作出驾驶员在汽车内部的结论,那么进入阶段612。在阶段612,对用户是否是汽车中的乘客做出判定。如果用户被确定为是乘员,那么过程可以继续到阶段610,其中所有操作模式是启用的。
然而,如果佩戴者确定为是驾驶员,那么进入阶段614。在阶段614,HSC100的可操作特征或功能的一个或多个模式是启用或停用的。作为一个实例,阶段620-1可停用显示器。阶段620-2可停用无线通信接口,例如3G或4G蜂窝式。阶段620-3可仅启用音频功能,例如,麦克风和扬声器。在阶段620-4,显示器、扬声器和麦克风是启用的,其中仅蓝牙接口和蜂窝式语音功能是启用的。蓝牙(BT)模式620-4可允许驾驶员使用外部、汽车内且安全的蓝牙系统来安置语音电话呼叫。
可能存在其它变化形式。举例来说,对于HSC 100的用户可存在覆盖驾驶员检测特征6000的方式,例如,通过经由语音识别功能提供某些专门的命令。
虽然本文所描述的实例实施例限于地面汽车,但是所属领域的技术人员应该认识到所公开发明的实施例可在其它环境和其它情况中应用,以确保HSC100的安全使用。
应理解,上述实例实施例可以多种不同方式实施。在一些情况下,本文所描述的各种“数据处理器”各自可由物理或虚拟通用计算机来实施,所述计算机具有中央处理器、存储器、磁盘或其它大容量存储装置、通信接口、输入/输出(I/O)装置,以及其它外围装置。通用计算机转化成处理器并且执行上述过程,例如,通过将软件指令加载到处理器中,并且随后引起指令的执行以执行所描述的功能。
如本领域中已知,此类计算机可以含有系统总线,其中总线是一组用于计算机或处理系统的组件当中的数据传送的硬件线路。总线是本质上共享的导线,其连接计算机系统的不同元件(例如,处理器、磁盘储存装置、存储器、输入/输出端口、网络端口等),所述导线允许所述元件之间的信息的传送。一个或多个中央处理器单元附接到系统总线并且提供用于计算机指令的执行。还附接到系统总线的通常是I/O装置接口,其用于将各种输入和输出装置(例如,键盘、鼠标、显示器、打印机、扬声器等)连接到计算机。网络接口允许计算机连接到附接到网络的各种其它装置。存储器提供用于计算机软件指令和用于实施实施例的数据的易失性存储装置。磁盘或其它大容量存储装置提供用于计算机软件指令和用于实施(例如)本文所描述的各种流程的数据的非易失性存储装置。
因此实施例可以通常在硬件、固件、软件或其任何组合中实施。
在某些实施例中,本文所描述的流程、装置和过程是计算机程序产品,其包含计算机可读媒体(例如,可移除的存储媒体,例如,一个或多个DVD-ROM、CD-ROM、软盘、磁带等),所述计算机可读媒体提供用于系统的软件指令的至少一部分。此类计算机程序产品可以通过任何合适的软件安装流程来安装,如同所属领域中众所周知的。在另一实施例中,软件指令的至少一部分也可以通过缆线、通信和/或无线连接下载。
实施例也可以实施为存储在非暂时性机器可读媒体上的指令,所述指令可以通过一个或多个流程来读取和执行。非暂时性机器可读媒体可以包含用于储存或传输呈可由机器(例如,计算装置)读取的形式的信息的任何机构。举例来说,非暂时性机器可读媒体可以包含只读存储器(ROM);随机存取存储器(RAM);包含磁盘存储媒体的存储装置;光学存储媒体;快闪存储装置;以及其它装置。
此外,固件、软件、例程或指令可以在本文中描述为执行某些动作和/或功能。然而,应了解,本文中含有的此类描述仅出于方便起见并且此类动作实际上由执行固件、软件、例程、指令等的计算装置、处理器、控制器或其他装置引起。
还应理解,框图和网络图可以包含以不同方式布置或以不同方式呈现的更多或更少的元件。但是进一步应理解,某些实施方案可以指示图示了以特定方式实施的实施例的执行的框图和网络图以及框图和网络图的数目。
因此,其它实施例还可以多种计算机架构、物理虚拟的云计算机和/或其一些组合来实施,并且因此本文所描述的计算机系统仅意图用于说明目的并且不作为实施例的限制。
因此,尽管已经参考本发明的实例实施例具体地示出并且描述本发明,但所属领域的技术人员应理解,在不脱离所附权利要求书所涵盖的本发明的范围的情况下,可以在其中做出形式和细节上的各种改变。

Claims (19)

1.一种控制头戴式计算机的操作的方法,其包括:
确定头戴式计算机的加速度或速度是否大于预定阈值;
通过所述头戴式计算机的摄像机,从所述头戴式计算机的用户的视角捕获影像;
比较所捕获的所述影像与表示由汽车的乘员看到所述汽车的元件的一个或多个模板影像;以及
基于所捕获的所述影像和指示所述头戴式计算机的所述用户正在驾驶所述汽车的所述模板影像的比较,来停用所述头戴式计算机的一个或多个特征。
2.根据权利要求1所述的头戴式计算机的控制操作的方法,其中所停用的所述一个或多个特征包含微型显示器的操作。
3.根据权利要求1所述的控制头戴式计算机的操作的方法,其中所停用的所述一个或多个特征包含3G/4G蜂窝无线电的操作。
4.根据权利要求1所述的控制头戴式计算机的操作的方法,其进一步包含基于所捕获的所述影像和指示所述头戴式计算机的所述用户未在驾驶汽车的所述模板影像的比较,来启用所述头戴式计算机的一个或多个特征。
5.根据权利要求4所述的控制头戴式计算机的操作的方法,其中所启用的所述一个或多个特征包含仅以音频模式进行所述头戴式计算机的操作。
6.根据权利要求4所述的控制头戴式计算机的操作的方法,其中所启用的所述一个或多个特征包含仅以蓝牙模式进行所述头戴式计算机的无线通信的操作。
7.根据权利要求1所述的控制头戴式计算机的操作的方法,其中所述一个或多个模板影像中的一个或多个未存储在所述头戴式计算机的本地存储器中。
8.根据权利要求1所述的控制头戴式计算机的操作的方法,其进一步包含:
确定所述头戴式计算机的当前全球定位位置和基于所述当前全球定位位置上相关联的管辖区;以及
基于所确定的所述管辖区来更新所述一个或多个模板影像,以反映右侧驾驶或左侧汽车。
9.根据权利要求1所述的控制头戴式计算机的操作的方法,其中进行所述比较的元件包含以下中的任一者:方向盘、制造商标识、速度计、转速计、燃油液位仪表、电池仪表、油压力表、温度仪表、变速杆、加热/空气调节通风口、相对于侧窗、汽车门的挡风玻璃取向,以及导航系统。
10.一种头戴式计算机,其包括:
微型显示器;
音频组件;
摄像机;
运动传感器;
数据存储媒体;
可编程数据处理器,其包括执行从所述数据存储媒体中检索到的指令的一个或多个数据处理机器,所述指令用于:
确定从所述运动传感器中接收到的加速度或速度是否大于预定阈值;
使用所述摄像机捕获影像数据;
处理所述影像数据以提取一个或多个影像特征;
组合所述影像特征和速度和/或加速度信息,以确定当前环境对于操作所述头戴式计算机的至少一个功能是否是安全的;以及
取决于确定所述当前环境是否安全的结果,来选择性地启用或停用所述头戴式计算机的功能。
11.根据权利要求10所述的设备,其中所述当前环境确定是不安全的,并且所述微型显示器是停用的。
12.根据权利要求10所述的设备,其中所述当前环境确定是不安全的,并且仅音频功能是启用的。
13.根据权利要求10所述的设备,其中所述当前环境确定是安全的,并且所述头戴式计算机的功能是全面启用的。
14.根据权利要求10所述的设备,其中所述当前环境确定是不安全的,并且3G/4G蜂窝无线电功能是停用的。
15.根据权利要求10所述的设备,其中所述当前环境确定是不安全的,并且蓝牙无线通信功能是启用的。
16.根据权利要求10所述的设备,其进一步包含在判定所述当前环境是安全时,存取来自基于网络的存储媒体的一个或多个影像特征。
17.根据权利要求10所述的设备,进一步包含全球定位系统(GPS)接收器以确定当前位置和与所述当前位置相关联的管辖区,并且基于所述管辖区进一步组合右侧驾驶或左侧驾驶判定,以确定所述当前环境是否安全。
18.根据权利要求10所述的设备,其中所提取的所述一个或多个影像特征表示以下中的任一者:方向盘、制造商标识、速度计、转速计、燃油液位仪表、电池仪表、油压力表、温度仪表、变速杆、加热/空气调节通风口、相对于侧窗、汽车门的挡风玻璃取向,以及导航系统。
19.一种用于控制头戴式计算机的操作的非暂时性计算机程序产品,所述计算机程序产品包括其上存储有计算机可读指令的计算机可读媒体,当通过处理器加载和执行时,所述计算机可读指令使所述处理器能够:
确定头戴式计算机的加速度或速度是否大于预定阈值;
从所述头戴式计算机的用户的视角捕获影像;
比较所捕获的所述影像与表示由汽车的乘员看到所述汽车的元件的一个或多个模板影像;以及
基于所捕获的所述影像和指示所述头戴式计算机的所述用户正在驾驶所述汽车的所述模板影像的比较,来停用或启用所述头戴式计算机的一个或多个特征。
CN201380034874.2A 2012-06-28 2013-06-11 头戴式计算机基于实时影像分析的启用和停用特征 Pending CN104428729A (zh)

Applications Claiming Priority (5)

Application Number Priority Date Filing Date Title
US201261665400P 2012-06-28 2012-06-28
US61/665,400 2012-06-28
US13/837,048 2013-03-15
US13/837,048 US20140002357A1 (en) 2012-06-28 2013-03-15 Enabling and Disabling Features of a Headset Computer Based on Real-Time Image Analysis
PCT/US2013/045152 WO2014004075A2 (en) 2012-06-28 2013-06-11 Enabling and disabling features of a headset computer based on real-time image analysis

Publications (1)

Publication Number Publication Date
CN104428729A true CN104428729A (zh) 2015-03-18

Family

ID=49777592

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201380034874.2A Pending CN104428729A (zh) 2012-06-28 2013-06-11 头戴式计算机基于实时影像分析的启用和停用特征

Country Status (5)

Country Link
US (1) US20140002357A1 (zh)
EP (1) EP2867741A2 (zh)
JP (2) JP2015523026A (zh)
CN (1) CN104428729A (zh)
WO (1) WO2014004075A2 (zh)

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN107291365A (zh) * 2016-03-30 2017-10-24 本田技研工业株式会社 用于在移动交通工具中控制交通工具显示器的系统和方法
CN108141348A (zh) * 2015-08-21 2018-06-08 阿瓦亚公司 安全策略管理器

Families Citing this family (49)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20130339859A1 (en) 2012-06-15 2013-12-19 Muzik LLC Interactive networked headphones
US9077647B2 (en) 2012-10-05 2015-07-07 Elwha Llc Correlating user reactions with augmentations displayed through augmented views
US9141188B2 (en) 2012-10-05 2015-09-22 Elwha Llc Presenting an augmented view in response to acquisition of data inferring user activity
US9111383B2 (en) 2012-10-05 2015-08-18 Elwha Llc Systems and methods for obtaining and using augmentation data and for sharing usage data
US10269179B2 (en) 2012-10-05 2019-04-23 Elwha Llc Displaying second augmentations that are based on registered first augmentations
US10180715B2 (en) 2012-10-05 2019-01-15 Elwha Llc Correlating user reaction with at least an aspect associated with an augmentation of an augmented view
US8928695B2 (en) * 2012-10-05 2015-01-06 Elwha Llc Formatting of one or more persistent augmentations in an augmented view in response to multiple input factors
US10713846B2 (en) 2012-10-05 2020-07-14 Elwha Llc Systems and methods for sharing augmentation data
US10109075B2 (en) 2013-03-15 2018-10-23 Elwha Llc Temporal element restoration in augmented reality systems
US10025486B2 (en) 2013-03-15 2018-07-17 Elwha Llc Cross-reality select, drag, and drop for augmented reality systems
US9639964B2 (en) 2013-03-15 2017-05-02 Elwha Llc Dynamically preserving scene elements in augmented reality systems
US20150031349A1 (en) * 2013-07-26 2015-01-29 Kyllburg Technologies, LLC Driver distraction disabling via gesture recognition
JP6039525B2 (ja) * 2013-09-27 2016-12-07 株式会社トヨタマップマスター ヘッドマウントディスプレイ及びその制御方法、並びにヘッドマウントディスプレイを制御するためのコンピュータプログラム及びコンピュータプログラムを記録した記録媒体
US10212269B2 (en) 2013-11-06 2019-02-19 Google Technology Holdings LLC Multifactor drive mode determination
US10585486B2 (en) 2014-01-03 2020-03-10 Harman International Industries, Incorporated Gesture interactive wearable spatial audio system
GB2524473A (en) * 2014-02-28 2015-09-30 Microsoft Technology Licensing Llc Controlling a computing-based device using gestures
US9037125B1 (en) * 2014-04-07 2015-05-19 Google Inc. Detecting driving with a wearable computing device
US10158746B2 (en) * 2014-06-26 2018-12-18 Visteon Global Technologies, Inc. Wireless communication systems and methods with vehicle display and headgear device pairing
WO2016018044A1 (en) * 2014-07-31 2016-02-04 Samsung Electronics Co., Ltd. Wearable device and method of controlling the same
JP2016057814A (ja) * 2014-09-09 2016-04-21 セイコーエプソン株式会社 頭部装着型表示装置、頭部装着型表示装置の制御方法、情報システム、および、コンピュータープログラム
US10360617B2 (en) 2015-04-24 2019-07-23 Walmart Apollo, Llc Automated shopping apparatus and method in response to consumption
US9843853B2 (en) 2015-08-29 2017-12-12 Bragi GmbH Power control for battery powered personal area network device system and method
US10104458B2 (en) 2015-10-20 2018-10-16 Bragi GmbH Enhanced biometric control systems for detection of emergency events system and method
US9944295B2 (en) 2015-11-27 2018-04-17 Bragi GmbH Vehicle with wearable for identifying role of one or more users and adjustment of user settings
KR20170081401A (ko) * 2016-01-04 2017-07-12 삼성전자주식회사 전자 장치 및 그의 동작 방법
WO2017127396A1 (en) 2016-01-19 2017-07-27 Wal-Mart Stores, Inc. Consumable item ordering system
US10085082B2 (en) 2016-03-11 2018-09-25 Bragi GmbH Earpiece with GPS receiver
US10045116B2 (en) 2016-03-14 2018-08-07 Bragi GmbH Explosive sound pressure level active noise cancellation utilizing completely wireless earpieces system and method
US10052065B2 (en) 2016-03-23 2018-08-21 Bragi GmbH Earpiece life monitor with capability of automatic notification system and method
US10201309B2 (en) 2016-07-06 2019-02-12 Bragi GmbH Detection of physiological data using radar/lidar of wireless earpieces
US10045110B2 (en) 2016-07-06 2018-08-07 Bragi GmbH Selective sound field environment processing system and method
US10062373B2 (en) 2016-11-03 2018-08-28 Bragi GmbH Selective audio isolation from body generated sound system and method
US10045112B2 (en) 2016-11-04 2018-08-07 Bragi GmbH Earpiece with added ambient environment
US10063957B2 (en) 2016-11-04 2018-08-28 Bragi GmbH Earpiece with source selection within ambient environment
US10045117B2 (en) 2016-11-04 2018-08-07 Bragi GmbH Earpiece with modified ambient environment over-ride function
US10058282B2 (en) 2016-11-04 2018-08-28 Bragi GmbH Manual operation assistance with earpiece with 3D sound cues
US10051460B2 (en) 2016-12-16 2018-08-14 Plantronics, Inc. Subscription-enabled audio device and subscription system
US10620910B2 (en) 2016-12-23 2020-04-14 Realwear, Inc. Hands-free navigation of touch-based operating systems
US10365493B2 (en) 2016-12-23 2019-07-30 Realwear, Incorporated Modular components for a head-mounted display
US10437070B2 (en) 2016-12-23 2019-10-08 Realwear, Inc. Interchangeable optics for a head-mounted display
US11099716B2 (en) 2016-12-23 2021-08-24 Realwear, Inc. Context based content navigation for wearable display
US10936872B2 (en) 2016-12-23 2021-03-02 Realwear, Inc. Hands-free contextually aware object interaction for wearable display
US10393312B2 (en) 2016-12-23 2019-08-27 Realwear, Inc. Articulating components for a head-mounted display
US11507216B2 (en) 2016-12-23 2022-11-22 Realwear, Inc. Customizing user interfaces of binary applications
US10344960B2 (en) 2017-09-19 2019-07-09 Bragi GmbH Wireless earpiece controlled medical headlight
US11272367B2 (en) 2017-09-20 2022-03-08 Bragi GmbH Wireless earpieces for hub communications
US10810825B2 (en) * 2018-10-11 2020-10-20 Igt Systems and methods for providing safety and security features for users of immersive video devices
KR20200048145A (ko) * 2018-10-29 2020-05-08 현대모비스 주식회사 헤드램프 제어 장치 및 방법
US10764536B2 (en) * 2018-12-27 2020-09-01 Denso International America, Inc. System and method for a dynamic human machine interface for video conferencing in a vehicle

Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2005002901A1 (de) * 2003-07-07 2005-01-13 Robert Bosch Gmbh Geschwindigkeitsabhängige dienstebereitstellung in einem kraftfahrzeug
CN101359251A (zh) * 2007-07-30 2009-02-04 由田新技股份有限公司 应用于电脑投影画面的光学遥控系统及方法
CN101896237A (zh) * 2007-12-07 2010-11-24 索尼爱立信移动通讯有限公司 动态游戏环境
CN102027434A (zh) * 2008-03-17 2011-04-20 索尼计算机娱乐美国有限责任公司 具有集成摄像头的控制器以及和交互式应用相接口的方法
US20110187640A1 (en) * 2009-05-08 2011-08-04 Kopin Corporation Wireless Hands-Free Computing Headset With Detachable Accessories Controllable by Motion, Body Gesture and/or Vocal Commands
US20110219080A1 (en) * 2010-03-05 2011-09-08 Qualcomm Incorporated Automated messaging response in wireless communication systems

Family Cites Families (17)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2003121160A (ja) * 2001-10-12 2003-04-23 Fujitsu Ten Ltd ナビゲ−ション装置
WO2003046732A1 (fr) * 2001-11-27 2003-06-05 Matsushita Electric Industrial Co., Ltd. Unite de notification d'informations de port
US7369845B2 (en) * 2005-07-28 2008-05-06 International Business Machines Corporation Managing features available on a portable communication device based on a travel speed detected by the portable communication device
JP2009043006A (ja) * 2007-08-08 2009-02-26 Ntt Docomo Inc 周辺情報提供システム、サーバ、周辺情報提供方法
US7898428B2 (en) * 2008-03-06 2011-03-01 Research In Motion Limited Safety for mobile device users while driving
JP2010081319A (ja) * 2008-09-26 2010-04-08 Kyocera Corp 携帯電子機器
JP5300443B2 (ja) * 2008-12-01 2013-09-25 富士通テン株式会社 画像処理装置
WO2010129679A1 (en) * 2009-05-08 2010-11-11 Kopin Corporation Remote control of host application using motion and voice commands
JP2010278595A (ja) * 2009-05-27 2010-12-09 Nippon Syst Wear Kk 携帯電話の動作モード設定装置、方法、プログラム、並びに該プログラムを格納したコンピュータ可読媒体
US20110207441A1 (en) * 2010-02-22 2011-08-25 Erik Wood One touch text response (OTTER)
JP5287838B2 (ja) * 2010-03-16 2013-09-11 株式会社デンソー 表示位置設定装置
US9019068B2 (en) * 2010-04-01 2015-04-28 Apple Inc. Method, apparatus and system for automated change of an operating mode relating to a wireless device
US9888080B2 (en) * 2010-07-16 2018-02-06 Trimble Inc. Detection of mobile phone usage
US20120214463A1 (en) * 2010-11-05 2012-08-23 Smith Michael J Detecting use of a mobile device by a driver of a vehicle, such as an automobile
US8184070B1 (en) * 2011-07-06 2012-05-22 Google Inc. Method and system for selecting a user interface for a wearable computing device
US8811938B2 (en) * 2011-12-16 2014-08-19 Microsoft Corporation Providing a user interface experience based on inferred vehicle state
US8538402B2 (en) * 2012-02-12 2013-09-17 Joel Vidal Phone that prevents texting while driving

Patent Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2005002901A1 (de) * 2003-07-07 2005-01-13 Robert Bosch Gmbh Geschwindigkeitsabhängige dienstebereitstellung in einem kraftfahrzeug
CN101359251A (zh) * 2007-07-30 2009-02-04 由田新技股份有限公司 应用于电脑投影画面的光学遥控系统及方法
CN101896237A (zh) * 2007-12-07 2010-11-24 索尼爱立信移动通讯有限公司 动态游戏环境
CN102027434A (zh) * 2008-03-17 2011-04-20 索尼计算机娱乐美国有限责任公司 具有集成摄像头的控制器以及和交互式应用相接口的方法
US20110187640A1 (en) * 2009-05-08 2011-08-04 Kopin Corporation Wireless Hands-Free Computing Headset With Detachable Accessories Controllable by Motion, Body Gesture and/or Vocal Commands
US20110219080A1 (en) * 2010-03-05 2011-09-08 Qualcomm Incorporated Automated messaging response in wireless communication systems

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN108141348A (zh) * 2015-08-21 2018-06-08 阿瓦亚公司 安全策略管理器
CN107291365A (zh) * 2016-03-30 2017-10-24 本田技研工业株式会社 用于在移动交通工具中控制交通工具显示器的系统和方法
CN107291365B (zh) * 2016-03-30 2021-05-07 本田技研工业株式会社 用于在移动交通工具中控制交通工具显示器的系统和方法

Also Published As

Publication number Publication date
US20140002357A1 (en) 2014-01-02
EP2867741A2 (en) 2015-05-06
JP2015523026A (ja) 2015-08-06
WO2014004075A2 (en) 2014-01-03
WO2014004075A3 (en) 2014-04-17
JP2018191322A (ja) 2018-11-29

Similar Documents

Publication Publication Date Title
CN104428729A (zh) 头戴式计算机基于实时影像分析的启用和停用特征
CN109513210B (zh) 虚拟世界中的虚拟车辆漂移方法、装置及存储介质
EP3267659B1 (en) Mobile terminal communicating with a vehicle system with a display
US9800717B2 (en) Mobile terminal and method for controlling the same
US9008856B2 (en) Configurable vehicle console
US10489100B2 (en) Electronic device and method for sharing images
JP6383724B2 (ja) ハンズフリー緊急対応を伴うヘッドセットコンピュータ
EP3247044B1 (en) Mobile terminal operating system conversion device and method, vehicle, and operating system transmission device and method for vehicle
KR101646356B1 (ko) 웨어러블 기기를 이용한 차량 제어장치 및 방법
CN105892472A (zh) 移动终端及其控制方法
US20180093611A1 (en) Method and apparatus for controlling vehicular user interface under driving circumstance
CN106412230A (zh) 移动终端及其控制方法
KR101716145B1 (ko) 이동단말기, 차량과 이동 단말기의 연동 시스템
KR20150085009A (ko) 차량내 휴대기기 관리 방법 및 장치
CN106527694A (zh) 一种开启终端安全驾驶模式方法及终端
KR20170100332A (ko) 화상 통화 방법 및 장치
KR101736820B1 (ko) 이동 단말기 및 그 제어 방법
CN112269939B (zh) 自动驾驶的场景搜索方法、装置、终端、服务器及介质
CN112947474A (zh) 一种自动驾驶车辆横向控制参数调节方法及装置
KR20160134334A (ko) 이동 단말기 및 이의 제어방법
US20160379416A1 (en) Apparatus and method for controlling object movement
KR20160019758A (ko) 이동 단말기 및 이의 제어방법
CN112991790B (zh) 提示用户的方法、装置、电子设备及介质
KR102220367B1 (ko) 이동 단말기 및 그 제어 방법
KR102234710B1 (ko) 이동 단말기 및 그 제어방법

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
RJ01 Rejection of invention patent application after publication
RJ01 Rejection of invention patent application after publication

Application publication date: 20150318