CN117015734A - 眼镜式信息设备、方法和程序 - Google Patents

眼镜式信息设备、方法和程序 Download PDF

Info

Publication number
CN117015734A
CN117015734A CN202280018497.2A CN202280018497A CN117015734A CN 117015734 A CN117015734 A CN 117015734A CN 202280018497 A CN202280018497 A CN 202280018497A CN 117015734 A CN117015734 A CN 117015734A
Authority
CN
China
Prior art keywords
function
type information
glasses
information device
notification
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN202280018497.2A
Other languages
English (en)
Inventor
今井康博
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Canon Inc
Original Assignee
Canon Inc
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Canon Inc filed Critical Canon Inc
Publication of CN117015734A publication Critical patent/CN117015734A/zh
Pending legal-status Critical Current

Links

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04MTELEPHONIC COMMUNICATION
    • H04M1/00Substation equipment, e.g. for use by subscribers
    • H04M1/02Constructional features of telephone sets
    • H04M1/04Supports for telephone transmitters or receivers
    • H04M1/05Supports for telephone transmitters or receivers specially adapted for use on head, throat or breast
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04MTELEPHONIC COMMUNICATION
    • H04M1/00Substation equipment, e.g. for use by subscribers
    • H04M1/60Substation equipment, e.g. for use by subscribers including speech amplifiers
    • H04M1/6033Substation equipment, e.g. for use by subscribers including speech amplifiers for providing handsfree use or a loudspeaker mode in telephone sets
    • H04M1/6041Portable telephones adapted for handsfree use
    • H04M1/6058Portable telephones adapted for handsfree use involving the use of a headset accessory device connected to the portable telephone
    • H04M1/6066Portable telephones adapted for handsfree use involving the use of a headset accessory device connected to the portable telephone including a wireless connection
    • GPHYSICS
    • G02OPTICS
    • G02CSPECTACLES; SUNGLASSES OR GOGGLES INSOFAR AS THEY HAVE THE SAME FEATURES AS SPECTACLES; CONTACT LENSES
    • G02C11/00Non-optical adjuncts; Attachment thereof
    • G02C11/04Illuminating means
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04RLOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
    • H04R1/00Details of transducers, loudspeakers or microphones
    • H04R1/10Earpieces; Attachments therefor ; Earphones; Monophonic headphones
    • H04R1/1008Earpieces of the supra-aural or circum-aural type
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04RLOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
    • H04R3/00Circuits for transducers, loudspeakers or microphones
    • H04R3/12Circuits for transducers, loudspeakers or microphones for distributing signals to two or more loudspeakers
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04MTELEPHONIC COMMUNICATION
    • H04M1/00Substation equipment, e.g. for use by subscribers
    • H04M1/72Mobile telephones; Cordless telephones, i.e. devices for establishing wireless links to base stations without route selection
    • H04M1/724User interfaces specially adapted for cordless or mobile telephones
    • H04M1/72403User interfaces specially adapted for cordless or mobile telephones with means for local support of applications that increase the functionality
    • H04M1/72409User interfaces specially adapted for cordless or mobile telephones with means for local support of applications that increase the functionality by interfacing with external accessories
    • H04M1/724094Interfacing with a device worn on the user's body to provide access to telephonic functionalities, e.g. accepting a call, reading or composing a message
    • H04M1/724097Worn on the head
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04MTELEPHONIC COMMUNICATION
    • H04M1/00Substation equipment, e.g. for use by subscribers
    • H04M1/72Mobile telephones; Cordless telephones, i.e. devices for establishing wireless links to base stations without route selection
    • H04M1/724User interfaces specially adapted for cordless or mobile telephones
    • H04M1/72403User interfaces specially adapted for cordless or mobile telephones with means for local support of applications that increase the functionality
    • H04M1/7243User interfaces specially adapted for cordless or mobile telephones with means for local support of applications that increase the functionality with interactive means for internal management of messages
    • H04M1/72436User interfaces specially adapted for cordless or mobile telephones with means for local support of applications that increase the functionality with interactive means for internal management of messages for text messaging, e.g. short messaging services [SMS] or e-mails
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04MTELEPHONIC COMMUNICATION
    • H04M1/00Substation equipment, e.g. for use by subscribers
    • H04M1/72Mobile telephones; Cordless telephones, i.e. devices for establishing wireless links to base stations without route selection
    • H04M1/724User interfaces specially adapted for cordless or mobile telephones
    • H04M1/72448User interfaces specially adapted for cordless or mobile telephones with means for adapting the functionality of the device according to specific conditions
    • H04M1/72451User interfaces specially adapted for cordless or mobile telephones with means for adapting the functionality of the device according to specific conditions according to schedules, e.g. using calendar applications
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04RLOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
    • H04R2460/00Details of hearing devices, i.e. of ear- or headphones covered by H04R1/10 or H04R5/033 but not provided for in any of their subgroups, or of hearing aids covered by H04R25/00 but not provided for in any of its subgroups
    • H04R2460/13Hearing devices using bone conduction transducers

Landscapes

  • Engineering & Computer Science (AREA)
  • Signal Processing (AREA)
  • Physics & Mathematics (AREA)
  • Health & Medical Sciences (AREA)
  • Acoustics & Sound (AREA)
  • Otolaryngology (AREA)
  • General Health & Medical Sciences (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Optics & Photonics (AREA)
  • Ophthalmology & Optometry (AREA)
  • General Physics & Mathematics (AREA)
  • Telephone Function (AREA)
  • User Interface Of Digital Computer (AREA)

Abstract

一种眼镜式信息设备包括:第一扬声器功能,所述第一扬声器功能被配置为将声音传输给佩戴所述眼镜式信息设备的用户;第二扬声器功能,所述第二扬声器功能被配置为将声音传输到所述眼镜式信息设备的周围区域;以及通知功能,所述通知功能包括振动功能和开灯功能中的至少任一者。当所述眼镜式信息设备的镜腿折叠并且所述眼镜式信息设备未被所述用户佩戴时,针对安装在所述眼镜式信息设备上的应用,禁用所述第一扬声器功能并且使用所述第二扬声器功能和所述通知功能中的至少任一者进行输出处理。

Description

眼镜式信息设备、方法和程序
技术领域
本发明涉及一种用于从安装在诸如智能眼镜的眼镜式信息设备上的应用控制通知的机制。
背景技术
移动电话和智能手机在消费者市场上得到了广泛的应用,并且安装有诸如耳机(在将耳机保持到用户耳朵上的同时用于听声音的功能)、扬声器、骨传导扬声器、振动和发光二极管(LED)灯等工具。智能手机在来电、报警操作、计时器操作或电子邮件通知期间使用这些工具。具体而言,提出了如下所述进行切换功能的技术(PLT 1)。换言之,在折叠式移动电话上进行语音通话时,当移动电话处于打开状态时,声音从扬声器输出,但当移动电话处于合上状态时,声音通过骨传导扬声器传输。
近年来,提出了一种用于像眼镜一样佩戴使用的可穿戴终端的智能眼镜的技术,该技术是用于与智能手机协作操作或代替智能手机操作的技术。据估计该技术未来将在消费者市场中广泛应用。一些智能眼镜已经可在市场上购得。与智能手机一样,某些类型的智能眼镜配设有诸如耳机、扬声器、骨传导扬声器、振动和LED灯等工具。
引用列表
专利文献
PTL1:日本专利申请特开No.2005-175972
发明内容
技术问题
诸如智能眼镜的眼镜式信息设备佩戴在用户的脸上。因此,可假设智能眼镜特有且与智能手机不同的使用情况、用户操作和使用场景。
例如,存在关闭智能手机的扬声器声音以免打扰其他人的情况。在这种情况下,用户并不总是查看智能手机的画面,因此可打开智能手机的振动功能以使用户能够注意到消息。相反,当用户佩戴智能眼镜时,可以假设以下情况。即,存在不需要使智能眼镜振动的振动功能的情况,或者即使关闭扬声器声音以免打扰其他人但使智能眼镜振动的振动功能仍让人感觉不舒服的情况。
因此,可能期望对假设眼镜式信息设备的使用情况、用户操作和使用场景中的至少一者进行通知控制。
问题解决方案
本发明是一种用户可佩戴的眼镜式信息设备。眼镜式信息设备包括:第一扬声器功能,所述第一扬声器功能被配置为将声音传输给佩戴所述眼镜式信息设备的用户;第二扬声器功能,所述第二扬声器功能被配置为将声音传输到所述眼镜式信息设备的周围区域;通知功能,所述通知功能包括振动功能和开灯功能中的至少一者;以及控制单元,所述控制单元用于在所述眼镜式信息设备的镜腿折叠并且所述眼镜式信息设备未被所述用户佩戴的情况下,针对安装在所述眼镜式信息设备上的应用,禁用所述第一扬声器功能并且使用所述第二扬声器功能和所述通知功能中的至少一者进行输出处理,以及在所述眼镜式信息设备被所述用户佩戴的情况下,针对所述应用,禁用所述第二扬声器功能和所述通知功能并且使用所述第一扬声器功能进行输出处理。
发明的有利效果
根据本发明,可以对假设眼镜式信息设备的使用情况、用户操作和使用场景中的至少一者进行通知控制。
附图说明
[图1]图1图示了眼镜式信息设备的系统配置图的示例。
[图2]图2是图示根据本发明的眼镜式信息设备的硬件配置示例的框图。
[图3]图3是图示根据发明的眼镜式信息设备的软件模块配置示例的框图。
[图4]图4是图示根据第一示例性实施例的眼镜式信息设备的通知处理的流程图。
[图5A]图5A图示了根据本发明的眼镜式信息设备上的设置画面的显示控制的示例。
[图5B]图5B图示了根据本发明的眼镜式信息设备上的设置画面的显示控制的示例。
[图5C]图5C图示了根据本发明的眼镜式信息设置上的设置画面的显示控制的示例。
[图5D]图5D图示了根据本发明的眼镜式信息设备上的设置画面的显示控制的示例。
[图6]图6图示了根据本发明的眼镜式信息设备的通话和通知的通用设置的显示控制示例。
[图7A]图7A图示了关于根据本发明的眼镜式信息设备的通知,针对每个应用的设置的显示控制示例。
[图7B]图7B图示了关于根据本发明的眼镜式信息设备的通知,针对每个应用的设置的显示控制示例。
[图7C]图7C图示了关于根据本发明的眼镜式信息设备的通知,针对每个应用的设置的显示控制示例。
[图8]图8是图示根据第二示例性实施例的眼镜式信息设备的通知处理的流程图。
[图9]图9是图示根据第三示例性实施例的眼镜式信息设备的通知处理的流程图。
[图10]图10图示了根据第四示例性实施例的眼镜式信息设备的显示控制示例。
[图11]图11图示了个性化模式通用通话设置表的示例。
[图12A]图12A图示了每一种模式的通知设置表的示例。
[图12B]图12B图示了每一种模式的通知设置表的示例。
[图12C]图12C图示了每一种模式的通知设置表的示例。
具体实施方式
下面将参照附图描述用于实现本发明的模式。
<第一示例性实施例>
图1图示了眼镜式信息设备的系统配置图的示例。眼镜式信息设备是能够直接或经由移动路由器(未示出)与移动网络(移动通信网络)130和互联网140通信的设备。在本发明中,将智能眼镜101描述为眼镜式信息设备的示例。作为眼镜式信息设备,也可以应用单眼、头戴式显示等智能眼镜。
智能眼镜101是用户佩戴在用户眼睛附近的可穿戴信息终端。智能眼镜101在显示单元102上将视频图像显示为视野内的虚拟图像而不遮挡用户的视野。这种显示方法被称为所谓的增强现实(AR)或混合现实(MR),并且通过将信息投影到透射式显示器(镜片105)、用户的视网膜(未示出)等上的功能来提供。图中所示的智能眼镜向用户的一只眼睛提供视频图像。然而,在本发明中,也可以应用将视频图像投影到用户两只眼睛的视野的智能眼镜101。
显示单元102还配设有沿用户的视线方向拍摄被摄体图像的相机单元103。镜架104是包括镜架外侧上的触摸传感器并且用于操作终端的操作架部分。镜架104包含音频功能,并且被配置为使用用户无需将镜架保持在用户耳朵上即可听到的较大扬声器声音或者用户在镜架与用户耳朵接触时即可听到的耳机声音,将声音传输给用户。代替耳机声音,还可安装骨传导功能。根据本示例性实施例,在耳机功能、骨传导功能等中,将声音定向传输给智能眼镜101的佩戴者的扬声器功能被定义为第一扬声器。相反,例如当智能眼镜101处于合上状态时向周围未指定用户输出声音的扬声器(例如,将在下面描述的扬声器224)被定义为第二扬声器。
此外,镜架104的镜腿部分可以通过折叠来合上或打开。镜架上安装有用于检测镜腿部分的打开/合上状态的镜腿打开/合上开关。另外,镜架104上还安装有用于切换模式(诸如,礼仪模式(manner mode))以及检测模式切换的ON/OFF开关。可以在镜架104的内侧上配设用于检测是否接触用户皮肤的皮肤传感器,或者也可以在镜架104上的相机单元103的附近配设用于检测人体存在的人体存在传感器。镜架104上还安装有诸如振动功能或LED灯闪烁功能的通知功能,以将来自安装在智能眼镜101上的应用的通知传输给用户。
图2是图示智能眼镜101的硬件配置示例的框图。
中央处理器(CPU)201使用存储在只读存储器(ROM)203中的程序,经由内部总线206整体地控制智能眼镜101的各种功能。来自CPU 201的程序执行结果可在用户视野中作为视频图像投影并显示在显示器202上。本示例性实施例假设用户通过透射式镜片105查看在显示器202上投影在视野中的图像的方法。然而,例如,也可采用显示器202直接将图像投影到用户的视网膜上的方法。ROM 203是快闪存储器等,并且例如存储如上所述的各种设置信息和应用程序。随机存取存储器(RAM)204起CPU 201的存储器或工作区的作用。流程图中所示的处理为下面将参照附图描述的本示例性实施例的特征处理,所述处理将通过CPU201执行对应程序来实现。
网络接口(I/F)205是用于连接到移动网络130或的硬件模块。在使用移动路由器的情况下,可使用智能眼镜101的通用串行总线(USB)I/F(未示出)建立连接。
操作单元207通过镜架104接收来自用户的输入,并且经由操作单元I/F 208将对应于输入的信号传输到上述每个处理单元。检测I/F 209接收来自传感器214至220的信号和通过切换开关227和228获得的信号,并且将接收到的信号传输到上述处理单元中的每一者。传感器214至220分别对应于全球定位系统(GPS)、陀螺仪传感器、加速度传感器、接近传感器、血压/脉率测量传感器、皮肤传感器和人体存在传感器。至少安装有这些传感器中的任一者。传感器227和228分别对应于ON/OFF开关和镜腿打开/合上开关。可以安装有多个ON/OFF开关。在智能眼镜101上,还可以安装用于检测生物信息以实现指纹认证、静脉认证、虹膜认证等的传感器。相机210具有图像拍摄功能,并且拍摄的图像数据存储在ROM 203中。激光211将各种内容投影在显示器202上。在视网膜投影方法中,激光211直接将内容投影到用户的视网膜上。存储设备212起存储介质的作用并且存储诸如应用等各种数据。存储设备212还包括用于读出存储在存储介质中的数据的设备以及用于删除数据的设备。依据要使用的终端,可以省略存储设备212并且可以只使用ROM 203。短程通信I/F 213是用于与另一可穿戴终端等通信的接口。
音频I/F 222将音频输出传输到充当音频功能的耳机223和扬声器224中的每一者。耳机223和扬声器224共享一个音频输出端口,并且耳机223或扬声器224依据通知的内容或预期用途输出声音。在语音通话期间,用户经由耳机223或扬声器224接收声音,并且使用麦克风(未示出)传输声音。在这种情况下,用于语音通话的线路是要经由网络I/F连接的网络,或者要通过电话线连接组件(未示出)连接的有线或无线电话线。代替使用耳机223,音频I/F 222还可通过骨传导(未示出)来传输音频输出。振动225通过振动将来自安装在智能眼镜101上的应用的通知传输给用户,并且LED灯226通过闪烁LED灯将来自应用的通知传输给用户。
图3是图示智能眼镜101的软件模块配置示例的框图。
通信单元301使用网络I/F 205从经由网络协作操作的应用服务器接收通知。通信单元301还将信息传输到协作可穿戴终端以及从协作可穿戴终端接收信息。存储单元302与ROM 203、RAM 204和其他处理单元交换信息,并且还存储由相机210拍摄的图像数据等。
显示单元303在AR/MR显示器等上显示由CPU 201执行的各种应用的结果。例如,显示单元303使用AR技术在显示器202上显示内容(信息投影),以便将虚拟内容叠加在真实空间上。在本发明中,还可采用直接将图像投影到用户的视网膜上的方法。在信息投影中,用户在真实空间中的位置和姿态可以基于诸如同步定位映射(SLAM)的技术来估计。估计结果用于虚拟内容显示处理。
操作单元304通过镜架104接收来自用户的输入,接收用于各种应用的操作以及在显示器202上显示的操作的指令,并且控制这些操作。相机控制单元305控制相机210的激活、抑制和图像拍摄,并且与存储单元302协作将拍摄的图像数据存储在ROM 203中。模式控制单元306控制智能眼镜101中包括的多种通话/通知模式的切换,并且将智能眼镜101切换到用户期望的模式。通话/通知模式包括正常模式、礼仪模式、静音模式、驾驶模式和自定义模式,并且还包括作为本示例性实施例的特征模式的未佩戴模式。
礼仪模式是主要在用户佩戴智能眼镜101时转换的模式,并且在限制从扬声器输出的声音的同时使用诸如振动功能和LED的功能。静音模式是主要在用户佩戴智能眼镜101时转换的模式,并且除了显示器202的显示控制,限制声音或振动的输出。驾驶模式是主要在佩戴智能眼镜101的用户驾驶汽车等时转换的模式。自定义模式是由智能眼镜101的用户定制的特殊模式。正常模式是上述模式以外的模式,并且是在用户佩戴智能眼镜101时使用的模式。在正常模式下,使用从耳机(或通过骨传导)输出的声音和用于显示器202的显示控制。可视情况启用从扬声器输出的声音。
未佩戴模式是在用户未佩戴智能眼镜101时使用的模式。检测单元307管理与通过检测I/F 209检测到的状态变更、使用情况等有关的信息,并且将信息保存在ROM 203中。配对单元308控制短程通信I/F213,以启用经由无线通信与外部网络设备的双向数据通信。
应用管理单元309经由存储单元302在ROM 203和RAM 204中管理各种应用的执行状态、版本信息、从服务器接收到的每个应用的通知、设置了上述哪一种模式等。
此外,应用管理单元309经由操作单元304基于用户输入来控制各种应用。在应用控制处理期间在显示器202上显示内容的情况下,应用管理单元309经由显示单元303在显示器202上显示内容。
图4图示了当对安装在智能眼镜101上的应用进行控制时,作为本发明的特征处理的处理流。该流程图中包括的每个处理步骤主要由应用管理单元309执行。
如果检测单元307在步骤S401中检测到与模式变更相关联的开关或传感器的状态的变更,则应用管理单元309在步骤S402中检查检测到的变更是否表示智能眼镜101的镜腿合上。在本示例性实施例中,可以将镜腿完全折叠并合上的状态检测为智能眼镜的镜腿合上的状态(“眼镜合上”状态)。另一选择是,可以将用户未佩戴智能眼镜101并且镜腿以预定角度或更大角度弯折的状态检测为镜腿合上的状态(“眼镜合上”状态)。
如果检测到智能眼镜的镜腿为合上的状态(“眼镜合上”状态),则处理进入步骤S403。如果检测到的变更表示另一开关或传感器的状态变更,则处理进入步骤S411。在步骤S411中,基于检测到的开关或传感器的状态来执行模式变更。在这种情况下,将来自检测单元307关于状态变更的信息传输到应用管理单元309。应用管理单元309基于在智能眼镜101上对模式选择设置应用的设置和传输的关于开关或传感器的状态变更的信息来确定模式,并且经由模式控制单元306变更模式。
在步骤S403中,确定是否正在从智能眼镜101上安装的应用进行报警通知。在步骤S404中,如果正在进行通知,则停止报警通知。如果未发出报警通知,则在步骤S405中进一步检查是否设置了贪睡功能。如果设置了贪睡功能,则在步骤S406中停止贪睡功能。
此后,在步骤S407中,检查画面是否处于解锁状态。如果画面处于解锁状态,则在步骤S408中锁定画面,然后在步骤S409中关闭画面。如果在步骤S407中画面处于锁定状态,则在步骤S410中检查画面是否打开。如果画面打开,则处理进入步骤S409以关闭画面。在执行与上述镜腿合上状态检测相关联的一系列处理(包括报警停止处理、贪睡功能停止处理、画面锁定处理和画面关闭处理)之后,基于步骤S411中的镜腿合上状态执行模式变更。
在步骤S401中,如果未检测到与模式变更相关联的开关或传感器的状态变更,则处理进入步骤S412以检查是否检测到模式选择变更。检测到模式选择变更表示用户已经由操作单元304在关于智能眼镜101设置的设置应用上选择了模式。当用户在操作单元304上选择模式时,将对应用的选择操作传输到应用管理单元309,并且将所选模式信息进一步从应用管理单元309传输到模式控制单元306,从而切换模式。
如果在步骤S412中未检测到模式选择变更,则处理进入步骤S413以检查是否检测到通话开始。如果检测到通话开始,则在步骤S414中获得当前模式,并且在步骤S415中获得基于获得模式的通话设置。然后,在步骤S416中,基于获得的通话设置执行通话。在这种情况下,上述步骤S413中的通话开始表示例如用户在来电期间在来电应用上按下通话开始按钮。此外,在步骤S416中的执行通话过程中,智能眼镜101实际上响应于按下通话开始按钮而使智能眼镜内部的通话开始。在步骤S415中获得设置所要参考的信息是与图11中所示的个性化模式通用通话设置表有关的信息。
智能眼镜101使用以上参考图2描述的显示器202、耳机223、扬声器224、振动225或LED灯226,以声音或振动、闪烁或打开LED或者显示消息的装置,将来自每个应用的信息通知给用户。
在图11中所示的个性化模式通用通话设置表上,针对每个模式,将通话期间使用上述通知工具将声音传输给用户的工具设置为默认设置。在图11中所示的示例中,例如,如果在步骤S414中获得用户佩戴智能眼镜的正常模式作为当前模式,则启用经由耳机(或经由骨传导)输出的声音并且禁用通过扬声器输出的声音,从而在步骤S416中在智能眼镜101中执行通话。在这种情况下,显然智能眼镜101的LED灯、振动功能等也被禁用。在另一示例中,例如,如果在步骤S414中获得未佩戴模式作为当前模式,则智能眼镜101在禁用从耳机(或者通过骨传导)输出的声音并且启用从扬声器输出的声音的状态下在步骤S416中执行通话。在这种情况下,显然智能眼镜101的LED灯、振动功能等也被禁用。
还图示了在通话以外的操作中,通知工具在来自每个应用的通知期间的等效表。图11图示了通话期间的工具,并且仅假设音频通知。因此,当假设执行通话时,假设图11中点状单元格基本为OFF(基本不用作通话设置)。但是,例如,可将打开LED灯以通知用户周围其他人通话状态的设置作为默认设置。在根据本示例性实施例的通话操作中,未假设通话设置在诸如“使用电话线的通话应用”与“诸如使用网线的消息软件(messenger)应用的通话应用”的应用之间的差异。因此,这些通话应用是通用的并且基于图11中所示的通话设置执行通话。但是,可以将每个模式的通话设置作为每个通话应用的默认设置。
如果在步骤S413中未检测到通话开始,则处理进入步骤S417以确认是否检测到来自安装在智能眼镜101上的应用的通知。如果检测到来自应用的通知,则与在步骤S414中一样,在步骤S418中获得当前模式,并且在步骤S419中获得基于获得模式的通知设置。然后,基于获得的通知设置,在步骤S420中执行通知。
在步骤S419中获得设置所参考的信息是12A至图12C中所示的表信息。
图12A中所示的个性化模式通用通知设置是每个模式的应用通用设置。图12B中所示的正常模式个性化应用通知设置是在正常模式期间每个应用的设置示例。图12C中所示的未佩戴模式个性化应用通知设置是在未佩戴模式期间每个应用的设置示例。在用户佩戴智能眼镜的正常模式期间,LED灯功能、振动功能等被禁用。该设置旨在防止智能眼镜因通知而错位,或者防止LED灯的灯光导致视觉模糊。
如果在智能眼镜101的设置应用上赋予应用设置优先的设置为ON,则参考图12B和图12C中所示的每个应用的通知设置表。如果没有赋予应用设置优先,则参考图12A中所示的通用通知设置表。
在图12B和图12C中所示的单元格中,灰色单元格表示与图12A中所示的通用设置不同的设置。对于在通知期间并非假设基本使用的通知设置,由表中的点状单元格所表示的设置为OFF,但如果使用这些设置,则相反可能为ON。例如,图12C中的消息显示为OFF。这是因为假设通过用户佩戴智能眼镜101来观看智能眼镜101的镜片105上的消息显示。因此,在未佩戴模式期间,消息显示为OFF。然而,例如,如果智能眼镜101包括将在镜片105上投影的消息从佩戴模式下的消息显示反转成在镜片105上的消息显示的功能,则消息显示可以为ON,由此能够使用户在未佩戴模式下从外侧观看镜片105。
接下来,将参照图5A至图7C描述在智能眼镜101的显示器202上使用设置应用用户界面(UI)的显示示例。设置应用上的设置包括用户进行图11和图12A至图12C中所示的ON/OFF设置时的设置画面。该画面经由网络提供给另一终端的网络浏览器等,从而使用户能够进行设置操作。
图5A至图5D图示在激活设置应用时的顶部画面示例和选择顶部画面显示上的项目时的画面示例。
在图5A中所示的顶部画面示例中,用于在设置画面500上设置模式选择501、通话/通知502和画面503的设置项目以列表显示。在设置画面500上,针对每个大类,诸如和电池等智能眼镜101的各种设置项目也以列表显示。
图5B至图5D各自图示了当分别选择图5A中所示的项目501、502和503时所转换的每个项目的设置画面。
图5B图示了模式选择设置画面510。用户可通过使用模式选择设置画面上的项目511中所示的下拉菜单来选择模式,从而切换模式。模式选择设置画面还包括硬件开关启用复选框512,用于启用与硬件开关相关联的模式切换。在启用硬件开关之后,可使用项目513中的下拉菜单选择与安装在智能眼镜101上的开关(包括传感器)相关联的模式。假设此类硬件开关的示例包括图2中所示的ON/OFF开关227和镜腿打开/合上开关228以及其他传感器状态ON/OFF。依据多个硬件开关的状态,关联模式可以相互竞争。因此,如果所述模式相互竞争,则还可在项目513中进行赋予与开关中任一者相关联的模式中的任一者优先级的优先级次序设置。在这种情况下,项目513的优先级中没有优先级编号的复选框表示硬件开关被禁用。通过按下复选框来启用与复选框对应的硬件开关,从而能够设置优先级。此外,如果硬件开关启用,则基于项目513中设置的开关状态的模式被赋予的优先级高于在项目511中用户选择的模式被赋予的优先级。
图5C图示了通话/通知设置画面520。通话/通知设置画面520以列表形式显示用于进行应用通用设置的通用设置521和通用设置以外的每个应用的设置。每个应用的设置不仅包括诸如电话通话522、电子邮件523和时钟524等应用,还包括安装在智能眼镜101上的诸如系统声音、消息软件、日历和新闻应用等应用的设置。
图5D图示了画面设置画面530。画面设置画面530在智能眼镜101的显示器202上显示用于画面显示的设置。例如,在显示设置531中,可使用滑动条调节画面的亮度,并且可使用下拉菜单选择在预定时间段内用户未进行画面操作的情况下在自动画面锁定期间开始锁定画面的时间。显示设置531还包括用于启用“在镜架104合上时锁定画面的设置”和“用于在镜架104打开时解锁画面的设置”的复选框。解锁画面表示显示请求用户认证以解锁画面的认证画面。在画面设置画面530上,还可进行安全设置532。该设置可通过打开或关闭表示是否使用指纹认证或密码来启用上述画面锁定的复选框来进行。
图6图示了当在图5C中选择通用设置521时要使用的通话/通知通用设置的设置画面的示例。通话/通知通用设置画面600包括用于通话的音量调节的滑动条、用于通话以外操作的音量调节的滑动条、用于选择声音的选择下拉菜单、用于振动强度调节的滑动条、用于闪烁速度调节的滑动条、用于选择振动方式、闪烁方式和颜色的选择下拉菜单以及用于选择消息显示方式的选择下拉菜单。通用设置画面600还包括用于个性化模式通话工具601和个性化模式通知工具602的项目。当选择这些项目601和602时,诸如正常模式、礼仪模式、静音模式、驾驶模式、未佩戴模式和自定义模式等较低级模式项目以列表显示。例如,如果选择作为个性化模式通知工具602的较低级项目的、诸如正常模式603和未佩戴模式604的项目,则在每个模式下显示诸如“耳机/骨传导”、“扬声器”、“振动”、“LED灯”和“消息显示”等通知工具。当确认对应于这些通知工具中的任一者的复选框时,由在该模式下确认的通知工具来发出通知。在通用设置画面600上对个性化模式通话工具601和个性化模式通知工具603所做的设置分别反映在图11中所示的ON/OFF设置和图12A中所示的ON/OFF设置中。
图7A至图7C分别图示了当在图5C中选择项目522、523和524时,关于要使用的通知每个应用的设置画面示例。
图7A图示了来自电话应用的通知的设置画面的示例。电话应用通知设置画面700包括应用优先的复选框701。当使用该应用时,确认该复选框使得在图7A中所示的电话应用通知设置画面700上所做的设置的优先级高于上述在图6中所示的通用设置画面600上所做的设置的优先级。对于关于来电702的通知设置,可在电话应用通知设置画面700上进行与通用设置画面600上的通知设置类似的设置作为与电话应用有关的通知。使用电话应用通知设置画面700上的来电702中包括的个性化模式通知工具703来设置个性化电话应用上的每个模式期间的通知工具。该设置反映在例如图12B和图12C中所示的应用ID“NOTIFY-APP-001”的行中的ON/OFF设置中。
图7B图示了来自电子邮件应用的通知的设置画面的示例。与图7A一样,电子邮件应用通知设置画面710也包括应用优先的复选框,并且可进行类似于通用设置画面600上的通知设置的设置。电子邮件应用通知设置画面710上的通知包括诸如新电子邮件接收通知711和电子邮件传输通知712的设置项目。项目711和712的设置分别反映在图12B和图12C中所示的应用ID“NOTIFY-APP-002”和应用ID“NOTIFY-APP-003”的行中的ON/OFF设置中。
图7C图示了来自时钟应用的通知的设置画面的示例。与图7A一样,时钟应用通知设置画面720也包括应用优先的复选框,并且可进行类似于通用设置画面600上的通知设置的设置。时钟应用通知设置画面720上的通知包括诸如报警通知721和定时器通知722的设置项目。项目721和722的设置分别反映在图12B和图12C中所示的应用ID“NOTIFY-APP-007”和应用ID“NOTIFY-APP-008”的行中的ON/OFF设置中。时钟应用通知设置画面720还包括复选框723,所述复选框723用于启用在镜架104处于合上状态的报警通知延续状态期间打开镜架104时停止报警通知的功能。时钟应用通知设置画面720还包括复选框724,所述复选框724用于启用在镜架104处于合上状态的贪睡功能激活状态期间打开镜架104时使贪睡功能无效的功能。
根据上述第一示例性实施例,可基于智能眼镜101的镜架104的打开/合上以及每个模式,选择性地使用用于通知、通话等的功能。
<第二示例性实施例>
现在将参照图8描述另一示例性实施例。图8中所示的处理是基于智能眼镜101的镜架104的关闭状态下的人体检测功能的通知处理的扩展。
图8是图示根据第二示例性实施例的眼镜式信息设备的通知处理的流程图。
在步骤S801中,安装在智能眼镜101上的人体存在传感器220检测在智能眼镜101的特定范围内是否有人存在。如果检测到人在智能眼镜101的特定范围内接近,则处理进入步骤S802以检测智能眼镜101是否处于镜腿合上状态(“眼镜合上”)。
在步骤S802中,如果智能眼镜101合上,则处理进入步骤S803以检查是否存在用户尚未阅读的最新应用通知。
在步骤S803中,如果存在用户尚未读取的最新应用通知,则处理进入步骤S804以在智能眼镜101的镜片105上高亮显示消息。高亮显示消息是指通过将消息从激光211在显示器202上投影各种内容并且用户佩戴智能眼镜101时的消息反转而进行的消息显示。
根据上述第二示例性实施例,当用户在智能眼镜101的镜架104合上时接近智能眼镜的情况下,用户可在无需打开镜架104的情况下确认新的应用通知消息。
<第三示例性实施例>
现在将参照图9描述又一示例性实施例。图9中所示的处理是在智能眼镜101合上并储存在眼镜盒(未示出)中的同时对智能眼镜充电的状态下的通知处理的扩展。在智能眼镜储存在眼镜盒中并且正在充电的情况下,存在用户无法注意到上述其他示例性实施例中描述的通知的担忧。
图9是图示根据第三示例性实施例的眼镜式信息设备的通知处理的流程图。
在步骤S901中,与在根据第一示例性实施例的步骤S417中一样,智能眼镜101检测是否存在应用通知。后续步骤S902和S903是类似于根据第一示例性实施例的步骤S418至S420的处理。在步骤S903中获得通知设置之后,在步骤S904中确认智能眼镜101是否合上。如果智能眼镜101在步骤S904中处于镜腿合上状态(“眼镜合上”),则在步骤S905中进一步确认智能眼镜101是否储存在能够为智能眼镜充电的眼镜盒中。
在这种情况下,智能眼镜101和眼镜盒被配置为经由近距离通信I/F213相互通信。眼镜盒还包括用于代替智能眼镜101的显示器202、扬声器224、振动225和LED灯226的替代通知工具(未示出)。包括在眼镜盒中的替代通知工具包括用于显示通知内容等的显示器和用于输出声音的扬声器。
如果在步骤S905中智能眼镜101储存在眼镜盒中并且正在充电,则处理进入步骤S906。在步骤S906中,智能眼镜101向眼镜盒发出使用替代通知工具控制通知的指令。除了与已经发出通知的应用有关的信息之外,指令还可以包括通知内容的至少一部分。该指令使用眼镜盒中包括的替代通知工具来实现替代通知。如果在步骤S905中智能眼镜101未储存在眼镜盒中,则与在根据第一示例性实施例的步骤S420中一样,使用智能眼镜101上安装的通知工具将来自应用的通知传输给用户。
根据上述第三示例性实施例,即使在智能眼镜盒101储存在眼镜盒中并且正在充电的状态下,眼镜盒也可代替智能眼镜发出通知。
<第四示例性实施例>
作为又一个示例性实施例,独立于镜腿打开/合上开关,皮肤传感器检测ON/OFF可以用作与未佩戴模式相关联的硬件开关。
图10图示了皮肤传感器检测ON/OFF可与未佩戴模式相关联的模式选择设置画面的示例。
图10中所示的模式选择画面1000等同于在第一示例性实施例中描述的模式选择设置画面510。模式选择画面1000上的画面项目1001至1003也类似于模式选择画面510上的项目511和512。
模式选择画面1004上的皮肤传感器OFF 1004是作为第四示例性实施例的特征项的硬件开关项,并且假设开关项与未佩戴模式相关联。这里描述的皮肤传感器对应于镜腿皮肤传感器219。安装在智能眼镜101的镜架104的镜腿部分内侧上的镜腿皮肤传感器219检测人体皮肤是否与镜腿部分内侧接触。如果人体皮肤未与镜腿部分内侧接触,则镜腿皮肤传感器219在皮肤检测中处于未检测到状态。该未检测到状态对应于皮肤传感器OFF 1004的开关状态。
根据上述第四示例性实施例,用户佩戴智能眼镜101的状态可由与智能眼镜101的打开/合上不同的另一检测工具来检测,每个应用的通知工具可基于检测到的状态进行切换。
一些用户可能会在智能眼镜101的镜架104为打开的状态下摘下智能眼镜101并且搁置智能眼镜101。这种情况的示例包括用户正在洗脸的情况以及用户正在用布清洁智能眼镜镜片的情况。在此类用例中,仅将智能眼镜101的镜架104中的镜腿打开/合上开关与未佩戴模式相关联是不够的。因此,在此类用例中,将未佩戴模式与第四示例性实施例中描述的皮肤传感器检测ON/OFF相关联是有效的,并且用例与第一示例性实施例相比可扩展。
(其他实施例)
本发明还包括通过适当组合上述示例性实施例而配置的装置或系统,以及用于该装置或系统的方法。
这里,本发明提供一种执行一个或多个软件(程序)以实现根据上述示例性实施例的功能的装置或系统。实现由装置或系统执行的上述示例性实施例的方法也是本发明的一个方面。经由网络或多个存储介质向系统或装置提供其程序,并且系统或装置中的一个或多个计算机(CPU、微处理单元(MPU)等)将程序读出到一个或多个存储器中并且执行该程序。换言之,作为本发明的一个方面,还包括程序本身和存储程序的各种计算机可读存储介质。本发明还可通过用于实现根据上述示例性实施例的功能的电路(例如,专用集成电路(ASIC))来实现。
本发明并不局限于上述示例性实施例,并且可在不违背本发明的精神和范围的情况下进行各种修改或变型。因此,应给予随附权利要求范围最宽泛的解释。
本申请基于并要求2021年3月5日提交的日本专利申请No.2021-035792的优先权,所述申请的全部内容在此以引用方式并入本文中。

Claims (7)

1.一种被配置为用户佩戴的眼镜式信息设备,所述眼镜式信息设备包括:
第一扬声器功能,所述第一扬声器功能被配置为将声音传输给佩戴所述眼镜式信息设备的所述用户;
第二扬声器功能,所述第二扬声器功能被配置为将声音传输到所述眼镜式信息设备的周围区域;
通知功能,所述通知功能包括振动功能和开灯功能中的至少一者;以及
控制单元,所述控制单元用于
在所述眼镜式信息设备的镜腿折叠并且所述眼镜式信息设备未被所述用户佩戴的情况下,针对安装在所述眼镜式信息设备上的应用,禁用所述第一扬声器功能并且使用所述第二扬声器功能和所述通知功能中的至少一者进行输出处理,以及
在所述眼镜式信息设备被所述用户佩戴的情况下,针对所述应用,禁用所述第二扬声器功能和所述通知功能并且使用所述第一扬声器功能进行输出处理。
2.根据权利要求1所述的眼镜式信息设备,所述眼镜式信息设备还包括设置单元,所述设置单元用于在所述眼镜式信息设备的所述镜腿折叠并且所述眼镜式信息设备未被所述用户佩戴的情况下,设置要用于所述应用的所述第二扬声器功能和所述通知功能中的一者。
3.一种被配置为用户佩戴的眼镜式信息设备,所述眼镜式信息设备包括:
第一扬声器功能,所述第一扬声器功能被配置为将声音传输给佩戴所述眼镜式信息设备的所述用户;
第二扬声器功能,所述第二扬声器功能被配置为将声音传输到所述眼镜式信息设备的周围区域;
通知功能,所述通知功能包括振动功能和开灯功能中的至少一者;以及
设置单元,所述设置单元用于设置要用于安装在所述眼镜式信息设备上的多个应用中的每一者的所述第一扬声器功能、所述第二扬声器功能和所述通知功能中的任一者。
4.一种用于眼镜式信息设备的方法,所述眼镜式信息设备包括:
第一扬声器功能,所述第一扬声器功能被配置为将声音传输给佩戴所述眼镜式信息设备的用户;
第二扬声器功能,所述第二扬声器功能被配置为将声音传输到所述眼镜式信息设备的周围区域;以及
通知功能,所述通知功能包括振动功能和开灯功能中的至少一者,
所述方法包括:
控制以在所述眼镜式信息设备的镜腿折叠并且所述眼镜式信息设备未被所述用户佩戴的情况下,针对安装在所述眼镜式信息设备上的应用,禁用所述第一扬声器功能并且使用所述第二扬声器功能和所述通知功能中的至少一者进行输出处理,以及
控制以在所述眼镜式信息设备被所述用户佩戴的情况下,针对所述应用,禁用所述第二扬声器功能和所述通知功能并且使用所述第一扬声器功能进行输出处理。
5.一种用于眼镜式信息设备的方法,所述眼镜式信息设备包括:
第一扬声器功能,所述第一扬声器功能被配置为将声音传输给佩戴所述眼镜式信息设备的用户;
第二扬声器功能,所述第二扬声器功能被配置为将声音传输到所述眼镜式信息设备的周围区域;以及
通知功能,所述通知功能包括振动功能和开灯功能中的至少一者,
所述方法包括:
设置要用于安装在所述眼镜式信息设备上的多个应用中的每一者的所述第一扬声器功能、所述第二扬声器功能和所述通知功能中的任一者。
6.一种使计算机起眼镜式信息设备作用的程序,所述眼镜式信息设备包括:
第一扬声器功能,所述第一扬声器功能被配置为将声音传输给佩戴所述眼镜式信息设备的用户;
第二扬声器功能,所述第二扬声器功能被配置为将声音传输到所述眼镜式信息设备的周围区域;以及
通知功能,所述通知功能包括振动功能和开灯功能中的至少一者,
所述程序使所述计算机起控制单元的作用,所述控制单元用于
在所述眼镜式信息设备的镜腿折叠并且所述眼镜式信息设备未被所述用户佩戴的情况下,针对安装在所述眼镜式信息设备上的应用,禁用所述第一扬声器功能并且使用所述第二扬声器功能和所述通知功能中的至少一者进行输出处理,以及
在所述眼镜式信息设备被所述用户佩戴的情况下,针对所述应用,禁用所述第二扬声器功能和所述通知功能并且使用所述第一扬声器功能进行输出处理。
7.一种使计算机起眼镜式信息设备作用的程序,所述眼镜式信息设备包括:
第一扬声器功能,所述第一扬声器功能被配置为将声音传输给佩戴所述眼镜式信息设备的用户;
第二扬声器功能,所述第二扬声器功能被配置为将声音传输到所述眼镜式信息设备的周围区域;以及
通知功能,所述通知功能包括振动功能和开灯功能中的至少一者,
所述程序使所述计算机起设置单元的作用,所述设置单元用于设置要用于安装在所述眼镜式信息设备上的多个应用中的每一者的所述第一扬声器功能、所述第二扬声器功能和所述通知功能中的任一者。
CN202280018497.2A 2021-03-05 2022-02-22 眼镜式信息设备、方法和程序 Pending CN117015734A (zh)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
JP2021035792A JP2022135770A (ja) 2021-03-05 2021-03-05 メガネ型情報機器、その方法及びプログラム
JP2021-035792 2021-03-05
PCT/JP2022/007169 WO2022185996A1 (ja) 2021-03-05 2022-02-22 メガネ型情報機器、その方法及びプログラム

Publications (1)

Publication Number Publication Date
CN117015734A true CN117015734A (zh) 2023-11-07

Family

ID=83154385

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202280018497.2A Pending CN117015734A (zh) 2021-03-05 2022-02-22 眼镜式信息设备、方法和程序

Country Status (4)

Country Link
US (1) US20230412717A1 (zh)
JP (1) JP2022135770A (zh)
CN (1) CN117015734A (zh)
WO (1) WO2022185996A1 (zh)

Families Citing this family (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN116022158B (zh) * 2023-03-30 2023-06-06 深圳曦华科技有限公司 多域控制器协作的驾驶安全控制方法及装置

Family Cites Families (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP3988632B2 (ja) * 2002-11-28 2007-10-10 日本電気株式会社 眼鏡型ディスプレイの制御方法
JP5571054B2 (ja) * 2011-10-17 2014-08-13 京セラ株式会社 携帯情報端末
JP2013114124A (ja) * 2011-11-30 2013-06-10 Seiko Epson Corp 画像表示装置、画像表示装置における電源制御方法および画像表示装置における電源制御プログラム
US9183612B2 (en) * 2013-09-04 2015-11-10 Qualcomm Incorporated Wearable display device use-based data processing control

Also Published As

Publication number Publication date
JP2022135770A (ja) 2022-09-15
US20230412717A1 (en) 2023-12-21
WO2022185996A1 (ja) 2022-09-09

Similar Documents

Publication Publication Date Title
US11340560B2 (en) Information processing apparatus, control method, and program
AU2018430381B2 (en) Flexible screen display method and terminal
CN110839109B (zh) 用于提供通知的方法和设备
US20220191313A1 (en) Electronic Device Having Foldable Screen and Display Method
WO2015125626A1 (ja) 表示制御装置、表示制御方法およびコンピュータプログラム
CN106168854A (zh) 视力保护的提醒方法及装置
CN106527682B (zh) 切换环境画面的方法及装置
US20230412717A1 (en) Glasses-type information device, method, and storage medium
CN114077365A (zh) 分屏显示方法和电子设备
JP2022081342A (ja) メガネ型情報機器、その方法及びプログラム
KR20180033185A (ko) 이어셋 및 그 제어 방법
US20230342106A1 (en) Collaborative display method, terminal device, and computer-readable storage medium
EP3904969A1 (en) Information processing method, wearable electronic device, electronic device and storage medium
JP2016096552A (ja) 音信号出力装置
CN109215612A (zh) 屏幕显示的调节方法及装置、电子设备、存储介质
CN114844984B (zh) 通知消息的提醒方法及电子设备
US20220334648A1 (en) Wearable information terminal, control method thereof, and storage medium
CN116048686B (zh) 显示方法及折叠屏设备
KR101689713B1 (ko) 휴대 단말기 및 그 동작 방법
JP6316860B2 (ja) 聴取ユニット
CN115706752A (zh) 来电音量控制方法及电子设备
CN117608416A (zh) 控制解锁的方法和电子设备
CN118020046A (zh) 信息处理设备、信息处理方法和程序
CN106648066A (zh) 背光调节方法和装置及智能眼镜
CN106774921A (zh) 背光亮度调节方法、装置及终端

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination