CN104978020A - 信息处理系统、信息设备、佩戴型信息设备 - Google Patents

信息处理系统、信息设备、佩戴型信息设备 Download PDF

Info

Publication number
CN104978020A
CN104978020A CN201510133686.6A CN201510133686A CN104978020A CN 104978020 A CN104978020 A CN 104978020A CN 201510133686 A CN201510133686 A CN 201510133686A CN 104978020 A CN104978020 A CN 104978020A
Authority
CN
China
Prior art keywords
information equipment
information
equipment
mount type
function
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN201510133686.6A
Other languages
English (en)
Other versions
CN104978020B (zh
Inventor
水野公靖
南刚
铃木英男
末永尚史
野村敬一
内田修平
濑尾宗隆
山下树
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Casio Computer Co Ltd
Original Assignee
Casio Computer Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Casio Computer Co Ltd filed Critical Casio Computer Co Ltd
Publication of CN104978020A publication Critical patent/CN104978020A/zh
Application granted granted Critical
Publication of CN104978020B publication Critical patent/CN104978020B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F1/00Details not covered by groups G06F3/00 - G06F13/00 and G06F21/00
    • G06F1/16Constructional details or arrangements
    • G06F1/1613Constructional details or arrangements for portable computers
    • G06F1/163Wearable computers, e.g. on a belt
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V20/00Scenes; Scene-specific elements
    • G06V20/10Terrestrial scenes
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V2201/00Indexing scheme relating to image or video recognition or understanding
    • G06V2201/02Recognising information on displays, dials, clocks

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Computer Hardware Design (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Human Computer Interaction (AREA)
  • General Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Telephone Function (AREA)
  • User Interface Of Digital Computer (AREA)

Abstract

佩戴型信息设备存储在确定事先登记的所述信息设备时使用的设备确定信息,对拍摄使用者的视线方向的被摄体而得到的摄影图像,基于所存储的所述设备确定信息进行图像解析,由此确认所述信息设备是否被摄入所拍摄的摄影图像中,并将确认结果通知给所述信息设备。所述信息设备根据由所述佩戴型信息设备通知的对该信息设备的确认结果,执行规定功能。

Description

信息处理系统、信息设备、佩戴型信息设备
对相关申请的交叉引用
本申请以在2014年4月1日提出申请的第2014-075419号日本专利申请、以及2014年10月15日提出申请的第2014-210340号为基础申请,并对其主张优先权,而且该基础申请的内容全部被引用于本申请中。
技术领域
本发明涉及例如手表式的信息设备、适合用于智能电话等的信息设备的设备控制技术。
背景技术
近年来,智能电话以及与智能电话协同动作的手表型的信息设备(以下称为手腕终端)受到关注。这些信息设备通过其单体或者相互协作而进行高级信息处理(例如,参照日本特开2002-152327号公报)。
但是,这些信息设备由于处于始终能够执行它们所具有的功能的状态,因此存在各种问题。
作为解决问题的方法,考虑仅在执行所需功能时,用户手动使该功能为开启状态,但是这存在信息设备的便利性大幅降低的问题。
发明内容
本发明正是鉴于这种问题而提出的,其目的在于,实现信息设备的设备控制技术,而不会使信息设备的便利性降低。
根据本发明的一种信息处理系统,由执行规定功能的信息设备和与该信息设备进行通信的佩戴型信息设备构成,该信息处理系统的特征在于,所述佩戴型信息设备具有:存储单元,存储在确定事先登记的所述信息设备时使用的设备确定信息;摄影单元,拍摄使用者的视线方向的被摄体;确认单元,通过基于在所述存储单元中存储的所述设备确定信息的图像解 析,确认由所述摄影单元拍摄到的摄影图像中有无所述信息设备;以及通知单元,将所述确认单元对所述信息设备的确认结果,通知给所述信息设备,所述信息设备具有功能执行单元,所述功能执行单元根据来自所述佩戴型信息设备的所述通知单元的对所述信息设备的确认结果,执行所述规定功能。
根据本发明的一种信息处理系统,由执行规定功能的信息设备和与该信息设备进行通信的佩戴型信息设备构成,该信息处理系统的特征在于,所述佩戴型信息设备具有:存储单元,存储在确定事先登记的所述信息设备时使用的设备确定信息;摄影单元,拍摄使用者的视线方向的被摄体;确认单元,通过基于在所述存储单元中存储的所述设备确定信息的图像解析,确认由所述摄影单元拍摄到的摄影图像中有无所述信息设备;以及控制单元,根据所述确认单元对所述信息设备的确认结果,控制所述信息设备的功能执行,所述信息设备具有功能执行单元,所述功能执行单元根据由所述佩戴型信息设备的所述控制单元进行的控制,执行所述规定功能。
根据本发明的一种信息处理系统,由执行规定功能的信息设备和与该信息设备进行通信的佩戴型信息设备构成,该信息处理系统的特征在于,所述佩戴型信息设备具有:摄影单元,拍摄使用者的视线方向的被摄体;以及图像发送单元,将由所述摄影单元拍摄的摄影图像发送给所述信息设备,所述信息设备具有:功能执行单元,执行所述规定功能;存储单元,存储在确定事先登记的该信息设备时使用的设备确定信息;确认单元,通过基于在所述存储单元中存储的所述设备确定信息的图像解析,确认由所述佩戴型信息设备发送的所述摄影图像中有无该信息设备;以及控制单元,根据所述确认单元对所述信息设备的确认结果,控制所述功能执行单元的功能执行。
根据本发明的一种信息处理系统中的信息设备,该信息处理系统由执行规定功能的所述信息设备和与该信息设备进行通信的佩戴型信息设备构成,该信息设备的特征在于,具有:功能执行单元,执行所述规定功能;存储单元,存储在确定事先登记的该信息设备时使用的设备确定信息;确认单元,通过基于在所述存储单元中存储的所述设备确定信息的图像解析,确认由所述佩戴型信息设备发送的摄影图像中有无该信息设备,所述摄影 图像是所述佩戴型信息设备拍摄了该佩戴型信息设备的使用者的视线方向的被摄体的图像;以及控制单元,根据所述确认单元对所述信息设备的确认结果,控制所述功能执行单元的功能执行。
根据本发明的一种信息处理系统中的佩戴型信息设备,该信息处理系统由执行规定功能的信息设备和与该信息设备进行通信的所述佩戴型信息设备构成,该佩戴型信息设备的特征在于,具有:存储单元,存储在确定事先登记的所述信息设备时使用的设备确定信息;摄影单元,拍摄使用者的视线方向的被摄体;确认单元,通过基于在所述存储单元中存储的所述设备确定信息的图像解析,确认由所述摄影单元拍摄到的摄影图像中有无所述信息设备;以及通知单元,将所述确认单元对所述信息设备的确认结果,通知给所述信息设备。
根据本发明的一种信息处理系统中的佩戴型信息设备,该信息处理系统由执行规定功能的信息设备和与该信息设备进行通信的所述佩戴型信息设备构成,该佩戴型信息设备的特征在于,具有:存储单元,存储在确定事先登记的所述信息设备时使用的设备确定信息;摄影单元,拍摄使用者的视线方向的被摄体;确认单元,通过基于在所述存储单元中存储的所述设备确定信息的图像解析,确认由所述摄影单元拍摄的摄影图像中有无所述信息设备;以及控制单元,根据所述确认单元对所述信息设备的确认结果,控制所述信息设备的功能执行。
根据本发明的一种信息处理系统中的信息设备的功能执行方法,该信息处理系统由执行规定功能的所述信息设备和与该信息设备进行通信的佩戴型信息设备构成,该信息设备的功能执行方法的特征在于,存储在确定事先登记的该信息设备时使用的设备确定信息;通过基于所存储的所述设备确定信息的图像解析,确认由所述佩戴型信息设备发送的摄影图像中有无该信息设备,所述摄影图像是所述佩戴型信息设备拍摄了该佩戴型信息设备的使用者的视线方向的被摄体的图像;根据对该信息设备的确认结果,执行所述规定功能。
根据本发明的一种信息处理系统中的佩戴型信息设备的信息通知方法,该信息处理系统由执行规定功能的信息设备和与该信息设备进行通信的所述佩戴型信息设备构成,该佩戴型信息设备的信息通知方法的特征在 于,存储在确定事先登记的所述信息设备时使用的设备确定信息;拍摄使用者的视线方向的被摄体;通过基于所存储的所述设备确定信息的图像解析,确认所拍摄的摄影图像中有无所述信息设备;将对所述信息设备的确认结果,通知给所述信息设备。
根据本发明的一种信息处理系统中的佩戴型信息设备的信息设备控制方法,该信息处理系统由执行规定功能的信息设备和与该信息设备进行通信的所述佩戴型信息设备构成,该佩戴型信息设备的信息设备控制方法的特征在于,存储在确定事先登记的所述信息设备时使用的设备确定信息;拍摄使用者的视线方向的被摄体;通过基于所存储的所述设备确定信息的图像解析,确认所拍摄的摄影图像中有无所述信息设备;根据对所述信息设备的确认结果,控制所述信息设备的功能执行。
附图说明
图1是表示将本发明的信息处理系统用于防止非法复制(skimming)的非法复制防止系统的结构图。
图2是表示手腕终端的结构的框图。
图3是表示头戴式显示器的结构的框图。
图4是表示第1实施方式的手腕终端和头戴式显示器的动作的序列图。
图5A是表示电子结算的实施状态的例子的说明图。
图5B是表示头戴式显示器的拍摄图像的例子的说明图。
图6是表示第2实施方式的手腕终端和头戴式显示器的动作的序列图。
图7是表示智能电话的结构的框图。
图8是表示第3实施方式的智能电话和头戴式显示器的动作的序列图。
具体实施方式
(第1实施方式)
下面,说明本发明的实施方式。图1是表示将本发明的信息处理系统用于防止非法复制(skimming)的非法复制防止系统的结构图。
本实施方式的非法复制防止系统由通过基于蓝牙(Bluetooth:注册商标)的近距离通信能够进行数据交换的手腕终端1和头戴式显示器(HMD: head Mounted Display)2构成。
手腕终端1是用户能够佩戴于手腕的手表型的信息设备,具有表壳101、显示部102和表带103,显示部102被配置在表壳101上,并且作为触碰面板发挥作用,表带103被安装在表壳101的两端部。
手腕终端1具有电子钱包功能,通过基于NFC的非接触通信与任意的具有结算终端的NFC卡读取器51之间进行数据通信,由此能够进行电子结算。
上述结算终端设置在便利店等店铺或商业设施中、或者组装在交通机构的自动改扎机上。
头戴式显示器(以下称为HMD)2是用户佩戴于头部的佩戴型信息终端,是在用户的视场内显示作为虚像的影像而不遮挡用户的视场的透射型。
HMD2由眼镜型的主体200和显示部201构成,显示部201被设于主体200的一侧,即位于用户的右眼的视场内,用于在用户的视场内显示上述影像。并且,在显示部201设有用于拍摄用户的视线方向的被摄体的摄像机部411。
图2是表示上述手腕终端1的电路结构的概略框图。
钟表部111由计时当前时刻的钟表电路构成。显示部102由彩色LCD(Liquid Crystal Display)和驱动该彩色LCD的驱动电路等构成。显示控制部112控制显示部102的显示状态。输入部113由在图1中省略了的各种开关构成。另外,输入部113还包括触碰传感器及其驱动电路,该触碰传感器覆盖显示部102的彩色LCD的表面,将显示部102作为触碰面板发挥作用。
CPU(Central Processing Unit:中央处理单元)114控制手腕终端1的各部分。程序存储器115预先存储了控制程序1151、应用程序1152和配对程序1153。
控制程序1151是用于使CPU 114控制手腕终端1整体的基础控制程序。
应用程序1152由用于使CPU 114进行包括后述的处理在内的各种处理的多种应用程序构成。并且,应用程序1152中包含有如下信息,即,在HMD2中,在使用公知的图像识别技术从拍摄手腕终端1而得到的摄影图 像中识别手腕终端1时所使用的终端确定信息,例如是表示手腕终端1的颜色和形状等特征的特征数据。
配对程序1153是用于与HMD2等之间进行蓝牙(注册商标)中的配对(连接设定)的程序。
内置存储器116是闪存等,存储了用于决定手腕终端1的动作内容的各种设定信息、以及包含在电子结算中使用的手腕终端1所固有的ID号码及余额数据等数据的各种数据。
无线I/F部117在与HMD2之间进行基于蓝牙(注册商标)的数据通信。NFC I/F部118包括环状天线和收发电路,与所述NFC卡读取器51之间进行基于NFC的非接触通信,并进行电子结算所需的数据通信。
图3是表示HMD2的电路结构的概略框图。
显示部201由LED等光源、透射型的液晶显示元件及其驱动电路构成,该液晶显示元件显示基于图像数据的图像。虽然未图示,但显示部201中收纳了:投影透镜,调整由所述液晶显示元件显示的图像的大小;以及光学系统,由在内部形成有半透半反镜层的导光板构成。并且,在显示部201中,光源发出的光通过液晶显示元件被变换为投影光,再通过投影透镜被投影到导光板内部的半透半反镜层上,由此在视场内显示作为虚像的影像而不会遮挡用户的右眼的视场。
摄像机部211由CMOS(Complementary Metal Oxide Semiconductor:互补金属氧化物半导体)型或CCD(Charge Coupled Device:电荷耦合装置)等摄像元件、和信号处理电路等构成,该信号处理电路根据通过摄像元件而得到的摄像信号生成摄影图像数据。
显示控制部212控制在显示部201中的影像的显示。输入部213由在图1中省略了的各种开关构成。
CPU 214控制HMD2整体。程序存储器215是预先存储了控制程序2151、应用程序2152、和配对程序2153的存储器。 
控制程序2151是用于使CPU 214控制HMD2整体的基础控制程序。应用程序2152由用于使CPU 214进行包括后述的处理在内的各种处理的多种应用程序构成。配对程序2153是用于与手腕终端1等之间进行蓝牙(注册商标)中的配对(连接设定)的程序。
内置存储器216是闪存等,存储了用于决定HMD2的动作内容的各种设定信息、由摄像机部211拍摄到的被摄体的摄影图像数据、以及与通过上述配对而预先登记的一台或者多台手腕终端1和其它各种信息设备相关的登记信息。
登记信息中有关手腕终端1的登记信息包括在针对拍摄已登记的手腕终端1而得到的摄影图像来识别该手腕终端1时使用的前述的终端确定信息,该终端确定信息与已登记的手腕终端1的个体识别用的ID数据相对应地存储在内置存储器216中。
无线I/F部218与手腕终端1等之间进行基于蓝牙(注册商标)的数据通信。
下面,说明由以上要素构成的手腕终端1和HMD2的与本发明相关的动作。
图4是表示用户使用本实施方式的防止非法复制系统时的手腕终端1和HMD2的动作内容的序列图。更具体地讲,示出了通过在手腕终端1中CPU 114执行在程序存储器115中存储的所述各程序,以及在HMD2中CPU214执行在程序存储器215中存储的所述各程序,而实施的动作内容。
在使用本实施方式的防止非法复制系统时,用户首先在手腕终端1和HMD2双方中进行规定的设定操作(S1)。
然后,在手腕终端1和HMD2之间相互进行蓝牙链接处理(公知的配对处理)(S2、S3),由此能够实现双方之间的数据通信。
然后,HMD2向手腕终端1请求终端的终端确定信息(S4)。针对该请求,手腕终端1向HMD2发送终端确定信息(S5)。HMD2将接收到的终端确定信息、与通过配对处理而得到的手腕终端1的ID数据相对应地存储在内置存储器216中(S6)。由此,处于采取了非法复制对策的状态。
然后,在这种状态下,用户例如按照图5A所示将手腕终端1触碰(或罩于)NFC卡读取器51时(S7),首先从NFC卡读取器51向手腕终端1发送NFC通信请求(S8)。
接收到NFC通信请求的手腕终端1向HMD2发送“NFC通信许可请求”(S9)。即,向HMD2询问是否许可执行NFC通信。
接收到该请求的HMD2在摄像机部211中拍摄用户的视线方向的被摄 体,并且使用事先从手腕终端1取得并存储的终端确定信息进行识别处理,在摄影图像中识别该手腕终端1(S10)。即,HMD2确认“NFC通信许可请求”的发信源即手腕终端1是否作为被摄体被摄入摄影图像内。
另外,也可以在防止非法复制系统的使用过程中定常地进行上述被摄体的拍摄。
HMD2在预先决定的规定时间内反复进行该处理。即,即使在处理开始当初或者在处理开始之后未能识别出手腕终端1时,以在规定时间内为限度,按照规定的时间间隔反复进行拍摄,并对各摄影图像逐次进行识别处理。
然后,HMD2在所述规定时间经过以前能够取得如图5B所示的摄影图像G,当在摄影图像G中识别出该手腕终端1的情况下,向手腕终端1发送“NFC通信许可”(S11)。即,进行表示可以进行NFC通信的答复。
在接收到“NFC通信许可”的情况下,手腕终端1进行与来自NFC卡读取器51的请求对应的NFC通信,即进行手腕终端1固有的ID号码和余额数据等的发送(S12)。由此,实施各种电子结算。
另一方面,HMD2在所述规定时间内不能在摄影图像中识别出“NFC通信许可请求”的发信源即手腕终端1的情况下,向手腕终端1发送“NFC通信拒绝”(S13)。即,HMD2判定为有可能被进行了非法复制,并向手腕终端1进行表示不能进行NFC通信的答复。
在接收到上述“NFC通信拒绝”的情况下,手腕终端1针对来自NFC卡读取器51的请求不进行任何响应,并停止自此以后与NFC卡读取器51的NFC通信。其结果是,NFC卡读取器51不能在规定时间以内得到来自手腕终端1的响应,进行NFC通信的超时故障处理,并且结束NFC通信。
如上所述,在本实施方式的防止非法复制系统中,如果在从手腕终端1接收到“NFC通信许可请求”的时刻或者在规定时间内,在HMD2中不能拍摄到手腕终端1,在手腕终端1中自此以后与NFC卡读取器51的NFC通信将自动停止。
在此,通常用户在按照自己的意志将手腕终端1触碰NFC卡读取器51的情况下,用户的视线注视着手腕终端1,在该时刻或者规定时间内,在HMD2中拍摄到手腕终端1。
与此相对,当诸如在用户不知道的期间NFC卡读取器51一方被手腕终端1触碰的情况下,即,在尝试对手腕终端1进行非法复制的情况下,用户的视线没有注视手腕终端1,因而在规定时间内,在HMD2中不能拍摄到手腕终端1。其结果是,手腕终端1通过停止自此以后与NFC卡读取器51的NFC通信,能够可靠地防止非法复制。
因此,用户在使用手腕终端1的电子钱包功能时,仅单纯地将人脸朝向手腕终端1,即可进行电子结算。同时能够可靠地防止非法复制。
因此,根据本实施方式的防止非法复制系统,能够在不降低手表型的信息设备(手腕终端)的便利性的情况下,确保较高的安全性能。
在此,在本实施方式中假设事先在手腕终端1中准备了终端确定信息,该终端确定信息是在HMD2从摄影图像中识别已登记的手腕终端1时使用的信息。但是,上述的终端确定信息例如能够通过在登记手腕终端1时拍摄手腕终端1,并解析该摄影图像而随时取得。
另外,在本实施方式中,从摄影图像中识别已登记的手腕终端1本身。即,通过进行所谓对象识别,确认摄影图像内有无手腕终端1。但是,本发明不将手腕终端1的识别方法限定为本实施例的方法。
例如,也可以是,在手腕终端1中搭载LED,利用可见光通信来确认摄影图像内有无手腕终端1。另外,也可以是,在从NFC卡读取器51接收到NFC通信请求的时刻等,在手腕终端1的显示部102显示规定的识别用图像(二维条形码等),通过识别该识别用图像,可以确认摄影图像内有无手腕终端1。另外,也可以在手腕终端1中预先准备上述的识别用图像,还可以是,HMD2在登记手腕终端1时自动分配识别用图像并提供给手腕终端1。
另外,也可以构成为,在本实施方式所说明的结构基础上,例如HMD2始终在用户的视场内显示手腕终端1中的基于NFC的电子结算的进展状况等。在这种情况下,在对手腕终端1尝试非法复制时,能够马上让用户知道该情况,能够进一步确保较高的安全性能。
另外,如果能够进一步确保较高的安全性能,也可以是如下方式。例如,HMD2不是将仅在摄影图像内确认到手腕终端1作为NFC通信的许可条件,也可以与此并行地将在HMD2(摄像机部211)的摄影视场角内能够 识别出事先决定的用户的确定的姿势、或在HMD2中进行了规定的开关操作,作为NFC通信的许可条件。
另外,在本实施方式中,关于构成防止非法复制系统的佩戴型信息设备,示出了HMD2。但是,本发明的佩戴型信息设备只要是在从手腕终端1接收到“NFC通信许可请求”时、能够拍摄用户的视线方向的被摄体的结构即可,在实施本发明时,也能够适当采用除此以外的任意的佩戴型信息设备取代HMD2。
另外,在本实施方式中,关于构成防止非法复制系统的信息设备,示出了手腕终端1。但是,本发明的信息设备只要能够进行基于非接触通信的保有数据的读出即可,本发明对于防止对手腕终端1以外的任意的信息设备的非法复制也是有效的。手腕终端1以外的信息设备例如包括戒指式的佩戴型信息设备,另外不限于佩戴型信息设备,也包括具有电子钱包功能的移动电话和智能电话等。
另外,在本实施方式中,也可以是,手腕终端1将“NFC通信许可请求”发送给HMD2,HMD2根据来自手腕终端1的“NFC通信许可请求”,在经过规定时间以前,确认了在摄影图像内是否作为被摄体识别出“NFC通信许可请求”的发送源即手腕终端1,但HMD2与基于手腕终端1的“NFC通信许可请求”无关,将是否在摄影图像内作为被摄体拍摄了手腕终端1通知给手腕终端1,手腕终端1根据通知结果,控制NFC通信。即,在HMD2通知了作为被摄体识别出手腕终端1的情况下,手腕终端1将电子钱包功能开启,在HMD2通知了作为被摄体没有识别出手腕终端1的情况下,手腕终端1将电子钱包功能关闭。
另外,在本实施方式中,说明了在手腕终端1中成为防止非法复制对象的数据是在电子结算中使用的数据的情况。但是,成为防止非法复制对象的数据不限于上述数据,如果是通过基于任意规格的非接触通信而成为选拔对象的数据,则也可以是上述以外的任意数据。
通过非接触通信而成为选拔对象的数据,例如包括在手腕终端1具有取得表示用户的身体状态的生命特征信息并进行积累的功能时的生命特征信息、在手腕终端1具有取得表示用户的行动履历的行动履历数据(GPS信息等)并进行积累的功能时的行动履历数据。
(第2实施方式)
在第1实施方式中,将本发明的信息处理系统利用于防止非法复制,在第2实施方式中,说明作为手表型的信息设备(手腕终端)的显示控制系统利用的情况。
本实施方式的显示控制系统由基于蓝牙(注册商标)的近距离通信而能够进行数据交换的手腕终端1和头戴式显示器HMD2构成。
另外,第2实施方式的手腕终端1以及HMD2的电路结构与第1实施方式相同,因此省略说明。
手腕终端1与一般的手表不同,手腕终端1本身例如实施地图显示等的高级处理,并将该处理结果显示在手腕终端1具有的显示部102上,因此显示部102大多由高精细的彩色LCD等构成,存在显示部102产生大量电力消耗的问题。
图6是表示用户使用本实施方式的显示控制系统时的手腕终端1与HMD2的动作内容的序列图。更具体来说,在手腕终端1中,CPU114执行存储在程序存储器115中的所述各程序,在HMD2中,对通过CPU214执行存储在程序存储器215中的所述各程序而实施的动作内容进行显示。
在本实施方式的显示控制系统的使用时,用户首先在手腕终端1和HMD2的双方进行规定的设定操作(S21)。
于是,手腕终端1与HMD2之间相互进行Bluetooth链接处理(公知的配对处理)(S22、S23),由此在双方之间能够进行数据通信。
接着,HMD2对手腕终端1请求终端的终端确定信息(S24)。针对该请求,手腕终端1对HMD2发送终端确定信息(S25)。HMD2将接收到的终端确定信息与在配对处理中得到的手腕终端1的ID数据对应而存储在内置存储器216中(S26)。由此,成为采取了显示控制对策的状态。
在采取了显示控制对策之后,当经过规定时间时,手腕终端1将显示部102的显示关闭(S27)。
另一方面,HMD2在摄像机部211中,定期拍摄用户的视线方向的被摄体,并且,进行使用事先从手腕终端1取得并存储的终端确定信息的识别处理,在拍摄图像中识别该手腕终端1(S28)。即,HMD2定期地确认手腕终端1是否作为被摄体被摄入在拍摄图像内。
HMD2在预先决定的规定时间内反复进行该处理。即,即使在处理开始当初,或者处理开始之后没能识别出手腕终端1,但以规定时间内为限度按照规定的时间间隔反复进行拍摄,对各拍摄图像依次进行识别处理。
然后,在该状态下,用户将手腕终端1罩在用户的脸部的前方,在经过上述规定时间以前,HMD2能够取得手腕终端1的拍摄图像,并在该拍摄图像中识别出了该手腕终端1的情况下,将“显示部显示开启”发送给手腕终端1(S29)。即,返回可以将显示部102的显示开启的旨意的回答。
在接收到“显示部显示开启”的情况下,手腕终端1将显示部102的显示开启(S30)。由此,用户能够确认在手腕终端1的显示部102上显示的内容。
另一方面,在HMD2在上述规定时间内在拍摄图像中没能识别出手腕终端1的情况下,将“显示部显示关闭”发送给手腕终端1(S31)。即,HMD2判断为用户没有看到手腕终端1,并对手腕终端1进行将显示部102的显示关闭的旨意的答复。
在接收到上述“显示部显示关闭”的情况下,手腕终端1使显示部102的显示关闭(S32)。
如上所述,在本实施方式的显示控制系统中,仅在用户将手腕终端1罩在用户的脸部的前方之时,显示部102的显示开启,在用户看不到手腕终端1时,手腕终端1的显示部102的显示关闭。
因此,根据本实施方式的显示控制系统,在手腕终端1中,能够大幅削减电力消耗而不降低利便性。
(第3实施方式)
在第2实施方式中,将本发明的信息处理系统利用于手表型的信息设备(手腕终端)的显示控制,但在第3实施方式中,说明作为智能电话的安全锁控制系统进行利用的情况。
本实施方式的安全锁控制系统由基于蓝牙(注册商标)的近距离通信而能够进行数据交换的智能电话3和头戴式显示器HMD2构成。
图7是表示智能电话3的电路结构的概略框图。302是显示部,由彩色LCD和驱动该彩色LCD的驱动电路等构成。312表示显示控制部,控制显示部302的显示状态。313表示输入部,由电源键和其他各种开关构成。另 外,输入部313还包括触碰传感器及其驱动电路,该触碰传感器覆盖显示部302的彩色LCD的表面,将显示部302作为触碰面板发挥作用。
314表示CPU,控制智能电话3整体。315表示程序存储器,预先存储了控制程序3151、应用程序3152和配对程序3153。
控制程序3151是用于使CPU 314控制智能电话3整体的基础控制程序。应用程序3152由用于使CPU 314进行包括后述的处理在内的各种处理的多种应用程序构成。配对程序3153是用于与HMD2等之间进行配对(连接设定)的程序。
316表示闪存等内置存储器,存储用于决定智能终端3的动作内容的各种设定信息等。
317表示与HMD2之间进行基于Bluetooth(注册商标)的信息收发的无线I/F部。318表示通信I/F部,用于利用无线LAN等公众线路将智能电话3连接于因特网。
另外,智能电话3具有用于进行语音通信和数据通信的公知的电路,即对所输入的声音进行调制并发送的声音输入电路、发送电路、以及接收所接收到的声音信号并进行解码再现的接收电路、再现电路和数据收发电路等,关于这些电路省略图示及说明。
另外,第3实施方式中的HMD2的电路结构与第1实施方式相同,因此省略说明。
智能电话3将个人信息等各种重要数据保存在该智能电话内部,一般,为了不被智能电话3的用户以外的人物所操作而锁上安全锁。
为了解除安全锁,例如,通过智能电话3的用户输入所设定的几位数字、在智能电话3的触摸面板上描绘规定的轨迹来解除,但存在每当用户使用智能电话3时就必须进行上述操作,虽然确保了安全性,但利便性降低的问题。
图8是表示用户使用本实施方式的安全锁控制系统时的智能电话3和HMD2的动作内容的序列图。更具体来说,在智能电话3中,CPU314执行程序存储器315中存储的所述各程序,在HMD2中,显示通过CPU214执行程序存储器215中存储的所述各程序而实施的动作内容。
在本实施方式的安全锁控制的使用时,用户首先在智能电话3与HMD2 的双方中进行规定的设定操作(S41)。
于是,在智能电话3与HMD2之间相互进行Bluetooth链接处理(公知的配对处理)(S42,S43),由此在双方之间能够进行数据通信。
接着,HMD2对智能电话3请求终端的终端确定信息(S44)。针对该请求,智能电话3对HMD2发送终端确定信息(S45)。HMD2将接收到的终端确定信息与在配对处理中得到的智能电话3的ID数据对应而存储在内置存储器216中(S46)。由此成为采取了安全锁控制对策。
在采取了安全锁控制对策之后,当经过规定时间时,智能电话3对本身的终端锁上安全锁(S47)。
另一方面,HMD2在摄像机部211中定期地对用户的视线方向的被摄体进行拍摄,并进行采用了事先从智能电话3取得并存储的终端确定信息的识别处理,在拍摄图像中识别该智能电话3(S48)。即,HMD2定期地确认智能电话3是否作为被摄体被摄入在拍摄图像内。
HMD2在预先决定的规定时间内反复进行该处理。即,即使在处理开始当初,或者处理开始之后没能识别出智能电话3,但以规定时间内为限度按照规定的时间间隔反复进行拍摄,对各拍摄图像依次进行识别处理。
然后,在该状态下,用户将智能终端3罩在用户的脸部的前方,在经过上述规定时间以前,HMD2能够取得智能电话3的拍摄图像,并在该拍摄图像中识别出了该智能电话3的情况下,将“安全锁关闭”发送给智能电话3(S49)。即,进行可以将智能电话3的安全锁解除的旨意的答复。
在接收到“安全锁关闭”的情况下,智能电话3将本身的安全锁解除(S50)。由此,用户能够直接操作智能电话3。
另一方面,在HMD2在上述规定时间内在拍摄图像中没能识别出智能电话3的情况下,将“安全锁开启”发送给智能电话3(S51)。即,HMD2判断为用户没有看到智能电话3,并对智能电话3进行将安全锁锁上的旨意的答复。
在接收到上述“安全锁开启”的情况下,智能电话3对本身的终端锁上安全锁(S52)。
如上所述,在本实施方式的安全锁控制系统中,仅在用户将智能电话3罩在用户的脸部的前方之时,安全锁解除,在用户看不到智能电话3时, 安全锁锁上。
因此,根据本实施方式的安全锁控制系统,在智能电话3中,能够确保安全性而不降低利便性。
另外,在上述第1~第3实施方式中,对信息设备的设备控制实施了手表型的信息设备(手腕终端)的防止非法复制、显示控制以及智能电话的安全锁控制,但并不限定于这些实施方式。
以上对本发明的实施方式及其变形例进行了说明,但这些实施方式及其变形例能够在可以得到本发明的作用效果的范围内进行适当变更,变更后的实施方式也包含在权利要求书所记载的发明以及与本发明同等的发明的范围内。

Claims (12)

1.一种信息处理系统,由执行规定功能的信息设备和与该信息设备进行通信的佩戴型信息设备构成,该信息处理系统的特征在于,
所述佩戴型信息设备具有:
存储单元,存储在确定事先登记的所述信息设备时使用的设备确定信息;
摄影单元,拍摄使用者的视线方向的被摄体;
确认单元,通过基于在所述存储单元中存储的所述设备确定信息的图像解析,确认由所述摄影单元拍摄到的摄影图像中有无所述信息设备;以及
通知单元,将所述确认单元对所述信息设备的确认结果,通知给所述信息设备,
所述信息设备具有功能执行单元,
所述功能执行单元根据来自所述佩戴型信息设备的所述通知单元的对所述信息设备的确认结果,执行所述规定功能。
2.一种信息处理系统,由执行规定功能的信息设备和与该信息设备进行通信的佩戴型信息设备构成,该信息处理系统的特征在于,
所述佩戴型信息设备具有:
存储单元,存储在确定事先登记的所述信息设备时使用的设备确定信息;
摄影单元,拍摄使用者的视线方向的被摄体;
确认单元,通过基于在所述存储单元中存储的所述设备确定信息的图像解析,确认由所述摄影单元拍摄到的摄影图像中有无所述信息设备;以及
控制单元,根据所述确认单元对所述信息设备的确认结果,控制所述信息设备的功能执行,
所述信息设备具有功能执行单元,
所述功能执行单元根据由所述佩戴型信息设备的所述控制单元进行的控制,执行所述规定功能。
3.一种信息处理系统,由执行规定功能的信息设备和与该信息设备进行通信的佩戴型信息设备构成,该信息处理系统的特征在于,
所述佩戴型信息设备具有:
摄影单元,拍摄使用者的视线方向的被摄体;以及
图像发送单元,将由所述摄影单元拍摄的摄影图像发送给所述信息设备,
所述信息设备具有:
功能执行单元,执行所述规定功能;
存储单元,存储在确定事先登记的该信息设备时使用的设备确定信息;
确认单元,通过基于在所述存储单元中存储的所述设备确定信息的图像解析,确认由所述佩戴型信息设备发送的所述摄影图像中有无该信息设备;以及
控制单元,根据所述确认单元对所述信息设备的确认结果,控制所述功能执行单元的功能执行。
4.一种信息处理系统中的信息设备,该信息处理系统由执行规定功能的所述信息设备和与该信息设备进行通信的佩戴型信息设备构成,该信息设备的特征在于,具有:
功能执行单元,执行所述规定功能;
存储单元,存储在确定事先登记的该信息设备时使用的设备确定信息;
确认单元,通过基于在所述存储单元中存储的所述设备确定信息的图像解析,确认由所述佩戴型信息设备发送的摄影图像中有无该信息设备,所述摄影图像是所述佩戴型信息设备拍摄了该佩戴型信息设备的使用者的视线方向的被摄体的图像;以及
控制单元,根据所述确认单元对所述信息设备的确认结果,控制所述功能执行单元的功能执行。
5.如权利要求4所述的信息设备,其特征在于,
所述信息设备能够通过非接触通信读出保有数据,该信息设备的所述功能执行单元通过所述非接触通信执行所述保有数据的发送处理。
6.如权利要求4所述的信息设备,其特征在于,
所述信息设备具有显示规定信息的显示部,该信息设备的所述功能执行单元执行所述显示部的显示控制。
7.如权利要求4所述的信息设备,其特征在于,
该信息设备能够由安全锁将本身的操作无效,该信息设备的所述功能执行单元执行所述安全锁的控制。
8.一种信息处理系统中的佩戴型信息设备,该信息处理系统由执行规定功能的信息设备和与该信息设备进行通信的所述佩戴型信息设备构成,该佩戴型信息设备的特征在于,具有:
存储单元,存储在确定事先登记的所述信息设备时使用的设备确定信息;
摄影单元,拍摄使用者的视线方向的被摄体;
确认单元,通过基于在所述存储单元中存储的所述设备确定信息的图像解析,确认由所述摄影单元拍摄到的摄影图像中有无所述信息设备;以及
通知单元,将所述确认单元对所述信息设备的确认结果,通知给所述信息设备。
9.一种信息处理系统中的佩戴型信息设备,该信息处理系统由执行规定功能的信息设备和与该信息设备进行通信的所述佩戴型信息设备构成,该佩戴型信息设备的特征在于,具有:
存储单元,存储在确定事先登记的所述信息设备时使用的设备确定信息;
摄影单元,拍摄使用者的视线方向的被摄体;
确认单元,通过基于在所述存储单元中存储的所述设备确定信息的图像解析,确认由所述摄影单元拍摄到的摄影图像中有无所述信息设备;以及
控制单元,根据所述确认单元对所述信息设备的确认结果,控制所述信息设备的功能执行。
10.一种信息处理系统中的信息设备的功能执行方法,该信息处理系统由执行规定功能的所述信息设备和与该信息设备进行通信的佩戴型信息设备构成,该信息设备的功能执行方法的特征在于,
存储在确定事先登记的该信息设备时使用的设备确定信息;
通过基于所存储的所述设备确定信息的图像解析,确认由所述佩戴型信息设备发送的摄影图像中有无该信息设备,所述摄影图像是所述佩戴型信息设备拍摄了该佩戴型信息设备的使用者的视线方向的被摄体的图像;
根据对该信息设备的确认结果,执行所述规定功能。
11.一种信息处理系统中的佩戴型信息设备的信息通知方法,该信息处理系统由执行规定功能的信息设备和与该信息设备进行通信的所述佩戴型信息设备构成,该佩戴型信息设备的信息通知方法的特征在于,
存储在确定事先登记的所述信息设备时使用的设备确定信息;
拍摄使用者的视线方向的被摄体;
通过基于所存储的所述设备确定信息的图像解析,确认所拍摄的摄影图像中有无所述信息设备;
将对所述信息设备的确认结果,通知给所述信息设备。
12.一种信息处理系统中的佩戴型信息设备的信息设备控制方法,该信息处理系统由执行规定功能的信息设备和与该信息设备进行通信的所述佩戴型信息设备构成,该佩戴型信息设备的信息设备控制方法的特征在于,
存储在确定事先登记的所述信息设备时使用的设备确定信息;
拍摄使用者的视线方向的被摄体;
通过基于所存储的所述设备确定信息的图像解析,确认所拍摄的摄影图像中有无所述信息设备;
根据对所述信息设备的确认结果,控制所述信息设备的功能执行。
CN201510133686.6A 2014-04-01 2015-03-25 信息处理系统、信息设备、佩戴型信息设备 Active CN104978020B (zh)

Applications Claiming Priority (4)

Application Number Priority Date Filing Date Title
JP2014075419 2014-04-01
JP2014-075419 2014-04-01
JP2014210340A JP5928551B2 (ja) 2014-04-01 2014-10-15 情報処理システム、情報機器、装着型情報機器、情報機器の機能実行方法、装着型情報機器の情報通知方法、装着型情報機器の情報機器制御方法、装着型情報機器の画像送信方法、及びプログラム
JP2014-210340 2014-10-15

Publications (2)

Publication Number Publication Date
CN104978020A true CN104978020A (zh) 2015-10-14
CN104978020B CN104978020B (zh) 2018-05-08

Family

ID=54192180

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201510133686.6A Active CN104978020B (zh) 2014-04-01 2015-03-25 信息处理系统、信息设备、佩戴型信息设备

Country Status (3)

Country Link
US (1) US10025350B2 (zh)
JP (1) JP5928551B2 (zh)
CN (1) CN104978020B (zh)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN107272209A (zh) * 2017-07-31 2017-10-20 深圳市美誉镜界光电科技有限公司 适用于各种眼镜的全息图像显示装置及全息图像的显示方法

Families Citing this family (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20170067058A (ko) * 2015-12-07 2017-06-15 엘지전자 주식회사 이동 단말기 및 그 제어방법
CN105573471A (zh) * 2015-12-15 2016-05-11 小米科技有限责任公司 信息处理方法和装置
JP2018124651A (ja) 2017-01-30 2018-08-09 セイコーエプソン株式会社 表示システム
GB2572638B (en) * 2018-04-06 2020-04-01 Dnanudge Ltd Wrist-worn product code reader
JP2022137622A (ja) 2021-03-09 2022-09-22 キヤノン株式会社 ウェアラブル端末、その制御方法及びプログラム
WO2024034011A1 (ja) * 2022-08-09 2024-02-15 マクセル株式会社 連係表示システム及び連係表示方法

Citations (11)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2005190205A (ja) * 2003-12-25 2005-07-14 Japan Science & Technology Agency アイコンタクトコミュニケーションシステム、方法及びプログラム
CN1742278A (zh) * 2002-12-18 2006-03-01 讯宝科技公司 校验光学代码读取和rfid读取的系统和方法
CN101350877A (zh) * 2007-07-18 2009-01-21 索尼株式会社 成像系统、成像指令发出装置、成像装置和成像方法
US20090081950A1 (en) * 2007-09-26 2009-03-26 Hitachi, Ltd Portable terminal, information processing apparatus, content display system and content display method
JP2009267644A (ja) * 2008-04-23 2009-11-12 Sony Ericsson Mobilecommunications Japan Inc 携帯端末、その表示制御方法および表示制御プログラム
JP2011172037A (ja) * 2010-02-19 2011-09-01 Sanyo Electric Co Ltd 無線装置
JP2012088984A (ja) * 2010-10-21 2012-05-10 Nikon Corp 携帯端末、画像表示装置及び画像表示システム
JP2013021440A (ja) * 2011-07-08 2013-01-31 Nec Casio Mobile Communications Ltd 遠隔制御装置、遠隔制御方法およびプログラム
CN202795232U (zh) * 2012-09-17 2013-03-13 武汉元宝创意科技有限公司 一种基于视线追踪技术的演示系统
JP2013172432A (ja) * 2012-02-23 2013-09-02 Panasonic Corp 機器制御装置、機器制御方法、機器制御プログラム、及び集積回路
CN103324309A (zh) * 2013-06-18 2013-09-25 杭鑫鑫 可穿戴计算机

Family Cites Families (13)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH10228515A (ja) 1997-02-17 1998-08-25 Omron Corp 電子現金保持装置
EP1098271A1 (en) 1999-11-03 2001-05-09 Kim, Seon-seob Portable phone set installing non touch-type IC
JP2002152327A (ja) 2000-11-09 2002-05-24 Citizen Watch Co Ltd 通信機能つき電子腕時計および携帯電話機
JP2002197421A (ja) 2000-12-25 2002-07-12 Seiko Epson Corp 腕時計型情報機器、情報記録媒体、通信システム及び腕時計型情報機器の通信制御方法
US6913199B2 (en) * 2002-12-18 2005-07-05 Symbol Technologies, Inc. System and method for verifying optical character recognition of optical code reads
JP2004214994A (ja) 2002-12-27 2004-07-29 Matsushita Electric Ind Co Ltd 情報処理装置及びその機器及び通信機器
JP2007195028A (ja) 2006-01-20 2007-08-02 Seiko Epson Corp 有料コンテンツ課金決済システムおよびパネルディスプレイ装置ならびにリモートコントローラ
JP2008186297A (ja) 2007-01-30 2008-08-14 Kyocera Corp 電子マネー決済システムおよび携帯端末
JP2009048488A (ja) 2007-08-21 2009-03-05 Sony Corp 電子財布装置、電子バリュー利用方法及びプログラム
US20130342672A1 (en) * 2012-06-25 2013-12-26 Amazon Technologies, Inc. Using gaze determination with device input
US20140187233A1 (en) * 2012-12-27 2014-07-03 Compal Communications, Inc. Watch type mobile terminal
JP6119538B2 (ja) 2013-09-30 2017-04-26 カシオ計算機株式会社 カメラ装置、その消費電力制御方法、撮像装置、操作装置、及びプログラム
KR102184272B1 (ko) * 2014-06-25 2020-11-30 엘지전자 주식회사 글래스 타입 단말기 및 이의 제어방법

Patent Citations (11)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN1742278A (zh) * 2002-12-18 2006-03-01 讯宝科技公司 校验光学代码读取和rfid读取的系统和方法
JP2005190205A (ja) * 2003-12-25 2005-07-14 Japan Science & Technology Agency アイコンタクトコミュニケーションシステム、方法及びプログラム
CN101350877A (zh) * 2007-07-18 2009-01-21 索尼株式会社 成像系统、成像指令发出装置、成像装置和成像方法
US20090081950A1 (en) * 2007-09-26 2009-03-26 Hitachi, Ltd Portable terminal, information processing apparatus, content display system and content display method
JP2009267644A (ja) * 2008-04-23 2009-11-12 Sony Ericsson Mobilecommunications Japan Inc 携帯端末、その表示制御方法および表示制御プログラム
JP2011172037A (ja) * 2010-02-19 2011-09-01 Sanyo Electric Co Ltd 無線装置
JP2012088984A (ja) * 2010-10-21 2012-05-10 Nikon Corp 携帯端末、画像表示装置及び画像表示システム
JP2013021440A (ja) * 2011-07-08 2013-01-31 Nec Casio Mobile Communications Ltd 遠隔制御装置、遠隔制御方法およびプログラム
JP2013172432A (ja) * 2012-02-23 2013-09-02 Panasonic Corp 機器制御装置、機器制御方法、機器制御プログラム、及び集積回路
CN202795232U (zh) * 2012-09-17 2013-03-13 武汉元宝创意科技有限公司 一种基于视线追踪技术的演示系统
CN103324309A (zh) * 2013-06-18 2013-09-25 杭鑫鑫 可穿戴计算机

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN107272209A (zh) * 2017-07-31 2017-10-20 深圳市美誉镜界光电科技有限公司 适用于各种眼镜的全息图像显示装置及全息图像的显示方法

Also Published As

Publication number Publication date
CN104978020B (zh) 2018-05-08
US10025350B2 (en) 2018-07-17
JP5928551B2 (ja) 2016-06-01
US20150281569A1 (en) 2015-10-01
JP2015201160A (ja) 2015-11-12

Similar Documents

Publication Publication Date Title
CN104978020A (zh) 信息处理系统、信息设备、佩戴型信息设备
CN104463573A (zh) 信息设备、便携设备、佩戴型信息设备、电子结算系统及方法、防止非法复制系统及方法
RU2636693C2 (ru) Способ и устройство для управления состоянием экрана терминала, а также электронное устройство
CN106408295A (zh) 移动终端及其控制方法
EP1723580B1 (en) Image pickup apparatus, electronic tag reading apparatus, and program
CN104090383A (zh) 智能巡航眼镜及其控制系统
CN109831622A (zh) 一种拍摄方法及电子设备
US11373450B2 (en) Eye-mounted authentication system
EP3904969A1 (en) Information processing method, wearable electronic device, electronic device and storage medium
JP5019228B2 (ja) 画像撮影装置及びプログラム
CN108476273B (zh) 信息处理装置及其图像数据控制方法
CN106254766A (zh) 后置摄像头的控制方法、装置及终端
KR20160070080A (ko) 이동 데이터 단말기용 인증 시스템
CN111339513B (zh) 数据分享的方法和装置
CN113822643A (zh) 设置出行提醒的方法和装置
JP2009105789A (ja) 撮像装置、撮像システム、電子機器、撮影画像管理システムおよびプログラム
CN105787412B (zh) 信息读取方法及装置
CN112183208A (zh) 一种身份识别方法及设备
CN211827084U (zh) 一种可穿戴电子设备以及电子设备
CN103970782B (zh) 电子设备以及存储数据的方法
CN111679422B (zh) 显微镜、图像处理系统及图像处理方法
CN106131426A (zh) 摄像头的控制方法、装置及终端
JP4347039B2 (ja) 携帯通信端末および無線通信装置並びに商品管理システム
CN115278617A (zh) 接触追踪方法及相关设备
CN117274663A (zh) 一种目标检测方法和电子设备

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant