CN104270547B - 通信方法、通信装置及位置检测方法 - Google Patents

通信方法、通信装置及位置检测方法 Download PDF

Info

Publication number
CN104270547B
CN104270547B CN201410509495.0A CN201410509495A CN104270547B CN 104270547 B CN104270547 B CN 104270547B CN 201410509495 A CN201410509495 A CN 201410509495A CN 104270547 B CN104270547 B CN 104270547B
Authority
CN
China
Prior art keywords
information
mentioned
image
server
camera
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201410509495.0A
Other languages
English (en)
Other versions
CN104270547A (zh
Inventor
大西聪明
山冈胜
大岛光昭
松本通弘
大平智亮
大坪绍二
向井务
松下阳介
中江宏典
山田和范
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Sun Patent Trust Inc
Original Assignee
Panasonic Intellectual Property Corp of America
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Panasonic Intellectual Property Corp of America filed Critical Panasonic Intellectual Property Corp of America
Publication of CN104270547A publication Critical patent/CN104270547A/zh
Application granted granted Critical
Publication of CN104270547B publication Critical patent/CN104270547B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • GPHYSICS
    • G08SIGNALLING
    • G08CTRANSMISSION SYSTEMS FOR MEASURED VALUES, CONTROL OR SIMILAR SIGNALS
    • G08C17/00Arrangements for transmitting signals characterised by the use of a wireless electrical link
    • GPHYSICS
    • G08SIGNALLING
    • G08CTRANSMISSION SYSTEMS FOR MEASURED VALUES, CONTROL OR SIMILAR SIGNALS
    • G08C2201/00Transmission systems of control signals via wireless link
    • G08C2201/20Binding and programming of remote control devices
    • GPHYSICS
    • G08SIGNALLING
    • G08CTRANSMISSION SYSTEMS FOR MEASURED VALUES, CONTROL OR SIMILAR SIGNALS
    • G08C2201/00Transmission systems of control signals via wireless link
    • G08C2201/30User interface
    • G08C2201/32Remote control based on movements, attitude of remote control device
    • GPHYSICS
    • G08SIGNALLING
    • G08CTRANSMISSION SYSTEMS FOR MEASURED VALUES, CONTROL OR SIMILAR SIGNALS
    • G08C2201/00Transmission systems of control signals via wireless link
    • G08C2201/70Device selection
    • G08C2201/71Directional beams
    • GPHYSICS
    • G08SIGNALLING
    • G08CTRANSMISSION SYSTEMS FOR MEASURED VALUES, CONTROL OR SIMILAR SIGNALS
    • G08C2201/00Transmission systems of control signals via wireless link
    • G08C2201/90Additional features
    • G08C2201/91Remote control based on location and proximity

Abstract

本申请提供一种通信方法、通信装置及位置检测方法。该通信方法通过具有多个天线的通信装置进行通信,包括以下步骤:使用上述多个天线,接收由便携通信终端发送的电波的步骤;计算由上述多个天线接收的电波的相位及振幅的特性,基于上述特性,检测上述便携通信终端的位置的步骤;生成对于上述便携通信终端的位置最佳的波束的步骤;从上述多个天线发送上述最佳的波束的步骤。

Description

通信方法、通信装置及位置检测方法
本申请是2010年11月30日提交的,中国专利申请号为201080006022.9 (国际申请号PCT/JP2010/006987),发明名称为“通信装置”的专利申请的分案申请。
技术领域
本发明涉及通信装置,涉及利用近距离无线通信提供家电设备的扩展用户界面的通信装置。
背景技术
公开了一种通信装置,使用近距离无线通信从设备的IC标签读取设备信息,并登录与所读出的设备信息对应的操作信息,由此能够作为该设备的远程控制器(遥控器)使用(例如参照专利文献1)。该通信装置具备操作部,能够作为远程控制规定的被控制设备的遥控器使用,具备从IC标签读取与被控制设备建立对应的设备信息的IC标签读取部、建立对应而存储有设备信息和控制信息的控制信息数据文件、登录由IC标签读取部读取的设备信息并且从控制信息数据文件取得与该设备信息建立对应的控制信息而执行与各个操作部对应而登录的登录程序的CPU。并且,如果将操作部按下,则将该登录的控制信息中的与被按下的操作部对应的控制信息向被控制设备发送。
此外,公开了一种遥控器用户界面,利用近距离无线通信,且考虑到操作的容易性及方便性(例如参照专利文献2)。该遥控器用户界面具备按根据操作项目划分的区域保持存储有用于操作外部的电子设备所需的信息的无线标签的操作用表、以及利用操作用表将命令信号用上述电子设备发送的遥控器。并且,在遥控器侧,将操作用表的上述无线标签中存储的信息通过非接触方式读出,将基于该读出的信息的命令信号向上述电子设备发送。
此外,公开了一种控制装置,通过用遥控器指示显示在显示部的画面上的选择对象的按钮的简单的操作,能够选择需要的信息(例如参照专利文献3)。该控制装置具备通过遥控器具备的角度传感器检测测量通过拿着该遥控器的操作者移动遥控器而产生的2方向的角度变化量的遥控器部、根据初始坐标和测量出的角度变化量计算遥控器部指示的显示部的画面上的2维坐标的画面坐标部、基于得到的2维坐标和按钮信息保存部的按钮的位置信息求出被选择的按钮的选择按钮辨识部、以及在显示部的画面上的对应的各位置上显示按钮并将被选择的按钮热点显示的画面显示控制部。操作者在决定通过画面显示控制部选择的按钮的情况下,通过将遥控器上具备的决定按钮按下而发送决定的信号。在该控制装置中,通过这样的简单的操作能够选择需要的信息。
先行技术文献
专利文献
专利文献1:特开2007-134962号公报
专利文献2:特开2004-145720号公报
专利文献3:特开2000-270237号公报
发明概要
发明要解决的课题
但是,在上述以往的结构中,具有以下这样的问题。
即,首先,在上述专利文献1的结构中,当用户用通信装置操作被控制设备时,用户需要经由通信装置的显示部、按钮及按键选择想要用该通信装置操作的设备(被控制设备)。即,在被控制设备的选择时,需要对通信装置进行多个操作以使其作为被控制设备的遥控器发挥功能,这样有操作较复杂的问题。
此外,在上述专利文献2的结构中,需要按照想要操作的电子设备准备与该电子设备对应的操作用表。即,有以下问题:每当用户想要控制的电子设备增加,都需要准备与该电子设备对应的操作用表。
此外,在上述专利文献3的结构中,遥控器将操作者的运动的角度变化量向控制装置侧发送,控制装置根据上述角度变化量判断操作者指示的地方。因此,为了控制设备而必须具备遥控器、控制装置及显示装置。即,有为了控制设备而需要多个装置的问题。进而,没有考虑到操作多个被控制设备的情况下,关于登录操作者的选择对象和针对与该选择对象建立对应的设备的命令的方法,也没有公开或暗示。
发明内容
所以,本发明解决上述以往的问题,目的是提供一种不需要复杂的操作、能够简单地对应于遥控器等扩展用户界面的通信装置。
用于解决课题的手段
本发明提供一种通信方法,通过具有多个天线的通信装置进行通信,包括以下步骤:使用上述多个天线,接收由便携通信终端发送的电波的步骤;计算由上述多个天线接收的电波的相位及振幅的特性,基于上述特性,检测上述便携通信终端的位置的步骤;生成对于上述便携通信终端的位置最佳的波束的步骤;从上述多个天线发送上述最佳的波束的步骤。
在上述通信方法中,还包括:使用由上述多个天线发送的电波的相位及振幅,计算上述便携通信终端与上述多个天线之间的多个特性的步骤;预先计算多个预备特性、以及与多个上述预备特性对应的上述便携通信终端的位置信息的步骤;比较多个上述预备特性与上述特性的步骤;确定与上述特性近似的上述预备特性的步骤;将与上述预备特性对应的上述便携通信终端的位置信息作为上述便携通信终端的位置检测的步骤。
本发明还提供一种具有多个天线的通信装置,具备:接收部,具有接收由便携通信终端发送的电波的上述多个天线;检测部,计算由上述多个天线接收的电波的相位及振幅的特性,基于上述特性,检测上述便携通信终端的位置;生成部,生成对于上述便携通信终端的位置最佳的波束;以及发送部,从上述多个天线发送上述最佳的波束。
本发明还提供一种位置检测方法,从上述通信装置接收上述特性,并基于上述特性检测上述便携通信终端的位置,包括以下步骤:预先保存多个预备特性、以及与多个上述预备特性对应的上述便携通信终端的位置信息的步骤;比较多个上述预备特性与上述特性的步骤;确定与上述特性近似的上述预备特性的步骤;将与上述预备特性对应的上述便携通信终端的位置信息作为上述便携通信终端的位置检测的步骤。
在上述位置检测方法中,还包括:在存在多个与上述特性近似的上述预备特性的情况下,从上述便携通信终端接收精度低的位置信息的步骤;基于上述精度低的位置信息,确定上述预备特性的步骤。
为了达到上述目的,有关本发明的一技术方案的通信装置,具备:设备信息取得部,从设备取得设备信息,该设备信息是能够唯一地识别该设备的信息;位置信息取得部,取得表示上述通信装置的位置的位置信息;外部通信部,用于进行外部通信;操作信息取得部,基于上述设备信息,经由上述外部通信部取得操作信息,该操作信息用于使上述设备能够操作;存储部,将上述设备信息取得部取得上述设备信息时的上述位置信息作为表示上述设备的位置的设备位置信息,与由上述操作信息取得部取得的上述操作信息建立对应而存储;方向感知部,感知表示上述通信装置被朝向的方向的方向信息;指向空间计算部,基于由上述位置信息取得部取得的位置信息、以及由上述方向感知部感知的方向信息,计算指向空间,该指向空间是上述通信装置被朝向从而由该通信装置指示的空间;选择部,基于存储在上述存储部中的上述设备位置信息,决定存在于上述指向空间中的设备,选择存储在上述存储部中的操作信息之中的与上述决定的设备对应的操作信息;操作信息发送部,基于上述选择的操作信息,将用于操作该设备的控制信号向该设备发送。
由此,有关本发明的一技术方案的通信装置能够将通信装置的位置信息与设备的操作信息建立对应存储。此外,利用被控制设备的位置信息,仅通过将便携设备朝向就能够操作被控制设备。由此,不需要复杂的操作,能够简单地实现能够对应于遥控器等扩展用户界面的通信装置。
此外,也可以是,上述通信装置还具备进行近距离无线通信的近距离通信部;上述设备信息取得部经由上述近距离通信部取得上述设备的设备信息。
由此,有关本发明的一技术方案的通信装置也能够利用近距离无线通信,而不麻烦用户的手,以单触方式简单地取得家电设备的操作信息。
此外,也可以是,上述选择部具备:设备方向计算部,在上述指向空间中存在多个设备的情况下,根据上述通信装置的位置信息和存储在存在于上述指向空间中的多个设备的上述存储部中的设备位置信息,计算表示从该通信装置分别相对于该多个设备的方向的多个设备方向信息;差计算部,计算该通信装置的方向信息与该多个设备方向信息的差;以及设备决定部,将该多个设备中的由上述差计算部计算的差比规定值小的设备决定为存在于上述指向空间中的设备。
由此,有关本发明的一技术方案的通信装置即使在通信装置的指向方向上存在多个设备的情况下,也能够从设备候选之中适当地选择与通信装置的指向方向接近的设备作为操作对象的设备。
此外,也可以是,上述选择部具备:空间信息存储部,存储有表示空间和设备相对于该空间的配置的空间信息;以及设备决定部,在上述指向空间中存在多个设备的情况下,使用上述通信装置的位置信息从上述空间信息存储部取得包括上述通信装置存在的空间的上述空间信息,基于所取得的上述空间信息,将存在于上述通信装置存在的空间中的设备决定为存在于上述指向空间中的设备。
由此,有关本发明的一技术方案的通信装置能够利用建造物的平面布置信息等空间信息,能够减少用户不希望的设备选择。
此外,也可以是,上述通信装置还具备显示部;上述选择部具备:俯仰角取得部,取得表示上述通信装置的俯仰方向的角度的俯仰角信息;俯仰角信息存储部,将上述俯仰角信息与上述设备信息建立对应而存储;以及设备决定部,将在上述显示部上作为设备候选列表显示的设备中的由用户选择的设备决定为存在于上述指向空间中的设备;在上述显示部中,基于存储在上述存储部中的上述设备位置信息和存储于上述俯仰角信息存储部中的俯仰角信息,将存在于上述指向空间中的设备作为上述设备候选列表显示;上述俯仰角取得部将所取得的上述俯仰角信息与由上述设备决定部决定的设备建立对应,存储到上述俯仰角信息存储部中。
由此,有关本发明的一技术方案的通信装置通过也考虑通信装置的俯仰方向的角度变化,能够考虑用户的习惯,由此能够提高对于操作对象的设备的选择精度。
此外,也可以是,上述通信装置还具备取得上述设备的动作状态的设备状态取得部;在上述显示部中,基于上述取得的设备的动作状态,显示上述设备候选列表和对应于上述设备候选列表的操作信息。
由此,有关本发明的一技术方案的通信装置在判断出多个设备的情况下,通过根据设备的动作状况变更操作信息,能够使显示的信息简单化。
此外,也可以是,上述位置信息取得部还具备:绝对位置取得部,取得上述通信装置的绝对位置信息;以及相对位置取得部,取得从上述绝对位置信息表示的位置的移动位置作为相对位置信息;根据上述绝对位置信息和上述相对位置信息取得上述位置信息。或者,也可以是,上述通信装置还具备通过根据上述相对位置信息及上述方向信息取得上述通信装置的运动信息而进行该通信装置的静止判断的静止判断部;上述方向感知部在由上述静止判断部判断为该通信装置静止的情况下,感知表示上述通信装置被朝向的方向的方向信息。
由此,有关本发明的一技术方案的通信装置能够在用户使通信装置朝向操作设备并静止的定时进行设备的操作。
此外,也可以是,上述通信装置还在判断为能够基于设备信息从上述存储部取得设备位置信息的情况下,使上述位置信息取得部将由上述绝对位置取得部取得的绝对位置信息作为上述设备位置信息存储到上述存储部中,并且将由相对位置取得部取得的上述相对位置信息初始化。
由此,有关本发明的一技术方案的通信装置能够减小从加速度传感器计算的相对位置信息的累积误差。
此外,也可以是,上述通信装置还具备显示部;在基于上述方向信息及上述位置信息、判断为从上述操作信息发送部能够对该设备发送上述控制信号的通信范围偏离的情况下,在上述操作信息发送部对该设备发送上述控制信号时,使上述显示部显示从通信范围偏离的消息。
由此,有关本发明的一技术方案的通信装置在从操作信息发送部的可通信范围偏离的情况下,通过向用户表示警告,能够敦促回到通信范围中。例如,红外线通信的通信范围的指向性较窄而通信范围被限制,所以通过本结构,可用性提高。
此外,也可以是,上述通信装置还具备取得该设备发出的声音信息的声音感知部;上述通信装置基于由上述声音感知部取得的上述声音信息,判断对该设备的上述控制信号的发送是否成功。
由此,有关本发明的一技术方案的通信装置在操作信息发送部的通信中,能够不请求反馈应答而仅通过单向通信就能够进行可靠的通信。
此外,也可以是,上述通信装置还具备取得包括对该设备发送上述控制信号的操作履历的操作履历取得部;上述通信装置在判断为对该设备发送上述控制信号成功的情况下,通过进行上述外部通信而对服务器发送上述操作履历。
由此,有关本发明的一技术方案的通信装置即使在设备不具有通过因特网等通用网络来通信的手段的情况下,也能够将有可靠性的操作履历向服务器发送。
此外,也可以是,上述设备信息还包括能够识别上述通信装置的使用者的个人识别信息;上述通信装置基于上述个人识别信息,控制上述显示部上的显示。
由此,有关本发明的一技术方案的通信装置能够提供匹配于用户个人的遥控器接口。例如,在用户不需要详细的操作的情况下,设为简单的接口的显示。
此外,也可以是,上述通信装置还基于由上述位置信息取得部取得的上述位置信息,在判断为在上述操作信息发送部能够发送上述控制信号的范围中不存在该设备的情况下,使上述操作信息取得部经由上述外部通信部取得用于使操作可能的该设备的外部通信用操作信息;基于该外部通信用操作信息,经由上述外部通信部操作该设备。
由此,有关本发明的一技术方案的通信装置即使在处于室外的情况下也能够简单地提供对连接在因特网等通用网络上的设备进行操作的遥控器接口。例如,如果将通信装置朝向自家的方向,则能够成为可操作的设备的遥控器等。
此外,也可以是,上述设备信息取得部还具备根据与对设备赋予的设备信息有关的图像读取该设备信息的读取部。
由此,有关本发明的一技术方案的通信装置通过对设备赋予2维条码等简单的信息图像,能够取得设备信息。
发明的效果
根据本发明,能够实现不需要复杂的操作、能够简单地对应于遥控器等扩展用户界面的通信装置。例如,利用被控制设备的位置信息,仅通过将通信装置朝向就能够操作被控制设备。此外,在具备近距离无线通信功能的情况下,也能够利用近距离无线通信通过单触方式简单地取得家电设备等被控制设备的操作信息。
附图说明
图1是本发明的实施方式1的摄影装置的整体系统图。
图2是本发明的实施方式1的摄影装置的外观图。
图3是本发明的实施方式1的摄影装置的块图。
图4是本发明的实施方式1的摄影装置的第2存储器的结构图。
图5是本发明的实施方式1的摄影装置的第2存储器的结构图。
图6是本发明的实施方式1的摄影装置的图像显示方法指示信息的结构图。
图7是本发明的实施方式1的摄影装置的盖和TV(电视机)的动作的流程图。
图8是本发明的实施方式1的摄影装置和TV的动作的流程图。
图9是本发明的实施方式1的摄影装置和TV的动作的流程图。
图10是本发明的实施方式1的摄影装置和TV的动作的流程图。
图11是本发明的实施方式1的摄影装置和TV的动作的流程图。
图12是本发明的实施方式1的摄影装置和TV的动作的流程图。
图13是本发明的实施方式1的摄影装置和TV的动作的流程图。
图14是本发明的实施方式1的摄影装置和TV的动作的流程图。
图15是本发明的实施方式1的摄影装置和TV的动作的流程图。
图16是本发明的实施方式1的摄影装置和TV的动作的流程图。
图17是本发明的实施方式1的摄影装置和TV的动作的流程图。
图18是本发明的实施方式1的摄影装置和TV的动作的流程图。
图19是本发明的实施方式1的摄影装置和TV的动作的流程图。
图20是本发明的实施方式1的摄影装置和TV的动作的流程图。
图21是本发明的实施方式1的摄影装置和TV的动作的流程图。
图22是表示本发明的实施方式1的摄影装置和TV的显示方法的图。
图23是保存动作程序的摄影装置的RF-ID部、附属于电视机的遥控器、电视机的块图。
图24是将保存在RF-ID中的动作程序转送及执行的处理的流程图。
图25是进行图像的下载及幻灯放映的动作程序的记述的一例。
图26是根据语言代码变更动作程序的处理的电视机、以及保存程序的服务器的块图。
图27是根据语言代码变更动作程序的处理的处理的流程图。
图28是摄影装置1和TV45包括无线LAN的家庭网络6500的结构图。
图29是不使用RF-ID的认证方法的一例。
图30是使用RF-ID的认证方法的一例。
图31是难以使终端接近的情况下的认证方法的一例。
图32是表示照相机侧动作的一例的流程图。
图33是表示TV侧动作的一例的流程图。
图34是生成由TV执行的动作程序的摄影装置1的第1处理部、第2 存储器部的块图。
图35是表示第1处理部的程序生成部7005的动作的流程图。
图36是由程序生成部7005生成的程序的一例的流程图。
图37是生成显示摄影装置1的使用状况的动作程序的摄影装置1的第 1处理部、第2存储器部的块图。
图38是通过外部设备执行由摄影装置1生成的程序的情况下的使用情形。
图39是将由摄影装置1生成的程序通过带有显示功能的遥控器执行的情况下的流程图。
图40A是表示本发明的实施方式2的照相机(camera)的上载次序的流程图。
图40B是表示本发明的实施方式2的照相机的上载次序的流程图。
图40C是表示本发明的实施方式2的照相机的上载次序的流程图。
图41是表示本发明的实施方式2的照相机的上载次序的流程图。
图42A是表示本发明的实施方式1的照相机的上载次序的流程图。
图42B是表示本发明的实施方式1的照相机的上载次序的流程图。
图42C是表示本发明的实施方式1的照相机的上载次序的流程图。
图42D是表示本发明的实施方式1的照相机的上载次序的流程图。
图43是表示本发明的实施方式2的照相机的RF-ID部的动作次序的流程图。
图44是本发明的实施方式2的TV的结构图。
图45是表示本发明的实施方式2的照相机和TV的RF-ID通信的动作的流程图。
图46A是图45的详细流程图。
图46B是图45的详细流程图。
图47是照相机和TV的RF-ID通信的数据格式。
图48是电子目录显示系统的概要图。
图49是电子目录服务器信息输入机的结构图。
图50是表示电子目录服务器信息输入机的处理的次序的流程图。
图51是电子目录通知卡的RF-ID的结构图。
图52是显示电子目录的TV的结构图。
图53是电子目录服务器的结构图。
图54是表示电子目录服务器的处理的次序的流程图。
图55是表示显示电子目录的TV的处理的次序的流程图。
图56是表示电子目录的画面显示的图。
图57是表示顾客属性数据库的数据构造的图。
图58是表示电子目录数据库的数据构造的图。
图59是带有RF-ID的明信片邮寄系统的概要图。
图60是带有RF-ID的明信片邮寄系统的TV的结构图。
图61是表示带有RF-ID的明信片邮寄系统的图像选择操作的画面显示的图。
图62是表示带有RF-ID的明信片邮寄系统的图像服务器的处理的次序的流程图。
图63是第5实施方式的系统结构图。
图64是表示第5实施方式的邮寄物的固定信息的例子的图。
图65是第5实施方式的摄影装置向图像服务器建立关联的流程图。
图66是第5实施方式的摄影装置的向中继服务器登录的流程图。
图67是表示带有2维条码的邮寄物的例子的图。
图68是利用第5实施方式的摄影装置的2维条码的处理的流程图。
图69是表示第5实施方式的电视机的处理流程的图。
图70是表示第5实施方式的中继服务器的处理流程的图。
图71是本发明的实施方式6的图像发送侧结构的概略图。
图72是本发明的实施方式6的图像接收侧结构的概略图。
图73是本发明的实施方式6的图像发送侧电视机的动作流程图。
图74是本发明的实施方式6的图像接收侧电视机的动作流程图。
图75是本发明的实施方式6的另一例的图像发送侧电视机的动作流程图。
图76是表示本发明的实施方式6的邮寄物存储器部的记录信息的一例的结构图。
图77是本发明的记录机的结构图。
图78是本发明的RF-ID卡的结构图。
图79是关于向服务器登录设定信息的次序的流程图。
图80是登录在服务器中的设定信息的结构图。
图81是登录在RF-ID卡中的设备操作信息的结构图。
图82是关于用RF-ID卡将记录机的设定信息更新的次序的流程图。
图83是关于从服务器取得设定信息的次序的流程图。
图84是登录在由记录机使用的RF-ID卡中的设备操作信息的结构图。
图85是登录在由汽车导航仪使用的RF-ID卡中的设备操作信息的结构图。
图86是在TV等的遥控器中搭载有RF-ID读取器的情况下的本发明的实施方式的结构图。
图87是该实施方式的流程图。
图88是网络环境图。
图89是移动AV终端功能块图。
图90是TV功能块图。
图91是移动AV终端接受运动图像的次序图(前半:接受侧控制)。
图92是移动AV终端递交运动图像的次序图(后半:接受侧控制)。
图93是移动AV终端的基本流程图。
图94是移动AV终端递交的模式的流程图。
图95是移动AV终端接受的模式的流程图。
图96是移动AV终端的用无线接受的模式的流程图。
图97是移动AV终端的用URL接受的模式的流程图。
图98是移动AV终端的服务器的位置探索的流程图。
图99是从移动AV终端的外部服务器接受运动图像的模式的流程图。
图100是TV的基本流程图。
图101是TV的递交的模式的流程图。
图102是TV的接受的模式的流程图。
图103是移动AV终端接受运动图像的次序图(前半:递交侧控制)。
图104是移动AV终端递交运动图像的次序图(后半:递交侧控制)。
图105是由遥控器进行交接的情况下的次序图。
图106是运动图像服务器进行同时发送的情况下的次序图。
图107是表示设备从工厂出货时HF-RFID和UHF-RFID的动作的概念图。
图108是表示能够从UHF-RFIDM005访问的存储器的记录格式的概念图。
图109是表示设备M003从工厂出货时的从HF-RFID向UHF-RFID 复制制造号码等的处理的流程的流程图。
图110是表示设备M003的流通过程中的处理的流程的流程图。
图111是本发明的结构图。
图112是流程图。
图113是流程图。
图114是家庭ID登录的网络环境图。
图115是家庭ID登录通信装置硬件结构图。
图116是家庭ID登录通信装置功能块图。
图117是家庭ID登录处理的流程图。
图118是家庭ID取得处理的流程图。
图119是家庭ID登录处理的次序图。
图120是家庭ID共有通信装置功能块图。
图121是家庭ID共有接收侧处理的流程图(近距离无线利用)。
图122是家庭ID共有发送侧处理的流程图(近距离无线利用)。
图123是家庭ID共有处理的次序图(近距离无线利用)。
图124是家庭ID共有接收侧处理的流程图(家庭NW设备利用)。
图125是家庭ID共有发送侧处理的流程图(家庭NW设备利用)。
图126是家庭ID共有处理的次序图(家庭NW设备利用)。
图127是本发明的实施方式16的设备管理系统的块图。
图128是本发明的实施方式16的设备管理系统的次序图。
图129是本发明的实施方式16的设备管理数据库结构的概念图。
图130是本发明的实施方式16的设备管理系统的显示概念图。
图131是本发明的实施方式17的RF-IDN10的功能块图。
图132是本发明的实施方式17的移动设备N20的功能块图。
图133是本发明的实施方式17的登录服务器N40的功能块图。
图134是表示本发明的实施方式17的网络制品的配置的一例的图。
图135是表示本发明的实施方式17的系统的一例的结构图。
图136是将本发明的实施方式17的电视机N10A的信息登录到登录服务器N40中的次序图。
图137是表示本发明的实施方式17的制品数据和服务器登录数据的结构的一例的图。
图138是表示由本发明的实施方式17的制品信息管理部N45存储的制品信息的结构的一例的图。
图139是表示本发明的实施方式17的RF-IDN10的制品登录时的处理流程的一例的图。
图140是表示本发明的实施方式17的移动设备N20的制品登录时的处理流程的一例的图。
图141是表示本发明的实施方式17的登录服务器N40的制品登录时的处理流程的一例的图。
图142是表示本发明的实施方式17的控制空调N10J和电视机N10A 的电源的一例的次序图。
图143是表示本发明的实施方式17的位置信息数据和制品控制数据的结构的一例的图。
图144是表示本发明的实施方式17的位置信息制作部N48制作的制品地图的一例的图。
图145是表示由本发明的实施方式17的制品信息管理部N45存储的制品信息的结构的一例的图。
图146是表示本发明的实施方式17的位置信息制作部N48制作的制品地图的一例的图。
图147是表示本发明的实施方式17的精度识别符的一例的图。
图148是表示本发明的实施方式17的系统的一例的结构图。
图149是表示实施方式18的通信系统的概念图。
图150是表示实施方式18的通信装置的结构的块图。
图151是表示本发明的通信装置的最小结构的块图。
图152A是表示实施方式18的设备判断部的详细结构的一例的块图。
图152B是表示实施方式18的设备判断部的详细结构的一例的块图。
图152C是表示实施方式18的设备判断部的详细结构的一例的块图。
图153是表示实施方式18的存储部的数据构造的一例的图。
图154是表示由实施方式18的指向空间取得部取得的指向空间的取得法的一例的图。
图155是表示实施方式18的通信装置的运动的概要的流程图。
图156是表示在实施方式18的通信装置的存储部中登录操作信息的情况下的处理的流程的流程图。
图157是表示在实施方式18的通信装置中设定操作信息并操作的情况下的处理的流程的流程图。
图158是表示在实施方式18的通信装置中设定操作信息并操作的情况下的处理的流程的流程图。
图159是表示判断存在于实施方式18的通信装置指示的方向上的终端设备的处理的流程的例子的流程图。
图160是表示将实施方式18的通信装置作为遥控器而操作操作对象的终端设备的处理的流程的例子的流程图。
图161是表示实施方式18的通信装置在登录操作信息时进行的数据的流动的次序图。
图162是表示在实施方式18的通信装置作为遥控器发挥功能而操作终端设备时进行的数据的流动的次序图。
图163A是表示作为实施方式18的终端设备101的设备信息而附加了 2维条码的情况下的状况的图。
图163B是表示将实施方式18的终端设备101的设备信息从2维条码读出的状况的一例的图。
图164A是表示操作多个照明的情况下的显示部上的显示例的图。
图164B是表示操作多个照明的情况下的显示部上的显示例的图。
图165A是表示对用户敦促选择使通信装置102作为多个设备中的哪个设备的遥控器发挥功能的情况下的显示例的图。
图165B是表示匹配于终端设备101的当前的动作状况而设定通信装置 102的操作信息的情况下的一例的图。
图166是实施方式18的向2层的遥控器操作的概念图。
图167是实施方式19的整体系统图。
图168是表示实施方式19的RF-IDO50搭载的制品的配置的一例的图。
图169是从建筑物坐标数据库O104提取的建筑物坐标数据。
图170是表示由实施方式19的程序执行部O65制作的制品的3D地图的图像数据的一例的图。
图171是表示实施方式19的显示部O68d将图169的图像数据与已经显示的图170的图像数据组合而成的制品的3D地图的一例的图。
图172是表示各精度识别符的判断部O83的处理的图。
图173是表示实施方式19的3D地图的处理流程的一例的图。
图174是表示实施方式19的3D地图的处理流程的一例的图。
图175是表示实施方式19的基于3D地图的特定小功率无线通信系统的一例的图。
图176是实施方式20的设备连接设定的网络环境图。
图177是实施方式20的设备的网络模组结构图。
图178是实施方式20的家电控制装置的功能块图。
图179是用于说明实施方式20的设置太阳能电池面板时的用户的动作的图。
图180是实施方式20的太阳能电池面板设置时的移动终端画面变迁图。
图181是实施方式20的太阳能电池面板连续认证时的移动终端画面变迁图。
图182是实施方式20的太阳能电池面板发电量检查时的移动终端画面图。
图183是实施方式20的太阳能电池面板故障检查时的移动终端画面图。
图184是用于说明实施方式20的太阳能电池面板设置时的移动终端的动作的流程图。
图185是用于说明实施方式20的太阳能电池面板设置时的移动终端的动作的流程图。
图186是用于说明实施方式20的太阳能电池面板设置时的移动终端的动作的流程图。
图187是用于说明实施方式20的太阳能电池面板设置时的移动终端的动作的流程图。
图188是实施方式20的太阳能电池面板设置时的流程图。
图189是用于说明实施方式20的太阳能电池面板的设置次序的图。
图190是表示实施方式20的用于设备和家电控制装置(SEG)连接的次序的流程图。
图191是表示实施方式20的设备与家电控制装置(SEG)连接的次序的流程图。
图192是表示在实施方式20的家电控制装置(SEG)中安装新的版本的软件的次序的流程图。
图193是表示实施方式20的用于将家电控制装置(SEG)与连接对象的设备连接的次序的流程图。
图194是表示实施方式20的用于将家电控制装置(SEG)与连接对象的设备连接的次序的流程图。
图195是表示实施方式20的用于将家电控制装置(SEG)与连接对象的设备连接的次序的流程图。
图196是表示实施方式20的用于将家电控制装置(SEG)与连接对象的设备连接的次序的流程图。
图197是表示实施方式20的用于将家电控制装置(SEG)与连接对象的设备连接的次序的流程图。
图198是表示本发明的实施方式20的用于将家电控制装置(SEG)与连接对象的设备连接的次序的流程图。
图199是表示实施方式20的用于将家电控制装置(SEG)与连接对象的设备连接的次序的流程图。
图200是表示为了将实施方式20的家电控制装置(SEG)与连接对象的设备连接而使用中继器的连接次序的流程图。
图201是表示为了将实施方式20的家电控制装置(SEG)与连接对象的设备连接而使用中继器的连接次序的流程图。
图202是表示实施方式21的由程序执行部O65制作的制品的3D地图的图像数据的一例的图。
图203是表示实施方式21的显示部O68d将图169的图像数据与已经显示的图202的图像数据组合而成的制品的3D地图的一例的图。
图204是表示实施方式21的遥控器操作的次序的流程图。
图205是表示实施方式21的遥控器操作的次序的流程图。
图206是用于说明图205的动作详细的意义的流程图。
图207是用于说明实施方式21中移动终端的基准点信息不正确的情况下取得正确的基准点的处理的流程图。
图208是用于说明实施方式21中设备中没有NFC功能的情况下设备与母机的连接次序的流程图。
图209是用于说明实施方式21中设备中没有NFC功能的情况下设备与母机的连接次序的流程图。
图210是表示实施方式21的位置信息登录法的流程图。
图211是表示实施方式21的位置信息登录法的流程图。
图212是表示实施方式21的位置信息登录法的流程图。
图213是用于实施方式22的对方式22的移动设备和联动设备的状况进行说明的图。
图214是表示实施方式22的移动设备和联动设备的显示画面的图。
图215是表示实施方式22的步骤的流程图。
图216是表示实施方式22的步骤的流程图。
图217是表示实施方式22的步骤的流程图。
图218是表示实施方式22的步骤的流程图。
图219是表示实施方式22的步骤的流程图。
图220是实施方式22的移动设备的示意图。
图221是表示实施方式22的移动设备和联动设备的显示的一例的图。
图222是表示实施方式22的联动设备是微波炉的情况下的步骤的流程图。
图223是表示实施方式22的联动设备是微波炉的情况下的步骤的流程图。
图224是用于说明使用多个天线确保多个传送路径而传送的通信方法的图。
图225是用于说明具有多个传送路的通信方式的位置信息的获得方法的图。
图226是表示实施方式23的与建筑物(自家)周边及建筑物内的移动设备的移动有关的设备的例子的图。
图227是表示实施方式23的测量建筑物内的移动设备的位置的处理的流程图。
图228是表示实施方式23的测量建筑物内的移动设备的位置的处理的流程图。
图229是表示实施方式23的测量建筑物内的移动设备的位置的处理的流程图。
图230是表示实施方式23中表示3D地图上的房间的区域的信息的例子的图。
图231是表示实施方式23的基准点的附近的移动设备的动作的图。
图232是表示实施方式23中在移动设备的行进方向上想要高精度地检测的场所的图。
图233是表示实施方式23的测量建筑物内的移动设备的位置的处理的流程图。
图234是表示实施方式23的基准点及注意点的附近处的移动设备的动作的表。
图235是表示实施方式23的测量建筑物内的移动设备的位置的处理的流程图。
图236是表示实施方式23的用于检测基准点的传感器的优先级的列表。
图237是表示实施方式23的测量建筑物内的移动设备的位置的处理的流程图。
图238是表示实施方式23的测量建筑物内的移动设备的位置的处理的流程图。
图239是表示实施方式23的基于加速度传感器的Z轴(垂直)方向的检测数据的图。
图240是表示实施方式23的测量建筑物内的移动设备的位置的处理的流程图。
图241是表示本发明的实施方式23的测量建筑物内的移动设备的位置的处理的流程图。
图242是表示实施方式23的加速度Z轴(垂直方向)的检测数据与步行音的关系的图。
图243是表示实施方式23的建筑物内的移动设备的例子的图。
图244是表示实施方式23的从基准点到下个基准点的路程的图。
图245是说明实施方式23的原基准点精度的图。
图246是表示实施方式23的测量建筑物内的移动设备的位置的处理的流程图。
图247是表示实施方式23的测量建筑物内的移动设备的位置的处理的流程图。
图248是表示实施方式23的测量建筑物内的移动设备的位置的处理的流程图。
图249是表示实施方式23的测量建筑物内的移动设备的位置的处理的流程图。
图250是表示实施方式23的测量位置的原理的图。
图251是表示实施方式23的测量位置的原理的图。
图252是表示实施方式23的测量位置的原理的图。
图253是实施方式的太阳能电池的电路图。
图254是表示实施方式24的流程图的图。
图255是表示实施方式24的流程图的图。
图256是表示实施方式24的流程图的图。
图257是表示实施方式24的流程图的图。
图258是表示实施方式24的流程图的图。
图259是表示实施方式24的流程图的图。
图260是表示实施方式24的记录在标签中的信息的图。
图261是实施方式25的移动终端的图。
图262是实施方式25的家电设备的图。
图263是实施方式25的移动终端的模组位置的显示状态图。
图264是实施方式25的家电设备的模组位置的显示状态图。
图265是实施方式25的移动终端与家电设备的近距离无线通信状态图。
图266是实施方式25的与加速度计或陀螺仪联动时的图。
图267是实施方式25的与照相机联动时的图。
图268是实施方式25从服务器下载应用时的图。
图269是实施方式25的功能块图。
图270是实施方式25的家电设备的异常发生时的状态变迁图。
图271是实施方式25的家电设备的长时间通信时的状态变迁图。
图272是实施方式25的带有显示画面的家电设备的图。
图273是实施方式25的流程图1。
图274是实施方式25的流程图2。
图275是实施方式25的流程图3。
图276是实施方式25的流程图4。
图277是实施方式25的流程图5。
图278是实施方式25的终端的等待画面的显示方法的图。
具体实施方式
以下,参照附图对本发明的实施方式进行说明。在以下的实施方式中,进行对有关本发明的通信装置的各种方式的说明。其中,与权利要求书直接关联的内容是实施方式18。
(实施方式1)
对本发明的实施方式1进行说明。图1表示本发明的概念图。这里,表示由摄影装置(照相机、camera)1、TV(电视机)45及服务器42构成的通信系统。在本图中,左侧表示摄影时的状况,右侧表示将摄影的图像再生时的状况。
摄影装置1是有关本发明的通信装置的一例(这里是数字照相机),作为与摄影时关联的构成要素,具备第1电源部101、影像处理部31、第2 天线20、第1处理部35、存储介质识别信息111、摄影图像状况信息60 及服务器确定信息48的第2存储器52、以及RF-ID的天线21。此外,该摄影装置1作为与再生时关联的构成单元,具备第1电源部101、第1 存储器174、电源检测部172、启动部170、存储介质识别信息111、摄影图像状况信息60及服务器确定信息58的第2存储器52、第2处理部95、调制切换部179、通信部171、第2电源部91、以及RF-ID的天线21。
TV45是用通信路连接读取器装置的设备的一例,具体而言,是用于显示由摄影装置1摄影的图像数据的电视接收机,具备显示部110、以及RF -ID读写器46。
服务器42是将从摄影装置1上载的图像数据保存、并且将该图像数据下载到TV45中的计算机,具备用于保持数据50的存储装置。
在将景色等被摄体摄影的情况下,由影像处理部31变换为摄影数据而得到的图像数据在能够通信的条件下使用无线LAN、WiMAX用的第2天线20以无线方式被发送给接入点,经由因特网作为预先设定的服务器42 中的数据50记录。
此时,第1处理部35将摄影的图像数据的摄影图像状况信息60记录到RF-ID47的第2存储器52中。在该摄影图像状况信息60之中,记录有图像摄像日期时间、图像摄影张数、最终图像发送日期时间、图像发送张数及最终图像摄影日期时间的至少某个、以及被上载的图像或者没有上载的图像、最终摄影号码等。
此外,生成用于确定上载在服务器42中的数据50的URL。用于对该信息图像数据访问的服务器确定信息48通过第1处理部35记录在第2存储器52之中。此外,内置有该RF-ID的系统在第2存储器52中还记录有用于识别是照相机、卡还是明信片等的介质识别信息111。
第2存储器52当照相机的主电源(电池等第1电源101)接通时,通过照相机的主电源动作。即使没有接通照相机的主电源,也由于对RF-ID 的天线21从外部的RF-ID读写器供电,所以不具有电池等电源的第2电源部91调节电压,对RF-ID电路部的包括第2存储器的各模块供电,由此,能够将第2存储器的数据记录再生并收发该数据。另外,第2电源部 91由整流电路等构成,是由通过第2天线21接收的电波形成电力的电路。第2存储器52构成为,不论主电源的接通断开都能够从第2处理部95进行读写,在主电源接通的情况下能够从第1处理部35读写。即,第2存储器52由非易失性存储器构成,并且能够从第1处理部35和第2处理部95 两者读写。
在结束了旅行等的摄影后将该摄影装置1再生的情况下,如图1的右侧的再生时所示,将摄影装置1向TV45的RF-ID读写器46靠近。于是,通过RF-ID读写器46经由天线21对RF-ID47供电,通过第2电源部 91,即使摄影装置1的主电源(第1电源101)断开也对RF-ID47的各部供给电源。由第2处理部95将第2存储器52的摄影图像状况信息60和服务器确定信息58读出,经由天线21向TV45发送。TV侧基于服务器确定信息58生成URL,下载服务器42的数据50的图像数据,将图像的缩略图等显示在显示部110上。在根据摄影图像状况信息60判断为存在没有被上载的摄影图像的情况下,将该消息显示在显示部110上,并且根据情况而启动摄影装置1,将没有上载的图像数据向服务器42上载。
图2(a)、图2(b)和图2(c)表示内置本发明的摄影装置1的外观的正视图、后视图和右侧视图。
如图2(c)所示,在右侧面,内置有无线LAN用的天线20和RF-ID 用的天线21,安装有由电波非屏蔽材料构成的天线罩22。RF-ID是 13.5MHz,无线LAN是2.5GHz,频率较大地不同,不会相互干涉。因此,将两个天线20、21如图2(c)所示那样构成为,使其从外部看为重合的。由此,能够减小设置面积,所以可以得到能够使摄影装置小型化的效果。此外,由于能够将两个天线的天线罩22如图2(c)所示那样集中为1个,所以能够使电波非屏蔽材料部最小化。塑料等电波非屏蔽材料与金属相比强度较低,所以通过使该材料最小化,具有能够减轻机体强度下降的效果。有镜头6和电源开关3。2~16在后面说明。
图3表示摄影装置1的块图。
将从摄像部30得到的图像数据经由影像处理部31发送给记录再生部 32,记录到第3存储器33中。该数据记录在可拆装的IC卡34中。
这些处理由CPU等的第1处理部35指示。将摄影的照片及运动图像等的图像数据通过加密部36、通信部37的发送部38和第1天线20以无线 LAN或WiMAZ等的无线向接入点等发送,经由因特网40向服务器42发送。即,将照片等的图像数据上载。
有通信状态较差的情况或因附近没有接入点或基站等的理由而不能将一部分的图像数据上载的情况。在此情况下,上载到服务器42中的图像、以及还没有上载的图像混合存在。在此情况下,在服务器42的图像的数据和摄影的图像的数据中发生差异。详细在后面说明,在本发明的情况下,采用以下方式:通过TV45等上附带的RF-ID读写器46读取摄影装置1 的RF-ID47的第2存储器52的服务器确定信息48等,使用该数据生成服务器42的URL等,使用该URL从TV45向服务器42访问,对摄影装置1上载的文件或文件夹等的数据50访问,将由摄影装置1摄影的图像中的已上载的图像下载而显示在TV45上。
如果实际摄影的图像的一部分或全部没有上载到服务器42的数据50 的图像数据之中,则在下载到TV45中的情况下,可以考虑到发生实际摄影的图像的一部分不能由TV45视听的问题。
为了解决该问题,在本发明中,对于第1处理部35的摄影图像的状况数据,通过记录再生部51在第2存储器52的摄影图像状况信息55中记录上载状况等。
使用图4详细说明。在第2存储器52中,记录有表示服务器42的图像数据与照相机摄影的图像数据是否一致、换言之表示是否同步的同步信息56。在本发明中,TV45经由第2天线21读取第2存储器52之中的摄影图像状况信息55。因此,能够立即确认在服务器的数据50中是否没有不足的图像。如果在有未上载的图像时,将该结果显示在TV45的显示部上,对视听者给出“请进行图像的上载”的显示、或经由RF-ID的天线21对照相机发出命令,对启动部170发送启动信号,强制地使摄影装置1的第1 电源部101启动,使摄影装置1的第1存储器174等中的未上载图像经由无线LAN或有线LAN、或RF-ID用的第2天线21等向服务器42上载。
在经由RF-ID的天线21的情况下传送量较小,所以如果要将原来的图像数据原样发送,则在上载和图像的显示中花费时间,给使用者带来不愉快。为了避免该情况,在本发明中,在经由天线21的情况下,发送未上载图像的缩略图图像。由此,能够缩短表观上的上载时间及显示时间,能够减轻给使用者带来不愉快的情况。在当前的HF带的RF-ID中,几百kbps的传送量的情况较多,还对4倍速进行了研究。在此情况下,有可能能够实现几Mbps。如果发送未上载图像的缩略图图像数据,则能够1秒钟发送几十张图像。在一览显示的情况下,具有能够在一般用户能够容忍的时间内将包括未上载图像的全部图像显示在TV上的效果。该方法可以说是1个现实性的方法。
在这样使摄影装置强制的启动而传送未上载图像的情况下,使用无线 LAN、RF-ID的天线21、有线LAN中的速度最快、最稳定的路径进行上载及向TV的显示。对第2天线21发送信号的通信部171在经由第2天线 21从外部接受电源供给的状况下使用低速的调制方式进行通信,但在从第 1电源部101等接受电源供给的状况下,根据需要而将调制方式切换为QPSK、16QAN、64QAN等的信号点数的较多的调制方式,使传送高速化,将未上载的图像数据以短时间上载。另外,如果由电源检测部172检测到第1电源等的余量较少或外部电源非连接等情况,则停止从第1电源部101 的供电,通过调制方式切换部175将通信部171的调制方式切换为信号点数较少的调制方式、或传送速率较小的调制方式。由此,能够将第1电源部101的规定值以下的低容量防止于未然。
此外,作为别的电力对策,在电力没有富余的情况下第2处理部95或通信部171等经由第2天线21对TV45的RF-ID读写器46发送电力增加请求信号而请求支援。对应于此,RF-ID读写器使发送电力增加到比RF -ID读取时的电力的规定值大的值。RF-ID侧由于经由天线21接受的供电量增加,所以能够向通信部171或第1处理部35供电。通过该方法,第 1电源部101的电池100的电量不会减少。或者,具有即使没有电池100 也能够实质上无限地继续发送作业的效果。
此外,作为别的方法,也可以使用图3的上载图像数据信息60。将上载的图像的信息61、例如照片号码等记录。也可以使用将该信息散列而得到的信息62。在此情况下,具有信息量减少的效果。
如果使用该数据,则TV45通过读取该数据、与照相机摄影的图像的信息比较,能够得到未上载的图像的信息。
作为别的方法,可以使用未上载图像数据的存在识别信息63。通过表示是否存在未上载图像数据的存在识别符64,能够通知有无未上载图像,所以能够大幅削减第2存储器52的信息。
也可以是未上载图像的张数65。在此情况下,能够使TV45读取,所以能够对视听者通知需要上载的张数。在此情况下,除了张数以外,如果将数据容量作为摄影图像状况信息55记录,则能够将用于上载未上载图像的预测时间更正确地显示在TV45上。
此外,也可以使用将未上载图像信息散列而得到的信息67。
此外,通过在第2存储器52中记录最后摄影的时间68,在之后从TV45 读出,在连接到服务器42上时,与服务器42的最终上载的图像的摄影日比较,由此能够简单地判断有无未上载图像。此外,在从较旧的顺序起赋予图像号码的方式中,通过仅将摄影的图像的最终号码69记录,通过与上载到服务器上的图像的最后的图像号码对照,能够得到是否有未上载图像的信息。此外,将摄影的图像的信息70、例如摄影的图像的图像号码的全部记录到第2存储器52中。于是,通过在之后对服务器42访问时与上载到服务器42中的图像数据比较,能够判断是否有未上载数据。在此情况下,通过使用将摄影的图像信息散列而得到的信息71,能够将数据压缩。
作为第2存储器52的其他信息,记录有RF-ID的UID75、照相机ID 部76、介质识别信息111。它们即使没有接通照相机的主电源(除了时钟的后备等的副电源以外),也被从TV45经由第2天线21读取,用于照相机及用户的识别、设备的认证。当从海外旅行等回归时电池的充电量较少的情况较多,但在本发明的情况下,即使没有电池也能够动作且发送信息,所以方便性良好。介质识别信息111包含表示是否为内置RF-ID的设备或介质是否是照相机、录像机、明信片、卡、便携电话的识别符等。在TV45 侧,由于能够通过该识别符确定设备、介质,所以在画面上如后述的图22 所示那样显示照相机或明信片的标记或图标,或根据识别信息变更处理。
此外,记录有图像显示方法指示信息77,例如在图5的一览显示78 是ON的情况下,当使第2天线21接近于TV45的RF-ID读写器46时使照片等的缩略图的图像数据一览显示。
当幻灯放映79是ON时,使TV45将图像数据以从新到旧的顺序、或从旧到新的顺序1张张地依次显示。
在第2存储器52的图的下部,设有服务器确定信息48的记录区域。
由此,通过符合照相机操作者的喜好的显示方法在TV画面上显示。
其中,有作为用于生成服务器URL的元信息的服务器URL生成信息 80,设有用于记录服务器地址信息81及用户识别信息82的区域,具体而言记录有登录ID83等。此外,有用于记录口令84的区域,根据情况而记录有被加密的口令85。这些数据通过设在摄影装置1的内部或RF-ID47 的内部、或照相机的内部、或TV45侧的URL生成部90生成用于访问服务器42中的对应于该摄影装置、或对应于用户的图像数据群的URL。该 URL生成部90当处于RF-ID47中时由第2电源部91供给电源。
此外,也可以制作URL92而直接记录到第2存储器52中。
作为该第2存储器52的数据,从RF-ID侧的第2处理部95和照相机侧的第1处理部35的哪个都能够读取数据,这一点为特长。
因而,在TV45去读取照相机的RF-ID47的情况下,具有能够将用于瞬间得到上载状况信息、服务器地址及登录ID、口令的服务器42中的对应于该照相机的图像数据下载而在TV45上高速显示的效果。
在此情况下,具有即使不接通摄影装置1的主电源、也因从RF-ID 读写器对第2电源部91供给电源而动作的效果。因而,摄影装置1的电池 100的电力不会降低。
回到图3,第1电源部101从电池100接受供电,对照相机的各部供给电源。但是,在休止状态下,通过第3电源部102对时钟103等供给微弱的电源。根据情况,对第2存储器52的一部分的存储器供给后备电力。
RF-ID47接受来自第2天线的电力,使第2电源部91动作,第2处理部95使数据接收部105、记录部106、再生部107、数据转送部108(通信部171)及第2存储器52动作。
因此,在照相机的休止状态下完全不耗电,所以能够永久地保持照相机的电池100。
使用图7的流程图说明照相机、卡侧的处理和TV、RF-ID读写器侧的处理。
在图7的步骤150a中,当主电源为OFF(断开)时,在步骤150b中检查是否进行了主电源OFF时的RF-ID读写器的启动设定,如果是Yes,则在步骤150c中将RF-ID读写器46设为ON(打开),在步骤150e中进入RF-ID读写器的节电模式。
在步骤150f中,测量天线部的阻抗等或进行接近传感器的测量,如果在步骤150g中使RF-ID接近于RF-ID读写器的天线,则在步骤150g中检测到接近或接触的情况下,在步骤150h中对天线开始电力的输出,在步骤150k中第2电源为ON,第2处理部开始动作,在步骤150m中开始交换信息。
如果在步骤150中进行了接收,则在图8的步骤151a中开始相互认证,在步骤151f中开始相互认证,在步骤151b、151g中如果相互认证为OK(成功),则在步骤151d中将第2存储器的数据读出,在步骤151e中将第2存储器的数据发送,在步骤151i中RF-ID读写器接收第2存储器的数据,在步骤151j中检查第2存储器的识别信息等是否正确,如果OK则在步骤151m中观察在TV45侧是否有自动电源ON(接通)的识别信息,如果是 Yes,则在步骤151r中检查TV的主电源是否是OFF,如果是OFF,则在图9的步骤152a中使TV的主电源为ON,在步骤152b中在第2存储器52 中有强制显示命令的情况下,在步骤152d中将TV的输入信号切换为RF -ID的画面显示信号,并且在步骤152e中读取格式识别信息,在步骤152f 中根据格式识别信息读出第2存储器,改变数据格式而读取对应的数据,在步骤152g中在第2存储器部中有“口令要求标志”的情况下,在步骤152h 中读取第2存储器的“不需要口令输入的TV的ID”,在步骤152i中在本机的TV的ID与“不需要口令输入的TV的ID”不一致时,在步骤152q中从第2存储器读取口令,在步骤152v中将口令的加密解密,在步骤152s 中将口令发送。另外,步骤152q、152r、152s也可以作为服务器42保持的数据50而在服务器42具备的存储装置中记录口令。
在步骤152j中获得口令,在步骤152k中显示口令输入画面,在步骤 152m中检查输入的口令是否正确。该作业也可以在服务器42中进行。如果是OK,则进行基于RF-ID的第2存储器的信息及程序的显示。
在图10的步骤153a中,如果第2存储器的RF-ID的介质识别信息 111是照相机,则在步骤153b中,将照相机的图标(字符)显示在TV的显示部上,如果不是照相机,则在步骤153c中,如果是邮政明信片则在步骤153d中将邮政明信片的图标显示在显示部上,在步骤153e中如果知道是IC卡,则在步骤153f中将IC卡的图标显示在显示部上,在步骤153g 中如果知道是便携电话,则将便携电话的图标显示TV画面的角上。
在图11的步骤154a、154i中,从服务器或第2存储器读取服务内容识别信息,在步骤154c中检查是否是图像显示服务,在步骤154b中检查是否是直接邮件等的明信片服务,在步骤154d中检查是否是广告服务,在步骤154f和154j中从第2存储器得到服务器确定信息48,如果在第2存储器中没有URL92的情况下前进到步骤154h和154k,得到服务器地址信息 81和用户识别信息82,在图12的步骤155a、155p中,从第2存储器得到加密的口令,在步骤155b中得到解密后的口令,在步骤155c中根据上述信息生成URL,也包括在第2存储器中有URL92的情况,在步骤155d中经由通信部和因特网对URL的服务器访问,在步骤155k中开始与服务器 42连接,在步骤155q中读取动作程序存在识别符119,在步骤155e中判断是否有动作程序存在识别符,在步骤155f中有多个动作程序的情况下,在步骤155r中读取动作程序选择信息118,在步骤155g中设定了动作程序选择信息的情况下,在步骤155h中选择特定的动作程序的目录信息,在步骤155s中读入第2存储器的动作程序的服务器上的目录信息117,在步骤 155i中对服务器上的特定目录的动作程序访问,在步骤155m中将动作程序送出或使其在服务器上动作,在步骤155j中开始动作程序的动作(TV 侧或服务器侧),在图13的步骤156a中检查是否有图像利用服务,如果是 Yes,则在步骤156b中开始未上载图像数据的确认作业。
在步骤156i中读取未上载数据存在识别符64,在步骤156c中未上载数据存在识别符64是ON的情况下,在步骤156d中读取未上载图像的张数66和数据容量65,在步骤156e中显示未上载图像的张数66,根据未上载数据容量65将数据的上载预测时间显示在TV的显示部上,在步骤156f 中,在假如照相机侧处于能够自动上载图像的状态的情况下,在步骤156g 中将照相机启动,经由第1天线20或第2天线21等,通过无线或用触点的有线,向服务器上载未上载数据,如果完成,则向图14的步骤157a前进,在步骤157a中检查是否有收费程序,在NO的情况下在步骤157n中读取图6的图像显示方法指示信息的识别符121,在步骤157b中检查在服务器中是否有图像显示方法识别信息,如果是Yes,则在步骤157p中将记录有图像显示方法指示信息的服务器上的目录信息120读出,在步骤157c 中将记录有与UID等对应的图像显示方法指示信息的服务器上的目录信息 120读取,在步骤157d中从服务器得到服务器上的图像显示方法指示信息,向步骤157f前进。
在步骤157b是NO的情况下,前进到步骤157e,从照相机得到图像显示方法指示信息,前进到步骤157f。
在步骤157f中,基于图像显示方法指示信息开始显示,在步骤157g 中读取全部图像显示识别符123,在步骤157g中如果是全部图像显示,则在步骤157r中显示全部图像,如果是NO,则将步骤157s的特定目录124 的一部分图像在步骤157h中显示,在步骤157i中如果是一览显示125,则读取步骤157t的显示顺序识别符122,在步骤157j中基于显示顺序识别符,以日期顺序、上载顺序显示,在步骤157v中读取幻灯放映识别符126,在步骤157k中如果是OK,则在步骤157m中基于显示顺序识别符122进行显示,从第2存储器读出画质优先127,在图15的步骤158a中显示方法不是画质优先的情况下,在步骤158q中检查是否是速度优先128,在步骤158b 中如果是速度优先,则在步骤158c中调查是否处在显示声音服务器中,在步骤158s中调查声音的服务器的目录130,在步骤158a中对显示声音的服务器上的目录访问而输出声音。
在步骤158e中如果优先显示图像不是全部图像,则在步骤158f中选择一部分图像,在步骤158v或步骤158w中获得特定目录124的信息(步骤158g),在步骤158h中显示特定目录的图像。也可以如步骤158i那样进行全部图像显示。如果在步骤158j中显示完成,则在步骤158k中进行“是否观看别的图像”的显示,在Yes的情况下在步骤158m中显示别的目录的图像的菜单。
如果在图16的步骤159a中要求特定使用者的图像,则在步骤159m中得到特定使用者全部图像132的数据和特定使用者的口令133,在步骤159b 中要求特定使用者的口令,在步骤159c中如果正确,则在步骤159p中读取装有图像列表的文件的目录信息134,在步骤159d中访问装有特定使用者的图像列表的目录,在步骤159r中从服务器的特定目录下载图像数据,在步骤159e中显示特定使用者的图像。
在步骤159f中开始颜色修正例程,在步骤159g中根据照相机ID和照相机ID部76读出照相机机种信息,在步骤159h和159t中从服务器下载照相机机种的特性数据。接着,在步骤159i、159u中下载TV的特性数据。在步骤159w中运算数据而得到修正数据。在步骤159j中基于照相机和TV 的特性数据修正显示部的颜色及明亮度,在步骤159k中以正确的颜色和明亮度显示。
在图17的步骤160a中强制印刷命令是ON、且在步骤160b中照相机接近的终端是打印机、或连接在打印机上的终端的情况下,在步骤160c中获得各图像数据的照相机机种信息和打印机的机种名,在步骤160d中根据服务器的各信息计算修正数据而进行修正,在步骤160p中得到包含印刷对象的图像数据的目录信息137,在步骤160e中使用记录有印刷对象的图像数据(文件名)的目录的地址对服务器访问,在步骤160m中将特定的目录的图像数据送出,在步骤160f中得到印刷图像数据,在步骤160g中进行印刷,在步骤160h中完成印刷。在步骤160i中将表示完成了1次印刷的识别符记录到各图像数据中,在步骤160n中,在服务器上对印刷的图像数据赋予印刷完成识别符。
接着,说明在介质(照相机、明信片等)侧的存储器中没有记录功能的情况下的实施例。
上接图8的圈3、圈4、圈5。首先,在TV侧,在图18的步骤161a 中使TV的主电源成为ON,在步骤161k中从第2存储器读取UID,在步骤161b中获得UID,在步骤161m中得到服务器确定信息48,在步骤161c 中对服务器的目录访问,在步骤161d中检索与该UID对应的服务的最终服务器。在步骤161e中有最终服务器的情况下,在步骤161g中对最终服务器访问,从UID列表读出使用者的ID、口令和服务名,假如在步骤161h 中要求口令的情况下在步骤161i中判断是否正确,在图19的步骤162a中检查是否是照片或视频的服务,如果是Yes,则在步骤162b中从与上述UID 建立了关联的服务器的特定目录之中读出包括对应的收费等的程序及显示的图像数据的地址及文件名的列表、以及图像显示指示信息、强制显示命令、强制印刷命令、照相机ID,根据这些数据及次序自动地进行显示、印刷作业。
根据需要而要求口令输入,在步骤162c中在想要印刷特定的图像的情况下,在步骤162d中将想要印刷的特定的图像数据添加到与上述UID对应的服务器上、或TV的印刷目录中,在步骤162e中检查是否在TV上连接着打印机、或者有单独的打印机,在Yes的情况下,如果在步骤162f中使该明信片等的介质的RF-ID部接近于打印机的RF-ID读写器,则在图20的步骤163a中,打印机将上述介质的UID读入,从图的修正服务器上的上述印刷目录读出应印刷的图像数据或图像数据的场所,将该图像数据印刷,在步骤163b中印刷完成而结束。
在接着图19的23的步骤163i的下个步骤163b中,在是购物服务的情况下,在步骤163e中检查认证是否正确,在正确的情况下,在步骤163f 中将与上述UID建立关联的购物-收费程序从服务器读出,执行程序,在步骤163g中如果程序完成则结束。
接着,对将内置在明信片中的RF-ID的数据以无RF-ID读取器的方式而读取的方法进行说明。
在图21的步骤164a中,在附着或内置在明信片等的介质中并且记录有中继服务器的URL信息的第2RF-ID的外面上,以2维条码印刷显示有确定UID和中继服务器的第1URL的数据。
在步骤164b中,有具有与主服务器的通信功能并具有第1RF-ID部、在其中记录有主服务器的第1URL信息的照相机,通过该照相机的摄影部,将上述2维条码光学地读取,变换为确定第2RF-ID的UID和中继服务器的第2URL的数据。
在步骤164c中,将上述变换后的数据记录到照相机的存储器中。
在步骤164d中,从用照相机摄影的图像中选择特定的图像群,记录到主服务器上的特定的第1目录中。同时,将第1目录信息与主服务器的第 1URL信息一起上载到第2URL的中继服务器上的特定的第2目录中。将用于将特定的第2RF-ID的UID与上述第2目录建立关联的信息上载到上述第2URL的中继服务器中,在步骤164e中,将明信片等的介质向特定的人邮寄。
在步骤164f中,接受到明信片的人将明信片的RF-ID部靠近TV等的RF-ID读取部,得到中继服务器的第2URL和明信片的UID。
在步骤164g中,对第2URL的中继服务器访问,将与上述UID建立了关联的第2目录的中的程序、或者记录有特定的图像数据的主服务器的第1URL和第1目录信息取出,从主服务器下载图像数据,显示在TV画面上。在此情况下,将一般印刷在商品或明信片上的、记录有服务器服务器信息的2维条码通过本发明的摄影装置的摄像部读取,将2维条码的信息作为数字数据记录到RF-ID部的第2存储器中,通过使TV的RF-ID 读取器读取该数据,即使是没有2维条码用的光学传感器的TV,也能够间接地读取2维条码的数据、向服务器等自动地访问。
图22(a)表示使摄影装置1接近于TV45的RF-ID的天线138时的显示状态。
如果使摄影装置1接近于天线138,则如上述那样,显示用于识别是照相机的照相机的图标140。
接着,由于知道未上载的图像有几张(例如5张),所以使5张空白图像142a、142b、142c、142d、142e宛如从照相机的图标140中出来那样显示。
由此,显示针对“来自物品的信息”的“有形的”图像,所以用户能够以更自然的感觉观看图像。
数据处于服务器中的实际图像如143a、143b、143c那样,同样有形地显示。
图22(b)表示在明信片139中埋入了RF-ID的情况。由于通过TV45 的RF-ID读写器46读入明信片的属性信息,所以如图示那样在TV45的左下角显示明信片的图标141,与图22(a)同样有形地显示服务器的图像及菜单画面。
以下,对将图4中所示的动作程序116向作为摄影装置1的RF-ID47 的通信对象的设备即图3的TV45发送、作为该RF-ID部的通信对象的设备执行发送来的程序的处理的详细情况进行说明。
图23是作为摄影装置1的RF-ID47的通信对象的设备执行发送来的程序的处理所进行的块图。在本图中,图示了由摄影装置1的一部分(RF -ID47、第2天线21)、电视机(TV)45、及TV45的遥控器827构成的通信系统。这里,摄影装置1是具有通过红外线通信路与和TV45连接的 RF-ID读写器46之间进行近距离无线通信的RF-ID47的照相机,具备近距离无线通信用的天线21、经由天线21接收从RF-ID读写器46供给的输入信号的接收部105、至少存储有作为用于确定通信装置的识别信息的 UID部75和参照该UID部75由TV45执行的动作程序116的非易失性的第2存储器52、以及根据由接收部105接收到的输入信号将存储在第2存储器52中的UID部75及动作程序116经由天线21向RF-ID读写器46 发送的数据转送部108,在将从数据转送部108发送来的UID部75及动作程序116从数据转送部108经由天线21、RF-ID读写器46及红外线通信路向TV45转送这一点上具有特征。以下,详细地说明各构成单元。
摄影装置1的RF-ID47具有第2存储器52,第2存储器52保存有在作为RF-ID部的通信对象的电视机45中动作的动作程序116。即,该动作程序116是参照摄影装置1的识别信息由TV45执行的程序的一例,例如如后述那样,是Java(注册商标)等的执行形式程序、或者Java(注册商标)脚本等的脚本形式的虚拟机用程序。
RF-ID47的再生部从第2存储器52将包括摄影装置1所固有的UID 或URL的服务器确定信息等的作为为了执行动作程序而需要的信息的数据与动作程序116一起读出,经由数据转送部108及第2天线21向进行电视机45的远程操作的遥控器827的RF-ID读写器46发送。
遥控器827的RF-ID读写器46接收从摄影装置1的RF-ID47发送的数据和动作程序,存储到RF-ID存储部6001中。
此外,遥控器827的遥控器信号生成部6002将从摄影装置1的RF- ID47发送而记录在RF-ID存储部6001中的数据和动作程序变换为当前广泛用于遥控器用通信的红外线方式等的遥控器信号。
遥控器信号发送部6003将包括由遥控器信号生成部6002生成的动作程序的遥控器信号对电视机45发送。
电视机45的遥控器信号接收部6004接收从遥控器827发送的遥控器信号,程序执行部6005例如是Java(注册商标)等的虚拟机,经由解密部 5504从遥控器信号取得从摄影装置1的RF-ID47发送的数据和动作程序,执行动作程序。
在图24中,表示作为动作程序而执行“参照摄影装置1的识别信息(这里是UID)从图像服务器下载图像数据,并以幻灯放映形式显示图像”的动作的处理的流程。
如果将遥控器接近于摄影装置1,则首先从遥控器的RF-ID读写器 46经由RF-ID的通信对摄影装置1的RF-ID47供给电源,从第2存储器52读出设备固有的UID75、图像服务器的URL48、动作程序116(S6001)。将读出的UID、图像服务器URL、动作程序通过数据转送部108及第2天线21朝向遥控器827发送(S6002)。这里,动作程序如图25所示,由服务器连接命令6006、下载命令6008、幻灯放映显示命令6010、下载完成时的处理设定命令6007、下载完成时命令6009构成。
在遥控器827中,用RF-ID读写器46接收从摄影装置1发送的UID、图像服务器URL、动作程序(S6003及S6004),如果接收完成,则将UID、图像服务器URL、动作程序存储到RF-ID存储部6001中(S6005),并且将UID、图像服务器URL、动作程序变换为能够作为遥控器信号以红外线方式发送的形式(S6006)。并且,在受理了用户在遥控器827上进行规定的操作输入、发送遥控器信号的指示的情况下(S6007),将包括UID、图像服务器URL、动作程序的遥控器信号从遥控器信号发送部发送(S6008)。即,遥控器827除了作为通常的遥控器的功能以外,还作为由内置的RF- ID读写器46从摄影装置1朝向TV45转送UID、图像服务器URL及动作程序的中继器发挥功能。
接着,在电视机45中,接收从遥控器827发送的遥控器信号(S6009),由解密部取得包含在遥控器信号中的UID、图像服务器URL、动作程序 (S6010)。并且,程序执行部6005使用UID、图像服务器URL执行动作程序(S6011~6015)。动作程序首先使用图像服务器URL与通信网络上的图像服务器42建立连接(S6012及图25的6006)。并且,使用作为摄像设备所固有的信息的UID,从保持在图像服务器42存储装置中的图像数据 50之中选择由特定的摄像设备摄影的图像数据,下载到电视机中(S6013、 S6014及图25的6008)。即,UID为了选择图像服务器42保持的图像数据中的、与UID表示的摄影装置1建立了对应的图像数据而使用。如果图像的下载完成,则将图像以幻灯放映形式依次显示(S6015及图25的6007、 6009、6010)。图25的6007是设定图像下载完成时的处理的命令,在图25 中,作为图像下载完成时的处理而设定命令6009。进而,在处理6009之中调用执行图像的幻灯放映显示的处理6010。
另外,在图23及图24中,经由遥控器827将动作程序及动作程序所使用的数据从摄影装置1向电视机45转送,但关于遥控器827的RF-ID 读写器46,也可以是电视机具备的结构。即,RF-ID读写器46也可以内置在TV中。换言之,将读取器装置与设备连接的通信路径既可以是红外线等的无线通信路径,也可以是有线的信号线缆。
另外,在上述动作例中,UID为了从图像服务器42保持的图像数据选择与摄影装置1对应的图像数据而使用,但也可以用于确定放置有图像数据的图像服务器。例如,在存在多个图像服务器的通信系统中,在将UID 与保存有该UID表示的摄影装置的图像数据的图像服务器建立了对应的情况下,通过制作动作程序以参照该UID决定图像服务器的URL,执行动作程序的TV45通过参照UID而从多个图像服务器中确定与该UID建立了对应的图像服务器,能够从该图像服务器下载图像数据。
此外,作为确定摄影装置1的识别信息,并不限定于UID,也可以是摄影装置1的序列号码、制造号码、MAC(Media Access Control)地址、相当于MAC地址的信息(IP地址等)、或者在摄影装置1具备作为无线 LAN的接入点的功能的情况下也可以是SSID(Service SetIdentifier)、相当于SSID的信息。进而,在上述第2存储器52中,将确定摄影装置1的识别信息(UID75)与动作程序116独立保存,但也可以保存(记述)到动作程序116之中。
另外,遥控器信号(即,将读取器装置与设备连接的通信路径)设为使用红外线方式而进行了说明,但并不限定于此,例如也可以是Bluetooth 等的无线通信方式。一般通过使用比红外线通信高速的无线通信方式,能够缩短动作程序等的转送所需要的时间。
另外,动作程序不仅是图25所示的格式的程序,也可以是其他编程语言。例如,如果用Java(注册商标)记述动作程序,则由于称作Java(注册商标)VM的程序执行环境的通用性较高,所以多种设备中的动作程序的执行变得容易。此外,如果用以Java(注册商标)Script为代表的脚本形式的能够存储到较小的存储容量中的紧凑的编程语言记述,则即使在由第2 存储器52表示的RF-ID的存储容量较小的情况下也能够将动作程序保存到RF-ID内部。此外,为了减轻电视机那样的具备程序执行环境的设备的处理负荷,动作程序也可以不是作为图25所示那样的源代码、而是实施了编译等处理的执行形式的程序。
进而,使用图26和图27,对根据具备RF-ID读取器的显示装置的固有信息变更程序的动作的处理的详细情况进行说明。
图26所示的电视机45具备语言代码保持部6013,程序执行部6005 在作为遥控器信号接收到的动作程序进行连接到服务器42上的处理的情况下,从语言代码保持部6013读出语言代码,连接到对应于语言代码的服务器42,从该服务器42下载服务器程序,再将下载的服务器程序执行。例如如果语言代码是日语,则连接到具备包括对应于日语的处理的程序存储部 6011的服务器42,将从该程序存储部6011取得的服务器程序在电视机上执行。即,在图23中说明那样的保存在摄影装置1的RF-ID47中的动作程序仅执行向服务器42的连接,为了显示其以外的图像的处理的执行,使用从服务器下载的服务器程序。
用图27说明这样的处理的流程。电视机从摄影装置1的RF-ID47接收动作程序及动作程序所需要的数据的处理与在图24中说明的处理相同。这里,电视机45作为遥控器信号接收到的服务器确定信息包括表示对应于英语的服务器42的服务器地址和表示对应于日语的服务器42的服务器地址这两种,电视机作为遥控器信号接收到的动作程序为记述有由图25的 6006表示的向服务器的连接命令的程序。
电视机45的执行环境取得电视机45的语言代码(S6016),如果语言代码是日语,则从服务器确定信息之中选择具备包含对应于日语的处理的程序存储部6011的服务器的服务器地址(S6017、S6018),如果语言代码不是日语,则从服务器确定信息之中选择具备包含对应于英语的处理的程序存储部6011的服务器的服务器地址(S6017、S6019)。接着,使用所选择的服务器地址连接到服务器42上(S6021),从服务器42下载服务器程序(S6022、S6023)。将所取得的服务器程序在电视机的程序执行环境(例如虚拟机)中执行(S6024)。
另外,在图26和图27中对语言代码的使用进行了说明,但也可以如制造号码或序列号码那样是表示显示装置被销售及/或设置的国家的信息。
在图28中表示摄影装置1和TV45使用无线LAN或Power Line Communication(以下记作PLC)等构成家庭网络6500的情况。在摄影装置1和TV45具有能够经由无线LAN直接通信的直接通信部6501、6502 的情况下,摄影装置1能够将图像不经由因特网上的服务器而向TV45发送。即,摄影装置1自身可以兼起到服务器的作用。但是,无线LAN等的在家庭网络6500中使用的一些通信媒体具有容易被他人监听的特性。因此,为了进行安全的数据通信而需要相互认证、交换加密的数据。例如,在当前的无线LAN设备中将接入点作为认证终端,在想要认证的终端的画面上显示全部能够连接的接入点,使用户选择接入点,通过输入WEP密钥来进行加密的通信。但是,对于一般的用户而言,该处理较复杂。此外,在TV 等的家电设备中内置有无线LAN的情况下,存在许多能够认证的终端。在集体住宅等中也可能与邻居的终端通信,所以用户选择认证终端本身变得困难。例如在邻居中使用同机种的TV6503的情况下,用户很难根据显示在画面上的信息识别自家的TV45。
在本发明中能够解决该问题。在本发明中,使用RF-ID进行认证处理。具体而言,作为上述动作程序,在摄影装置1的RF-ID部47的第2 存储器52中保存包括MAC地址58的认证程序,通过向TV45的RF-ID 读写器46接近,对TV45交接认证程序。在认证程序中,与MAC地址一起包含有认证用的加密密钥和认证命令,辨识出在从RF-ID47传递来的信息中包含有认证命令的TV45进行认证处理。RF-ID47的通信部171只要在物理上不接近就不能通信,所以在宅内监听是很困难的。此外,由于通过在物理上接近来进行信息的交换,所以能够避免与邻居的TV6503或 DVD记录机6504等的宅内的其他设备进行错误认证的情况。
在图29中表示不使用RF-ID的情况下的认证方法的一例。用户输入照相机及DVD记录机等的想要认证的终端的MAC地址和各终端的认证用的加密密钥6511。被输入的TV45朝向具有被输入的MAC地址的终端,发送称作挑战6513的适当的消息。接收到挑战的摄影装置1将挑战消息 6513使用认证用加密密钥6511加密,朝向作为发送来挑战的终端的TV45 返送。接受到返送的TV45使用被输入的认证用加密密钥6511将挑战解密。由此,确认认证用加密密钥6511的正当性,防止用户的错误或有恶意的用户的介入。接着,将数据用的加密密钥6512a使用认证用的加密密钥6511 加密,朝向摄影装置1发送。由此,在TV45与摄影装置1间能够进行加密的数据通信。进而,与DVD记录机6504及其他设备(6505、6506)也进行同样的处理,通过具有共通的数据加密密钥6512a,能够在连接在家庭网络上的所有的设备间进行加密的通信。
在图30中表示使用RF-ID的情况下的认证方法。在使用RF-ID的认证处理中,在摄影装置1内制作认证程序6521a,从照相机的RF-ID47 交接给TV的RF-ID部46。在认证程序6521a中,包括认证命令、照相机的MAC地址和照相机的认证用加密密钥。接受到认证命令的TV通过 RF-ID取出照相机的MAC地址和认证用加密密钥,将数据用的加密密钥通过认证用加密密钥加密,对指定的MAC地址发送。该发送使用无线LAN 设备进行。在使用RF-ID的认证的情况下,由于机械地进行,所以不发生用户的输入错误。此外,由于需要向TV45接近的动作,所以能够避免有恶意的用户的介入。因此,能够省略挑战等的前处理动作。进而,物理上接近的动作能够使用户辨识使哪个终端与哪个终端认证。另外,在认证程序中不包含认证用加密密钥的情况下,也可以使用与一般的公开密钥认证同样的方法进行认证处理。此外,通信设备也可以不是无线LAN、而只要是构成PLC或Ethernet(注册商标)等家庭网络的设备即可。此外,MAC 地址只要是能够识别在家庭网络内使用的通信终端的固有识别信息即可。
在图31中表示在难以使各终端接近的情况下的使用RF-ID的认证方法。在如电冰箱和TV等那样、两者都难以移动的终端的情况下,很难使用RF-ID直接交接认证程序。在这样的情况下,在本发明中也可以使用遥控器6531等附属于终端的装置中继认证程序信息。具体而言,用内置在遥控器6531中的RF-ID读写器将内置在电冰箱中的RF-ID的程序读出,存储到遥控器6531的存储器中,由用户使移动遥控器6531移动。如果将遥控器6531向TV45接近,则将存储在遥控器6531的存储器内的程序向 TV的RF-ID转送。另外,从遥控器向TV的转送也可以不使用RF-ID、而使用红外线或ZigBee等的遥控器自身中原来内置的通信机构。只要是已经确定了通信的安全性的媒介,是什么都可以。
在图32中表示照相机(摄影装置1)侧动作的流程图。照相机如果成为认证模式,则制作认证用的加密密钥,设定定时器(S6541)。接着,在 RF-ID存储器部中写入自身的MAC地址、制作的认证密钥和认证命令 (S6542)。如果由用户将照相机的RF-ID向TV的RF-ID靠近,则将照相机的RF-ID存储器内向TV的RF-ID转送(S6543)。在最初设定的定时器时间内返回了应答的情况下(S6544),将包含在应答内的加密的数据用加密密钥使用认证用加密密钥解密(S6545)。使用数据用加密密钥与其他设备进行通信(S6546),在能够进行数据通信的情况下(S6547),结束认证处理。在不能将数据正确地解密的情况下,显示认证错误,结束处理 (S6548)。此外,在定时器时间内没有来自TV的应答的情况下,解除认证模式(S6549),显示超时错误(S6550)。
在图33中表示TV45侧动作的流程图。判断在从RF-ID部接收到的信息中是否包含有认证命令(S6560)。在不包含认证命令的情况下,执行与接收到的信息对应的处理(S6561)。在包含认证命令的情况下,认为从 RF-ID部接收到的信息是认证程序,使用存在于认证程序内的认证用加密密钥将自身具有的数据用加密密钥加密(S6562)。进而,对在认证程序内指定的MAC地址发送已加密的数据用加密密钥(S6563)。
以下,对由图3说明的摄影装置1生成或更新能够在TV45中动作的程序并从数据发送部173向TV45发送程序、由TV45执行程序的方式使用附图详细地说明。
图34是本方式的摄影装置1的第1处理部35和第2存储器52的块图,第1处理部35由第2存储器读出部7002、URL生成部7004、程序生成部 7005、程序组件存储部7006及程序写入部7007构成。
第2存储器读出部7002是通过记录再生部51将存储在第2存储器52 中的信息读出的部分。
URL生成部7004经由第2存储器读出部7002从第2存储器52将 UID75、服务器确定信息48、摄影图像状况信息55及图像显示方法指示信息77读出,根据这些信息生成作为图像被上载的服务器42的地址的URL。
UID75是用于识别摄影装置1的识别信息,是对每1台摄影装置唯一的号码。在由URL生成部7004生成的URL中包含有UID,例如在上载图像的图像服务器42中,在对各UID唯一的目录中保存图像文件等,能够生成对每1台摄影装置不同的URL地址。
服务器确定信息48是用于确定图像被上载的服务器的服务器名,通过经由DNS(Domain Name Server),能够判断服务器42的IP地址,能够连接到服务器42上。由此,服务器确定信息48也包含在生成的URL中。
图像显示方法指示信息77是作为选项而能够选择一览显示78、幻灯放映显示79等的信息。URL生成部7004基于该图像显示方法指示信息77 决定URL。即,通过生成表示是一览显示78还是幻灯放映显示79的URL,图像服务器能够基于URL决定是进行一览显示还是进行幻灯放映显示。
如以上这样,本URL生成部7004根据存储在第2存储器52中的 UID75、服务器确定信息48、摄影图像状况信息55及图像显示方法指示信息77等,生成用于视听图像的向图像服务器的URL,将所生成的URL向程序生成部7005输出。
程序生成部7005是根据由URL生成部7004生成的URL、存储在第2 存储器52中的强制显示命令7000、强制印刷命令136及格式识别信息7001、生成能够在TV45中动作的程序的部分。另外,程序生成部7005作为新动作程序的生成方法,既可以基于上述信息生成新的动作程序,也可以通过将已生成的动作程序更新而生成新的动作程序。
由程序生成部7005生成的程序是能够在TV45中动作的程序,需要编译为上述系统控制器用的机器语言,以便能够在TV45的未图示的系统控制器中动作。在此情况下,在本程序生成部7005内具有编译器,将所生成的程序变换为执行形式的程序。
另一方面,如一般的JAVA(注册商标)脚本那样,即使是文本形式(脚本)的程序,在作为由搭载在TV45中的浏览器执行的程序的情况下,不需要上述的编译器。
对程序生成部7005输入的URL是用于进行向记录有图像的图像服务器连接的URL,本程序生成部7005使用URL生成或更新向服务器的连接程序。
此外,强制显示命令7000是在由TV45视听例如基于通常的广播波的节目的过程中TV45的RF-ID读写器46成为能够从本摄影装置1的第2 天线21通信的情况下、将TV45自动地设定为用于从图像服务器显示图像信息的浏览器视听模式的选项,在选择了本选项的情况下,生成用于使 TV45强制显示的程序。
此外,强制印刷命令136是在由TV45视听例如基于通常的广播波的节目的过程中TV45的RF-ID读写器46成为能够从本摄影装置1的第2 天线21通信的情况下、将保存在图像服务器中的图像数据从连接在TV45 上的未图示的打印机自动印刷的选项,在选择了本选项的情况下,生成用于使TV45强制印刷的印刷用程序。
此外,格式识别信息7001是用于显示的格式信息,本程序生成部7005 如果选择了格式信息中的语言代码最适合站点选择的选项,则根据设定在 TV45中的语言代码,生成用于选择连接到服务器的URL的程序。例如,在选择了格式信息中的语言代码最适合站点选择的选项的情况下,生成用于在TV45的语言代码是日语的情况下、作为连接的URL而选择日语的站点、在语言代码是日语以外的情况下、作为连接的URL而选择英语的站点并进行连接的程序。因而,上述的URL生成部7004在选择了格式信息之中的语言代码最适合站点选择的选项的情况下,生成日语站点用的URL和英语站点用的URL这两个URL,向本程序生成部7005输出。
程序组件存储部7006存储有用于由程序生成部7005生成程序的程序命令信息。存储在本程序组件存储部7006中的程序组件也可以是一般的库或API。程序生成部7005在生成向服务器的连接命令的情况下,通过在从程序组件存储部向服务器连接命令即“Connect(连接)”中结合由URL生成部7004生成的URL,生成或更新用于向URL中记述的服务器连接的连接程序。
程序写入部7007是用于将由程序生成部7005生成的程序写入到第2 存储器部中的接口。
从程序写入部7007输出的程序经由记录再生部51存储到第2存储器 52的程序存储部7002中。
在本摄影装置1的RF-ID部向连接在TV45上的RF-ID读写器46 可通信地接近的情况下,通过再生部从第2存储器52的程序存储部7002 读出程序,经由数据转送部108、第2天线21将表示程序的发送信号向RF -ID读写器46发送。被发送的发送信号经由RF-ID读写器46被TV45 接收。TV45执行接收到的程序。
此外,在TV45中,存在制造号码7008、语言代码7009及程序执行虚拟机7010。
制造号码7008是TV45的制造号码,是由此能够判断制造TV45日期时间、场所、制造生产线、制造者等的信息。
语言代码7009是用于设定在TV45中的菜单显示等的语言代码,除了预先设定以外,也可以由用户切换。
程序执行虚拟机7010是用于执行接收的程序的虚拟机,在由硬件构成的情况及由软件构成的情况下两者都是有效的。例如,本程序执行虚拟机由JAVA(注册商标)虚拟机构成。JAVA(注册商标)虚拟机是执行定义的命令集的堆栈型或解释器型的虚拟机。通过搭载该虚拟机,由摄影装置1 的程序生成部7005生成的程序不用选择其执行平台,能够生成在怎样的平台下都能够执行的程序。
图35是表示摄影装置1的程序生成部7005的动作的流程图。
首先,本程序生成部7005将生成程序信息初始化(S7000)。
接着,使用由URL生成部7004使用存储在第2存储器52中的服务器确定信息48生成的URL,生成向服务器42的连接命令。为了生成连接命令,从程序组件存储部7006中选择服务器连接命令用的命令集(例如图中的“Connect”),通过与URL组合而生成服务器连接程序(例如“Connect (URL)”)。
接着,确认第2存储器52的强制显示命令7000,判断强制显示命令是否是ON(S7001)。在为ON的情况下,从程序组件存储部7006调用强制显示程序用的命令集,生成强制显示命令(S7002)。将所生成的命令追加到程序中(S7004)。
另一方面,在强制显示命令不是ON的情况下,不生成强制显示命令。
接着,判断第2存储器52的强制印刷命令是否被设定为ON(S7005)。在为ON的情况下,生成用于将存储在服务器中的图像文件强制印刷的印刷命令(S7006)。将所生成的命令追加到程序中(S7007)。
接着,确认第2存储器52的图像显示方法指示信息77,判断一览显示 78是否被设定为ON(S7008)。在为ON的情况下,生成用于使存储在服务器中的图像文件一览显示的一览显示命令(S7009)。将所生成的命令追加到程序中(S7010)。
接着,确认第2存储器52的图像显示方法指示信息77,判断幻灯放映 79是否设定为ON(S7011)。在为ON的情况下,生成用于将存储在服务器中的图像文件幻灯放映显示的幻灯放映命令(S7012)。将所生成的命令追加到程序中(S7013)。
如以上这样,本摄影装置1的程序生成部7005基于设定在第2存储器 52中的内容,利用存储在程序组件存储部7006中的程序生成用的命令指令集,生成用于由TV45进行图像显示的程序。
另外,在本实施方式中,用强制显示命令、强制印刷命令、一览显示、幻灯放映的情况进行了说明,但并不限定于此。例如,作为生成的程序而生成强制显示命令指令的情况下,如果在执行程序的装置中插入针对是否有显示设备、显示功能的判断程序,仅在有显示设备、显示功能的情况下执行,则能够生成消除了执行程序的设备侧的混乱的程序。在强制印刷命令指令的情况下也同样。可以在执行强制印刷命令指令的设备中插入判断是否具有印刷功能、或连接着具有印刷功能的设备的指令,仅在具有的情况下执行强制印刷命令指令。
接着,对由本摄影装置1的程序生成部7005生成或更新的程序进行说明。
图36是表示由本程序生成部7005生成的程序的处理的流程的流程图,本程序是被经由本摄影装置1的第2天线21发送、由接收的与本摄影装置 1不同的设备执行的程序。在本实施方式中,与本摄影装置1不同的设备是 TV45,将由RF-ID读写器46接收到的程序通过TV45的未图示的控制器 (或虚拟机)执行。
本程序首先将设定在TV45中的语言代码作为TV45的固有信息读出 (S7020)。语言代码是在TV45的菜单显示等时使用的语言代码,是由用户设定的。
接着,判断设定在语言代码中的语言。在本实施方式中,首先,判断语言代码是否是日语(S7021)。在判断为语言代码是日语的情况下,选择程序中的向服务器的连接命令中的、日语站点用的连接命令(S7022)。另一方面,在判断为语言代码不是日语的情况下,选择本程序中的向英语站点的连接命令(S7023)。在本实施方式中,说明了仅判断语言代码是否是日语、分别选择是向日语站点连接、还是向英语站点连接的方式,但如果具备对应于各个语言代码的连接程序、以使得对于两种以上的语言代码也能够对应,则能够向两种以上的语言代码对应,能够提高用户的方便性。接着,按照所选择的连接命令,连接到记述在连接命令中的URL(S7024)。
接着,判断向记述在连接命令中的URL是否连接成功(S7025)。在连接失败的情况下,在TV45的显示部上进行表示连接失败的警告显示 (7027)。另一方面,在连接成功的情况下,执行用于使存储在服务器中的图像文件幻灯放映显示的命令,使存储在服务器中的图像文件幻灯放映显示(7026)。
另外,在本实施方式中,对动作程序是用于使图像幻灯放映显示的程序的情况进行了说明,但有关本发明的动作程序并不限于此。也可以是进行一览显示或强制显示、强制印刷的程序。在强制显示的程序的情况下,将用于自动地变更为显示存储在服务器中的图像文件的设定的步骤作为命令插入。由此,用户能够省去用手动变更TV45的设定的工夫,而显示来自图像服务器的图像文件。此外,在强制印刷的情况下,插入将TV45的设定自动地切换为能够印刷的模式的命令。此外,在强制印刷、强制显示的情况下,需要通过分别插入针对是否具有印刷功能的判断命令、针对是否具有显示功能的判断命令,使得不由没有印刷功能的设备执行强制印刷命令。进而,有关本发明的动作程序也可以是用于导引其他程序的连接程序。例如,如引导加载器那样,也可以是用于将其他程序加载而执行的加载器程序。
如以上这样,在本实施例中公开的发明的特征是,在作为具有RF-ID 通信机构(数据转送部108、第2天线21等)的设备的摄影装置1的第1 处理部35之中,具有程序生成部7005。此外,由程序生成部7005生成或更新的程序由作为具有RF-ID的通信设备的本实施方式的摄影装置1以外的设备执行,这一点也是特征。
以往,搭载RF-ID的设备从RF-ID通信部将自身具有的ID信息(标签信息)向其他设备(例如本实施方式的TV45)转送,在其他设备中,需要对应于ID信息(标签信息)而准备对具有RF-ID的各个设备唯一的动作程序。因而,在出现了具有RF-ID的新的商品的情况下,只能获得对应于该新的商品的动作程序并安装执行、或者作为不能对应的设备排除。此外,在动作程序的安装中,要求专门的知识,不是谁都能简单地进行的。因而,如果具有RF-ID的设备被售出多代,则本实施方式的TV45那样的其他设备老旧化,有损害用户的财产价值的问题。
根据在本实施方式中说明的发明的公开,具有RF-ID的设备具有程序生成部7005,对TV45等的其他设备不发送ID信息(标签信息)而发送程序。在TV45等的其他设备中,通过执行接收到的程序,不需要预先具备与具有RF-ID的各设备对应的动作程序,例如即使在出现新的具有RF -ID的设备的情况下,也不需要安装新的程序,能够显著地提高用户方便性。
由此,TV等终端不需要按照装备RF-ID的物品的个体、种类、或应用系统而具备对应的应用程序。由此,TV等终端不需要具备用于保持许多种类的应用程序的存储装置,并且也不需要修改终端保持的程序等维护。
此外,本程序生成部7005生成的程序中,JAVA(注册商标)语言那样的不选择执行平台的程序是有用的。由此,仅通过在执行程序的TV45 那样的设备中准备JAVA(注册商标)的虚拟机,不论是怎样的设备的程序都能够执行。
此外,本发明的程序生成部7005也可以具有将预先存储在第2存储器 52的程序存储部7003中的程序更新的功能。这是因为,在将程序更新的情况下也具有与生成程序同样的效果。此外,在本程序生成部7005中,生成或更新的程序也可以是在由TV45执行程序的情况下使用的数据的生成或更新。通常,程序具有附带的初始设定数据等,根据该数据切换动作的模式、或进行标志设定,所以在将数据生成或更新的情况下,也与将程序生成或更新是同样的,是本发明的范畴。这是因为,当执行程序时,将其模式切换等的参数作为数据保持而读出、还是植入在程序内部中而执行,这是设计事项。因而,由本发明的程序生成部7005生成或更新的程序也可以同时也生成上述程序使用的参数列等的数据。作为生成的参数,是基于存储在第2存储器52中的强制显示命令7000、强制印刷命令136、图像显示方法指示信息77或格式识别信息7001等生成的数据。
接着,说明本发明的作为具有RF-ID的通信设备的摄影装置1的第2 存储器52及第1处理部的特征性的结构和动作。在本实施方式中,对作为具有RF-ID的通信设备的本摄影装置1在第1处理部35中具有检测关于动作的不良状况、或检测电力使用状况的使用状况检测部、生成用于将检测到的使用状况在作为与本摄影装置不同的设备的TV45上显示的程序的方式进行说明。
图37是表示本发明的摄影装置1的第2存储器52、第1处理部35的特征性的结构的块图。
第2存储器52具有UID75、服务器确定信息48、照相机ID部135及程序存储部7002。
UID75是能够识别本摄影装置1的按照每1台设备而不同的序列号码。
服务器确定信息48是确定从本摄影装置1的通信部37将摄影的图像数据向服务器42发送的服务器的信息,包括服务器地址、保存目录、登录账户、登录口令等。
照相机ID部135记录有本摄影装置1的制造号码、制造年月日、制造商、制造生产线信息、制造场所等,并且还包括用于确定本摄影装置1的机种的照相机机种信息。
第1处理部35由第2存储器读出部7002、使用状况检测部7020、程序生成部7005、程序组件存储部7006及程序写入部7005构成。
第2存储器读出部是将存储在第2存储器52中的内容经由记录再生部 51读出的部分。在本实施方式中,从第2存储器52读出UID75、服务器确定信息48、照相机ID部135,向程序生成部7005输出。另外,本第2 存储器读出部7002在被输入来自后面说明的使用状况检测部7020的读出信号的时刻,从第2存储器52读出上述内容。
使用状况检测部7020是按照构成本摄影装置1的功能单位检测其使用状况的部分。此外,按照构成本摄影装置1的功能单位而具有确认动作不良状况的感知部,将各功能单位的感知部中的感知结果向本使用状况检测部7020输入。例如,从摄像部30输入是否确认了关于摄像部的摄像动作的不良状况(是否发挥功能、对于来自本使用状况检测部的呼叫是否正确应答),从影像处理部31输入在摄像部30摄像的图像数据的数据处理中是否确认了不良状况(是否发挥功能、对于来自本使用状况检测部的呼叫是否正确应答),从电源部101输入电池的电压水平、总的用电量,从通信部 37输入与服务器的连接是否成功、是否完成向因特网的连接(是否发挥功能、对于来自本使用状况检测部的呼叫是否正确应答),从显示部6a输入在显示处理中是否没有不良状况(是否对呼叫正确地应答、是否发挥功能)等,按照功能单位输入不良状况信息或电池寿命、耗电量。在本使用状况检测部7020中,基于按照功能单位发送来的上述那样的状态信息,由内部的不良状况检测部7021按照功能单位判断是否有对于功能动作的不良状况,在确认了不良状况的情况下,将确定不良状况部位的信息、确定不良状况内容的信息向程序生成部7005输出。此外,本使用状况检测部7020在内部中具有使用电力检测部7022,基于来自电源部的总用电信息生成用电信息向程序生成部7005输出。
程序生成部7005生成用于将确定来自使用状况检测部7020的不良状况内容的信息及用电信息用TV45显示的程序。程序生成由于在程序组件存储部7006中预先存储有用于构成程序的命令集,所以生成用于显示不良状况及耗电量的显示命令(指令,command)(在图37中是“display(显示)”)、以及用于显示确定不良状况部位的信息、确定不良状况内容的信息的程序。另外,上述耗电量也可以变换为二氧化碳的排出量,生成作为显示二氧化碳排出量的程序。
由程序生成部7005生成的程序经由程序写入部7007存储在第2存储器52的程序存储部7002中。
存储在第2存储器52的程序存储部7002中的程序被经由数据转送部 108从第2天线21向TV45的RF-ID读写器46发送。
在TV45中,将接收到的程序由程序执行虚拟机7010执行。
根据以上的结构,由第1处理部35内的程序生成部7005生成用于将摄影装置1的使用中的由使用状况检测部7020检测到的不良状况或使用状况信息显示在TV45上的程序,发送给TV45,由TV45显示摄影装置1的不良状况信息及使用状况信息。由此,在TV45中,能够不安装依存于摄影装置1等设备的多个程序,而对用户显示不良状况信息及使用状况信息。
在以往系统中,在TV45内,按照摄影装置、摄像机、电动牙刷、体重计等设备准备简单的液晶显示器等的显示功能,在该显示功能上显示不良状况信息及使用状况信息。因而,仅能够搭载显示能力较低的显示功能,仅能够将不良状况信息用符号列或错误代码显示。因而,如果被输出不良状况信息等,则用户需要翻阅操作说明书、判断是怎样的错误。但是,一部分的用户丢失了操作说明书,能够从因特网的网站获知信息。
但是,在本发明的系统中,能够生成能够由用于显示按照摄影装置1 等装置检测到的不良状况信息的与本摄影装置不同的显示能力较高的设备即TV45执行的不良状况报告显示程序,能够消除上述那样的问题。
以下,对由图3说明的摄影装置1生成的程序在包括TV45的多个设备中动作的方式,使用附图详细说明。
图38是表示在本方式中、摄影装置1生成的程序由多个设备执行的状况的图,由摄影装置1、TV45、带有显示功能的遥控器6520、无显示功能的遥控器6530构成。
TV45由上述RF-ID读写器46、无线通信装置6512构成。无线通信装置6512例如是在当前许多家电的遥控器中使用的一般的红外线通信装置、Bluetooth(蓝牙)或称作ZigBee(紫蜂)的使用电波的面向家电的近距离无线通信装置等。
带有显示功能的遥控器6520由用于对TV45的无线通信装置6512发送信号的发送部6521、用于显示影像的显示装置6523、受理来自用户的按键输入的输入装置6524、用于与RF-ID47通信的RF-ID读取器6522、用于保存由RF-ID读取器6522接收到的程序的存储器6526、以及用于执行由RF-ID读取器6522接收到的程序的作为虚拟机的程序执行虚拟机6525构成。例如,近年来的便携电话是保持红外线通信功能或Bluetooth、 RF-ID读取器、液晶画面、按键输入部、JAVA(注册商标)虚拟机等的、带有显示功能的遥控器的一例。显示装置6523和输入装置6524既可以是液晶画面和多个字符输入按钮,也可以如液晶触摸面板那样为一体。
无显示功能的遥控器6530由用于对TV45的无线通信装置6512发送信号的发送部6521、按钮等的受理来自用户的输入的输入装置6533、用于与RF-ID47通信的RF-ID读取器6532、以及将从RF-ID读取器6532 接收到的数据暂时保存的存储器6535构成。
无显示功能的遥控器6530可以考虑在附属于当前许多TV的一般的遥控器中内置RF-ID读取器的设备等。
在本方式中,考虑将由摄影装置1生成的程序通过经由TV45的RF- ID读写器46直接发送给TV45、由TV45执行程序的第1情形、将由摄影装置1生成的程序通过经由无显示功能的遥控器6530间接地向TV45发送、由TV45执行程序的第2情形、将由摄影装置1生成的程序经由有显示功能的遥控器6520间接地向TV45发送、由TV45执行程序的第3情形、将由摄影装置1生成的程序向有显示功能的遥控器6520发送、由有显示功能的遥控器6520执行程序的第4情形,用户选择性地执行4个情形。
这里,第1情形在实施方式1中已经叙述,所以省略说明。
在下述中,关于第2~第4情形说明详细情况。
第2情形是经由如一般的TV遥控器那样不具有液晶面板等图形显示装置的无显示功能的遥控器6530、由TV45执行由摄影装置1生成的程序的情形。
在用户使RF-ID47接近于RF-ID读取器6532的情况下,RF-ID读取器6532将由摄影装置1生成的程序读出,保持在存储器6535中。
接着,如果用户将输入装置6533按下,则从发送部6531对TV45的无线通信装置6512发送保持在存储器6535中的程序,由TV45上的程序执行虚拟机7010执行程序。在无线通信装置6512是具有指向性的红外线通信装置的情况下,用户在将无显示功能的遥控器6530朝向对应的TV45 的状态下按下输入装置6533。在无线通信装置6512是不具有指向性的 Bluetooth或ZigBee等的近距离无线通信装置的情况下,对事前配对的TV45 发送程序。在近距离无线通信装置的情况下,即使用户不按下输入装置 6533,也可以在RF-ID读取器6532从RF-ID47读入程序的时刻对自动配对的TV45发送读入的程序。
此外,无显示功能的遥控器6530也可以在构成单元中具有用于将由 RF-ID读取器6532读入的数据保持在存储器6535中的情况向用户通知的显示装置、例如LED6534,在从RF-ID读取器6532向存储器6535读入程序时使LED6534点亮、当用户按下输入装置6533、对TV45发送完成程序时使LED6534灭掉。由此,可以将无显示功能的遥控器保持有程序的情况向用户明确地通知。LED6534既可以是单体的LED,也可以与输入装置 6533为一体。
在第2情形中,即使是用户与TV45的位置远离的情况,也能够通过利用手边的无显示功能的遥控器6530在TV45上执行程序。
第3、第4情形是在如例如称作智能手机的高性能便携电话那样、带有显示功能的遥控器6520具有程序执行虚拟机的情况下、用户可以选择在带有显示功能的遥控器上执行由摄像装置1生成的程序、或通过对TV45发送程序而在TV45上执行程序的情况下的例子。
在用户使RF-ID47接近于RF-ID读取器6522的情况下,RF-ID读取器6522将由摄影装置1生成的程序读出,保持到存储器6535中。
接着,使用图39的流程图详细地说明带有显示功能的遥控器6520的动作。
首先,将由RF-ID读取器6522读出的程序向程序执行虚拟机6525 转送并执行(S6601)。
接着,判断遥控器6520是否具有显示设备(S6602)。在遥控器6520 不具有显示功能的情况下(S6602中N),使用发送部6521将程序向TV45 发送,结束处理。在此情况下,将程序在TV45上执行。
在遥控器具有显示功能的情况下(S6602中Y),判断遥控器与发送目的地的TV45是否已配对(S6603)。在遥控器6520与TV45没有配对的情况下(S6603中N),使用遥控器6520的显示装置6523继续执行程序。在遥控器6520与TV45已配对的情况下(S6603中Y),对用户敦促选择,所以在显示装置6523上显示“显示于TV上?还是用遥控器显示?”的对话消息(S6604)。
接着,受理来自输入装置6524的用户输入(S6605),判断用户是否选择了在TV上显示(S6606)。在用户选择了在TV45上显示的情况下(S6606 中Y),使用发送部6521将程序向TV45发送,结束处理。在此情况下,将程序在TV45上执行。在用户选择了用遥控器显示的情况下(S6606中N),使用遥控器6520的显示装置6523执行程序的后续(S6607)。
此外,上述所示的程序的后续,是上述的摄影装置1的电池状态、不良状况状态、操作说明书的显示等,当然并不限制于本实施例。
根据以上的结构,将由摄影装置1生成的程序发送给带有显示功能的遥控器设备,判断带有显示功能的遥控器的能力,在遥控器上决定由哪个设备执行程序的后续。由此,不需要在遥控器自身中安装对应于多个设备的程序,用户能够以喜好的方式执行程序。
此外,在本实施方式中,以遥控器的显示功能的有无、配对状态为判断条件进行了说明,但并不限定于此。程序按照通信能力、声音·影像再生能力、输入设备、输出设备等设备能够具有的能力进行怎样的判断都可以。
如以上说明,RF-ID的存储区域不仅保持数据,还保持记述有设备的动作的程序,由此以往为了变更设备的动作而需要的程序的变更及更新显著地变得容易,也能够对应于许多新功能的追加及联动设备的增加。此外,由于使用RF-ID的近距离通信是靠近这样的用户容易理解的操作,所以能够使以往操作按钮或菜单而较麻烦的设备操作也变得简单,能够容易使用复杂的设备的动作。
(实施方式2)
接着,对于有关本发明的通信系统的具体的动作、即将由照相机取得的图像上载、然后通过简单的操作将该图像下载到TV中而显示的通信系统,作为实施方式2进行说明。通信系统的整体结构与实施方式1是同样的。
在图40A~图40C中,表示照相机(摄影装置1)将照片上载的一连串的步骤的流程图。照相机首先如果将图像摄影(步骤S5101),则将摄影图像保存到第3存储器中(步骤S5102),进行第2存储器信息的更新处理 (步骤S5103)。对该更新信息在后面叙述。接着,由通信部判断是否能够连接到因特网(步骤S5104),如果能够连接,则进行URL的制作处理(步骤S5105)。该处理的详细情况在后面叙述。在制作URL后,照相机进行摄影图像的上载(步骤S5106),如果上载完成,则进行通信部的切断处理 (步骤S5107)并结束。上载处理的详细情况在后面叙述。
步骤S5103的第2存储器信息的更新处理用于在服务器42与照相机之间共用已向服务器42上载的照片和没有上载的照片的识别信息。上载处理 S5105的动作可以举出例如case(情形)1~case4的动作。
有以下方法:记录第2存储器的最后摄影的时间68,在将摄影图像保存到第3存储器中后,更新第2存储器的最后摄影的时间68(步骤S5111)。
通过将上载的时刻与照相机的最终摄影时刻比较,能够在服务器42与照相机之间共用上载的照片的识别信息。
此外,通过对应于摄影的图像、对应于向服务器42的摄影的图像、生成向服务器42的未上载图像数据的存在识别符64而存储到第2存储器中,这样的方法也能够得到同样的效果(步骤S5121)。
此外,也可以将散列了未上载图像信息后的信息67存储到第2存储器中(步骤S5131)。由此,保存在第2存储器中的信息量变少,带来存储器的节约。
此外,也可以在摄影图像中以时间序列生成图像号码、将第2存储器的图像的最终号码69更新(步骤S5141)。由此,即使在照相机的时刻不正确的情况下,也能够取服务器42与照相机之间的关于上载照片的同步。
在图41中表示步骤S5105的URL制作处理的详细情况。照相机从第 2存储器读出包括服务器地址信息81、登录ID83、口令84等的服务器确定信息48(步骤S5201),生成URL(步骤S5202)。
在图42A~图42D中表示步骤S5106的上载处理的详细情况。
各个case(情形)对应于在图40A~图40C中表示的第2存储器信息的更新处理。
在case1中,照相机如果从服务器42接收到向服务器42的最终上载时间(步骤S5211),则将最终上载时刻与最后摄影的时刻比较(步骤S52112)。在最后摄影的时刻比最终上载时刻大、即在有在最终上载后摄影的图像的情况下,将在来自服务器42的最终上载时刻以后摄影的图像上载到服务器 42中(步骤S5213)。
在case2中,照相机从第2存储器确认未上载图像数据存在识别符64 (步骤S5231),确认未上载的存在(步骤S5232)。在存在未上载图像的情况下,将未上载图像向服务器42上载(步骤S5233),将第2存储器的上载的图像的信息67更新(步骤S5234)。
在case3中,照相机首先确认从第2存储器将未上载图像信息散列而得到的信息67(步骤S5301),判断从第2存储器将未上载图像信息散列而得到的信息67是否与将NULL散列的信息相同(步骤S5302),在不相同的情况下,判断为有还没有上载到服务器42中的图像,记录到第3存储器中,将还没有上载的图像向服务器42上载(步骤S5303)。
在case4中,照相机从服务器42接收最终上载图像的号码(步骤 S5311)。接着,判断是否与第2存储器的图像的最终号码69相同(步骤 S5312),在不相同的情况下,将具有比来自服务器42的固有ID新的固有 ID的图像数据上载(步骤S5313)。
图43是表示进行摄影装置1与TV45的RF-ID近距离通信的处理的流程图。
首先,内置在摄影装置1中的第2天线21接收来自TV45的RF-ID 读写器46的轮询所发出的微弱无线电力,启动由第2电源部91动作的RF -ID47(S5401)。
在步骤S5401中接收微弱电力而启动的摄影装置1的RF-ID47对TV45的RF-ID读写器46的轮询进行应答(步骤S5402)。
在步骤S5402中进行轮询应答后,摄影装置1的RF-ID47与TV45 的RF-ID读写器部相互进行是否是正规的装置的认证、以及在摄影装置1 与TV45间进行包括用于进行安全信息通信的加密密钥的密钥共享动作的相互认证(步骤S5403)。该相互认证是使用椭圆加密等公开密钥加密算法的相互认证处理,通常是与基于HDMI或IEEE1394的通信的相互认证处理同样的方法。
在步骤S5403中,在摄影装置1的RF-ID47与TV45的RF-ID读写器46中进行相互认证处理,在生成相互共通的加密密钥后,从能够从RF -ID47读出的存储在第2存储器52中的服务器确定信息58中读出服务器 URL生成信息80,从第2天线21向TV45的RF-ID读写器46发送。在服务器URL生成信息80之中,包括表示服务器42的地址信息的服务器地址信息81、作为向服务器42的登录ID83的用户识别信息82及作为向服务器42的登录口令的口令84。口令84是对于防止来自有恶意的第3者的非法行为很重要的信息,所以也有预先作为加密的加密口令85存储、向 TV45发送的情况。
在步骤S5404中,在将服务器URL生成信息80向TV45的RF-ID读写器46发送后,将存储在第2存储器52中的摄影图像状况信息55与服务器确定信息58同样,从第2天线21向TV45的RF-ID读写器46发送(步骤S5405)。作为摄影图像状况信息55而发送最终摄影时间68(Case1),作为未上载图像数据的存在识别信息而发送按照摄影图像赋予的能够判断是否为未上载数据的存在识别符64(Case2)、将未上载图像信息散列而得到的信息67(Case3)、或对摄影图像以时间序列赋予的图像号码的图像的最终号码69(Case4)。这是为了确认摄影装置1与服务器42的摄影图像的同步而需要的信息。
在Case1中,作为摄影图像状况信息55而采用最终摄影时间68。由此,在TV45中,将向服务器42的最终上载时间与最终摄影时间68比较,如果最终摄影时间68比向服务器42的最终上载时间在时间序列上晚,则认为没有取得保持在摄影装置1和服务器42中的图像信息的同步,在TV45 的显示部上显示没有取得同步的注意信息。
在Case2中,作为摄影图像状况信息55而采用按照摄影图像赋予的能够进行是否是未上载数据的判别的存在识别符64。由此,在TV45中,通过确认按照摄影图像赋予的能够进行是否是未上载数据的判别的存在识别符64,能够判别为存在未上载图像,认为没有取得保持在摄影装置1和服务器42中的图像信息的同步,在TV45的显示部上显示表示没有取得同步的注意信息。
在Case3中,作为摄影图像状况信息55而采用将未上载图像信息散列而得到的信息67。由此,在TV45中,通过确认将未上载图像信息散列而得到的信息67,能够判别为存在未上载图像,认为没有取得保持在摄影装置1和服务器42中的图像信息的同步,在TV45的显示部上显示表示没有取得同步的注意信息。
在Case4中,作为摄影图像状况信息55而采用对摄影图像以时间序列赋予的图像号码的图像的最终号码69。由此,在TV45中,通过确认从服务器42接收的已向服务器42上载的最终图像号码、以及从摄影装置1发送的对摄影图像以时间序列赋予的图像号码的图像的最终号码69,能够判别为存在未上载图像,认为没有取得保持在摄影装置1和服务器42中的图像信息的同步,在TV45的显示部上显示表示没有取得同步的注意信息。
在步骤S5405中,在从摄影装置1的第2天线21向TV45的RF-ID 读写器46发送摄影图像状况信息55后,从第2存储器52将图像显示方法指示信息77与摄影图像状况信息55同样从摄影装置1的第2天线21向 TV45的RF-ID读写器46发送(步骤S5406)。图像显示方法指示信息77 是表示在TV45的显示部上怎样显示从服务器42下载的图像的识别信息,由表示图像的一览形式显示的一览显示(指示符)78及用于以幻灯放映形式显示的幻灯放映(指示符)79构成。
以上,通过摄影装置1的步骤S5401~步骤S5406的步骤,从摄影装置1的第2天线21向TV45的RF-ID读写器46发送存储在摄影装置1的第2存储器52中的服务器URL生成信息80、摄影图像状况信息55、以及图像显示方法指示信息77。此外,它们都优选的是在相互认证时通过在摄影装置1与TV45间共享的加密密钥信息加密并发送。通过进行加密,能够在摄影装置1与TV45间进行安全的信息通信,能够防止来自有恶意的第3者的介入。
此外,通过将服务器URL生成信息80向TV45发送,由此摄影装置1 的第1天线20发送的服务器42与从TV45下载图像的服务器为共通的服务器及目录,所以能够将由摄影装置1摄影并上载的图像用TV45显示。
此外,通过将摄影图像状况信息55向TV45发送,能够判断记录在摄影装置1的第3存储器33中的摄影图像与通过第1天线20上载到服务器 42中的图像的同步,能够由TV45判断没有取得同步的情况,通过用TV45 显示表示没有取得同步的注意信息,能够防止用户的无用的混乱。
此外,通过将图像显示方法指示信息77向TV45发送,不在TV45上由用户指定图像的阅览方法,通过使摄影装置1靠近TV45,能够用设定的阅览方法阅览图像,能够不进行通过TV45的遥控器等的复杂的操作而用设定的阅览方法自动地显示图像。
图44是表示有关本发明的TV系统的特征性的功能的块图。
本TV45由RF-ID读写器46、解密部5504、URL生成部5505、通信部5506、发送部5507、通信接口5508、接收部5509、数据处理部5510、存储器部5511、显示部5512及CPU5513构成。
RF-ID读写器46是经由第2天线21与摄影装置1的RF-ID47通信的部分,由无线天线5501、接收部5503、及可通信装置检索部(轮询部) 5502构成。
无线天线5501是与摄影装置1的第2天线21进行近距离无线通信的部分,是与通用的RF-ID读写器的无线天线同样的结构。
可通信装置检索部(轮询部)5502是对多个照相机的RF-ID部进行向一个个对方确认是否没有发送(或处理)请求的轮询的部分。在对于轮询从摄影装置1的RF-ID47有轮询应答的情况下,进行相互认证动作,在TV45与摄影装置1间共享共通的加密密钥。
接收部5503当对轮询有轮询应答、相互认证结束时,从摄影装置1的第2天线21分别接收存储在摄影装置1的第2存储器52中的服务器URL 生成信息80、摄影图像状况信息55及图像显示方法指示信息77。
解密部5504是将由接收部5503接收到的服务器URL生成信息80、摄影图像状况信息55及图像显示方法指示信息77解密的部分。解密是在由可通信装置检索部(轮询部)5502相互认证后,使用在摄影装置1和TV45 中共通的加密密钥将加密的服务器URL生成信息80、摄影图像状况信息 55及图像显示方法指示信息77解密。
URL生成部5505根据服务器URL生成信息80,生成用于对服务器42 访问的URL(Uniform Resource Locator),向通信部发送。在本URL中,除了服务器确定信息以外,还包括用于登录到服务器中的登录ID83、口令85。
通信部5506是通过通信接口5508经由通用的网络与服务器42进行通信的部分。
发送部5507经由通信接口5508将由URL生成部5505生成的URL发送,与服务器42连接。
通信接口5508是经由通用的网络与服务器42连接的通信接口,由有线/无线LAN(Local Area Network)接口等构成。
接收部5509是从由通信接口5508连接的服务器42接收并下载图像信息及图像显示模式表单(CSS)的部分。
数据处理部5510是进行由接收部5509下载的图像信息的数据处理的部分,在下载的图像被压缩的情况下进行其解压缩,在被加密的情况下进行其解密,以基于图像显示模式表单的图像显示模式将下载的图像信息排列。此外,本数据处理部5510通过解密部根据需要解密而得到的摄影图像状况信息55,在保存于摄影装置1中的摄影图像信息和上载到服务器42 中的图像信息中不能确认同步的情况下,在显示部5512上显示表示没有取得同步的注意信息,进行防止用户的无用的混乱的处理。此外,本数据处理部5510按照来自解密部5504的图像显示方法指示信息77,设定将下载的图像信息显示的方式。例如,当图像显示方法指示信息77的一览显示(标志)78是ON时,生成下载的图像的一览显示,向存储器部5511输出。此外,当图像显示方法指示信息77的幻灯放映标志79是ON时,生成下载的图像的幻灯放映,向存储器部5511输出。
存储器部5511由将由数据处理部5510数据处理后的图像信息暂时存储的存储器构成。
显示部5512是将储存在存储器部5511中的、从服务器42下载、由数据处理部5510数据处理后的图像数据显示的部分。
如以上这样,有关本发明的TV45能够进行基于从摄影装置1的RF- ID47接收的服务器URL生成信息80、摄影图像状况信息55及图像显示方法指示信息77与服务器42连接、将上载到服务器42中的图像信息下载、显示到显示部5512上的处理。由此,能够不进行将摄影装置1的由SD卡或闪存存储器构成的第3存储器33取出、安装到TV45的卡读取器中而进行已摄影图像的阅览这样的麻烦的用户处理,而通过将摄影装置1的RF- ID47靠近(刷)TV45的RF-ID读写器46上进行近距离通信的简单的用户操作,就能够显示并阅览已摄影的图像信息,能够实现即使是不熟悉数字设备的操作的用户也能够简单地阅览图像信息的摄影图像阅览系统。
图45是表示摄影装置1与TV45的RF-ID无线近距离通信动作的流程图。
首先,通过TV45的RF-ID读写器46的可通信装置检索部5502,发送用于检索可通信的摄影装置1的RF-ID47的呼叫信号(步骤S5601)。
摄影装置1的RF-ID47如果接收到TV45的RF-ID读写器46的可通信装置检索部5502的轮询信号,则启动第2电源部91,启动RF-ID读写器46(步骤S5602)。此时,只要至少仅启动在第2电源部91下能够动作的RF-ID47就可以,不需要将摄影装置1的功能全部启动。
在步骤S5602中,如果摄影装置1的RF-ID47的启动完成,则从第2 天线21发送对于TV45的RF-ID读写器46的轮询的轮询应答(步骤 S5603)。
在步骤S5603中,在从摄影装置1进行轮询应答后,由TV45的RF- ID读写器46的无线天线5501接收轮询应答(步骤S5604)。
在步骤S5604中接收到轮询应答后,进行发送了轮询应答的摄影装置 1是否是能够相互通信的设备的判断(步骤S5605)。在判断的结果是判断为不是能够相互通信的设备的情况下,结束处理。另一方面,在判断为是能够通过相互的设备进行通信的设备的情况下,向下个处理前进。
在通过步骤S5605判断为是能够相互通信的设备的情况下,进行用于进行相互的设备是否是正规的设备的判断的相互认证处理(步骤S5606)。该相互认证处理与在HDMI或IEEE1394中进行的一般的相互认证处理是同样的,是由TV45和摄影装置1多次进行挑战数据的发出、应答数据的确认,最终在两者中生成相同的加密密钥的处理,如果某一方是非法的设备,则不生成共通的加密密钥,以后的相互的通信为无效。
另一方面,在摄影装置1的RF-ID47中也与TV45同样进行相互认证处理。进行相互的多次的挑战数据的生成及发送、应答数据的接收及确认,生成与TV45相同的加密密钥数据(步骤S5607)。
如果在步骤S5607中相互认证处理完成,则从摄影装置1的第2存储器52读出作为服务器确定信息58的服务器URL生成信息80,用对TV45 的RF-ID读写器46通过综合认证而共通化的加密密钥加密并发送(步骤 S5608)。
在步骤S5608中,发送的服务器URL生成信息80被TV45的RF-ID 读写器46的接收部5503接收,在解密部5504中用共通化的加密密钥解密,由URL生成部5505生成用于对服务器42访问的URL,将接收完成向摄影装置1发送(步骤S5609)。
在步骤S5609中发送接收完成后,用摄影装置1的第2天线21接收接收完成,从第2存储器52读出摄影图像状况信息55,向TV45发送(步骤 S5610)。作为摄影图像状况信息55而发送最终摄影时间68(Case1),作为未上载图像数据的存在识别信息而发送按照摄影图像赋予的能够进行是否是未上载数据的判别的存在识别符64(Case2)、将未上载图像信息散列而得到的信息67(Case3)、或者对摄影图像以时间序列赋予的图像号码的图像的最终号码69(Case4)。它是为了确认摄影装置1与服务器42的摄影图像的同步而需要的信息。
在步骤S5610中从摄影装置1发送摄影图像状况信息55后,由TV45 的RF-ID读写器46接收摄影图像状况信息55,将接收完成向摄影装置1 发送(步骤S5611)。此外,在TV45的CPU5513中,根据接收的摄影图像状况信息55进行以下的处理。
在Case1中,作为摄影图像状况信息55而采用最终摄影时间68。由此,在TV45中,将向服务器42的最终上载时间与最终摄影时间68比较,如果最终摄影时间68比向服务器42的最终上载时间在时间序列上晚,则认为没有取得保持在摄影装置1和服务器42中的图像信息的同步,在TV45 的显示部上显示表示没有取得同步的注意信息。
在Case2中,作为摄影图像状况信息55而采用按照摄影图像赋予的能够进行是否是未上载数据的判别的存在识别符64。由此,在TV45中,通过确认按照摄影图像赋予的能够进行是否是未上载数据的判别的存在识别符64,能够判别存在未上载图像,认为没有取得保持在摄影装置1和服务器42中的图像信息的同步,在TV45的显示部上显示表示没有取得同步的注意信息。
在Case3中,作为摄影图像状况信息55而采用将未上载图像信息散列而得到的信息67。由此,在TV45中,通过确认将未上载图像信息散列而得到的信息67,能够判别存在未上载图像,认为没有取得保持在摄影装置1和服务器42中的图像信息的同步,在TV45的显示部上显示表示没有取得同步的注意信息。
在Case4中,作为摄影图像状况信息55而采用对摄影图像以时间序列赋予的图像号码的图像的最终号码69。由此,在TV45中,通过确认从服务器42接收的已向服务器42上载的最终图像号码、以及从摄影装置1发送的对摄影图像以时间序列赋予的图像号码的图像的最终号码69,能够判别存在未上载图像,认为没有取得保持在摄影装置1和服务器42中的图像信息的同步,在TV45的显示部上显示表示没有取得同步的注意信息。
在S5611中,在完成摄影图像状况信息55的接收、将接收完成向摄影装置1发送后,从摄影装置1的第2存储器52读出图像显示方法指示信息 77而向TV45发送(步骤S5612)。在图像显示方法指示信息77中,包括一览显示(标志)78及幻灯放映(标志)79。
在步骤S5612中,在将图像显示方法指示信息77发送后,通过TV45 的RF-ID读写器46接收图像显示方法指示信息77,将接收完成向摄影装置1发送(步骤S5613)。TV45的数据处理部5510基于接收到的图像显示方法指示信息77,制作从服务器42下载的图像的显示方式。例如,当图像显示方法指示信息77的一览显示标志是ON时,制作下载的图像的一览显示而存储到存储器部5511中,在显示部5512上显示一览。另一方面,当图像显示方法指示信息77的幻灯放映标志是ON时,制作下载的图像的幻灯放映显示而存储到存储器部5511中,在显示部5512上显示幻灯放映。
在步骤S5613中接收到图像显示方法指示信息77后,将与摄影装置1 的RF-ID读写器46的通信切断(步骤S5614)。
接着,启动TV系统(步骤S5615)。所谓TV系统的启动,为了在显示部5512上显示下载的图像数据而使主电源为ON。在步骤S5615中启动 TV系统以前,至少TV45的RF-ID读写器46是启动的状态,显示部5512 的电源也可以是OFF。
接着,启动通信部5506,基于由URL生成部5505生成的URL向服务器42进行连接(步骤S5616)。
在步骤S5616中,在连接到服务器42上之后,将已上载的图像数据下载到TV45中(步骤S5617)。
在步骤S5617中,将下载的图像由数据处理部5510按照来自照相机的图像显示方法指示信息77生成显示用的图像数据,储存到存储器部5511 中,显示在显示部5512上(步骤S5618)。TV45的数据处理部5510基于接收到的图像显示方法指示信息77,制作从服务器42下载的图像的显示方式。例如,当图像显示方法指示信息77的一览显示标志78是ON时,制作下载的图像的一览显示而存储到存储器部5511中,在显示部5512上显示一览。另一方面,当图像显示方法指示信息77的幻灯放映标志79是ON 时,制作下载的图像的幻灯放映显示而存储到存储器部5511中,在显示部 5512上显示幻灯放映。
在步骤S5617中,如果从服务器42下载的图像的显示处理完成,则进行记录在摄影装置1的第3存储器33中的摄影图像与从服务器42下载的图像数据之间同步是否成立的同步确认处理(步骤S5619)。本处理基于从摄影装置1在步骤S5611中接收到的摄影图像状况信息55进行。作为摄影图像状况信息55而发送最终摄影时间68(Case1),作为未上载图像数据的存在识别信息而发送按照摄影图像赋予的能够进行是否是未上载数据的判别的存在识别符64(Case2)、将未上载图像信息散列而得到的信息67 (Case3)、或者对摄影图像以时间序列赋予的图像号码的图像的最终号码 69(Case4)。它是为了确认摄影装置1与服务器42的摄影图像的同步而需要的信息。
图46A及图46B是表示图45的服务器同步确认处理(步骤S5619)的摄影图像状况信息55分别为Case1~Case4时的详细的处理的流程的流程图。
Case1是摄影图像状况信息55为最终摄影时间68时的流程图。
首先,通过TV45的通信部5506从服务器42取得最终的更新日期时间(如果是更新的图像的最终摄影日期时间也有同样的效果)(步骤S5701)。
接着,将从服务器42取得的最终的更新日期时间、与由来自摄影装置 1的RF-ID读写器46的摄影图像状况信息55表示的最后摄影的日期时间 68比较(步骤S5702)。在最终上载日期时间比最后摄影日期时间68靠前的情况下,判断为在最终上载的时刻的以后摄影了图像、且还没有将摄影的图像上载,所以判断为没有取得摄影装置1与服务器42的图像的同步,转移到步骤S5703的错误显示处理。另一方面,在最终上载日期时间与最后摄影的日期时间68等同的情况下,由于进行了摄影装置1与服务器42 的图像的同步,所以不输出错误而结束处理。
在步骤S5702中,在判断为没有取得摄影装置1与服务器42的同步的情况下,对显示部5512输出表示没有取得同步的注意消息。在此情况下,如果通过最终上载日期时间与最后摄影的日期时间68的比较、将表示从哪个时刻起的摄影图像没有被上载的时间信息同时作为消息输出,则成为对于用户而言容易理解的消息。
Case2是摄影图像状况信息55为按照摄影图像赋予的能够进行是否是未上载数据的存在识别符64时的流程图。
首先,根据由来自摄影装置1的RF-ID读写器46的摄影图像状况信息55表示的未上载图像的存在识别信息的存在识别符,判断在记录在摄影装置1的第3存储器33中的摄影图像中是否有还没有上载到服务器42中的图像(步骤S5711)。在步骤S5711中判断为存在没有上载的图像的情况下,转移到步骤S5712的错误显示处理。另一方面,在判断为不存在没有上载的图像的情况下,由于进行了摄影装置1与服务器42的图像的同步,所以不输出错误而结束处理。
在步骤S5712中,在判断为没有取得摄影装置1与服务器42的同步的情况下,对显示部5512输出表示没有取得同步的注意消息。
Case3是摄影图像状况信息55为将未上载图像信息散列而得到的信息 67时的流程图。
首先,根据由来自摄影装置1的RF-ID读写器46的摄影图像状况信息55表示的将未上载图像信息散列而得到的信息67,判断在记录在摄影装置1的第3存储器33中的摄影图像中是否有还没有上载到服务器42中的图像(步骤S5721)。步骤S5721中,在TV45中生成NULL的散列值,通过其比较判断是否有未上载图像。在步骤S5721中判断为存在没有上载的图像的情况下,转移到步骤S5722的错误显示处理。另一方面,判断为不存在没有上载的图像的情况下,由于进行了摄影装置1与服务器42的图像的同步,所以不输出错误而结束处理。
在步骤S5722中,在判断为没有取得摄影装置1与服务器42的同步的情况下,对显示部5512输出表示没有取得同步的注意消息。
Case4是摄影图像状况信息55为对摄影的图像赋予的号码中的最终的摄影图像的号码时的流程图。
首先,通过TV45的通信部5506,从服务器42取得最终的更新图像的图像号码(步骤S5731)。
接着,将从服务器42取得的最终上载图像的号码69、与由来自摄影装置1的RF-ID读写器46的摄影图像状况信息55表示的图像的最终号码 69(步骤S5732)比较。在最终上载图像的号码比最后摄影的图像的号码 69小的情况下,判断为在最终上载的时刻的以后摄影了图像、且摄影的图像没有被上载,所以判断为没有取得摄影装置1与服务器42的图像的同步,转移到步骤S5733的错误显示处理。另一方面,在最终上载图像的号码与最后摄影的图像的号码69等同的情况下,由于进行了摄影装置1与服务器 42的图像的同步,所以不输出错误而结束处理。
在步骤S5732中,在判断为没有取得摄影装置1与服务器42的同步的情况下,对显示部5512输出表示没有取得同步的注意消息。
在以上的Case1~Case4的哪种方法中,都在没有将由摄影装置1摄影的全部图像上载到服务器42中、即没有同步的情况下,虽然不能在显示部 5512上显示摄影的全部图像,但能够判断为没有取得同步,所以能够显示使用户容易理解的消息,能够避免用户的无用的混乱。
图47是(1)从摄影装置1向服务器42上载摄影图像的情况、(2)摄影装置1与TV45的RF-ID通信的情况的各自的数据格式。
首先,说明(1)从摄影装置1向服务器42上载摄影图像的情况下的数据格式5940。在本格式中,包括照相机ID5901、服务器地址5902、服务器登录ID5903、服务器登录口令5904、图像目录5905及上载图像数5906。
照相机ID5901是对每个照相机固有地赋予的照相机固有ID,是记录在摄影装置1的第2存储器52的照相机ID部76中的ID信息。本ID信息通过作为向服务器42的登录ID使用,能够不由用户进行登录ID的输入、而对每个摄影装置1赋予唯一的服务器地址。此外,在服务器42中,还能够按照摄影的照相机管理摄影图像。
服务器地址5902是摄影装置1的第2存储器52的服务器确定信息58 的服务器地址信息81的内容。由此,能够在TV45侧确定进行了上载的服务器。
服务器登录ID5903是作为摄影装置1的第2存储器52的服务器确定信息58的用户识别信息82的登录ID83的内容。由此,在TV45中也能够进行针对从摄影装置1上载的服务器的以相同的账户的登录。
服务器登录口令5904是摄影装置1的第2存储器52的服务器确定信息58的口令84的内容。由此,在TV45中也能够针对从摄影装置1上载的服务器的以相同的账户的登录。
上载图像数5906是向服务器上载的图像数。其中,记载有与存储在摄影装置1的第2存储器52的未上载图像的张数65中的图像数等同的张数、即在摄影后没有上载到服务器中的图像数。
在本格式的发送以后,将记录在摄影装置1的第3存储器33中、并且没有上载到服务器中的图像上载。
接着,对(2)摄影装置1与TV45的RF-ID通信的情况下的各个数据格式5950进行说明。本格式由照相机ID5911、服务器地址5902、服务器登录ID5913、服务器登录口令5914、最终摄影日期时间5915、能够判断是未上载的识别信息5916、将未上载图像信息散列而得到的信息5917、最终摄影图像的图像号码5918及图像显示方法指示信息5919构成。
照相机ID5911是对每个照相机固有地赋予的照相机固有ID,是记录在摄影装置1的第2存储器52的照相机ID部76中的ID信息。本ID信息通过作为从TV45向服务器42的登录ID使用,能够不由用户进行登录ID 的输入、而对每个摄影装置1赋予唯一的服务器地址。此外,也有在摄影装置1的RF-ID47与TV45的RF-ID读写器46的相互认证时使用的情况。
服务器地址5912是摄影装置1的第2存储器52的服务器确定信息58 的服务器地址信息81的内容。由此,能够在TV45侧确定上载的服务器。
服务器登录ID5913是作为摄影装置1的第2存储器52的服务器确定信息58的用户识别信息82的登录ID83的内容。由此,在TV45中也能够针对从摄影装置1上载的服务器的以相同的账户的登录。
服务器登录口令5914是摄影装置1的第2存储器52的服务器确定信息58的口令84的内容。由此,在TV45中也能够针对从摄影装置1上载的服务器的以相同的账户的登录。
最终摄影日期时间5915是与在摄影装置1的第2存储器52的摄影图像状况信息55的最后摄影的时间68对应的信息,在TV45侧用于服务器 42与摄影装置1的摄影图像的同步确认。
能够判断是未上载的识别信息5916是与摄影装置1的第2存储器52 的摄影图像状况信息55的未上载图像数据存在识别信息对应的信息,在 TV45侧用于服务器42与摄影装置1的摄影图像的同步确认。此外,该能够判断是未上载的识别信息5916是对于能够识别各摄影图像的图像 ID5928赋予表示向服务器的上载是否完成的上载标志5926的方式。由此,能够按照1张张摄影图像进行是否上载到服务器中的的判断。
将未上载图像信息散列而得到的信息5917是与将摄影装置1的第2存储器52的摄影图像状况信息55的未上载图像信息散列而得到的信息67对应的信息,在TV45侧用于服务器42与摄影装置1的摄影图像的同步确认。
最终摄影图像的图像号码5918是与摄影装置1的第2存储器52的摄影图像状况信息55的摄影图像的最终号码69对应的信息,在TV45侧用于服务器42与摄影装置1的摄影图像的同步确认。
图像显示方法指示信息5919是与摄影装置1的第2存储器52的摄影图像状况信息55的图像显示方法指示信息77对应的信息,由在TV45侧指定从服务器42下载的图像的阅览方法的识别信息构成。
图像显示方法指示信息5919按照图像ID5927,由一览显示标志5920、幻灯放映标志5921、印刷标志5922、运动图像再生标志5923、下载标志 5924及安全口令5925构成。
图像ID5927是对摄影图像唯一的信息,由摄影装置1在摄影时以时间序列赋予。
一览显示标志5920是对应于摄影装置1的第2存储器52的一览显示 (标志)78,表示在TV45中是否将从服务器42下载的图像信息的阅览设为一览形式的标志。TV45的数据处理部5510在该标志是“yes(是)”的情况下,制作下载的图像的一览显示并存储到存储器部5511中,在显示部 5512上以一览形式显示。
幻灯放映标志对应于摄影装置1的第2存储器52的幻灯放映(标志) 79,表示在TV45中是否将从服务器42下载的图像信息的阅览设为幻灯放映的标志。TV45的数据处理部5510在该标志是“automatic(自动)”的情况下,制作下载的图像的幻灯放映并存储到存储器部5511中,在显示部 5512以幻灯放映显示。另一方面,在本幻灯放映标志是“manual(手动)”的情况下,许可通过用户指示实施幻灯放映。此外,在“disable(禁用)”的情况下,不许可幻灯放映显示。
印刷标志5922是表示下载到TV45中并由显示部5512显示的图像是否能够由连接在TV45上的未图示的打印机印刷的标志。它在摄影装置1 的第2存储器52的图像显示方法指示信息77内没有图示,但通过设置印刷标志,能够进行是否能够印刷的设定,能够提高用户的关于图像使用的方便性。
运动图像再生标志5923是在由摄影装置1摄影运动图像信息、上载到服务器42中的情况下表示是否许可由TV45将运动图像下载、阅览的标志。在摄影装置1中存在运动图像摄影功能的情况下,通过对第2存储器52的图像显示方法指示信息77赋予本运动图像再生标志5923,能够追加是否许可运动图像的再生的设定,能够不进行用户的复杂的操作而进行运动图像的再生管理。
下载标志5924是表示是否能够将上载到服务器42中的图像或运动图像下载(复制)到TV45的存储器中的识别符。如果使用该标志,则不会由没有被许可摄影图像的第3者复制,所以也能够有利于著作权的保护。
安全口令5925是用于使得仅许可的用户能够进行上述图像的阅览、印刷及下载的口令信息。在本实施方式中,以进行相同的口令设定的方式说明了上述图像的阅览、印刷及下载,但能够分别设定不同的口令能够实施各水平下的安全对策,所以更优选。
如以上这样,如果使用本发明的系统,则摄影装置1将摄影图像上载到通过第1天线连接的服务器中。此外,如果将摄影装置1靠近TV45的 RF-ID读写器46上,则从摄影装置1的RF-ID47将服务器URL生成信息80、摄影图像状况信息55及图像显示方法指示信息77通过RF-ID通信向TV45发送,TV45连接到由摄影装置1上载了摄影图像的服务器上,将由摄影装置1摄影的图像下载到TV45中而显示。此外,通过摄影图像状况信息55确认服务器42与摄影装置1的摄影图像信息的同步,在没有取得同步的情况下,将该消息显示在TV45的显示部5512上。由此,用户仅通过将摄影装置1靠近TV45上,就能够对应以往需要将记录存储器从照相机拔出并设置到TV45中而阅览的摄影图像的显示。由此,即使是不熟悉数字设备的操作的用户,也能够简单地将摄影图像显示在TV45上。
(实施方式3)
对本发明的实施方式3进行说明。
首先,说明实施方式3的概况。图48是实施方式3的电子目录显示系统的概略结构图。实施方式3的电子目录显示系统具有具备RF-ID写入部501的电子目录服务器信息输入机500、具备RF-ID47的电子目录通知卡502、具备RF-ID读取部504和网络通信部509x的TV45、以及具备电子目录数据数据库507和顾客属性数据库508的电子目录服务器506。
电子目录服务器信息输入机500将从用户(电子目录的服务提供者) 输入的电子目录服务器信息从RF-ID写入部501写入到粘贴在电子目录通知卡502上的RF-ID47中。通过用户(电子目录的服务使用者)使写入了该电子目录服务器信息的电子目录通知卡502向TV45靠近,TV45具备的RF-ID读取部504将写入在RF-ID47中的电子目录服务器信息读取。进而,TV45基于读取的电子目录服务器信息,经由网络通信部509x 对设置在网络上的电子目录服务器505发送电子目录的取得请求。此外, TV45在将电子目录取得请求向电子目录服务器发送时,将预先输入到 TV45中的用户信息也同时向电子目录服务器505发送。电子目录服务器 505接收来自TV45的电子目录发送请求及用户信息,首先基于用户信息从顾客属性数据库508取得顾客属性数据。接着,基于顾客属性数据,从电子目录数据数据库507取得对应的电子目录数据。并且,将所取得的电子目录数据对发出了电子目录请求的TV45发送。TV45将从电子目录服务器 505接收到的电子目录数据显示在画面上,受理来自用户(电子目录的服务使用者)的电子目录数据内的商品的购买操作。
以下,说明实施方式3的电子目录显示系统的详细情况。
图49是表示实施方式3的电子目录服务器信息输入机的结构的功能块图。首先,按键输入受理部520接受来自用户(电子目录的服务提供者) 操作的输入按键的输入,取得电子目录服务器信息。按键输入受理部520 取得的电子目录服务器信息是URL等的服务器地址、服务器登录ID、服务器登录口令、电子目录显示用口令、表示将包含在电子目录中的商品的图像进行一览(缩略图)显示还是依次(幻灯)显示的电子目录显示信息、以及表示作为RF-ID的粘贴目标的卡或明信片等的媒体的介质识别信息。将按键输入受理部520取得的电子目录服务器信息保存到存储部522中。接着,在被输入电子目录服务器信息后,如果被输入RF-ID发送按键等,则RF-ID发送输入受理部521对发送部523通知发送请求,发送部523从存储部522读出电子目录服务器信息,从天线部524发送电子目录服务器信息。将电子目录服务器信息输入机的处理的详细情况用图50的流程图表示。
图51是表示电子目录通知卡502具备的RF-ID47的结构的块图。RF -ID47的结构及处理与在实施方式1及2中说明的是同样的。第2电源部 91从由第2天线21接收到的信号取出电流,向各部进行电源供给,数据接收部105、第2处理部95和记录部106将接收到的数据向第2存储器52 记录。
图52是表示TV45的结构的功能块图。实施方式3中的TV45的结构是对实施方式2中的结构追加了用户信息输入部588的结构。用户信息输入部588受理预先由用户(电子目录的服务使用者)输入的、关于用户自身的属性的用户信息,暂时保存到存储器部583中。作为用户信息,优选的是例如用户的性别信息及年龄信息,但除了这些以外,也可以是如居住地或家庭成员结构等那样能够用于从电子目录提供的商品数据的甄别的个人信息。将该用户信息与URL生成部生成的电子目录服务器的URL一起经由通信部509向电子目录服务器发送。与实施方式1同样,在本实施方式中,电子目录服务使用者也通过将电子目录通知卡502向TV45的RF- ID读取部504靠近,TV45接收电子目录服务器信息,使用它生成服务器的URL,连接到服务器。该处理的详细情况与第1实施方式的在图7~图 20中表示的处理是同样的。
图53是表示电子目录服务器506的结构的功能块图。电子目录服务器 506经由通信部600接收从TV45发送的电子目录发送目标地址(TV45和电子目录服务器506属于的网络上的TV45的网络地址)和用户信息。接着,基于顾客属性数据取得部接收到的用户信息,从顾客属性数据库508 取得顾客属性数据。例如,在用户信息之中包含有使用TV45的用户的性别和年龄的情况下,从具有图57所示的数据构造的顾客属性数据库508取得对应于年龄和性别的商品类别及商品价格带的信息作为顾客属性数据。并且,电子目录数据取得部602基于顾客属性数据从电子目录数据库507 取得电子目录数据。例如,在顾客属性数据中包含有商品类别和商品价格带的情况下,从具有图58所示的数据构造的电子目录数据库507将对应于商品类别和商品价格带的商品数据汇总作为电子目录数据取得。将由电子目录数据取得部602取得的电子目录数据经由通信部600发送给电子目录发送目标地址表示的TV45。用图54的流程图表示电子目录服务器506的处理的详细情况。
接着,使用图55所示的流程图,说明将电子目录数据下载后的TV45 的处理。S630~S632中的从RF-ID取得电子目录服务器信息的处理在没有下载电子目录数据的情况以及下载完成后都是共通的。在S633中,判断与从RF-ID接收到的电子目录服务器信息对应的电子目录数据的下载及显示是否完成,在下载没有完成的情况下,在S634及S635中从服务器下载电子目录数据。该数据的下载处理与实施方式1的数据的下载处理是同样的。
在S633中电子目录数据是已下载的情况下,使预先设定的规定的按键、例如确定按键的按键信号生效,执行对显示的电子目录数据的操作。例如,如图56所示的电子目录数据的画面显示例那样,设为对显示中的电子目录数据以两三个较少的选择分支提示用户接着应进行的操作的画面结构,进而,如图56中的选择分支652和653所示,为每当经过一定时间则在选择分支间移动表示选择候选的焦点那样的画面结构。如果这样,则用户在自身希望的选择分支处有焦点时,通过将具备RF-ID47的电子目录通知卡502靠近TV45上,能够执行电子目录数据的选择、以及各数据的购买等的操作。
另外,本实施方式的电子目录通知卡502上的RF-ID47内置的第2 存储器52也可以是ROM(Read Only Memory)。在此情况下,电子目录服务器信息输入机500为RF-ID制造工序中的RF-ID存储器数据输入机、或RF-ID制造系统中的RF-ID存储器数据输入机构。一般而言,与具有可改写存储器的RF-ID相比,具有ROM的RF-ID能够更便宜地构成,所以对于大量送出电子目录通知卡的电子目录服务提供者而言,通过使用 ROM型RF-ID,能够抑制成本。
另外,在本实施方式中,作为TV45的画面结构,如图56中的选择分支652和653所示,每经过一定时间,表示选择候选的焦点在选择分支间移动,但使用具备RF-ID47的电子目录通知卡502操作画面显示的电子目录数据的方法并不限定于此。例如,也可以是,TV45的接收部571连续接收从RF-ID发送的信息,通过计测该连续的接收数而取得将RF-ID向TV45靠近的时间,基于该RF-ID接近时间使画面显示的表示选择候选的焦点移动。通过做成这样的结构,仅在将RF-ID向TV靠近的期间中、显示在画面上的焦点移动而变更选择候选,在将RF-ID从TV离开的地方,焦点的移动也停止,进而,可以是如果在焦点的移动停止后经过一定时间则确定焦点停止的选择候选的选择的电子目录的操作。在该电子目录操作方法中,不用等待每一定时间自动地在选择候选间循环的焦点转到用户希望的选择分支,能够得到用户能够使用RF-ID主动操作电子目录的效果。
另外,在本实施方式中,电子目录服务器信息输入机500为按键输入受理部520接受来自用户(电子目录的服务提供者)操作的输入按键的输入、取得电子目录服务器信息的结构,但也可以为电子目录服务器信息输入机具备与图像服务器的通信接口、图像服务器保持对电子目录服务器信息输入机发送的服务器信息、电子目录服务器信息输入机从图像服务器接收而取得服务器信息的结构。通过做成这样的结构,如果对图像服务器输入服务器信息,则在电子目录服务器信息输入机侧不需要输入图像服务器,特别在对1个图像服务器使用多个电子目录服务器信息输入机的情况下方便性较高。
以往,有不精通个人计算机等的电子设备操作的用户为了利用网络购物而必须学习设备的操作的问题,但如果使用如以上那样在实施方式3中叙述的系统,则利用电子目录的用户仅通过将接受到的卡或明信片向TV 靠近,就能够利用网络购物等,即使是对个人计算机或便携电话等的因特网终端不熟悉的用户,也能够容易地在TV画面上享受购物。
(实施方式4)
对本发明的实施方式4进行说明。
图59是实施方式4的概略结构图。在本实施方式中,对将粘贴有用于向图像服务器访问的RF-ID的明信片向远处递送的方法进行说明。首先,作为明信片的递送源的第1用户如果将具备RF-ID47的摄影装置1向TV45的RF-ID读写器46靠近,则TV45生成用于连接到图像服务器42 的服务器URL,从图像服务器42取得图像数据,显示在画面上。该处理与实施方式1是同样的。接着,第1用户从显示在TV45上的图像之中,使用对应于TV45的遥控器等的输入机构选择想要向明信片印刷的图像、以及想要与明信片建立关联而登录的(想要使处于远处的第2用户看到的) 图像。进而,第1用户还使用遥控器等输入明信片的递送目的地住址等的递送目的地信息。TV45将第1用户选择的对明信片印刷的图像的ID、登录到明信片上的图像的ID、以及明信片递送目的地信息向图像服务器42 发送。图像服务器42取得与接收到的印刷图像ID对应的图像数据,将图像数据和明信片递送目的地信息向打印机800发送。打印机800将图像数据和明信片递送目的地住址印刷到明信片上。此外,图像服务器42对图像服务器信息输入机500发送从Tv45接收到的登录图像ID,同时将包括URL 等的服务器地址、服务器登录ID、服务器登录口令、图像显示用口令、表示是将图像一览(缩略图)显示还是依次(幻灯)显示的图像显示信息、以及表示作为RF-ID的粘贴目标的卡或明信片等的媒体的介质识别信息的图像服务器信息发送。图像服务器信息输入机500将图像服务器信息和登录图像ID写入到由打印机印刷了图像和递送目的地信息的明信片的RF -ID47中。被进行了印刷和向RF-ID的写入的明信片801被邮寄到印刷的递送目的地,被第1用户指定为递送目的地的第2用户取得该明信片801。第2用户如果将邮寄来的明信片向第2用户的TV45的RF-ID读写器46 靠近,则TV45取得RF-ID47保存的图像服务器信息和登录图像ID,将与登录图像ID对应的图像数据从服务器下载及显示。
本实施方式的摄影装置1的结构及处理与实施方式1是同样的。
图60是表示本实施方式的TV45的结构的块图。接收部811经由无线天线570从摄影装置1或明信片801的RF-ID47接收图像服务器信息,但在明信片801的RF-ID47具有登录图像ID的情况下,也接收登录图像 ID。此外,图像选择部584经由按键部585及红外线受光部586受理用户的图像选择操作,取得第1用户为了印刷到明信片上而选择的图像的ID(印刷图像ID)、以及为了登录到明信片上而选择的图像的ID(登录图像ID),将它们向通信部509传送。在图61中表示在该图像选择操作时显示在TV45 上的画面显示例。图61中的821是选择印刷到明信片上的图像的画面显示,图61中的820是选择登录到明信片上的图像的画面显示。此外,明信片递送目的地信息输入部810经由按键部585及红外线受光部586受理用户的字符输入操作,取得作为明信片的递送目的地的包括住址及收件人名的明信片递送目的地信息,向通信部509发送。将输入明信片递送目的地信息时的画面显示例在图61中的823中表示。通信部509经由发送部575及通信接口576将明信片递送目的地信息、印刷图像ID和登录图像ID向图像服务器发送。
图62是表示图像服务器42、打印机800、以及图像服务器信息输入机 500进行准备以便能够递送明信片801的处理的流程图。将进行了印刷和向 RF-ID的写入的明信片801邮寄到印刷的递送目的地,被第1用户指定为递送目的地的第2用户取得该明信片801。如果第2用户将接受到的明信片 801靠近TV45上,则接收部811经由无线天线570接收RF-ID47发送的图像服务器信息及登录图像ID。将在图像服务器信息及登录图像ID之中加密的信息用解密部572解密。接着,URL生成部573生成从保存在图像服务器42中的图像数据之中仅将对应于登录图像ID的图像数据下载到 TV45中的URL。具体而言,可以采用在生成的URL之中指定服务器的内部目录、或作为URL选项而将登录图像ID植入在URL中的方法。TV45 使用由URL生成部573生成的指定服务器的URL对图像服务器访问而取得图像数据的处理的详细情况与在实施方式1中说明的处理是同样的。
另外,在本实施方式中,做成了用户对TV45输入递送目的地信息的结构,但也可以不仅输入住址及收件人名等的递送目的地信息、还输入在明信片上与图像一起印刷的消息。将TV45受理的输入消息与递送目的地信息同样,从TV45传送给图像服务器42,再由打印机800印刷到明信片上。将TV45中的印刷用的消息的输入画面例表示在图61的822中。通过这样不仅能够选择印刷到明信片上的明信片,而且能够输入对图像添加的消息,制作带有RF-ID的明信片的自由度提高。
另外,在本实施方式的TV45中,与在实施方式3中使用RF-ID操作画面显示的电子目录的处理同样,也可以做成能够使用带有RF-ID的明信片操作显示在TV45上的图像的结构。
如以上这样,如果使用在实施方式4中叙述的系统,则能够不在手边准备粘贴有RF-ID的明信片而对处于远处的对方邮寄带有RF-ID的明信片,并且,在想要将保存在图像服务器中的图像印刷到明信片上而递送的情况下,也能够通过TV画面上的操作选择想要印刷的图像,所以能够得到较高的方便性。
以往,为了使处于远处的对方用电视机等的大画面显示设备观看图像,需要远处侧的用户学习设备操作、或操作掌握者前往远处而操作设备、或将处于远处的显示设备远程操作,但在本系统中,远处的用户能够通过将带有RF-ID的明信片等物理的媒介物向显示设备靠近的简单的操作而容易地阅览图像。
(实施方式5)
在本发明的实施方式5中,对在明信片等的邮寄物上写入固定的信息、将在摄影装置中写入的固定信息与保存在服务器中的图像或图像组(图像信息)建立联系、在再生侧通过从明信片等附带的RF-ID读出固定信息、能够进行与固定信息建立了关联的图像的阅览的结构进行说明(图63)。在图63中,首先用摄影装置读取记录在邮寄物中的固定信息,进行图像与邮寄物固有ID的关联建立,登录到服务器中。接受到登录完成的邮寄物的用户通过将邮寄物向电视机的RF-ID读取器靠近而进行固定信息的读出,通过使用固有信息对服务器进行查询而进行与邮寄物建立了关联的图像的阅览。
本实施方式的关键点是邮寄物上附带的RF-ID的信息是不能改写的 (ROM)或不能改写的环境这一点,是不进行邮寄物的固定信息的改写而进行服务器的图像信息与邮寄物的关联建立这一点。
<摄影装置中的图像的上载和与邮寄物的关联建立>
将由摄影装置摄影的图像通过在前面的实施方式中说明的方法上载到服务器中。此时,对上载的每个图像或图像组赋予识别符,能够通过该识别符识别服务器上的图像或图像组。
以下,对由摄影装置摄影并向服务器上载的图像或图像组与在邮寄物的RF-ID标签中记录的固定信息之间的关联建立方法进行说明。另外,记录在邮寄物的RF-ID中的固定信息如图64那样。
图64(a)是将邮寄物所固有的邮寄物固有ID和用于向图像服务器访问的地址等的信息记录的例子,图64(b)是将邮寄物固有ID和用于对中继服务器访问的地址等的信息记录的例子,图64(c)是仅记录邮寄物固有 ID的例子。另外,也有除此以外还保存有用于对服务器访问的登录ID及口令信息的情况,但在本实施方式中,假设为了对服务器访问而需要的信息包含在包括地址信息的URL中。
图65是摄影装置具有RF-ID读取器的功能的情况下的RF-ID与记录在服务器中的图像信息之间的关联建立的流程图。
在摄影装置中,首先,将保存在邮寄物的RF-ID中的信息使用RF- ID读取器读出(S2500)。具体而言,通过图3的第2天线21与邮寄物的 RF-ID进行通信,由数据接收部105接收邮寄物的固定信息。然后,由第 2处理部95进行处理,经由记录部106、第2存储器52、记录再生部51 向第1处理部35转送读出的邮寄物的信息。在第1处理部中,通过用户的指示决定从邮寄物读出的邮寄物固有ID与图像或图像组的关联建立 (S2501)。然后,经由第1天线20向服务器42访问(S2502),将邮寄物固有ID与保存在服务器中的图像信息之间的关联建立信息登录到服务器中(S2503)。
在保存于读出的邮寄物中的固定信息中记录有图像服务器的地址或包括地址的URL的情况下,以上处理结束。在保存于读出的邮寄物中的固定信息中没有记录有图像服务器的地址或包括地址的URL的情况下,进行向中继服务器的设定(图66)。
在向中继服务器的设定中,首先进行向中继服务器的访问(S2510)。另外,在中继服务器的地址或包括地址的URL处在从邮寄物读出的信息中的情况下,对包含在所读出的信息中的中继服务器访问,在没有的情况下,向在摄影装置侧预先设定的中继服务器访问。
在与中继服务器连接后,对中继服务器的数据库进行将邮寄物固有ID 与重新寄送目标(转送目标)的服务器之间的关联建立设定(S2511)。由此,在中继服务器的数据库中登录邮寄物固有ID与转送目标的地址的对应。
在摄影装置不具有RF-ID读取器的功能的情况下、并且在邮寄物上印刷着记录有RF-ID读取器的信息的2维码等的情况下,使用摄影装置的摄像部进行摄影,通过将作为2维码记录的信息读出,将与记录在邮寄物的RF-ID中的固定信息相同的信息读出。作为2维码,有QR码、PDF417、 VeriCode、MaxiCode等,即使是写在这里的码以外的码,只要能够通过由摄影装置摄影来进行信息的取入,则利用怎样的码都可以。此外,虽然印刷区域面积增加,但在仅使用1维方向的条码的情况下也能够期待与本实施方式同样的效果。
图67是安装有RF-ID部2520、印刷了记录有相同的信息的2维码 2521的邮寄物的例子。使用图3的结构图说明将2维码通过摄影装置读入的情况下的数据的流动。将印刷在邮寄物上的2维码通过摄像部30摄影,由影像处理部31变换为图像后,经由记录再生部32向第一处理部35传送。在第1处理部35中,将摄影的2维码解析,将记录在2维码中的信息取出。记录在2维码中的信息与记录在RF-ID中的信息基本上相同,至少包括邮寄物固有ID。
以下,使用图68说明到从2维码读出信息而与服务器的图像或图像组进行关联建立为止的处理的流程。
首先,通过摄像部进行2维码的摄影(S2530)。进行接着摄影的图像是否是2维码的判断(S2531),在不是2维码的情况下,进行错误处理 (S2532)。另外,在不是2维码的情况下,也可以进行通常的摄影处理。在是2维码的情况下,进行2维码的解析(S2533),从解析结果中读出邮寄物的信息(S2534)。在将邮寄物的固定信息读出后,决定邮寄物固有ID 与服务器的图像信息的关联建立(S2535),向服务器访问(S2536),将关联建立信息设定到服务器中(S2537)。S2535~S2537的处理与图65的 S2501~S2503的处理是相同的。另外,在读出的信息中没有记录有图像服务器的地址或包括地址的URL的情况下,进行向中继服务器的转送设定处理。向中继服务器的设定处理为前面说明的图66的处理。
根据以上,通过读取印刷在邮寄物上的2维条码的信息,完成记录在 RF-ID中的信息与服务器的图像信息之间的关联建立。
在摄影装置不具有RF-ID读取器功能、在邮寄物上没有印刷2维码等的码的情况下,也可以通过将印刷在邮寄物上的邮寄物固有ID及服务器地址等的URL直接手工输入到摄影装置中、将邮寄物的信息通过摄影装置读出信息。手工输入通过图2的7~15的按钮操作等进行。另外,URL及邮寄物的固有ID既可以直接以明文印刷,也可以编码为容易输入的代码。在编码的情况下,在输入完成后由摄影装置进行解码处理,将邮寄物的RF -ID所记录的信息取出。
根据以上,即使在不具有RF-ID读取器功能、并且没有印刷2维条码等的情况下,也能够进行邮寄物与服务器的图像信息之间的关联建立。
<使用邮寄物的RF-ID的图像再生及阅览>
接着,对使用关联建立完成的邮寄物、通过电视机阅览记录在服务器中的图像的次序进行说明。
图69是表示到将邮寄物的RF-ID读入而对图像服务器访问为止的电视机的处理流程的图。
如果将邮寄物向电视机的RF-ID读取器靠近,则将邮寄物的RF-ID 的信息读入到电视机中(S2540)。在读入的信息中存在服务器地址或包括服务器地址的URL的情况下(S2541),向指定的服务器访问(S2542),发送邮寄物固有ID(S2543)。另外,在对方是中继服务器的情况下(S2544),进行向由中继服务器指定的服务器的重新指向(2547),进行向图像服务器的图像或图像组的访问(S2548)。在S2544中,在对方是图像服务器的情况下,不进行重新指向,进行向图像服务器的访问(S2548)。此外,在记录在邮寄物中的信息中不存在服务器地址的情况下,进行向预先设定在电视机中的默认的服务器的访问(S2545),将邮寄物固有ID向默认的服务器发送(S2546)。然后,进行向指定的服务器的重新指向(S2547),进行向图像服务器的访问。
另外,在中继服务器或、默认的服务器的数据库中没有登录有邮寄物固有ID与中继的目标的服务器之间的对应关系的情况下,进行向错误页的重新指向。图70是表示接收到邮寄物固有ID后的中继服务器及默认的服务器的处理流程的图。如果接受到邮寄物固有ID(S2550),则检索与该固有ID关联的信息是否记录在数据库中(S2551)。在记录在数据库中的情况下(S2552),进行向与固有ID建立关联而记录在数据库中的服务器的重新指向(S2554)。假如在没有关联建立的情况下,进行向错误页的重新指向 (S2553)。
如以上这样,进行预先固定了RF-ID的信息的邮寄物与图像服务器的图像信息之间的关联建立,通过将进行了关联建立的邮寄物靠近电视机上,能够不进行邮寄物的RF-ID的改写,而阅览记录在图像服务器中且与邮寄物固有ID建立了关联的图像或图像组。这即使在例如在外出地等不能进行邮寄物的RF-ID的改写的情况下或邮寄物的RF-ID为不能改写的情况下,也能够进行服务器的图像与邮寄物的关联建立,能够使接受到邮寄物的一侧阅览与邮寄物建立了关联的图像。
另外,在本实施方式中,在对服务器访问后发送邮寄物固有ID,但也可以根据记录在邮寄物中的邮寄物固有ID和服务器地址生成URL、使用它对服务器访问。在此情况下,能够同时进行向服务器的访问和邮寄物固有ID的发送。
根据本实施方式,即使是例如如观光地等那样不能进行RF-ID的改写的环境下,也能够将摄影的照片与明信片建立关联,通过将建立了关联的明信片向熟人发送,接受到明信片的熟人通过将明信片靠近电视机上而能够阅览观光地处的照片。这样,即使是不能进行RF-ID改写的环境,也能够制作与服务器的图像信息进行了关联建立的邮寄物,能够向想要使其阅览的对方发送。
另外,在摄影装置中具备用于改写邮寄物的RF-ID的RF-ID写入器功能的情况下,与接着说明的实施方式6的在电视机装置中将邮寄物与服务器的图像信息建立关联的流程处理是相同的,所以这里的说明省略。
(实施方式6)
在本发明的实施方式6中,对在由摄影装置摄影的图像被上载到图像服务器中之后、图像发送侧的使用者(以后记作发送者)从图像服务器的图像中选择图像组、将用于对该图像组访问的信息记录到邮寄物上的RF- ID中、向图像接收侧的使用者(以后记作接收者)的地点邮寄、使用该邮寄物上的RF-ID实现接收者向图像服务器的图像组的访问的结构进行说明。
图71是表示本发明的实施方式6的图像发送侧的结构的概略图,图72 是表示本发明的实施方式6的图像接收侧的结构的概略图。另外,在图71 和图72中,对于与图1及图3相同的构成单元使用相同的标号而省略说明。
在图71和图72中,邮寄物3001表示从图像发送侧向图像接收侧邮寄的明信片、或信封、便笺等的邮寄物,RF-ID部3002是可改写的RF-ID,其至少一部分的区域内装有可改写的存储器部3003。RF-ID部3002粘贴或水印在邮寄物3001上,与邮寄物一起向图像接收侧递送。
此外,关于RF-ID部3002,如在前面的实施方式中叙述那样,用于识别该RF-ID部所属的媒体是邮寄物的介质识别信息记录在存储器部 3003中。
在图72中,电视机3045是具有与在前面的实施方式中叙述的图71的电视机45同样的功能的设置在图像接收侧的电视显示装置,与图71的电视机45同样,具有RF-ID读写器部3046(相当于图71的RF-ID读写器46)、以及显示部3047(相当于图71的显示部110),而且通过在图中没有表示的网络连接机构与因特网40连接。
关于上述结构,接着说明其动作。
<图像发送侧的图像组选择、向邮寄物的写入>
在图71的图像发送侧,由摄影装置1摄影的图像被使用搭载在摄影装置1中的无线LAN、或WiMAX等无线通信用的第2天线20向无线接入点传送,经由因特网40作为图像服务器42的图像数据50记录。并且,将摄影装置1向电视机45的RF-ID读写器46靠近,通过经由用于搭载在摄影装置1中的RF-ID的第1天线21的无线通信,建立与电视机45的连接。电视机45从摄影装置1取得用于向图像服务器42的图像数据50的访问的信息,将图像数据50的图像下载而进行向显示部110的显示。以上的动作与在前面的实施方式中叙述的动作是同样的,仅叙述概要。
接着,发送者一边确认显示在电视机45的显示部110上的图像,一边按每个图像设定表示是否是向接收者发送的图像、换言之是否许可接收者的阅览的发送图像选择信息。进而,也可以对接收者设定在前面的实施方式中叙述的显示限定、幻灯放映、打印等利用方式信息。将这些发送图像选择信息和利用方式信息向图像服务器发送、记录,将由发送图像选择信息选择为发送图像的图像的集合作为图像组由图像服务器管理。
以下,使用电视机45的动作流程图73说明将关于由发送者选择的图像组的信息记录到邮寄物3001中的过程。
发送者在上述那样设定了发送图像选择、利用方式信息的图像组的制作完成的状态下,将具有RF-ID部3002的邮寄物3001向电视机45的RF -ID读写器46靠近,RF-ID部3002和RF-ID读写器46能够无线通信。
电视机45如果能够经由RF-ID读写器46与邮寄物3001上的RF-ID 部3002通信,则进行记录在存储器部3003中的信息的读入(S3101),根据其中的介质识别信息识别当前的通信对象是邮寄物,转移到对邮寄物的写入处理的流程(S3102)。另外,对于步骤S3102中的条件判断不成立的情况没有特别触及,但转移到对应于各媒体的处理。
对于邮寄物3001的写入处理首先经由因特网40向图像服务器42访问 (S3103),图像接收侧从图像服务器42取得用于对上述的图像服务器42 上的图像组访问的服务器URL、图像组地址等的图像组指定信息(S3104)。
从图像服务器取得的图像组指定信息为了对邮寄物3001内的存储器部 3003进行写入,经由电视机45的RF-ID读写器46向邮寄物3001的RF -ID部3002发送,由RF-ID部3002向存储器部3003的可改写区域记录 (S3105)。
如以上这样,由发送者将记录有图像组指定信息的邮寄物3001投递,邮寄到图像接收侧的使用者的地点。
<图像接收侧的图像再生及阅览>
接着,使用作为图像接收侧结构的概略图的图72和作为图像接收侧电视机的动作流程图的图74对图像接收侧进行说明。
在图72中,接收者接受从发送者邮寄来的邮寄物3001,接收者通过RF-ID部3002或记载在邮寄物3001上的字符信息、或外观,辨识出在该邮寄物中装入有用于向图像的访问的机构。这里,接收者仅理解能够通过邮寄物3001进行向图像的访问就可以,不需要对RF-ID部3002的图像组指定信息等特别认识。
接收者在将图像再生及阅览时,通过将邮寄物3001向设置在图像接收侧的电视机3045的RF-ID读写器部3046靠近,能够开始图像的阅览。
如果邮寄物3001上的RF-ID部3002充分接近于电视机3045的RF -ID读写器部3046,则RF-ID读写器部3046经由未图示的RF-ID读写器部3046和RF-ID部3002的两者的天线进行供电,由此将邮寄物3001 的RF-ID部3002启动,开始电视机3045与邮寄物3001的RF-ID部3002 的无线通信。如果开始无线通信,则电视机3045进行记录在RF-ID部3002 的存储器部3003中的信息的读入(S3151)。
在根据读入的信息中的介质识别信息识别出当前的通信对象是邮递物的情况下,转移到将通过发送者设定的图像组从图像服务器42读出的处理的流程(S3152)。
向图像服务器42的访问可以根据在前面的步骤S3151中从RF-ID部 3002读入的信息中的图像组指定信息、例如根据服务器URL、图像组地址等,生成用于向图像服务器42上的图像组访问的URL,并经由因特网40 进行访问(S3153)。
在以上的过程中,与图像服务器42连接的电视机3045根据图像服务器42上的图像数据50,按照图像服务器42管理的图像组的发送图像选择信息,读入被许可显示的图像(S3154),将读入的图像显示在显示部110 上(S3155)。
进而,经由电视机3045,接收者按照图像服务器42管理的图像组的发送图像选择信息和利用方式信息,能够利用幻灯放映的再生、图像的印刷、还有向未图示的附属于或外部连接在电视机3045上的存储媒体的图像的下载等功能。
除此以外,上述的图像的印刷不仅是通过未图示的LAN上的打印机的印刷,也可以进行经由因特网40的对照片打印服务的印刷委托。
如以上这样,根据本发明的上述结构,通过由邮寄物3001上的RF- ID部3002将图像组指定信息传递给图像接收侧的电视机3045,不需要花费进行用于取得图像的网络访问目标的字符输入作业等的工夫。即,通过将邮寄物3001向电视机3045靠近的、直观且简单的操作,能够进行向保存在图像服务器42中的图像数据50的访问,不对接收者要求进行菜单选择及字符输入等的复杂的步骤的知识,而实现了经由图像服务器的图像的交接。
另外,在上述本实施方式中,设邮寄物3001为预先粘贴或水印了RF -ID部3002的状态进行了说明,但也可以通过在通常的明信片或便笺等的邮寄物上粘贴另外提供的单体的RF-ID部3002来制作,由此,能够后来粘贴RF-ID部而得到上述的效果,所以产生能够适用于与发送侧使用者的喜好相应的任意的邮寄物的新的优点。
此外,在向图像服务器42的访问需要登录操作的情况下,也可以在向邮寄物3001上的RF-ID部3002的存储器部3003的可改写区域的写入时 (步骤S3105)记录服务器登录ID和服务器登录口令。进而,登录ID和登录口令优选的是不是明文、而通过以加密的形式记录来确保安全性。
此外,在上述本实施方式中,发送图像的选择、利用方式信息的设定、以及向邮寄物3001上的RF-ID部3002的图像组指定信息的写入由图像发送侧的电视机45进行,但如果代替它而由具有RF-ID读写器功能的摄影装置1进行发送图像选择信息和利用方式信息的设定、图像组指定信息的写入,也与上述同样,能够得到可通过接收者的简单的操作进行的图像的交接的效果。
<派生的另一例>
图75是表示本发明的实施方式6的另一方式的图像发送侧的电视机45 的动作的流程图。另外,在图75中,作为与图73相同的处理的步骤使用相同的标号而省略其说明。
在本实施方式中,在邮寄物3001上的RF-ID部3002的存储器部3003 中预先记录有邮寄物固有ID。并且,该邮递物固有ID记录在存储器部3003 的ROM区域中在能够降低意外的动作带来的数据损坏及数据篡改等的风险的方面是优选的。将表示此时的存储器部3003的数据构造的一例的结构图在图76中表示。
根据上述RF-ID部,由图像发送侧的电视机45进行发送图像选择信息、利用方式信息的设定,在图像组设定在图像服务器42上的状况下,按照图75(a)的流程,电视机45的动作成为以下这样。
在邮寄物RF-ID的信息读入(S3101)、基于介质识别信息对于是邮递物进行认定(S3102)后,电视机45取得邮寄物固有ID。关于邮寄物固有ID,使用在步骤S3101中读入的信息、或重新从RF-ID部3002取得都可以。接着,电视机45经由因特网40进行向图像服务器42的访问(S3202),从电视机45将邮寄物固有ID向图像服务器42发送,图像服务器42进行发送来的邮递物固有ID与图像组的地址的关联建立,将该信息记录及管理 (S3203)。
电视机45由图像服务器42取得用于从图像接收侧对图像服务器42访问的服务器URL(S3204),将所取得的服务器URL经由RF-ID读写器 46写入到邮寄物3001的RF-ID部3002的存储器部3003的可改写区域中 (S3205)。
如以上这样,如果在图像服务器侧将图像组与邮寄物固有ID建立关联而记录及管理,则能够按照邮递物固有ID将利用方式信息分开管理,在存在多个邮寄物3001的情况下,能够按照各个邮递物、即按照不同的接收者变更图像接收时的动作。
这在本实施方式的最初叙述的结构中,通过按照各个邮递物分别设定图像组分别生成不同的图像组地址、分别写入到RF-ID部中,从而得到对图像接收侧的同样的效果,但发生分别设定图像组的图像发送侧的麻烦的操作。
因此,如果是相同的发送图像的选择,则通过如上述那样使用邮递物的固有ID分别记录、管理利用方式信息,能够得到减轻发送者操作的效果,在图像服务器侧能够得到与不需要分别保管发送图像选择信息对应的存储容量降低的效果。
关于图75(b),相对于图75(a)不同的部分是步骤S3214和步骤S3215,在步骤S3214中,除了服务器URL以外还取得图像组地址,在步骤S3215 中,除了服务器URL以外还将图像组地址向RF-ID部3002的存储器部 3003的可写入区域写入。
由此,在从图像接收侧接收图像时,进行指定了图像服务器42的图像组的访问,但此时,通过仅在由图像服务器记录及管理的图像组内的邮寄物固有ID与请求访问的接收者使用的邮递物的固有ID一致的情况下许可访问,能够实现安全性的提高。
以往为了使处于远处的对方用电视机等的大画面显示设备观看图像,需要远处侧的用户学习设备操作、或掌握操作者去往远处而操作设备、或远程操作处于远处的显示设备,但与实施方式4同样,在本系统中,远处的用户能够通过将带有RF-ID的明信片等、物理的媒介物向显示设备靠近的简单的操作容易地阅览图像。在实施方式4中,不是用户(图像的摄影/发送者及图像的阅览者)进行带有RF-ID的明信片的制作及向RF-ID 的数据写入,而是服务行业者进行的方式,但在本实施方式中,在图像发送侧的使用者(发送者)进行带有RF-ID的明信片的制作及向RF-ID的数据写入这一点上不同。
(实施方式7)
在本实施方式中,关于使用本发明的RF-ID卡变更设备的设定的方法进行叙述。
以下,使用图77、图78,关于使用RF-ID卡变更记录机的设定的方法进行说明。
图77是表示本发明的记录机的结构的块图。
记录机2000进行从调谐器2001取得的广播内容向HDD2008或光盘驱动器2009的录像、或录像内容或由光盘驱动器2009读取的影像、音乐内容在TV45中的再生。
输入信号处理部2002具备将从调谐器2001输入的模拟信号变换为数字信号的A/D变换器、将被编码(scramble)的内容解码的解码器、变换为MPEG-2等影像格式的编码器,将被输入的影像、声音信号变换为规定的影像、声音格式形式。
输出信号处理部2003具备将数字信号变换为模拟信号的D/A变换器、以及进行从MPEG-2等影像格式的解码的解码器,进行向TV45的影像、声音输出。
系统控制部2004控制记录机2000的动作,具备切换记录机2000的设定的设定信息处理部2011。关于设定信息处理部2011在后面详细说明。
存储器2005保存有作为记录机2000的识别信息的记录机ID2012、及作为记录机2000的设定信息的设定信息2013。
操作输入部2006受理来自未图示的遥控器或前面板的按钮等的通过用户操作的输入。
通信部2007通过因特网或LAN等进行向服务器42的连接。
HDD2008是记录从输入信号处理部2002得到的录像内容及内容列表等的区域。
光盘驱动器2009是进行DVD或Blu-ray Disc等的光盘的记录再生的驱动器,进行从输入信号处理部2002得到的录像内容及内容列表等的记录、以及装入有影像、音乐内容的光盘的再生。
记录机2000的输入信号处理部2002、输出信号处理部2003、系统控制部2004、HDD2008、光盘驱动器2009经由总线2010相互连接。
这里,关于设定信息处理部2011详细地说明。
设定信息处理部2011根据保存在存储器2005中的设定信息2013,进行记录机2000的菜单画面等的显示设定、录像·再生模式设定、录像内容的章节设定、对应于用户的喜好等的节目推荐等的设定。具体而言,例如读取保存在设定信息2013中的表示“菜单画面背景色:黑”等的识别符,当进行向输出信号处理部2003的菜单画面输出请求时,输出将背景色用“黑”显示的指示。
另外,设定信息2013也可以保存在HDD2008、或未图示的SD卡等的外部记录机构中。特别是,关于保存在HDD2008中的录像内容的章节等的设定信息、及尺寸较大的信息等是如果保存在HDD2008中,成为高效的信息。
设定信息2013以往在设备购买时已经设定、或通过来自操作输入部 2006的用户操作设定,但在本发明中,可以将设定信息2013基于从RF- ID读写器46得到的信息变更。
图78是表示通过用记录机2000的RF-ID读写器46读取从而变更记录机2000的设定的RF-ID卡的结构的块图。
RF-ID卡2100由存储器2101、天线21、电源部91、数据接收部105、数据转送部108、处理部2102、记录部106、再生部107构成。
如果将天线21向RF-ID读写器46靠近,则从RF-ID读写器46经由天线21对电源部91供电,对RF-ID卡2100的各部供给电源。
来自RF-ID读写器46的数据记录及再生等的信息由数据接收部105 接收,向处理部2102发送。
处理部2102进行由记录部106进行的向存储器2101的数据记录、及由再生部107进行的从存储器2101的数据的再生。
数据转送部108将从处理部2102发送的数据经由天线21向RF-ID 读写器46发送。
在存储器2101中,保存有UID75、介质识别信息111、设备操作信息 2103。
UID75和介质识别信息111是用于RF-ID卡2100识别的信息。
UID75是RF-ID卡2100的固有ID。
在介质识别信息111中,记录有表示是卡的识别符。
设备操作信息2103保存有关于使用RF-ID卡2100进行操作的对象的设备的信息和关于设备的操作的信息。
在操作设备识别信息2104中,保存有表示进行操作的设备的种类的信息。保存的信息使用与介质识别信息111相同的识别符,在图78中记录有是记录机的识别符。
对象设备信息2105保存有在想要仅对特定的设备进行操作的情况下使用的信息,在图78中,保存有作为记录机2000的识别信息的记录机ID2012。另外,在使用本发明的RF-ID卡2100的设备受到限制的情况下,例如在仅由记录机使用的情况下,操作设备识别信息2104及对象设备信息2105 也可以不包含在设备操作信息2103中。此外,在设定信息处理部2011是设定为通过卡变更设定的结构的情况下,介质识别信息111也可以不包含在存储器2101中。
操作指示信息2106是表示设备中进行的操作内容的信息,在图78中,保存有表示设定变更的信息2109、表示进行设定的变更的对象的信息2110、表示在取得设定信息时实施通信的信息2111。
另外,操作指示信息2106并不仅限于针对1个操作的信息,也可以由关于多个操作的信息构成,也可以为组合了多个操作的程序。
通信信息2107是在由操作指示信息2106指示进行通信而取得时关于进行访问的服务器等的信息。在图78中,保存有URL2112、登录ID2113、口令2114。另外,也可以不是URL2112、而记录有IP地址等,在用公司内或家庭内网络向其他设备访问的情况下,也可以记录有确定MAC地址等的设备的信息。
以下,使用图79,关于将记录机2000的设定使用RF-ID卡2100登录到服务器中的次序进行说明。
在步骤2201中,如果受理了用户的从操作输入部2006的输入,则设定信息处理部2011对输出信号处理部2003进行向TV45的消息输出请求,在TV45的画面上显示“请刷RF-ID卡”的消息。另外,消息的显示也可以在记录机2000的未图示的控制台上显示。此外,在进行用户的操作输入时,也可以请求口令或生物体认证等的认证、在认证后转移到登录处理。进而,也可以不进行向TV45的消息输出,而在记录机2000的使用时,通过将RF-ID卡2100靠近RF-ID读写器46上来进行步骤2203以后的处理。另外,也可以显示向哪个地方登录设定信息2013的询问消息、进行向用户的选择的地方的登录。例如,既可以在RF-ID卡2200中登录设定信息2013,也可以向与服务器42不同的服务器进行登录。
如果在步骤2203中检测到RF-ID卡,则实施相互认证处理。
在步骤2204的认证判断为OK的情况下,前进到步骤2205而继续处理,在认证判断为NG(不成功)的情况下,回到步骤2202而重复RF-ID 卡检测处理。
在步骤2205中,从RF-ID卡2100的存储器2101取得UID信息75。
在步骤2206中,从RF-ID卡2100的存储器2101取得通信信息2107。另外,在RF-ID卡2100的存储器2101中没有登录通信信息的情况下,也可以发出向用户的通信信息输入请求。此外,当在步骤2201中进行了向没有登录在RF-ID卡2100中的部位的登录指示时,在该步骤中什么都不做。此外,在RF-ID卡2100中登录有多个通信信息2107的情况下,也可以将通信信息一览显示、用户进行选择。
在步骤2207中,从存储器2005取得记录机ID2012和设定信息2013。另外,设定信息也可以不是当前的信息、而是在设定登录实施时等用户输入的信息。
在步骤2208中,设定信息处理部2011对通信部2007发出向通信信息 2107的URL2112的访问请求。在向URL2112的访问时,使用登录ID2113 和口令2114。
在步骤2209中,进行访问是否成功的判断,在访问成功的情况下,前进到步骤2210而继续处理,在访问失败的情况下,原样结束处理。
在步骤2210中,将UID信息75、从存储器2005取得的记录机ID2012、设定信息2013向服务器42发送。
在步骤2211中,根据在2201中指定的操作及选择的设定信息2013的保存位置、在步骤2207中取得的设定信息2013、在步骤2206中取得的通信信息2107,生成操作指示信息2106。
在步骤2212中,进行与步骤2202同样的处理,在TV45的画面上显示“请刷RF-ID卡”的消息。
在步骤2213中,如果检测到RF-ID卡,则实施相互认证处理。
在步骤2214的认证判断为OK的情况下,前进到步骤2215而继续处理,在认证判断为NG的情况下,回到步骤2212而重复RF-ID卡检测处理。
在步骤2215中,从RF-ID卡2100的存储器2101取得UID信息。
在步骤2216中,确认在步骤2205中取得的UID信息75与在步骤2215 中取得的UID信息是否一致,如果一致,则前进到步骤2217而继续处理,如果不一致,则回到步骤2211重复RF-ID卡检测处理。
在步骤2217中,进行将保存在存储器2005中的未图示的操作设备识别信息2104、记录机ID2012、在步骤2211中生成的操作指示信息2106、通信信息2107向RF-ID卡2100发送,记录到存储器2101中,结束处理。
使用图80说明通过图79的次序登录在服务器42中的设定信息。
设定信息2250与UID信息75、对象设备信息2105建立关联而登录,具体而言,登录有表示“菜单画面背景色:黑”等信息的识别符。各设定信息的末尾的“A”、“B”表示是不同的设定。
如UID0001那样,也可以对1个UID登录多个设定信息,对象设备信息2105如REC-0001的项目那样,也可以对1个对象设备信息登录与多个UID建立了关联的设定信息。另外,在设定信息中也可以包含有变更对象信息2110。
接着,使用图81,关于通过图79的次序向RF-ID卡2100的存储器 2101登录的设备操作信息2103进行说明。
作为UID信息75而记录有“UID0001”,作为介质识别信息111而记录有“卡”。
在设备操作信息2103中,登录有操作设备识别信息2104、对象设备信息2105、操作指示信息2106、通信信息2107所成的组。另外,通信信息 2107也可以作为与其他信息没有关联的信息登录。例如,也可以登录有1 个通信信息,在使用RF-ID卡2100时总是进行向相同的服务器等的访问。
操作指示信息2106由指示内容信息2260、指示对象信息2261、通信实施信息2262构成。在指示内容信息2260中,记录有表示对由对象设备信息2105指定的设备执行的处理的识别符,在指示对象信息2261中,作为进行操作的对象,例如对REC-0001记录有表示菜单画面模式、录像模式等的设定的识别符。在通信实施信息2262中,记录有表示在进行指示内容信息2260的处理时是否进行通信的识别符。另外,在使用RF-ID卡2100 进行的操作被限制为设定变更的情况下,设备操作信息2103也可以仅由通信信息2107构成。
在通信信息2107中,在通信实施信息2262中指定了实施通信的情况下,记录有进行通信的服务器等的URL、登录ID、口令等。
接着,使用图82,关于使用RF-ID卡2100变更记录机2000的设定的次序进行说明。图82是表示记录机2000的设定信息处理部2011使用 RF-ID卡2100的信息更新设定信息2013的次序的流程图。
首先,如果在步骤2301中检测到RF-ID卡2100,则在步骤2302中实施相互认证处理。
如果步骤2303的判断为OK,则前进到步骤2304而继续处理,如果判断是NG,则结束处理。
在步骤2304中,从RF-ID卡2100的存储器2101取得UID信息75 和设备操作信息2103。
在步骤2305中,检索包含在设备操作信息2103中的操作设备识别信息2104,与从记录机2000的存储器2005取得的未图示的设备识别信息比较。
在步骤2306中,如果在步骤2305中进行的比较的结果一致,则前进到步骤2307而继续处理,如果不一致,则前进到步骤2314。
在步骤2314中,判断是否已全部检索了操作设备识别信息2104,在检索了全部的操作设备识别信息2104的情况下结束处理。
在步骤2307中,检索对象设备信息2105,与从记录机2000的存储器 2005取得的记录机ID2012比较。
在步骤2308中,如果在步骤2307中进行的比较的结果一致,则前进到步骤2309而继续处理,如果不一致,则结束处理。
在步骤2309中,取得与设备操作信息2103、对象设备信息2105对应的操作指示信息2106。
在步骤2310中,取得与设备操作信息2103、对象设备信息2105对应的通信信息2107。
在步骤2311中,从操作指示信息2106的指示内容信息2260中取得是设定变更处理的情况,对服务器42访问,取得设定信息2250。该步骤的处理在后面使用图83详细说明。
在步骤2312中,判断是否正确地进行了设定信息2250的取得,在没有正确地取得的情况下,前进到步骤2313,由设定信息处理部2011将记录机2000的存储器2005的设定信息2013更新而结束处理,在不能正确地取得的情况下,原样结束处理。
以下,使用图83详细地说明图82的步骤2311的处理。图82是表示设定信息处理部2011对服务器42访问而取得设定信息2250的次序的流程图。
在步骤2351中,由通信部2007对包含在通信信息2107中的URL2112 进行访问。
在步骤2352中,设定信息处理部2011将包含在通信信息2107中的登录ID2113和口令2114对通信部2007发送,进行登录处理。
在步骤2353中判断为认证OK的情况下,前进到步骤2354而继续处理,在判断为认证NG的情况下,作为设定信息2250的取得失败,结束处理。
在步骤2354中,检索服务器42的UID信息,在步骤2355中,在有与在图82的步骤2304中取得的UID信息75一致者的情况下,前进到步骤2356而继续处理,在没有一致者的情况下,前进到步骤2354而反复实施UID信息的检索,直到在步骤2359中判断为已检索全部的UID信息。在步骤2359中判断为已检索全部UID信息的情况下,作为设定信息2250 的取得失败,结束处理。
在步骤2356中,检索对应于UID信息75的对象设备信息,在步骤2357 中,在有与在图82的步骤2305中取得的对象设备信息2105一致者的情况下,前进到步骤2358而继续处理,在没有一致者的情况下,前进到步骤2354 而反复实施对象设备信息的检索,直到在步骤2360中判断为已检索全部的对象设备信息。在步骤2360中判断为已检索全部的对象设备信息的情况下,作为设定信息2250的取得失败,结束处理。
在步骤2258中,取得与UID信息75、对象设备信息2105对应的设定信息2250,结束处理。
如以上所述,如果使用RF-ID卡2100,则用户不用意识到复杂的处理而能够实施记录机2000的设定,能够得到即使是不熟悉设备的操作的用户也能够容易地进行记录机的设定的变更的效果。另外,能够对记录机进行的操作不仅是设定的变更,例如如果在指示内容信息中指定录像内容列表取得,则也可以将记录机的录像内容列表登录到RF-ID或服务器上、从其他设备参照。
进而,如果使用在图84中表示的RF-ID卡,则仅通过刷RF-ID卡就能够进行预约录像。如果使用图84的对应于Index1(索引1)的变更对象信息,则通过在由指示对象信息指定的“节目ID”、“录像模式”的设定中进行预约录像,能够不对服务器访问而进行预约录像,如果使用对应于 Index2的变更对象信息,则指定由指示对象信息指定的“节目代码”,从服务器取得节目ID或开始时间和结束时间、频道的信息,通过“录像模式”的设定能够进行预约录像。
进而,通过在指示对象信息中进行“推荐节目”的指定而从服务器取得节目ID,能够从服务器取得推荐的内容并进行预约录像。如果使用该功能,则也可以考虑例如将RF-ID卡作为节目向导杂志的附录而减轻预约录像的操作量的服务。此外,如果作为指示内容信息而设定下载、作为指示对象信息而设定功能限定版的影像或软件、作为通信信息而使用设定了下载站点的URL的RF-ID卡,则也可以考虑通过免费分发的RF-ID卡试用功能限定的内容而由中意的用户进行购买的服务。
另外,在本实施方式中,举记录机为例进行了说明,但本发明的适用范围并不限于记录机。
例如,通过在TV中具备RF-ID卡的读写器和设定信息处理部,可以将接通电源之后的初始显示频道及初始音量的设定、将成人广播及暴力场景等除外的童锁设定、中意的频道跳过广告设定、画面的对比度及明亮度设定、语言设定、连续使用时间设定等作为变更对象信息登录、进行对应于用户的使用便利的设定。此外,在汽车导航系统(汽车导航仪)中具备 RF-ID卡的读写器和设定信息处理部的情况下,通过在指示内容信息中指定“强调显示”、在指示对象信息中指定“地标信息”,在将指定的地标用汽车导航仪显示时,能够进行变更字符字体及尺寸、或变更颜色等的强调显示。另外,地标信息也可以从服务器取得。由此,例如可以将记录有在图85中表示的设备操作信息的RF-ID卡在高速道路的服务区或立体交叉道路、观光地等散发、也用于将当前有事件发生等的推荐的地标强调显示等的用途。进而,如果在笔记本PC中具备RF-ID卡的读写器和设定信息处理部,则能够设定画面的分辨率及桌面上的图标等的配置、壁纸、屏保程序、驻留软件等的启动设定、使用的周边设备、鼠标等的习惯用手设定等,仅通过拿持RF-ID卡,即使是出差地等的PC,也能够用通常使用的设定进行操作。此外,也可以在游戏机中具备RF-ID卡的读写器和设定信息处理部、例如在朋友的家中等用作为指示内容信息而设定了设定变更的RF-ID卡设定控制器的按键配置或菜单画面结构,或读入保存数据等。进而,也可以考虑作为指示内容信息而将设定了下载的RF-ID卡作为杂志等的附录,进行追加脚本及稀少项目等的下载的服务。
本发明的RF-ID卡在家庭内的家电由网络连接时,通过将例如符合个人的喜好的空调温度或洗澡的热水器的设定等登录在RF-ID卡中、靠近家庭内具备的RF-ID读写器上而一齐进行家电的设定,或通过将保管在电冰箱中的食品的阅览操作登录在RF-ID卡中、取得预先由在食品上附带的标签等取得登录在电冰箱的存储器中的食品的信息、或用照相机将电冰箱中摄影而得到的影像,由此用TV的读写器确认食品列表等,能够进行各种用途下的使用。另外,也可以将指定设备的RF-ID卡(例如表示“制暖”、“制冷”、“暖炉”、“电风扇”的4种卡)、以及指定设备的设定的RF-ID卡(例如表示“弱”、“中”、“强”的3种卡)等组合、或将具有上述设备指定、设备设定指定的各个功能的多个RF标签装备在1片RF -ID卡中,对设备的设定进行用户定制。
另外,本发明的适用范围并不限定于在到目前为止的实施方式中叙述的方法。在不脱离本发明的主旨的范围内将上述实施方式的构成单元及特征任意地组合而得到的方式、以及本领域的技术人员对上述实施方式实施变形而得到的方式也包含在本发明中。
例如,在两个用户(设为用户A和用户B)之间进行照片的交换的方式中,作为用户B阅览用户A摄影的照片的方法,通过将根据用户B的 TV的设备ID和用户B拥有的预先保存有中继服务器的URL的RF-ID(设为RF标签B)生成的信息(设为设备生成信息B)向用户A以邮件等传送并记录到RF标签B中,用户A通过与设备生成信息B建立关联而在中继服务器中保存登录有照片的服务器的URL,由此用户B仅通过将RF标签B靠近TV的RF-ID读写器上就能够阅览用户A摄影的照片。另外,如果采用以下方法:在标签B中预先登录用户A的邮件地址,用户B仅通过将标签B靠近TV的RF-ID读写器上,就自动地进行设备生成信息B 向标签B的写入、以及向用户A通知设备生成信息B,则即使在用户B不熟悉设备的使用方法的情况下也能够进行照片的交换。此外,通过用户A 递送URL、登录ID、口令的至少1个用设备生成信息B加密而登录到RF -ID中的明信片,能够将照片的阅览限制为用户B的TV。进而,在从用户A将带有发送用的RF-ID和返送用的RF-ID的两个RF-ID的明信片向用户B发送的情况下,通过用户A预先在返送用的RF-ID中登录从自己的TV等生成的设备生成信息A,用户B通过在返送时将用户B登录照片的服务器的URL、登录ID、口令用设备生成信息A加密而记录到返送用的RF-ID中,或在登录照片时用户B与设备生成信息A建立关联而登录等,能够限制许可用户B登录的照片的阅览的设备。
另外,邮寄物上附带的RF-ID的邮寄物固有ID也可以为将在多个邮寄物间共通的组ID部与按照邮寄物设定的固有ID部组合的结构。通过代替将服务器的照片与邮寄物固有ID整体建立关联,而与上述组ID部建立关联登录,在对多个对象递送与照片建立了关联的带有RF-ID的明信片时,能够省略进行多个固有ID的登录的工夫。此外,也可以将与组ID部建立关联而登录的服务器的照片根据固有ID部切换阅览许可/禁止。由此,例如在对邮寄物用打印机进行目的地住址等的印刷的情况下,通过在打印机中具备RF-ID读写器而将邮寄物固有ID的固有ID部在印刷时读取,能够进行住址簿与固有ID部的对应建立,能够以住址簿进行服务器上的照片阅览的许可/禁止的管理。
另外,也可以在明信片或卡上具备多个功能不同的RF标签,将不使用的RF标签的通信切断,由此在1张明信片或卡中切换多个功能。例如,通过在明信片的上部具备具有将照片进行幻灯放映显示的功能的RF标签、在下部具备具有将影像再生的功能的RF标签,能够根据将明信片的上部、下部中的哪个向RF-ID读写器靠近来切换照片显示和影像再生功能。另外,也可以装备在明信片的表背面上,也可以具备使用将通信切断的材料的盖来仅能够使用将盖打开的状态下的RF标签。
另外,也可以通过将照片登录到多个服务器中、将各个服务器的URL 保存到RF标签中,由此对各个服务器访问而取得照片、进行一览显示。
另外,RF-ID读写器也可以不仅装备在设备中,而且装备在遥控器等的进行设备操作的输入机构中。例如,在用网络等将多个设备连接的情况下,也可以在集中进行多个设备的操作的输入机构中具备RF-ID读写器,进行各个设备的操作。进而,也可以在遥控器等输入机构中具备指纹认证或脸认证等生物体认证或口令等的个人认证机构,仅在个人认证完成的情况下进行RF标签的读写。相反,也可以将个人的认证信息预先记录在RF 标签中、通过RF标签用设备或遥控器等进行个人认证。
另外,关于本发明的记载,较多使用RF-ID的用语。一般而言,RF -ID的用语在狭义上是指“在非易失性存储器中记录有识别信息的标签”,具有双重接口及安全功能的RF-ID使用“IC卡”等的用语。但是,本说明书的RF-ID并不限定于该狭义的用语。在本发明中用作“将个体识别信息记录在非易失性存储器中、能够将个体识别信息经由天线向外部发送的电子电路”的广义含义。
以往,不熟悉设备操作的人为了进行设备的复杂的设定,需要设备的销售者、修理者、服务者前往对象设备所在的地方而进行设定、或者远程操作对象设备。即,在远程操作的情况下也还是需要为了远程操作的设定而前往设备所在的地方。但是,如果如以上所述那样使用RF-ID卡2100,则用户能够不意识复杂的处理而实施记录机2000的设定,能够得到即使是不熟悉设备的操作的用户也能够容易地进行记录机的设定的变更的效果。
此外,本发明也可以在具备具有画面的设备、与上述设备通过通信路径连接的读取器装置、以及与上述读取器装置进行近距离无线通信的通信装置的通信系统中,作为将关于上述通信装置的图像对上述设备提示的图像提示方法实现,或者也可以作为一种与通信装置的识别信息一起保存在该通信装置内的程序实现,用由在与上述通信装置之间进行近距离无线通信的设备具备的虚拟机执行的代码记述、包括对用通信网络连接的服务器装置访问的步骤、将保存在访问的上述服务器装置中的图像中的对应于上述识别信息的图像从上述服务器装置下载的步骤、以及将下载的图像显示的步骤,或者也可以作为记录有这样的程序的CD-ROM等的计算机可读取的记录媒体实现。
此外,有关本发明的通信装置当然能够适用于具备保存有识别信息及虚拟机用程序的RF-ID的所有的设备、例如照相机等的电子设备、电饭锅或电冰箱等的家电设备、牙刷等的日常品。
这里,使用图86(a)、图86(b)的块图、图86(c)的流程图和图 87的流程图说明在TV等的遥控器中搭载有RF-ID读取器的情况下的实施方式。
首先,如上述那样,照相机等的子通信机5050具有存储器52和天线 21。如果使遥控器5051的天线5063向该天线21靠近,则从天线5063对天线21供给电源,将存储器52中的数据从天线21向天线5063传送。在遥控器5051侧由通信电路5064变换为数字数据,储存到存储器5061中(步骤5001a:图87)。如果将遥控器5051的发送部朝向TV45而按下发送开关5062(步骤5001b),则将存储器5061的数据经由光输出部5062使用光向TV的受发光部5058发送,向TV等的母机45发送(步骤5001c)。另外,这里的通信也可以不是光而是无线。
这里,如果回到图86(c)的流程图,则由于发明在社会系统中使用,所以需要对应于20年后、30年后。虚拟机语言等的程序已知有Java(注册商标)等,但预想到将来会被扩展、或者成为完全不同的效率较好的语言等的程序。因而,在本发明中,在TV等的母机45中记录有表示母机的虚拟机语言等的语言类型及版本的母机版本信息5059、n1(步骤5060i:图86(c))。在子机5050的存储器21中(图86(a)),在最开始记录有表示子机的程序的语言等的版本的子机版本信息5052、n2。在其之后有程序区域5053,记录有版本5055a、5055b、5055c的程序5056a、5056b、5056c,其后有数据区域5054。
在图86的流程图的步骤5060i中获得母机45的版本信息n1,获得子机的存储器中的版本信息n2(步骤5060a),选择n1≥n2的最大值的程序n (步骤5060b),执行其执行程序n(步骤5060c),在步骤5060d中,在有向因特网的连接的情况下,在步骤5060e中连接到服务器,向服务器发送设定在母机45中的语言信息5065(步骤5060f),服务器根据发送的语言信息5065,将该语言、例如法语的程序向母机传送而使其执行。或者也可以在服务器上执行该程序。
在没有连接到因特网的情况下回到步骤5060h,执行本地程序,将子机 5050的属性信息、例如通知故障的情况的信息或记录的照片的张数等信息显示在母机45的画面上。这样,在子机的存储器52中记录版本信息5052,按照版本记录以10年单位的周期进化的各代的程序、次序及URL,所以具有即使经过20年30年也以相同的格式动作的效果。在图86(a)中表示了记录程序的版本、世代的例子,但通过如图86(b)那样将对应于版本5055d、5055e、5055f的URL等的服务器中的数据的地址、URL5057a、5057b、5057c 记录,能够得到同样的效果。通过该方式,能够持续到将来实现下位兼容性。例如在今年购买的制品中搭载有RF-ID的情况下,如果设版本为1,则在20年后、30年后的母机45中记载有例如与版本1、2、3对应的JAVA (注册商标)等虚拟机语言等的程序,所以通过知道子机版本信息5052,母机向与该版本对应的母机的程序进行切换动作。此外,在30年后的子机 21中记录有版本1、2、3的全部的程序,所以通过版本3的母机45得到最高的功能。并且,通过版本1的母机45得到较旧的版本的稍稍受限的功能,实现完全的兼容性。
说明图87的流程图。在步骤5001a中按下遥控器5051的读取开关 5063,如果向子机5050的天线21靠近,则将子机的存储器52的数据储存到遥控器5051的存储器5061中。接着,如果在步骤5001b中将遥控器5051 朝向TV等的母机45按下发送开关5062(步骤5001b),则通过光向母机传送存储器5061的数据(步骤5001c)。在本实施方式中,为了方便而将该数据称作标签数据。从标签数据提取或选择执行程序(步骤5001d),将提取或选择的执行程序使用母机的虚拟机语言执行(步骤5001e),将母机侧的因特网连接识别用信息读入(步骤5001f),如果到步骤5001为止识别用信息没有表示“能够连接到因特网”的情况下,在执行程序之中执行非连接时用的程序(步骤5001t),显示母机的画面的执行结果(步骤5001u)。在本发明中,在存储器52中,不仅记录有连接到因特网的信息,还记录有在非连接时动作的执行程序,所以具有在非连接时要求的最低的动作能够进行显示的效果。
回到步骤5001g,在Yes的情况下,执行包括上述程序的一部分的连接程序(步骤5001h)。
在此情况下,通过对标签数据之中的执行程序在图86(a)的数据区域 5054中添加服务器的URL、用户ID或口令等数据而生成连接程序,能够扩展标签数据中的执行程序,并且能够减小存储器52中的非易失性存储器的容量。在此情况下,通过将存储器52的连接程序记录到程序区域5053 的不能改写的ROM存储器等的存储器中、将服务器的URL等记录到可改写的数据区域5054中,能够降低芯片面积及成本。
在步骤5001i中连接到特定的URL的服务器,在步骤5001j中判断服务器侧是否请求了数据的上载,如果是Yes,则在步骤5001p中将数据或/ 且程序上载到服务器中。使用该数据由服务器执行程序(步骤5001q),将由服务器执行的结果向母机发送(步骤5001r),在母机的表面上显示执行的结果等(步骤5001s)。
回到步骤5001j,在No的情况下,将包括服务器的URL之中的特定的程序的信息下载(步骤5001k),将该下载的程序在母机中执行(步骤 5001m)。并且,将该结果显示在母机的画面上。
通过耗电、体积及成本的制约,在RF-ID及子机侧的存储器容量中存在限制,不能存储通常的程序。但是,通过如本发明那样利用连接程序和服务器,具有能够使无限大的程序动作的显著效果。
也可以在服务器中执行巨大的程序,也可以执行从服务器下载的程序,它们包含在本发明的范畴中。
另外,在使用本发明的图86的实施方式中,设想TV用的遥控器进行了说明。在此情况下,遥控器由电池和用于切换TV频道的按钮、读取RF -ID的天线和通信电路、红外的发光部构成。如果代替遥控器而使用便携电话,也能够得到同样的效果。由于能够共用搭载在便携电话中的红外的发光部等,所以容易导入。由于具有便携的通信线路,所以直接连接到服务器,所以在性能方面没有变化。但是,由于发生通信费用,所以给用户带来负担。便携电话的画面与TV相比非常小。因而,设置由图86表示的发送开关5062,在TV处于附近的情况下,通过将便携电话的发光部朝向 TV的方向、将上述的存储器52中的标签数据向TV直接传送,能够用分辨率较高的大的画面观看数据。此外,由于也不花费费用,所以对于用户而言益处较大。经由使用读取的标签数据的便携电话线路的信息交换与该发送开关联动而被中止。
在此情况下,与在图86中说明的遥控器同样,设为在便携电话中具备 RF-ID(也可以是NFC通信部)的至少读取部的结构。可以预想到今后使便携电话具有RF-ID等的读取器功能。如果将RF-ID的读取器搭载在便携电话中,则在实施本发明时追加的成本变得非常小,对于用户而言益处较大。此外,不仅是遥控器、便携电话,通过PDA终端、笔记本PC、便携媒体播放器等也容易实现本发明。
(实施方式8)
在图88中表示在本实施方式中设想的家庭网络环境。假设在1个家宅内部中存在两个TV45、8001、各个TV具有RFID标签读写器和画面的显示部110、8003。此外,在各个TV上连接着运动图像服务器8004、8005,从运动图像服务器对TV使用有线或无线发送运动图像数据,能够使运动图像服务器的信息在TV上显示运动图像。这里,所谓运动图像服务器,是NAS等的存储设备或BD记录机等的记录设备。同样,也可以通过因特网对宅外的运动图像服务器访问。此外,假设家庭网络的用户拥有能够携带且能够进行运动图像的显示的移动AV终端8006。移动AV终端也与TV 同样,具有RFID标签8007和运动图像显示部8008,能够通过无线对运动图像服务器访问。
在本实施方式中,在这样的环境中,设想了用户正用TV1(45)观看运动图像,但想用2层的电视机2(8001)观看的状况。在移动观看运动图像的情况下,希望不间断地观看运动图像的后续。但是,为了保持着安全性而不间断地使运动图像移动,需要取得用户的认证及定时的同步,用户必须进行复杂的操作。
本发明为了解决上述问题,通过使用RFID,通过很简单的交换来进行用户的认证及定时的同步等的处理。具体而言,使移动AV终端8006的RFID 标签8007向TV1的RFID标签46接近,通过RFID标签进行用于认证及定时同步的信息的交换。
本发明通过上述结构,能够通过使移动AV终端与TV接触的很简单的动作进行运动图像的交接,大幅地提高用户的方便性。
图89是说明移动AV终端执行的各功能的功能块图。进行运动图像的交接的用户按下运动图像交接按钮8050。当被按下运动图像交接按钮时,运动图像交接请求制作部8051从显示信息管理部8052取得当前显示在显示部8008上的运动图像信息,制作运动图像交接请求,写入到RFID的存储器8054中。在没有显示运动图像的情况下,变更为接受运动图像的模式,将接受运动图像的命令作为运动图像制作请求。假如在显示有运动图像的情况下,变更为将运动图像递交的模式,将运动图像递交命令和运动图像的信息作为运动图像交接请求。这里,所谓运动图像的信息,是由显示信息管理部管理的运动图像显示时间的信息和由通信·广播管理部8055管理的连接目标信息。在通信·广播管理部8055中,在将运动图像通过广播接口 8056接收的情况下管理频道信息,在通过通信接口8057接收的情况下,管理运动图像服务器的识别符及运动图像的识别符。这里,运动图像服务器的识别符及运动图像的识别符,例如是IP地址、URL,只要是能够唯一地识别,是什么都可以。另外,运动图像交接按钮也可以分为接受运动图像的按钮和递交运动图像的按钮。此外,也可以通过按下运动图像交接按钮而在画面上显示是接受还是递交的选择分支。记录在RFID的存储器8054中的信息如果向其他RFID标签接近、则被从发送部8058通过无线天线 8059发送。另外,在制作交接命令后、在经过一定时间也没有被发送的情况下,认为运动图像交接模式被解除,将存储器内的信息也丢弃。RFID的接收部8060接收运动图像交接应答。所谓运动图像交接应答,是对运动图像接受命令或运动图像递交命令的可否的应答,假设在针对运动图像接受命令为可以的应答的情况下包括运动图像的信息。运动图像交接应答被发送给通信·广播管理部,进行遵循应答的处理。在对运动图像接受命令返回了可以的应答的情况下进行运动图像接受处理。在包含在应答中的运动图像信息是频道信息的情况下,对广播接口8056通知该信息,接收该频道。此外,对显示管理部8061发出显示该频道的指示。在有通过移动AV终端的广播接口不能接收的频道信息(BS、CS、线缆TV的频道)的情况下,接收这些频道,向通信部8062委托向通信接口转送的终端的探索。另外,转送的终端的探索也可以在事前进行。在通过通信接口接收到的情况下也与通常同样显示在显示部8008上。在包含在交接应答中的运动图像信息是连接目标信息的情况下,对通信部8062通知该信息,将运动图像的发送请求向连接目标发送。在运动图像的发送请求中包含有运动图像的显示时间,匹配于该时间而请求数据的发送。另外,与通过广播接口的运动图像接收不同,有在通过通信接口的的运动图像的接收中花费某种程度的时间的情况。这取决于用于通过通信接口接收的前处理及在通信缓冲器8063中临时储存运动图像数据的时间。在本方式中,也可以通过预测该时间、预先从通信部进行匹配于该时间的运动图像发送请求,来进行多余的数据发送及对其等待时间的削减。在此情况下,在显示时间修正部中进行修正,以便能够不间断地进行运动图像显示。这是因为,一般数字运动图像的数据储存在显示缓冲器8065中,一边由显示处理部8053进行处理一边由显示部 8008显示,所以能够实现。在对于递交运动图像的命令返回了可以的应答的情况下,将画面显示消除。另外,画面显示既可以自动消除,也可以使用户选择。此外,也可以从递交到的一侧的终端接收到消除画面显示的指示后消除,也可以准备定时器、在经过一定时间后消除。
图90是说明TV执行的各功能的功能块图。从RFID标签的天线8100 接收到运动图像交接请求的接收部8101对通信·广播管理部8102递交数据。在接收到的数据是运动图像接受命令的情况下,发送在运动图像交接应答制作部8103中管理的显示运动图像的连接目标信息。进行了接收的运动图像交接应答制作部8103从显示信息管理部8104取得显示时间信息,制作运动图像交接应答,写入到RFID的存储器8105中。此时,如果得不到想要的信息,则制作不能交接的应答。将写入的交接应答通过发送部8106 发送给移动AV终端的RFID。发送后的运动图像的显示结束处理与移动AV 终端是同样的。在接收到的数据是运动图像递交命令的情况下,进行对应于在通信·广播管理部8102中包含的信息的处理。在频道信息的情况下,对广播接口8107通知,接收希望的频道下的信息,对显示管理部8108通知,变更显示。另外,在在已经显示着运动图像的过程中接收到运动图像递交命令的情况下,既可以由优先级判断部8109进行应以哪个运动图像为优先的判断,也可以显示选择命令。在包括连接目标信息的情况下,对通信部8110通知,由其发送运动图像发送请求。然后的处理与移动AV终端是同样的,其他各部的功能也是同样的。
图91是在TV1(45)从运动图像服务器1(8004)正接收运动图像的情况下、移动AV终端8006从其交接该运动图像的情况下的次序图。用户为了交接运动图像而接通移动AV终端8006的电源。移动终端搜索无线 LAN的接入点8009,建立无线连接。进而,通过DHCP等取得IP地址,建立IP连接。在是DLNA终端的情况下,也可以进行M-SEARCH等的 DLNA终端探索处理。用户按下运动图像交接按钮,在RFID的存储器内制作运动图像交接请求。进而,用户使移动AV终端的RFID8007与TV1 的RFID46接近,将运动图像交接请求向TV1发送。在TV1中,通过接收到请求命令,制作运动图像交接应答(包括运动图像服务器1的IP地址和运动图像识别符、运动图像显示时间),向移动AV终端8006返送。另外,假设在TV1中的运动图像接收机构是HDMI线缆等的非IP连接的情况下、 TV1也预先取得运动图像服务器的IP地址。此外,假设在运动图像被加密的情况下同时交换需要的安全关联信息(密钥等)。接收到运动图像交接应答的移动AV终端对包含在应答中的运动图像服务器1的IP地址发送运动图像发送请求(包括运动图像的识别符、显示时间)。接收到运动图像发送请求的运动图像服务器18004将运动图像的发送目标切换为移动AV终端 8006。不再接收到运动图像的数据的TV1(45)将运动图像显示设为OFF。
图92是在移动AV终端8006从运动图像服务器1(8004)接收到运动图像的情况下、TV2(8003)从其交接该运动图像的情况下的次序图。用户按下移动AV终端8006的运动图像交接按钮,制作运动图像交接请求(包括运动图像服务器1的IP地址和运动图像识别符、运动图像显示时间)。进而,用户使移动AV终端的RFID8007与TV2的RFID8002接近,将运动图像交接请求向TV2发送。TV2(8003)制作能够进行运动图像交接的应答,向移动AV终端8006返送。TV2(8003)将运动图像发送请求向运动图像服务器1(8004)发送。然后的处理与图91同样。
图93是说明移动AV终端的处理的流程图。移动AV终端如果被用户按下交接按钮(S8300),则在画面为空白(或不是运动图像显示)的情况下(S8301)转移到接受运动图像的模式(S8302)。在画面不是空白的情况下显示选择画面(S8303)。在选择了接受的情况下(S8304),同样转移到接受运动图像的模式。在选择了递交的情况下,变更为递交运动图像的模式(S8305)。在接受运动图像的模式的情况下,移动AV终端将包括接受运动图像的命令的运动图像交接请求保存到自身的RFID的存储器内。用户使本终端的RFID向其他终端的RF-ID接近(S8306),将运动图像交接请求向其他终端发送(S8307)。此时,如果从其他终端接收到运动图像交接应答(S8308),则根据包含在应答内的信息进行处理。在不能得到应答的情况下,显示无应答的错误画面,结束处理(S8309)。在应答内包含有地面波的频道信息的情况下,确认移动AV终端是否能够进行该频道接收 (具有调谐器、天线,处于可接收接收的范围中)。在能够的情况下(S8311),将指定的频道进行画面显示。在不能的情况下,变更为无线LAN转送模式 (S8313)。此外,在应答信息中包含有在BS等的移动AV终端中原本不能接收的频道信息的情况下(S8314),也同样变更为无线LAN转送模式。在包含在应答中的信息不是频道信息的情况下,变更为无线LAN接收模式 (S8315)。
图94是说明移动AV终端的递交运动图像的模式下的处理的流程图。在递交运动图像的模式的情况下,移动AV终端将包括递交运动图像的命令及想要递交的运动图像的信息的运动图像交接请求保存到自身的RFID 的存储器内。用户使本终端的RFID向其他终端的RF-ID接近(S8320),将运动图像交接请求向其他终端发送(S8321)。此时,如果从其他终端接收到运动图像交接应答(S8322),则根据包含在应答内的信息进行处理。在没有得到应答的情况下,显示无应答的错误画面,结束处理(S8323)。在应答是不能交接的应答的情况下(S8324),显示不能交接的错误画面,结束处理(S8325)。在可以交接且以地面波接收交接的运动图像的情况下 (S8326),停止地面波广播的画面显示。在不是这样的情况下,根据接收的方式的种类进行由无线LAN接收的运动图像的结束处理(S8327),停止画面显示。另外,画面显示的停止也可以按照递交运动图像侧的终端的指示,也可以切换为初始画面等的别的画面(S8328)。
图95是说明移动AV终端的无线LAN转送模式下的处理的流程图。假设移动AV终端是能够接收地面波、但不能接收卫星广播及线缆TV的广播的终端。为了接收这些广播波,需要用能够接收的别的终端接收、用无线LAN转送来。移动AV终端如果成为无线LAN转送模式,则调用无线 LAN转送对应设备的信息。如果没有保持对应设备的信息(S8340),则进行对应设备的探索(S8341)。如果在宅内不能发现无线LAN转送对应设备,则显示不能进行对应的频道交接的错误画面(S8342)。在发现了无线LAN 转送设备或原本保持有对应设备信息的情况下,对该设备发送对应频道的运动图像转送要求(S8344)。在从转送设备返回了能够转送运动图像的应答的情况下,将指定的频道的运动图像包通过无线LAN接收(S8345),将指定的频道的运动图像进行画面显示(S8346)。
图96是说明移动AV终端的无线LAN接收模式下的处理的流程图。在无线LAN接收模式下、在运动图像交接应答之中包含有运动图像服务器的IP地址、运动图像的ID及显示时间信息的情况下(S8360),对运动图像服务器进行访问。首先,确认运动图像服务器的IP地址与本终端的IP 地址是否是同一子网(S8361)。在是与本终端的IP地址为同一子网的情况下,对运动图像服务器发送包括运动图像ID和显示时间的运动图像发送请求(S8364)。另外,在有延迟时间修正功能的情况下(S8362),将运动图像发送请求内的显示时间信息修正(S8363)。这里,所谓显示时间修正功能,是指为了考虑到处理所花费的各种延迟、进行高效率的运动图像转送而进行的修正功能。进而,在移动AV终端不能从运动图像服务器接收运动图像的情况下(S8365),也可以再发送运动图像发送请求。在再送超时超过规定次数也得不到应答的情况下(S8366),显示无服务器应答错误画面(S8367)。在接收到的运动图像数据的时间与想要显示的时间不一致的情况下(S8368),使用快进或回退的控制包使其与想要显示的时间一致 (S8369)。然后,移动AV终端进行运动图像的画面显示。
图97是说明在运动图像交接应答中包含有URL的情况下的处理的流程图。在包含有URL的情况下(S8380),进行通过DNS的名称解析,取得运动图像服务器的IP地址(S8381)。另外,运动图像的URL只要是为运动图像服务用而附加的名称,是什么都可以。此外,设名称解析还包括从DNS以外的服务识别符向终端识别符的变换。在所取得的运动图像服务器的IP地址与本终端的IP地址相同的情况下,回到在图96中说明的处理。在不是同一子网的情况下,转移到向子网外服务器的连接处理。在应答信息中没有包含有希望的信息的情况下,显示应答信息不正确的错误画面。
图98是说明运动图像服务器的IP地址与本终端的IP地址之间子网不同的情况下的处理的流程图。在子网不同的情况下,搜索别的无线接入点。在宅内没有别的接入点的情况下,认为运动图像服务器是宅外服务器,转移到宅外服务器的连接处理。在有别的接入点的情况下(S8390),对该接入点进行再连接,取得具有别的子网的IP地址(S8391)。如果运动图像服务器的子网与所取得的IP地址的子网相同(S8392),则转移到宅内服务器的处理。在本终端连接到可访问的宅内接入点、取得了IP地址、但子网不相同的情况下(S8393),转移到向宅外服务器的访问处理。另外,对全部接入点的IP地址的取得处理既可以在事前进行,也可以在移动AV终端内管理。
图99是说明向宅外服务器访问的情况下的处理的流程图。在运动图像服务器的地址不是全局地址的情况下(S8400),将地址错误画面显示 (S8401)。在不知道向指定的运动图像服务器的访问方式的情况下 (S8402),将访问方式不明错误画面显示(S8403)。另外,假设宅内运动图像服务器及宅内运动图像设备依据DLNA。在知道访问方式的情况下、并且在具备与宅内服务器同样的功能的情况下,进行与宅内服务器同样的处理(S8404)。在不是那样的情况下,通过对应于访问方式的处理取得运动图像(S8405),将接收到的运动图像画面显示(S8406)。
图100是说明TV的处理的流程图。将其他终端的RFIDTV向本终端的RFID接近(S8410),接收运动图像交接请求(S8411)。在本终端正在接收运动图像的过程中(S8412)、且在运动图像交接请求内包含有运动图像接受命令的情况下(S8413),将本终端转移为递交运动图像的模式 (S8414)。在尽管不是运动图像接收中、但在运动图像交接请求内包含有运动图像接受命令的情况下(S8415),返送不能进行运动图像交接的运动图像交接应答(S8416),显示不能交接的错误画面(S8417)。在接收的运动图像是地面波的情况下(S8418),在运动图像交接应答中装入频道信息而返送(S8419),将画面显示消除(S8420)。
图101是说明接收中的运动图像不是地面波的情况下的处理的流程图。在接收的运动图像是地面波以外的广播运动图像的情况下(S8430),在运动图像交接应答中装入频道信息而返送。在有无线LAN转送模式的情况下,也可以装入本终端的IP地址(S8431)。在返送后将画面显示消除 (S8432)。在其他运动图像的情况下,在交接应答中装入运动图像服务器 IP地址、运动图像ID、运动图像显示时间或运动图像URL、运动图像显示时间而返送(S8433)。在返送后进行通过无线LAN的运动图像通信的结束处理(S8434),将画面显示消除。
图102是说明在运动图像交接应答中包含有运动图像递交命令的情况下的处理的流程图。在显示运动图像的过程中接收到运动图像递交命令的情况下,在有2画面显示功能的情况下(S8440),转移到接受运动图像的模式(S8441)。在没有的情况下,显示是否接受运动图像的选择画面 (S8442)。在选择了接受运动图像的情况下(S8443),转移到运动图像接受模式。在选择了不接受运动图像的情况下,返送不能进行运动图像交接的运动图像交接应答(S8444)。在包含在请求中的信息是频道信息的情况下(S8445),将指定的频道画面显示(S8446)。在包含在请求中的信息是运动图像服务器的IP地址或URL的情况下(S8447、S8448),进行与移动 AV终端的运动图像接受模式相同的动作。在不包含有这些信息的情况下,显示信息错误画面(S8449)。
(实施方式9)
图103是在TV1(45)从运动图像服务器1(8004)接收运动图像的情况下、且在移动AV终端8006从其交接该运动图像的情况下,从TV1(45) 发送运动图像发送请求的情况下的次序图。与图91同样,用户为了交接运动图像而接通移动AV终端8006的电源。移动终端探索无线LAN的接入点8009而建立无线连接。进而,通过DHCP等取得IP地址,建立IP连接。用户按下运动图像交接按钮,在RFID的存储器内制作运动图像交接请求。此时,在运动图像交接请求中装入本终端的IP地址而制作。进而,用户使移动AV终端的RFID8007与TV1的RFID46接近,将运动图像交接请求向 TV1(45)发送。TV1返回包括运动图像服务器的IP地址的运动图像交接应答。这是为了提高安全性(防止从无关系的终端的随意的访问),可以省略。另外,与图91同样,在运动图像被加密的情况下同时交换需要的安全关联信息(密钥等)。接收到运动图像交接请求的TV1(45)对运动图像服务器1(8004)发送包括移动AV终端8006的IP地址的运动图像发送请求。接收到运动图像发送请求的运动图像服务器1(8004)将运动图像的发送目标变更为移动AV终端8006。然后的处理与图91同样。
图104是在与图92同样的情况下、在运动图像交接请求中发送运动图像服务器1(8004)的IP地址的情况。这与图102同样能够省略。接受到运动图像交接请求的TV2(8003)返回包括本终端的IP地址的运动图像交接应答。接受到运动图像交接应答的移动AV终端8006对运动图像服务器 1(8004)发送包括TV2的IP地址的运动图像发送请求。接收到运动图像发送请求的运动图像服务器1(8004)将运动图像的发送目标变更为TV2 (8003)。然后的处理与图91同样。
(实施方式10)
图105是表示不是使用移动AV终端8006、而使用具备RFID的遥控器8200的情况下的次序图。这里,设想遥控器为不具有显示部、但具有 RFID的收发部和存储器的终端。用户按下运动图像交接按钮,在RFID的存储器内制作运动图像交接请求。进而,用户使遥控器的RFID与TV1的 RFID46接近,将运动图像交接请求向TV1发送。在TV1中,通过接收请求命令,制作运动图像交接应答(包括运动图像服务器1的IP地址和运动图像识别符、运动图像显示时间),向遥控器返送。接受到来自遥控器的运动图像交接请求的TV1(45)将运动图像停止请求向运动图像服务器1 (8004)发送。用户在移动到2F后,使遥控器的RFID接近于TV2的RFID,发送运动图像交接应答(包括运动图像服务器1的IP地址和运动图像识别符、运动图像显示时间)。接收到运动图像交接请求的TV2(8003)返送运动图像交接应答,对运动图像服务器1发送运动图像发送请求(包括运动图像识别符、运动图像显示时间)。运动图像服务器1(8004)将指定的运动图像从指定的时间的数据开始发送。
(实施方式11)
图106是能够从运动图像服务器1同时发送的情况下的次序图。移动 AV终端在与TV间进行规定的交换后,发送运动图像发送请求。运动图像服务器1(8004)在接受到运动图像发送请求的情况下,暂时向TV1(45) 和移动AV终端(8006)的两者发送运动图像数据。这是为了完全不间断的情况下的处理。移动AV终端和TV1既可以暂时向两者都进行画面显示,也可以进行某种同步处理而进行完全不间断处理。运动图像服务器1(8006) 基于来自移动AV终端(8006)的运动图像停止请求停止TV侧的运动图像数据转送。另外,既可以从TV1(45)发出停止请求,也可以运动图像服务器1(8006)自动地停止。
(实施方式12)
本实施方式说明用于在由实施方式1~10说明的赋予了RFID的设备的从工厂出货到使用环境的流通方式中确保可跟踪性的方法的优选的方式。
近来,基于流通的高效化及家电商品的陈旧化为原因的事故多发的背景,进行了用于确保在从生产、流通到消费者的使用环境进行跟踪的所谓可跟踪性的研究。
作为其中之一,进行将使用860~900MHz带的通信频率的无源型的 RFID添加在包装体或搬运箱等上,从而能够管理从生产到小卖店的流通的尝试。860~900MHz带也称作UHF(Ultra High Frequency)带,UHF带的 RFID是在无源型(从外部向标签侧供给电源者)之中最能够确保通信距离的应用,虽然也取决于输出的大小,但能够进行2~3m的通信。由此,通过在搬运中将多台同时装入到RFID读出门中,能够高效率地瞬间读出多台的RFID信息,特别可以期待流通现场中的使用。
但是,这样的UHF带的RFID有能够长距离通信的优点,但另一方面,由于添加在包装体或搬运箱上,所以包括在达到消费者的手边后不再能够跟踪该设备的问题。此外,距离较长对于通过使设备与设备接近而引启动作的所谓在实施方式1~10中说明的实体接口、实物接口或直观接口不能说是有效的。
另一方面,在实施方式1~10中说明的RFID(47)设想了13.56MHz 带的HF-RFID(当然并不仅限于此)。HF-RFID的特征是近距离通信(根据输出而不同,但大致是几十cm以内),广泛用在例如作为通过接近而直观地引启动作的应用的电子钱币、检票系统等中。因而,在想要将由数字照相机拍摄的照片放映在TV上时等,通过将数字照相机向TV的RFID读写器46靠近,能够实现实体(照相机)与实体(TV)联动动作的实体接口、及将数字照相机的照片放映在TV上的直观的接口。
在本实施方式中,公开了与实施方式1~10同样对设备添加HF- RFID、并且对设备的包装体或搬运箱添加UHF-RFID、使得即使达到消费者的使用环境也进行商品的跟踪的技术。
图107是表示设备从工厂出货时HF-RFID和UHF-RFID的动作的概念图。
在本实施方式中,对设备是记录机的情况进行了说明,但设备是数字家电、食品等怎样的都可以。
对在制造生产线中组装成的设备M003赋予HF-RFIDM001。此外,在本HF-RFID中具有存储器,是从设备M003和从RFID的通信部的哪一方都能够访问的双重接口的结构。此外,在HF-RFIDM001的存储器中,在组装阶段中,记录有设备的制造号码、以及用于将设备的制造号码复制到UHF-RFID中的程序(命令)。
如果设备M003的组装完成,则在包装前通过手持型读写器M002从HF-RFID的存储器读出制造号码,并且在包装体等上记录表示添加了 UHF-RFID的UHF-RFID的设备ID(UHF-RFID固有信息)。
接着,在将设备M003包装后,对包装体M004添加UHF-RFIDM005。 UHF-RFIDM005既可以对包装体原样添加,也可以是添加到管理表等中的方式。如果被添加UHF-RFIDM005,则将从设备M003的HF- RFIDM001读出的制造号码等通过手持型读写器M002记录到UHF-RFIDM005中。本实施方式的手持型读写器M002是能够访问HF-RFID 及UHF-RFID的设备。
如果这样,则将设备M003的制造号码记录到HF-RFIDM001中,并且将与其相同的信息也记录到包装体M004的UHF-RFIDM005中。因而,在包装后的流通中,不再需要从仅能够近距离访问的HF-RFID读出制造号码等,通过多个同时通过门,能够从UHF-RFID直接读出,能够实现流通的高效化。
此外,由于在设备M003到达消费者的使用环境后也能够将HF-RFID 通过TV遥控器等读出,所以不仅是流通、连达到消费者的手边的设备也能够跟踪,能够实现流通的高效化、以及将因设备使用中的老化造成的事故等防止于未然的总的可跟踪性。
图108是表示能够从UHF-RFIDM005访问的存储器的记录格式的概念图。
在UHF-RFIDM005的存储器中,记录有UHF设备ID1070、HF存在识别信息1071、设备制造号码、现品号码1072、日期1073、制造商1074、型号、批次号、品名1075及状态1076。
UHF设备ID1070记录在存储器的不能改写区域中,是能够按照UHF -RFID分别识别的识别信息。将UHF设备ID1070在设备M003被包装之前通过手持型读写器读出,也记录到HF-RFIDM001中。由此,即使在包装体与设备的对应关系弄错的情况下,也能够在未发生问题前进行确认而适当地进行处理。
HF存在识别信息1071是确认是否对设备M003添加了HF- RFIDM001的识别信息。在对设备添加了HF-RFID的情况下,在设备的包装时,在将从HF-RFID读出的制造号码等记录到UHF-RFID中时,将HF-RFID的存在识别信息改写为“存在”的信息。由此,仅通过确认 HF存在识别信息1071,就能够判断是否进行UHF-RFID与HF-RFID的对应关系的确认工序。
设备制造号码、现品号码1072记录有从HF-RFIDM001读出的制造号码或者与制造号码建立了对应的现品号码的至少某一个。所谓现品号码,是在流通过程中使用的每个设备的号码,通过将制造号码和现品号码等同地管理,能够与制造号码唯一地进行对应建立。由此,在本实施方式中,不将这两者明确地区分使用,而作为唯一的信息进行说明。
日期1073是相当于所谓制造年月日的信息,记录有制造设备M003的日期、时间信息。它既可以由手持型读写器M002在向UHF-RFID记录制造号码的时刻进行记录,也可以是将记录在HF-RFID中的制造年月日信息读出而记录到UHF-RFID中的方式。
制造商1074是制造了设备M003的制造商识别信息,既可以在向UHF -RFID记录制造号码的时刻通过手持型读写器记录,也可以是将预先记录在HF-RFID中的信息读出而记录的方式。
型号、批次号、品名1075都与日期1073或制造商1074同样,既可以将从HF-RFID读出的信息记录,也可以是用手持型读写器记录的方式。但是,在批次号的情况下,在批次管理进行从生产到流通的一元管理的情况下,以上述哪种方法写入信息都可以,但没有进行一元管理、在包装时不清楚生产线信息的情况下,从HF-RFID读出批次号而记录到UHF-RFID中的方法具有进行周密的管理的优点。
状态1076记录流通方式中的状态信息。即,状态信息记录工厂内保管、工厂出货、配送中心领受、配送中心出货、小卖店接受等、设备的跟踪所需要的状态信息。本状态是在各流通过程中被改写的信息。
此外,在UHF-RFIDM001中记录有管理服务器确定信息1077。该管理服务器确定信息1077是与HF-RFIDM001的第2存储器52的服务器确定信息48同样的信息。在设备M003包装时从HF-RFIDM001读出而复制到UHF-RFIDM005中。由此,使用UHF-RFID的流通阶段中的管理、以及设备到达消费者的手边后的管理都能够通过同一个管理服务器一元管理。
由此,在设备M003到达消费者的手边后,如果从HF-RFIDM001读出管理服务器地址信息、对管理服务器访问、通过设备制造号码1072实施查询,则能够使由管理服务器管理的从制造到流通的跟踪信息对消费者可视化,成为提高消费者的安心、安全的因素。
图109是表示设备M003在工厂出货时从HF-RFID向UHF-RFID复制制造号码等的处理的流程的流程图。
首先,对组装成的生产物(设备M003)添加HF-RFID(M020)。在本流程图中,是在将设备M003组装后添加HF-RFID的方式,但在设备和HF-RFID都能够访问共有存储器的具有双重接口的结构的情况下,在设备M003的组装阶段中添加HF-RFID。
接着,在HF-RFID1081中记录设备M003的制造号码(M021)。这里,是在组装工序中经由手持型读写器设备M002对HF-RFIDM001记录制造号码的工序。制造号码由手持型读写器等从生产线的管理服务器等取得,通过近距离无线通信记录到HF-RFIDM001中。
在对HF-RFIDM001记录制造号码后,将设备M003包装(M022)。这里的包装,是指伴随着缓冲件等的流通用的包装及向搬运箱等的收纳。
如果包装完成,则对包装体(包括搬运箱表面、管理用标签)添加UHF -RFID(M023)。
接着,通过手持型读写器M002与管理服务器1085通信,读出与从 HF-RFIDM001读出的制造号码建立了对应的现品号码(M024)。所谓现品号码,是在商品的流通中使用的管理号码,是管理服务器发行的号码,是与制造号码1对1对应的号码。
在将现品号码从管理服务器1085读出后,对于UHF-RFID,将制造号码或现品号码、以及表示对设备M003添加了HF-RFID的存在识别信息记录到UHF-RFID中(M026)。
通过以上的工序,将记录在对设备M003添加的HF-RFID中的制造号码在设备的包装后复制到UHF-RFID中。通常HF-RFID的通信距离较短,所以在包装后难以向HF-RFID访问。但是,根据本实施方式,通过向比HF-RFID可通信距离长、对包装体添加的UHF-RFID中记录制造号码或现品号码,能够进行包装后的设备的流通管理。
此外,设备到达消费者的地点,即使包装体等被丢弃,通过向添加在设备上的HF-RFID访问,也能够读出制造号码等,能够将从流通到消费者的手边一元地管理,能够实现较大范围内的可跟踪性。
图110是表示设备M003的流通过程中的处理的流程的流程图。
首先,在设备M003从工厂出货时,通过经过手持型读写器或UHF- RFID读出门,从UHF-RFID读出制造号码或现品号码,向能够与手持型读写器或UHF-RFID读出门通信的管理服务器1085登录已出货,并且从手持型读写器或UHF-RFID读出门对UHF-RFID访问,将存储器内的状态(1076)也同样改写为已出货(M030)。
在工厂出货后,储存到配送中心等中,然后,在从配送中心出货时,通过手持型读写器或UHF-RFID读出门从UHF-RFID读出制造号码或现品号码,将已从配送中心出货的情况改写到管理服务器1085及UHF-RFID 的状态(1076)中(M032)。
此外,在小卖店出货时也同样,将已从小卖店出货的状态改写到管理服务器1085及UHF-RFID的状态1076中(M034)。
在最终设备M003到达消费者的手边的时刻,用TV遥控器等的RFID 读取部46从HF-RFID读出制造号码,与TV的识别信息建立关联而登录到管理服务器1085中(M036)。因而,在本实施方式中,也在HF-RFID 的第2存储器52中预先记录有服务器确定信息48。本实施方式的服务器确定信息48是表示管理服务器1085的服务器确定信息,包括用于向管理服务器1085的连接的URL。由此,只要通过具备RF读写器的TV遥控器等将设备M003的HF-RFIDM001读出,就能够从管理服务器1085取得从生产到流通的管理信息。此外,在管理服务器1085中,通过与TV的识别信息建立对应而管理,即使不管理例如使用者的个人信息,也能够与拥有的TV建立联系,并将用户拥有的设备的列表储存到管理服务器中。
由此,在用户拥有的设备中发觉了不良状况的情况下,能够可靠地将向用户通知危险的消息用TV显示,能够将重大的事故防止于未然。
如以上这样,在本实施方式中,生产阶段中对设备添加HF-RFID、对设备的包装体添加UHF-RFID,分别具有相互的存在识别信息,并且使 UHF-RFID也具有记录在HF-RFID中的制造号码及管理服务器确定信息,由此,能够提供一种对于到目前为止仅在流通中的可跟踪性,不但原样保持流通管理的方便性,而且即使到达消费者的手边也进行管理的系统。
在本实施方式中,对从制造到用户的手边的管理进行了说明,但本发明在用户进行丢弃、或再循环时也同样发挥效果。其次序也可以通过在本实施方式中说明的流程实现。
例如,在图107中,是将记录在对设备M003添加的HF-RFIDM001 中的制造号码等添加到对包装后的包装体M004添加的UHF-RFIDM005 中而进行工厂出货的方式,但将工厂出货设为向丢弃场的出货、或向再循环中心的出货也是同样的。如果是向丢弃场的出货,则只要在丢弃完成后在管理服务器中登录丢弃完成,就能够一元地管理商品被生产、被消费者使用、直到被丢弃。近来,由于丢弃成本的信息,非法丢弃的问题受到指责,但只要看到被非法丢弃的设备的HF-RFID或UHF-RFID,在流通阶段的哪里进行了非法丢弃就一目了然,能够减轻这样的非法丢弃的问题。
此外,在是向再循环中心的出货的情况下,在能够从HF-RFID访问的区域中记录由使用状况检测部7020检测到的使用状况信息及不良状况检测状况、总使用时间等,也能够用于是否能够再循环的判断、定价等。此外,在判断为能够再循环的情况下,能够将与管理服务器1085建立对应而管理的TV的识别信息、个人信息等的信息更新而利用。
(实施方式13)
图111表示整体的系统结构图。在卫生间的镜子部上安装有半透射式的镜子透射板。在其背侧的背面部配置有显示器、电源天线、RF的天线部。用户拿着具有RF天线的移动终端,显示某种影像信息。说明使该影像移动到镜子的显示器中的次序。图112的流程图表示该次序。首先,启动并按下终端的图像送出按钮。检查经由网络或TV频道得到的信息或数据是否显示在终端上,如果是Yes,则获得影像或数据的送出源的服务器的URL 或IP地址、显示中的影像的流ID、流的再生时间信息、TV频道信息。接着,从终端的天线开始电源的发送、接收。如果使终端的天线部接触在装置侧的天线附近,则从终端侧向装置侧的天线传送电力或信号。终端将装置侧的属性信息(影像显示能力、声音能力、因特网的宅内和宅外的最大 (平均)通信速度、TV频道连接的有无、因特网及通信线路的种类)经由装置侧的天线读出。
首先,在影像源为TV、装置连接在TV天线上的情况下,将TV的频道信息和TV的图像的再生显示时间经由天线向装置发送。在装置侧,将该TV频道的影像显示在画面上。在TV的情况下,不进行图像的左右反转显示。
在从终端侧接受到可供电标志的情况下,从装置向终端供给电源。
这里,回到前面的步骤,在连接在因特网上的情况下,根据装置侧的属性信息设定影像的速率、分辨率,将最适合于该设定的服务器地址、 DLNA网络上的服务器ID、服务器之中的流ID、流的再生显示时间信息经由RF天线向装置侧发送。
转移到图113的流程图,在装置侧基于服务器的IP地址、流ID、流的再生显示时间显示流,以使其显示时间与显示在终端侧的影像流一致。在时间一致的阶段中,从装置的前面的显示向下个显示、即将终端的影像向装置侧不间断地转移。
如果在为了著作权保护而禁止了影像在终端和装置的两台同时显示的情况下,在装置侧的影像显示不间断地开始的时刻,通过从装置侧向终端侧发送终端的影像中止命令等的方法,将终端侧的影像显示中止。
此外,在装置从终端接受到在镜子时使左右反转的“镜子时反转识别符”的情况下,在接着的步骤中将影像的左右反转。不进行字符的左右反转。
通过以上的方法,首先最先从终端向装置供电,在装置停止的情况下使装置启动。这样实现节电。接着,如果装置开始动作,则此次从装置向终端供电。终端从服务器等接受影像数据,在先经由终端再经由网络迂回向装置侧分发影像的情况下,终端侧需要用无线LAN经由接入点将影像长时间发送。在用无线LAN传送大量的数据的情况下耗电较大,终端的电池剩余量有可能耗尽。但是,通过如实施例那样从装置向终端送电,具有防止电池的消耗的效果。此外,由于是镜子,所以人的姿势以左右反转映照。通常在牙刷的指导视频等时,右和左成为相反,学习效果下降。但是,通过左右反转而容易学习。
(实施方式14)
对本发明的实施方式14进行说明。在图114中表示在本实施方式中设想的家庭网络环境。多个家庭网络构成在各个宅内M1001、M1002、M1003,各家庭网络经由因特网M1004连接在登录服务器M1005上。另外,在家庭网络内的服务限定于宅内的情况下,登录服务器M1005也可以存在于宅内。此外,家庭网络被分割为别墅或办公室等的多个场所的情况下,或如宿舍或合住那样在1个宅内存在多个家庭网络的情况下,本发明也是有效的。在宅内存在经由路由器M1006或无线接入点(以下:无线AP)M1007 等连接到因特网的TV(M1008、M1009)或DVD记录机M1010等的常时连接家电和根据需要而间接地连接到因特网的数字照相机M1011及微波炉 M1012、电冰箱M1013等非常时连接家电。进而,在本实施方式中,假设便携电话M1014等的移动终端也为构成家庭网络的终端。本发明的各设备能够通过近距离无线通信设备相互进行简单的数据通信,通过近距离无线通信设备取得各设备的信息,通过家庭网络设备登录到登录服务器M1005 中。
在图115中表示实施本发明的终端的硬件结构图。假设本发明的通信装置M1101作为通信设备而搭载有两个设备。1个是近距离无线通信设备 M1102,一般称作Near FieldCommunicateion(以下:NFC)或RF标签的。
另1个是家庭网络通信设备M1103,是用于宅内设备联动的无线Local AreaNetwork(以下:无线LAN)或ZigBee等的无线通信设备、Ethernet(注册商标)或Power LineCommunication(以下:PLC)等的有线通信设备、以及在WiMax或3GPP等的在移动设备中使用的通信设备。进而,假设通信装置具备用户界面设备M1104。这里,所谓用户界面设备,表示按钮等的输入设备及显示器、LED等的输出设备。另外,在TV或空调等的设备中,输入输出一般通过遥控器进行,是在物理上分离的,但在本发明中为了说明的简单化而作为用户IF设备处理。
图116是说明在CPU(M1105)上动作的功能的功能块图。通信装置 M1101内的设备固有ID取得部M1202取得包括登录设备M1201的设备固有ID的信息。假设登录设备将包括登录命令及设备固有ID的登录信息通过近距离无线通信设备M1102发送。从设备固有ID取得部M1202取得包括设备固有ID的登录信息,登录信息制作部M1204从家庭ID管理部 M1205取得家庭ID,对从登录设备取得的登录信息附加家庭ID而制作登录信息。在作为登录信息而附加位置信息的情况下,从位置信息取得部 M1206取得位置信息。这里,所谓位置信息,是指基于输入到TV中的邮政编码的住址信息或能够通过便携电话的GPS取得的地理的位置信息等,通过登录登录设备的设置位置信息等,能够使家电可跟踪性等的服务提供变得容易。设为登录信息收发部M1206。家庭ID管理部管理与在上述构成家庭网络的通信设备中使用的通信设备ID不同的家庭ID。目前,在家庭网络中,各通信设备的主设备以各自的通信设备单位管理,其管理方法根据通信设备的种类而不同,所以不能进行以家庭单位的管理。此外,也有使用户输入服务单位中的ID的情况,但对于用户而言方便性很低。本发明通过家庭ID的新的ID的导入,不论通信设备及服务如何都能够进行构成家庭网络的设备的管理。此外,家庭ID管理部在初次进行设备登录的情况下,制作家庭ID。家庭ID既可以基于位置信息制作,也可以基于通信设备的固有ID制作。既可以基于随机数制作、由登录服务器确认以使其不重复,也可以由用户设定。从登录信息制作部M1204接收到登录信息的登录信息收发部M1207使用家庭网络通信设备M1103对登录服务器M1005发送。登录服务器M1005将登录信息与登录数据库M1208对照,判断能否登录,返送登录应答。接收到登录应答的登录信息收发部将结果使用用户界面设备M1104向用户通知。也可以在不能的情况下向登录信息制作部M1204通知,请求登录信息的变更。由此,能够进行包括不具有通信用的用户界面设备的白色家电设备等在内的家庭网络设备的统一管理。
图117是用于说明通信装置的登录处理的流程图。通信装置如果接收到登录命令和设备固有ID(M1301),则判断本终端是否保持有家庭ID (M1302)。在没有保持家庭ID的情况下转移到家庭ID取得处理(M1303)。在保持有家庭ID的情况下,进行登录数据的制作处理(M1304)。接着,将登录数据向登录服务器发送(M1305)。在从登录服务器没有接收到登录应答的情况下(M1306),对用户显示登录失败通知(M1307)并结束。在接收到登录应答的情况下,对用户显示是否可以通过制作的信息登录,在 OK的情况下(M1308)结束。在不是的情况下回到家庭ID取得处理。另外,在难以取得其他家庭ID的情况下,作为登录失败而结束。
图118是用于说明家庭ID取得处理的流程图。在通信装置中具有家庭 ID的自动制作功能的情况下(M1401)自动进行制作,在没有的情况下对用户委托手动输入。在没有进行手动输入的方法、或被用户拒绝手动输入的情况下,向用户通知不能登录(M1403),对用户敦促用别的方法取得家庭ID。在自动制作的情况下,根据状况而选择自动制作功能(M1404)。在能够通过GPS取得地理的位置信息的情况下、或如TV那样是一般登录住址的终端的情况下,根据位置信息制作家庭ID(M1405)。在一般安设在宅内的终端中,制作基于通信装置的固有识别符的家庭ID(M1406)。特别是在有效的家庭ID制作较困难的情况下,通过随机数制作家庭ID(M1407)。如果制作了家庭ID,则对服务器发送制作的家庭ID(M1408)。从服务器接收关于制作的家庭ID的信息,在不能使用该家庭ID的情况下(M1409),回到家庭ID的制作。在能够使用的情况下,向用户确认(M1410),在OK 的情况下,作为家庭ID登录到本终端中(M1411)。在不是那样的情况下回到家庭ID的制作。
图119是进行设备登录的情况下的流程图。登录设备M1201通过近距离无线通信设备,将包括设备固有ID的信息与登录命令一起向通信装置 M1101转送。通信装置在没有保持家庭ID的情况下,制作临时家庭ID,通过家庭网络通信设备向登录服务器M1005发送。登录服务器M1005添加关于临时家庭ID的信息,向通信装置返送。在通信装置保持有家庭ID的情况下,或从登录服务器取得了也可以利用的家庭ID信息的情况下,将包括家庭ID及设备固有ID的登录信息向登录服务器发送。完成登录设备的登录处理。
(实施方式15)
作为本发明的实施方式15,对在通信终端间共有家庭ID的方式进行说明。图120是表示在通信装置间共有家庭ID的情况下的功能的功能块图。假设构成家庭网络的通信装置通过家庭网络M1601及家庭网络通信设备 M1103共有家庭ID。或者也可以通过近距离无线通信设备M1102共有。本发明的通信装置通过将共有命令和家庭ID通过近距离无线通信设备 M1102向其他通信装置传送,能够在家庭内的通信装置间共有家庭ID。家庭ID管理部M1205S内的家庭ID共有部M1602S将共有命令和存储在本终端的家庭ID存储部M1209S中的家庭ID存储到近距离无线通信设备 M1102S中。当发送侧的通信装置M1101S的近距离无线通信设备M1102S 与接收侧的通信装置M1101R的近距离无线通信设备M1102R接近时转送信息,将发送侧通信装置M1101S的家庭ID存储到接收侧通信装置M1101R 的近距离无线通信设备M1102R内。接收侧通信装置M1101R内的家庭ID 共有部M1602R如果在本终端的家庭ID存储部M1209R中没有存储家庭 ID,则作为本终端的家庭ID存储。由此,能够很简单地进行通信装置间的家庭ID。在存储有家庭ID的情况下,对登录服务器发送双方的家庭ID。接收到双方的家庭ID的登录服务器将双方的家庭ID虚拟地作为1个家庭的ID管理。此外,也可以为了统一为某方的家庭ID而对所有的通信装置通知某方的家庭ID。在此情况下,也由于存在非常时连接设备,所以登录服务器中的家庭ID将双方虚拟地作为1个ID管理。另外,也可以将非常时连接设备的ID每当连接时更新、如果全部的登录设备的更新结束则结束虚拟的管理。由此,能够将原本为多个家庭网络合并为1个网络。
此外,也可以使用家庭网络进行共有。在由家庭网络连接检测部 M1603S检测到没有保持家庭ID的通信装置连接到家庭网络M1601上的情况下,将家庭ID共有请求向连接在家庭网络上的终端广播。连接在家庭网络M1601上的终端中的保持家庭ID的终端将家庭ID朝向发送了共有请求的终端返送。由此,能够在进行通信之前的阶段完成家庭ID。另外,如果预先设定了保持家庭ID的终端中的、对共有请求应答的主终端,则能够避免从多个终端返送许多共有应答、对家庭网络作用过量的负荷的情况。此外,在没有应答的情况下,也可以在本终端进行家庭ID取得处理。
图121是表示使用近距离无线通信设备M1102共有家庭ID的情况下的、接收侧通信装置M1101R的动作的流程图。如果接收到共有命令和家庭ID(M1701),则通信装置判断在本终端中是否保持有家庭ID(M1702)。在本终端中没有保持的情况下,将接收到的家庭ID作为本终端的家庭ID 登录(M1703)。在本终端中保持有的情况下,将保持的家庭ID与接收到的ID比较。在相等的情况下什么都不做而结束。在不相等的情况下,进行家庭ID的选择(M1705)。家庭ID的选择既可以由本终端进行,也可以由登录服务器进行。在对登录服务器委托选择的情况下,将本终端的家庭ID 和接收到的ID作为共有信息对登录服务器发送(M1706)。接收包括由登录服务器选择的家庭ID的共有应答(M1707),对用户确认(M1708),在 OK的情况下结束。在不是OK的情况下,回到家庭ID的选择。在由通信装置选择本终端的家庭ID的情况下,将本终端的ID作为家庭ID,将接收到的ID作为共有ID对登录服务器发送(M1709)。登录服务器向具有共有 ID的通信装置通知家庭ID被更新的情况。在选择了接收到的家庭ID的情况下,将本终端的家庭ID更新(M1710)。进而,将本终端的旧ID作为共有ID、将接收到的ID作为家庭ID对登录服务器发送(M1711)。登录服务器向同样具有共有ID的通信装置通知家庭ID被更新的情况。
图122是表示使用近距离无线通信设备M1102共有家庭ID的情况下的、发送侧通信装置M1101S的动作的流程图。发送了共有命令和家庭ID 的终端判断是否从登录服务器发送来共有应答(M1752)。在没有接收到共有应答的情况下结束。在接收到包括家庭ID更新通知的共有应答的情况下,将家庭ID更新(M1753)而结束。
图123是用登录服务器选择的情况下的次序图。通信装置M1101S将家庭ID_A使用近距离无线通信设备向通信装置M1101R发送。通信装置 M1101R将本终端保持的家庭ID_B和接收到的家庭ID_A一起向登录服务器M1005发送。登录服务器从接收到的ID中选择家庭ID_B,对具有家庭 ID_A的通信终端及通信装置M1101R通知,以使其存储家庭ID_B。
图124是表示使用家庭网络通信设备M1103共有家庭ID的情况下的、发送侧通信装置M1101S的动作的流程图。检测到向家庭网络的连接 (M1801)的通信终端将家庭ID共有请求向家庭网络内广播(M1802)。在返回了共有应答的情况下,将接收到的家庭ID登录到本终端中(M1804)。在没有返回的情况下,进行家庭ID取得处理(M1303)。
图125是表示使用家庭网络通信设备M1103共有家庭ID的情况下的、接收侧通信装置M1101R的动作的流程图。接收到家庭ID共有请求 (M1851)的通信终端判断本终端是否是家庭网络的主终端(M1852),在是主终端的情况下,将本终端的家庭ID作为共有应答发送(M1853)。在不是主终端的情况下,什么都不做。另外,在具有家庭ID的终端内没有进行主终端的设定的情况下,不进行是否是主终端的判断而从全部的终端返送。
图126是使用家庭网络通信设备M1103共有家庭ID的情况下的次序图。通信装置如果检测到连接在家庭网络上,则向家庭网络广播家庭ID请求。在接收到家庭ID共有请求的通信装置中,仅被设定为主终端的终端 M1854返送家庭ID共有应答。接收到共有应答的通信装置将接收到的家庭 ID作为本终端的家庭ID存储。
(实施方式16)
本实施方式对从终端装置经由NFC(Nier Field Communication)的通信功能读出上述终端装置的终端装置信息、经由通用的网络向服务器转送的通信装置,使用附图详细地说明。
图127是本实施方式的系统,由终端装置Y01、通信装置Y02及服务器Y04构成。另外,本实施方式的发明主题是通信装置。
终端装置Y01是具有NFC通信功能(RFID或IC标签、仿真NFC标签)的设备,是电冰箱、微波炉、洗涤机、电视机、录像设备等电子的终端设备,在内部的存储器中,作为终端装置信息而保持作为表示终端装置的ID的制造号码、终端装置的使用履历信息、错误信息等。
通信装置Y02具有能够与终端装置的NFC通信功能通过近距离无线通信进行通信的NFC通信功能,具有将由终端装置保持的终端装置信息读出的读写器功能。此外,通信装置是便携设备,是指便携电话终端等便携设备、或电视机的遥控器终端。
服务器Y04是通过因特网等通用的网络与上述通信设备Y02可通信地连接的服务器,在内部中具有DB(数据库),在上述DB中储存由通信设备Y02从终端装置Y01读出的终端装置信息。
终端装置Y01由CPU(Central Processing Unit)Y011、故障感知部Y012、使用履历记录部Y013、存储器Y014、调制部Y017及天线Y018构成。
CPU(Y011)是进行终端装置Y01的系统控制的部分。CPU进行作为终端装置的各构成单元的故障感知部Y012、使用履历Y013、存储器Y014、调制部Y017的控制。
故障感知部Y012是感知终端装置Y01的各构成单元的故障部位、故障内容的部分。将由本故障感知部Y012感知的故障信息储存到存储器 Y014的RAM(Random AccessMemory)中。感知的故障信息是错误代码,是由故障发生的场所和症状唯一决定的代码。
使用履历记录部Y013是每当本终端装置Y01被用户操作时记录该使用履历信息的部分,将记录的使用履历信息储存到存储器Y014的RAM (Y016)中。通常,为了根据使用履历信息调查引起故障的原委,发生故障的几个步骤前的履历的优先级较高。因而,本实施方式的使用履历记录部Y013优选的是通过将RAM(Y016)作为FIFO(FirstIn、FistOut)使用、以时间序列将新的使用履历信息储存到RAM中的结构。此外,为了能够根据使用履历判别引起故障的原委,优选的是以由故障感知部Y012检测到故障的定时为基点、几个步骤前的使用履历信息优先地保持在RAM中的方式。因而,设为以下结构:在使用中检测到5次轻微的故障的情况下,将引起5次故障的几个步骤的操作履历信息优先地保持。
存储器Y014由ROM(Read Only Memory)Y015和RAMY016构成。
在ROM(Y015)中,至少在出货时预先记录有表示本终端装置Y01 的位置的制造号码构成为:不能由本终端装置的使用者将记录在本ROM中的内容更新。此外,制造号码优选的是能够判断制造商或制造的批次号、制造日的信息。此外,本ROM优选的是在CPU(Y011)的半导体芯片的内部中构成。在此情况下,不能简单地观看存储器访问的信息,在此情况下,能够将用于与通信装置的近距离无线通信时的认证及加密通信的秘密密钥信息在出货时记录。
RAM(Y016)是可改写的存储器,储存有由故障感知部Y012感知的故障信息、以及由使用履历记录部Y013记录的使用履历信息。
调制部Y017是进行与通信装置Y02的近距离无线通信时的通信数据的调制的部分。调制方式根据使用的NFC规格而不同,采用振幅调制 (ASK)、频率调制(FSK)或相位调制(PSK)等。
天线Y018使用环形天线,是由从通信装置Y02的天线发出的电波引起电磁感应、进行用于驱动至少调制部及存储器的起电、并且在从通信装置Y02发出的电波的反射波中叠加由上述调制部Y017调制后的信号、将记录在存储器Y014中的终端装置信息向通信设备Y02发送的部分。
如以上这样,在本实施方式的终端装置中,检测内部的各构成单元的故障,记录使用履历而储存到存储器中,如果与通信装置Y02接近而能够进行近距离无线通信,则能够将储存在存储器中的终端装置信息向通信装置Y02发送。
接着,对本实施方式的通信装置Y02进行说明。另外,在本实施方式中公开的发明的主题是本通信装置Y02。
本通信装置Y02由天线Y021、CPU(Y022)、解调部Y023、存储器 Y024、位置信息测位部Y027、GPS天线Y031、通信存储器Y032、信息添加部Y035及通信部Y036构成。
天线Y021为了探索能够与本通信装置Y02进行近距离无线通信的终端装置而进行朝向不特定的终端装置呼叫的轮询。此外,在对轮询有应答的情况下,建立与终端装置的近距离无线通信,接收从终端装置Y01发送的调制后的终端装置信息,向解调部Y023输出。通常,轮询动作在没有能够进行近距离无线通信的终端装置的情况下也需要经常进行,但为此而伴随着耗电。因而,如果设置用于控制开始轮询的定时的未图示的开关、在将开关设为ON的情况下进行轮询动作,则能够大幅地缩短轮询时间,能够显著地降低通信设备Y02的耗电量。特别在通信装置以电池或干电池等有限的电力动作的情况下是有效的。
CPU(Y022)是进行本通信装置的系统控制的部分,控制通信装置的各构成单元的动作。
解调部Y023是将与终端装置Y01的调制部Y017对应的调制解调的部分。解调后的终端装置信息被暂时向存储器Y024输出。
存储器Y024在内部中具备ROM(Y025)和RAM(Y026)。
ROM(Y025)是构成为不能从外部改写的存储器,在本通信装置出货时,记录有能够唯一地识别本通信装置Y02的制造号码。制造号码优选的是能够判别本通信装置Y02的制造商或制造的批次号、制造日的信息。此外,本ROM优选的是构成在CPU(Y022)的半导体芯片的内部中。在此情况下,不能简单地观看存储器访问的信息,在此情况下,能够在出货时记录用于与终端装置Y01的近距离无线通信时的认证或加密通信的秘密密钥信息。
RAM(Y026)储存由天线Y021接收、由解调部Y023解调后的终端装置Y01的终端装置信息。如上所述,所谓终端装置信息,包括能够唯一地识别终端装置Y01的终端装置的制造号码、终端装置Y01的使用履历信息、故障代码。
位置信息测位部Y027由用于确定本通信装置Y02的场所的的传感器群构成,由经纬侧位部(GPS)Y028、高度测位部Y029及位置修正部Y030 构成。此外,本位置信息测位部Y027如果设为在本通信装置Y02与终端装置Y01成为能够通信的时刻从天线Y021取得位置信息的结构,则不再需要经常取得位置信息,能够削减本通信装置Y02的用电量。
经纬侧位部Y028是一般的GPS(Global Positioning System),是能够接收来自人工卫星的电波、进行地球上的3维测位的部分。
此外,高度测位部Y029是一般的高度计,存在许多接收电波而提取高度的结构、感知气压而计测高度的结构等。本高度测位部Y029为了在不能接收GPS电波的室内也能够感知高度而具备。
位置信息修正部Y030是为了使由GPS测位的位置信息变得更精细而修正GPS的测位值的单元。通常,GPS在室内等不能进行来自卫星的电波的接收的状况下不能取得正确的位置信息。所以,在本位置信息修正部Y030中,在内部中具备电子罗盘和6轴的加速度传感器,在难以进行GPS 测位的地方,从电子罗盘提取本通信装置的移动方向,从加速度传感器提取移动速度,能够修正由GPS测位的位置信息。
信息添加部Y035是在将从终端装置Y01接收而存储在存储器Y024 中的终端装置信息向服务器Y04发送时、将记录在存储器Y024的ROM (Y025)中的通信装置Y02的制造号码和由位置信息测位部Y027测量的位置信息添加到终端装置信息中的部分。由此,在服务器Y04中,能够将终端装置信息,能够以可判别是从哪个通信装置发送的、在哪个位置检测到等的方式来进行管理,例如在制造商侧有可能有终端装置的重大事故的情况下,只要阅读服务器Y04的DB,就知道该终端设备存在于哪里,能够缩短制品回收时间、降低重大的事故的可能性,能够带来制品使用的安心、安全。此外,在通信装置Y02如便携电话终端等那样有显示功能的情况下,如果设为知道有可能发生事故的终端设备能够与哪个通信设备进行近距离无线通信、使终端设备的事故信息显示在对应的通信设备上的结构,则通过将一般没有显示功能、没有连接在通用的网络上的终端设备的事故信息向通信设备发送,能够对使用终端装置的用户进行提示,都能够提高带来使用终端装置的用户的安心、安全的设备。
通信部Y036是通过一般的LAN或无线LAN或移动电话通信网经由因特网与服务器Y04进行通信的部分,是将作为通信装置信息而添加了通信装置的制造号码及位置信息的终端装置信息向服务器Y04发送的部分。这里,为了通信控制用而再添加MAC地址或IP(Internet protocol)地址,向服务器Y04发送。
服务器Y04是经由因特网等通用的网络与通信设备Y02连接的服务器。本服务器Y04在内部中具备管理终端装置的设备管理DB(DataBase)。
在设备管理DB(Y041)中,接收与通信装置信息建立了联系的终端装置信息。在本DB中,将通信设备作为母设备、将终端装置作为子设备,与母设备建立联系而管理。此外,对子设备添加由通信装置取得的位置信息,能够同时管理终端装置存在于哪里的信息。
如以上这样,在本实施方式的系统中,将终端装置的终端装置信息通过通信设备经由近距离无线通信读出,在通信装置中,将通信装置的制造号码、将通信设备接触在终端装置上而能够进行近距离无线通信的位置信息建立对应,向服务器发送。在服务器中,能够将通信装置作为母设备、将终端设备作为子设备、进行对应建立而管理。因而,在制造商侧判断为终端设备可能发生重大事故时,终端装置的回收变得容易,能够将重大事故的可能性显示在对应的通信设备的显示部上等,能够实现制品的可跟踪性,提供安心、安全设备。
图128是表示在图127中说明的系统的各构成单元的动作的次序图。
首先,从通信装置Y02朝向终端装置Y01,进行用于建立近距离无线通信的轮询。该轮询如上述那样,从通信装置的用电量的观点看,优选的是设置用户操作的开关、在该开关正被按下或已被按下的情况下开始轮询 (SY01)。
接着,终端设备Y01通过对通信设备Y02的轮询应答,建立终端装置 Y01与通信装置Y02的近距离无线通信(SY02)。在该时刻,通过通信装置Y02的位置信息测位部Y027取得位置信息,作为终端设备的位置信息提取。另外,位置信息的取得并不仅限定于轮询完成时。只要是轮询应答进行、近距离无线通信建立的期间,何时都可以。主旨是,通过取得建立只有几厘米才能通信的近距离无线通信的位置信息,将终端装置的场所高精度地提取,这是重要的。
在SY02中在近距离无线通信建立后,终端装置认证通信设备,使用采用一般的公开密钥加密的认证,来实施通信装置对终端装置的认证,并且暂时在终端装置与通信装置间将生成的加密密钥进行密钥共享(SY03)。以后,在本近距离无线通信建立的期间中,通过将通信路径使用该加密密钥加密而通信,能够防止盗听。
如果密钥共享完成,则将记录在终端装置Y01的存储器Y014中的终端装置信息从终端装置Y01向通信装置Y02发送(SY04)。
在通信装置Y02中,如果从终端装置Y01接收到终端装置信息,则存储到通信装置的存储器Y024中(SY05)。
在通信装置Y02中,如果从终端装置Y01完成终端装置信息的接收,则从通信装置Y02对服务器Y04发出连接请求(SY06)。
在服务器Y04中,对SY06的连接请求返回应答,建立通信(SY07)。
如果通信装置Y02与服务器Y04的通信建立,则为了对服务器发送终端装置的终端装置信息,添加通信装置的通信装置信息(SY08)。另外,所谓通信装置信息,是通信装置的制造号码、与终端装置建立近距离无线通信的期间的通信装置的位置信息、如果登录到通信装置设备中则是登录的用户的邮件地址、如果登录到通信装置中则是向登录的服务器的连接账户等。
在SY08中,在对终端装置信息添加通信装置信息的通信装置信息后,将带有通信装置信息的终端装置信息向服务器Y04发送(SY09)。
在服务器Y04中,通过将从通信装置Y02接收到的带有通信装置信息的终端装置信息登录到设备管理DB(Y041)中而完成处理。
由此,在服务器Y04中,通过将由通信装置Y02接触而建立了近距离无线通信的终端设备与通信装置的识别信息(制造号码等)建立联系而管理,能够进行按照整个家中的设备管理。此外,作为终端装置的设置场所登录的位置信息使用通信设备与终端装置建立了近距离无线通信的位置信息。本实施方式的近距离无线通信由于使用一般的HF带域(13.56MHz带),所以其可通信距离是几厘米。因而,通过将建立了近距离无线的位置信息设定为终端设备的位置信息,误差最大为几厘米,为了确保制品的可跟踪性而能够确保充分的精度。
图129是在服务器Y04的设备管理DB(Y041)中与通信终端Y02建立对应管理的终端装置群的概念图。
在通信设备Y02中,在进行购买终端装置时的使用者登录等的情况下,通过在设置终端设备后、用通信设备接触终端装置,将终端设备的终端设备信息经由近距离无线通信读出到通信设备中,添加通信装置信息而向服务器发送。于是,在服务器侧的设备管理DB中,将通信装置作为母设备、将终端设备作为子设备建立关联而管理。具体而言,在DB内,通过与通信设备的制造号码(Y051)建立联系、作为由通信装置接触的终端装置1 (例如微波炉)Y052、终端装置2(例如洗涤机)Y053、终端装置3(例如电视机)Y054而将作为各终端装置的终端装置信息的所在信息(经纬、高度等)、使用状况信息(使用履历、错误代码、使用时间等)与通信设备建立联系而管理,能够起因于用通信装置的接触而进行整个家中的设备的管理,能够实现终端装置的可跟踪性。
此外,当近距离无线通信建立时,通信装置读出位置信息,作为终端装置的位置信息检测,所以能够在近距离无线通信为可通信的几厘米单位的误差的范围中登录终端设备的位置。为了实现这一点,通过利用搭载在通信装置中的GPS检测终端装置的位置信息,不需要每个终端设备具有 GPS,能够实现成本的削减。
图130是表示用通信设备Y02接触终端装置Y01时的向通信设备的显示部输出的显示画面的概念图。
首先,对将通信设备接触在终端装置上而进行设备登录的情况进行说明。
如果操作通信装置Y02而启动通信装置的读写器应用,则在画面上显示,以使其接触以近距离无线通信通信的终端装置(Y060)。
如果接触,则通信设备与终端装置的近距离无线通信建立,通信装置从终端装置读出终端装置信息,取得当前的位置信息,暂时存储到存储器中,建立与服务器Y04的通信,将通信装置信息和添加的终端装置信息向服务器发送。在服务器中,判断发送来的终端装置信息是否已经登录在设备管理DB中,在判断为没有登录的情况下,使通信装置的显示部显示敦促设备的登录的消息(Y061)。
接着,如果用户选择设备的登录,则将敦促设备的位置信息的登录的消息从服务器向通信装置输出,在用户选择了登录的时刻,将与从通信设备向服务器发送的终端装置信息建立了联系的位置信息作为登录的终端装置的位置信息登录到服务器的设备管理DB中(Y062)。
另一方面,对终端设备的位置信息与在服务器的设备管理DB中登录的信息不同的情况进行说明。
如果操作通信装置Y02而启动通信装置的读写器应用,则在画面上显示,以使其接触以近距离无线通信通信的终端装置(Y063)。
如果将通信设备接触在终端装置上,则建立近距离无线通信,通信装置从终端设备读出终端设备信息并取得位置信息,将添加了通信装置信息的终端装置向服务器发送。在服务器中,从设备管理DB通过将包含在从服务器接收到的终端装置信息中的终端装置的制造号码与登录在设备管理 DB中的制造号码对照,来确认被接触的终端设备已经登录,并且从由服务器接收到的通信装置信息中提取位置信息,与登录在设备管理DB中的位置信息对照,判断是否一致。当然,由于在位置信息中伴随着误差,所以通过实施几厘米量级(与能够进行近距离无线通信的距离对应的值)下的阈值判断,进行是相同的位置还是不同的位置的判断。在判断为是不同的位置的情况下,将通知与已经登录的位置信息不同的情况的消息向通信装置的显示部输出(Y064)。
接着,将敦促用当前的位置信息更新终端设备的位置信息的消息显示在通信装置的显示部上(Y065)。
如果用户选择了更新,则将因接触而由通信装置取得的位置信息作为终端装置的新的位置信息登录到服务器的设备管理DB中。
因而,在本实施方式中,在暂时登录的位置信息随着终端装置的设置场所的移动而被变更的情况下,也能够更新为因接触而取得的新的位置信息,能够提高终端装置的可跟踪性的精度。
(实施方式17)
图131是本实施方式的RF-ID的功能块图。
图131的RF-IDN10由近距离无线通信用的天线N11、在来自天线 N11的电力下动作的电源部N12、记录个体识别信息的作为非易失性存储器的存储器N13、将记录在存储器N13中的内容再生的再生部N14、以及将存储在存储器N13中的数据经由天线N11发送的数据转送部N15构成。
存储器N13由确定搭载RF-IDN10的制品的UID部N13A、确定搭载 RF-IDN10的制品的品号的品号ID部N13B、登录服务器N40的服务器确定信息N13C、使移动设备N20执行的动作程序N13D构成。
图132是本实施方式的移动设备的功能块图。
图132的移动设备N20由接收从RF-IDN10发送的数据的RF-ID读写器N21、存储从RF-IDN21发送的数据的RF-ID存储部N22、执行包含在数据中的程序的程序执行部N23、进行包含在数据中的图像信息的数据处理的数据处理部N24、数据处理部N24处理的图像信息被输出的存储器N25、将暂时存储在存储器N25中的图像显示的显示部N26、经由通用的网络与其他设备连接的通信I/F部N27、经由通信I/F部N27发送数据的发送部N28、经由通信I/F部N27接收数据的接收部N29、通过通信I/F部 N27经由通用网络与其他设备进行通信的通信部N30、测量移动设备N20 的绝对的位置信息的GPSN31、测量移动设备N20的相对的位置信息的6 轴传感器N32、存储PSN31和6轴传感器N32的测量结果的位置信息存储部N33、解析存储在位置信息存储部N33中的位置信息的CPUN34构成。
图133是本实施方式的登录服务器的功能块图。
图133的登录服务器N40由经由通用的网络与其他设备连接的通信I/F 部N41、经由通信I/F部N41发送数据的发送部N42、经由通信I/F部N41 接收数据的接收部N43、通过通信I/F部N41经由通用网络与其他设备进行通信的通信部N44、管理从通信I/F部N41接收到的制品信息的制品信息管理部N45、存储对移动设备N20发送的图像数据的图像数据存储部N46、存储对移动设备N20发送的程序的程序存储部N47、通过将存储在制品信息管理部N45中的信息组合而制作表示搭载有RF-ID的制品的位置关系的地图的位置信息制作部N48、以及根据存储在控制信息管理部N45 中的信息和移动设备N20的当前的位置信息对搭载了RF-IDN10的制品进行控制的制品控制部N49构成。
本实施方式根据由移动终端N20的位置信息和搭载有RF-IDN10的宅内的制品的位置信息制作的制品地图的信息,控制宅内的制品,这一点与其他实施方式不同。
图134是表示本实施方式的网络制品的配置的一例的图。
在图134的配置图中,在1层的起居室中配置有电视机N10A、BD记录机N10B、空调N10C和FF制暖机N10K,在1层的西式房间中配置有空调N10D和火灾报警器N10E,在1层的日式房间中配置有空调N10F和火灾报警器N10G,在2层配置有电视机N10I和空调N10J,在屋顶配置有太阳能电池面板N10H。
图135是表示本实施方式的系统的一例的结构图。图135由设置在图 134的配置图中的家电构成。
由搭载有图131的RF-IDN10和经由通用的网络与其他设备连接的通信I/F部N18的电视机N10A~FF制暖机N10K、图132的移动设备N20、图133的登录服务器N40、将电视机N10A~FF制暖机N10K与移动设备 N20连接的宅内网络N100、以及与宅内网络N100连接并连接在登录服务器N40上的宅外网络N101构成。
使用图136~图141,表示将搭载有RF-IDN10的制品的信息向登录服务器N40的登录的方法的一例。
图136是将电视机N10A的信息登录到登录服务器N40中的次序图。
首先,如果用户将移动设备N20的RF-ID读写器N21向电视机N10A 的天线N11靠近,则从RF-ID读写器N21经由天线N11对电源部N12供电,对RF-IDN10的各部供电(图136圈1)。
RF-IDN10的再生部N14制作包括存储在存储器N13的UID部N13A、品号ID部N13B、服务器确定信息N13C、动作程序N13D中的信息的制品数据。
图137(a)是表示制品数据的结构的一例的图。图137(a)的制品数据由作为品号ID的电视机N10A的品号(包括颜色信息)、作为UID的电视机N10A的制造号码、作为服务器确定信息的登录服务器N40的地址信息、登录ID和口令、由移动设备N20的程序执行部N23执行的动作程序构成。
RF-IDN10的数据转送部N15将制品数据调制,经由天线N11向移动设备N20的RF-ID读写器N21发送(图136圈2)。
移动设备N20的RF-ID读写器N21接收制品数据,存储到RF-ID 存储部N22中。
程序执行部N23执行包含在存储于RF-ID存储部N22中的制品数据中的动作程序。
这里,作为动作程序,执行“制作对包含在制品数据中的登录服务器 N40的地址发送的服务器登录数据”的动作。
图137(b)是表示服务器登录数据的结构的一例的图。图137(b)的服务器登录数据由作为品号ID的电视机N10A的品号(包括颜色信息)、作为UID的制造号码、作为服务器确定信息的登录服务器N40的登录ID 和口令、移动设备N20的位置信息构成。
接着,关于移动设备N20的位置信息进行说明。
GPSN31在移动设备N20启动中总是动作,将测量的结果存储到位置信息存储部N33中。
6轴传感器N32在GPSN31是测量范围外时动作,将测量的结果存储到位置信息存储部N33中。
程序执行部N23根据存储在位置信息存储部N33中的GPSN31和6轴传感器N32的测量结果,制作服务器登录数据的位置信息。
程序执行部N23根据制作的位置信息和存储在RF-ID存储部N22中的信息,制作图137(b)所示的服务器登录数据。
接着,通信部N30将服务器登录数据的目的地设定为存储在RF-ID 存储部N22中的登录服务器N40的地址。
发送部N28经由通信I/F部N27发送服务器登录数据(图136间圈3)。
登录服务器N40的接收部N43经由通信I/F部N41接收服务器登录数据。
通信部N44确认服务器登录数据的登录ID和口令。
如果登录ID与口令一致,则将服务器登录数据的品号ID、UID和位置信息存储到制品信息管理部N45中。
图138(a)表示由制品信息管理部N45存储的电视机N10A的制品信息的一例。由品号ID、UID和位置信息构成。位置信息由经度、纬度、高度构成。
接着,登录服务器N40的通信部N44如果电视机N10A的登录完成,则制作包括存储在预先图像数据存储部N46中的图像信息和存储在程序存储部N47中的动作程序的服务器登录完成通知,将发送目的地设定为移动设备N20的地址。
发送部N42经由通信I/F部N41发送服务器登录完成通知(图136圈 4)。
移动设备N20的接收部N29经由通信I/F部N27接收服务器登录完成通知。
通信部N30确认服务器登录完成通知的发送目的地地址,向程序执行部N23转送。
程序执行部N23执行包含在服务器登录完成通知中的动作程序。这里,作为动作程序而执行“在显示部N26上显示图像数据”的动作。
程序执行部N23对数据处理部N24指示图像数据的处理。
数据处理部N24进行图像数据的数据处理。例如,在下载的图像被压缩的情况下进行其解压缩、在被加密的情况下进行其解密、以基于图像显示模式表单的图像显示模式将下载的图像信息排列等。
数据处理部N24如果处理结束,则将图像数据暂时存储到存储器N25 中。
显示部N26将储存在存储器N25中的图像数据显示。这里,储存在存储器N25中的图像数据是表示通知制品的登录已正常完成的图像。
图138(b)表示以与电视机N10A同样的次序将BD记录机N10B~ FF制暖机N10K登录到登录服务器N40中之后的由登录服务器N40的制品信息管理部N45管理的制品信息的一例的图。图134的从宅内登录的制品信息用相同的表管理。这里,将由相同的移动设备N20登录的制品判断为从相同的宅内登录的制品。
在图139中表示RF-IDN10的制品登录时的处理流程的一例。
首先,RF-IDN10成为来自移动终端N20的供电等待状态(N001)。
RF-IDN10在从移动终端N20接受到供电的情况下转移到N002,如果没有接受到则回到N001。
在N002中制作包括存储器N13的信息的制品数据。然后,在N003 中将制品数据从天线N11向移动设备N20发送而结束处理。
在图140中表示移动设备N20的制品登录时的处理流程的一例。
首先,在N001中,从RF-ID读写器N21向RF-IDN10供电。
接着,移动设备N20成为来自RF-IDN10的制品数据的等待状态 (N005)。
移动终端N20在从RF-IDN10接受到制品数据的情况下转移到N006,如果没有接受到则回到N004,再次对RF-IDN10供电。
在N006中,将接收到的制品数据解析。接着,执行包含在制品数据中的动作程序。
在N007中,移动终端N20测量本机的位置。
在N008中,制作包括位置的测量结果的服务器登录数据。在N009中,将服务器登录数据从通信I/F部N27向登录服务器N40发送。
接着,移动设备N20成为来自登录服务器N40的服务器登录完成通知的等待状态(N010)。
移动终端N20在从登录服务器N40接受到服务器登录完成通知的情况下转移到N011。
在N011中,将服务器登录完成通知解析。然后,在N012中在显示部 N25上显示包含在服务器登录完成通知中的图像信息,结束处理。
在图141中表示登录服务器N40的制品登录时的处理流程的一例。
首先,登录服务器N40成为来自移动设备N20的服务器登录数据的等待状态(N013)。
登录服务器N40在从移动终端N20接受到服务器登录数据的情况下转移到N014,如果没有接受到则回到N013。
在N014中解析服务器登录数据,确认登录名与口令是否一致。然后,在N015中如果登录名与口令一致,则将制品信息存储到制品信息管理部 N45中。
在N016中,通知包括动作程序和图像信息的服务器登录完成通知。在 N017中将服务器登录完成通知从通信I/F部N41向移动设备N20发送,结束处理。
接着,使用图142和图143,表示通过移动设备N20的位置信息对搭载有RF-IDN10的制品的控制方法的一例。
图142是表示移动设备N20在从1层向2层移动的情况下控制空调 N10J和电视机N10A的电源的一例的次序图。
移动设备N20的CPUN34监视存储在位置信息存储部N33中的位置信息,如果满足预先设定的条件则制作包括当前的位置信息的位置信息数据。
图143(a)是表示位置信息数据的结构的一例的图。
由预先在制品登录时取得并存储在未图示的存储器中的登录服务器 N40的第2服务器登录ID和第2服务器登录口令、从位置信息存储部N33 取得的移动设备N20的当前的位置信息构成。
通信部N30将位置信息数据设定到制品登录的登录服务器N40的地址。
发送部N28经由通信I/F部N27发送位置信息数据(图142圈1)。
登录服务器N40的接收部N43经由通信I/F部N41接收位置信息数据。
通信部N44确认位置信息数据的第2服务器登录ID和第2服务器登录口令。
通信部N44如果第2服务器登录ID与第2服务器登录口令一致,则向制品控制部N49转送位置信息数据。
制品控制部N49对位置信息制作部N48转送第2服务器登录ID。
位置信息制作部N48按照制品控制部N49的指示,根据第2服务器登录ID取得登录在制品信息管理部N45中的图138(b)的信息,根据各制品的位置信息制作图134的表示宅内的制品的位置的制品地图,递交给制品控制部N49。
在图144中表示位置信息制作部N48制作的制品地图的一例。
制品地图在3D地图中根据各制品的位置信息在各制品所位于的部位配置制品的形象图。
制品控制部N49使用包含在位置信息数据中的移动设备N20的当前位置和由位置信息制作部N48制作的家电地图进行制品(电视机N10A~FF 制暖机N10K)的控制。这里,制品控制部N49将与从移动设备N20接收到的位置信息最近的商品的电源设为ON。这里,制作包括将空调N10J的电源设为ON的命令的设备控制数据。
图143(b)是表示第1设备控制数据的结构的一例的图。
由空调N10J的品号ID和UID、以及将空调N10J的电源设为ON的制品控制命令构成。
通信部N44在第1设备控制数据中作为发送目的地而设定移动设备 N20的地址。
发送部N42经由通信I/F部N41发送第1设备控制数据(图142圈2)。
移动设备N20如果接收到第1设备控制数据,则根据包含在第1设备控制数据中的品号ID和UID,向空调N10J转送第1设备控制数据(图142 圈2′)。
空调N10J如果从通信I/F部N18接收到第1设备控制数据,则如果本机的电源为OFF状态则将电源设为ON。
接着,制品控制部N49将与从移动设备N20接收到的位置信息最远的商品的电源设为OFF。这里,制作包括将电视机N10A的电源设为OFF的命令的设备控制数据。
图143(c)是表示第2设备控制数据的结构的一例的图。
由电视机N10A的品号ID和UID、将电视机N10A的电源设为OFF 的制品控制命令构成。
通信部N44在第2设备控制数据中设定移动设备N20的地址作为发送目的地。
发送部N42经由通信I/F部N41发送第2设备控制数据(图142圈2)。
移动设备N20如果接收到第2设备控制数据,则根据包含在第2设备控制数据中的品号ID和UID,对电视机N10A转送第2设备控制数据(图 142圈3′)。
电视机N10A如果从通信I/F部N18接收到第2设备控制数据,则如果本机的电源为ON状态则将通信功能以外的电源设为OFF。
如以上说明,根据本实施例,通过使用RF-ID的近距离无线通信和位置信息,能够用登录服务器管理搭载有RF-IDN10的制品的位置。由此,能够实现对应于移动设备N20的当前位置的制品的自动控制。
此外,由于作为位置信息而使用由测量相对的位置信息的6轴传感器 N32(运动传感器)测量的信息作为位置信息,所以能够在GPSN31的测量范围外使用6轴传感器N32的测量结果将位置信息更新,在GPSN31的测量范围外也能够取得正确的位置信息。
另外,本实施方式的移动设备N20保持有GPSN31和6轴传感器N32,但并不限定于此。例如,移动设备N20也可以是仅保持6轴传感器N32的结构。在此情况下,登录服务器N40的制品信息管理部N45如图145所示,为以最初登录的电视机N10A为基准点存储与电视机N10A的相对的位置信息的结构。此外,在此情况下,位置信息制作部N48制作的制品地图如图146所示,轴由x坐标、y坐标、z坐标构成。
另外,在本实施方式中,将搭载在RF-IDN10中的制品的品号ID、 UID和移动设备N20的位置信息登录在登录服务器N40中,但并不限定于此。例如,登录服务器N40在再次接收到已登录的制品的服务器登录数据的情况下,也可以进行图147的表所示的处理。
对图147进行说明。图147由在表示位置信息的精度的精度识别符和对应于各识别符的品号ID、再次接收到的服务器登录数据的位置信息和在已登录在制品信息管理部N45中的位置信息不同的情况下的处理构成。
登录服务器N40确定再次接收到的包含在服务器登录数据中的品号ID 和根据UID判断为已经登录在制品信息管理部N45中的品号ID。在品号 ID是电视机、BD记录机、FF制暖机的情况下,更新制品信息管理部N45 为再次接收到的服务器登录数据中包含的位置信息。
此外,在品号ID是空调、太阳能电池面板、火灾报警器的情况下,对移动设备N20通知由制品信息管理部N45存储的位置信息。移动设备N20 基于从登录服务器N40接受到的位置信息修正本机的当前的位置信息。
另外,在图147中精度识别符是两种,但并不限定于此,也可以设置两种以上,并设置按照精度识别符而不同的处理。
另外,本实施方式的制品控制部N49搭载在登录服务器N40中,但并不限定于此。例如也可以搭载在移动设备N20中、从登录服务器N40取得制品地图而动作。此外,也可以搭载在移动设备N20以外连接在宅内网络 100上的非图示的宅内服务器中。在此情况下,移动设备N20将位置信息向宅内服务器发送,从宅内服务器取得制品地图。
另外,本实施方式的移动装置N20通过通用I/F部N27经由宅内网络 100和宅外网络101与登录服务器N40连接,但并不限定于此。例如移动设备具有便携电话的功能,也可以代替通用I/F部N27而用可连接在便携电话网(例如LTE)上的接口至少经由便携电话网连接在登录服务器N40 上(参照图148)。此外,移动设备N20也可以具有能够向WiMAX等的线路网连接的接口,至少经由WiMAX网络连接在登录服务器N40上。也可以利用其他的某种网络连接在登录服务器N40上。
另外,在本实施方式中,在制品控制的判断中利用由位置信息制作部 N48制作的制品地图,但并不限定于此。例如,也可以将由位置信息制作部N48制作的制品地图的图像数据向移动设备N20发送,在移动设备N20 的显示部N26上显示。
另外,在本实施方式中,位置信息制作部N48基于图138(b)的信息制作制品地图,但并不限定于此。例如,也可以根据位置信息从制品信息管理部N45检测接近的设置在宅内的制品信息,制作接近的宅内的制品地图。在此情况下,制品控制部N43通过将图144的制品地图与接近的宅内的制品地图组合而进行制品的控制。例如在本实施例中将距离移动设备N20最远的电视机N10A的电源设为OFF,但如果在接近的宅内有太阳能电池面板,则进行使电视机N10A的电源保持为ON等控制。
另外,在本实施方式中,在登录服务器N40的制品信息管理部N45中存储有各制品的品号ID、UID、位置信息,但并不限定于此。例如,也可以经由各制品的通信I/F部N18实时地取得电源的ON、OFF状态而管理。在此情况下,制品控制部N49将距离移动设备N20最远的电视机N10A电源设为OFF,但如果预先设定的台数的制品为电源OFF的状态,则进行使电视机N10A的电源保持为ON等控制。
另外,在本实施方式中,制品控制部N49将最远的制品的电源设为OFF 而将最近的制品的电源设为ON,但并不限定于此。
也可以基于移动设备N20的位置信息控制多台制品的电源的ON、 OFF。
另外,在本实施方式中,制品控制部N49将最远的制品的电源设为OFF 而将最近的制品的电源设为ON,但并不限定于此。例如,移动设备N20 的CPUN34也可以在非图示的存储器中作为移动履历而存储位置信息、定期地对登录服务器N40通知移动履历。在此情况下,登录服务器N40根据移动设备N20的移动履历推测哪个制品处于相同的房间、层中而管理推测结果。此外,制品控制部N49也可以基于推测结果控制处于相同的房间中的制品的电源的ON、OFF。例如,如果根据移动履历推测电视机N10A和空调N10C处于相同的房间中,则制品控制部N49在将电视机N10A的电源设为OFF的情况下也将空调N10C的电源设为OFF。
此外,也可以除了移动履历以外还收集各制品的ON、OFF切换的时间信息,而推测哪个制品处于相同房间、层中。
另外,在本实施方式中,制品信息管理部N45管理图138或图145的制品信息,位置信息制作部N48制作图144或图146的制品地图,但并不限定于此。例如,将用户制作的宅内房间布置的图像数据从移动设备N20 向登录服务器N40发送,用制品信息管理部N45管理。在此情况下,位置信息制作部N48将图138或图145的制品信息与宅内房间布置的图像数据组合而制作图134那样的制品地图。
此外,宅内或平面布置的图像数据那样的个人信息也可以进行与制品信息不同的加密的处理,从移动终端N20向登录服务器N40发送处理。
此外,也可以将宅内平面布置的图像数据那样的个人信息向与制品信息不同的服务器发送,登录服务器N40在制作制品地图时以向不同的服务器参照的步骤制作制品地图。
另外,也可以将本实施例与其他实施方式组合。例如,也可以通过将实施方式16的终端装置Y01的功能搭载在RF-IDN10中、将实施方式16 的通信装置Y02的功能搭载在移动终端N20中,在进行图136的制品登录处理之前从图128所示的轮询进行相互认证、密钥共享的处理。此外,与其他实施方式组合也是本发明的范围内。
此外,上述的各实施方式的结构典型地也可以通过作为集成电路的LSI (LargeScale Integration)实现。它们既可以单独地1芯片化,也可以包括全部的结构或一部分的结构而1芯片化。集成电路根据集成度的差异也有称作IC、系统LSI、超级LSI、超大规模LSI等。此外,集成电路的方法并不限定于LSI,也可以使用专用电路或通用处理器实现。进而,也可以利用 FPGA(Field Programmable Gate Array)、或能够再构成LSI内部的电路单元的连接及设定的可重构处理器。
进而,如果因半导体技术的进步、或派生的其他技术出现代替当前的半导体技术的集成电路化的技术,当然也可以使用其技术进行功能块的集成化。例如可以考虑生物技术的应用等。
(实施方式18)
在本实施方式中,设为通信系统由具有近距离通信功能的终端设备、作为与终端设备进行近距离无线通信的例如便携设备的通信装置、以及与通信装置经由因特网或便携电话通信网等的通用的网络连接的服务器设备构成,以下进行说明。在该通信系统中,通过利用通信装置取得的感知信息等,通信装置对终端设备指示,由此能够操作终端设备。以下,使用附图详细地说明。
(系统结构)
图149是表示有关本实施方式的通信系统的概念图。图149所示的通信系统100包括终端设备101、通信装置102及服务器设备104。
终端设备101和通信装置102能够通过近距离无线通信进行通信。这里,在本实施方式的近距离无线通信中,设想了(1)使用电磁感应方式的 13.56MHz带(HF带)、或电波方式的52~954MHz带(UHF带)等的RFID (Radio Frequency Identification、ISO14443)标签与读写器设备的通信、或者(2)通过13.56MHz带的NFC(Near Field Communication、ISO/IEC21481) 的通信。并且,能够进行该近距离无线通信的距离(通信距离)通常在HF 带中限定为几十cm、在UHF带中限定为几cm,所以通过将通信装置102 靠近(接触在)终端设备101上,确定通信(近距离无线通信)。
在本实施方式中,对在通信装置102侧安装读写器功能、在终端设备 101侧具有IC标签功能的结构进行说明。但是,本实施方式的主要着眼点是终端设备101和通信装置102能够相互通过近距离无线通信进行信息的交换的结构。即,并不限定于上述结构的组合,如果是例如在通信装置102 侧安装IC标签功能、在终端设备101侧具有读写器功能的结构,也是本发明的范畴。此外,在NFC中,将PtoP(点对点)通信功能、仿真卡、以及仿真读写器标准化。在这些情况下,IC标签与读写器设备的关系是哪个都可以。因此,在本实施方式中,为了方便而在通信装置102侧安装读写器功能、在终端设备101侧通过具有IC标签功能的结构以下进行说明。
终端设备101是例如空调或电视机等的想要通过通信装置102操作的操作对象的家电设备,具备控制器105、存储器106、近距离无线通信部107 及天线108。
控制器105是终端设备101的系统控制器,例如是CPU(Central ProcessingUnit)。控制器105至少进行终端设备101的近距离无线通信部 107以外的系统控制。
存储器106是能够存储用于通过控制器105使终端设备101动作的控制软件、以及能够存储由终端设备101感知的所有的数据的存储器,例如是RAM或非易失性存储器等。存储器106通常安装在控制器105的LSI 内部中,但也可以作为外带的存储器构成。
近距离无线通信部107与安装在通信装置102中的读写器功能部进行通信。近距离无线通信部107将向读写器功能部的转送数据调制、或将来自读写器设备的转送数据解调。
此外,近距离无线通信部107基于从读写器设备接收到的电波进行至少用于建立近距离无线通信的起电,并且基于来自读写器设备的电波提取时钟信号。这样,至少近距离无线通信部107通过由来自读写器设备的电波产生的电力和时钟动作。由此,在终端设备101的主电源为断开的状态下,近距离无线通信部107也能够与通信装置102进行近距离无线通信。
天线108是用于与安装在通信装置102中的读写器设备进行近距离无线的环形天线。
这样构成终端设备101。
通信装置102具备天线109、显示部110及按键111,例如是便携设备。
天线109是用于与终端设备101进行近距离无线通信的天线。通信装置102朝向终端设备101具备的IC标签进行轮询,在通信建立的时刻从终端设备101读出信息、或向终端设备101写入信息。
显示部110例如是液晶显示器等,显示通信装置102与终端设备101 的近距离无线通信的结果、或从服务器设备104发送的数据。
按键111是用户用于操作通信装置102的界面。另外,按键111如图 149所示,并不限于与显示部110不同的结构。例如也可以显示部110为触摸面板、通过显示部110显示按键111、实现按键111的功能。即,显示部 110也可以兼具备按键111。
这样构成的通信装置102根据用户向按键111的按键输入启动通信装置102具备的近距离无线通信部,在启动后开始用于对终端设备101进行近距离无线通信的轮询动作。另外,通常轮询动作对不特定的对方持续输出电波,所以在电池驱动的通信装置102中以电池寿命的观点发生负担。因此,也可以在通信装置102中配置用于进行轮询动作的专用按钮。在此情况下,使通信装置102不进行无用的轮询动作,并且由于是仅按下专用按钮的操作,所以也没有成为用户的操作负担,由于具备这样的效果,所以是优选的。
服务器设备104是具备数据库的服务器。服务器设备104例如由具有数据库的WEB服务器构成,经由因特网103与通信装置102连接。该服务器设备104将从通信装置102转送来的信息登录到数据库中,将表示登录结束等的结果的信息向通信装置102转送。并且,在通信装置102的显示部110中显示表示该结果的信息。
如以上那样构成通信系统100。并且,通过该系统结构,通信装置102 能够从终端设备101取得信息、将所取得的信息登录到服务器设备104的数据库中。具体而言,通信装置102从终端设备101通过近距离无线通信取得制造号码、型号或制造商识别信息等能够唯一识别终端设备的信息。并且,通信装置102将经由近距离无线通信从终端设备101接收(取得) 的信息、用于确定通信装置102保持的用户或便携设备(通信装置)本身的信息(例如邮件地址、电话号码、便携终端识别信息、或SIM卡ID)、在通信装置102能够感知位置信息的情况下将用于确定位置的信息(例如 GPS信息、A-GPS信息、或根据便携网的基站推测的位置信息等)向服务器设备104转送。服务器设备104将它们登录到数据库中。
通过以上那样的一系列的动作,能够消除使用户输入各种信息的作业的负担。即,实质上用户仅通过将通信装置102靠近终端设备101上,能够进行终端设备101的使用者等的信息的登录等。
此外,通信装置102也可以作为从终端设备101取得的信息而取得终端设备101感知到的信息例如不良状况发生状况或使用履历信息,向服务器设备104发送。在此情况下,在终端设备101的制造商中,能够根据不良状况发生状况迅速地判断特定批次的初始不良等来应对终端设备101的不良状况。进而,通过根据使用履历信息确定按照用户使用的功能,也能够发挥将所确定的信息用于下期商品开发等、对于制造商而言的优点。
(通信装置的结构)
接着,使用附图对有关本实施方式的通信装置102的详细情况进行说明。
图150是表示有关本实施方式的通信装置102的结构的块图。
通信装置102例如是便携设备,如图149所示,具备天线109、显示部 110及按键111。进而,通信装置102具备近距离无线通信部201、近距离无线检测部202、设备信息取得部203、外部通信部204、传感器部205、位置信息取得部206、方向感知部207、指向空间计算部208、选择部209a、移动判断部210、操作信息取得部212、存储部213、显示信息决定部214、操作信息发送部215、操作履历取得部216、及声音传感器217。
近距离无线通信部201进行由天线109接收到的信息的解调及发送的信息的调制。例如,近距离无线通信部201经由天线109发送作为不特定的呼叫信号的轮询电波、或发送用于取得终端设备101的设备信息的设备信息要求、或接收包括从终端设备101发送的设备信息的信息。
近距离无线检测部202判断是否能够检测来自终端设备101的轮询应答。此外,近距离无线检测部202检测由近距离无线通信部201解调的信息。
设备信息取得部203从终端设备101取得作为用于唯一地识别该终端设备101的信息的设备信息。具体而言,设备信息取得部203根据由近距离无线检测部202检测到的信息取得作为关于终端设备101的信息的设备信息。此外,设备信息取得部203判断能否根据所取得的设备信息取得终端设备101的设备位置信息。
外部通信部204是用于与包括服务器设备104在内的通信装置102的外部的设备通信的单元,由通信天线219、接收部220、发送部221及通信控制部222构成。具体而言,通信天线219与因特网等通用的网络连接。发送部221进行向因特网103等的通用的网络发送的数据的调制。接收部 220进行从因特网103等的通用的网络接收的数据的解调。通信控制部222 制作、解析经由因特网103等的通用的网络与外部的设备进行通信的数据。
传感器部205是用于感知本装置(通信装置102)的位置的单元,由加速度传感器223、GPS传感器224、角速度传感器225及方位传感器226构成。加速度传感器223测量通信装置102的加速度。GPS传感器224取得 GPS(Global Positioning System)信息,计算通信装置102的位置信息。角速度传感器225测量通信装置102的角速度。方位传感器226测量通信装置102所位于的方位。
位置信息取得部206是取得表示通信装置102的位置(当前位置)的位置信息的单元,由绝对位置取得部227、相对位置取得部228及位置信息计算部229构成。绝对位置取得部227取得由GPS传感器224计算的位置信息、或经由外部通信部204从服务器设备104取得的位置信息,作为绝对位置。相对位置取得部228通过将由加速度传感器223和角速度传感器 225计测的加速度和角速度积分,取得相对于初始设定值的通信装置102 的相对位置。位置信息计算部229根据由绝对位置取得部227取得的绝对位置和由相对位置取得部228取得的相对位置,计算通信装置102的当前位置。例如,通信装置102在判断为根据设备信息取得部203取得的设备信息取得了设备位置信息的情况下,将该设备位置信息作为由绝对位置取得部227取得的绝对位置信息用存储部213保持,将由相对位置取得部228 取得的相对位置信息初始化。另一方面,通信装置102在判断为不能根据设备信息取得部203取得的设备信息取得设备位置信息的情况下,启动GPS 传感器224,取得绝对位置信息,并且将由相对位置取得部228取得的相对位置信息初始化。
方向感知部207感知表示通信装置102被朝向的方向的方向信息。具体而言,根据由角速度传感器225计测的角速度和由方位传感器226计测的方位,计算通信装置102被朝向的方向即作为通信装置指示的方向的指向方向。
指向空间计算部208基于由位置信息取得部206取得的位置信息、以及由方向感知部207感知的方向信息,计算通信装置102被朝向的方向、且作为该通信装置102指示的空间即指向空间(指向空间信息)。具体而言,指向空间计算部208根据由位置信息取得部206计算的通信装置102的位置信息和由方向感知部207计算的指向方向,计算通信装置102指示的空间作为指向空间信息。
操作信息取得部212经由外部通信部204取得从服务器设备104取得的用于操作终端设备101的例如遥控器信息等的操作信息。
存储部213将由操作信息取得部212取得的终端设备101的操作信息、设备信息取得部203取得设备信息时的位置信息作为表示上述设备的位置的设备位置信息建立对应而存储。另外,设备信息取得部203取得设备信息时的位置信息,换言之是当检测到与终端设备101的近距离无线时由位置信息取得部206取得的位置信息。这里,当检测到与终端设备101的近距离无线时由位置信息取得部206取得的位置信息表示通信装置102的位置(当前位置),但由于与终端设备101进行近距离无线通信,所以能够看作终端设备101的位置信息(以下记作设备位置信息)。即,通信装置102 可以将在检测到与终端设备101的近距离无线通信时由位置信息取得部 206取得的位置信息作为终端设备101的设备位置信息处理。
移动判断部210根据由传感器部205计测的传感器信息判断通信装置 102是否静止。
选择部209a具备设备判断部209和操作信息设定部211。选择部209a 基于存储在存储部213中的设备位置信息决定存在于指向空间的设备(终端设备101),选择存储在存储部213中的操作信息之中的与决定的设备(终端设备101)对应的操作信息。设备判断部209根据存储在存储部213中的设备位置信息判断存在于指向空间中的设备(终端设备101)。具体而言,设备判断部209根据由指向空间计算部208取得的指向空间信息和保持在存储部213中的终端设备101的设备位置信息,判断(决定)处于通信装置102指示的方向的设备是哪个终端设备101。操作信息设定部211选择存储在存储部213中的操作信息之中的与所决定的设备(终端设备101)对应的操作信息。具体而言,操作信息设定部211从存储部213取得由设备判断部209判断(决定)的终端设备101的操作信息,通过对通信装置102 设定上述操作信息,选择与所判断(决定)的设备(终端设备101)对应的操作信息。
显示信息决定部214基于由操作信息设定部211设定(选择)的操作信息,决定应显示在显示部110中的遥控器界面。
操作信息发送部215基于由操作信息设定部211选择(设定)的操作信息,将用于操作该设备的控制信号向该设备发送。具体而言,操作信息发送部215在通信装置102的使用者将按键111按下时,将对应于被按下的按键111的终端设备101的遥控器命令等的控制信号向终端设备101发送。
操作履历取得部216通过取得由操作信息发送部215发送的遥控器命令等的控制信号的信息,取得对使用者的终端设备101的操作履历。
声音传感器217例如是麦克风,感知通信装置102的周围的声音。
如以上这样构成通信装置102。
通过该结构,不需要复杂的操作,能够简单地实现可对应于遥控器等的扩展用户界面的通信装置102。
另外,在上述的说明中,有关本发明的通信装置102具备天线109、显示部110及按键111,还具备近距离无线通信部201、近距离无线检测部202、设备信息取得部203、外部通信部204、传感器部205、位置信息取得部206、方向感知部207、指向空间计算部208、选择部209a、移动判断部210、操作信息取得部212、存储部213、显示信息决定部214、操作信息发送部215、操作履历取得部216、及声音传感器217,但并不限定于此。如图151所示,作为通信装置102的最小结构,只要具备由设备信息取得部203、外部通信部204、位置信息取得部206、方向感知部207、指向空间计算部208、选择部209a、操作信息取得部212、存储部213、以及操作信息发送部215 构成的最小结构部102a。这里,图151是表示有关本发明的通信装置的最小结构的块图。并且,该通信装置102通过具备该最小结构部102a,不需要复杂的操作,能够简单地实现可对应于遥控器等的扩展用户界面的通信装置102。
(设备判断部209的详细)
接着,对本实施方式的设备判断部209的详细进行说明。
图152A~图152C是表示本实施方式的设备判断部的详细结构的一例的块图。
图152A所示的设备判断部209具备设备方向计算部2092、差计算部 2093、及设备决定部2094。
设备方向计算部2092在指向空间中存在多个设备的情况下,根据通信装置102的位置信息和存在于指向空间中的多个设备的存储部213中存储的设备位置信息,计算表示从该通信装置102相对于该多个设备各自的方向的多个设备方向信息。具体而言,设备方向计算部2092根据终端设备101 和通信装置102的距离,计算从通信装置102观察的情况下的终端设备101 的方向角。
差计算部2093计算通信装置102的方向信息与多个设备方向信息的差。具体而言,差计算部2093计算由设备方向计算部2092计算的各终端设备101的方向角、与表示通信装置102所指示的方向(指向方向)的指向角的差。
设备决定部2094将多个设备中的由差计算部2093计算的差比规定值小的设备决定为存在于指向空间中的设备。例如,设备决定部2094将由差计算部2093计算的差为最小的终端设备101决定为应设定操作信息的终端设备。
通过如以上这样这样构成设备判断部209,判断存在于指向空间中的设备(终端设备101)。即,通信装置102在由指向空间计算部208取得的指向空间中存在多个终端设备101的情况下,可以由差计算部2093选择与通信装置102指示的方向接近的终端设备101作为存在于指向空间中的设备。
另外,设备判断部209也可以在设备方向计算部2092的前段具备判断在指向空间中是否存在多个设备的台数判断部。在此情况下,台数判断部只要根据由指向空间计算部208计算的通信装置102的指向方向和由存储部213保持的终端设备101的设备位置信息,判断存在于指向空间内的终端设备101的台数就可以。
图152B所示的设备判断部309具备空间信息存储部3095及设备决定部3096。
空间信息存储部3095存储有表示空间和设备相对于该空间的配置的空间信息。具体而言,空间信息存储部3095保持终端设备101存在的建筑物的平面布置信息或房间的布局信息和相对于此的坐标信息。
设备决定部3096在指向空间中存在多个设备的情况下,使用通信装置 102的位置信息从空间信息存储部3095取得包括该通信装置102存在的空间的空间信息,基于上述空间信息,将存在于通信装置102存在的空间中的设备决定为存在于指向空间中的设备。具体而言,设备决定部3096基于从空间信息存储部3095取得的平面布置信息等,决定通信装置102的使用者想要操作的设备。另外,在存在于与通信装置102相同的房间中的终端设备101仅存在1台的情况下,将该终端设备101决定为应设定操作信息的终端设备101。
通过如以上这样构成设备判断部309,判断存在于指向空间中的设备 (终端设备101)。即,通信装置102在由指向空间计算部208取得的指向空间中存在多个终端设备101的情况下,能够取得建筑物的平面布置信息,能够从通信装置102存在的空间内的终端设备101中缩减应设定操作信息的终端设备101。
另外,设备判断部309也可以在设备决定部3096的前段具备判断是否在指向空间中存在多个设备的台数判断部。在此情况下,台数判断部只要根据由指向空间计算部208计算的通信装置102的指向方向和由存储部213 保持的终端设备101的设备位置信息判断存在于指向空间内的终端设备 101的台数即可。
图152C所示的设备判断部409具备台数判断部4091、设备候选输出部4092、用户输入取得部4093、设备决定部4094、设备俯仰角取得部4095、及设备俯仰角存储部4096。
台数判断部4091根据由指向空间计算部208计算出的通信装置102的指向方向和由存储部213保持的终端设备101的设备位置信息判断在指向空间内是否存在多个设备(终端设备101)。具体而言,台数判断部4091 判断在指向空间内设备(终端设备101)的台数。
设备候选输出部4092基于存储在存储部213中的设备位置信息和存储在设备俯仰角存储部4096中的俯仰角信息,将存在于该指向空间中的至少一个设备(终端设备101)作为设备候选列表向显示部110输出。即,设备候选输出部4092对于由台数判断部4091判断的台数量的终端设备101,基于设备俯仰角取得部4095,作为终端设备的设备候选列表向显示部110输出。并且,在显示部110中显示该设备候选列表。
用户输入取得部4093取得在由设备候选输出部4092输出并由显示部 110显示的设备列表中通过用户向按键111的按键操作选择的设备(终端设备101)。
设备决定部4094将显示在显示部110上的设备候选列表的设备中的由用户选择的设备决定为存在于指向空间的设备。具体而言,设备决定部4094 将由用户输入取得部4093取得的终端设备101决定为存在于指向空间中且应设定操作信息的终端设备101。
设备俯仰角取得部4095取得表示通信装置102的俯仰方向的角度的俯仰角信息。具体而言,设备俯仰角取得部4095在判断存在于指向空间中的设备(终端设备101)并决定应设定操作信息的终端设备101时,取得表示通信装置102的俯仰方向的角度的俯仰角信息俯仰角。此外,设备俯仰角取得部4095将所取得的俯仰角度信息与由设备决定部4094决定的设备(终端设备101)建立对应而存储到设备俯仰角存储部4096中。
设备俯仰角存储部4096将俯仰角信息与设备信息建立对应而存储。具体而言,设备俯仰角存储部4096将由设备俯仰角取得部4095取得的俯仰角与由设备决定部4094决定的终端设备101建立对应而存储。
通过如以上这样构成设备判断部409,判断存在于指向空间中的设备 (终端设备101)。即,通信装置102通过将用户选择的终端设备101与俯仰角信息建立对应而存储,在由指向空间计算部208取得的指向空间中存在多个终端设备101的情况下,也能够基于俯仰角信息将由设备候选输出部4092输出的终端设备101缩减。此外,在由设备决定部4094决定终端设备101后,通过在设备俯仰角存储部4096中将由设备俯仰角取得部4095 取得的俯仰角与由设备决定部4094决定的终端设备101建立对应而存储,也起到能够学习用户习惯于将通信装置102朝向指示该终端设备101的方向来作为作为俯仰角的效果。
(通信装置102的存储部213)
接着,对存储在存储部213中的数据构造的一例进行说明。
图153是表示本实施方式的存储部213的数据构造的一例的图。
如图153所示,在存储部213中,将例如制造号码、制品号码、位置信息、遥控器信息建立对应存储。这里,在存储部213中,具有用于将它们存储的区域即制造号码存储区域、制品号码存储区域、位置信息存储区域、遥控器信息存储区域。另外,该区域除了作为数据构造而具有的情况以外,也可以作为表具有。
制造号码存储区域是作为用于唯一决定被登录的终端设备101的信息而存储制造号码的区域。
制品号码存储区域是作为用于识别终端设备101的制品种类的信息而存储制品号码的区域。
位置信息存储区域是存储与终端设备101建立对应的位置信息的区域。例如,将终端设备101存在的纬度经度、起居室、厨房等的房间信息。
遥控器信息存储区域是存储与终端设备101建立了对应的遥控器信息的区域。这里,所谓遥控器信息,由与终端设备101建立对应的终端设备 101的操作信息、以及与按键111及操作信息建立了对应的显示信息构成。此外,所谓操作信息,例如是将执行电源的“ON”及“OFF”等的终端设备101的动作与为了执行其动作而从通信装置102发送的操作命令建立了对应的信息。另外,该操作信息并不限定于单一的终端设备101的动作,也可以是多个动作。即,例如也可以将电源设为ON、将录像列表打开、选择特定的节目并再生的、一系列的终端设备101的动作设定为1个操作信息。
(通信装置102的指向空间的决定法)
接着,对由指向空间计算部208取得的指向空间的取得法的一例进行说明。
图154是表示由本实施方式的指向空间计算部208取得的指向空间的取得法的一例的图。
图154所示的坐标x0及坐标y0表示通信装置102的坐标位置,是能够由通信装置102的位置信息取得部206取得的位置信息。此外,由坐标轴表示的“N”、“S”、“E”、“W”分别表示“北”、“南”、“东”、“西”,由通信装置102的方位传感器226取得(计测)。表示相对于坐标轴的通信装置102的指向角的角度θ由通信装置102的角速度传感器225取得。
角度α是用于规定指向空间的范围(区域)的阈值。即,如果使该角度α较大,则指向空间变大,如果减小角度α,则指向空间变窄。具体而言,对于作为表示角度θ的指向角的方向即指向方向a,将由表示角度±α的范围的虚线b及虚线c包围的范围(区域d)规定为指向空间的范围(区域)。另外,角度α也可以预设在通信装置102中,也可以通过用户输入来设定。此外,角度α也可以基于建筑物的大小、房间的大小、墙壁与通信装置102的距离等设定。
在图153中,指向空间的范围(区域)可以表示为(x-x0)·tan(θ -α)+y0<y<(x-x0)·tan(θ+α)+y0。通信装置102基于存储在存储部 213中的设备位置信息选择存在于这样表示的指向空间中的终端设备。
接着,对以上那样构成的通信装置102的动作的概要进行说明。
图155是表示本实施方式的通信装置102的动作的概要的流程图。
在通信装置102的动作中,大体上划分为存储设备位置信息和操作信息的步骤S1、基于存储的操作信息及设备位置信息对希望的终端设备101 进行遥控器操作等操作的步骤S2。
在步骤S1中,首先,设备信息取得部203从终端设备101取得作为能够唯一地识别该终端设备101的信息的设备信息(S11)。
接着,位置信息取得部206取得表示该通信装置102的位置的位置信息(S12)。
接着,操作信息取得部212基于所取得的设备信息,经由外部通信部 204从服务器设备104取得用于使终端设备101能够操作的操作信息(S13)。
接着,通信装置102在所取得的操作信息中将位置信息作为表示终端设备101的位置的设备位置信息建立对应,将该操作信息和该设备位置信息存储到存储部213中(S14)。
通过这样进行S11~S14,通信装置102进行将设备位置信息和操作信息存储的步骤S1。
接着,在步骤S2中,首先,方向感知部207感知表示通信装置102被朝向的方向的方向信息(S21)。
接着,指向空间计算部208基于由位置信息取得部206取得的位置信息、以及由方向感知部207取得的方向信息,计算通过通信装置102被朝向而由该通信装置102指示的空间即指向空间(S22)。
接着,选择部209a根据存储在存储部213中的设备位置信息决定存在于指向空间中的设备(终端设备101)(S23),选择存储在存储部213中的操作信息之中的对应于所决定的设备的操作信息(S24)。
最后,操作信息发送部215基于所选择的操作信息将用于操作该设备 (终端设备101)的控制信号向该设备发送(S25)。
通过这样进行S21~S25,通信装置102基于存储的操作信息及设备位置信息,进行将所望的终端设备101进行遥控器操作等的操作的步骤S2。
以下,对通信装置102的动作的详细进行说明。
(遥控器信息的登录流程)
首先,对本实施方式的在通信装置102的存储部213中登录操作信息的情况下的处理的流程进行说明。
图156是表示在本实施方式的通信装置102的存储部213中登录操作信息的情况下的处理的流程的流程图。
首先,用户启动用于进行近距离无线通信的读取器/写入器应用 (S101)。
接着,通信装置102经由天线109发送作为向不确定的呼叫信号的轮询电波(S101)。并且,判断是否已检测到来自终端设备101的轮询应答 (S102)。另外,在S103中,在判断为不能检测到轮询应答的情况下(S103 的N),再次进行轮询电波的发送。
在S103中,在通信装置102判断为已检测到轮询应答的情况下(S103 的Y),发送用于取得终端设备101的设备信息的设备信息请求(S104)。
接着,通信装置102接收从终端设备101发送的设备信息(S105)。
接着,通信装置102判断是否能够从设备信息取得终端设备101的设备位置信息(S106)。
通信装置102在判断为已取得设备位置信息的情况下(S106的Y),将该设备位置信息作为由绝对位置取得部227取得的绝对位置信息保持,将由相对位置取得部228取得的相对位置信息初始化(S107)。
另一方面,通信装置102在判断为不能取得设备位置信息的情况下(S106的N),启动GPS传感器224(S108),取得绝对位置信息,将由相对位置取得部228取得的相对位置信息初始化(S109)。
接着,通信装置102判断是否由存储部213保持有与在S106中取得的设备信息对应的操作信息(S110)。
并且,通信装置102在判断为由存储部213保持有操作信息的情况下 (S110的Y),结束处理。
另一方面,通信装置102在判断为没有由存储部213保持操作信息的情况下(S110的N),经由外部通信部204向服务器设备104发送对应于该设备信息的操作信息请求(S111)。
接着,通信装置102接收从服务器设备104发送的操作信息(S112)。
接着,通信装置102将所取得的操作信息与设备位置信息建立对应,保存到存储部213中(S113)。
如以上这样,通信装置102进行在存储部213中登录操作信息的处理。
(遥控器信息的设定操作流程)
接着,对在本实施方式的通信装置102中设定遥控器信息、作为遥控器操作的情况下的处理的流程进行说明。
图157及图158是表示对本实施方式的通信装置102设定操作信息并操作的情况下的处理的流程的流程图。图157表示用户操作通信装置102、启动遥控器应用的情况下的处理的流程,图158表示用户没有向按键111 进行按键操作而遥控器应用自动地启动的情况下的处理的流程。
首先对图157进行说明。
首先,通信装置102通过用户对按键111按键操作,启动遥控器应用 (S201)。接着,通信装置102取得通过按键操作被用户选择的终端设备 101(S202)。并且,通信装置102设定与在S202中取得的终端设备对应的操作信息(S203)。
即,在S201~S203中,在对通信装置102明示地设定了操作信息的前提下,对接着的通信装置102的处理进行说明。
在这样在通信装置102中设定例如对电视机等的操作信息后,接着,通信装置102启动传感器部205,在位置信息取得部206及方向感知部207 中开始感知(S204)。并且,通信装置102在相对位置取得部228中计算相对位置(S205)。
接着,通信装置102基于用户向按键111的输入带来的遥控器操作,发送用于操作在S203中设定了操作信息的终端设备101的遥控器命令。即, S202、S203及S204从用户看来作为通信装置102的连续的动作处理掌握,但实际是通信装置102开始S204和S205的动作处理。
接着,通信装置102在移动判断部210中判断本装置(通信装置102) 是否静止(S207)。
在S207中,通信装置102在判断为本装置不静止的情况下(S207的N),再次进行S205的相对位置信息的计算。
另一方面,在S207中,在通信装置102判断为本装置静止的情况下 (S207的Y),由位置信息取得部206及方向感知部207取得位置信息及指向方向信息(S208)。
接着,通信装置102判断存在于本装置指示的方向上的终端设备101,设定操作信息。
接着,再次向S202返回,继续处理。
如以上这样,通信装置102通过首先在S201~S203中设定操作信息、然后进行S204、S205及S207~S209所示的处理,进行新设定操作信息的处理。
接着,对图158进行说明。
首先,通信装置102启动传感器部205,在位置信息取得部206及方向感知部207中开始感知(S301)。接着,通信装置102在相对位置取得部 228计算相对位置(S302)。
接着,通信装置102在移动判断部210中判断本装置(通信装置102) 是否静止(S303)。
在S303中,通信装置102在判断为本装置不静止的情况下(S303的N),再次进行S302的相对位置信息的计算。
另一方面,在S303中,通信装置102在判断为本装置静止的情况下 (S303的Y),启动遥控器应用(S304)。
接着,通信装置102通过位置信息取得部206及方向感知部207,取得位置信息及指向方向信息(S305)。
接着,通信装置102判断存在于本装置指示的方向上的终端设备101,设定操作信息(S306)。
在接着的S307中,通信装置102例如基于由用户的按键111输入引起的遥控器操作,发送用于操作终端设备101的遥控器命令(详细流程后述)。
并且,再次向S301返回,继续处理。
如以上这样,通信装置102不经由用户的按键操作(作为触发器)而进行设定操作信息的处理。
(遥控器信息的设定操作流程)
接着,对S209、S307的详细处理例即判断存在于通信装置102指示的方向的终端设备101的处理的流程进行说明。
图159是表示本实施方式的判断存在于通信装置102指示的方向上的终端设备101的处理的流程的例子的流程图。
首先,将作为用于规定探索的指向空间的范围(区域)的角度的探索范围角度设为α,进行探索范围的设定(S401)。
接着,通信装置102使用在图154中说明的本装置(通信装置102)的位置信息(X0,Y0)、指向方向信息θ,判断在满足(x-x0)·tan(θ-α) +y0<y<(x-x0)·tan(θ+α)+y0的指向空间的范围(区域)中是否存在终端设备101(S402)。
在S402中,通信装置102在判断为在该指向空间中存在终端设备101 的情况下(S402的Y),判断在指向空间中终端设备101是否是1台(S403)。
通信装置102在判断为在指向空间中终端设备101是1台的情况下 (S403的Y),向后述的S409转移,在该终端设备101中设定对应的操作信息,结束处理。另一方面,在S402中,通信装置102在判断为在其指向空间中终端设备101不是1台的情况下即存在两台以上的情况下(S403的 N),从设备判断部309具有的例如空间信息存储部3095取得平面布置信息 (S404)。
接着,通信装置102使用所取得的平面布置信息和在S402中取得的指向空间,判断满足在本装置(通信装置102)存在的房间内并且是其指向空间内的条件的终端设备101是否是1台(S405)。
通信装置102在判断为满足S405中的条件的终端设备101是1台的情况下(S405的Y),转移到后述的S409,设定对应于该终端设备101的操作信息,结束处理。另一方面,在S405中,通信装置102在判断为在本装置(通信装置102)存在的房间内且处于其指向空间内的终端设备101不是 1台的情况下(S405的N),由显示部110将满足S405中的条件的终端设备101的列表作为设备候选列表显示(S406)。
接着,通信装置102从上述设备候选列表之中经由按键111取得用户选择的终端设备101(S407)。
接着,通信装置102根据设备判断部309具有的例如设备俯仰角取得部4095取得俯仰角信息,将在S407中选择的终端设备101与所取得的俯仰角信息建立对应而存储到设备俯仰角存储部4096中(S408)。与此同时,通信装置102判断在本装置指示的方向上存在的终端设备101,设定操作信息(S409)。
另外,在S402中,通信装置102在判断为在该指向空间中不存在终端设备101的情况下(S402的N),根据所取得的位置信息,判断是否本终端(通信装置102)存在于自家等的操作对象的终端设备101所存在的空间中(S410)。这里,作为一例而设想要操作的终端设备101存在的空间为自家,但并不限定于此。
在S410中,通信装置102在判断为本终端(通信装置102)存在于操作对象的终端设备101存在的空间中的情况下(S410的N),用显示部110 显示例如“没有登录,请接触家电”警告,敦促终端设备101的登录(S411)。
另一方面,在S410中,通信装置102在判断为本终端(通信装置102) 不存在于操作对象的终端设备101存在的空间中的情况下(S410的Y),取得自家的经度纬度等的本终端的位置信息(S412)。
接着,通信装置102根据表示自家位置的自家位置信息和本终端(通信装置102)的指向方向信息及位置信息,判断本终端(通信装置102)是否朝向自家的方向(S413)。
在S413中,通信装置102在判断为本终端(通信装置102)没有朝向自家的方向的情况下(S413的Y),结束处理。另一方面,在S413中,在通信装置102判断为本终端(通信装置102)朝向自家的方向的情况下(S413 的N),将例如连接在外部网络上的终端设备101等、能够经由因特网操作的终端设备101(操作可能设备)的列表用显示部110显示(S414)。
接着,用户从由通信装置102显示的可操作设备的列表之中经由按键 111选择操作对象的终端设备(S415)。并且,通信装置102决定由用户选择的终端设备101,将与决定的终端设备101对应的操作信息设定在自装置中(S409),结束处理。
如以上这样,通信装置102进行判断存在于本终端(通信装置102)指示的方向上的终端设备101的处理。
(遥控器操作详细流程)
接着,对S206、S307的详细处理例、即将通信装置102作为遥控器操作操作对象的终端设备101的处理的流程进行说明。
图160是表示将本实施方式的通信装置102作为遥控器、操作操作对象的终端设备101的处理的流程的例子的流程图。
首先,通信装置102确认是否由用户经由按键111输入命令(S501)。
通信装置102在判断为没有用户输入命令的情况下(S501的N),结束本处理。
另一方面,通信装置102在判断为由用户输入命令的情况下(S501的 Y),判断被输入的命令是否是应用的结束命令(S502)。通信装置102在判断为由用户输入的命令是结束命令的情况下(S502的Y),结束处理。在S502中,在判断为由用户输入的命令不是结束命令的情况下(S502的 N),对终端设备101发送表示操作命令的命令(指令)信号(S503)。
接着,通信装置102使用声音传感器217判断终端设备101是否正确地接收到了操作命令(S504)。具体而言,通信装置102取得终端设备101 为了表示已适当地受理操作命令而发出的声音信息,基于所取得的声音信息,判断终端设备101是否正确地接收到了操作命令。这里,所谓声音信息,例如在终端设备101是电视机的情况下是在频道的切换时发生的声音等。此外,例如在终端设备101是空调等的情况下,是对用户表示遥控器信息已适当地到达的反应音等。
在S504中,通信装置102在判断为终端设备101正确地接收到操作命令的情况下(S504的Y),经由外部通信部204将终端设备101的操作履历向服务器设备104发送(S505)。另外,通信装置102也可以将该操作履历保存到存储部213中。
接着,通信装置102根据操作命令使显示部110的画面变迁。例如,在作为终端设备101的电视机中显示已录像节目列表时,在用户保持的通信装置102的显示部110上也显示已录像节目列表。
另外,在S504中,通信装置102在判断为终端设备101没有正确地接收到操作命令的情况下(S504的N),再发送操作命令,再判断再送次数是否超过了一定值(S506)。
在S506中,通信装置102在判断为操作命令的再送次数超过一定值的情况下(S506的Y),例如将“请再1次”等、对用户敦促再1次按键操作的警告用显示部110显示。
如以上这样,通信装置102进行作为将操作对象的终端设备101操作的遥控器的处理。
(遥控器登录次序)
接着,对在通信装置102登录操作信息时进行的、终端设备101与服务器设备104的数据的交换进行说明。
图161是表示在本实施方式的通信装置102登录操作信息时进行的数据的流程的次序图。
首先,用户启动进行近距离无线通信的(用于启动读写器的)通信装置102的应用,使通信装置102开始轮询(S601)。
接着,用户使开始了轮询的通信装置102向安装有用于终端设备101 的近距离无线通信的天线的区域接触(S602),对终端设备101发送轮询电波(S603)。接着,终端设备101接收来自通信装置102的轮询电波,将轮询应答信号向通信装置102发送(S604)。这样,终端设备101与通信装置 102建立近距离无线通信。并且,通信装置102如果从终端设备101接收到轮询应答信号,则生成用于从终端设备101读出设备信息的读命令,向终端设备101发送(S605)。终端设备101如果接收到读命令,则将包括本终端设备101的设备信息的信息向通信装置102发送(S606)。
接着,通信装置102在从终端设备101接收到的信息之中提取设备信息(S607)。
另外,通信装置102利用GPS传感器等的各种传感器信息,在S602 中取得接触在终端设备101上的定时的位置信息(S608)。这里,通信装置 102以S602的定时取得位置信息是利用以下特点:为了建立近距离无线通信,需要将终端设备101与通信装置102的距离接近于几cm以内。即,这是因为,在近距离无线通信建立时,通信装置102取得的位置信息可以看作是终端设备101的设备位置信息。
接着,通信装置102为了从服务器设备104取得与提取的终端设备101 的设备信息对应的操作信息,将请求该操作信息的请求命令向服务器设备 104发送(S609)。
接着,服务器设备104如果接收到操作信息的请求命令,则从操作信息管理数据库取得对应于该终端设备的操作信息,将该该操作信息向通信装置102发送(S610)。
最后,通信装置102将接收到的操作信息、位置信息及设备信息建立对应而存储到存储部213中(S610)。
通过以上那样的次序,通信装置102进行登录操作信息的处理。
(遥控器操作次序)
接着,对在通信装置102作为遥控器发挥功能而操作终端设备101时进行的、终端设备101与服务器设备104的数据的交换进行说明。
图162是表示在本实施方式的通信装置102作为遥控器发挥功能而操作终端设备101时进行的数据的流动的次序图。
首先,用户基于显示在显示部110上的遥控器界面,经由按键111对通信装置102输入操作命令(S701)。
接着,通信装置102将用户输入的操作命令经由操作信息发送部215 向终端设备101发送(S702)。
接着,终端设备101执行对应于接收到的操作命令的程序(S704)。例如,终端设备101执行与电源、音量、温度、再生、电视机频道的变更等操作命令对应的程序。
接着,终端设备101发出表示适当受理操作命令的声音(声音信息) (S704)。例如,在终端设备101是电视机的情况下,所谓声音,是在频道的切换时产生的声音,在终端设备101是空调等的情况下,是为了对用户表示操作信息已适当地到达而发出的反应音。
接着,通信装置102通过声音传感器217辨识终端设备101发出的声音(S705)。并且,通信装置102在辨识出是终端设备101为了表示已适当地受理了操作命令而发出的声音的情况下,向服务器设备104发送终端设备101的操作履历(S706)。此时,通信装置102如上述那样,根据操作命令使显示部110的画面变迁(S707)。
接着,例如假设用户再次基于显示在显示部110上的遥控器界面、经由按键111输入操作命令(S708)。在此情况下,如上所述,通信装置102 将用户输入的操作命令经由操作信息发送部215向终端设备101发送 (S709)。
这里,如果终端设备101不能正确地接收到操作命令,则通信装置102 不能辨识终端设备101发出的声音(S710)。并且,通信装置102进行操作命令的再送(S711)。这样,通信装置102能够不发送并获取表示终端设备 101正确地接收到信号的特定的反馈信号,而辨识终端设备101没有完成操作命令的接收,能够进行操作命令的再送等的对应。
另外,通信装置102在判断为操作命令的再送次数超过一定数的情况下(S712),例如将“请再一次”等对用户敦促再一次按键操作的警告用显示部110显示,等待用户的操作命令输入(S713)。
通过以上那样的次序,通信装置102作为操作终端设备101的遥控器发挥功能。
如以上这样,根据本发明,能够不需要复杂的操作而简单地实现能够对应于遥控器等的扩展用户界面的通信装置。
具体而言,通信装置102将终端设备信息、终端设备101的位置信息 (设备位置信息)及终端设备101的操作信息建立对应而用存储部213保持。由此,通过使用由传感器部205感知的传感器信息计算通信装置102 指示的方向,能够从存储部213调出存在于计算出的指向空间中的终端设备101的操作信息,而作为该终端设备101的遥控器发挥功能。即,通信装置102能够基于该终端设备101的操作信息设定通信装置102的遥控器命令(控制信号)。例如,具有以下效果:仅通过通信装置102的使用者将通信装置102朝向空调或电视机等想要操作的家电设备等(终端设备101),就能够用通信装置102实现面向使用者的家电设备等的操作。
此外,通过移动判断部210进行通信装置102的静止判断,通信装置 102能够以本装置的静止为触发事件,作为处于本装置指示的方向上的终端设备101的遥控器发挥功能。即,具有以下效果:能够不进行使用者的按键操作等,而以通信装置102的静止为触发事件,使通信装置102成为对应于新的终端设备101的遥控器。
此外,通信装置102由于由方向感知部207取得指向方向,所以在将终端设备101例如经由红外线通信操作时,当红外线通信的指向方向从终端设备101偏离时,能够将“请稍稍朝向右方”等的警告消息向用户提示。
此外,通信装置102通过声音传感器217,能够取得终端设备101的声音信息,例如在终端设备101是电视机的情况下取得在频道的切换时产生的声音、在终端设备101是空调等的情况下取得对用户表示操作信息已适当到达的反应音。由此,通信装置102能够不将表示终端设备101接收到信号的特定的反馈信号另外发送而辨识通信装置102是否能够正确地发送操作命令。因而,还起到从即使是没有连接在通用网络上那样的终端设备 101也能够经由通信装置102收集正确的终端设备101的操作履历的效果。
此外,通信装置102以由近距离无线检测部202检测到终端设备101 为触发事件,将由相对位置取得部228取得的相对位置信息初始化,由绝对位置取得部227将绝对位置信息设定为能够经由GPS传感器224或外部通信部204取得的设备位置信息。由此,通信装置102起到能够减轻使用加速度传感器223修正设备位置信息时发生的设备位置信息的累积误差的效果。
另外,在本实施方式中,对通信装置102在取得终端设备101的设备信息时使用近距离无线通信取得的例子进行了说明,但并不限定于此。例如,如果对具有设备信息的条码等附加在终端设备101上、使用通信装置 102具有的数字照相机等光学读取装置进行读取也同样可以。这里,图163A 是表示本实施方式的作为终端设备101的设备信息而附加了2维条码的情况下的状况的图。图163B是表示将本实施方式的终端设备101的设备信息从2维条码读出的状况的一例的图。在图163A及图163B中,作为终端设备101的例子而表示了空调1201。此外,图149所示的通信装置102还具有光学读取装置,除了该结构以外是与在图150(或图151)中表示的通信装置102同样的结构。如图163A所示,对空调1201附加了包括设备信息的2维条码1203。并且,如图163B所示,将该2维条码1203使用通信装置102的光学读取装置,取得对2维条码附加的设备信息。如果做成该结构,则也能够取得不具有近距离无线通信的功能的终端设备101的设备信息。例如,即使在空调等设置场所较高而用于建立近距离无线通信的动作、即向终端设备101的接触较困难的情况下,也能够取得设备信息。
此外,在本实施方式中,对选择了通信装置102为遥控器发挥功能的一个终端设备101的情况的例子进行了说明,但并不限定于此。
例如,在多个终端设备101接近、难以用设备判断部209判断的情况下,或者在想要同时操作多个设备的情况下,通信装置102只要进行多个终端设备101的操作就可以。即,只要作为操作多个终端设备101的遥控器发挥功能就可以。图164A及图164B是表示操作多个照明的情况下的显示部上的显示例的图。具体而言,表示了通过将通信装置102不是朝向多个照明而朝向用于操作多个照明的照明开关盘,从而在显示部110上显示以便能够一齐操作能够用该照明开关盘操作的照明开关的例子。即,如图 164A所示,也可以对通信装置102同时设定厨房照明和餐厅照明的多个设备的操作信息并且同时操作。此外,如图164B所示,在能够使LED照明等照度模拟变化的情况下,也可以用显示部110显示以便能够模拟地变更照度。
进而,例如在如电视机和记录机那样终端设备101彼此接近的情况下,电视机和记录机有许多用于操作的遥控器命令,所以难以将多个终端设备 101的遥控器命令全部显示在通信装置102的显示部110上。因此,在遥控器命令有许多的情况下,也可以如图165A所示那样用显示部110进行能够使用户选择使通信装置102作为哪个终端设备101的遥控器发挥功能的显示。这里,图165A是表示对用户敦促使通信装置102作为多个设备中的哪个设备的遥控器发挥功能的选择的情况下的显示例的图。在图165A所示的例子中,通过将电视机遥控器的设定设为“ON”,通信装置102作为电视机遥控器发挥功能,通过将记录机遥控器的设定设为“ON”,作为记录机遥控器发挥功能。
此外,在本实施方式中,对通信装置102取得终端设备101的设备信息的情况下的例子进行了说明,但并不限定于此。例如,通信装置102也可以能够从终端设备101取得ON或OFF等终端设备101的当前的动作状况。在此情况下,通信装置102也可以匹配于终端设备101的当前的动作状况来设定操作信息。通过这样,不需要将全部的遥控器命令显示在显示部110上,起到能够使用户界面简单化的效果。例如,作为通信装置102 取得终端设备101的当前的动作状况的机构,在终端设备101是电视机等的情况下,能够通过使用因特网等通用网络来取得。图165B是表示匹配于终端设备101的当前的动作状况而设定通信装置102的操作信息的情况下的一例的图。在图165B所示的例子中,电视机是电源ON状态,记录机是电源OFF状态,通信装置102取得该当前的动作状况。此时,作为电视机的操作,至少不使用电源ON命令,所以不需要用通信装置102的显示部 110显示。此外,由于记录机是电源OFF状态,所以作为最初用户选择的操作可以考虑是电源ON,所以只要显示能够进行电源ON的操作信息就可以。如以上这样,通信装置102也可以根据终端设备101的动作状况缩减对用户提示的遥控器命令。
另外,在本实施方式中,通信装置102计算本装置(通信装置102)的指向空间信息,判断存在于指向方向上的终端设备101,但也可以为使服务器设备104进行该判断的结构。在此情况下,例如通信装置102将角速度信息、加速度信息及位置信息经由外部通信部204向服务器设备104发送。并且,服务器设备104也可以基于从通信装置102接收到的角速度信息、加速度信息及位置信息判断存在于通信装置102的指向方向上的终端设备 101、将判断出的终端设备101的操作信息向通信装置102发送。
此外,在本实施方式中,通信装置102也可以使用高度信息。在此情况下,例如只要从气压计取得通信装置102的高度信息就可以。
此外,在本实施方式中,也可以对于电视机或空调等的终端设备101,根据移动性的程度、操作紧急度的程度、或设备的大小等来改变遥控器的检测范围。这在例如空调等不容易移动的终端设备101中,通过减小检测范围,防止在别的终端设备101的操作中发生误动作,并且对于例如电风扇等设置场所较容易变化的终端设备101,增大遥控器的检测范围,由此即使在设备的场所某种程度变化的情况下,也能够操作终端设备101。
此外,在终端设备101与通信装置102的距离较远的情况下,能够操作设备的范围变窄,所以也可以根据终端设备101与通信装置102的距离来改变用于规定指向空间范围的阈值α。
进而,当然也可以如图166那样处于建筑物的1层中的用户朝向2层的终端设备101进行操作。这里,图166是实施方式18的向2层的遥控器操作的概念图。如图166所示,在拿着通信设备102的用户存在的层与想要进行操作的终端设备101的层或房间不同的情况下,或者在通信设备102 与操作对象的终端设备101离开规定的距离以上的情况下,用户如果朝向通信装置102,则也可以显示处于所朝向的方向的房间中的终端设备101 的设备一览。由此,即使在用户没有正确地记住相邻的房间的终端设备101 的场所的情况下,也能够进行远程场所的终端设备101的操作。
(实施方式19)
图167是本实施方式的整体系统图。
图167由RF-IDO50、移动设备O60、第1服务器O101及第2服务器O103构成。
RF-IDO50是具有NFC通信功能的设备,搭载在电冰箱、微波炉、洗涤机、电视机、录像设备等电子制品中,在制品的存储器中,作为制品信息而保持有作为表示制品的ID的制造号码、制品的使用履历信息、错误信息等,具有与实施方式18的终端设备101同样的功能。
移动设备O60具有能够与RF-IDO50的NFC通信功能通过近距离无线通信进行通信的NFC通信功能,具有将由RF-IDO50保持的制品信息读出的读写器功能。此外,所谓移动设备,是便携设备,是指便携电话终端等的便携设备、或电视机的遥控器终端。此外,移动设备O60具有与实施方式18的通信装置102同样的功能。
第1服务器O101是通过因特网等通用的网络与移动设备O60可通信地连接的服务器,在内部中具有DB(数据库),在上述DB中,储存有从 RF-IDO50由移动设备O60读出的RF-ID信息。
第2服务器O103是通过因特网等通用的网络与上述第1服务器O101 可通信地连接的服务器,在内部中具有DB(数据库),在上述DB中储存有设置了RF-IDO50的坐标的建筑物信息。
RF-IDO50由制品IDO51、第1服务器URLO52、服务IDO53、精度识别符O54构成。
另外,实施方式18的服务器设备104具有包括第1服务器O101和第 2服务器O103的功能。
制品IDO51是用于搭载有RF-ID的制品的识别的ID、例如制品的品号(包括颜色信息)、制造号码。
第1服务器URLO52是第1服务器O101的地址信息。
服务IDO53设定有表示电视机、空调、电冰箱等制品分类的ID。
精度识别符O54是表示由搭载有RF-IDO10的制品ID赋予的位置信息的可靠性的信息。
如以上这样,在本实施方式的RF-IDO50中,如果能够与移动设备 O60接近而进行近距离无线通信,则能够将储存在存储器中的品号、制造号码和第1服务器的URL、服务ID、精度识别符向移动设备O60发送。
接着,对本实施方式的移动设备O60进行说明。
移动设备O60由天线O61、RF-ID读写器O62、坐标精度识别信息 O63、CPUO64、程序执行部O65、数据处理部O66、存储器部O67、显示部O68d、通信天线O68、发送部O70、接收部O71、通信部O72、位置信息存储部O73、RF-ID存储部O74、RF-ID检测部O75、URLO76、再生部O77、相对位置运算部O78、坐标信息送出部O79、记录部O80、建筑物坐标数据输出部O81、登录坐标O82、判断部O83、基准坐标O84、位置信息输出部O85、位置信息O86、朝向信息O87、磁罗盘O88、朝向信息O89、卫星用天线O90、位置信息运算部O91、位置信息O92、位置信息修正部O93、朝向信息修正部O94、角速度传感器O95、角速度传感器 O96、角速度传感器O97、加速度传感器O98、加速度传感器O99、加速度传感器O100、积分器O105、积分器O106、绝对坐标运算部O107构成。
天线O61为了探索可近距离无线通信的RF-ID而朝向不特定的RF- ID进行供电。此外,在有应答的情况下,建立与RF-ID的近距离无线通信,接收从RF-IDO50发送的调制后的信息。
RF-ID读写器O62将接收到的信息解调。
另外,实施方式18的近距离无线通信部201具有包括天线O61和RF -ID读写器O62的功能。
坐标精度识别信息O63从接收到的信息中提取精度识别符。
CPUO64是进行移动设备的系统控制的部分,控制移动设备的各构成单元的动作。
程序执行部O65基于包含在接收到的信息中的服务ID执行程序。
数据处理部O66进行从第1服务器发送的数据处理。
存储器部O67将数据暂时存储。
显示部O68d显示存储在存储器部O67中的信息。
通信天线O68具有与因特网等通用的网络连接的功能,具有与实施方式18的通信天线219同样的功能。
发送部O70进行向因特网等通用的网络发送的数据的调制,具有与实施方式18的发送部221同样的功能。
接收部O71进行从因特网等通用的网络接收的数据的解调,具有与实施方式18的接收部220同样的功能。
通信部O72制作并解析经由因特网等通用的网络与其他设备进行通信的数据,具有与实施方式18的通信控制部222同样的功能。
位置信息存储部O73存储由本移动设备测量的位置信息。
RF-ID存储部O74存储从RF-IDO50取得的制品ID、服务ID。
RF-ID检测部O75检测来自RF-IDO10的应答。
URLO76根据从RF-IDO50接收到的信息提取第1服务器的URL。
再生部O77将存储在位置信息存储部O73中的信息再生。
相对位置运算部O78根据从位置信息存储部O73再生的位置信息和移动设备O60的当前的位置信息计算相对位置信息。
坐标信息送出部O79将从RF-ID检测部O75接受到触发事件的时刻的移动设备O60的位置信息送出。
记录部O80将从坐标信息送出部O79送出的位置信息写入到位置信息存储部O73中。
建筑物坐标数据输出部O81提取由通信天线接收的建筑物坐标数据。
登录坐标O82提取由通信天线接收的登录坐标的数据。
判断部O83判断由登录坐标O82提取的登录坐标的数据的精度。
基准坐标O84为:如果判断部O83的判断的结果是登录坐标的数据能够信赖,则将登录坐标的数据设定为基准坐标,将设定的基准坐标数据递交给位置信息修正部O93。
位置信息输出部O85根据来自朝向信息O87和位置信息O86的信息制作位置信息并输出。位置信息O86和朝向信息O87是被从由位置信息修正部O93和朝向信息修正部O94构成的绝对坐标运算部O107输出的移动设备O60的位置信息。
磁罗盘O88表示方位。
朝向信息O89制作磁罗盘O88的方位信息。
此外,实施方式18的方位传感器226包括磁罗盘O88及朝向信息O89 的功能。
卫星用天线O90与卫星通信。
位置信息运算部O91根据与卫星的通信结果,运算移动设备O60的位置信息。例如,求出纬度、经度、高度。
位置信息O92根据位置信息运算部O91的运算结果制作位置信息。
此外,实施方式18的GPS传感器224包括卫星用天线O90、位置信息运算部O91、及位置信息O92的功能。
位置信息修正部O93将来自积分器O105和积分器O106的位置信息的结果用位置信息O92、基准坐标O84和来自建筑物坐标数据输出部O81的信息修正。
朝向信息修正部O94将来自积分器O105和积分器O106的朝向信息的结果修正。
角速度传感器O95计测移动设备O60的x轴方向的角速度。
角速度传感器O96计测移动设备O60的y轴方向的角速度。
角速度传感器O97计测移动设备O60的z轴方向的角速度。
另外,实施方式18的角速度传感器225包括角速度传感器O95到O97 的功能。
加速度传感器O98计测移动设备O60的x轴方向的加速度。
加速度传感器O99计测移动设备O60的y轴方向的加速度。
加速度传感器O100计测移动设备O60的z轴方向的加速度。
另外,实施方式18的加速度传感器223包括加速度传感器O98到O100 的功能。
积分器O105将角速度传感器O95、角速度传感器O96和角速度传感器O97的计测结果积分。
积分器O106将加速度传感器O98、加速度传感器O99和加速度传感器O100的计测结果积分。
绝对坐标运算部O107由位置信息修正部O93和朝向信息修正部O94 构成,计算移动设备O60的绝对坐标。
如以上这样,本实施方式的移动设备O60能够测量RF-IDO50的制品信息和取得制品信息时的移动设备O60的位置信息,能够将上述位置信息与RF-IDO50的制品信息建立关联而向第1服务器O101发送。此外,能够通过根据接收到的登录坐标设定的基准坐标、建筑物坐标数据和由位置信息O92取得的位置信息、由朝向信息O89取得的信息,将本移动设备O60的当前的位置信息修正。此外,还能够将第1服务器O101的登录坐标数据与第2服务器O103的建筑坐标数据组合而制作设置有由移动设备O60 登录的RF-IDO10的制品的建筑物的3D制品地图。此外,还能够将制作出的3D制品地图显示在显示部O68d上。
接着,对本实施方式的第1服务器O101进行说明。
第1服务器O101是经由因特网等通用的网络与移动设备O60连接的服务器。本第1服务器O101在内部中具备管理搭载有RF-IDO50的制品的登录坐标数据O102。
在登录坐标数据O102中,接受与移动设备O60建立了联系的RF- IDO10的信息。在登录坐标数据O102中,将移动设备O60作为母机、将 RF-IDO50作为子设备而与母设备建立关联管理。此外,对于子设备,赋予由移动设备O60取得的位置信息,能够同时管理终端装置存在于哪里的信息。此外,也可以通过将从第2服务器O103接收的建筑物坐标数据与登录坐标数据O102组合而移动设备O60同样制作设置在建筑物中的3D制品地图。
接着,对本实施方式的第2服务器O103进行说明。
第2服务器O103是经由因特网等通用的网络与第1服务器O101连接的服务器。本第2服务器O103在内部中具备将现有的建筑物的平面布置与各建筑物的坐标(例如纬度、经度、高度)建立关联而管理的建筑物坐标数据库O104。
在建筑物坐标数据库O104中,通过保持现有的建筑物的平面布置与坐标信息,也能够与第1服务器的登录坐标数据组合而移动设备O60同样制作在设置在建筑物中的3D制品地图。此外,建筑物坐标数据库O104也可以通过作为个人信息而与第1服务器O101另外地用安全设定较高的(例如不能从移动设备O60直接通信的设定)服务器管理来减少个人信息的泄露。
如以上这样,在本实施方式的系统中,将RF-IDO50的制品信息通过移动设备O60经由近距离无线通信读出,在移动设备O60中将接触在RF -IDO50上而能够近距离无线通信的位置信息与RF-IDO50的制品信息建立对应,向第1服务器发送。在第1服务器中,能够将移动设备O60作为母设备、将搭载有RF-IDO50的制品作为子设备建立对应而管理。此外,通过使用搭载有RF-IDO50的制品的位置信息计算各制品的相对位置,能够制作制品的3D地图。
此外,通过设置将建筑物的平面布置和坐标的信息作为数据库保持的第2服务器,能够通过与由第1服务器管理的各制品的位置信息组合来制作各建筑物中的搭载有RF-IDO50的制品的3D地图。
此外,移动设备O60可以通过根据接收到的登录坐标设定的基准坐标、建筑物坐标数据和由位置信息O92取得的位置信息、由朝向信息O89取得的信息,来修正本移动设备O60的当前的位置信息。
接着,说明在第1服务器O101中登录RF-IDO50的制品信息的次序。
如果用移动设备O60接触在RF-IDO50上而成为能够近距离无线通信的状态,则通过来自移动设备O60的供电,RF-IDO50动作。
RF-IDO50如果被供电,则将存储的制品IDO51、1服务器URL、服务IDO53和精度识别符O54的信息调制,向移动设备O60发送。
移动设备O60如果通过天线O61接收到制品IDO51、第1服务器URL、服务IDO53和精度识别符O54,则用RF-ID读写器O62解调。
URLO76提取第1服务器URL,向通信部O72传递第1服务器URL 的信息。
RF-ID存储部O74存储制品IDO51和服务IDO53的信息。
坐标精度识别信息O63提取精度识别符,传递给判断部O83。
RF-ID检测部O75将通知从RF-IDO50接收到信息的情况的触发事件向坐标信息送出部O79和基准坐标O84传送。
坐标信息送出部O79如果接受到触发事件,则将从位置信息输出部 O85接受到的移动设备O60的位置信息递交给通信部O72。
这里,对位置信息输出部O85输出的移动设备O60的位置信息进行说明。
首先,向绝对坐标运算部O107输入将由角速度传感器O95~O97计测的结果用积分器O105积分后的结果、以及将由加速度传感器O98~O100 计测的结果用积分器O106积分的结果。在绝对坐标运算部O107中,使用保持有使用卫星用天线O90由位置信息运算部O91运算的结果的位置信息 O92的信息和保持有磁罗盘O88表示的方位的结果的朝向信息O89的信息对从积分器O105、O106输入的结果用朝向信息修正部O94和位置信息修正部O93进行修正。
接着,绝对坐标运算部O107将修正后的绝对坐标运算部O107朝向信息O87和位置信息O86输出。位置信息输出部O85用来自朝向信息O87 和位置信息O86的信息制作位置信息。
通过以上的次序,移动设备O60制作位置信息。
接着,程序执行部O65将存储在RF-ID存储部O74中的制品ID、服务ID传递给通信部O72。
通信部O72制作在信息中包括来自坐标信息送出部O79的位置信息和来自程序执行部O65的制品ID、服务ID的数据,将从URLO76接受到的第1服务器的URL设定到数据的地址中,传递给发送部O70。发送部O70 将数据调制,经由通信天线O68向第1服务器O101发送。
第1服务器如果从移动设备O60接收到数据,则将数据解调。
在登录坐标数据O102中,将移动设备O60作为母机,将RF-IDO50 作为子机,对于作为母机的移动设备O60,将作为子机的RF-IDO50的制品IDO51、服务IDO53和移动设备O60取得RF-IDO50的信息时的位置信息建立联系而管理。
接着,对由移动设备O60制作搭载RF-IDO10、并且已由移动设备 O60登录到第1服务器O101中的制品的3D地图的次序进行说明。
图168是表示本实施方式的RF-IDO50搭载的制品的配置的一例的图。
在1层的起居室中配置有电视机O50A、BD记录机O50B和空调O50C,在1层的日式房间中配置有空调O50D,在2层中配置有电视机O50E和空调O50F。在全部制品中搭载有RF-IDO50。此外,假设在上述的第1服务器O101中,在将RF-IDO50的制品信息登录的步骤中,全部制品都使用移动设备O60登录在第1服务器O101的登录坐标数据中。
首先,移动设备O60的通信部O72制作对第1服务器O101请求由移动设备O60登录的制品的信息的制品信息请求数据。
发送部O70对制品信息请求数据进行调制,经由通信天线O68向第1 服务器O101发送。
第1服务器O101如果接收到制品信息请求数据,则制作包括将移动设备O60作为母机而建立联系管理的子机的制品信息的制品信息应答数据,向移动设备O60发送。这里,在制品信息应答数据中,包括电视机O50A、 BD记录机O50B、空调O50C、空调O50D、电视机O50E、空调O50F的制品IDO51、服务ID和位置信息。
接着,第1服务器O101对第2服务器O103也发送与制品信息应答数据相同的信息。
在第2服务器O103中,从包含在制品信息应答数据中的各制品的位置信息中提取包括处于与建筑物坐标数据库O104中相同的位置的建筑物的位置(坐标)信息的图像数据。图169是从建筑物坐标数据库O104提取的建筑物坐标数据。包含在建筑物的平面布置的图像和位置信息中。
第2服务器O103将所提取的建筑物坐标数据向移动设备O60发送。
移动设备O60的接收部O71如果经由通信天线O68接收制品信息应答数据,则将其解调,向通信部O72递交。
通信部O72将数据的内容向程序执行部O65递交。
程序执行部O65根据作为制品信息应答数据的内容的各制品的位置信息制作图170所示那样的制品的3D地图的图像数据。是基于各制品的位置信息映射到坐标上、此外通过按照制品而不同的图标使用户一目了然的3D 地图。
程序执行部O65将制作出的图像数据递交给数据处理部O66。
数据处理部O66将图像数据暂时存储到存储器部O67中。
显示部O68d显示存储在存储器部O67中的图169所示的制品的3D地图的图像数据。
接着,移动设备O60的接收部O71如果经由通信天线O68接收到来自第2服务器O103的建筑物坐标数据,则将其解调而递交给建筑物坐标数据输出部O81。
建筑物坐标数据输出部O81将建筑物坐标数据解析,递交给显示部 O68d。显示部O68d显示将图169的图像数据与已经显示的图170的图像数据组合的图170所示的制品的3D地图的图像数据。
如以上这样,能够对拥有移动设备O60的用户一目了然的制品的3D 地图。
接着,对由移动设备O60使用建筑物坐标数据修正移动设备O60的位置信息的次序进行说明。
这里,以在第1服务器O101中登录图168的空调O50D的制品信息的情况为例进行说明。
另外,与到第1服务器O101从移动设备O60接收在信息中包含有制品ID、服务ID的数据为止的上述次序是同样的,所以省略。
第1服务器O101如果取得空调O50D的制品信息,则将所取得的空调 O50D的位置信息向第2服务器O103发送。
第2服务器O103从建筑物坐标数据库O104提取对应于空调O50D的位置信息的图169的建筑物坐标数据向第1服务器发送。
第1服务器在登录的制品是空调等固定在墙壁上的制品的情况下将建筑物坐标数据与空调的位置信息比较,在空调的位置信息不接近于墙壁的情况下将建筑物坐标数据向移动设备O60发送。
移动设备O60的接收部O71如果接收建筑物坐标数据则将其解调,向建筑物坐标数据输出部O81递交。建筑物坐标数据输出部O81根据建筑物坐标数据和空调的位置信息决定应修正的位置信息,向位置信息修正部 O93递交。
位置信息修正部O93基于从建筑物坐标数据输出部O81接受到的位置信息将当前的移动设备的位置修正。
接着,移动设备O60以修正后的当前位置的信息向第1服务器O101 进行空调O50D的登录。
如以上这样,将建筑物坐标数据库的位置信息与由移动设备O60测量的位置信息比较,能够判断由移动设备O60测量的位置信息存在偏差,修正移动设备O60的位置信息。
另外,在上述说明中,第1服务器O101从第2服务器O103取得建筑物坐标数据而进行判断,但并不限定于此。例如,也可以是移动设备O60 在发送向第1服务器O101登录的数据之前,移动设备O60从第2服务器 O103取得建筑物坐标数据,并将空调O50D与建筑物坐标数据比较来判断修正的需要与否。
接着,对由移动设备O60使用精度识别符修正移动设备O60的位置信息的次序进行说明。
这里,以移动设备O60接触在第1服务器O101中已登录有制品信息的图168的空调O50C上的情况为例进行说明。
移动设备O60如果用天线O61接收空调O50C的RF-IDO50的制品 IDO51、第1服务器URL、服务IDO53和精度识别符O54,则用RF-ID 读写器O62解调。
移动设备O60由于在该时刻不知道在第1服务器O101中登录有空调 O50C的制品信息,所以以上述的商品登录的次序向第1服务器O101发送在信息中包括位置信息、制品ID和服务ID的数据。
第1服务器如果从移动设备O60接收到数据,则将数据解调。
在登录坐标数据O102中,如果判断为空调O50C是商品已登录,则制作包括登录坐标数据O102的空调O50C的位置信息的数据,向移动设备 O60发送。
移动设备O60的接收部O71如果经由通信天线O68接收到空调O50C 的位置信息,则将其解调,向登录坐标O82递交。
登录坐标O82如果从包括空调O50C的位置信息的数据中提取位置信息,则递交给判断部O83。
判断部O83参照从坐标精度识别信息O63接受到的RF-IDO50的精度识别符O54,判断是否将从登录坐标O82接受到的位置信息作为基准坐标。
在图172中表示各精度识别符的判断部O83的处理。
精度识别符预先如图172所示那样将按照制品而不同的精度识别符 O54设定在RF-IDO50中。
这里,由于是空调O50C的精度识别符O54,所以设定为“高”。判断部O83判断为进行移动设备O60的位置修正,将从登录坐标O82接受到的位置信息向基准坐标O84递交。
这里,由于是精度识别符O54,所以在“低”的情况下,移动设备O60 判断为不需要位置信息的修正,将判断结果向第1服务器O101通知,在第 1服务器中,将新的空调O50C的位置信息存储到登录坐标数据中,结束处理。
基准坐标O84如果从RF-ID检测部O75接受到触发事件,则将从登录坐标O82接受到的位置信息向位置信息修正部O93递交。
位置信息修正部O93基于从基准坐标O84接受到的位置信息将当前的移动设备的位置修正。
接着,移动设备O60将位置信息已完成的情况向第1服务器O101通知,结束处理。
如以上这样,将建筑物坐标数据库的位置信息与由移动设备O60测量的位置信息比较,能够判断由移动设备O60测量的位置信息偏差而将移动设备O60的位置信息修正,能够避免不需要的位置信息的更新。
此外,坐标的精度较高的组通过设定一旦设置就不变更设置场所的制品,提高精度的可靠性。
另外,即使是精度较高的组,也可以在位置信息偏差预先设定的次数偏差的情况下,不修正移动设备O60的位置信息,而修正已登录在登录坐标数据O102中的的位置信息。
另外,在上述说明中,在移动设备O60中使用精度识别符进行修正的判断,但也可以对第1服务器O101发送精度识别符、由第1服务器O101 进行修正的判断。
接着,说明由移动设备O60将制品的位置信息用相对位置管理的次序。
这里,以最初登录的电视机O50A的位置信息为基准点,制作之后进行商品登录的制品即BD记录机O50B的相对的位置信息。
首先,移动设备O60如果由天线O61接收到电视机O50A的RF-IDO50 的制品IDO51、第1服务器URL、服务IDO53和精度识别符O54,则用 RF-ID读写器O62解调。移动设备O60的坐标信息送出部O79将检测到 RF-IDO50时的位置信息向记录部O80送出。
记录部O80如果接受到位置信息,则存储位置信息。
然后,移动设备O60按照上述的制品登录的次序,在第1服务器O101 中登录电视机O50A的制品信息。
接着,移动设备进行BD记录机O50B的制品登录。
首先,移动设备O60如果由天线O61接收到BD记录机O50B的RF -IDO50的制品IDO51、第1服务器URL、服务IDO53和精度识别符O54,则用RF-ID读写器O62解调。
移动设备O60的坐标信息送出部O79将检测到BD记录机O50B的RF -IDO50时的位置信息向记录部O80和相对位置运算部O78送出。
记录部O80由于在位置信息存储部O73中存储有电视机O50A的位置信息,所以不记录BD记录机O50B的位置信息。
相对位置运算部O78如果从坐标信息送出部O79接受到位置信息,则经由再生部O77取得存储在位置信息存储部O73中的电视机O50A的位置信息。
接着,相对位置运算部O78以从再生部O77取得的电视机O50A的位置信息为基准计算BD记录机O50B的相对的位置信息,将计算出的结果存储到位置信息记录部中。
通过以上的次序,能够求出以某个特定的制品的位置为基准的相对的位置信息。
另外,在上述说明中,由移动设备O60的位置信息存储部O73存储相对位置信息,但并不限定于此。移动设备O60也可以将相对位置信息向第1服务器O101发送、由登录坐标数据O102管理。
另外,在上述说明中,将最初制品登录的电视机O50A的位置信息设为基准位置,但并不限定于此。
例如,也可以将预先由用户设定的位置作为基准点。例如,也可以是建筑物的门厅的位置等。此外,在移动设备O60是电视机的遥控器终端的情况下,也可以将对应的电视机的位置作为基准点。
在图173和图174中表示本实施方式的3D地图的处理流程的一例。
另外,在本实施方式中,移动设备O60的位置信息存储部O73存储有相对的位置信息,但并不限定于此。例如,移动设备O60的坐标信息送出部O79总是将移动设备O60测量的位置信息向记录部O80传送,记录部 O80将位置信息记录到位置信息存储部O73中。位置信息存储部O73储存本移动设备O60的位置信息。在此情况下,程序执行部O65根据储存在位置信息存储部O73中的位置信息制作本移动设备O60的轨跡信息。由此,可以根据轨跡信息推测本移动设备O60的行动。
另外,在本实施方式中,按照图172的精度识别符的两种的分类进行了判断部O83的处理,但并不限定于此。例如,也可以设置两种以上的制品分类,定义按照分类而不同的位置信息的偏差的大小的阈值,来判断修正的需要与否。
另外,也可以将本实施例与其他实施方式组合。例如,也可以将实施方式18的通信装置102的功能装入到搭载有RF-IDO50的制品中,当共有家庭ID时也可以共有3D地图。在此情况下,预先从移动设备O60用 NFC通信功能取得3D地图。
另外,在本实施方式中,搭载有电视机、BD记录机、空调等的RF- IDO50,但并不限定于此。图176由搭载有RF-IDO50的制品O50G~O50N 构成。此外,制品O50G~O50N搭载特定小功率无线通信设备(例如 Zigbee),在各制品间在能够接收电波的范围中能够直接通信。此外,假设制品O50G~O50N经由RF-IDO50从移动设备O60取得由制品的制品 O50G~O50N构成的制品配置的3D地图。此外,作为别的方法,也可以是制品O50G~O50N保持通信天线O68、经由因特网取得制品配置的3D地图。
这里,对制品O50H向制品O50K以特定小功率无线通信发送数据的情况进行说明。特定小功率无线通信设备通常从节电的观点出发而以休眠模式动作。休眠模式是电源定期地进行ON、OFF的切换的模式。此外,各制品的ON、OFF切换定时取同步。制品O50H的特定小功率无线通信设备如果发生发送的数据则切换为唤醒模式。唤醒模式是总是使电源为ON的模式。制品O50H参照预先取得的制品O50G~O50N的制品配置的3D地图。制品O50H从制品配置的3D地图中调查位于本机与制品O50K之间的制品。这里,根据3D地图的信息,使制品O50J为进行数据中继的中继制品。
制品O50H对制品O50J进行切换为唤醒模式的指示。制品O50H对制品O50J发送以制品O50H为目的地的数据。制品O50J如果接收到以制品 O50H为目的地的数据,则向制品O50H转送,然后切换为休眠模式。
如以上这样,制品O50H使用3D地图决定发送数据的情况下的中继制品,仅将所决定的制品O50J切换为唤醒模式。由此,不需要将不需要的其他制品切换为唤醒模式。在没有3D地图的情况下,制品O50H需要为了确定到制品O50K的路径而将全制品切换为唤醒模式切换来进行路径探索。
此外,上述的各实施方式的结构典型地也可以由作为集成电路的LSI (LargeScale Integration)实现。它们既可以单独地1芯片化,也可以包括全部的结构或一部分的结构而1芯片化。集成电路根据集成度的差异,也有称作IC、系统LSI、超级LSI、超大规模LSI等的情况。此外,集成电路的方法并不限定于LSI,也可以使用专用电路或通用处理器实现。进而,也可以利用FPGA(Field Programmable Gate Array)、或能够再构成LSI内部的电路单元的连接或设定的可重构处理器。
进而,如果通过半导体技术的进步、或派生的别的技术出现了代替当前的半导体技术的集成电路化的技术,则当然也可以使用该技术进行功能块的集成化。例如可以考虑生物技术的应用等。
(实施方式20)
对本发明的实施方式20进行说明。
图176是实施方式20的设备连接设定的网络环境图。如图176所示,在本实施方式中,设想各种家电设备通过家电控制装置5000和无线通信设备连接的家庭网络环境。这里,所谓各种家电设备,例如是电视机N10A、 BD记录机N10B、空调N10C、空调N10D、火灾报警器N10E、空调N10F、火灾报警器N10G、太阳能电池面板H10H、电视机N10I、FF制暖机10K。
图177是实施方式20的设备的网络模组结构图。图177表示搭载在图 176所示的各家电设备中的网络模组的结构。该网络模组至少具备NFC等的能够进行近距离无线通信的第1无线通信部5011、以及能够进行ZigBee 等的近距离无线通信的第2无线通信部5012。第1无线通信部5011具有天线部、接口部、电源部、通信部、时钟部及非易失性存储器等,第2无线通信部5012具有天线部、无线通信部及接口等。另外,这些功能与上述是同样的,所以省略说明。此外,该网络模组也可以具备CPU、热敏电阻、电源部等。
图178是实施方式20的家电控制装置的功能块图。家电控制装置5000 也与上述各家电设备同样,至少具备第1无线通信部5021和第2无线通信部5022。此外,该家电控制装置5000保持与例如制造商A、制造商B及制造商C等多个制造商或不同的多个设备对应的协议。
这是因为,各家电设备即使在物理层5023、MAC层5024中使用标准化的协议的情况下,在其上位层5025中也有分别使用不同的协议的情况。例如,是通过NFC认证的设备5026、通过按钮认证的设备5027等。此外,也有各家电设备搭载有BlueTooth或无线LAN(802.11)等的多个近距离无线方式的情况。在此情况下,物理层或MAC层也不同,但在上位层不同的情况下也同样动作。因此,家电控制装置5000只要如上述那样保持有对应的协议就能够对应。
图179是用于说明实施方式20的设置太阳能电池面板时的用户的动作的图。本实施方式的太阳能电池面板N10H由多个面板构成,各个面板能够单独与家电控制装置5000通信。这里,所谓用户,是指太阳能电池面板 N10H的设置人员、家电控制装置5000的设置人员等、进行家电控制装置 5000与太阳能电池面板N10H的通信连接设定的人。另外,以下将在实施方式18中说明的通信装置102称作移动终端而进行说明。
如图179(a)所示,首先,用户在家电控制装置5000附近,将移动终端设为设备连接模式,接触在家电控制装置5000上(步骤圈1)。另外,在本说明书中,所谓接触,是指建立近距离通信、通过近距离无线进行通信。如果用户将移动终端接触在家电控制装置5000上,则移动终端建立近距离通信,从家电控制装置5000取得通信ID(MAC地址等)、设备ID(制造号码等)、可利用的通信协议、与家电控制装置5000连接的服务器的信息、以及无线通信路径的加密密钥等(图179(a))。这里,通信ID为了家电设备连接到家电控制装置上而与家电设备交接。设备ID是移动终端为了向服务器进行询问而需要的ID。
这样,家电控制装置5000和移动终端通过经由近距离无线相互交换信息,在一定时间中经由服务器建立安全的路径。这里,所谓安全的路径,是包括蜂窝等的别的无线路径的加密通信路径。经由服务器的安全的路径在家电控制装置5000与移动终端之间用于向家电设备递交的秘密密钥的更新。
太阳能电池面板N10H等处于距离家电控制装置5000较远处的设备 (家电设备)通过在与家电控制装置5000和移动终端之间交接长期间有效的秘密密钥而能够进行配对设定。但是,如果以例如一天为单位发行有效的秘密密钥则安全强度下降。此外,在如图179所示的太阳能电池面板 N10H那样想要对从家电控制装置5000看处于远处的设备(家电设备)连续进行设定的情况下,安全强度更低。但是,在本实施方式中,由于仅通过按下移动终端的按钮就能够进行新的秘密密钥的发行,所以能够缩短秘密密钥的有效时间而维持安全强度。此外,通过一边用移动终端新发行秘密密钥、一边接触在家电设备上来交接秘密密钥,能够连续在多个远处的家电设备和家电控制装置间进行认证。
另外,本方式的用途并不限于宅内的无线通信的配对用。例如,也可以在将自家的家电设备与亲戚、朋友家的家电设备配对时使用。由此,即使不是自家,也能够容易地进行配对处理。
此外,移动终端在移动中能够通过6轴传感器或GPS取得位置信息。因此,用户通过将移动终端接触在家电控制装置5000上(步骤圈1)、移动到太阳能电池面板N10H(步骤圈2~6)后、将接触在太阳能电池面板N10H 上的瞬间(步骤圈7)的移动终端的位置信息向服务器传送,能够在服务器中进行家电控制装置5000(以下也称作SEG(Smart EnergyGateway))和太阳能电池面板N10H的3维的相对的位置信息的管理。
图180是实施方式20的太阳能电池面板设置时的移动终端画面变迁图。在图180中,表示用户使移动终端接触在太阳能电池面板N10H的第1 片面板上时的移动终端的画面变迁图的例子。
如图180所示,首先,当用户使移动终端接触在太阳能电池面板N10H 的第1个面板(太阳能电池面板No1)上时(步骤圈1),移动终端开始第 1个面板(太阳能电池面板No1)与家电控制装置5000(SEG)或服务器的连接。具体而言,移动终端从第1个面板(太阳能电池面板No1)取得该设备ID及通信协议等的信息或太阳能电池面板的制造商的制品的服务器地址。并且,移动终端进行是否能够与家电控制装置通信的判断。另外,该判断既可以向服务器发送而由服务器进行,也可以由移动终端进行。移动终端在所取得的通信协议是可通信的协议的情况下,使用通信ID进行连接设定。另一方面,在所取得的通信协议不是可通信的协议的情况下,移动终端也可以从服务器下载固件、使用近距离无线进行固件更新,也可以从移动终端对家电控制装置5000(SEG)发出固件更新的指示。
这样,移动终端确定第1个面板(太阳能电池面板No1)与家电控制设备5000(SEG)或服务器的认证。例如,如图180所示,第1个面板(太阳能电池面板No1)通过取得网络ID(例如0019),确定与家电控制设备 5000(SEG)或服务器的认证。
另外,在太阳能电池面板是不能通过近距离无线进行自动设定的设备 (家电设备)的情况下,通过用户在用手动进行设定后、从家电控制装置 5000发送来设定完成的信号,能够用移动终端确认设定完成。此外,在太阳能电池面板N10H是通过按钮的同时按下而设定的设备(家电设备)的情况下,通过使移动终端的设定按钮和家电控制装置5000的按钮通过安全路径联动,能够进行通过按钮同时按下的设定。各个方式是根据家电控制装置5000(SEG)和家电设备的两者的种类自动地下载到移动终端中的。由此,用户能够自动地以最佳的方式立即完成设定。
图181是实施方式20的太阳能电池面板连续认证时的移动终端画面变迁图。第2个以后的太阳能电池面板也基本上能够以与第1个太阳能电池面板同样的方式认证,例如能够通过再发行来秘密密钥而连续进行认证。此外,通过将各太阳能电池面板间的相对的位置登录到服务器中,能够将能够一目了然地确认各个面板的情况的影像经由控制器的画面或服务器显示在TV的画面上。
图182是实施方式20的太阳能电池面板发电量检查时的移动终端画面图。如图182所示,在移动终端中,能够将太阳能电池面板的发电状况用画面表示。因而,通过使移动终端将太阳能电池面板N10H的各自的位置和对应于它的面板的发电量同时或交替显示,能够确认用哪个面板进行了多少的发电。
图183是实施方式20的太阳能电池面板故障检查时的移动终端画面图。例如如果在使移动终端表示太阳能电池面板的温度状况,则一般在太阳能电池面板故障的情况下温度状况变为异常,所以通过将该状况与面板的位置信息组合,立即知道故障的面板。由此,能够迅速地进行故障的面板的修理。此外,通过经由服务器对修理人员通知等,也能够自动地进行修理委托。
图184~图188是用于说明太阳能电池面板设置时的移动终端的动作的流程图。
首先,在太阳能电池面板设置时,用户将移动终端设为设备连接模式 (步骤S5081)。
接着,移动终端显示“请接触(接近)移动终端”(步骤S5082),开始近距离无线下的轮询。并且,用户使移动终端接触在家电控制装置5000 (母机或太阳能电池控制器)上。另外,移动终端在被用户接触在家电控制装置5000上之前反复进行轮询,但不由用户接触在家电控制装置5000 上,如果经过某一定的时间则超时。此外,家电控制装置5000成为休眠模式,在一部分的电路没有启动的情况下被接触在移动终端上而启动。
接着,移动终端进入到“进行与其他设备的连接的连接设定”的模式,从服务器下载对应于家电控制装置的连接设定程序。
具体而言,移动终端1)进行加密通信,2)通过近距离无线通信(NFC) 等取得家电控制装置5000的设备ID、通信ID(MAC地址、NFC-ID等)、可使用的通信协议、其版本和服务器地址。接着,移动终端与所取得的服务器地址的服务器连接,进行加密通信。即,移动终端与服务器连接,进入到“进行与其他设备的连接的连接设定”的模式,从服务器下载对应于家电控制装置5000的连接设定程序。另外,在通信协议的版本较旧的情况下,从服务器下载新的版本的通信协议,进行版本升级。
接着,移动终端显示“请在1小时以内接触在想要连接的设备上。”(步骤S5086)。即,在步骤S5085中进入的设定模式在一定时间中是有效的,所以移动终端进行请在其一定时间内接触的显示。
接着,移动终端测量与家电控制装置(SEG)的距离(S5087)。
具体而言,用户接受S5086中的显示,将移动终端拿向想要连接的设备处。此时,移动终端使用角速度传感器、加速度传感器、磁传感器及GPS 等,在3维空间上测量相对于家电控制装置5000的位置的位置(相对位置),运算移动终端的3D的移动轨跡、移动后的坐标。由此,移动终端能够测量与家电控制装置(SEG)的距离。另外,该运算也可以不是移动终端、而由服务器进行。在此情况下,移动终端将测量出的数据向服务器传送。并且,在服务器中,只要使用该数据运算移动终端的3D的移动轨跡、移动后的坐标,测量家电控制装置(SEG)与移动终端的距离就可以。
这里,移动终端由用户判断为移动时间或距离较长(步骤S5088)。在较短的情况下(步骤S5088的No),移动终端在接触在家电设备上时,将从家电控制装置5000发行的秘密密钥递交给家电设备。
另一方面,在时间较长的情况下(步骤S5088的Yes),移动终端先将设定模式设为OFF(步骤S5089)。并且,在移动终端的位置信息与设备的位置信息变近的情况下,将设定模式再次设为ON(步骤S5091),与服务器连接,使其对家电控制装置5000再发行秘密密钥。
接着,移动终端与家电控制装置5000相互进行通信,记录递交了设定信息的终端和实际家电控制装置5000完成设定的数量以及对其分别分配的号码(步骤S5092、步骤S5093)。由此,家电控制装置5000能够在将多个终端认证后确认是否没有发生不协调。
接着,与第n个设备(太阳能电池面板等)进行近距离无线通信(步骤S5094)。具体而言,用户使移动终端的天线部接触在第n个设备(太阳能电池面板等)的天线部上,与第n个设备(太阳能电池面板等)进行近距离无线通信。
于是,移动终端经由NFC将设备的存储器之中的信息读出(步骤 S5095)。具体而言,移动终端从设备的存储器中读出NFC-ID、MAC地址、制造商ID、无线通信的规格、版本、协议、制造商名、制品名、型号、错误或履历。另外,移动终端也可以将所读出的信息向服务器传送。
接着,移动终端检查家电控制装置5000和第n个设备(太阳能电池面板等)能否进行通信(步骤S5096)。另外,在步骤S5095中,在移动终端将读出的信息向服务器传送的情况下,在服务器侧也可以检查家电控制装置5000与第n个设备(太阳能电池面板等)是否能够通信。
接着,移动终端判断家电控制装置与第n个设备的通信协议是否不同 (步骤S5097)。
在判断为通信协议相同的情况下(步骤S5097的No),移动终端再判断第n个设备的通信协议的版本是否较旧(步骤S5098)。并且,在判断为第n个设备的通信协议较旧的情况下(步骤S5098的Yes),移动终端从服务器下载新的版本的协议,通过近距离无线通信将设备的协议进行版本升级(步骤S5099)。
另一方面,在步骤S5097中,在判断为通信协议不同的情况下(步骤 S5097的Yes),移动终端从服务器下载与设备或家电控制装置5000对应的通信协议数据(步骤S5101),将该通信协议数据安装到家电控制设备中。
具体而言,移动终端从服务器下载对应于第n个设备的通信协议数据,由用户将移动终端接触在家电控制装置5000上,经由NFC经由将能够与第N个设备通信的新的协议安装到家电控制装置中。这里,移动终端也可以经由无线LAN等的因特网安装到家电控制装置中。
另外,在步骤S5097中,移动终端也可以通过对家电控制装置5000发送使其下载与上述的设备对应的通信协议的数据的命令、将能够与第n个设备通信的新的协议安装到家电控制装置中。
接着,移动终端判断在家电控制装置5000中能够与第n个设备通信的新的协议的安装是否完成(步骤S5102)。
在从下载到安装的过程中发生了错误的情况下等、安装没有完成的情况下(步骤S5102的No),重复进行步骤S5101与步骤S5102的动作。另一方面,在安装完成的情况下(步骤S5102的Yes),用户输入(按下)移动终端的“开始家电控制装置与设备的连接”的开关(按钮)。
接着,移动终端检测“开始家电控制装置与设备的连接”的开关(按钮)被输入(按下)(步骤S5103)。
接着,移动终端发行秘密密钥(时间限定型)(步骤S5104)。另外,发行该秘密密钥(时间限定型)并不限定于移动终端。也可以是家电控制装置(SEG)或服务器发行。
接着,移动终端将发行的秘密密钥向家电控制装置(SEG)传送(步骤S5105)。另外,移动终端也可以除了秘密密钥以外还将设备的网络ID 或MAC地址向家电控制装置(SEG)传送。典型地,移动终端将秘密密钥等经由因特网的服务器或经由无线LAN等的内部网向家电控制装置(SEG) 传送。
接着,移动终端将秘密密钥和发送命令用NFC向设备传送(步骤 S5106)。
这里,移动终端与秘密密钥和发送命令一起,将家电控制装置的网络 ID或MAC地址用NFC向设备传送。
图187表示家电控制装置与第n个设备相互认证时的动作。
首先,移动终端判断第n个设备(太阳能电池面板等)与家电控制装置(SEG)是否经由近距离无线(ZigBee等)直接进行通信(步骤S5110)。
在判断为直接进行通信的情况下(步骤S5110的Yes),由此移动终端根据第n个设备与家电控制装置的位置间的距离L改变无线的电波强度,提高安全并进行节电(步骤S5111)。另外,在距离L或障碍较大的情况下,进行对用户推荐经由后述的中继器与家电控制装置(SEG)通信的画面显示。
接着,家电控制装置和第n个设备进行相互认证(步骤S5112)。
接着,家电控制装置经由服务器向移动终端发送认证结果(步骤 S5113)。这里,用户也可以通过将移动终端接触在第n个设备上、移动终端从第n个设备得到认证结果(步骤S5115)。在步骤S5115中,也可以通过使认证结果在第n个设备上通过光的发光等显示、或在第n个设备上通过光等显示,使用户掌握认证结果。
另外,在认证失败的情况下,从密钥发行起重新进行(步骤S5114的 No、步骤S5116的No)。
接着,确认第n个设备的连接认证即第n个设备与家电控制装置的连接认证是否已完成(步骤S5117)。
接着,确认第n个设备是否是最后的设备(步骤S5118)。
如果所有的设备的连接认证结束(步骤S5118的Yes),则移动终端在对服务器通知后,将连接模式解除,结束处理。
在不是那样的情况下(步骤S5118的No),为了进行下个(第n+1个) 设备的连接认证,移动终端进行图188所示的动作。
即,首先,将移动终端向下个(第n+1个)设备的场所移动(步骤 S5119),并且取得本终端(移动终端)的物理的相对或绝对的3维的位置信息(步骤S5121)。
并且,移动终端将2维或3维显示了第1个~第n+1个设备的2维或 3维的位置信息而成的图像信息或坐标信息显示在画面上(步骤S5122)。
这样,移动终端在对多个设备进行设定的情况下,将多个设备的位置信息显示在画面上。另外,移动终端也可以在S5121中将移动终端取得的物理的相对或绝对的3维的位置信息向服务器传送。在此情况下,在服务器侧映射第n个和第n+1个设备(太阳能电池面板等)的3维空间上的配置关系。并且,服务器也可以通过将2维或3维显示了第1个~第n+1个设备的2维或3维的位置信息而成的图像信息或坐标信息向移动终端传送,移动终端将它们显示在画面上。
并且,移动终端在图像信息或坐标信息的画面显示完成的情况下(步骤S5123的Yes),回到图185的S5093而重复处理。另外,移动终端在画面显示没有完成的情况下(步骤S5123的No),再次重复从步骤S5121起的处理。
图189是用于说明本实施方式的太阳能电池面板的设置次序的图。如果太阳能电池面板被照上太阳光,则产生直流的高功率,所以发生电弧放电,是危险的。因此,优选的是在设置前的状态下在太阳能电池面板上粘贴遮光片5202、使其成为不能发电的状态。进而,在通信设定完成之前为了安全,优选的是粘贴着遮光片的状态。但是,在粘贴着遮光片的状态下难以判别在太阳能电池面板的哪里存在通信用IC。所以,在遮光片的与近距离无线的天线部相同的地方印刷天线部标记,在设定时接触在该标记上,在设定完成后将遮光片剥离。通过这样,能够在确保安全性的同时进行通过接触的通信设定。
具体而言,首先,将太阳能电池面板的第n个面板的遮光片剥离(步骤S5201f),检查第n个面板是否正常(步骤S5201g)。更具体地讲,通过使第n个面板的电压、电流及温度从通信IC5203e发送并由移动终端或控制器5203c接收来检查。例如,通过控制器5203c检查总发电量,能够检查第n个面板是否是正常的。并且,将检查结果从控制器5203c经由因特网或内部网向移动终端传送。
这样,能够对太阳能电池面板逐片检查面板是否正常。
这里,通信用IC5203e如图189所示,搭载有例如ZigBee等的无线IC 和NFC的通信IC5203f。通信用IC5203e与外部仅电源线5203a的连接线露出,其他部分被遮蔽。因此,寿命较长,能够应对30年左右的寿命要求。此外,上述家电控制设备等的控制器5203c接受来自服务器5203d的指令,将电源5203b在1小时中几次在几十秒期间中,间歇地施加电压,使占空比成为1/100左右。通过这样,搭载在太阳能电池面板中的通信用IC的劣化不怎么发展,与总是施加电压的方式相比,具有能够确保较长的寿命的效果。
接着,对于在图186的步骤S5097中家电控制装置(SEG)与设备的制造商或协议不同的情况下的处理的一例,使用图190进行说明。
图190是表示在家电控制装置(SEG)与设备的制造商及协议不同的情况下用于设备和家电控制装置(SEG)连接的次序的流程图。
另外,该家电控制装置(SEG)也称作控制器。
首先,在步骤S5201a中,将移动终端设定为读取模式。
接着,在步骤S5201b中,将移动终端接触在家电控制装置(SEG)上,与家电控制装置(SEG)建立近距离无线通信。
接着,在步骤S5201c中,移动终端读取例如制造商名、设备ID、制品号码、服务器地址等家电控制装置(SEG)的数据。
接着,在步骤S5201d中,移动终端判断是否从家电控制装置(SEG) 得到了服务器地址,在Yes的情况下向步骤S5201e前进。
接着,在步骤S5201e中,移动终端对该服务器地址访问,在步骤5201f 中连接,在连接成功的情况下(步骤S5201f的Yes),向图188的步骤S5201i 前进。
另一方面,在步骤S5021d或步骤S5201f中是No的情况下,前进到步骤S5201g。即,移动终端在步骤S5201g中对家电控制装置(SEG)的制造商或品号的服务器地址访问。
接着,在步骤S5201h中,移动终端在菜单画面上显示家电控制装置 (SEG)的制造商、品号。
并且,用户在菜单画面上选择该家电控制装置(SEG)的制造商、品号。
移动终端受理用户的选择,向图191的步骤S5201i前进。
接着,使用图191对家电控制装置(SEG)的软件的版本升级方法进行说明。
首先,在步骤S5201i中,移动终端显示初始菜单。并且,用户选择初始菜单中的、将家电控制装置(SEG)与新的设备(例如第n个太阳能电池面板)连接的菜单。
接着,在步骤S5201k中,移动终端判断是否有家电控制装置(SEG) 的软件或固件的新的版本。
在有家电控制装置(SEG)的软件或固件的新的版本的情况下(步骤 S5201k的Yes),在步骤S5201m中,移动终端从服务器下载新的版本的软件。并且,移动终端在画面上显示用于指示安装开始的“安装”按钮。
接着,在步骤S5201n中,移动终端判断是否选择了“安装”按钮。在选择了“安装”按钮的情况下(步骤S5201n中Yes),在步骤5201p中,移动终端在认证家电控制装置(SEG)和服务器后实施家电控制装置(SEG) 的版本升级。向图192的步骤S5201q前进。另外,实施家电控制装置(SEG) 的版本升级的也可以不是移动终端,而是接受来自移动终端的命令而由家电控制装置(SEG)进行。
另外,在步骤S5201k中为No的情况下,即在没有家电控制装置(SEG) 的软件或固件的新的版本的情况下,或在步骤S5201n中没有选择移动终端的“安装”按钮的情况下,向图193的步骤S5202q前进。
图192是表示对实施方式20的家电控制装置(SEG)安装新的版本的软件的次序的流程图。
首先,在步骤S5201q中,移动终端判断家电控制装置(SEG)是否与服务器连接。并且,在家电控制装置(SEG)与服务器连接的情况下(步骤S5201q中Yes),在步骤5201t中,移动终端与家电控制装置(SEG)和服务器进行认证。
接着,移动终端如果与家电控制装置(SEG)和服务器的认证完成,则在步骤S5202a中,使家电控制装置(SEG)从服务器安装新的版本的软件。
接着,在步骤S5202b中确认其安装是否已完成,在确认了完成的情况下(步骤S5202b的yes),向图193的步骤S5202g前进。另外,在步骤S5202b 中,如果其安装没有完成,则回到步骤S5201t。
另一方面,在步骤S5201q中,在家电控制装置(SEG)没有与服务器连接的情况下(步骤S5201q中No),在步骤S5201r中,移动终端从服务器下载新的版本的软件。
接着,在步骤5201s中确认其下载是否已完成,在确认了完成的情况下(步骤S5201s的Yes),在步骤S5202c中,移动终端显示“请接触在家电控制装置(SEG)上m秒”。
接着,在步骤S5202d中,移动终端判断是否与家电控制装置(SEG) 建立了近距离无线通信。
接着,移动终端在确认了已与家电控制装置(SEG)建立了近距离无线通信的情况下(S5202d的Yes),即在将移动终端接触在家电控制装置 (SEG)的天线部上的情况下,在步骤S5202e中,移动终端判断已与家电控制装置(SEG)建立了近距离无线通信,通过近距离无线通信(直接NFC) 等向家电控制装置(SEG)发送新的版本的软件并使其安装。
另外,移动终端在不能确认与家电控制装置(SEG)建立了近距离无线通信的情况下(S5202d的No),向步骤S5202c返回。
接着,在步骤S5202e中,确认家电控制装置(SEG)是否已完成安装,在确认了完成的情况下(步骤S5202f的yes),向图193的步骤S5202g前进。
另外,在步骤S5201s中,在家电控制装置(SEG)没有完成安装的情况下(步骤S5202f的No),向步骤5202c返回。
接着,使用图193说明家电控制装置(SEG)的软件的版本是最新的状态、并且在家电控制装置(SEG)的位置事前具有连接设备的信息的情况下的流程。
图193是表示实施方式20的用于将家电控制装置(SEG)与连接对象的设备连接的次序的流程图。
首先,在步骤S5202g中,移动终端确认家电控制装置(SEG)是否已连接在服务器上。
在步骤S5202g中为Yes的情况下,在步骤5202h中,移动终端与家电控制装置(SEG)经由服务器连接。另一方面,在步骤S5202g中为No的情况下,在步骤5202i中,移动终端与家电控制装置(SEG)经由例如无线 LAN或ZigBee等的无线的内部网连接。
接着,在步骤S5202j中,在菜单画面等中将移动终端设定为“设备连接模式”。于是,移动终端例如显示“连接设备的制造商名是?”。
接着,在步骤S5202k中,在知道连接的设备(空调、洗涤机、TV、记录机等)的制造商名、型号或制造号码的情况下(步骤S5202k中Yes),用户在移动终端的画面上选择或输入制造商名、品名、型号。
于是,在步骤S5202m中,移动终端将输入的数据向服务器传送。并且,服务器根据从移动终端发送的设备的信息调查设备的通信规格、中间件、应用等的协议信息。
接着,在步骤5202p中,服务器使用家电控制装置(SEG)的通信协议和连接对象的设备的通信协议,确认是否能够进行正常的通信。在Yes 的情况下,向图195的步骤S5203e前进。
另外,在上述步骤S5202k中为No的情况下,向图195的步骤S5203e 前进。此外,在步骤S5202p中,在No的情况下,向图194的步骤S5202q 前进。
接着,说明图194。图194是表示实施方式20的用于将家电控制装置 (SEG)与连接对象的设备连接的次序的流程图。
首先,在步骤S5202q中,服务器搜索新的版本的通信协议(物理层、中间件、应用层),向移动终端或家电控制装置(SEG)传送。
接着,在步骤S5202r中,移动终端显示“下载新的版本的通信协议?”。
接着,在步骤S5202s中,移动终端根据显示在画面上的OK按钮是否被按下,判断是否下载新的版本的通信协议。在Yes的情况下,向步骤 S5202u前进。在No的情况下,向步骤S5202t前进,移动终端显示“不能与该设备通信连接”。
接着,在步骤S5202u中,移动终端判断是否家电控制装置(SEG)与服务器连接、并且通信协议的数据较大。
在步骤S5202u中为Yes的情况下,在步骤S5203a中,移动终端使家电控制装置(SEG)与连接设备的通信开始。具体而言,移动终端向家电控制装置(SEG)直接传送安装命令、加密通信用的密钥、认证数据,家电控制装置(SEG)在服务器设定的时间内从服务器下载连接设备用的通信协议。这样,开始家电控制装置(SEG)与连接设备的通信。
接着,在步骤S5203b中,移动终端判断家电控制装置(SEG)与连接设备的通信是否已成功。在步骤S5203b中通信成功的情况下,向图195的步骤S5203e前进,如果通信不成功,则向步骤S5202r返回。
另一方面,在步骤S5202u中为No的情况下,向步骤S5203c前进。在步骤S5203u中,移动终端在将通信协议下载后,将该通信协议向家电控制装置(SEG)传送、安装。具体而言,移动终端将通信协议先下载,与家电控制装置(SEG)和服务器相互认证后,共有加密密钥。并且,移动终端将下载的通信协议向家电控制装置(SEG)直接通过NFC等通信协议传送,安装到家电控制装置(SEG)中。
接着,在步骤S5203d中,移动终端判断在家电控制装置(SEG)中是否已安装通信协议。如果在步骤5203d中判断为安装成功,则向图195的步骤S5203e前进,如果判断为不成功,则向步骤S5202u返回。
接着,说明图195。图195是表示实施方式20的用于将家电控制装置 (SEG)与连接对象的设备连接的次序的流程图。
首先,在步骤S5203e中,移动终端判断是否由使用者选择了“连接设定新的设备”模式。
在步骤S5203e中,在Yes的情况下,在步骤5203f中,移动终端与家电控制装置(SEG)建立加密通信。具体而言,移动终端被用户接触在家电控制装置(SEG)上,建立移动终端与家电控制装置(SEG)的加密通信。这里,所谓加密通信,是指与因特网或无线LAN等的NFC以外的宅内网络的加密通信。
接着,在步骤S5203g中,移动终端进行“请在n分钟以内向设备处移动”的显示。
接着,在步骤5203h中,操作者(用户)观看移动画面的显示,开始移动。即,移动终端被操作者(用户)开始移动,前进到图196的S5203i。
另外,在步骤S5203e中,在No的情况下,再次尝试步骤S5203e的处理。
接着,使用图196对3D映射进行说明。图196是表示实施方式20的用于将家电控制装置(SEG)与连接对象的设备连接的次序的流程图。
首先,在步骤S5203i中,移动终端得到与家电控制装置(SEG)的相对3D坐标信息。具体而言,移动终端使用角度传感器、地磁传感器及加速度传感器的至少1个,也以家电控制装置(SEG)的位置为基准将移动终端的位置的变化以3维测量。并且,移动终端得到与家电控制装置(SEG) 的相对3D坐标信息。
接着,在步骤S5203j中,移动终端判断是否到达了设备。具体而言,移动终端判断是否到达了例如图176所示的1层的空调、2层的空调、1层的微波炉、洗涤机、TV、记录机等的设备。在步骤S5203j中为Yes的情况下,向步骤S5203k前进,在No的情况下,向步骤S5203i返回。
接着,在步骤S5203k中,操作者(用户)判断在到达的设备中是否具备第1无线部(NFC等)及第1天线部等。在Yes的情况下,向步骤S5203n 前进,接触在设备的第1天线部上,建立移动终端与设备的近距离无线通信。在步骤S5203p中,移动终端将设备的信息读入,向服务器传送。具体而言,移动终端将设备的MAC地址、网络ID读入,向服务器传送。
接着,在步骤S5203g中,移动终端将设备的3D坐标的位置信息向服务器传送。
接着,在步骤S5203r中,移动终端判断设备和家电控制装置(SEG) 的通信协议是否一致。这里,在Yes的情况下向步骤S5203s前进。另一方面,在No的情况下,向步骤S5203z前进,移动终端实施上述那样的家电控制装置(SEG)的通信协议的变更例程,向步骤S5203s前进。
这里,操作者(用户)例如通过按下家电控制装置(SEG)与设备的连接开始按钮,开始连接家电控制装置(SEG)和设备。
接着,在步骤S5203t中,移动终端发行秘密密钥(带时间期限),对设备与发送命令一起使用NFC等的近距离无线通信传送。此时,对家电控制装置(SEG)也同样传送。另外,秘密密钥并不限定于由移动终端发行,也可以由服务器发行。
接着,在步骤S5203u中,移动终端使家电控制装置(SEG)和设备开始认证。这里,如果家电控制装置(SEG)与设备直接进行通信,则移动终端判断为家电控制装置(SEG)与设备开始认证。并且,如果在步骤S5203x 中认证完成,则连接完成。另外,如果在步骤S5203x中认证没有完成,则向步骤S5203n返回。
另外,在步骤S5203k中,在No的情况下(不能进行NFC通信的情况下),向步骤S52031前进,通过用移动终端的条码读取器(或目视)读取,将制造商名、制品名、制品型号、制造号码等的设备的信息输入到移动终端中。接着,在步骤S5203n中,移动终端将被输入的上述数据(设备的信息)向服务器传送,向图197的步骤S5204a前进。
接着,进行图197的说明。图197是表示实施方式20的用于将家电控制装置(SEG)与连接对象的设备连接的次序的流程图。
首先,在步骤S5204a中,服务器根据从移动终端发送的设备的信息调查设备和家电控制装置(SEG)的通信规格、中间件、应用等的协议信息,在步骤S5204b中,使用家电控制装置(SEG)的通信协议和连接对象的设备的通信协议,检查是否能够进行正常的通信。
在步骤S5204b中为Yes的情况下,向图194的步骤S5203c前进。在步骤S5204b中为No的情况下,向步骤S5204c前进,服务器搜索适合于设备的版本的家电控制装置(SEG)用的通信协议(物理层、中间件、应用层)。
接着,在步骤S5204d中,移动终端显示“下载适合于设备的通信协议?”。
接着,在步骤S5204e中,移动终端根据是否将显示在画面上的OK按钮按下,判断是否下载新的版本的通信协议。此时,在Yes的情况下,向图198的步骤S5204g前进,在No的情况下,在步骤S5204f中,移动终端显示“与该设备不能通信”。
接着,说明图198。图198是表示用于将本发明的实施方式20的家电控制装置(SEG)与连接对象的设备连接的次序的流程图。
首先,在步骤S5204g中,移动终端检查家电控制装置(SEG)是否与服务器连接。在Yes的情况下向步骤S5204h前进,移动终端检查是否能够与家电控制装置(SEG)加密通信。具体而言,移动终端检查是否能够与家电控制装置(SEG)通过因特网或经由无线的宅内网络(NFC以外)进行加密通信。
在能够的情况下,向步骤S5204i前进,移动终端将连接设备用的通信协议安装到家电控制装置(SEG)中。具体而言,移动终端经由因特网或无线LAN等的内部网,向家电控制装置(SEG)在时间内发送安装命令、加密通信用的密钥、认证数据。此外,从移动终端、服务器将连接设备用的通信协议下载到家电控制装置(SEG)中。这样,移动终端在家电控制装置(SEG)中安装连接设备用的通信协议。
接着,在步骤S5204j中,移动终端判断是否在家电控制装置(SEG) 中安装有通信协议。如果在步骤S5204中判断安装成功,则向步骤S5204k 前进,设备和家电控制装置(SEG)以最佳的通信协议通过NFC以外进行无线通信,开始认证次序。这里,家电控制装置(SEG)和设备由于能够根据两者的3D坐标和建筑物的3D构造数据计算相互的距离和障碍物,所以根据计算结果以需要的最小限度设定适当的信号输出。
接着,在步骤S5204m中,移动终端将“能够开始连接”或“请在m 秒以内按下OK按钮和设备的连接开始按钮”等、在设备侧显示敦促连接开始指示的画面,向图199的步骤S5204n前进。
另一方面,在步骤S5204g或步骤S5204h中为No的情况下,向步骤 S5205a前进,在步骤S5205a中,移动终端显示“请移动位置,请接触家电控制装置(SEG)”。具体而言,移动终端显示“请移动到家电控制装置(SEG) 的场所,将移动终端接触在家电控制装置(SEG)上”。接着,在步骤S5205b 中,移动终端与家电控制装置(SEG)建立近距离无线通信。具体而言,在操作者(用户)移动后,通过接触在家电控制装置(SEG)上,移动终端与家电控制装置(SEG)建立近距离无线通信。并且,向图194的步骤 S5203c前进。
接着,说明图199。图199是表示实施方式20的用于将家电控制装置 (SEG)与连接对象的设备连接的次序的流程图。
首先,操作者(用户)按下移动终端显示的“OK按钮”。
于是,在步骤S5204p中,移动终端发出命令,使家电控制装置(SEG) 发行秘密密钥,使加密通信继续一定时间。
接着,操作者(用户)将设备侧的“连接开始按钮”按下。
于是,在步骤S5204r中,设备发行秘密密钥(时间限定型),将加密通信继续一定时间。
接着,在步骤S5204s中,移动终端检查家电控制装置(SEG)与设备是否进行了相互认证,在步骤S5204t中,判断相互认证是否成功。
在S5204t中,在相互认证成功的情况下,前进到步骤S5204u中,移动终端在画面上显示“家电控制装置(SEG)与设备的连接完成”。此时,移动终端也可以使设备进行特定的显示等的动作。
另外,在步骤S5204t中为No的情况下,即在相互认证失败的情况下,在步骤S5204x中移动终端显示“连接失败”。
接着,说明图200及图201。图200及图201是表示为了将实施方式 20的家电控制装置(SEG)与连接对象的设备连接而使用中继器的连接次序的流程图。
在步骤S5206a中,移动终端判断想要连接的设备与家电控制装置 (SEG)直接的通信是否困难。具体而言,移动终端连接在例如服务器上,根据服务器或家电控制装置(SEG)想要连接的设备的3D坐标信息和家电控制装置(SEG)的3D坐标信息,通过两者之间的距离及障碍物是否较大,判断两者的直接的通信是否困难。
接着,在步骤S5206a中的判断是Yes的情况下,前进到步骤S5206b 中,移动终端从服务器取得处于两者之间的中继器的位置信息。具体而言,服务器根据保持的中继器的3D坐标信息,检索处于两者(设备与家电控制装置(SEG))之间的中继器(例如PANcoordinator),将检索到的中继器的位置信息向移动终端通知。这样,移动终端从服务器取得处于两者之间的中继器的位置信息。
这里,在需要的情况下,操作者(用户)使移动终端再次接触在该设备上。这样,移动终端获得该设备的MAC地址、网络ID(PAN ID等),通信协议、通信密钥、3D坐标。
接着,在步骤S5206d中,移动终端判断是否拥有家电控制装置(SEG) 的MAC地址、网络ID(PAN ID等)等的网络配置信息。
并且,在步骤S5206d中的判断是Yes的情况下,向图201的步骤S5206f 前进。另一方面,在步骤S5206d中为No的情况下,向步骤S5206e前进,移动终端与家电控制装置(SEG)建立近距离无线通信,获得网络配置信息,向图201的步骤5206f(图198)前进。具体而言,操作者(用户)通过拿着移动终端去往家电控制装置(SEG)的地方并使移动终端接触,建立移动终端与家电控制装置(SEG)的近距离无线通信。并且,移动终端从家电控制装置(SEG)获得其MAC地址、IP地址、网络ID、通信协议、通信密钥、(3D坐标、再次)。并且,向图201的步骤5206f(图198)前进。另外,此时服务器也可以使用各设备、AEG、中继器的3D坐标信息进行网络整体的配置(各子机的MAC地址、子网的网络ID(PAN ID)) 的优化,将该配置信息登录到家电控制装置(SEG)中。
接着,说明图201。
首先,在步骤S5206f中,移动终端与中继器建立近距离无线通信,进行设定,以使设备经由中继器与家电控制装置(SEG)连接。
具体而言,操作者(用户)向Zigbee等的中继器的地方移动,使移动终端接触在中继器上。于是,移动终端与中继器建立近距离无线通信,能够再次获得中继器的位置信息。与此同时,移动终端在服务器等中根据设备、中继器、家电控制装置(SEG)的3D坐标信息、操作者(用户)存在的建筑物的3D坐标,计算最优的上述的网络的配置信息、即作为最优之中的中继器的子网(PAN ID)间的中继点的中继连接方法及拓扑。移动终端将该配置信息经由NFC或经由家电控制装置(SEG)记录。另外,服务器也可以将其记录。
移动终端至少经由NFC将记录命令向中继器传送。在此情况下,移动终端进行设定,以使设备经由中继器与家电控制装置(SEG)连接。具体而言,将设备(也可以是多个)的MAC地址、网络ID、通信密钥登录到中继器中。
接着,在步骤S5206g中,移动终端检查设备与中继器的连接是否已完成。
在完成的情况下(步骤S5206g中Yes),向步骤S5206h前进,在没有完成的情况下(步骤S5206g中No),再次回到步骤S5206f。
接着,在步骤S5206h中,移动终端在中继器中记录移动终端或服务器、家电控制装置(SEG)的连接信息。具体而言,移动终端将移动终端或服务器、家电控制装置(SEG)的MAC地址、网络ID、通信密钥、协议等的中继目标的连接信息经由NFC或网络记录到中继器中。这样,处于登录有MAC地址的设备属于的PAN ID的子网和家电控制装置(SEG)属于的 PAN ID这两个子网下的MAC地址的家电控制装置(SEG)经由中继器(PAN coordinator)开始连接。
接着,在步骤S5206i中,移动终端检查中继器与家电控制装置(SEG) 的连接是否已完成。在Yes的情况下,向步骤S5206j前进,移动终端判断设备与家电控制装置(SEG)的连接认证是否已完成。
并且,在其连接认证完成的情况下(步骤S5206J中Yes),设备、中继器及以及家电控制装置(SEG)的中继完成,结束处理。
另一方面,在步骤S5206i中为No的情况下,此外,在步骤S5206j中为No的情况下向步骤S5206h返回。
以上,如使用图200和图201说明那样,如果使用本发明的3D映射,则移动终端得到ZigBee或无线LAN的子机、母机、中继器的3D的位置信息。这是因为,移动终端总具有3D的坐标信息,当以NFC向各装置接近时、或接近而进行移动终端的输入时,将ZigBee或无线LAN的子机、母机、中继器的物质的位置关系(3D的位置信息)与各装置通信,能够同时得到MAC地址等的网络ID信息。
并且,移动终端通过处理得到的数据(上述装置的3D的位置信息等),能够得到在物理上最优的网络配置结构。另外,该处理也可以不是由移动终端、而由宅内或宅外的服务器处理。
该网络结构信息具体而言如图200的下部所示的例子那样,如果知道 3D的位置关系则能够容易通过运算求出。这里,在图200的下部表示的结构例表示,在PAN ID1中有MAC地址1的设备、别的设备、以及MAC 地址3的中继器,在PAN ID2中以无线连接着搭载有因特网协议的MAC 地址2的家电控制装置(SEG)和MAC地址5、6的别的设备2、3,PAN ID1与PANID2经由中继器连接的结构最节电且稳定,是不发生循环的结构。
另外,在ZigBee等以往方式中,要求家电控制装置(SEG)和子机是 1对1的结构。这是因为,如果追加中继器则需要将整体的网络配置优化设计而设定,但没有简单地知道各设备的3D的位置关系的方法。在企业内的网络中,由于花费费用及工夫,所以能够进行,但在一般家庭的空调、微波炉或太阳能电池那样的家电设备的情况下,不能花费这样的费用及工夫。因此,中继器的导入并不容易。
但是,在本实施方式中,仅通过用NFC接触、或在设备的很近处输入到移动终端中,就能够得到设备的位置信息及MAC地址等、ID信息。因此,能够不花费工夫、费用而在服务器或移动终端中得到配置信息,具有通过操作移动终端而将该信息直接或间接地记录到家电控制装置(SEG) 或中继器中由此简单地构成最优的网络配置的效果。进而,在使用NFC的情况下,由于能够通过加密密钥及3D位置信息等进行非法检查,所以也能够得到较高的安全。这样,中继器的导入在家庭中也能够进行,具有稳定地进行屋顶上的太阳能电池与1层的家电控制装置(SEG)之间、或室内的家电控制装置(SEG)与室外的热泵或充电系统等的长距离的无线通信的效果。并且,在此情况下,通过使用服务器,能够进行使用3D坐标的高度的运算,所以能够构建理想的网络系统,还能够防止循环等的异常通信,所以还有能够提高传送效率的效果。
(实施方式21)
在本实施方式中,对于使用建筑物的3D制品地图而移动终端能够作为遥控器操作设备的系统,使用附图详细地说明。
图202是表示由程序执行部O65制作的制品的3D地图的图像数据的一例的图。图203是表示显示部O68d将图169的图像数据与已经显示的图 202的图像数据组合而成的制品的3D地图的一例的图。对于与图169~图 171同样的单元赋予相同的标号而省略详细的说明。
在图202中表示使用本实施方式的建筑物的3D制品地图的例如便携设备(作为移动终端9的通信装置102)的设备控制的一例。此外,在图203 中表示还添加建筑物数据、能够辨识在建筑物的哪个房间中存在设备的情况下的本实施方式的设备控制的一例。使用图204、图205、图206说明图 202及图203所示的移动终端进行的设备控制的动作。图204及图205是表示实施方式21的遥控器操作的次序的流程图。图206是用于说明图205的动作详细的意义的流程图。
首先,在S6001中,移动终端使用GPS信息取得本终端的位置信息。
接着,在S6002中,移动终端取得作为基准点的位置信息。具体而言,例如在通过移动终端保持的近距离通信而开闭的开锁系统与建筑物的门厅钥匙联动的情况下,移动终端在通过近距离通信将该门厅钥匙开锁时,取得该开锁系统的设备ID。并且,移动终端将与所取得的设备ID建立了联系的位置信息设定为基准点(图203的圈1)。这里,将设备ID与位置信息建立了联系的数据库由服务器或移动终端保持。另外,移动终端既可以通过近距离通信从该门厅钥匙直接取得位置信息,当然也可以从开锁系统以外的其他设备取得该门厅钥匙的位置信息。此外,用户保持移动终端而进入到建筑物中,但此时,移动终端也可以根据附加在门上的传感器的输出信息查知用户向建筑物进入,将该门的位置作为基准点。
接着,在从图203的圈1步行到圈2的情况下,在S6003中进行说明。即,在S6003中,移动终端通过步幅信息计算移动距离,并且根据方向信息计算位置。具体而言,移动终端从数据库获得用户的宅内的步幅,通过加速度传感器、地磁传感器或振动陀螺仪等检测该区间的步数n。这样,取得用户的步幅及步数n,通过步幅×n计算移动距离。此外,移动终端将移动方向用振动陀螺仪及地磁传感器检测,计算3维中现在的移动终端距离基准点的相对位置,记录到数据库中。
接着,在S6004中,移动终端将计算出的位置信息或移动信息向服务器发送。
接着,对用户处于图203的圈2中的情况,在S6005中进行说明。即,在S6005中,如果将移动终端朝向TV的方向,则当TV进入移动终端的 3D坐标和移动终端所测量的方向的法线时,成为遥控器。具体而言,例如,图203的圈2即用户移动到1层的电视机的前方,将移动终端的方向朝向电视机。当TV进入移动终端的3维坐标和移动终端所测量的方向的法线时,移动终端通过与该电视机用网络连接等而成为电视机的遥控器。
另外,如果之后用户从图203的圈3向圈4移动,将移动终端朝向空调的方向,则与上述同样,移动终端成为空调的遥控器。具体而言,在用户在1层中移动、进入到日式房间中的情况下,如果将移动终端朝向空调的方向,则将空调与移动终端用网络连接,移动终端成为空调的遥控器。此时,移动终端与S6003同样,根据用户的步幅及步数检测移动距离,计算移动终端的3维位置信息。并且,将该3维位置信息用移动终端或服务器的数据库保持。
进而,在图205的S6007中,通过从图203的圈4移动到圈5时的步数计算移动距离,用移动终端或服务器的数据库保持。通过保存在这样的数据库中的各用户的分场所步行履历,学习用户的步幅,提高精度。
并且,在S6008中,如果到达宅内的台阶,则设台阶的1级的阶差和 1级的长度分别为m、k,来计算步数×m为高度的变化,计算步数×k为水平移动距离。m、k记录在数据库中,根据过去的数据进行学习而提高精度。
在S6009中,考虑例如通过电梯上楼的情况。在此情况下,将建筑物的电梯的特性数据记录到数据库中,取得从P层向Q层的需要时间r,根据需要时间测量移动后的层数。P、Q、r也可以通过根据过去数据的学习来提高精度。此外,电梯的上升开始和停止根据加速度传感器的信息得到。
在S6010中,在判断为层的移动结束的情况下,转移到S6011。
在S6011中,通过步幅×步数得到水平方向的移动距离,通过振动陀螺仪得到方向,得到移动终端的3维的位置信息。如果有建筑物的3维构造数据则将位置信息校正而提高精度。并且,例如在2层的电视机的左前方位置(图203圈5的位置)处,用户暂时停止。
在S6013中,判断3维位置信息的累积误差E是否比设定的误差容许值大。累积误差E通过移动距离×5%计算。在判断为累积误差E比误差容许值大的情况下,转移到S6014。
在S6014中,从数据库中找出相对或绝对的位置信息被登录在数据库中的设备,将最近的设备提示在移动终端的画面上。操作者将移动设备的照相机朝向该设备。根据由照相机摄影的图像辨识设备,运算移动终端与其的相对角度、距离,修正基准位置。
在接着的S6015中,根据设备的设备ID获得设备的网络信息(MAC 地址、IP地址、通信密钥等),将设备与移动终端连接。如果在移动终端指示的设备中按下Rock按钮,则将移动终端与设备的连接固定,作为遥控器使用、或将设备的影像数据等显示在移动画面上。
最后,移动终端结束遥控器操作功能。
另外,S6007~S6011的动作如图205的S6017所示,是通过移动终端学习过去的数据来提高移动距离的计算精度,用于得到精度较高的3维的位置信息的动作。此外,S6013的动作如图205的S6018所示,表示判断3 维的位置信息的累积误差是否较大的动作。此外,S6014如图205的S6019 所示,表示将3维的位置信息(基准位置)的误差修正的动作。
通过以上那样的处理,移动终端能够取得相对于基准点的相对位置,不需要正确的绝对位置信息,仅通过朝向设备就能够使移动终端成为设备的遥控器。
此外,在加速度传感器的移动距离测量的误差较大的情况下,能够使用步幅或设备的位置信息等减轻位置信息的误差。
图207是用于说明实施方式21中移动终端的基准点信息不正确的情况下取得正确的基准点的处理的流程图。
首先,用户在判断为移动终端未取得基准点或移动终端的基准点信息不正确的情况下,在S6021中,用移动终端将设备摄影。这里,移动终端也可以将摄影的设备的图像(摄像图像)向服务器发送。
接着,在S6023中,移动终端根据摄影图像辨识设备的种类。在接着的S6024中,将仅设备的图像过滤,向服务器发送。
接着,在S6026中,服务器根据移动终端的位置确定当前的建筑物,根据建筑物之中的设备列表确定设备。具体而言,服务器取得移动终端的基站信息或通过GPS等取得大致的移动终端的位置,确定当前的建筑物。与此同时,服务器确定根据与该建筑物建立联系的设备列表确定被摄影的设备。此外,服务器在得到设备的大小及3D形状信息后,将该信息保存到数据库中。另外,当移动终端的当前的位置不清楚时,只要根据与移动终端的所有者建立联系的设备列表确定就可以。
接着,在S6027中,移动终端或服务器根据在图像中设备朝向的方向计算移动终端与设备的相对角度。
接着,在S6028中,移动终端或服务器根据移动终端的光学特性信息,基于缩放倍率等根据该摄像图像计算移动终端与设备的距离。
接着,在S6029中,移动终端或服务器根据移动终端与设备的距离及相对角度,得到用移动终端与设备的3维的相对坐标表示的位置信息Pr。
在S6030中,运算移动终端的建筑物内的相对或绝对位置的Pm。具体而言,服务器或移动终端从服务器或移动终端读出记录在服务器或移动终端中的设备的相对或绝对位置的3维坐标信息Pd,根据Pr和Pd运算移动终端的该建筑物内的相对或绝对位置的Pm。
最后,在S6031中,作为成为移动终端的基准点的位置信息而设定Pm。
通过以上那样的处理,在设定移动终端的电源刚接通之后等没有设定基准点的情况下,也能够使用摄影图像取得移动终端的基准点。此外,通过从摄影图像中仅过滤出设备的图像,用户能够不在意宅内的信息等隐私而将设备的图像向服务器发送。
在图208、图209中,表示表示设备与设备属于的网络的母机的连接次序的处理流程的流程图。图208及图209是实施方式21中设备中没有NFC 功能的情况下表示与设备的连接次序的流程图。
首先,用户将移动终端朝向想要连接的设备的方向,用移动终端的照相机将设备摄影。
接着,在S6112中,移动终端基于自己的位置信息(3D的坐标信息等),将摄影的设备的图像处理而辨识设备。移动终端如果辨识设备,则能够得到该设备的种类、型号和粗略的设备的位置信息(3D坐标等)。另外,移动终端使用移动终端或服务器具有的数据库得到辨识的设备的种类、型号和粗略的设备的位置信息(3D坐标等)。
接着,在S6113中,移动终端判断想要连接的设备是否是已经登录在服务器或移动终端的数据库内的设备。具体而言,移动终端使用服务器或移动终端的数据库取得登录在得到的位置信息的附近的设备的候选设备的信息,进行该候选的设备与摄影的设备的图像的匹配,确认辨识出的设备是否是登录设备。
在S6113中,在判断为想要连接的设备是已经登录在服务器或移动终端的数据库内的设备的情况下,转移到S6114。
在S6114中,移动终端取得设备ID等,与设备通过网络连接。具体而言,移动终端从服务器或移动终端的数据库取得设备ID、连接协议、通信密钥、服务器地址,与设备通过网络连接。
在接着的S6115中,移动终端通过设备的位置信息和移动终端的方向发出各种命令。
另一方面,在S6113中,在移动终端判断为想要连接的设备为没有已经登录在服务器或移动终端的数据库内的设备的情况下,转移到S6116。
接着,在S6116中,移动终端判断设备是否具有网络功能。另外,移动终端也可以判断是否能够辨识设备的型号。这是因为,只要能够辨识设备的型号,就能够判断是否具有网络功能。
在判断为设备不具有网络功能、或者移动终端不能辨识设备的型号的情况下(S6116的No),转移到S6117。
接着,用户例如将设备的盖打开而使设备保持的2维条码露出,通过移动终端的照相机将设备的条码摄影(S6117)。
接着,在S6118中,移动终端解读的2维条码的加密数据,将解读的数据记录到服务器或移动终端的数据库中。具体而言,移动终端读取2维条码,解读2维条码的加密数据。这里,被解读的数据,例如是设备ID、连接用通信协议、通信规格、遥控器功能(红外线遥控器用或无线ZigBee 用等),网络地址(MAC地址、IP地址、通信密钥)或服务器地址等。移动终端将所读出的数据记录到服务器或移动终端的数据库中。
接着,在S6119中,移动终端运算设备的3维位置信息,记录到数据库中。具体而言,移动终端从服务器或移动终端的数据库得到设备的3维的形状信息。并且,移动终端根据摄影图像和移动终端的摄影时的3维位置信息运算设备的3维位置信息,记录到数据库中。
此外,在S6116中,在判断为在设备中具有网络功能、移动终端能够辨识设备的型号的情况下,转移到S6121。此时,也可以判断设备是否具有AOSS功能。
接着,在S6121中,判断移动终端是否能够与母机通信,在判断为移动终端能够与母机通信的情况下,向S6122转移。这里,所谓母机,例如是家电控制装置(SEG)、无线LAN的AP等。
接着,在S6122中,判断设备是否保持红外线通信接收或无线遥控器 (ZigBee等)接收功能。即,判断设备能够与母机以外的设备通信。
在S6122中,在判断为设备没有保持红外线通信接收或无线遥控器 (ZigBee等)接收功能的情况下(S6122的No),转移到S6123,通过使用者的AOSS开始命令,设备的母机与设备开始连接认证。具体而言,在 S6123中,使用者如果将移动终端上的“连接开始按钮”按下,则移动终端对设备的母机发送AOSS命令,使设备的母机的模式切换为可登录模式。同时,使用者如果将设备的AOSS按钮按下,则开始设备的母机与设备的连接认证,持续一定时间。另外,此时,优选的是根据母机的3D的位置信息和设备的3D位置信息、根据两者间的距离和障碍物控制为所需最小限度的电波输出,提高通信的安全性。
接着,在S6124中,判断设备的母机与设备的连接认证是否成功,在判断为完成了连接认证的情况下,转移到S6126中。
另一方面,在S6122中,在判断为设备保持红外线通信接收或无线遥控器(ZigBee等)接收功能的情况下,向S6125转移。
接着,在S6125中,移动终端对与设备相同的通信协议的母机发送通信密钥和“AOSS开始命令”,同时,对设备发送通信密钥和“AOSS命令”,开始相互认证。具体而言,如果使用者将移动终端的连接开始按钮按下,则移动终端对与设备相同的通信协议的母机发送通信密钥和“AOSS开始命令”。同时,移动终端使用遥控器发送功能对设备发送通信密钥和“AOSS 命令”,开始设备与该母机的相互认证。
接着,在S6126中,移动终端判断该相互认证是否完成,在判断为没有完成的情况下,向S6125转移。在S6126中,在判断为相互认证已完成的情况下,转移到S6127,判断母机与设备的连接是否已完成。
并且,移动终端在S6127中判断为连接已完成的情况下,将设备ID及制品号码、地址、错误代码、使用时间、履历、3维的位置信息对设备经由母机经由向服务器传送。
接着,在S6129中,移动终端运算设备的3维位置信息。具体而言,移动终端根据设备的制品号码从数据库得到设备的3维的形状信息,根据摄影的图像运算距移动终端的距离,根据3维的方向和移动终端的摄影时的位置信息运算设备的3维位置信息。并且,移动终端将运算出的该位置信息记录到服务器或移动终端的数据库中。
通过以上那样的处理,即使在设备中没有附加近距离通信功能的情况下,也能够使用2维条码简单地将设备与母机连接,能够进行设备的服务器登录及3维位置信息的服务器登录。
接着,对3D映射进行说明。图210~图212是表示实施方式21的位置信息登录法的流程图。
在3D映射开始后,操作者(用户)使移动终端移动。这里,以操作者将移动终端移动到土地边界点的位置的情况为例,以下进行说明。
在步骤6140c中,移动终端将GPS信息传送给服务器,获得3D绝对坐标。具体而言,移动终端将GPS信息传送给服务器,获得例如包括移动终端存在的位置的附近的土地边界线标记或测量基准点的ID等的3D绝对坐标。并且,移动终端将所获得的3D绝对坐标输入到绝对位置的3D坐标数据库中。另外,移动终端如上所述,具有相对位置的3D坐标和绝对位置的3D坐标这两个。
接着,在步骤6140d中,移动终端从GPS切换为通过运动传感器的位置检测,运算3D坐标。具体而言,移动终端从GPS切换为通过运动传感器的位置检测。并且,通过步数及步幅获得距离,通过振动陀螺仪获得方向,以3D绝对坐标为基准,运算添加了距离和方向的3D坐标。
接着,在S6140e中,移动终端记录近距离无线通信建立时的3D坐标。具体而言,假设用户接触在例如建筑物的钥匙的NFC部上、将钥匙打开。移动终端将接触在建筑物的钥匙的NFC部上而建立近距离无线通信时的 3D坐标记录到本终端(移动终端)或服务器的数据库、钥匙的NFC中。
接着,在S6140f中,移动终端还根据用户的步数、步幅和方向运算3D 坐标。具体而言,移动终端如果用户进入到建筑物之中,则通过用户的步数、步幅和方向运算3D坐标。另外,此时,假设在3轴的磁传感器的精度因杂音等而变差的情况下切换为振动陀螺仪的方向信息。
接着,在S6140g中,移动终端将该设备的3D位置信息更新并将高精度位置信息识别符与3D坐标一起记录。具体而言,移动终端在从基准点(3D 绝对坐标)移动的距离较短的情况下,判断为位置精度较高。因此,如果用户接触在已经登录有3D位置信息的设备的NFC的天线部上而建立移动终端与设备的近距离无线通信,则移动终端将该设备的3D位置信息更新,并且将表示3D位置信息的精度较高的高精度位置信息识别符与3D坐标一起记录到NFC、服务器或本终端(移动终端)的数据库中。
接着,在S6140h中,移动终端检查3D坐标的累积误差是否是预先设定的值以上。具体而言,移动终端检查是否3D坐标的累积误差PE>一定值。
在S6140h中,在Yes的情况下,向S6140i前进,移动终端从移动终端的附近找出被赋予了高精度位置识别符的设备,与找出的设备一起,将“请接触在该设备的NFC的天线部上”的命令显示在画面上。具体而言,移动终端在TV、空调、微波炉、或电冰箱的在家中带有NFC的设备之中,从移动终端的附近找出带有高精度位置识别符的设备,将找出的设备(TV等)显示在移动设备的画面上,将“请接触在该设备的NFC的天线部上”的命令显示在画面上。接着,向图212的S6140j前进。
另一方面,在S6140h中,在No的情况下,向图212的S6140n前进。在S6140h中,移动终端将3D的基准坐标更新,将高精度位置识别符记录到DB中。具体而言,移动终端例如在登上台阶的第1级时或最终级结束时、在关闭的门前停下时、电梯开始上升时、停下时、在关闭的门厅门前停下时、登上门厅的阶差时、开始登上梯子时、在走廊的拐角拐弯时、绕过家中的伸出的墙壁时,能够通过加速度传感器检测到。并且,移动终端通过将由加速度传感器检测到的时刻的移动终端的3D坐标信息与建筑物的3D坐标信息进行匹配处理,能够将3D的基准坐标更新。通过这样的处理,能够提高3D基准坐标的精度。并且,此时将更新后的3D的基准坐标与高精度位置识别符一起记录到DB中。
接着,在S6140j中,移动终端判断是否与设备建立了近距离无线通信。具体而言,移动终端判断使用者是否接触在设备的天线部上而与设备建立了近距离无线通信。并且,在Yes的情况下,向S6140k前进。
接着,在S6140k中,移动终端检查是否设备的3D坐标与本终端(移动终端)的3D坐标大幅不同。在Yes的情况下,向S6140p前进,移动终端判断为设备从前次测量的坐标移动了,将错误信息识别符记录到该设备的数据库中。
这里,假如在附近有带有高精度位置识别符的设备的情况下,操作者 (用户)通过接触在该设备上,将移动终端保持的3D坐标更新,再次接触到在S6140k中判断为原来的位置不同的设备上,将正确的位置信息记录到数据库中。此时,在数据库中,只要代替错误信息识别符而将表示高精度的位置精度识别符对该设备赋予就可以。这样,能够将高精度的位置信息与设备建立联系。
另一方面,在S6140j中,在No的情况下,向S6140n前进。关于S6140 的处理是上述那样的,所以省略说明。
此外,在S6140k中,在No的情况下,向S6140m前进,将该设备的 2D或3D的坐标作为移动终端的3D位置坐标更新。这样,移动终端的3 坐标变得正确。并且,向S6140n前进。
(实施方式22)
以下,对作为通信装置的移动设备与设备的联动进行说明。
图213是用于对本发明的实施方式22的移动设备和联动设备的状况进行说明的图。
在图213中,表示移动设备的显示画面9001、9002、9003是同一个移动设备9000的显示画面的一例。
即,移动设备9000的显示画面9001表示使用者将移动设备9000拿在手中、将移动设备9000朝向TV设备9004时的状况(圈A)。在圈A中,表示将移动设备9000的显示画面9001向TV设备9004转送、也显示在TV 设备9004上的状况。
同样,移动设备9000的显示画面9002、9003分别表示使用者将移动设备9000朝向记录机设备9005、微波炉9006时的状况(圈B、圈C)。在圈B中,在移动设备9000的显示画面9002上,显示有用于操作记录机设备9005的遥控器画面,表示通过将遥控器画面的希望的按钮按下来操作记录机设备9005的状况。此外,在圈C中,在移动设备9000的显示画面9002中,表示显示有用于操作微波炉9006的菜谱画面的状况。另外,在图中的上部和下部表示的移动设备9000表示例如与TV设备9004的正反面无关而适当地动作。
图214是表示作为实施方式22的移动设备9000与联动设备的一例的 TV的各自的显示画面的图。图215~图219是表示实施方式22的步骤的流程图。
首先,使用图215,对到使用者选择希望的联动设备为止的处理进行说明。
最初,移动设备9000进行移动设备位置的取得(S9302)。即,移动设备基于1)通过照相机搜索设备、2)取得距离传感器的信息、3)建立与设备的近距离无线通信、5)接受能够确定位置的特定的电波等,通过运算或确定移动设备的基准位置,取得移动设备位置。另外,关于移动设备位置的取得方法的详细情况已使用图204说明,所以这里省略。
接着,移动设备9000被朝向圈A的方向。具体而言,使用者(用户) 将移动设备9000朝向希望的设备(这里是TV设备9004)的方向(S9303)。
此时,移动设备9000从数据库提取被朝向的方向的设备的候选 (S9304)。具体而言,移动设备9000根据移动设备9000和TV设备9004 的3D(相对或绝对)坐标信息、表示移动设备9000朝向的方向的方向信息、设备(这里是TV设备9004)的姿势信息、以及设备(这里是TV设备9004)的面积信息等,从数据库提取移动设备9000被朝向的设备的候选。
这里,移动设备9000确认在移动设备9000被朝向的方向上是否有多个设备的候选(S9305)。在有多个设备的候选的情况下(S9305的Yes),移动设备9000将多个设备的列表与位置关系一起显示在画面上(S9306)。
接着,移动设备9000判断移动设备9000被朝向的方向是否变化 (S9307)。在移动设备9000被朝向的方向变化的情况下,即在使用者改变了移动9000设备的朝向的情况下(S9307的Yes),移动设备9000根据朝向变更设备的显示。具体而言,移动设备9000根据移动设备9000的改变后的朝向,按照存在于移动设备9000的朝向的中心的可能程度,使移动设备9000画面上的设备的显示变化。
这里,移动设备9000的显示画面上的设备的显示越是处于移动设备 9000的朝向的中心、越显示在中央。另外,并不仅限于显示在中央,也可以显示在上部、或者在处于最中央的设备上显示目标光标等。
此外,移动设备检测Rock按钮的按下(S9309)。在检测到Rock按钮的按下的情况下(S9309的Yes),向S9310前进。具体而言,使用者当希望的设备显示在中央时,使用者按下ROCK按钮。于是,移动设备检测Rock 按钮的按下,向S9310前进。另外,ROCK按钮既可以是移动设备9000上的物理的开关,也可以是显示在触摸面板上的虚拟的按钮。此外,也可以是与移动设备9000在逻辑上连接的别的设备。将此时的状况表示在图214 的9222中。
接着,在S9309为YES的情况下,移动设备9000决定用户选择的特定的设备,从数据库取得或下载该设备的网络连接信息(S9310)。具体而言,移动设备9000决定移动设备9000被朝向的(用户选择的)特定的设备(例如TV或微波炉)。并且,从服务器或移动设备9000的数据库取得或下载该的设备的网络连接信息(MAC地址、IP地址、通信密钥、通信规格、通信协议),设备的能力、设备用的程序、脚本等。
此外,移动设备9000如果被按下ROCK按钮,则在内部中保持表示与移动设备9000被朝向的特定的设备的连接状态的标志(锁定标志)。在该锁定标志生效的期间中,即使使用者改变移动设备9000的朝向,也不执行S9304的处理。因此,即使在移动设备9000与TV设备9004等的设备连接的状态下使用者改变移动9000设备的朝向,与所连接的设备的连接也不切断,所以有使用者选择的设备的画面不会消失的效果。
这里,对使用者将移动设备9000朝向特定的设备(TV或记录机、微波炉等)的方向,使用图220进行说明。
本发明使用使用者拿在手中的移动设备9000(通信装置)和特定的设备(TV或记录机、微波炉等)的3D(相对或绝对)坐标信息、以及移动设备900的方向,确定对象设备。在移动设备9000的形状接近于长方体的情况下,用于设备确定的移动设备的方向设为与构成壳体的虚拟的长方体的边中的较长的边平行的方向。例如,在设想移动设备9000如图220所示的移动设备9000那样具有按钮和显示器、一般使用者不拿持显示器侧而拿持按钮侧的情况下,用于指示特定的设备的移动设备9000的方向为显示器侧的方向9111。另外,在移动设备9000是如苹果公司的iPhone4(注册商标)那样几乎没有按钮的智能手机、使用者采取各种拿持方式的情况下,也可以使用移动设备的重力传感器或陀螺仪传感器、照相机、接近传感器等判断移动设备9000上的使用者的手的重心点、使用从重心点到移动设备的外周的距离最长的方向作为移动设备9000的距离。
此外,在移动设备9000在显示器背面上保持背面照相机9113的情况下,也可以将与背面照相机的朝向平行的方向9112作为移动设备9000的方向。另外,在不启动照相机的情况下,也可以使用方向9111作为移动设备的方向、在启动照相机的情况下将方向9112设为移动设备9000的方向。在启动照相机而将方向9112设为移动设备9000的方向的情况下,在使用移动设备9000和对象设备的3D坐标信息、以及移动设备9000的方向信息确定对象设备时,使用者也可以一边观察显示在移动设备9000的显示器上的设备一边将对象设备锁定。
此外,也可以使用移动设备9000的形状、移动设备9000的重力传感器或陀螺仪传感器、照相机影像、用户接近传感器、照相机的启动状态、使用者对移动方向的选择、使用者的视线、使用者的姿势等动态地变更移动设备9000的方向。
根据这样的结构,具有使用者不用在意移动设备9000的拿持方式、仅通过直观地将移动设备9000朝向特定的设备就能够选择对象的设备的效果。
进而,移动设备9000也可以同时具有多个用于确定设备的方向。由此,具有不论使用者的移动设备9000的拿持方式都能够将大范围的设备作为对象的效果。
以下,回到图216,说明S9310的后续。
接着,移动设备9000使用在S9310中取得的网络连接信息,经由网络尝试与设备的连接(S9401)。在连接成功的情况下(S9401的YES)、且在从数据库仅获得通信信息的情况下(S9402的YES),移动设备9000对设备或服务器询问设备的能力(S9403)。并且,移动设备9000根据所取得的设备的能力改变显示画质。这里,移动设备9000也可以还取得移动设备9000上的控制显示程序。
接着,移动设备执行控制显示程序(S9404)。
接着,移动设备在设备是TV的情况下,从设备取得TV的频道广播节目的节目数、标题、缩略图等并显示(S9405)。将此时的状况在图214的 9223中表示。
并且,使用者在移动设备9000的画面(显示画面9001)上选择(按钮的按压、触摸面板上的点击或指掐(pinchout)动作等)特定的节目的缩略图。于是,移动设备9000将所选择的节目的显示请求命令对设备(TV) 发送(S9407)。将此时的状况表示在图214的9224中。
接着,移动设备9000从TV设备9004接收对应于能力的品质的影像数据(S9408)。具体而言,TV显示指定的节目,并且将对应于移动设备 9000的能力的品质的影像数据向移动设备9000发送。由此,移动设备9000 从TV设备9004接收对应于能力的品质的影像数据。
接着,移动设备9000显示从TV接收到的影像数据(S9409)。将此时的状况表示在图214的9224中。
这里,如果在显示画面上向右滑移,则将下个频道的节目显示在显示画面和TV设备上。具体而言,使用者如果在移动设备9000上例如向右滑移,则对下个频道的节目执行S9407~S9409,在移动设备9000的显示画面和TV设备9004的画面上显示下个频道的节目(S9410)。将此时的状况在图214的9225~9227中表示。
根据该结构,具有使用者仅通过将移动设备9000朝向想要使用的设备、就能够直观地控制设备的功能的效果。
此外,在通过使用设备的姿势、形状信息确定移动设备9000指向的设备的情况下,即使在大型电视机那样的设备中心位置与设备的端部的距离较大的情况下,也能够确定设备指向的设备,所以能够正确地判断使用者想要指示的设备。
以下,使用图217、图218说明S9410的后续。
首先,移动设备9000将特定的节目显示在显示画面上(S9501)。这里,假设使用者一边按下MOVE按钮、一边将移动设备9000朝向想要保存或显示的设备(记录机、或电视机等)的方向。
此时,移动设备9000从数据库提取被朝向的方向的设备的候选 (S9503)。具体而言,移动设备9000根据移动设备9000及设备的3D(相对或绝对)坐标信息、表示移动设备9000朝向的方向的方向信息、设备的姿势信息、以及设备的面积信息,从数据库提取朝向的设备的候选。
这里,移动设备9000确认在移动设备9000被朝向的方向上是否有多个设备的候选(S9504)。在有多个设备的候选的情况下(S9504的YES),移动设备9000将多个设备的列表与位置关系一起显示在画面上(S9505)。
移动设备9000判断移动设备9000被朝向的方向是否变化(S9506)。在移动设备9000被朝向的方向变化的情况下、即使用者改变了移动设备 9000的朝向的情况下(S9506的YES),移动设备9000根据朝向变更处于中央的设备的显示。具体而言,移动设备9000根据移动9000设备的改变后的朝向,按照存在于移动设备9000的朝向的中心的可能程度,使移动设备9000画面上的设备的显示变化。这里,移动设备9000的显示画面上的设备的显示越是处于移动设备9000的朝向的中心越显示在中央。并不仅限于显示在中央,也可以显示在上部、或者在处于最中央的设备上显示目标光标等。
接着,移动设备9000确认是否检测到Move按钮的按下(S9508)。在检测到Move按钮的按下的情况下(S9508的Yes),向S9509前进。具体而言,使用者在使用者希望的设备显示在中央时,使用者将Move按钮按下。于是,移动设备检测到Move按钮的按下,向S9310前进。另外,Move 按钮既可以是移动设备9000上的物理的开关,也可以是显示在触摸面板上的虚拟的按钮。此外,也可以是与移动设备9000在逻辑上连接的别的设备。将此时的状况表示在图214的9227中。
接着,移动设备9000在检测到Move按钮的按下时,决定被朝向的方向的特定的设备(S9509)。具体而言,移动设备9000在检测到Move按钮的按下时,决定移动设备9000被朝向的(用户选择的)特定的设备(例如记录机设备、TV设备、微波炉)。
接着,移动设备9000从数据库取得或下载所决定的设备的网络连接信息等(S9510)。具体而言,移动设备9000从服务器或移动设备9000上的数据库取得或下载该设备的网络连接信息(MAC地址、IP地址、通信密钥、通信规格、通信协议)、设备的能力、设备用的程序、脚本等。
接着,移动设备9000判断在所确定的设备中是否有记录能力(S9601)。在所确定的设备中有记录能力的情况下(S9601的Yes),移动设备9000对所确定的设备,与录像命令一起,发送内容的源信息、认证信息、以及表示录像范围的信息(S9602)。具体而言,移动设备9000对所确定的设备,将记录命令与包括内容的源信息(频道号码、内容的地址、内容的URI等)、录像范围(时间、单位等)、内容的服务器地址、源的范围)、以及认证信息(认证协议、密钥)等的信息一起发送。
接着,设备(所确定的设备)如果从移动设备9000接收到记录命令等,则按照记录命令等连接接收记录数据,进行记录。设备将记录的内容的标题、内容、静止图像缩略图、运动图像缩略图等的内容的信息向移动设备 9000发送。
移动设备9000接收设备记录的内容的信息(S9604),在移动设备9000 的显示画面上显示设备记录的内容(S9605)。
接着,移动设备9000对使用者显示用于确认是否继续设备的记录的对话(S9606)。在继续设备的记录的情况下,即在使用者认可设备的记录的继续的情况下(S9606的Yes),移动设备9000使设备继续记录。另外,在不继续设备的记录的情况下,即在使用者否认的情况下(S9606的No),移动设备9000使设备中止记录的继续(S9607)。
接着,如果移动设备9000与记录的该设备(例如记录机设备)的连接断开,则再次显示原来的设备(TV设备等)的信息(S9609)。
根据该结构,在使用者想要将正在观看的节目录像的情况下,能够不进行换拿为记录机设备的遥控器、将正在观看的节目信息用记录机设备的遥控器再次输入那样的复杂的作业而将节目录像。
此外,在本实施方式中,说明了设备是记录机设备、将用TV设备观看的节目记录到记录机设备中的例子,但并不限定于此。设备也可以为显示器装置等的显示装置,在此情况下,也可以代替用设备记录而使设备显示当前观看的节目或内容。由此,不需要将使用者正观看的节目或Web页、内容信息用显示器装置的遥控器的键盘再次输入,起到用不同的设备也能够视听的效果。此外,也可以将正用移动设备观看的Web页在显示器设备上显示。
以下,使用图219说明S9609的后续。
首先,假设移动设备9000为正在观看与TV设备相同的影像的状态 (S9701)。
接着,移动设备确认是否检测到遥控器模式按钮的按下(S9702)。在检测到遥控器模式按钮的按下的情况下(S9702的Yes),移动设备9000的画面切换为设备的遥控器模式(S9703)。
具体而言,使用者在想要将移动设备9000作为设备的遥控器使用的情况下,按下显示在移动设备9000上(即显示画面)上的遥控器模式按钮。于是,移动设备检测到遥控器模式按钮的按下,移动设备9000的画面切换为设备的遥控器模式。这里,遥控器模式按钮显示功能、以及TV设备用遥控器模式控制程序(或脚本)是包含在由S9510取得的TV设备控制程序中的功能。
根据该结构,使用者即使不使用TV设备的遥控器,也仅通过将移动设备9000朝向想要控制的TV设备,就成为TV设备的遥控器。即,移动设备9000能够显示TV设备的遥控器模式而控制TV设备的频道及音量等。此外,在以往的便携电话中,在想要作为TV设备的遥控器使用的情况下,需要下载TV设备遥控器应用而选择对应的TV用的程序。但是,在本实施方式的移动设备9000中不需要该操作,而自动地下载所朝向的TV用的程序并成为遥控器,所以起到能够降低向遥控器模式的转移的工夫的效果。
接着,移动设备9000确认移动设备9000(遥控器)与设备之间的通信速率或使用频度是否较低(S9704)。在使用频度或通信速率较低的情况下 (S9704的Yes),成为TV设备的遥控器的移动设备9000从服务器取得 ZigBee或红外线通信协议,切换为更低耗电的无线规格(S9705)。
根据该结构,通过自动地选择对应于功能的最佳的通信规格,具有降低移动设备9000及周边设备(例如TV设备等)的耗电的效果。
接着,移动设备9000对锁定解除按钮的按下进行检测(S9706)。在检测到锁定按钮的按下的情况下,即在检测到使用者将显示在移动设备9000 的画面上的锁定解除按钮按下的动作的情况下(S9706的YES),移动设备 9000将与设备(TV等)的连接解除(S9707)。
接着,移动设备9000使画面回到初始画面(S9708)。另外,将此时的状况表示在图214的9228中。
根据该结构,在使用者考虑将不同的设备的功能在移动设备9000中使用时,具有能够有选择地切换的效果。
另外,图221是表示实施方式22的移动设备和联动设备的显示的一例的图。图221的S9801~S9807记载对于设备是记录机设备、将正用TV设备观看的节目记录到记录机设备中的例子,以便能够直观地掌握移动设备 9000上的显示和用户的运动的情况。详细情况如上所述,所以省略说明。
以下,使用图222、图223,对使用者希望的联动设备是微波炉的情况下的处理进行说明。图222及图223是表示实施方式22的联动设备是微波炉的情况下的步骤的流程图。
最初,移动设备9000进行移动设备位置的取得(S9912)。即,移动设备通过基于1)用照相机搜索设备、2)取得距离传感器的信息、3)建立与设备的近距离无线通信、5)接受能够确定位置的特定的电波等、运算或确定移动设备的基准位置,取得移动设备位置。另外,关于移动设备位置的取得方法的详细情况已经使用图204说明,所以这里省略。
接着,移动设备9000用Web浏览器等显示由用户选择的料理菜谱 (S9901)。
接着,将移动设备9000朝向希望的设备的方向(S9902)。具体而言,在移动设备9000上(显示画面上)显示有特定的菜谱的状态下,使用者一边按下MOVE按钮,一边将移动设备9000朝向想要在烹调中使用的设备 (微波炉、烹调机等)的方向。这样,将移动设备9000朝向希望的设备的方向。另外,此时的状况是由图213的C表示那样的。
此时,移动设备9000从数据库提取被朝向的方向的设备的候选 (S9903)。具体而言,移动设备9000根据移动设备9000和想要在烹调中使用的设备的3D(相对或绝对)坐标信息、表示移动设备9000朝向的方向的方向信息、设备(这里是微波炉9006)的姿势信息、设备(微波炉9006) 的面积信息等,从数据库提取移动设备9000被朝向的设备的候选。
这里,移动设备9000确认在移动设备9000被朝向的方向上是否有多个设备的候选(S9904)。在有多个设备的候选的情况下(S9904的YES),移动设备9000将多个设备的列表与位置关系一起显示在画面上(S9905)。
接着,移动设备9000判断移动设备9000被朝向的方向是否变化 (S9906)。在移动设备9000被朝向的方向变化的情况下、即使用者改变了移动设备9000的朝向的情况下(S9906的YES),移动设备9000根据朝向变更处于中央的设备的显示。具体而言,移动设备9000根据移动9000设备的改变后的朝向,按照距离移动设备9000的朝向的中心的距离等,使移动设备9000画面上的设备的显示变化。
这里,移动设备9000的显示画面上的设备的显示越是处于移动设备 9000的朝向的中心越显示在中央。并不仅限于显示在中央,也可以显示在上部、或者在处于最中央的设备上显示目标光标等。
此外,移动设备检测Move按钮的按下的释放(S9908)。在检测到Move 按钮的按下的释放的情况下(S9908的Yes),向S9910前进。具体而言,使用者当使用者希望的设备显示在中央时,将Move按钮放开。于是,移动设备检测到Move按钮的按下的释放,向S9910前进。另外,Move按钮既可以是移动设备9000上的物理的开关,也可以是显示在触摸面板上的虚拟的按钮。此外,也可以是与移动设备9000逻辑连接的别的设备。
接着,在S9908为YES的情况下,移动设备9000从数据库取得或下载用户选择的特定的设备的网络连接信息等(S9910)。具体而言,移动设备9000决定移动设备9000被朝向的特定的设备(这里是微波炉)。并且,移动设备9000从服务器或移动设备9000的数据库取得或下载该设备的网络连接信息(MAC地址、IP地址、通信密钥、通信规格、通信协议)、设备的能力、设备用的程序、脚本等。
接着,移动设备9000判断在所确定的设备中是否具有烹调能力 (S9001)。在所确定的设备中有烹调能力的情况下(S9001的Yes),移动设备9000对所确定的设备,将认证信息、菜谱信息及菜谱源信息与记录命令一起发送(S9602)。这里,所谓菜谱信息,是表示烹调内容、方法的信息,例如是表示微波、烘烤、混合、揉和、烧、蒸、解冻、加热、焖等烹调调整(温度、时间等)等的信息。此外,所谓菜谱源信息,是表示频道号码、内容的URL的地址、内容的服务器地址、源的范围等的信息。此外,所谓认证信息,是包括认证协议、密钥等的信息。
接着,设备如果从移动设备9000接收到记录命令等,则按照记录命令等连接接收记录数据,进行记录。设备将记录的菜谱的烹调内容等向移动设备9000发送。
接着,移动设备9000接收设备记录的菜谱的烹调内容等(S9004),将设备要烹调的烹调内容显示在移动设备9000上(S9005)。
接着,移动设备9000对使用者显示用于确认设备是否可以开始烹调的对话(S9006)。在开始设备的烹调的情况下,即在使用者认可设备的烹调的开始的情况下(S9006中Yes),开始烹调(S9008)。另外,在没有开始设备的情况下,即在使用者否认的情况下(S9006的No),移动设备9000 中止设备的烹调开始(S9009)。
接着,如果移动设备9000与正在烹调的设备(例如微波炉等的烹调设备)的连接切断,则再次显示原来的设备(TV设备等)的信息(S9010)。
根据该结构,在使用者想要将在移动设备9000上观看的料理菜谱烹调的情况下,也不需要向微波炉或烹调机再次输入而能够开始烹调。进而,起到关于没有内置在微波炉或烹调机中的菜谱也能够不进行复杂的操作而在设备中登录菜谱的效果。此外,在烹调设备中不需要搭载浏览器或触摸面板等的设备,还有能够降低烹调设备的成本的效果。
接着,这里,对于使用者一边按下MOVE按钮一边将移动设备9000 朝向想要保存或显示的设备(记录机、或电视机等)的方向的动作(图217 的S9501与S9503之间的动作),使用图214的9227以后的图进行说明。
首先,在步骤9227a中,在使用者解除了ROCK的情况下(步骤9227a 中Yes),移动设备9000回到原来的画面(这里是TV设备的画面)。
另一方面,在步骤9227a中,在考虑到使用者不将ROCK解除(步骤 9227a的No)、而使用者想要将该画面记录到记录机设备中的情况(步骤 9227b的Yes),使用者一边按下Move按钮,一边将移动设备9000的方向从图213的圈A的方向朝向图213的圈B的方向(步骤9227c)。
于是,移动设备9000通过移动设备9000的3D方向传感器根据3D坐标检测处于朝向的3D方向的设备,与设备(这里是记录机设备)连接(步骤9227d)。此时,在移动设备9000的画面上显示图214的9227e所示的显示图像(移动画面)。
接着,在步骤9227e的状态下,在使用者将Move按钮放开的情况下 (步骤9227f),移动设备9000对设备(记录机设备)发送当前显示的节目的录像请求(录像命令等)。于是,移动设备9000的画面显示图214的9227g 所示的显示画面(移动画面),记录机设备开始显示在移动设备9000上的节目的录像。
进而,在使用者将移动设备9000从图213的圈B的方向重新朝向图 213的圈A的方向的情况下(步骤9227h),在移动设备9000上显示图214 的9227i所示的显示画面(移动画面)。
这里,使用图213说明本申请的效果。在图213中,实线的箭头表示移动设备9000的显示画面9001,在从正面朝向TV设备9004、记录机设备9005或微波炉9006的情况下,将移动设备9000朝向的方向用圈A、圈 B、圈C表示。并且,虚线表示将移动设备9000的显示画面9001朝向TV 设备9004、记录机设备9005、微波炉9006的背面、即从后侧朝向的情况下的移动设备9000朝向的方向。在采用在游戏等中使用的以往的单纯的运动传感器的方式中,将移动设备9000的显示画面9001在从TV的正面朝向的情况下、从圈A的方向到圈B的方向向左侧即向逆时针方向旋绕,所以如操作者的意图那样,从TV设备9004切换为记录机设备9005。但是,在将移动设备9000的显示画面9001在TV设备9004的背侧从圈A的方向的TV设备9004朝向圈B的方向的记录机设备9005的情况下,移动设备 9000向与正面的情况相反的逆时针方向旋转,所以仅通过运动传感器,判断为从TV设备9004朝向了微波炉9006,选择微波炉而在移动设备9000 的显示画面上显示微波炉。因此,成为与操作者的意图违背的错误的动作。
但是,在本发明中,通过3D映射事先由NFC和服务器登录了TV设备9004、记录机设备9005、微波炉9006的坐标。此外,由于移动设备9000 拥有自己的3D坐标信息,所以即使在较大的房间的中央使移动设备9000 移动到某个TV设备9004的背侧、如虚线的箭头所示那样使移动设备9000 从圈A的方向的TV设备9004向圈B的方向的记录机设备9005顺时针旋转,也根据TV设备9004、记录机设备9005、移动设备9000的3D坐标信息、以及移动设备9000朝向的方向而选择记录机设备9005并显示,能够使移动设备9000的画面显示记录机设备9000。进而,能够连接到记录机设备9005。如以上这样,有不发生误动作的本发明的独特的效果。
此外,在一般的家庭的家中有几十件的家电制品。在本发明中,在接触在家中的家电制品上而进行NFC通信时,在5~10cm的距离范围内有移动设备9000和家电制品。如果移动设备9000拥有正确的位置信息,则以5~ 10cm以内的精度将位置信息向服务器传送。即,通过本发明,家中的几十件家电制品成为位置测量的基准点。在建筑物内得到正确的位置信息的情况下,有不存在用于设定基准的基准点的问题。但是,在本发明中,具有大量家电制品成为基准点的显著效果。
(具有多个传送路的通信方式中位置信息的获得方法)
以下,说明作为位置信息的获得方法而使用电波的方法的一例。
图224是用于说明使用多个天线确保多个传送路而传送的通信方法的图。
如图224所示,例如有MIMO(Multiple Input Multiple Output)等、使用多个天线确保多个传送路而传送的通信方法。
在这样的方法中,说明在母机9306与移动终端9308通信的情况下得到位置信息的方法。母机9306使用传送路9308a、9308b、9308c的3个与移动终端9308交换信息。实际的传送路是3×3的9条,但省略了。
使用例如MIMO那样的通信方法的移动终端9308通过步骤9307a~步骤9307d求出传递函数A,求出9307g所示那样的固有矢量X及Wi、固有值λ等的传送信息,进行通信。另外,此时,9个传送路分别具有不同的固有矢量、相位及振幅的特点。具体而言,在步骤9307a中,提取该传送路的特点,在步骤9307b中求出电波强度,在步骤9307c中求出移动终端9308 拥有的自己自身的3D的坐标信息、处于移动的方向的状态时的传送特性,将该坐标信息中的传递函数9307d和电波强度9307e与3D坐标、方向信息一起向服务器9302传送(步骤9307f)。并且,向图225的步骤9350前进。
图225是用于说明具有多个传送路的通信方式的位置信息的获得方法的图。
在步骤9350中,服务器9302将移动终端9406的特定时间的3D坐标、移动终端9406的方向、传送特性(传送路的传递函数、固有值、固有矢量) 和强度模式化。
接着,在步骤9351a、步骤9351b、步骤9351c中,将与各3D坐标(3D 坐标1、3D坐标2、3D坐标3)对应的传送模式9352a、9352b、9352c(具体而言,例如是AAA、ADA、CAB)和模式压缩,映射到3D坐标空间中。
接着,在步骤9353a中,将它们记录到服务器9302的存储3D坐标位置的数据库中。这里,也可以还记录移动终端9308的一定时间内的移动时的传送信息的变化的特点。
这样,在服务器9302的数据库中记录传送信息。此外,这里记录按照个人而不同的移动终端9308的传送数据。例如移动终端9308传送来精度较低的位置信息,但通过多次学习所输入的传送信息的数据,能够将进一步提高了位置精度的传送数据记录到数据库中。
接着,在步骤9353b中,假设在步骤9353a的状态下、移动终端9308 为了得到当前的位置信息而将当前的传送数据发送给服务器9302(步骤 9353中Yes的情况下)。在此情况下,在步骤9353c中,服务器9302进行从移动终端9308发送来的传送模式与记录在服务器9302具有的数据库中的传送模式的匹配。这里,例如假设以模式匹配方式搜索“AAA”而进行说明。这里,处于图225的左下部的图的15个圆表示记录在服务器9302具有的数据库中的传送模式的示意图。
接着,在步骤9353d中,在有接近于从移动终端9308发送来的传送模式(AAA)的模式、以及表示与移动终端9308的电波强度接近的电波强度的候选数据的情况下,服务器9302判断是否有1个候选数据(步骤9353e)。并且,在候选数据是1个的情况下(步骤9353e的Yes),服务器9302从数据库将对应于该候选数据的模式的3D坐标的位置信息向移动终端9308传送(步骤9353g)。
另一方面,在步骤9353e中,在候选数据不是1个而有多个的情况下 (步骤9353e的No),前进到步骤9353h,使用移动终端9308具有的精度较低的3D坐标进行过滤而减少候选数据。这里,如果用在图225中处于左下部的图的例子进行说明,则在步骤9353e中,假设AAA的传送模式在 9355a、9355b、9355c的3处(多个)存在。在此情况下,通过在步骤9353h 中使用移动终端9308具有的精度较低的3D坐标9357(相当于图中的粗圆的范围的坐标),将候选的数据缩减(过滤)为仅处于移动设备的附近的候选,减少候选数据的数量。
接着,在步骤9353的过滤后,服务器9302判断候选数据是否是1个 (步骤9353i)。如果不是1个(步骤9353i的No),则服务器9302在步骤 9353f中指示,以使用移动终端9308具有的精度较低的3D坐标。相反,如果为1个(步骤9353i的Yes),则将与该1个候选数据(传送模式)对应的3D坐标向移动终端9306传送(步骤9353j)。
另外,移动终端9308在房间内不能取来自卫星的GPS的位置信息的精度。因此,使用3轴的振动陀螺仪或加速度传感器、磁传感器,进行房间内的移动终端9308的位置检测。但是,随着从基准点离开,误差累积,所以精度下降。
但是,在使用本发明的MIMO等多个传送路的方式的情况下,传递函数等的模式的数量增加。因此,与1个传送路相比,在房间之中存在许多传送模式。该模式如果移动λ/2则变化,换言之,具有只要知道提取了传送路的特征的模式就能够以λ/2的较高的精度进行位置检测的效果。例如在1GHz的情况下,有可能能够以15cm的精度检测。该方式的问题是相同的传送模式有可能在1个房间中存在多个。但是,在本发明的情况下,由于移动终端9308具有位置检测部,所以能够从该精度较低的位置精度信息中排除错误的模式。由此,移动终端9308能够得到较高精度的位置信息。
此外,在MIMO中能够改变多个天线的波束的方向。如果改变移动终端和母机的波束方向,则能够改变接收机的传送路的强度等、例如接收信号的电平。通过使移动终端9308移动,传送路的状况变化,所以在知道母机的3D坐标位置的情况下,也可以运算移动终端9308的位置。
如以上这样,根据本发明,使用便携电话或智能手机等的便携设备(通信装置),利用便携设备的RFID和GPS或运动传感器等的各种传感器,便携设备能够简单地实现多遥控器、家电内容下载等的扩展用户界面。
以上,基于实施方式对本发明的通信装置进行了说明,但本发明并不限定于该实施方式。只要不脱离本发明的主旨,对本实施方式实施了本领域的技术人员想到的各种变形后的方式、将不同的实施方式的构成单元组合而构建的方式也包含在本发明的范围内。
(实施方式23)
对本发明的实施方式23进行说明。
图226是表示自家等一般的家的地面、以及与在其中拿着移动设备(以下也简称为mobile)的使用者在地面上移动的情况下的处理有关的设备的例子的图。在宅内,电视机(TV-A、TV-B)等的家电设备处于各房间中。使用者的所处场所通过掌握移动设备拥有的作为宅内的位置信息的坐标值的技术判明。由于预先登录有作为家电设备的宅内的位置信息的坐标值,所以例如在使用者在寝室中控制电视机(TV-A)的情况下,通过将移动设备朝向电视机的方向,能够根据移动设备的坐标值与电视机的坐标值的相对的关系,在移动设备之中辨识移动设备朝向电视机。因而,移动设备确定作为控制对象的电视机,通过发送电视机的控制所需要的命令,进行作为对象的电视机的控制。另外,在图226中,移动设备为了掌握位置而利用的宅内的地图信息既可以由移动设备保持,也可以保持在SEG (401c)那样的宅内服务器中,也可以是用因特网连接的服务器。宅内服务器经由移动设备的公共网、或无线LAN接入点(401e)与移动设备连接。优选的是,如果保存在宅内服务器中,则即使在没有连接因特网线路的状况,也能够对移动设备提供地图信息。而且,能够不过度使用移动设备的存储设备(保存数据的区域)而管理地图信息。
首先,说明拿着移动设备(401a)的使用者从接近于建筑物(自家等) 的周边(401g)的地方使用移动设备拥有的传感器检测建筑物内的移动设备的位置的处理的流程。
使用图227解说测量建筑物内的移动设备的位置的处理。
开始,在步骤402a中,移动设备确认移动设备具有的GPS传感器、或检测宅内的无线电波的功能是否是启动中,在启动中的情况下(Yes),向步骤402c前进,移动设备通过检测由GPS检测到的移动设备的当前地坐标是否是预先登录的建筑物的附近、或作为无线LAN等的对象的建筑物内的设备发出的电波,在检测到处于作为对象的建筑物(自家等)的周边的情况下(Yes),向步骤402d前进。在步骤402c中为No的情况下重复进行直到成为Yes。在步骤402a中为No的情况下向步骤402b前进,使用者选择表示在建筑物(自家前)的门厅在移动设备的UI上开始屋内的位置检测的“屋内位置检测模式”,向步骤402d前进。如果在步骤402d中移动设备的角速度传感器、地磁传感器、加速度传感器没有启动则启动,前进到步骤402e。在步骤402e中,如果能够从云上的地图管理服务器、或SEG (处于宅内的服务器等)获得地图及基准点信息(Yes的情况),则前进到步骤402f,取得地图及基准点信息。所谓基准点信息,用移动设备的传感器计测移动量、在替换为坐标值时通过作为基准的场所而预先登录地图上的坐标值。移动设备检测基准点,取得基准点的坐标值,由此移动设备设定保存的坐标作为当前地。基准点主要是门厅或台阶的上行口或宅内的走廊的尽头等、地图上特征性的部分,还包括家电制品或椅子、沙发的位置等。
另外,在移动设备具有足够的存储设备的情况下,也可以将地图或基准点信息保持在移动内部中。保存及获得场所没有限制。此外,也可以通过在SEG或云上的服务器中放置地图和基准点信息的状态下,移动设备使用移动设备的保有传感器的感知结果对SEG或云上的服务器询问来经由网络实现与移动设备保持地图或基准点信息的状态同样的处理。
此外,也可以将根据移动设备的位置将地图或基准点信息仅限于移动设备的位置的周边部分等,与移动设备的移动同时,将地图及基准点信息从SEG或云上的服务器对移动设备一边部分地下载一边使用。
在步骤402e中为No的情况下,向步骤402g前进,在移动设备检测到预先设定的特征性的变化模式(基于预先测量的角度变化的重复得到的拉门、基于垂直方向的加速度变化得到的台阶等)(Yes的情况)的情况下,前进到步骤402h,如果在移动设备内部中登录有“类似的特征的变化模式”,则向圈1(图228)前进。在步骤402g中为No的情况下重复检测例程直到成为Yes。
另外,步骤402g中的特征性的变化模式,是例如表示在3秒以内登上 3级台阶的Z轴(垂直)方向的加速度的向上下方向的G的变化,通过检测该变化,判断为移动设备达到了门厅的地面的高度。进而,在其前面例如5秒以内,根据角速度传感器中Yew方向的朝向变化90度的检测结果,判断为使用者朝向门厅的方向。
在此情况下,通过辨识是将门厅门打开这样的使用者的经常的动作,判断移动设备存在于门厅门附近的基准点。此时,在根据移动设备保持的传感器的检测结果知道例如5秒钟使用者大致持续静止状态的情况下,判断为正在开门厅的钥匙。如果在服务器或移动设备中有该门厅的前方的位置的坐标信息,则使用坐标信息将移动设备的位置信息改写。这里,从外部的GPS信息的纬度、经度的绝对坐标系切换为建筑物内的相对坐标系。通过切换为相对坐标系,不需要向纬度经度的坐标变换处理,并且能够减少变换误差。
进而,对门厅门上带有RF-ID(NFC)方式的锁的情况进行说明。在本发明的RF-ID中,在锁或服务器中记录有坐标信息和坐标精度评价点的Vs。在接触的时刻,移动设备与锁的天线部的距离是5cm以内。因此,如果在移动设备保持的坐标的坐标精度评价点Vm的评价点比Vs高的情况下,将锁的坐标数据替换为移动设备的坐标信息。在Vs更高的情况不替换。通过坐标精度评价点,在本发明中由于在空调或TV的RF-ID、或者对应的服务器中记录有坐标信息和该坐标精度评价点,所以每当接触时改写为精度更高的坐标信息和更高的精度评价点,所以具有每当接触时各设备的坐标精度提高的效果。
另外,对于具有RF-ID功能的设备,坐标信息、坐标精度评价点的信息如图260所示那样记载。
图228是表示测量建筑物内的移动设备的位置的处理的流程图。在步骤403a中,移动设备根据从内置传感器取得的数据的变化模式,确定作为对象的基准点(例如门厅等),根据地图和基准点信息取得基准点的坐标值 (以任意的基准点为初始位置的相对坐标、纬度经度、基于海拔的绝对坐标值等),在步骤403b中,移动设备判断移动设备的当前位置是基准点,使用基准点的坐标值将在移动设备内部中保存的当前位置信息覆盖,在步骤403c中,移动设备使用角速度传感器、地磁传感器、加速度传感器,开始从基准点的移动信息的计测,在步骤403d中,重复进行通过从基准点的移动信息确定当前坐标作为3D位置的动作,在步骤403e中,通过从基准点的移动信息,判断当前坐标是否是没有伴随着因地图上的台阶或电梯等带来的明确的上升行动的状态,在步骤403f中,在移动设备中设定有拥有者的身高、或已从服务器(SEG、云上的服务器等)取得的情况下,使用该高度,在不能取得拥有者的身高信息的情况下,从SEG、服务器或终端内的预设信息取得例如170厘米的国家或地域中的平均身高信息,在坐标来到超过身高信息的位置的情况下,将其修正为身高信息以内,前进到圈2 (图229)。
另外,在步骤403c中,通过使用角速度传感器、地磁传感器、加速度传感器,能够计测使用者的移动量并确定3D位置,但还可以通过由声音传感器、气压传感器等判断发出特定的声音的场所或层数来进一步提高位置确定的精度。
此外,与将移动设备的传感器在建筑物外内两者都持续设为ON相比,如由本实施例所示的例子那样检测建筑物的附近,将在宅内的位置确定所需要的传感器在该时刻设为ON,当处于不是建筑物的附近的地方时,在不需要在游戏等的不同的应用的其他用途中启动的情况下,通过设为休眠模式、或设为OFF而进行移动设备的节电化。
进而,根据建筑物内的地图,当为仅能够直线移动的通路等、在地图上为直线部时将角速度传感器关闭或设为休眠模式。或者使用地磁传感器求出方向。并且,在曲线部、或在路线上的分叉点之前将角速度传感器设为ON。例如现行的一般的面向移动设备的3轴角速度传感器消耗约5mA~ 10mA,但通过勤设为ON、OFF能够削减耗电。进而,现行的一般的地磁传感器为约1mA附近,与角速度传感器相比耗电较少,当角速度传感器不需要如需要那样高精度的角速度检测、姿势检测时,通过仅由地磁传感器判断姿势,能够期待消费电力的削减效果。
图229是表示测量建筑物内的移动设备的位置的处理的流程图。
在步骤404a中,如果在地图信息中预先设定了表示起居室、寝室等区域的区域信息(坐标值)(Yes的情况下),向步骤404b前进,参照保存在移动设备中的地图信息,取得地图上的区域信息(表示房间的信息),在步骤404c中,根据移动设备的坐标和区域信息确定移动设备存在的房间(X1、 Y1、Z1<Xm、Ym、Zm<X2、Y2、Z2),在步骤404d中,在移动设备的画面上显示确定的房间名(起居室等),在步骤404e中,参照保存在移动设备中的地图取得处于移动设备的前端朝向的方向的能够控制的设备,在步骤404f中,对所取得的设备,根据预先设定的设备的安装位置的坐标值判断、或在有预先设定的房间名的情况下根据该信息判断是否是设置在与移动设备处于的房间相同的房间中的设备,在步骤404g中,通过对与移动设备相同的房间的设备改变框的颜色等的表现,作为分开与移动设备相同的房间的设备和不是如此的设备的UI,将设备列表向使用者提示,向圈3(图 233)前进。在步骤404a中,在No的情况下,向步骤404h前进,参照保存在移动设备中的地图取得处于移动设备的前端朝向的方向的能够控制的设备,在404i中,将设备列表向使用者提示,向圈3(图233)前进。此时,通过地磁传感器、加速度传感器的重力方向的检测、以及角速度传感器,计算移动设备的朝向和作为其上下方向的角度的姿势信息,判断作为使用者的意图的移动设备指示的方向。
通过这样辨识移动设备处于哪个房间中,即使在移动设备朝向的方向上放置有处于不同的房间中的两个电视机的情况下,也能够控制移动设备的使用者所处的房间的电视机。
进而,在使用加速度传感器的移动量的计测中,通过用加速度传感器计数步数来计测移动量,补充加速度传感器的精度。在移动量的计测中,通过对步数乘以一步的移动量(步幅)而计算移动量。此时,在移动设备辨识房间后,从地图获得房间的种类,根据各房间的地面的状态(木地板、绒毯等),例如在木地板上设为步幅70cm、在绒毯上设为步幅60cm等,通过使步幅变化而提高移动量检测的精度。
图230是表示表示3D地图上的房间的区域的信息的例子的图。在房间的形状较复杂而不是单一的立方体的情况下,通过多个立方体的组合设定为1个房间。在此情况下,移动设备通过判断移动设备的当前坐标值包含在作为同一房间的一部分的多个立方体的哪个中,确定移动设备存在的房间。
图231是表示基准点的附近的移动设备的动作的图。
如图所示,在移动设备检测到角速度传感器是休眠状态(406b)的移动设备(406a)进入到基准点的3米以内的情况下,进行更高精度的基准点的检测,移动设备的角速度传感器成为ON状态(406c)。进入到基准点的附近之前的期间中的移动设备的位置通过使用由例如加速度传感器和地磁传感器,计测从前1个通过的基准点的移动量的结果,推测作为地图上的移动设备的位置的坐标值来辨识。
图232表示在移动设备的行进方向上想要高精度检测的场所的图。
例如从图示的寝室观察,在门厅和起居室的两者的入口在直线方向上不怎么离开而会合的情况下等,如果在地图上不能高精度地检测在步行时拐弯,则在移动设备进入到当前位置以房间的单位不同的地图匹配困难的点(407b)的附近(例如3米以内)的情况下,通过将角速度传感器启动一定时间(10秒间),提高地图匹配的精度。
图233是表示测量建筑物内移动设备的位置的处理的流程图。
在步骤408a中取得移动设备的当前坐标值,在步骤408b中,参照地图,在周边3m以内有基准点或地图上的注意点的情况下(Yes),向步骤 408c前进。在步骤408b中,在No的情况下,向步骤408a返回。在步骤 408c中,参照应在基准点或注意点的附近使用的传感器的列表,在步骤408d 中,取得作为对象的传感器的信息“角速度传感器”和时间信息(10秒、到达后5秒),在步骤408e中将角速度传感器的休眠模式解除,计测开始,在步骤408f中检测到关于基准点或注意点的传感器的检测结果的模式的情况下(Yes),向步骤408g前进,在步骤408g中,经过指定时间5秒(Yes) 而结束。在步骤408g中,在No的情况下重复直到成为Yes。在步骤408f 中,在No的情况下,向步骤408h前进,在步骤408h中经过10秒的情况下(Yes),向408i前进,在步骤408i中将时间内发现率计数(-1次),在步骤408j中,将列表上的时间信息延长并覆盖。在从服务器取得的列表的情况下,向服务器通知并覆盖,向步骤408a返回。
图234是表示基准点及注意点的附近的移动设备的动作的表。
在图234所示的表(409a)中,在地图上的基准点、或例如作为容易发生地图匹配的错误的点的注意点的附近,根据基准点或注意点的特征,将移动设备应启动的传感器以优先级顺序记载,并记载有启动时间、以及在检测到基准点或注意点后持续启动的时间,进行更高精度的基准点或注意点的检测。进而,记载有表示进入到基准点或注意点的附近、在处于表中的传感器启动后的启动时间内发现了基准点或注意点的百分比的时间内发现率、以及表示进行地图匹配后的、根据其后的传感器数据与实际的位置进行地图匹配的结果不同的情况下的比率的错误率。由此,通过在时间内发现率较低的情况下将启动时间设定得较长、在时间内发现率较高的情况下将启动时间调整得较低,能够减少传感器的启动时间而实现节电化。此外,在地图错误错误率较高的情况下,通过除了将传感器的启动时间取较长以外、还将辨识附近时的距离即作为附近的距离延长(3米→5米),能够提高基准点或注意点的发现精度。在地图匹配错误率较低的情况下,通过缩短作为附近的距离,能够减少传感器的启动时间而实现节电化。
在注意点的种类中,还包括各种传感器的检测精度降低的区域。在地磁传感器的情况下,在电视机侧、或带有磁力的空间等中发生较大的噪声。此时,在地磁传感器检测到明显指向不同的方向那样的噪声的情况下,移动设备将该场所在地图上作为注意点登录。在移动设备进入到注意点附近的情况下,将角速度传感器启动,进行方向检测的修正。进而,在地图上没有作为注意点登录的状态下检测到噪声的情况下,立即启动角速度传感器而进行修正、并作为地图上的注意点登录。此外,在陡坡或台阶等使用者的移动设备的拿持方式总是变化的坐标点,在为角速度传感器的精度因重力方向变化而容易受到影响的传感器的位置的情况下,进行提高角速度传感器自身的检测精度、采样量的修正。进而,在地磁传感器没有启动的情况下,通过启动而加以修正。根据使用者的状态,移动设备的位置的变化总是在相同的地方发生的情况通过比较检测到位置的变化的坐标值是否总是处于附近来判断,在相同的场所的情况下,将该坐标值作为注意点登录。
使用图235解说测量建筑物内的移动设备的位置的处理。
开始,在步骤410a中,移动设备判断是否用GPS检测到自家周边的坐标、或检测到自家无线LAN的接入点、或检测到在自家中预先计测时取得的自家周边的无线LAN的接入点的某个,在No的情况下移动设备继续等待直到检测到。在Yes的情况下,在步骤410b中从图236所示的作为表示用于检测基准点的传感器的优先级的列表的基准点检测传感器优先级列表,取得用于检测进入到家中时的基准点的传感器,步骤410c在加速度传感器的情况下,在检测到检测已被登录的加速度的检测模式(例如3级的台阶)的Z轴方向的G的情况下,判断为处于预先登录的基准点的坐标值,将坐标值设置在移动设备中,向圈4(图237)前进。
另外,此时,也可以除了410c的处理以外还根据地磁传感器的数据检测行进方向轴(X轴)的G(加速度),通过地磁传感器检测台阶的朝向,判断是否与过去检测等而登录在地图上的台阶的方向相同,在不相同的情况下判断为不是作为对象的基准点的台阶。
图236是表示用于检测基准点的传感器的优先级的列表。
如列表(411a)所示,根据基准点的种类,应启动的传感器的优先级不同,例如在门厅门的检测中,通过由声音传感器检测钥匙孔的声音的类似性能够进行正确的判断,但由于起居室的门不发出较大的声音,所以通过声音传感器的检测较难,由于在入室时地面的高度上升1级,所以通过加速度传感器的上下方向的移动检测对于特征性的模式的检测更有效,所以有优先级较高的差异。
此外,例如参照该列表(411a),设定为在通常时总是将列表中的高位的两个传感器启动,在即使经过一定的期间判断率也较低的情况下将高位3 个启动,反之在判断率较高的情况下仅使用高位的1个,从而根据基准点的特性和判断率改变应启动的传感器,由此,进行使用需要的足够的传感器的判断,实现节电化及提高检测精度。此外,在移动设备的电池的充电状态中有充分的富余的情况下,总是将高位3个启动等,将传感器的优先级较低的传感器也包括在内来启动。由此,也能够不损害使用者的方便性而提高检测精度。
使用图237解说测量建筑物内的移动设备的位置的处理。
例如,在步骤412a中,在Z轴的-(负)方向的加速度成分较多的情况下(Yes),向步骤412b前进,判断为正在上台阶,在步骤412c中计数台阶的步数n,在步骤412d中,根据无线LAN的多个接入点的电波强度及相位求出位置,从多个台阶之中确定台阶A,在步骤412f中,在达到从服务器或移动设备的存储器得到的台阶A的台阶数m的情况下或气压传感器达到一定气压的情况下(Yes),向步骤412g前进,判断为上完了台阶,得到从该情况下的服务器得到的台阶最上级的坐标和其坐标精度评价点: Vs,向圈5(图238)前进。在步骤412f中,在No的情况下,向步骤412c 返回。在步骤412a中,在No的情况下,向步骤412h前进,在步骤412h 中,在Z轴的+(正)方向的加速度成分较多的情况下(Yes),向步骤412i 前进,判断为正在下台阶,在步骤412k中,计数台阶的步数,在步骤412m 中,根据无线LAN的多个接入点的电波强度及相位求出位置,从多个台阶之中确定台阶A,在步骤412n中,在达到从服务器或移动设备的存储器得到的台阶A的台阶数m的情况下或气压传感器达到一定气压的情况下 (Yes),向步骤412p前进,判断为下完了台阶,得到从该情况下的服务器得到的台阶最下级的坐标和其坐标精度评价点:Vs,向圈5(图238)前进。在步骤412p中,在No的情况下向步骤412k返回。
使用图238,解说测量建筑物内的移动设备的位置的处理。
在步骤413a中,将移动设备测量的坐标信息的坐标精度评价点:Vm 取出,在步骤413b中,在Vs比Vm高、即服务器的坐标信息更正确的情况下(Yes),向步骤413c前进,将移动设备的坐标信息置换为服务器的坐标信息,在步骤413g中,完成台阶上的基准点的坐标信息的设定,向圈2 (图229)返回。在步骤413b中,在No的情况下,向步骤413d前进,不将移动设备的坐标信息改写为服务器的坐标信息,在步骤413e中,在服务器的坐标信息的自动改写标志是ON的情况下、或在画面上进行“可以改写?”的显示,在使用者OK的情况下(Yes),向步骤413f前进,将服务器的坐标信息用移动设备的坐标信息改写,在步骤413g中,完成台阶上的基准点的坐标信息的设定,向圈2(图229)返回。在步骤413e中,在No 的情况下,在步骤413g中,完成台阶上的基准点的坐标信息的设定。向圈 2(图229)返回。
图239是表示加速度传感器的Z轴(垂直)方向的检测数据的图。
如图239的414a所示,在上台阶的情况下,作为上行方向的、相对于 Z轴(垂直)方向为负方向的加速度被以较强地周期性检测到(414a)。在下台阶的情况下,作为上行方向的、相对于Z轴(垂直)方向为正方向的加速度被以较强地周期性检测到(414b)。在步行时,对于上下方向大致相同(414c)。图239的曲线图为了容易理解地说明而以在加速度传感器中将在恒常状态下计测的重力成分除去后的状态下的例子记载。
使用图240,解说测量建筑物内的移动设备的位置的处理。
开始,在步骤415a中,移动设备判断是否用GPS检测到自家周边的坐标、或检测到自家无线LAN的接入点、或检测到在自家中预先计测时取得的自家周边的无线LAN的接入点的某个,在No的情况下移动设备继续等待直到检测到。在Yes的情况下,在步骤415b中从基准点检测传感器优先级列表取得用于检测进入到家中时的基准点的传感器,在步骤415c中,在取得结果是声音传感器的情况下,对通过蜂窝网或无线LAN、BT等的近距离无线预先登录的、进入到建筑物(自家)内的移动设备(例如家人) 访问,询问是否处于建筑物(自家)的附近,在步骤415d中,在附近有家人等的进入到建筑物中允许接受位置检测服务的使用者的移动设备的情况下,询问坐标值,判断所取得的坐标值是否比本设备更接近于基准值,在较近的情况下,前进到步骤415f,确认基准点检测传感器优先级列表,选择声音以外的检测方法,在步骤415g中,通过所选择的检测方法检测移动设备移动到基准点,将基准点的坐标值设置在移动设备中,向圈6(图241) 前进。
在步骤415d中,在较远的情况下,向步骤415e前进,在与预先输入的声音(门把手的声音、钥匙的声音)一致的情况下,判断为是基准点,将基准点的坐标值设置在移动设备中,向圈6(图236)前进。
接着,使用图241,解说测量建筑物内的移动设备的位置的处理。
在步骤416a中,每一定的时间(10ms)根据加速度、角速度传感器、地磁计算从基准点的移动量,并通过自主导航将设想坐标值连续登录到移动内部中,在步骤416b中,根据Z轴加速度的检测结果辨识步行,取得脚接触在地面上的瞬间的时刻,取得1个或多个作为对象的时刻的声音,检测在声音中有变化的瞬间,在步骤416c中,比较声音的变化的模式是否是从木地板到绒毯等预先登录的根据房间的差异而得到的声音,在类似的情况下,向步骤416d前进,从地磁角速度传感器分割行进方向,将坐标修正为沿行进方向从当前登录的作为当前地信息的坐标值引直线的交点(或者也可以修正为最近的地方),向圈7(图242)前进。在步骤416c中,在不类似的情况下,向圈7(图242)前进。
图242是表示加速度Z轴(垂直方向)的检测数据与步行者的关系的图。
如417a所示,能够通过加速度检测步行的状态,能够取得将脚落在地面上的时刻(417b、417c),所以能够基于该时刻仅提取作为脚步声的部分的声音,能够更有效地检测脚步声的差异。如417d所示,在从木地板的起居室移动到西式房间的绒毯的情况下,判断脚步声的变化点417e的时刻为通过起居室与西式房间的边界(417f)的瞬间,能够基于地图修正移动设备的坐标值。
图243是表示建筑物内的移动的例子的图。
移动设备检测基准点(418a),能够根据到达到TV-A为止拐弯的量 (418b)和基准点(418a)的坐标值在地图上的精度,计算TV-A的坐标值的精度。更具体地讲,在拐弯的量(418b)较多的情况下,将在TV-A 的地点移动设备辨识的坐标值的精度设定得较低,在拐弯的量(418b)较少的情况下将精度设定得较高,登录基准点的精度信息。同样,在从TV- A到TV-B的移动中,也使用TV-A自身的坐标值的精度信息和拐弯的量或Z轴移动量(418c)的信息计算精度,登录精度信息。
图244是表示从移动设备移动的基准点到下个基准点的路程的信息的图。
在路程的信息(419a的表)中,有作为最近通过的基准点的精度信息的原基准点精度信息、移动量、由加速度传感器计算出的步数信息、由角速度传感器、地磁传感器计算出的拐弯量的总量、经过时间、上下方向的Z 轴移动量的总量,根据这些值的大小,计算当前的移动设备的坐标的精度评价点(坐标精度评价点)。
图245是说明原基准点精度的图。
如420a的表所示,登录有各个的门厅等的基准点A、TV-A,TV-B 等的基准点和其坐标的精度信息。如图240的例子那样,TV-A的坐标精度评价点由基准点A的坐标精度评价点和路程1(420b)决定,TV-B的坐标精度评价点由TV-A的坐标精度评价点和路程2(420c)决定。
该信息总是作为地图信息保存而持续更新。更新的定时既可以在移动设备来到该基准点时进行,也可以储存一定以上信息、取10次的作为计测数据的坐标值的平均等统计方法来决定。
使用图246,解说测量建筑物内的移动设备的位置的处理。
在步骤421a中,检测基准点,在步骤421b中,将移动设备的当前坐标值替换为基准点的坐标值,在步骤421c中,作为路程列表的原基准点而从基准点信息取得表示对象基准点的坐标的精度的坐标精度评价点信息,在步骤421d中,根据角速度传感器、地磁传感器、加速度传感器计测并保存移动信息,在步骤421e中,通过到达新的基准点、或将移动设备接触在具有某种RF-ID功能的设备而进行通信?在Yes的情况下向步骤421f前进,取得基准点信息或设备信息,向步骤421g前进,使用基准点信息或设备信息取得坐标精度评价点。取得方法采用通过与将移动设备对搭载有RF -ID功能的家电设备等放置在基准点的设备接触的动作同时、向服务器 (SEG等)询问来取得、或从移动设备内部取得,向圈8(图242)前进。在步骤421e中,在No的情况下,向步骤421d返回。
接着,使用图247解说测量建筑物内的移动设备的位置的处理。
在步骤422a中,根据路程信息计算坐标精度评价点,在步骤422b中,在移动设备计算出的坐标精度评价点是比原来的坐标精度评价点更高的数值的情况下(Yes),向步骤422c前进,将基准点或对象设备的3D坐标信息和坐标精度评价点覆盖。在步骤422b中,在No的情况下向步骤422d 前进,取得基准点或对象设备的3D坐标信息,在步骤422e中,将移动设备的当前坐标值覆盖。向圈2(图229)返回。
接着,使用图239和图240说明对电梯的位置检测方法。
首先,说明图239。
在步骤423a中,在来到电梯的位置的情况下(Yes),向步骤423前进,在No的情况下重复。
在步骤423a中,在进入到电梯中的情况下(Yes),向步骤423c前进,在No的情况下重复。
在该建筑物内排列有多台电梯的情况下,各机内性能不同,所以在步骤423c中,根据位置信息判断是第几个电梯和层数,在步骤423d中,对于对应的电梯的“特性信息”,从服务器获得所获得的从n层到m层的上升时或下降时的需要时间信息、Ts及负荷变化特性的信息和各层的地面的绝对或相对高度信息、以及各层的出口门的位置信息,在步骤423e中,计测Z轴的上下的加速度,在步骤423f中,当与重力方向相同方向的加速度增加或气压下降时,判断为开始上升,开始经过时间的测量,在步骤423g 中,当与重力方向相同方向的加速度减小时或气压的下降停止时,判断为停止上升,将经过时间的测量停止,计算经过时间TA,在步骤423h中,根据上升开始层、经过时间TA和对应电梯的上述需要时间信息,得到“从n层到m层的需要时间”的信息,求出“到达的层数”,在步骤423i中,在移动到电梯之外的位置的情况下(Yes),向圈9(图249)前进。
在步骤423i中,在No的情况下回到步骤423e。
另外,在检测到电梯下降的情况下,加速度、气压都检测电梯上升时的相反的数据。因此,与上述步骤同样计算下降层数。
此外,在因其他人的行动等而电梯在中途层停止的情况下,每当在中途停止时,加上从开始上升或下降到在中途停止的期间的移动量,直到最终下降,由此进行计算。
接着,说明图249。
在步骤424a中,将上述“到达的层数”的高度信息或层数信息记录到移动设备的当前的3坐标信息的Z信息中,在步骤424b中,在通过步数判断为出了电梯门的情况下(Yes),向步骤424c前进,在No的情况下重复。
在步骤424c中,得到来自服务器或预先保持在移动设备的存储器中的对应层的出入口的位置信息和其坐标精度评价点Vs。与其另外地,保持移动设备的传感器等测量的坐标信息,向圈5(图238)前进。在此情况下,在出入口的位置信息的坐标精度为评价点Vs比移动设备的坐标精度评价点Vm高的情况下,通过将移动设备的坐标信息替换为出入口的坐标信息而再设定基准点,由此具有能够提高移动设备保持的坐标精度的效果。然后,随着移动设备移动的距离和时间增加,假如在没有进行以下的基准点设定的情况下以外将移动设备的坐标精度评价点Vm逐渐降低。该降低方式是移动设备从服务器下载对应于移动机种的特性的程序。
在乘坐自动扶梯的情况下,检测平均地稳定的Z轴的上方向的加速度和平均地稳定的行进方向的加速度的两者。只要使用者没有行走登上,该加速度就是很有特征性的模式,所以通过检测到该模式而检测出乘坐在电梯上而上升或下降的情况,通过用步数传感器检测下来的时刻,能够进行基准位置的再设定。
这样,能够取得在电梯中到达的层数的信息及高度信息。
(实施方式24)
在本实施例中,关于搭载有NFC读写器的移动设备、搭载在家电设备上的NFC标签和家电CPU、以及管理移动设备和家电设备的信息的服务器,使用图254~图259说明用移动设备接触在家电设备的NFC标签上的情况下的动作。
如果解说图254,则搭载在家电设备中的家电CPU在步骤951v中将关于家电的数据定期地记录到标签的存储器中。由此,当从移动终端对家电设备标签访问时,得到能够将不能从移动设备读出、并且仅能够从家电设备CPU读出的家电设备内信息向移动终端发送的效果。
在步骤951a中,假设移动终端为动作状态。
在步骤951b中,确认移动终端上的家电设备操作应用的启动,在应用的启动完成的情况下(Yes),在步骤951c中,在移动终端上的显示装置上显示“请接触”,所以得到对使用者通知做好接触到家电设备的标签上的准备的效果。
在步骤951d中,在使用者将移动终端的NFC读写器接触在家电设备的NFC标签上的情况下(Yes),向步骤951e前进,发出标签数据读出请求,在步骤951f中读出标签的存储器内的数据。
在步骤951g中,在需要向家电CPU的访问的情况下(Yes),前进到步骤651h,对CPU访问,在步骤951j中,向CPU的访问读出需要的信息,在步骤651k中,将CPU的信息向标签的存储器传送或存储,向步骤951m 前进。由此,得到当从移动终端向家电设备标签访问时、能够将不能从移动设备读出、并且仅能够从家电设备CPU读出的家电设备内信息向移动终端发送的效果。
在步骤951d中,在No的情况下再次重复,向步骤951e前进。
在步骤951g中,在No的情况下向步骤951m前进。
在步骤951m中,对移动终端传送数据,在步骤651n中,接受标签ID、签名、密钥ID、设备型号、错误代码、使用履历(次数数据),日志数据、制造号码、家电的工作状态(当前的状态)、URL、位置信息、展示模式识别符等的数据。
在步骤951q中,在移动终端是电波圈内的情况下(Yes),向步骤951r 前进,在步骤951r中,移动终端将用户ID+标签ID+签名+密钥ID+设备型号+错误代码+使用履历(次数数据)+日志数据+家电的工作状态(当前的状态)位置信息、展示模式识别符的数据向上述URL的地址的服务器传送,在步骤951s中,服务器接收从移动终端发送的数据。
在步骤951q中为No的情况下,向圈11(图255)前进。
接着,说明图255。
在步骤952a中,移动终端在有关于从接触的家电设备接收到的设备型号的应用的情况下(Yes),在步骤952i中,启动关于该设备型号的应用。由此,在移动终端保持有设备型号、以及关于设备型号的应用的情况下,得到即使移动终端是范围外、也能够启动关于设备型号的应用的效果。
在步骤952a中,在No的情况下向步骤952b前进,启动一般用本地处理例程,在952c中将从标签读出的数据的一部分显示。由此,得到即使在移动终端是范围外、没有保持关于设备型号的应用的情况下、也能够将从接触的家电设备取得的信息向使用者提示的效果。
在步骤952d中,在错误代码表示“错误”的情况下(Yes),向步骤952e 前进,在步骤952e中,在终端内有表示关于错误代码的错误内容等的属性信息的情况下(Yes),前进到步骤952f。
在步骤952e中,在No的情况下,向步骤952g前进,显示将设备型号和错误代码或错误变换为字符后的信息,前进到步骤952h。由此,有即使表示关于错误代码的错误内容等的属性信息不在移动终端内的情况下、也能够将家电设备的错误信息向使用者提示的效果。
在步骤952f中,基于错误代码显示说明错误内容的信息,前进到步骤952h。由此,有即使在移动终端为范围外的情况下、也在移动设备内部中保持错误代码和错误内容的对应信息、并由从家电设备取得的错误代码变换为错误内容、由此能够将从接触的家电设备取得的错误内容容易理解地向使用者提示的效果。在进行错误代码与错误内容的对应变换的情况下,也可以从家电设备经由标签将制造商代码也传送给移动终端、按照制造商管理错误代码与错误内容的对应表而进行变换。如果在按照制造商定义设备共通错误代码的情况下,也可以从家电设备经由标签将制造商代码也传送给移动终端、参照各制造商的的错误代码与错误内容的对应表、变换为错误内容。由此,还得到能够减少需要保持在移动终端中的错误数的效果。此外,也可以管理制造商代码、该制造商的设备型号、错误代码与错误内容的对应表,来变换错误内容。
在步骤952h中,假如在关于设备型号的询问的电话号码或电子邮件地址、URL存储在移动内的情况下(Yes),向圈4(图257)的步骤954a前进。
在步骤952h中,在No的情况下,向圈10(图257)的步骤954b前进。
如果说明图256,则在步骤953a中,在服务器或标签的展示模式识别符为ON的情况下(Yes),向步骤953b前进,将展示模式的菜单画面显示在移动终端画面上。
上述展示模式,是表示家电设备为陈列在家电店铺的店面中的状态的信息。家电设备的流通一般是由制造商制造、制造出的一部分设备被收存在仓库中、被随机选择的一部分设备被展示在家电销售店的店面中。消费者在家电销售店的店面中尝试商品的使用感受或评价设计,但存在如下的问题。
步骤953d以后是用于通过用移动终端接触在家电上、对制造商简单地实现用户登录的步骤。消费者虽然在家电店铺中触摸实物的商品,但并不确定购买。假如有恶意的消费者用消费者自身拥有的移动终端接触在展示的家电设备的标签上,则有能够对没有购买的家电设备进行用户登录的问题。近年来,对于制造商而言,用户登录是在发生召回的情况下用于确定商品购买者的非常重要的信息,所以对进行了用户登录的消费者提供金钱或附加价值的情况较多。因此,想要对未购买设备进行用户登录的有恶意的消费者有可能增加,强烈要求防止对未购买设备的用户登录的机制。步骤953a、953b使用服务器或标签的展示模式识别符,通过在是展示模式的情况下不进行用户登录、将展示模式的菜单画面显示在移动设备画面上,具有防止非法的用户登录的效果。在将展示模式在服务器上变更、参照的情况下,不需要直接接触在家电设备上,所以有能够控制大量设备的一起变更及远处的家电设备的效果。在家电设备内、或家电设备标签上变更、参照展示模式的情况下,能够对例如展示在店铺中的家电设备分别操作。
在步骤953a中,在No的情况下,向步骤953c前进,通过标签ID+设备的型号,检索DB而判断为已设备登录(使用者),在步骤953d中,在有设备的登录的情况下(Yes),向步骤953e前进,在步骤953e中,在用户ID(移动设备)与登录在服务器中的用户ID相同、或者是相同的家庭 ID的情况下(Yes),向步骤953f前进,显示对应于通常的设备型号的菜单画面。由此,具有在是用户已登录的家电设备的情况下、不需要对购买者多次显示不需要的用户登录画面的效果。此外,近年来,大致保持有1人1 台以上的移动终端,所以例如对于购买的洗涤机,使用父亲的移动终端进行用户登录,在使用母亲的移动终端接触在洗涤机的NFC标签上的情况下,如果虽然是同一家庭也判断为不同的用户请求再登录,则会显示用户登录变更画面。对于该问题,如步骤953e那样将用户ID也作为家庭ID建立联系管理,在判别为是相同家族的情况下,判断为是正常进行了用户登录的状态,具有不需要对购买者多次显示不需要的用户登录画面的效果。
在步骤953d中,在No的情况下,向步骤953g前进,显示用户登录画面,在步骤953h中,在有GPS等的终端的位置信息的情况下(Yes),向步骤953j前进,检查是否处于特定的地域中?是否该设备(型号)处于被销售的建筑物内,向圈6(图259)前进。
在步骤953e中,在No的情况下,向圈5(图258)前进。
接着,说明图257。
在步骤954a中,将上述的电话号码、电子邮件地址、URL显示在画面上,在步骤954b中,连接在服务器上,在有进行信息的交换的数据的情况下(Yes),向步骤954c前进,在No的情况下,向步骤954d前进并结束。
在步骤954c中,进行对使用者敦促将“移动到圈内”的显示,在步骤 954e中,使从标签读取的数据保存到存储器中而设为“得到状态”,在步骤 954f中,在进入到圈内的情况下(Yes),前进到步骤954g,在No的情况下向步骤954c返回。
在步骤954g中,连接到记录在标签或移动终端中的URL的服务器上,在步骤954h中,进行用户认证,在步骤954j中,将从标签读取的信息本身或加工后的信息向服务器传送,或者基于从服务器传送来的应用进行处理。
由此,具有以下效果:即使用移动终端接触在家电设备上的地方是电波范围外,当使用者移动到圈内后也能够接着进行用户认证、用户登录及变更、显示对应于设备的菜单画面等。
接着,说明图258。
在步骤955a中,在能够通过GPS等获得终端的位置信息的情况下 (Yes),向步骤955b前进,在步骤955b中,在终端的位置信息与登录在服务器中的位置信息大致一致的情况下(Yes)向步骤955c前进。
在步骤955c中,在服务器中记录有表示“可以使用其他ID用户”的识别符的情况下(Yes),向步骤955d前进,进入到访客模式。
在步骤955c中,在No的情况下,向步骤955e前进而停止。
由此,具有能够在家族以外的访客的移动终端上仅对指定的家电设备使功能动作的效果。例如,在家族外的访客来访到自家的情况等时,在进行了对访客许可在移动终端上使电视机遥控器功能动作、但不向让家族外看到洗涤机的洗涤履历的判断的情况下,只要关于电视机将表示“可以使用其他ID用户”的识别符设为ON、关于洗涤机将表示“可以使用其他ID 用户”的识别符设为OFF就可以。此外,通过定义访客模式,还具有虽然不使家族外看到洗涤机的洗涤履历、但仅错误代码许可用移动终端显示等、能够仅将一部分功能向访客提供的效果。
在步骤955b中,在No的情况下向步骤955f前进,在步骤955f中,将将“住址变化了?”“持有者变化了?”的疑问显示在移动画面上,在Yes 的情况下,向步骤955g前进,显示住址变更菜单或使用者变更菜单。
由此,在拿着以前使用的家电进行搬家的情况下等在购买时用户登录的住址变化的情况下,具有即使用户忘记用户登录的情况下也能够自动地敦促用户登录的效果。
在步骤955f中,在No的情况下向步骤955h前进,继续处理。
接着,作为关于家电设备被在家电销售店中展示的状况的实施方式,使用图259进行说明。
在步骤956a中,在处于对应的地域中的情况下(Yes),向步骤956b 前进,在No的情况下,向步骤956c前进,进行用户登录作业。
这里,该地域一般是表示家电销售店的地面的空间信息,由GPS信息等构成。是该地域的判别既可以使用移动终端的位置信息,也可以使用店铺的信标。也可以参照家电流通路径信息和当前时间判别为存在于店铺中。
由此,在家电设备存在的地方处于销售店中的情况下,具有防止有恶意的用户将展示在销售店中的未购买商品非法地进行用户登录的效果。
在步骤956b中由服务器和移动终端(用户ID)进行用户认证,在步骤956d中,在用户认证OK的情况下(Yes),向步骤956e前进,在No的情况下,向步骤956f前进,停止动作。
在步骤956e中,要求该销售店或制造商固有的口令输入。
在步骤956g中认证,向步骤956h前进。
在步骤956h中认证OK的情况下(Yes),向步骤956j前进,在No的情况下向步骤956k前进而停止。
在步骤956j中,在口令正确的情况下(Yes),向步骤956m前进,在 No的情况下向步骤956n前进而停止。
在步骤956m中,切换为展示模式,在步骤956p中,询问是否可以将展示模式识别符记录到标签或服务器中。
在步骤956p中,在Yes的情况下,向步骤956q前进,将服务器或标签的展示模式识别符设为ON,在步骤956r中,为了将该识别符信息向服务器传送、或记录到放置标签的存储器区域中,将识别符信息、口令、鍵信息加密而向标签传送,在步骤956s中继续展示模式。
标签在步骤956t中,使用标签中的密钥认证接受到的密钥、口令,在步骤956u中,在认证OK的情况下(Yes)向步骤956v前进,在标签中的展示模式识别符区域中记录意味着ON的值。
在步骤956u中,在No的情况下向步骤956w前进而停止。
在步骤956p中,在No的情况下向步骤956s前进。
由此,具有能够防止有恶意的客人将展示在店铺中的家电设备的展示模式等胡乱变更的效果。此外,具有能够防止有恶意的客人将展示模式非法地设为OFF、防止对未购买商品的非法的用户登录的效果。此外,即使在没有展示模式的情况下,也具有通过设备处于店铺内且要求销售店或制造商固有的口令输入,能够防止对于未购买商品的非法的用户登录的效果。
此外,在步骤956m中切换为展示模式,但也可以进行用户登录作业。由此,具有防止对未销售家电的非法用户登录、并且家电销售店的销售负责者能够代替消费者在销售店铺中进行用户登录的效果。
图260说明在实施例23、34、25及其他实施例中说明的标签中记录的信息的属性。
(实施方式25)
对本发明的实施方式25进行叙述。在图261中表示在本实施方式中设想的移动终端5201,在图262中表示在本实施方式中设想的家电设备5211。在本实施例中,表示当移动终端5201和家电设备5211进行近距离无线通信时使用两者的设备的指引功能简单地将近距离通信模组的天线部的对位进一步提高精度而进行近距离通信的方法。移动终端5201主要设想了前面部的几乎全部由显示装置构成的智能手机那样的终端。假设近距离无线模组的天线部搭载在显示部的按钮部的背面上。如图262所示,家电设备5211 在一般的家电的某个部分上搭载有近距离无线模组的天线部。进而,对于该NFC的天线的中心部的附近,部分地赋予某种作为记号的标记5301。作为记号的既可以是圆或十字等的一般的记号,也可以是表示接近模组的特殊的记号。此外,也可以利用制造商图标或商品图标等的原本带有的记号,但如图262的标记5301那样以天线5302的中心部为中心、在纵向上较长的十字标记5302的对位效果较高。
图263是显示本实施方式的移动终端5201的模组的天线位置530的状态的图。在本实施方式的移动终端5201中,在使用近距离无线通信时,将存在于背面上的近距离无线通信模组的天线位置显示在前面的显示装置上。显示器显示的方法既可以匹配于天线部形状,也可以使用一般的记号。还可以将多个显示方法组合使用。另外,显示器显示的种类也可以能够由用户选择。通过本发明,与在背面上带有表示模组的位置的显示的情况相比,能够减轻一边观看移动终端5201的背面一边将近距离无线模组接近的不方便的动作。
图264是显示本实施方式的家电设备5211的模组位置的状态的图。在本实施方式的家电设备5211中,在使用近距离无线通信时,进行指引显示。在通常时,标签位置是被印刷的标记,但在家电设备5211侧发生了想要对移动终端5201发送的数据的情况下,使用LED等进行明确地知道的显示。显示的种类与移动终端5201同样可以考虑各种种类,但基本上为以近距离无线通信模组为中心展开的图形。通过本发明,能够不损害白色家电等的简单的设计而在想要通信时明确地表示近距离无线通信模组的位置。
图265是本实施方式的移动终端5201和家电设备5211使用近距离无线通信模组进行通信时的状态图。用户仅通过朝向显示在家电设备5211侧的显示的中心、对准显示在移动终端5201上的标记,就能够正确地使接近模组接近。由此,能够很简单地在近距离无线模组的性能极限进行通信。本发明在移动终端5201侧、家电侧分别是有效的,但通过同时使用,能够期待更好的效果。
图266是将加速度计及陀螺仪与显示联动使用的情况的图。在使用以圆形展开的图形以外的情况下,匹配于移动终端5201的倾斜而显示。由此,用户能够根据显示在家电侧的图形使移动终端5201以喜欢的角度接近。一般而言,由于移动终端5201不呈圆形和正方形,所以本发明是有效的。
图267是联动使用背面的照相机的情况下的图。即使在家电侧进行指引显示,也被移动终端5201遮住,看不到的部分变多。通过使用照相机将家电侧的指引显示在移动终端5201上,能够解决该问题。移动终端5201 在背面上搭载有照相机的结构较多,所以本发明是有效的。另外,在照相机搭载在移动终端5201的天线位置的附近部的情况下,进行显示以使天线标记来到该照相机的影像中心,或者进行显示以使显示部的对位用的显示来到天线位置。但是,在不一致的情况下将自动焦点的距离数据或天线标记的大小从服务器下载,根据移动设备的位置信息确定对象的家电设备,根据天线的大小运算距离,将照相机中心与天线的位置的偏差修正,根据距离进行修正运算,以将家电的天线标记显示在中心部或对位标记的中心。
图268是与服务器5505联动下载实现本发明的应用的情况下的图。本发明需要将应用5501下载到移动终端5201中。在下载应用的情况下,从移动终端5201向服务器发送移动终端5201的型号信息5510,服务器用该型号检索坐标数据库5503,获得表示与型号对应的NFC的天线坐标和显示部5221的位置信息或两者的位置关系的信息。特别是,在表示是否如智能手机那样天线的中心位置处于显示部的背面的位置的识别信息表示“Yes (有)”的情况下,获得表示显示部的天线中心位置的天线位置显示坐标 5513a(x1,y1),与应用5501一起向移动终端5201h传送。该应用5501 用于NFC的读出且在读取时以天线位置显示坐标(x1,y1)为中心,如图 263的(5)~(12)的图的显示画面例的天线显示位置坐标5513(x1,y1) 的5513r、5513s、5513r、5513z、5513v、5513a、5513y、5513x那样显示,以使与天线的中心位置对应的位置成为中心。特别是,在如(4)所示那样十字显示5521的情况下,通过使用者正好对准于家电侧的天线标记5321a、 5321b,能够高精度地使两者的天线位置对准,所以具有能够可靠地读写标签的数据的效果。特别是,如图271所示,在如花费1分钟左右进行家电固件的更新、数据的下载时那样、需要将天线位置长时间通过人的手持续对准的情况下效果较高。在移动终端5201的坐标位置中装入对准的值而分发应用。服务器保持有包括表示各移动终端5201的近距离无线通信模组的天线的位置与显示部的位置的关系的信息的位置信息的数据库5503。通过这样,能够对应于各种种类的移动终端5201。另外,通过在各移动终端中预先记录天线位置显示中心坐标的方法,本发明的效果也完全不变化。
图269是实现本发明的移动终端5201的功能块图。控制部一般使用无线通信部取得表示天线位置的显示坐标,记录到显示坐标保持部中。如果近距离无线通信部要开始近距离无线通信,则控制部从坐标保持部取得坐标,从天线位置显示图像保持部取得显示图像,在显示器部的对应坐标处显示图像。也可以同时将来自照相机部的影像显示在显示器部上。如果近距离无线通信天线部接近于家电的近距离无线通信模组则开始通信。
图270是关于家电设备5211的异常发生时的指引显示的状态变迁图。假设家电设备5211如果发生异常则显示红色。这里,所谓异常,表示故障等的想要紧急向用户通知需要近距离无线通信的状况。假设如果异常的通知完成则显示蓝色。进而,假设在异常的程度较低的情况下、例如在过滤器更换或固件更新请求等的情况下显示黄色。另外,颜色的显示并不限定于该两种颜色。此外,也可以通过警告音等进行用户通知。
图271是进行长时间的通信的情况下的图。在进行固件更新等的长期间的通信的情况下,对用户通知剩余时间。也可以在移动终端5201侧显示消息,也可以使用家电设备5211侧的显示。
图272是显示具有显示器显示部的家电设备5211的指引时的图。家电设备5211的近距离无线通信模组不设置在背面上。此外,也不设置在显示器显示部上。因此,设置在显示器以外的部分上的近距离无线通信模组进行易理解的显示。既可以是十字等的显示,也可以用箭头等显示。
图273是本实施方式25的流程图。在家电设备5211上,如图262那样印刷有以天线5302的中心部为中心的长度d1的印刷标记5301。也可以倒转。在发生事件的情况下,或在一定的期间中没有进行近距离无线通信的情况下(步骤5201a),尝试向服务器的连接。在能够进行经由因特网的连接的情况下,在步骤5201b中经由因特网经由向服务器发送信息(步骤5201k)。在不是的情况下或不能通信功能的情况下,为了使用近距离无线通信进行向服务器的连接,如中心配置在家电的天线的中心部的图262的点亮标记那样将至少水平方向的长度比印刷标记5301的长度d1大的长度 d2的点亮标记5321a、5321b点亮显示。具体而言,如图271的(1)到(2) 的显示标记5321、5320那样变化。印刷标记5301由于不能灭掉,所以如果是大型的,则设计方面的自由度变小。但是,如图271的(3)那样,点亮标记5321e、5320f比印刷标记5301大,即d2>d1,所以能够进行比智能手机等的移动终端5201大的形状的显示,所以显示标记不会被移动终端遮挡,能够得到移动终端的天线与家电的天线的对位变得容易的较显著效果。这样,如图270(2)那样使十字显示的点亮标记5321用红色显示(闪烁)。在异常类错误以外的通常错误中用别的颜色(例如蓝色)显示(图270(3) 及图271(4))。这里所谓的异常类错误,是故障等在通常动作中不发生的错误,所谓通常错误,是空调的过滤器更换等的即使进行通常动作也会发生的不是故障的错误。在不是错误的情况下也想要对服务器发送信息的情况下也可以用某种形状进行显示(5201c)。在错误的情况下发出警告音(5201d)。在一定时间内没有近距离无线通信(接触)的情况下,判断为用户不在附近,停止声音(5201f)。进而,使闪烁的间隔变长、或变暗 (5021g)。通过根据家电保持的使用履历推测该用户的设备的使用时间带、以该时间点亮或缩短点亮的间隔来进行节电(5201h)。进而,在长时间没有接触的情况下,再次发出声音(5201j)。在检测到接触的情况下开始数据转送(5201k)。用户在看到家电侧的点亮显示、或听到声音的情况下 (5202),如果启动移动终端5201的应用(5202b),则应用在显示部上显示以配置在显示部背侧的NFC的天线部的大致中心部的显示部的对应部分为中心的十字标记或圆标记等的接触指示标记(5202c)。从移动终端5201 通过天线开始电波的发送(5202d),同时,使用者看着移动设备的接触指示标记和家电的天线显示标记而尝试对准移动终端的位置(5202e)。重复轮询(5202g),在一定时间内开始通信的情况下(5202h),将家电部的近距离无线通信部的存储器内的数据读出(5203d)。在一定时间中不能开始通信的情况下(5202h),先结束轮询(5202j),发出“请再一次对准”的显示(5203a)。使用户再次进行对位,在即使这样也不能通信的情况下(5203b)结束(5203c)。在将数据读出时根据最初发送的数据取得应读出的数据量和家电侧的通信速度(5203e)。根据通信状况计算错误率。也可以向服务器传送(5203f)。根据数据量、通信速度和错误率计算读取花费的时间(5203g)。并且,将推测读取时间显示在显示部上(5204a)。将剩余时间也用棒状或圆形状的指示符显示。如果通信完成(5204b),发出完成显示(5204c),将数据向服务器传送(5204d)。随着数据转送进行(5204e),家电侧也可以使显示部变量、或使闪烁变快、使颜色恢复等的处理(5204f)。如果通信完成(5204g),则将完成向移动设备通知(5204h)。在通信完成后(5204j),将闪烁变更为点亮(5204k),在一定时间后灭掉(5204m)。
如以上这样,在本发明中,通过使用智能手机等的移动终端接触(近距离通信)在家电上,将家电的信息向服务器发送,能够通过天线和IC1 个很便宜的成本和简单的结构享受因特网服务,从服务器向使用者经由移动终端24小时提供数据,但从家电向移动终端、向服务器的持续只要不接触就不进行。但是,在本发明中,在从家电向服务器一定时间不连接时、或因故障而需要连接到服务器上的情况下,要求以NFC的天线为中心而红色等的LED点亮、或发出声音而对使用者用光或声音要求接触,所以具有能够经由人进行从家电向移动终端或服务器的连接的效果。此外,以家电的NFC的天线为中心,显示比印刷标记大的点亮显示标记。通过做成比智能手机大的标记,具有即使由智能手机将天线部遮挡、也能够通过十字显示目视天线的位置的效果。
此外,在发明中,将与处于智能手机的背侧的天线的中心位置对应的显示部的显示时的坐标信息(x1,y1)作为参数预先保持在移动设备的存储器部中,所以能够在显示部上显示天线的位置。特别是,通过如图263 的(4)那样在与家电侧的NFC的天线显示标记5321a、5321b对应的位置上将移动侧的天线位置标记显示为十字符形,使用者能够容易地将两者的天线位置对准,所以有数据转送开始的时间变快、或在长时间的下载时也不发生错误的效果。上部的显示部的坐标信息如果在从服务器读取用的应用的下载时从服务器获得也能够得到相同的效果。此外,也可以使用表示移动终端的天线的物理位置与显示元件的物理位置或显示位置的位置关系的信息、或各自的位置信息。十字标记是有效的,但也可以将圆形或方形的显示显示在移动终端的显示部上。重要的是家电侧的标记与移动侧的显示标记的位置用眼睛观察容易一致。
如果如图272的显示标记5401那样在TV那样的显示器的显示部上显示天线的位置标记,则即使是画面的周边的框较窄的显示器也能够较大地显示。
在本发明中,在如智能手机等那样、在显示部的背面部有天线的情况下,天线配置识别信息是ON。在此情况下,在对应于天线的中心部的显示部的区域的坐标位置信息、例如横480×纵1200像素的显示部的情况下,将天线的中心位置定义为(x,y)=(200点,400点)。仅通过这样,就能够可靠且简单地确定全部制造人员的便携电话的天线位置,所以能够得到容易规格化或标准化的效果。在此情况下,也可以将天线的区域如端点 (150,200)和端点(250,500)那样定义来确定天线的范围。进而,在该方式中,数据量也最小,所以也不会消耗存储器。只要将该数据存储到移动终端的存储部中就可以。此外,也可以从服务器下载而存储到移动终端的天线坐标存储专用区域中。在此情况下,在读取用的应用下载时输入该数据。由此,在应用的下载时能够自动地确定天线位置。通过该坐标信息能够得到较显著效果。
此外,由于在图268的两折型的便携电话中在按钮部的背侧有天线,所以通过如移动终端5201m那样基于天线位置数据使以其为中心的按钮的水平方向和垂直方向点亮来进行十字显示、或通过设置别的显示部,能够与家电部的十字等的天线显示标记一致而进行显示。由此,具有即使是以往型的便携电话也能够进行天线位置的显示的效果。
接着,使用图277说明本发明的同步的运转时的向移动终端的等待画面的显示方法。
在步骤5205a中,选择家电的预约画面,在Yes的情况下向步骤5205b 前进,输入预约开始时间、工序的内容、种类的参数,在步骤5205c中,如果是如洗涤机那样根据洗涤物不同而运转时间变动的情况(Yes的情况),则向步骤5205d前进,将“强制同步运转模式”设为ON或OFF,向步骤 5205e前进。
在步骤5205c中,在No的情况下也向步骤5205e前进。
在步骤5205e中,在接触的情况下(Yes),向步骤5205f前进,在No 的情况下重复。
在步骤5205f中,将设定的程序等的命令向家电发送,在步骤5205g 中,家电接受数据,在步骤5205h中,发送从开始到结束的步骤的预测时间的程序数据。
从步骤5205h起,家电部向步骤5205i前进,开始程序,在步骤5205j 中,当强制同步运转模式为ON时,或者在运转时间不变化时(Yes),向步骤5205k前进,终端和家电进行同步运转,在步骤5205m中,例如在洗涤机最大20分钟的作业在15分钟结束的情况下,停止5分钟直到成为20 分钟。由此,终端与家电完全同步。
在步骤5205j中,在No的情况下,向步骤5205n前进,进行与终端不一定同步的运转。
从步骤5205起,移动终端向步骤5205p前进,接受程序,在步骤5205q 中开始程序,在步骤5205r中,当强制同步运转模式为ON时,或当运转时间不变化时(Yes),前进到步骤5205s,进行与家电的运转相同的显示,在步骤5205t中,当如图278的5302a那样成为等待画面时,向步骤5205u 前进,在画面上显示表示家电的当前的状况的图标5305,5306,5307。例如,如果开始空调的预约开始动作,则将该动作开始及剩余时间如图标 5306b、5305b、5305c那样显示。如果将该图标用手指按下,则如5303那样,切换为该家电、例如洗涤机的菜单画面。这里,如果将预约画面的图标5309a用手指按下洗涤,则进入到画面5304那样的预约的画面,在家外也知道洗涤机或空调进行了怎样的预约。
即,在本发明中,仅在接触时进行通信,但即使移动终端与家电不通信,也以相同的程序强制地使各家电如用程序设定那样进行同步运转,所以具有即使外出也仅通过观看移动终端的等待画面就详细地知道家中的家电的当前的动作状况、经由移动终端也向使用者进行洗涤的完成及制暖的开始等的通知的效果。能够得到使用者被提供宛如用网络连接那样的服务的效果。
在步骤5205r中,在No的情况下,前进到步骤5205y,使终端显示家电的大致时间。此时,例如如果为洗涤、干燥时间的最小需要时间和最大需要时间的情况下的完成时间,则将该显示显示在等待画面上。在本发明中,即使在等待画面5351a的状态下家电用应用也动作,不仅用图标如图 278(1)那样显示,还如图278(2)的等待画面5351b那样显示当前的家电的动作状况,所以能够不进行移动终端的操作而总是掌握家电的当前的状况。在本发明中,由于将动作完成的家电的图标从等待画面消除,所以也有减少不需要的图标而容易观察的效果。
以上,基于实施方式对本发明的通信装置进行了说明,但本发明并不限定于该实施方式。只要不脱离本发明的主旨,对本实施方式实施了本领域的技术人员想到的各种变形后的方式、或将不同的实施方式的构成单元组合而构建的方式也包含在本发明的范围内。
另外,在使用图263说明的实施方式中,以在显示器或LED的背面上有NFC天线中心部的方式进行了说明,但假如NFC天线中心部不是液晶显示器或LED的背面、而配置在没有显示装置的部分的背面部上的情况下,也将以NFC天线中心部为中心的同心圆的一部分显示在显示器上。在此情况下,虽然没有将同心圆的中心显示在显示器上,但通过将同心圆的一部分的曲线表示给使用者,具有使用者仅通过将显示在移动终端上的同心圆的一部分与家电设备的标识对准、就能够将NFC天线的中心部放在适当的位置上的效果。
此外,在使用图267说明的实施方式中,设为使用照相机,但也可以在检测到照相机的启动、或NFC读取器的启动、或因移动终端接触在家电设备的NFC标签上而带来的NFC电场强度的变化、或加速度传感器等感知到的移动终端与家电设备的接触的情况下,使搭载在移动终端中的LED 照明点亮。在移动终端中,主要为了照相机的闪光灯而搭载有白色LED的结构较多。由此,在使用照相机的情况下,具有解决家电终端的标记被移动终端的影子遮挡而变暗、不能显示在照相机中的问题的效果。在此情况下,通过将照相机的镜头部配置在移动侧的NFC的天线之中的部分上,能够不进行图像的修整而捕捉家电侧的天线的影像。在此情况下,或在照相机镜头稍稍偏差的情况下,通过根据照相机的影像由模式辨识辨识家电侧的天线的配置标记,能够检测家电侧与移动终端侧的天线的偏差,所以通过在移动终端的画面上进行右、左、上、下的箭头显示,使用者能够将天线位置正确地对准。在此情况下,通过用声音表示一致的比率,对准变得更容易。通过随着从中心部偏离而使警告音变大或变高,能够向使用者通知位置的偏差。
此外,在图268中,在移动终端5201m的按钮部上发光显示天线指引用的十字线,但仅通过这样,对于初次使用的使用者并不明白。因而,通过在移动终端5201m的画面部显示移动终端的整体的图像、并且显示使按钮部的线显示与家电侧的天线的标记一致的图像,即使是初用者也知道只要使按钮部的线标记发光部与家电侧的十字的天线显示标记一致就可以。因此,具有操作变得简单的效果。
在本发明中,通常将天线的指引显示显示在移动终端的画面上,但当移动设备的NFC作为“读写器”动作时显示天线的指引。但是,当移动终端的NFC作为“IC标签”动作时不进行显示。根据情况保持灭灯的状态。由此,有能够防止不需要的显示元件及显示部的不需要的发光而节电的效果。这是因为,当作为IC标签使用时,由于读写器侧的天线很大,所以不需要天线的指引。此外,在IC标签的情况下只要读取就可以,所以不需要一定使显示部发光。
另外,也可以是在与NFC天线侧相反侧的壳体面上、在与上述天线的中心部的位置对应的部分设有LED等的发光显示装置的移动终端。由此,在放置NFC天线的情况下,具有能够对用户将NFC天线中心部向使用者明确地传达的效果。
工业实用性
本发明的通信装置对于使用便携电话或智能手机等通信装置、利用通信装置的RFID和GPS、运动传感器等各种传感器简单地提供多遥控器、家电内容下载等扩展用户界面的通信装置具有实用性。即,有关本发明的通信装置作为具有运动传感器、通过取得通信装置的指向方向来简单地提供家电设备的扩展用户界面的通信装置具有实用性。
标号说明
100 通信系统
101 终端设备
102 通信装置
102a 最小结构部
103 因特网
104 服务器设备
105 控制器
106 存储器
107 近距离无线通信部
108、109 天线
110 显示部
111 按键
201 近距离无线通信部
202 近距离无线检测部
203 设备信息取得部
204 外部通信部
205 传感器部
206 位置信息取得部
207 方向感知部
208 指向空间计算部
209、309、409 设备判断部
209a 选择部
210 移动判断部
211 操作信息设定部
212 操作信息取得部
213 存储部
214 显示信息决定部
215 操作信息发送部
216 操作履历取得部
217 声音传感器
219 通信天线
220 接收部
221 发送部
222 通信控制部
223 加速度传感器
224 GPS传感器
225 角速度传感器
226 方位传感器
227 绝对位置取得部
228 相对位置取得部
229 位置信息计算部
2092 设备方向计算部
2093 差计算部
2094、3096、4094 设备决定部
3095 空间信息存储部
4092 设备候选输出部
4093 用户输入取得部
4095 设备俯仰角取得部
4096 设备俯仰角存储部
1201 空调
1203 2维条码
O10、O50 RF-ID
O50C、O50D、O50F 空调
O51 制品ID
O52 第1服务器URL
O53 服务ID
O54 精度识别符
O60 移动设备
O61 天线
O62 RF-ID读写器
O63 坐标精度识别信息
O64 CPU
O65 程序执行部
O66 数据处理部
O67 存储器部
O68d 显示部
O68 通信天线
O70 发送部
O71 接收部
O72 通信部
O73 位置信息存储部
O74 RF-ID存储部
O75 RF-ID检测部
O76 URL
O77 再生部
O78 相对位置运算部
O79 坐标信息送出部
O80 记录部
O81 建筑物坐标数据输出部
O82 登录坐标
O83 判断部
O84 基准坐标
O85 位置信息输出部
O86 位置信息
O87、O89 朝向信息
O88 磁罗盘
O90 卫星用天线
O91 位置信息运算部
O92 位置信息
O93 位置信息修正部
O94 朝向信息修正部
O95、O96、O97 角速度传感器
O98、O99、O100 加速度传感器
O101 第1服务器
O102 登录坐标数据
O103 第2服务器
O104 建筑物坐标数据库
O105 积分器
O106 积分器
O107 绝对坐标运算部

Claims (5)

1.一种通信方法,通过具有多个天线的通信装置进行通信,包括以下步骤:
使用上述多个天线,接收由便携通信终端发送的多个电波的步骤,该多个电波包括:不在室内的墙壁反射而接收到的第1电波、以及在上述室内的墙壁反射并接收到的第2电波;
计算由上述多个天线接收的上述多个电波的相位及振幅的特性,基于上述特性,检测上述便携通信终端的位置的步骤;
生成对于上述便携通信终端的位置最佳的波束的步骤;
从上述多个天线发送上述最佳的波束的步骤,
上述特性包括:通过检测上述便携通信终端的多个电波之中的上述第1电波与上述第2电波之间的相位差而得到的与该相位差对应的距离。
2.如权利要求1所述的通信方法,还包括:
使用由上述多个天线发送的电波的相位、振幅及上述距离,计算上述便携通信终端与上述多个天线之间的多个特性的步骤;
预先计算多个预备特性、以及与多个上述预备特性对应的上述便携通信终端的位置信息的步骤;
比较多个上述预备特性与上述特性的步骤;
确定与上述特性近似的上述预备特性的步骤;
将与上述预备特性对应的上述便携通信终端的位置信息作为上述便携通信终端的位置检测的步骤。
3.一种具有多个天线的通信装置,具备:
接收部,具有接收由便携通信终端发送的多个电波的上述多个天线,该多个电波包括:不在室内的墙壁反射而接收到的第1电波、以及在上述室内的墙壁反射并接收到的第2电波;
检测部,计算由上述多个天线接收的上述多个电波的相位及振幅的特性,基于上述特性,检测上述便携通信终端的位置;
生成部,生成对于上述便携通信终端的位置最佳的波束;以及
发送部,从上述多个天线发送上述最佳的波束,
上述特性包括:通过检测上述便携通信终端的多个电波之中的上述第1电波与上述第2电波之间的相位差而得到的与该相位差对应的距离。
4.一种位置检测方法,从权利要求3所述的通信装置接收上述特性,并基于上述特性检测上述便携通信终端的位置,包括以下步骤:
预先保存多个预备特性、以及与多个上述预备特性对应的上述便携通信终端的位置信息的步骤;
比较多个上述预备特性与上述特性的步骤;
确定与上述特性近似的上述预备特性的步骤;
将与上述预备特性对应的上述便携通信终端的位置信息作为上述便携通信终端的位置检测的步骤。
5.如权利要求4所述的位置检测方法,还包括:
在存在多个与上述特性近似的上述预备特性的情况下,从上述便携通信终端接收精度低的位置信息的步骤;
基于上述精度低的位置信息,确定上述预备特性的步骤。
CN201410509495.0A 2009-11-30 2010-11-30 通信方法、通信装置及位置检测方法 Active CN104270547B (zh)

Applications Claiming Priority (7)

Application Number Priority Date Filing Date Title
JP2009272792 2009-11-30
JP2009-272792 2009-11-30
JP2010224423 2010-10-01
JP2010-224423 2010-10-01
JP2010262993 2010-11-25
JP2010-262993 2010-11-25
CN201080006022.9A CN102301738B (zh) 2009-11-30 2010-11-30 通信装置

Related Parent Applications (1)

Application Number Title Priority Date Filing Date
CN201080006022.9A Division CN102301738B (zh) 2009-11-30 2010-11-30 通信装置

Publications (2)

Publication Number Publication Date
CN104270547A CN104270547A (zh) 2015-01-07
CN104270547B true CN104270547B (zh) 2018-02-02

Family

ID=44066132

Family Applications (2)

Application Number Title Priority Date Filing Date
CN201080006022.9A Active CN102301738B (zh) 2009-11-30 2010-11-30 通信装置
CN201410509495.0A Active CN104270547B (zh) 2009-11-30 2010-11-30 通信方法、通信装置及位置检测方法

Family Applications Before (1)

Application Number Title Priority Date Filing Date
CN201080006022.9A Active CN102301738B (zh) 2009-11-30 2010-11-30 通信装置

Country Status (5)

Country Link
US (2) USRE46108E1 (zh)
EP (2) EP2797349B1 (zh)
JP (4) JP5683485B2 (zh)
CN (2) CN102301738B (zh)
WO (1) WO2011065028A1 (zh)

Families Citing this family (220)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US10735576B1 (en) * 2005-07-14 2020-08-04 Binj Laboratories, Inc. Systems and methods for detecting and controlling transmission devices
US20070218837A1 (en) * 2006-03-14 2007-09-20 Sony Ericsson Mobile Communications Ab Data communication in an electronic device
WO2009072175A1 (ja) * 2007-12-03 2009-06-11 Fujitsu Limited パケット通信装置及びパケット通信方法
US8627075B2 (en) 2008-12-26 2014-01-07 Panasonic Corporation Communication device that receives external device information from an external device using near field communication
JP5691597B2 (ja) * 2011-02-10 2015-04-01 ソニー株式会社 近接通信装置、表示制御方法およびプログラム
KR101606134B1 (ko) * 2009-08-28 2016-03-25 삼성전자주식회사 휴대용 단말기에서 이미지 인식을 통하여 디바이스 연결을 수행하기 위한 장치 및 방법
EP2797349B1 (en) 2009-11-30 2018-09-26 Sun Patent Trust Communication device with several antennas, communication method, and position determination method
USRE45980E1 (en) 2009-11-30 2016-04-19 Panasonic Intellectual Property Corporation Of America Communication device
WO2011065007A1 (ja) 2009-11-30 2011-06-03 パナソニック株式会社 携帯型通信装置、通信方法、集積回路、プログラム
TW201133275A (en) * 2010-03-26 2011-10-01 Modiotek Co Ltd Remote controller and related system
JP2011248765A (ja) * 2010-05-28 2011-12-08 Sony Corp 情報処理装置、情報処理システム及びプログラム
JP5494242B2 (ja) * 2010-05-28 2014-05-14 ソニー株式会社 情報処理装置、情報処理システム及びプログラム
JP5937510B2 (ja) 2010-11-25 2016-06-22 パナソニック インテレクチュアル プロパティ コーポレーション オブ アメリカPanasonic Intellectual Property Corporation of America 通信機器
JP5897462B2 (ja) 2010-11-30 2016-03-30 パナソニック インテレクチュアル プロパティ コーポレーション オブアメリカPanasonic Intellectual Property Corporation of America 端末機器、通信装置および通信方法
FR2971349B1 (fr) * 2011-02-09 2015-12-04 Continental Automotive France Procede de reprogrammation d'un calculateur, support de memorisation de donnees et calculateur de vehicule automobile
US9727879B2 (en) * 2011-03-30 2017-08-08 Nokia Technologies Oy Method and apparatus for providing tag-based content installation
JP5807871B2 (ja) * 2011-06-27 2015-11-10 セイコーインスツル株式会社 端末装置、通信システム及び端末装置の起動方法
US20130006953A1 (en) * 2011-06-29 2013-01-03 Microsoft Corporation Spatially organized image collections on mobile devices
US8965731B2 (en) * 2011-07-11 2015-02-24 Blackberry Limited Methods and devices to determine a mobile device housing position
KR101276861B1 (ko) * 2011-07-27 2013-06-18 엘지전자 주식회사 가전제품 및 이를 포함하여 이루어지는 온라인 시스템
KR101276857B1 (ko) 2011-07-27 2013-06-18 엘지전자 주식회사 가전제품 및 이를 포함하여 이루어지는 온라인 시스템
KR101819510B1 (ko) 2011-08-22 2018-01-17 엘지전자 주식회사 세탁장치 및 이를 포함하여 이루어지는 온라인 시스템
EP2755374B1 (en) * 2011-09-09 2018-08-22 Panasonic Corporation Communication method and apparatus
US9729685B2 (en) 2011-09-28 2017-08-08 Apple Inc. Cover for a tablet device
KR101958902B1 (ko) * 2011-09-30 2019-07-03 삼성전자주식회사 전자기기들의 그룹 제어 방법 및 그를 위한 전자기기 관리 시스템
JP2013090125A (ja) * 2011-10-18 2013-05-13 Gaia Holdings Corp 家電情報蓄積サーバ
JP6026890B2 (ja) 2011-10-31 2016-11-16 パナソニック インテレクチュアル プロパティ コーポレーション オブ アメリカPanasonic Intellectual Property Corporation of America 位置推定装置、位置推定方法、プログラムおよび集積回路
JP5988988B2 (ja) 2011-10-31 2016-09-07 パナソニック インテレクチュアル プロパティ コーポレーション オブ アメリカPanasonic Intellectual Property Corporation of America 位置推定装置、位置推定方法、プログラムおよび集積回路
IL216057A (en) * 2011-10-31 2017-04-30 Verint Systems Ltd System and method for intercepting IP traffic by image processing
US8942628B2 (en) 2011-11-28 2015-01-27 Qualcomm Incorporated Reducing power consumption for connection establishment in near field communication systems
US8903312B2 (en) * 2011-11-28 2014-12-02 Qualcomm Incorporated Modified connection establishment for reducing power consumption in near field communication systems
CN103138883B (zh) * 2011-12-01 2018-05-11 中国移动通信集团公司 一种避免家庭无线设备误对码的方法、系统和装置
CN103176090A (zh) * 2011-12-20 2013-06-26 鸿富锦精密工业(深圳)有限公司 影像量测机的硬件诊断系统及方法
JP5975404B2 (ja) * 2012-01-25 2016-08-23 パナソニックIpマネジメント株式会社 電気機器
US9258283B2 (en) * 2012-01-25 2016-02-09 Panasonic Intellectual Property Management Co., Ltd. Key management system, key management method, and communication device
JP5888594B2 (ja) 2012-01-30 2016-03-22 大日本印刷株式会社 情報収集装置
DE102012002657A1 (de) * 2012-02-10 2013-08-14 Weber Maschinenbau Gmbh Breidenbach Vorrichtung mit erweiterter Realität
JP5488626B2 (ja) * 2012-02-16 2014-05-14 船井電機株式会社 携帯情報端末
JP5950151B2 (ja) 2012-02-28 2016-07-13 ソニー株式会社 電子機器、電源制御方法、およびプログラム
KR101332832B1 (ko) * 2012-03-06 2013-11-27 모젼스랩(주) 형태 인식 장치를 이용한 실내 이용자 측위 방법
WO2013132851A1 (ja) * 2012-03-06 2013-09-12 パナソニック株式会社 携帯装置、携帯装置の制御方法及びサーバ装置
KR20130102159A (ko) * 2012-03-07 2013-09-17 주식회사 팬택 모바일 장치 및 그 운용 방법
TWI462522B (zh) * 2012-03-16 2014-11-21 Sampo Corp 遠端遙控系統及方法
JP2013196508A (ja) * 2012-03-21 2013-09-30 Ricoh Co Ltd 機器管理システム、機器管理方法、サーバ装置、及び機器管理プログラム
JP5915338B2 (ja) 2012-03-30 2016-05-11 ブラザー工業株式会社 通信装置
JP5966527B2 (ja) 2012-03-30 2016-08-10 ブラザー工業株式会社 通信装置
JP5962146B2 (ja) 2012-03-30 2016-08-03 ブラザー工業株式会社 通信装置
JP5857850B2 (ja) 2012-03-30 2016-02-10 ブラザー工業株式会社 通信装置
US8682248B2 (en) * 2012-04-07 2014-03-25 Samsung Electronics Co., Ltd. Method and system for reproducing contents, and computer-readable recording medium thereof
WO2013151375A1 (en) 2012-04-07 2013-10-10 Samsung Electronics Co., Ltd. System and method of providing control information to device regarding product
JP5979945B2 (ja) * 2012-04-09 2016-08-31 任天堂株式会社 情報処理プログラム、情報処理装置、情報処理システムおよび情報処理方法
US9380621B2 (en) * 2012-04-12 2016-06-28 Telefonaktiebolaget Lm Ericsson (Publ) Pairing a mobile terminal with a wireless device
EP2843973B1 (en) * 2012-04-27 2019-02-06 Sony Corporation Information processing device, information processing method, and program
JP5945934B2 (ja) 2012-05-09 2016-07-05 ブラザー工業株式会社 無線通信装置
JP2013238347A (ja) * 2012-05-15 2013-11-28 Panasonic Corp 無線通信システム及び家電機器
JP6040574B2 (ja) * 2012-05-29 2016-12-07 株式会社リコー 位置情報管理システム、位置情報管理方法、通信装置及び無線端末
US9035872B2 (en) 2012-06-08 2015-05-19 Apple Inc. Detection system and method between accessory and electronic device
US20130331027A1 (en) * 2012-06-08 2013-12-12 Research In Motion Limited Communications system providing remote access via mobile wireless communications device and related methods
CN102739862A (zh) * 2012-06-08 2012-10-17 深圳市亿思达显示科技有限公司 一种智能手机遥控器
EP2677719A1 (en) * 2012-06-19 2013-12-25 Alcatel Lucent A method for interfacing a communication terminal with networked objects
JPWO2014002322A1 (ja) * 2012-06-26 2016-05-30 日本電気株式会社 携帯端末、電子機器制御システム、及び電子機器制御方法
JPWO2014002323A1 (ja) * 2012-06-26 2016-05-30 日本電気株式会社 携帯端末、電子機器制御システム、及び電子機器制御方法
US9258127B2 (en) * 2012-07-09 2016-02-09 Cisco Technology, Inc. System and method for providing cryptographic video verification
US20140022968A1 (en) * 2012-07-17 2014-01-23 Procter And Gamble, Inc. Home network of connected consumer devices
KR20140011857A (ko) * 2012-07-20 2014-01-29 삼성전자주식회사 이동 단말에서 디스플레이 장치의 디스플레이를 제어하기 위한 방법 및 이를 위한 이동 단말
US8923817B2 (en) * 2012-08-06 2014-12-30 Google Inc. Mobility device security
US9038897B2 (en) 2012-09-04 2015-05-26 Honeywell International Inc. System and approach to convey data with a handheld device via a multi-dimensional code
US9548813B2 (en) * 2012-09-04 2017-01-17 Universal Electronics Inc. System and method for provision of appliance control functionality to a smart device
KR20140032262A (ko) 2012-09-06 2014-03-14 엘지전자 주식회사 가전제품 및 이를 포함하여 이루어지는 온라인 시스템
KR101797493B1 (ko) 2012-09-06 2017-11-15 엘지전자 주식회사 가전제품 및 이를 포함하여 이루어지는 온라인 시스템
US9342980B2 (en) * 2012-09-12 2016-05-17 Panasonic Intellectual Property Corporation Of America Communication apparatus, which communicates with an external terminal, method of controlling a communication apparatus which communicates with an external terminal, program, and server
JP6239906B2 (ja) * 2012-09-19 2017-11-29 パナソニック インテレクチュアル プロパティ コーポレーション オブ アメリカPanasonic Intellectual Property Corporation of America アクセス制御方法、アクセス制御システム、通信端末、及び、サーバ
WO2014050088A1 (ja) 2012-09-28 2014-04-03 パナソニック株式会社 情報通知方法、情報通知システム及びサーバ装置
WO2014070220A2 (en) 2012-11-02 2014-05-08 Ge Intelligent Platforms, Inc. Apparatus and method for geolocation intelligence
JP5641167B2 (ja) * 2012-11-16 2014-12-17 株式会社村田製作所 無線通信機器及びアンテナ装置
US9591339B1 (en) 2012-11-27 2017-03-07 Apple Inc. Agnostic media delivery system
JP6024425B2 (ja) * 2012-12-03 2016-11-16 株式会社デンソー ナビゲーションシステム
CN103024450B (zh) * 2012-12-10 2016-09-14 惠州Tcl移动通信有限公司 一种通过nfc技术实现互动电视的方法及系统
US9774917B1 (en) 2012-12-10 2017-09-26 Apple Inc. Channel bar user interface
US10200761B1 (en) 2012-12-13 2019-02-05 Apple Inc. TV side bar user interface
US9532111B1 (en) 2012-12-18 2016-12-27 Apple Inc. Devices and method for providing remote control hints on a display
EP2938092A4 (en) * 2012-12-20 2016-06-29 Sony Corp COMMUNICATION DEVICE, COMMUNICATION PROCESS, COMMUNICATION SYSTEM AND COMPUTER PROGRAM
JP6294224B2 (ja) * 2012-12-28 2018-03-14 パナソニック インテレクチュアル プロパティ コーポレーション オブ アメリカPanasonic Intellectual Property Corporation of America 制御方法
JP6080548B2 (ja) * 2012-12-28 2017-02-15 キヤノン株式会社 通信装置、情報端末、それらの制御方法、プログラム
US10521188B1 (en) 2012-12-31 2019-12-31 Apple Inc. Multi-user TV user interface
US20150312879A1 (en) * 2013-01-25 2015-10-29 Hewlett-Packard Development Company, L.P. Indication of nfc location
TWI501110B (zh) * 2013-02-25 2015-09-21 Pixart Imaging Inc 通訊協定系統及其自動更新資料的方法
JP5829226B2 (ja) * 2013-02-28 2015-12-09 本田技研工業株式会社 ナビゲーションシステム、情報提供方法及び移動通信端末
US9600217B2 (en) * 2013-03-05 2017-03-21 Kyocera Document Solutions Inc. Portable apparatus displaying apparatus information on electronic apparatus
JP2014174589A (ja) * 2013-03-06 2014-09-22 Mega Chips Corp 拡張現実システム、プログラムおよび拡張現実提供方法
US9194591B2 (en) * 2013-03-13 2015-11-24 Ryder C. Heit Method and apparatus for cooking using coded information associated with food packaging
CN105190463B (zh) 2013-03-13 2017-04-12 流量控制有限责任公司 用于使用通过智能电话技术提供的能力来定义最佳太阳定位的方法
EP2973295A4 (en) * 2013-03-15 2016-11-16 Proximity Concepts Llc SYSTEMS AND METHODS FOR PROXIMITY FUNCTIONS, MAPPING, INDEXING, MOBILITY, ADVERTISING AND / OR OTHER
US9357250B1 (en) * 2013-03-15 2016-05-31 Apple Inc. Multi-screen video user interface
TWI454723B (zh) 2013-03-15 2014-10-01 Ind Tech Res Inst 應用於無線設備之辨識裝置、辨識系統及其方法
JP6103392B2 (ja) * 2013-03-29 2017-03-29 パナソニックIpマネジメント株式会社 蓄電池パック、電気機器、通信制御方法
KR20140124171A (ko) * 2013-04-16 2014-10-24 삼성전자주식회사 디바이스들 간 동기화 장치 및 방법
KR102046094B1 (ko) 2013-04-23 2019-11-18 삼성전자주식회사 전자 기기 및 이의 개인 클라우드 기기 등록 방법
CN103347311A (zh) * 2013-06-24 2013-10-09 上海山源电子电气科技发展有限公司 ZigBee对讲基站网络系统及其通信方法
US9645721B2 (en) 2013-07-19 2017-05-09 Apple Inc. Device input modes with corresponding cover configurations
JP6399681B2 (ja) * 2013-09-03 2018-10-03 株式会社東芝 通信装置、処理方法及びプログラム
US8967460B1 (en) * 2013-09-26 2015-03-03 Calix, Inc. System and method for servicing a device having a matrix barcode
EP3055834B1 (en) * 2013-10-07 2017-08-02 Metaio GmbH Method and system for providing position or movement information for controlling at least one function of a vehicle
US10937187B2 (en) 2013-10-07 2021-03-02 Apple Inc. Method and system for providing position or movement information for controlling at least one function of an environment
KR20150065508A (ko) * 2013-12-05 2015-06-15 엘지전자 주식회사 전자기기 및 전자기기 시스템
FR3015711A1 (fr) * 2013-12-23 2015-06-26 Orange Procede d'interaction entre un premier objet numerique et au moins un deuxieme objet numerique et systeme d'interaction.
US9706041B2 (en) 2014-01-08 2017-07-11 Benple Inc. Web page access method and web server access method
CN112328104B (zh) * 2014-01-22 2023-09-22 株式会社和冠 信号传输方法
US9300893B2 (en) * 2014-03-24 2016-03-29 Intel Corporation Image matching-based pointing techniques
JP6368531B2 (ja) * 2014-04-28 2018-08-01 達広 白井 暗号処理装置、暗号処理システム、および暗号処理方法
US9462108B2 (en) * 2014-05-12 2016-10-04 Lg Electronics Inc. Mobile terminal and method for controlling the mobile terminal
AU2015280256A1 (en) 2014-06-24 2016-10-13 Apple Inc. Column interface for navigating in a user interface
JP6071949B2 (ja) * 2014-06-25 2017-02-01 キヤノン株式会社 情報処理装置、その制御方法、及びプログラム
JP6399854B2 (ja) * 2014-08-18 2018-10-03 キヤノン株式会社 通信装置、通信装置の制御方法、プログラム
US9313219B1 (en) * 2014-09-03 2016-04-12 Trend Micro Incorporated Detection of repackaged mobile applications
WO2016052717A1 (ja) * 2014-10-02 2016-04-07 シャープ株式会社 制御装置、ディスプレイ装置、通信端末、媒体、表示制御システム、制御装置の制御方法、制御プログラム
JP2016076831A (ja) 2014-10-07 2016-05-12 ヤマハ株式会社 指示装置、プログラム及び指示システム
JP2016092468A (ja) * 2014-10-30 2016-05-23 京セラ株式会社 電子端末、プログラム及び管理システム
US9793988B2 (en) 2014-11-06 2017-10-17 Facebook, Inc. Alignment in line-of-sight communication networks
US10091015B2 (en) * 2014-12-16 2018-10-02 Microsoft Technology Licensing, Llc 3D mapping of internet of things devices
US10417883B2 (en) * 2014-12-18 2019-09-17 Vivint, Inc. Doorbell camera package detection
US10412342B2 (en) 2014-12-18 2019-09-10 Vivint, Inc. Digital zoom conferencing
US9658963B2 (en) * 2014-12-23 2017-05-23 Intel Corporation Speculative reads in buffered memory
US10635907B2 (en) * 2015-01-13 2020-04-28 Vivint, Inc. Enhanced doorbell camera interactions
US10133935B2 (en) * 2015-01-13 2018-11-20 Vivint, Inc. Doorbell camera early detection
US10586114B2 (en) * 2015-01-13 2020-03-10 Vivint, Inc. Enhanced doorbell camera interactions
KR102248741B1 (ko) 2015-01-29 2021-05-07 삼성전자주식회사 디스플레이 장치 및 그 제어 방법
US20160248249A1 (en) * 2015-02-24 2016-08-25 Qualcomm Incorporated Energy management proxy controller system
JP6329318B2 (ja) * 2015-02-25 2018-05-23 株式会社日立製作所 情報処理装置
KR20160111220A (ko) * 2015-03-16 2016-09-26 엘지전자 주식회사 전기제품, 전기제품의 펌웨어 업데이트 방법 및 네트워크 시스템
JP6399204B2 (ja) * 2015-03-18 2018-10-03 株式会社リコー 情報処理装置、画面切り替え方法、プログラム、伝送システム
WO2016167672A1 (es) * 2015-04-14 2016-10-20 Delmar Lissa Jose Antonio Dispositivo portátil de comunicación para transmitir mensajes táctiles
CN106066607B (zh) * 2015-04-20 2020-09-25 松下电器(美国)知识产权公司 控制方法以及控制装置
US20160366481A1 (en) * 2015-06-12 2016-12-15 Samsung Electronics Co., Ltd. Method and apparatus for service oriented input and output
CN106325223A (zh) * 2015-06-17 2017-01-11 派斡信息技术(上海)有限公司 控管电子装置的方法以及应用该方法的控制系统
CN104981061A (zh) * 2015-06-19 2015-10-14 中山市六源通电子科技有限公司 一种具有节能统计功能的远程灯光控制装置
CN104981062A (zh) * 2015-06-19 2015-10-14 中山市六源通电子科技有限公司 一种基于物联网技术的家居灯光控制器
US10509476B2 (en) * 2015-07-02 2019-12-17 Verizon Patent And Licensing Inc. Enhanced device authentication using magnetic declination
WO2017026157A1 (ja) * 2015-08-11 2017-02-16 ソニー株式会社 情報処理装置、情報処理方法及びプログラム
CN105137787B (zh) * 2015-08-13 2018-05-18 小米科技有限责任公司 用于控制家电设备的方法和装置
CN105245416B (zh) * 2015-09-30 2018-11-06 宇龙计算机通信科技(深圳)有限公司 一种家电设备控制方法和装置
CN105608861B (zh) * 2015-10-29 2019-08-30 小米科技有限责任公司 电子设备控制方法及装置
WO2017082388A1 (ja) * 2015-11-11 2017-05-18 パイオニア株式会社 セキュリティ装置、セキュリティ制御方法、プログラム及び記憶媒体
CN105554563A (zh) * 2015-12-14 2016-05-04 小米科技有限责任公司 多媒体播放方法及装置
US9916448B1 (en) 2016-01-21 2018-03-13 Trend Micro Incorporated Detection of malicious mobile apps
WO2017130360A1 (ja) * 2016-01-28 2017-08-03 三菱電機株式会社 可搬端末装置、機器管理方法及び機器管理プログラム
EP3211962B1 (de) * 2016-02-29 2018-09-12 Siemens Aktiengesellschaft Funk-kommunikationssystem für ein industrielles automatisierungssystem, verfahren zu dessen betrieb und funk-transceiver-station
CN105959612A (zh) * 2016-04-22 2016-09-21 惠州Tcl移动通信有限公司 一种移动终端视频通讯中画面角度自动修正方法及系统
US11064431B2 (en) * 2016-04-27 2021-07-13 Symbol Technologies, Llc Arrangement for, and method of, accurately locating, and reducing electrical power consumption of, mobile devices at rest in a venue
DK201670581A1 (en) 2016-06-12 2018-01-08 Apple Inc Device-level authorization for viewing content
DK201670582A1 (en) 2016-06-12 2018-01-02 Apple Inc Identifying applications on which content is available
JP2017225035A (ja) * 2016-06-16 2017-12-21 株式会社ナカヨ 複数の機器をリモート操作するリモコン装置
CN107851897A (zh) * 2016-06-17 2018-03-27 华为技术有限公司 一种天线
JP6657025B2 (ja) * 2016-06-17 2020-03-04 シャープ株式会社 操作者推定システム
US11269480B2 (en) 2016-08-23 2022-03-08 Reavire, Inc. Controlling objects using virtual rays
US10375576B1 (en) 2016-09-09 2019-08-06 Trend Micro Incorporated Detection of malware apps that hijack app user interfaces
CN107819812B (zh) * 2016-09-14 2022-10-04 佛山市顺德区美的电热电器制造有限公司 烹饪质量的评价方法及装置
JP6834284B2 (ja) * 2016-09-20 2021-02-24 カシオ計算機株式会社 方向推定装置、方向推定方法、及び、プログラム
WO2018069952A1 (ja) 2016-10-11 2018-04-19 株式会社オプティム 遠隔制御システム、遠隔制御方法、およびプログラム
KR102324064B1 (ko) 2016-10-26 2021-11-10 애플 인크. 전자 디바이스 상의 다수의 콘텐츠 애플리케이션으로부터의 콘텐츠를 브라우징하기 위한 사용자 인터페이스
JP6805733B2 (ja) * 2016-10-31 2020-12-23 オムロン株式会社 制御システム、その制御方法およびそのコンピュータ読取可能な記憶媒体
JP2018087931A (ja) * 2016-11-29 2018-06-07 キヤノン株式会社 処理装置、処理システム、および物品製造方法
CN106647310B (zh) * 2016-11-30 2020-05-01 芜湖美智空调设备有限公司 一种家电间联动的开启方法及系统
KR101848178B1 (ko) * 2016-12-08 2018-05-24 임정민 정보 제공 시스템 및 그 동작 방법
CN106789461A (zh) * 2016-12-12 2017-05-31 北京小米移动软件有限公司 智能家居设备连接的方法及装置
CN106642570A (zh) * 2016-12-15 2017-05-10 海信(广东)空调有限公司 一种遥控器、空调器以及控制方法
WO2018127954A1 (ja) * 2017-01-05 2018-07-12 三菱電機株式会社 無線通信システム
KR101900741B1 (ko) * 2017-01-16 2018-11-08 엘지전자 주식회사 이동 단말기, 서버, 및 그 동작 방법
JP2018119932A (ja) * 2017-01-27 2018-08-02 株式会社エッチ・ケー・エス 移動体の位置計測方法及び装置
JPWO2018143360A1 (ja) * 2017-02-03 2019-12-26 良夫 川又 相対位置検出システム及び画像表示システム
CN106851578B (zh) * 2017-02-23 2020-08-21 烟台中飞海装科技有限公司 复杂未知室内环境中人员定位系统和方法
EP3379737B1 (en) * 2017-03-23 2020-09-23 Legic Identsystems AG System and method for determining location information for a mobile radio transmitter
CN108667764A (zh) * 2017-03-28 2018-10-16 南宁富桂精密工业有限公司 电子装置及通信协议切换方法
TWI628631B (zh) 2017-05-08 2018-07-01 和碩聯合科技股份有限公司 遙控系統、遙控方法與閘道器
CN107067695A (zh) * 2017-05-15 2017-08-18 深圳市冠旭电子股份有限公司 一种智能遥控方法、系统及智能遥控器
US10271381B2 (en) * 2017-05-22 2019-04-23 Honeywell International Inc. Legacy Modbus communication devices
CN107517165A (zh) * 2017-07-14 2017-12-26 上海斐讯数据通信技术有限公司 一种控制路由器的无线功能的方法及装置
CN107374329B (zh) * 2017-09-01 2020-09-04 深圳市饭立得科技有限公司 食物加热熟化装置、方法及系统
CN107797119A (zh) * 2017-09-05 2018-03-13 深圳航天东方红海特卫星有限公司 基于北斗卫星的海洋表层漂流浮标通信控制方法
US11095502B2 (en) * 2017-11-03 2021-08-17 Otis Elevator Company Adhoc protocol for commissioning connected devices in the field
WO2019106557A1 (en) * 2017-11-30 2019-06-06 Atobe - Mobility Technology, S.A. Apparatus for secure local access to an asset and validation with a mobile device, system comprising it and method
CN109969877B (zh) * 2017-12-27 2023-02-07 奥的斯电梯公司 自动呼梯系统和自动呼梯控制方法
EP3734951A4 (en) * 2017-12-28 2021-01-13 Panasonic Intellectual Property Corporation of America DISPLAY CONTROL PROCEDURE, INFORMATION PROCESSING SERVER AND DISPLAY TERMINAL DEVICE
US10620721B2 (en) 2018-01-29 2020-04-14 Google Llc Position-based location indication and device control
EP3746810A2 (en) * 2018-01-29 2020-12-09 Sonitor Technologies AS Ad hoc positioning of mobile devices using near ultrasound signals
CN108809400B (zh) * 2018-03-05 2019-04-30 龙大(深圳)网络科技有限公司 狭窄空间网络中继系统
KR20210008844A (ko) * 2018-05-16 2021-01-25 광동 오포 모바일 텔레커뮤니케이션즈 코포레이션 리미티드 통신 방법 및 네트워크 장치
JP7320370B2 (ja) * 2018-05-22 2023-08-03 クックパッド株式会社 サーバ、システム、方法及びプログラム
US20210116141A1 (en) * 2018-05-29 2021-04-22 Belimo Holding Ag A method of generating for a user augmented reality information related to an hvac component
US11395371B2 (en) * 2018-05-31 2022-07-19 Roku, Inc. Real-time assessment of multimedia service in a particular environment
CN108614491B (zh) * 2018-06-11 2024-03-15 上海海得控制系统股份有限公司 一种可编程逻辑控制器通讯系统和方法
WO2019239738A1 (ja) * 2018-06-12 2019-12-19 ソニー株式会社 情報処理装置、情報処理方法
JP2020031387A (ja) * 2018-08-24 2020-02-27 東芝ライフスタイル株式会社 家電機器システム、家電機器、冷蔵庫
EP3853824A4 (en) * 2018-09-18 2022-06-15 Airgraft Inc. METHODS AND SYSTEMS FOR VAPORIZER SAFETY AND TRACEABILITY MANAGEMENT
JP7003285B2 (ja) * 2018-09-21 2022-02-04 三菱電機株式会社 空気調和装置
JP2020067824A (ja) * 2018-10-24 2020-04-30 シャープ株式会社 ネットワークシステムおよび電気機器
JP6769624B2 (ja) * 2018-12-25 2020-10-14 株式会社M3ロジ 荷物運搬管理システム
US10984546B2 (en) * 2019-02-28 2021-04-20 Apple Inc. Enabling automatic measurements
US11328196B2 (en) * 2019-03-06 2022-05-10 Thinkify, Llc Dual mode RFID tag system
KR102065335B1 (ko) * 2019-03-08 2020-01-13 주식회사 비쥬드림 음성인식 스위치 시스템
US11057682B2 (en) 2019-03-24 2021-07-06 Apple Inc. User interfaces including selectable representations of content items
CN113940088A (zh) 2019-03-24 2022-01-14 苹果公司 用于查看和访问电子设备上的内容的用户界面
US11683565B2 (en) 2019-03-24 2023-06-20 Apple Inc. User interfaces for interacting with channels that provide content that plays in a media browsing application
JP7063843B2 (ja) * 2019-04-26 2022-05-09 ファナック株式会社 ロボット教示装置
US11863837B2 (en) 2019-05-31 2024-01-02 Apple Inc. Notification of augmented reality content on an electronic device
WO2020243645A1 (en) 2019-05-31 2020-12-03 Apple Inc. User interfaces for a podcast browsing and playback application
CN110300225A (zh) * 2019-06-28 2019-10-01 联想(北京)有限公司 一种信息处理方法及电子设备
CN110245300A (zh) * 2019-07-11 2019-09-17 珠海格力电器股份有限公司 一种智能家电搜索方法及智能终端
US11843838B2 (en) 2020-03-24 2023-12-12 Apple Inc. User interfaces for accessing episodes of a content series
CN111399392B (zh) * 2020-04-02 2022-02-01 深圳创维-Rgb电子有限公司 基于智慧屏的智能家居交互控制方法、装置和智慧屏
US11436906B1 (en) * 2020-05-18 2022-09-06 Sidhya V Peddinti Visitor detection, facial recognition, and alert system and processes for assisting memory-challenged patients to recognize entryway visitors
US11899895B2 (en) 2020-06-21 2024-02-13 Apple Inc. User interfaces for setting up an electronic device
US11670144B2 (en) 2020-09-14 2023-06-06 Apple Inc. User interfaces for indicating distance
US20240031787A1 (en) * 2020-10-23 2024-01-25 Hewlett-Packard Development Company, L.P. Event-based commands
US11720229B2 (en) 2020-12-07 2023-08-08 Apple Inc. User interfaces for browsing and presenting content
US11934640B2 (en) 2021-01-29 2024-03-19 Apple Inc. User interfaces for record labels
CN113192226B (zh) * 2021-04-29 2022-09-30 重庆天智慧启科技有限公司 社区巡更的智能管理系统
US11875792B2 (en) 2021-08-17 2024-01-16 International Business Machines Corporation Holographic interface for voice commands
CN114353782B (zh) * 2022-01-11 2023-06-20 华北理工大学 一种基于Baseline-RFMDR井下定位方法、井下定位装置
US20230396472A1 (en) * 2022-06-03 2023-12-07 Renesas Electronics America Inc. Digital Demodulation for Wireless Power

Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN1269947A (zh) * 1997-09-05 2000-10-11 摩托罗拉公司 在不规则区域中估测用户位置的方法和系统
CN1498030A (zh) * 2002-09-27 2004-05-19 ���µ�����ҵ��ʽ���� 遥控装置

Family Cites Families (70)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US5648813A (en) 1993-10-20 1997-07-15 Matsushita Electric Industrial Co. Ltd. Graphical-interactive-screen display apparatus and peripheral units
JP3035877B2 (ja) 1993-11-10 2000-04-24 松下電器産業株式会社 リモコン装置
JPH09116985A (ja) 1995-10-13 1997-05-02 Sony Corp 遠隔操作器、遠隔操作制御方法及び装置
JP4190599B2 (ja) 1996-11-27 2008-12-03 ソニー株式会社 情報伝送装置及び情報伝送方法並びに情報受信装置及び情報受信方法
US5786791A (en) * 1997-02-24 1998-07-28 Motorola, Inc. Method for determining an angle of arrival of a signal transmitted by a remote unit in a communication system
JPH116985A (ja) * 1997-06-18 1999-01-12 Konica Corp 電磁波遮蔽効果を有する眼鏡レンズ
DE19824528C1 (de) 1998-06-02 1999-11-25 Anatoli Stobbe Verfahren zum Detektieren eines oder mehrerer Transponder sowie Anordnung und Verwendung einer solchen Anordnung
JP3985883B2 (ja) 1998-10-09 2007-10-03 松下電器産業株式会社 電波到来方向推定アンテナ装置
JP2000121716A (ja) * 1998-10-13 2000-04-28 Anritsu Corp 電波到来方向推定装置
JP2000270237A (ja) 1999-03-15 2000-09-29 Nippon Hoso Kyokai <Nhk> 画像表示装置用選択装置
JP4644900B2 (ja) 2000-03-07 2011-03-09 ソニー株式会社 通信手段を介したサービス提供システム、サービス提供方法、およびサービス仲介装置、並びにプログラム提供媒体
JP2003047796A (ja) * 2001-08-06 2003-02-18 Matsushita Electric Ind Co Ltd 洗浄装置
JP2003116164A (ja) * 2001-10-03 2003-04-18 Nec Corp 測位システム、測位サーバ、無線基地局及びそれに用いる端末位置推定方法
US7212228B2 (en) * 2002-01-16 2007-05-01 Advanced Telecommunications Research Institute International Automatic camera calibration method
JP2003234840A (ja) 2002-02-12 2003-08-22 Seiko Epson Corp 連絡支援装置及び連絡支援プログラム、並びに連絡支援方法
JP3998501B2 (ja) 2002-04-05 2007-10-31 株式会社リコー 電子掲示板システム
US7764308B2 (en) * 2002-05-27 2010-07-27 Nikon Corporation Image transmission system, image relay apparatus, and electronic image device
JP3870124B2 (ja) * 2002-06-14 2007-01-17 キヤノン株式会社 画像処理装置及びその方法、並びにコンピュータプログラム及びコンピュータ可読記憶媒体
JP2004048132A (ja) 2002-07-09 2004-02-12 Toshiba Corp 視聴装置および視聴方法
JP2004145720A (ja) 2002-10-25 2004-05-20 Sony Corp リモートコントロールシステム、リモートコントロール方法、無線タグ保持体
JP4207557B2 (ja) 2002-12-18 2009-01-14 ソニー株式会社 無線通信方法、無線通信システム及び無線通信装置
JP2004297759A (ja) * 2003-03-11 2004-10-21 Seiko Epson Corp 無線通信ネットワークシステムにおける接続認証
JP2004297334A (ja) 2003-03-26 2004-10-21 Ntt Comware Corp 位置情報測定端末装置、および無線タグによる位置情報測定方法、ならびにプログラム
JP4069819B2 (ja) * 2003-07-17 2008-04-02 株式会社日立製作所 無線通信の受信パス位相を測定する方法および装置
JP2005354543A (ja) * 2004-06-14 2005-12-22 Sanyo Electric Co Ltd リモコン装置
JP2006099540A (ja) 2004-09-30 2006-04-13 Nec Mobiling Ltd アクセス管理システム、アクセス管理方法及び携帯情報端末
US7768420B2 (en) * 2004-10-29 2010-08-03 Intel Corporation Operation and control of wireless appliance networks
JP2006146753A (ja) 2004-11-24 2006-06-08 Zybox Technology Co Ltd 移動体通信端末装置、移動体通信方法ならびに移動体通信プログラムおよびこれを記録したコンピュータ読み取り可能な記録媒体
JP4260759B2 (ja) * 2005-02-18 2009-04-30 富士通株式会社 機器制御サービス提供プログラム、機器制御サービス提供システムおよび機器制御サービス提供方法
JP2006266945A (ja) 2005-03-24 2006-10-05 Matsushita Electric Works Ltd 位置管理システム
JP2006279424A (ja) 2005-03-29 2006-10-12 Yamaha Corp 電気機器遠隔操作システム
WO2006123413A1 (ja) 2005-05-19 2006-11-23 Fujitsu Limited 通信システム及び携帯電話端末並びにrfidタグ書込み装置
JP4463304B2 (ja) 2005-05-20 2010-05-19 富士通株式会社 無線通信装置、移動端末装置及び無線通信方法
JP4721805B2 (ja) 2005-08-01 2011-07-13 ソニー・エリクソン・モバイルコミュニケーションズ株式会社 レベル/周波数変換回路及び方法、a/d変換回路及び方法、信号レベル通知装置及び方法、携帯通信端末
US8237801B2 (en) * 2005-08-05 2012-08-07 The Innovation Science Fund I, LLC Image processing system and communication method
KR100746995B1 (ko) * 2005-09-22 2007-08-08 한국과학기술원 직관적인 실제 공간적 조준에 따른 시스템 및 그식별방법과 통신방법
JP2007134962A (ja) 2005-11-10 2007-05-31 Funai Electric Co Ltd リモートコントローラ
WO2007069323A1 (ja) 2005-12-15 2007-06-21 Matsushita Electric Industrial Co., Ltd. ユーザ登録代行サーバ、通信端末装置、ユーザ登録方法、及びユーザ登録システム
US8310603B2 (en) * 2005-12-20 2012-11-13 Panasonic Corporation Device linkage apparatus
JP4782578B2 (ja) 2006-02-14 2011-09-28 トヨタホーム株式会社 住宅用機器制御システム
JP2007228497A (ja) 2006-02-27 2007-09-06 Kyocera Corp 無線通信装置および無線通信方法
JP2007304787A (ja) 2006-05-10 2007-11-22 Hitachi Information & Communication Engineering Ltd 遠隔操作システム、制御方法、及び、制御プログラム
CN101502145B (zh) * 2006-08-04 2015-05-13 松下电器产业株式会社 无线通信装置和无线通信方法
US20110316426A1 (en) 2006-12-28 2011-12-29 Sharp Kabushiki Kaisha Audio-visual environment control device, audio-visual environment control system and audio-visual environment control method
JP2008170309A (ja) * 2007-01-12 2008-07-24 Seiko Epson Corp 携帯ナビゲーションシステム、携帯ナビゲーション方法、携帯ナビゲーション用プログラム及び携帯端末
US7649456B2 (en) * 2007-01-26 2010-01-19 Sony Ericsson Mobile Communications Ab User interface for an electronic device used as a home controller
US7864043B2 (en) * 2007-03-28 2011-01-04 Sony Ericsson Mobile Communications Ab Home locating network
JP4925116B2 (ja) 2007-05-18 2012-04-25 シャープ株式会社 サービス管理装置、移動端末装置、サービス管理システム、サービス管理方法、およびサービス管理プログラム
JP5070579B2 (ja) 2007-06-11 2012-11-14 シャープ株式会社 情報通信端末および処理プログラム
WO2008157817A1 (en) * 2007-06-20 2008-12-24 Zte (Usa) Inc. Handover between wireless cellular network and private network in wireless communications
JP2009024339A (ja) * 2007-07-17 2009-02-05 Auto Network Gijutsu Kenkyusho:Kk 車載無線通信装置
US20090023462A1 (en) 2007-07-17 2009-01-22 Telefonaktiebolaget Lm Ericsson (Publ) Signal Waveform Construction for Position Determination by Scrambled Conical
JP5194673B2 (ja) 2007-09-26 2013-05-08 株式会社日立製作所 携帯端末、及び情報の送受信方法
US7979079B2 (en) * 2007-09-27 2011-07-12 Intel-Ge Care Innovations Llc Single point location tracking for a mobile device in a communication network
TWI314115B (en) * 2007-09-27 2009-09-01 Ind Tech Res Inst Method and apparatus for predicting/alarming the moving of hidden objects
JP2011061247A (ja) 2007-11-15 2011-03-24 Panasonic Corp マルチリモコン制御装置
JP4904254B2 (ja) * 2007-12-28 2012-03-28 京セラ株式会社 携帯通信端末
US8400530B2 (en) 2007-12-28 2013-03-19 Panasonic Corporation Communication device, communication system, image presentation method, and program
JP2009193433A (ja) 2008-02-15 2009-08-27 Oki Electric Ind Co Ltd 電気機器管理システム、電気機器管理サーバおよび電気機器管理方法
JP5309643B2 (ja) 2008-03-24 2013-10-09 富士通株式会社 位置情報処理装置、位置情報処理プログラムおよび移動体端末
US8213914B2 (en) * 2008-08-04 2012-07-03 Lg Electronics Inc. Mobile terminal capable of providing web browsing function and method of controlling the mobile terminal
JP2010147847A (ja) 2008-12-19 2010-07-01 Kyocera Corp 基地局装置および基地局制御方法
US8627075B2 (en) 2008-12-26 2014-01-07 Panasonic Corporation Communication device that receives external device information from an external device using near field communication
WO2011065007A1 (ja) 2009-11-30 2011-06-03 パナソニック株式会社 携帯型通信装置、通信方法、集積回路、プログラム
EP2797349B1 (en) 2009-11-30 2018-09-26 Sun Patent Trust Communication device with several antennas, communication method, and position determination method
JP5937510B2 (ja) 2010-11-25 2016-06-22 パナソニック インテレクチュアル プロパティ コーポレーション オブ アメリカPanasonic Intellectual Property Corporation of America 通信機器
EP2719999B1 (en) 2011-06-13 2018-07-11 Panasonic Intellectual Property Corporation of America Geomagnetic position detection apparatus and geomagnetic pattern acquisition method
US9214128B2 (en) 2011-08-10 2015-12-15 Panasonic Intellectual Property Corporation Of America Information display device
JP5988988B2 (ja) 2011-10-31 2016-09-07 パナソニック インテレクチュアル プロパティ コーポレーション オブ アメリカPanasonic Intellectual Property Corporation of America 位置推定装置、位置推定方法、プログラムおよび集積回路
JP6026890B2 (ja) 2011-10-31 2016-11-16 パナソニック インテレクチュアル プロパティ コーポレーション オブ アメリカPanasonic Intellectual Property Corporation of America 位置推定装置、位置推定方法、プログラムおよび集積回路

Patent Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN1269947A (zh) * 1997-09-05 2000-10-11 摩托罗拉公司 在不规则区域中估测用户位置的方法和系统
CN1498030A (zh) * 2002-09-27 2004-05-19 ���µ�����ҵ��ʽ���� 遥控装置

Also Published As

Publication number Publication date
EP2509334B1 (en) 2018-09-12
JP5683485B2 (ja) 2015-03-11
JP6068576B2 (ja) 2017-01-25
JPWO2011065028A1 (ja) 2013-04-11
CN104270547A (zh) 2015-01-07
EP2797349B1 (en) 2018-09-26
US20120019674A1 (en) 2012-01-26
JP2015027083A (ja) 2015-02-05
JP2017112616A (ja) 2017-06-22
JP5799142B2 (ja) 2015-10-21
CN102301738A (zh) 2011-12-28
JP2016026418A (ja) 2016-02-12
EP2509334A4 (en) 2014-03-05
EP2797349A2 (en) 2014-10-29
WO2011065028A1 (ja) 2011-06-03
EP2797349A3 (en) 2015-03-18
EP2509334A1 (en) 2012-10-10
US8560012B2 (en) 2013-10-15
CN102301738B (zh) 2015-09-30
USRE46108E1 (en) 2016-08-16

Similar Documents

Publication Publication Date Title
CN104270547B (zh) 通信方法、通信装置及位置检测方法
CN103098108B (zh) 通信设备
JP5707472B2 (ja) 通信装置
CN102301353A (zh) 便携型通信装置、通信方法、集成电路、程序
CN103561198B (zh) 电子设备
EP2448262A1 (en) Communication apparatus
USRE45980E1 (en) Communication device

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant
TR01 Transfer of patent right

Effective date of registration: 20180801

Address after: 35 layer 437 of Madison Avenue, New York, New York, USA

Patentee after: Sun patent hosting Co.

Address before: American California

Patentee before: PANASONIC INTELLECTUAL PROPERTY CORPORATION OF AMERICA

TR01 Transfer of patent right