CN103221986A - 通信设备 - Google Patents

通信设备 Download PDF

Info

Publication number
CN103221986A
CN103221986A CN2011800565603A CN201180056560A CN103221986A CN 103221986 A CN103221986 A CN 103221986A CN 2011800565603 A CN2011800565603 A CN 2011800565603A CN 201180056560 A CN201180056560 A CN 201180056560A CN 103221986 A CN103221986 A CN 103221986A
Authority
CN
China
Prior art keywords
information
mentioned
equipment
server
camera
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN2011800565603A
Other languages
English (en)
Other versions
CN103221986B (zh
Inventor
山田和范
山口浩平
饭田惠大
榊原瑞穗
大西聪明
山冈胜
大岛光昭
大平智亮
松本通弘
向井务
松下阳介
大坪绍二
中江宏典
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Panasonic Intellectual Property Corp of America
Original Assignee
Matsushita Electric Industrial Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Priority claimed from PCT/JP2010/006901 external-priority patent/WO2011065007A1/ja
Application filed by Matsushita Electric Industrial Co Ltd filed Critical Matsushita Electric Industrial Co Ltd
Publication of CN103221986A publication Critical patent/CN103221986A/zh
Application granted granted Critical
Publication of CN103221986B publication Critical patent/CN103221986B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04WWIRELESS COMMUNICATION NETWORKS
    • H04W12/00Security arrangements; Authentication; Protecting privacy or anonymity
    • H04W12/50Secure pairing of devices
    • H04B5/72
    • GPHYSICS
    • G08SIGNALLING
    • G08CTRANSMISSION SYSTEMS FOR MEASURED VALUES, CONTROL OR SIMILAR SIGNALS
    • G08C17/00Arrangements for transmitting signals characterised by the use of a wireless electrical link
    • G08C17/02Arrangements for transmitting signals characterised by the use of a wireless electrical link using a radio link
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04WWIRELESS COMMUNICATION NETWORKS
    • H04W12/00Security arrangements; Authentication; Protecting privacy or anonymity
    • H04W12/06Authentication
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04WWIRELESS COMMUNICATION NETWORKS
    • H04W4/00Services specially adapted for wireless communication networks; Facilities therefor
    • H04W4/02Services making use of location information
    • H04W4/029Location-based management or tracking services
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04WWIRELESS COMMUNICATION NETWORKS
    • H04W4/00Services specially adapted for wireless communication networks; Facilities therefor
    • H04W4/80Services using short range communication, e.g. near-field communication [NFC], radio-frequency identification [RFID] or low energy communication
    • GPHYSICS
    • G08SIGNALLING
    • G08CTRANSMISSION SYSTEMS FOR MEASURED VALUES, CONTROL OR SIMILAR SIGNALS
    • G08C2201/00Transmission systems of control signals via wireless link
    • G08C2201/90Additional features
    • G08C2201/91Remote control based on location and proximity
    • GPHYSICS
    • G08SIGNALLING
    • G08CTRANSMISSION SYSTEMS FOR MEASURED VALUES, CONTROL OR SIMILAR SIGNALS
    • G08C2201/00Transmission systems of control signals via wireless link
    • G08C2201/90Additional features
    • G08C2201/93Remote control using other portable devices, e.g. mobile phone, PDA, laptop
    • H04B5/77
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L67/00Network arrangements or protocols for supporting network services or applications
    • H04L67/14Session management
    • H04L67/148Migration or transfer of sessions
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L67/00Network arrangements or protocols for supporting network services or applications
    • H04L67/34Network arrangements or protocols for supporting network services or applications involving the movement of software or configuration parameters 
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04WWIRELESS COMMUNICATION NETWORKS
    • H04W12/00Security arrangements; Authentication; Protecting privacy or anonymity
    • H04W12/60Context-dependent security
    • H04W12/65Environment-dependent, e.g. using captured environmental data
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04WWIRELESS COMMUNICATION NETWORKS
    • H04W4/00Services specially adapted for wireless communication networks; Facilities therefor
    • H04W4/02Services making use of location information

Abstract

本发明的便携设备(102)具备位置感知部(206)、遥控器信息取得部(212)和存储部(213);将由位置感知部(206)取得的位置信息与遥控器信息建立对应,存储在存储部(213)中。还具备指向空间取得部(208)和设备判断部(209);识别用户用便携设备(102)指示的方向,能够进行存在于该指向方向上的终端设备(101)的操作。

Description

通信设备
技术领域
本发明涉及通信装置,涉及利用近距离无线通信提供家电设备的扩展用户界面提供的通信装置。
背景技术
以往的使用近距离无线通信的通信装置,公开一种能够从IC标签读取设备信息、登录与该设备信息对应的操作信息的远程控制器(遥控器)(例如参照专利文献1)。
本公开中公开了一种遥控器,具备操作部,远程控制规定的被控制设备,具备:IC标签读取部,从IC标签读取与被控制设备建立对应的设备信息;控制信息数据文件,将设备信息与控制信息建立对应而存储;以及CPU,执行将由IC标签读取部读取的设备信息登录、并从控制信息数据文件取得与该设备信息建立了对应的控制信息、分别对应于各个操作部而登录的登录程序;如果操作部被按下,则将该登录的控制信息中的与该按下的操作部对应的控制信息向被控制设备发送。
此外,公开了一种遥控器用户界面,利用近距离无线通信,且考虑到操作的容易性及方便性(例如参照专利文献2)。
在本公开中,公开了如下技术:在操作用表中按照根据操作项目划分的区域保持存储有用来操作外部的电子设备而需要的信息的无线标签,在遥控器侧将存储在上述无线标签中的信息通过非接触方式读出,将基于该读出的信息的命令信号向上述电子设备发送。
此外,公开了如下技术:通过指示画面上的选择对象的按钮,用简单的操作选择需要的信息(例如,参照专利文献3)。
在本公开中,公开了如下技术:具备:遥控器部,通过遥控器具备的角度传感器,检测并测量拿着该遥控器的操作者通过移动遥控器而产生的2方向的角度变化量;画面坐标部,根据初始坐标和测量出的角度变化量,计算显示部的画面上的遥控器部指示的2维坐标;选择按钮识别部,基于得到的2维坐标和按钮信息保存部的按钮的位置信息,求出所选择的按钮;以及画面显示控制部,在显示部的画面上的对应的各位置上显示按钮,将被选择的按钮进行热点显示;在决定所选择的按钮的情况下,通过按下决定按钮而发送决定的信号。
现有技术文献
专利文献
专利文献1:特开2007-134962号公报
专利文献2:特开2004-145720号公报
专利文献3:特开2000-270237号公报
发明概要
发明要解决的问题
但是,在上述专利文献1的结构中,在操作非控制设备时,由于用户需要经由显示部和按钮或键来选择想要操作的设备,所以有在选择非控制设备时需要用户对遥控器终端的多个操作的问题。
此外,在上述专利文献2的结构中,由于需要按每个电子设备准备操作用表,所以有以下问题:每当用户想要控制的电子设备增加,都需要准备与该电子设备对应的操作用表。
此外,在上述专利文献3的结构中,遥控器将操作者的运动的角度变化量向控制装置侧发送,控制装置根据上述角度变化量判断操作者指示的地方,所以遥控器装置、控制装置及显示装置为必须的,有为了控制设备而需要多个装置的问题。此外,关于在操作多个被控制设备的情况下、登陆操作者的选择对象和针对与该选择对象建立对应的设备的命令的方法,没有公开或暗示。
发明内容
所以,本发明解决上述以往的问题,目的是使用便携电话或智能电话等的便携设备、利用便携设备的RFID和GPS或动作传感器等的各种传感器、便携设备能够简单地提供多遥控器、家电内容下载等的扩展用户界面。
用于解决问题的手段
为了达到上述目的,有关本发明的一技术方案的无线通信终端,具有:位置感知部,取得上述无线通信终端的位置信息;设备信息取得部,通过近距离无线通信,从作为无线通信终端控制的对象的设备即控制对象设备,取得能够识别上述控制对象设备的设备信息;请求生成部,根据上述设备信息请求上述控制对象设备的操作信息;外部通信部,将上述请求向上述控制对象设备或持有操作信息的服务器发送,并接收上述操作信息;存储部,将接收到的上述操作信息和与上述控制对象设备进行近距离无线通信的时刻的上述位置信息建立对应地存储;操作信息发送部,将上述操作信息向上述控制对象设备发送;方向感知部,感知上述无线通信终端被朝向的方向信息;指向空间取得部,根据由上述位置感知部取得的位置信息和由上述方向感知部取得的方向信息计算上述无线通信终端的指向空间;以及选择部,根据赋予给上述存储部的操作信息的至少一个以上的上述控制对象设备的位置信息,选择上述指向空间中存在的设备的操作信息。
由此,有关本发明的一技术方案的通信装置能够将通信装置的位置信息与设备的操作信息建立对应而存储。此外,能够利用被控制设备的位置信息,仅通过将便携设备朝向就能够操作被控制设备。
发明效果
通过以上,本发明利用被控制设备的位置信息,仅通过将便携设备朝向就能够操作被控制设备。进而,利用近距离无线,通过一次接触就能够简单地取得家电设备的操作信息。
附图说明
图1是本发明的实施方式1的摄影装置的整体系统图。
图2是本发明的实施方式1的摄影装置的外观图。
图3是本发明的实施方式1的摄影装置的块图。
图4是本发明的实施方式1的摄影装置的第2存储器的结构图。
图5是本发明的实施方式1的摄影装置的第2存储器的结构图。
图6是本发明的实施方式1的摄影装置的图像显示方法指示信息的结构图。
图7是本发明的实施方式1的摄影装置的盖和TV(电视机)的动作的流程图。
图8是本发明的实施方式1的摄影装置和TV的动作的流程图。
图9是本发明的实施方式1的摄影装置和TV的动作的流程图。
图10是本发明的实施方式1的摄影装置和TV的动作的流程图。
图11是本发明的实施方式1的摄影装置和TV的动作的流程图。
图12是本发明的实施方式1的摄影装置和TV的动作的流程图。
图13是本发明的实施方式1的摄影装置和TV的动作的流程图。
图14是本发明的实施方式1的摄影装置和TV的动作的流程图。
图15是本发明的实施方式1的摄影装置和TV的动作的流程图。
图16是本发明的实施方式1的摄影装置和TV的动作的流程图。
图17是本发明的实施方式1的摄影装置和TV的动作的流程图。
图18是本发明的实施方式1的摄影装置和TV的动作的流程图。
图19是本发明的实施方式1的摄影装置和TV的动作的流程图。
图20是本发明的实施方式1的摄影装置和TV的动作的流程图。
图21是本发明的实施方式1的摄影装置和TV的动作的流程图。
图22是表示本发明的实施方式1的摄影装置和TV的显示方法的图。
图23是保存动作程序的摄影装置的RF-ID部、附属于电视机的遥控器、电视机的块图。
图24是将保存在RF-ID中的动作程序转送及执行的处理的流程图。
图25是进行图像的下载及幻灯放映的动作程序的记述的一例。
图26是根据语言代码变更动作程序的处理的电视机、以及保存程序的服务器的块图。
图27是根据语言代码变更动作程序的处理的处理的流程图。
图28是摄影装置1和TV45包括无线LAN的家庭网络6500的结构图。
图29是不使用RF-ID的认证方法的一例。
图30是使用RF-ID的认证方法的一例。
图31是难以使终端接近的情况下的认证方法的一例。
图32是表示照相机侧动作的一例的流程图。
图33是表示TV侧动作的一例的流程图。
图34是生成由TV执行的动作程序的摄影装置1的第1处理部、第2存储器部的块图。
图35是表示第1处理部的程序生成部7005的动作的流程图。
图36是由程序生成部7005生成的程序的一例的流程图。
图37是生成显示摄影装置1的使用状况的动作程序的摄影装置1的第1处理部、第2存储器部的块图。
图38是通过外部设备执行由摄影装置1生成的程序的情况下的使用情形。
图39是将由摄影装置1生成的程序通过带有显示功能的遥控器执行的情况下的流程图。
图40是表示本发明的实施方式2的照相机(camera)的上载次序的流程图。
图41是表示本发明的实施方式2的照相机的上载次序的流程图。
图42是表示本发明的实施方式1的照相机的上载次序的流程图。
图43是表示本发明的实施方式2的照相机的RF-ID部的动作次序的流程图。
图44是本发明的实施方式2的TV的结构图。
图45是表示本发明的实施方式2的照相机和TV的RF-ID通信的动作的流程图。
图46是图45的详细流程图。
图47是照相机和TV的RF-ID通信的数据格式。
图48是电子目录显示系统的概要图。
图49是电子目录服务器信息输入机的结构图。
图50是表示电子目录服务器信息输入机的处理的次序的流程图。
图51是电子目录通知卡的RF-ID的结构图。
图52是显示电子目录的TV的结构图。
图53是电子目录服务器的结构图。
图54是表示电子目录服务器的处理的次序的流程图。
图55是表示显示电子目录的TV的处理的次序的流程图。
图56是表示电子目录的画面显示的图。
图57是表示顾客属性数据库的数据构造的图。
图58是表示电子目录数据库的数据构造的图。
图59是带有RF-ID的明信片邮寄系统的概要图。
图60是带有RF-ID的明信片邮寄系统的TV的结构图。
图61是表示带有RF-ID的明信片邮寄系统的图像选择操作的画面显示的图。
图62是表示带有RF-ID的明信片邮寄系统的图像服务器的处理的次序的流程图。
图63是第5实施方式的系统结构图。
图64是表示第5实施方式的邮寄物的固定信息的例子的图。
图65是第5实施方式的摄影装置向图像服务器建立关联的流程图。
图66是第5实施方式的摄影装置的向中继服务器登录的流程图。
图67是表示带有2维码的邮寄物的例子的图。
图68是利用第5实施方式的摄影装置的2维码的处理的流程图。
图69是表示第5实施方式的电视机的处理流程的图。
图70是表示第5实施方式的中继服务器的处理流程的图。
图71是本发明的实施方式6的图像发送侧结构的概略图。
图72是本发明的实施方式6的图像接收侧结构的概略图。
图73是本发明的实施方式6的图像发送侧电视机的动作流程图。
图74是本发明的实施方式6的图像接收侧电视机的动作流程图。
图75是本发明的实施方式6的另一例的图像发送侧电视机的动作流程图。
图76是表示本发明的实施方式6的邮寄物存储器部的记录信息的一例的结构图。
图77是本发明的记录机的结构图。
图78是本发明的RF-ID卡的结构图。
图79是关于向服务器登录设定信息的次序的流程图。
图80是登录在服务器中的设定信息的结构。
图81是登录在RF-ID卡中的设备操作信息的结构。
图82是关于用RF-ID卡将记录机的设定信息更新的次序的流程图。
图83是关于从服务器取得设定信息的次序的流程图。
图84是登录在由记录机使用的RF-ID卡中的设备操作信息的结构。
图85是登录在由汽车导航仪使用的RF-ID卡中的设备操作信息的结构。
图86是在TV等的遥控器中搭载有RF-ID读取器的情况下的本发明的实施方式的结构图。
图87是该实施方式的流程图。
图88是网络环境图。
图89是移动AV终端功能块图。
图90是TV功能块图。
图91是移动AV终端接受运动图像的次序图(前半:接受侧控制)。
图92是移动AV终端递交运动图像的次序图(后半:接受侧控制)。
图93是移动AV终端的基本流程图。
图94是移动AV终端递交的模式的流程图。
图95是移动AV终端接受的模式的流程图。
图96是移动AV终端的用无线接受的模式的流程图。
图97是移动AV终端的用URL接受的模式的流程图。
图98是移动AV终端的服务器的位置搜索的流程图。
图99是从移动AV终端的外部服务器接受运动图像的模式的流程图。
图100是TV的基本流程图。
图101是TV的递交的模式的流程图。
图102是TV的接受的模式的流程图。
图103是将由TV再现中的运动图像向移动AV终端承接的情况下的概要图。
图104是用来说明通过NFC从TV向移动AV终端承接运动图像再现的次序的图。
图105是用来说明通过NFC从TV向移动AV终端承接运动图像再现的次序的图。
图106是用来说明通过NFC从TV向移动AV终端承接运动图像再现的次序的图。
图107是用来说明通过NFC从TV向移动AV终端承接运动图像再现的次序的图。
图108是用来说明通过NFC从TV向移动AV终端承接运动图像再现的次序的图。
图109是用来说明通过NFC从TV向移动AV终端承接运动图像再现的次序的图。
图110是用来说明通过NFC从TV向移动AV终端承接运动图像再现的次序的图。
图111是表示TV与移动AV终端间的再现运动图像承接的概要图。
图112是表示运动图像交接时的延迟时间一览的图。
图113是用来说明移动AV终端承接由TV再现中的运动图像的次序的图。
图114是用来说明移动AV终端承接由TV再现中的运动图像的次序的图。
图115是用来说明移动AV终端承接由TV再现中的运动图像的次序的图。
图116是用来说明移动AV终端承接由TV再现中的运动图像的次序的图。
图117是用来说明移动AV终端承接由TV再现中的运动图像的次序的图。
图118是用来说明移动AV终端承接由TV再现中的运动图像的次序的图。
图119是用来说明将由移动AV终端再现中的运动图像向TV承接的次序的图。
图120是用来说明将由移动AV终端再现中的运动图像向TV承接的次序的图。
图121是用来说明将由移动AV终端再现中的运动图像向TV承接的次序的图。
图122是表示使用NFC的移动AV终端间的数据交换的概要图。
图123是表示使用NFC通信或高速无线通信的移动AV终端间的数据交换的顺序图。
图124是表示使用NFC通信或高速无线通信的移动AV终端间的数据交换的顺序图。
图125是表示使用NFC通信或高速无线通信的移动AV终端间的数据交换的顺序图。
图126是表示使用NFC通信或高速无线通信的移动AV终端间的数据交换的顺序图。
图127是使用NFC通信及高速无线通信进行数据交换时的终端画面流程图。
图128是使用NFC通信及高速无线通信进行数据交换时的终端画面流程图。
图129是使用NFC通信进行数据交换时的终端画面流程图。
图130是使用NFC通信进行数据交换时的终端画面流程图。
图131是用来说明移动AV终端间的数据交换次序的图。
图132是用来说明移动AV终端间的数据交换次序的图。
图133是用来说明移动AV终端间的数据交换次序的图。
图134是用来说明移动AV终端间的数据交换次序的图。
图135是用来说明移动AV终端间的数据交换次序的图。
图136是用来说明移动AV终端间的数据交换次序的图。
图137是表示使用图138A及图138B所示的NFC的数据交换时的通信格式的图。
图138A是用来说明移动AV终端间的数据交换次序的图。
图138B是用来说明移动AV终端间的数据交换次序的图。
图139是表示移动AV终端2的画面的图。
图140是移动AV终端接受运动图像的次序图(前半:递交侧控制)。
图141是移动AV终端递交运动图像的次序图(后半:递交侧控制)。
图142是由遥控器进行交接的情况下的次序图。
图143是运动图像服务器进行同时发送的情况下的次序图。
图144是表示设备从工厂出货时HF-RFID和UHF-RFID的动作的概念图。
图145是表示能够从UHF-RFIDM005访问的存储器的记录格式的概念图。
图146是表示设备M003从工厂出货时的从HF-RFID向UHF-RFID复制制造号码等的处理的流程的流程图。
图147是表示设备M003的流通过程中的处理的流程的流程图。
图148是本发明的结构图。
图149是流程图。
图150是流程图。
图151是家庭ID登录的网络环境图。
图152是家庭ID登录通信装置硬件结构图。
图153是家庭ID登录通信装置功能块图。
图154是家庭ID登录处理的流程图。
图155是家庭ID取得处理的流程图。
图156是家庭ID登录处理的次序图。
图157是家庭ID共有通信装置功能块图。
图158是家庭ID共有接收侧处理的流程图(近距离无线利用)。
图159是家庭ID共有发送侧处理的流程图(近距离无线利用)。
图160是家庭ID共有处理的次序图(近距离无线利用)。
图161是家庭ID共有接收侧处理的流程图(家庭NW设备利用)。
图162是家庭ID共有发送侧处理的流程图(家庭NW设备利用)。
图163是家庭ID共有处理的次序图(家庭NW设备利用)。
图164是本发明的实施方式16的设备管理系统的块图。
图165是本发明的实施方式16的设备管理系统的次序图。
图166是本发明的实施方式16的设备管理数据库结构的概念图。
图167是本发明的实施方式16的设备管理系统的显示概念图。
图168是本发明的实施方式17的RF-IDN10的功能块图。
图169是本发明的实施方式17的移动设备N20的功能块图。
图170是本发明的实施方式17的登录服务器N40的功能块图。
图171是表示本发明的实施方式17的网络制品的配置的一例的图。
图172是表示本发明的实施方式17的系统的一例的结构图。
图173是将本发明的实施方式17的电视机N10A的信息登录到登录服务器N40中的次序图。
图174是表示本发明的实施方式17的制品数据和服务器登录数据的结构的一例的图。
图175是表示由本发明的实施方式17的制品信息管理部N45存储的制品信息的结构的一例的图。
图176是表示本发明的实施方式17的RF-IDN10的制品登录时的处理流程的一例的图。
图177是表示本发明的实施方式17的移动设备N20的制品登录时的处理流程的一例的图。
图178是表示本发明的实施方式17的登录服务器N40的制品登录时的处理流程的一例的图。
图179是表示本发明的实施方式17的控制空调N10J和电视机N10A的电源的一例的次序图。
图180是表示本发明的实施方式17的位置信息数据和制品控制数据的结构的一例的图。
图181是表示本发明的实施方式17的位置信息制作部N48制作的制品地图的一例的图。
图182是表示由本发明的实施方式17的制品信息管理部N45存储的制品信息的结构的一例的图。
图183是表示本发明的实施方式17的位置信息制作部N48制作的制品地图的一例的图。
图184是表示本发明的实施方式17的精度识别符的一例的图。
图185是表示本发明的实施方式17的系统的一例的结构图。
图186是表示本发明的实施方式18的整体系统的一例的图。
图187是表示本发明的实施方式18的搭载有RF-IDO50的制品的配置的一例的图。
图188是表示作为从本发明的实施方式18的建筑物坐标数据库O104提取的建筑物坐标数据的建筑物的3D地图的一例的图。
图189是表示由本发明的实施方式18的程序执行部O65制作的制品的3D地图的图像数据的一例的图。
图190是表示本发明的实施方式18的显示部O68将图151的图像数据与已经显示的图152的图像数据组合的制品的3D地图的一例的图。
图191是表示本发明的实施方式18的精度识别符的一例的图。
图192是表示本发明的实施方式18的3D地图的处理流程的一例的图。
图193是表示本发明的实施方式18的3D地图的处理流程的一例的图。
图194是表示本发明的实施方式18的基于3D地图的特定小功率无线通信系统的一例的图。
图195是表示本发明的实施方式19的通信系统的整体像的概念图。
图196是表示本发明的实施方式19的便携设备102的结构的块图。
图197是表示本发明的实施方式19的设备判断部209的结构的块图。
图198是表示实施方式19的存储部213的数据构造的一例的图。
图199是表示实施方式19的由指向空间取得部208取得的指向空间的取得法的一例的图。
图200是表示实施方式19的对便携设备102的存储部213登录遥控器信息的处理的流程的流程图。
图201A是表示实施方式19的用户将应用启动的情况下的对便携设备102设定遥控器信息及作为遥控器操作的处理的流程的流程图。
图201B是表示实施方式19的应用自动启动的情况下的对便携设备102设定遥控器信息及作为遥控器操作的处理的流程的流程图。
图202是表示实施方式19的判断便携设备102指示的方向上存在的终端设备101的处理的流程的流程图。
图203是表示实施方式19的将便携设备102作为遥控器操作终端设备101的处理的流程的流程图。
图204是表示实施方式19的对便携设备102登录遥控器信息时的终端设备101、便携设备102、与服务器设备104之间的数据的交换的次序图。
图205是表示实施方式19的将便携设备102作为遥控器操作终端设备101时的终端设备101、便携设备102、与服务器设备104之间的数据的交换的次序图。
图206是表示实施方式19的将终端设备101的设备信息从条码读出的一例的图。
图207是实施方式19的操作多个照明的一例(切换开启和关闭)。
图208是表示实施方式19的对电视机和记录机的用户敦促选择的显示例的图。
图209是表示本发明的实施方式19的向2层的遥控器操作的概念图。
图210是本发明的实施方式20的设备连接设定的网络环境图。
图211是本发明的实施方式20的设备的网络模块结构图。
图212是本发明的实施方式20的家电控制装置的功能块图。
图213是本发明的实施方式20的太阳能电池面板设置时的动作说明图。
图214是本发明的实施方式20的太阳能电池面板设置时的移动终端画面迁移图。
图215是本发明的实施方式20的太阳能电池面板连续认证时的移动终端画面迁移图。
图216是本发明的实施方式20的太阳能电池面板发电量检查时的移动终端画面图。
图217是本发明的实施方式20的太阳能电池面板故障检查时的移动终端画面图。
图218是本发明的实施方式20的太阳能电池面板设置时的流程图。
图219是本发明的实施方式20的太阳能电池面板设置时的流程图。
图220是本发明的实施方式20的太阳能电池面板设置时的流程图。
图221是本发明的实施方式20的太阳能电池面板设置时的流程图。
图222是本发明的实施方式20的太阳能电池面板设置时的流程图。
图223是本发明的实施方式20的太阳能电池面板设置次序图。
图224是表示本发明的实施方式20的与SEG连接的次序的流程图。
图225是表示本发明的实施方式20的与SEG连接的次序的流程图。
图226是表示本发明的实施方式20的与SEG连接的次序的流程图。
图227是表示本发明的实施方式20的与SEG连接的次序的流程图。
图228是表示本发明的实施方式20的与SEG连接的次序的流程图。
图229是表示本发明的实施方式20的与SEG连接的次序的流程图。
图230是表示本发明的实施方式20的与SEG连接的次序的流程图。
图231是表示本发明的实施方式20的与SEG连接的次序的流程图。
图232是表示本发明的实施方式20的与SEG连接的次序的流程图。
图233是表示本发明的实施方式20的与SEG连接的次序的流程图。
图234是表示本发明的实施方式20的使用中继器的连接次序的流程图。
图235是表示本发明的实施方式20的使用中继器的连接次序的流程图。
图236是表示本发明的实施方式21的遥控器操作的次序的流程图。
图237是表示本发明的实施方式21的遥控器操作的次序的流程图。
图238是表示本发明的实施方式21的遥控器操作的次序的流程图。
图239是表示本发明的实施方式21的基准点不正确的情况下的基准点设定的流程图。
图240是表示本发明的实施方式21的设备与母机的连接次序的流程图。
图241是表示本发明的实施方式21的设备与母机的连接次序的流程图。
图242是表示本发明的实施方式21的位置信息登录法的流程图。
图243是表示本发明的实施方式21的位置信息登录法的流程图。
图244是表示本发明的实施方式21的位置信息登录法的流程图。
图245是表示本发明的实施方式22的设备结构的图。
图246是表示本发明的实施方式22的移动设备与协同设备的显示画面的图。
图247是表示本发明的实施方式22的步骤的流程图。
图248是表示本发明的实施方式22的步骤的流程图。
图249是表示本发明的实施方式22的步骤的流程图。
图250是表示本发明的实施方式22的步骤的流程图。
图251是表示本发明的实施方式22的步骤的流程图。
图252是表示本发明的实施方式22的移动设备9000与协同设备的显示的一例的图。
图253是表示本发明的实施方式22的步骤的流程图。
图254是表示本发明的实施方式22的步骤的流程图。
图255是本发明的实施方式22的移动设备的示意图。
图256是用于说明使用多个天线确保多个传送路径而传送的通信方法的图。
图257是用于说明具有多个传送路的通信方式的位置信息的获得方法的图。
图258是表示本发明的实施方式23的与建筑物(自家)周边及建筑物内的移动设备的移动有关的设备的例子的图。
图259是表示本发明的实施方式23的测量建筑物内的移动设备的位置的处理的流程图。
图260是表示本发明的实施方式23的测量建筑物内的移动设备的位置的处理的流程图。
图261是表示本发明的实施方式23的测量建筑物内的移动设备的位置的处理的流程图。
图262是表示本发明的实施方式23中表示3D地图上的房间的区域的信息的例子的图。
图263是表示本发明的实施方式23的基准点的附近的移动设备的举动的图。
图264是表示本发明的实施方式23中在移动设备的行进方向上想要高精度地检测的场所的图。
图265是表示本发明的实施方式23的测量建筑物内的移动设备的位置的处理的流程图。
图266是表示本发明的实施方式23的基准点及注意点的附近处的移动设备的举动的表。
图267是表示本发明的实施方式23的测量建筑物内的移动设备的位置的处理的流程图。
图268是表示本发明的实施方式23的用于检测基准点的传感器的优先级的列表。
图269是表示本发明的实施方式23的测量建筑物内的移动设备的位置的处理的流程图。
图270是表示本发明的实施方式23的测量建筑物内的移动设备的位置的处理的流程图。
图271是表示本发明的实施方式23的基于加速度传感器的Z轴(垂直)方向的检测数据的图。
图272是表示本发明的实施方式23的测量建筑物内的移动设备的位置的处理的流程图。
图273是表示本发明的实施方式23的测量建筑物内的移动设备的位置的处理的流程图。
图274是表示本发明的实施方式23的加速度Z轴(垂直方向)的检测数据与步行音的关系的图。
图275是表示本发明的实施方式23的建筑物内的移动设备的例子的图。
图276是表示本发明的实施方式23的从基准点到下个基准点的路程的图。
图277是说明本发明的实施方式23的原基准点精度的图。
图278是表示本发明的实施方式23的测量建筑物内的移动设备的位置的处理的流程图。
图279是表示本发明的实施方式23的测量建筑物内的移动设备的位置的处理的流程图。
图280是表示本发明的实施方式23的测量建筑物内的移动设备的位置的处理的流程图。
图281是表示本发明的实施方式23的测量建筑物内的移动设备的位置的处理的流程图。
图282是表示本发明的实施方式23的测量位置的原理的图。
图283是表示本发明的实施方式23的测量位置的原理的图。
图284是表示本发明的实施方式23的测量位置的原理的图。
图285是本发明的实施方式的太阳能电池的电路图。
图286是表示本发明的实施方式24的流程图的图。
图287是表示本发明的实施方式24的流程图的图。
图288是表示本发明的实施方式24的流程图的图。
图289是表示本发明的实施方式24的流程图的图。
图290是表示本发明的实施方式24的流程图的图。
图291是表示本发明的实施方式24的流程图的图。
图292是表示本发明的实施方式24的记录在标签中的信息的图。
图293是本发明的实施方式25的移动终端的图。
图294是本发明的实施方式25的家电设备的图。
图295是本发明的实施方式25的移动终端的模组位置的显示状态图。
图296是本发明的实施方式25的家电设备的模组位置的显示状态图。
图297是本发明的实施方式25的移动终端与家电设备的近距离无线通信状态图。
图298是本发明的实施方式25的与加速度计或陀螺仪联动时的图。
图299是本发明的实施方式25的与照相机联动时的图。
图300是本发明的实施方式25的从服务器下载应用时的图。
图301是本发明的实施方式25的功能块图。
图302是本发明的实施方式25的家电设备的异常发生时的状态迁移图。
图303是本发明的实施方式25的家电设备的长时间通信时的状态迁移图。
图304是本发明的实施方式25的带有显示画面的家电设备的图。
图305是本发明的实施方式25的流程图1。
图306是本发明的实施方式25的流程图2。
图307是本发明的实施方式25的流程图3。
图308是本发明的实施方式25的流程图4。
图309是本发明的实施方式25的流程图5。
图310是本发明的实施方式25的终端的等待画面的显示方法的图。
图311是表示在本实施方式中设想的家庭网络环境的图。
图312是表示本实施方式中的终端信息的例子的图。
图313是用来说明在本实施方式中在终端间进行运动图像的交接的图。
图314是实施方式A1的摄影装置的整体系统图。
图315是实施方式A1的摄影装置的外观图。
图316是实施方式A1的摄影装置的块图。
图317是实施方式A1的摄影装置的第2存储器的结构图。
图318是实施方式A1的摄影装置的第2存储器的结构图。
图319是实施方式A1的摄影装置的图像显示方法指示信息的结构图。
图320是实施方式A1的摄影装置的靠近和TV的动作的流程图。
图321是实施方式A1的摄影装置的靠近和TV的动作的流程图。
图322是实施方式A1的摄影装置的靠近和TV的动作的流程图。
图323是实施方式A1的摄影装置的靠近和TV的动作的流程图。
图324是实施方式A1的摄影装置的靠近和TV的动作的流程图。
图325是实施方式A1的摄影装置的靠近和TV的动作的流程图。
图326是实施方式A1的摄影装置的靠近和TV的动作的流程图。
图327是实施方式A1的摄影装置的靠近和TV的动作的流程图。
图328是实施方式A1的摄影装置的靠近和TV的动作的流程图。
图329是实施方式A1的摄影装置的靠近和TV的动作的流程图。
图330是实施方式A1的摄影装置的靠近和TV的动作的流程图。
图331是实施方式A1的摄影装置的靠近和TV的动作的流程图。
图332是实施方式A1的摄影装置的靠近和TV的动作的流程图。
图333是实施方式A1的摄影装置的靠近和TV的动作的流程图。
图334是实施方式A1的摄影装置的靠近和TV的动作的流程图。
图335是表示实施方式A1的摄影装置和TV的显示方法的图。
图336是保存动作程序的摄影装置的RF-ID部、附属于电视机的遥控器、电视机的块图。
图337是将保存在RF-ID中的动作程序转送及执行的处理的流程图。
图338是表示进行图像的下载及幻灯放映的动作程序的记述的一例的图。
图339是根据语言代码变更动作程序的处理的电视机、和保存程序的服务器的块图。
图340是根据语言代码变更动作程序的处理的处理的流程图。
图341是摄影装置和TV包括无线LAN的家庭网络6500的结构图。
图342是表示不使用RF-ID的认证方法的一例的图。
图343是表示使用RF-ID的认证方法的一例的图。
图344是表示难以使终端接近的情况下的认证方法的一例的图。
图345是表示照相机侧动作的一例的流程图。
图346是表示TV侧动作的一例的流程图。
图347是生成由TV执行的动作程序的摄影装置的第1处理部、第2存储器部的块图。
图348是表示第1处理部的程序生成部的动作的流程图。
图349是由程序生成部生成的程序的一例的流程图。
图350是生成显示摄影装置的使用状况的动作程序的摄影装置的第1处理部、第2存储器部的块图。
图351是表示通过外部设备执行由摄影装置生成的程序的情况下的使用情形的图。
图352是将由摄影装置生成的程序通过带有显示功能的遥控器执行的情况下的顺序图。
图353A是表示实施方式A2的照相机(camera)的上载步骤的图。
图353B是表示实施方式A2的照相机的上载步骤的图。
图353C是表示实施方式A2的照相机的上载步骤的图。
图354是表示实施方式A2的照相机的上载步骤的流程图。
图355A是表示实施方式A1的照相机的上载步骤的流程图之一。
图355B是表示实施方式A1的照相机的上载步骤的图。
图355C是表示实施方式A1的照相机的上载步骤的图。
图355D是表示实施方式A1的照相机的上载步骤的图。
图356是表示实施方式A2的照相机的RF-ID部的动作步骤的流程图。
图357是实施方式A2的TV的结构图。
图358是表示实施方式A2的照相机和TV的RF-ID通信的动作的流程图。
图359A是表示图358的详细处理的流程的图。
图359B是表示图358的详细处理的流程的图。
图360是照相机和TV的RF-ID通信的数据格式。
图361是电子目录显示系统的概要图。
图362是电子目录服务器信息输入机的结构图。
图363是表示电子目录服务器信息输入机的处理的步骤的流程图。
图364是电子目录通知卡的RF-ID的结构图。
图365是显示电子目录的TV的结构图。
图366是电子目录服务器的结构图。
图367是表示电子目录服务器的处理的步骤的流程图。
图368是表示显示电子目录的TV的处理的步骤的流程图。
图369是表示电子目录的画面显示的图。
图370是表示顾客属性数据库的数据构造的图。
图371是表示电子目录数据库的数据构造的图。
图372是带有RF-ID的明信片邮寄系统的概要图。
图373是带有RF-ID的明信片邮寄系统的TV的结构图。
图374是表示带有RF-ID的明信片邮寄系统的图像选择操作的画面显示的图。
图375是表示带有RF-ID的明信片邮寄系统的图像服务器的处理的步骤的流程图。
图376是实施方式A5的系统结构图。
图377是表示实施方式A5的邮寄物的固定信息的例子的图。
图378是实施方式A5的摄影装置向图像服务器建立关联的流程图。
图379是实施方式A5的摄影装置的向中继服务器登录的流程图。
图380是表示带有2维码的邮寄物的例子的图。
图381是利用实施方式A5的摄影装置的2维码的处理的流程图。
图382是表示实施方式A5的电视机的处理流程的图。
图383是表示实施方式A5的中继服务器的处理流程的图。
图384是实施方式A6的图像发送侧结构的概略图。
图385是实施方式A6的图像接收侧结构的概略图。
图386是实施方式A6的图像发送侧电视机的动作流程图。
图387是实施方式A6的图像接收侧电视机的动作流程图。
图388是实施方式A6的另一例的图像发送侧电视机的动作流程图。
图389是表示实施方式A6的邮寄物存储器部的记录信息的一例的结构图。
图390是记录机的结构图。
图391是RF-ID卡的结构图。
图392是关于向服务器登录设定信息的步骤的流程图。
图393是登录在服务器中的设定信息的结构图。
图394是登录在RF-ID卡中的设备操作信息的结构图。
图395是关于用RF-ID卡将记录机的设定信息更新的步骤的流程图。
图396是关于从服务器取得设定信息的步骤的流程图。
图397是登录在由记录机使用的RF-ID卡中的设备操作信息的结构图。
图398是登录在由汽车导航仪使用的RF-ID卡中的设备操作信息的结构图。
图399是在TV等的遥控器中搭载有RF-ID读取器的情况下的实施方式的结构图。
图400是该实施方式的流程图。
图401是表示网络环境的图。
图402是移动AV终端功能块图。
图403是TV功能块图。
图404是移动AV终端接受运动图像的顺序图(前半:接受侧控制)。
图405是移动AV终端递交运动图像的顺序图(后半:接受侧控制)。
图406是移动AV终端的基本流程图。
图407是移动AV终端的递交模式的流程图。
图408是移动AV终端的接受模式的流程图。
图409是移动AV终端的用无线接受的模式的流程图。
图410是移动AV终端的用URL接受的模式的流程图。
图411是移动AV终端的服务器的位置搜索的流程图。
图412是从移动AV终端的外部服务器接受运动图像的模式的流程图。
图413是TV的基本流程图。
图414是TV的递交模式的流程图。
图415是TV的接受模式的流程图。
图416是移动AV终端接受运动图像的顺序图(前半:递交侧控制)。
图417是移动AV终端递交运动图像的顺序图(后半:递交侧控制)。
图418是由遥控器进行交接的情况下的顺序图。
图419是运动图像服务器进行同时发送的情况下的顺序图。
图420是表示设备从工厂出货时HF-RFID和UHF-RFID的动作的概念图。
图421是表示能够从UHF-RFIDM005访问的存储器的记录格式的概念图。
图422是表示设备M003从工厂出货时的从HF-RFID向UHF-RFID复制制造号码等的处理的流程的流程图。
图423是表示设备M003的流通过程中的处理的流程的流程图。
图424是表示整体系统结构的图。
图425是表示使影像移动到镜子的显示器上的步骤的流程图(前半)。
图426是表示使影像移动到镜子的显示器上的步骤的流程图(后半)。
图427是家庭ID登录的网络环境图。
图428是家庭ID登录通信装置硬件结构图。
图429是家庭ID登录通信装置功能块图。
图430是家庭ID登录处理的流程图。
图431是家庭ID取得处理的流程图。
图432是家庭ID登录处理的顺序图。
图433是家庭ID共有通信装置功能块图。
图434是家庭ID共有接收侧处理的流程图(近距离无线利用)。
图435是家庭ID共有发送侧处理的流程图(近距离无线利用)。
图436是家庭ID共有处理的顺序图(近距离无线利用)。
图437是家庭ID共有接收侧处理的流程图(家庭NW设备利用)。
图438是家庭ID共有发送侧处理的流程图(家庭NW设备利用)。
图439是家庭ID共有处理的顺序图(家庭NW设备利用)。
图440是实施方式B3的设备管理系统的块图。
图441是实施方式B3的设备管理系统的顺序图。
图442是实施方式B3的设备管理数据库结构的概念图。
图443是实施方式B3的设备管理系统的显示概念图。
图444是实施方式B4的RF-IDN10的功能块图。
图445是实施方式B4的移动设备N20的功能块图。
图446是实施方式B4的登录服务器N40的功能块图。
图447是表示实施方式B4的网络制品的配置的一例的图。
图448是表示实施方式B4的系统的一例的结构图。
图449是将实施方式B4的电视机N10A的信息登录到登录服务器N40中的顺序图。
图450是表示实施方式B4的制品数据和服务器登录数据的结构的一例的图。
图451是表示由实施方式B4的制品信息管理部N45存储的制品信息的结构的一例的图。
图452是表示实施方式B4的RF-IDN10的制品登录时的处理流程的一例的图。
图453是表示实施方式B4的移动设备N20的制品登录时的处理流程的一例的图。
图454是表示实施方式B4的登录服务器N40的制品登录时的处理流程的一例的图。
图455是表示实施方式B4的控制空调N10J和电视机N10A的电源的一例的顺序图。
图456是表示实施方式B4的位置信息数据和制品控制数据的结构的一例的图。
图457是表示实施方式B4的位置信息制作部N48制作的制品地图的一例的图。
图458是表示由实施方式B4的制品信息管理部N45存储的制品信息的结构的一例的图。
图459是表示实施方式B4的位置信息制作部N48制作的制品地图的一例的图。
图460是表示实施方式B4的精度识别符的一例的图。
图461是表示实施方式B4的系统的一例的结构图。
图462是实施方式B5的整体系统的一例的图。
图463是表示实施方式B5的RF-ID O50搭载的制品的配置的一例的图。
图464是表示从实施方式B5的建筑物坐标数据库O104提取的作为建筑物坐标数据的建筑物的3D地图的一例的图。
图465是表示由实施方式B5的程序执行部O65制作的制品的3D地图的图像数据的一例的图。
图466是表示实施方式B5的显示部O68d将图464的图像数据与已经显示的图465的图像数据组合而成的制品的3D地图的一例的图。
图467是表示实施方式B5的精度识别符的一例的图。
图468是表示实施方式B5的3D地图的处理流程的一例的图。
图469是表示实施方式B5的3D地图的处理流程的一例的图。
图470是表示实施方式B5的基于3D地图的特定小功率无线通信系统的一例的图。
图471是实施方式B6的无线连接请求的网络环境图。
图472是实施方式B6的无线连接请求通信装置硬件结构图。
图473是实施方式B6的无线连接请求通信装置功能块图。
图474是实施方式B6的无线连接请求处理的顺序图。
图475是实施方式B6的无线连接请求处理的流程图。
图476是实施方式B7的频道设定请求的网络环境图。
图477是实施方式B7的频道设定请求通信装置功能块图。
图478是表示住宅的图。
图479是表示系统的图。
图480是表示系统的图。
图481是表示便携型通信装置的图。
图482是便携型通信装置的流程图。
图483是表示服务器等的图。
图484是表示设备信息、种类信息、功能信息等的图。
图485是表示无线LAN的接入点等的图。
图486是无线通信的处理的流程图。
图487是表示位置信息等的图。
图488是表示便携型通信装置的图。
图489是表示遥控器等的图。
图490是表示便携型通信装置的图。
图491是本发明的实施方式C的位置检测装置的功能块图。
图492是表示本发明的实施方式C的地磁噪声模式保存部的表的图。
图493是表示本发明的实施方式C的宅内的地磁噪声发生区域的一例的图。
图494是表示本发明的实施方式C的发生地磁噪声模式的一例的图。
图495是表示由本发明的实施方式C的位置检测装置进行的有关坐标推测的处理的流程的流程图。
图496是表示本发明的实施方式C的终端姿势检测部的处理的流程的流程图。
图497是表示本发明的实施方式C的地磁噪声检测部的处理的流程的流程图。
图498是表示本发明的实施方式C的地磁噪声模式管理部的处理的流程的流程图。
图499是表示本发明的实施方式C的位置检测方法的流程图。
图500是表示有关本发明的实施方式C的变形例1的地磁噪声模式保存部的表的图。
图501是表示有关本发明的实施方式C的变形例2的地磁噪声模式保存部的表的图。
图502是表示有关本发明的实施方式C的变形例3的发生地磁噪声模式的一例的图。
图503是表示有关本发明的实施方式C的变形例3的地磁噪声模式保存部的表的图。
图504是示出本发明的实施方式D1的信息显示装置的姿势和画面显示朝向的关系的图。
图505是示出判定本发明的实施方式D1的信息显示装置的画面的显示朝向的处理部的内部结构的图。
图506是用于说明本发明的实施方式D1的信息显示装置的处理流程的图。
图507是用于说明本发明的实施方式D1的信息显示装置的处理流程的图。
图508是示出设定本发明的实施方式D2的信息显示装置的朝向的处理部的内部结构的图。
图509是用于说明本发明的实施方式D2的信息显示装置的处理流程的图。
图510是用于说明本发明的实施方式D2的信息显示装置的处理流程的图。
图511是用于说明本发明的实施方式D2的信息显示装置的处理流程的图。
图512是示出本发明的实施方式D3的信息显示装置的结构的图。
图513是用于说明本发明的实施方式D3的信息显示装置的处理流程的图。
图514是用于说明本发明的实施方式D3的信息显示装置的处理流程的图。
图515是用于说明本发明的实施方式D3的信息显示装置的处理流程的图。
图516是用于说明本发明的实施方式D3的信息显示装置的处理流程的图。
图517是存储在位置DB中的指示对象的信息的例子。
图518是示出本发明的信息显示装置的姿势和画面显示朝向的关系的其他例子的图。
图519是示出本发明的信息显示装置的姿势和画面显示朝向的关系的其他例子的图。
图520是示出本发明的信息显示装置的姿势和画面显示朝向的关系的其他例子的图。
图521是用于说明显示表示本发明的实施方式D4的信息显示装置自身的朝向的图标的方法的图。
图522是示出本发明的实施方式D4的信息显示装置(移动设备自身)中表示正位置的图标的变化的图。
图523是示出本发明的实施方式D4的信息显示装置(移动设备自身)中表示正位置的图标的变化的图。
图524是示出本发明的实施方式D4的信息显示装置(移动设备自身)中表示正位置的图标的变化的图。
图525是示出本发明的实施方式D4的信息显示装置(移动设备自身)中表示正位置的图标的变化的图。
图526是示出本发明的实施方式D4的信息显示装置(移动设备自身)中表示正位置的图标的变化的图。
图527是示出本发明的实施方式D4的信息显示装置(移动设备自身)中表示正位置的图标的变化的图。
图528是示出本发明的实施方式D4的信息显示装置(移动设备自身)中表示正位置的图标的变化的图。
图529是示出本发明的实施方式D4的信息显示装置(移动设备自身)中表示正位置的图标的变化的图。
图530是示出本发明的实施方式D4的信息显示装置(移动设备自身)中表示正位置的图标的变化的图。
图531是示出本发明的实施方式D4的信息显示装置对用户提示正位置的图标的图。
图532是示出本发明的实施方式D4的信息显示装置对用户提示正位置的图标的图。
图533是示出本发明的实施方式D4的信息显示装置对用户提示正位置的图标的图。
图534是示出本发明的实施方式D4的信息显示装置对用户提示正位置的图标的图。
图535是示出本发明的实施方式D4的信息显示装置对用户提示正位置的图标的图。
图536是示出本发明的实施方式D4的信息显示装置对用户提示正位置的图标的图。
图537是示出本发明的实施方式D4的信息显示装置对用户提示正位置的图标的图。
图538是示出本发明的实施方式D5的信息显示装置的一个方式的移动终端的结构的图。
图539是示出本发明的实施方式D5的使用情况的一例的图。
图540是示出本发明的实施方式D5的使用情况的一例的图。
图541是示出与本发明的实施方式D5的说明中使用的移动终端的水平方向、垂直方向的姿势有关的变量的定义的图。
图542是示出与本发明的实施方式D5的说明中使用的移动终端的水平方向、垂直方向的姿势有关的变量的定义的图。
图543是示出将本发明的实施方式D5的移动终端作为TV遥控器进行操作时的菜单画面的一例的图。
图544是示出将本发明的实施方式D5的移动终端作为TV遥控器进行操作时的使用情况的一例的图。
图545是示出将本发明的实施方式D5的移动终端作为TV遥控器进行操作时的使用情况的一例的图。
图546是示出将本发明的实施方式D5的移动终端作为TV遥控器进行操作时的使用情况的一例的图。
图547是示出将本发明的实施方式D5的移动终端作为TV遥控器进行操作时的使用情况的一例的图。
图548是示出本发明的实施方式D5的移动终端的其他操作的使用情况的一例的图。
图549是用于说明本发明的实施方式D5的移动终端的控制流程的图。
图550是用于说明本发明的实施方式D5的移动终端的控制流程的图。
图551是用于说明本发明的实施方式D5的移动终端的控制流程的图。
图552是用于说明本发明的实施方式D5的移动终端的控制流程的图。
图553是用于说明本发明的实施方式D5的移动终端的控制流程的图。
图554是用于说明本发明的实施方式D5的移动终端的控制流程的图。
图555是用于说明本发明的实施方式D5的移动终端的其他控制流程的图。
图556是用于说明本发明的实施方式D5的移动终端的其他控制流程的图。
图557是用于说明本发明的实施方式D5的移动终端的其他控制流程的图。
图558是用于说明本发明的实施方式D5的移动终端的其他控制流程的图。
图559是用于说明本发明的实施方式D5的移动终端的其他控制流程的图。
图560是用于说明利用本发明的实施方式D5的移动设备时的动作的图。
图561是用于说明本发明的实施方式D5的移动设备的基准方位的更新方法的流程图。
图562是用于说明本发明的实施方式D5的移动设备水平放倒情况的检测方法的流程图。
图563是示出本发明的实施方式D5的移动设备的磁传感器的3轴方向的例子的图。
图564是用于说明本发明的实施方式D5的移动设备的使用加速度传感器的水平放倒情况的检测方法的图。
图565是示出本发明的实施方式D5的移动设备的磁传感器的3轴方向的例子的图。
图566是示出本发明的实施方式D5的移动设备的画面显示方向变更表的图。
图567是用于说明本发明的实施方式D5的移动设备的画面显示方向的图。
图568是用于说明本发明的实施方式D5的移动设备的画面显示方向迁移图的图。
图569是用于说明本发明的实施方式D5的移动设备的画面显示方向的图。
图570是示出本发明的实施方式D5的移动设备旋转时的移动设备的方位的图。
图571是示出人物观看本发明的实施方式D5的移动设备时的移动设备的显示的图。
图572是示出握持本发明的实施方式D5的移动设备的一个方式即平板电脑的人物旋转时的流程的图。
图573是示出握持本发明的实施方式D5的移动设备的一个方式即平板电脑的人物旋转时的流程的图。
图574是示出本发明的实施方式D5的移动设备的基准方位的更新方法的流程的图。
图575是示出相对的人物观看本发明的实施方式D5的移动设备时的移动设备的显示的图。
图576是表示实施方式E1的位置推测装置的结构的块图。
图577是表示电场强度与距离的关系的曲线图的例子。
图578是表示使用距离信息推测无线终端的当前位置的方法例的图。
图579是表示实施方式E1的无线终端的各安装状态的加速度信息的模型模式的例子。
图580是实施方式E1的检测出的无线终端的终端信息的具体例。
图581是实施方式E1的基站管理信息的例子。
图582是实施方式E1的测量出的接收强度和推测出的距离信息的例子。
图583是表示实施方式E1的终端姿势与接收强度的关系的说明图。
图584是实施方式E1的终端姿势与修正倍率的对应例。
图585是表示实施方式E1的基站、无线终端与用户的位置关系和接收强度的关系的说明图。
图586是实施方式E1的基站、无线终端与用户的位置关系和修正倍率的对应例。
图587是表示实施方式E1的位置推测装置的动作的流程图。
图588是表示实施方式E1的位置推测装置的动作的流程图。
图589是表示实施方式E1的位置推测装置的动作的流程图。
图590是表示实施方式E1的位置推测装置的动作的流程图。
图591是表示实施方式E1的从无线终端计算基站的方位的计算结果例子的图。
图592是表示实施方式E1的用户是否处于基站与无线终端之间的判断结果例的图。
图593是表示实施方式E1的使用修正后的距离信息的当前位置的推测结果的图。
图594是表示实施方式E2的位置推测装置的结构的块图。
图595是表示实施方式E2的电场强度地图的例子的说明图。
图596是表示实施方式E2的位置推测装置的动作的流程图。
图597是表示实施方式E2的位置推测装置的动作的流程图。
图598是表示实施方式F的位置推测装置的结构的块图。
图599是表示实施方式F的基站管理信息的例子的图。
图600是表示实施方式F的接收电场强度与距离的关系的图。
图601是表示实施方式F的推测距离信息及距离精度信息的具体例的图。
图602是表示实施方式F的地图信息及无线站的配置例的图。
图603是表示实施方式F的无线站信息的例子的图。
图604是表示实施方式F的另一无线站信息的例子的图。
图605是表示实施方式F的存在可能区域的计算方法的说明图。
图606是表示实施方式F的障碍物的种类与修正倍率的对应例的图。
图607是表示实施方式F的存在可能区域的计算方法的说明图。
图608是表示实施方式F的存在可能区域的计算方法的说明图。
图609是表示实施方式F的存在可能区域的计算方法的说明图。
图610是表示实施方式F的存在可能区域的计算方法的说明图。
图611是表示实施方式F的计算出的存在可能区域的具体例的图。
图612是表示实施方式F的计算出的存在可能区域的具体例的图。
图613是表示实施方式F的计算出的存在可能区域的具体例的图。
图614是表示实施方式F的计算出的存在可能区域的具体例的图。
图615是表示实施方式F的位置推测装置的动作的流程图。
图616是表示实施方式F的位置推测装置的动作的流程图。
图617是表示实施方式F的位置推测装置的动作的流程图。
图618是表示实施方式F的位置推测装置的动作的流程图。
图619是本发明的实施方式G的位置推测装置的功能块图。
图620A是表示本发明的实施方式G的用户和移动终端对指示对象物识别的位置关系的差异的图。
图620B是表示本发明的实施方式G的用户和移动终端对指示对象物识别的位置关系的差异的图。
图621是用来说明本发明的实施方式G的移动终端判断在推测的位置信息中是否有误差的方法的例子的图。
图622是用来说明本发明的实施方式G的在移动终端判断为在推测的位置信息中有误差的情况下将该位置信息修正的方法的例子的图。
图623是用来说明本发明的实施方式G的移动终端判断有指示方向的偏倚的区域的有无的方法的例子的图。
图624A是表示本发明的实施方式G的用户和移动终端对指示对象物识别的位置关系的差异的图。
图624B是表示本发明的实施方式G的用户和移动终端对指示对象物识别的位置关系的差异的图。
图625是用来说明本发明的实施方式G的在移动终端判断为在推测出的位置信息中有误差的情况下将该位置信息修正的方法的例子的图。
图626A是用来说明本发明的实施方式G的在移动终端判断为在推测出的位置信息中有误差的情况下将该位置信息修正的方法的例子的图。
图626B是用来说明本发明的实施方式G的在移动终端判断为在推测出的位置信息中有误差的情况下将该位置信息修正的方法的例子的图。
图627是用来说明本发明的实施方式G的移动终端的处理的流程的流程图。
图628是用来说明本发明的实施方式G的移动终端的处理的流程的流程图。
图629是用来说明本发明的实施方式G的移动终端的处理的流程的流程图。
图630是用来说明本发明的实施方式G的移动终端的处理的流程的流程图。
图631是用来说明本发明的实施方式G的移动终端的处理的流程的流程图。
图632是用来说明本发明的实施方式G的移动终端的处理的流程的流程图。
图633是表示有关本发明的位置推测装置的最小结构的功能块图。
图634是用来说明实施方式H的使用移动终端的家电接触操作的画面迁移图。
图635是用来说明实施方式H的使用移动终端的家电接触操作的画面迁移图。
图636是用来说明实施方式H的使用移动终端的家电接触操作的画面迁移图。
图637是用来说明实施方式H的使用移动终端的家电接触操作的画面迁移图。
图638是用来说明实施方式H的使用移动终端的家电接触操作的画面迁移图。
图639是用来说明实施方式H的使用移动终端的家电接触操作的画面迁移图。
图640是实施方式H的结构图及表示次序的图。
图641是实施方式H的结构图及表示次序的图。
图642是表示实施方式H的移动终端拥有的信息的一例的图。
图643是表示实施方式H的移动终端拥有的信息的一例的图。
图644是表示实施方式H的作为实施近距离通信时的数据结构的一例而使用NDEF的情况的图。
图645是表示实施方式H的基于平面布置信息的区域列表的图。
图646是表示实施方式H的由家电和其位置信息构成的、由移动终端保持的家电列表图的图。
图647是表示实施方式H的步骤的流程图。
图648是表示实施方式H的步骤的流程图。
图649是表示实施方式H的步骤的流程图。
图650是表示实施方式H的步骤的流程图。
图651是表示实施方式H的步骤的流程图。
图652是表示实施方式I的结构的图。
图653是表示实现实施方式I时、特别是开始使用家电操作应用时的移动终端的画面的提示内容、包括俯视图的周边的家电和本实施方式的结构的关系的图。
图654是表示实现实施方式I时、特别是正在使用家电操作应用时的移动终端的画面的提示内容、包括俯视图的周边的家电和本实施方式的结构的关系的图。
图655是表示实现实施方式I时、特别是正在使用家电操作应用时的移动终端的画面的提示内容、包括俯视图的周边的家电和本实施方式的结构的关系的图。
图656是表示实现实施方式I时、特别是正在使用家电操作应用时的移动终端的画面的提示内容、包括俯视图的周边的家电和本实施方式的结构的关系的图。
图657是用来说明实施方式I的宅内的平面布置信息和区域列表、家电列表的图。
图658是表示实施方式I的开锁表7182的图。
图659是表示实施方式I的步骤的流程图。
图660是表示实施方式I的步骤的流程图。
图661是表示实施方式I的步骤的流程图。
图662是表示实施方式I的步骤的流程图。
图663是表示实施方式I的步骤的流程图。
图664是表示在实施方式J中公开的通过光通信进行的通信的状况的例子。
图665是实施方式J的便携终端的结构。
图666是表示实施方式J的周边设备使用光通信技术发送自身的信息的状况的例子。
图667是实施方式J的周边设备侧用光通信发送的信息的例子。
图668是实施方式J的设想了宅内的地图上的用户位置与周边设备的通过光通信进行的通信的例子。
图669是用来说明实施方式J的处理的流程的处理流程。
图670是表示实施方式J的处理的流程的处理流程。
图671是表示实施方式J的处理的流程的处理流程。
图672是表示实施方式J的处理的流程的处理流程。
图673是表示实施方式J的处理的流程的处理流程。
图674是用来说明同时实现对用户容易理解的闪烁模式和光通信的方法的图。
图675是表示实施方式J的处理的流程的处理流程。
图676是用来说明使用NFC和光通信的信息交换方法的图。
图677是表示实施方式J的将来自智能便座的信息发送时的消息的例子和画面显示信息的图。
图678是表示实施方式J的处理的流程的处理流程。
图679是表示在实施方式J的智能便座和便携终端通过NFC通信时、便携终端从智能便座得到信息、然后第二次以后的通信基于该信息使用光通信的图。
图680是表示实施方式J的处理的流程的处理流程。
图681是表示实施方式J的将设备ID分割发送、在取得错误代码等的重要的信息之前减少用来接收设备ID的时间上的损失的方法的图。
图682是表示实施方式J的处理的流程的处理流程。
图683是表示实施方式J的处理的流程的处理流程。
图684是用来说明在便携终端能够通过光通信取得对象设备的位置信息的情况下、基于该位置信息将在便携终端内部中推测的自身的位置信息修正的方法的图。
图685是表示实施方式J的处理的流程的处理流程。
图686是用来说明根据家电能够获得的人的位置信息将便携终端的位置信息进一步修正的方法的图。
图687是用来说明根据家电能够获得的人的位置信息将便携终端的位置信息进一步修正的方法的图。
具体实施方式
以下,参照附图对本发明的实施方式进行说明。在以下的实施方式中,进行对有关本发明的通信装置的各种方式的说明。
(实施方式1)
对本发明的实施方式1进行说明。图1表示本发明的概念图。这里,表示由摄影装置(照相机、camera)1、TV(电视机)45及服务器42构成的通信系统。在本图中,左侧表示摄影时的状况,右侧表示将摄影的图像再现时的状况。
摄影装置1是有关本发明的通信装置的一例(这里是数字照相机),作为与摄影时关联的构成要素,具备第1电源部101、影像处理部31、第2天线20、第1处理部35、对介质识别信息111、摄影图像状况信息60及服务器特定信息48进行存储的第2存储器52、以及RF-ID的天线21。此外,该摄影装置1作为与再现时关联的构成要素,具备第1电源部101、第1存储器174、电源检测部172、启动部170、对介质识别信息111、摄影图像状况信息60及服务器特定信息58进行存储的第2存储器52、第2处理部95、调制切换部179、通信部171、第2电源部91、以及RF-ID的天线21。
TV45是用通信路连接读取器装置的设备的一例,具体而言,是用于显示由摄影装置1摄影的图像数据的电视接收机,具备显示部110、以及RF-ID读写器46。
服务器42是将从摄影装置1上载的图像数据保存、并且将该图像数据下载到TV45中的计算机,具备用于保持数据50的存储装置。
在将景色等被摄体摄影的情况下,由影像处理部31变换为摄影数据而得到的图像数据在能够通信的条件下使用无线LAN、WiMAX用的第2天线20以无线方式被发送给接入点,经由因特网作为预先设定的服务器42中的数据50记录。
此时,第1处理部35将摄影的图像数据的摄影图像状况信息60记录到RF-ID47的第2存储器52中。在该摄影图像状况信息60之中,记录有图像摄像日期时间、图像摄影张数、最终图像发送日期时间、图像发送张数及最终图像摄影日期时间的至少某个、以及被上载的图像或者没有上载的图像、最终摄影号码等。
此外,生成用于确定上载在服务器42中的数据50的URL。用于对该信息图像数据访问的服务器特定信息48通过第1处理部35记录在第2存储器52之中。此外,内置有该RF-ID的系统在第2存储器52中还记录有用于识别是照相机、卡还是明信片等的介质识别信息111。
第2存储器52当照相机的主电源(电池等第1电源101)接通时,通过照相机的主电源动作。即使没有接通照相机的主电源,也由于对RF-ID的天线21从外部的RF-ID读写器供电,所以不具有电池等电源的第2电源部91调节电压,对RF-ID电路部的包括第2存储器的各模块供电,由此,能够将第2存储器的数据记录再现并收发该数据。另外,第2电源部91由整流电路等构成,是由通过第2天线21接收的电波形成电力的电路。第2存储器52构成为,不论主电源的接通断开都能够从第2处理部95进行读写,在主电源接通的情况下能够从第1处理部35读写。即,第2存储器52由非易失性存储器构成,并且能够从第1处理部35和第2处理部95两者读写。
在结束了旅行等的摄影后将该摄影装置1再现的情况下,如图1的右侧的再现时所示,将摄影装置1向TV45的RF-ID读写器46靠近。于是,通过RF-ID读写器46经由天线21对RF-ID47供电,通过第2电源部91,即使摄影装置1的主电源(第1电源101)断开也对RF-ID47的各部供给电源。由第2处理部95将第2存储器52的摄影图像状况信息60和服务器特定信息58读出,经由天线21向TV45发送。TV侧基于服务器特定信息58生成URL,下载服务器42的数据50的图像数据,将图像的缩略图等显示在显示部110上。在根据摄影图像状况信息60判断为存在没有被上载的摄影图像的情况下,将该消息显示在显示部110上,并且根据情况而启动摄影装置1,将没有上载的图像数据向服务器42上载。
图2的(a)、(b)和(c)表示内置本发明的摄影装置1的外观的正视图、后视图和右侧视图。
如图2(c)所示,在右侧面,内置有无线LAN用的天线20和RF-ID用的天线21,安装有由电波非屏蔽材料构成的天线罩22。RF-ID是13.5MHz,无线LAN是2.5GHz,频率较大地不同,不会相互干涉。因此,将两个天线20、21如图2(c)所示那样构成为,使其从外部看为重合的。由此,能够减小设置面积,所以可以得到能够使摄影装置小型化的效果。此外,由于能够将两个天线的天线罩22如图2(c)所示那样集中为1个,所以能够使电波非屏蔽材料部最小化。塑料等电波非屏蔽材料与金属相比强度较低,所以通过使该材料最小化,具有能够减轻机体强度下降的效果。有镜头6和电源开关3。2~16在后面说明。
图3表示摄影装置1的块图。
将从摄像部30得到的图像数据经由影像处理部31发送给记录再现部32,记录到第3存储器33中。该数据记录在可拆装的IC卡34中。
这些处理由CPU等的第1处理部35指示。将摄影的照片及运动图像等的图像数据通过加密部36、通信部37的发送部38和第1天线20以无线LAN或WiMAZ等的无线向接入点等发送,经由因特网40向服务器42发送。即,将照片等的图像数据上载。
有通信状态较差的情况或因附近没有接入点或基站等的理由而不能将一部分的图像数据上载的情况。在此情况下,上载到服务器42中的图像、以及还没有上载的图像混合存在。在此情况下,在服务器42的图像的数据和摄影的图像的数据中发生差异。详细在后面说明,在本发明的情况下,采用以下方式:通过TV45等上附带的RF-ID读写器46读取摄影装置1的RF-ID47的第2存储器52的服务器特定信息48等,使用该数据生成服务器42的URL等,使用该URL从TV45向服务器42访问,对摄影装置1上载的文件或文件夹等的数据50访问,将由摄影装置1摄影的图像中的已上载的图像下载而显示在TV45上。
如果实际摄影的图像的一部分或全部没有上载到服务器42的数据50的图像数据之中,则在下载到TV45中的情况下,可以考虑到发生实际摄影的图像的一部分不能由TV45视听的问题。
为了解决该问题,在本发明中,对于第1处理部35的摄影图像的状况数据,通过记录再现部51在第2存储器52的摄影图像状况信息55中记录上载状况等。
使用图4详细说明。在第2存储器52中,记录有表示服务器42的图像数据与照相机摄影的图像数据是否一致、换言之表示是否同步的同步信息56。在本发明中,TV45经由第2天线21读取第2存储器52之中的摄影图像状况信息55。因此,能够立即确认在服务器的数据50中是否没有不足的图像。如果在有未上载的图像时,将该结果显示在TV45的显示部上,对视听者给出“请进行图像的上载”的显示、或经由RF-ID的天线21对照相机发出命令,对启动部170发送启动信号,强制地使摄影装置1的第1电源部101启动,使摄影装置1的第1存储器174等中的未上载图像经由无线LAN或有线LAN、或RF-ID用的第2天线21等向服务器42上载。
在经由RF-ID的天线21的情况下传送量较小,所以如果要将原来的图像数据原样发送,则在上载和图像的显示中花费时间,给使用者带来不愉快。为了避免该情况,在本发明中,在经由天线21的情况下,发送未上载图像的缩略图图像。由此,能够缩短表观上的上载时间及显示时间,能够减轻给使用者带来不愉快的情况。在当前的HF带的RF-ID中,几百kbps的传送量的情况较多,还对4倍速进行了研究。在此情况下,有可能能够实现几Mbps。如果发送未上载图像的缩略图图像数据,则能够1秒钟发送几十张图像。在一览显示的情况下,具有能够在一般用户能够容忍的时间内将包括未上载图像的全部图像显示在TV上的效果。该方法可以说是1个现实性的方法。
在这样使摄影装置强制的启动而传送未上载图像的情况下,使用无线LAN、RF-ID的天线21、有线LAN中的速度最快、最稳定的路径进行上载及向TV的显示。对第2天线21发送信号的通信部171在经由第2天线21从外部接受电源供给的状况下使用低速的调制方式进行通信,但在从第1电源部101等接受电源供给的状况下,根据需要而将调制方式切换为QPSK、16QAN、64QAN等的信号点数较多的调制方式,使传送高速化,将未上载的图像数据以短时间上载。另外,如果由电源检测部172检测到第1电源等的余量较少或外部电源非连接等情况,则停止从第1电源部101的供电,通过调制方式切换部175将通信部171的调制方式切换为信号点数较少的调制方式、或传送速率较小的调制方式。由此,能够将第1电源部101的规定值以下的低容量防止于未然。
此外,作为别的电力对策,在电力没有富余的情况下第2处理部95或通信部171等经由第2天线21对TV45的RF-ID读写器46发送电力增加请求信号而请求支援。对应于此,RF-ID读写器使发送电力增加到比RF-ID读取时的电力的规定值大的值。RF-ID侧由于经由天线21接受的供电量增加,所以能够向通信部171或第1处理部35供电。通过该方法,第1电源部101的电池100的电量不会减少。或者,具有即使没有电池100也能够实质上无限地继续发送作业的效果。
此外,作为别的方法,也可以使用图3的上载图像数据信息60。将上载的图像的信息61、例如照片号码等记录。也可以使用将该信息散列而得到的信息62。在此情况下,具有信息量减少的效果。
如果使用该数据,则TV45通过读取该数据、与照相机摄影的图像的信息比较,能够得到未上载的图像的信息。
作为别的方法,可以使用未上载图像数据的存在识别信息63。通过表示是否存在未上载图像数据的存在识别符64,能够通知有无未上载图像,所以能够大幅削减第2存储器52的信息。
也可以是未上载图像的张数65。在此情况下,能够使TV45读取,所以能够对视听者通知需要上载的张数。在此情况下,除了张数以外,如果将数据容量作为摄影图像状况信息55记录,则能够将用于上载未上载图像的预测时间更正确地显示在TV45上。
此外,也可以使用将未上载图像信息散列而得到的信息67。
此外,通过在第2存储器52中记录最后摄影的时间68,在之后从TV45读出,在连接到服务器42上时,与服务器42的最终上载的图像的摄影日比较,由此能够简单地判断有无未上载图像。此外,在从较旧的顺序起赋予图像号码的方式中,通过仅将摄影的图像的最终号码69记录,通过与上载到服务器上的图像的最后的图像号码对照,能够得到是否有未上载图像的信息。此外,将摄影的图像的信息70、例如摄影的图像的图像号码的全部记录到第2存储器52中。于是,通过在之后对服务器42访问时与上载到服务器42中的图像数据比较,能够判断是否有未上载数据。在此情况下,通过使用将摄影的图像信息散列而得到的信息71,能够将数据压缩。
作为第2存储器52的其他信息,记录有RF-ID的UID75、照相机ID部76、介质识别信息111。它们即使没有接通照相机的主电源(除了时钟的后备等的副电源以外),也被从TV45经由第2天线21读取,用于照相机及用户的识别、设备的认证。当从海外旅行等回归时电池的充电量较少的情况较多,但在本发明的情况下,即使没有电池也能够动作且发送信息,所以方便性良好。介质识别信息111包含表示是否为内置RF-ID的设备或介质是否是照相机、录像机、明信片、卡、便携电话的识别符等。在TV45侧,由于能够通过该识别符确定设备、介质,所以在画面上如后述的图22所示那样显示照相机或明信片的标记或图标,或根据识别信息变更处理。
此外,记录有图像显示方法指示信息77,例如在图5的一览显示78是ON的情况下,当使第2天线21接近于TV45的RF-ID读写器46时使照片等的缩略图的图像数据一览显示。
当幻灯放映79是ON时,使TV45将图像数据以从新到旧的顺序、或从旧到新的顺序1张张地依次显示。
在第2存储器52的图的下部,设有服务器特定信息48的记录区域。
由此,通过符合照相机操作者的喜好的显示方法在TV画面上显示。
其中,有作为用于生成服务器URL的元信息的服务器URL生成信息80,设有用于记录服务器地址信息81及用户识别信息82的区域,具体而言记录有登陆ID83等。此外,有用于记录口令84的区域,根据情况而记录有被加密的口令85。这些数据通过设在摄影装置1的内部或RF-ID47的内部、或照相机的内部、或TV45侧的URL生成部90生成用于访问服务器42中的对应于该摄影装置、或对应于用户的图像数据群的URL。该URL生成部90当处于RF-ID47中时由第2电源部91供给电源。
此外,也可以制作URL92而直接记录到第2存储器52中。
作为该第2存储器52的数据,从RF-ID侧的第2处理部95和照相机侧的第1处理部35的哪个都能够读取数据,这一点为特长。
因而,在TV45去读取照相机的RF-ID47的情况下,具有能够将用于瞬间得到上载状况信息、服务器地址及登陆ID、口令的服务器42中的对应于该照相机的图像数据下载而在TV45上高速显示的效果。
在此情况下,具有即使不接通摄影装置1的主电源、也因从RF-ID读写器对第2电源部91供给电源而动作的效果。因而,摄影装置1的电池100的电力不会降低。
回到图3,第1电源部101从电池100接受供电,对照相机的各部供给电源。但是,在休止状态下,通过第3电源部102对时钟103等供给微弱的电源。根据情况,对第2存储器52的一部分的存储器供给后备电力。
RF-ID47接受来自第2天线的电力,使第2电源部91动作,第2处理部95使数据接收部105、记录部106、再现部107、数据转送部108(通信部171)及第2存储器52动作。
因此,在照相机的休止状态下完全不耗电,所以能够永久地保持照相机的电池100。
使用图7的流程图说明照相机、卡侧的处理和TV、RF-ID读写器侧的处理。
在图7的步骤150a中,当主电源为OFF(断开)时,在步骤150b中检查是否进行了主电源OFF时的RF-ID读写器的启动设定,如果是“是”,则在步骤150c中将RF-ID读写器46设为ON(打开),在步骤150e中进入RF-ID读写器的节电模式。
在步骤150f中,测量天线部的阻抗等或进行接近传感器的测量,如果在步骤150g中使RF-ID接近于RF-ID读写器的天线,则在步骤150g中检测到接近或接触的情况下,在步骤150h中对天线开始电力的输出,在步骤150k中第2电源为ON,第2处理部开始动作,在步骤150m中开始交换信息。
如果在步骤150中进行了接收,则在图8的步骤151a中开始相互认证,在步骤151f中开始相互认证,在步骤151b、151g中如果相互认证为OK(成功),则在步骤151d中将第2存储器的数据读出,在步骤151e中将第2存储器的数据发送,在步骤151i中RF-ID读写器接收第2存储器的数据,在步骤151j中检查第2存储器的识别信息等是否正确,如果OK则在步骤151m中观察在TV45侧是否有自动电源ON(接通)的识别信息,如果是“是”,则在步骤151r中检查TV的主电源是否是OFF,如果是OFF,则在图9的步骤152a中使TV的主电源为ON,在步骤152b中在第2存储器52中有强制显示命令的情况下,在步骤152d中将TV的输入信号切换为RF-ID的画面显示信号,并且在步骤152e中读取格式识别信息,在步骤152f中根据格式识别信息读出第2存储器,改变数据格式而读取对应的数据,在步骤152g中在第2存储器部中有“口令要求标志”的情况下,在步骤152h中读取第2存储器的“不需要口令输入的TV的ID”,在步骤152i中在本机的TV的ID与“不需要口令输入的TV的ID”不一致时,在步骤152q中从第2存储器读取口令,在步骤152v中将口令的加密解密,在步骤152s中将口令发送。另外,步骤152q、152r、152s也可以作为服务器42保持的数据50而在服务器42具备的存储装置中记录口令。
在步骤152j中获得口令,在步骤152k中显示口令输入画面,在步骤152m中检查输入的口令是否正确。该作业也可以在服务器42中进行。如果是OK,则进行基于RF-ID的第2存储器的信息及程序的显示。
在图10的步骤153a中,如果第2存储器的RF-ID的介质识别信息111是照相机,则在步骤153b中,将照相机的图标(字符)显示在TV的显示部上,如果不是照相机,则在步骤153c中,如果是邮政明信片则在步骤153d中将邮政明信片的图标显示在显示部上,在步骤153e中如果知道是IC卡,则在步骤153f中将IC卡的图标显示在显示部上,在步骤153g中如果知道是便携电话,则将便携电话的图标显示TV画面的角上。
在图11的步骤154a、154i中,从服务器或第2存储器读取服务内容识别信息,在步骤154c中检查是否是图像显示服务,在步骤154b中检查是否是直接邮件等的明信片服务,在步骤154d中检查是否是广告服务,在步骤154f和154j中从第2存储器得到服务器特定信息48,如果在第2存储器中没有URL92的情况下前进到步骤154h和154k,得到服务器地址信息81和用户识别信息82,在图12的步骤155a、155p中,从第2存储器得到加密的口令,在步骤155b中得到解密后的口令,在步骤155c中根据上述信息生成URL,也包括在第2存储器中有URL92的情况,在步骤155d中经由通信部和因特网对URL的服务器访问,在步骤155k中开始与服务器42连接,在步骤155q中读取动作程序存在识别符119,在步骤155e中判断是否有动作程序存在识别符,在步骤155f中有多个动作程序的情况下,在步骤155r中读取动作程序选择信息118,在步骤155g中设定了动作程序选择信息的情况下,在步骤155h中选择特定的动作程序的目录信息,在步骤155s中读入第2存储器的动作程序的服务器上的目录信息117,在步骤155i中对服务器上的特定目录的动作程序访问,在步骤155m中将动作程序送出或使其在服务器上动作,在步骤155j中开始动作程序的动作(TV侧或服务器侧),在图13的步骤156a中检查是否有图像利用服务,如果是“是”,则在步骤156b中开始未上载图像数据的确认作业。
在步骤156i中读取未上载数据存在识别符64,在步骤156c中未上载数据存在识别符64是ON的情况下,在步骤156d中读取未上载图像的张数66和数据容量65,在步骤156e中显示未上载图像的张数66,根据未上载数据容量65将数据的上载预测时间显示在TV的显示部上,在步骤156f中,在假如照相机侧处于能够自动上载图像的状态的情况下,在步骤156g中将照相机启动,经由第1天线20或第2天线21等,通过无线或用触点的有线,向服务器上载未上载数据,如果完成,则向图14的步骤157a前进,在步骤157a中检查是否有收费程序,在“否”的情况下在步骤157n中读取图6的图像显示方法指示信息的识别符121,在步骤157b中检查在服务器中是否有图像显示方法识别信息,如果是“是”,则在步骤157p中将记录有图像显示方法指示信息的服务器上的目录信息120读出,在步骤157c中将记录有与UID等对应的图像显示方法指示信息的服务器上的目录信息120读取,在步骤157d中从服务器得到服务器上的图像显示方法指示信息,向步骤157f前进。
在步骤157b是“否”的情况下,前进到步骤157e,从照相机得到图像显示方法指示信息,前进到步骤157f。
在步骤157f中,基于图像显示方法指示信息开始显示,在步骤157g中读取全部图像显示识别符123,在步骤157g中如果是全部图像显示,则在步骤157r中显示全部图像,如果是“否”,则将步骤157s的特定目录124的一部分图像在步骤157h中显示,在步骤157i中如果是一览显示125,则读取步骤157t的显示顺序识别符122,在步骤157j中基于显示顺序识别符,以日期顺序、上载顺序显示,在步骤157v中读取幻灯放映识别符126,在步骤157k中如果是OK,则在步骤157m中基于显示顺序识别符122进行显示,从第2存储器读出画质优先127,在图15的步骤158a中显示方法不是画质优先的情况下,在步骤158q中检查是否是速度优先128,在步骤158b中如果是速度优先,则在步骤158c中调查是否处在显示声音服务器中,在步骤158s中调查声音的服务器的目录130,在步骤158a中对显示声音的服务器上的目录访问而输出声音。
在步骤158e中如果优先显示图像不是全部图像,则在步骤158f中选择一部分图像,在步骤158v或步骤158w中获得特定目录124的信息(步骤158g),在步骤158h中显示特定目录的图像。也可以如步骤158i那样进行全部图像显示。如果在步骤158j中显示完成,则在步骤158k中进行“是否观看别的图像”的显示,在“是”的情况下在步骤158m中显示别的目录的图像的菜单。
如果在图16的步骤159a中要求特定使用者的图像,则在步骤159m中得到特定使用者全部图像132的数据和特定使用者的口令133,在步骤159b中要求特定使用者的口令,在步骤159c中如果正确,则在步骤159p中读取装有图像列表的文件的目录信息134,在步骤159d中访问装有特定使用者的图像列表的目录,在步骤159r中从服务器的特定目录下载图像数据,在步骤159e中显示特定使用者的图像。
在步骤159f中开始颜色修正例程,在步骤159g中根据照相机ID和照相机ID部76读出照相机机种信息,在步骤159h和159t中从服务器下载照相机机种的特性数据。接着,在步骤159i、159u中下载TV的特性数据。在步骤159w中运算数据而得到修正数据。在步骤159j中基于照相机和TV的特性数据修正显示部的颜色及明亮度,在步骤159k中以正确的颜色和明亮度显示。
在图17的步骤160a中强制印刷命令是ON、且在步骤160b中照相机接近的终端是打印机、或连接在打印机上的终端的情况下,在步骤160c中获得各图像数据的照相机机种信息和打印机的机种名,在步骤160d中根据服务器的各信息计算修正数据而进行修正,在步骤160p中得到包含印刷对象的图像数据的目录信息137,在步骤160e中使用记录有印刷对象的图像数据(文件名)的目录的地址对服务器访问,在步骤160m中将特定的目录的图像数据送出,在步骤160f中得到印刷图像数据,在步骤160g中进行印刷,在步骤160h中完成印刷。在步骤160i中将表示完成了1次印刷的识别符记录到各图像数据中,在步骤160n中,在服务器上对印刷的图像数据赋予印刷完成识别符。
接着,说明在介质(照相机、明信片等)侧的存储器中没有记录功能的情况下的实施例。
上接图8的圈3、圈4、圈5。首先,在TV侧,在图18的步骤161a中使TV的主电源成为ON,在步骤161k中从第2存储器读取UID,在步骤161b中获得UID,在步骤161m中得到服务器特定信息48,在步骤161c中对服务器的目录访问,在步骤161d中检索与该UID对应的服务的最终服务器。在步骤161e中有最终服务器的情况下,在步骤161g中对最终服务器访问,从UID列表读出使用者的ID、口令和服务名,假如在步骤161h中要求口令的情况下在步骤161i中判断是否正确,在图19的步骤162a中检查是否是照片或视频的服务,如果是“是”,则在步骤162b中从与上述UID建立了关联的服务器的特定目录之中读出包括对应的收费等的程序及显示的图像数据的地址及文件名的列表、以及图像显示指示信息、强制显示命令、强制印刷命令、照相机ID,根据这些数据及次序自动地进行显示、印刷作业。
根据需要而要求口令输入,在步骤162c中在想要印刷特定的图像的情况下,在步骤162d中将想要印刷的特定的图像数据添加到与上述UID对应的服务器上、或TV的印刷目录中,在步骤162e中检查是否在TV上连接着打印机、或者有单独的打印机,在“是”的情况下,如果在步骤162f中使该明信片等的介质的RF-ID部接近于打印机的RF-ID读写器,则在图20的步骤163a中,打印机将上述介质的UID读入,从图的修正服务器上的上述印刷目录读出应印刷的图像数据或图像数据的场所,将该图像数据印刷,在步骤163b中印刷完成而结束。
在接着图19的23的步骤163i的下个步骤163b中,在是购物服务的情况下,在步骤163e中检查认证是否正确,在正确的情况下,在步骤163f中将与上述UID建立关联的购物-收费程序从服务器读出,执行程序,在步骤163g中如果程序完成则结束。
接着,对将内置在明信片中的RF-ID的数据以无RF-ID读取器的方式而读取的方法进行说明。
在图21的步骤164a中,在附着或内置在明信片等的介质中并且记录有中继服务器的URL信息的第2RF-ID的外面上,以2维码印刷显示有确定UID和中继服务器的第1URL的数据。
在步骤164b中,有具有与主服务器的通信功能并具有第1RF-ID部、在其中记录有主服务器的第1URL信息的照相机,通过该照相机的摄影部,将上述2维码光学地读取,变换为确定第2RF-ID的UID和中继服务器的第2URL的数据。
在步骤164c中,将上述变换后的数据记录到照相机的存储器中。
在步骤164d中,从用照相机摄影的图像中选择特定的图像群,记录到主服务器上的特定的第1目录中。同时,将第1目录信息与主服务器的第1URL信息一起上载到第2URL的中继服务器上的特定的第2目录中。将用于将特定的第2RF-ID的UID与上述第2目录建立关联的信息上载到上述第2URL的中继服务器中,在步骤164e中,将明信片等的介质向特定的人邮寄。
在步骤164f中,接受到明信片的人将明信片的RF-ID部靠近TV等的RF-ID读取部,得到中继服务器的第2URL和明信片的UID。
在步骤164g中,对第2URL的中继服务器访问,将与上述UID建立了关联的第2目录中的程序、或者记录有特定的图像数据的主服务器的第1URL和第1目录信息取出,从主服务器下载图像数据,显示在TV画面上。在此情况下,将一般印刷在商品或明信片上的、记录有服务器服务器信息的2维码通过本发明的摄影装置的摄像部读取,将2维码的信息作为数字数据记录到RF-ID部的第2存储器中,通过使TV的RF-ID读取器读取该数据,即使是没有2维码用的光学传感器的TV,也能够间接地读取2维码的数据、向服务器等自动地访问。
图22(a)表示使摄影装置1接近于TV45的RF-ID的天线138时的显示状态。
如果使摄影装置1接近于天线138,则如上述那样,显示用于识别是照相机的照相机的图标140。
接着,由于知道未上载的图像有几张(例如5张),所以使5张空白图像142a、142b、142c、142d、142e宛如从照相机的图标140中出来那样显示。
由此,显示针对“来自物品的信息”的“有形的”图像,所以用户能够以更自然的感觉观看图像。
数据处于服务器中的实际图像如143a、143b、143c那样,同样有形地显示。
图22(b)表示在明信片139中埋入了RF-ID的情况。由于通过TV45的RF-ID读写器46读入明信片的属性信息,所以如图示那样在TV45的左下角显示明信片的图标141,与图22(a)同样有形地显示服务器的图像及菜单画面。
以下,对将图4中所示的动作程序116向作为摄影装置1的RF-ID47的通信对象的设备即图3的TV45发送、作为该RF-ID部的通信对象的设备执行发送来的程序的处理的详细情况进行说明。
图23是作为摄影装置1的RF-ID47的通信对象的设备执行发送来的程序的处理所进行的块图。在本图中,图示了由摄影装置1的一部分(RF-ID47、第2天线21)、电视机(TV)45、及TV45的遥控器827构成的通信系统。这里,摄影装置1是具有通过红外线通信路与和TV45连接的RF-ID读写器46之间进行近距离无线通信的RF-ID47的照相机,具备近距离无线通信用的天线21、经由天线21接收从RF-ID读写器46供给的输入信号的接收部105、至少存储有作为用于确定通信装置的识别信息的UID部75和参照该UID部75由TV45执行的动作程序116的非易失性的第2存储器52、以及根据由接收部105接收到的输入信号将存储在第2存储器52中的UID部75及动作程序116经由天线21向RF-ID读写器46发送的数据转送部108,在将从数据转送部108发送来的UID部75及动作程序116从数据转送部108经由天线21、RF-ID读写器46及红外线通信路向TV45转送这一点上具有特征。以下,详细地说明各构成要素。
摄影装置1的RF-ID47具有第2存储器52,第2存储器52保存有在作为RF-ID部的通信对象的电视机45中动作的动作程序116。即,该动作程序116是参照摄影装置1的识别信息由TV45执行的程序的一例,例如如后述那样,是Java(注册商标)等的执行形式程序、或者Java(注册商标)脚本等的脚本形式的虚拟机用程序。
RF-ID47的再现部从第2存储器52将包括摄影装置1所固有的UID或URL的服务器特定信息等的作为为了执行动作程序而需要的信息的数据与动作程序116一起读出,经由数据转送部108及第2天线21向进行电视机45的远程操作的遥控器827的RF-ID读写器46发送。
遥控器827的RF-ID读写器46接收从摄影装置1的RF-ID47发送的数据和动作程序,存储到RF-ID存储部6001中。
此外,遥控器827的遥控器信号生成部6002将从摄影装置1的RF-ID47发送而记录在RF-ID存储部6001中的数据和动作程序变换为当前广泛用于遥控器用通信的红外线方式等的遥控器信号。
遥控器信号发送部6003将包括由遥控器信号生成部6002生成的动作程序的遥控器信号对电视机45发送。
电视机45的遥控器信号接收部6004接收从遥控器827发送的遥控器信号,程序执行部6005例如是Java(注册商标)等的虚拟机,经由解密部5504从遥控器信号取得从摄影装置1的RF-ID47发送的数据和动作程序,执行动作程序。
在图24中,表示作为动作程序而执行“参照摄影装置1的识别信息(这里是UID)从图像服务器下载图像数据,并以幻灯放映形式显示图像”的动作的处理的流程。
如果将遥控器接近于摄影装置1,则首先从遥控器的RF-ID读写器46经由RF-ID的通信对摄影装置1的RF-ID47供给电源,从第2存储器52读出设备固有的UID75、图像服务器的URL48、动作程序116(S6001)。将读出的UID、图像服务器URL、动作程序通过数据转送部108及第2天线21朝向遥控器827发送(S6002)。这里,动作程序如图25所示,由服务器连接命令6006、下载命令6008、幻灯放映显示命令6010、下载完成时的处理设定命令6007、下载完成时命令6009构成。
在遥控器827中,用RF-ID读写器46接收从摄影装置1发送的UID、图像服务器URL、动作程序(S6003及S6004),如果接收完成,则将UID、图像服务器URL、动作程序存储到RF-ID存储部6001中(S6005),并且将UID、图像服务器URL、动作程序变换为能够作为遥控器信号以红外线方式发送的形式(S6006)。并且,在受理了用户在遥控器827上进行规定的操作输入、发送遥控器信号的指示的情况下(S6007),将包括UID、图像服务器URL、动作程序的遥控器信号从遥控器信号发送部发送(S6008)。即,遥控器827除了作为通常的遥控器的功能以外,还作为由内置的RF-ID读写器46从摄影装置1朝向TV45转送UID、图像服务器URL及动作程序的中继器发挥功能。
接着,在电视机45中,接收从遥控器827发送的遥控器信号(S6009),由解密部取得包含在遥控器信号中的UID、图像服务器URL、动作程序(S6010)。并且,程序执行部6005使用UID、图像服务器URL执行动作程序(S6011~6015)。动作程序首先使用图像服务器URL与通信网络上的图像服务器42建立连接(S6012及图25的6006)。并且,使用作为摄像设备所固有的信息的UID,从保持在图像服务器42存储装置中的图像数据50之中选择由特定的摄像设备摄影的图像数据,下载到电视机中(S6013、S6014及图25的6008)。即,UID为了选择图像服务器42保持的图像数据中的、与UID表示的摄影装置1建立了对应的图像数据而使用。如果图像的下载完成,则将图像以幻灯放映形式依次显示(S6015及图25的6007、6009、6010)。图25的6007是设定图像下载完成时的处理的命令,在图25中,作为图像下载完成时的处理而设定命令6009。进而,在处理6009之中调用执行图像的幻灯放映显示的处理6010。
另外,在图23及图24中,经由遥控器827将动作程序及动作程序所使用的数据从摄影装置1向电视机45转送,但关于遥控器827的RF-ID读写器46,也可以是电视机具备的结构。即,RF-ID读写器46也可以内置在TV中。换言之,将读取器装置与设备连接的通信路径既可以是红外线等的无线通信路径,也可以是有线的信号线缆。
另外,在上述动作例中,UID为了从图像服务器42保持的图像数据选择与摄影装置1对应的图像数据而使用,但也可以用于确定放置有图像数据的图像服务器。例如,在存在多个图像服务器的通信系统中,在将UID与保存有该UID表示的摄影装置的图像数据的图像服务器建立了对应的情况下,通过制作动作程序以参照该UID决定图像服务器的URL,执行动作程序的TV45通过参照UID而从多个图像服务器中确定与该UID建立了对应的图像服务器,能够从该图像服务器下载图像数据。
此外,作为确定摄影装置1的识别信息,并不限定于UID,也可以是摄影装置1的序列号码、制造号码、MAC(Media Access Control)地址、相当于MAC地址的信息(IP地址等)、或者在摄影装置1具备作为无线LAN的接入点的功能的情况下也可以是SSID(Service Set Identifier)、相当于SSID的信息。进而,在上述第2存储器52中,将确定摄影装置1的识别信息(UID75)与动作程序116独立保存,但也可以保存(记述)到动作程序116之中。
另外,遥控器信号(即,将读取器装置与设备连接的通信路径)设为使用红外线方式而进行了说明,但并不限定于此,例如也可以是Bluetooth等的无线通信方式。一般通过使用比红外线通信高速的无线通信方式,能够缩短动作程序等的转送所需要的时间。
另外,动作程序不仅是图25所示的格式的程序,也可以是其他编程语言。例如,如果用Java(注册商标)记述动作程序,则由于称作Java(注册商标)VM的程序执行环境的通用性较高,所以多种设备中的动作程序的执行变得容易。此外,如果用以Java(注册商标)Script为代表的脚本形式的能够存储到较小的存储容量中的紧凑的编程语言记述,则即使在由第2存储器52表示的RF-ID的存储容量较小的情况下也能够将动作程序保存到RF-ID内部。此外,为了减轻电视机那样的具备程序执行环境的设备的处理负荷,动作程序也可以不是作为图25所示那样的源代码、而是实施了编译等处理的执行形式的程序。
进而,使用图26和图27,对根据具备RF-ID读取器的显示装置的固有信息变更程序的动作的处理的详细情况进行说明。
图26所示的电视机45具备语言代码保持部6013,程序执行部6005在作为遥控器信号接收到的动作程序进行连接到服务器42上的处理的情况下,从语言代码保持部6013读出语言代码,连接到对应于语言代码的服务器42,从该服务器42下载服务器程序,再将下载的服务器程序执行。例如如果语言代码是日语,则连接到具备包括对应于日语的处理的程序存储部6011的服务器42,将从该程序存储部6011取得的服务器程序在电视机上执行。即,在图23中说明那样的保存在摄影装置1的RF-ID47中的动作程序仅执行向服务器42的连接,为了显示其以外的图像的处理的执行,使用从服务器下载的服务器程序。
用图27说明这样的处理的流程。电视机从摄影装置1的RF-ID47接收动作程序及动作程序所需要的数据的处理与在图24中说明的处理相同。这里,电视机45作为遥控器信号接收到的服务器特定信息包括表示对应于英语的服务器42的服务器地址和表示对应于日语的服务器42的服务器地址这两种,电视机作为遥控器信号接收到的动作程序为记述有由图25的6006表示的向服务器的连接命令的程序。
电视机45的执行环境取得电视机45的语言代码(S6016),如果语言代码是日语,则从服务器特定信息之中选择具备包含对应于日语的处理的程序存储部6011的服务器的服务器地址(S6017、S6018),如果语言代码不是日语,则从服务器特定信息之中选择具备包含对应于英语的处理的程序存储部6011的服务器的服务器地址(S6017、S6019)。接着,使用所选择的服务器地址连接到服务器42上(S6021),从服务器42下载服务器程序(S6022、S6023)。将所取得的服务器程序在电视机的程序执行环境(例如虚拟机)中执行(S6024)。
另外,在图26和图27中对语言代码的使用进行了说明,但也可以如制造号码或序列号码那样是表示显示装置被销售及/或设置的国家的信息。
在图28中表示摄影装置1和TV45使用无线LAN或Power LineCommunication(以下记作PLC)等构成家庭网络6500的情况。在摄影装置1和TV45具有能够经由无线LAN直接通信的直接通信部6501、6502的情况下,摄影装置1能够将图像不经由因特网上的服务器而向TV45发送。即,摄影装置1自身可以兼起到服务器的作用。但是,无线LAN等的在家庭网络6500中使用的一些通信媒体具有容易被他人监听的特性。因此,为了进行安全的数据通信而需要相互认证、交换加密的数据。例如,在当前的无线LAN设备中将接入点作为认证终端,在想要认证的终端的画面上显示全部能够连接的接入点,使用户选择接入点,通过输入WEP密钥来进行加密的通信。但是,对于一般的用户而言,该处理较复杂。此外,在TV等的家电设备中内置有无线LAN的情况下,存在许多能够认证的终端。在集体住宅等中也可能与邻居的终端通信,所以用户选择认证终端本身变得困难。例如在邻居中使用同机种的TV6503的情况下,用户很难根据显示在画面上的信息识别自家的TV45。
在本发明中能够解决该问题。在本发明中,使用RF-ID进行认证处理。具体而言,作为上述动作程序,在摄影装置1的RF-ID部47的第2存储器52中保存包括MAC地址58的认证程序,通过向TV45的RF-ID读写器46接近,对TV45交接认证程序。在认证程序中,与MAC地址一起包含有认证用的加密密钥和认证命令,辨识出在从RF-ID47传递来的信息中包含有认证命令的TV45进行认证处理。RF-ID47的通信部171只要在物理上不接近就不能通信,所以在宅内监听是很困难的。此外,由于通过在物理上接近来进行信息的交换,所以能够避免与邻居的TV6503或DVD记录机6504等的宅内的其他设备进行错误认证的情况。
在图29中表示不使用RF-ID的情况下的认证方法的一例。用户输入照相机及DVD记录机等的想要认证的终端的MAC地址和各终端的认证用的加密密钥6511。被输入的TV45朝向具有被输入的MAC地址的终端,发送称作挑战6513的适当的消息。接收到挑战的摄影装置1将挑战消息6513使用认证用加密密钥6511加密,朝向作为发送来挑战的终端的TV45返送。接受到返送的TV45使用被输入的认证用加密密钥6511将挑战解密。由此,确认认证用加密密钥6511的正当性,防止用户的错误或有恶意的用户的介入。接着,将数据用的加密密钥6512a使用认证用的加密密钥6511加密,朝向摄影装置1发送。由此,在TV45与摄影装置1间能够进行加密的数据通信。进而,与DVD记录机6504及其他设备(6505、6506)也进行同样的处理,通过具有共通的数据加密密钥6512a,能够在连接在家庭网络上的所有的设备间进行加密的通信。
在图30中表示使用RF-ID的情况下的认证方法。在使用RF-ID的认证处理中,在摄影装置1内制作认证程序6521a,从照相机的RF-ID47交接给TV的RF-ID部46。在认证程序6521a中,包括认证命令、照相机的MAC地址和照相机的认证用加密密钥。接受到认证命令的TV通过RF-ID取出照相机的MAC地址和认证用加密密钥,将数据用的加密密钥通过认证用加密密钥加密,对指定的MAC地址发送。该发送使用无线LAN设备进行。在使用RF-ID的认证的情况下,由于机械地进行,所以不发生用户的输入错误。此外,由于需要向TV45接近的动作,所以能够避免有恶意的用户的介入。因此,能够省略挑战等的前处理动作。进而,物理上接近的动作能够使用户辨识使哪个终端与哪个终端认证。另外,在认证程序中不包含认证用加密密钥的情况下,也可以使用与一般的公开密钥认证同样的方法进行认证处理。此外,通信设备也可以不是无线LAN、而只要是构成PLC或Ethernet(注册商标)等家庭网络的设备即可。此外,MAC地址只要是能够识别在家庭网络内使用的通信终端的固有识别信息即可。
在图31中表示在难以使各终端接近的情况下的使用RF-ID的认证方法。在如电冰箱和TV等那样、两者都难以移动的终端的情况下,很难使用RF-ID直接交接认证程序。在这样的情况下,在本发明中也可以使用遥控器6531等附属于终端的装置中继认证程序信息。具体而言,用内置在遥控器6531中的RF-ID读写器将内置在电冰箱中的RF-ID的程序读出,存储到遥控器6531的存储器中,由用户使移动遥控器6531移动。如果将遥控器6531向TV45接近,则将存储在遥控器6531的存储器内的程序向TV的RF-ID转送。另外,从遥控器向TV的转送也可以不使用RF-ID、而使用红外线或ZigBee等的遥控器自身中原来内置的通信机构。只要是已经确定了通信的安全性的媒介,是什么都可以。
在图32中表示照相机(摄影装置1)侧动作的流程图。照相机如果成为认证模式,则制作认证用的加密密钥,设定定时器(S6541)。接着,在RF-ID存储器部中写入自身的MAC地址、制作的认证密钥和认证命令(S6542)。如果由用户将照相机的RF-ID向TV的RF-ID靠近,则将照相机的RF-ID存储器内向TV的RF-ID转送(S6543)。在最初设定的定时器时间内返回了应答的情况下(S6544),将包含在应答内的加密的数据用加密密钥使用认证用加密密钥解密(S6545)。使用数据用加密密钥与其他设备进行通信(S6546),在能够进行数据通信的情况下(S6547),结束认证处理。在不能将数据正确地解密的情况下,显示认证错误,结束处理(S6548)。此外,在定时器时间内没有来自TV的应答的情况下,解除认证模式(S6549),显示超时错误(S6550)。
在图33中表示TV45侧动作的流程图。判断在从RF-ID部接收到的信息中是否包含有认证命令(S6560)。在不包含认证命令的情况下,执行与接收到的信息对应的处理(S6561)。在包含认证命令的情况下,认为从RF-ID部接收到的信息是认证程序,使用存在于认证程序内的认证用加密密钥将自身具有的数据用加密密钥加密(S6562)。进而,对在认证程序内指定的MAC地址发送已加密的数据用加密密钥(S6563)。
以下,对由图3说明的摄影装置1生成或更新能够在TV45中动作的程序并从数据发送部173向TV45发送程序、由TV45执行程序的方式使用附图详细地说明。
图34是本方式的摄影装置1的第1处理部35和第2存储器52的块图,第1处理部35由第2存储器读出部7002、URL生成部7004、程序生成部7005、程序组件存储部7006及程序写入部7007构成。
第2存储器读出部7002是通过记录再现部51将存储在第2存储器52中的信息读出的部分。
URL生成部7004经由第2存储器读出部7002从第2存储器52将UID75、服务器特定信息48、摄影图像状况信息55及图像显示方法指示信息77读出,根据这些信息生成作为图像被上载的服务器42的地址的URL。
UID75是用于识别摄影装置1的识别信息,是对每1台摄影装置唯一的号码。在由URL生成部7004生成的URL中包含有UID,例如在上载图像的图像服务器42中,在对各UID唯一的目录中保存图像文件等,能够生成对每1台摄影装置不同的URL地址。
服务器特定信息48是用于确定图像被上载的服务器的服务器名,通过经由DNS(DomainName Server),能够判断服务器42的IP地址,能够连接到服务器42上。由此,服务器特定信息48也包含在生成的URL中。
图像显示方法指示信息77是作为选项而能够选择一览显示78、幻灯放映显示79等的信息。URL生成部7004基于该图像显示方法指示信息77决定URL。即,通过生成表示是一览显示78还是幻灯放映显示79的URL,图像服务器能够基于URL决定是进行一览显示还是进行幻灯放映显示。
如以上这样,本URL生成部7004根据存储在第2存储器52中的UID75、服务器特定信息48、摄影图像状况信息55及图像显示方法指示信息77等,生成用于视听图像的向图像服务器的URL,将所生成的URL向程序生成部7005输出。
程序生成部7005是根据由URL生成部7004生成的URL、存储在第2存储器52中的强制显示命令7000、强制印刷命令136及格式识别信息7001、生成能够在TV45中动作的程序的部分。另外,程序生成部7005作为新动作程序的生成方法,既可以基于上述信息生成新的动作程序,也可以通过将已生成的动作程序更新而生成新的动作程序。
由程序生成部7005生成的程序是能够在TV45中动作的程序,需要编译为上述系统控制器用的机器语言,以便能够在TV45的未图示的系统控制器中动作。在此情况下,在本程序生成部7005内具有编译器,将所生成的程序变换为执行形式的程序。
另一方面,如一般的JAVA(注册商标)脚本那样,即使是文本形式(脚本)的程序,在作为由搭载在TV45中的浏览器执行的程序的情况下,不需要上述的编译器。
对程序生成部7005输入的URL是用于进行向记录有图像的图像服务器连接的URL,本程序生成部7005使用URL生成或更新向服务器的连接程序。
此外,强制显示命令7000是在由TV45视听例如基于通常的广播波的节目的过程中TV45的RF-ID读写器46成为能够从本摄影装置1的第2天线21通信的情况下、将TV45自动地设定为用于从图像服务器显示图像信息的浏览器视听模式的选项,在选择了本选项的情况下,生成用于使TV45强制显示的程序。
此外,强制印刷命令136是在由TV45视听例如基于通常的广播波的节目的过程中TV45的RF-ID读写器46成为能够从本摄影装置1的第2天线21通信的情况下、将保存在图像服务器中的图像数据从连接在TV45上的未图示的打印机自动印刷的选项,在选择了本选项的情况下,生成用于使TV45强制印刷的印刷用程序。
此外,格式识别信息7001是用于显示的格式信息,本程序生成部7005如果选择了格式信息中的语言代码最适合站点选择的选项,则根据设定在TV45中的语言代码,生成用于选择连接到服务器的URL的程序。例如,在选择了格式信息中的语言代码最适合站点选择的选项的情况下,生成用于在TV45的语言代码是日语的情况下、作为连接的URL而选择日语的站点、在语言代码是日语以外的情况下、作为连接的URL而选择英语的站点并进行连接的程序。因而,上述的URL生成部7004在选择了格式信息之中的语言代码最适合站点选择的选项的情况下,生成日语站点用的URL和英语站点用的URL这两个URL,向本程序生成部7005输出。
程序组件存储部7006存储有用于由程序生成部7005生成程序的程序命令信息。存储在本程序组件存储部7006中的程序组件也可以是一般的库或API。程序生成部7005在生成向服务器的连接命令的情况下,通过在从程序组件存储部向服务器连接命令即“Connect(连接)”中结合由URL生成部7004生成的URL,生成或更新用于向URL中记述的服务器连接的连接程序。
程序写入部7007是用于将由程序生成部7005生成的程序写入到第2存储器部中的接口。
从程序写入部7007输出的程序经由记录再现部51存储到第2存储器52的程序存储部7002中。
在本摄影装置1的RF-ID部向连接在TV45上的RF-ID读写器46可通信地接近的情况下,通过再现部从第2存储器52的程序存储部7002读出程序,经由数据转送部108、第2天线21将表示程序的发送信号向RF-ID读写器46发送。被发送的发送信号经由RF-ID读写器46被TV45接收。TV45执行接收到的程序。
此外,在TV45中,存在制造号码7008、语言代码7009及程序执行虚拟机7010。
制造号码7008是TV45的制造号码,是由此能够判断制造TV45日期时间、场所、制造生产线、制造者等的信息。
语言代码7009是用于设定在TV45中的菜单显示等的语言代码,除了预先设定以外,也可以由用户切换。
程序执行虚拟机7010是用于执行接收的程序的虚拟机,在由硬件构成的情况及由软件构成的情况下两者都是有效的。例如,本程序执行虚拟机由JAVA(注册商标)虚拟机构成。JAVA(注册商标)虚拟机是执行定义的命令集的堆栈型或解释器型的虚拟机。通过搭载该虚拟机,由摄影装置1的程序生成部7005生成的程序不用选择其执行平台,能够生成在怎样的平台下都能够执行的程序。
图35是表示摄影装置1的程序生成部7005的动作的流程图。
首先,本程序生成部7005将生成程序信息初始化(S7000)。
接着,使用由URL生成部7004使用存储在第2存储器52中的服务器特定信息48生成的URL,生成向服务器42的连接命令。为了生成连接命令,从程序组件存储部7006中选择服务器连接命令用的命令集(例如图中的“Connect”),通过与URL组合而生成服务器连接程序(例如“Connect(URL)”)。
接着,确认第2存储器52的强制显示命令7000,判断强制显示命令是否是ON(S7001)。在为ON的情况下,从程序组件存储部7006调用强制显示程序用的命令集,生成强制显示命令(S7002)。将所生成的命令追加到程序中(S7004)。
另一方面,在强制显示命令不是ON的情况下,不生成强制显示命令。
接着,判断第2存储器52的强制印刷命令是否被设定为ON(S7005)。在为ON的情况下,生成用于将存储在服务器中的图像文件强制印刷的印刷命令(S7006)。将所生成的命令追加到程序中(S7007)。
接着,确认第2存储器52的图像显示方法指示信息77,判断一览显示78是否被设定为ON(S7008)。在为ON的情况下,生成用于使存储在服务器中的图像文件一览显示的一览显示命令(S7009)。将所生成的命令追加到程序中(S7010)。
接着,确认第2存储器52的图像显示方法指示信息77,判断幻灯放映79是否设定为ON(S7011)。在为ON的情况下,生成用于将存储在服务器中的图像文件幻灯放映显示的幻灯放映命令(S7012)。将所生成的命令追加到程序中(S7013)。
如以上这样,本摄影装置1的程序生成部7005基于设定在第2存储器52中的内容,利用存储在程序组件存储部7006中的程序生成用的命令指令集,生成用于由TV45进行图像显示的程序。
另外,在本实施方式中,用强制显示命令、强制印刷命令、一览显示、幻灯放映的情况进行了说明,但并不限定于此。例如,作为生成的程序而生成强制显示命令指令的情况下,如果在执行程序的装置中插入针对是否有显示设备、显示功能的判断程序,仅在有显示设备、显示功能的情况下执行,则能够生成消除了执行程序的设备侧的混乱的程序。在强制印刷命令指令的情况下也同样。可以在执行强制印刷命令指令的设备中插入判断是否具有印刷功能、或连接着具有印刷功能的设备的指令,仅在具有的情况下执行强制印刷命令指令。
接着,对由本摄影装置1的程序生成部7005生成或更新的程序进行说明。
图36是表示由本程序生成部7005生成的程序的处理的流程的流程图,本程序是被经由本摄影装置1的第2天线21发送、由接收的与本摄影装置1不同的设备执行的程序。在本实施方式中,与本摄影装置1不同的设备是TV45,将由RF-ID读写器46接收到的程序通过TV45的未图示的控制器(或虚拟机)执行。
本程序首先将设定在TV45中的语言代码作为TV45的固有信息读出(S7020)。语言代码是在TV45的菜单显示等时使用的语言代码,是由用户设定的。
接着,判断设定在语言代码中的语言。在本实施方式中,首先,判断语言代码是否是日语(S7021)。在判断为语言代码是日语的情况下,选择程序中的向服务器的连接命令中的、日语站点用的连接命令(S7022)。另一方面,在判断为语言代码不是日语的情况下,选择本程序中的向英语站点的连接命令(S7023)。在本实施方式中,说明了仅判断语言代码是否是日语、分别选择是向日语站点连接、还是向英语站点连接的方式,但如果具备对应于各个语言代码的连接程序、以使得对于两种以上的语言代码也能够对应,则能够向两种以上的语言代码对应,能够提高用户的方便性。接着,按照所选择的连接命令,连接到记述在连接命令中的URL(S7024)。
接着,判断向记述在连接命令中的URL是否连接成功(S7025)。在连接失败的情况下,在TV45的显示部上进行表示连接失败的警告显示(7027)。另一方面,在连接成功的情况下,执行用于使存储在服务器中的图像文件幻灯放映显示的命令,使存储在服务器中的图像文件幻灯放映显示(7026)。
另外,在本实施方式中,对动作程序是用于使图像幻灯放映显示的程序的情况进行了说明,但有关本发明的动作程序并不限于此。也可以是进行一览显示或强制显示、强制印刷的程序。在强制显示的程序的情况下,将用于自动地变更为显示存储在服务器中的图像文件的设定的步骤作为命令插入。由此,用户能够省去用手动变更TV45的设定的工夫,而显示来自图像服务器的图像文件。此外,在强制印刷的情况下,插入将TV45的设定自动地切换为能够印刷的模式的命令。此外,在强制印刷、强制显示的情况下,需要通过分别插入针对是否具有印刷功能的判断命令、针对是否具有显示功能的判断命令,使得不由没有印刷功能的设备执行强制印刷命令。进而,有关本发明的动作程序也可以是用于导引其他程序的连接程序。例如,如引导加载器那样,也可以是用于将其他程序加载而执行的加载器程序。
如以上这样,在本实施例中公开的发明的特征是,在作为具有RF-ID通信机构(数据转送部108、第2天线21等)的设备的摄影装置1的第1处理部35之中,具有程序生成部7005。此外,由程序生成部7005生成或更新的程序由作为具有RF-ID的通信设备的本实施方式的摄影装置1以外的设备执行,这一点也是特征。
以往,搭载RF-ID的设备从RF-ID通信部将自身具有的ID信息(标签信息)向其他设备(例如本实施方式的TV45)转送,在其他设备中,需要对应于ID信息(标签信息)而准备对具有RF-ID的各个设备唯一的动作程序。因而,在出现了具有RF-ID的新的商品的情况下,只能获得对应于该新的商品的动作程序并安装执行、或者作为不能对应的设备排除。此外,在动作程序的安装中,要求专门的知识,不是谁都能简单地进行的。因而,如果具有RF-ID的设备被售出多代,则本实施方式的TV45那样的其他设备老旧化,有损害用户的财产价值的问题。
根据在本实施方式中说明的发明的公开,具有RF-ID的设备具有程序生成部7005,对TV45等的其他设备不发送ID信息(标签信息)而发送程序。在TV45等的其他设备中,通过执行接收到的程序,不需要预先具备与具有RF-ID的各设备对应的动作程序,例如即使在出现新的具有RF-ID的设备的情况下,也不需要安装新的程序,能够显著地提高用户方便性。
由此,TV等终端不需要按照装备RF-ID的物品的个体、种类、或应用系统而具备对应的应用程序。由此,TV等终端不需要具备用于保持许多种类的应用程序的存储装置,并且也不需要修改终端保持的程序等维护。
此外,本程序生成部7005生成的程序中,JAVA(注册商标)语言那样的不选择执行平台的程序是有用的。由此,仅通过在执行程序的TV45那样的设备中准备JAVA(注册商标)的虚拟机,不论是怎样的设备的程序都能够执行。
此外,本发明的程序生成部7005也可以具有将预先存储在第2存储器52的程序存储部7003中的程序更新的功能。这是因为,在将程序更新的情况下也具有与生成程序同样的效果。此外,在本程序生成部7005中,生成或更新的程序也可以是在由TV45执行程序的情况下使用的数据的生成或更新。通常,程序具有附带的初始设定数据等,根据该数据切换动作的模式、或进行标志设定,所以在将数据生成或更新的情况下,也与将程序生成或更新是同样的,是本发明的范畴。这是因为,当执行程序时,将其模式切换等的参数作为数据保持而读出、还是植入在程序内部中而执行,这是设计事项。因而,由本发明的程序生成部7005生成或更新的程序也可以同时也生成上述程序使用的参数列等的数据。作为生成的参数,是基于存储在第2存储器52中的强制显示命令7000、强制印刷命令136、图像显示方法指示信息77或格式识别信息7001等生成的数据。
接着,说明本发明的作为具有RF-ID的通信设备的摄影装置1的第2存储器52及第1处理部的特征性的结构和动作。在本实施方式中,对作为具有RF-ID的通信设备的本摄影装置1在第1处理部35中具有检测关于动作的不良状况、或检测电力使用状况的使用状况检测部、生成用于将检测到的使用状况在作为与本摄影装置不同的设备的TV45上显示的程序的方式进行说明。
图37是表示本发明的摄影装置1的第2存储器52、第1处理部35的特征性的结构的块图。
第2存储器52具有UID75、服务器特定信息48、照相机ID部135及程序存储部7002。
UID75是能够识别本摄影装置1的按照每1台设备而不同的序列号码。
服务器特定信息48是确定从本摄影装置1的通信部37将摄影的图像数据向服务器42发送的服务器的信息,包括服务器地址、保存目录、登陆账户、登陆口令等。
照相机ID部135记录有本摄影装置1的制造号码、制造年月日、制造商、制造生产线信息、制造场所等,并且还包括用于确定本摄影装置1的机种的照相机机种信息。
第1处理部35由第2存储器读出部7002、使用状况检测部7020、程序生成部7005、程序组件存储部7006及程序写入部7005构成。
第2存储器读出部是将存储在第2存储器52中的内容经由记录再现部51读出的部分。在本实施方式中,从第2存储器52读出UID75、服务器特定信息48、照相机ID部135,向程序生成部7005输出。另外,本第2存储器读出部7002在被输入来自后面说明的使用状况检测部7020的读出信号的时刻,从第2存储器52读出上述内容。
使用状况检测部7020是按照构成本摄影装置1的功能单位检测其使用状况的部分。此外,按照构成本摄影装置1的功能单位而具有确认动作不良状况的感知部,将各功能单位的感知部中的感知结果向本使用状况检测部7020输入。例如,从摄像部30输入是否确认了关于摄像部的摄像动作的不良状况(是否发挥功能、对于来自本使用状况检测部的呼叫是否正确应答),从影像处理部31输入在摄像部30摄像的图像数据的数据处理中是否确认了不良状况(是否发挥功能、对于来自本使用状况检测部的呼叫是否正确应答),从电源部101输入电池的电压水平、总的用电量,从通信部37输入与服务器的连接是否成功、是否完成向因特网的连接(是否发挥功能、对于来自本使用状况检测部的呼叫是否正确应答),从显示部6a输入在显示处理中是否没有不良状况(是否对呼叫正确地应答、是否发挥功能)等,按照功能单位输入不良状况信息或电池寿命、耗电量。在本使用状况检测部7020中,基于按照功能单位发送来的上述那样的状态信息,由内部的不良状况检测部7021按照功能单位判断是否有对于功能动作的不良状况,在确认了不良状况的情况下,将确定不良状况部位的信息、确定不良状况内容的信息向程序生成部7005输出。此外,本使用状况检测部7020在内部中具有使用电力检测部7022,基于来自电源部的总用电信息生成用电信息向程序生成部7005输出。
程序生成部7005生成用于将确定来自使用状况检测部7020的不良状况内容的信息及用电信息用TV45显示的程序。程序生成由于在程序组件存储部7006中预先存储有用于构成程序的命令集,所以生成用于显示不良状况及耗电量的显示命令(指令,command)(在图37中是“display(显示)”)、以及用于显示确定不良状况部位的信息、确定不良状况内容的信息的程序。另外,上述耗电量也可以变换为二氧化碳的排出量,生成作为显示二氧化碳排出量的程序。
由程序生成部7005生成的程序经由程序写入部7007存储在第2存储器52的程序存储部7002中。
存储在第2存储器52的程序存储部7002中的程序被经由数据转送部108从第2天线21向TV45的RF-ID读写器46发送。
在TV45中,将接收到的程序由程序执行虚拟机7010执行。
根据以上的结构,由第1处理部35内的程序生成部7005生成用于将摄影装置1的使用中的由使用状况检测部7020检测到的不良状况或使用状况信息显示在TV45上的程序,发送给TV45,由TV45显示摄影装置1的不良状况信息及使用状况信息。由此,在TV45中,能够不安装依存于摄影装置1等设备的多个程序,而对用户显示不良状况信息及使用状况信息。
在以往系统中,在TV45内,按照摄影装置、摄像机、电动牙刷、体重计等设备准备简单的液晶显示器等的显示功能,在该显示功能上显示不良状况信息及使用状况信息。因而,仅能够搭载显示能力较低的显示功能,仅能够将不良状况信息用符号串或错误代码显示。因而,如果被输出不良状况信息等,则用户需要翻阅操作说明书、判断是怎样的错误。但是,一部分的用户丢失了操作说明书,能够从因特网的网站获知信息。
但是,在本发明的系统中,能够生成能够由用于显示按照摄影装置1等装置检测到的不良状况信息的与本摄影装置不同的显示能力较高的设备即TV45执行的不良状况报告显示程序,能够消除上述那样的问题。
以下,对由图3说明的摄影装置1生成的程序在包括TV45的多个设备中动作的方式,使用附图详细说明。
图38是表示在本方式中、摄影装置1生成的程序由多个设备执行的状况的图,由摄影装置1、TV45、带有显示功能的遥控器6520、无显示功能的遥控器6530构成。
TV45由上述RF-ID读写器46、无线通信装置6512构成。无线通信装置6512例如是在当前许多家电的遥控器中使用的一般的红外线通信装置、Bluetooth(蓝牙)或称作ZigBee(紫蜂)的使用电波的面向家电的近距离无线通信装置等。
带有显示功能的遥控器6520由用于对TV45的无线通信装置6512发送信号的发送部6521、用于显示影像的显示装置6523、受理来自用户的按键输入的输入装置6524、用于与RF-ID47通信的RF-ID读取器6522、用于保存由RF-ID读取器6522接收到的程序的存储器6526、以及用于执行由RF-ID读取器6522接收到的程序的作为虚拟机的程序执行虚拟机6525构成。例如,近年来的便携电话是保持红外线通信功能或Bluetooth、RF-ID读取器、液晶画面、按键输入部、JAVA(注册商标)虚拟机等的、带有显示功能的遥控器的一例。显示装置6523和输入装置6524既可以是液晶画面和多个字符输入按钮,也可以如液晶触摸面板那样为一体。
无显示功能的遥控器6530由用于对TV45的无线通信装置6512发送信号的发送部6521、按钮等的受理来自用户的输入的输入装置6533、用于与RF-ID47通信的RF-ID读取器6532、以及将从RF-ID读取器6532接收到的数据暂时保存的存储器6535构成。
无显示功能的遥控器6530可以考虑在附属于当前许多TV的一般的遥控器中内置RF-ID读取器的设备等。
在本方式中,考虑将由摄影装置1生成的程序通过经由TV45的RF-ID读写器46直接发送给TV45、由TV45执行程序的第1情形、将由摄影装置1生成的程序通过经由无显示功能的遥控器6530间接地向TV45发送、由TV45执行程序的第2情形、将由摄影装置1生成的程序经由有显示功能的遥控器6520间接地向TV45发送、由TV45执行程序的第3情形、将由摄影装置1生成的程序向有显示功能的遥控器6520发送、由有显示功能的遥控器6520执行程序的第4情形,用户选择性地执行4个情形。
这里,第1情形在实施方式1中已经叙述,所以省略说明。
在下述中,关于第2~第4情形说明详细情况。
第2情形是经由如一般的TV遥控器那样不具有液晶面板等图形显示装置的无显示功能的遥控器6530、由TV45执行由摄影装置1生成的程序的情形。
在用户使RF-ID47接近于RF-ID读取器6532的情况下,RF-ID读取器6532将由摄影装置1生成的程序读出,保持在存储器6535中。
接着,如果用户将输入装置6533按下,则从发送部6531对TV45的无线通信装置6512发送保持在存储器6535中的程序,由TV45上的程序执行虚拟机7010执行程序。在无线通信装置6512是具有指向性的红外线通信装置的情况下,用户在将无显示功能的遥控器6530朝向对应的TV45的状态下按下输入装置6533。在无线通信装置6512是不具有指向性的Bluetooth或ZigBee等的近距离无线通信装置的情况下,对事前配对的TV45发送程序。在近距离无线通信装置的情况下,即使用户不按下输入装置6533,也可以在RF-ID读取器6532从RF-ID47读入程序的时刻对自动配对的TV45发送读入的程序。
此外,无显示功能的遥控器6530也可以在构成要素中具有用于将由RF-ID读取器6532读入的数据保持在存储器6535中的情况向用户通知的显示装置、例如LED6534,在从RF-ID读取器6532向存储器6535读入程序时使LED6534点亮、当用户按下输入装置6533、对TV45发送完成程序时使LED6534灭掉。由此,可以将无显示功能的遥控器保持有程序的情况向用户明确地通知。LED6534既可以是单体的LED,也可以与输入装置6533为一体。
在第2情形中,即使是用户与TV45的位置远离的情况,也能够通过利用手边的无显示功能的遥控器6530在TV45上执行程序。
第3、第4情形是在如例如称作智能手机的高性能便携电话那样、带有显示功能的遥控器6520具有程序执行虚拟机的情况下、用户可以选择在带有显示功能的遥控器上执行由摄像装置1生成的程序、或通过对TV45发送程序而在TV45上执行程序的情况下的例子。
在用户使RF-ID47接近于RF-ID读取器6522的情况下,RF-ID读取器6522将由摄影装置1生成的程序读出,保持到存储器6535中。
接着,使用图39的流程图详细地说明带有显示功能的遥控器6520的动作。
首先,将由RF-ID读取器6522读出的程序向程序执行虚拟机6525转送并执行(S6601)。
接着,判断遥控器6520是否具有显示设备(S6602)。在遥控器6520不具有显示功能的情况下(S6602中“否”),使用发送部6521将程序向TV45发送,结束处理。在此情况下,将程序在TV45上执行。
在遥控器具有显示功能的情况下(S6602中“是”),判断遥控器与发送目的地的TV45是否已配对(S6603)。在遥控器6520与TV45没有配对的情况下(S6603中“否”),使用遥控器6520的显示装置6523继续执行程序。在遥控器6520与TV45已配对的情况下(S6603中“是”),为了对用户敦促选择,在显示装置6523上显示“显示于TV上?还是用遥控器显示?”的对话消息(S6604)。
接着,受理来自输入装置6524的用户输入(S6605),判断用户是否选择了在TV上显示(S6606)。在用户选择了在TV45上显示的情况下(S6606中“是”),使用发送部6521将程序向TV45发送,结束处理。在此情况下,将程序在TV45上执行。在用户选择了用遥控器显示的情况下(S6606中“否”),使用遥控器6520的显示装置6523执行程序的后续(S6607)。
此外,上述所示的程序的后续,是上述的摄影装置1的电池状态、不良状况状态、操作说明书的显示等,当然并不限制于本实施例。
根据以上的结构,将由摄影装置1生成的程序发送给带有显示功能的遥控器设备,判断带有显示功能的遥控器的能力,在遥控器上决定由哪个设备执行程序的后续。由此,不需要在遥控器自身中安装对应于多个设备的程序,用户能够以喜好的方式执行程序。
此外,在本实施方式中,以遥控器的显示功能的有无、配对状态为判断条件进行了说明,但并不限定于此。程序按照通信能力、声音·影像再现能力、输入设备、输出设备等设备能够具有的能力进行怎样的判断都可以。
如以上说明,RF-ID的存储区域不仅保持数据,还保持记述有设备的动作的程序,由此以往为了变更设备的动作而需要的程序的变更及更新显著地变得容易,也能够对应于许多新功能的追加及联动设备的增加。此外,由于使用RF-ID的近距离通信是靠近这样的用户容易理解的操作,所以能够使以往操作按钮或菜单而较麻烦的设备操作也变得简单,能够容易使用复杂的设备的动作。
(实施方式2)
接着,对于有关本发明的通信系统的具体的动作、即将由照相机取得的图像上载、然后通过简单的操作将该图像下载到TV中而显示的通信系统,作为实施方式2进行说明。通信系统的整体结构与实施方式1是同样的。
在图40中,表示照相机(摄影装置1)将照片上载的一连串的步骤的流程图。照相机首先如果将图像摄影(步骤S5101),则将摄影图像保存到第3存储器中(步骤S5102),进行第2存储器信息的更新处理(步骤S5103)。对该更新信息在后面叙述。接着,由通信部判断是否能够连接到因特网(步骤S5104),如果能够连接,则进行URL的制作处理(步骤S5105)。该处理的详细情况在后面叙述。在制作URL后,照相机进行摄影图像的上载(步骤S5106),如果上载完成,则进行通信部的切断处理(步骤S5107)并结束。上载处理的详细情况在后面叙述。
步骤S5103的第2存储器信息的更新处理用于在服务器42与照相机之间共用已向服务器42上载的照片和没有上载的照片的识别信息。上载处理S5105的动作可以举出例如case(情形)1~case4的动作。
有以下方法:记录第2存储器的最后摄影的时间68,在将摄影图像保存到第3存储器中后,更新第2存储器的最后摄影的时间68(步骤S5111)。
通过将上载的时刻与照相机的最终摄影时刻比较,能够在服务器42与照相机之间共用上载的照片的识别信息。
此外,通过对应于摄影的图像、对应于向服务器42的摄影的图像、生成向服务器42的未上载图像数据的存在识别符64而存储到第2存储器中,这样的方法也能够得到同样的效果(步骤S5121)。
此外,也可以将散列了未上载图像信息后的信息67存储到第2存储器中(步骤S5131)。由此,保存在第2存储器中的信息量变少,带来存储器的节约。
此外,也可以在摄影图像中以时间序列生成图像号码、将第2存储器的图像的最终号码69更新(步骤S5141)。由此,即使在照相机的时刻不正确的情况下,也能够取服务器42与照相机之间的关于上载照片的同步。
在图41中表示步骤S5105的URL制作处理的详细情况。照相机从第2存储器读出包括服务器地址信息81、登陆ID83、口令84等的服务器特定信息48(步骤S5201),生成URL(步骤S5202)。
在图42中表示步骤S5106的上载处理的详细情况。
各个case(情形)对应于在图40中表示的第2存储器信息的更新处理。
在case1中,照相机如果从服务器42接收到向服务器42的最终上载时间(步骤S5211),则将最终上载时刻与最后摄影的时刻比较(步骤S52112)。在最后摄影的时刻比最终上载时刻大、即在有在最终上载后摄影的图像的情况下,将在来自服务器42的最终上载时刻以后摄影的图像上载到服务器42中(步骤S5213)。
在case2中,照相机从第2存储器确认未上载图像数据存在识别符64(步骤S5231),确认未上载的存在(步骤S5232)。在存在未上载图像的情况下,将未上载图像向服务器42上载(步骤S5233),将第2存储器的上载的图像的信息67更新(步骤S5234)。
在case3中,照相机首先确认从第2存储器将未上载图像信息散列而得到的信息67(步骤S5301),判断从第2存储器将未上载图像信息散列而得到的信息67是否与将NULL散列的信息相同(步骤S5302),在不相同的情况下,判断为有还没有上载到服务器42中的图像,记录到第3存储器中,将还没有上载的图像向服务器42上载(步骤S5303)。
在case4中,照相机从服务器42接收最终上载图像的号码(步骤S5311)。接着,判断是否与第2存储器的图像的最终号码69相同(步骤S5312),在不相同的情况下,将具有比来自服务器42的固有ID新的固有ID的图像数据上载(步骤S5313)。
图43是表示进行摄影装置1与TV45的RF-ID近距离通信的处理的流程图。
首先,内置在摄影装置1中的第2天线21接收来自TV45的RF-ID读写器46的轮询所发出的微弱无线电力,启动由第2电源部91动作的RF-ID47(S5401)。
在步骤S5401中接收微弱电力而启动的摄影装置1的RF-ID47对TV45的RF-ID读写器46的轮询进行应答(步骤S5402)。
在步骤S5402中进行轮询应答后,摄影装置1的RF-ID47与TV45的RF-ID读写器部相互进行是否是正规的装置的认证、以及在摄影装置1与TV45间进行包括用于进行安全信息通信的加密密钥的密钥共享动作的相互认证(步骤S5403)。该相互认证是使用椭圆加密等公开密钥加密算法的相互认证处理,通常是与基于HDMI或IEEE1394的通信的相互认证处理同样的方法。
在步骤S5403中,在摄影装置1的RF-ID47与TV45的RF-ID读写器46中进行相互认证处理,在生成相互共通的加密密钥后,从能够从RF-ID47读出的存储在第2存储器52中的服务器特定信息58中读出服务器URL生成信息80,从第2天线21向TV45的RF-ID读写器46发送。在服务器URL生成信息80之中,包括表示服务器42的地址信息的服务器地址信息81、作为向服务器42的登陆ID83的用户识别信息82及作为向服务器42的登陆口令的口令84。口令84是对于防止来自有恶意的第3者的非法行为很重要的信息,所以也有预先作为加密的加密口令85存储、向TV45发送的情况。
在步骤S5404中,在将服务器URL生成信息80向TV45的RF-ID读写器46发送后,将存储在第2存储器52中的摄影图像状况信息55与服务器特定信息58同样,从第2天线21向TV45的RF-ID读写器46发送(步骤S5405)。作为摄影图像状况信息55而发送最终摄影时间68(Case1),作为未上载图像数据的存在识别信息而发送按照摄影图像赋予的能够判断是否为未上载数据的存在识别符64(Case2)、将未上载图像信息散列而得到的信息67(Case3)、或对摄影图像以时间序列赋予的图像号码的图像的最终号码69(Case4)。这是为了确认摄影装置1与服务器42的摄影图像的同步而需要的信息。
在Case1中,作为摄影图像状况信息55而采用最终摄影时间68。由此,在TV45中,将向服务器42的最终上载时间与最终摄影时间68比较,如果最终摄影时间68比向服务器42的最终上载时间在时间序列上晚,则认为没有取得保持在摄影装置1和服务器42中的图像信息的同步,在TV45的显示部上显示没有取得同步的注意信息。
在Case2中,作为摄影图像状况信息55而采用按照摄影图像赋予的能够进行是否是未上载数据的判别的存在识别符64。由此,在TV45中,通过确认按照摄影图像赋予的能够进行是否是未上载数据的判别的存在识别符64,能够判别为存在未上载图像,认为没有取得保持在摄影装置1和服务器42中的图像信息的同步,在TV45的显示部上显示表示没有取得同步的注意信息。
在Case3中,作为摄影图像状况信息55而采用将未上载图像信息散列而得到的信息67。由此,在TV45中,通过确认将未上载图像信息散列而得到的信息67,能够判别为存在未上载图像,认为没有取得保持在摄影装置1和服务器42中的图像信息的同步,在TV45的显示部上显示表示没有取得同步的注意信息。
在Case4中,作为摄影图像状况信息55而采用对摄影图像以时间序列赋予的图像号码的图像的最终号码69。因此,在TV45中,通过确认从服务器42接收的已向服务器42上载的最终图像号码、以及从摄影装置1发送的对摄影图像以时间序列赋予的图像号码的图像的最终号码69,能够判别为存在未上载图像,认为没有取得保持在摄影装置1和服务器42中的图像信息的同步,在TV45的显示部上显示表示没有取得同步的注意信息。
在步骤S5405中,在从摄影装置1的第2天线21向TV45的RF-ID读写器46发送摄影图像状况信息55后,从第2存储器52将图像显示方法指示信息77与摄影图像状况信息55同样从摄影装置1的第2天线21向TV45的RF-ID读写器46发送(步骤S5406)。图像显示方法指示信息77是表示在TV45的显示部上怎样显示从服务器42下载的图像的识别信息,由表示图像的一览形式显示的一览显示(指示符)78及用于以幻灯放映形式显示的幻灯放映(指示符)79构成。
以上,通过摄影装置1的步骤S5401~步骤S5406的步骤,从摄影装置1的第2天线21向TV45的RF-ID读写器46发送存储在摄影装置1的第2存储器52中的服务器URL生成信息80、摄影图像状况信息55、以及图像显示方法指示信息77。此外,它们都优选的是在相互认证时通过在摄影装置1与TV45间共享的加密密钥信息加密并发送。通过进行加密,能够在摄影装置1与TV45间进行安全的信息通信,能够防止来自有恶意的第3者的介入。
此外,通过将服务器URL生成信息80向TV45发送,由此摄影装置1的第1天线20发送的服务器42与从TV45下载图像的服务器为共通的服务器及目录,所以能够将由摄影装置1摄影并上载的图像用TV45显示。
此外,通过将摄影图像状况信息55向TV45发送,能够判断记录在摄影装置1的第3存储器33中的摄影图像与通过第1天线20上载到服务器42中的图像的同步,能够由TV45判断没有取得同步的情况,通过用TV45显示表示没有取得同步的注意信息,能够防止用户的无用的混乱。
此外,通过将图像显示方法指示信息77向TV45发送,不在TV45上由用户指定图像的阅览方法,通过使摄影装置1靠近TV45,能够用设定的阅览方法阅览图像,能够不进行通过TV45的遥控器等的复杂的操作而用设定的阅览方法自动地显示图像。
图44是表示有关本发明的TV系统的特征性的功能的块图。
本TV45由RF-ID读写器46、解密部5504、URL生成部5505、通信部5506、发送部5507、通信接口5508、接收部5509、数据处理部5510、存储器部5511、显示部5512及CPU5513构成。
RF-ID读写器46是经由第2天线21与摄影装置1的RF-ID47通信的部分,由无线天线5501、接收部5503、及可通信装置检索部(轮询部)5502构成。
无线天线5501是与摄影装置1的第2天线21进行近距离无线通信的部分,是与通用的RF-ID读写器的无线天线同样的结构。
可通信装置检索部(轮询部)5502是对多个照相机的RF-ID部进行向一个个对方确认是否没有发送(或处理)请求的轮询的部分。在对于轮询从摄影装置1的RF-ID47有轮询应答的情况下,进行相互认证动作,在TV45与摄影装置1间共享共通的加密密钥。
接收部5503当对轮询有轮询应答、相互认证结束时,从摄影装置1的第2天线21分别接收存储在摄影装置1的第2存储器52中的服务器URL生成信息80、摄影图像状况信息55及图像显示方法指示信息77。
解密部5504是将由接收部5503接收到的服务器URL生成信息80、摄影图像状况信息55及图像显示方法指示信息77解密的部分。解密是在由可通信装置检索部(轮询部)5502相互认证后,使用在摄影装置1和TV45中共通的加密密钥将加密的服务器URL生成信息80、摄影图像状况信息55及图像显示方法指示信息77解密。
URL生成部5505根据服务器URL生成信息80,生成用于对服务器42访问的URL(Uniform Resource Locator:统一资源定位符),向通信部发送。在本URL中,除了服务器特定信息以外,还包括用于登陆到服务器中的登陆ID83、口令85。
通信部5506是通过通信接口5508经由通用的网络与服务器42进行通信的部分。
发送部5507经由通信接口5508将由URL生成部5505生成的URL发送,与服务器42连接。
通信接口5508是经由通用的网络与服务器42连接的通信接口,由有线/无线LAN(Local Area Network)接口等构成。
接收部5509是从由通信接口5508连接的服务器42接收并下载图像信息及图像显示模式表单(CSS)的部分。
数据处理部5510是进行由接收部5509下载的图像信息的数据处理的部分,在下载的图像被压缩的情况下进行其解压缩,在被加密的情况下进行其解密,以基于图像显示模式表单的图像显示模式将下载的图像信息排列。此外,本数据处理部5510通过解密部根据需要解密而得到的摄影图像状况信息55,在保存于摄影装置1中的摄影图像信息和上载到服务器42中的图像信息中不能确认同步的情况下,在显示部5512上显示表示没有取得同步的注意信息,进行防止用户的无用的混乱的处理。此外,本数据处理部5510按照来自解密部5504的图像显示方法指示信息77,设定将下载的图像信息显示的方式。例如,当图像显示方法指示信息77的一览显示(标志)78是ON时,生成下载的图像的一览显示,向存储器部5511输出。此外,当图像显示方法指示信息77的幻灯放映标志79是ON时,生成下载的图像的幻灯放映,向存储器部5511输出。
存储器部5511由将由数据处理部5510数据处理后的图像信息暂时存储的存储器构成。
显示部5512是将储存在存储器部5511中的、从服务器42下载并由数据处理部5510进行数据处理后的图像数据显示的部分。
如以上这样,有关本发明的TV45能够基于从摄影装置1的RF-ID47接收的服务器URL生成信息80、摄影图像状况信息55及图像显示方法指示信息77,进行与服务器42连接、将上载到服务器42中的图像信息下载并显示到显示部5512上的处理。由此,能够不进行将摄影装置1的由SD卡或闪存存储器构成的第3存储器33取出、安装到TV45的卡读取器中而进行已摄影图像的阅览这样的麻烦的用户处理,而通过将摄影装置1的RF-ID47靠近(刷)TV45的RF-ID读写器46上进行近距离通信的简单的用户操作,就能够显示并阅览已摄影的图像信息,能够实现即使是不熟悉数字设备的操作的用户也能够简单地阅览图像信息的摄影图像阅览系统。
图45是表示摄影装置1与TV45的RF-ID无线近距离通信动作的流程图。
首先,通过TV45的RF-ID读写器46的可通信装置检索部5502,发送用于检索可通信的摄影装置1的RF-ID47的呼叫信号(步骤S5601)。
摄影装置1的RF-ID47如果接收到TV45的RF-ID读写器46的可通信装置检索部5502的轮询信号,则启动第2电源部91,启动RF-ID读写器46(步骤S5602)。此时,只要至少仅启动在第2电源部91下能够动作的RF-ID47就可以,不需要将摄影装置1的功能全部启动。
在步骤S5602中,如果摄影装置1的RF-ID47的启动完成,则从第2天线21发送对于TV45的RF-ID读写器46的轮询的轮询应答(步骤S5603)。
在步骤S5603中,在从摄影装置1进行轮询应答后,由TV45的RF-ID读写器46的无线天线5501接收轮询应答(步骤S5604)。
在步骤S5604中接收到轮询应答后,进行发送了轮询应答的摄影装置1是否是能够相互通信的设备的判断(步骤S5605)。在判断的结果是判断为不是能够相互通信的设备的情况下,结束处理。另一方面,在判断为是能够通过相互的设备进行通信的设备的情况下,向下个处理前进。
在通过步骤S5605判断为是能够相互通信的设备的情况下,进行用于进行相互的设备是否是正规的设备的判断的相互认证处理(步骤S5606)。该相互认证处理与在HDMI或IEEE1394中进行的一般的相互认证处理是同样的,是由TV45和摄影装置1多次进行挑战数据的发出、应答数据的确认,最终在两者中生成相同的加密密钥的处理,如果某一方是非法的设备,则不生成共通的加密密钥,以后的相互的通信为无效。
另一方面,在摄影装置1的RF-ID47中也与TV45同样进行相互认证处理。进行相互的多次的挑战数据的生成及发送、应答数据的接收及确认,生成与TV45相同的加密密钥数据(步骤S5607)。
如果在步骤S5607中相互认证处理完成,则从摄影装置1的第2存储器52读出作为服务器特定信息58的服务器URL生成信息80,用对TV45的RF-ID读写器46通过综合认证而共通化的加密密钥加密并发送(步骤S5608)。
在步骤S5608中,发送的服务器URL生成信息80被TV45的RF-ID读写器46的接收部5503接收,在解密部5504中用共通化的加密密钥解密,由URL生成部5505生成用于对服务器42访问的URL,将接收完成向摄影装置1发送(步骤S5609)。
在步骤S5609中发送接收完成后,用摄影装置1的第2天线21接收接收完成,从第2存储器52读出摄影图像状况信息55,向TV45发送(步骤S5610)。作为摄影图像状况信息55而发送最终摄影时间68(Case1),作为未上载图像数据的存在识别信息而发送按照摄影图像赋予的能够进行是否是未上载数据的判别的存在识别符64(Case2)、将未上载图像信息散列而得到的信息67(Case3)、或者对摄影图像以时间序列赋予的图像号码的图像的最终号码69(Case4)。它是为了确认摄影装置1与服务器42的摄影图像的同步而需要的信息。
在步骤S5610中从摄影装置1发送摄影图像状况信息55后,由TV45的RF-ID读写器46接收摄影图像状况信息55,将接收完成向摄影装置1发送(步骤S5611)。此外,在TV45的CPU5513中,根据接收的摄影图像状况信息55进行以下的处理。
在Case1中,作为摄影图像状况信息55而采用最终摄影时间68。由此,在TV45中,将向服务器42的最终上载时间与最终摄影时间68比较,如果最终摄影时间68比向服务器42的最终上载时间在时间序列上晚,则认为没有取得保持在摄影装置1和服务器42中的图像信息的同步,在TV45的显示部上显示表示没有取得同步的注意信息。
在Case2中,作为摄影图像状况信息55而采用按照摄影图像赋予的能够进行是否是未上载数据的判别的存在识别符64。由此,在TV45中,通过确认按照摄影图像赋予的能够进行是否是未上载数据的判别的存在识别符64,能够判别存在未上载图像,认为没有取得保持在摄影装置1和服务器42中的图像信息的同步,在TV45的显示部上显示表示没有取得同步的注意信息。
在Case3中,作为摄影图像状况信息55而采用将未上载图像信息散列而得到的信息67。由此,在TV45中,通过确认将未上载图像信息散列而得到的信息67,能够判别存在未上载图像,认为没有取得保持在摄影装置1和服务器42中的图像信息的同步,在TV45的显示部上显示表示没有取得同步的注意信息。
在Case4中,作为摄影图像状况信息55而采用对摄影图像以时间序列赋予的图像号码的图像的最终号码69。由此,在TV45中,通过确认从服务器42接收的已向服务器42上载的最终图像号码、以及从摄影装置1发送的对摄影图像以时间序列赋予的图像号码的图像的最终号码69,能够判别存在未上载图像,认为没有取得保持在摄影装置1和服务器42中的图像信息的同步,在TV45的显示部上显示表示没有取得同步的注意信息。
在S5611中,在完成摄影图像状况信息55的接收、将接收完成向摄影装置1发送后,从摄影装置1的第2存储器52读出图像显示方法指示信息77而向TV45发送(步骤S5612)。在图像显示方法指示信息77中,包括一览显示(标志)78及幻灯放映(标志)79。
在步骤S5612中,在将图像显示方法指示信息77发送后,通过TV45的RF-ID读写器46接收图像显示方法指示信息77,将接收完成向摄影装置1发送(步骤S5613)。TV45的数据处理部5510基于接收到的图像显示方法指示信息77,制作从服务器42下载的图像的显示方式。例如,当图像显示方法指示信息77的一览显示标志是ON时,制作下载的图像的一览显示而存储到存储器部5511中,在显示部5512上显示一览。另一方面,当图像显示方法指示信息77的幻灯放映标志是ON时,制作下载的图像的幻灯放映显示而存储到存储器部5511中,在显示部5512上显示幻灯放映。
在步骤S5613中接收到图像显示方法指示信息77后,将与摄影装置1的RF-ID读写器46的通信切断(步骤S5614)。
接着,启动TV系统(步骤S5615)。所谓TV系统的启动,为了在显示部5512上显示下载的图像数据而使主电源为ON。在步骤S5615中启动TV系统以前,至少TV45的RF-ID读写器46是启动的状态,显示部5512的电源也可以是OFF。
接着,启动通信部5506,基于由URL生成部5505生成的URL向服务器42进行连接(步骤S5616)。
在步骤S5616中,在连接到服务器42上之后,将已上载的图像数据下载到TV45中(步骤S5617)。
在步骤S5617中,将下载的图像由数据处理部5510按照来自照相机的图像显示方法指示信息77生成显示用的图像数据,储存到存储器部5511中,显示在显示部5512上(步骤S5618)。TV45的数据处理部5510基于接收到的图像显示方法指示信息77,制作从服务器42下载的图像的显示方式。例如,当图像显示方法指示信息77的一览显示标志78是ON时,制作下载的图像的一览显示而存储到存储器部5511中,在显示部5512上显示一览。另一方面,当图像显示方法指示信息77的幻灯放映标志79是ON时,制作下载的图像的幻灯放映显示而存储到存储器部5511中,在显示部5512上显示幻灯放映。
在步骤S5617中,如果从服务器42下载的图像的显示处理完成,则进行记录在摄影装置1的第3存储器33中的摄影图像与从服务器42下载的图像数据之间同步是否成立的同步确认处理(步骤S5619)。本处理基于从摄影装置1在步骤S5611中接收到的摄影图像状况信息55进行。作为摄影图像状况信息55而发送最终摄影时间68(Case1),作为未上载图像数据的存在识别信息而发送按照摄影图像赋予的能够进行是否是未上载数据的判别的存在识别符64(Case2)、将未上载图像信息散列而得到的信息67(Case3)、或者对摄影图像以时间序列赋予的图像号码的图像的最终号码69(Case4)。它是为了确认摄影装置1与服务器42的摄影图像的同步而需要的信息。
图46是表示图45的服务器同步确认处理(步骤S5619)的摄影图像状况信息55分别为Case1~Case4时的详细的处理的流程的流程图。
Case1是摄影图像状况信息55为最终摄影时间68时的流程图。
首先,通过TV45的通信部5506从服务器42取得最终的更新日期时间(即使是更新的图像的最终摄影日期时间也有同样的效果)(步骤S5701)。
接着,将从服务器42取得的最终的更新日期时间、与由来自摄影装置1的RF-ID读写器46的摄影图像状况信息55表示的最后摄影的日期时间68比较(步骤S5702)。在最终上载日期时间比最后摄影日期时间68靠前的情况下,判断为在最终上载的时刻的以后摄影了图像、且还没有将摄影的图像上载,所以判断为没有取得摄影装置1与服务器42的图像的同步,转移到步骤S5703的错误显示处理。另一方面,在最终上载日期时间与最后摄影的日期时间68等同的情况下,由于进行了摄影装置1与服务器42的图像的同步,所以不输出错误而结束处理。
在步骤S5702中,在判断为没有取得摄影装置1与服务器42的同步的情况下,对显示部5512输出表示没有取得同步的注意消息。在此情况下,如果通过最终上载日期时间与最后摄影的日期时间68的比较、将表示从哪个时刻起的摄影图像没有被上载的时间信息同时作为消息输出,则成为对于用户而言容易理解的消息。
Case2是摄影图像状况信息55为按每个图像摄影图像赋予的能够进行是否是未上载数据的存在识别符64时的流程图。
首先,根据由来自摄影装置1的RF-ID读写器46的摄影图像状况信息55表示的未上载图像的存在识别信息的存在识别符,判断在记录在摄影装置1的第3存储器33中的摄影图像中是否有还没有上载到服务器42中的图像(步骤S5711)。在步骤S5711中判断为存在没有上载的图像的情况下,转移到步骤S5712的错误显示处理。另一方面,在判断为不存在没有上载的图像的情况下,由于进行了摄影装置1与服务器42的图像的同步,所以不输出错误而结束处理。
在步骤S5712中,在判断为没有取得摄影装置1与服务器42的同步的情况下,对显示部5512输出表示没有取得同步的注意消息。
Case3是摄影图像状况信息55为将未上载图像信息散列而得到的信息67时的流程图。
首先,根据由来自摄影装置1的RF-ID读写器46的摄影图像状况信息55表示的将未上载图像信息散列而得到的信息67,判断在记录在摄影装置1的第3存储器33中的摄影图像中是否有还没有上载到服务器42中的图像(步骤S5721)。步骤S5721中,在TV45中生成NULL的散列值,通过其比较判断是否有未上载图像。在步骤S5721中判断为存在没有上载的图像的情况下,转移到步骤S5722的错误显示处理。另一方面,判断为不存在没有上载的图像的情况下,由于进行了摄影装置1与服务器42的图像的同步,所以不输出错误而结束处理。
在步骤S5722中,在判断为没有取得摄影装置1与服务器42的同步的情况下,对显示部5512输出表示没有取得同步的注意消息。
Case4是摄影图像状况信息55为对摄影的图像赋予的号码中的最终的摄影图像的号码时的流程图。
首先,通过TV45的通信部5506,从服务器42取得最终的更新图像的图像号码(步骤S5731)。
接着,将从服务器42取得的最终上载图像的号码69、与由来自摄影装置1的RF-ID读写器46的摄影图像状况信息55表示的图像的最终号码69(步骤S5732)比较。在最终上载图像的号码比最后摄影的图像的号码69小的情况下,判断为在最终上载的时刻的以后摄影了图像、且摄影的图像没有被上载,所以判断为没有取得摄影装置1与服务器42的图像的同步,转移到步骤S5733的错误显示处理。另一方面,在最终上载图像的号码与最后摄影的图像的号码69等同的情况下,由于进行了摄影装置1与服务器42的图像的同步,所以不输出错误而结束处理。
在步骤S5732中,在判断为没有取得摄影装置1与服务器42的同步的情况下,对显示部5512输出表示没有取得同步的注意消息。
在以上的Case1~Case4的哪种方法中,都在没有将由摄影装置1摄影的全部图像上载到服务器42中、即没有同步的情况下,虽然不能在显示部5512上显示摄影的全部图像,但能够判断为没有取得同步,所以能够显示使用户容易理解的消息,能够避免用户的无用的混乱。
图47是(1)从摄影装置1向服务器42上载摄影图像的情况、(2)摄影装置1与TV45的RF-ID通信的情况的各自的数据格式。
首先,说明(1)从摄影装置1向服务器42上载摄影图像的情况下的数据格式5940。在本格式中,包括照相机ID5901、服务器地址5902、服务器登陆ID5903、服务器登陆口令5904、图像目录5905及上载图像数5906。
照相机ID5901是对每个照相机固有地赋予的照相机固有ID,是记录在摄影装置1的第2存储器52的照相机ID部76中的ID信息。本ID信息通过作为向服务器42的登陆ID使用,能够不由用户进行登陆ID的输入、而对每个摄影装置1赋予唯一的服务器地址。此外,在服务器42中,还能够按照摄影的照相机管理摄影图像。
服务器地址5902是摄影装置1的第2存储器52的服务器特定信息58的服务器地址信息81的内容。由此,能够在TV45侧确定进行了上载的服务器。
服务器登陆ID5903是作为摄影装置1的第2存储器52的服务器特定信息58的用户识别信息82的登陆ID83的内容。由此,在TV45中也能够进行针对从摄影装置1上载的服务器的以相同的账户的登陆。
服务器登陆口令5904是摄影装置1的第2存储器52的服务器特定信息58的口令84的内容。由此,在TV45中也能够针对从摄影装置1上载的服务器的以相同的账户的登陆。
上载图像数5906是向服务器上载的图像数。其中,记载有与存储在摄影装置1的第2存储器52的未上载图像的张数65中的图像数等同的张数、即在摄影后没有上载到服务器中的图像数。
在本格式的发送以后,将记录在摄影装置1的第3存储器33中、并且没有上载到服务器中的图像上载。
接着,对(2)摄影装置1与TV45的RF-ID通信的情况下的各个数据格式5950进行说明。本格式由照相机ID5911、服务器地址5902、服务器登陆ID5913、服务器登陆口令5914、最终摄影日期时间5915、能够判断是未上载的识别信息5916、将未上载图像信息散列而得到的信息5917、最终摄影图像的图像号码5918及图像显示方法指示信息5919构成。
照相机ID5911是对每个照相机固有地赋予的照相机固有ID,是记录在摄影装置1的第2存储器52的照相机ID部76中的ID信息。本ID信息通过作为从TV45向服务器42的登陆ID使用,能够不由用户进行登陆ID的输入、而对每个摄影装置1赋予唯一的服务器地址。此外,也有在摄影装置1的RF-ID47与TV45的RF-ID读写器46的相互认证时使用的情况。
服务器地址5912是摄影装置1的第2存储器52的服务器特定信息58的服务器地址信息81的内容。由此,能够在TV45侧确定上载的服务器。
服务器登陆ID5913是作为摄影装置1的第2存储器52的服务器特定信息58的用户识别信息82的登陆ID83的内容。由此,在TV45中也能够针对从摄影装置1上载的服务器的以相同的账户的登陆。
服务器登陆口令5914是摄影装置1的第2存储器52的服务器特定信息58的口令84的内容。由此,在TV45中也能够针对从摄影装置1上载的服务器的以相同的账户的登陆。
最终摄影日期时间5915是与在摄影装置1的第2存储器52的摄影图像状况信息55的最后摄影的时间68对应的信息,在TV45侧用于服务器42与摄影装置1的摄影图像的同步确认。
能够判断是未上载的识别信息5916是与摄影装置1的第2存储器52的摄影图像状况信息55的未上载图像数据存在识别信息对应的信息,在TV45侧用于服务器42与摄影装置1的摄影图像的同步确认。此外,该能够判断是未上载的识别信息5916是对于能够识别各摄影图像的图像ID5928赋予表示向服务器的上载是否完成的上载标志5926的方式。由此,能够按照1张张摄影图像进行是否上载到服务器中的的判断。
将未上载图像信息散列而得到的信息5917是与将摄影装置1的第2存储器52的摄影图像状况信息55的未上载图像信息散列而得到的信息67对应的信息,在TV45侧用于服务器42与摄影装置1的摄影图像的同步确认。
最终摄影图像的图像号码5918是与摄影装置1的第2存储器52的摄影图像状况信息55的摄影图像的最终号码69对应的信息,在TV45侧用于服务器42与摄影装置1的摄影图像的同步确认。
图像显示方法指示信息5919是与摄影装置1的第2存储器52的摄影图像状况信息55的图像显示方法指示信息77对应的信息,由在TV45侧指定从服务器42下载的图像的阅览方法的识别信息构成。
图像显示方法指示信息5919按每个图像ID5927,由一览显示标志5920、幻灯放映标志5921、印刷标志5922、运动图像再现标志5923、下载标志5924及安全口令5925构成。
图像ID5927是对摄影图像唯一的信息,由摄影装置1在摄影时以时间序列赋予。
一览显示标志5920是对应于摄影装置1的第2存储器52的一览显示(标志)78,表示在TV45中是否将从服务器42下载的图像信息的阅览设为一览形式的标志。TV45的数据处理部5510在该标志是““是”(是)”的情况下,制作下载的图像的一览显示并存储到存储器部5511中,在显示部5512上以一览形式显示。
幻灯放映标志对应于摄影装置1的第2存储器52的幻灯放映(标志)79,表示在TV45中是否将从服务器42下载的图像信息的阅览设为幻灯放映的标志。TV45的数据处理部5510在该标志是“automatic(自动)”的情况下,制作下载的图像的幻灯放映并存储到存储器部5511中,在显示部5512以幻灯放映显示。另一方面,在本幻灯放映标志是“manual(手动)”的情况下,许可通过用户指示实施幻灯放映。此外,在“disable(禁用)”的情况下,不许可幻灯放映显示。
印刷标志5922是表示下载到TV45中并由显示部5512显示的图像是否能够由连接在TV45上的未图示的打印机印刷的标志。它在摄影装置1的第2存储器52的图像显示方法指示信息77内没有图示,但通过设置印刷标志,能够进行是否能够印刷的设定,能够提高用户的关于图像使用的方便性。
运动图像再现标志5923是在由摄影装置1摄影运动图像信息、上载到服务器42中的情况下表示是否许可由TV45将运动图像下载、阅览的标志。在摄影装置1中存在运动图像摄影功能的情况下,通过对第2存储器52的图像显示方法指示信息77赋予本运动图像再现标志5923,能够追加是否许可运动图像的再现的设定,能够不进行用户的复杂的操作而进行运动图像的再现管理。
下载标志5924是表示是否能够将上载到服务器42中的图像或运动图像下载(复制)到TV45的存储器中的识别符。如果使用该标志,则不会由没有被许可摄影图像的第3者复制,所以也能够有利于著作权的保护。
安全口令5925是用于使得仅许可的用户能够进行上述图像的阅览、印刷及下载的口令信息。在本实施方式中,以进行相同的口令设定的方式说明了上述图像的阅览、印刷及下载,但能够分别设定不同的口令能够实施各水平下的安全对策,所以更优选。
如以上这样,如果使用本发明的系统,则摄影装置1将摄影图像上载到通过第1天线连接的服务器中。此外,如果将摄影装置1靠近TV45的RF-ID读写器46上,则从摄影装置1的RF-ID47将服务器URL生成信息80、摄影图像状况信息55及图像显示方法指示信息77通过RF-ID通信向TV45发送,TV45连接到由摄影装置1上载了摄影图像的服务器上,将由摄影装置1摄影的图像下载到TV45中而显示。此外,通过摄影图像状况信息55确认服务器42与摄影装置1的摄影图像信息的同步,在没有取得同步的情况下,将该消息显示在TV45的显示部5512上。由此,用户仅通过将摄影装置1靠近TV45上,就能够对应以往需要将记录存储器从照相机拔出并设置到TV45中而阅览的摄影图像的显示。由此,即使是不熟悉数字设备的操作的用户,也能够简单地将摄影图像显示在TV45上。
(实施方式3)
对本发明的实施方式3进行说明。
首先,说明实施方式3的概况。图48是实施方式3的电子目录显示系统的概略结构图。实施方式3的电子目录显示系统具有具备RF-ID写入部501的电子目录服务器信息输入机500、具备RF-ID47的电子目录通知卡502、具备RF-ID读取部504和网络通信部509x的TV45、以及具备电子目录数据数据库507和顾客属性数据库508的电子目录服务器506。
电子目录服务器信息输入机500将从用户(电子目录的服务提供者)输入的电子目录服务器信息从RF-ID写入部501写入到粘贴在电子目录通知卡502上的RF-ID47中。通过用户(电子目录的服务使用者)使写入了该电子目录服务器信息的电子目录通知卡502向TV45靠近,TV45具备的RF-ID读取部504将写入在RF-ID47中的电子目录服务器信息读取。进而,TV45基于读取的电子目录服务器信息,经由网络通信部509x对设置在网络上的电子目录服务器505发送电子目录的取得请求。此外,TV45在将电子目录取得请求向电子目录服务器发送时,将预先输入到TV45中的用户信息也同时向电子目录服务器505发送。电子目录服务器505接收来自TV45的电子目录发送请求及用户信息,首先基于用户信息从顾客属性数据库508取得顾客属性数据。接着,基于顾客属性数据,从电子目录数据数据库507取得对应的电子目录数据。并且,将所取得的电子目录数据对发出了电子目录请求的TV45发送。TV45将从电子目录服务器505接收到的电子目录数据显示在画面上,受理来自用户(电子目录的服务使用者)的电子目录数据内的商品的购买操作。
以下,说明实施方式3的电子目录显示系统的详细情况。
图49是表示实施方式3的电子目录服务器信息输入机的结构的功能块图。首先,按键输入受理部520接受来自用户(电子目录的服务提供者)操作的输入按键的输入,取得电子目录服务器信息。按键输入受理部520取得的电子目录服务器信息是URL等的服务器地址、服务器登陆ID、服务器登陆口令、电子目录显示用口令、表示将包含在电子目录中的商品的图像进行一览(缩略图)显示还是依次(幻灯)显示的电子目录显示信息、以及表示作为RF-ID的粘贴目标的卡或明信片等的媒体的介质识别信息。将按键输入受理部520取得的电子目录服务器信息保存到存储部522中。接着,在被输入电子目录服务器信息后,如果被输入RF-ID发送按键等,则RF-ID发送输入受理部521对发送部523通知发送请求,发送部523从存储部522读出电子目录服务器信息,从天线部524发送电子目录服务器信息。将电子目录服务器信息输入机的处理的详细情况用图50的流程图表示。
图51是表示电子目录通知卡502具备的RF-ID47的结构的块图。RF-ID47的结构及处理与在实施方式1及2中说明的是同样的。第2电源部91从由第2天线21接收到的信号取出电流,向各部进行电源供给,数据接收部105、第2处理部95和记录部106将接收到的数据向第2存储器52记录。
图52是表示TV45的结构的功能块图。实施方式3中的TV45的结构是对实施方式2中的结构追加了用户信息输入部588的结构。用户信息输入部588受理预先由用户(电子目录的服务使用者)输入的、关于用户自身的属性的用户信息,暂时保存到存储器部583中。作为用户信息,优选的是例如用户的性别信息及年龄信息,但除了这些以外,也可以是如居住地或家庭成员结构等那样能够用于从电子目录提供的商品数据的甄别的个人信息。将该用户信息与URL生成部生成的电子目录服务器的URL一起经由通信部509向电子目录服务器发送。与实施方式1同样,在本实施方式中,电子目录服务使用者也通过将电子目录通知卡502向TV45的RF-ID读取部504靠近,TV45接收电子目录服务器信息,使用它生成服务器的URL,连接到服务器。该处理的详细情况与第1实施方式的在图7~图20中表示的处理是同样的。
图53是表示电子目录服务器506的结构的功能块图。电子目录服务器506经由通信部600接收从TV45发送的电子目录发送目标地址(TV45和电子目录服务器506属于的网络上的TV45的网络地址)和用户信息。接着,基于顾客属性数据取得部接收到的用户信息,从顾客属性数据库508取得顾客属性数据。例如,在用户信息之中包含有使用TV45的用户的性别和年龄的情况下,从具有图57所示的数据构造的顾客属性数据库508取得对应于年龄和性别的商品类别及商品价格带的信息作为顾客属性数据。并且,电子目录数据取得部602基于顾客属性数据从电子目录数据库507取得电子目录数据。例如,在顾客属性数据中包含有商品类别和商品价格带的情况下,从具有图58所示的数据构造的电子目录数据库507将对应于商品类别和商品价格带的商品数据汇总作为电子目录数据取得。将由电子目录数据取得部602取得的电子目录数据经由通信部600发送给电子目录发送目标地址表示的TV45。用图54的流程图表示电子目录服务器506的处理的详细情况。
接着,使用图55所示的流程图,说明将电子目录数据下载后的TV45的处理。S630~S632中的从RF-ID取得电子目录服务器信息的处理在没有下载电子目录数据的情况以及下载完成后都是共通的。在S633中,判断与从RF-ID接收到的电子目录服务器信息对应的电子目录数据的下载及显示是否完成,在下载没有完成的情况下,在S634及S635中从服务器下载电子目录数据。该数据的下载处理与实施方式1的数据的下载处理是同样的。
在S633中电子目录数据是已下载的情况下,使预先设定的规定的按键、例如确定按键的按键信号生效,执行对显示的电子目录数据的操作。例如,如图56所示的电子目录数据的画面显示例那样,设为对显示中的电子目录数据以两三个较少的选择分支提示用户接着应进行的操作的画面结构,进而,如图56中的选择分支652和653所示,为每当经过一定时间则在选择分支间移动表示选择候选的焦点那样的画面结构。如果这样,则用户在自身希望的选择分支处有焦点时,通过将具备RF-ID47的电子目录通知卡502靠近TV45上,能够执行电子目录数据的选择、以及各数据的购买等的操作。
另外,本实施方式的电子目录通知卡502上的RF-ID47内置的第2存储器52也可以是ROM(Read Only Memory)。在此情况下,电子目录服务器信息输入机500为RF-ID制造工序中的RF-ID存储器数据输入机、或RF-ID制造系统中的RF-ID存储器数据输入机构。一般而言,与具有可改写存储器的RF-ID相比,具有ROM的RF-ID能够更便宜地构成,所以对于大量送出电子目录通知卡的电子目录服务提供者而言,通过使用ROM型RF-ID,能够抑制成本。
另外,在本实施方式中,作为TV45的画面结构,如图56中的选择分支652和653所示,每经过一定时间,表示选择候选的焦点在选择分支间移动,但使用具备RF-ID47的电子目录通知卡502操作画面显示的电子目录数据的方法并不限定于此。例如,也可以是,TV45的接收部571连续接收从RF-ID发送的信息,通过计测该连续的接收数而取得将RF-ID向TV45靠近的时间,基于该RF-ID接近时间使画面显示的表示选择候选的焦点移动。通过做成这样的结构,仅在将RF-ID向TV靠近的期间中、显示在画面上的焦点移动而变更选择候选,在将RF-ID从TV离开的地方,焦点的移动也停止,进而,可以是如果在焦点的移动停止后经过一定时间则确定焦点停止的选择候选的选择的电子目录的操作。在该电子目录操作方法中,不用等待每一定时间自动地在选择候选间循环的焦点转到用户希望的选择分支,能够得到用户能够使用RF-ID主动操作电子目录的效果。
另外,在本实施方式中,电子目录服务器信息输入机500为按键输入受理部520接受来自用户(电子目录的服务提供者)操作的输入按键的输入、取得电子目录服务器信息的结构,但也可以为电子目录服务器信息输入机具备与图像服务器的通信接口、图像服务器保持对电子目录服务器信息输入机发送的服务器信息、电子目录服务器信息输入机从图像服务器接收而取得服务器信息的结构。通过做成这样的结构,如果对图像服务器输入服务器信息,则在电子目录服务器信息输入机侧不需要输入图像服务器,特别在对1个图像服务器使用多个电子目录服务器信息输入机的情况下方便性较高。
以往,有不精通个人计算机等的电子设备操作的用户为了利用网络购物而必须学习设备的操作的问题,但如果使用如以上那样在实施方式3中叙述的系统,则利用电子目录的用户仅通过将接受到的卡或明信片向TV靠近,就能够利用网络购物等,即使是对个人计算机或便携电话等的因特网终端不熟悉的用户,也能够容易地在TV画面上享受购物。
(实施方式4)
对本发明的实施方式4进行说明。
图59是实施方式4的概略结构图。在本实施方式中,对将粘贴有用于向图像服务器访问的RF-ID的明信片向远处递送的方法进行说明。首先,作为明信片的递送源的第1用户如果将具备RF-ID47的摄影装置1向TV45的RF-ID读写器46靠近,则TV45生成用于连接到图像服务器42的服务器URL,从图像服务器42取得图像数据,显示在画面上。该处理与实施方式1是同样的。接着,第1用户从显示在TV45上的图像之中,使用对应于TV45的遥控器等的输入机构选择想要向明信片印刷的图像、以及想要与明信片建立关联而登录(日文是“登録”,本说明书中译作“登录”、或“登记”)的(想要使处于远处的第2用户看到的)图像。进而,第1用户还使用遥控器等输入明信片的递送目的地住址等的递送目的地信息。TV45将第1用户选择的对明信片印刷的图像的ID、登录到明信片上的图像的ID、以及明信片递送目的地信息向图像服务器42发送。图像服务器42取得与接收到的印刷图像ID对应的图像数据,将图像数据和明信片递送目的地信息向打印机800发送。打印机800将图像数据和明信片递送目的地住址印刷到明信片上。此外,图像服务器42对图像服务器信息输入机500发送从Tv45接收到的登录图像ID,同时将包括URL等的服务器地址、服务器登陆ID、服务器登陆口令、图像显示用口令、表示是将图像一览(缩略图)显示还是依次(幻灯)显示的图像显示信息、以及表示作为RF-ID的粘贴目标的卡或明信片等的媒体的介质识别信息的图像服务器信息发送。图像服务器信息输入机500将图像服务器信息和登录图像ID写入到由打印机印刷了图像和递送目的地信息的明信片的RF-ID47中。被进行了印刷和向RF-ID的写入的明信片801被邮寄到印刷的递送目的地,被第1用户指定为递送目的地的第2用户取得该明信片801。第2用户如果将邮寄来的明信片向第2用户的TV45的RF-ID读写器46靠近,则TV45取得RF-ID47保存的图像服务器信息和登录图像ID,将与登录图像ID对应的图像数据从服务器下载及显示。
本实施方式的摄影装置1的结构及处理与实施方式1是同样的。
图60是表示本实施方式的TV45的结构的块图。接收部811经由无线天线570从摄影装置1或明信片801的RF-ID47接收图像服务器信息,但在明信片801的RF-ID47具有登录图像ID的情况下,也接收登录图像ID。此外,图像选择部584经由按键部585及红外线受光部586受理用户的图像选择操作,取得第1用户为了印刷到明信片上而选择的图像的ID(印刷图像ID)、以及为了登录到明信片上而选择的图像的ID(登录图像ID),将它们向通信部509传送。在图61中表示在该图像选择操作时显示在TV45上的画面显示例。图61中的821是选择印刷到明信片上的图像的画面显示,图61中的820是选择登录到明信片上的图像的画面显示。此外,明信片递送目的地信息输入部810经由按键部585及红外线受光部586受理用户的字符输入操作,取得作为明信片的递送目的地的包括住址及收件人名的明信片递送目的地信息,向通信部509发送。将输入明信片递送目的地信息时的画面显示例在图61中的823中表示。通信部509经由发送部575及通信接口576将明信片递送目的地信息、印刷图像ID和登录图像ID向图像服务器发送。
图62是表示图像服务器42、打印机800、以及图像服务器信息输入机500进行准备以便能够递送明信片801的处理的流程图。将进行了印刷和向RF-ID的写入的明信片801邮寄到印刷的递送目的地,被第1用户指定为递送目的地的第2用户取得该明信片801。如果第2用户将接受到的明信片801靠近TV45上,则接收部811经由无线天线570接收RF-ID47发送的图像服务器信息及登录图像ID。将在图像服务器信息及登录图像ID之中加密的信息用解密部572解密。接着,URL生成部573生成从保存在图像服务器42中的图像数据之中仅将对应于登录图像ID的图像数据下载到TV45中的URL。具体而言,可以采用在生成的URL之中指定服务器的内部目录、或作为URL选项而将登录图像ID植入在URL中的方法。TV45使用由URL生成部573生成的指定服务器的URL对图像服务器访问而取得图像数据的处理的详细情况与在实施方式1中说明的处理是同样的。
另外,在本实施方式中,做成了用户对TV45输入递送目的地信息的结构,但也可以不仅输入住址及收件人名等的递送目的地信息、还输入在明信片上与图像一起印刷的消息。将TV45受理的输入消息与递送目的地信息同样,从TV45传送给图像服务器42,再由打印机800印刷到明信片上。将TV45中的印刷用的消息的输入画面例表示在图61的822中。通过这样不仅能够选择印刷到明信片上的明信片,而且能够输入对图像添加的消息,制作带有RF-ID的明信片的自由度提高。
另外,在本实施方式的TV45中,与在实施方式3中使用RF-ID操作画面显示的电子目录的处理同样,也可以做成能够使用带有RF-ID的明信片操作显示在TV45上的图像的结构。
如以上这样,如果使用在实施方式4中叙述的系统,则能够不在手边准备粘贴有RF-ID的明信片而对处于远处的对方邮寄带有RF-ID的明信片,并且,在想要将保存在图像服务器中的图像印刷到明信片上而递送的情况下,也能够通过TV画面上的操作选择想要印刷的图像,所以能够得到较高的方便性。
以往,为了使处于远处的对方用电视机等的大画面显示设备观看图像,需要远处侧的用户学习设备操作、或操作掌握者前往远处而操作设备、或将处于远处的显示设备远程操作,但在本系统中,远处的用户能够通过将带有RF-ID的明信片等物理的媒介物向显示设备靠近的简单的操作而容易地阅览图像。
(实施方式5)
在本发明的实施方式5中,对在明信片等的邮寄物上写入固定的信息、将在摄影装置中写入的固定信息与保存在服务器中的图像或图像组(图像信息)建立联系、在再现侧通过从明信片等附带的RF-ID读出固定信息、能够进行与固定信息建立了关联的图像的阅览的结构进行说明(图63)。在图63中,首先用摄影装置读取记录在邮寄物中的固定信息,进行图像与邮寄物固有ID的关联建立,登录到服务器中。接受到登录完成的邮寄物的用户通过将邮寄物向电视机的RF-ID读取器靠近而进行固定信息的读出,通过使用固有信息对服务器进行查询而进行与邮寄物建立了关联的图像的阅览。
本实施方式的关键点是邮寄物上附带的RF-ID的信息是不能改写的(ROM)或不能改写的环境这一点,是不进行邮寄物的固定信息的改写而进行服务器的图像信息与邮寄物的关联建立这一点。
<摄影装置中的图像的上载和与邮寄物的关联建立>
将由摄影装置摄影的图像通过在前面的实施方式中说明的方法上载到服务器中。此时,对上载的每个图像或图像组赋予识别符,能够通过该识别符识别服务器上的图像或图像组。
以下,对由摄影装置摄影并向服务器上载的图像或图像组与在邮寄物的RF-ID标签中记录的固定信息之间的关联建立方法进行说明。另外,记录在邮寄物的RF-ID中的固定信息如图64那样。
图64(a)是将邮寄物所固有的邮寄物固有ID和用于向图像服务器访问的地址等的信息记录的例子,图64(b)是将邮寄物固有ID和用于对中继服务器访问的地址等的信息记录的例子,图64(c)是仅记录邮寄物固有ID的例子。另外,也有除此以外还保存有用于对服务器访问的登陆ID及口令信息的情况,但在本实施方式中,假设为了对服务器访问而需要的信息包含在包括地址信息的URL中。
图65是摄影装置具有RF-ID读取器的功能的情况下的RF-ID与记录在服务器中的图像信息之间的关联建立的流程图。
在摄影装置中,首先,将保存在邮寄物的RF-ID中的信息使用RF-ID读取器读出(S2500)。具体而言,通过图3的第2天线21与邮寄物的RF-ID进行通信,由数据接收部105接收邮寄物的固定信息。然后,由第2处理部95进行处理,经由记录部106、第2存储器52、记录再现部51向第1处理部35转送读出的邮寄物的信息。在第1处理部中,通过用户的指示决定从邮寄物读出的邮寄物固有ID与图像或图像组的关联建立(S2501)。然后,经由第1天线20向服务器42访问(S2502),将邮寄物固有ID与保存在服务器中的图像信息之间的关联建立信息登录到服务器中(S2503)。
在保存于读出的邮寄物中的固定信息中记录有图像服务器的地址或包括地址的URL的情况下,以上处理结束。在保存于读出的邮寄物中的固定信息中没有记录有图像服务器的地址或包括地址的URL的情况下,进行向中继服务器的设定(图66)。
在向中继服务器的设定中,首先进行向中继服务器的访问(S2510)。另外,在中继服务器的地址或包括地址的URL处在从邮寄物读出的信息中的情况下,对包含在所读出的信息中的中继服务器访问,在没有的情况下,向在摄影装置侧预先设定的中继服务器访问。
在与中继服务器连接后,对中继服务器的数据库进行将邮寄物固有ID与重新寄送目标(转送目标)的服务器之间的关联建立设定(S2511)。由此,在中继服务器的数据库中登录邮寄物固有ID与转送目标的地址的对应。
在摄影装置不具有RF-ID读取器的功能的情况下、并且在邮寄物上印刷着记录有RF-ID读取器的信息的2维码等的情况下,使用摄影装置的摄像部进行摄影,通过将作为2维码记录的信息读出,将与记录在邮寄物的RF-ID中的固定信息相同的信息读出。作为2维码,有QR码、PDF417、VeriCode、MaxiCode等,即使是写在这里的码以外的码,只要能够通过由摄影装置摄影来进行信息的取入,则利用怎样的码都可以。此外,虽然印刷区域面积增加,但在仅使用1维方向的条码的情况下也能够期待与本实施方式同样的效果。
图67是安装有RF-ID部2520、印刷了记录有相同的信息的2维码2521的邮寄物的例子。使用图3的结构图说明将2维码通过摄影装置读入的情况下的数据的流动。将印刷在邮寄物上的2维码通过摄像部30摄影,由影像处理部31变换为图像后,经由记录再现部32向第一处理部35传送。在第1处理部35中,将摄影的2维码解析,将记录在2维码中的信息取出。记录在2维码中的信息与记录在RF-ID中的信息基本上相同,至少包括邮寄物固有ID。
以下,使用图68说明到从2维码读出信息而与服务器的图像或图像组进行关联建立为止的处理的流程。
首先,通过摄像部进行2维码的摄影(S2530)。进行接着摄影的图像是否是2维码的判断(S2531),在不是2维码的情况下,进行错误处理(S2532)。另外,在不是2维码的情况下,也可以进行通常的摄影处理。在是2维码的情况下,进行2维码的解析(S2533),从解析结果中读出邮寄物的信息(S2534)。在将邮寄物的固定信息读出后,决定邮寄物固有ID与服务器的图像信息的关联建立(S2535),向服务器访问(S2536),将关联建立信息设定到服务器中(S2537)。S2535~S2537的处理与图65的S2501~S2503的处理是相同的。另外,在读出的信息中没有记录有图像服务器的地址或包括地址的URL的情况下,进行向中继服务器的转送设定处理。向中继服务器的设定处理为前面说明的图66的处理。
根据以上,通过读取印刷在邮寄物上的2维码的信息,完成记录在RF-ID中的信息与服务器的图像信息之间的关联建立。
在摄影装置不具有RF-ID读取器功能、在邮寄物上没有印刷2维码等的码的情况下,也可以通过将印刷在邮寄物上的邮寄物固有ID及服务器地址等的URL直接手工输入到摄影装置中、将邮寄物的信息通过摄影装置读出信息。手工输入通过图2的7~15的按钮操作等进行。另外,URL及邮寄物的固有ID既可以直接以明文印刷,也可以编码为容易输入的代码。在编码的情况下,在输入完成后由摄影装置进行解码处理,将邮寄物的RF-ID所记录的信息取出。
根据以上,即使在不具有RF-ID读取器功能、并且没有印刷2维码等的情况下,也能够进行邮寄物与服务器的图像信息之间的关联建立。
<使用邮寄物的RF-ID的图像再现及阅览>
接着,对使用关联建立完成的邮寄物、通过电视机阅览记录在服务器中的图像的次序进行说明。
图69是表示到将邮寄物的RF-ID读入而对图像服务器访问为止的电视机的处理流程的图。
如果将邮寄物向电视机的RF-ID读取器靠近,则将邮寄物的RF-ID的信息读入到电视机中(S2540)。在读入的信息中存在服务器地址或包括服务器地址的URL的情况下(S2541),向指定的服务器访问(S2542),发送邮寄物固有ID(S2543)。另外,在对方是中继服务器的情况下(S2544),进行向由中继服务器指定的服务器的重新指向(2547),进行向图像服务器的图像或图像组的访问(S2548)。在S2544中,在对方是图像服务器的情况下,不进行重新指向,进行向图像服务器的访问(S2548)。此外,在记录在邮寄物中的信息中不存在服务器地址的情况下,进行向预先设定在电视机中的默认的服务器的访问(S2545),将邮寄物固有ID向默认的服务器发送(S2546)。然后,进行向指定的服务器的重新指向(S2547),进行向图像服务器的访问。
另外,在中继服务器或、默认的服务器的数据库中没有登录有邮寄物固有ID与中继的目标的服务器之间的对应关系的情况下,进行向错误页的重新指向。图70是表示接收到邮寄物固有ID后的中继服务器及默认的服务器的处理流程的图。如果接受到邮寄物固有ID(S2550),则检索与该固有ID关联的信息是否记录在数据库中(S2551)。在记录在数据库中的情况下(S2552),进行向与固有ID建立关联而记录在数据库中的服务器的重新指向(S2554)。假如在没有关联建立的情况下,进行向错误页的重新指向(S2553)。
如以上这样,进行预先固定了RF-ID的信息的邮寄物与图像服务器的图像信息之间的关联建立,通过将进行了关联建立的邮寄物靠近电视机上,能够不进行邮寄物的RF-ID的改写,而阅览记录在图像服务器中且与邮寄物固有ID建立了关联的图像或图像组。这即使在例如在外出地等不能进行邮寄物的RF-ID的改写的情况下或邮寄物的RF-ID为不能改写的情况下,也能够进行服务器的图像与邮寄物的关联建立,能够使接受到邮寄物的一侧阅览与邮寄物建立了关联的图像。
另外,在本实施方式中,在对服务器访问后发送邮寄物固有ID,但也可以根据记录在邮寄物中的邮寄物固有ID和服务器地址生成URL、使用它对服务器访问。在此情况下,能够同时进行向服务器的访问和邮寄物固有ID的发送。
根据本实施方式,即使是例如如观光地等那样不能进行RF-ID的改写的环境下,也能够将摄影的照片与明信片建立关联,通过将建立了关联的明信片向熟人发送,接受到明信片的熟人通过将明信片靠近电视机上而能够阅览观光地处的照片。这样,即使是不能进行RF-ID改写的环境,也能够制作与服务器的图像信息进行了关联建立的邮寄物,能够向想要使其阅览的对方发送。
另外,在摄影装置中具备用于改写邮寄物的RF-ID的RF-ID写入器功能的情况下,与接着说明的实施方式6的在电视机装置中将邮寄物与服务器的图像信息建立关联的流程处理是相同的,所以这里的说明省略。
(实施方式6)
在本发明的实施方式6中,对在由摄影装置摄影的图像被上载到图像服务器中之后、图像发送侧的使用者(以后记作发送者)从图像服务器的图像中选择图像组、将用于对该图像组访问的信息记录到邮寄物上的RF-ID中、向图像接收侧的使用者(以后记作接收者)的地点邮寄、使用该邮寄物上的RF-ID实现接收者向图像服务器的图像组的访问的结构进行说明。
图71是表示本发明的实施方式6的图像发送侧的结构的概略图,图72是表示本发明的实施方式6的图像接收侧的结构的概略图。另外,在图71和图72中,对于与图1及图3相同的构成要素使用相同的标号而省略说明。
在图71和图72中,邮寄物3001表示从图像发送侧向图像接收侧邮寄的明信片、或信封、便笺等的邮寄物,RF-ID部3002是可改写的RF-ID,其至少一部分的区域内装有可改写的存储器部3003。RF-ID部3002粘贴或水印在邮寄物3001上,与邮寄物一起向图像接收侧递送。此外,关于RF-ID部3002,如在前面的实施方式中叙述那样,用于识别该RF-ID部所属的媒体是邮寄物的介质识别信息记录在存储器部3003中。
在图72中,电视机3045是具有与在前面的实施方式中叙述的图71的电视机45同样的功能的设置在图像接收侧的电视显示装置,与图71的电视机45同样,具有RF-ID读写器部3046(相当于图71的RF-ID读写器46)、以及显示部3047(相当于图71的显示部110),而且通过在图中没有表示的网络连接机构与因特网40连接。
关于上述结构,接着说明其动作。
<图像发送侧的图像组选择、向邮寄物的写入>
在图71的图像发送侧,由摄影装置1摄影的图像被使用搭载在摄影装置1中的无线LAN、或WiMAX等无线通信用的第2天线20向无线接入点传送,经由因特网40作为图像服务器42的图像数据50记录。并且,将摄影装置1向电视机45的RF-ID读写器46靠近,通过经由用于搭载在摄影装置1中的RF-ID的第1天线21的无线通信,建立与电视机45的连接。电视机45从摄影装置1取得用于向图像服务器42的图像数据50的访问的信息,将图像数据50的图像下载而进行向显示部110的显示。以上的动作与在前面的实施方式中叙述的动作是同样的,仅叙述概要。
接着,发送者一边确认显示在电视机45的显示部110上的图像,一边按每个图像设定表示是否是向接收者发送的图像、换言之是否许可接收者的阅览的发送图像选择信息。进而,也可以对接收者设定在前面的实施方式中叙述的显示限定、幻灯放映、打印等利用方式信息。将这些发送图像选择信息和利用方式信息向图像服务器发送、记录,将由发送图像选择信息选择为发送图像的图像的集合作为图像组由图像服务器管理。
以下,使用电视机45的动作流程图73说明将关于由发送者选择的图像组的信息记录到邮寄物3001中的过程。
发送者在上述那样设定了发送图像选择、利用方式信息的图像组的制作完成的状态下,将具有RF-ID部3002的邮寄物3001向电视机45的RF-ID读写器46靠近,RF-ID部3002和RF-ID读写器46能够无线通信。
电视机45如果能够经由RF-ID读写器46与邮寄物3001上的RF-ID部3002通信,则进行记录在存储器部3003中的信息的读入(S3101),根据其中的介质识别信息识别当前的通信对象是邮寄物,转移到对邮寄物的写入处理的流程(S3102)。另外,对于步骤S3102中的条件判断不成立的情况没有特别触及,但转移到对应于各媒体的处理。
对于邮寄物3001的写入处理首先经由因特网40向图像服务器42访问(S3103),图像接收侧从图像服务器42取得用于对上述的图像服务器42上的图像组访问的服务器URL、图像组地址等的图像组指定信息(S3104)。
从图像服务器取得的图像组指定信息为了对邮寄物3001内的存储器部3003进行写入,经由电视机45的RF-ID读写器46向邮寄物3001的RF-ID部3002发送,由RF-ID部3002向存储器部3003的可改写区域记录(S3105)。
如以上这样,由发送者将记录有图像组指定信息的邮寄物3001投递,邮寄到图像接收侧的使用者的地点。
<图像接收侧的图像再现及阅览>
接着,使用作为图像接收侧结构的概略图的图72和作为图像接收侧电视机的动作流程图的图74对图像接收侧进行说明。
在图72中,接收者接受从发送者邮寄来的邮寄物3001,接收者通过RF-ID部3002或记载在邮寄物3001上的字符信息、或外观,辨识出在该邮寄物中装入有用于向图像的访问的机构。这里,接收者仅理解能够通过邮寄物3001进行向图像的访问就可以,不需要对RF-ID部3002的图像组指定信息等特别认识。
接收者在将图像再现及阅览时,通过将邮寄物3001向设置在图像接收侧的电视机3045的RF-ID读写器部3046靠近,能够开始图像的阅览。
如果邮寄物3001上的RF-ID部3002充分接近于电视机3045的RF-ID读写器部3046,则RF-ID读写器部3046经由未图示的RF-ID读写器部3046和RF-ID部3002的两者的天线进行供电,由此将邮寄物3001的RF-ID部3002启动,开始电视机3045与邮寄物3001的RF-ID部3002的无线通信。如果开始无线通信,则电视机3045进行记录在RF-ID部3002的存储器部3003中的信息的读入(S3151)。
在根据读入的信息中的介质识别信息识别出当前的通信对象是邮递物的情况下,转移到将通过发送者设定的图像组从图像服务器42读出的处理的流程(S3152)。
向图像服务器42的访问可以根据在前面的步骤S3151中从RF-ID部3002读入的信息中的图像组指定信息、例如根据服务器URL、图像组地址等,生成用于向图像服务器42上的图像组访问的URL,并经由因特网40进行访问(S3153)。
在以上的过程中,与图像服务器42连接的电视机3045根据图像服务器42上的图像数据50,按照图像服务器42管理的图像组的发送图像选择信息,读入被许可显示的图像(S3154),将读入的图像显示在显示部110上(S3155)。
进而,经由电视机3045,接收者按照图像服务器42管理的图像组的发送图像选择信息和利用方式信息,能够利用幻灯放映的再现、图像的印刷、还有向未图示的附属于或外部连接在电视机3045上的存储媒体的图像的下载等功能。
除此以外,上述的图像的印刷不仅是通过未图示的LAN上的打印机的印刷,也可以进行经由因特网40的对照片打印服务的印刷委托。
如以上这样,根据本发明的上述结构,通过由邮寄物3001上的RF-ID部3002将图像组指定信息传递给图像接收侧的电视机3045,不需要花费进行用于取得图像的网络访问目标的字符输入作业等的工夫。即,通过将邮寄物3001向电视机3045靠近的、直观且简单的操作,能够进行向保存在图像服务器42中的图像数据50的访问,不对接收者要求进行菜单选择及字符输入等的复杂的步骤的知识,而实现了经由图像服务器的图像的交接。
另外,在上述本实施方式中,设邮寄物3001为预先粘贴或水印了RF-ID部3002的状态进行了说明,但也可以通过在通常的明信片或便笺等的邮寄物上粘贴另外提供的单体的RF-ID部3002来制作,由此,能够后来粘贴RF-ID部而得到上述的效果,所以产生能够适用于与发送侧使用者的喜好相应的任意的邮寄物的新的优点。
此外,在向图像服务器42的访问需要登陆操作的情况下,也可以在向邮寄物3001上的RF-ID部3002的存储器部3003的可改写区域的写入时(步骤S3105)记录服务器登陆ID和服务器登陆口令。进而,登陆ID和登陆口令优选的是不是明文、而通过以加密的形式记录来确保安全性。
此外,在上述本实施方式中,发送图像的选择、利用方式信息的设定、以及向邮寄物3001上的RF-ID部3002的图像组指定信息的写入由图像发送侧的电视机45进行,但如果代替它而由具有RF-ID读写器功能的摄影装置1进行发送图像选择信息和利用方式信息的设定、图像组指定信息的写入,也与上述同样,能够得到可通过接收者的简单的操作进行的图像的交接的效果。
<派生的另一例>
图75是表示本发明的实施方式6的另一方式的图像发送侧的电视机45的动作的流程图。另外,在图75中,作为与图73相同的处理的步骤使用相同的标号而省略其说明。
在本实施方式中,在邮寄物3001上的RF-ID部3002的存储器部3003中预先记录有邮寄物固有ID。并且,该邮递物固有ID记录在存储器部3003的ROM区域中在能够降低意外的动作带来的数据损坏及数据篡改等的风险的方面是优选的。将表示此时的存储器部3003的数据构造的一例的结构图在图76中表示。
根据上述RF-ID部,由图像发送侧的电视机45进行发送图像选择信息、利用方式信息的设定,在图像组设定在图像服务器42上的状况下,按照图75(a)的流程,电视机45的动作成为以下这样。
在邮寄物RF-ID的信息读入(S3101)、基于介质识别信息对于是邮递物进行认定(S3102)后,电视机45取得邮寄物固有ID。关于邮寄物固有ID,使用在步骤S3101中读入的信息、或重新从RF-ID部3002取得都可以。接着,电视机45经由因特网40进行向图像服务器42的访问(S3202),从电视机45将邮寄物固有ID向图像服务器42发送,图像服务器42进行发送来的邮递物固有ID与图像组的地址的关联建立,将该信息记录及管理(S3203)。
电视机45由图像服务器42取得用于从图像接收侧对图像服务器42访问的服务器URL(S3204),将所取得的服务器URL经由RF-ID读写器46写入到邮寄物3001的RF-ID部3002的存储器部3003的可改写区域中(S3205)。
如以上这样,如果在图像服务器侧将图像组与邮寄物固有ID建立关联而记录及管理,则能够按照邮递物固有ID将利用方式信息分开管理,在存在多个邮寄物3001的情况下,能够按照各个邮递物、即按照不同的接收者变更图像接收时的动作。
这在本实施方式的最初叙述的结构中,通过按照各个邮递物分别设定图像组分别生成不同的图像组地址、分别写入到RF-ID部中,从而得到对图像接收侧的同样的效果,但发生分别设定图像组的图像发送侧的麻烦的操作。
因此,如果是相同的发送图像的选择,则通过如上述那样使用邮递物的固有ID分别记录、管理利用方式信息,能够得到减轻发送者操作的效果,在图像服务器侧能够得到与不需要分别保管发送图像选择信息对应的存储容量降低的效果。
关于图75(b),相对于图75(a)不同的部分是步骤S3214和步骤S3215,在步骤S3214中,除了服务器URL以外还取得图像组地址,在步骤S3215中,除了服务器URL以外还将图像组地址向RF-ID部3002的存储器部3003的可写入区域写入。
由此,在从图像接收侧接收图像时,进行指定了图像服务器42的图像组的访问,但此时,通过仅在由图像服务器记录及管理的图像组内的邮寄物固有ID与请求访问的接收者使用的邮递物的固有ID一致的情况下许可访问,能够实现安全性的提高。
以往为了使处于远处的对方用电视机等的大画面显示设备观看图像,需要远处侧的用户学习设备操作、或掌握操作者去往远处而操作设备、或远程操作处于远处的显示设备,但与实施方式4同样,在本系统中,远处的用户能够通过将带有RF-ID的明信片等、物理的媒介物向显示设备靠近的简单的操作容易地阅览图像。在实施方式4中,不是用户(图像的摄影/发送者及图像的阅览者)进行带有RF-ID的明信片的制作及向RF-ID的数据写入,而是服务行业者进行的方式,但在本实施方式中,在图像发送侧的使用者(发送者)进行带有RF-ID的明信片的制作及向RF-ID的数据写入这一点上不同。
(实施方式7)
在本实施方式中,关于使用本发明的RF-ID卡变更设备的设定的方法进行叙述。
以下,使用图77、图78,关于使用RF-ID卡变更记录机的设定的方法进行说明。
图77是表示本发明的记录机的结构的块图。
记录机2000进行从调谐器2001取得的广播内容向HDD2008或光盘驱动器2009的录像、或录像内容或由光盘驱动器2009读取的影像、音乐内容在TV45中的再现。
输入信号处理部2002具备将从调谐器2001输入的模拟信号变换为数字信号的A/D变换器、将被编码(scramble)的内容解码的解码器、变换为MPEG-2等影像格式的编码器,将被输入的影像、声音信号变换为规定的影像、声音格式形式。
输出信号处理部2003具备将数字信号变换为模拟信号的D/A变换器、以及进行从MPEG-2等影像格式的解码的解码器,进行向TV45的影像、声音输出。
系统控制部2004控制记录机2000的动作,具备切换记录机2000的设定的设定信息处理部2011。关于设定信息处理部2011在后面详细说明。
存储器2005保存有作为记录机2000的识别信息的记录机ID2012、及作为记录机2000的设定信息的设定信息2013。
操作输入部2006受理来自未图示的遥控器或前面板的按钮等的通过用户操作的输入。
通信部2007通过因特网或LAN等进行向服务器42的连接。
HDD2008是记录从输入信号处理部2002得到的录像内容及内容列表等的区域。
光盘驱动器2009是进行DVD或Blu-ray Disc等的光盘的记录再现的驱动器,进行从输入信号处理部2002得到的录像内容及内容列表等的记录、以及装入有影像、音乐内容的光盘的再现。
记录机2000的输入信号处理部2002、输出信号处理部2003、系统控制部2004、HDD2008、光盘驱动器2009经由总线2010相互连接。
这里,关于设定信息处理部2011详细地说明。
设定信息处理部2011根据保存在存储器2005中的设定信息2013,进行记录机2000的菜单画面等的显示设定、录像·再现模式设定、录像内容的章节设定、对应于用户的喜好等的节目推荐等的设定。具体而言,例如读取保存在设定信息2013中的表示“菜单画面背景色:黑”等的识别符,当进行向输出信号处理部2003的菜单画面输出请求时,输出将背景色用“黑”显示的指示。
另外,设定信息2013也可以保存在HDD2008、或未图示的SD卡等的外部记录机构中。特别是,关于保存在HDD2008中的录像内容的章节等的设定信息、及尺寸较大的信息等是如果保存在HDD2008中,成为高效的信息。
设定信息2013以往在设备购买时已经设定、或通过来自操作输入部2006的用户操作设定,但在本发明中,可以将设定信息2013基于从RF-ID读写器46得到的信息变更。
图78是表示通过用记录机2000的RF-ID读写器46读取从而变更记录机2000的设定的RF-ID卡的结构的块图。
RF-ID卡2100由存储器2101、天线21、电源部91、数据接收部105、数据转送部108、处理部2102、记录部106、再现部107构成。
如果将天线21向RF-ID读写器46靠近,则从RF-ID读写器46经由天线21对电源部91供电,对RF-ID卡2100的各部供给电源。
来自RF-ID读写器46的数据记录及再现等的信息由数据接收部105接收,向处理部2102发送。
处理部2102进行由记录部106进行的向存储器2101的数据记录、及由再现部107进行的从存储器2101的数据的再现。
数据转送部108将从处理部2102发送的数据经由天线21向RF-ID读写器46发送。
在存储器2101中,保存有UID75、介质识别信息111、设备操作信息2103。
UID75和介质识别信息111是用于RF-ID卡2100识别的信息。
UID75是RF-ID卡2100的固有ID。
在介质识别信息111中,记录有表示是卡的识别符。
设备操作信息2103保存有关于使用RF-ID卡2100进行操作的对象的设备的信息和关于设备的操作的信息。
在操作设备识别信息2104中,保存有表示进行操作的设备的种类的信息。保存的信息使用与介质识别信息111相同的识别符,在图78中记录有是记录机的识别符。
对象设备信息2105保存有在想要仅对特定的设备进行操作的情况下使用的信息,在图78中,保存有作为记录机2000的识别信息的记录机ID2012。另外,在使用本发明的RF-ID卡2100的设备受到限制的情况下,例如在仅由记录机使用的情况下,操作设备识别信息2104及对象设备信息2105也可以不包含在设备操作信息2103中。此外,在设定信息处理部2011是设定为通过卡变更设定的结构的情况下,介质识别信息111也可以不包含在存储器2101中。
操作指示信息2106是表示设备中进行的操作内容的信息,在图78中,保存有表示设定变更的信息2109、表示进行设定的变更的对象的信息2110、表示在取得设定信息时实施通信的信息2111。
另外,操作指示信息2106并不仅限于针对1个操作的信息,也可以由关于多个操作的信息构成,也可以为组合了多个操作的程序。
通信信息2107是在由操作指示信息2106指示进行通信而取得时关于进行访问的服务器等的信息。在图78中,保存有URL2112、登陆ID2113、口令2114。另外,也可以不是URL2112、而记录有IP地址等,在用公司内或家庭内网络向其他设备访问的情况下,也可以记录有确定MAC地址等的设备的信息。
以下,使用图79,关于将记录机2000的设定使用RF-ID卡2100登录到服务器中的次序进行说明。
在步骤2201中,如果受理了用户的从操作输入部2006的输入,则设定信息处理部2011对输出信号处理部2003进行向TV45的消息输出请求,在TV45的画面上显示“请刷RF-ID卡”的消息。另外,消息的显示也可以在记录机2000的未图示的控制台上显示。此外,在进行用户的操作输入时,也可以请求口令或生物体认证等的认证、在认证后转移到登录处理。进而,也可以不进行向TV45的消息输出,而在记录机2000的使用时,通过将RF-ID卡2100靠近RF-ID读写器46上来进行步骤2203以后的处理。另外,也可以显示向哪个地方登录设定信息2013的询问消息、进行向用户的选择的地方的登录。例如,既可以在RF-ID卡2200中登录设定信息2013,也可以向与服务器42不同的服务器进行登录。
如果在步骤2203中检测到RF-ID卡,则实施相互认证处理。
在步骤2204的认证判断为OK的情况下,前进到步骤2205而继续处理,在认证判断为NG(不成功)的情况下,回到步骤2202而重复RF-ID卡检测处理。
在步骤2205中,从RF-ID卡2100的存储器2101取得UID信息75。
在步骤2206中,从RF-ID卡2100的存储器2101取得通信信息2107。另外,在RF-ID卡2100的存储器2101中没有登录通信信息的情况下,也可以发出向用户的通信信息输入请求。此外,当在步骤2201中进行了向没有登录在RF-ID卡2100中的部位的登录指示时,在该步骤中什么都不做。此外,在RF-ID卡2100中登录有多个通信信息2107的情况下,也可以将通信信息一览显示、用户进行选择。
在步骤2207中,从存储器2005取得记录机ID2012和设定信息2013。另外,设定信息也可以不是当前的信息、而是在设定登录实施时等用户输入的信息。
在步骤2208中,设定信息处理部2011对通信部2007发出向通信信息2107的URL2112的访问请求。在向URL2112的访问时,使用登陆ID2113和口令2114。
在步骤2209中,进行访问是否成功的判断,在访问成功的情况下,前进到步骤2210而继续处理,在访问失败的情况下,原样结束处理。
在步骤2210中,将UID信息75、从存储器2005取得的记录机ID2012、设定信息2013向服务器42发送。
在步骤2211中,根据在2201中指定的操作及选择的设定信息2013的保存位置、在步骤2207中取得的设定信息2013、在步骤2206中取得的通信信息2107,生成操作指示信息2106。
在步骤2212中,进行与步骤2202同样的处理,在TV45的画面上显示“请刷RF-ID卡”的消息。
在步骤2213中,如果检测到RF-ID卡,则实施相互认证处理。
在步骤2214的认证判断为OK的情况下,前进到步骤2215而继续处理,在认证判断为NG的情况下,回到步骤2212而重复RF-ID卡检测处理。
在步骤2215中,从RF-ID卡2100的存储器2101取得UID信息。
在步骤2216中,确认在步骤2205中取得的UID信息75与在步骤2215中取得的UID信息是否一致,如果一致,则前进到步骤2217而继续处理,如果不一致,则回到步骤2211重复RF-ID卡检测处理。
在步骤2217中,进行将保存在存储器2005中的未图示的操作设备识别信息2104、记录机ID2012、在步骤2211中生成的操作指示信息2106、通信信息2107向RF-ID卡2100发送,记录到存储器2101中,结束处理。
使用图80说明通过图79的次序登录在服务器42中的设定信息。
设定信息2250与UID信息75、对象设备信息2105建立关联而登录,具体而言,登录有表示“菜单画面背景色:黑”等信息的识别符。各设定信息的末尾的“A”、“B”表示是不同的设定。
如UID0001那样,也可以对1个UID登录多个设定信息,对象设备信息2105如REC-0001的项目那样,也可以对1个对象设备信息登录与多个UID建立了关联的设定信息。另外,在设定信息中也可以包含有变更对象信息2110。
接着,使用图81,关于通过图79的次序向RF-ID卡2100的存储器2101登录的设备操作信息2103进行说明。
作为UID信息75而记录有“UID0001”,作为介质识别信息111而记录有“卡”。
在设备操作信息2103中,登录有操作设备识别信息2104、对象设备信息2105、操作指示信息2106、通信信息2107所成的组。另外,通信信息2107也可以作为与其他信息没有关联的信息登录。例如,也可以登录有1个通信信息,在使用RF-ID卡2100时总是进行向相同的服务器等的访问。
操作指示信息2106由指示内容信息2260、指示对象信息2261、通信实施信息2262构成。在指示内容信息2260中,记录有表示对由对象设备信息2105指定的设备执行的处理的识别符,在指示对象信息2261中,作为进行操作的对象,例如对REC-0001记录有表示菜单画面模式、录像模式等的设定的识别符。在通信实施信息2262中,记录有表示在进行指示内容信息2260的处理时是否进行通信的识别符。另外,在使用RF-ID卡2100进行的操作被限制为设定变更的情况下,设备操作信息2103也可以仅由通信信息2107构成。
在通信信息2107中,在通信实施信息2262中指定了实施通信的情况下,记录有进行通信的服务器等的URL、登陆ID、口令等。
接着,使用图82,关于使用RF-ID卡2100变更记录机2000的设定的次序进行说明。图82是表示记录机2000的设定信息处理部2011使用RF-ID卡2100的信息更新设定信息2013的次序的流程图。
首先,如果在步骤2301中检测到RF-ID卡2100,则在步骤2302中实施相互认证处理。
如果步骤2303的判断为OK,则前进到步骤2304而继续处理,如果判断是NG,则结束处理。
在步骤2304中,从RF-ID卡2100的存储器2101取得UID信息75和设备操作信息2103。
在步骤2305中,检索包含在设备操作信息2103中的操作设备识别信息2104,与从记录机2000的存储器2005取得的未图示的设备识别信息比较。
在步骤2306中,如果在步骤2305中进行的比较的结果一致,则前进到步骤2307而继续处理,如果不一致,则前进到步骤2314。
在步骤2314中,判断是否已全部检索了操作设备识别信息2104,在检索了全部的操作设备识别信息2104的情况下结束处理。
在步骤2307中,检索对象设备信息2105,与从记录机2000的存储器2005取得的记录机ID2012比较。
在步骤2308中,如果在步骤2307中进行的比较的结果一致,则前进到步骤2309而继续处理,如果不一致,则结束处理。
在步骤2309中,取得与设备操作信息2103、对象设备信息2105对应的操作指示信息2106。
在步骤2310中,取得与设备操作信息2103、对象设备信息2105对应的通信信息2107。
在步骤2311中,从操作指示信息2106的指示内容信息2260中取得是设定变更处理的情况,对服务器42访问,取得设定信息2250。该步骤的处理在后面使用图83详细说明。
在步骤2312中,判断是否正确地进行了设定信息2250的取得,在正确地取得了的情况下,前进到步骤2313,由设定信息处理部2011将记录机2000的存储器2005的设定信息2013更新而结束处理,在未能正确地取得的情况下,原样结束处理。
以下,使用图83详细地说明图82的步骤2311的处理。图82是表示设定信息处理部2011对服务器42访问而取得设定信息2250的次序的流程图。
在步骤2351中,由通信部2007对包含在通信信息2107中的URL2112进行访问。
在步骤2352中,设定信息处理部2011将包含在通信信息2107中的登陆ID2113和口令2114对通信部2007发送,进行登陆处理。
在步骤2353中判断为认证OK的情况下,前进到步骤2354而继续处理,在判断为认证NG的情况下,作为设定信息2250的取得失败,结束处理。
在步骤2354中,检索服务器42的UID信息,在步骤2355中,在有与在图82的步骤2304中取得的UID信息75一致者的情况下,前进到步骤2356而继续处理,在没有一致者的情况下,前进到步骤2354而反复实施UID信息的检索,直到在步骤2359中判断为已检索全部的UID信息。在步骤2359中判断为已检索全部UID信息的情况下,作为设定信息2250的取得失败,结束处理。
在步骤2356中,检索对应于UID信息75的对象设备信息,在步骤2357中,在有与在图82的步骤2305中取得的对象设备信息2105一致者的情况下,前进到步骤2358而继续处理,在没有一致者的情况下,前进到步骤2354而反复实施对象设备信息的检索,直到在步骤2360中判断为已检索全部的对象设备信息。在步骤2360中判断为已检索全部的对象设备信息的情况下,作为设定信息2250的取得失败,结束处理。
在步骤2258中,取得与UID信息75、对象设备信息2105对应的设定信息2250,结束处理。
如以上所述,如果使用RF-ID卡2100,则用户不用意识到复杂的处理而能够实施记录机2000的设定,能够得到即使是不熟悉设备的操作的用户也能够容易地进行记录机的设定的变更的效果。另外,能够对记录机进行的操作不仅是设定的变更,例如如果在指示内容信息中指定录像内容列表取得,则也可以将记录机的录像内容列表登录到RF-ID或服务器上、从其他设备参照。
进而,如果使用在图84中表示的RF-ID卡,则仅通过刷RF-ID卡就能够进行预约录像。如果使用图84的对应于Index1(索引1)的变更对象信息,则通过在由指示对象信息指定的“节目ID”、“录像模式”的设定中进行预约录像,能够不对服务器访问而进行预约录像,如果使用对应于Index2的变更对象信息,则指定由指示对象信息指定的“节目代码”,从服务器取得节目ID或开始时间和结束时间、频道的信息,通过“录像模式”的设定能够进行预约录像。
进而,通过在指示对象信息中进行“推荐节目”的指定而从服务器取得节目ID,能够从服务器取得推荐的内容并进行预约录像。如果使用该功能,则也可以考虑例如将RF-ID卡作为节目向导杂志的附录而减轻预约录像的操作量的服务。此外,如果作为指示内容信息而设定下载、作为指示对象信息而设定功能限定版的影像或软件、作为通信信息而使用设定了下载站点的URL的RF-ID卡,则也可以考虑通过免费分发的RF-ID卡试用功能限定的内容而由中意的用户进行购买的服务。
另外,在本实施方式中,举记录机为例进行了说明,但本发明的适用范围并不限于记录机。
例如,通过在TV中具备RF-ID卡的读写器和设定信息处理部,可以将接通电源之后的初始显示频道及初始音量的设定、将成人广播及暴力场景等除外的童锁设定、中意的频道跳过广告设定、画面的对比度及明亮度设定、语言设定、连续使用时间设定等作为变更对象信息登录、进行对应于用户的使用便利的设定。此外,在汽车导航系统(汽车导航仪)中具备RF-ID卡的读写器和设定信息处理部的情况下,通过在指示内容信息中指定“强调显示”、在指示对象信息中指定“地标信息”,在将指定的地标用汽车导航仪显示时,能够进行变更字符字体及尺寸、或变更颜色等的强调显示。另外,地标信息也可以从服务器取得。由此,例如可以将记录有在图85中表示的设备操作信息的RF-ID卡在高速道路的服务区或立体交叉道路、观光地等散发、也用于将当前有事件发生等的推荐的地标强调显示等的用途。进而,如果在笔记本PC中具备RF-ID卡的读写器和设定信息处理部,则能够设定画面的分辨率及桌面上的图标等的配置、壁纸、屏保程序、驻留软件等的启动设定、使用的周边设备、鼠标等的习惯用手设定等,仅通过拿持RF-ID卡,即使是出差地等的PC,也能够用通常使用的设定进行操作。此外,也可以在游戏机中具备RF-ID卡的读写器和设定信息处理部、例如在朋友的家中等用作为指示内容信息而设定了设定变更的RF-ID卡设定控制器的按键配置或菜单画面结构,或读入保存数据等。进而,也可以考虑作为指示内容信息而将设定了下载的RF-ID卡作为杂志等的附录,进行追加脚本及稀少项目等的下载的服务。
本发明的RF-ID卡在家庭内的家电由网络连接时,通过将例如符合个人的喜好的空调温度或洗澡的热水器的设定等登录在RF-ID卡中、靠近家庭内具备的RF-ID读写器上而一齐进行家电的设定,或通过将保管在电冰箱中的食品的阅览操作登录在RF-ID卡中、取得预先由在食品上附带的标签等取得登录在电冰箱的存储器中的食品的信息、或用照相机将电冰箱中摄影而得到的影像,由此用TV的读写器确认食品列表等,能够进行各种用途下的使用。另外,也可以将指定设备的RF-ID卡(例如表示“制暖”、“制冷”、“暖炉”、“电风扇”的4种卡)、以及指定设备的设定的RF-ID卡(例如表示“弱”、“中”、“强”的3种卡)等组合、或将具有上述设备指定、设备设定指定的各个功能的多个RF标签装备在1片RF-ID卡中,对设备的设定进行用户定制。
另外,本发明的适用范围并不限定于在到目前为止的实施方式中叙述的方法。在不脱离本发明的主旨的范围内将上述实施方式的构成要素及特征任意地组合而得到的方式、以及本领域的技术人员对上述实施方式实施变形而得到的方式也包含在本发明中。
例如,在两个用户(设为用户A和用户B)之间进行照片的交换的方式中,作为用户B阅览用户A摄影的照片的方法,通过将根据用户B的TV的设备ID和用户B拥有的预先保存有中继服务器的URL的RF-ID(设为RF标签B)生成的信息(设为设备生成信息B)向用户A以邮件等传送并记录到RF标签B中,用户A通过与设备生成信息B建立关联而在中继服务器中保存登录有照片的服务器的URL,由此用户B仅通过将RF标签B靠近TV的RF-ID读写器上就能够阅览用户A摄影的照片。另外,如果采用以下方法:在标签B中预先登录用户A的邮件地址,用户B仅通过将标签B靠近TV的RF-ID读写器上,就自动地进行设备生成信息B向标签B的写入、以及向用户A通知设备生成信息B,则即使在用户B不熟悉设备的使用方法的情况下也能够进行照片的交换。此外,通过用户A递送URL、登陆ID、口令的至少1个用设备生成信息B加密而登录到RF-ID中的明信片,能够将照片的阅览限制为用户B的TV。进而,在从用户A将带有发送用的RF-ID和返送用的RF-ID的两个RF-ID的明信片向用户B发送的情况下,通过用户A预先在返送用的RF-ID中登录从自己的TV等生成的设备生成信息A,用户B通过在返送时将用户B登录照片的服务器的URL、登陆ID、口令用设备生成信息A加密而记录到返送用的RF-ID中,或在登录照片时用户B与设备生成信息A建立关联而登录等,能够限制许可用户B登录的照片的阅览的设备。
另外,邮寄物上附带的RF-ID的邮寄物固有ID也可以为将在多个邮寄物间共通的组ID部与按照邮寄物设定的固有ID部组合的结构。通过代替将服务器的照片与邮寄物固有ID整体建立关联,而与上述组ID部建立关联登录,由此在对多个对象递送与照片建立了关联的带有RF-ID的明信片时,能够省略进行多个固有ID的登录的工夫。此外,也可以将与组ID部建立关联而登录的服务器的照片根据固有ID部切换阅览许可/禁止。由此,例如在对邮寄物用打印机进行目的地住址等的印刷的情况下,通过在打印机中具备RF-ID读写器而将邮寄物固有ID的固有ID部在印刷时读取,能够进行住址簿与固有ID部的对应建立,能够以住址簿进行服务器上的照片阅览的许可/禁止的管理。
另外,也可以在明信片或卡上具备多个功能不同的RF标签,将不使用的RF标签的通信切断,由此在1张明信片或卡中切换多个功能。例如,通过在明信片的上部具备具有将照片进行幻灯放映显示的功能的RF标签、在下部具备具有将影像再现的功能的RF标签,能够根据将明信片的上部、下部中的哪个向RF-ID读写器靠近来切换照片显示和影像再现功能。另外,也可以装备在明信片的表背面上,也可以具备使用将通信切断的材料的盖来仅能够使用将盖打开的状态下的RF标签。
另外,也可以通过将照片登录到多个服务器中、将各个服务器的URL保存到RF标签中,由此对各个服务器访问而取得照片、进行一览显示。
另外,RF-ID读写器也可以不仅装备在设备中,而且装备在遥控器等的进行设备操作的输入机构中。例如,在用网络等将多个设备连接的情况下,也可以在集中进行多个设备的操作的输入机构中具备RF-ID读写器,进行各个设备的操作。进而,也可以在遥控器等输入机构中具备指纹认证或脸认证等生物体认证或口令等的个人认证机构,仅在个人认证完成的情况下进行RF标签的读写。相反,也可以将个人的认证信息预先记录在RF标签中、通过RF标签用设备或遥控器等进行个人认证。
另外,关于本发明的记载,较多使用RF-ID的用语。一般而言,RF-ID的用语在狭义上是指“在非易失性存储器中记录有识别信息的标签”,具有双重接口及安全功能的RF-ID使用“IC卡”等的用语。但是,本说明书的RF-ID并不限定于该狭义的用语。在本发明中用作“将个体识别信息记录在非易失性存储器中、能够将个体识别信息经由天线向外部发送的电子电路”的广义含义。
以往,不熟悉设备操作的人为了进行设备的复杂的设定,需要设备的销售者、修理者、服务者前往对象设备所在的地方而进行设定、或者远程操作对象设备。即,在远程操作的情况下也还是需要为了远程操作的设定而前往设备所在的地方。但是,如果如以上所述那样使用RF-ID卡2100,则用户能够不意识复杂的处理而实施记录机2000的设定,能够得到即使是不熟悉设备的操作的用户也能够容易地进行记录机的设定的变更的效果。
此外,本发明也可以在具备具有画面的设备、与上述设备通过通信路径连接的读取器装置、以及与上述读取器装置进行近距离无线通信的通信装置的通信系统中,作为将关于上述通信装置的图像对上述设备提示的图像提示方法实现,或者也可以作为一种与通信装置的识别信息一起保存在该通信装置内的程序实现,用由在与上述通信装置之间进行近距离无线通信的设备具备的虚拟机执行的代码记述、包括对用通信网络连接的服务器装置访问的步骤、将保存在访问的上述服务器装置中的图像中的对应于上述识别信息的图像从上述服务器装置下载的步骤、以及将下载的图像显示的步骤,或者也可以作为记录有这样的程序的CD-ROM等的计算机可读取的记录介质实现。
此外,有关本发明的通信装置当然能够适用于具备保存有识别信息及虚拟机用程序的RF-ID的所有的设备、例如照相机等的电子设备、电饭锅或电冰箱等的家电设备、牙刷等的日常用品。
这里,使用图86(a)、(b)的块图、图86(c)的流程图和图87的流程图说明在TV等的遥控器中搭载有RF-ID读取器的情况下的实施方式。
首先,如上述那样,照相机等的子通信机5050具有存储器52和天线21。如果使遥控器5051的天线5063向该天线21靠近,则从天线5063对天线21供给电源,将存储器52中的数据从天线21向天线5063传送。在遥控器5051侧由通信电路5064变换为数字数据,储存到存储器5061中(步骤5001a:图87)。如果将遥控器5051的发送部朝向TV45而按下发送开关5062(步骤5001b),则将存储器5061的数据经由光输出部5062使用光向TV的受发光部5058发送,向TV等的母机45发送(步骤5001c)。另外,这里的通信也可以不是光而是无线。
这里,如果回到图86(c)的流程图,则由于发明在社会系统中使用,所以需要对应于20年后、30年后。虚拟机语言等的程序已知有Java(注册商标)等,但预想到将来会被扩展、或者成为完全不同的效率较好的语言等的程序。因而,在本发明中,在TV等的母机45中记录有表示母机的虚拟机语言等的语言类型及版本的母机版本信息5059、n1(步骤5060i:图86(c))。在子机5050的存储器21中(图86(a)),在最开始记录有表示子机的程序的语言等的版本的子机版本信息5052、n2。在其之后有程序区域5053,记录有版本5055a、5055b、5055c的程序5056a、5056b、5056c,其后有数据区域5054。
在图86的流程图的步骤5060i中获得母机45的版本信息n1,获得子机的存储器中的版本信息n2(步骤5060a),选择n1≥n2的最大值的程序n(步骤5060b),执行其执行程序n(步骤5060c),在步骤5060d中,在有向因特网的连接的情况下,在步骤5060e中连接到服务器,向服务器发送设定在母机45中的语言信息5065(步骤5060f),服务器根据发送的语言信息5065,将该语言、例如法语的程序向母机传送而使其执行。或者也可以在服务器上执行该程序。
在没有连接到因特网的情况下回到步骤5060h,执行本地程序,将子机5050的属性信息、例如通知故障的情况的信息或记录的照片的张数等信息显示在母机45的画面上。这样,在子机的存储器52中记录版本信息5052,按照版本记录以10年单位的周期进化的各代的程序、次序及URL,所以具有即使经过20年30年也以相同的格式动作的效果。在图86(a)中表示了记录程序的版本、世代的例子,但通过如图86(b)那样将对应于版本5055d、5055e、5055f的URL等的服务器中的数据的地址、URL5057a、5057b、5057c记录,能够得到同样的效果。通过该方式,能够持续到将来实现下位兼容性。例如在今年购买的制品中搭载有RF-ID的情况下,如果设版本为1,则在20年后、30年后的母机45中记载有例如与版本1、2、3对应的JAVA(注册商标)等虚拟机语言等的程序,所以通过知道子机版本信息5052,母机向与该版本对应的母机的程序进行切换动作。此外,在30年后的子机21中记录有版本1、2、3的全部的程序,所以通过版本3的母机45得到最高的功能。并且,通过版本1的母机45得到较旧的版本的稍稍受限的功能,实现完全的兼容性。
说明图87的流程图。在步骤5001a中按下遥控器5051的读取开关5063,如果向子机5050的天线21靠近,则将子机的存储器52的数据储存到遥控器5051的存储器5061中。接着,如果在步骤5001b中将遥控器5051朝向TV等的母机45按下发送开关5062(步骤5001b),则通过光向母机传送存储器5061的数据(步骤5001c)。在本实施方式中,为了方便而将该数据称作标签数据。从标签数据提取或选择执行程序(步骤5001d),将提取或选择的执行程序使用母机的虚拟机语言执行(步骤5001e),将母机侧的因特网连接识别用信息读入(步骤5001f),如果到步骤5001为止识别用信息没有表示“能够连接到因特网”的情况下,在执行程序之中执行非连接时用的程序(步骤5001t),显示母机的画面的执行结果(步骤5001u)。在本发明中,在存储器52中,不仅记录有连接到因特网的信息,还记录有在非连接时动作的执行程序,所以具有在非连接时要求的最低的动作能够进行显示的效果。
回到步骤5001g,在“是”的情况下,执行包括上述程序的一部分的连接程序(步骤5001h)。
在此情况下,通过对标签数据之中的执行程序在图86(a)的数据区域5054中添加服务器的URL、用户ID或口令等数据而生成连接程序,由此能够扩展标签数据中的执行程序,并且能够减小存储器52中的非易失性存储器的容量。在此情况下,通过将存储器52的连接程序记录到程序区域5053的不能改写的ROM存储器等的存储器中、将服务器的URL等记录到可改写的数据区域5054中,能够降低芯片面积及成本。
在步骤5001i中连接到特定的URL的服务器,在步骤5001j中判断服务器侧是否请求了数据的上载,如果是“是”,则在步骤5001p中将数据或/且程序上载到服务器中。使用该数据由服务器执行程序(步骤5001q),将由服务器执行的结果向母机发送(步骤5001r),在母机的表面上显示执行的结果等(步骤5001s)。
回到步骤5001j,在“否”的情况下,将包括服务器的URL之中的特定的程序的信息下载(步骤5001k),将该下载的程序在母机中执行(步骤5001m)。并且,将该结果显示在母机的画面上。
通过耗电、体积及成本的制约,在RF-ID及子机侧的存储器容量中存在限制,不能存储通常的程序。但是,通过如本发明那样利用连接程序和服务器,具有能够使无限大的程序动作的显著效果。
也可以在服务器中执行巨大的程序,也可以执行从服务器下载的程序,它们包含在本发明的范畴中。
另外,在使用本发明的图86的实施方式中,设想TV用的遥控器进行了说明。在此情况下,遥控器由电池和用于切换TV频道的按钮、读取RF-ID的天线和通信电路、红外的发光部构成。如果代替遥控器而使用便携电话,也能够得到同样的效果。由于能够共用搭载在便携电话中的红外的发光部等,所以容易导入。由于具有便携的通信线路,所以直接连接到服务器,所以在性能方面没有变化。但是,由于发生通信费用,所以给用户带来负担。便携电话的画面与TV相比非常小。因而,设置由图86表示的发送开关5062,在TV处于附近的情况下,通过将便携电话的发光部朝向TV的方向、将上述的存储器52中的标签数据向TV直接传送,能够用分辨率较高的大的画面观看数据。此外,由于也不花费费用,所以对于用户而言益处较大。经由使用读取的标签数据的便携电话线路的信息交换与该发送开关联动而被中止。
在此情况下,与在图86中说明的遥控器同样,设为在便携电话中具备RF-ID(也可以是NFC通信部)的至少读取部的结构。可以预想到今后使便携电话具有RF-ID等的读取器功能。如果将RF-ID的读取器搭载在便携电话中,则在实施本发明时追加的成本变得非常小,对于用户而言益处较大。此外,不仅是遥控器、便携电话,通过PDA终端、笔记本PC、便携媒体播放器等也容易实现本发明。
(实施方式8)
在图88中表示在本实施方式中设想的家庭网络环境。假设在1个家宅内部中存在两个TV45、8001、各个TV具有RFID标签读写器和画面的显示部110、8003。此外,在各个TV上连接着运动图像服务器8004、8005,从运动图像服务器对TV使用有线或无线发送运动图像数据,能够使运动图像服务器的信息在TV上显示运动图像。这里,所谓运动图像服务器,是NAS等的存储设备或BD记录机等的记录设备。同样,也可以通过因特网对宅外的运动图像服务器访问。此外,假设家庭网络的用户拥有能够携带且能够进行运动图像的显示的移动AV终端8006。移动AV终端也与TV同样,具有RFID标签8007和运动图像显示部8008,能够通过无线对运动图像服务器访问。
在本实施方式中,在这样的环境中,设想了用户正用TV1(45)观看运动图像,但想用2层的电视机2(8001)观看的状况。在移动观看运动图像的情况下,希望不间断地观看运动图像的后续。但是,为了保持着安全性而不间断地使运动图像移动,需要取得用户的认证及定时的同步,用户必须进行复杂的操作。
本发明为了解决上述问题,通过使用RFID,通过很简单的交换来进行用户的认证及定时的同步等的处理。具体而言,使移动AV终端8006的RFID标签8007向TV1的RFID标签46接近,通过RFID标签进行用于认证及定时同步的信息的交换。
本发明通过上述结构,能够通过使移动AV终端与TV接触的很简单的动作进行运动图像的交接,大幅地提高用户的方便性。
图89是说明移动AV终端执行的各功能的功能块图。进行运动图像的交接的用户按下运动图像交接按钮8050。当被按下运动图像交接按钮时,运动图像交接请求制作部8051从显示信息管理部8052取得当前显示在显示部8008上的运动图像信息,制作运动图像交接请求,写入到RFID的存储器8054中。在没有显示运动图像的情况下,变更为接受运动图像的模式,将接受运动图像的命令作为运动图像制作请求。假如在显示有运动图像的情况下,变更为将运动图像递交的模式,将运动图像递交命令和运动图像的信息作为运动图像交接请求。这里,所谓运动图像的信息,是由显示信息管理部管理的运动图像显示时间的信息和由通信·广播管理部8055管理的连接目标信息。在通信·广播管理部8055中,在将运动图像通过广播接口8056接收的情况下管理频道信息,在通过通信接口8057接收的情况下,管理运动图像服务器的识别符及运动图像的识别符。这里,运动图像服务器的识别符及运动图像的识别符,例如是IP地址、URL,只要是能够唯一地识别,是什么都可以。另外,运动图像交接按钮也可以分为接受运动图像的按钮和递交运动图像的按钮。此外,也可以通过按下运动图像交接按钮而在画面上显示是接受还是递交的选择分支。记录在RFID的存储器8054中的信息如果向其他RFID标签接近、则被从发送部8058通过无线天线8059发送。另外,在制作交接命令后、在经过一定时间也没有被发送的情况下,认为运动图像交接模式被解除,将存储器内的信息也丢弃。RFID的接收部8060接收运动图像交接应答。所谓运动图像交接应答,是对运动图像接受命令或运动图像递交命令的可否的应答,假设在针对运动图像接受命令为可以的应答的情况下包括运动图像的信息。运动图像交接应答被发送给通信·广播管理部,进行遵循应答的处理。在对运动图像接受命令返回了可以的应答的情况下进行运动图像接受处理。在包含在应答中的运动图像信息是频道信息的情况下,对广播接口8056通知该信息,接收该频道。此外,对显示管理部8061发出显示该频道的指示。在有通过移动AV终端的广播接口不能接收的频道信息(BS、CS、线缆TV的频道)的情况下,接收这些频道,向通信部8062委托向通信接口转送的终端的搜索。另外,转送的终端的搜索也可以在事前进行。在通过通信接口接收到的情况下也与通常同样显示在显示部8008上。在包含在交接应答中的运动图像信息是连接目标信息的情况下,对通信部8062通知该信息,将运动图像的发送请求向连接目标发送。在运动图像的发送请求中包含有运动图像的显示时间,匹配于该时间而请求数据的发送。另外,与通过广播接口的运动图像接收不同,有在通过通信接口的的运动图像的接收中花费某种程度的时间的情况。这取决于用于通过通信接口接收的前处理及在通信缓冲器8063中临时储存运动图像数据的时间。在本方式中,也可以通过预测该时间、预先从通信部进行匹配于该时间的运动图像发送请求,来进行多余的数据发送及对其等待时间的削减。在此情况下,在显示时间修正部中进行修正,以便能够不间断地进行运动图像显示。这是因为,一般数字运动图像的数据储存在显示缓冲器8065中,一边由显示处理部8053进行处理一边由显示部8008显示,所以能够实现。在对于递交运动图像的命令返回了可以的应答的情况下,将画面显示消除。另外,画面显示既可以自动消除,也可以使用户选择。此外,也可以从递交到的一侧的终端接收到消除画面显示的指示后消除,也可以准备定时器、在经过一定时间后消除。
图90是说明TV执行的各功能的功能块图。从RFID标签的天线8100接收到运动图像交接请求的接收部8101对通信·广播管理部8102递交数据。在接收到的数据是运动图像接受命令的情况下,发送在运动图像交接应答制作部8103中管理的显示运动图像的连接目标信息。进行了接收的运动图像交接应答制作部8103从显示信息管理部8104取得显示时间信息,制作运动图像交接应答,写入到RFID的存储器8105中。此时,如果得不到想要的信息,则制作不能交接的应答。将写入的交接应答通过发送部8106发送给移动AV终端的RFID。发送后的运动图像的显示结束处理与移动AV终端是同样的。在接收到的数据是运动图像递交命令的情况下,进行对应于在通信·广播管理部8102中包含的信息的处理。在频道信息的情况下,对广播接口8107通知,接收希望的频道下的信息,对显示管理部8108通知,变更显示。另外,在已经显示着运动图像的过程中接收到运动图像递交命令的情况下,既可以由优先级判断部8109进行应以哪个运动图像为优先的判断,也可以显示选择命令。在包括连接目标信息的情况下,对通信部8110通知,由其发送运动图像发送请求。然后的处理与移动AV终端是同样的,其他各部的功能也是同样的。
图91是在TV1(45)从运动图像服务器1(8004)正接收运动图像的情况下、移动AV终端8006从其交接该运动图像的情况下的次序图。用户为了交接运动图像而接通移动AV终端8006的电源。移动终端搜索无线LAN的接入点8009,建立无线连接。进而,通过DHCP等取得IP地址,建立IP连接。在是DLNA终端的情况下,也可以进行M-SEARCH等的DLNA终端搜索处理。用户按下运动图像交接按钮,在RFID的存储器内制作运动图像交接请求。进而,用户使移动AV终端的RFID8007与TV1的RFID46接近,将运动图像交接请求向TV1发送。在TV1中,通过接收到请求命令,制作运动图像交接应答(包括运动图像服务器1的IP地址和运动图像识别符、运动图像显示时间),向移动AV终端8006返送。另外,假设在TV1中的运动图像接收机构是HDMI线缆等的非IP连接的情况下、TV1也预先取得运动图像服务器的IP地址。此外,假设在运动图像被加密的情况下同时交换需要的安全关联信息(密钥等)。接收到运动图像交接应答的移动AV终端对包含在应答中的运动图像服务器1的IP地址发送运动图像发送请求(包括运动图像的识别符、显示时间)。接收到运动图像发送请求的运动图像服务器18004将运动图像的发送目标切换为移动AV终端8006。不再接收到运动图像的数据的TV1(45)将运动图像显示设为OFF。
图92是在移动AV终端8006从运动图像服务器1(8004)接收到运动图像的情况下、TV2(8003)从其交接该运动图像的情况下的次序图。用户按下移动AV终端8006的运动图像交接按钮,制作运动图像交接请求(包括运动图像服务器1的IP地址和运动图像识别符、运动图像显示时间)。进而,用户使移动AV终端的RFID8007与TV2的RFID8002接近,将运动图像交接请求向TV2发送。TV2(8003)制作能够进行运动图像交接的应答,向移动AV终端8006返送。TV2(8003)将运动图像发送请求向运动图像服务器1(8004)发送。然后的处理与图91同样。
图93是说明移动AV终端的处理的流程图。移动AV终端如果被用户按下交接按钮(S8300),则在画面为空白(或不是运动图像显示)的情况下(S8301)转移到接受运动图像的模式(S8302)。在画面不是空白的情况下显示选择画面(S8303)。在选择了接受的情况下(S8304),同样转移到接受运动图像的模式。在选择了递交的情况下,变更为递交运动图像的模式(S8305)。在接受运动图像的模式的情况下,移动AV终端将包括接受运动图像的命令的运动图像交接请求保存到自身的RFID的存储器内。用户使本终端的RFID向其他终端的RF-ID接近(S8306),将运动图像交接请求向其他终端发送(S8307)。此时,如果从其他终端接收到运动图像交接应答(S8308),则根据包含在应答内的信息进行处理。在不能得到应答的情况下,显示无应答的错误画面,结束处理(S8309)。在应答内包含有地面波的频道信息的情况下,确认移动AV终端是否能够进行该频道接收(具有调谐器、天线,处于可接收接收的范围中)。在能够进行的情况下(S8311),将指定的频道进行画面显示。在不能进行的情况下,变更为无线LAN转送模式(S8313)。此外,在应答信息中包含有在BS等的移动AV终端中原本不能接收的频道信息的情况下(S8314),也同样变更为无线LAN转送模式。在包含在应答中的信息不是频道信息的情况下,变更为无线LAN接收模式(S8315)。
图94是说明移动AV终端的递交运动图像的模式下的处理的流程图。在递交运动图像的模式的情况下,移动AV终端将包括递交运动图像的命令及想要递交的运动图像的信息的运动图像交接请求保存到自身的RFID的存储器内。用户使本终端的RFID向其他终端的RF-ID接近(S8320),将运动图像交接请求向其他终端发送(S8321)。此时,如果从其他终端接收到运动图像交接应答(S8322),则根据包含在应答内的信息进行处理。在没有得到应答的情况下,显示无应答的错误画面,结束处理(S8323)。在应答是不能交接的应答的情况下(S8324),显示不能交接的错误画面,结束处理(S8325)。在可以交接且以地面波接收交接的运动图像的情况下(S8326),停止地面波广播的画面显示。在不是这样的情况下,根据接收的方式的种类进行由无线LAN接收的运动图像的结束处理(S8327),停止画面显示。另外,画面显示的停止也可以按照递交运动图像侧的终端的指示,也可以切换为初始画面等的别的画面(S8328)。
图95是说明移动AV终端的无线LAN转送模式下的处理的流程图。假设移动AV终端是能够接收地面波、但不能接收卫星广播及线缆TV的广播的终端。为了接收这些广播波,需要用能够接收的别的终端接收、用无线LAN转送来。移动AV终端如果成为无线LAN转送模式,则调用无线LAN转送对应设备的信息。如果没有保持对应设备的信息(S8340),则进行对应设备的搜索(S8341)。如果在宅内不能发现无线LAN转送对应设备,则显示不能进行对应的频道交接的错误画面(S8342)。在发现了无线LAN转送设备或原本保持有对应设备信息的情况下,对该设备发送对应频道的运动图像转送请求(S8344)。在从转送设备返回了能够转送运动图像的应答的情况下,将指定的频道的运动图像包通过无线LAN接收(S8345),将指定的频道的运动图像进行画面显示(S8346)。
图96是说明移动AV终端的无线LAN接收模式下的处理的流程图。在无线LAN接收模式下、在运动图像交接应答之中包含有运动图像服务器的IP地址、运动图像的ID及显示时间信息的情况下(S8360),对运动图像服务器进行访问。首先,确认运动图像服务器的IP地址与本终端的IP地址是否是同一子网(S8361)。在是与本终端的IP地址为同一子网的情况下,对运动图像服务器发送包括运动图像ID和显示时间的运动图像发送请求(S8364)。另外,在有延迟时间修正功能的情况下(S8362),将运动图像发送请求内的显示时间信息修正(S8363)。这里,所谓显示时间修正功能,是指为了考虑到处理所花费的各种延迟、进行高效率的运动图像转送而进行的修正功能。进而,在移动AV终端不能从运动图像服务器接收运动图像的情况下(S8365),也可以再发送运动图像发送请求。在再送超时超过规定次数也得不到应答的情况下(S8366),显示无服务器应答错误画面(S8367)。在接收到的运动图像数据的时间与想要显示的时间不一致的情况下(S8368),使用快进或回退的控制包使其与想要显示的时间一致(S8369)。然后,移动AV终端进行运动图像的画面显示。
图97是说明在运动图像交接应答中包含有URL的情况下的处理的流程图。在包含有URL的情况下(S8380),进行通过DNS的名称解析,取得运动图像服务器的IP地址(S8381)。另外,运动图像的URL只要是为运动图像服务用而附加的名称,是什么都可以。此外,设名称解析还包括从DNS以外的服务识别符向终端识别符的变换。在所取得的运动图像服务器的IP地址与本终端的IP地址相同的情况下,回到在图96中说明的处理。在不是同一子网的情况下,转移到向子网外服务器的连接处理。在应答信息中没有包含有希望的信息的情况下,显示应答信息不正确的错误画面。
图98是说明运动图像服务器的IP地址与本终端的IP地址之间子网不同的情况下的处理的流程图。在子网不同的情况下,搜索别的无线接入点。在宅内没有别的接入点的情况下,认为运动图像服务器是宅外服务器,转移到宅外服务器的连接处理。在有别的接入点的情况下(S8390),对该接入点进行再连接,取得具有别的子网的IP地址(S8391)。如果运动图像服务器的子网与所取得的IP地址的子网相同(S8392),则转移到宅内服务器的处理。在本终端连接到可访问的宅内接入点、取得了IP地址、但子网不相同的情况下(S8393),转移到向宅外服务器的访问处理。另外,对全部接入点的IP地址的取得处理既可以在事前进行,也可以在移动AV终端内管理。
图99是说明向宅外服务器访问的情况下的处理的流程图。在运动图像服务器的地址不是全局地址的情况下(S8400),将地址错误画面显示(S8401)。在不知道向指定的运动图像服务器的访问方式的情况下(S8402),将访问方式不明错误画面显示(S8403)。另外,假设宅内运动图像服务器及宅内运动图像设备依据DLNA。在知道访问方式的情况下、并且在具备与宅内服务器同样的功能的情况下,进行与宅内服务器同样的处(S8404)。在不是那样的情况下,通过对应于访问方式的处理取得运动图像(S8405),将接收到的运动图像画面显示(S8406)。
图100是说明TV的处理的流程图。将其他终端的RFID向TV本终端的RFID接近(S8410),TV接收运动图像交接请求(S8411)。在本终端正在接收运动图像的过程中(S8412)、且在运动图像交接请求内包含有运动图像接受命令的情况下(S8413),将本终端转移为递交运动图像的模式(S8414)。在尽管不是运动图像接收中、但在运动图像交接请求内包含有运动图像接受命令的情况下(S8415),返送不能进行运动图像交接的运动图像交接应答(S8416),显示不能交接的错误画面(S8417)。在接收的运动图像是地面波的情况下(S8418),在运动图像交接应答中装入频道信息而返送(S8419),将画面显示消除(S8420)。
图101是说明接收中的运动图像不是地面波的情况下的处理的流程图。在接收的运动图像是地面波以外的广播运动图像的情况下(S8430),在运动图像交接应答中装入频道信息而返送。在有无线LAN转送模式的情况下,也可以装入本终端的IP地址(S8431)。在返送后将画面显示消除(S8432)。在其他运动图像的情况下,在交接应答中装入运动图像服务器IP地址、运动图像ID、运动图像显示时间或运动图像URL、运动图像显示时间而返送(S8433)。在返送后进行通过无线LAN的运动图像通信的结束处理(S8434),将画面显示消除。
图102是说明在运动图像交接应答中包含有运动图像递交命令的情况下的处理的流程图。在显示运动图像的过程中接收到运动图像递交命令的情况下,在有2画面显示功能的情况下(S8440),转移到接受运动图像的模式(S8441)。在没有的情况下,显示是否接受运动图像的选择画面(S8442)。在选择了接受运动图像的情况下(S8443),转移到运动图像接受模式。在选择了不接受运动图像的情况下,返送不能进行运动图像交接的运动图像交接应答(S8444)。在包含在请求中的信息是频道信息的情况下(S8445),将指定的频道画面显示(S8446)。在包含在请求中的信息是运动图像服务器的IP地址或URL的情况下(S8447、S8448),进行与移动AV终端的运动图像接受模式相同的动作。在不包含有这些信息的情况下,显示信息错误画面(S8449)。
进而,作为本实施方式的应用例,可以考虑以下的方式。
以由有关本实施方式的接收部8080从TV1(45)接受的运动图像交接应答包含运动图像信息的结构实施,但并不需要一定是这样的结构。在运动图像交接应答中也可以包含运动图像服务器与TV间的运动图像再现延迟时间。
由此,减小由移动AV终端8006承接运动图像再现时的与TV1(45)的再现位置的差异,能够期待更没有间断的运动图像再现承接。
以下,表示在本实施方式的运动图像交接应答中包含运动图像再现延迟时间的结构的情况。
图103是将由TV再现中的运动图像向移动AV终端承接的情况下的概要图。
使用图104~图110,说明用NFC从TV向移动AV终端承接运动图像再现的次序。
在步骤7508a中用户进行遥控器等的操作,或者,用户保持的移动AV终端检测自终端的位置,自动地使TV的电源接通。
在步骤7508b中确认是否将保存在记录机中的运动图像再现,在“是”的情况下,向圈1前进。
在“否”的情况下向步骤7508c前进,确认是否将处于Web上的运动图像再现,在“是”的情况下向圈2前进。
在“否”的情况下向步骤7508d前进,确认是否将广播中的节目再现,在“是”的情况下向圈4前进。在“否”的情况下向步骤7508b返回。
TV从圈1起,在步骤7508e中对记录机请求所保存的运动图像一览表,在步骤7508f中确认是否接收到运动图像一览表。
在“是”的情况下向步骤7508g前进,向记录机发送要再现的运动图像的发送请求。要再现的运动图像通过由用户在画面上选择想要再现的运动图像来决定。
在步骤7508f中为“否”的情况下,待机直到从记录机发送运动图像一览表。
在步骤7508h中从记录机开始在上述步骤7508g中请求的运动图像的流动(streaming),确认TV是否开始接收,在“是”的情况下向圈4前进。
在步骤7508h中为“否”的情况下,待机直到由TV开始接收运动图像流。
记录机在步骤7510a中确认是否从TV有运动图像一览表的请求,在“是”的情况下向步骤7510b前进,对TV发送记录机持有的运动图像一览表。
在步骤7510c中确认是否从TV有记录机持有的运动图像的流请求,在“是”的情况下向步骤7510d前进,对TV开始运动图像的流动,向圈7前进。
在步骤7510a中是“否”的情况下,待机直到从TV有运动图像一览表的请求。在步骤7510c中是“否”的情况下,待机直到从TV有运动图像的流请求。
TV从圈2起,在步骤7509a中确认为了向Web上的运动图像服务器访问是否需要认证,在“是”的情况下向步骤7509b前进,对Web上的运动图像服务器发送ID和口令。在“否”的情况下,不需要运动图像服务器的认证,所以向步骤7509d前进。
在步骤7509c中,TV确定是否从运动图像服务器有认证完成通知,在“是”的情况下,向步骤7509d前进,对运动图像服务器请求运动图像一览表。在步骤7509e中为“否”的情况下,由于从运动图像服务器接收到否认通知,所以向步骤7509d返回,再次实施向运动图像服务器的认证。
在步骤7509e中,TV确认是否接收到了运动图像一览表,在“是”的情况下,在步骤7509f中将要再现的运动图像的流识别符和再现时间向运动图像服务器发送。要再现的运动图像通过由用户从显示在画面上的运动图像一览表中选择来决定。
在步骤7509g中,TV确认是否开始接收来自运动图像服务器的运动图像流,在“是”的情况下向圈4前进。在“否”的情况下,待机直到开始来自运动图像服务器的运动图像流动。
在步骤7513a中,Web上的运动图像服务器确认是否接收到从TV发送的ID、口令,在“是”的情况下向步骤7513b前进,确认从TV接收到的ID、口令,确认是否认证,在“是”的情况下向步骤7513d前进,将认证完成通知向TV发送。在步骤7513a中为“否”的情况下向步骤7513a返回,待机直到从TV发送ID、口令。在步骤7513b中为“否”的情况下向步骤7513c前进,对TV发送否认证通知,向步骤7513a返回。
在步骤7513e中确认是否从TV有运动图像一览表的请求,在“是”的情况下,对TV发送Web上的运动图像服务器持有的运动图像的一览表。在运动图像一览表中,包含各运动图像的流(streaming)识别符。在步骤7513e中为“否”的情况下,待机直到从TV有运动图像一览表的请求。
在步骤7513g中确认是否从TV有运动图像服务器持有的运动图像的流请求,在“是”的情况下向步骤7513h前进,对TV开始运动图像流动,向圈3前进。在步骤7513g中为“否”的情况下,待机直到从TV有运动图像服务器持有的运动图像的流请求。
TV从圈4起,在步骤7508i中开始接收到的运动图像的再现,在步骤7508j中确认是否从移动AV终端向TV的NFC数据有访问,在“是”的情况下向步骤7508k前进,将存储在TV的NFC存储器中的内容向移动AV终端发送,向圈6前进。在步骤7508j中为“否”的情况下,待机直到从移动AV终端向TV的NFC数据有访问。在TV的NFC存储器中,包含自设备ID和自设备的位置信息。
移动AV终端在步骤7511a中为了TV的NFC数据读入而开始轮询,在步骤7511b中,移动AV终端使用者将移动AV终端向TV接触,从而确认移动AV终端是否检测到NFC的读入,在“是”的情况下,向步骤7511c前进。在步骤7511b中为“否”的情况下,待机直到移动AV终端使用者将移动AV终端向TV接触从而移动AV终端检测到NFC的读入。
在步骤7511c中,移动AV终端确认是否从TV取得TV持有的自设备的位置信息,在“是”的情况下,确认在从TV接收到的NFC存储器的存储内容中是否包含位置信息,在“是”的情况下向步骤7511g前进,将位置信息存储到移动AV终端的存储器中,向圈5前进。在步骤7511c中为“否”的情况下,由于TV没有持有位置信息,所以向步骤7511e前进,移动AV终端确认是否持有位置信息,在“是”的情况下向步骤7511g前进。在步骤7511e中为“否”的情况下向步骤7511f前进,确认是否能够从云服务取得位置信息,在“是”的情况下,移动AV终端从已知的云服务基于TV的设备ID取得TV的位置信息,向步骤7511g前进。在“否”的情况下向圈5前进。
另外,在步骤7511e或步骤7511f中在位置信息取得中需要时间,所以在不能实施步骤7511g的情况下,也可以在这些步骤的实施前向圈5以后的步骤前进,在取得位置信息后实施步骤7511g。
TV从圈6起,在步骤7508m中确认是否从移动AV终端接收到运动图像交接请求,在“是”的情况下向步骤7508n前进,生成运动图像交接应答,向移动AV终端发送。关于向移动AV终端发送的应答内容,将作为运动图像服务器的记录机的IP地址、在Web的运动图像的情况下将运动图像取得用URL、由TV当前再现中的运动图像流识别符、再现时刻PST1、以及TV与运动图像服务器间的运动图像再现延迟时间D1、以及为了向运动图像服务器访问而需要的认证ID、口令包含在应答内容中。在“否”的情况下,待机直到从移动AV终端接收到运动图像交接请求。
移动AV终端从圈5起,在步骤7511h中确认是否接受到由TV再现中的运动图像,在“是”的情况下向步骤7511i前进,生成运动图像交接请求,向TV发送,在步骤7511j中确认是否从TV接收到了运动图像交接应答,在“是”的情况下向步骤7511k前进。
在步骤7511m中,从图4016的表取得移动AV终端与运动图像服务器间的运动图像再现延迟时间D2,确认交接的运动图像的分发源是否是记录机,在“是”的情况下向圈8前进。在步骤7511h中为“否”的情况下,不进行运动图像的接受而结束。另外,延迟时间的计算方法除此以外还可以考虑网络延迟、由收发设备的执行状态带来的延迟、由收发设备的性能带来的延迟、由接收的各运动图像格式的处理带来的延迟等而进行。
在步骤7511j中为“否”的情况下向步骤7511i返回,再次生成运动图像的交接请求,向TV发送。在步骤7511m中为“否”的情况下向圈9前进。
移动AV终端从圈9起,在步骤7511r中确认是否需要向运动图像服务器的认证,在“是”的情况下向步骤7511s前进,将从TV接收到的运动图像服务器的认证ID、口令发送。在步骤7511r中为“否”的情况下,不实施向运动图像服务器的认证处理,向圈8前进。
在步骤7511t中确认是否从运动图像服务器有认证完成通知,在“是”的情况下向圈8前进。在步骤7511t中为“否”的情况下,向步骤7511s返回,再次实施向运动图像服务器的认证。
Web上的运动图像服务器从圈3起,在步骤7513j中确认是否从移动AV终端接收到认证ID、口令,在“是”的情况下向步骤7513k前进,确认是否认证从移动AV终端接收的ID、口令,在认证的情况下向“是”的圈7前进。在步骤7513j中为“否”的情况下向步骤7513j返回,待机直到接收到从移动AV终端发送的认证ID、口令。在步骤7513k中为“否”的情况下,向步骤7513m前进,将否认证通知向移动AV终端发送,向步骤7513j返回,待机直到接收到从移动AV终端发送的认证ID、口令。
记录机或Web上的运动图像服务器从圈7起,在步骤7510e中确认是否接收到从移动AV终端发送的运动图像交接请求,在“是”的情况下向步骤7510f前进,对移动AV终端开始运动图像流动。在步骤7510e中为“否”的情况下向步骤7510e返回,待机直到接收到从移动AV终端发送的运动图像交接请求。
在步骤7510g中确认再现中的运动图像是否到达了末端、或者从移动AV终端是否有再现结束通知,在“是”的情况下将对移动AV终端的运动图像流处理停止而结束。在“否”的情况下,继续运动图像的再现,直到再现中的运动图像到达末端、或者从移动AV终端有再现结束通知。
移动AV终端从圈8起,在步骤7511m中计算从TV交接来的运动图像的移动AV终端中的再现开始时刻PST2(计算式为{(D2-D1)+D1}+PST1),在步骤7511n中向运动图像服务器发出运动图像发送请求。在请求内容中包含运动图像流识别符和再现开始时刻PST2。
在步骤7511p中确认是否从运动图像服务器接收到运动图像流,在“是”的情况下向步骤7511q前进,由移动AV终端开始运动图像再现。在“否”的情况下,待机直到从运动图像服务器接收到运动图像流。
在步骤7510g中,确认再现中的运动图像是否到达了末端、或者是否从移动AV终端对记录机或Web上的运动图像服务器发送了再现结束通知,在“是”的情况下结束移动AV终端中的运动图像再现。在“否”的情况下,继续运动图像的再现,直到再现中的运动图像到达了末端、或者移动AV终端检测到再现结束。
进而,作为本实施方式的应用例,可以考虑以下的方式。
由有关本实施方式的接收部8080从TV1(45)接受的运动图像交接应答在由移动AV终端8006和TV1(45)的RFID标签读写器进行近距离无线通信时实施,但并不需要一定是这样的顺序。
也可以是,移动AV终端8006掌握自终端的位置和TV1(45)的位置,在移动AV终端8006和TV1(45)的位置背离一定以上的情况下接收运动图像交接应答。
由此,能够进行运动图像再现设备的切换,能够期待能够用与用户的所处场所对应的终端或设备承接运动图像再现而视听。关于各设备的位置取得,在实施方式19中表示详细情况,所以这里仅表示概要。此外,也可以在TV1(45)与移动AV终端8006间进行的运动图像交接应答时包含运动图像服务器和自设备的运动图像再现延迟时间。通过使用运动图像再现延迟时间,能够减少在TV1(45)与移动AV终端8006间承接运动图像再现时的再现开始位置的差异,期待更没有间断的运动图像再现承接。
以下,表示在本实施方式的运动图像交接应答中包含的结构的情况。
图111是表示TV与移动AV终端间的再现运动图像承接的概要图。表示按照移动AV终端的位置的再现目标设备变更及由各设备承接的内容(声音、影像)被变更。
在图113~图118中,说明由移动AV终端承接由TV再现中运动图像的次序。
起居室的TV在步骤7505a中开始TV中的运动图像再现,在步骤7505b中将运动图像再现开始通知广播。
在步骤7505c中,对移动AV终端的广播返回应答,向圈1前进。
移动AV终端在步骤7505d中进行自终端的移动检测等待或从TV的运动图像再现开始通知等待。在步骤7505e中确认是否检测到移动,在“是”的情况下向步骤7505g前进,取得自终端的移动目标的位置。
在步骤7505e中为“否”的情况下向步骤7505f前进,确认是否进行了再现开始通知接收,在“是”的情况下向步骤7505g前进,取得自终端的移动目标的位置。在“否”的情况下向步骤7505d返回。
在步骤7505h中,对处于周边的设备搜索运动图像再现中的设备。
在步骤7505i中确认是否发现了运动图像再现中的设备,在“是”的情况下向圈2前进。在步骤7505i中为“否”的情况下向圈3前进。
移动AV终端从圈2起,在步骤7506a中取得所发现的设备的位置信息。设备的发现方法除了广播以外,还可以通过由邻近接触通信接触来发现。此外,发现设备的位置信息取得可以通过基于在7505c中从TV接收到的广播应答中包含的设备ID、再次向TV询问或向云服务询问的方法来取得。
在步骤7506b中,确认自终端的位置是否处于发现的设备的运动图像承接对象范围内。在步骤7506b中为“是”的情况下向步骤7506d前进,将作为运动图像承接源的设备发现的设备存储,向圈6前进。在步骤7506b中为“否”的情况下向步骤7506c前进,确认是否有别的发现设备,在“是”的情况下向步骤7506a返回。在步骤7506c中为“否”的情况下向圈5前进。
移动AV终端从圈3起,在步骤7507a中确认在宅内是否有多个接入点,在“是”的情况下向步骤7507b前进。
在步骤7507b中确认是否有未搜索的接入点,在“是”的情况下向步骤7507d前进,将当前的接入点存储为已搜索,在步骤7507e中切换为别的接入点,向圈4前进。
在步骤7507a或步骤7507b中为“否”的情况下向步骤7507前进,将存储为已搜索的接入点清空,向圈5前进。
起居室的TV从圈1起,在步骤7508a中接收声音交接请求,在步骤7508b中发送交接应答,向圈7前进。
移动AV终端从圈6起,在步骤7508c中等待自终端的移动检测,在步骤7508d中检测到自终端的移动的情况下,在步骤7508e中轮询自终端的位置。在步骤7508f中,确认承接源TV是否处于定义的声音承接范围内。在“是”的情况下向步骤7508g前进,对承接源TV请求再现中运动图像的声音交接,在步骤7508h中接收交接应答,向圈9前进。
在步骤7508f中为“否”的情况下向步骤7508i前进,确认承接源TV是否处于定义的影像、声音承接范围内。
在“是”的情况下向圈8前进。在“否”的情况下向步骤7508e返回。
起居室的TV从圈7起,在步骤7509a中接收运动图像(影像声音)的交接请求,在步骤7509b中发送交接应答,向圈10前进。
移动AV终端从圈8起,在步骤7509c中对承接源TV请求再现中运动图像的交接,在步骤7509d中接收交接应答,在步骤7509e中向接收信息的再现运动图像URL请求运动图像发送(包含再现位置的请求),在步骤7509f中开始从运动图像服务器接收流(在该时刻,不进行移动AV终端中的再现),向圈11前进。
TV从圈10起,如果在步骤7510a中在TV附近没有其他移动AV终端,则结束运动图像再现,在使TV的电源断开后,在步骤7510b中结束。
移动AV终端从圈11起,在步骤7510中将接收流的运动图像的声音与从终端麦克风输入的承接源TV的声音比较而求出时间差,在步骤7510d中确认TV的声音是否先被再现。
在“是”的情况下向步骤7510e前进,为了追赶TV的再现位置,将移动AV终端再现位置前进时间差的量,向步骤7510g前进。在“否”的情况下向步骤7510f前进,为了回到TV的再现位置,将动AV终端的动再现位置返回时间差的量,向步骤7510g前进。
在步骤7510g中,确认是否没有与TV的声音的差。在“是”的情况下向步骤7510j前进,在移动AV终端中将流接收中的运动图像再现,在步骤7510k中对承接源TV发出运动图像再现结束请求,在步骤7510m中结束。
在步骤7510g中为“否”的情况下向步骤7510h前进,确认是否从开始流接收起经过了一定时间以上。在“是”的情况下向步骤7510i前进,鸣响声音变小的定时或效果音,向步骤7510j前进。在步骤7510h中为“否”的情况下向步骤7510c返回。
在图119~图121中,说明将由移动AV终端再现中的运动图像向TV承接的次序。
移动AV终端在步骤7506a中开始运动图像再现,在步骤7506b中搜索处于周边的能够进行运动图像再现的承接的设备。
在步骤7506c中确认在周边是否发现了能够进行运动图像承接的设备,在“是”的情况下向圈1前进。在“否”的情况下向步骤7506d前进并结束。另外,作为能够进行运动图像承接的设备的发现方法,还有接触在卧室的TV上而通过邻近无线通信发现设备的方法。
卧室的TV在步骤7506e中对移动AV终端发送的广播作出应答,在步骤7506f中接收运动图像交接请求,向圈2前进。
移动AV终端从圈1起,在步骤7506g中取得交接目标设备的设备ID、机种,在步骤7506h中确认在图112所示的表内是否包含有交接目标设备ID。在步骤7506h中为“是”的情况下向步骤7506i前进,确认在图112中是否存在与再现中的运动图像URL相符的运动图像服务器。
在步骤7506k中,确认此次的再现承接信息的发送方法是否存在于图112中。在“是”的情况下,向步骤7506m前进,从图130的表取得对应的延迟时间。
在步骤7506p中,对当前的再现位置加上延迟时间,在步骤7506q中进行运动图像交接请求,向圈3前进。
在步骤7506h中为“否”的情况下向步骤7506j前进,确认是否是存在于图112的表中的机种,在“是”的情况下向步骤7506i前进。
在步骤7506i或步骤7506j中为“否”的情况下向步骤7506n前进。
卧室的TV从圈2起,在步骤7506r中接收交接请求,在步骤7506s中向接收信息的运动图像URL包含运动图像发送请求、再现开始位置而进行请求。在步骤7506t中,从运动图像服务器接收流,向画面显示,在步骤7506u中结束。
移动AV终端从圈3起,在步骤7506v中用移动AV终端的麦克风取得所交接的运动图像被TV再现的声音,在步骤7506w中,根据所取得的声音,计算从运动图像交接请求时刻到由TV开始运动图像再现为止的延迟时间,在步骤7506x中将图112的对应的延迟时间更新,在步骤7506y中结束。在步骤7506x中将延迟时间更新时,在已有的表数据内没有更新的对应部位的情况下,新制作表的项目,进行追加。
进而,作为本实施方式的应用例可以考虑以下的方式。
有关本实施方式的设备结构通过TV1(45)和移动AV终端8006中的数据的交接来实施,但并不需要一定是这样的结构。也可以用搭载有RFID标签读写器的两台不同的移动AV终端进行数据的交接。
由此,能够期待在搭载有RFID标签读写器的设备间能够不限于运动图像再现数据而实现各种各样的数据交换。作为在设备间交换的数据的例子,通过从TV等的固设设备取得位置信息,移动AV终端能够确定及修正自终端的位置。关于设备间的位置信息的交换,在实施方式19中表示详细情况。
以下,表示本实施方式的移动AV终端间的数据交换。
图122是表示使用NFC的移动AV终端间的数据交换的概要图,表示通过NFC通信及高速无线通信进行的数据的交换。
图123~图126是表示使用NFC通信或高速无线通信进行的移动AV终端间的数据交换的顺序图。
图123在由移动AV终端1将数据交换用的应用启动后,在移动AV终端间通过NFC通信交换用来建立高速无线通信的连接的数据。移动AV终端2根据从移动AV终端1指定的应用的有无来启动应用,或者在从规定的场所取得应用后进行应用的启动。然后,使用高速无线通信将各移动AV终端持有的数据交换。
此外,在图123中,移动AV终端1向移动AV终端2发送的数据也可以为包含如下信息的机构,该信息为:指定由移动终端2启动的应用的信息,或为了显示能够处理从移动AV终端1发送的交换数据的移动AV终端2所保持的应用一览而需要的应用的类别信息。
在此情况下,在移动AV终端2上显示图139那样的画面,移动AV终端2的操作者能够选择要启动的应用。
通过发送类别信息,能够由移动AV终端2的操作者喜欢的应用处理交换的数据。
具体而言,例如如果在交换数据中包含有“URL”的类别,则在移动终端2中,显示能够处理URL的应用一览,例如浏览器或文本编辑器等。
此外,该类别信息既可以从移动AV终端1明示地、如图138A及图138B所示的数据类型那样发送“URL”、“图像”等类别信息,或者也可以是移动AV终端1发送要启动作为候选的应用的消息,移动AV终端2根据接收到的信息,例如在判断为是URL的情况下将能够处理URL的应用一览如图139那样显示。
图124~图126与图123同样,通过NFC通信进行应用的启动。由于应用启动后的数据交换方法不同,所以以下进行说明。
图124仅使用NFC通信进行各移动AV终端持有的数据的交换。图125在移动AV终端1取得保存在服务器等中的数据后,向移动AV终端2发送。图126使用NFC通信发送存放有从移动AV终端1向移动AV终端2交接的数据的服务器等的URL,移动AV终端2从服务器将交接数据下载。
图127及图128是使用NFC通信及高速无线通信进行数据交换时的终端画面流程图。图129及图130是使用NFC通信进行数据交换时的终端画面流程图。
使用图131~图136、图138A及图138B说明移动AV终端间的数据交换次序。图137是表示使用在图138A及图138B中表示的NFC的数据交换时的通信格式的图。
移动AV终端1在步骤7501a中进行数据交换用应用的启动,在步骤7501b中开始NFC轮询。
在步骤7501c中与移动AV终端2接触,在步骤7501d中接收轮询应答,在步骤7501e中请求数据交换,在步骤7501f中接收对请求的应答,向圈1前进。
移动AV终端2在步骤7501g中与移动AV终端1接触,在步骤7501h中进行轮询应答,在步骤7501i中接收数据交换请求,在步骤7501j中在画面上显示有请求的情况。在步骤7501k中,用户输入对请求的应答内容,在步骤7501m中确认是否接纳请求。在“是”的情况下向步骤7501n前进,进行数据交换请求接纳应答,向圈2前进。
在“否”的情况下向步骤7501p前进,进行数据交换请求拒绝应答,在步骤7501q中结束。
移动AV终端1从圈1起,在步骤7502a中确认是否进行接纳应答。在“是”的情况下向步骤7502c前进,等待高速无线通信连接,在步骤7502e中接收连接请求。
在步骤7502f中确认是发出了数据交换请求的终端,在步骤7502g中确认是否是移动AV终端2。在“是”的情况下向步骤7502i前进,发出连接许可,向圈3前进。
在步骤7502a中为“否”的情况下向步骤7502b前进,在画面上显示应答拒绝,在步骤7502d中结束。在步骤7502g中为“否”的情况下向步骤7502h前进,发出连接拒绝通知,向步骤7502c返回,或向步骤7502p前进。
移动AV终端2从圈2起,在步骤7502j中,将接收到的消息的各记录的内容向存储器保存,在步骤7502k中确认在同一网络上是否有移动AV终端1,在“是”的情况下向圈前进。
在“否”的情况下向步骤7502m前进,根据图136所示的设备信息,向对应的高速无线发出连接请求,在步骤7502n中等待连接应答,在步骤7502p中接收连接应答,向圈4前进。
移动AV终端1从圈3起,在步骤7503a中完成高速无线通信的连接,向圈7前进。
移动AV终端2从圈4起,在步骤7503b中完成高速无线通信的连接。在步骤7503c中将经由NFC接收到的图138A及图138B的数据取出,在步骤7503d中确认指定的应用包是否已安装,在“是”的情况下向圈6前进。
在“否”的情况下向步骤7503e前进,确认是否有与所指定的应用组相符的应用。在“是”的情况下向步骤7503i前进,确认符合的应用是否有多个,在“是”的情况下向步骤7503j前进,对用户显示询问启动哪个应用。
在步骤7503k中受理用户指定的应用,向圈6前进。
在步骤7503e中为“否”的情况下向步骤7503f前进,确认是否有关于URL等的应用取得方法的数据。在“是”的情况下向圈8前进。在“否”的情况下向步骤7503g前进,在将应用不能启动的情况向用户通知后,结束。在步骤7503i中为“否”的情况下向圈5前进。
移动AV终端1从圈7起,在步骤7504a中选择交换的数据,在步骤7504b中确认是否实施了发送命令。在“是”的情况下向步骤7504c前进,进行数据发送。
在步骤7504d中,在画面上呈现发送中显示,在步骤7504e中确认是否发送完成。在“是”的情况下向步骤7504f前进,确认是否结束应用,在“是”的情况下在步骤7504g中结束。
在步骤7504b中为“否”的情况下向步骤7504a返回。
在步骤7504e中为“否”的情况下向步骤7504d返回。
在步骤7504f中为“否”的情况下向步骤7504a返回。
移动AV终端2从圈5起,在步骤7504h中将浏览器启动,将指定的URL打开,在步骤7504i中实施应用的下载和安装。并且,在步骤7504j中启动应用,在步骤7504k中进行数据接收等待。
在步骤7504m中确认是否接收到数据。在“是”的情况下向步骤7504n前进,在画面上呈现接收中显示,在步骤7504p中确认是否接收完成,在“是”的情况下向步骤7504q前进。
在步骤7504q中确认应用是否结束,在“是”的情况下向步骤7504r前进并结束。
在步骤7504m中为“否”的情况下,向步骤7504k返回。
在步骤7504p中为“否”的情况下,向步骤7504n返回。
在步骤7504q中为“否”的情况下,向步骤7504k返回。
移动AV终端2从圈6起,在步骤7504j中将应用启动。
(实施方式9)
图140是在TV1(45)从运动图像服务器1(8004)接收运动图像的情况下、且在移动AV终端8006从其交接该运动图像的情况下,从TV1(45)发送运动图像发送请求的情况下的次序图。与图91同样,用户为了交接运动图像而接通移动AV终端8006的电源。移动终端搜索无线LAN的接入点8009而建立无线连接。进而,通过DHCP等取得IP地址,建立IP连接。用户按下运动图像交接按钮,在RFID的存储器内制作运动图像交接请求。此时,在运动图像交接请求中装入本终端的IP地址而制作。进而,用户使移动AV终端的RFID8007与TV1的RFID46接近,将运动图像交接请求向TV1(45)发送。TV1返回包括运动图像服务器的IP地址的运动图像交接应答。这是为了提高安全性(防止从无关系的终端的随意的访问),可以省略。另外,与图91同样,在运动图像被加密的情况下同时交换需要的安全关联信息(密钥等)。接收到运动图像交接请求的TV1(45)对运动图像服务器1(8004)发送包括移动AV终端8006的IP地址的运动图像发送请求。接收到运动图像发送请求的运动图像服务器1(8004)将运动图像的发送目标变更为移动AV终端8006。然后的处理与图91同样。
图141是在与图92同样的情况下、在运动图像交接请求中发送运动图像服务器1(8004)的IP地址的情况。这与图102同样能够省略。接受到运动图像交接请求的TV2(8003)返回包括本终端的IP地址的运动图像交接应答。接受到运动图像交接应答的移动AV终端8006对运动图像服务器1(8004)发送包括TV2的IP地址的运动图像发送请求。接收到运动图像发送请求的运动图像服务器1(8004)将运动图像的发送目标变更为TV2(8003)。然后的处理与图91同样。
(实施方式10)
图142是表示不是使用移动AV终端8006、而使用具备RFID的遥控器8200的情况下的次序图。这里,设想遥控器为不具有显示部、但具有RFID的收发部和存储器的终端。用户按下运动图像交接按钮,在RFID的存储器内制作运动图像交接请求。进而,用户使遥控器的RFID与TV1的RFID46接近,将运动图像交接请求向TV1发送。在TV1中,通过接收请求命令,制作运动图像交接应答(包括运动图像服务器1的IP地址和运动图像识别符、运动图像显示时间),向遥控器返送。接受到来自遥控器的运动图像交接请求的TV1(45)将运动图像停止请求向运动图像服务器1(8004)发送。用户在移动到2F后,使遥控器的RFID接近于TV2的RFID,发送运动图像交接应答(包括运动图像服务器1的IP地址和运动图像识别符、运动图像显示时间)。接收到运动图像交接请求的TV2(8003)返送运动图像交接应答,对运动图像服务器1发送运动图像发送请求(包括运动图像识别符、运动图像显示时间)。运动图像服务器1(8004)将指定的运动图像从指定的时间的数据开始发送。
(实施方式11)
图143是能够从运动图像服务器1同时发送的情况下的次序图。移动AV终端在与TV间进行规定的交换后,发送运动图像发送请求。运动图像服务器1(8004)在接受到运动图像发送请求的情况下,暂时向TV1(45)和移动AV终端(8006)的两者发送运动图像数据。这是为了完全不间断的情况下的处理。移动AV终端和TV1既可以暂时向两者都进行画面显示,也可以进行某种同步处理而进行完全不间断处理。运动图像服务器1(8006)基于来自移动AV终端(8006)的运动图像停止请求停止TV侧的运动图像数据转送。另外,既可以从TV1(45)发出停止请求,也可以运动图像服务器1(8006)自动地停止。
(实施方式12)
本实施方式说明用于在由实施方式1~10说明的赋予了RFID的设备的从工厂出货到使用环境的流通方式中确保可跟踪性的方法的优选的方式。
近来,基于流通的高效化及家电商品的陈旧化为原因的事故多发的背景,进行了用于确保在从生产、流通到消费者的使用环境进行跟踪的所谓可跟踪性的研究。
作为其中之一,进行将使用860~900MHz带的通信频率的无源型的RFID附加在包装体或搬运箱等上,从而能够管理从生产到零售店的流通的尝试。860~900MHz带也称作UHF(Ultra High Frequency)带,UHF带的RFID是在无源型(从外部向标签侧供给电源者)之中最能够确保通信距离的应用,虽然也取决于输出的大小,但能够进行2~3m的通信。由此,通过在搬运中将多台同时装入到RFID读出门中,能够高效率地瞬间读出多台的RFID信息,特别可以期待流通现场中的使用。
但是,这样的UHF带的RFID有能够长距离通信的优点,但另一方面,由于附加在包装体或搬运箱上,所以包括在达到消费者的手边后不再能够跟踪该设备的问题。此外,距离较长对于通过使设备与设备接近而引起动作的所谓在实施方式1~10中说明的实体接口、实物接口或直观接口不能说是有效的。
另一方面,在实施方式1~10中说明的RFID(47)设想了13.56MHz带的HF-RFID(当然并不仅限于此)。HF-RFID的特征是近距离通信(根据输出而不同,但大致是几十cm以内),广泛用在例如作为通过接近而直观地引起动作的应用的电子钱币、检票系统等中。因而,在想要将由数字照相机拍摄的照片放映在TV上时等,通过将数字照相机向TV的RFID读写器46靠近,能够实现实体(照相机)与实体(TV)联动动作的实体接口、及将数字照相机的照片放映在TV上的直观的接口。
在本实施方式中,公开了与实施方式1~10同样对设备附加HF-RFID、并且对设备的包装体或搬运箱附加UHF-RFID、使得即使达到消费者的使用环境也进行商品的跟踪的技术。
图144是表示设备从工厂出货时HF-RFID和UHF-RFID的动作的概念图。
在本实施方式中,对设备是记录机的情况进行了说明,但设备是数字家电、食品等怎样的都可以。
对在制造生产线中组装成的设备M003赋予HF-RFIDM001。此外,在本HF-RFID中具有存储器,是从设备M003和从RFID的通信部的哪一方都能够访问的双重接口的结构。此外,在HF-RFIDM001的存储器中,在组装阶段中,记录有设备的制造号码、以及用于将设备的制造号码复制到UHF-RFID中的程序(命令)。
如果设备M003的组装完成,则在包装前通过手持型读写器M002从HF-RFID的存储器读出制造号码,并且在包装体等上记录表示附加了UHF-RFID的UHF-RFID的设备ID(UHF-RFID固有信息)。
接着,在将设备M003包装后,对包装体M004附加UHF-RFIDM005。UHF-RFIDM005既可以对包装体原样附加,也可以是附加到管理表等中的方式。如果被附加UHF-RFIDM005,则将从设备M003的HF-RFIDM001读出的制造号码等通过手持型读写器M002记录到UHF-RFIDM005中。本实施方式的手持型读写器M002是能够访问HF-RFID及UHF-RFID的设备。
如果这样,则将设备M003的制造号码记录到HF-RFIDM001中,并且将与其相同的信息也记录到包装体M004的UHF-RFIDM005中。因而,在包装后的流通中,不再需要从仅能够近距离访问的HF-RFID读出制造号码等,通过使多个同时通过门,能够从UHF-RFID直接读出,能够实现流通的高效化。
此外,由于在设备M003到达消费者的使用环境后也能够将HF-RFID通过TV遥控器等读出,所以不仅是流通、连达到消费者的手边的设备也能够跟踪,能够实现流通的高效化、以及将因设备使用中的老化造成的事故等防止于未然的总的可跟踪性。
图145是表示能够从UHF-RFIDM005访问的存储器的记录格式的概念图。
在UHF-RFIDM005的存储器中,记录有UHF设备ID1070、HF存在识别信息1071、设备制造号码、现品号码1072、日期1073、制造商1074、型号、批次号、品名1075及状态1076。
UHF设备ID1070记录在存储器的不能改写区域中,是能够按照UHF-RFID分别识别的识别信息。将UHF设备ID1070在设备M003被包装之前通过手持型读写器读出,也记录到HF-RFIDM001中。由此,即使在包装体与设备的对应关系弄错的情况下,也能够在未发生问题前进行确认而适当地进行处理。
HF存在识别信息1071是确认是否对设备M003附加了HF-RFIDM001的识别信息。在对设备附加了HF-RFID的情况下,在设备的包装时,在将从HF-RFID读出的制造号码等记录到UHF-RFID中时,将HF-RFID的存在识别信息改写为“存在”的信息。由此,仅通过确认HF存在识别信息1071,就能够判断是否进行UHF-RFID与HF-RFID的对应关系的确认工序。
设备制造号码、现品号码1072记录有从HF-RFIDM001读出的制造号码或者与制造号码建立了对应的现品号码的至少某一个。所谓现品号码,是在流通过程中使用的每个设备的号码,通过将制造号码和现品号码等同地管理,能够与制造号码唯一地进行对应建立。因此,在本实施方式中,不将这两者明确地区分使用,而作为唯一的信息进行说明。
日期1073是相当于所谓制造年月日的信息,记录有制造设备M003的日期、时间信息。它既可以由手持型读写器M002在向UHF-RFID记录制造号码的时刻进行记录,也可以是将记录在HF-RFID中的制造年月日信息读出而记录到UHF-RFID中的方式。
制造商1074是制造了设备M003的制造商识别信息,既可以在向UHF-RFID记录制造号码的时刻通过手持型读写器记录,也可以是将预先记录在HF-RFID中的信息读出而记录的方式。
型号、批次号、品名1075都与日期1073或制造商1074同样,既可以将从HF-RFID读出的信息记录,也可以是用手持型读写器记录的方式。但是,在批次号的情况下,在批次管理进行从生产到流通的一元管理的情况下,以上述哪种方法写入信息都可以,但在没有进行一元管理而在包装时不清楚生产线信息的情况下,从HF-RFID读出批次号而记录到UHF-RFID中的方法具有进行周密的管理的优点。
状态1076记录流通方式中的状态信息。即,状态信息记录工厂内保管、工厂出货、配送中心接受、配送中心出货、零售店接受等、设备的跟踪所需要的状态信息。本状态是在各流通过程中被改写的信息。
此外,在UHF-RFIDM001中记录有管理服务器特定信息1077。该管理服务器特定信息1077是与HF-RFIDM001的第2存储器52的服务器特定信息48同样的信息。在设备M003包装时从HF-RFIDM001读出而复制到UHF-RFIDM005中。由此,使用UHF-RFID的流通阶段中的管理、以及设备到达消费者的手边后的管理都能够通过同一个管理服务器一元管理。
因此,在设备M003到达消费者的手边后,如果从HF-RFIDM001读出管理服务器地址信息、对管理服务器访问、通过设备制造号码1072实施查询,则能够使由管理服务器管理的从制造到流通的跟踪信息对消费者可视化,成为提高消费者的安心、安全的因素。
图146是表示设备M003在工厂出货时从HF-RFID向UHF-RFID复制制造号码等的处理的流程的流程图。
首先,对组装成的生产物(设备M003)附加HF-RFID(M020)。在本流程图中,是在将设备M003组装后附加HF-RFID的方式,但在设备和HF-RFID都能够访问共有存储器的具有双重接口的结构的情况下,在设备M003的组装阶段中附加HF-RFID。
接着,在HF-RFID1081中记录设备M003的制造号码(M021)。这里,是在组装工序中经由手持型读写器设备M002对HF-RFIDM001记录制造号码的工序。制造号码由手持型读写器等从生产线的管理服务器等取得,通过近距离无线通信记录到HF-RFIDM001中。
在对HF-RFIDM001记录制造号码后,将设备M003包装(M022)。这里的包装,是指伴随着缓冲件等的流通用的包装及向搬运箱等的收纳。
如果包装完成,则对包装体(包括搬运箱表面、管理用标签)附加UHF-RFID(M023)。
接着,手持型读写器M002与管理服务器1085通信,由此读出与从HF-RFIDM001读出的制造号码建立了对应的现品号码(M024)。所谓现品号码,是在商品的流通中使用的管理号码,是管理服务器发行的号码,是与制造号码1对1对应的号码。
在将现品号码从管理服务器1085读出后,对于UHF-RFID,将制造号码或现品号码、以及表示对设备M003附加了HF-RFID的存在识别信息记录到UHF-RFID中(M026)。
通过以上的工序,将记录在对设备M003附加的HF-RFID中的制造号码在设备的包装后复制到UHF-RFID中。通常HF-RFID的通信距离较短,所以在包装后难以向HF-RFID访问。但是,根据本实施方式,通过向可通信距离比HF-RFID长、对包装体附加的UHF-RFID中记录制造号码或现品号码,能够进行包装后的设备的流通管理。
此外,设备到达消费者的地点,即使包装体等被丢弃,通过向附加在设备上的HF-RFID访问,也能够读出制造号码等,能够将从流通到消费者的手边一元地管理,能够实现较大范围内的可跟踪性。
图147是表示设备M003的流通过程中的处理的流程的流程图。
首先,在设备M003从工厂出货时,通过经过手持型读写器或UHF-RFID读出门,从UHF-RFID读出制造号码或现品号码,向能够与手持型读写器或UHF-RFID读出门通信的管理服务器1085登录已出货,并且从手持型读写器或UHF-RFID读出门对UHF-RFID访问,将存储器内的状态(1076)也同样改写为已出货(M030)。
在工厂出货后,储存到配送中心等中,然后,在从配送中心出货时,通过手持型读写器或UHF-RFID读出门从UHF-RFID读出制造号码或现品号码,将已从配送中心出货的情况改写到管理服务器1085及UHF-RFID的状态(1076)中(M032)。
此外,在零售店出货时也同样,将已从零售店出货的状态改写到管理服务器1085及UHF-RFID的状态1076中(M034)。
在最终设备M003到达消费者的手边的时刻,用TV遥控器等的RFID读取部46从HF-RFID读出制造号码,与TV的识别信息建立关联而登录到管理服务器1085中(M036)。因而,在本实施方式中,也在HF-RFID的第2存储器52中预先记录有服务器特定信息48。本实施方式的服务器特定信息48是表示管理服务器1085的服务器特定信息,包括用于向管理服务器1085的连接的URL。由此,只要通过具备RF读写器的TV遥控器等将设备M003的HF-RFIDM001读出,就能够从管理服务器1085取得从生产到流通的管理信息。此外,在管理服务器1085中,通过与TV的识别信息建立对应而管理,即使不管理例如使用者的个人信息,也能够与拥有的TV建立联系,并将用户拥有的设备的列表储存到管理服务器中。
因此,在用户拥有的设备中发觉了不良状况的情况下,能够可靠地将向用户通知危险的消息用TV显示,能够将重大的事故防止于未然。
如以上这样,在本实施方式中,生产阶段中对设备附加HF-RFID、对设备的包装体附加UHF-RFID,分别具有相互的存在识别信息,并且使UHF-RFID也具有记录在HF-RFID中的制造号码及管理服务器特定信息,由此,能够提供一种对于到目前为止仅在流通中的可跟踪性,不但原样保持流通管理的方便性,而且即使到达消费者的手边也进行管理的系统。
在本实施方式中,对从制造到用户的手边的管理进行了说明,但本发明在用户进行丢弃、或再循环时也同样发挥效果。其次序也可以通过在本实施方式中说明的流程实现。
例如,在图144中,是将记录在对设备M003附加的HF-RFIDM001中的制造号码等附加到对包装后的包装体M004附加的UHF-RFIDM005中而进行工厂出货的方式,但将工厂出货设为向丢弃场的出货、或向再循环中心的出货也是同样的。如果是向丢弃场的出货,则只要在丢弃完成后在管理服务器中登录丢弃完成,就能够一元地管理商品被生产、被消费者使用、直到被丢弃。近来,由于丢弃成本的信息,非法丢弃的问题受到指责,但只要看到被非法丢弃的设备的HF-RFID或UHF-RFID,在流通阶段的哪里进行了非法丢弃就一目了然,能够减轻这样的非法丢弃的问题。
此外,在是向再循环中心的出货的情况下,在能够从HF-RFID访问的区域中记录由使用状况检测部7020检测到的使用状况信息及不良状况检测状况、总使用时间等,也能够用于是否能够再循环的判断、定价等。此外,在判断为能够再循环的情况下,能够将与管理服务器1085建立对应而管理的TV的识别信息、个人信息等的信息更新而利用。
(实施方式13)
图148表示整体的系统结构图。在卫生间的镜子部上安装有半透射式的镜子透射板。在其背侧的背面部配置有显示器、电源天线、RF的天线部。用户拿着具有RF天线的移动终端,显示某种影像信息。说明使该影像移动到镜子的显示器中的次序。图149的流程图表示该次序。首先,启动并按下终端的图像送出按钮。检查经由网络或TV频道得到的信息或数据是否显示在终端上,如果是“是”,则获得影像或数据的送出源的服务器的URL或IP地址、显示中的影像的流ID、流的再现时间信息、TV频道信息。接着,从终端的天线开始电源的发送、接收。如果使终端的天线部接触在装置侧的天线附近,则从终端侧向装置侧的天线传送电力或信号。终端将装置侧的属性信息(影像显示能力、声音能力、因特网的宅内和宅外的最大(平均)通信速度、TV频道连接的有无、因特网及通信线路的种类)经由装置侧的天线读出。
首先,在影像源为TV、装置连接在TV天线上的情况下,将TV的频道信息和TV的图像的再现显示时间经由天线向装置发送。在装置侧,将该TV频道的影像显示在画面上。在TV的情况下,不进行图像的左右反转显示。
在从终端侧接受到可供电标志的情况下,从装置向终端供给电源。
这里,回到前面的步骤,在连接在因特网上的情况下,根据装置侧的属性信息设定影像的速率、分辨率,将最适合于该设定的服务器地址、DLNA网络上的服务器ID、服务器之中的流ID、流的再现显示时间信息经由RF天线向装置侧发送。
转移到图150的流程图,在装置侧基于服务器的IP地址、流ID、流的再现显示时间显示流,以使其显示时间与显示在终端侧的影像流一致。在时间一致的阶段中,从装置的前面的显示向下个显示、即将终端的影像向装置侧不间断地转移。
如果在为了著作权保护而禁止了影像在终端和装置的两台同时显示的情况下,在装置侧的影像显示不间断地开始的时刻,通过从装置侧向终端侧发送终端的影像中止命令等的方法,将终端侧的影像显示中止。
此外,在装置从终端接受到在镜子时使左右反转的“镜子时反转识别符”的情况下,在接着的步骤中将影像的左右反转。不进行字符的左右反转。
通过以上的方法,首先最先从终端向装置供电,在装置停止的情况下使装置启动。这样实现节电。接着,如果装置开始动作,则此次从装置向终端供电。终端从服务器等接受影像数据,在先经由终端再经由网络迂回向装置侧分发影像的情况下,终端侧需要用无线LAN经由接入点将影像长时间发送。在用无线LAN传送大量的数据的情况下耗电较大,终端的电池剩余量有可能耗尽。但是,通过如实施例那样从装置向终端送电,具有防止电池的消耗的效果。此外,由于是镜子,所以人的姿势以左右反转映照。通常在牙刷的指导视频等时,右和左成为相反,学习效果下降。但是,通过左右反转而容易学习。
(实施方式14)
对本发明的实施方式14进行说明。在图151中表示在本实施方式中设想的家庭网络环境。多个家庭网络构成在各个宅内M1001、M1002、M1003,各家庭网络经由因特网M1004连接在登录服务器M1005上。另外,在家庭网络内的服务限定于宅内的情况下,登录服务器M1005也可以存在于宅内。此外,家庭网络被分割为别墅或办公室等的多个场所的情况下,或如宿舍或合住那样在1个宅内存在多个家庭网络的情况下,本发明也是有效的。在宅内存在经由路由器M1006或无线接入点(以下:无线AP)M1007等连接到因特网的TV(M1008、M1009)或DVD记录机M1010等的常时连接家电和根据需要而间接地连接到因特网的数字照相机M1011及微波炉M1012、电冰箱M1013等非常时连接家电。进而,在本实施方式中,假设便携电话M1014等的移动终端也为构成家庭网络的终端。本发明的各设备能够通过近距离无线通信设备相互进行简单的数据通信,通过近距离无线通信设备取得各设备的信息,通过家庭网络设备登录到登录服务器M1005中。
在图152中表示实施本发明的终端的硬件结构图。假设本发明的通信装置M1101作为通信设备而搭载有两个设备。1个是近距离无线通信设备M1102,一般称作Near Field Communicateion(以下:NFC)或RF标签的。另1个是家庭网络通信设备M1103,是用于宅内设备联动的无线Local AreaNetwork(以下:无线LAN)或ZigBee等的无线通信设备、Ethernet(注册商标)或Power Line Communication(以下:PLC)等的有线通信设备、以及在WiMax或3GPP等的在移动设备中使用的通信设备。进而,假设通信装置具备用户界面设备M1104。这里,所谓用户界面设备,表示按钮等的输入设备及显示器、LED等的输出设备。另外,在TV或空调等的设备中,输入输出一般通过遥控器进行,是在物理上分离的,但在本发明中为了说明的简单化而作为用户IF设备处理。
图153是说明在CPU(M1105)上动作的功能的功能块图。通信装置M1101内的设备固有ID取得部M1202取得包括登录设备M1201的设备固有ID的信息。假设登录设备将包括登录命令及设备固有ID的登录信息通过近距离无线通信设备M1102发送。从设备固有ID取得部M1202取得包括设备固有ID的登录信息,登录信息制作部M1204从家庭ID管理部M1205取得家庭ID,对从登录设备取得的登录信息附加家庭ID而制作登录信息。在作为登录信息而附加位置信息的情况下,从位置信息取得部M1206取得位置信息。这里,所谓位置信息,是指基于输入到TV中的邮政编码的住址信息或能够通过便携电话的GPS取得的地理的位置信息等,通过登录登录设备的设置位置信息等,能够使家电可跟踪性等的服务提供变得容易。设为登录信息收发部M1206。家庭ID管理部管理与在上述构成家庭网络的通信设备中使用的通信设备ID不同的家庭ID。目前,在家庭网络中,各通信设备的主设备以各自的通信设备单位管理,其管理方法根据通信设备的种类而不同,所以不能进行以家庭单位的管理。此外,也有使用户输入服务单位中的ID的情况,但对于用户而言方便性很低。本发明通过家庭ID的新的ID的导入,不论通信设备及服务如何都能够进行构成家庭网络的设备的管理。此外,家庭ID管理部在初次进行设备登录的情况下,制作家庭ID。家庭ID既可以基于位置信息制作,也可以基于通信设备的固有ID制作。既可以基于随机数制作、由登录服务器确认以使其不重复,也可以由用户设定。从登录信息制作部M1204接收到登录信息的登录信息收发部M1207使用家庭网络通信设备M1103对登录服务器M1005发送。登录服务器M1005将登录信息与登录数据库M1208对照,判断能否登录,返送登录应答。接收到登录应答的登录信息收发部将结果使用用户界面设备M1104向用户通知。也可以在不能的情况下向登录信息制作部M1204通知,请求登录信息的变更。由此,能够进行包括不具有通信用的用户界面设备的白色家电设备等在内的家庭网络设备的统一管理。
图154是用于说明通信装置的登录处理的流程图。通信装置如果接收到登录命令和设备固有ID(M1301),则判断本终端是否保持有家庭ID(M1302)。在没有保持家庭ID的情况下转移到家庭ID取得处理(M1303)。在保持有家庭ID的情况下,进行登录数据的制作处理(M1304)。接着,将登录数据向登录服务器发送(M1305)。在从登录服务器没有接收到登录应答的情况下(M1306),对用户显示登录失败通知(M1307)并结束。在接收到登录应答的情况下,对用户显示是否可以通过制作的信息登录,在OK的情况下(M1308)结束。在不是的情况下回到家庭ID取得处理。另外,在难以取得其他家庭ID的情况下,作为登录失败而结束。
图155是用于说明家庭ID取得处理的流程图。在通信装置中具有家庭ID的自动制作功能的情况下(M1401)自动进行制作,在没有的情况下对用户委托手动输入。在没有进行手动输入的方法、或被用户拒绝手动输入的情况下,向用户通知不能登录(M1403),对用户敦促用别的方法取得家庭ID。在自动制作的情况下,根据状况而选择自动制作功能(M1404)。在能够通过GPS取得地理的位置信息的情况下、或如TV那样是一般登录住址的终端的情况下,根据位置信息制作家庭ID(M1405)。在一般安设在宅内的终端中,制作基于通信装置的固有识别符的家庭ID(M1406)。特别是在有效的家庭ID制作较困难的情况下,通过随机数制作家庭ID(M1407)。如果制作了家庭ID,则对服务器发送制作的家庭ID(M1408)。从服务器接收关于制作的家庭ID的信息,在不能使用该家庭ID的情况下(M1409),回到家庭ID的制作。在能够使用的情况下,向用户确认(M1410),在OK的情况下,作为家庭ID登录到本终端中(M1411)。在不是那样的情况下回到家庭ID的制作。
图156是进行设备登录的情况下的流程图。登录设备M1201通过近距离无线通信设备,将包括设备固有ID的信息与登录命令一起向通信装置M1101转送。通信装置在没有保持家庭ID的情况下,制作临时家庭ID,通过家庭网络通信设备向登录服务器M1005发送。登录服务器M1005附加关于临时家庭ID的信息,向通信装置返送。在通信装置保持有家庭ID的情况下,或从登录服务器取得了也可以利用的家庭ID信息的情况下,将包括家庭ID及设备固有ID的登录信息向登录服务器发送。完成登录设备的登录处理。
(实施方式15)
作为本发明的实施方式15,对在通信终端间共有家庭ID的方式进行说明。图157是表示在通信装置间共有家庭ID的情况下的功能的功能块图。假设构成家庭网络的通信装置通过家庭网络M1601及家庭网络通信设备M1103共有家庭ID。或者也可以通过近距离无线通信设备M1102共有。本发明的通信装置通过将共有命令和家庭ID通过近距离无线通信设备M1102向其他通信装置传送,能够在家庭内的通信装置间共有家庭ID。家庭ID管理部M1205S内的家庭ID共有部M1602S将共有命令和存储在本终端的家庭ID存储部M1209S中的家庭ID存储到近距离无线通信设备M1102S中。当发送侧的通信装置M1101S的近距离无线通信设备M1102S与接收侧的通信装置M1101R的近距离无线通信设备M1102R接近时转送信息,将发送侧通信装置M1101S的家庭ID存储到接收侧通信装置M1101R的近距离无线通信设备M1102R内。接收侧通信装置M1101R内的家庭ID共有部M1602R如果在本终端的家庭ID存储部M1209R中没有存储家庭ID,则作为本终端的家庭ID存储。由此,能够很简单地进行通信装置间的家庭ID。在存储有家庭ID的情况下,对登录服务器发送双方的家庭ID。接收到双方的家庭ID的登录服务器将双方的家庭ID虚拟地作为1个家庭的ID管理。此外,也可以为了统一为某方的家庭ID而对所有的通信装置通知某方的家庭ID。在此情况下,也由于存在非常时连接设备,所以登录服务器中的家庭ID将双方虚拟地作为1个ID管理。另外,也可以将非常时连接设备的ID每当连接时更新、如果全部的登录设备的更新结束则结束虚拟的管理。由此,能够将原本为多个家庭网络合并为1个网络。
此外,也可以使用家庭网络进行共有。在由家庭网络连接检测部M1603S检测到没有保持家庭ID的通信装置连接到家庭网络M1601上的情况下,将家庭ID共有请求向连接在家庭网络上的终端广播。连接在家庭网络M1601上的终端中的保持家庭ID的终端将家庭ID朝向发送了共有请求的终端返送。由此,能够在进行通信之前的阶段完成家庭ID。另外,如果预先设定了保持家庭ID的终端中的、对共有请求应答的主终端,则能够避免从多个终端返送许多共有应答、对家庭网络作用过量的负荷的情况。此外,在没有应答的情况下,也可以在本终端进行家庭ID取得处理。
图158是表示使用近距离无线通信设备M1102共有家庭ID的情况下的、接收侧通信装置M1101R的动作的流程图。如果接收到共有命令和家庭ID(M1701),则通信装置判断在本终端中是否保持有家庭ID(M1702)。在本终端中没有保持的情况下,将接收到的家庭ID作为本终端的家庭ID登录(M1703)。在本终端中保持有的情况下,将保持的家庭ID与接收到的ID比较。在相等的情况下什么都不做而结束。在不相等的情况下,进行家庭ID的选择(M1705)。家庭ID的选择既可以由本终端进行,也可以由登录服务器进行。在对登录服务器委托选择的情况下,将本终端的家庭ID和接收到的ID作为共有信息对登录服务器发送(M1706)。接收包括由登录服务器选择的家庭ID的共有应答(M1707),对用户确认(M1708),在OK的情况下结束。在不是OK的情况下,回到家庭ID的选择。在由通信装置选择本终端的家庭ID的情况下,将本终端的ID作为家庭ID,将接收到的ID作为共有ID对登录服务器发送(M1709)。登录服务器向具有共有ID的通信装置通知家庭ID被更新的情况。在选择了接收到的家庭ID的情况下,将本终端的家庭ID更新(M1710)。进而,将本终端的旧ID作为共有ID、将接收到的ID作为家庭ID对登录服务器发送(M1711)。登录服务器向同样具有共有ID的通信装置通知家庭ID被更新的情况。
图159是表示使用近距离无线通信设备M1102共有家庭ID的情况下的、发送侧通信装置M1101S的动作的流程图。发送了共有命令和家庭ID的终端判断是否从登录服务器发送来共有应答(M1752)。在没有接收到共有应答的情况下结束。在接收到包括家庭ID更新通知的共有应答的情况下,将家庭ID更新(M1753)而结束。
图160是用登录服务器选择的情况下的次序图。通信装置M1101S将家庭ID_A使用近距离无线通信设备向通信装置M1101R发送。通信装置M1101R将本终端保持的家庭ID_B和接收到的家庭ID_A一起向登录服务器M1005发送。登录服务器从接收到的ID中选择家庭ID_B,对具有家庭ID_A的通信终端及通信装置M1101R通知,以使其存储家庭ID_B。
图161是表示使用家庭网络通信设备M1103共有家庭ID的情况下的、发送侧通信装置M1101S的动作的流程图。检测到向家庭网络的连接(M1801)的通信终端将家庭ID共有请求向家庭网络内广播(M1802)。在返回了共有应答的情况下,将接收到的家庭ID登录到本终端中(M1804)。在没有返回的情况下,进行家庭ID取得处理(M1303)。
图162是表示使用家庭网络通信设备M1103共有家庭ID的情况下的、接收侧通信装置M1101R的动作的流程图。接收到家庭ID共有请求(M1851)的通信终端判断本终端是否是家庭网络的主终端(M1852),在是主终端的情况下,将本终端的家庭ID作为共有应答发送(M1853)。在不是主终端的情况下,什么都不做。另外,在具有家庭ID的终端内没有进行主终端的设定的情况下,不进行是否是主终端的判断而从全部的终端返送。
图163是使用家庭网络通信设备M1103共有家庭ID的情况下的次序图。通信装置如果检测到连接在家庭网络上,则向家庭网络广播家庭ID请求。在接收到家庭ID共有请求的通信装置中,仅被设定为主终端的终端M1854返送家庭ID共有应答。接收到共有应答的通信装置将接收到的家庭ID作为本终端的家庭ID存储。
(实施方式16)
本实施方式对从终端装置经由NFC(Nier Field Communication)的通信功能读出上述终端装置的终端装置信息、经由通用的网络向服务器转送的通信装置,使用附图详细地说明。
图164是本实施方式的系统,由终端装置Y01、通信装置Y02及服务器Y04构成。另外,本实施方式的发明主题是通信装置。
终端装置Y01是具有NFC通信功能(RFID或IC标签、仿真NFC标签)的设备,是电冰箱、微波炉、洗涤机、电视机、录像设备等电子的终端设备,在内部的存储器中,作为终端装置信息而保持作为表示终端装置的ID的制造号码、终端装置的使用履历信息、错误信息等。
通信装置Y02具有能够与终端装置的NFC通信功能通过近距离无线通信进行通信的NFC通信功能,具有将由终端装置保持的终端装置信息读出的读写器功能。此外,通信装置是便携设备,是指便携电话终端等便携设备、或电视机的遥控器终端。
服务器Y04是通过因特网等通用的网络与上述通信设备Y02可通信地连接的服务器,在内部中具有DB(数据库),在上述DB中储存由通信设备Y02从终端装置Y01读出的终端装置信息。
终端装置Y01由CPU(Central Processing Unit)Y011、故障感知部Y012、使用履历记录部Y013、存储器Y014、调制部Y017及天线Y018构成。
CPU(Y011)是进行终端装置Y01的系统控制的部分。CPU进行作为终端装置的各构成要素的故障感知部Y012、使用履历Y013、存储器Y014、调制部Y017的控制。
故障感知部Y012是感知终端装置Y01的各构成要素的故障部位、故障内容的部分。将由本故障感知部Y012感知的故障信息储存到存储器Y014的RAM(Random Access Memory)中。感知的故障信息是错误代码,是由故障发生的场所和症状唯一决定的代码。
使用履历记录部Y013是每当本终端装置Y01被用户操作时记录该使用履历信息的部分,将记录的使用履历信息储存到存储器Y014的RAM(Y016)中。通常,为了根据使用履历信息调查引起故障的原委,发生故障的几个步骤前的履历的优先级较高。因而,本实施方式的使用履历记录部Y013优选的是通过将RAM(Y016)作为FIFO(FirstIn、FistOut)使用、以时间序列将新的使用履历信息储存到RAM中的结构。此外,为了能够根据使用履历判别引起故障的原委,优选的是以由故障感知部Y012检测到故障的定时为基点、几个步骤前的使用履历信息优先地保持在RAM中的方式。因而,设为以下结构:在使用中检测到5次轻微的故障的情况下,将引起5次故障的几个步骤的操作履历信息优先地保持。
存储器Y014由ROM(Read Only Memory)Y015和RAMY016构成。
在ROM(Y015)中,至少在出货时预先记录有表示本终端装置Y01的位置的制造号码构成为:不能由本终端装置的使用者将记录在本ROM中的内容更新。此外,制造号码优选的是能够判断制造商或制造的批次号、制造日的信息。此外,本ROM优选的是在CPU(Y011)的半导体芯片的内部中构成。在此情况下,不能简单地观看存储器访问的信息,在此情况下,能够将用于与通信装置的近距离无线通信时的认证及加密通信的秘密密钥信息在出货时记录。
RAM(Y016)是可改写的存储器,储存有由故障感知部Y012感知的故障信息、以及由使用履历记录部Y013记录的使用履历信息。
调制部Y017是进行与通信装置Y02的近距离无线通信时的通信数据的调制的部分。调制方式根据使用的NFC规格而不同,采用振幅调制(ASK)、频率调制(FSK)或相位调制(PSK)等。
天线Y018使用环形天线,是由从通信装置Y02的天线发出的电波引起电磁感应、进行用于驱动至少调制部及存储器的起电、并且在从通信装置Y02发出的电波的反射波中叠加由上述调制部Y017调制后的信号、将记录在存储器Y014中的终端装置信息向通信设备Y02发送的部分。
如以上这样,在本实施方式的终端装置中,检测内部的各构成要素的故障,记录使用履历而储存到存储器中,如果与通信装置Y02接近而能够进行近距离无线通信,则能够将储存在存储器中的终端装置信息向通信装置Y02发送。
接着,对本实施方式的通信装置Y02进行说明。另外,在本实施方式中公开的发明的主题是本通信装置Y02。
本通信装置Y02由天线Y021、CPU(Y022)、解调部Y023、存储器Y024、位置信息测位部Y027、GPS天线Y031、通信存储器Y032、信息附加部Y035及通信部Y036构成。
天线Y021为了搜索能够与本通信装置Y02进行近距离无线通信的终端装置而进行朝向不特定的终端装置呼叫的轮询。此外,在对轮询有应答的情况下,建立与终端装置的近距离无线通信,接收从终端装置Y01发送的调制后的终端装置信息,向解调部Y023输出。通常,轮询动作在没有能够进行近距离无线通信的终端装置的情况下也需要经常进行,但为此而伴随着耗电。因而,如果设置用于控制开始轮询的定时的未图示的开关、在将开关设为ON的情况下进行轮询动作,则能够大幅地缩短轮询时间,能够显著地降低通信设备Y02的耗电量。特别在通信装置以电池或干电池等有限的电力动作的情况下是有效的。
CPU(Y022)是进行本通信装置的系统控制的部分,控制通信装置的各构成要素的动作。
解调部Y023是将与终端装置Y01的调制部Y017对应的调制解调的部分。解调后的终端装置信息被暂时向存储器Y024输出。
存储器Y024在内部中具备ROM(Y025)和RAM(Y026)。
ROM(Y025)是构成为不能从外部改写的存储器,在本通信装置出货时,记录有能够唯一地识别本通信装置Y02的制造号码。制造号码优选的是能够判别本通信装置Y02的制造商或制造的批次号、制造日的信息。此外,本ROM优选的是构成在CPU(Y022)的半导体芯片的内部中。在此情况下,不能简单地观看存储器访问的信息,在此情况下,能够在出货时记录用于与终端装置Y01的近距离无线通信时的认证或加密通信的秘密密钥信息。
RAM(Y026)储存由天线Y021接收、由解调部Y023解调后的终端装置Y01的终端装置信息。如上所述,所谓终端装置信息,包括能够唯一地识别终端装置Y01的终端装置的制造号码、终端装置Y01的使用履历信息、故障代码。
位置信息测位部Y027由用于确定本通信装置Y02的场所的的传感器群构成,由经纬侧位部(GPS)Y028、高度测位部Y029及位置修正部Y030构成。此外,本位置信息测位部Y027如果设为在本通信装置Y02与终端装置Y01成为能够通信的时刻从天线Y021取得位置信息的结构,则不再需要经常取得位置信息,能够削减本通信装置Y02的用电量。
经纬侧位部Y028是一般的GPS(Global Positioning System),是能够接收来自人工卫星的电波、进行地球上的3维测位的部分。
此外,高度测位部Y029是一般的高度计,存在许多接收电波而提取高度的结构、感知气压而计测高度的结构等。本高度测位部Y029为了在不能接收GPS电波的室内也能够感知高度而具备。
位置信息修正部Y030是为了使由GPS测位的位置信息变得更精细而修正GPS的测位值的单元。通常,GPS在室内等不能进行来自卫星的电波的接收的状况下不能取得正确的位置信息。所以,在本位置信息修正部Y030中,在内部中具备电子罗盘和6轴的加速度传感器,在难以进行GPS测位的地方,从电子罗盘提取本通信装置的移动方向,从加速度传感器提取移动速度,能够修正由GPS测位的位置信息。
信息附加部Y035是在将从终端装置Y01接收而存储在存储器Y024中的终端装置信息向服务器Y04发送时、将记录在存储器Y024的ROM(Y025)中的通信装置Y02的制造号码和由位置信息测位部Y027测量的位置信息附加到终端装置信息中的部分。由此,在服务器Y04中,能够将终端装置信息,能够以可判别是从哪个通信装置发送的、在哪个位置检测到等的方式来进行管理,例如在制造商侧有可能有终端装置的重大事故的情况下,只要阅读服务器Y04的DB,就知道该终端设备存在于哪里,能够缩短制品回收时间、降低重大的事故的可能性,能够带来制品使用的安心、安全。此外,在通信装置Y02如便携电话终端等那样有显示功能的情况下,如果设为知道有可能发生事故的终端设备能够与哪个通信设备进行近距离无线通信、使终端设备的事故信息显示在对应的通信设备上的结构,则通过将一般没有显示功能、没有连接在通用的网络上的终端设备的事故信息向通信设备发送,能够对使用终端装置的用户进行提示,都能够提高带来使用终端装置的用户的安心、安全的设备。
通信部Y036是通过一般的LAN或无线LAN或移动电话通信网经由因特网与服务器Y04进行通信的部分,是将作为通信装置信息而附加了通信装置的制造号码及位置信息的终端装置信息向服务器Y04发送的部分。这里,为了通信控制用而再附加MAC地址或IP(Internet protocol)地址,向服务器Y04发送。
服务器Y04是经由因特网等通用的网络与通信设备Y02连接的服务器。本服务器Y04在内部中具备管理终端装置的设备管理DB(DataBase)。
在设备管理DB(Y041)中,接收与通信装置信息建立了联系的终端装置信息。在本DB中,将通信设备作为母设备、将终端装置作为子设备,与母设备建立联系而管理。此外,对子设备附加由通信装置取得的位置信息,能够同时管理终端装置存在于哪里的信息。
如以上这样,在本实施方式的系统中,将终端装置的终端装置信息通过通信设备经由近距离无线通信读出,在通信装置中,将通信装置的制造号码、将通信设备接触在终端装置上而能够进行近距离无线通信的位置信息建立对应,向服务器发送。在服务器中,能够将通信装置作为母设备、将终端设备作为子设备、进行对应建立而管理。因而,在制造商侧判断为终端设备可能发生重大事故时,终端装置的回收变得容易,能够将重大事故的可能性显示在对应的通信设备的显示部上等,能够实现制品的可跟踪性,提供安心、安全设备。
图165是表示在图164中说明的系统的各构成要素的动作的次序图。
首先,从通信装置Y02朝向终端装置Y01,进行用于建立近距离无线通信的轮询。该轮询如上述那样,从通信装置的用电量的观点看,优选的是设置用户操作的开关、在该开关正被按下或已被按下的情况下开始轮询(SY01)。
接着,终端设备Y01通过对通信设备Y02的轮询应答,建立终端装置Y01与通信装置Y02的近距离无线通信(SY02)。在该时刻,通过通信装置Y02的位置信息测位部Y027取得位置信息,作为终端设备的位置信息提取。另外,位置信息的取得并不仅限定于轮询完成时。只要是轮询应答进行、近距离无线通信建立的期间,何时都可以。主旨是,通过取得建立只能在几厘米内通信的近距离无线通信的位置信息,将终端装置的场所高精度地提取,这是重要的。
在SY02中在近距离无线通信建立后,终端装置认证通信设备,使用采用一般的公开密钥加密的认证,来实施通信装置对终端装置的认证,并且暂时在终端装置与通信装置间将生成的加密密钥进行密钥共享(SY03)。以后,在本近距离无线通信建立的期间中,通过将通信路径使用该加密密钥加密而通信,能够防止盗听。
如果密钥共享完成,则将记录在终端装置Y01的存储器Y014中的终端装置信息从终端装置Y01向通信装置Y02发送(SY04)。
在通信装置Y02中,如果从终端装置Y01接收到终端装置信息,则存储到通信装置的存储器Y024中(SY05)。
在通信装置Y02中,如果从终端装置Y01完成终端装置信息的接收,则从通信装置Y02对服务器Y04发出连接请求(SY06)。
在服务器Y04中,对SY06的连接请求返回应答,建立通信(SY07)。
如果通信装置Y02与服务器Y04的通信建立,则为了对服务器发送终端装置的终端装置信息,附加通信装置的通信装置信息(SY08)。另外,所谓通信装置信息,是通信装置的制造号码、与终端装置建立近距离无线通信的期间的通信装置的位置信息、如果登录到通信装置设备中则是登录的用户的邮件地址、如果登录到通信装置中则是向登录的服务器的连接账户等。
在SY08中,在对终端装置信息附加通信装置信息的通信装置信息后,将带有通信装置信息的终端装置信息向服务器Y04发送(SY09)。
在服务器Y04中,通过将从通信装置Y02接收到的带有通信装置信息的终端装置信息登录到设备管理DB(Y041)中而完成处理。
由此,在服务器Y04中,通过将由通信装置Y02接触而建立了近距离无线通信的终端设备与通信装置的识别信息(制造号码等)建立联系而管理,能够进行按照整个家中的设备管理。此外,作为终端装置的设置场所登录的位置信息,使用通信设备与终端装置建立了近距离无线通信的位置信息。本实施方式的近距离无线通信由于使用一般的HF带域(13.56MHz带),所以其可通信距离是几厘米。因而,通过将建立了近距离无线的位置信息设定为终端设备的位置信息,误差最大为几厘米,为了确保制品的可跟踪性而能够确保充分的精度。
图166是在服务器Y04的设备管理DB(Y041)中与通信终端Y02建立对应管理的终端装置群的概念图。
在通信设备Y02中,在进行购买终端装置时的使用者登录等的情况下,通过在设置终端设备后、用通信设备接触终端装置,将终端设备的终端设备信息经由近距离无线通信读出到通信设备中,附加通信装置信息而向服务器发送。于是,在服务器侧的设备管理DB中,将通信装置作为母设备、将终端设备作为子设备建立关联而管理。具体而言,在DB内,通过与通信设备的制造号码(Y051)建立联系、作为由通信装置接触的终端装置1(例如微波炉)Y052、终端装置2(例如洗涤机)Y053、终端装置3(例如电视机)Y054而将作为各终端装置的终端装置信息的所在信息(经纬、高度等)、使用状况信息(使用履历、错误代码、使用时间等)与通信设备建立联系而管理,能够起因于用通信装置的接触而进行整个家中的设备的管理,能够实现终端装置的可跟踪性。
此外,当近距离无线通信建立时,通信装置读出位置信息,作为终端装置的位置信息检测,所以能够在近距离无线通信为可通信的几厘米单位的误差的范围中登录终端设备的位置。为了实现这一点,通过利用搭载在通信装置中的GPS检测终端装置的位置信息,不需要每个终端设备具有GPS,能够实现成本的削减。
图167是表示用通信设备Y02接触终端装置Y01时的向通信设备的显示部输出的显示画面的概念图。
首先,对将通信设备接触在终端装置上而进行设备登录的情况进行说明。
如果操作通信装置Y02而启动通信装置的读写器应用,则在画面上显示,以使其接触以近距离无线通信通信的终端装置(Y060)。
如果接触,则通信设备与终端装置的近距离无线通信建立,通信装置从终端装置读出终端装置信息,取得当前的位置信息,暂时存储到存储器中,建立与服务器Y04的通信,将通信装置信息和附加的终端装置信息向服务器发送。在服务器中,判断发送来的终端装置信息是否已经登录在设备管理DB中,在判断为没有登录的情况下,使通信装置的显示部显示敦促设备的登录的消息(Y061)。
接着,如果用户选择设备的登录,则将敦促设备的位置信息的登录的消息从服务器向通信装置输出,在用户选择了登录的时刻,将与从通信设备向服务器发送的终端装置信息建立了联系的位置信息作为登录的终端装置的位置信息登录到服务器的设备管理DB中(Y062)。
另一方面,对终端设备的位置信息与在服务器的设备管理DB中登录的信息不同的情况进行说明。
如果操作通信装置Y02而启动通信装置的读写器应用,则在画面上显示,以使其接触以近距离无线通信通信的终端装置(Y063)。
如果将通信设备接触在终端装置上,则建立近距离无线通信,通信装置从终端设备读出终端设备信息并取得位置信息,将附加了通信装置信息的终端装置向服务器发送。在服务器中,从设备管理DB通过将包含在从服务器接收到的终端装置信息中的终端装置的制造号码与登录在设备管理DB中的制造号码对照,来确认被接触的终端设备已经登录,并且从由服务器接收到的通信装置信息中提取位置信息,与登录在设备管理DB中的位置信息对照,判断是否一致。当然,由于在位置信息中伴随着误差,所以通过实施几厘米量级(与能够进行近距离无线通信的距离对应的值)下的阈值判断,进行是相同的位置还是不同的位置的判断。在判断为是不同的位置的情况下,将通知与已经登录的位置信息不同的情况的消息向通信装置的显示部输出(Y064)。
接着,将敦促(指定是否)用当前的位置信息更新终端设备的位置信息的消息显示在通信装置的显示部上(Y065)。
如果用户选择了更新,则将因接触而由通信装置取得的位置信息作为终端装置的新的位置信息登录到服务器的设备管理DB中。
因而,在本实施方式中,在暂时登录的位置信息随着终端装置的设置场所的移动而被变更的情况下,也能够更新为因接触而取得的新的位置信息,能够提高终端装置的可跟踪性的精度。
(实施方式17)
图168是本实施方式的RF-ID的功能块图。
图168的RF-IDN10由近距离无线通信用的天线N11、在来自天线N11的电力下动作的电源部N12、记录个体识别信息的作为非易失性存储器的存储器N13、将记录在存储器N13中的内容再现的再现部N14、以及将存储在存储器N13中的数据经由天线N11发送的数据转送部N15构成。
存储器N13由确定搭载RF-IDN10的制品的UID部N13A、确定搭载RF-IDN10的制品的品号的品号ID部N13B、登录服务器N40的服务器特定信息N13C、使移动设备N20执行的动作程序N13D构成。
图169是本实施方式的移动设备的功能块图。
图169的移动设备N20由接收从RF-IDN10发送的数据的RF-ID读写器N21、存储从RF-IDN21发送的数据的RF-ID存储部N22、执行包含在数据中的程序的程序执行部N23、进行包含在数据中的图像信息的数据处理的数据处理部N24、数据处理部N24处理的图像信息被输出的存储器N25、将暂时存储在存储器N25中的图像显示的显示部N26、经由通用的网络与其他设备连接的通信I/F部N27、经由通信I/F部N27发送数据的发送部N28、经由通信I/F部N27接收数据的接收部N29、通过通信I/F部N27经由通用网络与其他设备进行通信的通信部N30、测量移动设备N20的绝对的位置信息的GPSN31、测量移动设备N20的相对的位置信息的6轴传感器N32、存储PSN31和6轴传感器N32的测量结果的位置信息存储部N33、解析存储在位置信息存储部N33中的位置信息的CPUN34构成。
图170是本实施方式的登录服务器的功能块图。
图170的登录服务器N40由经由通用的网络与其他设备连接的通信I/F部N41、经由通信I/F部N41发送数据的发送部N42、经由通信I/F部N41接收数据的接收部N43、通过通信I/F部N41经由通用网络与其他设备进行通信的通信部N44、管理从通信I/F部N41接收到的制品信息的制品信息管理部N45、存储对移动设备N20发送的图像数据的图像数据存储部N46、存储对移动设备N20发送的程序的程序存储部N47、通过将存储在制品信息管理部N45中的信息组合而制作表示搭载有RF-ID的制品的位置关系的地图的位置信息制作部N48、以及根据存储在控制信息管理部N45中的信息和移动设备N20的当前的位置信息对搭载了RF-IDN10的制品进行控制的制品控制部N49构成。
本实施方式根据由移动终端N20的位置信息和搭载有RF-IDN10的宅内的制品的位置信息制作的制品地图的信息,控制宅内的制品,这一点与其他实施方式不同。
图171是表示本实施方式的网络制品的配置的一例的图。
在图171的配置图中,在1层的起居室中配置有电视机N10A、BD记录机N10B、空调N10C和FF制暖机N10K,在1层的西式房间中配置有空调N10D和火灾报警器N10E,在1层的日式房间中配置有空调N10F和火灾报警器N10G,在2层配置有电视机N10I和空调N10J,在屋顶配置有太阳能电池面板N10H。
图172是表示本实施方式的系统的一例的结构图。图172由设置在图171的配置图中的家电构成。
由搭载有图168的RF-IDN10和经由通用的网络与其他设备连接的通信I/F部N18的电视机N10A~FF制暖机N10K、图169的移动设备N20、图170的登录服务器N40、将电视机N10A~FF制暖机N10K与移动设备N20连接的宅内网络N100、以及与宅内网络N100连接并连接在登录服务器N40上的宅外网络N101构成。
使用图173~图178,表示将搭载有RF-IDN10的制品的信息向登录服务器N40的登录的方法的一例。
图173是将电视机N10A的信息登录到登录服务器N40中的次序图。
首先,如果用户将移动设备N20的RF-ID读写器N21向电视机N10A的天线N11靠近,则从RF-ID读写器N21经由天线N11对电源部N12供电,对RF-IDN10的各部供电(图173圈1)。
RF-IDN10的再现部N14制作包括存储在存储器N13的UID部N13A、品号ID部N13B、服务器特定信息N13C、动作程序N13D中的信息的制品数据。
图174(a)是表示制品数据的结构的一例的图。图174(a)的制品数据由作为品号ID的电视机N10A的品号(包括颜色信息)、作为UID的电视机N10A的制造号码、作为服务器特定信息的登录服务器N40的地址信息、登陆ID和口令、由移动设备N20的程序执行部N23执行的动作程序构成。
RF-IDN10的数据转送部N15将制品数据调制,经由天线N11向移动设备N20的RF-ID读写器N21发送(图173圈2)。
移动设备N20的RF-ID读写器N21接收制品数据,存储到RF-ID存储部N22中。
程序执行部N23执行包含在存储于RF-ID存储部N22中的制品数据中的动作程序。
这里,作为动作程序,执行“制作对包含在制品数据中的登录服务器N40的地址发送的服务器登录数据”的动作。
图174(b)是表示服务器登录数据的结构的一例的图。图174(b)的服务器登录数据由作为品号ID的电视机N10A的品号(包括颜色信息)、作为UID的制造号码、作为服务器特定信息的登录服务器N40的登陆ID和口令、移动设备N20的位置信息构成。
接着,关于移动设备N20的位置信息进行说明。
GPSN31在移动设备N20启动中总是动作,将测量的结果存储到位置信息存储部N33中。
6轴传感器N32在GPSN31是测量范围外时动作,将测量的结果存储到位置信息存储部N33中。
程序执行部N23根据存储在位置信息存储部N33中的GPSN31和6轴传感器N32的测量结果,制作服务器登录数据的位置信息。
程序执行部N23根据制作的位置信息和存储在RF-ID存储部N22中的信息,制作图174(b)所示的服务器登录数据。
接着,通信部N30将服务器登录数据的目的地设定为存储在RF-ID存储部N22中的登录服务器N40的地址。
发送部N28经由通信I/F部N27发送服务器登录数据(图173圈3)。
登录服务器N40的接收部N43经由通信I/F部N41接收服务器登录数据。
通信部N44确认服务器登录数据的登陆ID和口令。
如果登陆ID与口令一致,则将服务器登录数据的品号ID、UID和位置信息存储到制品信息管理部N45中。
图175(a)表示由制品信息管理部N45存储的电视机N10A的制品信息的一例。由品号ID、UID和位置信息构成。位置信息由经度、纬度、高度构成。
接着,如果电视机N10A的登录完成,则登录服务器N40的通信部N44制作包括预先存储在图像数据存储部N46中的图像信息和存储在程序存储部N47中的动作程序在内的服务器登录完成通知,将发送目的地设定为移动设备N20的地址。
发送部N42经由通信I/F部N41发送服务器登录完成通知(图173圈4)。
移动设备N20的接收部N29经由通信I/F部N27接收服务器登录完成通知。
通信部N30确认服务器登录完成通知的发送目的地地址,向程序执行部N23转送。
程序执行部N23执行包含在服务器登录完成通知中的动作程序。这里,作为动作程序而执行“在显示部N26上显示图像数据”的动作。
程序执行部N23对数据处理部N24指示图像数据的处理。
数据处理部N24进行图像数据的数据处理。例如,在下载的图像被压缩的情况下进行其解压缩、在被加密的情况下进行其解密、以基于图像显示模式表单的图像显示模式将下载的图像信息排列等。
如果处理结束,则数据处理部N24将图像数据暂时存储到存储器N25中。
显示部N26将储存在存储器N25中的图像数据显示。这里,储存在存储器N25中的图像数据是表示通知制品的登录已正常完成的图像。
图175(b)是表示以与电视机N10A同样的次序将BD记录机N10B~FF制暖机N10K登录到登录服务器N40中之后的由登录服务器N40的制品信息管理部N45管理的制品信息的一例的图。图171的从宅内登录的制品信息用相同的表管理。这里,将由相同的移动设备N20登录的制品判断为从相同的宅内登录的制品。
在图176中表示RF-IDN10的制品登录时的处理流程的一例。
首先,RF-IDN10成为来自移动终端N20的供电等待状态(N001)。
RF-IDN10在从移动终端N20接受到供电的情况下转移到N002,如果没有接受到则回到N001。
在N002中制作包括存储器N13的信息的制品数据。然后,在N003中将制品数据从天线N11向移动设备N20发送而结束处理。
在图177中表示移动设备N20的制品登录时的处理流程的一例。
首先,在N001中,从RF-ID读写器N21向RF-IDN10供电。
接着,移动设备N20成为来自RF-IDN10的制品数据的等待状态(N005)。
移动终端N20在从RF-IDN10接受到制品数据的情况下转移到N006,如果没有接受到则回到N004,再次对RF-IDN10供电。
在N006中,将接收到的制品数据解析。接着,执行包含在制品数据中的动作程序。
在N007中,移动终端N20测量本机的位置。
在N008中,制作包括位置的测量结果的服务器登录数据。在N009中,将服务器登录数据从通信I/F部N27向登录服务器N40发送。
接着,移动设备N20成为来自登录服务器N40的服务器登录完成通知的等待状态(N010)。
移动终端N20在从登录服务器N40接受到服务器登录完成通知的情况下转移到N011。
在N011中,将服务器登录完成通知解析。然后,在N012中在显示部N25上显示包含在服务器登录完成通知中的图像信息,结束处理。
在图178中表示登录服务器N40的制品登录时的处理流程的一例。
首先,登录服务器N40成为来自移动设备N20的服务器登录数据的等待状态(N013)。
登录服务器N40在从移动终端N20接受到服务器登录数据的情况下转移到N014,如果没有接受到则回到N013。
在N014中解析服务器登录数据,确认登陆名与口令是否一致。然后,在N015中如果登陆名与口令一致,则将制品信息存储到制品信息管理部N45中。
在N016中,通知包括动作程序和图像信息的服务器登录完成通知。在N017中将服务器登录完成通知从通信I/F部N41向移动设备N20发送,结束处理。
接着,使用图179和图180,表示通过移动设备N20的位置信息对搭载有RF-IDN10的制品的控制方法的一例。
图179是表示移动设备N20在从1层向2层移动的情况下控制空调N10J和电视机N10A的电源的一例的次序图。
移动设备N20的CPUN34监视存储在位置信息存储部N33中的位置信息,如果满足预先设定的条件则制作包括当前的位置信息的位置信息数据。
图180(a)是表示位置信息数据的结构的一例的图。
由预先在制品登录时取得并存储在未图示的存储器中的登录服务器N40的第2服务器登陆ID和第2服务器登陆口令、从位置信息存储部N33取得的移动设备N20的当前的位置信息构成。
通信部N30将位置信息数据设定到制品登录的登录服务器N40的地址。
发送部N28经由通信I/F部N27发送位置信息数据(图179圈1)。
登录服务器N40的接收部N43经由通信I/F部N41接收位置信息数据。
通信部N44确认位置信息数据的第2服务器登陆ID和第2服务器登陆口令。
如果第2服务器登陆ID与第2服务器登陆口令一致,则通信部N44向制品控制部N49转送位置信息数据。
制品控制部N49对位置信息制作部N48转送第2服务器登陆ID。
位置信息制作部N48按照制品控制部N49的指示,根据第2服务器登陆ID取得登录在制品信息管理部N45中的图175(b)的信息,根据各制品的位置信息制作图171的表示宅内的制品的位置的制品地图,递交给制品控制部N49。
在图181中表示位置信息制作部N48制作的制品地图的一例。
制品地图在3D地图中根据各制品的位置信息在各制品所处的部位配置制品的形象图。
制品控制部N49使用包含在位置信息数据中的移动设备N20的当前位置和由位置信息制作部N48制作的家电地图进行制品(电视机N10A~FF制暖机N10K)的控制。这里,制品控制部N49将与从移动设备N20接收到的位置信息最近的商品的电源设为ON。这里,制作包括将空调N10J的电源设为ON的命令在内的设备控制数据。
图180(b)是表示第1设备控制数据的结构的一例的图。
由空调N10J的品号ID和UID、以及将空调N10J的电源设为ON的制品控制命令构成。
通信部N44在第1设备控制数据中作为发送目的地而设定移动设备N20的地址。
发送部N42经由通信I/F部N41发送第1设备控制数据(图179圈2)。
移动设备N20如果接收到第1设备控制数据,则根据包含在第1设备控制数据中的品号ID和UID,向空调N10J转送第1设备控制数据(图179圈2′)。
空调N10J如果从通信I/F部N18接收到第1设备控制数据,则如果本机的电源为OFF状态则将电源设为ON。
接着,制品控制部N49将与从移动设备N20接收到的位置信息最远的商品的电源设为OFF。这里,制作包括将电视机N10A的电源设为OFF的命令的设备控制数据。
图180(c)是表示第2设备控制数据的结构的一例的图。
由电视机N10A的品号ID和UID、将电视机N10A的电源设为OFF的制品控制命令构成。
通信部N44在第2设备控制数据中设定移动设备N20的地址作为发送目的地。
发送部N42经由通信I/F部N41发送第2设备控制数据(图179圈2)。
移动设备N20如果接收到第2设备控制数据,则根据包含在第2设备控制数据中的品号ID和UID,对电视机N10A转送第2设备控制数据(图179圈3′)。
电视机N10A如果从通信I/F部N18接收到第2设备控制数据,则如果本机的电源为ON状态则将通信功能以外的电源设为OFF。
如以上说明,根据本实施例,通过使用RF-ID的近距离无线通信和位置信息,能够用登录服务器管理搭载有RF-IDN10的制品的位置。由此,能够实现对应于移动设备N20的当前位置的制品的自动控制。
此外,由于作为位置信息而使用由测量相对的位置信息的6轴传感器N32(运动传感器)测量的信息作为位置信息,所以能够在GPSN31的测量范围外使用6轴传感器N32的测量结果将位置信息更新,在GPSN31的测量范围外也能够取得正确的位置信息。
另外,本实施方式的移动设备N20保持有GPSN31和6轴传感器N32,但并不限定于此。例如,移动设备N20也可以是仅保持6轴传感器N32的结构。在此情况下,登录服务器N40的制品信息管理部N45如图145所示,成为以最初登录的电视机N10A为基准点存储与电视机N10A的相对的位置信息的结构。此外,在此情况下,位置信息制作部N48制作的制品地图如图182所示,轴由x坐标、y坐标、z坐标构成。
另外,在本实施方式中,将搭载在RF-IDN10中的制品的品号ID、UID和移动设备N20的位置信息登录在登录服务器N40中,但并不限定于此。例如,登录服务器N40在再次接收到已登录的制品的服务器登录数据的情况下,也可以进行图184的表所示的处理。
对图184进行说明。图184由在表示位置信息的精度的精度识别符和对应于各识别符的品号ID、再次接收到的服务器登录数据的位置信息和在已登录在制品信息管理部N45中的位置信息不同的情况下的处理构成。
登录服务器N40确定再次接收到的服务器登录数据中包含的品号ID和根据UID判断为已经登录在制品信息管理部N45中的品号ID。在品号ID是电视机、BD记录机、FF制暖机的情况下,更新制品信息管理部N45为再次接收到的服务器登录数据中包含的位置信息。
此外,在品号ID是空调、太阳能电池面板、火灾报警器的情况下,对移动设备N20通知由制品信息管理部N45存储的位置信息。移动设备N20基于从登录服务器N40接受到的位置信息修正本机的当前的位置信息。
另外,在图184中精度识别符是两种,但并不限定于此,也可以设置两种以上,并设置按每个精度识别符而不同的处理。
另外,本实施方式的制品控制部N49搭载在登录服务器N40中,但并不限定于此。例如也可以搭载在移动设备N20中、从登录服务器N40取得制品地图而动作。此外,也可以搭载在移动设备N20以外连接在宅内网络100上的非图示的宅内服务器中。在此情况下,移动设备N20将位置信息向宅内服务器发送,从宅内服务器取得制品地图。
另外,本实施方式的移动装置N20通过通用I/F部N27经由宅内网络100和宅外网络101与登录服务器N40连接,但并不限定于此。例如移动设备具有便携电话的功能,也可以代替通用I/F部N27而用可连接在便携电话网(例如LTE)上的接口至少经由便携电话网连接在登录服务器N40上(参照图185)。此外,移动设备N20也可以具有能够向WiMAX等的线路网连接的接口,至少经由WiMAX网络连接在登录服务器N40上。也可以利用其他的某种网络连接在登录服务器N40上。
另外,在本实施方式中,在制品控制的判断中利用由位置信息制作部N48制作的制品地图,但并不限定于此。例如,也可以将由位置信息制作部N48制作的制品地图的图像数据向移动设备N20发送,在移动设备N20的显示部N26上显示。
另外,在本实施方式中,位置信息制作部N48基于图8(b)的信息制作制品地图,但并不限定于此。例如,也可以根据位置信息从制品信息管理部N45检测设置在接近的宅内的制品信息,制作接近的宅内的制品地图。在此情况下,制品控制部N43通过将图181的制品地图与接近的宅内的制品地图组合而进行制品的控制。例如在本实施例中将距离移动设备N20最远的电视机N10A的电源设为OFF,但如果在接近的宅内有太阳能电池面板,则进行使电视机N10A的电源保持为ON等控制。
另外,在本实施方式中,在登录服务器N40的制品信息管理部N45中存储有各制品的品号ID、UID、位置信息,但并不限定于此。例如,也可以经由各制品的通信I/F部N18实时地取得电源的ON、OFF状态而管理。在此情况下,制品控制部N49将与移动设备N20最远的电视机N10A电源设为OFF,但如果预先设定的台数的制品为电源OFF的状态,则进行使电视机N10A的电源保持为ON等控制。
另外,在本实施方式中,制品控制部N49将最远的制品的电源设为OFF而将最近的制品的电源设为ON,但并不限定于此。
也可以基于移动设备N20的位置信息控制多台制品的电源的ON、OFF。
另外,在本实施方式中,制品控制部N49将最远的制品的电源设为OFF而将最近的制品的电源设为ON,但并不限定于此。例如,移动设备N20的CPUN34也可以在非图示的存储器中作为移动履历而存储位置信息、定期地对登录服务器N40通知移动履历。在此情况下,登录服务器N40根据移动设备N20的移动履历推测哪个制品处于相同的房间、层中而管理推测结果。此外,制品控制部N49也可以基于推测结果控制处于相同的房间中的制品的电源的ON、OFF。例如,如果根据移动履历推测电视机N10A和空调N10C处于相同的房间中,则制品控制部N49在将电视机N10A的电源设为OFF的情况下也将空调N10C的电源设为OFF。
此外,也可以除了移动履历以外还收集各制品的ON、OFF切换的时间信息,而推测哪个制品处于相同房间、层中。
另外,在本实施方式中,制品信息管理部N45管理图175或图182的制品信息,位置信息制作部N48制作图181或图183的制品地图,但并不限定于此。例如,将用户制作的宅内房间布置的图像数据从移动设备N20向登录服务器N40发送,由制品信息管理部N45管理。在此情况下,位置信息制作部N48将图175或图182的制品信息与宅内房间布置的图像数据组合而制作如图171所示的制品地图。
此外,关于如宅内房间布置的图像数据那样的个人信息,也可以进行与制品信息不同的加密的处理,并进行从移动终端N20向登录服务器N40发送的处理。
此外,关于如宅内房间布置的图像数据那样的个人信息,也可以向与制品信息不同的服务器发送,登录服务器N40在制作制品地图时以参照不同的服务器的步骤制作制品地图。
另外,也可以将本实施例与其他实施方式组合。例如,也可以将实施方式16的终端装置Y01的功能搭载在RF-IDN10中、将实施方式16的通信装置Y02的功能搭载在移动终端N20中,由此在进行图173的制品登录处理之前事先从图165所示的轮询进行相互认证、密钥共享的处理。此外,与其他实施方式组合也是本发明的范围内。
此外,上述的各实施方式的结构典型地也可以通过作为集成电路的LSI(Large Scale Integration)实现。它们既可以单独地1芯片化,也可以包括全部的结构或一部分的结构而1芯片化。集成电路根据集成度的差异也有称作IC、系统LSI、超级LSI、特级LSI等。此外,集成电路的方法并不限定于LSI,也可以使用专用电路或通用处理器实现。进而,也可以利用FPGA(Field Programmable GateArray)、或能够再构成LSI内部的电路单元的连接及设定的可重构处理器。
进而,如果因半导体技术的进步、或派生的其他技术出现代替当前的半导体技术的集成电路化的技术,当然也可以使用其技术进行功能块的集成化。例如可以考虑生物技术的应用等。
(实施方式18)
图186是本实施方式的整体系统图。
图186由RF-IDO50、移动设备O60、第1服务器O101及第2服务器O103构成。
RF-IDO50是具有NFC通信功能的设备,搭载在电冰箱、微波炉、洗衣机、电视机、录像设备等的电子制品中,在制品的存储器中,作为制品信息而保持作为表示制品的ID的制造号码、制品的使用履历信息、错误信息等。
移动设备O60具有能够与RF-IDO50的NFC通信功能通过近距离无线通信进行通信的NFC通信功能,具有将由RF-IDO50保持的制品信息读出的读写器功能。此外,所谓移动设备,是便携设备,是指便携电话终端等的便携设备、或电视机的遥控器终端。
第1服务器O101是通过因特网等的通用的网络与上述移动设备O60可通信地连接的服务器,在内部中具有DB(数据库),在上述DB中,储存由移动设备O60从RF-IDO50读出的RF-ID信息。
第2服务器O103是通过因特网等的通用的网络与上述第1服务器O101可通信地连接的服务器,在内部中具有DB(数据库),在上述DB中,储存设置有RF-IDO50的坐标的建筑物信息。
RF-IDO50由制品IDO51、第1服务器URLO52、服务IDO53、精度识别符O54构成。
制品IDO51是用来识别搭载有RF-ID的制品的识别的ID、例如制品的产品号码(包括颜色信息)、制造号码。
第1服务器URLO52是第1服务器O101的地址信息。
服务IDO53设定有表示电视机、空调、电冰箱等制品分类的ID。
精度识别符O54是表示由搭载有RF-ID10的制品ID赋予的位置信息的可靠性的信息。
如以上这样,在本实施方式的RF-IDO50中,如果能够与移动设备O60接近而进行近距离无线通信,则能够将储存在存储器中的型号、制造号码和第1服务器的URL、服务ID、精度识别符向移动设备O60发送。
接着,对本实施方式的移动设备O60进行说明。
移动设备O60由天线O61、RF-ID读写器O62、坐标精度识别信息O63、CPUO64、程序执行部O65、数据处理部O66、存储器部O67、显示部O68、通信天线O68、发送部O70、接收部O71、通信部O72、位置信息存储部O73、RF-ID存储部O74、RF-IDO75、URLO76、再现部O77、相对位置运算部O78、坐标信息送出部O79、记录部O80、建筑物坐标数据输出部O81、登录坐标O82、判断部O82、基准坐标O84、位置信息输出部O85、位置信息O86、朝向信息O87、磁罗盘O88、朝向信息O89、卫星用天线O90、位置信息运算部O91、位置信息O92、位置信息修正部O93、朝向信息修正部O94、角速度传感器O95、角速度传感器O96、角速度传感器O97、加速度传感器O98、加速度传感器O99、加速度传感器O100、积分器O105、积分器O106、绝对坐标运算部O107构成。
天线O61为了搜索能够进行近距离无线通信的RF-ID而朝向不确定的RF-ID进行供电。此外,在有应答的情况下,建立与RF-ID的近距离无线通信,接收从RF-IDO50发送的调制后的信息。
RF-ID读写器O62将接收到的信息解调。
坐标精度识别信息O63从接收到的信息中提取精度识别符。
CPUO64是进行移动设备的系统控制的部分,控制移动设备的各构成要素的动作。
程序执行部O65基于包含在接收到的信息中的服务ID执行程序。
数据处理部O66进行从第1服务器发送的数据处理。
存储器部O67将数据暂时存储。
显示部O68将存储在存储器部O67中的信息显示。
通信天线O68与因特网等的通用的网络连接。
发送部O70进行向因特网等的通用的网络发送的数据的调制。
发送部O71进行从因特网等的通用的网络接收的数据的解调。
通信部O72制作并解析经由因特网等的通用的网络与其他设备进行通信的数据。
位置信息存储部O73存储由本移动设备测量的位置信息。
RF-ID存储部O74存储从RF-IDO50取得的制品ID、服务ID。
RF-ID检测部O75检测来自RF-IDO10的应答。
URLO76根据从RF-IDO50接收到的信息提取第1服务器的URL。
再现部O77将存储在位置信息存储部O73中的信息再现。
相对位置运算部O78根据从位置信息存储部O73再现的位置信息和移动设备O60的当前的位置信息,计算相对位置信息。
坐标信息送出部O79将从RF-ID检测O75接受到触发事件的时刻的移动设备O60的位置信息送出。
记录部O80将从坐标信息送出部O79送出的位置信息写入到位置信息存储部O73。
建筑物坐标数据输出部O81提取由通信天线接收的建筑物坐标数据。
登录坐标O82提取由通信天线接收的登录坐标的数据。
判断部O83判断由登录坐标O82提取的登录坐标的数据的精度。
基准坐标O84为,如果判断部O83的判断的结果为登录坐标的数据能够信赖,则将登录坐标的数据设定为基准坐标,将设定的基准坐标数据传递交给位置信息修正部O93。
位置信息输出部O85根据来自朝向信息O87和位置信息O86的信息,制作位置信息并输出。
位置信息O86和朝向信息O87是被从由位置信息修正部O93和朝向信息修正部O94构成的绝对坐标运算部O107输出的移动设备O67的位置信息。
磁罗盘O88表示方位。
朝向信息O89制作磁罗盘O88的方位信息。
卫星用天线O90与卫星通信。
位置信息运算部O91根据与卫星的通信结果,运算移动设备O50的位置信息。例如求出纬度、经度、高度。
位置信息O92根据位置信息运算部O91的运算结果制作位置信息。
位置信息修正部O93将来自积分器O105和积分器O106的位置信息的结果用位置信息O92、基准坐标O84和来自建筑物坐标数据输出部O81的信息进行修正。
朝向信息O94利用来自朝向信息O93的信息将来自积分器O105和积分器O106的朝向信息的结果进行修正。
角速度传感器O95计测移动设备O60的x轴方向的角速度。
角速度传感器O96计测移动设备O60的y轴方向的角速度。
角速度传感器O97计测移动设备O60的z轴方向的角速度。
加速度传感器O98计测移动设备O60的x轴方向的加速度。
加速度传感器O99计测移动设备O60的y轴方向的加速度。
加速度传感器O100计测移动设备O60的z轴方向的加速度。
积分器O105将角速度传感器O95、角速度传感器O96和角速度传感器O97的计测结果积分。
积分器O106将加速度传感器O98、加速度传感器O99和加速度传感器O100的计测结果积分。
绝对坐标运算部O107由位置信息修正部O93和朝向信息修正部O94构成,计算移动设备O60的绝对坐标。
如以上这样,本实施方式的移动设备O60能够测量RF-IDO50的制品信息和取得制品信息时的移动设备O60的位置信息,能够将上述位置信息与RF-ID50的制品信息建立关联而向第1服务器010发送。此外,能够通过根据接收到的登录坐标设定的基准坐标、建筑物坐标数据和由位置信息O92取得的位置信息、由朝向信息O89取得的信息,将本移动设备O60的当前的位置信息修正。此外,也可以将第1服务器O101的登录坐标数据与第2服务器O103的建筑坐标数据组合,来制作设置有由移动设备O60登录的RF-ID10的制品的建筑物的3D制品地图。此外,也可以将制作出的3D制品地图显示到显示部O68上。
接着,对本实施方式的第1服务器O101进行说明。
第1服务器O101是经由因特网等通用的网络与移动设备O60连接的服务器。本第1服务器O101在内部中具备管理搭载有RF-IDO50的制品的登录坐标数据O102。
在登录坐标数据O102中,接收与移动设备O60建立了联系的RF-IDO10的信息。在登录坐标数据O102中,将移动设备O60作为母机,将RF-IDO50作为子设备而与母设备建立关联管理。此外,对于子设备,赋予由移动设备O60取得的位置信息,能够同时管理终端装置存在于哪里的信息。此外,还可以通过将从第2登录服务器O103接收的建筑物坐标数据与登录坐标数据O102组合,与移动设备O68同样制作设置在建筑物中的3D制品地图。
接着,对本实施方式的第2服务器O103进行说明。
第2服务器O101是经由因特网等通用的网络与第1服务器O103连接的服务器。本第2服务器O103在内部中具备将现有的建筑物的平面布置与各建筑物的坐标(例如纬度、经度、高度)建立关联而管理的建筑物坐标数据库O104。
在建筑物坐标数据库O104中,通过保持现有的建筑物的平面布置和坐标信息,也能够与第1服务器的登录坐标数据组合,与移动设备O68同样制作设置在建筑物中的3D制品地图。此外,建筑物坐标数据库O104也可以通过作为个人信息而与第1服务器O101另外地通过安全设定较高的(例如不能从移动设备O60直接通信的设定)服务器管理来减少个人信息的泄漏。
如以上这样,在本实施方式的系统中,将RF-IDO50的制品信息通过移动设备O60经由近距离无线通信读出,在移动设备O60中将接触在RF-IDO50上而能够进行近距离无线通信的位置信息与RF-IDO50的制品信息建立对应,向第1服务器发送。在第1服务器中,能够将移动设备O60作为母设备,将搭载有RF-IDO50的制品作为子设备建立对应而管理。此外,通过使用搭载有RF-IDO50的制品的位置信息计算各制品的相对位置,能够制作制品的3D地图。
此外,通过设置将建筑物的平面布置和坐标的信息作为数据库保持的第2服务器,能够通过与由第1服务器管理的各制品的位置信息组合来制作各建筑物中的搭载有RF-IDO50的制品的3D地图。
此外,移动设备O60能够通过根据接收到的登录坐标设定的基准坐标、建筑物坐标数据和由位置信息O92取得的位置信息、由朝向信息O89取得的信息,来修正本移动设备O60的当前的位置信息。
接着,说明在第1服务器O101中登录RF-IDO50的制品信息的步骤。
如果用移动设备O60接触在RF-IDO50上而成为能够进行近距离无线通信的状态,则通过来自移动设备O60的供电,RF-IDO50动作。
RF-IDO50如果被供电,则将存储的制品IDO51、第1服务器URL、服务IDO53和精度识别符O54的信息调制,向移动设备O60发送。
移动设备O60如果通过天线O61接收到制品IDO51、第1服务器URL、服务IDO53和精度识别符O54,则用RF-IDO62解调。
URLO75提取第1服务器URL,向通信部O75传递第1服务器URL的信息。
RF-ID存储部O74存储制品IDO51和服务IDO53的信息。
坐标精度识别信息O63提取精度识别符,传递给判断部O83。
RF-ID检测部O75将通知从RF-IDO50接收到信息的情况的触发事件向坐标信息送出部O79和基准坐标O84发送。
坐标信息送出部O79如果接受到触发事件,则将从位置信息输出部O85接受到的移动设备N60的位置信息向通信部O72传递。
这里,对由位置信息输出部O85输出的移动设备O60的位置信息进行说明。
首先,向绝对坐标运算部O107输入将由角速度传感器O95~O97计测的结果用积分器O105积分后的结果、和将由加速度传感器O98~O100计测的结果用积分器O106积分的结果。
在绝对坐标运算部O107中,使用保持有使用卫星用天线O90由位置信息运算部O91运算的结果的位置信息O92的信息和保持有磁罗盘O88表示的方位的结果的朝向信息O89的信息,对从积分器O105、O106输入的结果用朝向信息修正部O94和位置信息修正部O93进行修正。
接着,绝对坐标运算部O107向修正后的绝对坐标运算部O107朝向信息O87和位置信息O86输出。
位置信息输出部O85用来自朝向信息O87和位置信息O86的信息,制作位置信息。
通过以上步骤,移动设备O60制作位置信息。
接着,程序执行部O65将存储在RF-ID存储部O74中的制品ID、服务ID传递给通信部O72。
通信部O72制作在信息中包含来自坐标信息送出部O79的位置信息和来自程序执行部O65的制品ID、服务ID的数据,将从URLO76接受到的第1服务器的URL设定到数据的地址中,向发送部O70传递。发送部O70将数据调制,经由通信天线O68向第1服务器O101发送。
第1服务器如果从移动设备O60接收到数据,则将数据解调。
在登录坐标数据O102中,将移动设备O60作为母机,将RF-IDO50作为子机,对于作为母机的移动设备O60,将作为子机的RF-IDO50的制品IDO51、服务IDO53和移动设备O60取得RF-IDO50的信息时的位置信息建立联系而管理。
接着,对由移动设备O60制作搭载RF-IDO10、并且已由移动设备O60登录到第1服务器O101中的制品的3D地图的步骤进行说明。
图187是表示本实施方式的RF-IDO50所搭载的制品的配置的一例的图。
在1层的起居室中配置有电视机O50A、BD记录机O50B和空调O50C,在1层的日式房间中配置有空调O50D,在2层中配置有电视机O50E和空调O50F。在全部制品中搭载有RF-IDO50。此外,假设在上述第1服务器O101中登录RF-IDO50的制品信息的步骤中,全部制品都使用移动设备O60登录在第1服务器O101的登录坐标数据中。
首先,移动设备O60的通信部72制作对第1服务器O101请求由移动设备O60登录的制品的信息的制品信息请求数据。
发送部O70对制品信息请求数据进行调制,经由通信天线O68向第1服务器O101发送。
第1服务器O101如果接收到制品信息请求数据,则制作包含将移动设备O60作为母机而建立联系管理的子机的制品信息的制品信息应答数据,向移动设备O60发送。
这里,在制品信息应答数据中,包含电视机O50A、BD记录机O50B、空调O50C、空调O50D、电视机O50E、空调O50F的制品IDO51、服务ID和位置信息。
接着,第1服务器O101对第2服务器O103也发送与制品信息应答数据相同的信息。
在第2服务器O103中,从包含在制品信息应答数据中的各制品的位置信息中提取包括处于与建筑物坐标数据库O104中相同的位置的建筑物的位置(坐标)信息的图像数据。
图188是从建筑物坐标数据库O104提取的建筑物坐标数据。包含在建筑物的平面布置的图像和位置信息中。
第2服务器O103将提取出的建筑物坐标数据向移动设备O60发送。
移动设备O60的接收部O71如果经由通信天线O68接收制品信息应答数据,则将其解调,向通信部O72递交。
通信部O72将数据的内容向程序执行部O65递交。
程序执行部O65根据作为制品信息应答数据的内容的各制品的位置信息制作图152所示那样的制品的3D地图的图像数据。是基于各制品的位置信息映射到坐标上、此外通过按每个制品而不同的图标使用户一目了然的3D地图。
程序执行部O65将制作出的图像数据递交给数据处理部O66。
数据处理部O66将图像数据暂时存储在存储器部O67中。
显示部O68显示存储在存储器部O67中的图188所示的制品的3D地图的图像数据。
接着,移动设备O60的接收部O71如果经由通信天线O68接收到来自第2服务器O103的建筑物坐标数据,则将其解调而递交给建筑物坐标数据输出部O81。
建筑物坐标数据输出部O81将建筑物坐标数据解析,递交给显示部O68d。
显示部O68显示将图188的图像数据与已经显示的图189的图像数据组合的、图190所示的制品的3D地图的图像数据。
如以上这样,能够制作对拥有移动设备O60的用户一目了然的制品的3D地图。
接着,对由移动设备O60使用建筑物坐标数据修正移动设备O60的位置信息的步骤进行说明。
这里,以在第1服务器O101中登录图187的空调O50D的制品信息的情况为例进行说明。另外,与第1服务器O101从移动设备O60接收在信息中包含制品ID、服务ID的数据为止的上述步骤是同样的,所以省略。
第1服务器O101如果取得空调O50D的制品信息,则将所取得的空调O50的位置信息向第2服务器O103发送。
第2服务器O103从建筑物坐标数据库O104提取与空调O50D的位置信息相符的图188的建筑物坐标数据,向第1服务器发送。
第1服务器在登录的制品是空调等固定在墙壁上的制品的情况下将建筑物坐标数据与空调的位置信息比较,在空调的位置信息不接近于墙壁的情况下将建筑物坐标数据向移动设备O60发送。
移动设备O60的接收部O71如果接收建筑物坐标数据则将其解调,向建筑物坐标数据输出部O81递交。建筑物坐标数据输出部O81根据建筑物坐标数据和空调的位置信息决定应修正的位置信息,向位置信息修正部O93递交。
位置信息修正部O93基于从建筑物坐标数据输出部O81接受到的位置信息,将当前的移动设备的位置修正。
接着,移动设备O60用修正后的当前位置的信息向第1服务器O101进行空调O50D的登录。
如以上这样,将建筑物坐标数据库的位置信息与由移动设备O60测量的位置信息比较,能够判断由移动设备O60测量的位置信息存在偏差,修正移动设备O60的位置信息。
另外,在上述说明中,第1服务器O101从第2服务器O103取得建筑物坐标数据而进行判断,但并不限定于此。例如,也可以是移动设备O60在发送向第1服务器O101登录的数据之前、移动设备O60从第2服务器O103取得建筑物坐标数据,并将空调O50D与建筑物坐标数据比较来判断修正的需要与否。
接着,对由移动设备O60使用精度识别符修正移动设备O60的位置信息的步骤进行说明。
这里,以移动设备O60接触在第1服务器O101中已登录有制品信息的图187的空调O50C上的情况为例进行说明。
移动设备O60如果用天线O61接收空调O50C的RF-IDO50的制品IDO51、第1服务器URL、服务IDO53和精度识别符O54,则用RF-ID读写器O62解调。
移动设备O60由于在该时刻不知道在第1服务器O101中登录有空调O50C的制品信息,所以以上述的商品登录的步骤向第1服务器O101发送在信息中包括位置信息、制品ID和服务ID的数据。
第1服务器如果从移动设备O60接收到数据,则将数据解调。
在登录坐标数据O102中,如果判断为空调O50C已经是商品已登录,则制作包括登录坐标数据O102的空调O50C的位置信息的数据,向移动设备O60发送。
移动设备O60的接收部O71如果经由通信天线O68接收到空调O50C的位置信息,则将其解调,向登录坐标O82递交。
登录坐标O82如果从包含空调O50C的位置信息的数据中提取位置信息,则递交给判断部O83。
判断部O83参照从坐标精度识别信息O63接受到的RF-IDO50的精度识别符O54,判断是否将从登录坐标O82接受到的位置信息作为基准坐标。
图191表示各精度识别符的判断部O83的处理。
关于精度识别符,预先如图191所示那样将按每个制品而不同的精度识别符O54设定在RF-IDO50中。
这里,由于是空调O50C的精度识别符O54,所以设定为“高”。
判断部O83判断为进行移动设备O60的位置修正,将从登录坐标O82接受到的位置信息递交给基准坐标O84。
这里,由于是精度识别符O54,所以在“低”的情况下,移动设备O60判断为不需要进行位置信息的修正,将判断结果向第1服务器O101通知,在第1服务器中将新的空调O50C的位置信息存储到登录坐标数据中,结束处理。
基准坐标O84如果从RF-ID检测部O75接受到触发事件,则将从登录坐标O82接受到的位置信息向位置修正部O93递交。
位置信息修正部O93基于从基准坐标O82接受到的位置信息,将当前的移动设备的位置修正。
接着,移动设备O60将位置信息完成的情况向第1服务器O101通知,结束处理。
如以上这样,将建筑物坐标数据库的位置信息与由移动设备O60测量的位置信息比较,能够判断由移动设备O60测量的位置信息是否有偏差而将移动设备O60的位置信息修正,能够避免不需要的位置信息的更新。
此外,坐标的精度较高的组通过设定一旦设置就不变更设置场所的制品,提高精度的可靠性。
另外,即使是精度较高的组,也可以在位置信息偏离预先设定的次数的情况下,不修正移动设备O60的位置信息,而修正已登录在登录坐标数据O102中的位置信息。
另外,在上述说明中,在移动设备O60中使用精度识别符进行修正的判断,但也可以对第1服务器O101发送精度识别符、由第1服务器O101进行修正的判断。
接着,说明由移动设备O60通过相对位置管理制品的位置信息的步骤。
这里,以最初登录的电视机O50A的位置信息为基准点,制作之后进行商品登录的制品即BD记录机O50B的相对的位置信息。
首先,移动设备O60如果由天线O61接收到电视机O50A的RF-IDO50的制品IDO51、第1服务器URL、服务IDO53和精度识别符O54,则用RF-ID读写器O62解调。移动设备O60的坐标信息送出部O79将检测到RF-IDO50时的位置信息向记录部O80送出。
记录部O80如果接受到位置信息,则存储到位置信息存储部O73中。
然后,移动设备O60按照上述的制品登录的步骤,在第1服务器O101中登录电视机O50A的制品信息。
接着,移动设备进行BD记录机O50B的制品登录。
首先,移动设备O60如果由天线O61接收到BD记录机O50B的RF-IDO50的制品IDO51、第1服务器URL、服务IDO53和精度识别符O54,则用RF-ID读写器O62解调。
移动设备O60的坐标信息送出部O79将检测到BD记录机O50B的RF-IDO50时的位置信息向记录部O80和相对位置运算部O78送出。
记录部O80由于在位置信息存储部O73中存储有电视机O50A的位置信息,所以不记录BD记录机O50B的位置信息。
相对位置运算部O78如果从坐标信息送出部O79接受到位置信息,则经由再现部O77取得存储在位置信息存储部O73中的电视机O50A的位置信息。
接着,相对位置运算部O78以从再现部O77取得的电视机O50A的位置信息为基准计算BD记录机O50B的相对的位置信息,将计算出的结果存储到位置信息记录部中。
通过以上的步骤,能够求出以某个特定的制品的位置为基准的相对的位置信息。
另外,在上述说明中,由移动设备O60存储相对位置信息,但并不限定于此。移动设备O60也可以将相对位置信息向第1服务器O101发送、由登录坐标数据O102管理。
另外,在上述说明中,将最初进行制品登录的电视机O50A的位置信息设为基准位置,但并不限定于此。
例如,也可以将预先由用户设定的位置作为基准点。例如,也可以是建筑物的门厅的位置等。此外,在移动设备O60是电视机的遥控器终端的情况下,也可以将对应的电视机的位置作为基准点。
在图191和图192中表示本实施方式的3D地图的处理流程的一例。
另外,在本实施方式中,移动设备O60的位置信息存储部O73存储有相对的位置信息,但并不限定于此。例如,移动设备O60的坐标信息送出部O79总是将移动设备O60测量的位置信息向记录部O80发送,记录部O80将位置信息记录到位置信息存储部O73中。位置信息存储部O73储存本移动设备O60的位置信息。在此情况下,程序执行部O65根据储存在位置信息存储部O73中的位置信息制作本移动设备O60的轨迹信息。由此,能够根据轨迹信息推测本移动设备O60的行动。
另外,在本实施方式中,按照图191的精度识别符的两种分类进行了判断部O83的处理,但并不限定于此。例如,也可以设置两种以上的制品分类,按每个分类定义不同的位置信息的偏差的大小的阈值,来判断修正的需要与否。
另外,也可以将本实施例与其他实施方式组合。例如,也可以将实施方式15的通信装置M1101S的功能装入到搭载有RF-IDO50的制品中,当共用家庭ID时也共用3D地图。在此情况下,预先利用NFC通信功能从移动设备O60取得3D地图。
另外,在本实施方式中,搭载有电视机、BD记录机、空调等的RF-IDO50,但并不限定于此。图194由搭载有RF-IDO50的制品O50G~O50N构成。此外,制品O50G~O50N搭载特定小功率无线通信设备(例如,Zigbee),在各制品间在能够接收电波的范围中能够直接通信。此外,假设制品O50G~O50N经由RF-IDO50从移动终端O60取得由制品的制品O50G~O50N构成的制品配置的3D地图。此外,作为其他方法,制品O50G~O50N也可以保持通信天线O68,经由因特网取得制品配置的3D地图。
这里,说明制品O50H向制品O50K以特定小功率无线通信发送数据的情况。特定小功率无线通信设备通常从节电的观点出发而以休眠模式动作。休眠模式是电源定期地进行ON(接通)、OFF(断开)的切换的模式。此外,各制品的ON、OFF切换定时取同步。
制品O50H的特定小功率无线通信设备如果发生发送的数据,则切换为唤醒模式。唤醒模式是总是使电源为ON的模式。
制品O50H参照预先取得的制品O50G~O50N的制品配置的3D地图。制品O50H从制品配置的3D地图中调查位于本机与制品O50K之间的制品。这里,根据3D地图的信息,使制品O50J为进行数据中继的中继制品。
制品O50H对制品O50J进行切换为唤醒模式的指示。
制品O50H对制品O50J发送制品O50H目的地的数据。
制品O50J如果接受制品O50H目的地的数据,则向制品O50H转送,然后切换为休眠模式。
如以上这样,制品O50H使用3D地图决定发送数据的情况下的中继制品,仅将所决定的制品O50J切换为唤醒模式。由此,不需要将不需要的其他制品切换为唤醒模式。在没有3D地图的情况下,制品O50H为了确定到制品O50K的路径而需要将全制品切换为唤醒模式切换来进行路径搜索。
此外,上述各实施方式的结构典型地也可以通过作为集成电路的LSI(Large Scale Integration)实现。它们既可以单独地1芯片化,也可以包含全部的结构或一部分的结构而1芯片化。集成电路根据集积度的差异,也有称作IC、系统LSI、超级LSI、特级LSI等的情况。此外,集成电路的方法并不限定于LSI,也可以使用专用电路或通用处理器实现。还可以利用FPGA(Field Programmable Gate Array)、或能够再构成LSI内部的电路单元的连接及设定的可重构处理器。
进而,如果因半导体技术的进步、或者因派生的其他技术而出现代替当前的半导体技术的集成电路化的技术,则当然也可以使用该技术进行功能块的集成化。例如可以考虑生物技术的应用等。
(实施方式19)
在本实施方式中,使用附图对以下的系统详细地说明,该系统由具有近距离通信功能的终端设备、与终端设备进行近距离无线通信的便携设备、和与便携设备经由因特网或便携电话通信网等的通用的网络连接的服务器设备构成,利用便携设备的感知信息等,便携设备通过指示终端设备,能够操作终端设备。
(整体的系统结构)
图195是表示有关本实施方式的通信系统的整体像的概念图。图195所示的通信系统100包括终端设备101、便携设备102及服务器设备104。
终端设备101和便携设备102能够通过近距离无线通信进行通信。本实施方式的近距离无线通信中,设想了(1)使用电磁感应方式的13.56MHz带(HF带)、或电波方式的52~954MHz带(UHF带)等的RFID(RadioFrequency Identification,ISO14443)标签与读写器设备的通信,或(2)通过13.56MHz带的NFC(Near Field Communication,ISO/IEC21481)的通信。通常,在HF带中被限定为几十cm、在UHF带中被限定为几cm的通信距离,所以通过将便携设备靠近(或接触在)终端设备上来建立通信。
在本实施方式中,说明在便携设备102侧安装读写器功能、在终端设备101侧具有IC标签功能的结构。但是,本实施方式的主要着眼点是,只要是终端设备101和便携设备102能够相互通过近距离无线通信进行信息的交换的结构就可以。即,即使是在便携设备102侧安装IC标签功能、在终端设备101侧具有读写器功能的结构,也是本发明的范畴。此外,在NFC中,将PtoP通信功能、仿真卡及仿真读写器标准化。在此情况下,IC标签与读写器设备的关系是哪种都可以。在本实施方式中,为了方便而以在便携设备102侧安装读写器功能、在终端设备101侧具有IC标签功能的结构进行说明。
终端设备101具备控制器105、主存储器106、近距离无线通信部107及天线108。
控制器105例如是作为终端设备101的系统控制器的CPU。该控制器105至少进行终端设备101的近距离无线通信部107以外的系统控制。
主存储器106是能够存储用来通过控制器105动作的控制软件、以及由终端设备101感知的所有数据的存储器,通常安装在控制器105的LSI内部中(当然,也可以是外置存储器的结构)。例如,主存储器106是RAM或非易失性存储器等。
近距离无线通信部107与安装在便携设备102上的读写器设备进行通信。该近距离无线通信部107将向读写器设备的转送数据调制、或将来自读写器设备的转送数据解调。此外,该近距离无线通信部107基于从读写器设备接收到的电波,进行至少用于建立近距离无线通信的起电,基于来自读写器设备的电波提取时钟信号。因此,终端设备101的至少近距离无线通信部107通过由来自读写器设备的电波产生的电力和时钟进行动作。由此,在终端设备101的主电源为断开的状态下,近距离无线通信部107也能够与便携设备102进行近距离无线通信。
天线108是用于与安装在便携设备102上的读写器设备进行近距离无线的环形天线。
便携设备102具备天线109、显示部110及按键111。
天线109是用于与终端设备101进行近距离无线通信的天线。便携设备102朝向终端设备101所具备的IC标签进行轮询,在通信建立的时刻,从终端设备101读出信息,或向终端设备101写入信息。
显示部110将便携设备102与终端设备101的近距离无线通信的结果、或从服务器设备104发送的数据进行显示。该显示部110例如是液晶显示器等。
按键111是用户用于操作便携设备102的接口。此外,也可以考虑显示部110为触摸面板,显示部110兼具备按键111。
便携设备102根据由用户进行的向按键111的案件输入,使便携设备102具备的近距离无线通信部启动,在启动后开始用于对终端设备101进行近距离无线通信的轮询动作。通常,轮询动作对不特定的对方持续发出电波,所以在电池驱动的便携设备102中从电池寿命的观点看发生负担。因而,如果在便携设备102上配置用于进行轮询动作的专用按钮,则能够不进行无用的轮询动作,并且减轻用户的设备操作负担。
服务器设备104是具备数据库的服务器。通常,服务器设备104由具有数据库的WEB服务器构成。此外,服务器设备104经由因特网103连接在便携设备102上。该服务器设备104将从便携设备102转送来的信息登录在数据库中,将表示其结果的信息向便携设备102转送。此外,便携设备102的显示部110显示该信息。
通过以上那样的系统结构,能够将由终端设备101感知到的信息经由便携设备102向服务器设备104的数据库登录。例如,从终端设备101通过近距离无线通信将制造号码、型号或制造商识别信息等的能够唯一地识别终端设备的信息向便携设备102转送。此外,便携设备102将经由近距离无线通信从终端设备101接收到的信息、便携设备102保持的用于确定用户或便携设备本身的信息(邮件地址、电话号码、便携终端识别信息、或SIM卡ID)、以及在便携设备能够感知位置信息的情况下用于确定位置的信息(GPS信息、A-GPS信息、或根据便携网的基站推测的位置信息等)向服务器设备104转送。此外,服务器设备104将这些信息向数据库登录。通过这一系列的动作,能够消除使用户输入各种信息的作业的负担。即,实质上用户仅通过将便携设备102靠近终端设备101上,就能够进行终端设备101的爱用者登录等。
此外,作为终端设备101的感知信息而发送不良状况发生状况或使用履历信息,由此制造商能够迅速地判断并应对特定批次的初始不良。进而,制造商根据使用履历信息按每个用户确定所使用的功能,由此能够发挥将所确定的信息用于下期商品开发等的对于制造商而言的优点。
(便携设备的结构)
接着,使用附图对有关本实施方式的便携设备102详细地说明。
图196是表示有关本实施方式的便携设备102的结构的块图。
便携设备102由近距离无线通信部201、近距离无线检测部202、设备信息取得部203、外部通信部204、传感器部205、位置感知部206、方向感知部207、指向空间取得部208、设备判断部209、移动判断部210、操作信息设定部211、遥控器信息取得部212、存储部213、显示信息决定部214、操作信息发送部215、操作信息发送部、操作履历取得部216、声音传感器217构成。
近距离无线通信部201进行由天线109接收到的信息的解调及发送的信息的调制。
近距离无线检测部202检测由近距离无线通信部201解调的信息。
设备信息取得部203从由近距离无线检测部202检测到的信息中,取得作为关于终端设备的信息的设备信息。
外部通信部204由通信天线219、接收部220、发送部221、通信控制部222构成。
通信天线219与因特网等的通用的网络连接。
发送部221进行向因特网等的通用的网络发送的数据的调制。
接收部220进行从因特网等的通用的网络接收的数据的解调。
通信控制部222制作并解析经由因特网等的通用的网络与其他设备进行通信的数据。
传感器部205由加速度传感器223、GPS传感器224、角速度传感器225、方位传感器226构成。
加速度传感器223计测便携设备102的加速度。
GPS传感器224取得GPS信息,计算位置信息。
角速度传感器225计测便携设备102的角速度。
方位传感器226计测方位。
位置感知部206由绝对位置取得部227、相对位置取得部228、位置设定部229构成。
绝对位置取得部227取得由GPS传感器224计算出的位置信息、经由外部通信部204从服务器取得的位置信息作为绝对位置。
相对位置取得部228将由加速度传感器223和角速度传感器225计测的加速度和角速度积分,取得便携设备102相对于初始设定值的相对位置。
位置设定部229根据由绝对位置取得部227取得的绝对位置和由相对位置取得部228取得的相对位置,计算便携设备102的当前位置。
方向感知部207根据由角速度传感器225计测的角速度和由方位传感器226计测的方位,计算便携设备102的指向方向。
指向空间取得部208根据由位置感知部206计算出的便携设备102的位置信息和由方向感知部207计算出的指向方向,取得便携设备102指示的空间作为指向空间信息。
遥控器信息取得部212经由外部通信部204,取得从服务器设备104取得的用于操作终端设备101的遥控器信息。
存储部213将由遥控器信息取得部212取得的终端设备101的遥控器信息与由位置感知部206取得的检测到近距离无线时的位置信息建立对应而存储。
设备判断部209根据由指向空间取得部208取得的指向空间信息和由存储部213保持的终端设备101的位置信息,判断处于便携设备102指示的方向上的终端设备101。
移动判断部210根据由传感器部205计测的传感器信息,判断便携设备102是否静止。
遥控器信息设定部211从存储部取得由设备判断部209判断的终端设备101的遥控器信息,对便携设备102设定上述遥控器信息。
显示信息决定部214基于由遥控器信息设定部211设定的遥控器信息,决定向显示部110显示的遥控器界面。
操作信息发送部215在便携设备102的使用者按下按键111时,将与按下的按键111对应的终端设备101的遥控器命令向终端设备101发送。
操作履历取得部216取得由操作信息发送部215发送的遥控器命令信息,取得使用者的终端设备101的操作履历。
声音传感器217感知便携设备102的周围的声音。例如,声音传感器217是麦克风。
通过以上的结构,能够将终端设备信息、终端设备101的位置及终端设备101的遥控器信息建立对应而用存储部213保持。此外,使用传感器信息计算便携设备102指示的方向,由此将存在于计算出的指向空间中的终端设备101的遥控器信息从存储部调出,能够基于该终端设备101的遥控器信息设定便携设备102的遥控器命令。例如,便携终端102的使用者仅通过将便携终端朝向空调或电视机等的想要操作的家电设备,就能够用便携设备102进行使用者朝向的家电的操作。
此外,通过用移动判断部210进行便携设备102的静止判断,便携设备102能够以静止为触发事件,设为位于便携设备102所指示的方向上的终端设备的遥控器,不进行使用者的键操作等就能够将便携终端102设为遥控器。
此外,能够用便携设备102的方向感知部207取得,当用便携设备102经由红外线通信将终端设备101操作时,在红外线通信的指向方向从终端设备101偏离的情况下,能够将“请稍稍朝向右方”等的警告消息向用户提示。
此外,通过声音传感器217能够取得终端设备101的声音信息,例如在电视机的情况下能够取得在频道的切换时发生的声音,在空调等的情况下能够取得对用户表示遥控器信息已适当到达的反应音,不用发送表示终端设备101接收到信号的特定的反馈信号,便携设备102就能够识别是否正确地发送了操作命令。由此,从没有连接到通用网络那样的终端设备101也能够经由便携设备102收集正确的终端设备101的操作履历。
此外,将由近距离无线检测部202检测到终端设备101作为触发事件,将由相对位置取得部228取得的相对位置信息初始化,由绝对位置取得部227将绝对位置信息设定为设备信息、能够经由GPS传感器224或外部通信部204取得的位置信息。由此,能够减轻使用加速度传感器223修正位置信息时发生的位置信息的累积误差。
(设备判断部的详细结构)
接着,对本实施方式的设备判断部209的详细结构进行说明。
图197的(a)、(b)、(c)是表示实施方式的设备判断部209的结构的块图。
在图197(a)中,设备判断部209具备台数判断部301、设备方向计算部302、差计算部303、设备决定部304。
台数判断部301根据由指向空间取得部208计算出的便携设备102的指向方向和由存储部213保持的终端设备101的位置信息,判断存在于上述指向空间内的终端设备101的台数。
设备方向计算部302计算由上述台数判断部301判断出的终端设备101与便携设备102的距离或由上述台数判断部301判断出的终端设备101的方向角。
差计算部303计算由设备方向计算部302计算出的各终端设备101的方向角与作为便携设备102所指示的方向的指向角之差。
设备决定部304选择由差计算部303计算出的差最小的终端设备101作为设定遥控器信息的终端设备。
在图197的(b)中,设备判断部209具备台数判断部301、空间信息存储部305、设备决定部306。
空间信息存储部305保持终端设备101存在的建筑物的平面布置和坐标信息。
设备决定部306基于从空间信息存储部305取得的平面布置信息,决定设备。例如,在由台数判断部301判断出的终端设备中,存在于与便携终端相同的房间中的终端设备仅存在1台的情况下,选择该上述终端设备作为设定遥控器信息的终端设备。
在图197的(c)中,设备判断部209具备台数判断部301、设备候选显示部307、用户输入取得部308、设备决定部309、俯仰角取得部310。
设备候选显示部307将由台数判断部301判断出的终端设备101基于设备俯仰角取得部,作为候选终端设备列表向显示部110输出。
用户输入取得部308从由设备候选显示部307输出的候选终端设备列表中取得用户通过键操作选择的终端设备101。
设备决定部309选择由用户输入取得部308取得的终端设备101,作为设定遥控器信息的终端设备101。
俯仰角取得部310在设定遥控器信息的终端设备101被选择了时,取得便携设备102的俯仰角。
设备俯仰角存储部311将由俯仰角取得部310取得的俯仰角与由设备决定部309选择的终端设备101建立对应而存储。
通过图197的(a)的结构,在由指向空间取得部208取得的指向空间中存在多个终端设备101的情况下,能够由差计算部303选择与便携设备102指示的方向最近的终端设备101。
通过图197的(b)的结构,在由指向空间取得部208取得的指向空间中存在多个终端设备101的情况下,能够取得建筑物的平面布置信息,能够将设定遥控器信息的终端设备101缩减为便携设备102存在的空间内的终端设备101。
通过图197的(c)的结构,通过将用户选择的终端设备101与俯仰角信息建立对应存储,在由指向空间取得部208取得的指向空间中存在多个终端设备101的情况下,能够基于俯仰角信息缩减由设备候选显示部307输出的终端设备101。
(便携设备102的存储部)
接着,对本实施方式的存储部213的一例进行说明。
图198是表示本实施方式的存储部213的数据构造的一例的图。
如该图所示,在存储部213中,将制造号码、制品号码、位置信息和遥控器信息建立对应而存储,具有制造号码存储区域、制品号码存储区域、位置信息存储区域、遥控器信息存储区域。
制造号码存储区域存储制造号码作为用于唯一地决定被登录的终端设备101的信息。
制品号码存储区域存储制品号码作为用于识别终端设备101的制品种类的信息。
位置信息存储区域存储与终端设备101建立对应的位置信息。例如,存储终端设备101存在的纬度经度、及起居室、厨房等的房间信息。
遥控器信息存储区域存储与终端设备101建立对应的遥控器信息。所谓遥控器信息,由将与终端设备101建立对应的终端设备101的操作信息、以及将按键111与操作信息建立对应的显示信息构成。
例如,所谓操作信息,是将电源的“接通”或“断开”等的终端设备101的动作与为了执行该动作而从便携设备102发送的操作命令建立对应的信息。另外,上述操作信息并不限于单一的终端设备101的动作,也可以是多个动作。例如,也可以作为1个操作信息而设定将电源接通、将录像列表打开、选择特定的节目并再现这样的一系列的终端设备101的动作。
(便携设备102的指向空间的决定法)
接着,对由本实施方式的指向空间取得部208取得的指向空间的取得法的一例进行说明。
图199是表示本实施方式的由指向空间取得部208取得的指向空间的取得法的一例的图。
在该图中,坐标x0及y0表示便携设备102的坐标位置,能够由便携设备102的位置感知部206取得。
在坐标轴上表示的“N”、“S”、“E”、“W”分别表示“北”、“南”、“东”、“西”,能够由便携设备102的方位传感器226取得。
表示便携设备102相对于坐标轴的指向角的角度θ能够用便携设备102的角速度传感器225取得。
角度α是用于规定指向空间范围的阈值,如果使上述角度α较大,则指向空间变宽,如果使上述角度α较小,则指向空间变窄。另外,角度α既可以预设在便携设备102中,也可以通过由用户输入来设定。此外,角度α也可以基于建筑物的大小、房间的大小、墙壁与便携设备102的距离等来设定。
在该图中,指向空间为(x-x0)·tan(θ-α)+y0<y<(x-x0)·tan(θ+α)+y0,基于存储部213的位置信息选择存在于上述指向空间中的终端设备101。
(遥控器信息的登录流程)
接着,对本实施方式的向便携设备102的存储部213登录遥控器信息的处理的流程进行说明。
图200是表示本实施方式的向便携设备102的存储部213登录遥控器信息的处理的流程的流程图。
首先,在S601中,用户将近距离无线通信的读写器应用启动。
接着,在S602中,便携设备102经由天线109,发送作为向不确定对象的呼叫信号的轮询电波。
在S603中,判断是否检测到了来自终端设备101的轮询应答。
在上述S603中,在判断为未能检测到轮询应答的情况下,再次进行轮询电波的发送。
在上述S603中,在判断为检测到了轮询应答的情况下,发送用于取得终端设备101的设备信息的设备信息请求(S604)。
在S605中,接收从终端设备101发送的设备信息。
在S606中,判断是否能够从设备信息取得终端设备101的位置信息。
在上述S606中,在判断为取得了位置信息的情况下,在S607中,将上述位置信息作为由绝对位置取得部227取得的绝对位置信息来保持,将由相对位置取得部228取得的相对位置信息初始化。
在上述S606中,在判断为不能取得位置信息的情况下,在S608中,将GPS传感器224启动,取得绝对位置信息,将由相对位置取得部228取得的相对位置信息初始化。
接着,在S610中,判断在存储部213中是否保持着与在上述S605中取得的设备信息对应的操作信息。
在上述S610中判断为保持着操作信息的情况下,结束处理。
在上述S610中判断为没有保持操作信息的情况下,在S611中,经由外部通信部204向服务器发送与上述设备信息对应的操作信息请求。
在接着的S612中,接收从服务器发送的操作信息。
进而,在S613中,将在上述S612中接收到的操作信息与在S607或S609中取得的位置信息建立对应,向存储部213保存。
(遥控器信息的设定操作流程)
接着,对本实施方式的在便携设备102中设定遥控器信息、作为遥控操作的处理的流程进行说明。
图201A及图201B是表示本实施方式的对便携设备102设定遥控器信息及并作为遥控操作的处理的流程的流程图。
图201A是用户操作便携设备102、将遥控器应用启动的情况下的处理的流程,图201B是没有用户的按键操作而遥控器应用自动启动的情况下的处理的流程。
首先,在图201A中,通过用户的按键操作,便携设备102启动遥控器应用(S701)。
在接着的S702中,取得用户通过用户的按键操作选择的终端设备101。
在S703中,将与在上述S702中取得的终端设备对应的操作信息设定到便携设备102。
在S704中,将传感器部启动,在位置感知部206及方向感知部207中开始感知。
在S705中,在相对位置取得部228中计算相对位置。
在接着的S706中,基于通过用户的按键111输入进行的遥控操作,发送操作终端设备101的遥控器命令(详细流程后述)。
在S707中,在移动判断部210中判断便携设备102是否静止。
在上述S707中,在判断为便携设备102没有静止的情况下,再次进行上述S705的相对位置信息的计算。
在上述S707中判断为便携设备102静止的情况下,转移到S708,在位置感知部206及方向感知部207中取得位置信息及指向方向信息。
在S709中,判断在便携设备102指示的方向上存在的终端设备101,设定遥控器信息(详细流程后述)。
接着,对图201B进行说明。
首先,在S710中,将传感器部启动,在位置感知部206及方向感知部207中开始感知。
在S711中,在相对位置取得部228中计算相对位置。
在S712中,在移动判断部210中判断便携设备102是否静止。
在上述S712中判断为便携设备102没有静止的情况下,再次进行上述S711的相对位置信息的计算。
在上述S712中判断为便携设备102静止的情况下,转移到S713,将遥控器应用启动。
在S714中,在位置感知部206及方向感知部207中,取得位置信息及指向方向信息。
在S715中,判断在便携设备102指示的方向上存在的终端设备101,设定遥控器信息(详细流程后述)。
在接着的S716中,基于由用户的按键111输入进行的遥控操作,发送操作终端设备101的遥控器命令(详细流程后述)。
通过上述图201B的处理,能够不经由用户的按键操作而将遥控器信息设定到便携设备102。
(遥控器信息的设定操作流程)
接着,对本实施方式的判断在便携设备102指示的方向上存在的终端设备101的处理(S709、S715)的流程进行说明。
图202是表示本实施方式的判断在便携设备102指示的方向上存在的终端设备101的处理的流程的流程图。
首先,在S801中,设搜索范围角度为α,进行搜索范围的设定。
接着,在S803中,使用便携设备102的位置信息(X0,Y0)、指向方向信息θ,判断是否存在满足(x-x0)·tan(θ-α)+y0<y<(x-x0)·tan(θ+α)+y0的终端设备101。
在上述S803中,在判断为存在终端设备101的情况下,转移到S804,判断在指向空间中终端设备101是否是1台。
在上述S804中,在判断为在指向空间中终端设备101是1台的情况下,转移到S810,设定该终端设备101的遥控器信息,结束处理。
在上述S804中,在判断为在指向空间中终端设备101不是1台的情况下,转移到S805,从空间信息存储部305取得平面布置信息。
在接着的S806中,使用上述平面布置信息和在上述S803中取得的指向空间,判断满足便携设备102存在的房间内且上述指向空间内的条件的终端设备101是否是1台。
在上述S806中,在判断为1台的情况下,转移到S810,设定该终端设备101的遥控器信息,结束处理。
在上述S806中,在判断为不是1台的情况下,转移到S807,向显示部将满足上述S806的条件的终端设备101的列表作为设备候选列表,用显示部110显示。
接着,在S808中,从上述设备候选列表中,取得用户经由按键111选择的终端设备101。
在S809中,从俯仰角取得部310取得俯仰角信息,将由上述S808选择的终端设备101与上述俯仰角信息建立对应而存储。
在上述S803中,在判断为不存在终端设备101的情况下,转移到S811,根据位置信息判断便携设备102是否处于自宅等的操作终端设备存在的空间中。这里,作为一例而将操作终端设备存在的空间设为自宅,但并不限定于此。
在上述S811中,在判断为终端设备101处于操作终端设备存在的空间中的情况下,转移到S816,向显示部输出敦促终端设备101的登录的警告,例如“没有登录,请向家电接触”。
在上述S811中,在判断为终端设备101不在操作终端设备存在的空间中的情况下,转移到S812,取得自宅的经度纬度等的位置信息。
在S813中,根据上述自宅位置信息和便携设备102的指向方向信息、位置信息,判断便携设备102是否朝向自宅的方向。
在上述S813中,在判断为没有朝向自宅的方向的情况下,结束处理。
在上述S813中,在判断为朝向自宅的方向的情况下,将连接在外部网络上的终端设备等、能够经由因特网操作的终端设备101的列表向显示部输出。
接着,在S814中,从上述设备列表中取得用户经由按键111选择的终端设备101。
在S810中,设定该终端设备101的遥控器信息,结束处理。
(遥控操作详细流程)
接着,对本实施方式的将便携设备102作为遥控器、操作终端设备101的处理(S706、S716)的流程进行说明。
图203是表示本实施方式的将便携设备102作为遥控器、操作终端设备101的处理的流程的流程图。
首先,在S901中,确认是否有用户经由按键111进行的命令的输入。
在上述S901中,在判断为没有命令的输入的情况下,结束本处理。
在上述S901中,在判断为有命令的输入的情况下,转移到S902,判断输入的命令是否是应用的结束命令,在判断为是结束命令的情况下结束处理。
在上述S902中判断为不是结束命令的情况下,向终端设备101发送操作命令。
在接着的S904中,使用声音传感器217取得终端设备101的声音信息,基于上述声音信息,判断终端设备101是否正确地接收到了操作命令。这里,所谓声音信息,例如在电视机的情况下是在频道的切换时发生的声音,在空调等的情况下是对用户表示遥控器信息适当到达的反应音等。
在上述S904中,在判断为正确地接收的情况下,转移到S905,经由外部通信部将终端设备101的操作履历向服务器设备104发送。另外,上述操作履历也可以保存在便携设备102内的存储部中。
在接着的S906中,与操作命令对应的便携设备102的显示部的画面迁移。例如,在电视机中显示已录像节目列表时,能够在用户保持的便携设备102的显示部上也显示已录像节目列表。
在上述S904中,在判断为没有正确地接收的情况下,转移到S907,进行操作命令的再送,判断是否超过了一定的再送次数。
在上述S907中,在判断为超过了再送次数的情况下,转移到S908,向显示部110输出对用户敦促再一次进行按键操作的警告,例如,“请再一次”。
(遥控器登录顺序)
接着,对本实施方式的向便携设备102登录遥控器信息时的终端设备101、便携设备102、与服务器设备104之间的数据的交换进行说明。
图204是表示本实施方式的向便携设备102登录遥控器信息时的终端设备101、便携设备102、与服务器设备104之间的数据的交换的顺序图。
首先,用户将便携设备102的用于启动进行近距离无线通信的读写器的应用启动,开始轮询。
将开始了轮询的便携设备102向终端设备101的安装有用于近距离无线通信的天线的区域接触。
在接触后,终端设备101接收来自便携设备102的轮询电波。
接收到轮询电波的终端设备101将轮询应答信号向便携设备102发送,建立终端设备101与便携设备102的近距离无线通信。
接着,便携设备102如果从终端设备101接收到轮询应答信号,则生成用于从终端设备101读出设备信息的读命令,向终端设备101发送。
终端设备101如果接收到读命令,则将终端设备101的设备信息向便携设备102发送。
便携设备102在从终端设备101接收到的信息中提取设备信息。
进而,便携设备102利用GPS传感器等的各种传感器信息,取得接触的定时的位置信息。
在该定时取得位置信息是因为,利用为了建立近距离无线通信而需要使终端设备101和便携设备102接近到几cm以内的特性,在上述通信建立时,由便携设备102取得的位置信息可以被看作与终端设备101的位置信息相同。
接着,向服务器设备104发送用于从服务器设备取得与所提取的终端设备101的设备信息对应的遥控器信息的、遥控器信息的请求命令。
服务器设备104如果接收到遥控器信息的请求命令,则从遥控器信息管理数据库取得该设备的遥控器信息,将该遥控器信息向便携设备102发送。
最后,便携设备102将接收到的遥控器信息、位置信息、设备信息建立对应,存储到存储部213。
(遥控操作顺序)
接着,对本实施方式的将便携设备102作为遥控器而操作终端设备101时的终端设备101、便携设备102与服务器设备104之间的数据的交换进行说明。
图205是表示本实施方式的将便携设备102作为遥控器而操作终端设备101时的终端设备101、便携设备102与服务器设备104之间的数据的交换的顺序图。
首先,用户基于显示在显示部110上的遥控器界面,经由按键111输入操作命令。
接着,便携设备102将用户输入的操作命令经由操作信息发送部215向终端设备101发送。
终端设备101执行与接收到的操作命令对应的程序,执行电源、音量、温度、再现、电视机频道的变更等的操作。
终端设备101在电视机的情况下发出在频道的切换时发生的声音,在空调等的情况下发出对用户表示遥控器信息适当到达的反应音。
便携设备102基于由声音传感器217将终端设备101发出的声音识别的状况,向服务器设备104发送终端设备101的操作履历。
此外,便携设备102根据操作命令将便携设备102的显示部的画面迁移。
用户再次基于显示在显示部111上的遥控器界面,经由按键111输入操作命令。
接着,便携设备102将用户输入的操作命令经由操作信息发送部215向终端设备101发送。
此时,在终端设备101不能正确地接收到操作命令的情况下,便携设备102不能识别终端设备101发出的声音,所以不用终端设备101发送表示正确地接收到信号的特定的反馈信号,便携设备102就能够识别出没有完成操作命令的接收。
在此情况下,便携设备102进行操作命令的再送。
接着,便携设备102在判断为超过了一定的再送次数的情况下,向显示部110输出对用户敦促再一次按键操作的警告,例如,“请再一次”,成为用户的操作命令输入等待状态。
另外,在本实施方式中,以在取得终端设备101的设备信息时使用近距离无线取得的例子进行了说明,但并不限定于此。例如,也可以对终端设备101附加具有设备信息的条码等,使用便携设备102具有的数字照相机等的光学读取装置读取。图206是表示本实施方式的将终端设备101的设备信息从条码读出的一例的图。图206由空调1201和便携设备1202构成。便携设备1202除了具有光学读取装置以外,是与便携设备102同样的结构。空调1201被附加了具有设备信息的2维码1203。将上述2维码1203使用便携设备1202的光学读取装置,取得附加在2维码中的设备信息。如以上这样,还能够取得不具有近距离无线的终端设备101的设备信息。由此,即使在空调等设置场所较高而难以进行用于建立近距离无线的向终端设备101的接触的情况下,也能够取得设备信息。
此外,在便携设备102的设备判断部209中,在多个终端设备101接近、由设备判断部209难以判断的情况下、或想要将多个设备同时操作的情况下,用便携设备102进行多个终端设备101的操作。作为一例,在图207中表示操作多个照明的例子。在该图中显示为,通过将便携设备102朝向照明开关盘,能够将可用上述照明开关盘操作的照明开关一齐操作。例如,如图207(a)所示,可以在便携设备102中同时设定厨房照明和餐厅照明的操作信息,并同时操作。此外,在能够使LED照明等照度模拟地变化的情况下,也可以如图207(b)那样显示。
进而,在如电视机和记录机那样终端设备101处于较近的地方的情况下,由于电视机及记录机有许多用于操作的遥控器命令,所以难以将多个终端设备101的遥控器命令全部显示在显示部上。因此,在遥控器命令有许多的情况下,用显示部110进行能够使用户选择作为哪个终端设备101的遥控器来对便携设备102设定的显示。在图208(a)中表示向电视机和记录机的用户敦促选择的显示例。在该图的情况下,通过将电视机遥控器的设定设为“开启”,便携设备102成为电视机遥控器,通过将记录机遥控器的设定设为“开启”,便携设备102成为记录机遥控器。
进而,在便携设备102能够取得终端设备101的当前的动作状况的情况下,通过与当前的动作状况相应地设定便携设备102的遥控器信息,不需要将全部的遥控器命令显示,能够使用户界面简单化。例如,作为取得该动作状况的手段,在电视机等的情况下,可以通过使用因特网等的通用网络来取得。在图208(b)中,表示与当前的动作状况相应地设定便携设备102的遥控器信息的一例。在该图中,假设电视机是电源接通状态,记录机是电源断开状态,便携设备102取得了该当前的动作状况。此时,作为电视机的操作,至少不会使用电源接通命令,所以不需要设定到便携设备102的遥控器。此外,由于记录机是电源断开状态,所以可以考虑作为最初用户选择的遥控操作,是电源开启。如以上这样,能够根据终端设备101的动作状况而缩减向用户提示的遥控器命令。
另外,在本实施方式中,在便携设备102中计算便携设备102的指向空间信息,判断在指向方向上存在的终端设备101,但也可以将上述判断由服务器设备104进行。例如,便携设备102将角速度信息、加速度信息及位置信息经由外部通信部204向服务器设备104发送,服务器设备104基于从上述便携设备102接收到的角速度信息、加速度信息及位置信息,判断在便携设备102的指向方向上存在的终端设备101,将判断出的终端设备101的遥控器信息向便携设备102发送。
另外,在本实施方式中,也可以使用便携设备102的高度信息。例如,可以从气压计取得便携设备102的高度信息。
另外,在本实施方式中,也可以将电视机或空调等的终端设备101根据移动性的高度、操作紧急度的高度、设备的大小等来改变遥控器的检测范围。这例如通过在空调等不容易移动的终端设备101中使检测范围较小,防止在别的终端设备101的操作中产生误动作,并且关于例如电风扇等设置场所比较容易变化的终端设备101,通过使遥控器的检测范围较大,使得在设备的场所某种程度变化的情况下也能够操作设备。
此外,在终端设备101与便携设备102的距离较远的情况下,能够操作设备的范围变小,所以也可以根据终端设备101与便携设备102的距离来改变用于规定指向空间范围的阈值α。
进而,当然也可以如图209那样,处于建筑物的1层中的用户朝向2层的终端设备6002进行操作,但此时,在层不同的情况下、或房间不同的情况下、或操作设备离开规定的距离以上的情况下,如果将便携设备102朝向,则也可以显示处于该房间中的设备一览。由此,即使在用户不能正确地记得相邻的房间的终端设备101的场所的情况下,也能够进行远程场所的终端设备101的操作。
(实施方式20)
对本发明的实施方式20进行说明。在图210中表示在本实施方式中设想的网络环境。在本实施例中,设想了各种家电设备与家电控制装置5000通过无线通信设备连接的网络环境。
图211是搭载在各家电设备中的网络模组的结构图。各网络模组具备能够进行NFC等的近距离无线通信的第1无线通信部5001和能够进行ZigBee等的近距离无线通信的第2无线通信部5002。
图212是家电控制装置的功能块图。家电控制装置也与家电设备同样具备第1无线通信部5021和第2无线通信部5022。但是,各家电设备即使在物理层5023、MAC层5024使用标准化的协议的情况下,上位层5025有时也使用不同的协议,所以设为家电控制装置保持与多个制造商、设备对应的协议。例如是通过NFC认证的设备5026、通过按钮认证的设备5027等。另外,家电设备也可以搭载蓝牙或无线LAN(802.11)等的多个近距离无线方式。在此情况下,物理层或MAC层也不同,但与上位层不同的情况同样动作。
图213是表示设置太阳能电池面板时的用户的动作的图。本实施方式的太阳能电池面板由多个面板构成,各个面板能够单独地与家电控制装置通信。这里,所谓用户,是指太阳能电池面板的设置人员、家电控制装置的设置人员等的进行家电控制装置与太阳能电池面板的通信连接设定的人。首先,用户在家电控制装置附近,将移动终端设为设备连接模式,接触在家电控制装置上(步骤圈1)。在本说明书中,所谓接触,是指通过近距离无线进行通信。如果接触,则移动终端从家电控制装置取得通信ID(MAC地址等)及设备ID(制造号码等)、可利用的通信协议、以及与家电控制装置连接的服务器、无线通信路的加密密钥等。通信ID为了家电设备连接到家电控制装置而被交接给家电设备。设备ID是移动终端为了对服务器进行询问而需要的ID。这里,家电控制装置和移动终端经由接近无线相互交换信息,由此能够在一定时间中经由服务器建立安全的路径。这里,所谓安全的路径,设想了包括蜂窝等的其他无线路径的加密通信路。经由服务器的安全的路径用于在家电控制装置与移动终端间更新向家电设备递交的秘密密钥。在与太阳能电池等的处于远处的设备进行配对设定的情况下,能够通过交接长期间有效的秘密密钥来实现,但如果例如以日单位发行有效的秘密密钥,则安全强度下降。此外,在如本实施例那样想要在远处连续进行设定的情况下,安全强度进一步下降。在本实施方式中,仅通过按下移动终端的按钮就能够进行新的秘密密钥的发行。由此,能够缩短秘密密钥的有效时间、维持安全强度。此外,通过一边由移动终端新发行秘密密钥一边接触在家电设备上来交接秘密密钥,能够连续地在多个远程的家电设备和家电控制装置间进行认证。另外,本方式的用途并不限于宅内的无线通信的配对用。例如也可以在将自家的家电设备与亲戚朋友家的家电设备配对时使用。由此,即使不是自家,也能够容易地进行配对处理。此外,假设移动终端在移动中通过6轴传感器或GPS取得位置信息(步骤圈2~圈7)。通过将接触在太阳能电池面板上的瞬间的位置信息向服务器发送,在服务器中能够进行家电控制装置(也称作SEG)和太阳能电池面板的3维的相对的位置信息的管理。
图214是接触在太阳能电池面板上时的移动终端的画面迁移图。从太阳能电池面板取得设备ID、通信协议等的信息或太阳能电池的制造商的制品的服务器地址,进行是否能够与家电控制装置通信的判断。判断既可以向服务器发送,也可以由移动终端进行。在是能够通信的协议的情况下,使用通信ID进行连接设定。在不是能够通信的协议的情况下,移动终端既可以从服务器下载固件,使用近距离无线进行固件更新,也可以从移动终端向家电控制装置发出固件更新的指示。另外,在设备是不能基于近距离无线进行自动设定的设备的情况下,手动进行设定后从家电控制装置发送设定完成的信号,由此能够由移动终端确认设定完成。在通过按钮的同时按下而设定的设备的情况下,通过使便携电话的设定按钮与家电控制装置的按钮通过安全路径联动,能够进行通过按钮同时按下的设定。各个方式为根据家电控制装置和家电设备双方的种类自动下载到移动终端的。由此,用户能够自动以最佳方式立即完成设定。
图215是太阳能电池面板连续认证时的移动终端画面迁移图。基本上能够以与电池面板No1同样的方式认证,通过再发行秘密密钥,能够连续认证。此外,通过将各太阳能电池面板间的相对的位置登录到服务器中,能够将能够一目了然地确认各个面板的举动的影像经由控制器的画面或服务器显示在TV的画面上。
图216是表示太阳能电池面板的发电状况的移动终端的画面图。通过使发电量和面板的位置同时或交替地显示,能够确认由哪个面板进行了多少发电。
图217是表示太阳能电池面板的温度状况的移动终端的画面图。一般而言,在太阳能电池面板故障的情况下,温度状况变为异常。通过将该状况与面板的位置信息组合,立即知道故障的面板,所以能够迅速地进行修理。通过经由服务器对修理人员通知,还能够自动地进行修理委托。
图218~图222是太阳能电池设置的流程图。用户将移动终端设为设备连接模式(步骤5081)。移动终端呈现“请接触(接近)移动终端”的显示,开始近距离无线的轮询。用户使移动终端接触在家电控制装置(母机或太阳能电池控制器)上(步骤5082)。在接触之前,移动终端反复进行轮询(步骤5083)。另外,如果经过某一定的时间则超时。接触的家电控制装置成为休眠模式,在一部分电路没有启动的情况下使其启动(步骤5084)。移动终端通过近距离无线通信取得家电控制装置的设备ID、通信ID(MAC地址、NFC-ID等)、可使用的通信协议和其版本、以及服务器地址。进而,移动终端与服务器连接,进入到“进行与其他设备的连接的连接设定”的模式,将与家电控制装置对应的连接设定程序从服务器下载。假如在通信协议的版本较旧的情况下进行版本升级(步骤5085)。设定模式在一定时间中是有效的,呈现请在该时间内接触的显示(步骤5086)。用户将移动终端拿向想要连接的设备的地方(步骤5087)。此时,使用角速度传感器、加速度传感器、磁传感器、GPS在3维空间上测量移动终端的位置相对于家电控制装置的位置的相对位置。将该数据向服务器传送。在服务器中,使用该数据运算移动终端的3D的移动轨迹、移动后的坐标,测量SEG与移动终端的距离(步骤5087a)。在移动时间或距离较短的情况下,移动终端将从家电控制装置发行的秘密密钥接触而递交给家电设备(步骤5088)。但是,在时间较长的情况下,将设定模式设为OFF(步骤5089)。并且,如果移动终端到达设备的位置(步骤5090),则将设定模式再次设为ON,与服务器连接,使家电控制装置再发行秘密密钥。在移动终端和家电控制装置间相互进行通信,将递交了设定信息的终端和实际家电控制装置完成了设定的数量、以及对其分别分配的号码进行记录(步骤5092、5093)。由此,在将多个终端认证后,能够确认家电控制装置中是否发生了不协调。接着,使移动终端的天线部接触在第n个设备(太阳能电池等)的天线部上(步骤5094)。经由NFC读出设备的存储器中的NFC-ID或MAC地址或制造商ID、无线通信的标准、版本、协议、制造商名、制品名、型号、错误、履历,向服务器传送(步骤5095)。在移动终端侧或服务器侧检查能够与家电控制装置通信的协议等(步骤5096)。在设备的协议的版本较旧的情况下(步骤5097),移动终端从服务器下载新版本的协议,通过近距离无线通信将设备的协议进行版本升级(步骤5098)。在家电控制装置侧的通信协议与设备侧的协议不同的情况下(步骤5100),从移动终端向家电控制装置侧发送下载相应协议的数据的命令。或者,移动终端从服务器下载与设备对应的通信协议数据,将移动终端接触在家电控制装置上,经由NFC将能够通信的新的协议安装到家电控制装置。或者,从移动终端经由无线LAN等的因特网安装到家电控制装置(步骤5101)。在下载到安装的过程中发生了错误的情况下重复进行(步骤5102)。输入(按下)移动终端的“开始家电控制装置与设备的连接”的开关(按钮)(步骤5103)。家电控制装置或移动终端、服务器发行秘密密钥(时间限定型)(步骤5104)。将设备的网络ID或MAC地址、秘密密钥经由因特网的服务器或经由无线LAN等的内部网向家电控制装置传送(步骤5105)。将家电控制装置的网络ID或MAC地址、秘密密钥和发送命令用NFC从移动终端向设备传送(步骤5106)。设备和家电控制装置通过短距离无线(ZigBee等)与移动终端直接进行通信(步骤5110)。根据设备与家电控制装置的位置间的距离L改变无线的电波强度,提高安全性并进行节电(5111)。在距离L或障碍较大的情况下,进行推荐经由后述的中继器与SEG通信的画面显示。进行家电控制装置与设备的相互认证(步骤5112)。从家电控制装置经由服务器向移动终端传送认证结果(步骤5113)。或者,接触在设备上来将认证结果从设备递交给移动终端。或者,使设备通过光的发光等显示认证结果。或者,使设备通过光等显示认证结果(步骤5115)。在认证失败的情况下,从密钥发行起重新进行(步骤5114、5116)。如果结束了全部的设备的认证(5118),则移动终端向服务器通知,将连接模式解除并结束(步骤5120)。在不是这样的情况下,使移动终端向下个设备的地方移动(步骤5119)。在对多个终端设定的情况下,传送移动终端的物理的相对或绝对的3维的位置信息。在服务器侧,映射第n个和第n+1个设备(太阳能电池面板等)的3维空间上的配置关系(步骤5121)。从服务器向移动终端传送将1~n+1的设备的2维或3维的位置信息进行了2维或3维显示的图像信息或坐标信息,显示在移动终端的画面上(步骤5122)。
图223是本实施方式的太阳能电池面板设置次序图。太阳能电池面板如果被照射太阳光则产生直流的高功率,所以发生电弧放电,较危险。因此,优选的是在设置前的状态下粘贴遮光片5202,使其成为不能发电的状态。进而,在通信设定完成之前为了安全,优选的是粘贴着遮光片的状态。但是,在粘贴着遮光片的状态下难以判别在太阳能电池面板的哪里存在通信用IC。所以,在遮光片的与近距离无线的天线部相同的地方印刷天线部标记,在设定时接触在该标记上,在设定完成后将遮光片剥离。通过这样,能够确保安全性,并且进行通过接触的通信设定。
此外,通信用IC5203e搭载ZigBee等的无线IC和NFC的通信IC5203f,外部只有电源线5203a的连接线露出,其他部分被遮蔽,所以寿命较长,能够应对30年左右的寿命要求。此外,控制器5203c接受来自服务器5203d的指令,将电源5203b在1小时中几次在几十秒钟、间歇地施加电压,使占空比成为1/100左右,所以半导体IC的劣化不怎么发展,所以与总是施加电压的方式相比,有能够确保较长的寿命的效果。
这里,使用图224说明SEG与设备的制造商或协议不同的情况。
首先,在步骤5201a中,将移动设备设定为读取模式,在步骤5201b中,将移动设备接触在SEG(控制器)上,在步骤5201c中,从移动终端读取SEG的制造商名、设备ID、制品号码、服务器地址等的数据。
接着,在步骤5201d中,判断是否从SEG得到了服务器地址,在“是”的情况下向步骤5201e前进,移动设备对该服务器地址访问,在步骤5201f中连接,向步骤5201i(图225)前进。
另一方面,在步骤5021d或步骤5201f中为“否”的情况下,向步骤5201g前进,对SEG的制造商、产品号码的服务器地址访问,在步骤5201h中,在菜单画面上选择SEG的制造商、产品号码,向步骤5201i(图225)前进。
此外,使用图225对SEG的软件的版本升级手段进行说明。
首先,在步骤5201i中,在移动设备上显示初始菜单,在步骤5201j中,选择将SEG与新的设备连接的菜单。
接着,在步骤5201k中,判断是否有SEG的软件或固件的新的版本,在“是”的情况下向步骤5201m前进,移动设备或SEG开始从服务器下载新的版本的软件的作业,在步骤5201n中,选择移动设备的“安装”按钮,步骤5201p中,在SEG、服务器和移动设备认证后,实施SEG的版本升级,向步骤5201q(图226)前进。
另一方面,在步骤5201k为“否”的情况下,或在步骤5201n中没有选择移动设备的“安装”按钮的情况下,向步骤5202q(图227)前进。
接着,对图226进行说明。
首先,在步骤5201q中,在SEG与服务器连接的情况下(“是”),向步骤5201t前进,SEG、移动设备和服务器进行认证,在步骤5201u中,如果是OK,则在步骤5202a中,SEG从服务器安装,在步骤5202b中完成,向步骤5202g(图227)前进。另外,如果在步骤5202b中没有完成,则向步骤5201t返回。
另一方面,在步骤5201q中是“否”的情况下,向步骤5201r前进,移动设备从服务器下载新版本的软件,在步骤5201s中完成(“是”)的情况下,向步骤5202c前进。另外,在步骤5201s中没有完成的情况下(“否”),向步骤5201r返回。
在步骤5202c中,显示将移动设备向SEG“请接触m秒”,在步骤5202d中,将移动设备接触在SEG的天线部上。
在步骤5202d中为“是”的情况下,即在将移动设备已接触在SEG的天线部上的情况下,向步骤5202e前进,从移动设备直接用NFC等向SEG发送新的版本的软件并使其安装,在步骤5202f完成,向步骤5202g(图227)前进。
另一方面,在步骤5202d中为“否”的情况下,此外在步骤5202中没有完成的情况下(“否”),向步骤5202c返回。
接着,使用图227说明SEG的软件的版本成为最新的状态、在SEG的位置事前具有连接设备的信息的情况下的流程。
在步骤5202g中,检查“SEG(控制器)连接在服务器上?”。
并且,在步骤5202g中为“是”的情况下,向步骤5202h前进,移动设备与SEG经由服务器连接,向步骤5202j前进。另一方面,在步骤5202g中为“否”的情况下,向步骤5202i前进,移动设备与SEG经由无线LAN或ZigBee等的无线的内部网连接,向步骤5202j前进。
在步骤5202j中,在菜单画面等中将移动设备设定为“设备连接模式”。并且,显示“连接设备的制造商名是?”。
接着,在步骤5202k中,假如在知道连接的设备(空调、洗衣机、TV、记录机等)的制造商名、型号或制造号码的情况下(“是”),向步骤5202m前进,在移动设备的画面上选择或输入制造商名、品名、型号,将该数据向服务器发送,在步骤5202n中,服务器根据设备的信息调查设备的通信标准、中间件、应用等的协议信息。
接着,在步骤5202p中,检查“使用SEG的通信协议和连接对象的设备的通信协议,是否能够进行正常的通信?(服务器判断)”,在“是”的情况下,向步骤5203e(图229)前进。
在上述步骤5202k中为“否”的情况下,也向步骤5203e(图229)前进。此外,在步骤5202p中,在“否”的情况下也向步骤5202q(图228)前进。
接着,说明图228。
首先,在步骤5202q中,服务器搜索新的版本的通信协议(物理层、中间件、应用层),向移动设备或SEG发送,在步骤5202r中,在移动设备上显示“是否下载新的版本的通信协议?”。并且,在步骤5202s中,按下OK按钮?,在“是”的情况下向步骤5202u前进。在“否”的情况下,向步骤5202t前进,显示“不能与该设备通信连接”。
接着,在步骤5202u中判断“SEG与服务器连接,并且通信协议的数据较大?”,在“是”的情况下,向步骤5203a前进,用方法1即从移动设备向SEG直接命令安装或发送加密通信用的密钥及认证数据,SEG在服务器设定的时间内,从服务器下载连接设备用的通信协议,开始通信。并且,如果在步骤5203b中成功,则向步骤5203e(图229)前进,如果不成功,则向步骤5202r返回。
另一方面,在步骤5202u中为“否”的情况下,向步骤5203c前进,用方法2即移动设备先下载通信协议,(SEG)、服务器和移动设备进行相互认证后,共用加密密钥,从移动设备向SEG直接通过NFC等发送通信协议,安装到SEG中,如果在步骤5203d中成功,则向步骤5203e(图229)前进,如果不成功,则向步骤5202u返回。
接着,说明图229。
首先,在步骤5203e中,判断是否“由利用者选择移动设备的‘连接设定新的设备’的模式”。
在步骤5203e中“是”的情况下,在步骤5203f中,通过接触,移动终端和SEG建立与因特网或无线LAN等的NFC以外的宅内网络的加密通信,在步骤5203g中,呈现“请在n分钟以内向设备的地方移动”的显示,在步骤5203h中,操作者(移动设备)开始移动,向步骤5203i(图230)前进。
另一方面,在步骤5203e中为“否”的情况下,再次尝试。
接着,使用图230对3D映射进行说明。
在步骤5203i中,使用角度传感器、地磁传感器、加速度传感器,以3维测量从SEG的位置到移动设备的位置的变化。此外,得到SEG与移动设备的相对3D坐标信息。
接着,在步骤5203j中,判断是否到达了设备(1层的空调、2层的空调、1层的微波炉、洗衣机、TV、记录机),在“是”的情况下向步骤5203k前进,在“否”的情况下向步骤5203i返回。
在步骤5203k中,判断在设备中是否有第1无线部(NFC等)的设备,在“是”的情况下向步骤5203n前进,将移动设备接触在设备的第1天线部上,在步骤5203p中,将设备的MAC地址、网络ID读入,向服务器发送,在步骤5203g中,将设备的3D坐标的位置信息向服务器发送。
接着,在步骤5203r中,检查“设备与SEG的通信协议是否一致?”。这里,在“是”的情况下向步骤5203s前进。另一方面,在“否”的情况下向步骤5203z前进,执行SEG的通信协议的变更例程,向步骤5203s前进。
接着,在步骤5203中,按下SEG与设备的连接开始按钮。并且,在步骤5203中为“是”的情况下,即在按下了SEG与设备的连接开始按钮的情况下,向步骤5203t前进,在“否”的情况下再次尝试。
接着,在步骤5203t中,移动设备或服务器发行秘密密钥(带有时间期限),与发送命令一起使用NFC向设备传送。向SEG也同样传送,在步骤5203u中,若SEG与设备进行直接通信则被认证,在步骤5203x中认证完成。这里,如果在步骤5203x没有认证完成,则向步骤5203n返回。
另外,在步骤5203k中为“否”的情况下(没有NFC的情况下),向步骤5203l前进,通过移动设备的条码读取器或通过目视读取设备的制造商名、制品名、制品型号、制造号码,向移动终端输入,在步骤5203n中,移动设备将上述数据向服务器传送,向步骤5204a(图231)前进。
接着,进行图231的说明。
首先,在步骤5204a中,服务器根据设备的信息调查设备与SEG的通信标准、中间件、应用等的协议信息,在步骤5204b中,使用SEG的通信协议和连接对象的设备的通信协议,检查是否能够进行正常的通信(服务器判断)。
并且,在“是”的情况下,向步骤5203c(图228)前进。在“否”的情况下,向步骤5204c前进,服务器搜索适合于设备的版本的SEG用的通信协议(物理层、中间件、应用层),在步骤5204d中,在移动设备上显示“下载适合于设备的通信协议?”,所以在步骤5204e中按下“OK按钮?”。此时,在“是”的情况下(按下了OK按钮的情况下),向步骤5204g(图232)前进,在“否”的情况下,在步骤5204f中显示“不能与该设备通信”。
接着,说明图232。
在步骤5204g中,检查SEG与服务器是否已连接。在“是”的情况下向步骤5204h前进,检查移动设备与SEG是否能够通过经由因特网或无线的宅内网络(NFC以外)进行加密通信,向步骤5204i前进,从移动设备向SEG经由因特网或无线LAN等的内部网,将安装命令、加密通信用的密钥及认证数据在时间内从服务器下载连接设备用的通信协议,如果在步骤5204j中为“成功”,则向步骤5204k前进,设备和SEG利用最佳通信协议进行NFC以外的无线通信,开始认证步骤。在此情况下,根据SEG和设备的3D坐标和建筑物的3D构造数据,计算相互的距离和障碍物,根据这些数据,以所需最小限度设定最优的信号输出,所以在步骤5204m中,显示“能够开始连接”、“请在m秒以内按下OK按钮和设备的连接开始按钮”,向步骤5204n(图233)前进。
另一方面,在步骤5204g或步骤5204h中为“否”的情况下,向步骤5205a(图233)前进,在步骤5205a中,显示“请向SEG的场所移动,将移动设备接触在SEG上”,在步骤5205b中,如果移动并接触在SEG上,则向步骤5203c(图228)前进。
接着,说明图233。
首先,在步骤5204n中,按下移动设备的“OK按钮”,在步骤5204p中,通过来自移动设备的命令,SEG发行秘密密钥,将加密通信持续一定时间,在步骤5204q中,将设备侧的“连接开始按钮”按下,在步骤5204r中,设备发行秘密密钥(时间限定型),将加密通信持续一定时间,在步骤5204s中,检查“SEG与设备进行了相互认证?”。
接着,如果在步骤5204t中“成功”,则向步骤5204u前进,在移动设备的画面上显示“SEG与设备的连接完成”。或者使设备进行特定的显示等的动作,在步骤5204y中完成。
另外,在步骤5204t中为“否”的情况下,在步骤5204x中显示“连接失败”。
接着,说明图234。
在步骤5206a中,当从移动设备等连接到服务器上时,服务器(控制器)根据想要连接的设备的3D坐标信息和SEG的3D坐标信息,在两者之间的距离或障碍物较大的情况下,判断是否判断为难以进行直接的通信。
并且,在该判断是“是”的情况下,向步骤5206b前进,服务器从中继器的3D坐标信息中,检索处于两者之间的中继器PANcoordinator,将该中继器的位置信息向移动设备通知,在步骤5206c中,在需要的情况下,移动设备再次接触在设备上,获得设备的MAC地址、网络ID(PAN ID等)、通信协议、通信密钥及3D坐标,在步骤5206d中,判断移动设备是否拥有SEG的MAC地址、网络ID(PAN ID等)等的网络配置信息。
并且,在该判断是“是”的情况下,向步骤5206f(图235)前进。另一方面,在步骤5206d中为“否”的情况下,向步骤5206e前进,向SEG的地方前进,接触并获得MAC地址、IP地址、网络ID、通信协议、通信密钥、(3D坐标,再次)。此时,服务器使用各设备、AEG、中继器的3D坐标信息,进行网络整体的配置(各子机的MAC地址、子网络的网络ID(PAN ID)的优化,将该配置信息登录到SEG中,向步骤5206f(图235)前进。
接着,说明图235。
首先,在步骤5206f中,操作者向中继器(Zigbee等)的地方移动,并接触。此时,再次获得中继器的位置信息,并且通过服务器等根据设备、中继器、SEG的3D坐标信息和建筑物的3D坐标,计算最优的上述的网络的配置信息,即作为最优之中的中继器的子网络(PAN ID)间的中继点的中继连接方法及拓扑,将该配置信息从服务器或移动设备经由NFC或经由SEG记录。至少经由NFC将记录命令向中继器传送。在此情况下,进行设定,以从设备经由中继器与SEG连接。具体而言,将设备(也可以是多个)的MAC地址、网络ID、通信密钥登录到中继器中。
接着,在步骤5206g中,检查设备与中继器的连接是否完成。在完成的情况下(“是”),向步骤5206h前进,在“否”的情况下再次向步骤5206f返回。
在步骤5206h中,在中继器中,经由NFC或网络记录移动设备或服务器、SEG的MAC地址、网络ID、通信密钥、协议等的中继目标的连接信息。这样,将处于登录有MAC地址的设备所属的PAN ID的子网络和SEG所属的PAN ID这两个子网络下的MAC地址的SEG经由中继器(PANcoordinator)继续。
接着,在步骤5206i中,检查中继器与SEG的连接是否完成。在“是”的情况下,向步骤5206j前进,设备与SEG的中继连接认证完成,在步骤5206k中,设备、中继器、SEG的中继完成。另一方面,在步骤5206i中为“否”的情况下,此外,在步骤5206j中为“否”的情况下向步骤5206h返回。
以上,如使用图234和图235说明那样,如果使用本发明的3D映射,则移动终端总是拥有3D的坐标信息,所以ZigBee或无线LAN的子机、母机、中继器的物质上的位置关系在通过NFC接近于各装置时、或接近而进行移动终端的输入时,与各装置通信,得到MAC地址等的网络ID信息,同时能够得到此时的3D的位置信息。通过将该数据用移动终端或宅内或宅外的服务器进行处理,能够得到在物理上最优的网络配置结构。在该网络结构信息中,具体而言,如图234的下部所示,在PAN ID1中,有MAC地址1的设备、别的设备、以及MAC地址3的中继器,在PAN ID2中,搭载有因特网协议的MAC地址2的SEG和MAC地址5、6的别的设备2、3通过无线连接,由于知道3D的位置关系,所以能够容易地通过运算求出PAN ID1和PAN ID2经由中继器连接的结构最节电且稳定、是不发生循环的结构。
在ZigBee等的以往方式中,要求SEG和子机是1对1的结构。这是因为,如果追加中继器,则需要将整体的网络配置优化设计并设定。但是没有简单地知道各设备的3D的位置关系的方法。在企业内的网络中,由于花费费用及工夫,所以能够实现。但是,在一般家庭的空调、微波炉或太阳能电池那样的家电设备的情况下,不能花费这样的费用及工夫。因此,中继器的导入并不容易。
但是,在本发明中,仅通过用NFC接触、或在设备的很近处输入到移动终端中,就能够得到设备的位置信息及MAC地址等、ID信息。因此,具有如下效果:能够不花费工夫及费用而在服务器或移动终端中得到配置信息,操作移动终端将该信息直接或间接地记录到SEG或中继器中,由此简单地构成最优的网络配置。在使用NFC的情况下,由于能够通过加密密钥及3D位置信息等进行非法检查,所以还能够得到较高的安全。这样,家庭中也能够导入中继器,具有能够稳定地进行屋顶上的太阳能电池与1层的SEG之间、或室内SEG与室外的热泵或充电系统等的较长距离的无线通信的效果。在此情况下,通过使用服务器,能够进行使用3D坐标的高度的运算,所以能够构建理想的网络系统,还能够防止循环等的异常通信,所以能够提高传送效率。
(实施方式21)
在实施方式21中,对于使用建筑物的3D制品地图而移动终端能够作为遥控操作设备的系统,使用附图详细地说明。
图189表示由本实施方式的使用建筑物的3D制品地图的便携设备102进行的设备控制的一例。此外,在图190中表示还添加建筑物数据、能够识别设备存在于建筑物的哪个房间中的情况下的本实施方式的设备控制的一例。使用图236、图237、图238说明由图189及图190所示的移动终端进行的设备控制的动作。
首先,在S6001中,移动终端使用GPS信息取得自终端的位置信息。
接着,在S6002中,取得作为基准点的位置信息。例如,在使通过移动终端保持的近距离通信而开闭的开锁系统与建筑物的门厅钥匙连动、通过移动终端的近距离通信进行开锁时,经由近距离通信取得该开锁系统的设备ID,将与所取得的设备ID建立了联系的位置信息设定为基准点(图190的圈1)。将设备ID与位置信息建立了联系的数据库也可以由服务器或移动终端保持。此外,也可以通过近距离通信直接取得位置信息。当然,也可以从开锁系统以外的其他设备取得位置信息。
在S6003中,保持着移动终端的用户进入到建筑物中。此时,也可以根据附加在门上的传感器的输出信息察觉用户的入室,将基准点设为门的位置。
接着,在从图190的圈1步行到圈2的情况下,在S6004中说明。即,在S6004中,从数据库获得移动终端用户的宅内的步幅,通过加速度传感器、地磁传感器或振动陀螺仪等检测该区域间的步数n。这样,取得用户的步幅及步数n,通过步幅×n计算移动距离。此外,移动方向由振动陀螺仪及地磁传感器检测,计算移动终端的3维的相对于基准点的相对位置,记录到数据库中。此外,也可以将该移动终端的位置信息及移动信息向服务器发送。
接着,关于用户处于图190的圈2中的情况,在S6005中说明。即,在S6005中,当用户移动到1层的电视机前时,如果将移动终端的方向朝向电视机,则当电视机进入移动终端的3维坐标和移动终端测量的方向的法线时,移动终端与该电视机通过网络连接,能够通过移动终端将该电视机遥控操作。
接着,对于用户从图190的圈3向圈4移动的情况,在S6006中进行说明。即,在S6006中,用户在1层中移动,进入到日式房间,如果将移动终端朝向空调的方向,则将空调与移动终端用网络连接,移动终端成为空调的遥控器。此时,与S6004同样,根据用户的步幅及步数检测移动距离,计算移动终端的3维位置信息。该3维位置信息由移动终端或服务器的数据库保持。
进而,在图237的S6007中,通过从图190的圈4移动到圈5时的步数计算移动距离,在移动终端或服务器的数据库中保持。通过保存在这样的数据库中的各用户的分场所步行履历而学习用户的步幅,提高精度。
在S6008中,如果到达宅内的台阶,则设台阶的1级的阶差和1级的长度分别为m、k,计算步数×m为高度的变化、步数×k为水平移动距离。将m、k记录到数据库中,根据过去的数据进行学习而提高精度。
在S6009中,考虑通过电梯上楼的情况。在此情况下,将建筑物的电梯的特性数据记录到数据库中,取得从P层向Q层的需要时间r,根据需要时间测量移动后的层数。P、Q、r也能够通过根据过去数据的学习而提高精度。此外,电梯的上升开始和停止根据加速度传感器的信息得到。
在S6010中,在判断为层的移动结束的情况下,转移到S6011。
在S6011中,通过步幅×步数得到水平方向的移动距离,通过振动陀螺仪得到方向,得到移动终端的3维的位置信息。如果有建筑物的3维构造数据则将位置信息校正而提高精度。在接着的S6012中,在2层的电视机的左前方位置(图190圈5的位置)处,用户暂时停止。
在S6013中,判断3维位置信息的累积误差E是否比设定的误差容许值大。累积误差E通过移动距离×5%计算。在判断为累积误差E比误差容许值大的情况下,转移到S6014。
在S6014中,从数据库中找出相对或绝对的位置信息被登录在数据库中的设备,将最近的设备提示在移动终端的画面上。操作者将移动设备的照相机朝向该设备。根据由照相机摄影的图像来识别设备,运算移动终端与其的相对角度、距离,修正基准位置。
在接着的图238的S6015中,根据设备的设备ID,获得设备的网络信息(MAC地址、IP地址、通信密钥等),将设备与移动设备连接。如果在移动终端指示的设备按下锁定(Lock)按钮,则移动终端与设备的连接被固定,作为遥控器使用,或将设备的影像数据等显示在移动设备画面上。
最后,在S6016中,结束移动终端的遥控操作功能。
通过以上那样的处理,移动终端能够取得相对于基准点的相对位置,不需要正确的绝对位置信息,仅通过朝向设备,就能够将移动终端作为设备的遥控器。
此外,在加速度传感器的移动距离测量的误差较大的情况下,能够使用步幅或设备的位置信息等减轻位置信息的误差。
图239是表示在本实施方式中移动终端的基准点信息不正确的情况下取得正确的基准点的处理的流程图。
首先,在S6020中,在判断为不能取得移动终端的基准点的情况下,转移到S6021。在S6021中,用移动终端拍摄设备。也可以将摄影图像向服务器发送。
接着,在S6022、S6023中,移动终端根据摄影图像识别设备的种类。在接着的S6024、S6025中,仅将设备的图像过滤,向服务器发送。
接着,在S6026中,取得移动终端的基站信息或通过GPS等取得大致的移动终端的位置,确定当前所处的建筑物,根据与该建筑物建立联系的设备列表确定被摄影的设备。当移动终端的当前的位置不清楚时,根据与移动终端的所有者建立了联系的设备列表确定。此外,得到设备的大小、3D形状信息,保存到数据库中。
接着,在S6027中,根据图像中的设备朝向的角度计算移动终端与设备的相对角度。此外,在S6028中,从移动终端的光学特性信息中取得缩放倍率等,计算移动终端与设备的距离。
在S6029中,能够根据移动终端与设备的距离及相对角度,取得用移动终端与设备的3维的相对坐标表示的位置信息Pr。
在S6030中,将设备的相对或绝对位置的3维坐标信息Pd从服务器或移动终端的存储器读出,根据Pr和Pd运算移动终端的该建筑物内的相对或绝对位置的Pm。
最后,在S6031中,将Pm设定为作为移动终端的基准点的位置信息。
通过以上那样的处理,在设定移动终端的电源刚接通之后等没有设定基准点的情况下,也能够使用摄影图像取得移动终端的基准点。此外,通过从摄影图像中仅过滤出设备的图像,用户能够不在意宅内的信息等隐私而将设备的图像向服务器发送。
在图240、图241中,表示显示设备与设备属于的网络的母机的连接次序的处理流程的流程图。
首先,在S6111中,将移动终端朝向想要连接的设备的方向。
接着,在S6112中,移动终端基于自己的位置信息(3D的坐标信息等),对由移动终端的照相机摄影了设备的影像的图像空闲处理,来识别设备。如果识别,则得到设备的种类、型号和粗略的设备的位置信息(3D坐标等)。使用服务器或移动终端的数据库,取得登录在所得到的位置信息的附近的设备的候选设备的信息,进行该候选的设备与摄影出的设备的图像的匹配,确认是否是登录设备。
在S6113中判断为想要连接的设备为已经登录在服务器或移动终端的数据库内的设备的情况下,向S6114转移。
在S6114中,从服务器或移动终端的数据库取得设备ID、连接协议、通信密钥、服务器地址,将设备与移动终端用网络连接。在接着的S6115中,根据移动终端和设备的位置信息以及移动终端的方向,产生各种各样的命令。
在上述S6113中判断为想要连接的设备为没有登录在服务器或移动终端的数据库内的设备的情况下,向S6116转移。
在S6116中,判断设备是否有网络功能、以及移动终端是否能够识别设备的型号。在S6116中,在判断为设备没有网络功能、移动终端不能识别设备的型号的情况下,向S6117转移。
在S6117中,用户打开设备的盖,使设备保持的2维码露出,用移动终端的照相机摄影。
在接着的S6118中,用移动终端读取2维码,将2维码的加密数据解读,读出设备ID、连接用通信协议、通信标准、遥控器功能(红外线遥控器用或无线ZigBee用等)、网络地址(MAC地址、IP地址、通信密钥)或服务器地址等。将读出的数据记录到服务器或移动终端的数据库中。
接着,在S6119中,从服务器得到设备的3维的形状信息,用移动终端根据摄影影像和移动终端的摄影时的3维位置信息,运算设备的3维位置信息,记录到数据库中。
此外,在上述S6116中,在判断为设备具有网络功能、移动终端能够识别设备的型号的情况下,向S6120转移。
在S6120中,判断设备是否有AOSS功能。
在S6120中判断为设备有AOSS功能的情况下,向S6121转移。
在S6121中,判断移动终端是否能够与母机通信。
在S6121中判断为移动终端能够与母机通信的情况下,向S6122转移。
在S6122中,判断设备是否保持有红外线通信接收或无线遥控器(ZigBee等)接收功能。
在S6122中判断为设备没有保持红外线通信接收或无线遥控器(ZigBee等)接收功能的情况下,向S6123转移,使用者按下移动终端上的“连接开始按钮”,对设备的母机发送AOSS命令,使其切换为可登录模式。同时,按下设备的AOSS按钮,与母机开始连接认证,持续一定时间。在此情况下,根据母机的3D的位置信息和设备的3D位置信息,根据两者间的距离和障碍物控制为所需最小限度的电波输出,提高通信的安全性。
在接着的S6124中,判断连接认证是否完成,在判断为连接认证完成的情况下,向S6126转移。
此外,在S6122中判断为设备保持有红外线通信接收或无线遥控器(ZigBee等)接收功能的情况下,向S6125转移。
在S6125中,如果使用者将移动终端的连接开始按钮按下,则移动终端对与设备相同的通信协议的母机发送通信密钥和“AOSS开始命令”。同时,移动终端使用遥控器发送功能对设备发送通信密钥和“AOSS命令”,开始相互认证。
在接着的S6126中,判断相互认证是否完成,在判断为没有完成的情况下,向S6125转移。在S6126中,在判断为相互认证完成的情况下,向S6127转移,判断是否将母机与设备连接。
并且,在S6127中判断为连接的情况下,向S6128转移。
在S6128中,将设备ID、制品号码、地址、错误代码、使用时间、履历、3维的位置信息经由母机向服务器发送。
在接着的S6129中,根据设备的制品号码,从数据库得到设备的3维的形状信息,根据摄影的图像,根据相对于移动终端的距离、3维的方向和移动终端的摄影时的位置信息,运算设备的3维位置信息。将该位置信息记录到服务器或移动终端的数据库。
通过以上那样的处理,即使在设备中没有附加近距离通信功能的情况下,也能够使用2维码简单地将设备与母机连接,能够进行设备的服务器登录及3维位置信息的服务器登录。
接着,对图242所示的流程图进行说明。
首先,在步骤6140a中,进行3D坐标映射。
接着,在步骤6140b中,将移动设备移动到土地边界点的位置,在步骤6140c中,将移动设备的GPS信息向服务器发送,获得移动设备的附近的土地边界线标记或与测量基准点的ID或3D绝对坐标。移动设备具有相对位置的3D坐标和绝对位置的3D坐标这两个,但输入到绝对位置的3D坐标数据库中。
接着,在步骤6140d中,从GPS切换为基于动作传感器的位置检测。通过步数和步幅获得距离,通过振动陀螺仪获得方向,运算3D坐标。
接着,在步骤6140e中,接触在建筑物的钥匙的NFC部上而将钥匙打开,并将此时的3D坐标记录到移动设备、服务器的数据库或密钥的NFC。
接着,在步骤6140f中,如果进入到建筑物中,则通过步数、步幅和方向运算3D坐标。此时,在3轴的磁传感器的精度因杂音等而变差的情况下,切换为振动陀螺仪的方向信息,向步骤6140g(图243)前进。
接着,对图243、图244所示的流程图进行说明。
首先,在步骤6140g中,在从输入基准点移动的距离较短的情况下,由于位置精度较高,所以接触在已经登录有3D位置信息的设备的NFC的天线部上,将该设备的3D位置信息更新,并将表示3D位置信息的精度较高的高精度位置信息识别符与3D坐标一起记录到NFC、服务器或移动设备的数据中。
接着,在步骤6140h中,检查是否是3D坐标的累积误差PE>一定值时。
在“是”的情况下,向步骤6140i前进,在TV、空调、微波炉、电冰箱这样的家中的带有NFC的设备中,也从移动设备的附近找出带有上述高精度位置识别符的设备,将该设备(TV等)显示在移动设备的画面上,使“请接触在该设备的NFC的天线部上”的命令显示在画面上,向步骤6140j(图244)前进。
另一方面,在步骤6140h中是“否”的情况下,向步骤6140n(图244)前进,当登上台阶的第1级时或最终级结束时,在关闭的门前停止时,电梯开始上升时、停止时,在关闭的门厅门前停止时,登上门厅的阶差时,开始登上梯子时,在走廊的拐角拐弯时,绕过了家的伸出墙壁时,能够用加速度传感器清晰地检测到。通过将该时刻的移动设备的3D坐标信息与建筑物的3D坐标信息进行匹配处理,将3D的基准坐标更新,能够提高精度。此时,将高精度位置识别符记录到DB中。
接着,在步骤6140j中,判断使用者是否接触在设备的天线部上,在“是”的情况下,向步骤6140k前进。
接着,在步骤6140k中,检查设备的3D坐标是否与移动设备的3D坐标大幅地不同。在“是”的情况下,向步骤6140p前进,判断为设备从上次测量的坐标移动了,将错误信息识别符记录到该设备的数据库。在接着的步骤6140q中,如果在附近有带有高精度位置识别符的设备,则接触在该设备上,将3D坐标更新,并接触在原来的位置信息错误的设备上,将正确的位置信息记录到数据库,赋予表示高精度的位置精度识别符。
另一方面,在步骤6140j中,在“否”的情况下向步骤6140n前进。
此外,在步骤6140k中为“否”的情况下,向步骤6140m前进,将该设备的2D或3D的坐标更新为移动设备的3D位置坐标。这样,如果移动设备的3坐标变为正确,则向步骤6140n前进。
(实施方式22)
图245是表示本发明的实施方式22的设备结构的图。
在图245中,移动设备的显示画面9001、9002、9003都表示相同的移动设备9000的显示画面。移动设备显示画面9001是表示使用者将移动设备9000拿在手中、将移动设备9000朝向TV设备9004时的状况的图。同样,移动设备显示画面9002、9003分别是表示使用者将移动设备9000朝向记录机设备9005或微波炉9006时的状况的图。
图246是表示作为本发明的实施方式22的移动设备9000和协同设备的一例的TV的各自的显示画面的图。
图247~图251是表示本发明的实施方式22的步骤的流程图。
首先,使用图247对实施方式22进行说明。
首先,移动设备9000进行移动设备位置的取得(S9302)。关于移动设备位置的取得的详细情况已经使用图236说明,所以这里省略。
接着,使用者(用户)将移动设备9000朝向设备(这里是TV9004)的方向(S9303)。
此时,根据移动设备9000和TV的3D(相对或绝对)坐标信息、表示移动设备9000朝向的方向的方向信息、设备的姿势信息、设备的面积信息,从数据库提取朝向的设备的候选(S9304)。
在移动设备9000朝向的设备的候选有多个的情况下(S9305的“是”),将多个设备的列表与位置关系一起显示在移动设备9000设备的画面上(S9306)。并且,在使用者改变了移动设备9000设备的朝向的情况下(S9307的“是”),与此对应,按照存在于移动设备9000的朝向的中心的可能程度,使移动设备9000画面上的设备的显示变化(S9308)。移动设备9000画面上的设备的显示,越是处于移动设备9000的朝向的中心则越显示在中央。也可以代替显示在中央,而显示在上部,或在处于最中央的设备上显示目标光标等。
使用者在使用者希望的设备显示在中央上时,按下锁定按钮(S9309)。锁定按钮既可以是移动设备9000设备上的物理的开关,也可以是显示在触摸面板上的虚拟的按钮。此外,也可以是与移动设备9000在逻辑上连接的别的设备。在图246的9222中表示此时的状况。
在S9309为“是”的情况下,决定移动设备9000被朝向的特定的设备(例如:TV或微波炉),从服务器上或移动设备9000上的数据库中,取得或下载该设备的网络连接信息(MAC地址、IP地址、通信密钥、通信标准、通信协议)、设备的能力、设备用的程序、脚本等(S9310)。如果锁定按钮被按下,则移动设备9000将表示与移动设备9000被朝向的特定的设备的连接状态的标志(锁定标志)保持在内部中。在上述锁定标志生效的期间中,即使使用者改变移动设备9000设备的朝向,也不执行S9304的处理。因此,在将移动设备9000设备与TV等的设备连接的状态下,即使使用者改变移动设备9000设备的朝向,与连接的设备的连接也不会切断,具有使用者选择的设备的画面不会消失的效果。
接着,使用图255,对使用者将移动设备9000朝向特定的设备(TV或记录机、微波炉等)的方向进行说明。
本发明使用使用者拿在手中的移动设备9000和特定的设备(TV或记录机、微波炉等)的3D(相对或绝对)坐标信息、以及移动设备的方向,确定对象设备。在移动设备的形状接近于长方体的情况下,用于设备确定的移动设备的方向设为与构成壳体的虚拟的长方体的边中的较长的边平行的方向。移动设备具有图255的移动设备9000那样的按钮和显示器,一般而言,在设想使用者不是拿着显示器侧而是拿着按钮侧的情况下,在用于指示特定的设备的移动设备的方向设为显示器侧的方向9111。在移动设备是苹果公司的iPhone4那样的几乎没有按钮的智能手机、使用者采用各种拿持方式的情况下,也可以使用移动设备的重力传感器或陀螺仪传感器、照相机、接近传感器等判断移动设备上的使用者的手的重心点,使用从重心点到移动设备的外周的距离最长的方向作为移动设备的距离。
在移动设备9000在显示器背面上保持背面照相机9113的情况下,也可以将与背面照相机的朝向平行的方向9112作为移动设备9000的方向。在此情况下,在不启动照相机的情况下,也可以使用方向9111设为移动设备的方向,在将照相机启动的情况下将方向9112设为移动设备的方向。在启动照相机而将方向9112设为移动设备的方向的情况下,在使用移动设备和对象设备的3D坐标信息、以及移动设备的方向信息确定对象设备时,使用者也可以一边观察显示在移动设备9000的显示器上的设备一边将对象设备锁定。
此外,也可以使用移动设备的形状、移动设备的重力传感器或陀螺仪传感器、照相机影像、用户接近传感器、照相机的启动状态、使用者对移动设备方向的选择、使用者的视线、使用者的姿势等,动态地变更移动设备的方向。
根据这样的结构,具有使用者不用在意移动设备的拿持方式、仅通过直观地将移动设备朝向特定的设备、就能够选择对象的设备的效果。
进而,移动设备也可以同时具有多个用于确定设备的方向。由此,具有不论使用者的移动设备的拿持方式如何都能够将大范围的设备作为对象的效果。
以下,使用流程图247、图248继续实施方式22的说明。
接着,移动设备9000使用在S9301中取得的网络连接信息,经由网络尝试与设备的连接(S9401)。在连接成功的情况下(S9401的“是”),并且在从数据库仅获得通信信息的情况下(S9402的“是”),移动设备9000对设备或服务器询问能力,取得移动设备9000上的控制显示程序(S9403),执行控制显示程序(S9404)。
在设备是TV的情况下,移动设备9000从设备取得TV的频道广播节目的节目数、标题、缩略图等,显示在移动设备9000上(S9405)。将此时的状况表示在图246的9223中。
在使用者在移动设备9000画面上选择了特定的节目的缩略图(按钮的按下、触摸面板上的点击或指掐(pinchout)动作等)的情况下(S9406:“是”),移动设备9000对设备(TV)发送所选择的节目的显示请求命令(S9407)。将此时的状况表示在图246的9224中。
TV显示所指定的节目,并且将与移动设备9000设备的能力对应的品质的影像数据向移动设备9000发送(S9408)。
移动设备9000接收从TV发送的影像数据并显示(S9409)。将此时的状况表示在图246的9224中。
如果使用者在移动设备9000上向右滑动,则对下个频道的节目执行S9407~S9409,在移动设备9000和TV画面上显示下个频道的节目(S9410)。将此时的状况表示在图246的9225中。
根据这样的结构,有使用者仅通过将移动设备朝向想要不使用的设备、就能够直观地控制设备的功能的效果。
此外,在通过使用设备的姿势、形状信息确定移动设备指示的设备的情况下,即使在大型电视机那样的设备中心位置与到设备的端部的距离较大的情况下,也能够确定设备指示的设备,所以能够正确地判断使用者想要指示的设备。
以下,使用流程图249、图250继续实施方式22的说明。
在移动设备9000上显示有特定的节目的状态(S9501)下,使用者一边将“移动(MOVE)”按钮按下,一边将移动设备9000朝向想要保存或显示的设备(记录机或电视机等)的方向(S9502的“是”)。
此时,根据移动设备9000和设备的3D(相对或绝对)坐标信息、表示移动设备9000朝向的方向的方向信息、设备的姿势信息、设备的面积信息,从数据库中提取朝向的设备的候选(S9503)。
在移动设备9000朝向的设备的候选有多个的情况下(S9504的“是”),将多个设备的列表与位置关系一起显示在移动设备9000的画面上(S9505)。在使用者改变了移动设备9000的朝向的情况下(S9506的“是”),与此对应地按照存在于移动设备9000的朝向的中心的可能程度,使移动设备9000画面上的设备的显示变化(S9507)。移动设备9000画面上的设备的显示,越是处于移动设备9000的朝向的中心则越显示在中央。也可以代替显示在中央,而显示在上部,或在处于最中央的设备上显示目标光标等。
使用者当使用者希望的设备被显示在中央时,将“移动”按钮放开(S9508)。“移动”按钮既可以是移动设备9000设备上的物理的开关,也可以是显示在触摸面板上的虚拟的按钮。此外,也可以是与移动设备9000设备在逻辑上连接的别的设备。
当决定了移动设备9000被朝向的特定的设备(例如:记录机或TV、微波炉)时,从服务器上或移动设备9000上的数据库取得或下载该设备的网络连接信息(MAC地址、IP地址、通信密钥、通信标准、通信协议)、设备的能力、设备用的程序、脚本等(S9510)。
在特定的设备有记录能力的情况下(S9601的“是”),移动设备9000对设备发送内容的源信息(频道号码、内容的地址、内容的URI等)、录像范围(时间、单位等)、内容的服务器地址、源的范围)、认证信息(认证协议、密钥)等和记录命令(S9602)。
如果从移动设备9000接收到记录请求,则设备按照请求连接、接收记录数据,进行记录。
设备将记录在移动设备9000中的内容的标题、内容、静止图像缩略图、运动图像缩略图等发送(S9604)。
移动设备9000将设备记录的内容显示在移动设备9000上,对使用者显示确认是否可以继续记录的对话(S9605),设备在使用者认可的情况下(S9606的“是”),继续记录,在使用者否认的情况下(S9606:“否”),中止记录(S9607)。
接着,移动设备9000与记录设备(记录机)的连接断开,移动设备9000的显示再次回到原来的设备(TV等)的信息(S9609)。
根据这样的结构,使用者在想要将正观看的节目录像的情况下,不需要换拿为记录机的遥控器、将正观看的节目信息用记录机的遥控器再次输入就能够将节目录像。此外,在上述实施例中,说明了设备是记录机、将正观看的节目记录到记录机的例子明,但在设备是显示器装置等的显示装置的情况下,也可以代替由设备记录而使设备显示当前正观看的节目或内容。在此情况下,使用者不需要将正观看的节目或Web页、内容信息用显示器装置的遥控器的键盘再次输入,用不同的设备也能够视听。也能够将正用移动终端观看的Web页在显示器设备上显示。
以下,使用流程图251说明实施方式22的后续。
作为S9609的后续,假设是正在用移动设备9000观看与TV设备相同的影像的状态(S9701)。
这里,在使用者想要使用移动设备9000作为设备的遥控器的情况下,在按下了显示在移动设备9000上的遥控器模式按钮的情况下(S9702的“是”),移动设备9000的画面切换为设备的遥控器模式(S9703)。所谓遥控器模式按钮显示功能及TV设备用遥控器模式控制程序(或脚本),是包含在由S9510取得的TV设备控制程序中的功能。
根据这样的结构,使用者即使不使用TV设备的遥控器,也通过用移动设备朝向想要控制的TV设备朝向遥控器,就能够显示TV遥控器模式、控制TV的频道及音量等。此外,不需要用以往的便携电话下载TV遥控器应用而选择对应的TV用的程序,而自动地下载将遥控器朝向的TV用的程序,所以能够减少向遥控器模式的转移的工夫。
接着,在遥控器与设备间的通信速率或使用频度较低的情况下(S9704的“是”),遥控器从服务器取得ZigBee或红外线通信协议,切换为更低耗电的无线规格。
根据这样的结构,通过自动选择与功能对应的最优的通信标准,具有降低移动设备及周边设备的耗电的效果。
接着,在使用者按下了显示在移动设备9000画面上的锁定解除按钮的情况下(S9706的“是”),移动设备9000将与设备(TV等)的连接解除(S9707),使移动设备9000画面返回到初始画面(S9708)。将此时的状况表示在图246的9228中。
根据这样的结构,有当使用者想要用移动设备使用不同的设备的功能时能够有选择地切换的效果。
以下,使用流程图253、图254实施方式22的后续。
首先,移动设备9000进行移动设备位置的取得(S9912)。关于移动设备位置的取得的详细情况已经使用图236说明,所以这里省略。
接着,用户用移动设备9000上的Web浏览器等显示料理菜谱(S9901)。
在移动设备9000上显示有特定的菜谱的状态下,使用者一边按下“移动”按钮,一边将移动设备9000朝向想要在烹调中使用的设备(微波炉、料理机等)的方向(S9902:“是”)。将此时的状况用图245的C表示。
此时,根据移动设备9000和设备的3D(相对或绝对)坐标信息、表示移动设备9000朝向的方向的方向信息、设备的姿势信息、设备的面积信息,从数据库提取朝向的设备的候选(S9903)。
在移动设备9000朝向的设备的候选有多个的情况下(S9904的“是”),将多个设备的列表与位置关系一起显示在移动设备9000设备的画面上(S9905)。在使用者改变了移动设备9000设备的朝向的情况下(S9906的“是”),与此对应地按照相对于移动设备9000的朝向的中心的距离等,使移动设备9000画面上的设备的显示变化(S9907)。移动设备9000画面上的设备的显示,越是处于移动设备9000的朝向的中心则越显示在中央。也可以代替显示在中央,而显示在上部,或在处于最中央的设备上显示目标光标等。
使用者在使用者希望的设备显示在中央时,将“移动”按钮放开(S9908)。“移动”按钮既可以是移动设备9000设备上的物理的开关,也可以是显示在触摸面板上的虚拟的按钮。此外,也可以是与移动设备9000设备在逻辑上连接的别的设备。
当决定了移动设备9000被朝向的特定的设备(这里是微波炉)时,从服务器上或移动设备9000上的数据库取得或下载该设备的网络连接信息(MAC地址、IP地址、通信密钥、通信标准、通信协议)、设备的能力、设备用的程序、脚本等(S9910)。
在特定的设备有烹调能力的情况下(S9001:“是”),移动设备9000对设备发送菜谱信息(烹调内容、方法(微波、烘烤、混合、揉和、烤、蒸、解冻、加热、焖等)、烹调调整(温度、时间等)等)、或菜谱源信息(URL等)、认证信息(认证协议、密钥)等和记录命令(S9002)。
如果从移动设备9000接收到记录请求,则设备按照请求连接并接收记录数据,进行记录(S9003)。
设备将记录在移动设备9000中菜谱的烹调内容等发送(S9004)。
移动设备9000将设备的烹调内容显示在移动设备9000上,对使用者显示确认是否继续烹调的对话(S9005),设备在使用者认可的情况下(S9006:“是”),继续烹调。
接着,移动设备9000与烹调设备(例如:微波炉)的连接切断,移动设备9000的显示再次回到原来的设备(TV等)的信息(S9009)。
根据这样的结构,使用者在想要将在移动设备上观看的料理菜谱烹调的情况下,不需要向微波炉或烹调机再次输入而能够进行烹调。进而,关于没有内置在微波炉或烹调机中的菜谱,也能够不进行复杂的操作而向设备登录菜谱。此外,在烹调设备中不需要搭载浏览器或触摸面板等的设备,能够降低烹调设备的成本。
使用图249的S9502的图246的9227以后的图说明详细情况。
在使用者解除了锁定的情况下(9227a:“是”),移动设备回到原来的画面(这里是TV画面)。
考虑到使用者没有将锁定解除(9227a的“否”)、而使用者想要将该画面记录到记录机的情况(9227b的“是”),使用者一边按下“移动”按钮,一边将移动设备的方向从图245A的方向朝向图245B的方向(9227c)。
通过移动设备的3D方向传感器,根据3D坐标检测处于朝向的3D方向上的设备,与设备(记录机)连接(9227d)。此时,在移动设备画面上显示图9227e。
在9227e的状态下使用者将“移动”按钮放开的情况下(9227f),移动设备对设备(记录机)发送当前显示的节目的录像请求,移动设备的画面显示图9227g,记录机开始显示在移动设备上的节目的录像。
进而,在使用者将移动设备从图245的B的方向重新朝向图245的A的方向的情况下(9227h),在移动设备上显示图9227i。
这里,使用图245叙述本申请的效果。在图245中,实线的箭头用A、B、C表示将移动设备9001从正面朝向TV、记录机或微波炉的情况下移动设备朝向的方向。并且,虚线表示将移动终端9001朝向TV、记录机、微波炉的背面、即从后侧朝向的情况下的移动终端所朝向的方向。在采用在游戏机等中使用的以往的简单的动作传感器的方式中,在将移动终端9001从TV的正面朝向的情况下,从方向A向方向B向左侧,即逆时针旋转,所以按照操作者的意图而从TV切换为记录机。但是,在将移动终端9001从TV的背侧从方向A的TV朝向方向B的记录机的情况下,移动终端向与正面的情况相反的逆时针方向旋转,所以仅通过动作传感器,判断为从TV朝向了微波炉,选择微波炉而在移动设备的画面上显示微波炉,所以进行与操作者的意图违背的错误的动作。
但是,在本发明中,通过3D映射,事先由NFC和服务器登录了TV、记录机、微波炉的坐标。此外,由于移动终端具有自己的3D坐标信息,所以即使在较大的房间的中央使移动设备移动到某TV的背侧,如虚线的箭头表示那样使移动终端从方向A的TV向方向B的记录机顺时针旋转,也根据TV、记录机、移动设备的3D坐标信息、以及移动设备朝向的方向,选择记录机并显示,在移动设备的画面上显示记录机,并链接到记录机。这样,具有不发生误动作的本发明的独特的效果。
此外,在一般的家庭的家中有几十件的家电制品。在本发明中,当接触在家中的家电制品上而进行NFC通信时,在5~10cm的距离范围内有移动设备和家电制品。如果移动设备拥有正确的位置信息,则以5~10cm以内的精度将位置信息向服务器传送。即,通过本发明,家中的几十件的家电制品成为位置测量的基准点。在建筑物内得到正确的位置信息的情况下,存在没有用于设定基准的基准点的问题。但是,在本发明中,具有大量家电制品成为基准点的显著效果。
(具有多个传送路径的通信方式的位置信息的获得方法)
使用图256,有如MIMO那样使用多个天线确保多个传送路而传送的通信方法。在这样的方法中,说明在母机9306与移动终端9308通信的情况下得到位置信息的方法。母机9306使用传送路9308a、9308b、9308c这3个与移动终端9308交换信息。实际的传送路是3×3的9条,但省略了。在该情况下,移动终端如MIMO那样到步骤9307g为止使用图中的式求出传递函数A。求出固有矢量X及Wi、固有值λ等的传送信息,进行通信。此时,9个传送路分别具有不同的固有矢量、相位及振幅的特点。在步骤9307a中,提取该传送路的特点,在步骤9307b中求出电波强度,在步骤9307c中将移动终端所拥有的自己自身的3D的坐标信息、处于移动的方向的状态时的传送特性9307d和电波强度9307e与3D坐标、方向信息一起向服务器9302传送(步骤9307f)。
转移到图257,在服务器中,在步骤9350中将移动终端9406的特定时间的3D坐标、移动终端的方向、传送特性(传送路的传递函数、固有值、固有矢量)和强度模式化,如步骤9351a所示,将与各3D坐标1、2、3对应的传送模式9352a、9352b、9352c、具体而言例如是AAA、ADA、CAB和模式压缩,映射到3D坐标空间中。接着,在步骤9353a中,记录到服务器的3D坐标位置的数据库中。在该情况下,也可以记录移动终端的一定时间内的移动时的传送信息的变化的特点。
这样,在服务器的数据库中记录传送信息。在该情况下,记录按个人而不同的移动终端的传送数据。移动终端传送来精度较低的位置信息,但通过多次学习所输入的传送信息的数据,能够将进一步提高了位置精度的传送数据记录到数据库中。
在该状态下,如步骤9353b所示,在移动终端为了得到当前的位置信息而发送来当前的传送数据的情况下,在步骤9353c中,服务器对于从移动终端发送来的传送模式与记录在服务器的数据库中的传送模式,例如以模式匹配方式搜索“AAA”。在步骤9353d中,在有接近于从移动终端发送来的模式的模式、以及强度的候选数据、并且在候选是1个的情况下(步骤9353e),服务器从数据库将对应于该模式的3D坐标的位置信息向移动终端传送。
但是,在候选不是1个的情况下,前进到步骤9353h。在该情况下,如图257所示,有时AAA的传送模式在9355a、9355b、9355c的3处存在。在此情况下,通过在步骤9353h中使用移动终端所具有的精度较低的3D坐标9357,将候选的数据缩减并过滤为仅处于移动设备的附近的候选,由此减少候选数量。结果,如果不是1个,则在步骤9353f中指示,以使用移动设备所具有的精度较低的3D坐标。如果成为1个(步骤9353i),则将对应于该传送模式的3D坐标向移动设备传送(步骤9353j)。
移动终端9308在房间内不能取来自卫星的GPS的位置信息的精度。因此,使用3轴的振动陀螺仪或加速度传感器、磁传感器,进行房间内的移动终端的位置检测。但是,随着从基准点离开,误差累积,所以精度下降。
但是,在使用本发明的MIMO等多个传送路的方式的情况下,传递函数等的模式的数量增加。因此,与1个传送路相比,在房间之中存在许多传送模式。该模式如果移动λ/2则变化,换言之,具有只要知道提取了传送路的特征的模式就能够以λ/2的较高的精度进行位置检测的效果。例如在1GHz的情况下,有可能能够以15cm的精度检测。该方式的问题是相同的传送模式有可能在1个房间中存在多个。但是,在本发明的情况下,由于移动终端具有位置检测部,所以能够从该精度较低的位置精度信息中排除错误的模式。因此,能够得到较高精度的位置信息。
此外,在MIMO中能够改变多个天线的波束的方向。如果改变移动终端和母机的波束方向,则能够改变接收机的传送路的强度等、例如接收信号的电平。通过使移动终端移动,传送路的状况变化,所以在知道母机的3D坐标位置的情况下,也可以运算移动设备的位置。
如以上这样,根据本发明,使用便携电话或智能手机等的便携设备(通信装置),利用便携设备的RFID和GPS或运动传感器等的各种传感器,便携设备能够简单地实现多遥控器、家电内容下载等的扩展用户界面。
(实施方式23)
对本发明的实施方式23进行说明。
图258是表示自家等一般的家的地面、以及与在其中拿着移动设备的使用者在地面上移动的情况下的处理有关的设备的例子的图。在宅内,电视机(TV-A、TV-B)等的家电设备处于各房间中,使用者的所处场所通过掌握移动设备拥有的作为宅内的位置信息的坐标值的技术判明。由于还预先登录有电视机的坐标值,所以在使用者在寝室中控制电视机(TV-A)的情况下,能够通过将移动设备朝向电视机的方向并发送电视机的控制所需要的命令,来进行控制。在图258中,移动设备为了掌握位置而利用的宅内的地图信息既可以由移动设备保持,也可以保持在SEG(401c)那样的宅内服务器中,也可以是用因特网连接的服务器。宅内服务器经由移动设备的公共网、或无线LAN接入点(401e)与移动设备连接。优选的是,如果保存在宅内服务器中,则即使在没有连接因特网线路的状况下,也能够对移动设备提供地图信息。而且,能够不过度使用移动设备的存储设备而管理地图信息。
首先,说明拿着移动设备(401a)的使用者从接近于建筑物(自家等)的周边(401g)的地方使用移动设备拥有的传感器检测建筑物内的移动设备的位置的处理的流程。
使用图259解说测量建筑物内的移动设备的位置的处理。开始,在步骤402a中,移动设备确认移动设备具有的GPS传感器、或检测宅内的无线电波的功能是否是启动中,在启动中的情况下(“是”),向步骤402c前进,通过检测由GPS检测到的移动设备的当前地坐标是否是预先登录的建筑物的附近、或无线LAN等的建筑物内的设备发出的电波,在检测到处于自家周边的情况下(“是”),向步骤402d前进。在步骤402c中为“否”的情况下重复进行直到成为“是”。在步骤402a中为“否”的情况下向步骤402b前进,使用者选择表示在建筑物(自家前)的门厅在移动设备的UI上开始屋内的位置检测的“屋内位置检测模式”,向步骤402d前进。在步骤402d中如果移动设备的角速度传感器、地磁传感器、加速度传感器没有启动则启动,前进到步骤402e。在步骤402e中,如果能够从云上的地图管理服务器、或SEG(处于宅内的服务器等)获得地图及基准点信息(“是”的情况),则前进到步骤402f,取得地图及基准点信息。
另外,在移动设备具有足够的存储设备的情况下,也可以将地图或基准点信息保持在移动内部中。保存及获得场所没有限制。此外,也可以通过在SEG或云上的服务器中放置地图和基准点信息的状态下,移动设备使用移动设备所拥有的传感器的感知结果对SEG或云上的服务器询问来经由网络实现与移动设备保持地图或基准点信息的状态同样的处理。
此外,也可以根据移动设备的位置,将地图或基准点信息仅限于移动设备的位置的周边部分等,局部地取入到移动设备并利用。
在步骤402e中为“否”的情况下,向步骤402g前进,检测预先设定的特征性的变化模式(基于预先测量的角度变化的重复得到的拉门、基于垂直方向的加速度变化得到的台阶等)(“是”的情况)的情况下,前进到步骤402h,如果在移动设备内部中登录有“类似的特征的变化模式”,则向圈1(图260)前进。在步骤402g中为“否”的情况下重复进行直到成为“是”。
另外,步骤402g中的特征性的变化模式,例如根据检测在3秒以内登上3级台阶的Z轴(垂直)方向的加速度的向上下方向的G的变化来识别,判断为达到了门厅的地面的高度。进而,在其前面例如5秒以内,根据角速度传感器中Yew方向的朝向变化90度的检测结果,判断为人朝向门厅的方向。
在此情况下,通过识别是将门厅门打开的经常的动作,能够识别移动设备存在于门厅门附近的基准点。此时,例如5秒钟使用者大致持续静止状态的情况下,判断为正在开门厅的钥匙。如果在服务器或移动设备中有该门厅的前方的位置的坐标信息,则使用坐标信息将移动设备的位置信息改写。这里,从外部的GPS信息的纬度、经度的绝对坐标系切换为建筑物内的相对坐标系。通过切换为相对坐标系,不需要向纬度经度的坐标变换处理,并且能够减少变换误差。
门厅门上带有RF-ID(NFC)方式的锁的情况
在本发明的RF-ID中,在锁或服务器中记录有坐标信息和坐标精度评价点的Vs。在接触的时刻,移动设备与锁的天线部的距离是5cm以内。因此,如果在移动设备保持的坐标的坐标精度评价点Vm的评价点比Vs高的情况下,将锁的坐标数据替换为移动设备的坐标信息。在Vs更高的情况不替换。通过坐标精度评价点,在本发明中由于在空调或TV的RF-ID、或者对应的服务器中记录有坐标信息和其坐标精度评价点,所以每当接触时改写为精度更高的坐标信息和更高的精度评价点,所以具有每当接触时各设备的坐标精度提高的效果。
使用图260解说表示测量建筑物内的移动设备的位置的处理的流程图。在步骤403a中,根据变化模式,确定作为对象的基准点(例如门厅等),取得基准点的坐标值(以任意的基准点为初始位置的相对坐标、纬度经度、基于海抜的绝对坐标值等),在步骤403b中,以移动设备的当前位置为基准点,将在移动设备内部中保存的当前位置信息覆盖,在步骤403c中,使用角速度传感器、地磁传感器、加速度传感器,开始计测相对于基准点的移动信息,在步骤403d中,重复进行根据相对于基准点的移动信息确定当前坐标作为3D位置的动作,在步骤403e中,根据相对于基准点的移动信息,判断当前坐标是否是没有伴随着因地图上的台阶或电梯等带来的明确的上升行动的状态,在步骤403f中,在移动设备中设定有拥有者的身高、或已从服务器(SEG、云上的服务器等)取得的情况下,使用该高度,在不能取得拥有者的身高信息的情况下,从SEG、服务器或终端内的预设信息取得例如170厘米的国家或地域中的平均身高信息,在坐标来到超过身高信息的位置的情况下,将其修正为身高信息以内,前进到圈2(图261)。
另外,在步骤403c中,通过使用角速度传感器、地磁传感器、加速度传感器,能够计测使用者的移动量并确定3D位置,但还可以通过由声音传感器、气压传感器等判断发出特定的声音的场所或层数来进一步提高位置确定的精度。
此外,与将移动设备的传感器在建筑物外内两者都持续设为ON相比,如由本实施例所示的例子那样检测建筑物的附近,将在宅内的位置确定所需要的传感器在该时刻设为ON,当处于不是建筑物的附近的地方时,在其他用途中不需要的情况下,通过设为休眠模式、或设为OFF而进行移动设备的节电化。
进而,根据建筑物内的地图,当为仅能够直线移动的通路等、在地图上为直线部时将角速度传感器关闭或设为休眠模式。或者使用地磁传感器求出方向。并且,在曲线部、或在路线上的分叉点之前将角速度传感器设为ON。例如现行的一般的面向移动设备的3轴角速度传感器消耗约5mA~10mA,但通过勤设为ON、OFF能够削减耗电。进而,现行的一般的地磁传感器为约1mA附近,与角速度传感器相比耗电较少,当不需要进行需要角速度传感器的程度的高精度的角速度检测、姿势检测时,通过仅由地磁传感器判断姿势,就能够期待消费电力的削减效果。
使用图261解说表示测量建筑物内的移动设备的位置的处理的流程图,在步骤404a中,如果在地图信息中预先设定了表示起居室、寝室等区域的区域信息(坐标值)(“是”的情况下),向步骤404b前进,参照保存在移动设备中的地图信息,取得地图上的区域信息(表示房间的信息),在步骤404c中,根据移动设备的坐标和区域信息确定移动设备存在的房间(X1、Y1、Z1<Xm、Ym、Zm<X2、Y2、Z2),在步骤404d中,在移动设备的画面上显示确定的房间名(起居室等),在步骤404e中,参照保存在移动设备中的地图取得处于移动设备的前端朝向的方向的能够控制的设备,在步骤404f中,对所取得的设备,根据预先设定的设备的安装位置的坐标值判断是否是设置在与移动设备所处的房间相同的房间中的设备,或者在有预先设定的房间名的情况下根据该信息判断是否是设置在与移动设备所处的房间相同的房间中的设备,在步骤404g中,通过对与移动设备相同的房间的设备改变框的颜色等的表现,作为分开与移动设备相同的房间的设备和不是如此的设备的UI而将设备列表向使用者提示,向圈3(图265)前进。在步骤404a中,在“否”的情况下,向步骤404h前进,参照保存在移动设备中的地图取得处于移动设备的前端所朝向的方向的能够控制的设备,在404i中,将设备列表向使用者提示,向圈3(图265)前进。
通过这样识别移动设备处于哪个房间中,即使在移动设备所朝向的方向上放置有处于不同的房间中的两个电视机的情况下,也能够控制移动设备的使用者所处的房间的电视机。
图262是表示示出3D地图上的房间的区域的信息的例子的图。
在房间的形状较复杂而不是单一的立方体的情况下,通过多个立方体的组合设定为1个房间。
图263是表示基准点的附近的移动设备的举动的图。
如图所示,在移动设备检测到角速度传感器是休眠状态(406b)的移动设备(406a)进入到基准点的3米以内的情况下,为了进行更高精度的基准点的检测,移动设备的角速度传感器成为ON状态(406c)。进入到基准点的附近之前例如通过加速度传感器和地磁传感器,计测相对于前1个通过的基准点的移动量的结果,在地图上进行识别。
图264是表示在移动设备的行进方向上想要高精度检测的场所的图。
例如从图示的寝室观察,在门厅和起居室的两者的入口在直线方向上不怎么离开而会合的情况下等,如果在地图上不能高精度地检测在步行时拐弯,则在移动设备进入到当前位置以房间的单位不同的地图匹配困难的点(407b)的附近(例如3米以内)的情况下,通过将角速度传感器启动一定时间(10秒间),提高地图匹配的精度。
使用图265解说表示测量建筑物内的移动设备的位置的处理的流程图。在步骤408a中取得移动设备的当前坐标值,在步骤408b中,参照地图,在周边3m以内有基准点或地图上的注意点的情况下(“是”),向步骤408c前进。在步骤408b中,在“否”的情况下,向步骤408a返回。在步骤408c中,参照应在基准点或注意点的附近使用的传感器的列表,在步骤408d中,取得作为对象的传感器的信息“角速度传感器”和时间信息(10秒、到达后5秒),在步骤408e中将角速度传感器的休眠模式解除,计测开始,在步骤408f中检测到关于基准点或注意点的传感器的检测结果的模式的情况下(“是”),向步骤408g前进,在步骤408g中,经过指定时间5秒(“是”)而结束。在步骤408g中,在“否”的情况下重复直到成为“是”。在步骤408f中,在“否”的情况下,向步骤408h前进,在步骤408h中经过10秒的情况下(“是”),向408i前进,在步骤408i中将时间内发现率计数(-1次),在步骤408j中,将列表上的时间信息延长并覆盖。在从服务器取得的列表的情况下,向服务器通知并覆盖,向步骤408a返回。
图266是表示基准点及注意点的附近的移动设备的举动的表。
在图266所示的表(409a)中,在地图上的基准点、或例如作为容易发生地图匹配的错误的点的注意点的附近,根据基准点或注意点的特征,将移动设备应启动的传感器以优先级顺序记载,并记载有启动时间、以及在检测到基准点或注意点后持续启动的时间,进行更高精度的基准点或注意点的检测。进而,记载有表示进入到基准点或注意点的附近、在处于表中的传感器启动后的启动时间内发现了基准点或注意点的百分比的时间内发现率、以及表示进行地图匹配后的、根据其后的传感器数据与实际的位置进行地图匹配的结果不同的情况下的比率的错误率。由此,在时间内发现率较低的情况下将启动时间设定得较长、在时间内发现率较高的情况下将启动时间调整得较低,由此能够减少传感器的启动时间而实现节电化。此外,在地图匹配错误率较高的情况下,除了将传感器的启动时间取较长以外,还将识别附近时的距离即作为附近的距离延长(3米→5米),由此能够提高基准点或注意点的发现精度。在地图匹配错误率较低的情况下,通过缩短作为附近的距离,能够减少传感器的启动时间而实现节电化。
使用图267解说表示测量建筑物内的移动设备的位置的处理的流程图,开始,在步骤410a中,移动设备判断是否用GPS检测到自家周边的坐标、或检测到自家无线LAN的接入点、或检测到在自家中预先计测时取得的自家周边的无线LAN的接入点的某个,在“否”的情况下移动设备继续等待直到检测到。在“是”的情况下,在步骤410b中从图268所示的表示用于检测基准点的传感器的优先级的列表即基准点检测传感器优先级列表,取得用于检测进入到家中时的基准点的传感器,步骤410c在加速度传感器的情况下,在检测到检测已被登录的加速度的检测模式(例如3级的台阶)的Z轴方向的G的情况下,判断为处于预先登录的基准点的坐标值,将坐标值设置在移动设备中,向圈4(图269)前进。
另外,此时,也可以除了410c的处理以外还根据地磁传感器的数据检测行进方向轴(X轴)的G(加速度),通过地磁传感器检测台阶的朝向,判断是否与过去检测等而登录在地图上的台阶的方向相同,在不相同的情况下判断为不是作为对象的基准点的台阶。
图268是表示用于检测基准点的传感器的优先级的列表。
如列表(411a)所示,根据基准点的种类,应启动的传感器的优先级不同,例如在门厅门的检测中,通过由声音传感器检测钥匙孔的声音的类似性能够进行正确的判断,但由于起居室的门不发出较大的声音且地面的高度上升1级,所以有基于加速度传感器的上下方向的移动检测的优先级较高的差异。
使用该列表,将高位的两个传感器启动,在判断率较低的情况下将高位3个启动,在判断率较高的情况下仅使用高位的1个,从而根据基准点的特性改变应启动的传感器,由此,进行使用需要的足够的传感器的判断,实现节电化及提高检测精度。
使用图269解说表示测量建筑物内的移动设备的位置的处理的流程图,例如,在步骤412a中,在Z轴的-(负)方向的加速度成分较多的情况下(“是”),向步骤412b前进,判断为正在上台阶,在步骤412c中计数台阶的步数n,在步骤412d中,根据无线LAN的多个接入点的电波强度及相位求出位置,从多个台阶之中确定台阶A,在步骤412f中,在达到从服务器或移动设备的存储器得到的台阶A的台阶数m的情况下或气压传感器达到一定气压的情况下(“是”),向步骤412g前进,判断为上完了台阶,得到从该情况下的服务器得到的台阶最上级的坐标和其坐标精度评价点:Vs,向圈5(图270)前进。在步骤412f中,在“否”的情况下,向步骤412c返回。在步骤412a中,在“否”的情况下,向步骤412h前进,在步骤412h中,在Z轴的+(正)方向的加速度成分较多的情况下(“是”),向步骤412i前进,判断为正在下台阶,在步骤412k中,计数台阶的步数,在步骤412m中,根据无线LAN的多个接入点的电波强度及相位求出位置,从多个台阶之中确定台阶A,在步骤412n中,在达到从服务器或移动设备的存储器得到的台阶A的台阶数m的情况下或气压传感器达到一定气压的情况下(“是”),向步骤412p前进,判断为下完了台阶,得到从该情况下的服务器得到的台阶最下级的坐标和其坐标精度评价点:Vs,向圈5(图270)前进。在步骤412p中,在“否”的情况下向步骤412k返回。
使用图270,解说表示测量建筑物内的移动设备的位置的处理的流程图,在步骤413a中,将移动设备测量的坐标信息的坐标精度评价点:Vm取出,在步骤413b中,在Vm比Vs高、即服务器的坐标信息更正确的情况下(“是”),向步骤413c前进,将移动设备的坐标信息置换为服务器的坐标信息,在步骤413g中,完成台阶上的基准点的坐标信息的设定,向圈2(图261)返回。在步骤413b中,在“否”的情况下,向步骤413d前进,不将移动设备的坐标信息改写为服务器的坐标信息,在步骤413e中,在服务器的坐标信息的自动改写标志是ON的情况下、或在画面上进行“可以改写?”的显示,在使用者OK的情况下(“是”),向步骤413f前进,将服务器的坐标信息用移动设备的坐标信息改写,在步骤413g中,完成台阶上的基准点的坐标信息的设定,向圈2(图261)返回。在步骤413e中,在“否”的情况下,在步骤413g中,完成台阶上的基准点的坐标信息的设定。向圈2(图261)返回。
图271是表示加速度传感器的Z轴(垂直)方向的检测数据的图。
如图271的414a所示,在上台阶的情况下,作为上行方向的、相对于Z轴(垂直)方向为负方向的加速度被以较强地周期性检测到(414a)。在下台阶的情况下,作为上行方向的、相对于Z轴(垂直)方向为正方向的加速度被以较强地周期性检测到(414b)。在步行时,对于上下方向大致相同(414c)。图271的曲线图为了容易理解地说明而以在加速度传感器中将在恒常状态下计测的重力成分除去后的状态下的例子记载。
使用图272,解说表示测量建筑物内的移动设备的位置的处理的流程图,开始,在步骤415a中,移动设备判断是否用GPS检测到自家周边的坐标、或检测到自家无线LAN的接入点、或检测到在自家中预先计测时取得的自家周边的无线LAN的接入点的某个,在“否”的情况下移动设备继续等待直到检测到。在“是”的情况下,在步骤415b中从基准点检测传感器优先级列表取得用于检测进入到家中时的基准点的传感器,在步骤415c中,在取得结果是声音传感器的情况下,对通过蜂窝网或无线LAN、BT等的近距离无线预先登录的、进入到建筑物(自家)内的移动设备(例如家人)访问,询问是否处于建筑物(自家)的附近,在步骤415d中,在附近有家人等的进入到建筑物中允许接受位置检测服务的使用者的移动设备的情况下,询问坐标值,判断所取得的坐标值是否比本设备更接近于基准值,在较近的情况下,前进到步骤415f,确认基准点检测传感器优先级列表,选择声音以外的检测方法,在步骤415g中,通过所选择的检测方法检测移动设备移动到基准点,将基准点的坐标值设置在移动设备中,向圈6(图273)前进。在步骤415d中,在较远的情况下,向步骤415e前进,在与预先输入的声音(门把手的声音、钥匙的声音)一致的情况下,判断为是基准点,将基准点的坐标值设置在移动设备中,向圈6(图273)前进。
使用图273,解说表示测量建筑物内的移动设备的位置的处理的流程图,在步骤416a中,每一定的时间(10ms)根据加速度、角速度传感器、地磁计算从基准点的移动量,并通过自主导航将设想坐标值连续登录到移动内部中,在步骤416b中,根据Z轴加速度的检测结果识别步行,取得脚接触在地面上的瞬间的时刻,取得1个或多个作为对象的时刻的声音,检测在声音中有变化的瞬间,在步骤416c中,比较变化的模式是否是从木地板到绒毯等预先登录的根据房间的差异而得到的声音,在类似的情况下,向步骤416d前进,从地磁角速度传感器分割行进方向,将坐标修正为沿行进方向从作为当前登录着的当前地信息的坐标值引直线的交点(或者也可以修正为最近的地方),向圈7(图274)前进。在步骤416c中,在不类似的情况下,向圈7(图274)前进。
图274是表示加速度Z轴(垂直方向)的检测数据与步行者的关系的图。
如417a所示,能够通过加速度检测步行的状态,能够取得将脚落在地面上的时刻(417b、417c),所以能够基于该时刻仅提取作为脚步声的部分的声音,能够更有效地检测脚步声的差异。如417d所示,在从木地板的起居室移动到西式房间的绒毯的情况下,判断脚步声的变化点417e的时刻为通过起居室与西式房间的边界(417f)的瞬间,能够基于地图修正移动设备的坐标值。
图275是表示建筑物内的移动的例子的图。
移动设备检测基准点(418a),能够根据到达TV-A为止拐弯的量(418b)和基准点(418a)的坐标值在地图上的精度,计算TV-A的坐标值的精度。更具体地讲,在拐弯的量(418b)较多的情况下,将在TV-A的地点移动设备识别的坐标值的精度设定得较低,在拐弯的量(418b)较少的情况下将精度设定得较高,登录基准点的精度信息。
同样,在从TV-A到TV-B的移动中,也使用TV-A自身的坐标值的精度信息和拐弯的量或Z轴移动量(418c)的信息计算精度,登录精度信息。
图276是表示从移动设备移动的基准点到下个基准点的路程的信息的图。在路程的信息(419a的表)中,有作为最近通过的基准点的精度信息的原基准点精度信息、移动量、由加速度传感器计算出的步数信息、由角速度传感器、地磁传感器计算出的拐弯量的总量、经过时间、上下方向的Z轴移动量的总量,根据这些值的大小,计算当前时刻的移动设备的坐标的精度评价点(坐标精度评价点)。
图277是说明原基准点精度的图。如420a的表所示,登录有各个门厅等的基准点A、TV-A,TV-B等的基准点和其坐标的精度信息。如图272的例子那样,TV-A的坐标精度评价点由基准点A的坐标精度评价点和路程1(420b)决定,TV-B的坐标精度评价点由TV-A的坐标精度评价点和路程2(420c)决定。该信息总是作为地图信息保存并持续更新。更新的定时既可以在移动设备来到该基准点时进行,也可以基于储存一定以上信息、取10次的作为计测数据的坐标值的平均等统计方法来决定。
使用图278,解说表示测量建筑物内的移动设备的位置的处理的流程图,在步骤421a中,检测基准点,在步骤421b中,将移动设备的当前坐标值替换为基准点的坐标值,在步骤421c中,作为路程列表的原基准点而从基准点信息取得表示对象基准点的坐标的精度的坐标精度评价点信息,在步骤421d中,根据角速度传感器、地磁传感器、加速度传感器计测并保存移动信息,在步骤421e中,通过到达新的基准点、或将移动设备接触在具有某种RF-ID功能的设备而进行通信?在“是”的情况下向步骤421f前进,取得基准点信息或设备信息,向步骤421g前进,使用基准点信息或设备信息取得坐标精度评价点。取得方法采用通过与将移动设备对搭载有RF-ID功能的家电设备等放置在基准点的设备接触的动作同时、向服务器(SEG等)询问来取得、或从移动设备内部取得,向圈8(图279)前进。在步骤421e中,在“否”的情况下,向步骤421d返回。
使用图279解说表示测量建筑物内的移动设备的位置的处理的流程图,在步骤422a中,根据路程信息计算坐标精度评价点,在步骤422b中,在移动设备计算出的坐标精度评价点是比原来的坐标精度评价点更高的数值的情况下(“是”),向步骤422c前进,将基准点或对象设备的3D坐标信息和坐标精度评价点覆盖。在步骤422b中,在“否”的情况下向步骤422d前进,取得基准点或对象设备的3D坐标信息,在步骤422e中,将移动设备的当前坐标值覆盖。向圈2(图261)返回。
接着,使用图271和图272说明对电梯的位置检测方法。说明图271,在步骤423a中,在来到电梯的位置的情况下(“是”),向步骤423前进,在“否”的情况下重复。
在步骤423a中,在进入到电梯中的情况下(“是”),向步骤423c前进,在“否”的情况下重复。
在该建筑物内排列有多台电梯的情况下,各机内性能不同,所以在步骤423c中,根据位置信息判断是第几个电梯和层数,在步骤423d中,对于对应的电梯的“特性信息”,从服务器获得所获得的从n层到m层的上升时或下降时的需要时间信息、Ts及负荷变化特性的信息和各层的地面的绝对或相对高度信息、以及各层的出口门的位置信息,在步骤423e中,计测Z轴的上下的加速度,在步骤423f中,当与重力方向相同方向的加速度增加或气压下降时,判断为开始上升,开始经过时间的测量,在步骤423g中,当与重力方向相同方向的加速度减小时或气压的下降停止时,判断为停止上升,将经过时间的测量停止,计算经过时间TA,在步骤423h中,根据上升开始层、经过时间TA和对应电梯的上述需要时间信息,得到“从n层到m层的需要时间”的信息,求出“到达的层数”,在步骤423i中,在移动到电梯之外的位置的情况下(“是”),向圈9(图281)前进。
在步骤423i中,在“否”的情况下回到步骤423e。
另外,在检测到电梯下降的情况下,加速度、气压都被检测出电梯上升时的相反的数据。因此,与上述步骤同样计算下降层数。
此外,在因其他人的行动等而电梯在中途层停止的情况下,每当在中途停止时,加上从开始上升或下降到在中途停止的期间的移动量,直到最终出电梯,由此进行计算。
说明图281。在步骤424a中,将上述“到达的层数”的高度信息或层数信息记录到移动设备的当前的3坐标信息的Z信息中,在步骤424b中,在通过步数判断为出了电梯门的情况下(“是”),向步骤424c前进,在“否”的情况下重复。在步骤424c中,得到来自服务器或预先保持在移动设备的存储器中的对应层的出入口的位置信息和其坐标精度评价点Vs。与其另外地,保持移动设备的传感器等测量的坐标信息,向圈5(图270)前进。在此情况下,在出入口的位置信息的坐标精度评价点Vs比移动设备的坐标精度评价点Vm高的情况下,通过将移动设备的坐标信息替换为出入口的坐标信息而再设定基准点,由此具有能够提高移动设备保持的坐标精度的效果。然后,随着移动设备所移动的距离和时间增加,假如在不进行接下来的基准点设定的情况以外将移动设备的坐标精度评价点Vm逐渐降低。该降低方式是移动设备从服务器下载对应于移动设备机种的特性的程序。
在乘坐自动扶梯的情况下,检测平均地稳定的Z轴的上方向的加速度和平均地稳定的行进方向的加速度的两者。只要使用者没有行走登上,该加速度就是很有特征性的模式,所以通过检测到该模式而检测出乘坐在电梯上而上升或下降的情况,通过用步数传感器检测下来的时刻,能够进行基准位置的再设定。
这样,能够取得在电梯中到达的层数的信息及高度信息。
(实施方式24)
在本实施例中,关于搭载有NFC读写器的移动设备、搭载在家电设备上的NFC标签和家电CPU、以及管理移动设备和家电设备的信息的服务器,使用图286~图291说明用移动设备接触在家电设备的NFC标签上的情况下的动作。
如果解说图286,则搭载在家电设备中的家电CPU在步骤951v中将关于家电的数据定期地记录到标签的存储器中。由此,当从移动终端对家电设备标签访问时,得到能够将不能从移动设备读出、并且仅能够从家电设备CPU读出的家电设备内信息向移动终端发送的效果。
在步骤951a中,假设移动终端为动作状态。
在步骤951b中,确认移动终端上的家电设备操作应用的启动,在应用的启动完成的情况下(“是”),在步骤951c中,在移动终端上的显示装置上显示“请接触”,所以得到对使用者通知做好接触家电设备的标签上的准备的效果。
在步骤951d中,在使用者将移动终端的NFC读写器接触在家电设备的NFC标签上的情况下(“是”),向步骤951e前进,发出标签数据读出请求,在步骤951f中读出标签的存储器内的数据。
在步骤951g中,在需要向家电CPU的访问的情况下(“是”),前进到步骤651h,对CPU访问,在步骤951j中,读出向CPU的访问所需要的信息,在步骤651k中,将CPU的信息向标签的存储器传送或存储,向步骤951m前进。由此,得到当从移动终端向家电设备标签访问时、能够将不能从移动设备读出、并且仅能够从家电设备CPU读出的家电设备内信息向移动终端发送的效果。
在步骤951d中,在“否”的情况下再次重复,向步骤951e前进。
在步骤951g中,在“否”的情况下向步骤951m前进。
在步骤951m中,对移动终端传送数据,在步骤651n中,接受标签ID、签名、密钥ID、设备型号、错误代码、使用履历(次数数据),日志数据、制造号码、家电的工作状态(当前的状态)、URL、位置信息、展示模式识别符等的数据。
在步骤951q中,在移动终端是电波圈内的情况下(“是”),向步骤951r前进,在步骤951r中,移动终端将用户ID+标签ID+签名+密钥ID+设备型号+错误代码+使用履历(次数数据)+日志数据+家电的工作状态(当前的状态)位置信息、展示模式识别符的数据向上述URL的地址的服务器传送,在步骤951s中,服务器接收从移动终端发送的数据。
在步骤951q中为“否”的情况下,向圈11(图287)前进。
说明图287。
在步骤952a中,移动终端在有关于从接触的家电设备接收到的设备型号的应用的情况下(“是”),在步骤952i中,启动关于该设备型号的应用。由此,在移动终端保持有设备型号、以及关于设备型号的应用的情况下,得到即使移动终端是范围外、也能够启动关于设备型号的应用的效果。
在步骤952a中,在“否”的情况下向步骤952b前进,启动一般用本地处理例程,在952c中将从标签读出的数据的一部分显示。由此,得到如下效果:即使在移动终端是范围外、或没有保持关于设备型号的应用的情况下,也能够将从接触的家电设备取得的信息向使用者提示。
在步骤952d中,在错误代码表示“错误”的情况下(“是”),向步骤952e前进,在步骤952e中,在终端内有表示关于错误代码的错误内容等的属性信息的情况下(“是”),前进到步骤952f。
在步骤952e中,在“否”的情况下,向步骤952g前进,显示将设备型号和错误代码或错误变换为字符后的信息,前进到步骤952h。由此,有如下效果:即使表示关于错误代码的错误内容等的属性信息不在移动终端内的情况下,也能够将家电设备的错误信息向使用者提示。
在步骤952f中,基于错误代码显示说明错误内容的信息,前进到步骤952h。由此,有如下效果:即使在移动终端为范围外的情况下,也在移动设备内部中保持错误代码和错误内容的对应信息,并由从家电设备取得的错误代码变换为错误内容,由此能够将从接触的家电设备取得的错误内容容易理解地向使用者提示。在进行错误代码与错误内容的对应变换的情况下,也可以从家电设备经由标签将制造商代码也传送给移动终端、按每个制造商管理错误代码与错误内容的对应表而进行变换。如果在按每个制造商定义设备共通错误代码的情况下,也可以从家电设备经由标签将制造商代码也传送给移动终端、参照各制造商的的错误代码与错误内容的对应表、变换为错误内容。由此,还得到能够减少需要保持在移动终端中的错误数的效果。此外,也可以管理制造商代码、该制造商的设备型号、错误代码与错误内容的对应表,来变换错误内容。
在步骤952h中,假如在关于设备型号的询问的电话号码或电子邮件地址、URL存储在移动内的情况下(“是”),向圈4(图289)的步骤954a前进。
在步骤952h中,在“否”的情况下,向圈10(图289)的步骤954b前进。
如果说明图288,则在步骤953a中,在服务器或标签的展示模式识别符为ON的情况下(“是”),向步骤953b前进,将展示模式的菜单画面显示在移动终端画面上。
上述展示模式,是表示家电设备为陈列在家电店铺的店面中的状态的信息。家电设备的流通一般是由制造商制造、制造出的一部分设备被收存在仓库中、被随机选择的一部分设备被展示在家电销售店的店面中。消费者在家电销售店的店面中尝试商品的使用感受或评价设计,但存在如下的问题。
步骤953d以后是用于通过用移动终端接触在家电上、对制造商简单地实现用户登录(注册)的步骤。消费者虽然可以在家电店铺中触摸实物的商品,但并不是确定购买。假如有恶意的消费者用消费者自身拥有的移动终端接触在展示的家电设备的标签上,则有能够对没有购买的家电设备进行用户登录的问题。近年来,对于制造商而言,用户登录是在发生召回的情况下用于确定商品购买者的非常重要的信息,所以对进行了用户登录的消费者提供金钱或附加价值的情况较多。因此,想要对未购买设备进行用户登录的有恶意的消费者有可能增加,强烈要求防止对未购买设备的用户登录的机制。步骤953a、953b使用服务器或标签的展示模式识别符,通过在是展示模式的情况下不进行用户登录、将展示模式的菜单画面显示在移动设备画面上,具有防止非法的用户登录的效果。在将展示模式在服务器上变更、参照的情况下,不需要直接接触在家电设备上,所以有能够控制大量设备的统一变更及远处的家电设备的效果。在家电设备内、或家电设备标签上变更、参照展示模式的情况下,能够对例如展示在店铺中的家电设备分别操作。
在步骤953a中,在“否”的情况下,向步骤953c前进,通过标签ID+设备的型号,检索DB而判断是否为已设备登录(爱用者),在步骤953d中,在有设备的登录的情况下(“是”),向步骤953e前进,在步骤953e中,在用户ID(移动设备)与登录在服务器中的用户ID相同、或者是相同的家庭ID的情况下(“是”),向步骤953f前进,显示对应于通常的设备型号的菜单画面。由此,具有在是用户已登录的家电设备的情况下、不需要对购买者多次显示不需要的用户登录画面的效果。此外,近年来,大致保持有1人1台以上的移动终端,所以例如对于购买的洗涤机,使用父亲的移动终端进行用户登录、而使用母亲的移动终端接触在洗涤机的NFC标签上的情况下,如果虽然是同一家庭也判断为不同的用户请求再登录,则会显示用户登录变更画面。对于该问题,如步骤953e那样将用户ID也作为家庭ID建立联系管理,在判别为是相同家族的情况下,判断为是正常进行了用户登录的状态,具有不需要对购买者多次显示不需要的用户登录画面的效果。
在步骤953d中,在“否”的情况下,向步骤953g前进,显示用户登录画面,在步骤953h中,在有GPS等的终端的位置信息的情况下(“是”),向步骤953j前进,检查是否处于特定的地域中?是否处于销售着该设备(型号)的建筑物内,向圈6(图291)前进。
在步骤953e中,在“否”的情况下,向圈5(图290)前进。
说明图289。
在步骤954a中,将上述的电话号码、电子邮件地址、URL显示在画面上,在步骤954b中,连接到服务器上,在有进行信息的交换的数据的情况下(“是”),向步骤954c前进,在“否”的情况下,向步骤954d前进并结束。
在步骤954c中,进行对使用者敦促“移动到圈内”的显示,在步骤954e中,使从标签读取的数据保存到存储器中而设为“得到状态”,在步骤954f中,在进入到圈内的情况下(“是”),前进到步骤954g,在“否”的情况下向步骤954c返回。
在步骤954g中,连接到记录在标签或移动设备中的URL的服务器上,在步骤954h中,进行用户认证,在步骤954j中,将从标签读取的信息本身或加工后的信息向服务器传送,或者基于从服务器传送来的应用进行处理。
由此,具有以下效果:即使用移动终端接触在家电设备上的地方是电波范围外,当使用者移动到圈内后也能够接着进行用户认证、用户登录及变更、显示对应于设备的菜单画面等。
说明图290。
在步骤955a中,在能够通过GPS等获得终端的位置信息的情况下(“是”),向步骤955b前进,在步骤955b中,在终端的位置信息与登录在服务器中的位置信息大致一致的情况下(“是”)向步骤955c前进。
在步骤955c中,在服务器中记录有表示“可以使用其他ID用户”的识别符的情况下(“是”),向步骤955d前进,进入到访客模式。在步骤955c中,在“否”的情况下,向步骤955e前进而停止。
由此,具有能够在家族以外的访客的移动终端上仅对指定的家电设备使功能动作的效果。例如,在家族外的访客来访到自家的情况等时,在进行了对访客许可在移动终端上使电视机遥控器功能动作、但不想让家族外看到洗涤机的洗涤履历的判断的情况下,只要关于电视机将表示“可以使用其他ID用户”的识别符设为ON、关于洗涤机将表示“可以使用其他ID用户”的识别符设为OFF就可以。此外,通过定义访客模式,还具有虽然不使家族外看到洗涤机的洗涤履历、但仅针对错误代码许可用移动终端显示等、能够仅将一部分功能向访客提供的效果。
在步骤955b中,在“否”的情况下向步骤955f前进,在步骤955f中,将将“住址变化了?”“持有者变化了?”的疑问显示在移动画面上,在“是”的情况下,向步骤955g前进,显示住址变更菜单或使用者变更菜单。
由此,在拿着以前使用的家电进行搬家的情况下等在购买时用户登录的住址变化的情况下,具有即使用户忘记用户登录的情况下也能够自动地敦促用户登录的效果。
在步骤955f中,在“否”的情况下向步骤955h前进,继续处理。
接着,作为关于家电设备被在家电销售店中展示的状况的实施方式,使用图291进行说明。
在步骤956a中,在处于对应的地域中的情况下(“是”),向步骤956b前进,在“否”的情况下,向步骤956c前进,进行用户登录作业。
这里,该地域一般是表示家电销售店的地面的空间信息,由GPS信息等构成。是该地域的判别既可以使用移动终端的位置信息,也可以使用店铺的信标。也可以参照家电流通路径信息和当前时间判别为存在于店铺中。
由此,在家电设备存在的地方处于销售店中的情况下,具有防止有恶意的用户将展示在销售店中的未购买商品非法地进行用户登录的效果。
在步骤956b中由服务器和移动终端(用户ID)进行用户认证,在步骤956d中,在用户认证OK的情况下(“是”),向步骤956e前进,在“否”的情况下,向步骤956f前进,停止动作。
在步骤956e中,要求该销售店或制造商固有的口令输入。
在步骤956g中认证,向步骤956h前进。
在步骤956h中认证OK的情况下(“是”),向步骤956j前进,在“否”的情况下向步骤956k前进而停止。
在步骤9561中,在口令正确的情况下(“是”),向步骤956m前进,在“否”的情况下向步骤956n前进而停止。
在步骤956m中,切换为展示模式,在步骤956p中,询问是否可以将展示模式识别符记录到标签或服务器中。
在步骤956p中,在“是”的情况下,向步骤956q前进,将服务器或标签的展示模式识别符设为ON,在步骤956r中,为了将该识别符信息向服务器传送、或记录到放置标签的存储器区域中,将识别符信息、口令、密钥信息加密而向标签传送,在步骤956s中继续展示模式。
标签在步骤956t中,使用标签中的密钥认证接受到的密钥、口令,在步骤956u中,在认证OK的情况下(“是”)向步骤956v前进,在标签中的展示模式识别符区域中记录意味着ON的值。
在步骤956u中,在“否”的情况下向步骤956w前进而停止。
在步骤956p中,在“否”的情况下向步骤956s前进。
由此,具有能够防止有恶意的客人将展示在店铺中的家电设备的展示模式等胡乱变更的效果。此外,具有能够防止有恶意的客人将展示模式非法地设为OFF、防止对未购买商品的非法的用户登录的效果。此外,即使在没有展示模式的情况下,也具有通过设备处于店铺内且要求销售店或制造商固有的口令输入,能够防止对于未购买商品的非法的用户登录的效果。
此外,在步骤956m中切换为展示模式,但也可以进行用户登录作业。由此,具有防止对未销售家电的非法用户登录、并且家电销售店的销售负责者能够代替消费者在销售店铺中进行用户登录的效果。
图292说明在实施例23、34、25及其他实施例中说明的标签中记录的信息的属性。
(实施方式25)
对本发明的实施方式25进行叙述。在图293中表示在本实施方式中设想的移动终端5201,在图294中表示在本实施方式中设想的家电设备5211。在本实施例中,表示当移动终端5201和家电设备5211进行近距离无线通信时使用两者的设备的指引功能简单地使近距离通信模组接近的方法。移动终端5201主要设想了前面部的大部分由显示装置构成的智能手机那样的终端。假设近距离无线模组搭载在背面上。进而,对于该部分,赋予了某种作为记号的标记。作为记号的既可以是圆或十字等的一般的记号,也可以是表示接近模组的特殊的记号。此外,也可以利用制造商标识或商品标识等的原本带有的记号。
图295是显示本实施方式的移动终端5201的模组的位置的状态的图。在本实施方式的移动终端5201中,在使用近距离无线通信时,将存在于背面上的近距离无线通信模组的天线位置显示在前面的显示装置上。显示器显示的方法既可以匹配于天线部形状,也可以使用一般的记号。还可以将多个显示方法组合使用。另外,显示器显示的种类也可以能够由用户选择。通过本发明,与在背面上带有表示模组的位置的显示的情况相比,能够减轻一边看移动终端5201的背面一边将近距离无线模组接近的不方便的动作。
图296是显示本实施方式的家电设备5211的模组位置的状态的图。在本实施方式的家电设备5211中,在使用近距离无线通信时,进行指引显示。在通常时,标签位置是被印刷的标记,但在家电设备5211侧发生了想要对移动终端5201发送的数据的情况下,使用LED等进行明确地知道的显示。显示的种类与移动终端5201同样可以考虑各种种类,但基本上为以近距离无线通信模组为中心展开的图形。通过本发明,能够不损害白色家电等的简单的设计而在想要通信时明确地表示近距离无线通信模组的位置。
图297是本实施方式的移动终端5201和家电设备5211使用近距离无线通信模组进行通信时的状态图。用户仅通过朝向显示在家电设备5211侧的显示的中心、对准显示在移动终端5201上的标记,就能够正确地使接近模组接近。由此,能够很简单地在近距离无线模组的性能极限进行通信。本发明在移动终端5201侧、家电侧分别是有效的,但通过同时使用,能够期待更好的效果。
图298是将加速度计及陀螺仪与显示联动使用的情况的图。在使用以圆形展开的图形以外的情况下,匹配于移动终端5201的倾斜而显示。由此,用户能够根据显示在家电侧的图形使移动终端5201以喜欢的角度接近。一般而言,由于移动终端5201不呈圆形和正方形,所以本发明是有效的。
图299是联动使用背面的照相机的情况下的图。即使在家电侧进行指引显示,也被移动终端5201遮住,看不到的部分变多。通过使用照相机将家电侧的指引显示在移动终端5201上,能够解决该问题。移动终端5201在背面上搭载有照相机的结构较多,所以本发明是有效的。另外,照相机并不限于搭载在移动终端5201的中心,因此在显示时需要进行修正。
图300是与服务器联动下载实现本发明的应用的情况下的图。本发明能够将应用下载到移动终端5201中来实现。在下载应用的情况下,从移动终端5201向服务器发送移动终端5201的型号,服务器根据该型号在移动终端5201的坐标位置中装入对准的值而分发应用。假设服务器保持有各移动终端5201的近距离无线通信模组的信息的数据库。通过这样,能够对应于各种种类的移动终端5201。另外,在预安装中,本发明的效果也完全不变化。
图301是实现本发明的移动终端5201的功能块图。控制部一般使用无线通信部取得表示天线位置的显示坐标,记录到显示坐标保持部中。如果近距离无线通信部要开始近距离无线通信,则控制部从坐标保持部取得坐标,从天线位置显示图像保持部取得显示图像,在显示器部的对应坐标处显示图像。也可以同时将来自照相机部的影像显示在显示器部上。如果近距离无线通信天线部接近于家电的近距离无线通信模组则开始通信。
图302是关于家电设备5211的异常发生时的指引显示的状态变迁图。假设如果家电设备5211发生异常则显示红色。这里,所谓异常,表示故障等的想要紧急向用户通知需要近距离无线通信的状况。假设如果异常的通知完成则显示蓝色。进而,假设在异常的程度较低的情况下、例如在过滤器更换或固件更新请求等的情况下显示黄色。另外,颜色的显示并不限定于该两种颜色。此外,也可以通过警告音等进行用户通知。
图303是进行长时间的通信的情况下的图。在进行固件更新等的长期间的通信的情况下,对用户通知剩余时间。也可以在移动终端5201侧显示消息,也可以使用家电设备5211侧的显示。
图304是显示具有显示器显示部的家电设备5211的指引时的图。家电设备5211的近距离无线通信模组不设置在背面上。此外,也不设置在显示器显示部上。因此,设置在显示器以外的部分上的近距离无线通信模组进行易理解的显示。既可以是十字等的显示,也可以用箭头等显示。
图305~535是本实施方式的流程图。家电设备5211在发生事件的情况下、或在一定的期间中没有进行近距离无线通信的情况下(5201a),尝试向服务器的连接。在能够进行经由因特网的连接的情况下(5201b),经由因特网经由向服务器发送信息(5201k)。在不是的情况下,为了使用近距离无线通信进行向服务器的连接,使中心配置在家电的天线的中心部上的十字显示以红色显示(闪烁)。在异常类错误以外的通常错误中用别的颜色(例如蓝色)显示。这里所谓的异常类错误,是故障等在通常动作中不发生的错误,所谓通常错误,是空调的过滤器更换等的即使进行通常动作也会发生的错误。在不是错误的情况下也想要对服务器发送信息的情况下也可以用某种形状进行显示(5201c)。在错误的情况下发出警告音(5201d)。在一定时间内没有近距离无线通信(接触)的情况下,判断为用户不在附近,停止声音(5201f)。进而,使闪烁的间隔变长、或变暗(5021g)。根据家电保持的使用履历推测该用户的设备的使用时间带、以该时间缩短点亮间隔(5201h)。进而,在长时间没有接触的情况下,再次发出声音(5201j)。在检测到接触的情况下开始数据转送(5201l)。用户在看到家电侧的显示、或听到声音的情况下(5202a),启动移动终端5201的应用(5202b)。应用在显示部上显示与配置在显示部背侧的NFC的天线部的大致中心部对应的显示部的对应部分为中心的十字标记或圆标记等的接触指示标记(5202c)。从移动终端5201通过天线开始电波的发送(5202d),同时,使用者看着移动设备的接触指示标记和家电的天线显示标记而尝试对准移动终端的位置(5202e)。重复轮询(5202g),在一定时间内开始通信的情况下(5202h),将家电部的近距离无线通信部的存储器内的数据读出(5203d)。在一定时间中不能开始通信的情况下(5202h),先结束轮询(5202j),发出“请再一次对准”的显示(5203a)。使用户再次进行对位,在即使这样也不能通信的情况下(5203b)结束(5203c)。在将数据读出时根据最初发送的数据取得应读出的数据量和家电侧的通信速度(5203e)。根据通信状况计算错误率。也可以向服务器传送(5203f)。根据数据量、通信速度和错误率计算读取花费的时间(5203g)。并且,将推测读取时间显示在显示部上(5204a)。将剩余时间也用棒状或圆形状的指示符显示。如果通信完成(5204b),则发出完成显示(5204c),将数据向服务器传送(5204d)。随着数据转送进行(5204e),家电侧也可以使显示部变亮、或使闪烁变快、使颜色恢复等的处理(5204f)。如果通信完成(5204g),则将完成向移动设备通知(5204h)。在通信完成后(5204j),将闪烁变更为点亮(5204k),在一定时间后灭掉(5204m)。
说明图309。
在步骤5205a中,选择家电的预约画面,在“是”的情况下向步骤5205b前进,输入预约开始时间、工序的内容、种类的参数,在步骤5205c中,如果是如洗涤机那样运转时间变动的情况(“是”的情况),则向步骤5205d前进,将“强制同步运转模式”设为ON或OFF,向步骤5205e前进。
在步骤5205c中,在“否”的情况下也向步骤5205e前进。
在步骤5205e中,在接触的情况下(“是”),向步骤5205f前进,在“否”的情况下重复。
在步骤5205f中,将设定的程序等的命令向家电发送,在步骤5205g中,家电接受数据,在步骤5205h中,发送包括从开始到结束的步骤的预测时间在内的程序数据。
从步骤5205h起,家电部向步骤5205i前进,开始程序,在步骤5205j中,当强制同步运转模式为ON时,或者在运转时间不变化时(“是”),向步骤5205k前进,终端和家电进行同步运转,在步骤5205m中,例如在洗涤机最大20分钟的作业在15分钟结束的情况下,停止5分钟直到成为20分钟。由此,终端与家电完全同步。
在步骤5205j中,在“否”的情况下,向步骤5205n前进,进行与终端不一定同步的运转。
从步骤5205起,移动终端向步骤5205p前进,接受程序,在步骤5205q中开始程序,在步骤5205r中,当强制同步运转模式为ON时,或当运转时间不变化时(“是”),前进到步骤5205s,进行与家电的运转相同的显示,在步骤5205t中,当如图310的5302a那样成为等待画面时,向步骤5205u前进,在画面上显示表示家电的当前的状况的图标5305、5306、5307。例如,如果开始空调的预约开始动作,则将该动作开始及剩余时间如图标5306b那样显示。如果点击该图标,则如5305那样切换为该家电的菜单画面。即,在本发明中,仅在接触时进行通信,但即使移动设备与家电不通信,也以相同的程序进行同步运转,所以具有即使外出也通过移动终端详细地知道家中的家电的动作状况、经由移动终端还向使用者进行洗涤完成等的通知的效果。使用者被提供宛如用网络连接那样的服务。
在步骤5205r中,在“否”的情况下,前进到步骤5205y,使终端显示家电的大致时间。此时,进行最小时间和最大时间的情况下的显示。
另外,图282、图283、图284是补充实施方式22的图256、图257的图。如MIMO那样对来自两个天线431a、431b的两个电波的相位等进行控制,由此能够将两个电波波束433a、433b向不同的角度放射。一个如方向434c那样直进,直接发送到收发机432,形成第1传送路径。另一个电波433a向方向434a前进,被壁反射而向434b前进,发送到收发机432,第2传送路径由MIMO方式形成。
由图可知,由于两个传送路径的距离不同,因此能够根据接收的两个信号来检测出相位差P1。
在GHz的无线的情况下是10~20cm的波长,因此如果利用相位差检测部436的波数计数器437对波数之差进行计数,则能够以10~20cm的精度测定两个传送路径的距离的差。
图282表示t=t1的情况。图282的情况下,大致为二等边三角形。
在接下来的t=t2,如图283所示,向下方向放射电波波数439。
于是,与图282同样,求出相位差P2,求出其距离L2。
由于根据来自服务器的地图信息来知晓房间的大小,因此可知上下的长度。求出两个二等边三角形的顶点之和,因此通过几何计算能够计算出434b+434c的差d2。根据d2和L2可知收发机432和收发机430的距离。此外,还可知下壁与收发机432之间的距离。在t=t1时,可知上壁与收发机432之间的距离。在t=t1及t=t2时改变波束的方向,由此通过使用了两个天线的MIMO方式,能够检测出终端的位置、房间的大小。
如果图284那样使用3个431f、431g、431h,则不用进行时间切换就能够推测终端的位置或房间的形状。此时,通过使用无线LAN的MIMO,具有一边进行通信一边能够进行位置检测的效果。为了正确地测定,将位置测定时间段和无线通信时间段分时地通信,由此能够同时实现通信和测定。
(实施方式26)
图311是表示在本实施方式中设想的家庭网络环境的图。图312是表示本实施方式中的终端信息的例子的图。图313是用于说明本实施方式中的终端间的运动图像的交接的图。
在本实施方式中,说明在终端的种类、性能不同的终端间进行运动图像的交接的情况。
假设交接源的终端为移动AV终端8006,交接目标的终端为TV3(8501)。此外,假设运动图像服务器不在宅内,而是位于宅外的运动图像服务器3(8504)中。
与实施方式8同样,通过移动AV终端的RFID标签8007与TV3的RFID标签8502的通信,将正在用移动AV终端8006观看的运动图像交接给TV3(8503)。假设各终端向登录服务器M1005登录了各自的终端信息。
如图312所示,在终端信息中,有终端ID8510、终端种类8511、通信设备8512、终端性能8513、安装应用8514等。
如图313所示,移动AV终端8006在正从宅外的运动图像服务器3(8504)通过应用2接收运动图像的情况下,交接作为应用ID的应用2。
进而,应用2是商用运动图像应用,在如果不输入PW就看不到运动图像的情况下,交接应用2运动图像视听用的PW。
进而,交接运动图像服务器3的IP地址、运动图像识别符、运动图像显示时间。此外,为了使运动图像的交接的定时一致,也可以交接在移动AV终端中使用的时刻信息。
时刻信息在显示时间修正部8113中,与由TV终端使用的时刻信息一起被使用。例如,如果在移动AV终端和TV终端中使用的时刻偏差1秒,则为了使交接的时间一致,在自终端的时刻中错开1秒而显示。
接受到交接请求的TV3(8503)向登录服务器询问是否能够由自终端交接。在登录服务器中,确认在TV3中是否安装有应用2、通信设备及终端的性能是否足够等,并向TV3返送该信息。TV3基于该信息,向移动AV终端返回运动图像交接应答。另外,TV3也可以考虑登录服务器中的通信设备的延迟及终端的显示延迟等而调整缓冲时间及显示时间。
(实施方式A、B)
以下,在本实施方式中,对能够简单地进行家庭网络中的设定的便携型通信装置进行说明。
另外,在本实施方式中,当对住宅(参照图478的住宅99)设置家电等的设备时、能够以简单的操作实现对预先设定的服务器进行的、预先设定的发送信息的发送的便携型通信装置也包含在本发明的范围中。
此外,在本实施方式中,如下装置包含在本发明的范围中,该装置为:通过能够简单地进行操作,进一步,通过参照无线LAN的接入点(参照图478的接入点99c)等,进行第1方式下的第1无线通信(例如,基于比较小的功率进行的无线通信)、以及第2方式的第2无线通信(基于比较大的功率进行的方式)中的、与被进行了设置的位置对应的适当的无线通信时的操作能够变为简单的操作。
以下,参照附图,对有关本发明的实施方式的通信装置详细地说明。
以下,表示实施的方式(实施方式)A(A1~A13)、B(B1~B7)。
在以下的实施方式(实施方式A、B)中,进行有关本发明的通信装置的各种形态的说明。
例如,也可以最先理解实施方式B4。
此外,也可以与实施方式A(A1~A13)相比更先理解实施方式B(B1~B7)。
与这样的实施方式B4密切关联的图例如是图444~图461(及图478~图490)等。所以,也可以最先理解这些图444~图461(及图478~图490)等。
此外,与上述实施方式B(B1~B7)密切关联的图例如是图427~图490等。所以,也可以将这些图427~图490比其他图1~图426更先理解。
此外,在上述实施方式B的图427~图490中,例如可以考虑优选将图478~图490也更早地理解。
即,例如在理解上述在申请时强烈注目的技术时,也可以参照这些图478~图490。
即,例如公开了以下的便携型通信装置。
在该便携型通信装置中,也可以具备:设备信息取得部(设备信息取得部98n),通过设置在规定的位置(图478的住宅99(的内部)等)上的设备(图480的设备98a(例如图478的电视机N10A)等)与该便携型通信装置(便携型通信装置98b等)之间的近距离无线通信(近距离无线通信98c1、NFC的通信),从设置的该设备取得从多个设备(图480的第1设备98a、第2设备98r等)确定该设备(第1设备98a)的设备信息(设备信息98n1);位置信息取得部(位置信息取得部98j),取得(便携型通信装置98b进行将便携型通信装置98b对设备98a接触时的运动98b1等而)被设置的上述设备与上述便携型通信装置进行了近距离无线通信时(进行时)的(进行上述近距离无线通信而设置的上述设备(设备98a(电视机N10A))的位置是与该便携型通信装置的位置相同的位置时的)、表示该便携型通信装置的位置(设备98a的位置、电视机N10A的位置)的位置信息(位置信息98j1);以及发送部(发送部98o),在进行了上述近距离无线通信的情况下,将包含通过该近距离无线通信取得的上述设备信息(设备信息98n1)和所取得的(上述相同位置(电视机N10A的位置)处的)上述位置信息(位置信息98j1)在内的发送信息(发送信息98o1)向预先设定的服务器(服务器98c,例如连接在图478的通信线99b上的、处于住宅99的外部的设备98a的制造者的服务器等)发送。
此外,也可以是,具备检测部(图490的通信检测部98q),该检测部检测在设备(设备98a)被设置在上述规定的位置(住宅99)处的情况下进行的(进行接触的操作时等的)被设置的上述设备与该便携型通信装置之间的上述近距离无线通信(近距离无线通信98c1)被进行的情况;在检测到进行该近距离无线通信的情况下,上述发送部在上述设备被设置在上述规定的位置处的情况下将需要向上述预先设定的服务器发送(例如,向服务器登录)的上述发送信息(发送信息98o1)向上述服务器发送;发送的上述发送信息包含用于从多个设备中确定所设置的上述设备的上述设备信息(设备信息98n1);上述设备信息取得部通过上述近距离无线通信从上述设备取得该设备信息;所发送的上述发送信息包含表示上述设备被设置的位置的位置信息(位置信息98j1);上述位置信息取得部取得所设置的上述设备与上述便携型通信装置进行近距离无线通信时的、表示该便携型通信装置(便携型通信装置98b)的位置的上述位置信息(位置信息98j1),作为上述设备的位置的上述位置信息。
由此,在设备98a被设置在住宅99中时需要的、例如包含设备信息98n1和位置信息98j1的发送信息98o1向作为设备98a的制造者的服务器等的服务器98c的发送,单单通过进行接触的操作等,仅通过进行近距离无线通信98c1来进行,能够简单地进行操作。
并且,进行近距离无线通信98c1的本装置例如是作为便携电话等的便携型通信装置98b。因此,例如,不需要为了进行近距离无线通信98c1而追加新的结构等,能够使成本为较小的成本。
此外,如上述那样,本装置是便携型通信装置98b。因此,例如不需要为了位置信息的取得而追加新的结构等,使成本成为更加充分小的成本,能够使成本变小的成本的下降幅度成为较大的下降幅度。
另外,具体而言,例如在被进行设置的设备98a中,可以不需要作为新的结构而新设置GPS装置。
由此,能够同时实现操作较简单、成本较小、以及成本变小的下降幅度为较大的下降幅度。
另外,例如,上述设备(设备98a)是上述住宅(住宅99)的家电(图478的电视机N10A、制暖机N10K等),该便携型通信装置是设置该设备的上述住宅的居住者的便携电话、或者该居住者的具有便携电话的功能的智能电话等。
并且,也可以是一种服务器,取得的上述位置信息(位置信息98j1)确定从基点(图485的基点98bx、图478的接入点99c)到设置上述设备(例如第1设备96c、第2设备96d(图478的制暖机N10K及电视机N10A等))的位置的该便携型通信装置的运动(图485的运动96e),在所确定的上述运动(运动96e)是到第1位置(图485的第1位置96cP、图478的制暖机N10K的位置)的第1运动的情况下,表示该第1位置,在是到第2位置(第2位置96dP、电视机N10A的位置)的第2运动的情况下,表示该第2位置(第2位置96dP);接受发送的上述服务器(图485的服务器98c(例如图478的服务器(家庭服务器)99a))通过上述发送信息被发送到该服务器的情况,在由被发送的上述发送信息的上述位置信息确定的上述运动(运动96e)是上述第1运动的情况下,预先设定的无线通信装置(处理装置96a,图478的接入点99c)进行与设置的上述设备之间的第1方式下的无线通信(较小的功率下的无线通信96f1),在是第2运动的情况下,进行第2方式下的无线通信(较大的功率下的无线通信96f2)。
即,这样,也可以如上所述,通过发送发送信息98o1,进行与住宅99中的设置设备98a的位置(第1位置96cP、第2位置96dP)对应的适当的方式下的无线通信(无线通信96f1、96f2)。
由此,不需要进行为了适当的无线通信而需要的例如无线通信中的功率的设定的操作等的相当复杂的操作,单单仅通过便携型通信装置98b的接触的操作等就足够,能够使操作大幅地变得简单。
此外,也可以是,上述位置信息取得部包括加速度传感器(图488的加速度传感器98j2x),该加速度传感器检测该便携型通信装置进行到设置上述设备的位置为止的(从基点(图485的基点98bx、图478的接入点99c)的位置起的)运动(图485的运动96e)时的加速度;取得的上述位置信息(位置信息98j1)确定根据检测出的上述加速度确定的该运动(运动96e),将进行所确定的该运动(运动96e)后的位置(设备98a(例如,图485的第1设备96c)的位置)表示为设置上述设备的位置。
由此,例如在GPS的电波不是以取得的位置信息的精度充分高的精度的程度适当的电波等情形下,也单单仅通过使用加速度传感器,就取得适当的位置信息,进行适当的动作,能够可靠地进行适当的动作。
此外,也可以是,设置上述设备的上述规定的场所是住宅的内部,上述近距离无线通信(图480的近距离无线通信98c1)是在上述住宅中设置有上述设备的情况下,由设置有上述设备的上述住宅中的该便携型通信装置的用户进行将该便携型通信装置接触在所设置的上述设备上的操作(图480的98b1)时的通过NFC(Near Field Communication)的通信等。
另外,在这样的便携型通信装置中,更具体地讲,例如也可以在“(其他形态)”的说明中记述那样,也可以在实施方式A、B等中叙述的那样。另外,“(其他形态)”的说明在该栏、即[具体实施方式]栏的最末尾的部分中記载。还请适当参照“(其他形态)”的说明。
另外,以下的实施方式A(A1~A13)、B(B1~B7)的技术领域是比较新的领域,可以考虑各种可能性,是比较难以预测怎样的技术在将来被广泛地利用的领域。
所以,根据这一点等,在以下的说明中,记述比较广泛的各种技术(实施方式A1~A13、B1~B7等)。
另外,附图如以下所述。
即,在理解实施方式A时,请参照例如图1~图470等。
此外,在理解实施方式B时,请参照图427~图490(图427~图477及图478~图490)等。
并且,关于实施方式A1,例如请参照图1~图39等。此外,关于实施方式A2请参照图40~图47等,关于实施方式A3请参照图48~图58等,关于实施方式A4请参照图372~图375等,关于实施方式A5请参照图376~图383等,关于实施方式A6请参照图384~图389等,关于实施方式A7请参照图390~图400等,关于实施方式A8请参照图401~图415等,关于实施方式A9请参照图416~图417等,关于实施方式A10请参照图418等,关于实施方式A11请参照图419等,关于实施方式A12请参照图420~图424等,关于实施方式A13请参照图425~图426等。
另一方面,关于实施方式B1请参照例如图427~图432等,关于实施方式B2请参照图433~图439等,关于实施方式B3请参照图440~图443等,关于实施方式B4请参照图444~图461等,关于实施方式B5请参照图462~图470等,关于实施方式B6请参照图471~图476等关于实施方式B7请参照图477~图477等。
另外,将包含图353A、图353B、图353C而成的整体(例如图353A、图353B、图353C中的各个)适当称作“图353”。另外,关于图353A~图353D等也是同样的。
另外,在各个装置等(实施方式(A(A1~A13)、B(B1~B7),其他便携装置等)中,例如是以下这样的。即,该装置的结构典型地也可以通过作为集成电路的LSI(Large Scale Integration)实现。它们既可以单独地1芯片化,也可以包含全部的结构或一部分的结构而1芯片化。集成电路根据集成度的差异,也有称作IC、系统LSI、超级LSI、特级LSI等的情况。此外,集成电路的方法并不限定于LSI,也可以使用专用电路或通用处理器实现。还可以利用FPGA(Field Programmable Gate Array)、或能够再构成LSI内部的电路单元的连接及设定的可重构处理器。
进而,如果因半导体技术的进步、或者因派生的其他技术而出现代替当前的半导体技术的集成电路化的技术,则当然也可以使用该技术进行功能块的集成化。例如可以考虑生物技术的应用等。
(实施方式A)
这里,实施方式A(实施方式A1~A13等)的通信装置例如也可以是以下的通信装置X(图445、图448、图428、116、图440等)的下位概念。
通信装置X是经由近距离无线通信(RF标签的通信),从终端装置(图447、图448的电视机N10A等、图440的终端装置Y01等)读出终端装置信息。并且,通信装置X是经由通用的网络(图448的宅内网络N100、宅外网络N101)向服务器设备(图448、图446的登录服务器N40、图440的服务器Y04)发送所读出的上述终端装置信息的通信装置(例如,图448、图445的移动设备N20、图440的通信装置Y02、图428、116的通信装置M1101、图433的通信装置M1101S、M1101R等)。并且,具体而言,通信装置X具有经由上述近距离无线通信从上述终端装置(例如,图447的电视机N10A)取得至少包含能够识别上述终端装置的制造信息的终端装置识别信息的上述终端装置信息(图444的存储器N13的数据、图450的(a)栏的制品数据、图440的ROMY015的数据)的终端装置信息取得部(图448、图445的RF-ID读写器N21、图429的设备固有ID取得部M1202)。并且,具备将至少包含能够识别上述通信装置的制造信息的通信装置识别信息(例如,图445的存储器部N25的数据、由图440的ROMY025存储的制造号码)的通信装置信息进行存储的通信装置信息存储部(例如,图445的存储器部N25、图440的ROMY025)。此外,具有对所取得的上述终端装置信息赋予所存储的上述通信装置信息、生成对上述终端装置信息赋予上述通信装置信息后的信息(包含上述终端装置信息和上述通信装置信息双方的信息),作为向上述服务器设备发送的发送信息(例如,图450的(b)栏的服务器登录数据)的信息赋予部(图445的CPUN34、图429的登录信息制作部M1204、图440的信息赋予部Y035)。并且,具有经由上述通用的网络向上述服务器设备发送由上述信息赋予部生成的上述发送信息的通信部(图445的通信部N30、图429的登录信息收发部M1207、图440的通信部Y036)。并且,上述通信部基于来自上述终端装置(图447的电视机N10A)的上述终端装置信息(例如,图450的(a)栏的制品数据中的“登录服务器的地址”等),确定由该终端装置信息表示的服务器(图448的登录服务器N40等)作为发送上述发送信息的上述服务器,与所确定的上述服务器通信。
这里,也可以是,通信装置X还具有取得上述通信装置的位置信息的位置信息取得部(图445的GPSN31、6轴传感器N32、图429的位置信息取得部M1206、图440的位置信息测位部Y027)。并且,上述位置信息取得部也可以在上述终端装置信息取得部中的、建立了上述终端装置(例如图447的电视机N10A)与上述通信装置的近距离无线通信的定时,取得上述通信装置的位置信息,上述通信装置信息包含由上述位置信息取得部取得的上述通信装置的位置信息。
此外,在上述通信装置信息中,也可以包含家(图447的家)或人(该通信装置的用户)的识别信息(家庭ID)。
另外,在该通信装置X中,例如也可以是以下这样。
该通信装置X包含在HEMS的系统(图447、图448的系统)中,是由用户携带、具有与用户的位置相同的位置的便携终端。
终端装置信息取得部仅在终端装置(例如图447的电视机N10A)与该通信装置之间的距离是不到阈值的近距离的情况、以及阈值以上的远距离的情况中的近距离的情况下,与该终端装置进行近距离无线通信。
通信部使服务器设备进行用于多个终端装置(既可以是图447的多个终端装置,也可以是包括图447的家以外的其他家的终端装置的多个终端装置)中的进行上述近距离无线通信的终端装置(图447的电视机N10A)的处理(例如,也可以是该终端装置的控制)。
由此,通信装置容易地在移动到该终端装置的近距离的终端装置(例如图447的电视机N10A)和其他终端装置(例如,其他家的终端装置等)之中,在进行了移动的、相对于通信装置为近距离的终端装置(例如电视机N10A)中,仅对近距离的终端装置进行控制等,对其他终端装置不进行。因此,仅对适当的终端装置进行控制等,能够可靠地仅进行适当的终端装置的处理。
并且,这样,尽管仅对适当的终端装置进行控制等,也单单仅将通信装置移动到近距离就足够,不需要复杂的操作等,简单地仅进行适当的终端装置的处理,能够简单地进行适当的处理。
并且,终端装置信息取得部通过上述近距离无线通信,从终端装置(例如图447的电视机N10A)取得从多个服务器设备之中特定服务器设备的终端装置信息。
并且,通信部使由通过上述终端装置信息取得部取得的上述终端装置信息确定的上述服务器设备进行上述控制等的处理。
由此,不论终端装置(电视机N10A)的外部的因素如何,都能够可靠地进行适当的服务器设备的处理。
进而,设有家庭ID发送部(图429的家庭ID管理部M1205),该家庭ID发送部通过从多个家中确定利用通信装置的家(图447的家),将用于从多个设备(图447的家的各设备、其他家的设备)中确定设在由该家庭ID确定的家(图447的家)中的各设备(图447的各设备)的家庭ID向上述服务器设备发送,使上述服务器设备确定进行上述近距离无线通信的上述终端装置(电视机N10A)包含在设在该家中的上述各设备中的情况。
另外,具体而言,例如也可以通过向规定的通信部(例如图429的登录信息收发部M1207)发送家庭ID,通过该通信部将家庭ID向服务器设备发送。
另外,家庭ID发送部也可以通过使服务器设备确定该终端装置(电视机N10A)包含在设在上述家中的上述各设备中的情况,使上述服务器设备确定在由该地图(图457的制品地图)将位置表示给用户的各制品中包含该终端装置(电视机N10A)的地图,作为制品地图(图457的制品地图)。
此外,家庭ID发送部也可以通过使上述服务器设备确定上述终端装置(电视机N10A)包含在上述各设备(图447的各设备)中的情况,使上述服务器设备针对该终端装置(电视机N10A)也进行由上述服务器设备对上述各设备分别进行的处理(例如,在该设备具有距用户最近的位置的情况下进行该设备的电源接通的处理)。
进而,设有位置信息取得部(上述),该位置信息取得部通过取得作为与该通信装置的位置相同的位置的进行近距离无线通信的上述终端装置(电视机N10A)的位置,使上述服务器设备将所取得的位置确定为该终端装置的位置。
由此,使服务器设备进行与终端装置(电视机N10A)的位置相应的处理,但仅使通信装置移动到适当的位置(电视机N10A的位置),能够简单地进行。
图440的通信装置Y02等例如也可以是该通信装置X的下位概念(具体例)等。
(实施方式A1)
对实施方式A1进行说明。
图314表示实施方式A1的概念图。
这里,表示由摄影装置(照相机)1(通信装置9A1)、TV(电视机)45及服务器(图像服务器)42构成的通信系统。在本图中,左侧表示摄影装置1的摄影时的状况,右侧表示摄影装置1将摄影的图像再现时的状况。
摄影装置1是有关本发明的通信装置的一例(这里是数字照相机)。
并且,摄影装置1作为与摄影时关联的构成要素(参照图314左栏),具备第1电源部101、影像处理部31、第2天线20、第1处理部35、存储介质识别信息111、摄影图像状况信息60及服务器特定信息48的第2存储器52、和RF-ID的天线21。
此外,该摄影装置1作为与再现时关联的构成要素(参照图314右栏),具备第1电源部101、第1存储器174、电源检测部172、启动部170、存储介质识别信息111、摄影图像状况信息60及服务器特定信息58的第2存储器52、第2处理部95、调制切换部179、通信部171、第2电源部91、和RF-ID的天线21。
TV45是用通信路连接读取器装置的设备的一例,具体而言,是用于显示由摄影装置1摄影的图像数据的电视接收机,具备显示部110、和RF-ID读写器46。
服务器42是将从摄影装置1上载到服务器42的图像数据保存、并且将该图像数据下载到TV45中的计算机,具备用来保持数据(图像数据)50的存储装置。
在将景色等被摄体摄影的情况下,由影像处理部31变换为摄影数据而得到的图像数据在能够通信的条件下使用无线LAN(Local Area Network,局域网)、WiMAX(WorldWide Interoperability for Microwave Access,全球微波互联接入)用的第2天线20以无线方式被发送给接入点。在发送时,例如经由因特网传送。并且,作为预先设定的服务器42中的数据50,将传送来的图像数据通过服务器42记录。
此时,第1处理部35将摄影的图像数据的摄影图像状况信息60记录到摄影装置1所具有的RF-ID47的第2存储器52中。在该摄影图像状况信息60之中,由例如第1处理部35等记录有图像摄像日期时间、图像摄影张数、最终图像发送日期时间、图像发送张数及最终图像摄影日期时间的至少某个、以及被上载的图像、或者没有上载的图像、最终摄影号码等。
此外,生成用来确定上载在服务器42中的数据50的URL(UniformResource Locator)。用来对该信息图像数据(图1的数据50)访问的服务器特定信息48(URL)通过第1处理部35记录在第2存储器52之中。此外,内置有该RF-ID(RF-ID47)的系统在第2存储器52中还记录有用来识别是照相机、卡还是明信片等的介质识别信息111。
第2存储器52当照相机(摄影装置1)的主电源(电池等的第1电源101)接通时,通过照相机的主电源动作。即使没有接通照相机的主电源,也由于对RF-ID的天线21从外部的RF-ID读写器供电。因此,不具有电池等的电源的第2电源部91调节电压,对RF-ID电路部的包括第2存储器的各模块供电,由此,摄影装置1能够将第2存储器的数据记录再现并收发该数据。
另外,第2电源部91由整流电路等构成,是由通过第2天线21接收的电波形成电力的电路。第2存储器52构成为,不论主电源的接通断开都能够从第2处理部95进行读写,在主电源接通的情况下能够从第1处理部35读写。即,第2存储器52由非易失性存储器构成,并且能够从第1处理部35和第2处理部95两者读写。
在该摄影装置1中,在结束了旅行等的摄影后将摄影的图像等再现的情况下,如图314的右侧的再现时所示,进行以下的动作。即,摄影装置1的用户等将摄影装置1向TV45的RF-ID读写器46靠近。于是,通过RF-ID读写器46经由天线21对RF-ID47供电。由此,基于被供给的电力,通过第2电源部91,即使摄影装置1的主电源(第1电源101)断开也对RF-ID47的各部供给电源。
由第2处理部95将第2存储器52的摄影图像状况信息60和服务器特定信息58读出,将所读出的各信息通过第2处理部95等经由天线21向TV45发送。
在TV45侧,基于服务器特定信息58生成URL,下载由该URL确定的服务器42的数据50的图像数据,将图像的缩略图等显示在显示部110上。
另外,在根据摄影图像状况信息60判断为存在没有被上载的摄影图像的情况下,将该消息显示在显示部110上,并且根据情况而启动摄影装置1,将没有上载的图像数据向服务器42上载。
图315是表示摄影装置1的外观的图。
图315的(a)栏、(b)栏和(c)栏表示本实施方式的摄影装置1的外观的主视图、后视图和右侧视图。
如图315的(c)栏所示,在右侧面中,内置有无线LAN用的天线20和RF-ID用的天线21,安装有由电波非屏蔽材料构成的天线罩22。
RF-ID的频率是13.5MHz,无线LAN的频率是2.5GHz,频率较大地不同,不会相互干涉。
因此,将两个天线20、21如图315的(c)栏所示那样构成为,使其从外部看为重合的。由此,能够减小栏设置面积。因此,可以得到能够使摄影装置小型化的效果。
此外,由于能够将两个天线的天线罩22如图315的(c)栏所示那样集中为1个,所以能够使电波非屏蔽材料部最小化。塑料等的电波非屏蔽材料与金属相比强度较低,所以通过使该材料最小化,具有能够减轻机体的强度的下降程度的效果。由标号6、3表示的两个单元分别是镜头6和电源开关3。关于标号2~16的单元在后面说明。
图316表示摄影装置1的块图。
将从摄像部30得到的图像数据经由影像处理部31发送给记录再现部32,记录到第3存储器33中。该数据记录在可拆装的IC卡34中。
这些处理由CPU(Central Processing Unit)等的第1处理部35指示。将摄影的照片及运动图像等的图像数据通过加密部36、通信部37的发送部38和第1天线20以无线LAN或WiMAZ等的无线向接入点等发送,经由因特网40向服务器42发送。即,将照片等的图像数据上载。
另外,有通信状态较差的情况或因附近没有接入点或基站等的理由而不能将一部分的图像数据上载的情况。在此情况下,上载到服务器42中的图像、和还没有上载的图像混合存在。
在此情况下,在服务器42的图像的数据和摄影的图像的数据中发生差异。
所以,详细在后面说明,在本发明的情况下,采用以下方式:通过TV45等上附带的RF-ID读写器46读取摄影装置1的RF-ID47的第2存储器52的服务器特定信息48等,使用该数据生成服务器42的URL等,使用该URL从TV45向服务器42访问,对摄影装置1上载的文件或文件夹等的数据50访问,将由摄影装置1摄影的图像中的已上载的图像下载而显示在TV45上。
如果实际摄影的图像的一部分或全部没有上载到服务器42的数据50的图像数据之中,则在下载到TV45中的情况下,可以考虑到发生实际摄影的图像的一部分不能由TV45视听的问题。
为了解决该问题,在本发明中,对于第1处理部35的摄影图像的状况数据通过记录再现部51在第2存储器52的摄影图像状况信息55中记录上载状况等。
图317是表示第2存储器52的结构的图。
使用图317更详细说明。
在第2存储器52中,记录有表示服务器42的图像数据与照相机摄影的图像数据是否一致、换言之表示是否同步的同步信息56(图317)。
在本发明中,TV45经由第2天线21读取第2存储器52之中的摄影图像状况信息55。
因此,能够立即确认在服务器的数据50中是否没有不足的图像。
如果在有未上载的图像时,将该结果显示在TV45的显示部上。而且,对视听者给出“请进行图像的上载”的显示、或经由RF-ID的天线21对照相机发出命令,对启动部170发送启动信号,强制地使摄影装置1的第1电源部101启动,使摄影装置1的第1存储器174等中的未上载图像经由无线LAN、或有线LAN、或RF-ID用的第2天线21等向服务器42上载。
另外,这里,在经由RF-ID的天线21的情况下传送量较小,所以如果要将原来的图像数据原样发送,则在上载和图像的显示中花费时间,给使用者带来不愉快。
为了避免该情况,在本发明中,在经由天线21的情况下,发送未上载图像的缩略图图像。
由此,能够缩短表观上的上载时间及显示时间,能够减轻给使用者带来不愉快的情况。
在当前的HF带的RF-ID中,几百kbps的传送量的情况较多,还对4倍速进行了研究。在此情况下,有可能能够实现几Mbps。如果发送未上载图像的缩略图图像数据,则能够1秒钟发送几十张图像。在一览显示的情况下,具有能够在一般用户能够容忍的时间内将包括未上载图像的全部图像显示在TV上的效果。该方法可以说是1个现实性的方法。
在这样使摄影装置强制的启动而传送未上载图像的情况下,使用无线LAN、RF-ID的天线21、有线LAN中的速度最快、最稳定的路径进行上载及向TV的显示。
对第2天线21发送信号的通信部171在经由第2天线21从外部接受电源供给的状况下使用低速的调制方式进行通信。另一方面,在从第1电源部101等接受电源供给的状况下,根据需要而将调制方式切换为QPSK、16QAN、64QAN等的信号点数较多的调制方式,使传送高速化,将未上载的图像数据以短时间上载。
另外,如果由电源检测部172检测到第1电源等的余量较少或外部电源非连接等情况,则停止从第1电源部101的供电,通过调制方式切换部175将通信部171的调制方式切换为信号点数较少的调制方式、或传送速率较小的调制方式。由此,能够将第1电源部101的规定值以下的低容量防止于未然。
此外,作为别的电力对策,在电力没有富余的情况下第2处理部95或通信部171等经由第2天线21对TV45的RF-ID读写器46发送电力增加请求信号而请求支援。对应于此,RF-ID读写器使发送电力增加到比RF-ID读取时的电力的规定值大的值。RF-ID侧由于经由天线21接受的供电量增加,所以能够向通信部171或第1处理部35供电。通过该方法,第1电源部101的电池100的电量不会减少。或者,具有即使没有电池100也能够实质上无限地继续发送作业的效果。
此外,作为别的方法,也可以使用图316的上载图像数据信息60。将上载的图像的信息61、例如照片号码等记录。也可以使用将该信息散列而得到的信息62。在此情况下,具有信息量减少的效果。
如果使用该数据,则TV45通过读取该数据、与照相机摄影的图像的信息比较,能够得到未上载的图像的信息。
作为别的方法,可以使用未上载图像数据的存在识别信息63。通过表示是否存在未上载图像数据的存在识别符64,能够通知有无未上载图像,所以能够大幅削减第2存储器52的信息。
也可以是未上载图像的张数65。在此情况下,能够使TV45读取,所以能够对视听者通知需要上载的张数。在此情况下,除了张数以外,如果将数据容量作为摄影图像状况信息55记录,则能够将用来上载未上载图像的预测时间更正确地显示在TV45上。
此外,也可以使用将未上载图像信息散列而得到的信息67。
此外,通过在第2存储器52中记录最后摄影的时间68,在之后从TV45读出,在连接到读出服务器42上时,通过将时间68与服务器42的最终上载的图像的摄影日比较,由此能够简单地判断有无未上载图像。
此外,在从较旧的顺序起赋予图像号码的方式中,通过仅将摄影的图像的最终号码69记录,通过与上载到服务器上的图像的最后的图像号码对照,能够得到是否有未上载图像的信息。
此外,将摄影的图像的信息70(例如摄影的图像的图像号码的全部等)记录到第2存储器52中。于是,通过在之后对服务器42访问时与上载到服务器42中的图像数据比较,能够判断是否有未上载数据。在此情况下,通过使用将摄影的图像信息散列而得到的信息71,能够将数据压缩。
作为第2存储器52的其他信息,记录有RF-ID的UID75、照相机ID部76、介质识别信息111。它们即使没有接通照相机的主电源(除了时钟的后备等的副电源以外),也被从TV45经由第2天线21读取,用于照相机及用户的识别、设备的认证。当从海外旅行等回归时电池的充电量较少的情况较多,但在本发明的情况下,即使没有电池也能够动作且发送信息,所以方便性良好。介质识别信息111包含表示是否为内置RF-ID的设备或介质是否是照相机、录像机、明信片、卡、便携电话的识别符等。在TV45侧,由于能够通过该识别符确定设备、介质,所以在画面上如后述的图22所示那样显示照相机或明信片的标记或图标,或根据识别信息变更处理。
图318是实施方式A1的摄影装置的第2存储器的结构图。
此外,记录有图像显示方法指示信息77,例如在图318的一览显示(表示是否进行的信息)78是ON的情况下,当使第2天线21接近于TV45的RF-ID读写器46时使照片等的缩略图的图像数据一览显示。
当幻灯放映79是ON时,使TV45将图像数据以从新到旧的顺序、或从旧到新的顺序1张张地依次显示。
在第2存储器52的图(图318)的下部,设有服务器特定信息48的记录区域。
由此,通过符合照相机操作者的喜好的显示方法在TV画面上显示。
其中,有作为用来生成服务器URL的元信息的服务器URL生成信息80。
并且,设有用来记录服务器地址信息81及用户识别信息82的区域,具体而言记录有登陆ID83等。此外,有用来记录口令84的区域,根据情况而记录有被加密的口令85。这些数据通过设在摄影装置1的内部或RF-ID47的内部、或照相机的内部、或TV45侧的URL生成部90生成用于访问服务器42中的对应于该摄影装置、或对应于用户的图像数据群访问的URL。该URL生成部90(图318)当处于RF-ID47中时由第2电源部91供给电源。
此外,也可以制作URL92而直接记录到第2存储器52中。
作为该第2存储器52的数据从RF-ID侧的第2处理部95和照相机侧的第1处理部35的哪个都能够读取数据,这一点为特长。
因而,在TV45去读取照相机的RF-ID47的情况下,具有能够将用来瞬间得到上载状况信息、服务器地址及登陆ID、口令的服务器42中的对应于该照相机的图像数据下载而在TV45上高速显示的效果。
在此情况下,具有即使不接通摄影装置1的主电源、也因从RF-ID读写器对第2电源部91供给电源而动作的效果。因而,摄影装置1的电池100的电力不会降低。
回到图316,第1电源部101从电池100接受供电,对照相机的各部供给电源。但是,在休止状态下,通过第3电源部102对时钟103等供给微弱的电源。根据情况,对第2存储器52的一部分的存储器供给后备电力。
RF-ID47接受来自第2天线的电力,使第2电源部91动作,第2处理部95使数据接收部105、记录部106、再现部107、数据转送部108(通信部171)及第2存储器52动作。
因此,在照相机的休止状态下完全不耗电,所以能够永久地保持照相机的电池100。
接着,对图320~图330的处理进行说明。
图320是照相机、卡侧的处理、和TV、RF-ID读写器侧的处理的流程图。
使用图320的流程图说明照相机、卡侧的处理和TV、RF-ID读写器侧的处理。
在图320的步骤150a中,当主电源为OFF(断开)时,在步骤150b中检查是否进行了主电源OFF时的RF-ID读写器的启动设定,如果为“否”,则在步骤150c中将RF-ID读写器46设为ON(打开),在步骤150e中进入RF-ID读写器的节电模式。
在步骤150f中,测量天线部的阻抗等或进行非接触式传感器的测量,如果在步骤150g中使RF-ID接近于RF-ID读写器的天线,则在步骤150g中检测到接近或接触的情况下,在步骤150h中对天线开始电力的输出,在步骤150k中第2电源为ON,第2处理部开始动作,在步骤150m中开始交换信息。
图321是图320的处理的后续的处理的流程图。
如果在步骤150中进行了接收,则在图321的步骤151a中开始相互认证,在步骤151f中开始相互认证,在步骤151b、151g中如果相互认证为OK(成功),则在步骤151d中将第2存储器的数据读出,在步骤151e中将第2存储器的数据发送,在步骤151i中RF-ID读写器接收第2存储器的数据,在步骤151j中检查第2存储器的识别信息等是否正确,如果OK则在步骤151m中观察在TV45侧是否有自动电源ON(接通)的识别信息,如果为“否”,则在步骤151r中检查TV的主电源是否是OFF。
图322是实施方式A1的摄影装置的靠近和TV的动作的流程图。
并且,如果是OFF,则在图322的步骤152a中使TV的主电源为ON,在步骤152b中在第2存储器52中有强制显示命令的情况下,在步骤152d中将TV的输入信号切换为RF-ID的画面显示信号,并且在步骤152e中读取格式识别信息,在步骤152f中根据格式识别信息读出第2存储器,改变数据格式而读取对应的数据,在步骤152g中在第2存储器部中有“口令要求标志”的情况下,在步骤152h中读取第2存储器的“不需要口令输入的TV的ID”,在步骤152i中在本机的TV的ID与“不需要口令输入的TV的ID”不一致时,在步骤152q中从第2存储器读取口令,在步骤152v中将口令的加密解密,在步骤152s中将口令发送。另外,步骤152q、152r、152s也可以作为服务器42保持的数据50而在服务器42具备的存储装置中记录口令。
在步骤152j中获得口令,在步骤152k中显示口令输入画面,在步骤152m中检查输入的口令是否正确。该作业也可以在服务器42中进行。如果是OK,则进行基于RF-ID的第2存储器的信息及程序的显示。
图323是实施方式A1的摄影装置的靠近和TV的动作的流程图。
在图323的步骤153a中,如果由第2存储器的RF-ID的介质识别信息111表示的种类是照相机,则在步骤153b中,将照相机的图标(字符)显示在TV的显示部上,如果不是照相机,则在步骤153c中,如果是邮政明信片则在步骤153d中将邮政明信片的图标显示在显示部上,在步骤153e中如果知道是IC卡,则在步骤153f中将IC卡的图标显示在显示部上,在步骤153g中如果知道是便携电话,则将便携电话的图标显示TV画面的角上。
图324是实施方式A1的摄影装置的靠近和TV的动作的流程图。
图325是实施方式A1的摄影装置的靠近和TV的动作的流程图。
图326是实施方式A1的摄影装置的靠近和TV的动作的流程图。
在图324的步骤154a、154i中,从服务器或第2存储器读取服务内容识别信息,在步骤154c中检查是否是图像显示服务,在步骤154b中检查是否是直接邮件等的明信片服务,在步骤154d中检查是否是广告服务。
接着,在步骤154f和154j中从第2存储器得到服务器特定信息48,如果在第2存储器中没有URL92的情况下前进到步骤154h和154k,得到服务器地址信息81和用户识别信息82。
接着,在图325的步骤155a、155p中,从第2存储器得到加密的口令,在步骤155b中得到解密后的口令,在步骤155c中根据上述信息生成URL。
并且,也包括在第2存储器中有URL92的情况,在步骤155d中经由通信部和因特网对URL的服务器访问,在步骤155k中开始与服务器42连接,在步骤155q中读取动作程序存在识别符119,在步骤155e中判断是否有动作程序存在识别符,在步骤155f中有多个动作程序的情况下,在步骤155r中读取动作程序选择信息118,在步骤155g中设定了动作程序选择信息的情况下,在步骤155h中选择特定的动作程序的目录信息,在步骤155s中读入第2存储器的动作程序的服务器上的目录信息117,在步骤155i中对服务器上的特定目录的动作程序访问,在步骤155m中将动作程序送出或使其在服务器上运转,在步骤155j中开始动作程序的运转(TV侧或服务器侧),在图326的步骤156a中检查是否有图像利用服务,如果为“否”,则在步骤156b中开始未上载图像数据的确认作业。
图319是实施方式A1的摄影装置的图像显示方法指示信息的结构图。
图327是实施方式A1的摄影装置的靠近和TV的动作的流程图。
在步骤156i中读取未上载数据存在识别符64,在步骤156c中未上载数据存在识别符64是ON的情况下,在步骤156d中读取未上载图像的张数66和数据容量65,在步骤156e中显示未上载图像的张数66,根据未上载数据容量65将数据的上载预测时间显示在TV的显示部上,在步骤156f中,在假如照相机侧处于能够自动上载图像的状态的情况下,在步骤156g中将照相机启动,经由第1天线20或第2天线21等,通过无线或用触点的有线,向服务器上载未上载数据,如果完成,则向图327的步骤157a前进,在步骤157a中检查是否有收费程序,在“否”的情况下在步骤157n中读取图319的图像显示方法指示信息的识别符121,在步骤157b中检查在服务器中是否有图像显示方法识别信息,如果为“否”,则在步骤157p中将记录有图像显示方法指示信息的服务器上的目录信息120读出,在步骤157c中将记录有与UID等对应的图像显示方法指示信息的服务器上的目录信息120读取,在步骤157d中从服务器得到服务器上的图像显示方法指示信息,向步骤157f前进。
在步骤157b为“否”的情况下,前进到步骤157e,从照相机得到图像显示方法指示信息,前进到步骤157f。
图328是实施方式A1的摄影装置的靠近和TV的动作的流程图。
在步骤157f中,基于图像显示方法指示信息开始显示,在步骤157g中读取全部图像显示识别符123,在步骤157g中如果是全部图像显示,则在步骤157r中显示全部图像,如果为“否”,则将步骤157s的特定目录124的一部分图像在步骤157h中显示,在步骤157i中如果是一览显示125,则读取步骤157t的显示顺序识别符122,在步骤157j中基于显示顺序识别符,以日期顺序、上载顺序显示,在步骤157v中读取幻灯放映识别符126,在步骤157k中如果是OK,则在步骤157m中基于显示顺序识别符122进行显示,从第2存储器读出画质优先127,在图328的步骤158a中显示方法不是画质优先的情况下,在步骤158q中检查是否是速度优先128,在步骤158b中如果是速度优先,则在步骤158c中调查是否处在显示声音服务器中,在步骤158s中调查声音的服务器的目录130,在步骤158a中对显示声音的服务器上的目录访问而输出声音。
在步骤158e中如果优先显示图像不是全部图像,则在步骤158f中选择一部分图像,在步骤158v或步骤158w中获得特定目录124的信息(步骤158g),在步骤158h中显示特定目录的图像。也可以如步骤158i那样进行全部图像显示。如果在步骤158j中显示完成,则在步骤158k中进行“是否观看别的图像”的显示,在“是”的情况下在步骤158m中显示别的目录的图像的菜单。
图329是实施方式A1的摄影装置的靠近和TV的动作的流程图。
如果在图329的步骤159a中要求特定使用者的图像,则在步骤159m中得到特定使用者全部图像132的数据和特定使用者的口令133,在步骤159b中要求特定使用者的口令,在步骤159c中如果正确,则在步骤159p中读取装有图像列表的文件的目录信息134,在步骤159d中访问装有特定使用者的图像列表的目录,在步骤159r中从服务器的特定目录下载图像数据,在步骤159e中显示特定使用者的图像。
在步骤159f中开始颜色修正例程,在步骤159g中根据照相机ID和照相机ID部76读出照相机机种信息,在步骤159h和159t中从服务器下载照相机机种的特性数据。接着,在步骤159i、159u中下载TV的特性数据。在步骤159w中运算数据而得到修正数据。在步骤159j中基于照相机和TV的特性数据修正显示部的颜色及明亮度,在步骤159k中以正确的颜色和明亮度显示。
图330是实施方式A1的摄影装置的靠近和TV的动作的流程图。
在图330的步骤160a中强制印刷命令是ON、且在步骤160b中照相机接近的终端是打印机、或连接在打印机上的终端的情况下,在步骤160c中获得各图像数据的照相机机种信息和打印机的机种名,在步骤160d中根据服务器的各信息计算修正数据而进行修正,在步骤160p中得到包含印刷对象的图像数据的目录信息137,在步骤160e中使用记录有印刷对象的图像数据(文件名)的目录的地址对服务器访问,在步骤160m中将特定的目录的图像数据送出,在步骤160f中得到印刷图像数据,在步骤160g中进行印刷,在步骤160h中完成印刷。在步骤160i中将表示完成了1次印刷的识别符记录到各图像数据中,在步骤160n中,在服务器上对印刷的图像数据赋予印刷完成识别符。
接着,说明在介质(照相机、明信片等)侧的存储器中没有记录功能的情况下的实施方式。
图331是实施方式A1的摄影装置的靠近和TV的动作的流程图。
图332是实施方式A1的摄影装置的靠近和TV的动作的流程图。
上接图321的圈3、圈4、圈5。
首先,在TV侧,在图331的步骤161a中使TV的主电源成为ON,在步骤161k中从第2存储器读取UID,在步骤161b中获得UID,在步骤161m中得到服务器特定信息48,在步骤161c中对服务器的目录访问,在步骤161d中检索与该UID对应的服务的最终服务器。
并且,在步骤161e中有最终服务器的情况下,在步骤161g中对最终服务器访问,从UID列表读出使用者的ID、口令和服务名,假如在步骤161h中要求口令的情况下在步骤161i中判断是否正确,在图332的步骤162a中检查是否是照片或视频的服务,如果为“否”,则在步骤162b中从与上述UID建立了关联的服务器的特定目录之中读出包括对应的收费等的程序及显示的图像数据的地址及文件名的列表、和图像显示指示信息、强制显示命令、强制印刷命令、照相机ID,根据这些数据及步骤自动地进行显示、印刷作业。
图333是实施方式A1的摄影装置的靠近和TV的动作的流程图。
根据需要而要求口令输入,在步骤162c中在想要印刷特定的图像的情况下,在步骤162d中将想要印刷的特定的图像数据附加到与上述UID对应的服务器上、或TV的印刷目录中,在步骤162e中检查是否在TV上连接着打印机、或者有单独的打印机,在“是”的情况下,如果在步骤162f中使该明信片等的介质的RF-ID部接近于打印机的RF-ID读写器,则在图333的步骤163a中,打印机将上述介质的UID读入,从图的修正服务器上的上述印刷目录读出应印刷的图像数据或图像数据的场所,将该图像数据印刷,在步骤163b中印刷完成而结束。
在接着图332的23(圈23)的步骤163i的下个的步骤163b中,在是购物服务的情况下,在步骤163e中检查认证是否正确,在正确的情况下,在步骤163f中将与上述UID建立关联的购物-收费程序从服务器读出,执行程序,在步骤163g中如果程序完成则结束。
接着,对将内置在明信片中的RF-ID的数据以无RF-ID读取器的方式而读取的方法进行说明。
图334是实施方式A1的摄影装置的靠近和TV的动作的流程图。
在图334的步骤164a中,进行以下的处理。即,第2RF-ID附着或内置在明信片等的介质中,并且记录有中继服务器的URL信息。在第2RF-ID的外面上,以2维码印刷显示有确定UID和中继服务器的第1URL的数据。
在步骤164b中,有具有与主服务器的通信功能并具有第1RF-ID部、在其中记录有主服务器的第1URL信息的照相机,通过该照相机的摄影部,将上述2维码光学地读取,变换为确定第2RF-ID的UID和中继服务器的第2URL的数据。
在步骤164c中,将上述变换后的数据记录到照相机的存储器中。
在步骤164d中,从用照相机摄影的图像中选择特定的图像群,记录到主服务器上的特定的第1目录中。同时,将第1目录信息与主服务器的第1URL信息一起上载到第2URL的中继服务器上的特定的第2目录中。将用来将特定的第2RF-ID的UID与上述第2目录建立关联的信息上载到上述第2URL的中继服务器中,在步骤164e中,将明信片等的介质向特定的人邮寄。
在步骤164f中,接受到明信片的人将明信片的RF-ID部靠近TV等的RF-ID读取部,得到中继服务器的第2URL和明信片的UID。
在步骤164g中,对第2URL的中继服务器访问,将与上述UID建立了关联的第2目录的中的程序、或者记录有特定的图像数据的主服务器的第1URL和第1目录信息取出,从主服务器下载图像数据,显示在TV画面上。在此情况下,将一般印刷在商品或明信片上的、记录有服务器服务器信息的2维码通过本发明的摄影装置的摄像部读取,将2维码的信息作为数字数据记录到RF-ID部的第2存储器中,通过使TV的RF-ID读取器读取该数据,即使是没有2维码用的光学传感器的TV,也能够间接地读取2维码的数据、向服务器等自动地访问。
图335是表示实施方式A1的摄影装置与TV的显示方法的图。
图335的(a)栏表示使摄影装置1接近于TV45的RF-ID的天线138时的显示状态。
如果使摄影装置1接近于天线138,则如上述那样,显示用来识别是照相机的照相机的图标140。
接着,由于知道未上载的图像有几张(例如5张),所以使5张空白图像142a、142b、142c、142d、142e宛如从照相机的图标140中出来那样显示。
由此,显示针对“来自物品的信息”的“有形的”图像,所以用户能够以更自然的感觉观看图像。
数据处于服务器中的实际图像如143a、143b、143c那样,同样有形地显示。
图335的(b)栏表示在明信片139中埋入了RF-ID的情况。由于通过TV45的RF-ID读写器46读入明信片的属性信息,所以如图示那样在TV45的左下角显示明信片的图标141,与(a)栏同样有形地显示服务器的图像及菜单画面。
以下,对将图317中所示的动作程序116向是作为摄影装置1的RF-ID47的通信对象的设备即图316的TV45发送、作为该RF-ID部的通信对象的设备执行发送来的程序的处理的详细情况进行说明。
图336是作为摄影装置1的RF-ID47的通信对象的设备进行执行发送来的程序的处理所进行的块图。
在本图中,图示了由摄影装置1的一部分(RF-ID47、第2天线21)、电视机(TV)45、及TV45的遥控器827构成的通信系统。
这里,摄影装置1是具有通过红外线通信路与和TV45连接的RF-ID读写器46之间进行近距离无线通信的RF-ID47的照相机,具备近距离无线通信用的天线21、经由天线21接收从RF-ID读写器46供给的输入信号的数据接收部105、至少存储有作为用来确定通信装置的识别信息的UID部75和参照该UID部75由TV45执行的动作程序116的非易失性的第2存储器52、和根据由数据接收部105接收到的输入信号将存储在第2存储器52中的UID部75及动作程序116经由天线21向RF-ID读写器46发送的数据转送部108,在将从数据转送部108发送来的UID部75及动作程序116从数据转送部108经由天线21、RF-ID读写器46及红外线通信路向TV45转送这一点上具有特征。以下,详细地说明各构成要素。
摄影装置1的RF-ID47具有第2存储器52,第2存储器52保存有在作为RF-ID部的通信对象的电视机(电视)45中动作的动作程序116。即,该动作程序116是参照摄影装置1的识别信息由TV45执行的程序的一例,例如如后述那样,是Java(注册商标)等的执行形式程序、或者Java(注册商标)脚本等的脚本形式的虚拟机用程序。
RF-ID47的再现部从第2存储器52将包括摄影装置1所固有的UID或URL的服务器特定信息等的作为为了执行动作程序而需要的信息的数据与动作程序116一起读出,经由数据转送部108及第2天线21向进行电视机45的远程操作的遥控器827的RF-ID读写器46发送。
遥控器827的RF-ID读写器46接收从摄影装置1的RF-ID47发送的数据和动作程序,存储到RF-ID存储部6001中。
此外,遥控器827的遥控器信号生成部6002将从摄影装置1的RF-ID47发送而记录在RF-ID存储部6001中的数据和动作程序变换为当前广泛用于遥控器用通信的红外线方式等的遥控器信号。
遥控器信号发送部6003将包括由遥控器信号生成部6002生成的动作程序的遥控器信号对电视机45发送。
电视机45的遥控器信号接收部6004接收从遥控器827发送的遥控器信号,程序执行部6005例如是Java(注册商标)等的虚拟机,经由解密部5504从遥控器信号取得从摄影装置1的RF-ID47发送的数据和动作程序,执行动作程序。
图337是转送及执行保存在RF-ID中的动作程序的处理的流程图。
在图337中,表示作为动作程序而执行“参照摄影装置1的识别信息(这里是UID)从图像服务器下载图像数据,并以幻灯放映形式显示图像”的动作的处理的流程。
图338是表示进行图像的下载及幻灯放映的动作程序的记述的一例的图。
如果将遥控器接近于摄影装置1,则首先从遥控器的RF-ID读写器46经由RF-ID的通信对摄影装置1的RF-ID47供给电源,从第2存储器52读出设备固有的UID75、图像服务器的URL48、动作程序116(S6001)。将读出的UID、图像服务器URL、动作程序通过数据转送部108及第2天线21朝向遥控器827发送(S6002)。这里,动作程序如图338所示,由服务器连接命令6006、下载命令6008、幻灯放映显示命令6010、下载完成时的处理设定命令6007、下载完成时命令6009构成。
在遥控器827中,用RF-ID读写器46接收从摄影装置1发送的UID、图像服务器URL、动作程序(S6003及S6004),如果接收完成,则将UID、图像服务器URL、动作程序存储到RF-ID存储部6001中(S6005),并且将UID、图像服务器URL、动作程序变换为能够作为遥控器信号以红外线方式发送的形式(S6006)。并且,在受理了用户在遥控器827上进行规定的操作输入、发送遥控器信号的指示的情况下(S6007),将包括UID、图像服务器URL、动作程序的遥控器信号从遥控器信号发送部发送(S6008)。即,遥控器827除了作为通常的遥控器的功能以外,还作为由内置的RF-ID读写器46从摄影装置1朝向TV45转送UID、图像服务器URL及动作程序的中继器发挥功能。
接着,在电视机45中,接收从遥控器827发送的遥控器信号(S6009),由解密部取得包含在遥控器信号中的UID、图像服务器URL、动作程序(S6010)。并且,程序执行部6005使用UID、图像服务器URL执行动作程序(S6011~6015)。动作程序首先使用图像服务器URL与通信网络上的图像服务器42建立连接(S6012及图338的6006)。并且,使用作为摄像设备所固有的信息的UID,从保持在图像服务器42存储装置中的图像数据50之中选择由特定的摄像设备摄影的图像数据,下载到电视机中(S6013、S6014及图338的6008)。即,UID为了选择图像服务器42保持的图像数据中的、与UID表示的摄影装置1建立了对应的图像数据而使用。如果图像的下载完成,则将图像以幻灯放映形式依次显示(S6015及图338的6007、6009、6010)。图338的6007是设定图像下载完成时的处理的命令,在图338中,作为图像下载完成时的处理而设定命令6009。进而,在处理6009之中调用执行图像的幻灯放映显示的处理6010。
另外,在图336及图337中,经由遥控器827将动作程序及动作程序所使用的数据从摄影装置1向电视机45转送,但关于遥控器827的RF-ID读写器46,也可以是电视机具备的结构。即,RF-ID读写器46也可以内置在TV中。换言之,将读取器装置与设备连接的通信路径既可以是红外线等的无线通信路径,也可以是有线的信号线缆。
另外,在上述动作例中,UID为了从图像服务器42保持的图像数据选择与摄影装置1对应的图像数据而使用,但也可以用于确定放置有图像数据的图像服务器。例如,在存在多个图像服务器的通信系统中,在将UID与保存有该UID表示的摄影装置的图像数据的图像服务器建立了对应的情况下,通过制作动作程序以参照该UID决定图像服务器的URL,执行动作程序的TV45通过参照UID而从多个图像服务器中确定与该UID建立了对应的图像服务器,能够从该图像服务器下载图像数据。
此外,作为确定摄影装置1的识别信息,并不限定于UID,也可以是摄影装置1的序列号码、制造号码、MAC(Media Access Control)地址、相当于MAC地址的信息(IP地址等)、或者在摄影装置1具备作为无线LAN的接入点的功能的情况下也可以是相当于SSID(Service Set Identifier)的信息。进而,在上述第2存储器52中,将确定摄影装置1的识别信息(UID75)与动作程序116独立保存,但也可以保存(记述)到动作程序116之中。
另外,遥控器信号(即,将读取器装置与设备连接的通信路径)设为使用红外线方式而进行了说明,但并不限定于此,例如也可以是Bluetooth等的无线通信方式。一般通过使用比红外线通信高速的无线通信方式,能够缩短动作程序等的转送所需要的时间。
另外,动作程序不仅是图338所示的格式的程序,也可以是其他编程语言。例如,如果用Java(注册商标)记述动作程序,则由于称作Java(注册商标)VM的程序执行环境的通用性较高,所以多种设备中的动作程序的执行变得容易。此外,如果用以Java(注册商标)Script为代表的脚本形式的能够存储到较小的存储容量中的紧凑的编程语言记述,则即使在由第2存储器52表示的RF-ID的存储容量较小的情况下也能够将动作程序保存到RF-ID内部。此外,为了减轻电视机那样的具备程序执行环境的设备的处理负荷,动作程序也可以不是作为图25所示那样的源代码、而是实施了编译等处理的执行形式的程序。
图339是根据语言代码变更动作程序的处理的电视机、和保存程序的服务器的块图。
图340是根据语言代码变更动作程序的处理的处理的流程图。
进而,使用图339和图340,对根据具备RF-ID读取器的显示装置的固有信息变更程序的动作的处理的详细情况进行说明。
图339所示的电视机45具备语言代码保持部6013,程序执行部6005在作为遥控器信号接收到的动作程序进行连接到服务器42上的处理的情况下,从语言代码保持部6013读出语言代码,连接到对应于语言代码的服务器42,从该服务器42下载服务器程序,再将下载的服务器程序执行。例如如果语言代码是日语,则连接到具备包括对应于日语的处理的程序存储部6011的服务器42,将从该程序存储部6011取得的服务器程序在电视机上执行。即,在图36中说明那样的保存在摄影装置1的RF-ID47中的动作程序仅执行向服务器42的连接,为了显示其以外的图像的处理的执行,使用从服务器下载的服务器程序。
用图340说明这样的处理的流程。电视机从摄影装置1的RF-ID47接收动作程序及动作程序所需要的数据的处理与在图337中说明的处理相同。这里,电视机45作为遥控器信号接收到的服务器特定信息包括表示对应于英语的服务器42的服务器地址和表示对应于日语的服务器42的服务器地址这两种,电视机作为遥控器信号接收到的动作程序为记述有由图338的6006表示的向服务器的连接命令的程序。
电视机45的执行环境取得电视机45的语言代码(S6016),如果语言代码是日语,则从服务器特定信息之中选择具备包含对应于日语的处理的程序存储部6011的服务器的服务器地址(S6017、S6018),如果语言代码不是日语,则从服务器特定信息之中选择具备包含对应于英语的处理的程序存储部6011的服务器的服务器地址(S6017、S6019)。接着,使用所选择的服务器地址连接到服务器42上(S6021),从服务器42下载服务器程序(S6022、S6023)。将所取得的服务器程序在电视机的程序执行环境(例如虚拟机)中执行(S6024)。
另外,在图339和图340中对语言代码的使用进行了说明,但也可以如制造号码或序列号码那样是表示显示装置被销售及/或设置的国家的信息。
图341是摄影装置和TV包括无线LAN的家庭网络6500的结构图。
在图341中表示摄影装置1和TV45使用无线LAN或Power LineCommunication(以下记作PLC)等构成家庭网络6500的情况。在摄影装置1和TV45具有能够经由无线LAN直接通信的直接通信部6501、6502的情况下,摄影装置1能够将图像不经由因特网上的服务器而向TV45发送。即,摄影装置1自身可以兼起到服务器的作用。但是,无线LAN等的在家庭网络6500中使用的一些通信媒体具有容易被他人监听的特性。因此,为了进行安全的数据通信而需要相互认证、交换加密的数据。例如,在当前的无线LAN设备中将接入点作为认证终端,在想要认证的终端的画面上显示全部能够连接的接入点,使用户选择接入点,通过输入WEP密钥来进行加密的通信。但是,对于一般的用户而言,该处理较复杂。此外,在TV等的家电设备中内置有无线LAN的情况下,存在许多能够认证的终端。在集体住宅等中也可能与邻居的终端通信,所以用户选择认证终端本身变得困难。例如在邻居中使用同机种的TV6503的情况下,用户很难根据显示在画面上的信息识别自家的TV45。
在本发明中能够解决该问题。在本发明中,使用RF-ID进行认证处理。具体而言,作为上述动作程序,在摄影装置1的RF-ID部47的第2存储器52中保存包括MAC地址58的认证程序,通过向TV45的RF-ID读写器46接近,对TV45交接认证程序。在认证程序中,与MAC地址一起包含有认证用的加密密钥和认证命令,辨识出在从RF-ID47传递来的信息中包含有认证命令的TV45进行认证处理。RF-ID47的通信部171只要在物理上不接近就不能通信,所以在宅内监听是很困难的。此外,由于通过在物理上接近来进行信息的交换,所以能够避免与邻居的TV6503或DVD记录机6504等的宅内的其他设备进行错误认证的情况。
图342是表示不使用RF-ID的认证方法的一例的图。
在图342中表示不使用RF-ID的情况下的认证方法的一例。用户输入照相机及DVD记录机等的想要认证的终端的MAC地址和各终端的认证用的加密密钥(认证用加密密钥)6511。被输入的TV45朝向具有被输入的MAC地址的终端,发送称作挑战6513的适当的消息。接收到挑战的摄影装置1将挑战消息6513使用认证用加密密钥6511加密,朝向作为发送来挑战的终端的TV45返送。接受到返送的TV45使用被输入的认证用加密密钥6511将挑战解密。由此,确认认证用加密密钥6511的正当性,防止用户的错误或有恶意的用户的介入。接着,将数据用的加密密钥(数据加密密钥)6512a使用认证用的加密密钥6511加密,朝向摄影装置1发送。由此,在TV45与摄影装置1间能够进行加密的数据通信。进而,与DVD记录机6504及其他设备(6505、6506)也进行同样的处理,通过具有共通的数据加密密钥6512a,能够在连接在家庭网络上的所有的设备间进行加密的通信。
图343是表示使用RF-ID的认证方法的一例的图。
在图343中表示使用RF-ID的情况下的认证方法。在使用RF-ID的认证处理中,在摄影装置1内制作认证程序6521a,从照相机的RF-ID47交接给TV的RF-ID部46。在认证程序6521a中,包括认证命令、照相机的MAC地址和照相机的认证用加密密钥。接受到认证命令的TV通过RF-ID取出照相机的MAC地址和认证用加密密钥,将数据用的加密密钥通过认证用加密密钥加密,对指定的MAC地址发送。该发送使用无线LAN设备进行。在使用RF-ID的认证的情况下,由于机械地进行,所以不发生用户的输入错误。此外,由于需要向TV45接近的动作,所以能够避免有恶意的用户的介入。因此,能够省略挑战等的前处理动作。进而,物理上接近的动作能够使用户辨识使哪个终端与哪个终端认证。另外,在认证程序中不包含认证用加密密钥的情况下,也可以使用与一般的公开密钥认证同样的方法进行认证处理。此外,通信设备也可以不是无线LAN、而只要是构成PLC或Ethernet(注册商标)等家庭网络的设备即可。此外,MAC地址只要是能够识别在家庭网络内使用的通信终端的固有识别信息即可。
图344是表示难以使终端接近的情况下的认证方法的一例的图。
在图344中表示在难以使各终端接近的情况下的使用RF-ID的认证方法。在如电冰箱和TV等那样、两者都难以移动的终端的情况下,很难使用RF-ID直接交接认证程序。在这样的情况下,在本发明中也可以使用遥控器(移动遥控器)6531x等附属于终端的装置中继认证程序信息。具体而言,用内置在遥控器6531x中的RF-ID读写器将内置在电冰箱中的RF-ID的程序读出,存储到遥控器6531x的存储器中,由用户使移动遥控器6531x移动。如果将遥控器6531x向TV45接近,则将存储在遥控器6531x的存储器内的程序向TV的RF-ID转送。另外,从遥控器向TV的转送也可以不使用RF-ID、而使用红外线或ZigBee等的遥控器自身中原来内置的通信机构。只要是已经确定了通信的安全性的介质,是什么都可以。
图345是表示照相机侧动作的一例的流程图。
在图345中表示照相机(摄影装置1)侧动作的流程图。照相机如果成为认证模式,则制作认证用的加密密钥,设定定时器(S6541)。接着,在RF-ID存储器部中写入自身的MAC地址、制作的认证密钥和认证命令(S6542)。如果由用户将照相机的RF-ID向TV的RF-ID靠近,则将照相机的RF-ID存储器内向TV的RF-ID转送(S6543)。在最初设定的定时器时间内返回了应答的情况下(S6544),将包含在应答内的加密的数据用加密密钥使用认证用加密密钥解密(S6545)。使用数据用加密密钥与其他设备进行通信(S6546),在能够进行数据通信的情况下(S6547),结束认证处理。在不能将数据正确地解密的情况下,显示认证错误,结束处理(S6548)。此外,在定时器时间内没有来自TV的应答的情况下,解除认证模式(S6549),显示超时错误(S6550)。
图346是表示TV侧动作的一例的流程图。
在图346中表示TV45侧动作的流程图。判断在从RF-ID部接收到的信息中是否包含有认证命令(S6560)。在不包含认证命令的情况下,执行与接收到的信息对应的处理(S6561)。在包含认证命令的情况下,认为从RF-ID部接收到的信息是认证程序,使用存在于认证程序内的认证用加密密钥将自身具有的数据用加密密钥加密(S6562)。进而,对在认证程序内指定的MAC地址发送已加密的数据用加密密钥(S6563)。
以下,对由图316说明的摄影装置1生成或更新能够在TV45中动作的程序并从数据发送部173向TV45发送程序、由TV45执行程序的方式使用附图详细地说明。
图347是本方式的摄影装置1的第1处理部35和第2存储器52的块图。
第1处理部35由第2存储器读出部7003、URL生成部7004、程序生成部7005、程序组件存储部7006及程序写入部7007构成。
第2存储器读出部7003是通过记录再现部51将存储在第2存储器52中的信息读出的部分。
URL生成部7004经由第2存储器读出部7003从第2存储器52将UID75、服务器特定信息48、摄影图像状况信息55及图像显示方法指示信息77读出,根据这些信息生成作为图像被上载的服务器42的地址的URL。
UID75是用来识别摄影装置1的识别信息,是对每1台摄影装置唯一的号码。在由URL生成部7004生成的URL中包含有UID,例如在上载图像的图像服务器42中,在对各UID唯一的目录中保存图像文件等,能够生成对每1台摄影装置不同的URL地址。
服务器特定信息48是用来确定图像被上载的服务器的服务器名,通过经由DNS(Domain Name Server),能够判断服务器42的IP地址,能够连接到服务器42上。由此,服务器特定信息48也包含在生成的URL中。
图像显示方法指示信息77是作为选项而能够选择一览显示78、幻灯放映显示79等的信息。URL生成部7004基于该图像显示方法指示信息77决定URL。即,通过生成表示是一览显示78还是幻灯放映显示79的URL,图像服务器能够基于URL决定是进行一览显示还是进行幻灯放映显示。
如以上这样,本URL生成部7004根据存储在第2存储器52中的UID75、服务器特定信息48、摄影图像状况信息55及图像显示方法指示信息77等生成用来视听图像的向图像服务器的URL,将所生成的URL向程序生成部7005输出。
程序生成部7005是根据由URL生成部7004生成的URL、存储在第2存储器52中的强制显示命令7000、强制印刷命令136及格式识别信息7001、生成能够在TV45中动作的程序的部分。另外,程序生成部7005作为新动作程序的生成方法,既可以基于上述信息生成新的动作程序,也可以通过将已生成的动作程序更新而生成新的动作程序。
由程序生成部7005生成的程序是能够在TV45中动作的程序,需要编译为上述系统控制器用的机器语言,以便能够在TV45的未图示的系统控制器中动作。在此情况下,在本程序生成部7005内具有编译器,将所生成的程序变换为执行形式的程序。
另一方面,如一般的JAVA(注册商标)脚本那样,即使是文本形式(脚本)的程序,在作为由搭载在TV45中的浏览器执行的程序的情况下,不需要上述的编译器。
对程序生成部7005输入的URL是用来进行向记录有图像的图像服务器连接的URL,本程序生成部7005使用URL生成或更新向服务器的连接程序。
此外,强制显示命令7000是在由TV45视听例如基于通常的广播波的节目的过程中TV45的RF-ID读写器46成为能够从本摄影装置1的第2天线21通信的情况下、将TV45自动地设定为用来从图像服务器显示图像信息的浏览器视听模式的选项,在选择了本选项的情况下,生成用来使TV45强制显示的程序。
此外,强制印刷命令136是在由TV45视听例如基于通常的广播波的节目的过程中TV45的RF-ID读写器46成为能够从本摄影装置1的第2天线21通信的情况下、将保存在图像服务器中的图像数据从连接在TV45上的未图示的打印机自动印刷的选项,在选择了本选项的情况下,生成用来使TV45强制印刷的印刷用程序。
此外,格式识别信息7001是用来显示的格式信息,本程序生成部7005如果选择了格式信息中的语言代码最适合站点选择的选项,则根据设定在TV45中的语言代码,生成用来选择连接到服务器的URL的程序。例如,在选择了格式信息中的语言代码最适合站点选择的选项的情况下,生成用来在TV45的语言代码是日语的情况下、作为连接的URL而选择日语的站点、在语言代码是日语以外的情况下、作为连接的URL而选择英语的站点并进行连接的程序。因而,上述的URL生成部7004在选择了格式信息之中的语言代码最适合站点选择的选项的情况下,生成日语站点用的URL和英语站点用的URL这两个URL,向本程序生成部7005输出。
程序组件存储部7006存储有用来由程序生成部7005生成程序的程序命令信息。存储在本程序组件存储部7006中的程序组件也可以是一般的库或API。程序生成部7005在生成向服务器的连接命令的情况下,通过在从程序组件存储部向服务器连接命令即“Connect(连接)”中结合由URL生成部7004生成的URL,生成或更新用来向URL中记述的服务器连接的连接程序。
程序写入部7007是用来将由程序生成部7005生成的程序写入到第2存储器部中的接口。
从程序写入部7007输出的程序经由记录再现部51存储到第2存储器52的程序存储部7002中。
在本摄影装置1的RF-ID部向连接在TV45上的RF-ID读写器46可通信地接近的情况下,通过再现部从第2存储器52的程序存储部7002读出程序,经由数据转送部108、第2天线21将表示程序的发送信号向RF-ID读写器46发送。被发送的发送信号经由RF-ID读写器46被TV45接收。TV45执行接收到的程序。
此外,在TV45中,存在制造号码7008、语言代码7009及程序执行虚拟机7010。
制造号码7008是TV45的制造号码,是由此能够判断制造TV45日期时间、场所、制造生产线、制造者等的信息。
语言代码7009是用于设定在TV45中的菜单显示等的语言代码,除了预先设定以外,也可以由用户切换。
程序执行虚拟机7010是用来执行接收的程序的虚拟机,在由硬件构成的情况及由软件构成的情况下两者都是有效的。例如,本程序执行虚拟机由JAVA(注册商标)虚拟机构成。JAVA(注册商标)虚拟机是执行定义的命令集的堆栈型或解释器型的虚拟机。通过搭载该虚拟机,由摄影装置1的程序生成部7005生成的程序不用选择其执行平台,能够生成在怎样的平台下都能够执行的程序。
图348是表示摄影装置1的程序生成部7005的动作的流程图。
首先,本程序生成部7005将生成程序信息初始化(S7000)。
接着,使用由URL生成部7004使用存储在第2存储器52中的服务器特定信息48生成的URL,生成向服务器42的连接命令。为了生成连接命令,从程序组件存储部7006中选择服务器连接命令用的命令集(例如图中的“Connect”),通过与URL组合而生成服务器连接程序(例如“Connect(URL)”)。
接着,确认第2存储器52的强制显示命令7000,判断强制显示命令是否是ON(S7001)。在为ON的情况下,从程序组件存储部7006调用强制显示程序用的命令集,生成强制显示命令(S7002)。将所生成的命令追加到程序中(S7004)。
另一方面,在强制显示命令不是ON的情况下,不生成强制显示命令。
接着,判断第2存储器52的强制印刷命令是否被设定为ON(S7005)。在为ON的情况下,生成用来将存储在服务器中的图像文件强制印刷的印刷命令(S7006)。将所生成的命令追加到程序中(S7007)。
接着,确认第2存储器52的图像显示方法指示信息77,判断一览显示78是否被设定为ON(S7008)。在为ON的情况下,生成用来使存储在服务器中的图像文件一览显示的一览显示命令(S7009)。将所生成的命令追加到程序中(S7010)。
接着,确认第2存储器52的图像显示方法指示信息77,判断幻灯放映79是否设定为ON(S7011)。在为ON的情况下,生成用来将存储在服务器中的图像文件幻灯放映显示的幻灯放映命令(S7012)。将所生成的命令追加到程序中(S7013)。
如以上这样,本摄影装置1的程序生成部7005基于设定在第2存储器52中的内容,利用存储在程序组件存储部7006中的程序生成用的命令指令集,生成用来由TV45进行图像显示的程序。
另外,在本实施方式中,用强制显示命令、强制印刷命令、一览显示、幻灯放映的情况进行了说明,但并不限定于此。例如,作为生成的程序而生成强制显示命令指令的情况下,如果在执行程序的装置中插入针对是否有显示设备、显示功能的判断程序,仅在有显示设备、显示功能的情况下执行,则能够生成消除了执行程序的设备侧的混乱的程序。在强制印刷命令指令的情况下也同样。可以在执行强制印刷命令指令的设备中插入判断是否具有印刷功能、或连接着具有印刷功能的设备的指令,仅在具有的情况下执行强制印刷指令。
接着,对由本摄影装置1的程序生成部7005生成或更新的程序进行说明。
图349是表示由本程序生成部7005生成的程序的处理的流程的流程图。
本程序是被经由本摄影装置1的第2天线21发送、由接收的与本摄影装置1不同的设备执行的程序。在本实施方式中,与本摄影装置1不同的设备是TV45,将由RF-ID读写器46接收到的程序通过TV45的未图示的控制器(或虚拟机)执行。
本程序首先将设定在TV45中的语言代码作为TV45的固有信息读出(S7020)。语言代码是在TV45的菜单显示等时使用的语言代码,是由用户设定的。
接着,判断设定在语言代码中的语言。在本实施方式中,首先,判断语言代码是否是日语(S7021)。在判断为语言代码是日语的情况下,选择程序中的向服务器的连接命令中的、日语站点用的连接命令(S7022)。另一方面,在判断为语言代码不是日语的情况下,选择本程序中的向英语站点的连接命令(S7023)。在本实施方式中,说明了仅判断语言代码是否是日语、分别选择是向日语站点连接、还是向英语站点连接的方式,但如果具备对应于各个语言代码的连接程序、以使得对于两种以上的语言代码也能够对应,则能够向两种以上的语言代码对应,能够提高用户的方便性。接着,按照所选择的连接命令,连接到记述在连接命令中的URL(S7024)。
接着,判断向记述在连接命令中的URL是否连接成功(S7025)。在连接失败的情况下,在TV45的显示部上进行表示连接失败的警告显示(7027)。另一方面,在连接成功的情况下,执行用来使存储在服务器中的图像文件幻灯放映显示的命令,使存储在服务器中的图像文件幻灯放映显示(7026)。
另外,在本实施方式中,对动作程序是用来使图像幻灯放映显示的程序的情况进行了说明,但有关本发明的动作程序并不限于此。也可以是进行一览显示或强制显示、强制印刷的程序。在强制显示的程序的情况下,将用来自动地变更为显示存储在服务器中的图像文件的设定的步骤作为命令插入。由此,用户能够省去用手动变更TV45的设定的工夫而显示来自图像服务器的图像文件。此外,在强制印刷的情况下,插入将TV45的设定自动地切换为能够印刷的模式的命令。此外,在强制印刷、强制显示的情况下,需要通过分别插入针对是否具有印刷功能的判断命令、针对是否具有显示功能的判断命令,使得不由没有印刷功能的设备执行强制印刷命令。进而,有关本发明的动作程序也可以是用来导引其他程序的连接程序。例如,如引导加载器那样,也可以是用来将其他程序加载而执行的加载器程序。
如以上这样,在本实施例中公开的发明的特征是,在作为具有RF-ID通信机构(数据转送部108、第2天线21等)的设备的摄影装置1的第1处理部35之中,具有程序生成部7005。此外,由程序生成部7005生成或更新的程序由作为具有RF-ID的通信设备的本实施方式的摄影装置1以外的设备执行,这一点也是特征。
以往,搭载RF-ID的设备从RF-ID通信部将自身具有的ID信息(标签信息)向其他设备(例如本实施方式的TV45)转送,在其他设备中,需要对应于ID信息(标签信息)而准备对具有RF-ID的各个设备唯一的动作程序。因而,在出现了具有RF-ID的新的商品的情况下,只能获得对应于该新的商品的动作程序并安装执行、或者作为不能对应的设备排除。此外,在动作程序的安装中,要求专门的知识,不是谁都能简单地进行的。因而,如果具有RF-ID的设备被售出多代,则本实施方式的TV45那样的其他设备老旧化,有损害用户的财产价值的问题。
根据在本实施方式中说明的发明的公开,具有RF-ID的设备具有程序生成部7005,对TV45等的其他设备不发送ID信息(标签信息)而发送程序。在TV45等的其他设备中,通过执行接收到的程序,不需要预先具备与具有RF-ID的各设备具备对应的动作程序,例如即使在出现新的具有RF-ID的设备的情况下,也不需要安装新的程序,能够显著地提高用户方便性。
因此,TV等终端不需要按照装备RF-ID的物品的个体、种类、或应用系统而具备对应的应用程序。由此,TV等终端不需要具备用来保持许多种类的应用程序的存储装置,并且也不需要修改终端保持的程序等维护。
此外,本程序生成部7005生成的程序中,JAVA(注册商标)语言那样的不选择执行平台的程序是有用的。由此,仅通过在执行程序的TV45那样的设备中准备JAVA(注册商标)的虚拟机,不论是怎样的设备的程序都能够执行。
此外,本发明的程序生成部7005也可以具有将预先存储在第2存储器52的程序存储部7002中的程序更新的功能。这是因为,在将程序更新的情况下也具有与生成程序同样的效果。此外,在本程序生成部7005中,生成或更新的程序也可以是在由TV45执行程序的情况下使用的数据的生成或更新。通常,程序具有附带的初始设定数据等,根据该数据切换动作的模式、或进行标志设定,所以在将数据生成或更新的情况下,也与将程序生成或更新是同样的,是本发明的范畴。这是因为,当执行程序时,将其模式切换等的参数作为数据保持而读出、还是植入在程序内部中而执行,这是设计事项。因而,由本发明的程序生成部7005生成或更新的程序也可以同时也生成上述程序使用的参数列等的数据。作为生成的参数,是基于存储在第2存储器52中的强制显示命令7000、强制印刷命令136、图像显示方法指示信息77或格式识别信息7001等生成的数据。
接着,说明本发明的作为具有RF-ID的通信设备的摄影装置1的第2存储器52及第1处理部的特征性的结构和动作。在本实施方式中,对作为具有RF-ID的通信设备的本摄影装置1在第1处理部35中具有检测关于动作的不良状况、或检测电力使用状况的使用状况检测部、生成用来将检测到的使用状况在作为与本摄影装置不同的设备的TV45上显示的程序的方式进行说明。
图350是表示本发明的摄影装置1的第2存储器52、第1处理部35的特征性的结构的块图。
第2存储器52具有UID75、服务器特定信息48、照相机ID部135及程序存储部7002。
UID75是能够识别本摄影装置1的按照每1台设备而不同的序列号码。
服务器特定信息48是确定从本摄影装置1的通信部37将摄影的图像数据向服务器42发送的服务器的信息,包括服务器地址、保存目录、登陆账户、登陆口令等。
在照相机ID部135中记录有本摄影装置1的制造号码、制造年月日、制造商、制造生产线信息、制造场所等,并且还包括用来确定本摄影装置1的机种的照相机机种信息。
第1处理部35由第2存储器读出部7003、使用状况检测部7020、程序生成部7005、程序组件存储部7006及程序写入部7007构成。
第2存储器读出部是将存储在第2存储器52中的内容经由记录再现部51读出的部分。在本实施方式中,从第2存储器52读出UID75、服务器特定信息48、照相机ID部135,向程序生成部7005输出。另外,本第2存储器读出部7003在被输入来自后面说明的使用状况检测部7020的读出信号的时刻从第2存储器52读出上述内容。
使用状况检测部7020是按照构成本摄影装置1的功能单位检测其使用状况的部分。此外,按照构成本摄影装置1的功能单位而具有确认动作不良状况的感知部,将各功能单位的感知部中的感知结果向本使用状况检测部7020输入。例如,从摄像部30输入是否确认了关于摄像部的摄像动作的不良状况(是否发挥功能、对于来自本使用状况检测部的呼叫是否正确应答),从影像处理部31输入在摄像部30摄像的图像数据的数据处理中是否确认了不良状况(是否发挥功能、对于来自本使用状况检测部的呼叫是否正确应答),从电源部101输入电池的电压水平、总的用电量,从通信部37输入与服务器的连接是否成功、是否完成向因特网的连接(是否发挥功能、对于来自本使用状况检测部的呼叫是否正确应答),从显示部6a输入在显示处理中是否没有不良状况(是否对呼叫正确地应答、是否发挥功能)等,按照功能单位输入不良状况信息或电池寿命、耗电量。在本使用状况检测部7020中,基于按照功能单位发送来的上述那样的状态信息,由内部的不良状况检测部7021按照功能单位判断是否有对于功能动作的不良状况,在确认了不良状况的情况下,将确定不良状况部位的信息、确定不良状况内容的信息向程序生成部7005输出。此外,本使用状况检测部7020在内部中具有使用电力检测部7022,基于来自电源部的总用电信息生成用电信息向程序生成部7005输出。
程序生成部7005生成用来将确定来自使用状况检测部7020的不良状况内容的信息及用电信息用TV45显示的程序。程序生成由于在程序组件存储部7006中预先存储有用来构成程序的命令集,所以生成用来显示不良状况及耗电量的显示命令(指令,command)(在图350中是“display(显示)”)、和用来显示确定不良状况部位的信息、确定不良状况内容的信息的程序。另外,上述耗电量也可以变换为二氧化碳的排出量,生成作为显示二氧化碳排出量的程序。
由程序生成部7005生成的程序经由程序写入部7007存储在第2存储器52的程序存储部7002中。
存储在第2存储器52的程序存储部7002中的程序被经由数据转送部108从第2天线21向TV45的RF-ID读写器46发送。
在TV45中,将接收到的程序由程序执行虚拟机7010执行。
根据以上的结构,由第1处理部35内的程序生成部7005生成用来将摄影装置1的使用中的由使用状况检测部7020检测到的不良状况或使用状况信息显示在TV45上的程序,发送给TV45,由TV45显示摄影装置1的不良状况信息及使用状况信息。由此,在TV45中,能够不安装依存于摄影装置1等设备的多个程序,而对用户显示不良状况信息及使用状况信息。
在以往系统中,在TV45内,按照摄影装置、摄像机、电动牙刷、体重计等设备准备简单的液晶显示器等的显示功能,在该显示功能上显示不良状况信息及使用状况信息。因而,仅能够搭载显示能力较低的显示功能,仅能够将不良状况信息用符号串或错误代码显示。因而,如果被输出不良状况信息等,则用户需要翻阅操作说明书、判断是怎样的错误。但是,一部分的用户丢失了操作说明书,能够从因特网的网站获知信息。
但是,在本发明的系统中,能够生成能够由用来显示按照摄影装置1等装置检测到的不良状况信息的与本摄影装置不同的显示能力较高的设备即TV45执行的不良状况报告显示程序,能够消除上述那样的问题。
以下,对由图3说明的摄影装置1生成的程序在包括TV45的多个设备中动作的方式,使用附图详细说明。
图351是表示在本方式中、摄影装置1生成的程序由多个设备执行的状况的图。
由摄影装置1、TV45、带有显示功能的遥控器6520、无显示功能的遥控器6530构成。
TV45由上述RF-ID读写器46、无线通信装置6512构成。无线通信装置6512例如是在当前许多家电的遥控器中使用的一般的红外线通信装置、Bluetooth(蓝牙)或称作ZigBee(紫蜂)的、使用电波的面向家电的近距离无线通信装置等。
带有显示功能的遥控器6520由用来对TV45的无线通信装置6512发送信号的发送部6521、用来显示影像的显示装置6523、受理来自用户的按键输入的输入装置6524、用来与RF-ID47通信的RF-ID读取器6522、用来保存由RF-ID读取器6522接收到的程序的存储器6526、和用来执行由RF-ID读取器6522接收到的程序的作为虚拟机的程序执行虚拟机6525构成。例如,近年来的便携电话是保持红外线通信功能或Bluetooth、RF-ID读取器、液晶画面、按键输入部、JAVA(注册商标)虚拟机等的、带有显示功能的遥控器的一例。显示装置6523和输入装置6524既可以是液晶画面和多个字符输入按钮,也可以如液晶触摸面板那样为一体。
无显示功能的遥控器6530由用来对TV45的无线通信装置6512发送信号的发送部6521、按钮等的受理来自用户的输入的输入装置6533、用来与RF-ID47通信的RF-ID读取器6532、和将从RF-ID读取器6532接收到的数据暂时保存的存储器6535构成。
作为无显示功能的遥控器6530可以考虑在附属于当前许多TV的一般的遥控器中内置RF-ID读取器的设备等。
在本方式中,考虑将由摄影装置1生成的程序通过经由TV45的RF-ID读写器46直接发送给TV45、由TV45执行程序的第1情形、将由摄影装置1生成的程序通过经由无显示功能的遥控器6530间接地向TV45发送、由TV45执行程序的第2情形、将由摄影装置1生成的程序经由有显示功能的遥控器6520间接地向TV45发送、由TV45执行程序的第3情形、将由摄影装置1生成的程序向有显示功能的遥控器6520发送、由有显示功能的遥控器6520执行程序的第4情形,用户选择性地执行4个情形。
这里,第1情形在实施方式A1中已经叙述,所以省略详细的说明。
在下述中,关于第2~第4情形说明详细情况。
第2情形是经由如一般的TV遥控器那样不具有液晶面板等图形显示装置的无显示功能的遥控器6530、由TV45执行由摄影装置1生成的程序的情形。
在用户使RF-ID47接近于RF-ID读取器6532的情况下,RF-ID读取器6532将由摄影装置1生成的程序读出,保持在存储器6535中。
接着,如果用户将输入装置6533按下,则从发送部6531对TV45的无线通信装置6512发送保持在存储器6535中的程序,由TV45上的程序执行虚拟机7010执行程序。在无线通信装置6512是具有指向性的红外线通信装置的情况下,用户在将无显示功能的遥控器6530朝向对应的TV45的状态下按下输入装置6533。在无线通信装置6512是不具有指向性的Bluetooth或ZigBee等的近距离无线通信装置的情况下,对事前配对的TV45发送程序。在近距离无线通信装置的情况下,即使用户不按下输入装置6533,也可以在RF-ID读取器6532从RF-ID47读入程序的时刻对自动配对的TV45发送读入的程序。
此外,无显示功能的遥控器6530也可以在构成要素中具有用来将由RF-ID读取器6532读入的数据保持在存储器6535中的情况向用户通知的显示装置、例如LED6534,在从RF-ID读取器6532向存储器6535读入程序时使LED6534点亮、当用户按下输入装置6533、对TV45发送完成程序时使LED6534灭掉。由此,可以将无显示功能的遥控器保持有程序的情况向用户明确地通知。LED6534既可以是单体的LED,也可以与输入装置6533为一体。
在第2情形中,即使是用户与TV45的位置远离的情况,也能够通过利用手边的无显示功能的遥控器6530在TV45上执行程序。
第3、第4情形是在如例如称作智能手机的高性能便携电话那样、带有显示功能的遥控器6520具有程序执行虚拟机的情况下、用户可以选择在带有显示功能的遥控器上执行由摄像装置1生成的程序、或通过对TV45发送程序而在TV45上执行程序的情况下的例子。
在用户使RF-ID47接近于RF-ID读取器6522的情况下,RF-ID读取器6522将由摄影装置1生成的程序读出,保持到存储器6535中。
图352是通过带有显示功能的遥控器执行由摄影装置生成的程序的情况下的顺序图。
接着,使用图352的流程图详细地说明带有显示功能的遥控器6520的动作。
首先,将由RF-ID读取器6522读出的程序向程序执行虚拟机6525转送并执行(S6601)。
接着,判断遥控器6520是否具有显示设备(S6602)。在遥控器6520不具有显示功能的情况下(S6602中N),使用发送部6521将程序向TV45发送,结束处理。在此情况下,将程序在TV45上执行。
在遥控器具有显示功能的情况下(S6602中Y),判断遥控器与发送目的地的TV45是否已配对(S6603)。在遥控器6520与TV45没有配对的情况下(S6603中N),使用遥控器6520的显示装置6523继续执行程序。在遥控器6520与TV45已配对的情况下(S6603中Y),为了对用户敦促选择,在显示装置6523上显示“显示于TV上?还是用遥控器显示?”的对话消息(S6604)。
接着,受理来自输入装置6524的用户输入(S6605),判断用户是否选择了在TV上显示(S6606)。在用户选择了在TV45上显示的情况下(S6606中Y),使用发送部6521将程序向TV45发送,结束处理。在此情况下,将程序在TV45上执行。在用户选择了用遥控器显示的情况下(S6606中N),使用遥控器6520的显示装置6523执行程序的后续(S6607)。
此外,上述所示的程序的后续,是上述的摄影装置1的电池状态、不良状况状态、操作说明书的显示等,当然并不限制于本实施例。
根据以上的结构,将由摄影装置1生成的程序发送给带有显示功能的遥控器设备,判断带有显示功能的遥控器的能力,在遥控器上决定由哪个设备执行程序的后续。由此,不需要在遥控器自身中安装对应于多个设备的程序,用户能够以喜好的方式执行程序。
此外,在本实施方式中,以遥控器的显示功能的有无、配对状态为判断条件进行了说明,但并不限定于此。程序按照通信能力、声音·影像再现能力、输入设备、输出设备等、设备能够具有的能力进行怎样的判断都可以。
如以上说明,通过RF-ID的存储区域不仅保持数据,还保持记述有设备的动作的程序,由此以往为了变更设备的动作而需要的程序的变更及更新显著地变得容易,也能够对应于许多新功能的追加及联动设备的增加。此外,由于使用RF-ID的短距离通信是靠近这样的用户容易理解的操作,所以能够使以往操作按钮或菜单而较麻烦的设备操作也变得简单,能够容易使用复杂的设备的动作。
(实施方式A2)
接着,对于有关本发明的通信系统的具体的动作、即将由照相机取得的图像上载、然后通过简单的操作将该图像下载到TV中而显示的通信系统,作为实施方式A2进行说明。通信系统的整体结构与实施方式A1是同样的。
图353(图353A、图353B、图353C)是表示实施方式A2的照相机的上载步骤的流程图。
另外,如上述那样,以下将包括图353A~图353C的整体适当简称作“图353”。
另外,关于图355等也与该例是同样的。
在图353中,表示照相机(摄影装置1)将照片上载的一连串的手续的流程图。照相机首先如果将图像摄影(步骤S5101),则将摄影图像保存到第3存储器中(步骤S5102),进行第2存储器信息的更新处理(步骤S5103)。对该更新信息在后面叙述。接着,由通信部判断是否能够连接到因特网(步骤S5104),如果能够连接,则进行URL的制作处理(步骤S5105)。该处理的详细情况在后面叙述。在制作URL后,照相机进行摄影图像的上载(步骤S5106),如果上载完成,则进行通信部的切断处理(步骤S5107)并结束。上载处理的详细情况在后面叙述。
步骤S5103的第2存储器信息的更新处理用于在服务器42与照相机之间共用已向服务器42上载的照片和没有上载的照片的识别信息。上载处理S5105的动作可以举出例如case(情形)1~case4的动作。
有以下方法:记录第2存储器的最后记录摄影的时间68,有在将摄影图像保存到第3存储器中后,更新第2存储器的最后更新摄影的时间68的方法(步骤S5111)。
通过将上载的时刻与照相机的最终摄影时刻比较,能够在服务器42与照相机之间共用上载的照片的识别信息。
此外,通过对应于摄影的图像、对应于向服务器42的摄影的图像、生成向服务器42的未上载图像数据的存在识别符64而存储到第2存储器中,这样的方法也能够得到同样的效果(步骤S5121)。
此外,也可以将散列了未上载图像信息后的信息67存储到第2存储器中(步骤S5131)。由此,保存在第2存储器中的信息量变少,带来存储器的节约。
此外,也可以在摄影图像中以时间序列生成图像号码、将第2存储器的图像的最终号码69更新(步骤S5141)。由此,即使在照相机的时刻不正确的情况下,也能够取服务器42与照相机之间的关于上载照片的同步。
图354是表示步骤S5105的URL制作处理的详细情况的图。
照相机从第2存储器读出包括服务器地址信息81、登陆ID83、口令84等的服务器特定信息48(步骤S5201),生成URL(步骤S5202)。
图355(图355A~图355D)是表示步骤S5106的上载处理的详细情况的图。
另外,如上述那样,将包括图355A~图355D的整体适当简称作“图355”。
各个case(情形)对应于在图353中表示的第2存储器信息的更新处理。
在case1中,照相机如果从服务器42接收到向服务器42的最终上载时间(步骤S5211),则将最终上载时刻与最后摄影的时刻比较(步骤S52112)。在最后摄影的时刻比最终上载时刻大、即在有在最终上载后摄影的图像的情况下,将在来自服务器42的最终上载时刻以后摄影的图像上载到服务器42中(步骤S5213)。
在case2中,照相机从第2存储器确认未上载图像数据存在识别符64(步骤S5231),确认未上载的存在(步骤S5232)。在存在未上载图像的情况下,将未上载图像向服务器42上载(步骤S5233),将第2存储器的上载的图像的信息67更新(步骤S5234)。
在case3中,照相机首先确认从第2存储器将未上载图像信息散列而得到的信息67(步骤S5301),判断从第2存储器将未上载图像信息散列而得到的信息67是否与将NULL散列的信息相同(步骤S5302),在不相同的情况下,判断为有还没有上载到服务器42中的图像,记录到第3存储器中,将还没有上载的图像向服务器42上载(步骤S5303)。
在case4中,照相机从服务器42接收最终上载图像的号码(步骤S5311)。接着,判断是否与第2存储器的图像的最终号码69相同(步骤S5312),在不相同的情况下,将具有比来自服务器42的固有ID新的固有ID的图像数据上载(步骤S5313)。
图356是表示进行摄影装置1与TV45的RF-ID短距离通信的处理的流程图。
首先,内置在摄影装置1中的第2天线21接收来自TV45的RF-ID读写器46的轮询所发出的微弱无线电力,启动由第2电源部91动作的RF-ID47(S5401)。
在步骤S5401中接收微弱电力而启动的摄影装置1的RF-ID47对TV45的RF-ID读写器46的轮询进行应答(步骤S5402)。
在步骤S5402中进行轮询应答后,摄影装置1的RF-ID47与TV45的RF-ID读写器部相互进行是否是正规的装置的认证、和在摄影装置1与TV45间进行包括用来进行安全信息通信的加密密钥的密钥共享动作的相互认证(步骤S5403)。该相互认证是使用椭圆加密等公开密钥加密算法的相互认证处理,通常是与基于通过HDMI或IEEE1394的通信的相互认证处理同样的方法。
在步骤S5403中,在摄影装置1的RF-ID47与TV45的RF-ID读写器46中进行相互认证处理,在生成相互共通的加密密钥后,从能够从RF-ID47读出的存储在第2存储器52中的服务器特定信息58中读出服务器URL生成信息80,从第2天线21向TV45的RF-ID读写器46发送。在服务器URL生成信息80之中,包括表示服务器42的地址信息的服务器地址信息81、作为向服务器42的登陆ID83的用户识别信息82及作为向服务器42的登陆口令的口令84。口令84是对于防止来自有恶意的第3者的非法行为很重要的信息,所以也有预先作为加密的加密口令85存储、向TV45发送的情况。
在步骤S5404中,在将服务器URL生成信息80向TV45的RF-ID读写器46发送后,将存储在第2存储器52中的摄影图像状况信息55与服务器特定信息58同样,从第2天线21向TV45的RF-ID读写器46发送(步骤S5405)。作为摄影图像状况信息55而发送最终摄影时间68(Case1),作为未上载图像数据的存在识别信息而发送按每个摄影图像赋予的能够判断是否为未上载数据的存在识别符64(Case2)、将未上载图像信息散列而得到的信息67(Case3)、或对摄影图像以时间序列赋予的图像号码的图像的最终号码69(Case4)。这是为了确认摄影装置1与服务器42的摄影图像的同步而需要的信息。
在Case1中,作为摄影图像状况信息55而采用最终摄影时间68。由此,在TV45中,将向服务器42的最终上载时间与最终摄影时间68比较,如果最终摄影时间68比向服务器42的最终上载时间在时间序列上晚,则认为没有取得保持在摄影装置1和服务器42中的图像信息的同步,在TV45的显示部上显示没有取得同步的注意信息。
在Case2中,作为摄影图像状况信息55而采用按每个摄影图像赋予的能够进行是否是未上载数据的判别的存在识别符64。由此,在TV45中,通过确认按照摄影图像赋予的能够进行是否是未上载数据的判别的存在识别符64,能够判别为存在未上载图像,认为没有取得保持在摄影装置1和服务器42中的图像信息的同步,在TV45的显示部上显示表示没有取得同步的注意信息。
在Case3中,作为摄影图像状况信息55而采用将未上载图像信息散列而得到的信息67。由此,在TV45中,通过确认将未上载图像信息散列而得到的信息67,能够判别为存在未上载图像,认为没有取得保持在摄影装置1和服务器42中的图像信息的同步,在TV45的显示部上显示表示没有取得同步的注意信息。
在Case4中,作为摄影图像状况信息55而采用对摄影图像以时间序列赋予的图像号码的图像的最终号码69。因此,在TV45中,通过确认从服务器42接收的已向服务器42上载的最终图像号码、和从摄影装置1发送的对摄影图像以时间序列赋予的图像号码的图像的最终号码69,能够判别为存在未上载图像,认为没有取得保持在摄影装置1和服务器42中的图像信息的同步,在TV45的显示部上显示表示没有取得同步的注意信息。
在步骤S5405中,在从摄影装置1的第2天线21向TV45的RF-ID读写器46发送摄影图像状况信息55后,从第2存储器52将图像显示方法指示信息77与摄影图像状况信息55同样从摄影装置1的第2天线21向TV45的RF-ID读写器46发送(步骤S5406)。图像显示方法指示信息77是表示在TV45的显示部上怎样显示从服务器42下载的图像的识别信息,由表示图像的一览形式显示的一览显示(指示符)78及用来以幻灯放映形式显示的幻灯放映(指示符)79构成。
以上,通过摄影装置1的步骤S5401~步骤S5406的步骤,从摄影装置1的第2天线21向TV45的RF-ID读写器46发送存储在摄影装置1的第2存储器52中的服务器URL生成信息80、摄影图像状况信息55、以及图像显示方法指示信息77。此外,它们都优选的是在相互认证时通过在摄影装置1与TV45间共享的加密密钥信息加密并发送。通过进行加密,能够在摄影装置1与TV45间进行安全的信息通信,能够防止来自有恶意的第3者的介入。
此外,通过将服务器URL生成信息80向TV45发送,由此摄影装置1的第1天线20发送的服务器42与从TV45下载图像的服务器为共通的服务器及目录,所以能够将由摄影装置1摄影并上载的图像用TV45显示。
此外,通过将摄影图像状况信息55向TV45发送,能够判断记录在摄影装置1的第3存储器33中的摄影图像与通过第1天线20上载到服务器42中的图像的同步,能够由TV45判断没有取得同步的情况,通过用TV45显示表示没有取得同步的注意信息,能够防止用户的无用的混乱。
此外,通过将图像显示方法指示信息77向TV45发送,不在TV45上由用户指定图像的阅览方法,通过使摄影装置1靠近TV45,能够用设定的阅览方法阅览图像,能够不进行通过TV45的遥控器等的复杂的操作而用设定的阅览方法自动地显示图像。
图357是表示有关本发明的TV系统的特征性的功能的块图。
本TV45由RF-ID读写器46、解密部5504、URL生成部5505、通信部5506、发送部5507、通信接口5508、接收部5509、数据处理部5510、存储器部5511、显示部5512及CPU5513构成。
RF-ID读写器46是经由第2天线21与摄影装置1的RF-ID47通信的部分,由无线天线5501、接收部5503、及可通信装置检索部(轮询部)5502构成。
无线天线5501是与摄影装置1的第2天线21进行近距离无线通信的部分,是与通用的RF-ID读写器的无线天线同样的结构。
可通信装置检索部(轮询部)5502是对多个照相机的RF-ID部进行向一个个对象确认是否没有发送(或处理)请求的轮询的部分。在对于轮询从摄影装置1的RF-ID47有轮询应答的情况下,进行相互认证动作,在TV45与摄影装置1间共享共通的加密密钥。
接收部5503当对轮询有轮询应答、相互认证结束时,从摄影装置1的第2天线21分别接收存储在摄影装置1的第2存储器52中的服务器URL生成信息80、摄影图像状况信息55及图像显示方法指示信息77。
解密部5504是将由接收部5503接收到的服务器URL生成信息80、摄影图像状况信息55及图像显示方法指示信息77解密的部分。解密是在由可通信装置检索部(轮询部)5502相互认证后,使用在摄影装置1和TV45中共通的加密密钥将加密的服务器URL生成信息80、摄影图像状况信息55及图像显示方法指示信息77解密。
URL生成部5505根据服务器URL生成信息80,生成用来对服务器42访问的URL(Uniform Resource Locator),向通信部发送。在本URL中,除了服务器特定信息以外,还包括用来登陆到服务器中的登陆ID83、口令85。
通信部5506是通过通信接口5508经由通用的网络与服务器42进行通信的部分。
发送部5507经由通信接口5508将由URL生成部5505生成的URL发送,与服务器42连接。
通信接口5508是经由通用的网络与服务器42连接的通信接口,由有线/无线LAN(Local Area Network)接口等构成。
接收部5509是从由通信接口5508连接的服务器42接收并下载图像信息及图像显示模式表单(CSS)的部分。
数据处理部5510是进行由接收部5509下载的图像信息的数据处理的部分,在下载的图像被压缩的情况下进行其解压缩,在被加密的情况下进行其解密,以基于图像显示模式表单的图像显示模式将下载的图像信息排列。此外,本数据处理部5510通过解密部根据需要解密而得到的摄影图像状况信息55,在保存于摄影装置1中的摄影图像信息和上载到服务器42中的图像信息中不能确认同步的情况下,在显示部5512上显示表示没有取得同步的注意信息,进行防止用户的无用的混乱的处理。此外,本数据处理部5510按照来自解密部5504的图像显示方法指示信息77,设定将下载的图像信息显示的方式。例如,当图像显示方法指示信息77的一览显示(标志)78是ON时,生成下载的图像的一览显示,向存储器部5511输出。此外,当图像显示方法指示信息77的幻灯放映标志79是ON时,生成下载的图像的幻灯放映,向存储器部5511输出。
存储器部5511由将由数据处理部5510数据处理后的图像信息暂时存储的存储器构成。
显示部5512是将储存在存储器部5511中的、从服务器42下载、由数据处理部5510数据处理后的图像数据显示的部分。
如以上这样,有关本发明的TV45能够进行基于从摄影装置1的RF-ID47接收的服务器URL生成信息80、摄影图像状况信息55及图像显示方法指示信息77与服务器42连接、将上载到服务器42中的图像信息下载、显示到显示部5512上的处理。由此,能够不进行将摄影装置1的由SD卡或闪存存储器构成的第3存储器33取出、安装到TV45的卡读取器中而进行已摄影图像的阅览这样的麻烦的用户处理、而通过将摄影装置1的RF-ID47靠近(刷)在TV45的RF-ID读写器46上进行短距离通信的简单的用户操作,就能够显示并阅览已摄影的图像信息,能够实现即使是不熟悉数字设备的操作的用户也能够简单地阅览图像信息的摄影图像阅览系统。
图358是表示摄影装置1与TV45的RF-ID无线短距离通信动作的流程图。
首先,通过TV45的RF-ID读写器46的可通信装置检索部5502,发送用来检索可通信的摄影装置1的RF-ID47的呼叫信号(步骤S5601)。
摄影装置1的RF-ID47如果接收到TV45的RF-ID读写器46的可通信装置检索部5502的轮询信号,则启动第2电源部91,启动RF-ID读写器46(步骤S5602)。此时,只要至少仅启动在第2电源部91下能够动作的RF-ID47就可以,不需要将摄影装置1的功能全部启动。
在步骤S5602中,如果摄影装置1的RF-ID47的启动完成,则从第2天线21发送对于TV45的RF-ID读写器46的轮询的轮询应答(步骤S5603)。
在步骤S5603中,在从摄影装置1进行轮询应答后,由TV45的RF-ID读写器46的无线天线5501接收轮询应答(步骤S5604)。
在步骤S5604中接收到轮询应答后,进行发送了轮询应答的摄影装置1是否是能够相互通信的设备的判断(步骤S5605)。在判断的结果是判断为不是能够相互通信的设备的情况下,结束处理。另一方面,在判断为是能够通过相互的设备进行通信的设备的情况下,向下个处理前进。
在通过步骤S5605判断为是能够相互通信的设备的情况下,进行用来进行相互的设备是否是正规的设备的判断的相互认证处理(步骤S5606)。该相互认证处理与在HDMI或IEEE1394中进行的一般的相互认证处理是同样的,是由TV45和摄影装置1多次进行挑战数据的发出、应答数据的确认,最终在两者中生成相同的加密密钥的处理,如果某一方是非法的设备,则不生成共通的加密密钥,以后的相互的通信为无效。
另一方面,在摄影装置1的RF-ID47中也与TV45同样进行相互认证处理。进行相互的多次的挑战数据的生成及发送、应答数据的接收及确认,生成与TV45相同的加密密钥数据(步骤S5607)。
如果在步骤S5607中相互认证处理完成,则从摄影装置1的第2存储器52读出作为服务器特定信息58的服务器URL生成信息80,用对TV45的RF-ID读写器46通过综合认证而共通化的加密密钥加密并发送(步骤S5608)。
在步骤S5608中,发送的服务器URL生成信息80被TV45的RF-ID读写器46的接收部5503接收,在解密部5504中用共通化的加密密钥解密,由URL生成部5505生成用来对服务器42访问的URL,将接收完成向摄影装置1发送(步骤S5609)。
在步骤S5609中发送接收完成后,用摄影装置1的第2天线21接收接收完成,从第2存储器52读出摄影图像状况信息55,向TV45发送(步骤S5610)。作为摄影图像状况信息55而发送最终摄影时间68(Case1),作为未上载图像数据的存在识别信息而发送按照摄影图像赋予的能够进行是否是未上载数据的判别的存在识别符64(Case2)、将未上载图像信息散列而得到的信息67(Case3)、或者对摄影图像以时间序列赋予的图像号码的图像的最终号码69(Case4)。它是为了确认摄影装置1与服务器42的摄影图像的同步而需要的信息。
在步骤S5610中从摄影装置1发送摄影图像状况信息55后,由TV45的RF-ID读写器46接收摄影图像状况信息55,将接收完成向摄影装置1发送(步骤S5611)。此外,在TV45的CPU5513中,根据接收的摄影图像状况信息55进行以下的处理。
在Case1中,作为摄影图像状况信息55而采用最终摄影时间68。由此,在TV45中,将向服务器42的最终上载时间与最终摄影时间68比较,如果最终摄影时间68比向服务器42的最终上载时间在时间序列上晚,则认为没有取得保持在摄影装置1和服务器42中的图像信息的同步,在TV45的显示部上显示表示没有取得同步的注意信息。
在Case2中,作为摄影图像状况信息55而采用按每个摄影图像赋予的能够进行是否是未上载数据的判别的存在识别符64。由此,在TV45中,通过确认按每个摄影图像赋予的能够进行是否是未上载数据的判别的存在识别符64,能够判别存在未上载图像,认为没有取得保持在摄影装置1和服务器42中的图像信息的同步,在TV45的显示部上显示表示没有取得同步的注意信息。
在Case3中,作为摄影图像状况信息55而采用将未上载图像信息散列而得到的信息67。由此,在TV45中,通过确认将未上载图像信息散列而得到的信息67,能够判别存在未上载图像,认为没有取得保持在摄影装置1和服务器42中的图像信息的同步,在TV45的显示部上显示表示没有取得同步的注意信息。
在Case4中,作为摄影图像状况信息55而采用对摄影图像以时间序列赋予的图像号码的图像的最终号码69。由此,在TV45中,通过确认从服务器42接收的已向服务器42上载的最终图像号码、和从摄影装置1发送的对摄影图像以时间序列赋予的图像号码的图像的最终号码69,能够判别存在未上载图像,认为没有取得保持在摄影装置1和服务器42中的图像信息的同步,在TV45的显示部上显示表示没有取得同步的注意信息。
在S5611中,在完成摄影图像状况信息55的接收、将接收完成向摄影装置1发送后,从摄影装置1的第2存储器52读出图像显示方法指示信息77而向TV45发送(步骤S5612)。在图像显示方法指示信息77中,包括一览显示(标志)78及幻灯放映(标志)79。
在步骤S5612中,在将图像显示方法指示信息77发送后,通过TV45的RF-ID读写器46接收图像显示方法指示信息77,将接收完成向摄影装置1发送(步骤S5613)。TV45的数据处理部5510基于接收到的图像显示方法指示信息77,制作从服务器42下载的图像的显示方式。例如,当图像显示方法指示信息77的一览显示标志是ON时,制作下载的图像的一览显示而存储到存储器部5511中,在显示部5512上显示一览。另一方面,当图像显示方法指示信息77的幻灯放映标志是ON时,制作下载的图像的幻灯放映显示而存储到存储器部5511中,在显示部5512上显示幻灯放映。
在步骤S5613中接收到图像显示方法指示信息77后,将与摄影装置1的RF-ID读写器46的通信切断(步骤S5614)。
接着,启动TV系统(步骤S5615)。所谓TV系统的启动,为了在显示部5512上显示下载的图像数据而使主电源为ON。在步骤S5615中启动TV系统以前,至少TV45的RF-ID读写器46是启动的状态,显示部5512的电源也可以是OFF。
接着,启动通信部5506,基于由URL生成部5505生成的URL向服务器42进行连接(步骤S5616)。
在步骤S5616中,在连接到服务器42上之后,将已上载的图像数据下载到TV45中(步骤S5617)。
在步骤S5617中,将下载的图像由数据处理部5510按照来自照相机的图像显示方法指示信息77生成显示用的图像数据,储存到存储器部5511中,显示在显示部5512上(步骤S5618)。TV45的数据处理部5510基于接收到的图像显示方法指示信息77,制作从服务器42下载的图像的显示方式。例如,当图像显示方法指示信息77的一览显示标志78是ON时,制作下载的图像的一览显示而存储到存储器部5511中,在显示部5512上显示一览。另一方面,当图像显示方法指示信息77的幻灯放映标志79是ON时,制作下载的图像的幻灯放映显示而存储到存储器部5511中,在显示部5512上显示幻灯放映。
在步骤S5617中,如果从服务器42下载的图像的显示处理完成,则进行记录在摄影装置1的第3存储器33中的摄影图像与从服务器42下载的图像数据之间同步是否成立的同步确认处理(步骤S5619)。本处理基于从摄影装置1在步骤S5611中接收到的摄影图像状况信息55进行。作为摄影图像状况信息55而发送最终摄影时间68(Case1),作为未上载图像数据的存在识别信息而发送按照摄影图像赋予的能够进行是否是未上载数据的判别的存在识别符64(Case2)、将未上载图像信息散列而得到的信息67(Case3)、或者对摄影图像以时间序列赋予的图像号码的图像的最终号码69(Case4)。它是为了确认摄影装置1与服务器42的摄影图像的同步而需要的信息。
图359A、图359B是表示图358的服务器同步确认处理(步骤S5619)的摄影图像状况信息55分别为Case1~Case4时的详细的处理的流程的流程图。
另外,如上述那样,将包括图359A~图359B的整体适当简称作“图359”。
Case1是摄影图像状况信息55为最终摄影时间68时的流程图。
首先,通过TV45的通信部5506从服务器42取得最终的更新日期时间(如果是更新的图像的最终摄影日期时间也有同样的效果)(步骤S5701)。
接着,将从服务器42取得的最终的更新日期时间、与由来自摄影装置1的RF-ID读写器46的摄影图像状况信息55表示的最后摄影的日期时间68比较(步骤S5702)。在最终上载日期时间比最后摄影日期时间68靠前的情况下,判断为在最终上载的时刻的以后摄影了图像、还没有将摄影的图像上载,所以判断为没有取得摄影装置1与服务器42的图像的同步,转移到步骤S5703的错误显示处理。另一方面,在最终上载日期时间与最后摄影的日期时间68等同的情况下,由于进行了摄影装置1与服务器42的图像的同步,所以不输出错误而结束处理。
在步骤S5702中,在判断为没有取得摄影装置1与服务器42的同步的情况下,对显示部5512输出表示没有取得同步的注意消息。在此情况下,如果通过最终上载日期时间与最后摄影的日期时间68的比较、将表示从哪个时刻起的摄影图像没有被上载的时间信息同时作为消息输出,则成为对于用户而言容易理解的消息。
Case2是摄影图像状况信息55为按每个摄影图像赋予的能够进行是否是未上载数据的存在识别符64时的流程图。
首先,根据由来自摄影装置1的RF-ID读写器46的摄影图像状况信息55表示的未上载图像的存在识别信息的存在识别符,判断在记录在摄影装置1的第3存储器33中的摄影图像中是否有还没有上载到服务器42中的图像(步骤S5711)。在步骤S5711中判断为存在没有上载的图像的情况下,转移到步骤S5712的错误显示处理。另一方面,在判断为不存在没有上载的图像的情况下,由于进行了摄影装置1与服务器42的图像的同步,所以不输出错误而结束处理。
在步骤S5712中,在判断为没有取得摄影装置1与服务器42的同步的情况下,对显示部5512输出表示没有取得同步的注意消息。
Case3是摄影图像状况信息55为将未上载图像信息散列而得到的信息67时的流程图。
首先,根据由来自摄影装置1的RF-ID读写器46的摄影图像状况信息55表示的将未上载图像信息散列而得到的信息67,判断在记录在摄影装置1的第3存储器33中的摄影图像中是否有还没有上载到服务器42中的图像(步骤S5721)。步骤S5721中,在TV45中生成NULL的散列值,通过其比较判断是否有未上载图像。在步骤S5721中判断为存在没有上载的图像的情况下,转移到步骤S5722的错误显示处理。另一方面,判断为不存在没有上载的图像的情况下,由于进行了摄影装置1与服务器42的图像的同步,所以不输出错误而结束处理。
在步骤S5722中,在判断为没有取得摄影装置1与服务器42的同步的情况下,对显示部5512输出表示没有取得同步的注意消息。
Case4是摄影图像状况信息55为对摄影的图像赋予的号码中的最终的摄影图像的号码时的流程图。
首先,通过TV45的通信部5506,从服务器42取得最终的更新图像的图像号码(步骤S5731)。
接着,将从服务器42取得的最终上载图像的号码69、与由来自摄影装置1的RF-ID读写器46的摄影图像状况信息55表示的图像的最终号码69(步骤S5732)比较。在最终上载图像的号码比最后摄影的图像的号码69小的情况下,判断为在最终上载的时刻的以后摄影了图像、且摄影的图像没有被上载,所以判断为没有取得摄影装置1与服务器42的图像的同步,转移到步骤S5733的错误显示处理。另一方面,在最终上载图像的号码与最后摄影的图像的号码69等同的情况下,由于进行了摄影装置1与服务器42的图像的同步,所以不输出错误而结束处理。
在步骤S5732中,在判断为没有取得摄影装置1与服务器42的同步的情况下,对显示部5512输出表示没有取得同步的注意消息。
在以上的Case1~Case4的哪种方法中,都在没有将由摄影装置1摄影的全部图像上载到服务器42中、即没有同步的情况下,虽然不能在显示部5512上显示摄影的全部图像,但能够判断为没有取得同步,所以能够显示使用户容易理解的消息,能够避免用户的无用的混乱。
图360是在(1)栏中表示从摄影装置1向服务器42上载摄影图像的情况、在(2)栏中表示摄影装置1与TV45的RF-ID通信的情况的各自的数据格式。
首先,说明(1)从摄影装置1向服务器42上载摄影图像的情况下的数据格式5940。在本格式中,包括照相机ID5901、服务器地址5902、服务器登陆ID5903、服务器登陆口令5904、图像目录5905及上载图像数5906。
照相机ID5901是对每个照相机固有地赋予的照相机固有ID,是记录在摄影装置1的第2存储器52的照相机ID部76中的ID信息。本ID信息通过作为向服务器42的登陆ID使用,能够不由用户进行登陆ID的输入、而对每个摄影装置1赋予唯一的服务器地址。此外,在服务器42中,还能够按照摄影的照相机管理摄影图像。
服务器地址5902是摄影装置1的第2存储器52的服务器特定信息58的服务器地址信息81的内容。由此,能够在TV45侧确定进行了上载的服务器。
服务器登陆ID5903是作为摄影装置1的第2存储器52的服务器特定信息58的用户识别信息82的登陆ID83的内容。由此,在TV45中也能够进行通过与从摄影装置1上载的向服务器的以相同的账户的登陆。
服务器登陆口令5904是摄影装置1的第2存储器52的服务器特定信息58的口令84的内容。由此,在TV45中也能够针对从摄影装置1上载的向服务器的以相同的账户的登陆。
上载图像数5906是向服务器上载的图像数。其中,记载有与存储在摄影装置1的第2存储器52的未上载图像的张数65中的图像数等同的张数、即在摄影后没有上载到服务器中的图像数。
在本格式的发送以后,将记录在摄影装置1的第3存储器33中、并且没有上载到服务器中的图像上载。
接着,对(2)摄影装置1与TV45的RF-ID通信的情况下的各个数据格式5950进行说明。本格式由照相机ID5911、服务器地址5902、服务器登陆ID5913、服务器登陆口令5914、最终摄影日期时间5915、能够判断是未上载的识别信息5916、将未上载图像信息散列而得到的信息5917、最终摄影图像的图像号码5918及图像显示方法指示信息5919构成。
照相机ID5911是对每个照相机固有地赋予的照相机固有ID,是记录在摄影装置1的第2存储器52的照相机ID部76中的ID信息。本ID信息通过作为从TV45向服务器42的登陆ID使用,能够不由用户进行登陆ID的输入、而对每个摄影装置1赋予唯一的服务器地址。此外,也有在摄影装置1的RF-ID47与TV45的RF-ID读写器46的相互认证时使用的情况。
服务器地址5912是摄影装置1的第2存储器52的服务器特定信息58的服务器地址信息81的内容。由此,能够在TV45侧确定上载的服务器。
服务器登陆ID5913是作为摄影装置1的第2存储器52的服务器特定信息58的用户识别信息82的登陆ID83的内容。由此,在TV45中也能够针对从摄影装置1上载的服务器的以相同的账户的登陆。
服务器登陆口令5914是摄影装置1的第2存储器52的服务器特定信息58的口令84的内容。由此,在TV45中也能够针对从摄影装置1上载的服务器的以相同的账户的登陆。
最终摄影日期时间5915是与在摄影装置1的第2存储器52的摄影图像状况信息55的最后摄影的时间68对应的信息,在TV45侧用于服务器42与摄影装置1的摄影图像的同步确认。
能够判断是未上载的识别信息5916是与摄影装置1的第2存储器52的摄影图像状况信息55的未上载图像数据存在识别信息对应的信息,在TV45侧用于服务器42与摄影装置1的摄影图像的同步确认。此外,该能够判断是未上载的识别信息5916是对于能够识别各摄影图像的图像ID5928赋予表示向服务器的上载是否完成的上载标志5926的方式。由此,能够按照1张张摄影图像进行是否上载到服务器中的判断。
将未上载图像信息散列而得到的信息5917是与将摄影装置1的第2存储器52的摄影图像状况信息55的未上载图像信息散列而得到的信息67对应的信息,在TV45侧用于服务器42与摄影装置1的摄影图像的同步确认。
最终摄影图像的图像号码5918是与摄影装置1的第2存储器52的摄影图像状况信息55的摄影图像的最终号码69对应的信息,在TV45侧用于服务器42与摄影装置1的摄影图像的同步确认。
图像显示方法指示信息5919是与摄影装置1的第2存储器52的摄影图像状况信息55的图像显示方法指示信息77对应的信息,由在TV45侧指定从服务器42下载的图像的阅览方法的识别信息构成。
图像显示方法指示信息5919按每个图像ID5927,由一览显示标志5920、幻灯放映标志5921、印刷标志5922、运动图像再现标志5923、下载标志5924及安全口令5925构成。
图像ID5927是对摄影图像唯一的信息,由摄影装置1在摄影时以时间序列赋予。
一览显示标志5920是对应于摄影装置1的第2存储器52的一览显示(标志)78,表示在TV45中是否将从服务器42下载的图像信息的阅览设为一览形式的标志。TV45的数据处理部5510在该标志为“否”的情况下,制作下载的图像的一览显示并存储到存储器部5511中,在显示部5512上以一览形式显示。
幻灯放映标志对应于摄影装置1的第2存储器52的幻灯放映(标志)79,表示在TV45中是否将从服务器42下载的图像信息的阅览设为幻灯放映的标志。TV45的数据处理部5510在该标志是“automatic(自动)”的情况下,制作下载的图像的幻灯放映并存储到存储器部5511中,在显示部5512以幻灯放映显示。另一方面,在本幻灯放映标志是“manual(手动)”的情况下,许可通过用户指示实施幻灯放映。此外,在“disable(禁用)”的情况下,不许可幻灯放映显示。
印刷标志5922是表示下载到TV45中并由显示部5512显示的图像是否能够由连接在TV45上的未图示的打印机印刷的标志。它在摄影装置1的第2存储器52的图像显示方法指示信息77内没有图示,但通过设置印刷标志,能够进行是否能够印刷的设定,能够提高用户的关于图像使用的方便性。
运动图像再现标志5923是在由摄影装置1摄影运动图像信息、上载到服务器42中的情况下表示是否许可由TV45将运动图像下载、阅览的标志。在摄影装置1中存在运动图像摄影功能的情况下,通过对第2存储器52的图像显示方法指示信息77赋予本运动图像再现标志5923,能够追加是否许可运动图像像的再现的设定,能够不进行用户的复杂的操作而进行运动图像像的再现管理。
下载标志5924是表示是否能够将上载到服务器42中的图像或运动图像下载(复制)到TV45的存储器中的识别符。如果使用该标志,则不会由没有被许可摄影图像的第3者复制,所以也能够有利于著作权的保护。
安全口令5925是用来使得仅许可的用户能够进行上述图像的阅览、印刷及下载的口令信息。在本实施方式中,以进行相同的口令设定的方式说明了上述图像的阅览、印刷及下载,但能够分别设定不同的口令能够实施各水平下的安全对策,所以更优选。
如以上这样,如果使用本发明的系统,则摄影装置1将摄影图像上载到通过第1天线连接的服务器中。此外,如果将摄影装置1靠近TV45的RF-ID读写器46上,则从摄影装置1的RF-ID47将服务器URL生成信息80、摄影图像状况信息55及图像显示方法指示信息77通过RF-ID通信向TV45发送,TV45连接到由摄影装置1上载了摄影图像的服务器上,将由摄影装置1摄影的图像下载到TV45中而显示。此外,通过摄影图像状况信息55确认服务器42与摄影装置1的摄影图像信息的同步,在没有取得同步的情况下,将该消息显示在TV45的显示部5512上。由此,用户仅通过将摄影装置1靠近TV45上,就能够对应以往需要将记录存储器从照相机拔出并设置到TV45中而阅览的摄影图像的显示。由此,即使是不熟悉数字设备的操作的用户,也能够简单地将摄影图像显示在TV45上。
(实施方式A3)
对本发明的实施方式A3进行说明。
首先,说明实施方式A3的概况。
图361是实施方式A3的电子目录显示系统的概略结构图。
实施方式A3的电子目录显示系统具有具备RF-ID写入部501的电子目录服务器信息输入机500、具备RF-ID47的电子目录通知卡502、具备RF-ID读取部504和网络通信部509x的TV45、和具备电子目录数据数据库(电子目录数据库)507和顾客属性数据库508的电子目录服务器506。
电子目录服务器信息输入机500将从用户(电子目录的服务提供者)输入的电子目录服务器信息从RF-ID写入部501写入到粘贴在电子目录通知卡502上的RF-ID47中。通过用户(电子目录的服务使用者)使写入了该电子目录服务器信息的电子目录通知卡502向TV45靠近,TV45具备的RF-ID读取部504将写入在RF-ID47中的电子目录服务器信息读取。进而,TV45基于读取的电子目录服务器信息,经由网络通信部(通信部)509对设置在网络上的电子目录服务器505发送电子目录的取得请求。此外,TV45在将电子目录取得请求向电子目录服务器发送时,将预先输入到TV45中的用户信息也同时向电子目录服务器505发送。电子目录服务器505接收来自TV45的电子目录发送请求及用户信息,首先基于用户信息从顾客属性数据库508取得顾客属性数据。接着,基于顾客属性数据,从电子目录数据数据库507取得对应的电子目录数据。并且,将所取得的电子目录数据对发出了电子目录请求的TV45发送。TV45将从电子目录服务器505接收到的电子目录数据显示在画面上,受理来自用户(电子目录的服务使用者)的电子目录数据内的商品的购买操作。
以下,说明实施方式A3的电子目录显示系统的详细情况。
图362是表示实施方式A3的电子目录服务器信息输入机的结构的功能块图。
首先,按键输入受理部520接受来自用户(电子目录的服务提供者)操作的输入按键的输入,取得电子目录服务器信息。按键输入受理部520取得的电子目录服务器信息是URL等的服务器地址、服务器登陆ID、服务器登陆口令、电子目录显示用口令、表示将包含在电子目录中的商品的图像进行一览(缩略图)显示还是依次(幻灯)显示的电子目录显示信息、和表示作为RF-ID的粘贴目标的卡或明信片等的媒体的介质识别信息。将按键输入受理部520取得的电子目录服务器信息保存到存储部522中。接着,在被输入电子目录服务器信息后,如果被输入RF-ID发送按键等,则RF-ID发送输入受理部521对发送部523通知发送请求,发送部523从存储部522读出电子目录服务器信息,从天线部524发送电子目录服务器信息
图363是表示电子目录服务器信息输入机的处理的步骤的流程图。
将电子目录服务器信息输入机的处理的详细情况用图363的流程图表示。
图364是表示电子目录通知卡502具备的RF-ID47的结构的块图。
RF-ID47的结构及处理与在实施方式A1及A2中说明的是同样的。第2电源部91从由第2天线21接收到的信号取出电流,向各部进行电源供给,数据接收部105、第2处理部95和记录部106将接收到的数据向第2存储器52记录。
图365是表示TV45的结构的功能块图。
实施方式A3中的TV45的结构是对实施方式A2中的结构追加了用户信息输入部588的结构。用户信息输入部588受理预先由用户(电子目录的服务使用者)输入的、关于用户自身的属性的用户信息,暂时保存到存储器部583中。作为用户信息,优选的是例如用户的性别信息及年龄信息,但除了这些以外,也可以是如居住地或家庭成员结构等那样能够用于从电子目录提供的商品数据的甄别的个人信息。将该用户信息与URL生成部生成的电子目录服务器的URL一起经由通信部509向电子目录服务器发送。与实施方式A1同样,在本实施方式中,电子目录服务使用者也通过将电子目录通知卡502向TV45的RF-ID读取部504靠近,TV45接收电子目录服务器信息,使用它生成服务器的URL,连接到服务器。该处理的详细情况与第1实施方式的在图320~图333中表示的处理是同样的。
图366是表示电子目录服务器506的结构的功能块图。
图367是表示电子目录服务器的处理的步骤的流程图。
图370是表示顾客属性数据库的数据构造的图。
图371是表示电子目录数据库的数据构造的图。
电子目录服务器506经由通信部600接收从TV45发送的电子目录发送目的地地址(TV45和电子目录服务器506属于的网络上的TV45的网络地址)和用户信息。接着,基于顾客属性数据取得部接收到的用户信息,从顾客属性数据库508取得顾客属性数据。例如,在用户信息之中包含有使用TV45的用户的性别和年龄的情况下,从具有图370所示的数据构造的顾客属性数据库508取得对应于年龄和性别的商品类别及商品价格带的信息作为顾客属性数据。并且,电子目录数据取得部602基于顾客属性数据从电子目录数据库507取得电子目录数据。例如,在顾客属性数据中包含有商品类别和商品价格带的情况下,从具有图371所示的数据构造的电子目录数据库507将对应于商品类别和商品价格带的商品数据汇总作为电子目录数据取得。将由电子目录数据取得部602取得的电子目录数据经由通信部600发送给电子目录发送目的地地址表示的TV45。用图367的流程图表示电子目录服务器506的处理的详细情况。
图368是表示显示电子目录的TV的处理的步骤的流程图。
接着,使用图368所示的流程图,说明将电子目录数据下载后的TV45的处理。S630~S632中的从RF-ID取得电子目录服务器信息的处理在没有下载电子目录数据的情况以及下载完成后都是共通的。在S633中,判断与从RF-ID接收到的电子目录服务器信息对应的电子目录数据的下载及显示是否完成,在下载没有完成的情况下,在S634及S635中从服务器下载电子目录数据。该数据的下载处理与实施方式A1的数据的下载处理是同样的。
图369是表示电子目录的画面显示的图。
在S633中电子目录数据是已下载的情况下,使预先设定的规定的按键、例如确定按键的按键信号生效,执行对显示的电子目录数据的操作。例如,如图369所示的电子目录数据的画面显示例那样,设为对显示中的电子目录数据以两三个较少的选择分支提示用户接着应进行的操作的画面结构,进而,如图369中的选择分支652和653所示,为每当经过一定时间则在选择分支间移动表示选择候选的焦点那样的画面结构。如果这样,则用户在自身希望的选择分支处有焦点时,通过将具备RF-ID47的电子目录通知卡502靠近TV45上,能够执行电子目录数据的选择、以及各数据的购买等的操作。
另外,本实施方式的电子目录通知卡502上的RF-ID47内置的第2存储器52也可以是ROM(Read Only Memory)。在此情况下,电子目录服务器信息输入机500为RF-ID制造工序中的RF-ID存储器数据输入机、或RF-ID制造系统中的RF-ID存储器数据输入机构。一般而言,与具有可改写存储器的RF-ID相比,具有ROM的RF-ID能够更便宜地构成,所以对于大量送出电子目录通知卡的电子目录服务提供者而言,通过使用ROM型RF-ID,能够抑制成本。
另外,在本实施方式中,作为TV45的画面结构,如图369中的选择分支652和653所示,每经过一定时间,表示选择候选的焦点在选择分支间移动,但使用具备RF-ID47的电子目录通知卡502操作画面显示的电子目录数据的方法并不限定于此。例如,也可以是,TV45的接收部571连续接收从RF-ID发送的信息,通过计测该连续的接收数而取得将RF-ID向TV45靠近的时间,基于该RF-ID接近时间使画面显示的表示选择候选的焦点移动。通过做成这样的结构,仅在将RF-ID向TV靠近的期间中、显示在画面上的焦点移动而变更选择候选,在将RF-ID从TV离开的地方,焦点的移动也停止,进而,可以是如果在焦点的移动停止后经过一定时间则确定焦点停止的选择候选的选择的电子目录的操作。在该电子目录操作方法中,不用等待每一定时间自动地在选择候选间循环的焦点转到用户希望的选择分支,能够得到用户能够使用RF-ID主动操作电子目录的效果。
另外,在本实施方式中,在电子目录服务器信息输入机500中,为按键输入受理部520接受来自用户(电子目录的服务提供者)操作的输入按键的输入、取得电子目录服务器信息的结构,但也可以为电子目录服务器信息输入机具备与图像服务器的通信接口、图像服务器保持对电子目录服务器信息输入机发送的服务器信息、电子目录服务器信息输入机从图像服务器接收而取得服务器信息的结构。通过做成这样的结构,如果对图像服务器输入服务器信息,则在电子目录服务器信息输入机侧不需要输入图像服务器,特别在对1个图像服务器使用多个电子目录服务器信息输入机的情况下方便性较高。
以往,有不精通个人计算机等的电子设备操作的用户为了利用网络购物而必须学习设备的操作的问题,但如果使用如以上那样在实施方式A3中叙述的系统,则利用电子目录的用户仅通过将接受到的卡或明信片向TV靠近,就能够利用网络购物等,即使是对个人计算机或便携电话等的因特网终端不熟悉的用户,也能够容易地在TV画面上享受购物。
(实施方式A4)
对本发明的实施方式A4进行说明。
图372是实施方式A4的概略结构图。
在本实施方式中,对将粘贴有用来向图像服务器访问的RF-ID的明信片向远处递送的方法进行说明。首先,作为明信片的递送源的第1用户如果将具备RF-ID47的摄影装置1向TV45的RF-ID读写器46靠近,则TV45生成用来连接到图像服务器42的服务器URL,从图像服务器42取得图像数据,显示在画面上。该处理与实施方式A1是同样的。接着,第1用户从显示在TV45上的图像之中,使用对应于TV45的遥控器等的输入机构选择想要向明信片印刷的图像、和想要与明信片建立关联而登录的(想要使处于远处的第2用户看到的)图像。进而,第1用户还使用遥控器等输入明信片的递送目的地住址等的递送目的地信息。TV45将第1用户选择的对明信片印刷的图像的ID、登录到明信片上的图像的ID、和明信片递送目的地信息向图像服务器42发送。图像服务器42取得与接收到的印刷图像ID对应的图像数据,将图像数据和明信片递送目的地信息向打印机800发送。打印机800将图像数据和明信片递送目的地住址印刷到明信片上。此外,图像服务器42对图像服务器信息输入机500x发送从Tv45接收到的登录图像ID,同时将包括URL等的服务器地址、服务器登陆ID、服务器登陆口令、图像显示用口令、表示是将图像一览(缩略图)显示还是依次(幻灯)显示的图像显示信息、和表示作为RF-ID的粘贴目标的卡或明信片等的媒体的介质识别信息的图像服务器信息发送。图像服务器信息输入机500x将图像服务器信息和登录图像ID写入到由打印机印刷了图像和递送目的地信息的明信片的RF-ID47中。被进行了印刷和向RF-ID的写入的明信片801被邮寄到印刷的递送目的地,被第1用户指定为递送目的地的第2用户取得该明信片801。第2用户如果将邮寄来的明信片向第2用户的TV45的RF-ID读写器46靠近,则TV45取得RF-ID47保存的图像服务器信息和登录图像ID,将与登录图像ID对应的图像数据从服务器下载及显示。
本实施方式的摄影装置1的结构及处理与实施方式A1是同样的。
图373是表示本实施方式的TV45的结构的块图。
接收部811经由无线天线570从摄影装置1或明信片801的RF-ID47接收图像服务器信息,但在明信片801的RF-ID47具有登录图像ID的情况下,也接收登录图像ID。此外,图像选择部584经由按键部585及红外线受光部586受理用户的图像选择操作,取得第1用户为了印刷到明信片上而选择的图像的ID(印刷图像ID)、和为了登录到明信片上而选择的图像的ID(登录图像ID),将它们向通信部509传送。
图374是表示带有RF-ID的明信片邮寄系统的图像选择操作的画面显示的图。
在图374中表示在该图像选择操作时显示在TV45上的画面显示例。图374中的821是选择印刷到明信片上的图像的画面显示,图374中的820是选择登录到明信片上的图像的画面显示。此外,明信片递送目的地信息输入部810经由按键部585及红外线受光部586受理用户的字符输入操作,取得作为明信片的递送目的地的包括住址及收件人名的明信片递送目的地信息,向通信部509发送。将输入明信片递送目的地信息时的画面显示例在图374中的823中表示。通信部509经由发送部575及通信接口576将明信片递送目的地信息、印刷图像ID和登录图像ID向图像服务器发送。
图375是表示图像服务器42、打印机800、和图像服务器信息输入机500进行准备以便能够递送明信片801的处理的流程图。
将进行了印刷和向RF-ID的写入的明信片801邮寄到印刷的递送目的地,被第1用户指定为递送目的地的第2用户取得该明信片801。如果第2用户将接受到的明信片801靠近TV45上,则接收部811经由无线天线570接收RF-ID47发送的图像服务器信息及登录图像ID。将在图像服务器信息及登录图像ID之中加密的信息用解密部572解密。接着,URL生成部573生成从保存在图像服务器42中的图像数据之中仅将对应于登录图像ID的图像数据下载到TV45中的URL。具体而言,可以采用在生成的URL之中指定服务器的内部目录、或作为URL选项而将登录图像ID植入在URL中的方法。TV45使用由URL生成部573生成的指定服务器的URL对图像服务器访问而取得图像数据的处理的详细情况与在实施方式A1中说明的处理是同样的。
另外,在本实施方式中,做成了用户对TV45输入递送目的地信息的结构,但也可以不仅输入住址及收件人名等的递送目的地信息、还输入在明信片上与图像一起印刷的消息。将TV45受理的输入消息与递送目的地信息同样,从TV45传送给图像服务器42,再由打印机800印刷到明信片上。将TV45中的印刷用的消息的输入画面例表示在图374的822中。通过这样不仅能够选择印刷到明信片上的明信片,而且能够输入对图像附加的消息,制作带有RF-ID的明信片的自由度提高。
另外,在本实施方式的TV45中,与在实施方式A3中使用RF-ID操作画面显示的电子目录的处理同样,也可以做成能够使用带有RF-ID的明信片操作显示在TV45上的图像的结构。
如以上这样,如果使用在实施方式A4中叙述的系统,则能够不在手边准备粘贴有RF-ID的明信片而对处于远处的对象邮寄带有RF-ID的明信片,并且,在想要将保存在图像服务器中的图像印刷到明信片上而递送的情况下,也能够通过TV画面上的操作选择想要印刷的图像,所以能够得到较高的方便性。
以往,为了使处于远处的对象用电视机等的大画面显示设备观看图像,需要远处侧的用户学习设备操作、或操作掌握者前往远处而操作设备、或将处于远处的显示设备远程操作,但在本系统中,远处的用户能够通过将带有RF-ID的明信片等物理的媒介物向显示设备靠近的简单的操作而容易地阅览图像。
(实施方式A5)
图376是实施方式A5的系统结构图。
在本发明的实施方式A5中,对在明信片等的邮寄物上写入固定的信息、将在摄影装置中写入的固定信息与保存在服务器中的图像或图像组(图像信息)建立联系、在再现侧通过从明信片等附带的RF-ID读出固定信息、能够进行与固定信息建立了关联的图像的阅览的结构进行说明(图376)。在图376中,首先用摄影装置读取记录在邮寄物中的固定信息,进行图像与邮寄物固有ID的关联建立,登录到服务器中。接受到登录完成的邮寄物的用户通过将邮寄物向电视机的RF-ID读取器靠近而进行固定信息的读出,通过使用固有信息对服务器进行查询而进行与邮寄物建立了关联的图像的阅览。
本实施例的关键点是邮寄物上附带的RF-ID的信息是不能改写的(ROM)或不能改写的环境这一点,是不进行邮寄物的固定信息的改写而进行服务器的图像信息与邮寄物的关联建立这一点。
<摄影装置中的图像的上载和与邮寄物的关联建立>
将由摄影装置摄影的图像通过在前面的实施方式中说明的方法上载到服务器中。此时,对上载的每个图像或图像组赋予识别符,能够通过该识别符识别服务器上的图像或图像组。
图377是表示实施方式A5的邮寄物的固定信息的例子的图。
以下,对由摄影装置摄影并向服务器上载的图像或图像组、与在邮寄物的RF-ID标签中记录的固定信息之间的关联建立方法进行说明。另外,记录在邮寄物的RF-ID中的固定信息如图377那样。图377(a)是将邮寄物所固有的邮寄物固有ID和用来向图像服务器访问的地址等的信息记录的例子,图377(b)是将邮寄物固有ID和用来对中继服务器访问的地址等的信息记录的例子,图377(c)是仅记录邮寄物固有ID的例子。另外,也有除此以外还保存有用来对服务器访问的登陆ID及口令信息的情况,但在本实施方式中,假设为了对服务器访问而需要的信息包含在包括地址信息的URL中。
图378是摄影装置具有RF-ID读取器的功能的情况下的RF-ID与记录在服务器中的图像信息之间的关联建立的流程图。
在摄影装置中,首先,将保存在邮寄物的RF-ID中的信息使用RF-ID读取器读出(S2500)。具体而言,通过图3的第2天线21与邮寄物的RF-ID进行通信,由数据接收部105接收邮寄物的固定信息。然后,由第2处理部95进行处理,经由记录部106、第2存储器52、记录再现部51向第1处理部35转送读出的邮寄物的信息。在第1处理部中,通过用户的指示决定从邮寄物读出的邮寄物固有ID与图像或图像组的关联建立(S2501)。然后,经由第1天线20向服务器42访问(S2502),将邮寄物固有ID与保存在服务器中的图像信息之间的关联建立信息登录到服务器中(S2503)。
图379是实施方式A5的向摄影装置的中继服务器的登录的流程图。
在保存于读出的邮寄物中的固定信息中记录有图像服务器的地址或包括地址的URL的情况下,以上处理结束。在保存于读出的邮寄物中的固定信息中没有记录有图像服务器的地址或包括地址的URL的情况下,进行向中继服务器的设定(图379)。
在向中继服务器的设定中,首先进行向中继服务器的访问(S2510)。另外,在中继服务器的地址或包括地址的URL处在从邮寄物读出的信息中的情况下,对包含在所读出的信息中的中继服务器访问,在没有的情况下,向在摄影装置侧预先设定的中继服务器访问。
在与中继服务器连接后,对中继服务器的数据库进行将邮寄物固有ID与重新寄送目标(转送目标)的服务器之间的关联建立设定(S2511)。由此,在中继服务器的数据库中登录邮寄物固有ID与转送目标的地址的对应。
在摄影装置不具有RF-ID读取器的功能的情况下、并且在邮寄物上印刷着记录有RF-ID读取器的信息的2维码等的情况下,使用摄影装置的摄像部进行摄影,通过将作为2维码记录的信息读出,将与记录在邮寄物的RF-ID中的固定信息相同的信息读出。作为2维码,有QR码、PDF417、VeriCode、MaxiCode等,即使是写在这里的码以外的码,只要能够通过由摄影装置摄影来进行信息的取入,则利用怎样的码都可以。此外,虽然印刷区域面积增加,但在仅使用1维方向的条码的情况下也能够期待与本实施方式同样的效果。
图380是安装有RF-ID部2520、印刷了记录有相同的信息的2维码2521的邮寄物的例子。
使用图3的结构图说明将2维码通过摄影装置读入的情况下的数据的流动。将印刷在邮寄物上的2维码通过摄像部30摄影,由影像处理部31变换为图像后,经由记录再现部32向第一处理部35传送。在第1处理部35中,将摄影的2维码解析,将记录在2维码中的信息取出。记录在2维码中的信息与记录在RF-ID中的信息基本上相同,至少包括邮寄物固有ID。
图381是实施方式A5的利用摄影装置的二次元条码的处理的流程图。
以下,使用图381说明到从2维码读出信息而与服务器的图像或图像组进行关联建立为止的处理的流程。
首先,通过摄像部进行2维码的摄影(S2530)。进行接着摄影的图像是否是2维码的判断(S2531),在不是2维码的情况下,进行错误处理(S2532)。另外,在不是2维码的情况下,也可以进行通常的摄影处理。在是2维码的情况下,进行2维码的解析(S2533),从解析结果中读出邮寄物的信息(S2534)。在将邮寄物的固定信息读出后,决定邮寄物固有ID与服务器的图像信息的关联建立(S2535),向服务器访问(S2536),将关联建立信息设定到服务器中(S2537)。S2535~S2537的处理与图378的S2501~S2503的处理是相同的。另外,在读出的信息中没有记录有图像服务器的地址或包括地址的URL的情况下,进行向中继服务器的转送设定处理。向中继服务器的设定处理为前面说明的图379的处理。
根据以上,通过读取印刷在邮寄物上的2维码的信息,完成记录在RF-ID中的信息与服务器的图像信息之间的关联建立。
在摄影装置不具有RF-ID读取器功能、在邮寄物上没有印刷2维码等的码的情况下,也可以通过将印刷在邮寄物上的邮寄物固有ID及服务器地址等的URL直接手工输入到摄影装置中、将邮寄物的信息通过摄影装置读出信息。手工输入通过图2的7~15的按钮操作等进行。另外,URL及邮寄物的固有ID既可以直接以明文印刷,也可以编码为容易输入的代码。在编码的情况下,在输入完成后由摄影装置进行解码处理,将邮寄物的RF-ID所记录的信息取出。
根据以上,即使在不具有RF-ID读取器功能、并且没有印刷2维码等的情况下,也能够进行邮寄物与服务器的图像信息之间的关联建立。
<使用邮寄物的RF-ID的图像再现及阅览>
接着,对使用关联建立完成的邮寄物、通过电视机阅览记录在服务器中的图像的步骤进行说明。
图382是表示到将邮寄物的RF-ID读入而对图像服务器访问为止的电视机的处理流程的图。
如果将邮寄物向电视机的RF-ID读取器靠近,则将邮寄物的RF-ID的信息读入到电视机中(S2540)。在读入的信息中存在服务器地址或包括服务器地址的URL的情况下(S2541),向指定的服务器访问(S2542),发送邮寄物固有ID(S2543)。另外,在对象是中继服务器的情况下(S2544),进行向由中继服务器指定的服务器的重新指向(2547),进行向图像服务器的图像或图像组的访问(S2548)。在S2544中,在对象是图像服务器的情况下,不进行重新指向,进行向图像服务器的访问(S2548)。此外,在记录在邮寄物中的信息中不存在服务器地址的情况下,进行向预先设定在电视机中的默认的服务器的访问(S2545),将邮寄物固有ID向默认的服务器发送(S2546)。然后,进行向指定的服务器的重新指向(S2547),进行向图像服务器的访问。
另外,在中继服务器或、默认的服务器的数据库中没有登录有邮寄物固有ID与中继的目标的服务器之间的对应关系的情况下,进行向错误页的重新指向。
图383是表示接收到邮寄物固有ID后的中继服务器及默认的服务器的处理流程的图。
如果接受到邮寄物固有ID(S2550),则检索与该固有ID关联的信息是否记录在数据库中(S2551)。在记录在数据库中的情况下(S2552),进行向与固有ID建立关联而记录在数据库中的服务器的重新指向(S2554)。假如在没有关联建立的情况下,进行向错误页的重新指向(S2553)。
如以上这样,进行预先固定了RF-ID的信息的邮寄物与图像服务器的图像信息之间的关联建立,通过将进行了关联建立的邮寄物靠近电视机上,能够不进行邮寄物的RF-ID的改写,而阅览记录在图像服务器中且与邮寄物固有ID建立了关联的图像或图像组。这即使在例如在外出地等不能进行邮寄物的RF-ID的改写的情况下或邮寄物的RF-ID为不能改写的情况下,也能够进行服务器的图像与邮寄物的关联建立,能够使接受到邮寄物的一侧阅览与邮寄物建立了关联的图像。
另外,在本实施方式中,在对服务器访问后发送邮寄物固有ID,但也可以根据记录在邮寄物中的邮寄物固有ID和服务器地址生成URL、使用它对服务器访问。在此情况下,能够同时进行向服务器的访问和邮寄物固有ID的发送。
根据本实施方式,即使是例如如观光地等那样不能进行RF-ID的改写的环境下,也能够将摄影的照片与明信片建立关联,通过将建立了关联的明信片向熟人发送,接受到明信片的熟人通过将明信片靠近电视机上而能够阅览观光地处的照片。这样,即使是不能进行RF-ID改写的环境,也能够制作与服务器的图像信息进行了关联建立的邮寄物,能够向想要使其阅览的对方发送。
另外,在摄影装置中具备用来改写邮寄物的RF-ID的RF-ID写入器功能的情况下,与接着说明的实施方式A6的在电视机装置中将邮寄物与服务器的图像信息建立关联的流程处理是相同的,所以这里的说明省略。
(实施方式A6)
在本发明的实施方式A6中,对在由摄影装置摄影的图像被上载到图像服务器中之后、图像发送侧的使用者(以后记作发送者)从图像服务器的图像中选择图像组、将用来对该图像组访问的信息记录到邮寄物上的RF-ID中、向图像接收侧的使用者(以后记作接收者)的地点邮寄、使用该邮寄物上的RF-ID实现接收者向图像服务器的图像组的访问的结构进行说明。
图384是表示本发明的实施方式A6的图像发送侧的结构的概略图。
图385是表示本发明的实施方式A6的图像接收侧的结构的概略图。
另外,在图384和图385中,对于与图1及图3相同的构成要素使用相同的标号而省略说明。
在图384和图385中,邮寄物3001表示从图像发送侧向图像接收侧邮寄的明信片、或信封、便笺等的邮寄物,RF-ID部3002是可改写的RF-ID,其至少一部分的区域内装有可改写的存储器部3003。RF-ID部3002粘贴或水印在邮寄物3001上,与邮寄物一起向图像接收侧递送。
此外,关于RF-ID部3002,如在前面的实施方式中叙述那样,用来识别该RF-ID部所属的媒体是邮寄物的介质识别信息记录在存储器部3003中。
在图385中,电视机3045是具有与在前面的实施方式中叙述的图384的电视机45同样的功能的设置在图像接收侧的电视显示装置,与图384的电视机45同样,具有RF-ID读写器部3046(相当于图384的RF-ID读写器46)、和显示部3047(相当于图384的显示部110),而且通过在图中没有表示的网络连接机构与因特网40连接。
关于上述结构,接着说明其动作。
<图像发送侧的图像组选择、向邮寄物的写入>
在图384的图像发送侧,由摄影装置1摄影的图像被使用搭载在摄影装置1中的无线LAN、或WiMAX等无线通信用的第2天线20向无线接入点传送,经由因特网40作为图像服务器42的图像数据50记录。并且,将摄影装置1向电视机45的RF-ID读写器46靠近,通过经由用于搭载在摄影装置1中的RF-ID的第1天线21的无线通信,建立与电视机45的连接。电视机45从摄影装置1取得用于向图像服务器42的图像数据50的访问的信息,将图像数据50的图像下载而进行向显示部110的显示。以上的动作与在前面的实施方式中叙述的动作是同样的,仅叙述概要。
接着,发送者一边确认显示在电视机45的显示部110上的图像,一边按每个图像设定表示是否是向接收者发送的图像、换言之是否许可接收者的阅览的发送图像选择信息。进而,也可以对接收者设定在前面的实施方式中叙述的显示限定、幻灯放映、打印等利用方式信息。将这些发送图像选择信息和利用方式信息向图像服务器发送、记录,将由发送图像选择信息选择为发送图像的图像的集合作为图像组由图像服务器管理。
图386是实施方式A6的图像发送侧电视机的动作流程图。
以下,使用电视机45的动作流程图386说明将关于由发送者选择的图像组的信息记录到邮寄物3001中的过程。
发送者在上述那样设定了发送图像选择、利用方式信息的图像组的制作完成的状态下,将具有RF-ID部3002的邮寄物3001向电视机45的RF-ID读写器46靠近,RF-ID部3002和RF-ID读写器46能够无线通信。
电视机45如果能够经由RF-ID读写器46与邮寄物3001上的RF-ID部3002通信,则进行记录在存储器部3003中的信息的读入(S3101),根据其中的介质识别信息识别当前的通信对象是邮寄物,转移到对邮寄物的写入处理的流程(S3102)。另外,对于步骤S3102中的条件判断不成立的情况没有特别触及,但转移到对应于各媒体的处理。
对于邮寄物3001的写入处理首先经由因特网40向图像服务器42访问(S3103),图像接收侧从图像服务器42取得用来对上述的图像服务器42上的图像组访问的服务器URL、图像组地址等的图像组指定信息(S3104)。
从图像服务器取得的图像组指定信息为了对邮寄物3001内的存储器部3003进行写入,经由电视机45的RF-ID读写器46向邮寄物3001的RF-ID部3002发送,由RF-ID部3002向存储器部3003的可改写区域记录(S3105)。
如以上这样,由发送者将记录有图像组指定信息的邮寄物3001投递,邮寄到图像接收侧的使用者的地点。
<图像接收侧的图像再现及阅览>
图387是实施方式A6的图像接收侧电视机的动作流程图。
接着,使用作为图像接收侧结构的概略图的图385和作为图像接收侧电视机的动作流程图的图387对图像接收侧进行说明。
在图385中,接收者接受从发送者邮寄来的邮寄物3001,接收者通过RF-ID部3002或记载在邮寄物3001上的字符信息、或外观,辨识出在该邮寄物中装入有用于向图像的访问的机构。这里,接收者仅理解能够通过邮寄物3001进行向图像的访问就可以,不需要对RF-ID部3002的图像组指定信息等特别认识。
接收者在将图像再现及阅览时,通过将邮寄物3001向设置在图像接收侧的电视机3045的RF-ID读写器部3046靠近,能够开始图像的阅览。
如果邮寄物3001上的RF-ID部3002充分接近于电视机3045的RF-ID读写器部3046,则RF-ID读写器部3046经由未图示的RF-ID读写器部3046和RF-ID部3002的两者的天线进行供电,由此将邮寄物3001的RF-ID部3002启动,开始电视机3045与邮寄物3001的RF-ID部3002的无线通信。如果开始无线通信,则电视机3045进行记录在RF-ID部3002的存储器部3003中的信息的读入(S3151)。
在根据读入的信息中的介质识别信息识别出当前的通信对象是邮寄物(邮递物)的情况下,转移到将通过发送者设定的图像组从图像服务器42读出的处理的流程(S3152)。
向图像服务器42的访问可以根据在前面的步骤S3151中从RF-ID部3002读入的信息中的图像组指定信息、例如根据服务器URL、图像组地址等,生成用于向图像服务器42上的图像组的访问的URL,并经由因特网40进行访问(S3153)。
在以上的过程中,与图像服务器42连接的电视机3045根据图像服务器42上的图像数据50,按照图像服务器42管理的图像组的发送图像选择信息,读入被许可显示的图像(S3154),将读入的图像显示在显示部110上(S3155)。
进而,经由电视机3045,接收者按照图像服务器42管理的图像组的发送图像选择信息和利用方式信息,能够利用幻灯放映的再现、图像的印刷、还有向未图示的附属于或外部连接在电视机3045上的存储媒体的图像的下载等功能。
除此以外,上述的图像的印刷不仅是通过未图示的LAN上的打印机的印刷,也可以进行经由因特网40的对照片打印服务的印刷委托。
如以上这样,根据本发明的上述结构,通过由邮寄物3001上的RF-ID部3002将图像组指定信息传递给图像接收侧的电视机3045,不需要花费进行用来取得图像的网络访问目标的字符输入作业等的工夫。即,通过将邮寄物3001向电视机3045靠近的、直观且简单的操作,能够进行向保存在图像服务器42中的图像数据50的访问,不对接收者要求进行菜单选择及字符输入等的复杂的步骤的知识,而实现了经由图像服务器的图像的交接。
另外,在上述本实施方式中,设邮寄物3001为预先粘贴或水印了RF-ID部3002的状态进行了说明,但也可以通过在通常的明信片或便笺等的邮寄物上粘贴另外提供的单体的RF-ID部3002来制作,由此,能够后来粘贴RF-ID部而得到上述的效果,所以产生能够适用于与发送侧使用者的喜好相应的任意的邮寄物使用的新的优点。
此外,在向图像服务器42的访问需要登陆操作的情况下,也可以在向邮寄物3001上的RF-ID部3002的存储器部3003的可改写区域的写入时(步骤S3105)记录服务器登陆ID和服务器登陆口令。进而,登陆ID和登陆口令优选的是不是明文、而通过以加密的形式记录来确保安全性。
此外,在上述本实施方式中,发送图像的选择、利用方式信息的设定、以及向邮寄物3001上的RF-ID部3002的图像组指定信息的写入由图像发送侧的电视机45进行,但如果代替它而由具有RF-ID读写器功能的摄影装置1进行发送图像选择信息和利用方式信息的设定、图像组指定信息的写入,也与上述同样,能够得到可通过接收者的简单的操作进行的图像的交接的效果。
<派生的另一例>
图388是表示本发明的实施方式A6的另一方式的图像发送侧的电视机45的动作的流程图。
另外,在图388中,作为与图386相同的处理的步骤使用相同的标号而省略其说明。
在本实施方式中,在邮寄物3001上的RF-ID部3002的存储器部3003中预先记录有邮寄物固有ID。并且,该邮递物固有ID记录在存储器部3003的ROM区域中在能够降低意外的动作带来的数据损坏及数据篡改等的风险的方面是优选的。
图389是表示实施方式A6的邮寄物存储器部的记录信息的一例的结构图。
将表示此时的存储器部3003的数据构造的一例的结构图在图389中表示。
根据上述RF-ID部,由图像发送侧的电视机45进行发送图像选择信息、利用方式信息的设定,在图像组设定在图像服务器42上的状况下,按照图388(a)的流程,电视机45的动作成为以下这样。
在邮寄物RF-ID的信息读入(S3101)、基于介质识别信息对于是邮递物进行认定(S3102)后,电视机45取得邮寄物固有ID。关于邮寄物固有ID,使用在步骤S3101中读入的信息、或重新从RF-ID部3002取得都可以。接着,电视机45经由因特网40进行向图像服务器42的访问(S3202),从电视机45将邮寄物固有ID向图像服务器42发送,图像服务器42进行发送来的邮递物固有ID与图像组的地址的关联建立,将该信息记录及管理(S3203)。
电视机45由图像服务器42取得用于从图像接收侧对图像服务器42访问的服务器URL(S3204),将所取得的服务器URL经由RF-ID读写器46写入到邮寄物3001的RF-ID部3002的存储器部3003的可改写区域中(S3205)。
如以上这样,如果在图像服务器侧将图像组与邮寄物固有ID建立关联而记录及管理,则能够按照邮递物固有ID将利用方式信息分开管理,在存在多个邮寄物3001的情况下,能够按照各个邮递物、即按照不同的接收者变更图像接收时的动作。
这在本实施方式的最初叙述的结构中,通过按照各个邮递物分别设定图像组分别生成不同的图像组地址、分别写入到RF-ID部中,从而得到对图像接收侧的同样的效果,但发生分别设定图像组的图像发送侧的麻烦的操作。
因此,如果是相同的发送图像的选择,则通过如上述那样使用邮递物的固有ID分别记录、管理利用方式信息,能够得到减轻发送者的操作的减轻的效果,在图像服务器侧能够得到与不需要分别保管发送图像选择信息对应的存储容量降低的效果。
关于图388(b),相对于图388(a)不同的部分是步骤S3214和步骤S3215,在步骤S3214中,除了服务器URL以外还取得图像组地址,在步骤S3215中,除了服务器URL以外还将图像组地址向RF-ID部3002的存储器部3003的可写入区域写入。
由此,在从图像接收侧接收图像时,进行指定了图像服务器42的图像组的访问,但此时,通过仅在由图像服务器记录及管理的图像组内的邮寄物固有ID与请求访问的接收者使用的邮递物的固有ID一致的情况下许可访问,能够实现安全性的提高。
以往为了使处于远处的对象用电视机等的大画面显示设备观看图像,需要远处侧的用户学习设备操作、或掌握操作者去往远处而操作设备、或远程操作处于远处的显示设备,但与实施方式A4同样,在本系统中,远处的用户能够通过将带有RF-ID的明信片等、物理的媒介物向显示设备靠近的简单的操作容易地阅览图像。在实施方式A4中,不是用户(图像的摄影/发送者及图像的阅览者)进行带有RF-ID的明信片的制作及向RF-ID的数据写入,而是服务行业者进行的方式,但在本实施方式中,在图像发送侧的使用者(发送者)进行带有RF-ID的明信片的制作及向RF-ID的数据写入这一点上不同。
(实施方式A7)
在本实施方式中,关于使用本发明的RF-ID卡变更设备的设定的方法进行叙述。
以下,使用图390、图391,关于使用RF-ID卡变更记录机的设定的方法进行说明。
图390是表示本发明的记录机的结构的块图。
记录机2000进行从调谐器2001取得的广播内容的向HDD2008或光盘驱动器2009的录像、或录像内容或由光盘驱动器2009读取的影像、音乐内容在TV45中的再现。
输入信号处理部2002具备将从调谐器2001输入的模拟信号变换为数字信号的A/D变换器、将被编码(scramble)的内容解码的解码器、变换为MPEG-2等影像格式的编码器,将被输入的影像、声音信号变换为规定的影像、声音格式形式。
输出信号处理部2003具备将数字信号变换为模拟信号的D/A变换器、以及进行从MPEG-2等的影像格式的解码的解码器,进行向TV45的影像、声音输出。
系统控制部2004控制记录机2000的动作,具备切换记录机2000的设定的设定信息处理部2011。关于设定信息处理部2011在后面详细说明。
存储器2005保存有作为记录机2000的识别信息的记录机ID2012、及作为记录机2000的设定信息的设定信息2013。
操作输入部2006受理来自未图示的遥控器或前面板的按钮等的通过用户操作的输入。
通信部2007通过因特网或LAN等进行向服务器42的连接。
HDD2008是记录从输入信号处理部2002得到的录像内容及内容列表等的区域。
光盘驱动器2009是进行DVD或Blu-ray Disc等的光盘的记录再现的驱动器,进行从输入信号处理部2002得到的录像内容及内容列表等的记录、以及装入有影像、音乐内容的光盘的再现。
记录机2000的输入信号处理部2002、输出信号处理部2003、系统控制部2004、HDD2008、光盘驱动器2009经由总线2010相互连接。
这里,关于设定信息处理部2011详细地说明。
设定信息处理部2011根据保存在存储器2005中的设定信息2013,进行记录机2000的菜单画面等的显示设定、录像·再现模式设定、录像内容的章节设定、对应于用户的喜好等的节目推荐等的设定。具体而言,例如读取保存在设定信息2013中的表示“菜单画面背景色:黑”等的识别符,当进行向输出信号处理部2003的菜单画面输出请求时,输出将背景色用“黑”显示的指示。
另外,设定信息2013也可以保存在HDD2008、或未图示的SD卡等的外部记录机构中。特别是,关于保存在HDD2008中的录像内容的章节等的设定信息、及尺寸较大的信息等是如果保存在HDD2008中,成为高效的信息。
设定信息2013以往在设备购买时已经设定、或通过来自操作输入部2006的用户操作设定,但在本发明中,可以将设定信息2013基于从RF-ID读写器46得到的信息变更。
图392是表示通过用记录机2000的RF-ID读写器46读取从而变更记录机2000的设定的RF-ID卡的结构的块图。
RF-ID卡2100由存储器2101、天线21、电源部91、数据接收部105、数据转送部108、处理部2102、记录部106、再现部107构成。
如果将天线21向RF-ID读写器46靠近,则从RF-ID读写器46经由天线21对电源部91供电,对RF-ID卡2100的各部供给电源。
来自RF-ID读写器46的数据记录及再现等的信息由数据接收部105接收,向处理部2102发送。
处理部2102进行由记录部106进行的向存储器2101的数据记录、及由再现部107进行的从存储器2101的数据的再现。
数据转送部108将从处理部2102发送的数据经由天线21向RF-ID读写器46发送。
在存储器2101中,保存有UID75、介质识别信息111、设备操作信息2103。
UID75和介质识别信息111是用于RF-ID卡2100识别的信息。
UID75是RF-ID卡2100的固有ID。
在介质识别信息111中,记录有表示是卡的识别符。
设备操作信息2103保存有关于使用RF-ID卡2100进行操作的对象的设备的信息和关于设备的操作的信息。
在操作设备识别信息2104中,保存有表示进行操作的设备的种类的信息。保存的信息使用与介质识别信息111相同的识别符,在图391中记录有是记录机的识别符。
对象设备信息2105保存有在想要仅对特定的设备进行操作的情况下使用的信息,在图391中,保存有作为记录机2000的识别信息的记录机ID2012。另外,在使用本发明的RF-ID卡2100的设备受到限制的情况下,例如在仅由记录机使用的情况下,操作设备识别信息2104及对象设备信息2105也可以不包含在设备操作信息2103中。此外,在设定信息处理部2011使设定为通过卡变更设定的结构的情况下,介质识别信息111也可以不包含在存储器2101中。
操作指示信息2106是表示设备中进行的操作内容的信息,在图391中,保存有表示设定变更的信息2109、表示进行设定的变更的对象的信息2110、表示在取得设定信息时实施通信的信息2111。
另外,操作指示信息2106并不仅限于针对1个操作的信息,也可以由关于多个操作的信息构成,也可以为组合了多个操作的程序。
通信信息2107是在由操作指示信息2106指示进行通信而取得时关于进行访问的服务器等的信息。在图391中,保存有URL2112、登陆ID2113、口令2114。另外,也可以不是URL2112、而记录有IP地址等,在用公司内或家庭内网络向其他设备访问的情况下,也可以记录有确定MAC地址等的设备的信息。
图392是关于在服务器中登录设定信息的步骤的流程图。
以下,使用图392,关于将记录机2000的设定使用RF-ID卡2100登录到服务器中的步骤进行说明。
在步骤2201中,如果受理了用户的从操作输入部2006的输入,则设定信息处理部2011对输出信号处理部2003进行向TV45的消息输出请求,在TV45的画面上显示“请将RF-ID卡靠近”的消息。另外,消息的显示也可以在记录机2000的未图示的控制台上显示。此外,在进行用户的操作输入时,也可以请求口令或生物体认证等的认证、在认证后转移到登录处理。进而,也可以不进行向TV45的消息输出、而在记录机2000的使用时,通过将RF-ID卡2100靠近RF-ID读写器46上来进行步骤2203以后的处理。另外,也可以显示向哪个地方登录设定信息2013的询问消息、进行向用户的选择的地方的登录。例如,既可以在RF-ID卡2200中登录设定信息2013,也可以向与服务器42不同的服务器进行登录。
如果在步骤2203中检测到RF-ID卡,则实施相互认证处理。
在步骤2204的认证判断为OK的情况下,前进到步骤2205而继续处理,在认证判断为NG(不成功)的情况下,回到步骤2202而重复RF-ID卡检测处理。
在步骤2205中,从RF-ID卡2100的存储器2101取得UID信息75。
在步骤2206中,从RF-ID卡2100的存储器2101取得通信信息2107。另外,在RF-ID卡2100的存储器2101中没有登录通信信息的情况下,也可以发出向用户的通信信息输入请求。此外,当在步骤2201中进行了向没有登录在RF-ID卡2100中的部位的登录指示时,在该步骤中什么都不做。此外,在RF-ID卡2100中登录有多个通信信息2107的情况下,也可以将通信信息一览显示、用户进行选择。
在步骤2207中,从存储器2005取得记录机ID2012和设定信息2013。另外,设定信息也可以不是当前的信息、而是在设定登录实施时等用户输入的信息。
在步骤2208中,设定信息处理部2011对通信部2007发出向通信信息2107的URL2112的访问请求。在向URL2112的访问时,使用登陆ID2113和口令2114。
在步骤2209中,进行访问是否成功的判断,在访问成功的情况下,前进到步骤2210而继续处理,在访问失败的情况下,原样结束处理。
在步骤2210中,将UID信息75、从存储器2005取得的记录机ID2012、设定信息2013向服务器42发送。
在步骤2211中,根据在2201中指定的操作及选择的设定信息2013的保存位置、在步骤2207中取得的设定信息2013、在步骤2206中取得的通信信息2107,生成操作指示信息2106。
在步骤2212中,进行与步骤2202同样的处理,在TV45的画面上显示“请将RF-ID卡靠近”的消息。
在步骤2213中,如果检测到RF-ID卡,则实施相互认证处理。
在步骤2214的认证判断为OK的情况下,前进到步骤2215而继续处理,在认证判断为NG的情况下,回到步骤2212而重复RF-ID卡检测处理。
在步骤2215中,从RF-ID卡2100的存储器2101取得UID信息。
在步骤2216中,确认在步骤2205中取得的UID信息75与在步骤2215中取得的UID信息是否一致,如果一致,则前进到步骤2217而继续处理,如果不一致,则回到步骤2211重复RF-ID卡检测处理。
在步骤2217中,进行将保存在存储器2005中的未图示的操作设备识别信息2104、记录机ID2012、在步骤2211中生成的操作指示信息2106、通信信息2107向RF-ID卡2100发送,记录到存储器2101中,结束处理。
图393是表示登录在服务器中的设定信息的结构的图。
使用图393说明通过图392的步骤登录在服务器42中的设定信息。
设定信息2250与UID信息75、对象设备信息2105建立关联而登录,具体而言,登录有表示“菜单画面背景色:黑”等的信息的识别符。各设定信息的末尾的“A”、“B”表示是不同的设定。
如UID0001那样,也可以对1个UID登录多个设定信息,对象设备信息2105如REC-0001的项目那样,也可以对1个对象设备信息登录与多个UID建立了关联的设定信息。另外,在设定信息中也可以包含有变更对象信息2110。
图394是表示登录在RF-ID卡中的设备操作信息的结构的图。
接着,使用图394,关于通过图392的步骤向RF-ID卡2100的存储器2101登录的设备操作信息2103进行说明。
作为UID信息75而记录有“UID0001”,作为介质识别信息111而记录有“卡”。
在设备操作信息2103中,登录有操作设备识别信息2104、对象设备信息2105、操作指示信息2106、通信信息2107所成的组。另外,通信信息2107也可以作为与其他信息没有关联的信息登录。例如,也可以登录有1个通信信息,在使用RF-ID卡2100时总是进行向相同的服务器等的访问。
操作指示信息2106由指示内容信息2260、指示对象信息2261、通信实施信息2262构成。在指示内容信息2260中,记录有表示对由对象设备信息2105指定的设备执行的处理的识别符,在指示对象信息2261中,作为进行操作的对象,例如对REC-0001记录有表示菜单画面模式、录像模式等的设定的识别符。在通信实施信息2262中,记录有表示在进行指示内容信息2260的处理时是否进行通信的识别符。另外,在使用RF-ID卡2100进行的操作被限制为设定变更的情况下,设备操作信息2103也可以仅由通信信息2107构成。
在通信信息2107中,在通信实施信息2262中指定了实施通信的情况下,记录有进行通信的服务器等的URL、登陆ID、口令等。
图395是关于用RF-ID卡更新记录机的设定信息的步骤的流程图。
接着,使用图395,关于使用RF-ID卡2100变更记录机2000的设定的步骤进行说明。图395是表示记录机2000的设定信息处理部2011使用RF-ID卡2100的信息更新设定信息2013的步骤的流程图。
首先,如果在步骤2301中检测到RF-ID卡2100,则在步骤2302中实施相互认证处理。
如果步骤2303的判断为OK,则前进到步骤2304而继续处理,如果判断是NG,则结束处理。
在步骤2304中,从RF-ID卡2100的存储器2101取得UID信息75和设备操作信息2103。
在步骤2305中,检索包含在设备操作信息2103中的操作设备识别信息2104,与从记录机2000的存储器2005取得的未图示的设备识别信息比较。
在步骤2306中,如果在步骤2305中进行的比较的结果一致,则前进到步骤2307而继续处理,如果不一致,则前进到步骤2314。
在步骤2314中,判断是否已全部检索了操作设备识别信息2104,在检索了全部的操作设备识别信息2104的情况下结束处理。
在步骤2307中,检索对象设备信息2105,与从记录机2000的存储器2005取得的记录机ID2012比较。
在步骤2308中,如果在步骤2307中进行的比较的结果一致,则前进到步骤2309而继续处理,如果不一致,则结束处理。
在步骤2309中,取得与设备操作信息2103、对象设备信息2105对应的操作指示信息2106。
在步骤2310中,取得与设备操作信息2103、对象设备信息2105对应的通信信息2107。
在步骤2311中,从操作指示信息2106的指示内容信息2260中取得是设定变更处理的情况,对服务器42访问,取得设定信息2250。该步骤的处理在后面使用图396详细说明。
在步骤2312中,判断是否正确地进行了设定信息2250的取得,在正确地取得了的情况下,前进到步骤2313,由设定信息处理部2011将记录机2000的存储器2005的设定信息2013更新而结束处理,在未能正确地取得的情况下,原样结束处理。
图396是关于从服务器取得设定信息的步骤的流程图。
以下,使用图396详细地说明图395的步骤2311的处理。图395是表示设定信息处理部2011对服务器42访问而取得设定信息2250的步骤的流程图。
在步骤2351中,由通信部2007对包含在通信信息2107中的URL2112进行访问。
在步骤2352中,设定信息处理部2011将包含在通信信息2107中的登陆ID2113和口令2114对通信部2007发送,进行登陆处理。
在步骤2353中判断为认证OK的情况下,前进到步骤2354而继续处理,在判断为认证NG的情况下,作为设定信息2250的取得失败,结束处理。
在步骤2354中,检索服务器42的UID信息,在步骤2355中,在有与在图395的步骤2304中取得的UID信息75一致者的情况下,前进到步骤2356而继续处理,在没有一致者的情况下,前进到步骤2354而反复实施UID信息的检索,直到在步骤2359中判断为已检索全部的UID信息。在步骤2359中判断为已检索全部UID信息的情况下,作为设定信息2250的取得失败,结束处理。
在步骤2356中,检索对应于UID信息75的对象设备信息,在步骤2357中,在有与在图395的步骤2305中取得的对象设备信息2105一致者的情况下,前进到步骤2358而继续处理,在没有一致者的情况下,前进到步骤2354而反复实施对象设备信息的检索,直到在步骤2360中判断为已检索全部的对象设备信息。在步骤2360中判断为已检索全部的对象设备信息的情况下,作为设定信息2250的取得失败,结束处理。
在步骤2258中,取得与UID信息75、对象设备信息2105对应的设定信息2250,结束处理。
如以上所述,如果使用RF-ID卡2100,则用户不用意识到复杂的处理而能够实施记录机2000的设定,能够得到即使是不熟悉设备的操作的用户也能够容易地进行记录机的设定的变更的效果。另外,能够对记录机进行的操作不仅是设定的变更,例如如果在指示内容信息中指定录像内容列表取得,则也可以将记录机的录像内容列表登录到RF-ID或服务器上、从其他设备参照。
图397是表示登录在由记录机使用的RF-ID卡中的设备操作信息的结构的图。
进而,如果使用在图397中表示的RF-ID卡,则仅通过靠近RF-ID卡就能够进行预约录像。如果使用图397的对应于Index1(索引1)的变更对象信息,则通过在由指示对象信息指定的“节目ID”、“录像模式”的设定中进行预约录像,能够不对服务器访问而进行预约录像,如果使用对应于Index2的变更对象信息,则指定由指示对象信息指定的“节目代码”,从服务器取得节目ID或开始时间和结束时间、频道的信息,通过“录像模式”的设定能够进行预约录像。进而,通过在指示对象信息中进行“推荐节目”的指定而从服务器取得节目ID,能够从服务器取得推荐的内容并进行预约录像。如果使用该功能,则也可以考虑例如将RF-ID卡作为节目向导杂志的附录而减轻预约录像的操作量的服务。此外,如果作为指示内容信息而设定下载、作为指示对象信息而设定功能限定版的影像或软件、作为通信信息而使用设定了下载站点的URL的RF-ID卡,则也可以考虑通过免费分发的RF-ID卡试用功能限定的内容而由中意的用户进行购买的服务。
另外,在本实施方式中,举记录机为例进行了说明,但本发明的适用范围并不限于记录机。
例如,通过在TV中具备RF-ID卡的读写器和设定信息处理部,可以将接通电源之后的初始显示频道及初始音量的设定、将成人广播及暴力场景等除外的童锁设定、中意的频道跳过广告设定、画面的对比度及明亮度设定、语言设定、连续使用时间设定等作为变更对象信息登录、进行对应于用户的使用便利的设定。此外,在汽车导航系统(汽车导航仪)中具备RF-ID卡的读写器和设定信息处理部的情况下,通过在指示内容信息中指定“强调显示”、在指示对象信息中指定“地标信息”,在将指定的地标用汽车导航仪显示时,能够进行变更字符字体及尺寸、或变更颜色等的强调显示。另外,地标信息也可以从服务器取得。
图398是表示登录在由汽车导航仪使用的RF-ID卡中的设备操作信息的结构的图。
由此,例如可以将记录有在图398中表示的设备操作信息的RF-ID卡在高速道路的服务区或立体交叉道路、观光地等散发、也用于将当前有事件发生等的推荐的地标强调显示等的用途。进而,如果在笔记本PC中具备RF-ID卡的读写器和设定信息处理部,则能够设定画面的分辨率及桌面上的图标等的配置、壁纸、屏保程序、驻留软件等的启动设定、使用的周边设备、鼠标等的习惯用手设定等,仅通过拿持RF-ID卡,即使是出差地等的PC,也能够用通常使用的设定进行操作。此外,也可以在游戏机中具备RF-ID卡的读写器和设定信息处理部、例如在朋友的家中等用作为指示内容信息而设定了设定变更的RF-ID卡设定控制器的按键配置或菜单画面结构,或读入保存数据等。进而,也可以考虑作为指示内容信息而将设定了下载的RF-ID卡作为杂志等的附录,进行追加脚本及稀少项目等的下载的服务。
本发明的RF-ID卡在家庭内的家电由网络连接时,通过将例如符合个人的喜好的空调温度或洗澡的热水器的设定等登录在RF-ID卡中、靠近家庭内具备的RF-ID读写器上而一齐进行家电的设定,或通过将保管在电冰箱中的食品的阅览操作登录在RF-ID卡中、取得预先由在食品上附带的标签等取得登录在电冰箱的存储器中的食品的信息、或用照相机将电冰箱中摄影而得到的影像,由此用TV的读写器确认食品列表等,能够进行各种用途下的使用。另外,也可以将指定设备的RF-ID卡(例如表示“制暖”、“制冷”、“暖炉”、“电风扇”的4种卡)、和指定设备的设定的RF-ID卡(例如表示“弱”、“中”、“强”的3种卡)等组合、或将具有上述设备指定、设备设定指定的各个功能的多个RF标签装备在1片RF-ID卡中,对设备的设定进行用户定制。
另外,本发明的适用范围并不限定于在到目前为止的实施方式中叙述的方法。在不脱离本发明的主旨的范围内将上述实施方式的构成要素及特征任意地组合而得到的方式、以及本领域的技术人员对上述实施方式实施变形而得到的方式也包含在本发明中。
例如,在两个用户(设为用户A和用户B)之间进行照片的交换的方式中,作为用户B阅览用户A摄影的照片的方法,通过将根据用户B的TV的设备ID和用户B拥有的预先保存有中继服务器的URL的RF-ID(设为RF标签B)生成的信息(设为设备生成信息B)向用户A以邮件等传送并记录到RF标签B中,用户A通过与设备生成信息B建立关联而在中继服务器中保存登录有照片的服务器的URL,由此用户B仅通过将RF标签B靠近TV的RF-ID读写器上就能够阅览用户A摄影的照片。另外,如果采用以下方法:在标签B中预先登录用户A的邮件地址,用户B仅通过将标签B靠近TV的RF-ID读写器上,就自动地进行设备生成信息B向标签B的写入、以及向用户A通知设备生成信息B,则即使在用户B不熟悉设备的使用方法的情况下也能够进行照片的交换。此外,通过用户A递送URL、登陆ID、口令的至少1个用设备生成信息B加密而登录到RF-ID中的明信片,能够将照片的阅览限制为用户B的TV。进而,在从用户A将带有发送用的RF-ID和返送用的RF-ID的两个RF-ID的明信片向用户B发送的情况下,通过用户A预先在返送用的RF-ID中登录从自己的TV等生成的设备生成信息A,用户B通过在返送时将用户B登录照片的服务器的URL、登陆ID、口令用设备生成信息A加密而记录到返送用的RF-ID中,或在登录照片时用户B与设备生成信息A建立关联而登录等,能够限制许可用户B登录的照片的阅览的设备。
另外,邮寄物上附带的RF-ID的邮寄物固有ID也可以为将在多个邮寄物间共通的组ID部与按照邮寄物设定的固有ID部组合的结构。通过代替将服务器的照片与邮寄物固有ID整体建立关联而与上述组ID部建立关联登录,由此在对多个对象递送与照片建立了关联的带有RF-ID的明信片时,能够省略进行多个固有ID的登录的工夫。此外,也可以将与组ID部建立关联而登录的服务器的照片根据固有ID部切换阅览许可/禁止。由此,例如在对邮寄物用打印机进行目的地住址等的印刷的情况下,通过在打印机中具备RF-ID读写器而将邮寄物固有ID的固有ID部在印刷时读取,能够进行住址簿与固有ID部的对应建立,能够以住址簿进行服务器上的照片阅览的许可/禁止的管理。
另外,也可以在明信片或卡上具备多个功能不同的RF标签,将不使用的RF标签的通信切断,由此在1张明信片或卡中切换多个功能。例如,通过在明信片的上部具备具有将照片进行幻灯放映显示的功能的RF标签、在下部具备具有将影像再生的功能的RF标签,能够根据将明信片的上部、下部中的哪个向RF-ID读写器靠近来切换照片显示和影像再生功能。另外,也可以装备在明信片的表背面上,也可以具备使用将通信切断的材料的靠近来仅能够使用将盖打开的状态下的RF标签。
另外,也可以通过将照片登录到多个服务器中、将各个服务器的URL保存到RF标签中,由此对各个服务器访问而取得照片、进行一览显示。
另外,RF-ID读写器也可以不仅装备在设备中,而且装备在遥控器等的进行设备操作的输入机构中。例如,在用网络等将多个设备连接的情况下,也可以在集中进行多个设备的操作的输入机构中具备RF-ID读写器,进行各个设备的操作。进而,也可以在遥控器等输入机构中具备指纹认证或脸认证等生物体认证或口令等的个人认证机构,仅在个人认证完成的情况下进行RF标签的读写。相反,也可以将个人的认证信息预先记录在RF标签中、通过RF标签用设备或遥控器等进行个人认证。
另外,关于本发明的记载,较多使用RF-ID的用语。一般而言,RF-ID的用语在狭义上是指“在非易失性存储器中记录有识别信息的标签”,具有双重接口及安全功能的RF-ID使用“IC卡”等的用语。但是,本说明书的RF-ID并不限定于该狭义的用语。在本发明中用作“将个体识别信息记录在非易失性存储器中、能够将个体识别信息经由天线向外部发送的电子电路”的广义含义。
以往,不熟悉设备操作的人为了进行设备的复杂的设定,需要设备的销售者、修理者、服务者前往对象设备所在的地方而进行设定、或者远程操作对象设备。即,在远程操作的情况下也还是需要为了远程操作的设定而前往设备所在的地方。但是,如果如以上所述那样使用RF-ID卡2100,则用户能够不意识复杂的处理而实施记录机2000的设定,能够得到即使是不熟悉设备的操作的用户也能够容易地进行记录机的设定的变更的效果。
此外,本发明也可以在具备具有画面的设备、与上述设备通过通信路径连接的读取器装置、以及与上述读取器装置进行近距离无线通信的通信装置的通信系统中,作为将关于上述通信装置的图像对上述设备提示的图像提示方法实现,或者也可以作为一种与通信装置的识别信息一起保存在该通信装置内的程序实现,用由在与上述通信装置之间进行近距离无线通信的设备具备的虚拟机执行的代码记述、包括对用通信网络连接的服务器装置访问的步骤、将保存在访问的上述服务器装置中的图像中的对应于上述识别信息的图像从上述服务器装置下载的步骤、以及将下载的图像显示的步骤,或者也可以作为记录有这样的程序的CD-ROM等的计算机可读取的记录介质实现。
此外,有关本发明的通信装置当然能够适用于具备保存有识别信息及虚拟机用程序的RF-ID的所有的设备、例如照相机等的电子设备、电饭锅或电冰箱等的家电设备、牙刷等的日常用品。
图399是在TV等的遥控器上搭载有RF-ID读取器的情况下的实施方式的结构图。
图400是该实施方式的流程图。
这里,使用图399(a)、(b)的块图、图399(c)的流程图和图400的流程图说明在TV等的遥控器中搭载有RF-ID读取器的情况下的实施方式。
首先,如上述那样,照相机等的子通信机(子机)5050具有存储器52和天线21。如果使遥控器5051的天线5063向该天线21靠近,则从天线5063对天线21供给电源,将存储器52中的数据从天线21向天线5063传送。在遥控器5051侧由通信电路5064变换为数字数据,储存到存储器5061中(步骤5001a:图400)。如果将遥控器5051的发送部朝向TV45而按下发送开关5062(步骤5001b),则将存储器5061的数据经由光输出部5062使用光向TV的受发光部5058发送,向TV等的母机45发送(步骤5001c)。另外,这里的通信也可以不是光而是无线。
这里,如果回到图399(c)的流程图,则由于发明在社会系统中使用,所以需要对应于20年后、30年后。虚拟机语言等的程序已知有Java(注册商标)等,但预想到将来会被扩展、或者成为完全不同的效率较好的语言等的程序。因而,在本发明中,在TV等的母机45中记录有表示母机的虚拟机语言等的语言类型及版本的母机版本信息5059、n1(步骤5060i:图399(c))。在子机5050的存储器21中(图399(a)),在最开始记录有表示子机的程序的语言等的版本的子机版本信息5052、n2。在其之后有程序区域5053,记录有版本5055a、5055b、5055c的程序5056a、5056b、5056c,其后有数据区域5054。
在图399的流程图的步骤5060i中获得母机45的版本信息n1,获得子机的存储器中的版本信息n2(步骤5060a),选择n1≥n2的最大值的程序n(步骤5060b),执行其执行程序n(步骤5060c),在步骤5060d中,在有向因特网的连接的情况下,在步骤5060e中连接到服务器,向服务器发送设定在母机45中的语言信息5065(步骤5060f),服务器根据发送的语言信息5065,将该语言、例如法语的程序向母机传送而使其执行。或者也可以在服务器上执行该程序。
在没有连接到因特网的情况下回到步骤5060h,执行本地程序,将子机5050的属性信息、例如通知故障的情况的信息或记录的照片的张数等的信息显示在母机45的画面上。这样,在子机的存储器52中记录版本信息(子机版本信息)5052,按照版本记录以10年单位的周期进化的各代的程序、步骤及URL,所以具有即使经过20年30年也以相同的格式动作的效果。在图399(a)中表示了记录程序的版本、世代的例子,但通过如图399(b)那样将对应于版本5055d、5055e、5055f的URL等的服务器中的数据的地址、URL5057a、5057b、5057c记录,能够得到同样的效果。通过该方式,能够持续到将来实现下位兼容性。例如在今年购买的制品中搭载有RF-ID的情况下,如果设版本为1,则在20年后、30年后的母机45中记载有例如与版本1、2、3对应的JAVA(注册商标)等虚拟机语言等的程序,所以通过知道子机版本信息5052,母机向与该版本对应的母机的程序进行切换动作。此外,在30年后的子机21中记录有版本1、2、3的全部的程序,所以通过版本3的母机45得到最高的功能。并且,通过版本1的母机45得到较旧的版本的稍稍受限的功能,实现完全的兼容性。
说明图400的流程图。在步骤5001a中按下遥控器5051的读取开关5063,如果向子机5050的天线21靠近,则将子机的存储器52的数据储存到遥控器5051的存储器5061中。接着,如果在步骤5001b中将遥控器5051朝向TV等的母机45按下发送开关5063(步骤5001b),则通过光向母机传送存储器5061的数据(步骤5001c)。在本实施方式中,为了方便而将该数据称作标签数据。从标签数据提取或选择执行程序(步骤5001d),将提取或选择的执行程序使用母机的虚拟机语言执行(步骤5001e),将母机侧的因特网连接识别用信息读入(步骤5001f),如果到步骤5001为止识别用信息没有表示“能够连接到因特网”的情况下,在执行程序之中执行非连接时用的程序(步骤5001t),显示母机的画面的执行结果(步骤5001u)。在本发明中,在存储器52中,不仅记录有连接到因特网的信息,还记录有在非连接时动作的执行程序,所以具有在非连接时要求的最低的动作能够进行显示的效果。
回到步骤5001g,在“是”的情况下,执行包括上述程序的一部分的连接程序(步骤5001h)。
在此情况下,通过对标签数据之中的执行程序在图399(a)的数据区域5054中附加服务器的URL、用户ID或口令等数据而生成连接程序,由此能够扩展标签数据中的执行程序,并且能够减小存储器52中的非易失性存储器的容量。在此情况下,通过将存储器52的连接程序记录到程序区域5053的不能改写的ROM存储器等的存储器中、将服务器的URL等记录到可改写的数据区域5054中,能够降低芯片面积及成本。
在步骤5001i中连接到特定的URL的服务器,在步骤5001j中判断服务器侧是否请求了数据的上载,如果为“否”,则在步骤5001p中将数据或/且程序上载到服务器中。使用该数据由服务器执行程序(步骤5001q),将由服务器执行的结果向母机发送(步骤5001r),在母机的表面上显示执行的结果等(步骤5001s)。
回到步骤5001j,在“否”的情况下,将包括服务器的URL之中的特定的程序的信息下载(步骤5001k),将该下载的程序在母机中执行(步骤5001m)。并且,将该结果显示在母机的画面上。
通过耗电、体积及成本的制约,在RF-ID及子机侧的存储器容量中存在限制,不能存储通常的程序。但是,通过如本发明那样利用连接程序和服务器,具有能够使无限大的程序动作的显著效果。
也可以在服务器中执行巨大的程序,也可以执行从服务器下载的程序,它们包含在本发明的范畴中。
另外,在使用本发明的图399的实施方式中,设想TV用的遥控器进行了说明。在此情况下,遥控器由电池和用来切换TV频道的按钮、读取RF-ID的天线和通信电路、红外的发光部构成。如果代替遥控器而使用便携电话,也能够得到同样的效果。由于能够共用搭载在便携电话中的红外的发光部等,所以容易导入。由于具有便携的通信线路,所以直接连接到服务器,所以在性能方面没有变化。但是,由于发生通信费用,所以给用户带来负担。便携电话的画面与TV相比非常小。因而,设置由图399表示的发送开关5063,在TV处于附近的情况下,通过将便携电话的发光部朝向TV的方向、将上述的存储器52中的标签数据向TV直接传送,能够用分辨率较高的大的画面观看数据。此外,由于也不花费费用,所以对于用户而言益处较大。经由使用读取的标签数据的便携电话线路的信息交换与该发送开关联动而被中止。
在此情况下,与在图399中说明的遥控器同样,设为在便携电话中具备RF-ID(也可以是NFC通信部)的至少读取部的结构。可以预想到今后使便携电话具有RF-ID等的读取器功能。如果将RF-ID的读取器搭载在便携电话中,则在实施本发明时追加的成本变得非常小,对于用户而言益处较大。此外,不仅是遥控器、便携电话,通过PDA终端、笔记本PC、便携媒体播放器等也容易实现本发明。
(实施方式A8)
图401是表示网络环境的图。
在图401中表示在本实施方式中设想的家庭网络环境。假设在1个房屋内部中存在两个TV45、8001、各个TV具有RFID标签读写器和画面的显示部110、8003。此外,在各个TV上连接着运动图像服务器8004、8005,从运动图像服务器对TV使用有线或无线发送运动图像数据,能够使运动图像服务器的信息在TV上显示运动图像。这里,所谓运动图像服务器,是NAS等的存储设备或BD记录机等的记录设备。同样,也可以通过因特网对宅外的运动图像服务器访问。此外,假设家庭网络的用户拥有能够携带且能够进行运动图像的显示的移动AV终端8006。移动AV终端也与TV同样,具有RFID标签8007和运动图像显示部8008,能够通过无线对运动图像服务器访问。
在本实施方式中,在这样的环境中,设想了用户正用TV1(45)观看运动图像,但想用2层的电视机2(8001)观看的状况。在移动观看运动图像的情况下,希望不间断地观看运动图像的后续。但是,为了保持着安全性而不间断地使运动图像移动,需要取得用户的认证及定时的同步,用户必须进行复杂的操作。
本发明为了解决上述问题,通过使用RFID,通过很简单的交换来进行用户的认证及定时的同步等的处理。具体而言,使移动AV终端8006的RFID标签8007向TV1的RFID标签46接近,通过RFID标签进行用于认证及定时同步的信息的交换。
本发明通过上述结构,能够通过使移动AV终端与TV接触的很简单的动作进行运动图像的交接,大幅地提高用户的方便性。
图402是说明移动AV终端执行的各功能的功能块图。
进行运动图像的交接的用户按下运动图像交接按钮8050。当被按下运动图像交接按钮时,运动图像交接请求制作部8051从显示信息管理部8052取得当前显示在显示部8008上的运动图像信息,制作运动图像交接请求,写入到RFID的存储器8054中。在没有显示运动图像的情况下,变更为接受运动图像的模式,将接受运动图像的命令作为运动图像制作请求。假如在显示有运动图像的情况下,变更为将运动图像递交的模式,将运动图像递交命令和运动图像的信息作为运动图像交接请求。这里,所谓运动图像的信息,是由显示信息管理部管理的运动图像显示时间的信息和由通信·广播管理部8055管理的连接目标信息。在通信·广播管理部8055中,在将运动图像通过广播接口8056接收的情况下管理频道信息,在通过通信接口8057接收的情况下,管理运动图像服务器的识别符及运动图像的识别符。这里,运动图像服务器的识别符及运动图像的识别符,例如是IP地址、URL,只要是能够唯一地识别,是什么都可以。另外,运动图像交接按钮也可以分为接受运动图像的按钮和递交运动图像的按钮。此外,也可以通过按下运动图像交接按钮而在画面上显示是接受还是递交的选择分支。记录在RFID的存储器8054中的信息如果向其他RFID标签接近、则被从发送部8058通过无线天线8059发送。另外,在制作交接命令后、在经过一定时间也没有被发送的情况下,认为运动图像交接模式被解除,将存储器内的信息也丢弃。RFID的接收部8060接收运动图像交接应答。所谓运动图像交接应答,是对运动图像接受命令或运动图像递交命令的可否的应答,假设在针对运动图像接受命令为可以的应答的情况下包括运动图像的信息。运动图像交接应答被发送给通信·广播管理部,进行遵循应答的处理。在对运动图像接受命令返回了可以的应答的情况下进行运动图像接受处理。在包含在应答中的运动图像信息是频道信息的情况下,对广播接口8056通知该信息,接收该频道。此外,对显示管理部8061发出显示该频道的指示。在有通过移动AV终端的广播接口不能接收的频道信息(BS、CS、线缆TV的频道)的情况下,接收这些频道,向通信部8062委托向通信接口转送的终端的搜索。另外,转送的终端的搜索也可以在事前进行。在通过通信接口接收到的情况下也与通常同样显示在显示部8008上。在包含在交接应答中的运动图像信息是连接目标信息的情况下,对通信部8062通知该信息,将运动图像的发送请求向连接目标发送。在运动图像的发送请求中包含有运动图像的显示时间,匹配于该时间而请求数据的发送。另外,与通过广播接口的运动图像接收不同,有在通过通信接口的运动图像的接收中花费某种程度的时间的情况。这取决于用于通过通信接口接收的前处理及在通信缓冲器8063中临时储存运动图像数据的时间。在本方式中,也可以通过预测该时间、预先从通信部进行匹配于该时间的运动图像发送请求,来进行多余的数据发送及对其等待时间的削减。在此情况下,在显示时间修正部中进行修正,以便能够不间断地进行运动图像显示。这是因为,一般数字运动图像的数据储存在显示缓冲器8065中,一边由显示处理部8053进行处理一边由显示部8008显示,所以能够实现。在对于递交运动图像的命令返回了可以的应答的情况下,将画面显示消除。另外,画面显示既可以自动消除,也可以使用户选择。此外,也可以从递交到的一侧的终端接收到消除画面显示的指示后消除,也可以准备定时器、在经过一定时间后消除。
图403是说明TV执行的各功能的功能块图。
从RFID标签的天线8100接收到运动图像交接请求的接收部8101对通信·广播管理部8102递交数据。在接收到的数据是运动图像接受命令的情况下,发送在运动图像交接应答制作部8103中管理的显示运动图像的连接目标信息。进行了接收的运动图像交接应答制作部8103从显示信息管理部8104取得显示时间信息,制作运动图像交接应答,写入到RFID的存储器8105中。此时,如果得不到想要的信息,则制作不能交接的应答。将写入的交接应答通过发送部8106发送给移动AV终端的RFID。发送后的运动图像的显示结束处理与移动AV终端是同样的。在接收到的数据是运动图像递交命令的情况下,进行对应于在通信·广播管理部8102中包含的信息的处理。在频道信息的情况下,对广播接口8107通知,接收希望的频道下的信息,对显示管理部8108通知,变更显示。另外,在已经显示着运动图像的过程中接收到运动图像递交命令的情况下,既可以由优先级判断部8109进行应以哪个运动图像为优先的判断,也可以显示选择命令。在包括连接目标信息的情况下,对通信部8110通知,由其发送运动图像发送请求。然后的处理与移动AV终端是同样的,其他各部的功能也是同样的。
图404是在TV1(45)从运动图像服务器1(8004)正接收运动图像的情况下、移动AV终端8006从其交接该运动图像的情况下的顺序图。
用户为了交接运动图像而接通移动AV终端8006的电源。移动终端搜索无线LAN的接入点8009,建立无线连接。进而,通过DHCP等取得IP地址,建立IP连接。在是DLNA终端的情况下,也可以进行M-SEARCH等的DLNA终端搜索处理。用户按下运动图像交接按钮,在RFID的存储器内制作运动图像交接请求。进而,用户使移动AV终端的RFID8007与TV1的RFID46接近,将运动图像交接请求向TV1发送。在TV1中,通过接收到请求命令,制作运动图像交接应答(包括运动图像服务器1的IP地址和运动图像识别符、运动图像显示时间),向移动AV终端8006返送。另外,假设在TV1中的运动图像接收机构是HDMI线缆等的非IP连接的情况下、TV1也预先取得运动图像服务器的IP地址。此外,假设在运动图像被加密的情况下同时交换需要的安全关联信息(密钥等)。接收到运动图像交接应答的移动AV终端对包含在应答中的运动图像服务器1的IP地址发送运动图像发送请求(包括运动图像的识别符、显示时间)。接收到运动图像发送请求的运动图像服务器18004将运动图像的发送目的地切换为移动AV终端8006。不再接收到运动图像的数据的TV1(45)将运动图像显示设为OFF。
图405是在移动AV终端8006从运动图像服务器1(8004)接收到运动图像的情况下、TV2(8003)从其交接该运动图像的情况下的顺序图。
用户按下移动AV终端8006的运动图像交接按钮,制作运动图像交接请求(包括运动图像服务器1的IP地址和运动图像识别符、运动图像显示时间)。进而,用户使移动AV终端的RFID8007与TV2的RFID8002接近,将运动图像交接请求向TV2发送。TV2(8003)制作能够进行运动图像交接的应答,向移动AV终端8006返送。TV2(8003)将运动图像发送请求向运动图像服务器1(8004)发送。然后的处理与图404同样。
图406是说明移动AV终端的处理的流程图。
移动AV终端如果被用户按下交接按钮(S8300),则在画面为空白(或不是运动图像显示)的情况下(S8301)转移到接受运动图像的模式(S8302)。在画面不是空白的情况下显示选择画面(S8303)。在选择了接受的情况下(S8304),同样转移到接受运动图像的模式。在选择了递交的情况下,变更为递交运动图像的模式(S8305)。在接受运动图像的模式的情况下,移动AV终端将包括接受运动图像的命令的运动图像交接请求保存到自身的RFID的存储器内。用户使本终端的RFID向其他终端的RF-ID接近(S8306),将运动图像交接请求向其他终端发送(S8307)。此时,如果从其他终端接收到运动图像交接应答(S8308),则根据包含在应答内的信息进行处理。在没有得到应答的情况下,显示无应答的错误画面,结束处理(S8309)。在应答内包含有地面波的频道信息的情况下,确认移动AV终端是否能够进行该频道接收(具有调谐器、天线,处于可接收接收的范围中)。在能够进行的情况下(S8311),将指定的频道进行画面显示。在不能进行的情况下,变更为无线LAN转送模式(S8313)。此外,在应答信息中包含有在BS等的移动AV终端中原本不能接收的频道信息的情况下(S8314),也同样变更为无线LAN转送模式。在包含在应答中的信息不是频道信息的情况下,变更为无线LAN接收模式(S8315)。
图407是说明移动AV终端的递交运动图像的模式下的处理的流程图。
在递交运动图像的模式的情况下,移动AV终端将包括递交运动图像的命令及想要递交的运动图像的信息的运动图像交接请求保存到自身的RFID的存储器内。用户使本终端的RFID向其他终端的RF-ID接近(S8320),将运动图像交接请求向其他终端发送(S8321)。此时,如果从其他终端接收到运动图像交接应答(S8322),则根据包含在应答内的信息进行处理。在没有得到应答的情况下,显示无应答的错误画面,结束处理(S8323)。在应答是不能交接的应答的情况下(S8324),显示不能交接的错误画面,结束处理(S8325)。在可以交接且以地面波接收交接的运动图像的情况下(S8326),停止地面波广播的画面显示。在不是这样的情况下,根据接收的方式的种类进行由无线LAN接收的运动图像的结束处理(S8327),停止画面显示。另外,画面显示的停止也可以按照递交运动图像侧的终端的指示,也可以切换为初始画面等的别的画面(S8328)。
图408是说明移动AV终端的无线LAN转送模式下的处理的流程图。
假设移动AV终端是能够接收地面波、但不能接收卫星广播及线缆TV的广播的终端。为了接收这些广播波,需要用能够接收的别的终端接收、用无线LAN转送来。移动AV终端如果成为无线LAN转送模式,则调用无线LAN转送对应设备的信息。如果没有保持对应设备的信息(S8340),则进行对应设备的搜索(S8341)。如果在宅内不能发现无线LAN转送对应设备,则显示不能进行对应的频道交接的错误画面(S8342)。在发现了无线LAN转送设备或原本保持有对应设备信息的情况下,对该设备发送对应频道的运动图像转送请求(S8344)。在从转送设备返回了能够转送运动图像的应答的情况下,将指定的频道的运动图像包通过无线LAN接收(S8345),将指定的频道的运动图像进行画面显示(S8346)。
图409是说明移动AV终端的无线LAN接收模式下的处理的流程图。
在无线LAN接收模式下、在运动图像交接应答之中包含有运动图像服务器的IP地址、运动图像的ID及显示时间信息的情况下(S8360),对运动图像服务器进行访问。首先,确认运动图像服务器的IP地址与本终端的IP地址是否是同一子网(S8361)。在是与本终端的IP地址为同一子网的情况下,对运动图像服务器发送包括运动图像ID和显示时间的运动图像发送请求(S8364)。另外,在有延迟时间修正功能的情况下(S8362),将运动图像发送请求内的显示时间信息修正(S8363)。这里,所谓显示时间修正功能,是指为了考虑到处理所花费的各种延迟、进行高效率的运动图像转送而进行的修正功能。进而,在移动AV终端不能从运动图像服务器接收运动图像的情况下(S8365),也可以再发送运动图像发送请求。在再送超时超过规定次数也得不到应答的情况下(S8366),显示无服务器应答错误画面(S8367)。在接收到的运动图像数据的时间与想要显示的时间不一致的情况下(S8368),使用快进或回退的控制包使其与想要显示的时间一致(S8369)。然后,移动AV终端进行运动图像的画面显示。
图410是说明在运动图像交接应答中包含有URL的情况下的处理的流程图。
在包含有URL的情况下(S8380),进行通过DNS的名称解析,取得运动图像服务器的IP地址(S8381)。另外,运动图像的URL只要是为运动图像服务用而附加的名称,是什么都可以。此外,设名称解析还包括从DNS以外的服务识别符向终端识别符的变换。在所取得的运动图像服务器的IP地址与本终端的IP地址相同的情况下,回到在图409中说明的处理。在不是同一子网的情况下,转移到向子网外服务器的连接处理。在应答信息中没有包含有希望的信息的情况下,显示应答信息不正确的错误画面。
图411是说明运动图像服务器的IP地址与本终端的IP地址之间子网不同的情况下的处理的流程图。
在子网不同的情况下,搜索别的无线接入点。在宅内没有别的接入点的情况下,认为运动图像服务器是宅外服务器,转移到宅外服务器的连接处理。在有别的接入点的情况下(S8390),对该接入点进行再连接,取得具有别的子网的IP地址(S8391)。如果运动图像服务器的子网与所取得的IP地址的子网相同(S8392),则转移到宅内服务器的处理。在本终端连接到可访问的宅内接入点、取得了IP地址、但子网不相同的情况下(S8393),转移到向宅外服务器的访问处理。另外,对全部接入点的IP地址的取得处理既可以在事前进行,也可以在移动AV终端内管理。
图412是说明向宅外服务器访问的情况下的处理的流程图。
在运动图像服务器的地址不是全局地址的情况下(S8400),将地址错误画面显示(S8401)。在不知道向指定的运动图像服务器的访问方式的情况下(S8402),将访问方式不明错误画面显示(S8403)。另外,假设宅内运动图像服务器及宅内运动图像设备依据DLNA。在知道访问方式的情况下、并且在具备与宅内服务器同样的功能的情况下,进行与宅内服务器同样的处理(S8404)。在不是那样的情况下,通过对应于访问方式的处理取得运动图像(S8405),将接收到的运动图像画面显示(S8406)。
图413是说明TV的处理的流程图。
将其他终端的RFID向TV本终端的RFID接近(S8410),TV接收运动图像交接请求(S8411)。在本终端正在接收运动图像的过程中(S8412)、且在运动图像交接请求内包含有运动图像接受命令的情况下(S8413),将本终端转移为递交运动图像的模式(S8414)。在尽管不是运动图像接收中、但在运动图像交接请求内包含有运动图像接受命令的情况下(S8415),返送不能进行运动图像交接的运动图像交接应答(S8416),显示不能交接的错误画面(S8417)。在接收的运动图像是地面波的情况下(S8418),在运动图像交接应答中装入频道信息而返送(S8419),将画面显示消除(S8420)。
图414是说明接收中的运动图像不是地面波的情况下的处理的流程图。
在接收的运动图像是地面波以外的广播运动图像的情况下(S8430),在运动图像交接应答中装入频道信息而返送。在有无线LAN转送模式的情况下,也可以装入本终端的IP地址(S8431)。在返送后将画面显示消除(S8432)。在其他运动图像的情况下,在交接应答中装入运动图像服务器IP地址、运动图像ID、运动图像显示时间或运动图像URL、运动图像显示时间而返送(S8433)。在返送后进行通过无线LAN的运动图像通信的结束处理(S8434),将画面显示消除。
图415是说明在运动图像交接应答中包含有运动图像递交命令的情况下的处理的流程图。
在显示运动图像的过程中接收到运动图像递交命令的情况下,在有2画面显示功能的情况下(S8440),转移到接受运动图像的模式(S8441)。在没有的情况下,显示是否接受运动图像的选择画面(S8442)。在选择了接受运动图像的情况下(S8443),转移到运动图像接受模式。在选择了不接受运动图像的情况下,返送不能进行运动图像交接的运动图像交接应答(S8444)。在包含在请求中的信息是频道信息的情况下(S8445),将指定的频道画面显示(S8446)。在包含在请求中的信息是运动图像服务器的IP地址或URL的情况下(S8447、S8448),进行与移动AV终端的运动图像接受模式相同的动作。在不包含有这些信息的情况下,显示信息错误画面(S8449)。
(实施方式A9)
图416是在TV1(45)从运动图像服务器1(8004)接收运动图像的情况下、且在移动AV终端8006从其交接该运动图像的情况下,从TV1(45)发送运动图像发送请求的情况下的顺序图。
与图404同样,用户为了交接运动图像而接通移动AV终端8006的电源。移动终端搜索无线LAN的接入点8009而建立无线连接。进而,通过DHCP等取得IP地址,建立IP连接。用户按下运动图像交接按钮,在RFID的存储器内制作运动图像交接请求。此时,在运动图像交接请求中装入本终端的IP地址而制作。进而,用户使移动AV终端的RFID8007与TV1的RFID46接近,将运动图像交接请求向TV1(45)发送。TV1返回包括运动图像服务器的IP地址的运动图像交接应答。这是为了提高安全性(防止从无关系的终端的随意的访问)的,可以省略。另外,与图404同样,在运动图像被加密的情况下同时交换需要的安全关联信息(密钥等)。接收到运动图像交接请求的TV1(45)对运动图像服务器1(8004)发送包括移动AV终端8006的IP地址的运动图像发送请求。接收到运动图像发送请求的运动图像服务器1(8004)将运动图像的发送目的地变更为移动AV终端8006。然后的处理与图404同样。
图417是在与图405同样的情况下、在运动图像交接请求中发送运动图像服务器1(8004)的IP地址的情况。
这与图415同样能够省略。接受到运动图像交接请求的TV2(8003)返回包括本终端的IP地址的运动图像交接应答。接受到运动图像交接应答的移动AV终端8006对运动图像服务器1(8004)发送包括TV2的IP地址的运动图像发送请求。接收到运动图像发送请求的运动图像服务器1(8004)将运动图像的发送目的地变更为TV2(8003)。然后的处理与图404同样。
(实施方式A10)
图418是表示不是使用移动AV终端8006、而使用具备RFID的遥控器8200的情况下的顺序图。
这里,设想遥控器为不具有显示部、但具有RFID的收发部和存储器的终端。用户按下运动图像交接按钮,在RFID的存储器内制作运动图像交接请求。进而,用户使遥控器的RFID与TV1的RFID46接近,将运动图像交接请求向TV1发送。在TV1中,通过接收请求命令,制作运动图像交接应答(包括运动图像服务器1的IP地址和运动图像识别符、运动图像显示时间),向遥控器返送。接受到来自遥控器的运动图像交接请求的TV1(45)将运动图像停止请求向运动图像服务器1(8004)发送。用户在移动到2F后,使遥控器的RFID接近于TV2的RFID,发送运动图像交接应答(包括运动图像服务器1的IP地址和运动图像识别符、运动图像显示时间)。接收到运动图像交接请求的TV2(8003)返送运动图像交接应答,对运动图像服务器1发送运动图像发送请求(包括运动图像识别符、运动图像显示时间)。运动图像服务器1(8004)将指定的运动图像从指定的时间的数据开始发送。
(实施方式A11)
图419是能够从运动图像服务器1同时发送的情况下的顺序图。
移动AV终端在与TV间进行规定的交换后,发送运动图像发送请求。运动图像服务器1(8004)在接受到运动图像发送请求的情况下,暂时向TV1(45)和移动AV终端(8006)的两者发送运动图像数据。这是为了完全不间断的情况下的处理。移动AV终端和TV1既可以暂时向两者都进行画面显示,也可以进行某种同步处理而进行完全不间断处理。运动图像服务器1(8006)基于来自移动AV终端(8006)的运动图像停止请求停止TV侧的运动图像数据转送。另外,既可以从TV1(45)发出停止请求,也可以运动图像服务器1(8006)自动地停止。
(实施方式A12)
本实施方式说明用来在由实施方式A1~A10说明的赋予了RFID的设备的从工厂出货到使用环境的流通方式中确保追踪性的方法的优选的方式。
近来,基于流通的高效化及家电商品的陈旧化为原因的事故多发的背景,进行了用来确保在从生产、流通到消费者的使用环境进行跟踪的所谓追踪性的研究。
作为其中之一,进行将使用860~900MHz带的通信频率的无源型的RFID附加在包装体或搬运箱等上,从而能够管理从生产到零售店的流通的尝试。860~900MHz带也称作UHF(Ultra High Frequency)带,UHF带的RFID是在无源型(从外部向标签侧供给电源者)之中最能够确保通信距离的应用,虽然也取决于输出的大小,但能够进行2~3m的通信。由此,通过在搬运中将多台同时装入到RFID读出门中,能够高效率地瞬间读出多台的RFID信息,特别可以期待流通现场中的使用。
但是,这样的UHF带的RFID有能够长距离通信的优点,但另一方面,由于附加在包装体或搬运箱上,所以包括在达到消费者的手边后不再能够跟踪该设备的问题。此外,距离较长对于通过使设备与设备接近而引起动作的所谓在实施方式A1~A10中说明的实体接口、实物接口或直观接口不能说是有效的。
另一方面,在实施方式A1~A10中说明的RFID(47)设想了13.56MHz带的HF-RFID(当然并不仅限于此)。HF-RFID的特征是近距离通信(根据输出而不同,但大致是几十cm以内),广泛用在例如作为通过接近而直观地引起动作的应用的电子货币、检票系统等中。因而,在想要将由数字照相机拍摄的照片放映在TV上时等,通过将数字照相机向TV的RFID读写器46靠近,能够实现实体(照相机)与实体(TV)联动动作的实体接口、及将数字照相机的照片放映在TV上的直观的接口。
在本实施方式中,公开了与实施方式A1~A10同样对设备附加HF-RFID、并且对设备的包装体或搬运箱附加UHF-RFID、使得即使达到消费者的使用环境也进行商品的跟踪的技术。
图420是表示设备从工厂出货时HF-RFID和UHF-RFID的动作的概念图。
在本实施方式中,对设备是记录机的情况进行了说明,但设备是数字家电、食品等怎样的都可以。
对在制造生产线中组装成的设备M003赋予HF-RFIDM001。此外,在本HF-RFID中具有存储器,是从设备M003和从RFID的通信部的哪一方都能够访问的双重接口的结构。此外,在HF-RFIDM001的存储器中,在组装阶段中,记录有设备的制造号码、和用来将设备的制造号码复制到UHF-RFID中的程序(命令)。
如果设备M003的组装完成,则在包装前通过手持型读写器M002从HF-RFID的存储器读出制造号码,并且在包装体等上记录表示附加了UHF-RFID的UHF-RFID的设备ID(UHF-RFID固有信息)。
接着,在将设备M003包装后,对包装体M004附加UHF-RFIDM005。UHF-RFIDM005既可以对包装体原样附加,也可以是附加到管理表等中的方式。如果被附加UHF-RFIDM005,则将从设备M003的HF-RFIDM001读出的制造号码等通过手持型读写器M002记录到UHF-RFIDM005中。本实施方式的手持型读写器M002是能够访问HF-RFID及UHF-RFID的设备。
如果这样,则将设备M003的制造号码记录到HF-RFIDM001中,并且将与其相同的信息也记录到包装体M004的UHF-RFIDM005中。因而,在包装后的流通中,不再需要从仅能够近距离访问的HF-RFID读出制造号码等,通过使多个同时通过门,能够从UHF-RFID直接读出,能够实现流通的高效化。
此外,由于在设备M003到达消费者的使用环境后也能够将HF-RFID通过TV遥控器等读出,所以不仅是流通、连达到消费者的手边的设备也能够跟踪,能够实现流通的高效化、和将因设备使用中的老化造成的事故等防止于未然的总的追踪性。
图421是表示能够从UHF-RFIDM005访问的存储器的记录格式的概念图。
在UHF-RFIDM005的存储器中,记录有UHF设备ID1070、HF存在识别信息1071、设备制造号码、现品号码1072、日期1073、制造商1074、型号、批次号、品名1075及状态1076。
UHF设备ID1070记录在存储器的不能改写区域中,是能够按照UHF-RFID分别识别的识别信息。将UHF设备ID1070在设备M003被包装之前通过手持型读写器读出,也记录到HF-RFIDM001中。由此,即使在包装体与设备的对应关系弄错的情况下,也能够在未发生问题前进行确认而适当地进行处理。
HF存在识别信息1071是确认是否对设备M003附加了HF-RFIDM001的识别信息。在对设备附加了HF-RFID的情况下,在设备的包装时,在将从HF-RFID读出的制造号码等记录到UHF-RFID中时,将HF-RFID的存在识别信息改写为“存在”的信息。由此,仅通过确认HF存在识别信息1071,就能够判断是否进行UHF-RFID与HF-RFID的对应关系的确认工序。
设备制造号码、现品号码1072记录有从HF-RFIDM001读出的制造号码或者与制造号码建立了对应的现品号码的至少某一个。所谓现品号码,是在流通过程中使用的每个设备的号码,通过将制造号码和现品号码等同地管理,能够与制造号码唯一地进行对应建立。因此,在本实施方式中,不将这两者明确地区分使用,而作为唯一的信息进行说明。
日期1073是相当于所谓制造年月日的信息,记录有制造设备M003的日期、时间信息。它既可以由手持型读写器M002在向UHF-RFID记录制造号码的时刻进行记录,也可以是将记录在HF-RFID中的制造年月日信息读出而记录到UHF-RFID中的方式。
制造商1074是制造了设备M003的制造商识别信息,既可以在向UHF-RFID记录制造号码的时刻通过手持型读写器记录,也可以是将预先记录在HF-RFID中的信息读出而记录的方式。
型号、批次号、品名1075都与日期1073或制造商1074同样,既可以将从HF-RFID读出的信息记录,也可以是用手持型读写器记录的方式。但是,在批次号的情况下,在批次管理进行从生产到流通的一元管理的情况下,以上述哪种方法写入信息都可以,但在没有进行一元管理而在包装时不清楚生产线信息的情况下,从HF-RFID读出批次号而记录到UHF-RFID中的方法具有进行周密的管理的优点。
状态1076记录流通方式中的状态信息。即,状态信息记录工厂内保管、工厂出货、配送中心领受、配送中心出货、零售店领受等、设备的跟踪所需要的状态信息。本状态是在各流通过程中被改写的信息。
此外,在UHF-RFIDM001中记录有管理服务器特定信息1077。该管理服务器特定信息1077是与HF-RFIDM001的第2存储器52的服务器特定信息48同样的信息。在设备M003包装时从HF-RFIDM001读出而复制到UHF-RFIDM005中。由此,使用UHF-RFID的流通阶段中的管理、和设备到达消费者的手边后的管理都能够通过同一个管理服务器一元管理。
因此,在设备M003到达消费者的手边后,如果从HF-RFIDM001读出管理服务器地址信息、对管理服务器访问、通过设备制造号码1072实施查询,则能够使由管理服务器管理的从制造到流通的跟踪信息对消费者可视化,成为提高消费者的安心、安全的因素。
图422是表示设备M003在工厂出货时的从HF-RFID向UHF-RFID复制制造号码等的处理的流程的流程图。
首先,对组装成的生产物(设备M003)附加HF-RFID(1080)。在本流程图中,是在将设备M003组装后附加HF-RFID的方式,但在设备和HF-RFID都能够访问共有存储器的具有双重接口的结构的情况下,在设备M003的组装阶段中附加HF-RFID。
接着,在HF-RFID1081中记录设备M003的制造号码(1081)。这里,是在组装工序中经由手持型读写器设备M002对HF-RFIDM001记录制造号码的工序。制造号码由手持型读写器等从生产线的管理服务器等取得,通过近距离无线通信记录到HF-RFIDM001中。
在对HF-RFIDM001记录制造号码后,将设备M003包装(1082)。这里的包装,是指伴随着缓冲件等的流通用的包装及向搬运箱等的收纳。
如果包装完成,则对包装体(包括搬运箱表面、管理用标签)附加UHF-RFID(1083)。
接着,手持型读写器M002与管理服务器1085通信,由此读出与从HF-RFIDM001读出的制造号码建立了对应的现品号码(1084)。所谓现品号码,是在商品的流通中使用的管理号码,是管理服务器发行的号码,是与制造号码1对1对应的号码。
在将现品号码从管理服务器1085读出后,对于UHF-RFID,将制造号码或现品号码、和表示对设备M003附加了HF-RFID的存在识别信息记录到UHF-RFID中(1086)。
通过以上的工序,将记录在对设备M003附加的HF-RFID中的制造号码在设备的包装后复制到UHF-RFID中。通常HF-RFID的通信距离较短,所以在包装后难以向HF-RFID访问。但是,根据本实施方式,通过向可通信距离比HF-RFID长、对包装体附加的UHF-RFID中记录制造号码或现品号码,能够进行包装后的设备的流通管理。
此外,设备到达消费者的地点,即使包装体等被丢弃,通过向附加在设备上的HF-RFID访问,也能够读出制造号码等,能够将从流通到消费者的手边一元地管理,能够实现较大范围内的追踪性。
图423是表示设备M003的流通过程中的处理的流程的流程图。
首先,在设备M003从工厂出货时,通过经过手持型读写器或UHF-RFID读出门,从UHF-RFID读出制造号码或现品号码,向能够与手持型读写器或UHF-RFID读出门通信的管理服务器1085登录已出货,并且从手持型读写器或UHF-RFID读出门对UHF-RFID访问,将存储器内的状态(1076)也同样改写为已出货(1090)。
在工厂出货后,储存到配送中心等中,然后,在从配送中心出货时,通过手持型读写器或UHF-RFID读出门从UHF-RFID读出制造号码或现品号码,将已从配送中心出货的情况改写到管理服务器1085及UHF-RFID的状态(1076)中(1092)。
此外,在零售店出货时也同样,将已从零售店出货的状态改写到管理服务器1085及UHF-RFID的状态1076中(1094)。
在最终设备M003到达消费者的手边的时刻,用TV遥控器等的RFID读取部46从HF-RFID读出制造号码,与TV的识别信息建立关联而登录到管理服务器1085中(1096)。因而,在本实施方式中,也在HF-RFID的第2存储器52中预先记录有服务器特定信息48。本实施方式的服务器特定信息48是表示管理服务器1085的服务器特定信息,包括用于向管理服务器1085的连接的URL。由此,只要通过具备RF读写器的TV遥控器等将设备M003的HF-RFIDM001读出,就能够从管理服务器1085取得从生产到流通的管理信息。此外,在管理服务器1085中,通过与TV的识别信息建立对应而管理,即使不管理例如使用者的个人信息,也能够与拥有的TV建立联系,并将用户拥有的设备的列表储存到管理服务器中。
因此,在用户拥有的设备中发觉了不良状况的情况下,能够可靠地将向用户通知危险的消息用TV显示,能够将重大的事故防止于未然。
如以上这样,在本实施方式中,生产阶段中对设备附加HF-RFID、对设备的包装体附加UHF-RFID,分别具有相互的存在识别信息,并且使UHF-RFID也具有记录在HF-RFID中的制造号码及管理服务器特定信息,由此,能够提供一种对于到目前为止仅在流通中的可跟踪性,不但原样保持流通管理的方便性,而且即使到达消费者的手边也进行管理的系统。
在本实施方式中,对从制造到用户的手边的管理进行了说明,但本发明在用户进行丢弃、或再循环时也同样发挥效果。其步骤也可以通过在本实施方式中说明的流程实现。
例如,在图420中,是将记录在对设备M003附加的HF-RFIDM001中的制造号码等附加到对包装后的包装体M004附加的UHF-RFIDM005中而进行工厂出货的方式,但将工厂出货设为向丢弃场的出货、或向再循环中心的出货也是同样的。如果是向丢弃场的出货,则只要在丢弃完成后在管理服务器中登录丢弃完成,就能够一元地管理商品被生产、被消费者使用、直到被丢弃。近来,由于丢弃成本的信息,非法丢弃的问题受到指责,但只要看到被非法丢弃的设备的HF-RFID或UHF-RFID,在流通阶段的哪里进行了非法丢弃就一目了然,能够减轻这样的非法丢弃的问题。
此外,在是向再循环中心的出货的情况下,在能够从HF-RFID访问的区域中记录由使用状况检测部7020检测到的使用状况信息及不良状况检测状况、总使用时间等,也能够用于是否能够再循环的判断、及定价等。此外,在判断为能够再循环的情况下,能够将与管理服务器1085建立对应而管理的TV的识别信息、个人信息等的信息更新而利用。
(实施方式A13)
图424表示整体的系统结构图。
在卫生间的镜子部上安装有半透射式的镜子透射板。在其背侧的背面部配置有显示器、电源天线、RF的天线部。用户拿着具有RF天线的移动终端,显示某种影像信息。说明使该影像移动到镜子的显示器中的步骤。
图425是表示使影像移动到镜子的显示器中的步骤的流程图(前半)。
图425的流程图表示该步骤。首先,启动并按下终端的图像送出按钮。检查经由网络或TV频道得到的信息或数据是否显示在终端上,如果为“否”,则获得影像或数据的送出源的服务器的URL或IP地址、显示中的影像的流ID、流的再现时间信息、TV频道信息。接着,从终端的天线开始电源的发送、接收。如果使终端的天线部接触在装置侧的天线附近,则从终端侧向装置侧的天线传送电力或信号。终端将装置侧的属性信息(影像显示能力、声音能力、因特网的宅内和宅外的最大(平均)通信速度、TV频道连接的有无、因特网及通信线路的种类)经由装置侧的天线读出。
首先,在影像源为TV、装置连接在TV天线上的情况下,将TV的频道信息和TV的图像的再现显示时间经由天线向装置发送。在装置侧,将该TV频道的影像显示在画面上。在TV的情况下,不进行图像的左右反转显示。
在从终端侧接受到可供电标志的情况下,从装置向终端供给电源。
这里,回到前面的步骤,在连接在因特网上的情况下,根据装置侧的属性信息设定影像的速率、分辨率,将最适合于该设定的服务器地址、DLNA网络上的服务器ID、服务器之中的流ID、流的再现显示时间信息经由RF天线向装置侧发送。
图426是表示使影像移动到镜子的显示器中的步骤的流程图(后半)。
转移到图426的流程图,在装置侧基于服务器的IP地址、流ID、流的再现显示时间显示流,以使其显示时间与显示在终端侧的影像流一致。在时间一致的阶段中,从装置的前面的显示向下个显示、即将终端的影像向装置侧不间断地转移。
如果在为了著作权保护而禁止了影像在终端和装置的两台同时显示的情况下,在装置侧的影像显示不间断地开始的时刻,通过从装置侧向终端侧发送终端的影像中止命令等的方法,将终端侧的影像显示中止。
此外,在装置从终端接受到在镜子时使左右反转的“镜子时反转识别符”的情况下,在接着的步骤中将影像的左右反转。不进行字符的左右反转。
通过以上的方法,首先最先从终端向装置供电,在装置停止的情况下使装置启动。这样实现节电。接着,如果装置开始动作,则此次从装置向终端供电。终端从服务器等接受影像数据,在先经由终端再经由网络迂回向装置侧分发影像的情况下,终端侧需要用无线LAN经由接入点将影像长时间发送。在用无线LAN传送大量的数据的情况下耗电较大,终端的电池剩余量有可能耗尽。但是,通过如实施例那样从装置向终端送电,具有防止电池的消耗的效果。此外,由于是镜子,所以人的姿势以左右反转映照。通常在牙刷的指导视频等时,右和左成为相反,学习效果下降。但是,通过左右反转而容易学习。
(实施方式B)
接着,说明实施方式B(B1~B7)。
以下,对于有关本发明的实施方式B的通信装置,参照附图详细地说明。
另外,通过以下的说明,例如表示以下的通信装置。
即,表示一种通信装置,是经由近距离无线通信(IC标签等的通信、几厘米的距离下的通信:参照图380的近距离无线通信98c1),从终端装置(例如图440的终端装置Y01、图427的电冰箱MI013、微波炉M1012、图447的空调N10J等(参照图480、以及图480的设备98a等))读出终端装置信息(例如图440的信息Y015D、图450的信息Y01U:参照图412的设备信息98n1),并且经由通用的网络(例如,图440的网络Y02N、图427的因特网M1004)对服务器(图440的服务器Y04、图427的登录服务器M1005:参照图480的服务器98c)发送上述终端装置信息的通信装置(图440的通信装置(便携电话终端)Y02、图427的便携电话M1014、图448的移动设备N20等:参照图480的便携型通信装置98b),该通信装置具有经由上述近距离无线通信从上述终端装置取得至少包括可识别上述终端装置的制造信息的终端装置识别信息(例如图440的制造号码Y015N、图450的制造号码Y01Un)的上述终端装置信息(信息Y015D、信息Y01U)的终端装置信息取得部(图440的天线Y021:参照图480的设备信息取得部98n);存储至少包括可识别上述通信装置的制造信息的通信装置识别信息(例如图440的制造号码Y025N)的通信装置信息(信息Y025D)的通信装置信息存储部(存储器Y024:参照图379的存储器98i);对所取得的上述终端装置信息(信息Y015D、信息Y01U)附加存储的上述通信装置信息(信息Y025D),并生成向上述服务器发送的发送信息(图440的信息Y036D:参照图480的发送信息98o1)的信息附加部(信息附加部Y035:参照图480的发送部98o);以及经由上述通用的网络将生成的上述发送信息(信息Y036D)向上述服务器发送的通信部(图440的通信部Y036:参照发送部98o),上述通信部基于来自上述终端装置的上述终端装置信息(例如服务器Y04的地址Y01Ua(图450)等)确定上述服务器而进行通信。
由此,尽管装置Y01是微波炉M1012等,也能够容易地将购买了该装置Y01的用户的信息(用户的通信终端Y02的制造号码Y025N)容易地向服务器Y04发送。
并且,即使装置Y01是微波炉M1012等,也将特定服务器Y04的地址Y01Ua等存储,将所存储的地址Y01Ua等发送。并且,进行从这样的装置Y01取得地址Y01Ua等,并向由所取得的地址Y01Ua等确定的适当的服务器Y04的发送。由此,能够可靠地向适当的服务器Y04发送。
并且,不需要用按键盘的、地址Y01Ua的输入等,能够足够容易地进行向服务器Y04的信息的发送。
(实施方式B1)
对本发明的实施方式B1进行说明。
图427是表示在本实施方式中设想的家庭网络环境的图。
多个家庭网络构成为各个宅内M1001、M1002、M1003(参照图478、图480的住宅99)。并且,各家庭网络经由因特网M1004连接在登录服务器M1005上。即,例如各个家庭网络在该家庭网络的宅内(宅内M1001、M1002、M1003)构成。
另外,在家庭网络内的服务限定于宅内的情况下,登录服务器M1005也可以存在于宅内。此外,家庭网络被分割为别墅或办公室等的多个场所的情况下,或如宿舍或合住那样在1个宅内存在多个家庭网络的情况下,本发明也是充分有效的。
在宅内存在经由路由器M1006或无线接入点(以下:无线AP)M1007(参照图478的接入点99c)等连接到因特网的TV(M1008、M1009)或DVD记录机(记录机)M1010等的常时连接家电和根据需要而间接地连接到因特网的数字照相机M1011及微波炉M1012、电冰箱M1013等非常时连接家电。
另外,例如也可以有连接在便携电话M1014以外的其他装置(接入点M1007等)上的设备(常时连接家电)、和不连接到其他装置上的设备(非常时连接家电)。
进而,在本实施方式中,便携电话M1014等的移动终端也为构成家庭网络的终端。
本发明的各设备能够通过近距离无线通信设备相互进行简单的数据通信,通过近距离无线通信设备取得各设备的信息,通过家庭网络设备登录到登录服务器M1005中。
图428是表示实施本发明的终端的硬件结构图的图。
本发明的通信装置M1101作为通信设备而搭载有两个设备。
1个通信设备是近距离无线通信设备MI 102,是一般称作Near FieldCommunicateion(以下:NFC)或RF标签的(例如参照图479的RF-ID读写器98g等)。
另1个通信设备是家庭网络通信设备M1103,是用于宅内设备联动的无线LocalAreaNetwork(以下:无线LAN)或ZigBee等的无线通信设备、Ethernet(注册商标)或Power Line Communication(以下:PLC)等的有线通信设备、以及在WiMax或3GPP等的在移动设备中使用的通信设备(例如参照图479的中继装置98k等)。
进而,假设通信装置具备用户界面设备M1104。这里,所谓用户界面设备,表示按钮等的输入设备及显示器、LED等的输出设备。另外,在TV或空调等的设备中,输入输出一般通过遥控器进行,是在物理上分离的,但在本发明中为了说明的简单化而作为用户IF(interface)设备处理。
图429说明在CPU(M1105:图428)上动作的功能的功能块图。
通信装置M1101内的设备固有ID取得部M1202取得包括登录设备M1201(参照图480的设备98a)的设备固有ID(参照图480的制造号码98a1)的信息。
这里,登录设备将包括登录命令及设备固有ID的登录信息通过近距离无线通信设备M1102(图428)发送。
从设备固有ID取得部M1202(图429)取得这样的包括设备固有ID的登录信息,登录信息制作部M1204从家庭ID管理部M1205取得家庭ID,对从登录设备取得的登录信息附加家庭ID而制作登录信息。
另外,在作为登录信息而附加位置信息的情况下,从位置信息取得部M1206(参照图480的位置信息取得部98j)取得位置信息。
这里,所谓位置信息,是指例如基于输入到TV中的邮政编码的住址信息或能够通过便携电话的GPS取得的地理的位置信息等。另外,位置信息例如也可以是至少具有表示多个住宅(图480的住宅99、991等)的位置(位置99P、991P)之中的某1个住宅的位置之程度的精度的信息(参照图480的位置信息98j1)。并且,通过将登录设备的设置位置信息等登录,能够使家电追踪性等的服务提供变得容易。登录信息收发部M1207(参照图480的发送部98o)进行登录信息(参照图480的发送信息98o1)的收发。
家庭ID管理部管理与在上述构成家庭网络的通信设备中使用的通信设备ID不同的家庭ID(参照图483)。
这里,在还没有利用本技术的当前,在家庭网络中,各通信设备的主设备以各个通信设备单位管理ID等,其管理方法根据通信设备的种类而不同。因此,不能进行以家庭单位的管理。此外,也有使用户输入服务单位中的ID的情况,但对于用户而言方便性很低。所以,本发明通过家庭ID的新的ID的导入,不论通信设备及服务如何都能够进行构成家庭网络的设备的管理。
此外,家庭ID管理部在初次进行设备登录的情况下,制作家庭ID。
另外,家庭ID既可以基于位置信息制作,也可以基于通信设备的固有ID制作。既可以基于随机数制作、由登录服务器确认以使其不重复,也可以由用户设定。
从登录信息制作部M1204接收到登录信息的登录信息收发部M1207(参照图479的发送部98o)使用家庭网络通信设备M1103(图428)对登录服务器M1005(参照图427、图429:图480的服务器98c)发送。
登录服务器M1005将登录信息与登录数据库M1208对照,判断能够登录,返送登录应答。
接收到登录应答的登录信息收发部将结果使用用户界面设备M1104(图428)向用户通知。
另外,也可以在不能的情况下向登录信息制作部M1204(图429)通知,请求登录信息的变更。由此,能够进行包括不具有通信用的用户界面设备的白色家电设备等在内的家庭网络设备的统一管理。
图430是用来说明通信装置的登录处理的流程图。
通信装置如果接收到登录命令和设备固有ID(M1301),则判断本终端是否保持有家庭ID(M1302)。
并且,在没有保持家庭ID的情况下转移到家庭ID取得处理(M1303)。
另一方面,在保持有家庭ID的情况下(M1302:“是”),进行登录数据的制作处理(M1304)。
接着,将登录数据向登录服务器发送(M1305)。
在从登录服务器没有接收到登录应答的情况下(M1306:“否”),对用户显示登录失败通知(M1307)并结束。
另一方面,在接收到登录应答的情况下(M1306:“是”),对用户显示是否可以通过制作的信息登录,在OK的情况下(M1308:“是”)结束。在不是的情况下(M1308:“否”)回到家庭ID取得处理。另外,在难以取得其他家庭ID的情况下,作为登录失败而结束。
图431是用来说明家庭ID取得处理的流程图。
在通信装置中具有家庭ID的自动制作功能的情况下(M1401:“是”)自动进行制作,在没有的情况下(M1401:“否”),对用户委托手动输入。
在没有进行手动输入的方法、或被用户拒绝手动输入的情况下(M1402:失败),向用户通知不能登录(M1403),对用户敦促用别的方法取得家庭ID。
在自动制作的情况下(M1401:“是”),根据状况而选择自动制作功能(M1404)。
即,在能够通过GPS取得地理的位置信息的情况下、或如TV那样是一般登录住址的终端的情况下,根据位置信息制作家庭ID(M1405)。
此外,在一般安设在宅内的终端中,制作基于通信装置的固有识别符的家庭ID(M1406)。
并且,特别是在有效的家庭ID制作较困难的情况下,通过随机数制作家庭ID(M1407)。
如果制作了家庭ID,则对服务器发送制作的家庭ID(M1408)。从服务器接收关于制作的家庭ID的信息,在不能使用该家庭ID的情况下(M1409:NG),回到家庭ID的制作。
在能够使用的情况下(M1409:OK),向用户确认(M1410),在OK的情况下(M1410:“是”),作为家庭ID登录到本终端中(M1411)。在不是那样的情况下(M1410:“否”),回到家庭ID的制作。
图432是进行设备登录的情况下的流程图。
登录设备M1201通过近距离无线通信设备,将包括设备固有ID的信息与登录命令一起向通信装置M1101转送。
通信装置在没有保持家庭ID的情况下,制作临时家庭ID,通过家庭网络通信设备向登录服务器M1005发送。
登录服务器M1005附加关于临时家庭ID的信息,向通信装置返送。在通信装置保持有家庭ID的情况下,或从登录服务器取得了也可以利用的家庭ID信息的情况下,将包括家庭ID及设备固有ID的登录信息向登录服务器发送。完成登录设备的登录处理。
(实施方式B2)
作为本发明的实施方式B2,对在通信终端间共有家庭ID的方式进行说明。
图433是表示在通信装置间共有家庭ID的情况下的功能的功能块图。
假设构成家庭网络的通信装置(也参照图480的便携型通信装置98b)通过家庭网络M1601及家庭网络通信设备M1103(M1103S、M1103R)共有家庭ID。或者也可以通过近距离无线通信设备M1102共有。
另外,如上述的“M1103(M1103S、M1103R)”的例子那样,“xxxx”的名称作为将“xxxxS”和“xxxxR”概括的名称使用。
本发明的通信装置通过将共有命令和家庭ID通过近距离无线通信设备M1102(参照图428)向其他通信装置传送,能够在家庭内的通信装置间共有家庭ID。
家庭ID管理部M1205S内的家庭ID共有部M1602S将共有命令和存储在本终端的家庭ID存储部M1209S中的家庭ID存储到近距离无线通信设备M1102S中。
当发送侧的通信装置M1101S的近距离无线通信设备M1102S与接收侧的通信装置M1101R的近距离无线通信设备M1102R接近时转送信息,将发送侧通信装置M1101S的家庭ID存储到接收侧通信装置M1101R的近距离无线通信设备M1102R内。
接收侧通信装置M1101R内的家庭ID共有部M1602R如果在本终端的家庭ID存储部M1209R中没有存储家庭ID,则作为本终端的家庭ID存储。
由此,能够很简单地进行通信装置间的家庭ID(的共有)。
在存储有家庭ID的情况下,对登录服务器发送双方的家庭ID。接收到双方的家庭ID的登录服务器将双方的家庭ID虚拟地作为1个家庭的ID管理。
另外,也可以为了统一为某方的家庭ID而对所有的通信装置通知某方的家庭ID。在此情况下,也由于存在非常时连接设备,所以登录服务器中的家庭ID将双方虚拟地作为1个ID管理。
另外,也可以将非常时连接设备的ID每当连接时更新,如果全部的登录设备的更新结束则结束虚拟的管理。由此,能够将原本为多个家庭网络合并为1个网络。
此外,也可以使用家庭网络进行共有。
即,在由家庭网络连接检测部M1603S(图433)检测到没有保持家庭ID的通信装置连接到家庭网络M1601上的情况下,将家庭ID共有请求向连接在家庭网络上的终端广播。
并且,连接在家庭网络M1601上的终端中的保持家庭ID的终端将家庭ID朝向发送了共有请求的终端返送。
由此,能够在进行通信之前的阶段完成家庭ID(的共有的处理)。
另外,如果预先设定了保持家庭ID的终端中的、对共有请求应答的主终端,则能够避免从多个终端返送许多共有应答、对家庭网络作用过量的负荷的情况。此外,在没有应答的情况下,也可以在本终端进行家庭ID取得处理。
图434是表示利用近距离无线通信设备M1102共有家庭ID的情况下的、接收侧通信装置M1101R的动作的流程图。
如果接收到共有命令和家庭ID(M1701),则通信装置判断在本终端中是否保持有家庭ID(M1702)。
在本终端中没有保持的情况下(M1702:“否”),将接收到的家庭ID作为本终端的家庭ID登录(M1703)。
另一方面,在本终端中保持有的情况下(M1702:“是”),将保持的家庭ID与接收到的ID比较。
并且,在相等的情况下(M1704:相等),什么都不做而结束。
另一方面,在不相等的情况下(M1704:不同),进行家庭ID的选择(M1705)。
另外,这里,家庭ID的选择既可以由本终端进行,也可以由登录服务器进行。
即,在对登录服务器委托选择的情况下,将本终端的家庭ID和接收到的ID作为共有信息对登录服务器发送(M1706)。并且,接收包括由登录服务器选择的家庭ID的共有应答(M1707),对用户确认(M1708),在OK的情况下(M1708:“是”)结束。在不是OK的情况(M1708:“否”)下,回到家庭ID的选择。
另一方面,在由通信装置选择本终端的家庭ID的情况下,将本终端的ID作为家庭ID,将接收到的ID作为共有ID对登录服务器发送(M1709)。
登录服务器向具有共有ID的通信装置通知家庭ID被更新的情况。
另一方面,在选择了接收到的家庭ID的情况下,将本终端的家庭ID更新(M1710)。进而,将本终端的旧ID作为共有ID、将接收到的ID作为家庭ID对登录服务器发送(M1711)。登录服务器向同样具有共有ID的通信装置通知家庭ID被更新的情况。
图435是表示利用近距离无线通信设备M1102共有家庭ID的情况下的、发送侧通信装置M1101S的动作的流程图。
发送了共有命令和家庭ID的终端判断是否从登录服务器发送来共有应答(M1752)。在没有接收到共有应答的情况下(M1752:“否”)结束。在接收到包括家庭ID更新通知的共有应答的情况下(M1752:“是”),将家庭ID更新(M1753)而结束。
图436是用登录服务器选择的情况下的顺序图。
通信装置M1101S将家庭ID_A利用近距离无线通信设备向通信装置M1101R发送。通信装置M1101R将本终端保持的家庭ID_B和接收到的家庭ID_A一起向登录服务器M1005发送。登录服务器从接收到的ID中选择家庭ID_B,对具有家庭ID_A的通信终端及通信装置M1101R通知,以使其存储家庭ID_B。
图437是表示使用家庭网络通信设备M1103共有家庭ID的情况下的、发送侧通信装置M1101S的动作的流程图。
检测到向家庭网络的连接(M1801)的通信终端将家庭ID共有请求向家庭网络内广播(M1802)。在返回了共有应答的情况下(M1803:“是”),将接收到的家庭ID登录到本终端中(M1804)。在没有返回的情况下(M1803:“否”),进行家庭ID取得处理(M1303)。
图438是表示使用家庭网络通信设备M1103共有家庭ID的情况下的、接收侧通信装置M1101R的动作的流程图。
接收到家庭ID共有请求(M1851)的通信终端判断本终端是否是家庭网络的主终端(M1852),在是主终端的情况(M1852:“是”)下,将本终端的家庭ID作为共有应答发送(M1853)。在不是主终端的情况下(M1852:“否”),什么都不做。另外,在具有家庭ID的终端内没有进行主终端的设定的情况下,不进行是否是主终端的判断而从全部的终端返送。
图439是使用家庭网络通信设备M1103共有家庭ID的情况下的顺序图。
通信装置如果检测到连接在家庭网络上,则向家庭网络广播家庭ID请求。在接收到家庭ID共有请求的通信装置中,仅被设定为主终端的终端M1854返送家庭ID共有应答。接收到共有应答的通信装置将接收到的家庭ID作为本终端的家庭ID存储。
(实施方式B3)
在本实施方式中,对从终端装置经由NFC(Nier Field Communication)的通信功能读出上述终端装置的终端装置信息、经由通用的网络向服务器转送的通信装置使用附图详细地说明。
图440是本实施方式的系统,由终端装置Y01、通信装置Y02及服务器Y04构成。
另外,本实施方式的发明主题是通信装置。
终端装置Y01(参照图480的设备98a)是具有NFC通信功能(RFID或IC标签、仿真NFC标签)的设备,是电冰箱、微波炉、洗涤机、电视机、录像设备等的电子的终端设备(例如参照图427),在内部的存储器中,作为终端装置信息(参照信息Y015D)而保持作为表示终端装置的ID的制造号码(参照制造号码Y015N)、终端装置的使用履历信息、错误信息等。
通信装置Y02(参照图480的便携型通信装置98b)具有能够与终端装置的NFC通信功能通过近距离无线通信进行通信的NFC通信功能,具有将由终端装置保持的终端装置信息读出的读写器功能。此外,通信装置是便携设备,是指便携电话终端等的便携设备、或电视机的遥控器终端。
服务器Y04(参照图480的服务器98c)是通过因特网(参照图427所示的因特网M1004)等通用的网络与上述通信设备Y02可通信地连接的服务器,在内部中具有DB(数据库),在上述DB中储存由通信设备Y02从终端装置Y01读出的终端装置信息。
终端装置Y01由CPU(Central Processing Unit)Y011、故障感知部Y012、使用履历记录部Y013、存储器Y014、调制部Y017及天线Y018构成。
CPU(Y011)是进行终端装置Y01的系统控制的部分。CPU进行作为终端装置的各构成要素的故障感知部Y012、使用履历Y013、存储器Y014、调制部Y017的控制。
故障感知部Y012是感知终端装置Y01的各构成要素的故障部位、故障内容的部分。将由本故障感知部Y012感知的故障信息储存到存储器Y014的RAM(Random Access Memory)中。感知的故障信息是错误代码,是由故障发生的场所和症状唯一决定的代码。
使用履历记录部Y013是每当本终端装置Y01被用户操作时记录该使用履历信息的部分,将记录的使用履历信息储存到存储器Y014的RAM(Y016)中。通常,为了根据使用履历信息调查引起故障的原委,发生故障的几个步骤前的履历的优先级较高。因而,本实施方式的使用履历记录部Y013优选的是通过将RAM(Y016)作为FIFO(FirstIn、FistOut)使用、以时间序列将新的使用履历信息储存到RAM中的结构。此外,为了能够根据使用履历判别引起故障的原委,优选的是以由故障感知部Y012检测到故障的定时为基点、几个步骤前的使用履历信息优先地保持在RAM中的方式。因而,设为以下结构:在使用中检测到5次轻微的故障的情况下,将引起5次故障的几个步骤的操作履历信息优先地保持。
存储器Y014由ROM(Read Only Memory)Y015和RAM(RandomAccess Memory)Y016构成。
在ROM(Y015)中,至少在出货时预先记录有表示本终端装置Y01的位置的制造号码构成为:不能由本终端装置的使用者将记录在本ROM中的内容更新。
此外,制造号码优选的是能够判断制造商或制造的批次号、制造日的信息。
此外,本ROM优选的是在CPU(Y011)的半导体芯片的内部中构成。在此情况下,不能简单地看存储器访问的信息,在此情况下,能够将用于与通信装置的近距离无线通信时的认证及加密通信的秘密密钥信息在出货时记录。
RAM(Y016)是可改写的存储器,储存有由故障感知部Y012感知的故障信息、以及由使用履历记录部Y013记录的使用履历信息。
调制部Y017是进行与通信装置Y02的近距离无线通信时的通信数据的调制的部分。调制方式根据使用的NFC规格而不同,采用振幅调制(ASK)、频率调制(FSK)或相位调制(PSK)等。
天线Y018使用环形天线,是由从通信装置Y02的天线发出的电波引起电磁感应、进行用来驱动至少调制部及存储器的起电、并且在从通信装置Y02发出的电波的反射波中叠加由上述调制部Y017调制后的信号、将记录在存储器Y014中的终端装置信息向通信设备Y02发送的部分。
如以上这样,在本实施方式的终端装置中,检测内部的各构成要素的故障,记录使用履历而储存到存储器中,如果与通信装置Y02接近而能够进行近距离无线通信,则能够将储存在存储器中的终端装置信息(信息Y015D)向通信装置Y02发送。
接着,对本实施方式的通信装置Y02进行说明。另外,在本实施方式中公开的发明的主题是本通信装置Y02。
本通信装置Y02由天线Y021、CPU(Y022)、解调部Y023、存储器Y024、位置信息测位部Y027(参照图480的位置信息取得部98j)、GPS天线Y031、通信存储器Y032、信息附加部Y035及通信部Y036构成。
天线Y021为了搜索能够与本通信装置Y02进行近距离无线通信的终端装置而进行朝向不特定的终端装置呼叫的轮询。
此外,在对轮询有应答的情况下,建立与终端装置的近距离无线通信,接收从终端装置Y01发送的调制后的终端装置信息(信息Y015D),向解调部Y023输出。
另外,通常,轮询动作在没有能够进行近距离无线通信的终端装置的情况下也需要经常进行,但为此而伴随着耗电。因而,如果设置用来控制开始轮询的定时的未图示的开关、在将开关设为ON的情况下进行轮询动作,则能够大幅地缩短轮询时间,能够显著地降低通信设备Y02的耗电量。特别在通信装置以电池或干电池等有限的电力动作的情况下是有效的。
CPU(Y022)是进行本通信装置的系统控制的部分,控制通信装置的各构成要素的动作。
解调部Y023是将与终端装置Y01的调制部Y017对应的调制解调的部分。解调后的终端装置信息被暂时向存储器Y024输出。
存储器Y024在内部中具备ROM(Y025)和RAM(Y026)。
ROM(Y025)是构成为不能从外部改写的存储器,在本通信装置出货时,记录有能够唯一地识别本通信装置Y02的制造号码(制造号码Y025N)。
另外,制造号码优选的是能够判别本通信装置Y02的制造商或制造的批次号、制造日的信息。
此外,本ROM优选的是构成在CPU(Y022)的半导体芯片的内部中。在此情况下,不能简单地看存储器访问的信息,在此情况下,能够在出货时记录用于与终端装置Y01的近距离无线通信时的认证或加密通信的秘密密钥信息。
RAM(Y026)储存由天线Y021接收、由解调部Y023解调后的终端装置Y01的终端装置信息。另外,如上所述,所谓终端装置信息,包括能够唯一地识别终端装置Y01的终端装置的制造号码、终端装置Y01的使用履历信息、故障代码。
位置信息测位部Y027由用来确定本通信装置Y02的场所的传感器群构成,由经纬测位部(GPS)Y028、高度测位部Y029及位置修正部Y030构成。
此外,本位置信息测位部Y027如果设为在本通信装置Y02与终端装置Y01成为能够通信的时刻从天线Y021取得位置信息的结构,则不再需要经常取得位置信息,能够削减本通信装置Y02的用电量。
经纬测位部Y028是一般的GPS(Global Positioning System),是能够接收来自人工卫星的电波、进行地球上的3维测位的部分(参照图481的GPS装置98j1x)。
此外,高度测位部Y029是一般的高度计,存在许多接收电波而提取高度的结构、感知气压而计测高度的结构等。本高度测位部Y029为了在不能接收GPS电波的室内也能够感知高度而具备。
位置信息修正部Y030是为了使由GPS测位的位置信息变得更精细而修正GPS的测位值的单元。通常,GPS在室内等不能进行来自等卫星的电波的接收的状况下不能取得正确的位置信息。所以,在本位置信息修正部Y030中,在内部中具备电子罗盘和6轴的加速度传感器,在难以进行GPS测位的地方,从电子罗盘提取本通信装置的移动方向,从加速度传感器提取移动速度,能够修正由GPS测位的位置信息(参照图488的加速度传感器98j2x)。
信息附加部Y035是在将从终端装置Y01接收而存储在存储器Y024中的终端装置信息向服务器Y04发送时、将记录在存储器Y024的ROM(Y025)中的通信装置Y02的制造号码和由位置信息测位部Y027测量的位置信息(信息Y027)附加到终端装置信息中的部分。
由此,在服务器Y04中,能够将终端装置信息,能够以可判别是从哪个通信装置发送的、在哪个位置检测到等的方式来进行管理。
因此,例如在制造商侧有可能有终端装置的重大事故(不良状况)的情况下,只要阅读服务器Y04的DB,就知道该终端设备存在于哪里,能够缩短制品回收时间、降低重大的事故的可能性,能够带来制品使用的安心、安全。
此外,在通信装置Y02如便携电话终端等那样有显示功能的情况下,如果设为知道有可能发生事故的终端设备能够与哪个通信设备进行近距离无线通信、使终端设备的事故信息(不良状况信息)显示在对应的通信设备上的结构,则通过将一般没有显示功能、没有连接在通用的网络上的终端设备的事故信息向通信设备发送,能够对使用终端装置的用户进行提示,都能够提高带来使用终端装置的用户的安心、安全的设备。
通信部Y036是通过一般的LAN或无线LAN或移动电话通信网经由因特网与服务器Y04进行通信的部分,是将作为通信装置信息而附加了通信装置的制造号码及位置信息的终端装置信息向服务器Y04发送的部分。这里,为了通信控制用而再附加MAC(Media Access Control)地址或IP(Internet protocol)地址,向服务器Y04发送。
服务器Y04是经由因特网等通用的网络与通信设备Y02连接的服务器。本服务器Y04在内部中具备管理终端装置的设备管理DB(DataBase)。
在设备管理DB(Y041)中,接收与通信装置信息(参照图442的信息Y051)建立了联系的终端装置信息(信息Y052d)。在本DB中,将通信设备作为母设备、将终端装置作为子设备,与母设备建立联系而管理。此外,对子设备附加由通信装置取得的位置信息,能够同时管理终端装置存在于哪里(终端装置Y01的位置)的信息。
如以上这样,在本实施方式的系统中,将终端装置(终端装置Y01)的终端装置信息(信息Y015D)通过通信设备(通信装置Y02)经由近距离无线通信读出,在通信装置中,将通信装置的制造号码Y025N、将通信设备接触在终端装置上而能够进行近距离无线通信的(时的)位置信息(信息Y027D)建立对应,向服务器发送。在服务器中,能够将通信装置作为母设备、将终端设备作为子设备、进行对应建立而管理(参照图442)。
因而,在制造商侧判断为终端设备可能发生重大事故时,终端装置(终端装置Y01)的回收变得容易,能够将重大事故的可能性显示在对应的通信设备(通信装置Y02)的显示部上等,能够实现制品(终端装置Y01)的追踪性,提供安心、安全设备。
图441是表示在图440中说明的系统的各构成要素的动作的顺序图。
首先,从通信装置Y02朝向终端装置Y01,进行用来建立近距离无线通信的轮询(SY01)。
另外,该轮询如上述那样,从通信装置的用电量的观点看,优选的是设置用户操作的开关、在该开关正被按下或已被按下的情况下开始轮询(SY01)。
接着,终端设备Y01通过对通信设备Y02的轮询应答,建立终端装置Y01与通信装置Y02的近距离无线通信(SY02)。
这里,在该时刻,通过通信装置Y02的位置信息测位部Y027取得位置信息,作为终端设备的位置信息提取。
另外,位置信息的取得并不仅限定于轮询完成时。只要是轮询应答转移、近距离无线通信建立的期间,何时都可以。主旨是,通过取得建立只能在几厘米内通信的近距离无线通信的(装置(终端装置Y01)的)位置信息,将终端装置的场所高精度地提取,这是重要的。
在SY02中在近距离无线通信建立后,终端装置认证通信设备,使用采用一般的公开密钥加密的认证,来实施通信装置对终端装置的认证,并且暂时在终端装置与通信装置间将生成的加密密钥进行密钥共享(SY03)。以后,在本近距离无线通信建立的期间中,通过将通信路径使用该加密密钥加密而通信,能够防止盗听。
如果密钥共享完成,则将记录在终端装置Y01的存储器Y014中的终端装置信息从终端装置Y01向通信装置Y02发送(SY04)。
在通信装置Y02中,如果从终端装置Y01接收到终端装置信息,则存储到通信装置的存储器Y024中(SY05)。
在通信装置Y02中,如果从终端装置Y01完成终端装置信息的接收,则从通信装置Y02对服务器Y04发出连接请求(SY06)。
在服务器Y04中,对SY06的连接请求返回应答,建立通信(SY07)。
如果通信装置Y02与服务器Y04的通信建立,则为了对服务器发送终端装置的终端装置信息,附加通信装置的通信装置信息(SY08)。
另外,所谓通信装置信息,是通信装置的制造号码、与终端装置建立近距离无线通信的期间的通信装置的位置信息、如果登录到通信装置设备中则是登录的用户的邮件地址、如果登录到通信装置中则是向登录的服务器的连接账户等。
另外,也可以从终端装置Y01向通信装置Y02取得服务器Y04的地址等的、从多个计算机(服务器)中特定服务器Y04的信息(例如参照图450的地址Y01Ua)。并且,也可以进行从通信装置Y02向由取得的信息确定的服务器Y04的通信。
在SY08中,在对终端装置信息附加通信装置信息的通信装置信息后,将带有通信装置信息的终端装置信息(参照图440的数据Y036D)向服务器Y04发送(SY09)。
在服务器Y04中,通过将从通信装置Y02接收到的带有通信装置信息的终端装置信息登录到设备管理DB(Y041)中而完成处理。
由此,在服务器Y04中,通过将由通信装置Y02接触而建立了近距离无线通信的终端设备与通信装置的识别信息(制造号码等)建立联系而管理,能够进行按照整个家中的设备管理。
此外,作为终端装置的设置场所登录的位置信息,使用通信设备与终端装置建立了近距离无线通信的(时的通信设备的)位置信息。本实施方式的近距离无线通信由于使用一般的HF带域(13.56MHz带),所以其可通信距离是几厘米。因而,通过将建立了近距离无线的位置信息设定为终端设备的(时的)位置信息,误差最大为几厘米,为了确保制品的追踪性而能够确保充分的精度。
图442是在服务器Y04的设备管理DB(Y041)中与通信终端Y02建立对应管理的终端装置群的概念图。
另外,即,例如设备管理DB Y041具有的数据的数据构造也可以是对应于该概念图的构造的构造。另外,请适当也参照图483。
在通信设备Y02中,在进行购买终端装置时的使用者登录等的情况下,通过在设置终端设备后、用通信设备接触终端装置,将终端设备的终端设备信息经由近距离无线通信读出到通信设备中,附加通信装置信息而向服务器发送。
于是,在服务器侧的设备管理DB中,将通信装置作为母设备、将终端设备作为子设备建立关联而管理。
具体而言,在DB内,通过与通信设备的制造号码(Y051)建立联系、作为由通信装置接触的终端装置1(例如微波炉)Y052、终端装置2(例如洗涤机)Y053、终端装置3(例如电视机)Y054而将作为各终端装置的终端装置信息的所在信息(经纬、高度等)、使用状况信息(使用履历、错误代码、使用时间等)与通信设备建立联系而管理。
通过这样,能够起因于用通信装置的接触而进行按照整个家中的设备的管理,能够实现终端装置的追踪性。
此外,当近距离无线通信建立时,通信装置读出位置信息,作为终端装置的位置信息检测,所以能够在近距离无线通信为可通信的几厘米单位的误差的范围中登录终端设备的位置。为了实现这一点,通过利用搭载在通信装置中的GPS检测终端装置的位置信息,不需要每个终端设备具有GPS,能够实现成本的削减。
图443是表示用通信设备(通信装置)Y02接触终端装置Y01时的向通信设备的显示部输出的显示画面的概念图。
另外,通信装置Y02也可以具有图440所示的显示部Y02x。并且,各个显示画面Y02xS(图443)也可以由该显示部Y02x显示。
首先,对将通信设备接触在终端装置上而进行设备登录的情况进行说明。
如果操作通信装置Y02而启动通信装置的读写器应用,则在画面上显示,以使其接触以近距离无线通信通信的终端装置(Y060)。
如果接触,则通信设备与终端装置的近距离无线通信建立,通信装置从终端装置读出终端装置信息,取得当前的位置信息,暂时存储到存储器中,建立与服务器Y04的通信,将通信装置信息和附加的终端装置信息向服务器发送。
在服务器中,判断发送来的终端装置信息是否已经登录在设备管理DB中,在判断为没有登录的情况下,使通信装置的显示部显示敦促设备的登录的消息(Y061)。
接着,如果用户选择设备的登录,则将敦促设备的位置信息的登录的消息从服务器向通信装置输出,在用户选择了登录的时刻,将与从通信设备向服务器发送的终端装置信息建立了联系的位置信息作为登录的终端装置的位置信息登录到服务器的设备管理DB中(Y062)。
另一方面,对终端设备的位置信息与在服务器的设备管理DB中登录的信息不同的情况进行说明。
如果操作通信装置Y02而启动通信装置的读写器应用,则在画面上显示,以使其接触以近距离无线通信通信的终端装置(Y063)。
如果将通信设备接触在终端装置上,则建立近距离无线通信,通信装置从终端设备读出终端设备信息并取得位置信息,将附加了通信装置信息的终端装置向服务器发送。
在服务器中,从设备管理DB通过将包含在从服务器接收到的终端装置信息中的终端装置的制造号码与登录在设备管理DB中的制造号码对照,来确认被接触的终端设备已经登录,并且从由服务器接收到的通信装置信息中提取位置信息,与登录在设备管理DB中的位置信息对照,判断是否一致。当然,由于在位置信息中伴随着误差,所以通过实施几厘米量级(与能够进行近距离无线通信的距离对应的值)下的阈值判断,进行是相同的位置还是不同的位置的判断。在判断为是不同的位置的情况下,将通知与已经登录的位置信息不同的情况的消息向通信装置的显示部输出(Y064)。
接着,将敦促用当前的位置信息更新终端设备的位置信息的消息显示在通信装置的显示部上(Y065)。
如果用户选择了更新,则将因接触而由通信装置取得的位置信息作为终端装置的新的位置信息登录到服务器的设备管理DB中。
因而,在本实施方式中,在暂时登录的位置信息随着终端装置的设置场所的移动而被变更的情况下,也能够更新为因接触而取得的新的位置信息,能够提高终端装置的追踪性的精度。
(实施方式B4)
如上述那样,例如在实施方式A(A1~A13)、B(B1~B7)之中,最先理解该实施方式B3是比较优选的。
并且,如上述那样,在该实施方式B4中,参照图444~图461等。
图444是本实施方式的RF-ID的功能块图。
图444的RF-IDN10(参照图479的RF-ID标签98f等)由近距离无线通信用的天线N11、在来自天线N11的电力下动作的电源部N12、记录个体识别信息的作为非易失性存储器的存储器N13、将记录在存储器N13中的内容再现的再现部N14、和将存储在存储器N13中的数据经由天线N11发送的数据转送部N15构成。
存储器N13由确定搭载RF-IDN10的制品的UID部N13A、确定搭载RF-IDN10的制品的型号的型号ID部N13B、登录服务器N40的服务器特定信息N13C、使移动设备N20执行的动作程序N13D构成。
图445是本实施方式的移动设备的功能块图。
图445的移动设备N20(参照图480的便携型通信装置98b)由接收从RF-IDN10发送的数据的RF-ID读写器N21、存储从RF-IDN21发送的数据的RF-ID存储部N22、执行包含在数据中的程序的程序执行部N23、进行包含在数据中的图像信息的数据处理的数据处理部N24、数据处理部N24处理的图像信息被输出的存储器N25、将暂时存储在存储器N25中的图像显示的显示部N26、经由通用的网络与其他设备连接的通信I/F(interface)部N27、经由通信I/F部N27发送数据的发送部N28、经由通信I/F部N27接收数据的接收部N29、通过通信I/F部N27经由通用网络与其他设备进行通信的通信部N30、测量移动设备N20的绝对的位置信息的GPSN31(参照图481的GPS装置98j1x)、测量移动设备N20的相对的位置信息的6轴传感器N32(参照图488的加速度传感器98j2x)、存储PSN31和6轴传感器N32的测量结果的位置信息存储部N33、解析存储在位置信息存储部N33中的位置信息的CPUN34构成。
图446是本实施方式的登录服务器的功能块图。
图446的登录服务器N40(参照图480的服务器98c等)由经由通用的网络与其他设备连接的通信I/F部N41、经由通信I/F部N41发送数据的发送部N42、经由通信I/F部N41接收数据的接收部N43、通过通信I/F部N41经由通用网络与其他设备进行通信的通信部N44、管理从通信I/F部N41接收到的制品信息的制品信息管理部N45、存储对移动设备N20发送的图像数据的图像数据存储部N46、存储对移动设备N20发送的程序的程序存储部N47、通过将存储在制品信息管理部N45中的信息组合而制作表示搭载有RF-ID的制品的位置关系的地图的位置信息制作部N48、以及根据存储在控制信息管理部N45中的信息和移动设备N20的当前的位置信息对搭载了RF-IDN10的制品进行控制的制品控制部N49构成。
本实施方式根据由移动终端N20的位置信息和搭载有RF-IDN10的宅内的制品的位置信息制作的制品地图的信息,控制宅内的制品,这一点与其他实施方式不同。
图447是表示本实施方式的网络制品的配置的一例的图。
在图447的配置图中,在1层的起居室中配置有电视机N10A、BD记录机N10B、空调N10C和FF制暖机N10K。并且,在1层的西式房间中配置有空调N10D和火灾报警器N10E。并且,在1层的日式房间中配置有空调N10F和火灾报警器N10G。并且,在2层配置有电视机N10I和空调N10J。并且,在屋顶配置有太阳能电池面板N10H(请也参照图478等)。
图448是表示本实施方式的系统的一例的结构图。
如图所示,在图448中,由设置在图447的配置图中的家电构成系统。
由搭载有图444的RF-IDN10和经由通用的网络与其他设备连接的通信I/F部N18的电视机N10A~FF制暖机N10K、图445的移动设备N20、图446的登录服务器N40、将电视机N10A~FF制暖机N10K与移动设备N20连接的宅内网络N100、以及与宅内网络N100连接并连接在登录服务器N40上的宅外网络N101构成。
使用图449~图454,表示将搭载有RF-IDN10的制品的信息向登录服务器N40的登录的方法的一例。
图449是将电视机N10A的信息登录到登录服务器N40中的顺序图。
首先,如果用户将移动设备N20的RF-ID读写器N21向电视机N10A的天线N11靠近(参照图480的运动98b1),则从RF-ID读写器N21经由天线N11对电源部N12供电,对RF-IDN10的各部供电(图449(1))。
RF-IDN10的再现部N14(图444)制作包括存储在存储器N13的UID部N13A、型号ID部N13B、服务器特定信息N13C、动作程序N13D中的信息的制品数据。
图450是表示本发明的实施方式B4的制品数据和服务器登录数据的结构的一例的图。
图450的(a)栏表示制品数据的结构的一例。
图450(a)的制品数据由作为型号ID的电视机N10A的型号(包括颜色信息)、作为UID的电视机N10A的制造号码、作为服务器特定信息的登录服务器N40的地址信息、登陆ID和口令、由移动设备N20的程序执行部N23执行的动作程序构成。
RF-IDN10的数据转送部N15将制品数据(的信号)调制,经由天线N11向移动设备N20的RF-ID读写器N21发送(图449的(2))。
移动设备N20的RF-ID读写器N21接收制品数据,存储到RF-ID存储部N22中。
程序执行部N23(参照图445等)执行包含在存储于RF-ID存储部N22中的制品数据中的动作程序。
这里,作为动作程序,执行“制作对包含在制品数据中的登录服务器N40的地址发送的服务器登录数据”的动作。
图450的(b)栏表示服务器登录数据的结构的一例。
图450(b)的服务器登录数据由作为型号ID的电视机N10A的型号(包括颜色信息)、作为UID的制造号码、作为服务器特定信息的登录服务器N40的登陆ID和口令、移动设备N20的位置信息构成。
接着,关于移动设备N20的位置信息(参照图480的位置信息98j1x)进行说明。
GPSN31在移动设备N20启动中总是动作,将测量的结果存储到位置信息存储部N33中。
6轴传感器N32在GPSN31是测量范围外时动作,将测量的结果存储到位置信息存储部N33中。
程序执行部N23根据存储在位置信息存储部N33中的GPSN31和6轴传感器N32的测量结果,制作服务器登录数据的位置信息。
程序执行部N23根据制作的位置信息和存储在RF-ID存储部N22中的信息,制作图450的(b)栏所示的服务器登录数据。
接着,通信部N30将服务器登录数据的发送目的地设定为存储在RF-ID存储部N22中的登录服务器N40的地址。
发送部N28经由通信I/F部N27发送服务器登录数据(图449(3))。
登录服务器N40的接收部N43经由通信I/F部N41接收服务器登录数据。
通信部N44确认服务器登录数据的登陆ID和口令。
如果登陆ID与口令一致,则将服务器登录数据的型号ID、UID和位置信息存储到制品信息管理部N45中。
图451是表示由本发明的实施方式B4的制品信息管理部存储的制品信息的结构的一例的图。
图451的(a)栏表示由制品信息管理部N45存储的电视机N10A的制品信息的一例。
由型号ID、UID和位置信息构成。位置信息由经度、纬度、高度构成。
接着,如果电视机N10A的登录完成,则登录服务器N40的通信部N44制作包括存储在预先图像数据存储部N46中的图像信息和存储在程序存储部N47中的动作程序的服务器登录完成通知,将发送目的地设定为移动设备N20的地址。
发送部N42经由通信I/F部N41发送服务器登录完成通知(图449(4))。
移动设备N20的接收部N29经由通信I/F部N27接收服务器登录完成通知。
通信部N30确认服务器登录完成通知的发送目的地地址,向程序执行部N23转送。
程序执行部N23执行包含在服务器登录完成通知中的动作程序。
这里,作为动作程序而执行“在显示部N26上显示图像数据”的动作。
程序执行部N23对数据处理部N24指示图像数据的处理。
数据处理部N24进行图像数据的数据处理。例如,在下载的图像被压缩的情况下进行其解压缩、在被加密的情况下进行其解密、以基于图像显示模式表单的图像显示模式将下载的图像信息排列等。
如果处理结束,则数据处理部N24将图像数据暂时存储到存储器N25中。
显示部N26将储存在存储器N25中的图像数据显示。
这里,储存在存储器N25中的图像数据是表示通知制品的登录已正常完成的图像。
图451的(b)栏表示以与电视机N10A同样的步骤将BD记录机N10B~FF制暖机N10K登录到登录服务器N40中之后的由登录服务器N40的制品信息管理部N45管理的制品信息的一例。
图447的从宅内登录的制品信息用相同的表管理。这里,将由相同的移动设备N20登录的制品判断为从相同的宅内登录的制品。
图452是表示RF-ID N10的制品登录时的处理流程的一例的图。
首先,RF-IDN10成为来自移动终端N20的供电等待状态(N001)。
RF-IDN10在从移动终端N20接受到供电的情况下(N001:Y)转移到N002,如果没有接受到(N001:N)则回到N001。
在N002中制作包括存储器N13的信息的制品数据。然后,在N003中将制品数据从天线N11向移动设备N20发送而结束处理。
图453是表示移动设备N20的制品登录时的处理流程的一例的图。
首先,在N001中,从RF-ID读写器N21向RF-IDN10供电。
接着,移动设备N20成为来自RF-IDN10的制品数据的等待状态(N005)。
移动终端N20在从RF-IDN10接受到制品数据的情况下(N005:Y)转移到N006,如果没有接受到(N005:N)则回到N004,再次对RF-IDN10供电。
在N006中,将接收到的制品数据解析。接着,执行包含在制品数据中的动作程序。
在N007中,移动终端N20测量本机的位置(参照图480的位置信息取得部98j)。
在N008中,制作包括位置的测量结果的服务器登录数据。
在N009中,将服务器登录数据从通信I/F部N27向登录服务器N40发送(参照图480的发送部98o)。
接着,移动设备N20成为来自登录服务器N40的服务器登录完成通知的等待状态(N010)。
移动终端N20在从登录服务器N40接受到服务器登录完成通知的情况下(N010:Y)转移到N011。
在N011中,将服务器登录完成通知解析。然后,在N012中在显示部N25上显示包含在服务器登录完成通知中的图像信息,结束处理。
图454是表示登录服务器N40的制品登录时的处理流程的一例的图。
首先,登录服务器N40成为来自移动设备N20的服务器登录数据的等待状态(N013)。
登录服务器N40在从移动终端N20接受到服务器登录数据的情况下(N013:接受到)转移到N014,如果没有接受到(N013:没有接受到)则回到N013。
在N014中解析服务器登录数据,确认登陆名与口令是否一致。然后,在N015中如果登陆名与口令一致,则将制品信息存储到制品信息管理部N45中。
在N016中,通知包括动作程序和图像信息的服务器登录完成通知。在N017中将服务器登录完成通知从通信I/F部N41向移动设备N20发送,结束处理。
接着,使用图455和图456,表示通过移动设备N20的位置信息对搭载有RF-IDN10的制品的控制方法的一例。
图455是表示移动设备N20在从1层向2层移动的情况下控制空调N10J和电视机N10A的电源的一例的顺序图。
移动设备N20的CPUN34监视存储在位置信息存储部N33中的位置信息,如果满足预先设定的条件则制作包括当前的位置信息的位置信息数据。
图456是表示本发明的实施方式B4的位置信息数据和制品控制数据的结构的一例的图。
图456的(a)栏表示位置信息数据的结构的一例。
由预先在制品登录时取得并存储在未图示的存储器中的登录服务器N40的第2服务器登陆ID和第2服务器登陆口令、从位置信息存储部N33取得的移动设备N20的当前的位置信息构成。
通信部N30将位置信息数据设定到制品登录的登录服务器N40的地址中。
发送部N28经由通信I/F部N27发送位置信息数据(图455(1))。
登录服务器N40的接收部N43经由通信I/F部N41接收位置信息数据。
通信部N44确认位置信息数据的第2服务器登陆ID和第2服务器登陆口令。
通信部N44如果第2服务器登陆ID与第2服务器登陆口令一致,则向制品控制部N49转送位置信息数据。
制品控制部N49对位置信息制作部N48转送第2服务器登陆ID。
位置信息制作部N48按照制品控制部N49的指示,根据第2服务器登陆ID取得登录在制品信息管理部N45中的图451的(b)栏的信息,根据各制品的位置信息制作图447的表示宅内的制品的位置的制品地图,递交给制品控制部N49。
图457是表示位置信息制作部N48制作是制品地图的一例的图。
制品地图在3D地图中根据各制品的位置信息在各制品所位于的部位配置制品的形象图。
制品控制部N49使用包含在位置信息数据中的移动设备N20的当前位置和由位置信息制作部N48制作的家电地图进行制品(电视机N10A~FF制暖机N10K)的控制。
这里,制品控制部N49将与从移动设备N20接收到的位置信息(的位置)最近的(位置的)商品的电源设为ON(其他商品的电源不为ON)。另外,还请适当参照后述的图486等。这里,制作包括将空调N10J的电源设为ON的命令的设备控制数据。
图456的(b)栏表示第1设备控制数据的结构的一例。
由空调N10J的型号ID、UID和将空调N10J的电源设为ON的制品控制命令构成。
通信部N44在第1设备控制数据中设定移动设备N20的地址作为发送目的地。
发送部N42经由通信I/F部N41发送第1设备控制数据(图455(2))。
移动设备N20如果接收到第1设备控制数据,则根据包含在第1设备控制数据中的型号ID和UID,向空调N10J转送第1设备控制数据(图455(2)′)。
空调N10J如果从通信I/F部N18接收到第1设备控制数据,则如果本机的电源为OFF状态则将电源设为ON。
接着,制品控制部N49将与从移动设备N20接收到的位置信息最远的商品的电源设为OFF。这里,制作包括将电视机N10A的电源设为OFF的命令的设备控制数据。
图456的(c)栏表示第2设备控制数据的结构的一例。
由电视机N10A的型号ID、UID、将电视机N10A的电源设为OFF的制品控制命令构成。
通信部N44在第2设备控制数据中设定移动设备N20的地址作为发送目的地。
发送部N42经由通信I/F部N41发送第2设备控制数据(图455(2))。
移动设备N20如果接收到第2设备控制数据,则根据包含在第2设备控制数据中的型号ID和UID,对电视机N10A转送第2设备控制数据(图455(3)′)。
电视机N10A如果从通信I/F部N18接收到第2设备控制数据,则如果本机的电源为ON状态则将通信功能以外的电源设为OFF。
如以上说明,根据本实施例,通过使用RF-ID的近距离无线通信和位置信息,能够用登录服务器管理搭载有RF-IDN10的制品的位置。由此,能够实现控制对应于移动设备N20的当前位置的制品的自动控制。
此外,由于作为位置信息而使用由测量相对的位置信息的6轴传感器N32(运动传感器)测量的信息作为位置信息,所以能够在GPSN31的测量范围外使用6轴传感器N32的测量结果将位置信息更新,在GPSN31的测量范围外也能够取得正确的位置信息。
另外,本实施方式的移动设备N20保持有GPSN31和6轴传感器N32,但并不限定于此。例如,移动设备N20也可以是仅保持6轴传感器N32的结构。
图458是表示由制品信息管理部N45存储的制品信息的结构的一例的图。
在此情况下,登录服务器N40的制品信息管理部N45如图458所示,为以最初登录的电视机N10A为基准点存储与电视机N10A的相对的位置信息的结构。
图459是表示位置信息制作部N48制作的制品地图的一例的图。
此外,在此情况下,位置信息制作部N48制作的制品地图如图459所示,轴由x坐标、y坐标、z坐标构成。
另外,在本实施方式中,将搭载在RF-IDN10中的制品的型号ID、UID和移动设备N20的位置信息登录在登录服务器N40中,但并不限定于此。例如,登录服务器N40在再次接收到已登录的制品的服务器登录数据的情况下,也可以进行图460的表所示的处理。
图460是表示本发明的实施方式B4的精度识别符的一例的图。
对图460进行说明。
图460由在表示位置信息的精度的精度识别符、对应于各识别符的型号ID、再次接收到的服务器登录数据的位置信息和在已登录在制品信息管理部N45中的位置信息不同的情况下的处理构成。
登录服务器N40若根据再次接收到的服务器登录数据中包含的型号ID和UID判断为已经登录在制品信息管理部N45中,则确认型号ID。在型号ID是电视机、BD记录机、FF制暖机的情况下,将制品信息管理部N45更新为再次接收到的服务器登录数据中包含的位置信息。
此外,在型号ID是空调、太阳能电池面板、火灾报警器的情况下,对移动设备N20通知由制品信息管理部N45存储的位置信息。移动设备N20基于从登录服务器N40接受到的位置信息修正本机的当前的位置信息。
另外,在图460中精度识别符是两种,但并不限定于此,也可以设置两种以上,并按每个精度识别符设置不同的处理。
另外,本实施方式的制品控制部N49搭载在登录服务器N40中,但并不限定于此。例如也可以搭载在移动设备N20、从登录服务器N40取得制品地图而动作。此外,除了移动设备N20以外,也可以搭载在与宅内网络100连接的非图示的宅内服务器。在此情况下,移动设备N20将位置信息向宅内服务器发送,从宅内服务器取得制品地图。
图461是表示实施方式B4的系统的一例的结构图。
另外,本实施方式的移动装置N20通过通用I/F部(通信I/F部)N27经由宅内网络100和宅外网络101与登录服务器N40连接,但并不限定于此。例如移动设备具有便携电话的功能,也可以代替通用I/F部N27而用可连接在便携电话网(例如LTE)上的接口至少经由便携电话网连接在登录服务器N40上(参照图461)。此外,移动设备N20也可以具有能够向WiMAX等的线路网连接的接口,至少经由WiMAX网络连接在登录服务器N40上。也可以利用其他的某种网络连接在登录服务器N40上。
另外,在本实施方式中,在制品控制的判断中利用由位置信息制作部N48制作的制品地图,但并不限定于此。例如,也可以将由位置信息制作部N48制作的制品地图的图像数据向移动设备N20发送,在移动设备N20的显示部N26上显示。
另外,在本实施方式中,位置信息制作部N48基于图434(b)的信息制作制品地图,但并不限定于此。例如,也可以根据位置信息从制品信息管理部N45检测设置在接近的宅内的制品信息,制作接近的宅内的制品地图。在此情况下,制品控制部N49通过将图457的制品地图与接近的宅内的制品地图组合而进行制品的控制。例如在本实施例中将距离移动设备N20(的位置)最远的(位置的)电视机N10A的电源设为OFF,但如果在接近的宅内有太阳能电池面板,则进行使电视机N10A的电源保持为ON等的控制。
另外,在本实施方式中,在登录服务器N40的制品信息管理部N45中存储有各制品的型号ID、UID、位置信息,但并不限定于此。例如,也可以经由各制品的通信I/F部N18实时地取得电源的ON、OFF状态而管理。在此情况下,制品控制部N49将距离移动设备N20最远的电视机N10A电源设为OFF,但如果预先设定的台数的制品为电源OFF的状态,则进行使电视机N10A的电源保持为ON等控制。
另外,在本实施方式中,制品控制部N49将最远的制品的电源设为OFF而将最近的制品的电源设为ON,但并不限定于此。
也可以基于移动设备N20的位置信息控制多台制品的电源的ON、OFF。
另外,在本实施方式中,制品控制部N49将最远的制品的电源设为OFF而将最近的制品的电源设为ON,但并不限定于此。例如,移动设备N20的CPUN34也可以在非图示的存储器中作为移动履历而存储位置信息、定期地对登录服务器N40通知移动履历。在此情况下,登录服务器N40根据移动设备N20的移动履历推测哪个制品处于相同的房间、层中而管理推测结果。此外,制品控制部N49也可以基于推测结果控制处于相同的房间中的制品的电源的ON、OFF。例如,如果根据移动履历推测为电视机N10A和空调N10C处于相同的房间中,则制品控制部N49在将电视机N10A的电源设为OFF的情况下也将空调N10C的电源设为OFF。
此外,除了移动履历以外,也还可以收集各制品的ON、OFF切换的时间信息而推测哪个制品处于相同房间、层中。
另外,在本实施方式中,制品信息管理部N45管理图451或图458的制品信息,位置信息制作部N48制作图457或图459的制品地图,但并不限定于此。例如,将用户制作的宅内平面布置的图像数据从移动设备N20向登录服务器N40发送,用制品信息管理部N45管理。在此情况下,位置信息制作部N48将图451或图458的制品信息与宅内平面布置的图像数据组合而制作图447那样的制品地图。
此外,关于宅内或平面布置的图像数据(参照后述的、由图像生成部生成的图像等)那样的个人信息,也可以进行与制品信息不同的加密的处理、从移动终端N20向登录服务器N40发送的处理。
此外,也可以将宅内平面布置的图像数据那样的个人信息向与制品信息不同的服务器发送,登录服务器N40在制作制品地图时以向不同的服务器参照的步骤制作制品地图。
另外,也可以将本实施例与其他实施方式组合。例如,也可以通过将实施方式B3的终端装置Y01的功能搭载在RF-IDN10中、将实施方式B3的通信装置Y02的功能搭载在移动终端N20中,在进行图449的制品登录处理之前从图441所示的轮询进行相互认证、密钥共享的处理。此外,与其他实施方式组合也是本发明的范围内。
(实施方式B5)
图462是本实施方式的整体系统图。
图462的系统由RF-ID O50(参照图479的RF-ID标签98f)、移动设备O60(参照便携型通信装置98b)、第1服务器O101、及第2服务器O103构成。
RF-IDO50是具有NFC通信功能的设备,搭载在电冰箱、微波炉、洗涤机、电视机、录像设备等电子制品中,在制品的存储器中,作为制品信息而保持有作为表示制品的ID的制造号码、制品的使用履历信息、错误信息等。
移动设备O60具有能够与RF-IDO50的NFC通信功能通过近距离无线通信进行通信的NFC通信功能,具有将由RF-IDO50保持的制品信息读出的读写器功能。此外,所谓移动设备,是便携设备,是指便携电话终端等的便携设备、或电视机的遥控器终端。
第1服务器O101是通过因特网等通用的网络与上述移动设备O60可通信地连接的服务器,在内部中具有DB(数据库),在上述DB中,储存由移动设备O60从RF-IDO50读出的RF-ID信息。
第2服务器O103是通过因特网等通用的网络与上述第1服务器O101可通信地连接的服务器,在内部中具有DB(数据库),在上述DB中储存有设置了RF-IDO50的坐标的建筑物信息。
RF-IDO50由制品IDO51、第1服务器URLO52、服务IDO53、精度识别符O54构成。
制品IDO51是用于搭载有RF-ID的制品的识别的ID、例如制品的型号(包括颜色信息)、制造号码。
第1服务器URLO52是第1服务器O101的地址信息。
服务IDO53设定有表示电视机、空调、电冰箱等制品分类的ID。
精度识别符O54是表示由搭载有RF-IDO10的制品ID赋予的位置信息的可靠性的信息。
如以上这样,在本实施方式的RF-IDO50中,如果能够与移动设备O60接近而进行近距离无线通信,则能够将储存在存储器中的型号、制造号码和第1服务器的URL、服务ID、精度识别符向移动设备O60发送。
接着,对本实施方式的移动设备O60进行说明。
移动设备O60由天线O61、RF-ID读写器O62、坐标精度识别信息O63、CPUO64、程序执行部O65、数据处理部O66、存储器部O67、显示部O68d、通信天线O68、发送部O70、接收部O71、通信部O72、位置信息存储部O73、RF-ID存储部O74、RF-ID检测部O75、URLO76、再现部O77、相对位置运算部O78、坐标信息送出部O79、记录部O80、建筑物坐标数据输出部O81、登录坐标O82、判断部O83、基准坐标O84、位置信息输出部O85、位置信息O86、朝向信息O87、磁罗盘O88、朝向信息O89、卫星用天线O90、位置信息运算部O91、位置信息O92、位置信息修正部O93、朝向信息修正部O94、角速度传感器O95、角速度传感器O96、角速度传感器O97、加速度传感器O98、加速度传感器O99、加速度传感器O100、积分器O105、积分器O106、绝对坐标运算部O107构成。
天线O61为了搜索可近距离无线通信的RF-ID而朝向不特定的RF-ID进行供电。此外,在有应答的情况下,建立与RF-ID的近距离无线通信,接收从RF-IDO50发送的调制后的信息。
RF-ID读写器O62将接收到的信息解调。
坐标精度识别信息O63从接收到的信息中提取精度识别符。
CPUO64是进行移动设备的系统控制的部分,控制移动设备的各构成要素的动作。
程序执行部O65基于包含在接收到的信息中的服务ID执行程序。
数据处理部O66进行从第1服务器发送的数据处理。
存储器部O67将数据暂时存储。
显示部O68d显示存储在存储器部O67中的信息。
通信天线O68与因特网等通用的网络连接。
发送部O70进行向因特网等通用的网络发送的数据的调制。
接收部O71进行从因特网等通用的网络接收的数据的解调。
通信部O72制作并解析经由因特网等通用的网络与其他设备进行通信的数据。
位置信息存储部O73存储由本移动设备测量的位置信息。
RF-ID存储部O74存储从RF-IDO50取得的制品ID、服务ID。
RF-ID检测部O75检测来自RF-IDO10的应答。
URLO76根据从RF-IDO50接收到的信息提取第1服务器的URL。
再现部O77将存储在位置信息存储部O73中的信息再现。
相对位置运算部O78根据从位置信息存储部O73再现的位置信息和移动设备O60的当前的位置信息计算相对位置信息。
坐标信息送出部O79将从RF-ID检测部O75接受到触发事件的时刻的移动设备O60的位置信息送出。
记录部O80将从坐标信息送出部O79送出的位置信息写入到位置信息存储部O73中。
建筑物坐标数据输出部O81提取由通信天线接收的建筑物坐标数据。
登录坐标O82提取由通信天线接收的登录坐标的数据。
判断部O83判断由登录坐标O82提取的登录坐标的数据的精度。
基准坐标O84为,如果判断部O83的判断的结果是登录坐标的数据能够信赖,则将登录坐标的数据设定为基准坐标,将设定的基准坐标数据递交给位置信息修正部O93。
位置信息输出部O85根据来自朝向信息O87和位置信息O86的信息制作位置信息并输出。
位置信息O86和朝向信息O87是被从由位置信息修正部O93和朝向信息修正部O94构成的绝对坐标运算部O107输出的移动设备O60的位置信息。
磁罗盘O88表示方位。
朝向信息O89制作磁罗盘O88的方位信息。
卫星用天线O90与卫星通信(参照图481的GPS装置98j1x)。
位置信息运算部O91根据与卫星的通信结果,运算移动设备O60的位置信息。例如,求出纬度、经度、高度。
位置信息O92根据位置信息运算部O91的运算结果制作位置信息。
位置信息修正部O93将来自积分器O105和积分器O106的位置信息的结果用位置信息O92、基准坐标O84和来自建筑物坐标数据输出部O81的信息进行修正。
朝向信息修正部O94利用来自朝向信息089的信息将来自积分器O105和积分器O106的朝向信息的结果进行修正。
角速度传感器O95计测移动设备O60的x轴方向的角速度。
角速度传感器O96计测移动设备O60的y轴方向的角速度。
角速度传感器O97计测移动设备O60的z轴方向的角速度。
加速度传感器O98计测移动设备O60的x轴方向的加速度。
加速度传感器O99计测移动设备O60的y轴方向的加速度。
加速度传感器O100计测移动设备O60的z轴方向的加速度。
积分器O105将角速度传感器O95、角速度传感器O96和角速度传感器O97的计测结果积分。
积分器O106将加速度传感器O98、加速度传感器O99和加速度传感器O100的计测结果积分。
绝对坐标运算部O107由位置信息修正部O93和朝向信息修正部O94构成,计算移动设备O60的绝对坐标。
如以上这样,本实施方式的移动设备O60能够测量RF-IDO50的制品信息和取得制品信息时的移动设备O60的位置信息,能够将上述位置信息与RF-IDO50的制品信息建立关联而向第1服务器O101发送。
此外,能够通过根据接收到的登录坐标设定的基准坐标、建筑物坐标数据和由位置信息O92取得的位置信息、由朝向信息O89取得的信息,将本移动设备O60的当前的位置信息修正。
此外,还能够将第1服务器O101的登录坐标数据与第2服务器O103的建筑坐标数据组合而制作设置有由移动设备O60登录的RF-IDO10的制品的建筑物的3D制品地图。此外,还能够将制作出的3D制品地图显示在显示部O68d上。
接着,对本实施方式的第1服务器O101进行说明。
第1服务器O101是经由因特网等通用的网络与移动设备O60连接的服务器。本第1服务器O101在内部中具备管理搭载有RF-IDO50的制品的登录坐标数据O102。
在登录坐标数据O102中,接受与移动设备O60建立了联系的RF-IDO10的信息。在登录坐标数据O102中,将移动设备O60作为母机、将RF-IDO50作为子设备而与母设备建立关联管理。此外,对于子设备,赋予由移动设备O60取得的位置信息,能够同时管理终端装置存在于哪里的信息。此外,也可以通过将从第2服务器O103接收的建筑物坐标数据与登录坐标数据O102组合,与移动设备O60同样制作设置在建筑物中的3D制品地图。
接着,对本实施方式的第2服务器O103进行说明。
第2服务器O101是经由因特网等通用的网络与第1服务器O103连接的服务器。本第2服务器O103在内部中具备将现有的建筑物的平面布置与各建筑物的坐标(例如纬度、经度、高度)建立关联而管理的建筑物坐标数据库O104。
在建筑物坐标数据库O104中,通过保持现有的建筑物的平面布置与坐标信息,也能够与第1服务器的登录坐标数据组合,与移动设备O60同样制作在设置在建筑物中的3D制品地图。此外,建筑物坐标数据库O104也可以通过作为个人信息而与第1服务器O101另外地用安全设定较高的(例如不能从移动设备O60直接通信的设定)服务器管理来减少个人信息的泄露。
如以上这样,在本实施方式的系统中,将RF-IDO50的制品信息通过移动设备O60经由近距离无线通信读出,在移动设备O60中将接触在RF-IDO50上而能够近距离无线通信的位置信息与RF-IDO50的制品信息建立对应,向第1服务器发送。在第1服务器中,能够将移动设备O60作为母设备、将搭载有RF-IDO50的制品作为子设备建立对应而管理。此外,通过使用搭载有RF-IDO50的制品的位置信息计算各制品的相对位置,能够制作制品的3D地图。
此外,通过设置将建筑物的平面布置和坐标的信息作为数据库保持的第2服务器,能够通过与由第1服务器管理的各制品的位置信息组合来制作各建筑物中的搭载有RF-IDO50的制品的3D地图。
此外,移动设备O60可以通过根据接收到的登录坐标设定的基准坐标、建筑物坐标数据和由位置信息O92取得的位置信息及由朝向信息O89取得的信息,来修正本移动设备O60的当前的位置信息。
接着,说明在第1服务器O101中登录RF-IDO50的制品信息的步骤。
如果用移动设备O60接触在RF-IDO50上而成为能够近距离无线通信的状态,则通过来自移动设备O60的供电,RF-IDO50动作。
RF-IDO50如果被供电,则将存储的制品IDO51、第1服务器URL、服务IDO53和精度识别符O54的信息调制,向移动设备O60发送。
移动设备O60如果通过天线O61接收到制品IDO51、第1服务器URL、服务IDO53和精度识别符O54,则用RF-ID读写器O62解调。
URLO75提取第1服务器URL,向通信部O72传递第1服务器URL的信息。
RF-ID存储部O74存储制品IDO51和服务IDO53的信息。
坐标精度识别信息O63提取精度识别符,传递给判断部O83。
RF-ID检测部O75将通知从RF-IDO50接收到信息的情况的触发事件向坐标信息送出部O79和基准坐标O84传送。
坐标信息送出部O79如果接受到触发事件,则将从位置信息输出部O85接受到的移动设备O60的位置信息递交给通信部O72。
这里,对由位置信息输出部O85输出的移动设备O60的位置信息进行说明。
首先,向绝对坐标运算部O107输入将由角速度传感器O95~O97计测的结果用积分器O105积分后的结果、和将由加速度传感器O98~O100计测的结果用积分器O106积分的结果。
在绝对坐标运算部O107中,使用保持有使用卫星用天线O90由位置信息运算部O91运算的结果的位置信息O92的信息和保持有磁罗盘O88表示的方位的结果的朝向信息O89的信息,对从积分器O105、O106输入的结果用朝向信息修正部O94和位置信息修正部O93进行修正。
接着,绝对坐标运算部O107将修正后的绝对坐标运算部O107朝向信息O87和位置信息O86输出。
位置信息输出部O85用来自朝向信息O87和位置信息O86的信息制作位置信息。
通过以上的步骤,移动设备O60制作位置信息。
接着,程序执行部O65将存储在RF-ID存储部O74中的制品ID、服务ID传递给通信部O72。
通信部O72制作在信息中包括来自坐标信息送出部O79的位置信息和来自程序执行部O65的制品ID、服务ID的数据,将从URLO76接受到的第1服务器的URL设定到数据的地址中,传递给发送部O70。发送部O70将数据调制,经由通信天线O68向第1服务器O101发送。
第1服务器如果从移动设备O60接收到数据,则将数据解调。
在登录坐标数据O102中,将移动设备O60作为母机,将RF-IDO50作为子机,对于作为母机的移动设备O60,将作为子机的RF-IDO50的制品IDO51、服务IDO53和移动设备O60取得RF-IDO50的信息时的位置信息建立联系而管理。
接着,对由移动设备O60制作搭载RF-IDO10、并且已由移动设备O60登录到第1服务器O101中的制品的3D地图的步骤进行说明。
图463是表示本实施方式的RF-IDO50所搭载的制品的配置的一例的图。
在1层的起居室中配置有电视机O50A、BD记录机O50B和空调O50C,在1层的日式房间中配置有空调O50D,在2层中配置有电视机O50E和空调O50F。
在全部制品中搭载有RF-IDO50。此外,假设在上述的第1服务器O101中,在将RF-IDO50的制品信息登录的步骤中,全部制品都使用移动设备O60登录在第1服务器O101的登录坐标数据中。
首先,移动设备O60的通信部O72制作对第1服务器O101请求由移动设备O60登录的制品的信息的制品信息请求数据。
发送部O70对制品信息请求数据进行调制,经由通信天线O68向第1服务器O101发送。
第1服务器O101如果接收到制品信息请求数据,则制作包括将移动设备O60作为母机而建立联系管理的子机的制品信息的制品信息应答数据,向移动设备O60发送。
这里,在制品信息应答数据中,包括电视机O50A、BD记录机O50B、空调O50C、空调O50D、电视机O50E、空调O50F的制品IDO51、服务ID和位置信息。
接着,第1服务器O101对第2服务器O103也发送与制品信息应答数据相同的信息。
在第2服务器O103中,从包含在制品信息应答数据中的各制品的位置信息中提取包括处于与建筑物坐标数据库O104中相同的位置的建筑物的位置(坐标)信息的图像数据。
图464是表示从建筑物坐标数据库O104提取的建筑物坐标数据的图。
包含在建筑物的平面布置的图像和位置信息中。
第2服务器O103将所提取的建筑物坐标数据向移动设备O60发送。
移动设备O60的接收部O71如果经由通信天线O68接收制品信息应答数据,则将其解调,向通信部O72递交。
通信部O72将数据的内容向程序执行部O65递交。
图465是表示由程序执行部O65制作的制品的3D地图的图像数据的一例的图。
程序执行部O65根据作为制品信息应答数据的内容的各制品的位置信息制作图465所示那样的制品的3D地图的图像数据。是基于各制品的位置信息映射到坐标上、此外通过按每个制品而不同的图标使用户一目了然的3D地图。
程序执行部O65将制作出的图像数据递交给数据处理部O66。
数据处理部O66将图像数据暂时存储到存储器部O67中。
显示部O68d显示存储在存储器部O67中的图464所示的制品的3D地图的图像数据。
接着,移动设备O60的接收部O71如果经由通信天线O68接收到来自第2服务器O103的建筑物坐标数据,则将其解调而递交给建筑物坐标数据输出部O81。
建筑物坐标数据输出部O81将建筑物坐标数据解析,递交给显示部O68d。
图466是表示3D地图的一例的图。
显示部O68d显示将图464的图像数据与已经显示的图465的图像数据组合的图466所示的制品的3D地图的图像数据。
如以上这样,能够制作对拥有移动设备O60的用户一目了然的制品的3D地图。
接着,对由移动设备O60使用建筑物坐标数据修正移动设备O60的位置信息的步骤进行说明。
这里,以在第1服务器O101中登录图463的空调O50D的制品信息的情况为例进行说明。
另外,与第1服务器O101从移动设备O60接收在信息中包含有制品ID、服务ID的数据为止的上述步骤是同样的,所以省略。
第1服务器O101如果取得空调O50D的制品信息,则将所取得的空调O50D的位置信息向第2服务器O103发送。
第2服务器O103从建筑物坐标数据库O104提取对应于空调O50D的位置信息的图464的建筑物坐标数据向第1服务器发送。
第1服务器在登录的制品是空调等固定在墙壁上的制品的情况下将建筑物坐标数据与空调的位置信息比较,在空调的位置信息不接近于墙壁的情况下将建筑物坐标数据向移动设备O60发送。
移动设备O60的接收部O71如果接收建筑物坐标数据则将其解调,向建筑物坐标数据输出部O81递交。建筑物坐标数据输出部O81根据建筑物坐标数据和空调的位置信息决定应修正的位置信息,向位置信息修正部O93递交。
位置信息修正部O93基于从建筑物坐标数据输出部O81接受到的位置信息将当前的移动设备的位置修正。
接着,移动设备O60用修正后的当前位置的信息向第1服务器O101进行空调O50D的登录。
如以上这样,将建筑物坐标数据库的位置信息与由移动设备O60测量的位置信息比较,能够判断由移动设备O60测量的位置信息存在偏差,修正移动设备O60的位置信息。
另外,在上述说明中,第1服务器O101从第2服务器O103取得建筑物坐标数据而进行判断,但并不限定于此。例如,也可以是移动设备O60在发送向第1服务器O101登录的数据之前、移动设备O60从第2服务器O103取得建筑物坐标数据,并将空调O50D与建筑物坐标数据比较来判断修正的需要与否。
接着,对由移动设备O60使用精度识别符修正移动设备O60的位置信息的步骤进行说明。
这里,以移动设备O60接触在第1服务器O101中已登录有制品信息的图463的空调O50C上的情况为例进行说明。
移动设备O60如果用天线O61接收空调O50C的RF-IDO50的制品IDO51、第1服务器URL、服务IDO53和精度识别符O54,则用RF-ID读写器O62解调。
移动设备O60由于在该时刻不知道在第1服务器O101中登录有空调O50C的制品信息,所以以上述的商品登录的步骤向第1服务器O101发送在信息中包括位置信息、制品ID和服务ID的数据。
第1服务器如果从移动设备O60接收到数据,则将数据解调。
在登录坐标数据O102中,如果判断为空调O50C已经是商品已登录,则制作包括登录坐标数据O102的空调O50C的位置信息的数据,向移动设备O60发送。
移动设备O60的接收部O71如果经由通信天线O68接收到空调O50C的位置信息,则将其解调,向登录坐标O82递交。
登录坐标O82如果从包括空调O50C的位置信息的数据中提取位置信息,则递交给判断部O83。
判断部O83参照从坐标精度识别信息O63接受到的RF-IDO50的精度识别符O54,判断是否将从登录坐标O82接受到的位置信息作为基准坐标。
图467是表示各精度识别符的判断部O83的处理的图。
关于精度识别符,预先如图467所示那样将按每个制品而不同的精度识别符O54设定在RF-IDO50中。
这里,由于是空调O50C的精度识别符O54,所以设定为“高”。
判断部O83判断为进行移动设备O60的位置修正,将从登录坐标O82接受到的位置信息向基准坐标O84递交。
这里,由于是精度识别符O54,所以在“低”的情况下,移动设备O60判断为不需要进行位置信息的修正,将判断结果向第1服务器O101通知,在第1服务器中,将新的空调O50C的位置信息存储到登录坐标数据中,结束处理。
基准坐标O84如果从RF-ID检测部O75接受到触发事件,则将从登录坐标O82接受到的位置信息向位置信息修正部O93递交。
位置信息修正部O93基于从基准坐标O84接受到的位置信息将当前的移动设备的位置修正。
接着,移动设备O60将位置信息已完成的情况向第1服务器O101通知,结束处理。
如以上这样,将建筑物坐标数据库的位置信息与由移动设备O60测量的位置信息比较,能够判断由移动设备O60测量的位置信息是否有偏差而将移动设备O60的位置信息修正,能够避免不需要的位置信息的更新。
此外,坐标的精度较高的组通过设定一旦设置就不变更设置场所的制品,提高精度的可靠性。
另外,即使是精度较高的组,也可以在位置信息偏离预先设定的次数的情况下,不修正移动设备O60的位置信息,而修正已登录在登录坐标数据O102中的位置信息。
另外,在上述说明中,在移动设备O60中使用精度识别符进行修正的判断,但也可以对第1服务器O101发送精度识别符、由第1服务器O101进行修正的判断。
接着,说明由移动设备O60将制品的位置信息用相对位置管理的步骤。
这里,以最初登录的电视机O50A的位置信息为基准点,制作之后进行商品登录的制品即BD记录机O50B的相对的位置信息。
首先,移动设备O60如果由天线O61接收到电视机O50A的RF-IDO50的制品IDO51、第1服务器URL、服务IDO53和精度识别符O54,则用RF-ID读写器O62解调。移动设备O60的坐标信息送出部O79将检测到RF-IDO50时的位置信息向记录部O80送出。
记录部O80如果接受到位置信息,则存储到位置信息存储部O73中。
然后,移动设备O60按照上述的制品登录的步骤,在第1服务器O101中登录电视机O50A的制品信息。
接着,移动设备进行BD记录机O50B的制品登录。
首先,移动设备O60如果由天线O61接收到BD记录机O50B的RF-IDO50的制品IDO51、第1服务器URL、服务IDO53和精度识别符O54,则用RF-ID读写器O62解调。
移动设备O60的坐标信息送出部O79将检测到BD记录机O50B的RF-IDO50时的位置信息向记录部O80和相对位置运算部O78送出。
记录部O80由于在位置信息存储部O73中存储有电视机O50A的位置信息,所以不记录BD记录机O50B的位置信息。
相对位置运算部O78如果从坐标信息送出部O79接受到位置信息,则经由再现部O77取得存储在位置信息存储部O73中的电视机O50A的位置信息。
接着,相对位置运算部O78以从再现部O77取得的电视机O50A的位置信息为基准计算BD记录机O50B的相对的位置信息,将计算出的结果存储到位置信息记录部中。
通过以上的步骤,能够求出以某个特定的制品的位置为基准的相对的位置信息。
另外,在上述说明中,由移动设备O60存储相对位置信息,但并不限定于此。移动设备O60也可以将相对位置信息向第1服务器O101发送、由登录坐标数据O102管理。
另外,在上述说明中,将最初进行制品登录的电视机O50A的位置信息设为基准位置,但并不限定于此。
例如,也可以将预先由用户设定的位置作为基准点。例如,也可以是建筑物的门厅的位置等。此外,在移动设备O60是电视机的遥控器终端的情况下,也可以将对应的电视机的位置作为基准点。
在图468和图469中表示本实施方式的3D地图的处理流程的一例。
图468是表示3D地图的处理的处理流程的前半部的一例的图(S421~S428)。
图469是表示3D地图的处理的处理流程的后半部的一例的图(S431~S434)。
另外,在本实施方式中,移动设备O60的位置信息存储部O73存储有相对的位置信息,但并不限定于此。例如,移动设备O60的坐标信息送出部O79总是将移动设备O60测量的位置信息向记录部O80传送,记录部O80将位置信息记录到位置信息存储部O73中。位置信息存储部O73储存本移动设备O60的位置信息。在此情况下,程序执行部O65根据储存在位置信息存储部O73中的位置信息制作本移动设备O60的轨跡信息。由此,可以根据轨跡信息推测本移动设备O60的行动。
另外,在本实施方式中,按照图467的精度识别符的两种分类进行了判断部O83的处理,但并不限定于此。例如,也可以设置两种以上的制品分类,按每个分类定义不同的位置信息的偏差的大小的阈值,来判断修正的需要与否。
另外,也可以将本实施例与其他实施方式组合。例如,也可以将实施方式B2的通信装置M1101s的功能装入到搭载有RF-IDO50的制品中,当共有家庭ID时也共有3D地图。在此情况下,预先利用NFC通信功能从移动设备O60取得3D地图。
另外,在本实施方式中,搭载有电视机、BD记录机、空调等的RF-IDO50,但并不限定于此。
图470是表示由搭载有RF-ID O50的制品O50G~O50N构成的系统的图。
此外,制品O50G~O50N搭载特定小功率无线通信设备(例如Zigbee),在各制品间在能够接收电波的范围中能够直接通信。此外,假设制品O50G~O50N经由RF-IDO50从移动设备O60取得由制品的制品O50G~O50N构成的制品配置的3D地图。此外,作为别的方法,也可以是制品O50G~O50N保持通信天线O68、经由因特网取得制品配置的3D地图。
这里,说明制品O50H向制品O50K以特定小功率无线通信发送数据的情况。特定小功率无线通信设备通常从节电的观点出发而以休眠模式动作。休眠模式是电源定期地进行ON(接通)、OFF(断开)的切换的模式。此外,各制品的ON、OFF切换定时取同步。
制品O50H的特定小功率无线通信设备如果发生发送的数据,则切换为唤醒模式。唤醒模式是总是使电源为ON的模式。
制品O50H参照预先取得的制品O50G~O50N的制品配置的3D地图。制品O50H从制品配置的3D地图中调查位于本机与制品O50K之间的制品。这里,根据3D地图的信息,使制品O50J为进行数据中继的中继制品。
制品O50H对制品O50J进行切换为唤醒模式的指示。
制品O50H对制品O50J发送以制品O50H为目的地的数据。
制品O50J如果接收到以制品O50H为目的地的数据,则向制品O50H转送,然后切换为休眠模式。
如以上这样,制品O50H使用3D地图决定发送数据的情况下的中继制品,仅将所决定的制品O50J切换为唤醒模式。由此,不需要将不需要的其他制品切换为唤醒模式。在没有3D地图的情况下,制品O50H为了确定到制品O50K的路径而需要将全制品切换为唤醒模式切换来进行路径搜索。
另外,在实施例的图中,作为建筑物而使用家的线框(wire frame)的3D数据进行了说明,但家数据是个人信息,并且在旧的建筑物中没有制作家的3D数据。因此,在达到一般家庭中能获得家的3D数据之前的当前期间,需要不使用家的3D数据而获得家的平面布置的方法。
在没有家的3D数据的状态下,表示了在相当于家的空间位置中配置有多台空调的图。由于没有家的3D数据,所以不知道安装有空调的房间的平面布置。
如果在安装有本发明的APE对应的RF-ID的空调中安装超声波传感器或红外传感器等的、距离或配置的检测机构,则能够测量空调与房间的墙壁及家具的相对位置。在使具有本发明的3D映射功能的便携装置接触在该空调的RF-ID部上的时刻,从RF-ID读出制品名及制造号码、Mac地址认证密钥,在向服务器传送时,将便携装置自身的位置的3D绝对坐标数据向空调传送、或向服务器传送。如果使用上述房间的相对位置的坐标数据和该绝对坐标数据进行校正,则能够得到该空调和房间的绝对坐标的3D数据或2D数据的配置图。具有如果将多台空调各自的3D坐标数据集中、则能够得到家中的有空调的房间的表示3D或2D的配置的坐标数据、即线框数据的效果。
由于也能够得到Mac地址及认证密钥等与其他设备连接用的认证数据,所以能够经由网络与TV或DVD记录机与电冰箱等的家庭内的设备自动地连接认证。该终端也可以不是空调,只要是家庭内的电气电子设备就可以。也可以在空气清洁机上安装测距传感器。但是,如空调那样在家庭内固定设置的设备由于坐标数据不变化,所以更优选。在该例中,仅能够得到有空调的房间的3D坐标数据,但由于人拿着该便携装置在家中来回运动,所以能够获得3维的轨跡数据。通过将该坐标的轨跡数据用服务器等分析,能够通过服务器的运算推测各房间的出入口的场所、走廊的场所、其他场所的存在,所以能够使表示家的配置的3D数据增加。通过该方法,具有即使没有家的建筑物的3D的坐标数据也能够制作家的3D线框数据的效果。此外,在将便携装置的RF-ID部接触在门厅的RF-ID读取机上而将钥匙打开的方式中,此时在记录在门厅的读取机的服务器或读取机中的位置精度较高的情况下,表示坐标精度识别符较高。通过检查该情况,知道精度较高,所以具有通过在接触的时刻校正绝对坐标,而以1次的接触进行钥匙的开闭检查和坐标的校正的效果。
另外,如上述那样用来自朝向信息O89的信息进行修正。即,朝向信息O89既可以考虑表示信息,也可以考虑表示进行该信息的处理的功能块。关于其他符号也是同样的。
(实施方式B6)
对本发明的实施方式B6进行叙述。
图471是在本实施方式中设想的家庭网络环境的图。
多个无线家庭网络构成在各个宅内M2002、M2003、M2004、M2005中,各家庭网络经由因特网M2006连接在登录服务器M2001上。
另外,在家庭网络内的服务限定在宅内的情况下,登录服务器M2001也可以存在于宅内(参照图478的服务器(家庭服务器)99A)。
设想各个无线AP(M2007、M2008、M20014、M2015、M2016)处于如下的环境中,该环境是指电波对其他家庭也到达,且从存在于各个家庭中并连接在因特网上的TV(M2009、M2010、M2017、M2018)、DVD记录机(M2011、M2019)、或数字摄像机M2012能够物理连接到多个无线AP上的环境。
进而,在本实施方式中,便携电话M2013等的移动终端也为构成家庭网络的终端。
并且,本发明的各设备能够通过近距离无线通信设备相互进行简单的数据通信,通过近距离无线通信设备取得各设备的信息,通过家庭网络设备登录在登录服务器M2001中。
图472是表示实施本发明的终端的硬件结构图的图。
假设本发明的通信装置M2101(参照图480的便携型通信装置98B)作为通信设备而搭载有两个设备。
一个是近距离无线通信设备M2102,一般称作Near FieldCommunication(以下:NFC)或RF标签。
另一个是因特网通信设备M2103,是用于宅内设备联动的无线LocalAreaNetwork(以下:无线LAN)、ZigBee等的无线通信设备、Ethernet(注册商标)、或Power Line Communication(电力线通信,以下:PLC)等的有线通信设备、以及WiMax或3GPP等的在移动设备中使用的通信设备。
进而,假设通信装置具备用户界面设备M2104。
这里,所谓用户界面设备,表示按钮等的输入设备及显示器、LED等的输出设备。
另外,在TV或空调等的设备中,输入输出一般通过遥控器进行,是在物理上分离的,但在本发明中为了说明的简单化而作为用户IF设备处理。
进而,假设通信装置具备能够取得本终端的地理位置信息的GPS等的位置信息取得设备。另外,如果使用运动传感器等知道正确的位置信息,则能够使本发明的效果更好。
图473是说明在CPU(M2106)上动作的功能的功能块图。
通信装置M2101内的无线连接请求取得部M2202在与在实施方式B1中取得包括设备固有ID的信息同样的定时,从登录设备M2201取得无线连接请求。另外,在登录时不进行无线连接,而之后在发生了向无线AP的连接请求的情况下,并没有该限制。
假设登录设备M2201将包括无线连接请求及设备固有ID的无线连接请求信息从无线连接请求发送部M2203发送。
从无线连接请求取得部M2202取得了包括设备固有ID及无线连接请求的无线连接请求信息的无线AP信息请求制作部M2204从家庭ID管理部M2205取得家庭ID,从位置信息取得部M2206取得位置信息,制作无线AP信息请求。
这里,所谓位置信息,是指能够由便携电话的GPS取得的地理位置信息,由于通过近距离无线进行通信后的通信装置与登录设备极其相邻,所以可以考虑通信装置的位置信息与登录设备的位置信息大致相等。
由此,登录设备在本终端中能够削减内置GPS等的位置信息取得设备的成本。
从无线AP信息请求制作部M2204接受了无线AP信息请求的无线AP信息通信部M2207朝向登录服务器发送无线AP信息请求。
接收到无线AP信息请求的登录服务器根据包含在登录服务器中的位置信息,发送设想为最接近于该位置的无线AP的信息、以及用来对该无线AP访问的认证密钥。
另外,假设在无线AP信息数据库中,已登录有在各家庭中使用的无线AP的信息(MAC地址、位置信息等)及认证密钥。
登录既可以由无线AP自身进行,也可以由连接在无线AP上的其他设备进行。
这里,所谓无线AP的信息,是指无线AP的MAC地址等,所谓认证密钥,是指无线LAN的WEP密钥等。
这里,通过家庭ID识别是为了防止返回虽然在位置上接近、但为别的家的无线AP,通过位置信息识别是为了防止返回虽然家庭ID一致、但在位置上难以连接的无线AP。
接受到信息的无线AP信息通信部M2207向设定程序制作部M2210转送。
在设定程序制作部M2210中,基于接受到的信息,制作登录设备自动地进行向无线AP的访问设定的程序。
这里,所谓程序,不单单是指信息,而是若接收则自动地进行向无线AP设定的动作。
通过这样,用户能够不用在登录终端进行操作而完成向无线AP的设定。此外,登录设备制造商不需要在登录设备侧搭载需要复杂的操作的用户界面。
此外,假设通信装置M2101利用近距离无线通信设备M2102向登录设备M2201传送程序。
通过这样,即使在登录设备M2201未能进行向因特网或家庭网络的连接设定的情况下,也能够安全地转送程序。
在登录设备M2201内接收到程序的设定程序执行部M2211对无线AP(M2212)发送设定所需要的包,完成设定。
图474是表示无线连接请求的处理的顺序图。
想要无线连接数字摄像机M2012等登录设备M2201的用户,将登录设备M2201的设备固有ID和无线连接请求,利用近距离无线通信向具备能够取得位置信息的GPS等的设备并能够向登录服务器通信的便携电话M2013等的通信装置M2101传送。
用户将自己的家庭ID和位置信息在通信装置M2101附加,并对登录服务器M2001发送。
另外,这里,家庭ID既可以用在通信装置M2101中具备的用户IF设备M2104输入,也可以登录在通信装置中。此外,也可以将通信装置所固有的ID作为家庭ID。
登录服务器M2001根据传送来的信息,返送登录设备应访问的最佳无线AP的信息、和访问所需要的认证密钥。
另外,这些信息的交换优选的是便携电话的3G因特网通信设备等的、能够可靠且安全地转送的方式。
通信装置M2101对传送来的信息附加在登录设备中自动地完成向无线AP的连接设定那样的设定命令,并通过近距离无线通信设备对登录设备M2201转送。
被转送的登录设备M2201使用传送来的认证密钥自动完成家庭NW无线通信设备的设定。
这里,所谓家庭NW无线通信设备,是无线LAN、或ZigBee等的、从某个特定范围的多个设备能够连接的设备,是指连接中需要认证处理的设备。通过从登录服务器M2001以安全、可靠的路径接受认证密钥,用户能够不进行认证密钥的输入那样的复杂的操作而安全地完成向无线AP的设定。
图475是表示对于无线连接请求的、通信装置中的处理的流程图。
接收到登录请求的通信装置M2101判断在登录请求内是否包含无线连接请求(M2301)。
在不包括的情况下(M2301:“否”),进行与实施方式B1同样的处理,结束本实施方式特有的处理。
另外,在仅接收到已登录的设备的无线连接请求的情况下,本发明也是有效的。
在包含有无线连接请求的情况下(M2301:“是”),制作包含登录请求及位置信息的无线连接请求(M2302)。
通信装置M2101将制作出的无线连接信息对登录服务器M2001发送(M2303),等待应答。
在没有接收到应答的情况下(M2304:“否”),对用户通知请求失败(M2305),结束处理。
在接收到了应答的情况下(M2304:“是”),判断在应答之中是否有无线AP的信息(M2306),在没有的情况下(M2306:“否”),将不存在可访问的无线AP的情况向用户通知(M2307),结束处理。
另外,对于无线连接请求,既可以设定判断条件,也可以返回多个无线AP。通过这样,能够得到单纯接近以外的、用户希望的回信。在有无线AP的信息的情况下,制作无线AP设定程序(M2308),用近距离无线发送(M2309)。
(实施方式B7)
作为本发明的实施方式B7,对使无线通信设备的频道的设定高效化的方法进行叙述。当前的家庭网络用的无线通信设备为了自主分散地进行频道的设定,仅通过在那里得到的局部的信息进行频道的设定。在通过HEMS等的出现、许多家庭24小时利用无线那样的状态下,这样的设定方法是低效率的,优选的是参考邻近的家庭的频道设定状况进行频道设定。
图476是表示频道设定的网络环境图的图。
假设在登录服务器中,除了无线AP(参照图485的处理装置96a、图378的接入点99c)的信息(MAC地址、家庭ID、位置信息、认证密钥)以外,还追加了频道信息和小区半径。
这里,位置信息既可以是无线AP的位置信息,也可以是家庭单位中的各家电设备的中心点。
小区半径是表示各家电设备作为整体与周围干涉的范围的信息。
通过使用这些信息,各无线设备能够选择适当的频道。
图477是频道设定的功能块图。
对实施方式B6的功能追加了干涉信息发送部M2250和干涉信息数据库M2251的结构。干涉信息发送部M2250是发送本终端的周围的频道干涉信息的单元,由此,能够推测没有登录在登录服务器中的设备、及无线AP的存在。通过将该信息对服务器发送,能够避免使用了服务器的频道设定的有效性变得比自主分散低。频道设定请求的步骤与无线连接请求是同样的。在登录服务器M2001中,基于传送来的信息选择与相邻的家庭为同一频道的可能性最低的频道并发送。频道选择的算法既可以是推测将来的频道配置的算法,也可以仅根据当前的信息选择。
另外,如上述那样,图440所示的终端装置Y01是电冰箱(例如图427的电冰箱M1013等)、微波炉(微波炉M1012)、洗涤机等的、电子的终端设备(参照图480的设备98a等)。
另外,该终端装置Y01例如也可以不是连接在因特网上的TV(图427的电视机M1008等)等、而是一般不连接在通用的网络Y02N(图440、图427的因特网M1004等)上的种类的终端设备(电冰箱M1013、微波炉M1012等)。
并且,如上述那样,在终端装置Y01的制造商侧判断为有可能发生终端装置Y01的不良状况的情况下,翻阅服务器Y04(图440)的设备管理DB Y041(图440、图442)。并且,如果这样翻阅,则知道终端装置(设备)Y01存在于哪里(终端装置Y01的位置、利用终端装置Y01的用户的便携电话终端的制造号码等),能够缩短制品回收时间(终端装置Y01的回收所需要的时间)、防止不良状况的实际的发生。由此,能够带来制品使用的安心、安全。
另外,这里,终端装置Y01存在于哪里,也可以是例如存在于多个住宅(参照图427的宅内M1001~M1003)中的哪个住宅的位置、或者存在于该住宅中的多个位置(例如参照图447)中的哪个位置等(参照后述的第1位置信息、第2位置信息等)。
此外,可以考虑通信装置Y02(参照图480的便携型通信装置98b)如便携电话终端(例如图427的便携电话M1014)等那样、是有显示功能的装置的情况。在此情况下,通过知道有不良状况的可能性的终端装置Y01能够与多个用户的、多个通信装置Y02中的哪个通信装置(设备)Y02进行近距离无线通信,能够进行以下的处理。该处理是服务器Y04等使终端装置Y01的不良状况信息显示在知道能够进行近距离无线通信的对应的通信装置Y02上的处理。如果这样,则通过将一般没有显示功能、不连接在通用的网络上的终端装置Y01(电冰箱M1013、微波炉M1012等)的不良状况信息向对应于该终端装置Y01的通信装置Y02发送,能够对使用该终端装置Y01的用户进行启示。由此,能够提供带来使用该终端装置Y01的用户的更充分安心、安全的设备(终端装置Y01)。
因而,当在制造商侧判断为终端装置Y01能发生不良状况时,终端装置Y01的回收变得容易,能够将有可能有不良状况的情况(不良状况信息)显示在对应的通信装置Y02的显示部(例如,图440的显示部Y02x)上等。由此,还能够实现制品(终端装置Y01)的较高的追踪性、提供充分安心、安全的设备(终端装置Y01)。
即,在本系统中,例如进行以下的动作。这里,以下的动作例如也可以仅在某个局面下进行。此外,以下的动作也是单纯的一例。
即,在住宅(参照图447、图427的宅内M1001的住宅、图480的住宅99等)之中,也可以有电冰箱M1013、微波炉M1012等的装置(家电、白色家电)。
装置Y01(参照图440所示的终端装置Y01、图480的设备98a等)例如是这些电冰箱M1013等中的1个。
这里,装置Y01所处的住宅(宅内M1001的住宅)是多个住宅中的、购买了该装置Y01的用户的住宅。即,装置Y01的用户是这些多个住宅的、多个人中的、有装置Y01的住宅的人。
这里,有由制造装置Y01的制造商等在这些多个人的信息(例如姓名、住址等)中,利用购买了装置Y01的作为装置Y01用户的人的信息(参照图480的发送信息98o1等)的情况。
即,在判断为在装置Y01中有可能故障的情况下,有进行装置Y01的回收、故障信息的向用户的提供等的对应于装置Y01的故障可能性的判断的、制造商的行动的情况。
并且,在该行动中,有利用用户的信息(例如住址等)的情况。
另外,在以往例中,作为这样的被利用的用户的信息,例如可以考虑用户的电话号码、住址、姓名等。
并且,也可以想到这样的用户的信息存储在例如制造商具有的服务器Y04(参照图440、图427的登录服务器M1005)中的情况。
但是,在将用户的信息向制造商的服务器Y04等发送时,希望不需要用户的复杂的行动而能够容易地发送。
并且,可以想到这样的用户的信息例如是该用户的便携电话终端(例如图427的便携电话M1014)等的通信装置Y02(图440)具有的该通信装置Y02的制造号码(参照图440的制造号码Y025N)等就足够的情况较多。
并且,近年来,在住宅中有设有近距离无线通信(例如在RFID或IC标签中使用的通信)的功能的通信装置Y02(例如图427的便携电话M1014)的情况较多。
并且,可以想到没有购买装置Y01的人(参照图480的、与设置有设备98a的住宅99的人不同的、拥有与住宅99的人拥有的便携电话等不同的便携电话等的人的、不同的住宅991等)的通信装置Y02例如不进行向装置Y01的接触等而不建立与装置Y01之间的近距离无线通信。即,可以想到仅购买了用户的通信装置Y02被接触在装置Y01上等而建立与装置Y01之间的近距离无线通信。
所以,在通信装置Y02中,也可以检测到建立了与装置Y01之间的近距离无线通信的情况(图440的天线Y021、图441的SY01~SY03)。
并且,在检测到已建立的情况下,也可以将通信装置Y02具有的制造号码Y025N等的信息作为建立了近距离无线通信的装置Y01的用户的信息向装置Y01的制造商的服务器Y04发送(通信部Y036、图441的SY09)。
另外,即例如在没有检测到建立的情况下,也可以不进行该信息的发送。
由此,单单通过进行购买、建立近距离无线通信,不需要用户的复杂的行动而能够将购买的用户的信息容易地向服务器Y04发送。
但是,在住宅中,设有多个装置Y01。因此,可以想到由多个装置Y01的多个制造商设置了多个服务器Y04。
因此,可以想到有可能向这些多个服务器Y04中的不适当的服务器Y04发送、没有向适当的服务器Y04发送。
并且,还可以想到例如发生需要用户通过按键盘等输入确定适当的服务器Y04的信息(参照图450的地址Y01Ua)的情况。
所以,例如更具体地讲,也可以进行以下的动作。
即,在装置Y01被用户购买的情况下,可以想到例如通过将该用户的通信装置Y02对装置Y01接触等、装置Y01与用户的通信装置Y02的距离成为比阈值(例如几厘米)近的距离。
所以,在电冰箱M1013、微波炉M1012等(装置Y01)中也可以设置以下的功能。即,装置Y01尽管是没有连接在网络Y02N(图327)上的电冰箱M1013等,也可以存储从网络Y02N的多个服务器Y04中确定该装置Y01的制造商的服务器Y04的图440的信息Y015D(图450的地址Y01Ua)。
并且,装置Y01在建立了近距离无线通信的情况下,可以经由建立的近距离无线通信将存储的该信息Y015D发送。
并且,在通信装置Y02中,在该通信装置Y02与装置Y01的距离是比阈值近的距离的情况下(图440的天线Y01、图441的SY01~SY03),也可以进行以下的处理。
即,在建立了通信装置Y02与装置Y01之间的近距离无线通信的情况下,也可以进行以下的处理。
即,在检测到已建立近距离无线通信的情况下,也可以进行以下的处理。
即,在检测到建立的情况下,也可以经由近距离无线通信取得由装置Y01(电冰箱M1013等)发送的、确定装置Y01的制造商的服务器Y04的信息Y015D(图327、图450的地址Y01Ua,如上所述)(图441的SY04)。
并且,也可以在多个制造商等的多个服务器Y04之中、对由所取得的信息Y015D确定的服务器Y04发送该通信装置Y02(存储器Y024)具有的信息(图440的制造号码Y025N、信息Y036D、图442的信息Y051),作为由通信装置Y02的用户购买的、相对于通信装置Y02的距离(比较)近的距离的装置(装置Y01)的用户的信息(通信部Y036,图441的SY09)。
另外,也可以将发送的信息例如如上述那样在发送后由装置Y01的制造商适当利用,例如进行向具有该信息(制造号码Y025N)的通信装置Y02的通信(例如电话等)。
具体而言,例如也可以将发送的信息通过制造商的服务器Y04具有的设备管理DB Y041(图327)存储(参照图442等)。
由此,仅通过单单由用户购买装置Y01、与通信装置Y02之间的距离成为阈值以下的距离,就对装置Y01的制造商的服务器Y04发送购买的用户的信息(制造号码Y025N(信息Y025D),信息Y036D),能够容易地进行购买了装置Y01的用户的信息的发送。
并且,由装置Y01将地址Y01Ua(图450)等以近距离无线通信发送,由通信装置Y02取得被发送的地址Y01Ua等。由此,从多个制造商的、多个服务器Y04等的多个服务器Y04中,进行向由取得的地址Y01Ua等确定的服务器Y04的发送,能够可靠地进行向适当的服务器Y04的发送。
并且,也不需要用户用按键盘输入地址Y01Ua等,能够容易地进行向适当的服务器04的发送。
另外,由此还能够提高装置Y01的、对于制造商而言的追踪性。
另外,具体而言,发送的包括通信装置Y02的制造号码Y025N的信息Y036D(图440)也可以与上述的通信装置Y02的制造号码Y025N一起,还包括距离是较近的距离的装置Y01的制造号码Y015N等的其他适当的信息。
由此,例如也可以通过发送的信息Y036D,将具有包含在该信息Y036D中的制造号码Y025N的通信装置Y02的用户,确定为包含在该信息Y036D中的另一制造号码Y015N的通信终端Y01的用户。
另外,更具体地讲,例如发送的信息Y036D也可以包括表示该通信装置Y02的位置的信息Y027D(图440)。
另外,该信息Y027D例如也可以是用GPS(Global Positioning System)的功能检测的信息。另外,该GPS的功能具体而言也可以是例如设在通信装置Y02中的位置信息测位部Y027(图440)等的功能。
这里,由信息Y036D(信息Y027D)表示的通信装置Y02的位置如上述那样,例如是相对于装置Y01的位置近到阈值以内的距离(例如几厘米以内的距离)的位置。
即,信息Y027D是较高精度地确定装置Y01的位置的信息。另外,例如也可以比装置Y01所处的住宅(例如图427的宅内M1001的住宅)的住址、电话号码更高精度地确定。即,具体而言,例如也可以确定是宅内M1001的多个(非单个)位置(例如图447的空调N10J的位置、空调N10C的位置等)中的哪个位置。
因此,能够避免作为装置Y1而误确定(误认)处于距实际的装置Y1(例如图447的空调N10J)的位置为例如3~5米等的较近的距离的位置的其他装置(例如空调N10C等)。即,能够可靠地确定适当的装置(空调N10J)作为装置Y1。
另外,这样例如也可以构成一种通信装置,是经由近距离无线通信(IC标签等的通信)从终端装置(例如图440的终端装置Y01、图427的电冰箱M1013、微波炉M1012、图447的空调N10J等)读出终端装置信息(例如图440的信息Y015D、图450的信息Y01U(地址Y01Ua)),并且经由通用的网络(例如图440的网络Y02N、图427的因特网M1004)向服务器(图440的服务器Y04、图427的登录服务器M1005)发送上述终端装置信息的通信装置(图440的通信装置(便携电话终端)Y02、图427的便携电话M1014、图448的移动设备N20等),该通信装置具有:经由上述近距离无线通信从上述终端装置取得至少包括可识别上述终端装置的制造信息的终端装置识别信息(例如图440的制造号码Y015N、图450的制造号码Y01Un)的上述终端装置信息(信息Y015D、信息Y01U(图337))的终端装置信息取得部(图440的天线Y021);存储至少包括可识别将上述通信装置的制造信息的通信装置识别信息(例如图440的制造号码Y025N)的通信装置信息(信息Y025D)的通信装置信息存储部(存储器Y024);对所取得的上述终端装置信息(信息Y015D、信息Y01U)附加存储的上述通信装置信息(信息Y025D),生成向上述服务器发送的发送信息(图440的信息Y036D:通过附加而生成的、包括上述终端装置信息(信息Y015D)和上述通信装置信息(信息Y025D)两者的信息)的信息附加部(信息附加部Y035);以及经由上述通用的网络将所生成的上述发送信息(信息Y036D)向上述服务器发送的通信部(图440的通信部Y036),上述通信部基于来自上述终端装置的上述终端装置信息(由终端装置发送的、存储在终端装置中的、从多个服务器Y04中确定适合于发送该终端装置的发送信息(信息Y036D)的服务器Y04(该终端装置的制造商的服务器Y04)的信息:例如服务器Y04的地址Y01Ua(图450)等)确定上述服务器并进行通信。
另外,这样通过通信装置进行向服务器Y04的信息Y036D的发送。因此,装置Y1(图1的电冰箱M1013等)是上述简单的结构就足够,即,也可以是没有连接在网络Y02N上的电冰箱(电冰箱M1013、家电、白色家电)等。因此,不论装置Y01的种类如何,都能够可靠地将该装置Y01的信息Y036D向服务器Y04发送。
并且,更具体地讲,例如也可以是上述通信装置,还具有取得上述通信装置的(确定位置(例如图447的空调N10J(装置Y01)的、几厘米以内的位置)的)位置信息(图440的信息Y027D)的位置信息取得部(图440的位置信息测位部Y027),上述位置信息取得部在由上述终端装置信息取得部(天线Y021)建立着上述终端装置与上述通信装置的近距离无线通信的定时(在建立时),取得上述通信装置的位置信息(信息Y027D),被附加的上述通信装置信息(被附加后的通信装置信息(发送信息Y036D、或发送信息Y036D的一部分))包括由上述位置信息取得部(在上述定时)取得的上述通信装置的位置信息(信息Y027D)。
由此,即使装置Y01(通信终端)是单纯的电冰箱(电冰箱M1013等)等、没有GPS的功能等,也通过信息Y027D确定装置Y01的位置,该信息Y027D包含在发送的信息Y036D所含有的信息Y025D中。由此,不论装置Y01的种类如何,都能够可靠地通过对服务器Y04发送的信息Y036D确定装置Y01的位置。
并且,确定进行近距离无线通信的几厘米的距离的位置等的、以足够近的位置检测的位置,能够使所确定的位置成为高精度(参照上述图334的空调N01J、空调N10C等)。
此外,在被附加的上述通信装置信息中,也可以包括设有该通信装置Y02的家(例如宅内M1001的住宅)、或使用该通信装置Y02的人(使用通信装置Y02的用户)的识别信息(例如上述家庭ID等)。
此外,也可以构建一种管理方法,是能够与上述通信装置(通信装置Y02)通过上述通用的网络通信的上述服务器(服务器Y04)中的、上述终端装置(装置Y01)的(信息(制造号码Y025N)的)管理方法,包括取得被附加了上述通信装置信息(通信装置识别信息、信息Y025D、图329的信息Y051)而得的(后面的)上述终端装置信息(被附加后的信息Y015D(信息Y036D))的取得步骤(图441的SY09);以及从上述服务器的设备管理数据库(设备管理DB Y041:图327)搜索包含在被附加的上述通信装置信息中的上述通信装置识别信息(制造号码Y025D)的(从信息的多个部分中确定适当的部分(制造号码Y025D的部分)的)搜索步骤;在上述搜索步骤的结果是由上述取得步骤取得的上述通信装置识别信息没有被管理(存储)在上述设备管理数据库中的情况下制作被附加的上述通信装置信息(信息Y025D:图327)的新记录(参照图442的信息Y051),使由上述取得步骤取得的上述终端装置信息(参照图440的信息Y015D、图442的信息Y052d(信息Y052~Y054))对应于上述新记录,并且在判断为由上述取得步骤取得的(被附加在信息Y036D(信息Y015D)中的)上述通信装置识别信息(制造号码025N)已经被管理在上述设备管理数据库中(在生成新记录后,判断为所生成的新记录的装置(例如微波炉M1012)为登录了该装置的通信装置识别信息的装置),并且在包括上述通信装置识别信息的记录(参照图442的信息Y041D)中没有管理上述终端装置信息(参照例如微波炉M1012(装置Y01)的信息Y052(图329)、图327的制造号码Y015D)的情况下,对上述记录追加所取得的上述终端装置信息(作为被附加的通信装置Y02的制造号码025N的部分以外的其他部分的至少一部分的制造号码Y015、信息Y052)。
另外,例如也可以通过这样对服务器Y04进行信息的发送、对服务器Y04(或其他装置)进行家庭网络所需要的设定。由此,用户不需要进行复杂的操作而能够足够容易地进行家庭网络所需要的设定。
另外,关于单独的细节,进行上述上述各实施方式中的适当的哪种实施方式中的处理都可以。此外,关于单独的细节,既可以为仅采用单纯的公知技术的方式就可以,也可以是附加了进一步的改良发明的方式等的其他方式。
另外,也可以将记载在相互不同的多个实施方式中的多个技术事项等的相互分离的多个部位中的多个技术事项适当组合。
此外,也可以构建包括上述各工序中的适当的多个工序而成的方法,也可以构建安装有多个功能的集成电路,也可以构建用来使计算机执行多个功能的计算机程序,也可以是将该计算机程序通信的通信方法、该计算机程序的数据构造等。
这样,总之,关于课题,在家庭网络的设定中,由于周围的终端的状况是不清楚的,仅通过将终端信息利用近距离无线发送是不够的,考虑对于用户而言不能足够简单。
所以,关于解决手段,可以考虑通过用GPS等的能够取得位置信息的终端利用近距离无线通信,使用通过近距离无线通信时的位置信息作为想要进行家庭网络的设定的终端的位置信息,能够进行基于位置信息的、考虑到周围的终端的状况的家庭网络设定。
另外,这样提供例如能够实现提供关于物品(通信装置)的信息的TV等的显示装置的各种设定的简单化的通信装置。即,在具有在与RF-ID读写器46之间进行近距离无线通信的RF-ID47的摄影装置1中,具备接收输入信号的数据接收部105、存储作为确定通信装置的识别信息的UID部75和参照该UID部75由TV45执行的动作程序116的第2存储器52、以及根据输入信号将UID部75及动作程序116向RF-ID读写器46发送的数据转送部108,UID部75及动作程序116被经由RF-ID读写器46向TV45转送(参照图336等)。
(其他方式)
以下,记述在该栏、即[具体实施方式]栏的开头言及的“(其他方式)”。
在由该言及的部位记述的上述的便携型通信装置中,例如也可以是以下这样。
另外,也可以是,上述位置信息从多个住宅(图480的住宅99、991等)之中确定设置了上述设备(设备98a)的住宅(住宅99),并将从上述多个住宅的位置(位置99P、991P)之中确定的上述住宅的位置(图480的位置99P)表示为进行上述近距离无线通信时的该便携型通信装置的位置(位置99P),即,上述位置信息也可以是多个住宅的多个ID(家庭ID)中的、被设置的住宅(住宅99)的ID(家庭ID)。
即,也可以是,设置上述设备的上述规定的场所是住宅的内部,上述便携型通信装置将作为确定该便携型通信装置的用户的住宅的信息即住宅的ID(家庭ID)存储,上述发送部通过向上述服务器(服务器98c)发送将上述位置信息与上述住宅的ID建立了对应的上述发送信息(图483的发送信息98o1),对应于包含在发送的上述发送信息中的、与被设置的上述住宅的ID相同的ID(图483的家庭ID 98ca2),将包含在该发送信息中的该ID以外的各个信息(参照制造号码98cb)存储到上述服务器中。
另外,例如发送的发送信息也可以将包含在该发送信息中的位置信息与ID建立对应,并包括相互建立了对应的该位置信息及ID。
此外,也可以是,设置上述设备的上述规定的场所是住宅的内部,上述位置信息取得部从设在设置上述设备的上述住宅(住宅99)中的、作为存储该住宅的上述ID的服务器的第2服务器(例如图478的服务器(家庭服务器)99a)取得存储的该ID作为上述位置信息。
此外,上述位置信息取得部也可以将由该便携型通信装置的存储部(图479的存储器98i等)存储的上述位置信息(图480的位置信息98j1)从该存储部取得,该位置信息从多个装置确定该便携型通信装置(便携型通信装置98b),并将所确定的该便携型通信装置的用户的住宅(住宅99)的位置(位置99P)确定为设置有上述设备(设备98a)的上述住宅的位置(位置99P)。
此外,也可以是,上述发送部将上述发送信息向上述服务器发送,使发送的该发送信息存储到(第1)上述服务器(图480的服务器98c)中,在设备(设备98a)被从设置该设备的规定的位置移动的情况下(在被丢弃(例如向山林等的非法丢弃)的情况下等),在确定该被移动的该设备的设备信息(图480的设备信息98a1)与包含在上述服务器中所存储的上述发送信息(发送信息98o1(98mc))中的、确定被设置的上述设备(设备98a)的上述设备信息(图480的设备信息98ma)相同的情况下,从该服务器输出包含在被发送的该发送信息(发送信息98mc)中的上述位置信息(位置信息98mb:表示被丢弃前的、设备98a被设置的位置的位置信息)。
由此,输出移动前的位置的位置信息,能够提高所谓的追踪性。
此外,也可以是,上述设备被设置的规定的场所是住宅的内部,上述发送部通过发送上述发送信息,使预先设定的图像生成装置(例如也可以是服务器98c:参照图457的位置信息制作部N48等)生成表示上述住宅的(内部的)构造(房间的平面布置等)的图像(图457的地图),该图像(例如参照图457地图、图465的图像等)中的发送该发送信息的上述设备被设置的位置(例如电视机N10A的位置)上重叠有(包含)表示该设备(电视机N10A)的显示。
另外,这样例如也可以生成确定各个设备的位置和该位置的设备的信息(种类、制造号码等)的数据(例如上述图像)。
此外,取得的上述设备信息(图480的设备信息98n1)也可以是从多个设备之中确定设置的上述设备(设备98a)的、该设备的制造号码(参照图480等)。
此外,也可以是,上述设备信息取得部将表示设置的上述设备的种类的种类信息(图484的种类信息98ma2)、和表示该设备具有的功能的功能信息(功能信息98ma3)中的至少一方通过上述近距离无线通信从该设备取得,发送的上述发送信息(98o1)包括取得的该至少一方。
另外,请适当参照图451、图458等。
另外,在上述说明中的单独的细节,例如既可以进行在实施方式B(例如B4等)等的、上述实施方式(实施方式A、B等)中说明那样的动作,也可以进行施加了进一步的改良发明的动作,也可以进行适当的其他动作。
另外,上述实施方式(实施方式A、B等)的动作的细节例如也可以是如在该“(其他方式)”等中叙述那样的。
另外,这样也可以例如进行以下的动作。
即,也可以是,例如在住宅99(图478)中,设置有电视机、BD记录机(参照BD记录机N10B等)、制暖机(参照制暖机N10K等)、空调、太阳能电池、火灾报警器、太阳能电池面板等的设备98a(图479、图480等)(参照图447等)。
并且,也可以是,在设置有设备98a的情况下,例如将进行了设置的、包括该设备98a的用户的姓名等的信息等预先设定的发送信息98o1(图480)向预先设定的服务器98c发送,将发送的发送信息98o1通过服务器98c存储(参照数据库98m)。
即,例如该服务器98c也可以是将制造了设置的设备的制造者的服务器等。
但是,在这样的发送时,希望用户的操作较简单。
并且,在近年来,比较多的住宅(住宅99等)的用户拥有便携电话、智能手机等被拿持的便携型通信装置98b(例如便携电话)。
并且,在近年来,由便携型通信装置98b(便携电话等)进行在电子货币的结算、自动检票的检票等中进行的NFC(如上所述)的通信、RF-ID的通信等的近距离无线通信98c1(图480)的情况较多。
这里,关于近距离无线通信98c1,例如该便携型通信装置向进行通信的对象即对象装置(例如图480的设备98a)进行通过用户的接触操作等的操作(参照通过接触的操作进行的运动98b1、图443的Y060、Y063等)。
并且,例如,近距离无线通信98c1,通过该接触的操作等,在便携型通信装置98b的位置是与进行通信的对象即对象装置(设备98a)的位置相同的位置(大致相同的位置、例如几厘米的范围的附近的位置等)时进行便携型通信装置98b的运动98b1等,在不是相同的位置(大致相同的位置)时不进行该运动98b1等。
图482是便携型通信装置98b的流程图。
例如,在便携型通信装置98b中,也可以进行图482的处理。
所以,例如在住宅99中设置了设备98a时,进行向设置的设备98a的、便携型通信装置98b的接触等(参照运动98b1),也可以进行设置的设备98a与便携型通信装置98b之间的近距离无线通信98c1。
并且,也可以是,在进行该近距离无线通信98c1的情况下(参照图482的“S971:“是””,图490的通信检测部98q等),进行向服务器98c的、发送信息98o1的发送(通过发送装置(例如该便携型通信装置98b))。
另外,即,例如在不进行该近距离无线通信98c1的情况下(参照图482的“S971:“否””等),也可以不进行发送信息98o1的发送。
另外,具体而言,例如也可以判断是否进行设置的设备98a与便携型通信装置98b之间的近距离无线通信98c1(当前是否是正在进行的期间等)(参照图482的S971、图490的通信检测部98q等)。
并且,也可以在判断为进行近距离无线通信的情况下(S971:“是”)发送发送信息98o1、在判断为不进行的情况下(S971:“否”)不发送。
由此,在进行了设置的情况下进行的、发送信息98o1的发送仅通过单纯的便携型通信装置98b向设置的设备98a的接触的操作等的简单的操作就足够,能够简单地操作。
但是,也可以考虑到在进行设置后、由设置的设备98a的制造者(图略)等利用的利用信息不是与处于(存储在)便携型通信装置98b中的、例如进行了设置的该设备98a的用户相同的用户的、该便携型通信装置98b的用户的电话号码的信息等,而是不在便携型通信装置98b中的信息(例如设置的设备98a的制造号码等)。
另外,这样的不在便携型通信装置98b中的信息,例如是指在进行近距离无线通信98c1之前不在便携型通信装置98b中的信息等。
另一方面,也可以考虑这样的不在便携型通信装置98b中的利用信息例如是在制造设备98a时等即被设置之前已经由制造者等确定的该设备98a的制造号码的信息等,该信息作为设置前已知信息98a1。
所以,也可以是,通过设置的设备98a存储这样的制造号码等的信息(设置前已知信息)98a1等,通过在设置设备98a时进行的、与便携型通信装置98b之间的近距离无线通信98c1,将(存储的)制造号码等的信息98a1发送。
并且,也可以通过便携型通信装置98b取得由近距离无线通信98c1发送的制造号码等的信息(设置前已知信息)98a1。
并且,也可以将包含所取得的制造号码等信息(设置前已知信息)98a1的发送信息98o1向服务器98c发送。
由此,不需要向便携型通信装置98b等输入制造号码等的信息(设置前已知信息)98a1这样的用户操作等,能够使操作更简单。
图484是表示设备信息98ma1、种类信息98ma2、功能信息98ma3等的图。
并且,也可以是,这样的设置前已知信息98a1中的至少一部分例如如上述那样、是该设备的制造号码等的、从多个设备(例如图480所示的第1设备98a和第2设备98r等)之中确定该设备(第1设备98a)的设备信息98ma1(参照后述的图484)。
另一方面,设置前已知信息98a1中的至少一部分也可以是例如电视机、电冰箱、微波炉等的、确定设备的种类的种类信息98ma2。
此外,设置前已知信息的至少一部分也可以是例如确定设备98a的功能的功能信息98ma3。
另外,确定的功能具体而言也可以是例如电视机等具有的显示的功能、地面数字调谐器的功能、模拟调谐器的功能、录像的功能等。
此外,确定的功能也可以是例如微波炉的功能、制暖的功能、制冷的功能、以预先设定的方式(DVD(Digital Video Disc,数字视频光盘),Blue-ray(蓝光)等)记录的记录介质的读取的功能、以预先设定的方式(Bluetooth(蓝牙)、ZigBee、以太网等)进行通信的功能、发电(太阳能电池面板中的发电等)的功能等。
另外,功能信息98ma3例如也可以理解为确定包含在设备98a中的结构(例如液晶显示装置等的显示部、地面数字调谐器等)、并将所确定的结构的功能作为该设备具有的功能的结构信息。
另外,设置前已知信息98a1的至少一部分例如也可以表示该设置前已知信息98a1具有的(被赋予的)属性(由设备信息98ma1表示的制造号码、基于种类信息98ma2的种类、基于功能信息98ma3的功能、基于结构信息的结构等),而被称作属性信息(设备信息98ma1、基于种类信息98ma2的种类、功能信息98ma3等)。
但是,近年来,设备(例如设备98a)被丢弃(非法丢弃)成为问题。
此外,也可以考虑希望进行对应于设置的位置是寒冷地域、炎热地域、住宅街道、街角、还是斜坡地等设置的位置是哪个位置的、更适当的售后服务等。
因此,也可以考虑由制造者等利用的利用信息是表示设备98a被设置的位置(例如被设置的住宅的位置)的位置信息98j1(参照图480)。
所以,也可以将包含对设置的位置进行确定的位置信息98j1的发送信息98o1向服务器988c发送,并由服务器98c存储。
由此,通过使用对服务器98c发送的发送信息98o1(位置信息98j1),制造者等能够利用位置信息98j1。
另外,由此,还能够通过包含在所发送的发送信息98o1中的位置信息98j1来表示被设置的位置,显示被丢弃的设备在被丢弃前被设置的位置、或显示被设置的位置是否是斜坡地的位置等。
另外,如果如上述那样在被丢弃后显示位置等,则能够提高该设备的、所谓追踪性。
但是,如上述那样,设置的设备98a与便携型通信装置98b之间进行近距离无线通信98c1。并且,在进行近距离无线通信98c1时,注意到便携型通信装置98b的位置是与设置的设备98a的位置相同的位置(大致相同的位置、设备98a的位置的附近、和与其他区域之中为附近的位置)。
并且,近年来,有在便携电话(便携型通信装置98b等)中设置GPS的装置等,在便携型通信装置98b中取得(检测)表示该便携型通信装置98b的位置的位置信息的情况。
另一方面,在设置的设备98a中,如果取得(检测到)表示被设置的位置的位置信息,则例如在设备98a中需要设置取得位置信息的GPS的装置等,设备98a的成本变高。
所以,也可以为,进行近距离无线通信98c1,在设置的设备98a的位置是与便携型通信装置98b的位置相同的位置时取得(检测)表示便携型通信装置98b的位置的位置信息98j1(位置信息取得部98j、图482的S973)。
并且,作为表示设备98a被设置的位置的位置信息,也可以发送还包括所取得的便携型通信装置98b的位置的位置信息98j1的发送信息98o1。
由此,单单仅在便携型通信装置98b中取得位置信息98j1就足够,能够使成本为较低的成本。
另外,这样例如在判断为进行上述近距离无线通信时的时候(S971:“是”),取得此时的便携型通信装置98b的位置(与设备98a被设置的位置相同的位置)的位置信息98j1而利用。
图481是表示位置信息取得部98j等的图。
另外,位置信息98j1也可以是以下说明的第1位置信息98j1A(图481)。
即,第1位置信息98j1A是仅从多个住宅(例如图480的第1住宅99、第2住宅991等)的位置之中确定设备98a被设置的住宅(第1住宅99)的位置的信息,是不从被设置的住宅的各位置(例如参照图478的电视机N10A的位置和制暖机N10K的位置等)之中确定被设置的位置(例如电视机N10A被设置的、图示的电视机N10A的位置)的位置信息98j1。
即,例如第1位置信息98j1A是以较粗的(较低的、大体的)精度确定位置、但另一方面来说数据量较小的位置信息98j1。
即,例如位置信息取得部98j的至少一部分例如也可以是取得上述较粗的精度的第2位置信息98j1A的GPS装置98j1x(参照图440的经纬测位部Y028、图445的GPS N31、图462的位置信息传感器部091等)。
并且,这样的较粗的精度的第1位置信息98j1A例如也可以通过从多个住宅之中确定设备被设置的住宅,而从多个住宅中的位置之中确定所确定的住宅的位置的住宅信息(参照图483的第2位置信息98ca2)。
图483是表示家庭ID 98ca2等的图。
即,例如该住宅信息具体而言例如也可以是相互不同的多个住宅的相互不同的ID(家庭ID)中的、确定的住宅的ID 98ca2(图483)(ID:Identifier)。
即,家庭ID 98ca2例如也可以是对该住宅(例如第1住宅99和第2住宅991中的、设备98a被设置的第1住宅99)赋予的号码、字符串等。
并且,例如也可以与包含在发送信息98o1中的家庭ID 98ca2(位置信息98j1、第1位置信息)建立对应而将设置在由该家庭ID 98ca2确定的住宅(第1住宅99)中的各个设备(例如图478的电视机N10A、制暖机N10K等)的发送的发送信息98o1中的、该家庭ID 98ca2以外的其他部分(例如电视机N10A的制造号码98cb、制暖机N10K的制造号码98cb等)由服务器98c存储。
另外,在图483中,将这样建立对应的情况通过家庭ID 98ca2与两个制造号码989cb各自之间的线示意地表示。
图488是表示位置信息取得部98j等的图。
另一方面,位置信息98j1也可以是从设置有设备98a的住宅(第1住宅99)的各位置(例如参照图478的电视机N10A的位置和制暖机N10K的位置等)之中确定所设置的位置(例如设置有电视机N10A的、图示的电视机N10A的位置)的第2位置信息98j1B。
即,例如第2位置信息98j1B也可以是以较细的(较高的、精密的)精度进行确定、且数据量较大的位置信息98j1。
图485是表示第1位置96dP、第2位置96cP等的图。
并且,例如也可以有进行包含在发送的发送信息98o1中的第2位置信息98j1B(位置信息98j1、图485的位置信息98w)的处理的处理装置96a。
即,处理装置96a例如也可以是设在设置有设备98a的住宅(第1住宅99)中的、与设置的设备98a进行无线通信的无线LAN的接入点等的无线通信装置。
并且,在该处理装置96a中也可以进行以下的动作。
图486是发送的位置信息98j1B的处理的流程图。
即,也可以取得包含在被发送的发送信息98o1中的第2位置信息98j1B(位置信息98j1、图485的位置信息98w)(信息取得部96a1、图486的S97a)。
并且,也可以判断由所取得的位置信息96j1B(位置信息98w)表示的位置(设置有设备98a的位置)是第1位置96cP(例如图478的制暖机N10K的位置)还是第2位置96dP(例如电视机N10A的位置)(方式选择部96a2、图486的S97b)。
并且,也可以是,在判断为是第1位置96cP的情况下(S97b:第1位置),进行适合于是第1位置96cP的情况的第1处理(S97c1),在判断为是第2位置96dP的情况下(S97b:第2位置),进行适合于是第2位置96dP的情况的第2处理(S97c2)(无线通信部96a3)。
即,例如也可以是,第1位置96cP(制暖机N10K的位置)在该第1位置96cP上设置有设备98a的情况下(设置的设备98a是第1位置96cP的第1设备96c的情况下),是作为与设置的设备98a之间的无线通信、第1方式下的无线通信96f1(第1处理)较适当的位置。
并且,也可以是,第2位置96dP(电视机N10A的位置)在设置在第2位置96dP上的情况下(是第2设备96d的情况下),是第2方式下的无线通信96f2(第2处理)较适当的位置。
即,进行的无线通信也可以是例如与设在设置有设备98a的住宅(第1住宅99)中的无线LAN(Local Area Network)的接入点等的无线通信装置(处理装置96a、具有例如图478的标号99c所示的位置)之间的无线通信。
即,例如也可以是,第1方式下的无线通信96f1是比阈值弱的电力下的无线通信,而第2方式下的无线通信96f2是比该阈值强的电力下的无线通信。
另外,例如也可以是,较弱的电力下的无线通信96f1适合的第1位置96cP(制暖机N10K的位置)是例如到接入点等(处理装置96a)的位置为止的距离为比阈值Th(图485)小的距离的位置,而第2位置98dP(电视机N10A的位置)是比阈值Th大的距离的位置。
即,例如也可以通过上述无线通信装置(处理装置96a)等进行以下的动作。
即,也可以是,从作为进行通信的对象的设备(第1设备96c、第2设备96c等)等取得确定该设备的设备信息98v(例如也可以是该设备的地址等),并且取得包含在所发送的发送信息(发送信息98p、图480的发送信息98o1)中的位置信息98s(位置信息98w)(信息取得部96a1、S97a),上述所发送的发送信息包含与所取得的设备信息98v相同的设备信息(地址:例如图485的设备信息98r)。
并且,也可以基于这样取得的位置信息98w进行上述的动作。
由此,进行与被设置的设备98a的位置是第1位置96dP(制暖机N10K的位置)还是第2位置96dP(电视机N10A的位置)对应的适当的处理(第1无线通信96f1、第2无线通信96f2),不论位置是第1位置96dP还是第2位置96dP,都能够可靠地进行适当的处理(适当的方式(适当的电力)下的无线通信)。
并且,单单仅使用便携电话等的便携型通信装置98b发送发送信息98o1就足够,不需要将特殊的装置等拿入到被设置的住宅(第1住宅99)中、或用户进行复杂的操作等,能够简单地可靠地进行适当的处理,能够简单地进行适当的动作。
另外,也可以通过这样将发送信息98o1发送、进行与发送的发送信息98o1(的位置信息)对应的适当的动作(第1无线通信96f1、或第2无线通信96f2)。
即,这样,例如发送的发送信息98o1也可以是使处理装置96a进行的动作为适当的动作(第1无线通信96f1、或第2无线通信96f2)的控制的控制数据。
另外,例如将发送信息98o1发送的第1服务器98c(图485(图480))也可以是例如所谓的家庭服务器(例如图478的服务器99a)等的、设置在住宅99中的服务器等。
另外,如图478所示,例如第1服务器99a也可以连接在用来与服务器99a所处的住宅99的外部通信的通信线99b上。
此外,第1服务器98c也可以是上述的接入点等的无线通信装置(处理装置96a)。
另外,将发送信息98o1发送的第1服务器98c例如也可以是经由通信线99b进行通信的、设在住宅99的外部的、设备98a的制造者的服务器等。
另外,如上所述,位置信息981j(图480)也可以是使用上述GPS装置98j1x(图481)时等的、确定例如纬度及经度等的、地图上的绝对的位置的绝对位置信息。
即,例如位置信息取得部98j(图480等)例如也可以包括GPS装置98j1x等,接收电波(来自GPS的卫星的电波等),根据接收的电波取得作为绝对位置信息的位置信息98j1,该位置信息98j1将接收该电波的位置表示为设有该位置信息取得部98j的便携型通信装置98b的位置。
即,例如位置信息取得部既可以是GPS装置(也可以包括GPS装置),也可以是接收从便携电话的基站发送的电波,并根据接收到的电波取得确定接收了该电波的位置的绝对位置信息(位置信息98j1)的装置等。
但是,也可以想到使用绝对位置信息不适当的情况。
即,例如也可以想到不能取得绝对位置信息的情况。即,例如也可以想到不能取得对需要的程度充分高的精度的绝对位置信息等。
即,例如可以想到,在这些GPS装置等使用接收的电波的装置等中,接收的电波不是对取得充分高的精度的位置信息所需要的程度来说充分适当的电波,不能取得适当的绝对位置信息。
即,例如也可以想到,发送电波的卫星、基站等的制造者、管理者等与便携型通信装置98b的制造者等不同,发送的电波是不适当的电波,不能进行绝对位置信息的取得。
此外,例如,设在所谓的汽车导航装置(汽车导航仪)中的GPS装置在隧道之中不能取得位置信息。这样,可以想到取得位置信息的位置是不适合根据电波取得位置信息的位置,不能取得绝对位置信息等的情况。
另一方面,可以想到,也有通过从该基点的位置(例如图485的基点98bx、图478的接入点99c的位置)向设置有设备98a的位置(制暖机N10K的位置、电视机N10A的位置等)的距离、方向(矢量)等的、从该基点的位置到所设置的位置之间的差分、确定所设置的位置是第1位置还是第2位置的基点的位置。
即,例如可以举出这样的基点的位置是上述接入点的位置(该位置(图485的处理装置96a的位置、图478的接入点99c的位置等)等。
所以,取得的位置信息98j1例如也可以是相对位置信息,该相对位置信息确定上述那样的从基点(基点98bx)的位置到(进行近距离无线通信98c1时的)便携型通信装置98b的位置为止的差分(方向及距离、矢量等),并将从基点(基点98bx)的位置离开了所确定的差分的位置确定为设置有设备98a的位置。
即,例如相对位置信息也可以是仅根据该相对位置信息不能确定设置设备98a的位置的纬度、经度等的绝对位置信息的信息。
即,例如相对位置信息也可以仅是如下的信息等,即,根据该相对位置信息和上述基点的位置等的多个信息,例如作为相对于基点的位置离开了该相对位置信息的差分的位置的绝对位置信息等来表示设置有设备98a的位置的绝对位置信息。
另一方面,近年来,已知有在一部分的智能手机等的通信装置中设有检测通信装置的运动的加速度的加速度传感器的结构。
另外,加速度传感器例如是作为由便携型通信装置98b显示的画面(例如包括文字的画面等)而在纵向的(文字的)画面和横向(的文字)的画面中、显示与进行了检测到的加速度的运动后的该通信装置的方向(纵向或横向)对应的一方的适当的画面的传感器等。
并且,在近年来的加速度传感器中,能够检测与由以前的加速度传感器检测的加速度的精度不同的、(相当)高的精度的加速度。
此外,可以想到在较近的将来能够以更高的精度检测。
所以,位置信息取得部98j也可以包括这样的设在该便携型通信装置98b中的、检测该便携型通信装置98b的运动的加速度的加速度传感器98j2x(参照图440的位置修正部Y030、图445的6轴传感器N32、图462的加速度传感器O98等)等,利用检测到的加速度。
即,例如也可以通过用户的操作而(从基点(图485的基点98bx、图478的接入点99c的位置等))移动便携型通信装置98b,检测便携型通信装置98b被移动到设置有设备98a(制暖机N10K、电视机N10A等)的位置的运动的加速度,取得(计算)表示进行了检测到的加速度下的运动之后的、便携型通信装置98b的位置(制暖机N10K的位置、电视机N10A的位置等)的位置信息(相对位置信息)。
另外,例如进行该运动之前的位置是上述基点(基点98bx)的位置等。
并且,也可以将包含这样取得的、基于检测到的加速度取得的运动下的相对位置信息即位置信息98j1的发送信息98o1,向服务器98c发送。
即,例如也可以是,在通过这样基于检测到的加速度取得的相对位置信息即位置信息98j1表示(从基点(图485的基点98bx、图478的接入点99c的))到第1位置96cP(例如制暖机N10K的位置)为止的便携型通信装置98b的运动(进行该运动后的位置(例如制暖机N10K的位置)的、距基点的位置的差分(距离及方向等))的情况下,将设置有设备98a的位置判断为第1位置96cP(制暖机N10K的位置)(图486的S97b:第1位置)。
并且,在表示到第2位置96dP(电视机N10A的位置)为止的运动的情况下,也可以判断为第2位置96dP(S97b:第2位置)。
由此,在接收到的GPS等的电波是不适当的电波时等、不能取得绝对位置信息(不能得到适当的(精度等的)绝对位置信息)时,也能够进行适当的动作、可靠地进行适当的动作。
图487是表示位置信息等的图。
另外,如图487所示,例如取得的位置信息98j1(图487)是使用这样的加速度传感器98j2x取得等的、表示距基点98bx(图487)的位置98bP的差分(便携型通信装置98b的运动)98bD的相对位置信息96q2、和基点98bx的位置98bP的绝对位置信息96g1这两者的信息等。
另外,例如也可以是,上述的无线通信的第1方式(图486的S97c1中的一方)是通过用无线LAN的接入点等的中继装置中继而间接地与其他装置通信的方式,而第2方式(图486的S97c2中的方式)是所谓的自组织(AdHoc)模式下的通信、或Wi-Fi(Wireless Fidelity,无线保真)直接通信等的、不进行中继而直接进行的通信(直接通信)等。
并且,也可以是,例如对于第1位置96cP,距与所设置的设备98a通信的对象的无线通信装置(例如电视机N10A)的距离是如果进行直接通信则通信品质比阈值高,那么进行直接通信的,是作为更为优选的位置的、距离该无线通信装置较近的距离的位置(例如BD记录机N10B的位置)等。
并且,也可以是,例如对于第2位置96dP,距上述作为通信的对象的无线通信装置(电视机N10A)的距离是如果进行直接的通信则为较低的品质,那么进行通过中继的通信的,是作为更为优选的位置的、比较远的距离的位置(制暖机N10K的位置、电视机N10I的位置等)等。
另外,具体而言,例如进行直接的通信较优选的第1位置96cP也可以是与包括如下位置的房间(电视机N10A的房间)相同的房间中的位置(BD记录机N10B的位置),上述所包括的位置是作为进行通信的对象的无线通信装置的位置。
即,例如,这样的第1位置96cP(BD记录机N10B的位置)具体而言,也可以是作为进行通信的对象的无线通信装置(电视机N10A)是电视机、和设置在与设置电视机的房间相同的房间中的蓝光记录机等中的一个(电视机N10A)时的、作为设置的另一个装置的设备98a(BD记录机N10B)具有的与一个装置(电视机N10A)的房间相同的房间中的位置(BD记录机N10B的位置)等。
此外,进行通过中继的通信更优选的第2位置96dP(例如电视机N10I的位置)既可以是例如与进行通信的无线通信装置(电视机N10A)的房间不同的房间(电视机N10I的房间)的位置,也可以是与有该无线通信装置(电视机N10A)的层(1层)不同的层(有电视机N10I的2层)的位置等。
图489是表示遥控器98I等的图。
另外,也可以是,例如在多个设备(第1设备98jx、第2设备98kx等(例如图478的电视机N10A和制暖机N10K等))中,仅通过该设备的位置是遥控器98I指向的方向98I1的位置(例如第1设备98jx(电视机N10A)的位置98jP)的设备(第1设备98jx),进行对该遥控器98I进行的用户的操作的动作,在不是该方向98I1的位置的位置(例如第2设备98kx(制暖机N10K)的位置98kP)的设备(第2设备98kx)中,不进行对应于该操作的动作。
但是,也可以考虑指示该动作的、由遥控器98I输出的信号是通过电波的信号等的、无指向性的通信媒体中的信号。
即,例如遥控器98I具体而言也可以是上述便携电话等的便携型通信装置98b等。
因此,也可以考虑信号也到达不是该方向98I1的位置(位置98jP、电视机N10A的位置)的设备(第2设备98kx、制暖机N10K),通过该设备(第2设备98kx、制暖机N10K)也进行了对遥控器98I进行的操作下的动作(例如所谓的误动作)的情况。
所以,也可以判断由包含在被发送的所设置的设备98a(第1设备98jx、第2设备98kx等)的发送信息98o1中的位置信息98mb(图484)确定的位置是作为遥控器98I指向的方向98I1上的位置的第1位置(位置98jP、电视机N10A的位置)(图486的S97b:第1位置),还是不是该方向98I1的位置98jP的第2位置(位置98kP、制暖机N10K的位置)(S97b:第2位置)(图489的判断部96i1)。
并且,也可以在判断为第1位置的情况下(S97b:第1位置)对判断出的设备(第1设备98jx、电视机N10A)进行基于所进行的操作的动作(频道的切换、电源的关闭等)的控制(第1处理、S97c1)。
并且,也可以在判断为第2位置(制暖机N10K的位置)的情况下(S97b:第2位置)不做出进行这样的动作的控制,而进行仅包括其他处理的第2处理(S97c2)(图489的动作控制部96i2)。
另外,例如,上述的判断部96i1及动作控制部96i2中的一方或两方(控制装置96i)也可以是例如上述设置在住宅99中的家庭服务器(例如图478的服务器99a)具备的功能的功能块等。
另外,较粗的精度的第1位置信息(参照图483的家庭ID 98ca2等)既可以是例如设置的住宅99的住址、电话号码等,也可以是该住宅99的居住者的便携电话等(例如上述的便携型通信装置98b)的制造号码等,也可以是居住者的姓名等。
另外,例如也可以由发送了发送信息98o1的服务器98c从多个住宅(例如图480的第1住宅99、第2住宅991等)中(通过服务器98c等)确定由发送的发送信息98o1表示的位置的住宅(的ID)作为设置有设备98a的住宅(的ID(第1住宅99的家庭ID))。
另外,例如也可以通过便携型通信装置98b,当将该便携型通信装置98b接触在设置的第1设备98a(例如图478的电视机N10A)上时发送第1设备98a的第1发送信息98o1,并且当与进行了向第1设备98a的接触的该便携型通信装置98b相同的该便携型通信装置98b接触在所设置的第2设备98a(例如制暖机N10K)上时,通过相同的该便携型通信装置98b发送第2设备98a的发送信息98o1。
另外,也可以在对所设置的第2设备98a进行了与上述的第1便携型通信装置98b不同的(与拥有第1便携型通信装置98b的用户不同的、住宅99中的用户的)第2便携型通信装置98b的接触时,由不同的第2该便携型通信装置98b发送第2设备98a的第2发送信息98o1。
并且,发送的第2发送信息98o1也可以包括与发送的第1发送信息98o1中含有的信息(例如该住宅99的ID等)相同的信息。
并且,第2发送信息98o1例如也可以包括由第2便携型通信装置98b从上述家庭服务器(例如图478的服务器99a)等的服务器等取得的、由该服务器存储的、包含在第1发送信息98o1中的上述信息。
另外,例如存储的该信息既可以是第1便携型通信装置98b对该服务器发送的信息,也可以是由第1便携型通信装置98b从该服务器接收、接收到的该信息包含在第1发送信息98o1中的信息等。
另外,利用的确定装置(便携型通信装置98b、设置的设备98a等)的特定信息既可以是例如上述那样的该装置的制造号码等,也可以是该装置具有的MAC(Media Access Control,媒体存取控制)地址等。
即,上述的设置设备98a的住宅99的ID例如也可以是用这样的制造号码等从多个住宅中确定拥有该制造号码等的装置(便携型通信装置98b等)的居住者的住宅(住宅99)的信息。
另外,这样的作为住宅的ID的制造号码等例如也可以是设置在该住宅中的多个设备(参照图478的各设备等)中的、最初进行发送信息的发送的设备的制造号码等。
(实施方式C)
在以下的实施方式C中,对能够用简单的结构及处理检测正确的位置的、抑制了成本的位置检测装置进行说明。
以下,参照附图对本发明的实施方式C进行说明。
图491是本发明的实施方式C的位置检测装置的功能块图。该位置检测装置100固定装备在移动终端中,检测自己的位置作为该移动终端的位置。这样的位置检测装置100如图491所示,具备加速度传感器101、角速度传感器102、地磁传感器103、移动量检测部104、终端姿势检测部105、地磁噪声检测部106、坐标推测部107、地磁噪声模式(noise pattern)管理部108、地磁噪声模式保存部109和坐标修正部110。另外,由于位置检测装置100固定装备在移动终端中,所以移动终端的位置、朝向、倾斜、加速度、加速度方向、移动方向、移动距离、旋转方向及角速度等的移动终端的状态与位置检测装置100的这些状态相同。
加速度传感器101在固定设在位置检测装置100中的本地坐标系(由X轴、Y轴及Z轴构成的3轴的坐标系)中,检测加速度传感器101受到的重力及惯性力等的力的朝向及大小。例如,在位置检测装置100或上述移动终端的形状是在一方向上较长的形状的情况下,该位置检测装置100或移动终端的长度方向是Z轴方向,分别与Z轴垂直且相互正交的方向是X轴方向及Y轴方向。加速度传感器101以预先设定的周期进行上述那样的检测,输出表示该检测结果的加速度信息。
角速度传感器102以预先设定的周期检测移动终端的旋转方向及角速度。
地磁传感器103以预先设定的周期检测该本地坐标系的磁场强度。具体而言,地磁传感器103检测沿着上述X轴、Y轴及Z轴的各个轴的方向的磁场强度。基于这3个轴的磁场强度,将移动终端的位置处的磁场(地磁)表示为1个磁场矢量。
终端姿势检测部105基于加速度传感器101、角速度传感器102及地磁传感器103的检测结果,以预先设定的周期计算(检测)以地球为基准的移动终端的姿势。姿势是移动终端相对于水平面的倾斜、以及水平面上的移动终端的朝向。
移动量检测部104基于由终端姿势检测部105计算出的姿势和从加速度传感器101输出的加速度信息,以预先设定的周期计算(检测)固定设定在地球上的全局坐标系、或固定设定在宅内的宅内坐标系中的、移动终端的移动方向、移动速度及移动距离。另外,将表示移动方向及移动距离的参数称作移动量。
地磁噪声检测部106基于角速度传感器102的检测结果和由地磁传感器103检测出的磁场强度,对于地磁的检测以预先设定的周期判别(检测)是否发生了异常,即是否发生了地磁噪声。进而,地磁噪声检测部106在判别为发生了地磁噪声时,在发生该地磁噪声的期间中,将表示该地磁噪声(由地磁传感器103检测出的磁场强度)的时间序列上的变化的地磁噪声模式作为发生地磁噪声模式向地磁噪声模式管理部108输出。
坐标推测部107基于紧前计算出的坐标和由移动量检测部104计算出的移动量,计算(推测)位置检测装置100的当前的位置作为推测当前地坐标。另外,该推测当前地坐标被用作用于计算下个推测当前地坐标的、紧前计算出的坐标。以下,将该紧前计算出的坐标称作前次推测坐标。
进而,坐标推测部107基于后述的前次识别基准点与推测当前地坐标之间的距离、其间的拐弯及倾斜等的移动的复杂度、以及其间的移动所花费的时间中的至少1个,计算与该推测当前地坐标对应的准确度(正确度)作为推测当前地准确度。并且,坐标推测部107将该推测当前地坐标和推测当前地准确度向地磁噪声模式管理部108输出。例如,坐标推测部107以预先设定的周期计算推测当前地坐标及推测当前地准确度并向地磁噪声模式管理部108输出,并将该推测当前地坐标向坐标修正部110输出。
地磁噪声模式保存部109是记录介质,按每个基准点,保存有将该基准点的地磁噪声模式(以下,称作基准噪声模式)、该基准点的坐标(以下,称作基准坐标)、以及该基准点的坐标的准确度(以下,称作基准准确度)建立关联而表示的表。另外,所谓基准点,是作为用于对推测当前地坐标进行修正的基准的全局坐标系或宅内坐标系中的位置。
地磁噪声模式管理部108从地磁噪声检测部106取得发生地磁噪声模式。进而,地磁噪声模式管理部108在取得了该发生地磁噪声模式时,即在发生了地磁噪声时,从该坐标推测部107取得由坐标推测部107计算出的推测当前地坐标及推测当前地准确度。并且,地磁噪声模式管理部108基于所取得的发生地磁噪声模式、推测当前地坐标及推测当前地准确度、以及地磁噪声模式保存部109的表,判别是否应修正该推测当前地坐标。另外,被判别是否应修正的推测当前地坐标是处理对象的推测当前地坐标,并且是在发生了地磁噪声时由坐标推测部107计算出的推测当前地坐标,并且是在检测到其发生时存在的位置检测装置100的位置。
这里,地磁噪声模式管理部108当判别为应修正时,向坐标修正部110指示该推测当前地坐标的修正。进而,地磁噪声模式管理部108根据需要而将地磁噪声模式保存部109的表更新。
坐标修正部110从坐标推测部107取得推测当前地坐标,并将该推测当前地坐标输出。这里,坐标修正部110如果从地磁噪声模式管理部108接受到推测当前地坐标的修正的指示,则从地磁噪声模式管理部108取得作为修正后的坐标的基准坐标。并且,坐标修正部110将推测当前地坐标替换为基准坐标,将该基准坐标作为修正后的推测当前地坐标输出。
图492是表示地磁噪声模式保存部109的表的图。
该表109a如上述那样,按每个基准点,将用于识别该基准点的基准点ID、该基准点的基准噪声模式、该基准点的基准坐标、该基准点的基准准确度、以及该基准点的更新时刻建立关联而表示。例如,在表109a中,将基准噪声模式“基准噪声模式1”、基准坐标(X2,Y2,Z2)、基准准确度“60%”及更新时刻“20000202:22:10:05”分别与基准点ID“p1”建立关联而表示。
这样的位置检测装置100通过使用加速度传感器101、角速度传感器102及地磁传感器103的检测结果的自主导航,实时地检测(推测)自己的位置,并基于地磁噪声适当修正该检测到的位置。
图493是表示宅内的地磁噪声发生区域的一例的图。如图493所示,具备位置检测装置100的移动终端1000在宅内(室内),从作为门厅的开始基准点p0移动。这里,移动终端1000通过作为地磁噪声发生区域A的电冰箱附近。此时,移动终端1000所具备的位置检测装置100根据电冰箱所具有的金属板或电冰箱发出的磁,判别为发生了地磁噪声。即,位置检测装置100的地磁传感器103检测与根据地磁在逻辑上检测的磁场不同的磁场。例如,位置检测装置100在磁场强度与自然界的值完全不同的情形等中也能够判断为异常。同样,位置检测装置100在移动终端1000通过作为地磁噪声发生区域B的台阶下的钢筋附近时,也根据该钢筋的影响而判别为发生了地磁噪声。此外,位置检测装置100在移动终端1000上到2层并通过作为地磁噪声发生区域C的2层的地面钢筋附近时,也根据该钢筋的影响而判别为发生了地磁噪声。
在这样的地磁发生区域中,由于宅内或室内的电气设备或构造物等而地磁(磁场)混乱。此外,这样的地磁噪声发生区域A及B分别被识别为基准点ID“p1”及“p2”,表示于地磁噪声模式保存部109的表109a中。
图494是表示发生地磁噪声模式的一例的图。
地磁传感器103如图494所示,按照预先设定的周期(例如每10ms)检测X轴方向、Y轴方向及Z轴方向各自的磁场强度。这里,如果移动终端1000移动并通过上述电冰箱附近等的地磁噪声发生区域,则由地磁传感器103检测的X轴方向、Y轴方向及Z轴方向各自的磁场强度变化为与设想的地磁的磁场强度不同。例如,如果移动终端1000在移动中,在从时刻t1到时刻t2的期间中处于地磁噪声发生区域,则地磁传感器103在该期间中,在3个轴方向各自中检测出与设想的地磁的磁场强度不同的磁场强度。
地磁噪声检测部106判别为在这样的期间中发生了地磁噪声。并且,地磁噪声检测部106将表示该期间中的X轴方向、Y轴方向及Z轴方向各自的磁场强度的随时间的变化的图案(地磁噪声模式)作为发生地磁噪声模式向地磁噪声模式管理部108输出。此外,该发生地磁噪声模式在每当移动终端1000通过相同的地磁噪声发生区域时被再现的可能性较高。
图495是表示关于本实施方式的位置检测装置100的坐标推测的处理的流程的流程图。
首先,终端姿势检测部105基于加速度传感器101、角速度传感器102及地磁传感器103各自的检测结果,计算移动终端1000的姿势(步骤S101)。
接着,移动量检测部104在由坐标推测部107计算出前次推测坐标以后,取得从加速度传感器101输出的加速度信息(步骤S102)。此时,如果没有计算出前次推测坐标,则移动量检测部104也可以取得在移动终端1000通过门厅等的预先设定的基准点以后输出的加速度信息。此外,在位置检测装置100具有GPS功能的情况下,也可以取得在最后通过GPS功能计算出坐标(位置检测装置100的位置)以后输出的加速度信息。并且,移动量检测部104从终端姿势检测部105取得由该终端姿势检测部105计算出的表示姿势的终端姿势信息(步骤S103)。进而,移动量检测部104基于该终端姿势信息和加速度信息,计算移动终端1000的移动方向及移动距离(步骤S104)。
接着,坐标推测部107计算从前次推测坐标朝向由移动量检测部104计算出的移动方向离开由移动量检测部104计算的移动距离的位置,作为推测当前地坐标(步骤S105)。进而,坐标推测部107计算与前次识别基准点与推测当前地坐标之间的距离相应的推测当前地准确度(步骤S106)。另外,前次识别基准点是紧前由地磁噪声检测部106判别为发生了地磁噪声时的移动终端1000的位置。即,坐标推测部107根据从过去识别出基准点时起的移动量的总量,设定推测当前地准确度。例如,推测当前地坐标比前次识别基准点越远,则坐标推测部107计算出越低的推测当前地准确度。另外,推测当前地准确度既可以根据相对于过去的基准点的移动距离、由在移动中拐弯的量或移动中的倾斜等带来的移动的复杂度、以及在移动中花费的时间而综合地计算,也可以仅根据它们中的一个来计算。
图496是表示终端姿势检测部105的处理的流程的流程图。
终端姿势检测部105首先从加速度传感器101取得加速度信息,基于该加速度信息,计算本地坐标系中的重力方向(铅直方向)(步骤S201)。例如,终端姿势检测部105基于在逻辑上导出的重力的值和由加速度信息表示的本地坐标系中的力的朝向及大小,计算相当于重力的铅直方向的力的朝向。
接着,终端姿势检测部105基于重力方向相对于本地坐标系中的X轴、Y轴及Z轴的倾斜,计算移动终端1000的相对于水平面的倾斜(S203)。
进而,终端姿势检测部105通过向地磁噪声检测部106确认地磁噪声的发生(步骤S203),判别是否发生了地磁噪声(步骤S204)。
这里,终端姿势检测部105如果判别为没有发生地磁噪声(步骤S204的“否”),则取得地磁传感器103的检测结果,基于该检测结果和在步骤S202中计算出的倾斜,计算移动终端1000的水平面上的朝向(步骤S205)。另一方面,终端姿势检测部105如果判别为发生了地磁噪声(步骤S204的“是”),则取得角速度传感器102的检测结果,基于该检测结果和在步骤S202中计算出的倾斜,计算移动终端1000的水平面上的朝向(步骤S206)。在此情况下,终端姿势检测部105在紧前计算出水平面上的朝向时以后,基于由角速度传感器102检测出的旋转方向及角速度,确定该水平面上的朝向的变化。并且,终端姿势检测部105对该紧前计算出的水平面上的朝向加上所确定的朝向的变化,计算当前的移动终端1000的水平面上的朝向。另外,在步骤S204中判别为没有发生地磁噪声时(步骤S204的“否”),终端姿势检测部105也可以根据地磁传感器103和角速度传感器102双方的检测结果,更正确地计算移动终端1000的水平面上的朝向。
通过这样的处理,终端姿势检测部105检测移动终端1000的姿势。
图497是表示地磁噪声检测部106的处理的流程的流程图。
地磁噪声检测部106从地磁传感器103取得该地磁传感器103的检测结果(X轴方向、Y轴方向及Z轴方向各自的磁场强度)(步骤S301)。接着,地磁噪声检测部106判断在由该X轴方向、Y轴方向及Z轴方向各自的磁场强度表示的磁场矢量的大小与逻辑上的地磁的大小(强度)之间是否有预先设定的大小或比率以上的差(步骤S302)。
另外,逻辑上的地磁的大小(强度)是预先设定的强度。此外,地磁噪声检测部106也可以根据位置检测装置100的位置来变更其逻辑上的地磁的大小。在此情况下,地磁噪声检测部106使用按地球上的每个位置表示该位置处的逻辑上的地磁的大小的数据库。例如,在位置检测装置100具有GPS功能的情况下,地磁噪声检测部106基于最后通过GPS功能计算出的坐标(位置检测装置100的位置),预测位置检测装置100的当前的地球上的位置,从该数据库中选择该位置处的逻辑上的地磁的大小。此时,地磁噪声检测部106也可以预测最后通过GPS功能计算出的坐标作为当前的地球上的位置。此外,地磁噪声检测部106也可以通过用户的操作来接受地球上的位置,从数据库中选择该位置处的地磁的大小。
这里,地磁噪声检测部106在判断为有差的情况下(步骤S302的“是”),判别为发生了地磁噪声。结果,地磁噪声检测部106将表示X轴方向、Y轴方向及Z轴方向各自的磁场强度的3轴磁场强度信息向地磁噪声模式管理部108输出(步骤S305)。
另一方面,地磁噪声检测部106在判断为没有差的情况下(步骤S202的“否”),基于角速度传感器102的检测结果,计算预先设定的时间中的移动终端1000的水平面上的朝向的变化量(步骤S303)。接着,地磁噪声检测部106判断在根据上述预先设定的时间中的X轴方向、Y轴方向及Z轴方向各自的磁场强度的变化导出的移动终端1000的朝向的变化量、与在步骤S303中计算出的朝向的变化量之间是否有预先设定的量或比率以上的差(步骤S304)。即,地磁噪声检测部106通过比较由角速度传感器102检测出的位置检测装置100的朝向的变化量、和根据由地磁传感器103检测出的上述3轴方向的磁场强度的变化导出的移动终端1000的朝向的变化量,检测在地磁的检测中是否发生了异常。
这里,地磁噪声检测部106在判断为有差的情况下(步骤S304的“是”),检测出发生了地磁噪声(异常)。结果,地磁噪声检测部106将表示X轴方向、Y轴方向及Z轴方向各自的磁场强度的3轴磁场强度信息向地磁噪声模式管理部108输出(步骤S305)。
另一方面,地磁噪声检测部106在判断为没有差的情况下(步骤S304的“否”),检测出没有发生地磁噪声(异常)。
地磁噪声检测部106周期性地(例如每10ms)重复进行步骤S301~S305的处理。结果,地磁噪声检测部106例如在如图493所示的时刻t2~t3的期间中,反复执行步骤S305的处理。即,地磁噪声检测部106通过在该期间中依次输出3轴磁场强度信息,将表示X轴方向、Y轴方向及Z轴方向各自的磁场强度的沿着时间序列的变化的发生地磁噪声模式向地磁噪声模式管理部108输出。
另外,地磁噪声检测部106在将3轴磁场强度信息向地磁噪声模式管理部108输出时,基于由终端姿势检测部105计算出的姿势,将由该3轴磁场强度信息表示的X轴方向、Y轴方向及Z轴方向各自的磁场强度修正为预先设定的基本姿势下的磁场强度。并且,地磁噪声检测部106将表示该修正后的磁场强度的3轴磁场强度信息向地磁噪声模式管理部108输出。
这样,在本实施方式中,在步骤S304中,在由角速度传感器102检测出的移动终端1000的朝向(位置检测装置100的朝向)的变化量、与根据由地磁传感器103检测出的上述3轴方向的磁场强度的变化导出的移动终端1000的朝向的变化量之间有预先设定的量或比率以上的差的情况下,检测为在地磁的检测中发生了异常。
通常,当按照确定的位置或场所的纬度及经度检测出与在逻辑上导出的磁场强度不同的磁场强度时,检测为在该位置或场所在地磁的检测中发生了异常。相反地讲,当检测出与该在逻辑上导出的磁场强度大致相同的磁场强度时,检测为在该位置或场所中在地磁的检测中没有发生异常。但是,有时会发生以下这样的特殊的情形:即使与地磁没有关系的磁场处于位置检测装置100的附近,也会因位置检测装置100的朝向改变而检测出与该在逻辑上导出的磁场强度大致相同的磁场强度。在该特殊的情形中,也应检测为在地磁的检测中发生了异常。所以,通过比较由角速度传感器102检测的位置检测装置100的朝向的变化量、与基于由地磁传感器103检测的磁场强度的变化导出的位置检测装置100的朝向的变化量,即使是上述那样的特殊的情形,也能够适当地检测为在地磁的检测中发生了异常。即,在上述那样的特殊的情形中,由角速度传感器102检测出的位置检测装置100的朝向的变化量与基于由地磁传感器103检测出的磁场强度的变化导出的位置检测装置100的朝向的变化量不同,在这些变化量的差是预先设定的量或比率以上的情况下,能够检测为在地磁的检测中发生了异常。
此外,通过步骤S303及S304的处理,在是否发生了地磁噪声的检测、即在地磁的检测中是否发生了异常的检测中,能够防止误检测。即,有时根据位置检测装置100的朝向的变化,由地磁传感器103检测出的磁场强度(沿着X轴、Y轴及Z轴的各个方向的磁场强度)也变化。在这样的情况下,能够防止因该磁场强度的变化而误判断为在地磁的检测中发生异常的情况。
图498是表示地磁噪声模式管理部108的处理的流程的流程图。
首先,地磁噪声模式管理部108在从地磁噪声检测部106取得了发生地磁噪声模式时、即发生了地磁噪声时,从坐标推测部107取得由该坐标推测部107计算出的推测当前地坐标(处理对象的推测当前地坐标)及推测当前地准确度(S401)。进而,地磁噪声模式管理部108参照地磁噪声模式保存部109的表109a,从表109a中检索与该发生地磁噪声模式类似的基准噪声模式作为类似基准噪声模式(S402)。
接着,地磁噪声模式管理部108如果在步骤S402中找出至少1个类似基准噪声模式,则再从该至少1个类似基准噪声模式中,检索在表109中与接近于推测当前地坐标的基准坐标建立关联、并且与发生地磁噪声模式之间的类似度高的类似基准噪声模式作为修正基准噪声模式(步骤S403)。即,地磁噪声模式管理部108检索作为与处于处理对象的推测当前地坐标的周边的基准坐标建立关联的、与发生地磁噪声模式类似的图案的修正基准噪声模式。
这里,地磁噪声模式管理部108在步骤S402及S403中进行检索时,将发生地磁噪声模式与各基准噪声模式(各比较对象的基准噪声模式)进行比较。即,地磁噪声模式管理部108进行发生地磁噪声模式与各基准噪声模式的模式匹配。此时,地磁噪声模式管理部108事前进行该发生地磁噪声模式的时间轴上的缩放(scaling,定标)。即,地磁噪声模式管理部108从移动量检测部104取得生成发生地磁噪声模式时、即发生地磁噪声时的移动终端1000的移动速度。并且,地磁噪声模式管理部108根据该移动速度与预先设定的移动速度(比较基准速度)之比,将该发生地磁噪声模式在时间轴方向上缩放。结果,发生地磁噪声模式的时间轴上的标度(scale)与比较对象的基准噪声模式的时间轴上的标度匹配。然后,地磁噪声模式管理部108进行定标后的发生地磁噪声模式与基准噪声模式的比较(模式匹配)。
例如,地磁噪声模式管理部108在步骤S402及S403中,按每个基准噪声模式计算指标值与类似度之和,该指标值为,处理对象的推测当前地坐标与对应于比较对象的基准噪声模式的基准坐标之间的距离越短则该指标值表示越大的值,该类似度是通过发生地磁噪声模式与比较对象的基准噪声模式的模式匹配而得到的。并且,地磁噪声模式管理部108选择与这些计算出的和中的最大的值、并且比预先设定的阈值大的和对应的基准噪声模式,作为修正基准噪声模式。
步骤S403中的检索的结果,地磁噪声模式管理部108判别是否存在修正基准噪声模式(步骤S404)。
这里,地磁噪声模式管理部108如果判别为存在修正基准噪声模式(步骤S404的“是”),则进一步判别在表109a中与该修正基准噪声模式建立关联的基准准确度是否比在步骤S401中取得的推测当前地准确度高(步骤S405)。
地磁噪声模式管理部108在步骤S405中如果判别为基准准确度比推测当前地准确度高(步骤S405的“是”),则对坐标修正部110指示推测当前地坐标的修正,以将推测当前地坐标替换为在表109a中与该修正基准噪声模式建立关联的基准坐标(步骤S406)。由此,坐标修正部110从地磁噪声模式管理部108取得基准坐标。并且,坐标修正部110通过将从坐标推测部107取得的推测当前地坐标替换为该基准坐标,将该推测当前地坐标修正,将该修正后的推测当前地坐标(=基准坐标)输出。此外,地磁噪声模式管理部108将在表109a中与该修正基准噪声模式建立关联的基准坐标作为前次识别基准点向坐标推测部107通知。
这样,在存在修正基准噪声模式的情况下,在与该修正基准噪声模式建立关联的基准准确度比推测当前地准确度高的情况下,处理对象的推测当前地坐标被修正,所以能够防止就连与修正基准噪声模式建立关联而保存在地磁噪声模式保存部109中的基准坐标的准确度为推测当前地坐标的准确度以下的情况也将该推测当前地坐标修正,能够检测更正确的位置。
另一方面,地磁噪声模式管理部108如果在步骤S405中判别为基准准确度是推测当前地准确度以下(步骤S405的“否”),则将在地磁噪声模式保存部109的表109a中与该修正基准噪声模式建立关联的基准坐标及基准准确度更新。即,地磁噪声模式管理部108将与修正基准噪声模式建立关联的基准坐标及基准准确度分别替换为推测当前地坐标及推测当前地准确度(步骤S407)。由此,能够提高保存在地磁噪声模式保存部109中的基准坐标的准确度。此外,此时,地磁噪声模式管理部108将该推测当前地坐标作为前次识别基准点向坐标推测部107通知。
此外,地磁噪声模式管理部108如果在步骤S408中判别为不存在修正基准噪声模式(步骤S404的“否”),则将发生地磁噪声模式、推测当前地坐标、及推测当前地准确度分别作为新的基准噪声模式、基准坐标、及基准准确度建立关联,登录到地磁噪声模式保存部109的表109a中(步骤S408)。此时,地磁噪声模式管理部108还将新的基准点ID及更新时刻与该新的基准噪声模式等建立关联,登录到表109a。另外,更新时刻是进行该登录时的时刻。此外,新登录的发生地磁噪声模式是如上述那样在时间轴上缩放的图案。此外,在步骤S408后,地磁噪声模式管理部108将该新的基准坐标作为前次识别基准点向坐标推测部107通知。
图499是表示本实施方式的位置检测方法的流程图。
本实施方式的位置检测方法是通过推测表示移动终端1000被移动后的位置的坐标来检测该位置的位置检测方法。在该位置检测方法中,首先,坐标推测部107推测表示自己的当前的位置的推测当前地坐标(步骤S14)。接着,地磁噪声检测部106检测在由地磁传感器103进行的地磁的检测中是否发生了异常,生成表示在发生异常的期间中由地磁传感器检测到的磁场强度的时间序列上的变化的图案即地磁噪声模式(发生地磁噪声模式)(步骤S16)。
接着,地磁噪声模式管理部108从保存在记录介质(地磁噪声模式保存部109)中的至少1个图案(基准噪声模式)中检索与处于在发生了该异常时推测出的处理对象的推测当前地坐标的周边的坐标建立关联的、类似于地磁噪声模式的图案即修正基准噪声模式(步骤S18)。这里,在通过检索找不到该修正基准噪声模式的情况下(步骤S18的“否”),地磁噪声模式管理部108将处理对象的推测当前地坐标及地磁噪声模式建立关联而保存到记录介质中(步骤S20)。另一方面,在通过检索找到了修正基准噪声模式的情况下(步骤S18的“是”),地磁噪声模式管理部108指示处理对象的推测当前地坐标的修正(步骤S22)。并且,坐标修正部110根据该修正的指示,将处理对象的推测当前地坐标修正为与修正基准噪声模式建立关联而保存在记录介质中的坐标(基准坐标)(步骤S24)。
这样,在本实施方式中,在由地磁传感器103进行的地磁的检测中发生了异常的期间中,生成地磁噪声模式,从地磁噪声模式保存部109中检索与该地磁噪声模式类似的修正基准噪声模式,如果能找到该修正基准噪声模式,则将在发生异常时推测出的处理对象的推测当前地坐标修正为与该修正基准噪声模式建立关联而保存在地磁噪声模式保存部109中的基准坐标。这里,由于地磁噪声模式有再现性,所以如果该基准坐标是正确的坐标,则能够基于该发生地磁噪声模式将处理对象的推测当前地坐标修正为正确的坐标。此外,在修正基准噪声模式的检索中,由于检索与处于处理对象的推测当前地坐标的周边的基准坐标建立关联的修正基准噪声模式,所以能够防止处理对象的推测当前地坐标被误修正为离得较远的坐标。另外,也可以将处于距处理对象的推测当前地坐标为预先设定的距离以内的基准坐标作为处于该处理对象的推测当前地坐标的周边的基准坐标。
此外,在本实施方式中,为了导出修正后的正确的坐标而进行的处理仅仅是与发生地磁噪声模式类似的修正基准噪声模式的检索。即,进行发生地磁噪声模式与比较对象的基准噪声模式的比较(模式匹配)。因而,在本实施方式中,不需要在上述专利文献1中需要的照相机,也不需要通过照相机得到的图像与通气口的形状的模式匹配那样的图像处理。结果,能够通过简单的结构及处理检测正确的位置,能够抑制成本。
此外,在本实施方式中,如果找不到修正基准噪声模式,则将处理对象的推测当前地坐标及发生地磁噪声模式建立关联而向地磁噪声模式保存部109保存。结果,能够省去用户特意将坐标与图案的组合向地磁噪声模式保存部109保存的麻烦,能够自动地构建并发展表示该组合的数据库。结果,在宅内那样的按每个用户而多种多样的空间的环境中,也能够提高该位置检测装置100的方便性。
此外,在本实施方式的位置检测装置100中,在步骤S14中推测推测当前地坐标之前,终端姿势检测部105基于加速度传感器101及地磁传感器103的检测结果,检测移动终端1000的姿势。接着,移动量检测部104基于由终端姿势检测部105检测出的姿势和加速度传感器101的检测结果,检测表示移动终端1000的移动方向及移动距离的移动量。结果,在上述步骤S14中,坐标推测部107将从前次推测的坐标离开了由移动量检测部104检测出的移动量的坐标推测为上述推测当前地坐标。
这样,在本实施方式中,基于加速度传感器101、地磁传感器103、终端姿势检测部105及移动量检测部104的检测结果,检测推测当前地坐标作为移动终端1000及位置检测装置100的当前的位置。即,通过自主导航检测位置检测装置100的当前的位置。结果,能够正确地检测位置检测装置100的当前的位置,能够将该位置修正为更正确的位置。另外,在本实施方式中,通过自主导航检测位置检测装置100的当前的位置,但也可以通过例如使用GPS等的其他方法检测或推测位置检测装置100的当前的位置。
此外,在本实施方式中,通过以预先设定的采样周期检测磁场强度,生成地磁噪声模式。在此情况下,当位置检测装置100重复通过相同的位置时,如果位置检测装置100的移动速度不同,则生成的地磁噪声模式也不同。所以,在本实施方式中,将发生地磁噪声模式缩放,以使保存在地磁噪声模式保存部109中的比较对象的基准噪声模式与发生地磁噪声模式各自的时间轴上的标度匹配。由此,能够检索适当的修正基准噪声模式。此外,在找不到修正基准噪声模式的情况下,将以预先设定的移动速度(比较基准速度)缩放的地磁噪声模式保存在记录介质中,所以不需要将在发生异常时检测出的移动速度保存在地磁噪声模式保存部109中,能够抑制地磁噪声模式保存部109的容量。
(变形例1)
这里,对本实施方式的第1变形例进行说明。有关本变形例的地磁噪声模式管理部108的特征在于,将移动终端1000的移动速度也保存到地磁噪声模式保存部109的表中。
图500是表示有关本变形例的地磁噪声模式保存部109的表的图。
该表109b按每个基准点,将用于识别该基准点的基准点ID、该基准点处的基准噪声模式、该基准点的基准坐标、该基准点的基准准确度、通过该基准点时的移动终端1000的移动速度、以及该基准点的更新时刻建立关联而表示。例如,在表109b中,将基准噪声模式“基准噪声模式1”、基准坐标(X2,Y2,Z2)、基准准确度“60%”、移动速度“1.5m/秒”及更新时刻“20000202:22:10:05”分别与基准点ID“p1”建立关联而表示。
地磁噪声模式管理部108在将发生地磁噪声模式与比较对象的基准噪声模式比较时,将比较对象的基准噪声模式在时间轴方向上缩放。即,地磁噪声模式管理部108从移动量检测部104取得移动终端1000通过处理对象的推测当前地坐标时的移动速度。另外,该移动速度是发生了地磁噪声时的移动终端1000的移动速度。并且,地磁噪声模式管理部108根据移动终端1000通过处理对象的推测当前地坐标时的移动终端1000的移动速度、与在表109b中与比较对象的基准噪声模式建立关联的移动速度之比,将比较对象的基准噪声模式在时间轴方向上缩放。由此,将发生地磁噪声模式和比较对象的基准噪声模式在相同的标度下进行比较(模式匹配)。
地磁噪声模式管理部108在将发生地磁噪声模式作为新的基准噪声模式登录到表109b时,登录从地磁噪声检测部106输出的未被缩放的发生地磁噪声模式。进而,地磁噪声模式管理部108将移动终端1000通过处理对象的推测当前地坐标时的移动速度与新的基准噪声模式建立关联并登录到表109b中。
这样,在本变形例中,将比较对象的基准噪声模式缩放,以使保存在地磁噪声模式保存部109中的比较对象的基准噪声模式与发生地磁噪声模式的各个的时间轴上的标度匹配。由此,能够检索适当的修正基准噪声模式。此外,在找不到修正基准噪声模式的情况下,将移动速度也与处理对象的推测当前地坐标等建立关联而保存到地磁噪声模式保存部109中,所以能够容易地取得并利用在缩放中需要的该移动速度。
(变形例2)
这里,对本实施方式的第2变形例进行说明。有关本变形例的地磁噪声模式管理部108的特征在于,对于1个基准点,将多个基准噪声模式登录到地磁噪声模式保存部109的表中。
图501是表示有关本变形例的地磁噪声模式保存部109的表的图。
该表109c按每个基准点,将用于识别该基准点的基准点ID、该基准点处的1个或多个基准噪声模式、该基准点的基准坐标、该基准点的基准准确度、和该基准点的更新时刻建立关联而表示。例如,在表109c中,将基准噪声模式“基准噪声模式1a、1b”、基准坐标(X2,Y2,Z2)、基准准确度“60%”、移动速度“1.5m/秒”及更新时刻“20000202:22:10:05,20000205:10:10:03”分别与基准点ID“p1”建立关联而表示。
有关本变形例的地磁噪声模式管理部108与上述实施方式同样,如果在图498所示的步骤S404中判别为存在修正基准噪声模式(步骤S404的“是”),则执行步骤S406及S407的处理。此时,有关本变形例的地磁噪声模式管理部108还将发生地磁噪声模式作为新的基准噪声模式登录到表109c中,以与该修正基准噪声模式相同的基准点ID建立关联。
另外,地磁噪声模式管理部108在将新的基准噪声模式与已有的基准点ID建立关联而登录到表109c中时,除了已有的更新时刻以外,还将该登录时的时刻也作为新的更新时刻登录到表109c中。
此外,有关本变形例的地磁噪声模式管理部108在图498所示的步骤S402及S403中进行检索时,从包含与相同的基准坐标(例如(X2,Y2,Z3))建立关联的两个基准噪声模式1a及1b的表109c中,检索与发生地磁噪声模式对应的修正基准噪声模式。
这样,在本变形例中,由于将多个基准噪声模式与相同的基准坐标建立关联而保存到地磁噪声模式保存部109中,所以能够提高将处理对象的推测当前地坐标修正为该相同的基准坐标的概率。即,将越多的相互不同的基准噪声模式与相同的基准坐标建立关联而登录,越能够提高将处理对象的推测当前地坐标修正为该相同的基准坐标的概率。结果,能够检测到更正确的位置。
另外,地磁噪声模式管理部108在进行与相同的基准坐标建立关联的多个基准噪声模式各自与发生地磁噪声模式的模式匹配时,也可以从与最近的更新时刻建立关联的基准噪声模式起优先地进行模式匹配。由此,越是最近的基准噪声模式,其可靠性越高,所以能够进行处理对象的推测当前地坐标的适当的修正。即,也能够应对根据时刻的经过而变动的地磁噪声模式。
(变形例3)
这里,对本实施方式的第3变形例进行说明。有关本变形例的地磁噪声模式管理部108的特征在于,将基准噪声模式的种类也登录到地磁噪声模式保存部109的表中。
图502是表示发生地磁噪声模式的一例的图。
例如,在地磁噪声发生区域中,在包括较多马达及线圈的设备等的区域之中,如图502所示,磁场强度剧烈地变化。
有关本变形例的地磁噪声模式管理部108在图498的步骤S402及S403中,在将发生地磁噪声模式与基准噪声模式比较时,首先,确定发生地磁噪声模式的种类。即,地磁噪声模式管理部108将由该发生地磁噪声模式表示的时间序列上的磁场强度的每单位时间的变化量与阈值比较。结果,地磁噪声模式管理部108如果判别为该变化量比阈值大,则确定出该发生地磁噪声模式的种类“混乱”。另一方面,地磁噪声模式管理部108如果判别为该变化量是阈值以下,则确定出该发生地磁噪声模式的种类“恒常”。
图503是表示有关本变形例的地磁噪声模式保存部109的表的图。
该表109d按么个基准点,将用于识别该基准点的基准点ID、该基准点处的基准噪声模式、该基准噪声模式的种类、该基准点的基准坐标、该基准点的基准准确度、以及该基准点的更新时刻建立关联而表示。例如,在表109d中,将基准噪声模式“基准噪声模式1”、种类“混乱”、基准坐标(X2,Y2,Z2)、基准准确度“60%”、及更新时刻“20000202:22:10:05”分别与基准点ID“p1”建立关联而表示。进而,在表109d中,将基准噪声模式“基准噪声模式2”、种类“恒常”、基准坐标(X3,Y3,Z3)、基准准确度“80%”、及更新时刻“20030303:23:13:03”分别与基准点ID“p2”建立关联而表示。
所以,地磁噪声模式管理部108如果发生地磁噪声模式的种类是“混乱”,则不进行模式匹配,而从表109d中检索与种类“混乱”建立关联的基准噪声模式,作为类似基准噪声模式或修正基准噪声模式。例如,地磁噪声模式管理部108在与种类“混乱”建立了关联的基准噪声模式有多个的情况下,从该多个基准噪声模式中,检索与最接近于处理对象的推测当前地坐标的基准坐标建立关联的基准噪声模式作为修正基准噪声模式。
另一方面,如果发生地磁噪声模式的种类是“恒常”,则地磁噪声模式管理部108从表109d中提取与种类“恒常”建立关联的基准噪声模式。并且,地磁噪声模式管理部108从与种类“恒常”建立关联的至少1个基准噪声模式中,通过模式匹配检索类似基准噪声模式或修正基准噪声模式。
此外,有关本变形例的地磁噪声模式管理部108在图498的步骤S408中将发生地磁噪声模式作为新的基准噪声模式登录到地磁噪声模式保存部109的表109d时,将针对该发生地磁噪声模式指定的种类也登录到该表109d中。
这样,在本变形例中,在地磁噪声模式的种类表示混乱的情况下,检索与表示混乱的种类建立关联而保存在地磁噪声模式保存部109中的基准噪声模式作为修正基准噪声模式,所以能够不进行模式匹配而简单地检索修正基准噪声模式。即,能够削减修正基准噪声模式的检索所需要的运算量,并实现位置检测的精度提高的两全。此外,在由发生地磁噪声模式及比较对象的基准噪声模式分别表示的磁场强度的时间序列上的变化较剧烈的情况下,模式匹配较困难,但通过进行这样的使用种类的检索,能够找到适当的修正基准噪声模式。
使用上述实施方式及其变形例对本发明的位置检测装置100进行了说明,但本发明并不限定于这些。
例如,在上述实施方式及其变形例中,位置检测装置100具备角速度传感器102及地磁噪声模式保存部109,但也可以不具备这些。例如,在位置检测装置100不具备地磁噪声模式保存部109的情况下,位置检测装置100也可以使用保存在连接在其外部的记录介质中的表109a~109d。此外,在位置检测装置100不具备角速度传感器102的情况下,终端姿势检测部105如果在图496所示的步骤S204中判别为发生地磁噪声,则在步骤S206中,根据在该地磁噪声的发生前的最后计算出的朝向,推测移动终端1000的当前的朝向。进而,在此情况下,地磁噪声检测部106将图497所示的步骤S303及S304的处理省略。
此外,在上述实施方式及其变形例中,位置检测装置100具备加速度传感器101、移动量检测部104及终端姿势检测部105,但也可以不具备这些。在此情况下,位置检测装置100例如具备GPS传感器,坐标推测部107从该GPS传感器取得位置信息,基于该位置信息推测推测当前地坐标。或者,位置检测装置100例如具备无线LAN通信部,坐标推测部107取得该无线LAN通信部接收的电波的电场强度,基于该电场强度推测推测当前地坐标。
此外,在上述实施方式及其变形例中,地磁噪声模式管理部108在图498所示的步骤S405中判断为基准准确度是推测当前地准确度以下时,更新了地磁噪声模式保存部109的表的基准准确度,但在其他定时也可以更新基准准确度。例如,地磁噪声模式管理部108也可以在每当通过基准点时使对应于该基准点的基准准确度增加。具体而言,地磁噪声模式管理部108每当对相同的基准坐标重复步骤S406的处理时,将与该相同的基准坐标建立关联而登录在表中的基准准确度增加预先设定的值。
此外,在上述实施方式及其变形例中,将发生地磁噪声模式及基准噪声模式分别作为了3轴(X轴、Y轴及Z轴)的图案,但也可以作为1个合成的图案。
此外,在上述实施方式及其变形例中,地磁噪声检测部106按照图497所示的流程图的顺序执行各步骤,但也可以在步骤S302的处理之前进行步骤S303及步骤S304的处理。
此外,在上述实施方式中,将发生地磁噪声模式缩放,在变形例1中,将基准噪声模式缩放,但只要发生地磁噪声模式与比较对象的基准噪声模式的标度一致,将缩放哪个都可以,也可以将两图案都缩放。
此外,以下这样的情况也包含在本发明中。
(1)上述装置及终端具体而言是由微处理器、ROM、RAM、硬盘单元、显示器单元、键盘、鼠标等构成的计算机系统。在上述RAM或硬盘单元中,存储有计算机程序。通过由上述微处理器按照上述计算机程序动作,各装置达到其功能。这里,计算机程序为了达到规定的功能,也可以是将表示对计算机的指令的命令代码组合多个而构成的。
(2)构成上述装置或终端的构成要素的一部分或全部也可以由1个系统LSI(Large Scale Integration:大规模集成电路)构成。系统LSI是将多个构成部分集成到1个芯片上而制造的超多功能LSI,具体而言,是包括微处理器、ROM、RAM等而构成的计算机系统。在上述RAM中,存储有计算机程序。通过由上述微处理器按照上述计算机程序动作,系统LSI达到其功能。例如,集成电路具备移动量检测部104、终端姿势检测部105、地磁噪声检测部106、坐标推测部107、地磁噪声模式管理部108、地磁噪声模式保存部109和坐标修正部110。
(3)构成上述装置或终端的构成要素的一部分或全部也可以由能够相对于装置或终端拆装的IC卡或单体的模组构成。上述IC卡或上述模组是由微处理器、ROM、RAM等构成的计算机系统。上述IC卡或上述模组也可以包括上述超多功能LSI。通过由微处理器按照计算机程序动作,上述IC卡或上述模组达到其功能。该IC卡或该模组也可以具有防篡改性。
(4)本发明也可以是上述所示的方法。此外,也可以是将这些方法通过计算机实现的计算机程序,也可以是由上述计算机程序构成的数字信号。
此外,本发明也可以是将上述计算机程序或上述数字信号记录到计算机可读取的记录介质、例如软盘、硬盘、CD-ROM、MO、DVD、DVD-ROM、DVD-RAM、BD(Blu-ray Disc)、半导体存储器等中的产品。此外,也可以是记录在这些记录介质中的上述数字信号。
此外,本发明也可以是将上述计算机程序或上述数字信号经由以电气通信线路、无线或有线通信线路、以因特网为代表的网络、数据广播等传送的系统。
此外,本发明也可以是具备微处理器和存储器的计算机系统,上述存储器存储有上述计算机程序,上述微处理器按照上述计算机程序动作。
此外,也可以通过将上述程序或上述数字信号记录到上述记录介质中并移送,或通过将上述程序或上述数字信号经由上述网络等移送,由独立的其他计算机系统实施。
(5)也可以将上述实施方式及上述变形例分别组合。
(实施方式D1)
在以下的实施方式D1~D5中,说明在例如改变信息显示装置的朝向等、用户采用多种拿法的情况下,也能够将GUI以用户能够舒适观看的朝向进行显示的信息显示装置。
下面,参照附图对本发明的实施方式D1~D5进行说明。
实施方式D1对如下的处理流程进行说明:检测离心力和用户挥动移动设备的动作,对画面的显示朝向进行变更,由此,在用户能够舒适观看的朝向上显示GUI。
图504是示出本发明的实施方式D1的信息显示装置的姿势和画面显示朝向的关系的图。如图504所示,设用户观看移动设备的状态下的初始状态为(A)。在(A)中,移动设备处于相对于水平面即桌子而使画面从铅直方向偏移20度的状态。当从该状态起顺时针旋转90度时成为(B)的状态,即,移动设备处于铅直方向纵长的状态,GUI将与铅直方向上方相当的边作为上部而显示GUI。
这样,在画面显示部不处于水平状态的移动设备中,通过利用加速度传感器等检测重力,能够进行将铅直方向的上侧作为上部的GUI显示。
进而,如(C)那样在水平放倒移动设备的情况下,维持(B)的显示。然后,在使移动设备在水平面上绕逆时针改变朝向时,如(D)那样,在(C)中成为上部的方向上显示GUI。这里,为了示出水平面而利用桌子,但是,也可以是地面、天花板、手持状态等。
这里,使用图505进一步对检测(A)或(B)的状态并在向(C)和(D)改变终端姿势时决定显示朝向的方法进行详细说明。图505是示出判定本发明的实施方式D1的信息显示装置的画面的显示朝向的处理部的内部结构的图。
如图505所示,本发明的移动装置具有:加速度传感器101;角速度传感器102;地磁传感器103;终端姿势检测部104,根据这些传感器的信息检测移动设备相对于水平面的角度、水平面上的朝向等的终端姿势信息;显示朝向判定部105,根据终端姿势信息等判定移动设备画面中显示的GUI的显示朝向;时间序列终端状态管理部106,作为终端的过去状态,在时间序列终端状态保存部107中保存并管理终端姿势信息和GUI的显示朝向;以及图像显示部108。
接着,使用图506示出处理流程。图506是用于说明本发明的实施方式D1的信息显示装置的处理流程的图。
首先,在步骤100a中,判定终端姿势检测部是否根据各种传感器检测到终端的姿势变化,在未检测到的情况下,返回步骤100a。
接着,在步骤100b中,在检测到的情况下,终端姿势检测部104取得加速度传感器的值,取得重力方向。
接着,在步骤100c中,判定终端姿势检测部104是否检测到移动设备相对于水平面的任意角度(例如20度)以上的倾斜。
在步骤100c中为“是”的情况下,进入步骤100d,在终端姿势检测部104根据重力方向的信息而检测到的姿势中,根据倾斜判定位于铅直方向最上侧的边。
接着,在步骤100e中,显示朝向判定部105变更显示画面的朝向,以使得检测到的边成为画面显示上的上部,接着,在步骤100f中,时间序列终端状态管理部将终端姿势信息与当前的显示朝向一起保存。
接着,在步骤100g中,判定显示处理是否结束。在“是”的情况下结束。如果未结束(“否”的情况),则返回步骤100a。
另外,在步骤100c中为“否”的情况下,进入图507的W01。
接着,使用图507示出处理流程。图507是用于说明本发明的实施方式D1的信息显示装置的处理流程的图。
首先,在步骤101a中,显示朝向判定部从时间序列终端状态管理部取得前一个终端的姿势信息和显示朝向。
接着,在步骤101b中,终端姿势检测部使用角速度或地磁传感器或双方取得水平面上的朝向变化,作为当前时点的终端姿势。
接着,在步骤101c中,显示朝向判定部对前一个终端的姿势信息和当前时点的终端的姿势信息进行比较。
接着,在步骤101d中,判定前一个终端的姿势信息是否表示具有移动设备相对于水平面的任意角度(例如20度)以上的倾斜。
在“是”的情况下,进入步骤101e,显示朝向判定部不变更终端的前一个显示朝向而继续进行显示。然后,返回图506的W02。
另一方面,在“否”的情况下,进入步骤101f,判定朝向的变化是否超过任意的角度(70度)。
接着,在步骤101g中,显示朝向判定部与朝向的变化方向相反地使画面变更90度,返回图506的W02。
这样,本实施方式的信息显示装置(移动设备)能够在用户能够舒适观看的朝向上显示GUI。
(实施方式D2)
在本实施方式中,公开了使用离心力的朝向设定、以及使用考虑了用户手持状态的移动设备筐体的振动幅度设定朝向的方式。
图508是示出设定本发明的实施方式D2的信息显示装置的朝向的处理部的内部结构的图。图508所示的结构与实施方式D1所示的结构的不同之处在于,追加了离心力方向检测部111。
接着,使用图509示出处理流程。图509是用于说明本发明的实施方式D2的信息显示装置的处理流程的图。
首先,在步骤110a中,终端姿势检测部取得加速度传感器的值,取得重力方向。
接着,在步骤110b中,终端姿势检测部根据重力方向的值计算终端相对于水平线的姿势信息。
接着,在步骤110c中,判定本设备的显示部是否处于接近预先确定的误差以内的水平的状态。
在“是”的情况下,进入步骤110e,离心力方向检测部取得水平方向的加速度的值。
接着,在步骤110f中,判定是否存在在任意时间内在一定方向上持续输出水平方向的加速度成分、且在相反方向上不存在成分的情况。
这里,在“是”的情况下,进入步骤110h,将所取得的方向的较远的边作为上部而显示GUI,进入图510的W03。
在“否”的情况下,进入步骤110g,按照预先设定的显示朝向显示GUI,进入图510的W03。
另外,在步骤110c中为“否”的情况下,根据终端的倾斜,将位于最高位置的边作为上部而显示GUI,进入图510的W03。
接着,使用图510示出处理流程。图510是用于说明本发明的实施方式D2的信息显示装置的处理流程的图。
首先,在步骤111a中,终端姿势检测部取得加速度传感器的值,根据合成矢量取得重力方向。
接着,在步骤111b中,终端姿势检测部根据本终端通过测量而保存的位置信息计算重力的基准值。或者,根据本终端的位置信息访问云上的服务器而取得重力的基准值。
接着,在步骤111c中,判定所取得的3轴加速度的合成值是否大于重力的基准值。
在“是”的情况下,进入步骤111g,以接近最大矢量的方式修正重力方向。
接着,在步骤111h中,将除了重力成分以外的合成矢量在水平面上所示的方向的较远的边作为上部而显示GUI,进入图511的W04。
另外,在步骤111c中为“否”的情况下,进入步骤111d,判定本设备的显示部是否处于接近预先确定的阈值(角度)以内的水平的状态。
在“是”的情况下,进入步骤111e,按照预先设定的显示朝向显示GUI,进入图8的W04。
在“否”的情况下,进入步骤111f,根据终端的倾斜,将位于最高位置的边作为上部而显示GUI,进入图511的W04。
接着,使用图511示出处理流程。图511是用于说明本发明的实施方式D2的信息显示装置的处理流程的图。
首先,在步骤112a中,终端姿势检测部取得加速度传感器的值,取得重力方向。
接着,在步骤112b中,终端姿势检测部在由角速度传感器或加速度传感器检测到的姿势中,检测摇动幅度较大的边。
接着,在步骤112c中,终端朝向判定部使用表示检测到的振动幅度较大的边、以及表示预先设定或过去保存的振动幅度较大的边与开头方向之间的关系的信息,设定GUI的朝向。
接着,在步骤112d中,判定用户是否在任意时间(例如5秒)以内根据超过一定值的倾斜或离心力检测到开头方向。
在“否”的情况下结束。
另一方面,在“是”的情况下,进入步骤112e,判定是否与根据振动幅度检测到的边不同。这里,在“否”的情况下结束,在“是”的情况下,进入步骤112f,终端朝向判定部保存振动幅度较大的边和此后在一定时间以内用户设为开头方向的边的关系并结束。
这样,本实施方式的信息显示装置(移动设备)使用离心力设定朝向,并且使用考虑了用户手持状态的移动设备筐体的振动幅度设定朝向,能够在用户能够舒适观看的朝向上显示GUI。
(实施方式D3)
在本实施方式中,对移动设备通过使用内置传感器的自主导航而取得移动设备自身的位置信息、以及移动设备显示使用预先登记位置的周边设备或物品、具有位置信息的虚拟标签信息这样的周边环境信息的GUI或应用时的画面的朝向的决定方法进行说明。
图512是示出本发明的实施方式D3的信息显示装置的结构的图。
与实施方式D1的结构相比,图512所示的结构的不同之处在于追加了以下部件:移动量检测部121,根据移动设备通过内置传感器取得的信息检测移动设备的移动量;坐标推测部,推测移动设备的当前地坐标;指示对象搜索部,供移动设备搜索周边环境信息作为指示对象;以及位置DB124,是登记作为指示对象的周边设备或物品、具有位置信息的虚拟标签信息等的列表作为位置信息的数据库。
另外,如果是基于压力传感器的高度检测等有利于确定位置的传感器,则可以用作内置传感器。
并且,位置DB124可以位于终端内部,也可以设置在云上,其保存场所没有限制。
接着,使用图513示出处理流程。图513是用于说明本发明的实施方式D3的信息显示装置的处理流程的图。
首先,在步骤120a中,终端姿势检测部取得加速度传感器的值,取得重力方向。
接着,在步骤120b中,终端姿势检测部根据重力方向的值计算终端相对于水平面的姿势信息。
接着,在步骤120c中,终端姿势检测部根据加速度传感器、角速度传感器和地磁传感器决定终端姿势。
接着,在步骤120d中,移动量检测部取得从上次坐标推测时起的加速度传感器的值。
接着,在步骤120e中,移动量检测部从终端姿势检测部取得终端姿势信息。
接着,在步骤120f中,移动量检测部根据终端姿势信息和加速度传感器的值,计算终端的移动方向、移动距离。
接着,在步骤120g中,坐标推测部根据从前一个坐标推测时的坐标值起的移动方向、移动距离,计算当前时刻的移动设备坐标值即推测当前地坐标。
接着,在步骤120h中,坐标推测部根据从过去识别到基准点时起的移动量的总量,设定坐标推测准确度,进入图514的W05。
接着,使用图514示出处理流程。图514是用于说明本发明的实施方式D3的信息显示装置的处理流程的图。
首先,在步骤121a中,指示对象搜索部确认是否是终端指示的对象物搜索状态(例如用户按下按钮、特定位置、静止状态)。
接着,在步骤121b中,判定是否是对象物搜索状态。
在“否”的情况下,进入图515的W06。另一方面,在“是”的情况下,进入步骤121c,指示对象搜索部从姿势控制部取得终端姿势,确定终端的开头方向的朝向。
接着,在步骤121d中,指示对象搜索部从坐标推测部取得本设备的坐标值。
接着,在步骤121e中,指示对象搜索部确认在从本设备的坐标值朝向终端开头的方向上是否存在具有登记在位置DB上的位置信息的设备等的对象物。
接着,在步骤121f中,判定是否存在对象物。
在“否”的情况下,进入图515的W06。另一方面,在“是”的情况下,进入步骤121g,启动与指示对象相关联的功能(例如对象设备的控制GUI),进入图515的W06。
接着,使用图515示出处理流程。图515是用于说明本发明的实施方式D3的信息显示装置的处理流程的图。
首先,在步骤122a中,显示朝向判定部判定是否是显示与指示对象相关联的GUI的模式。
接着,在步骤122b中,显示朝向判定部从终端姿势检测部取得终端姿势。
接着,在步骤122c中,判定本设备的显示部是否处于接近预先确定的阈值(例如±10度)以内的水平的状态。
在“是”的情况下,进入图516的W08。另一方面,在“否”的情况下,进入图516的W07。
接着,使用图516示出处理流程。图516是用于说明本发明的实施方式D3的信息显示装置的处理流程的图。
在W07中,在步骤123a中,根据终端的倾斜,将位于最高位置的边作为上部而显示GUI并结束。
在W08中,在步骤123b中,显示朝向判定部计算接近连接本设备的坐标值和指示对象物的坐标值的直线状的指示对象物的边。
接着,在步骤123c中,判定计算出的边与连接本设备的坐标值和指示对象物的坐标值的直线是否为任意角度(例如90度±20度)以内。
在“是”的情况下结束,在“否”的情况下,进入步骤123d,判定从位置DB取得的指示对象的位置的准确度是否为任意水平(例如80%)以上。这里,在“是”的情况下结束,在“否”的情况下,进入步骤123e,显示朝向判定部根据时间序列终端状态管理部的信息判定现状是否处于旋转中。
接着,在步骤123f中,判定是否在计算出的边与连接本设备的坐标值和指示对象物的坐标值的直线为任意角度(例如90度±20度以内)的方向上处于旋转中。
在“是”的情况下结束,在“否”的情况下,进入步骤123g,不改变现状的朝向而继续进行显示并结束。
图517是存储在位置DB中的指示对象的信息的例子。如图517所示,对象物具有各个三维空间上的绝对坐标值、或者将移动设备为了确定位置而使用的任意一个基准点作为基准的相对坐标值。进而,还可以具有将对象物自身考虑为基准点时的表示坐标值的准确度的基准点角度信息。并且,可以具有对对象物的坐标或基准点角度信息进行了更新时的更新时刻信息。
这样,根据本实施方式的信息显示装置,实现如下的GUI显示:在意识到用户希望指示的对象的状况下,即使用户采用多种握持方式使用移动设备,用户也能够舒适地操作移动设备。
(实施方式D4)
叙述通过图标显示而实现用户更容易理解的显示的方法。例如,在改变移动设备的画面朝向的情况下,显示表示当前时刻的移动设备姿势的图标,以防止难以得知移动设备自身筐体的姿势与移动设备自身的画面朝向之间的关系。
下面,使用附图对显示表示本发明的实施方式D4的信息显示装置(移动设备自身)的朝向的图标的方法进行说明。图521是示出本发明的实施方式D4的信息显示装置(移动设备自身)中始终表示终端正位置的图标的变化的图。并且,图522~图530是示出本发明的实施方式D4的信息显示装置(移动设备自身)中表示正位置的图标的变化的图。
在图521中,位于移动设备画面左上方的图标缩小了夸张表现按钮、照相机、扬声器位置的移动设备自身的图像。即使画面的朝向变化,该图标也始终在容易观看的位置持续显示终端自身的朝向。具体而言,与纵向横向无关,在左上方显示移动设备终端的当前状态的位置。此时,不论移动设备筐体朝向哪个朝向,相对于筐体,图标的朝向也不变,即使画面内的其他内容朝向各种方向,也在与筐体相同的朝向上显示图标。
并且,也可以如图525那样显示在右下方或左下方,进而,右上方等画面内的显示位置可以在任意位置。这里,使用从水平面倾斜70度的图像,但是,只是一例,角度没有限制。
另外,在图522、图523中也同样表示图标类别的变化。并且,在图524(A)~图530中,关于横位置和纵位置,公开了仅观看左右或上下单方的图像的情况的图标。如图524所示,对于移动设备来说,在前面附加有照相机或扬声器等,针对纵位置、横位置,需要使照相机位于上方等,称为正确位置(正位置)。该情况下,对用户显示时的图标表示纵向和横向时的正位置,2种即可。
图531~图537是示出本发明的实施方式D4的信息显示装置对用户提示正位置的图标的图。
例如,如图531所示,当图标的上方向出现在图标相对于纵位置而成为正位置的方向上、移动设备相对于纵位置而成为与正位置相反的姿势时,图标朝向相反方向,所以,用户具有不舒适感。由此,能够对用户提示正位置。图532~图537也公开了对用户提示正位置的图标。图中,作为其他例子,在左上方显示图标。
并且,通过使图标左右非对称且具有方向性,能够对用户提示从当前的终端位置向哪个方向旋转则成为正位置。例如如图531所示,以眼睛为主题的图标观看右方的情况示出,通过使终端的右侧朝上,能够使其成为正位置。图532~图537也同样,图标的面部的朝向、手指指向的朝向、身体的朝向示出正位置的方向。
并且,在图529中示出图像针对纵位置和横位置变化为不同图像的图标。在横位置中看起来是鸟,但是,在纵位置中看起来是兔子,在横位置中看起来是企鹅,但在纵位置中看起来是翻车鱼。由此,在存在不舒适感的图像时,筐体的朝向使用户感觉很奇怪。
该情况下,能够消除用户感觉不舒适的图标的显示。此时,显示图标的模块事前识别画面朝向的上方向,始终以GUI的上侧为基准,能够成为结合横位置和纵位置的图标显示。
(实施方式D5)
在本实施方式中,作为信息显示装置的一个方式,使用图538对数字照相机等移动终端的电气结构进行说明。图538是示出本发明的实施方式D5的信息显示装置的一个方式的移动终端的结构的图。
[1-1.概要]
本实施方式的移动终端5000具有触摸面板等外部输入部和显示器,是能够进行因特网浏览、影像阅览、音乐视听、TV或家电产品的操作等的多功能移动终端。本实施方式的移动终端5000在其使用目的方面,假设使移动终端纵向或横向旋转,但是,通过始终向用户朝向的方向旋转画面朝向并进行显示,不论用户如何旋转移动终端5000,也能够始终在容易观看的显示方向上显示画面。
[1-2.结构]
[1-2-1.电气结构]
图538所示的移动终端5000具有角速度传感器1002和地磁传感器1003,使用它们的输入,使显示方向控制部1005检测当前用户从哪个方向握持移动终端5000,决定显示方向。然后,将所决定的显示方向传递到画面显示控制部1006。画面显示控制部1006根据控制方向控制部的信息,实际生成向移动终端的显示器1004输出的信息,发送给显示器1004。显示器1004在显示器画面中显示接收到的信息。下面,对移动终端5000的结构进行详细说明。
外部输入部1030由触摸面板或硬件键盘等构成。通过受理用户的操作,能够受理对移动终端5000进行操作的各种输入。在显示器1004带有触摸面板而能够受理外部操作的情况下,也可以与显示器1004兼用。
控制器1020是对移动终端5000整体进行控制的控制单元。控制器1020可以由半导体元件等实现。控制器1020可以仅由硬件构成,也可以通过组合硬件和软件而实现。控制器1020可以由微机等实现。控制器1020能够根据由角速度传感器1002或地磁传感器1003等检测到的移动终端5000朝向的方位、铅直方向的倾斜,对用户便利性高的画面显示方向进行控制,在画面中进行显示(详细情况后述)。
角速度传感器1002是用于检测移动终端5000的角速度的传感器,能够检测多个轴方向的角速度。
地磁传感器1003是用于检测移动终端5000朝向的水平方向的方位信息的传感器,能够取得方位信息。
显示方向控制部1005根据角速度传感器1002和地磁传感器1003的信息对移动终端5000的显示方向进行控制。在检测到移动终端5000例如在水平方向上顺时针旋转90度的情况下,视为用户使移动终端5000从长边方向向短边方向旋转,所以,能够进行指示显示画面逆时针旋转90度等的控制。关于在哪个定时以何种程度进行旋转,在后面叙述。
画面显示控制部1006是根据显示方向控制部1005的信息实际生成向显示器1004发送的UI画面的部分。画面显示控制部1006可以通过软件进行安装,也可以使负荷高的处理硬件化等而通过硬件和软件的混合物进行安装。
显示器1004能够显示由画面显示控制部1006发送的UI画面。能够显示从存储器1010中读出的信息。并且,显示器1004能够显示用于进行移动终端5000的各种设定的各种菜单画面等。
存储器1010由闪存或强电介质存储器等构成。存储器1010存储用于对移动终端5000整体进行控制的控制程序、用于生成典型菜单画面的按钮、图标信息、与影像、音乐信息、文本信息、移动终端5000的显示方向变更用的阈值信息等有关的信息等。特别地,在本实施方式中,存储器1010存储作为用于切换显示方向的判断信息的初始显示方位、水平方向旋转阈值信息、铅直方向旋转阈值信息、切换的显示菜单信息、使当前的菜单画面旋转的库信息。
[1-2-2.用语的对应]
角速度传感器1002是用于检测移动终端5000的姿势的信息取得单元的一例。地磁传感器1003是检测移动终端5000朝向的水平方向的朝向即方位信息和水平方向的旋转的单元的一例。
并且,控制器1020是信息取得单元、旋转判定单元、旋转检测单元和控制单元的一例。内部存储器1010是存储单元的一例。显示器1004是显示单元的一例。
[1-3-1.使用情况]
使用图539、图540对本实施方式假设的使用情况的一例进行说明。
目前,如图539那样,人物A以短边方向朝向人物A(在本实施方式中将其称为纵向握持)的方式操作移动终端5000,在影像等使长边方向朝向人物A(在本实施方式中将其称为横向握持)进行观看较为合适等的情况下,如图539的右图那样,画面不会旋转,所以,人物A在从纵向握持切换为横向握持的情况下,需要额外旋转画面。
但是,在本实施方式中,特征在于,如图540那样,在人物A从图540的左图那样纵向握持切换为图540的右图那样横向显示的情况下,画面自动旋转到人物A容易观看的方向。
[1-3-2.显示画面的旋转控制(整体)]
为了说明本实施方式的移动终端5000的一连串的动作,为了便于说明,按照使用情况不同而分为通常情况和特殊情况进行说明。
图541和图542是示出与本实施方式的说明中使用的移动终端5000的水平方向、垂直方向的姿势有关的变量的定义的图。
使用图541定义与移动终端5000的水平方向的方位有关的变量。即,将移动终端5000的初始状态下、移动终端5000朝向的方位定义为D0。并且,将移动终端5000在水平方向上旋转而当前朝向的方位定义为D1。
另外,在本实施方式中,关于D0/D1,使用方位信息进行了说明,但是,D0/D1只要是用于检测移动终端5000的水平方向的旋转的信息即可,例如可以积累陀螺仪传感器的水平方向的加速度,来检测移动终端5000朝向的相对方向。
接着,使用图542定义与移动终端5000的铅直方向的倾斜有关的变量。设移动终端5000朝向水平方向时的倾斜为0度,设垂直竖立时的倾斜为90度。将当前的移动终端5000的倾斜定义为H。HThr是用于进行后述显示旋转的铅直方向的倾斜阈值。
图543是示出将移动终端5000作为TV遥控器进行操作时的菜单画面的一例的图。图543的左图示出使移动终端5000纵向显示的情况,图543的右图示出使移动终端5000横向显示的情况。在纵向的情况下,增大频道按钮,在横向显示的情况下,一并显示与节目有关的附带信息等,通过改变纵向显示和横向显示中显示的内容,用户能够简单地访问期望的信息。这里,图544~图547是示出将移动终端5000作为TV遥控器进行操作时的使用情况的一例的图。图548是示出移动终端5000的其他操作的使用情况的一例的图。
使用图549~图554对本实施方式的移动终端5000的控制流程进行说明。图549~图554是用于说明本发明的实施方式D5的移动终端5000的控制流程的图。
首先,在步骤601a中,接通移动终端5000的电源。
接着,在步骤601b中,显示方向控制部1005从地磁传感器1003取得当前的移动终端5000的方位信息D1。
接着,在步骤601c中,显示方向控制部1005利用方位信息D1对初始显示方位Do进行初始化。
接着,在步骤601e中,显示方向控制部1005检测是否许可水平方向的旋转。在“否”的情况下,进入步骤601d。在“是”的情况下,进入步骤601f。
这里,对是否许可水平方向的旋转进行解释说明。移动终端5000可以通过用户操作来设定许可/不许可旋转。并且,在如图544那样将移动终端5000作为遥控器进行操作的情况下,还存在即使检测到移动终端5000的旋转也不使显示旋转的情况。因此,通过具有许可/不许可水平方向的显示旋转的功能,能够防止非意图的画面旋转。
接着,在步骤601f中,显示方向控制部1005从存储器1010取得当前的移动终端5000的初始方位信息D0、水平方向旋转阈值DThr。
接着,在步骤601g中,显示方向控制部1005从地磁传感器1003取得当前的移动终端5000的方位信息D1。
接着,在步骤601h中,显示方向控制部1005判定检测到的方位信息D1是否相对于初始方位信息D0而变化DThr以上。在“否”的情况下,进入步骤601d。在“是”的情况下,进入步骤601j。
接着,在步骤601j中,仅记录初次的旋转检测开始时刻。
接着,在步骤601k中,显示方向控制部1005检测当前时刻是否从旋转检测时刻起经过了规定时间。
在“否”的情况下,在步骤601m中待机一定时间后进入步骤601g。在“是”的情况下,进入步骤601n。
接着,在步骤601j~601n中设置一定时间的检测旋转量的时间是为了,在用户使移动终端5000旋转180度的情况下等、使移动终端5000旋转了旋转阈值的2倍以上的情况下,顺畅地进行移动终端5000的旋转。并且,在临时使移动终端5000旋转了旋转阈值以上而立即使其向相反方向旋转的情况下等,相反方向的旋转连续,能够防止用户的眼睛摆动。
接着,在步骤601n中,显示方向控制部1005检测移动终端5000的显示器面在铅直方向上朝上还是朝下。
接着,在步骤601o中,显示方向控制部1005向画面显示控制部1006通知使画面旋转以使得D0方向成为显示画面的上部的命令。
关于步骤601n、步骤601o,这是因为,如图548那样,例如在用户仰望对移动终端5000进行操作的情况下,在使移动终端5000为D1方向的情况下,在移动终端5000的显示器1004在铅直方向朝下和仰望时,为了进行校正而使画面旋转的朝向相反。
接着,在步骤601p中,显示方向控制部1005实施画面旋转的摇摆/阈值控制处理。
接着,在步骤601r中,画面显示控制部1006判定新画面生成是否OK。在“否”的情况下,在步骤601s中待机一定时间后进入步骤601q。在“是”的情况下,进入步骤601s。
该步骤意味着如下处理:例如在移动终端5000的用户接口层的软件进行优先级较高的其他处理(例如画面滚动等)的情况下,等待优先级较高的处理完成。
接着,在步骤601t中,画面显示控制部1006判定是否新生成旋转对象的画面。
在“否”的情况下,在步骤601x中使上次显示画面旋转,在显示器1004中进行描绘。在“是”的情况下,进入步骤601u。
下面,对在步骤601t中新生成旋转对象的画面的理由进行说明。
如上所述,移动终端5000假设了动态图像播放器或TV遥控器等各种用途。因此,根据移动终端5000利用的功能,存在直接旋转显示方向较为合适的用途(例如动态图像播放器等)、在纵向显示和横向显示中改变显示内容较为合适的用途(例如遥控器)。通过本步骤,进一步提高由用户旋转移动终端5000而实现的便利性。
接着,在步骤601u中,画面显示控制部1006生成新画面。
接着,在步骤601v中,显示器1004描绘新生成画面。
接着,在步骤602a中,显示方向控制部1005从角速度传感器1002取得当前的移动终端5000的仰角信息H1。
接着,在步骤602b中,显示方向控制部1005判定所检测到的仰角信息HI的绝对值是否大于铅直方向旋转阈值HThr2。
在“否”的情况下,进入步骤601w。在“是”的情况下,进入步骤602c。
接着,在步骤602c中,显示方向控制部1005向画面显示控制部1006通知使画面旋转以使位于画面高位的一侧的边成为显示画面上部的命令。
接着,在步骤602d中,画面显示控制部1006判定是否新生成旋转对象的画面。
在“否”的情况下,在步骤602g中使上次显示画面旋转,在显示器1004中进行描画。在“是”的情况下,进入步骤602e。
接着,在步骤602e中,画面显示控制部1006生成新画面。
接着,在步骤602f中,显示器1004描绘新生成画面。
接着,在步骤602h中,显示方向控制部1005从角速度传感器1002取得当前的移动终端5000的仰角信息H1。
接着,在步骤602j中,显示方向控制部1005判定所检测到的仰角信息H1的绝对值是否小于铅直方向旋转阈值HThr1。
在“否”的情况下,进入步骤602h。在“是”的情况下,进入步骤602m。
接着,在步骤602k中,显示方向控制部1005设定现状的方位D1作为D0。
通过步骤602j~步骤602m的处理,在用户临时使移动终端5000向铅直方向倾斜后返回水平方向时,设定当前的移动终端5000朝向的方向作为初始方位D0,由此,能够对旋转方向进行复位或修正。
接着,在图554中,对移动终端5000从休眠状态恢复时的动作进行说明。
首先,在步骤603a中,检测移动终端5000从休眠状态的恢复。
接着,当检测到从休眠状态的恢复时,进入步骤603b。
接着,在步骤603b中,画面显示控制部1006从存储器中读出上次休眠时的显示方向。
接着,在步骤603c中,画面显示控制部1006在显示器1004中描绘与上次休眠时的显示方向相同的画面。
接着,迁移到步骤601d。
另外,在本实施方式中,对实施在初始化(或休眠恢复)后向水平方向旋转的内容进行了说明,但是,如图555~图559那样,也可以进行向铅直方向旋转的处理。这里,图555~图559是示出本发明的实施方式5的移动终端的其他控制流程的图。
在初始化时或从休眠恢复时,假设水平方向的初始方位D0或当前的移动终端5000的水平方向的方位信息D1的值与现状不符的情况,所以,通过在之后进行铅直方向的旋转判定,能够更高精度地进行显示画面的旋转。
[1-3-3.显示画面的旋转控制(详细补充)]
使用图544、图545、图546对图550的步骤601e进行补充。如上所述,移动终端5000装备多种功能,例如还具有通用遥控器功能等。例如,在以通用遥控器模式进行操作的过程中,当用户要对位于从TV旋转90度的位置的构件进行操作而由用户握持遥控器进行旋转时,显示方向也旋转,有损便利性。如图546那样,正在利用移动终端5000进行网络漫游等,为了切换为遥控器模式并对TV进行操作而使移动终端5000朝向TV的情况也同样。因此,如图547那样,优选移动终端5000按照每个操作模式执行进行垂直方向的旋转还是进行水平方向的旋转这样的旋转判定。由此,能够防止非用户意图的画面旋转,能够提高操作性。
在本实施方式中,在移动终端5000例如对放置于地面的TV进行操作时等,当对TV进行操作时的倾斜超过铅直方向旋转阈值HThr2时,画面旋转,便利性降低。因此,优选移动终端5000可以根据操作模式而改变铅直方向旋转阈值和水平方向旋转阈值。
并且,一般利用红外线进行TV的操作,所以,在遥控器模式中,在发射红外线的表面在移动终端5000中朝下的情况下等,通过增大铅直方向旋转阈值HThr2或抑制铅直方向的旋转等,用户的操作性优良。
(实施方式D6)
在本实施方式中,使用图560~图570对用户使移动设备在桌子上竖立或放倒旋转并加以利用时的动作进行说明。
下面对图560所示的处理流程进行解释说明。
首先,在步骤1020a中开始,在步骤1020b中,将移动设备水平放倒时的移动设备朝向的方位设为基准方向,并且,将移动设备水平放倒时的移动设备的画面的朝向作为用户最佳的显示方向,作为画面显示方向进行保持。使用图561在后面详细说明基准方位的更新方法。
接着,在步骤1020c中,取得方位传感器的值作为当前方位。
接着,在步骤1020d中,计算基准方位与当前方位之差,设为旋转角度。
接着,在步骤1020e中,根据旋转角度与画面显示表的关系决定画面显示方向。使用图567~图569在后面详细说明画面显示方向的决定方法。
接着,在步骤1020f中显示画面,返回步骤1020b。
图561是用于说明图560的基准方位的更新方法(步骤1020b)的流程图。下面对图561所示的处理流程进行解释说明。
首先,在步骤1010a中开始,在步骤1010b中,检测移动设备是否水平放倒。使用图562~图564在后面详细说明移动设备是否水平放倒的检测方法。
接着,在步骤1010c中,确认是否检测到移动设备是否水平放倒。
在“否”的情况下,进入步骤1010f并结束。在“是”的情况下,进入步骤1010d,保持水平放倒时的移动设备的方位传感器的值作为基准方位,在步骤1010e中,根据水平放倒时的移动设备的旋转方向保持显示画面方向。另外,使用图565、图566在后面详细说明显示画面方向的决定方法。
然后,在步骤1010f中结束。
图562是用于说明图561的移动设备水平放倒情况的检测方法(1010b)的流程图。
对图562所示的处理流程进行解释说明。
首先,在步骤1030a中开始。
接着,在步骤1030b中,取得上次的移动设备的水平状态。
接着,在步骤1030c中,取得3轴的磁传感器的绝对值。这里,图563是示出移动设备的磁传感器的3轴方向的例子的图。
接着,在步骤1030d中,确认对x轴和y轴的传感器值进行合计而得到的值是否比z轴的传感器值大阈值以上。
在步骤1030d为“是”的情况下,进入步骤1030e,将当前的水平状态判断为水平。
接着,在步骤1030g中,确认是否是上次的水平状态为“非水平”且当前的水平状态为“水平”。
在步骤1030g为“是”的情况下,进入步骤1030h,判断为移动设备水平放倒,在步骤1030i中结束。
另外,在步骤1030d为“否”的情况下,进入步骤1030f,将当前的水平状态判断为非水平,进入步骤1030g,在步骤1030g为“否”的情况下,进入步骤1030i并结束。
接着,当使用图565、图566对图561的表面画面方向的检测方法(1010e)进行解释说明时,首先,在步骤1070a中开始,在步骤1070b中,取得移动设备水平放倒之前和之后的陀螺仪传感器的(Pitch(纵摇)和Roll(横摇))的值,求出Pitch和Roll的变化量。这里,移动设备的Pitch和Roll分别是图565所示的x轴和y轴的旋转角。
接着,在步骤1070c中,确认是否是Pitch的变化量>Roll的变化量。
在“是”的情况下,进入步骤1070d,确认是否是Pitch>0。在“是”的情况下,进入步骤1070e,保持+y轴方向作为显示画面方向,在步骤1070j中结束。另一方面,在步骤1070d为“否”的情况下,进入步骤1070f,保持-y轴方向作为显示画面方向,在步骤1070j中结束。
另外,在步骤1070c为“否”的情况下,进入步骤1070g,确认是否是Roll>0,在“是”的情况下,进入步骤1070h,保持+x轴方向作为显示画面方向,在步骤1070j中结束。
接着,在步骤1070g为“否”的情况下,进入步骤1070i,保持-x轴方向作为显示画面方向,在步骤1070j中结束。
接着,使用图567~图569对图561的画面显示方向进行解释说明。
对图569所示的处理流程进行解释说明。
首先,在步骤1100a中开始,在步骤1100b中,参照图567所示的画面显示方向变更表,根据旋转角度求出迁移步骤。
接着,在步骤1100c中,参照图568所示的画面显示方向迁移图,取得所保持的水平放倒时的移动设备的显示画面方向的状态。
接着,在步骤1100d中,使状态从步骤1100c中取得的状态起前进步骤1100b中求出的步骤。
接着,在步骤1100e中,保持前进目的地的状态的方向作为显示画面的方向,在步骤1100f中结束。
根据该方法,能够得到以下效果:在反复旋转水平放置的移动设备并进行使用的情况下,也能够始终在适于用户的方向上显示移动设备的画面。
例如,设移动设备从图504(B)的状态起,如图504(C)的状态那样在桌子上水平放倒,如图504(D)那样逆时针旋转90度。对于用户来说,期望始终针对自己的方向进行画面显示。
此时,根据图566的流程,将图504所示的移动设备的001-a的边视为旋转角,保持+y轴方向作为显示画面方向。使用图570对该情况下的旋转的例子进行说明。在图570(A)中,移动设备的方位指向270度的朝向。由于该270度是水平放倒时的方位,所以,保持基准方位=270度。在图572(B)中,用户旋转移动设备时的移动设备的方位为230度。该情况下,旋转角度为230-270=-40度。当参照图567的画面显示方向变更表时,-40度时,旋转显示方向的迁移为0步骤,所以,画面显示方向依然为+y方向。接着,在用户使移动设备旋转到图572(C)的情况下,移动设备的当前方位为180度。此时,旋转角度为180-270=-90度。当参照图567的画面显示方向表时,-90度时前进3个步骤,在图568的画面显示方向迁移图中,由于当前的方向为+y轴方向,所以,前进3个步骤后的+x轴方向成为新的画面显示方向。
另外,作为图569的移动设备是否水平放倒的检测方法(步骤1010b),说明了图562所示的使用磁传感器的方法,但是,也可以是使用加速度传感器的检测方法。使用图564对使用加速度传感器的检测方法进行说明。
首先,在步骤1050a中开始,在步骤1050b中,取得上次的移动设备的水平状态。
接着,在步骤1050c中,取得加速度传感器的值。
接着,在步骤1050d中,确认2轴方向的加速度与运动加速度之差是否为阈值以下。
在“是”的情况下,进入步骤1050e,将当前的水平状态判断为水平。
接着,在步骤1050g中,确认是否是上次的水平状态为“非水平”且当前的水平状态为“水平”。
在“是”的情况下,进入步骤1050g,判断为移动设备水平放倒,在步骤1050h中结束。
在步骤1050d为“否”的情况下,进入步骤1050f,将当前的水平状态判断为非水平,进入步骤1050g,在步骤1050g为“否”的情况下,进入步骤1030h并结束。
另外,也可以不使用方位传感器,而使用陀螺仪来检测设备的旋转,根据设备的旋转改变显示画面。在该方法中,与方位传感器相比,每次旋转时产生累积误差,但是,能够得到如下效果:在不具有方位传感器的设备中,也能够结合设备的旋转而在适当方向上显示画面的朝向。
并且,在本实施方式D5中,也可以在移动终端5000中装备接近传感器或检测接触的传感器等,在休眠解除时使起动画面朝向用户。由此,在休眠解除时或电源接通时,在移动终端5000和用户的位置任意的情况下,也能够自动地使画面旋转到用户容易观看的方向。
并且,在本实施方式D5中,也可以进行在移动终端5000搭载于车辆上时抑制移动终端5000旋转的控制。具体而言,也可以在与车载模式协作进行旋转控制、或者根据GPS或加速度信息而得知移动速度为阈值以上的情况下,判断为搭载于车辆和其他移动单元中,抑制画面旋转。由此,用户的便利性进一步提高。
(实施方式E1)
在以下的实施方式C中,说明减轻无线终端的终端姿势及基站、无线终端与用户的位置关系对电波的接收电场强度的影响、高精度地推测无线终端的位置的位置推测装置。
以下,参照附图对本发明的实施方式E1进行说明。本发明的位置推测装置100例如装备在便携电话等的无线终端中,具有推测该无线终端(以下,设为对象终端)的当前位置的功能。
<1-1.结构>
图576是表示实施方式E1的位置推测装置100的结构的块图。如图576所示,位置推测装置100具备传感器部101、无线处理部104、控制部105及存储部114。此外,传感器部101具备加速度传感器102及方位传感器103,控制部105具备终端信息检测部106、无线强度测量部110、距离推测部111、位置推测部112及修正部113。终端信息检测部106还具备安装信息检测部107、移动方向检测部108及终端姿势检测部109。
加速度传感器102检测对象终端的3轴方向的加速度,作为变换为电信号的加速度信息而向终端信息检测部106输出。
地磁传感器103检测3轴方向的地磁,作为变换为电信号的地磁信息向终端信息检测部106输出。
无线处理部104由天线等构成,具有为了与基站通信而收发无线信号的功能。这里,基站是用于与包括对象终端的无线终端进行无线通信的装置,例如,可以举出便携电话或PHS的母站、无线LAN接入点等。
终端姿势检测部107使用从传感器部101输入的加速度信息及地磁信息,根据加速度信息计算对象终端相对于重力方向的姿势,根据地磁信息计算对象终端相对于平面直角坐标系的姿势,作为对象终端的终端姿势信息而向修正部113输出。
移动方向检测部108基于从传感器部101输入的加速度信息及地磁信息,判断对象终端的移动方向,作为移动方向信息而向修正部113输出。
另外,上述终端姿势检测部107及移动方向检测部108通过除了使用来自地磁传感器的地磁信息以外、还使用例如来自角速度传感器的角速度信息,能够计算对象终端的方位,并计算终端姿势信息及移动方向。
安装状态检测部109检测表示对象终端安装在用户的哪个部位的安装状态。安装状态检测部109进行从传感器部101输入的加速度信息的图案、与预先保存在存储部114中的各安装状态下的加速度信息的模型模式(Model Pattern)的匹配,判断安装状态,作为安装状态信息向修正部113输出。
图579是由存储部114存储的安装状态的模型模式信息400的例子。模型模式是加速度信息的波形数据,在各模型模式的字段中,保存有存储实际的波形数据的区域的地址,通过向上述地址表示的存储区域访问,得到各安装状态下的加速度信息的模型模式。
此外,精度信息是表示作为上述模型模式使用本人数据还是使用一般数据的信息。精度信息在初始状态下是一般数据,通过由对象终端的应用等取得用户信息而更新为本人数据。可以根据精度信息计算安装状态的判断精度,根据判断精度使后述的处理中的修正量变化。更新时刻也与精度信息同样,能够用于评价判断精度的目的。
图580是由终端姿势检测部107检测出的终端姿势信息、由移动方向检测部108检测出的移动方向信息及由安装状态检测部109检测出的安装状态信息的具体例。在图580的例子中,对象终端的下面面向重力方向即地面,正面朝向表示北的方位,安装在用户的胸口袋中,被检测出正在朝向南移动。
回到图576,继续各结构的说明。无线强度测量部110按每个基站测量无线处理部104接收到的信号的接收电场强度。无线强度测量部110将测量出的接收电场强度作为与识别各基站的基站ID建立对应的接收强度信息向距离推测部111输出。
距离推测部111基于从无线强度测量部110输入的接收强度信息及由存储部114预先存储的发送强度信息,推测各个基站与对象终端之间的距离,作为与基站ID建立了对应的距离信息向位置推测部112及修正部113输出。
上述发送强度信息与关于在后述的处理中使用的基站的数据一起存储在存储部114中。图581是基站管理信息600的例子。基站管理信息600由基站ID记录群构成,各基站ID记录由频带信息、发送强度、位置信息及更新时刻的各项目构成。这里,基站ID是唯一地确定各基站的ID信息,频带信息表示各基站利用的频带。此外,发送强度表示各基站的电波的发送功率,位置信息表示各基站的坐标(坐标系的X轴、Y轴及Z轴)。更新时刻用于在将基站管理信息600更新时将更新时刻进行比较并记录最新的信息的等的用途。
图582是由无线强度测量部110测量的接收强度信息及由距离推测部111推测的距离信息的具体例。在图582的例子中,表示从基站ID为“AP-1”、“AP-2”及“AP-3”的基站发送的信号的接收电场强度分别是“-49dBm”、“-60dBm”及“-54dBm”、推测出的距离信息分别是“5m”、“15m”及“10m”的情况。
回到图576,继续各结构的说明。位置推测部112基于由存储部114存储的基站的位置信息及从距离推测部111输入的距离信息,推测对象终端的位置(X轴、Y轴及Z轴)。位置推测部112将推测出的对象终端的位置作为临时位置信息向修正部113输出。
此外,位置推测部112具有基于从后述的修正部113输入的修正距离信息及基站的位置信息推测对象终端的当前位置的功能。
位置推测部112只要能够得到至少3个基站的位置信息及距基站的距离,就能够推测对象终端的位置。
修正部113基于从终端信息检测部输入的终端姿势信息、移动方向信息及安装状态信息、从位置推测部112输入的临时的位置信息及上述的基站信息,将从距离推测部111输入的距离信息修正,将修正结果的修正距离信息向位置推测部112输出。
这里,对由修正部113进行的从距离推测部112输入的距离信息的修正详细地说明。
首先,说明相对于基站的终端姿势与接收灵敏度的关系。所谓相对于基站的终端姿势,是表示对象终端的哪个面朝向基站的姿势信息。
图583是表示相对于基站的终端姿势的说明图。在终端形状为正面的面积较大的情况下等,虽然依存于终端内部的天线的结构,但在许多无线终端中,由于无线终端内的天线的配置状态及天线的指向性的影响,即使无线终端是相同的位置,从基站发送的信号的接收电场强度也根据相对于基站的终端姿势而变化。
一般而言,与无线终端相对于基站的终端姿势是正面的情况相比,在无线终端相对于基站的终端姿势是正面以外的情况下,接收电场强度较小地被测量出,结果,推测为基站与无线终端之间的距离较长。
例如,在图583中,基站“AP-4”位于无线终端“Mobile-2”的右侧面。此外,基站“AP-5”位于无线终端“Mobile-2”的正面。实际上,从基站“AP-4”到无线终端“Mobile-2”的距离、与从基站“AP-5”到无线终端“Mobile-2”的距离相等,进而,即使基站“AP-4”及“AP-5”的发送强度相等,无线终端接收的信号的接收强度也不同,被推测为“AP-4”较远、“AP-5”较近。
本实施例的位置推测装置100通过后述的处理计算对象终端相对于基站的终端姿势,通过参照预先存储在存储部114中的图584中例示的表示相对于基站的终端姿势和修正倍率的表900,进行距离信息的修正。
接着,对基站、无线终端、用户的位置关系和接收强度的关系进行说明。
图585是表示基站、无线终端与用户的位置关系的说明图。在基站、无线终端与用户的位置关系中,如果在基站与无线终端之间存在用户(人体),则无线终端接收除了因相对于基站的距离而引起的衰减以外还因人体干涉而衰减的无线信号,所以测量出接收电场强度较小,结果,推测为基站与无线终端之间的距离比实际的距离长。
例如,在图585中,在基站“AP-6”与无线终端“Mobile-3”之间不存在用户(人体)。此外,在基站“AP-7”与无线终端“Mobile-3”之间存在用户(人体)。实际上,从基站“AP-6”到无线终端“Mobile-3”的距离与从基站“AP-7”到无线终端“Mobile-3”的距离相等,进而,即使基站“AP-6”及“AP-7”的发送强度相等,无线终端接收的信号的接收强度也不同,推测为基站“AP-7”比基站“AP-6”远。
此外,人体干涉对接收强度的影响根据基站所利用的频带而变化。如果频率高,则直线前进性高、透过性低。因而,基站利用的频带越高,越受到人体干涉的影响。
本实施例的位置推测装置100通过后述的处理计算基站、无线终端与用户的位置关系,通过参照预先存储在存储部114中的在图586中表示例子的表示基站、无线终端与用户的位置关系和修正倍率的表1100,进行距离信息的修正。
另外,即使基站、无线终端与用户的位置关系相同,人体干涉对接收强度的影响也根据无线终端的安装状态(例如,根据无线终端是安装在胸口袋中还是安装在裤子口袋中等)而变化。因而,也可以根据上述位置关系及安装状态将人体干涉的影响划分为多个等级,根据等级来进行距离信息的修正。
回到图581,存储部114存储终端安装状态信息的模型模式信息400及基站管理信息600。此外,存储部114存储图584所示的表示相对于基站的终端姿势与修正倍率的关系的表900、图586所示的表示基站、终端与用户的位置关系中的修正倍率的关系的表1100。
<1-2.动作>
接着,对本实施方式的位置推测装置100的动作进行说明。
图587是表示本实施方式的位置推测装置100的动作整体的流程图。如图587所示,位置推测装置100的动作由以下步骤构成:取得加速度信息及方位信息、进行终端信息(安装状态、移动方向及终端姿势)的检测的步骤(步骤S1201);推测表示从基站到对象终端的距离的距离信息的步骤(步骤S1202);推测表示对象终端的临时的位置的临时位置信息的步骤(步骤S1203);将在步骤1202中推测的距离修正、并计算修正距离信息的步骤(步骤S1204);基于修正距离信息推测表示对象终端的当前位置的当前位置信息的步骤(步骤S1205);以及判断是否需要当前位置信息的再推测的步骤(步骤S1206)。
图588是表示在步骤1201中执行的终端信息的检测动作的详细情况的流程图。如图588所示,位置推测装置100首先根据加速度传感器102的输出,判断对象终端是否从前次位置推测时移动了,如果移动了,则向下个步骤前进(步骤S1301)。
另外,如果对象终端没有从前次位置推测时移动,则位置推测装置100将在前次推测时推测的位置信息原样作为当前位置信息向步骤S1201返回,待机直到下次推测时。
终端姿势检测部107基于从加速度传感器102输入的加速度信息及从方位传感器103输入的方位信息,计算终端姿势信息(步骤S1302、S1303、S1304)。
移动方向检测部108基于从加速度传感器102输入的加速度信息及从方位传感器输入的方位信息,检测移动方向(步骤S1305)。
安装状态检测部109基于从加速度传感器102输入的加速度信息的模式(pattern)、以及预先保存在存储部114中的各安装状态下的加速度信息的模型模式,检测安装状态(步骤S1306)。
通过上述图588所示的处理,取得图580所示的对象终端的终端信息。
图589是表示在步骤1202中执行的推测距离信息的推测动作的详细情况的流程图。如图589所示,无线强度测量部110首先测量多个基站发送的信号的接收电场强度,向距离推测部111输出将测量出的接收电场强度与基站ID建立对应而得到的接收强度信息(步骤S1401)。
接着,距离推测部111将无线强度测量部110测量的基站以接收电场强度强到弱的顺序选择(步骤S1402)。
距离推测部111判断在存储部114中是否存储有与表示所选择的基站的基站ID对应的基站的位置信息(步骤S1403)。如果在存储部114中存储有所选择的基站的位置信息,则向步骤S1404前进,如果在存储部114中没有存储所选择的基站的位置信息,则向步骤S1402返回。
距离推测部111基于来自所选择的基站的信号的接收强度,推测从所选择的基站到对象终端的距离,与基站ID建立对应,向位置推测部112及修正部113输出(步骤S1404)。
在步骤S1404的处理后,距离推测部111判断是否推测了相对于在对象终端的位置推测中需要的数量的基站、即3个以上的基站的距离信息(步骤S1405)。在推测出了3个以上的距离信息的情况下,结束推测距离信息的处理,向步骤S1203前进。在未能推测出3个以上的距离信息的情况下,向步骤S1402返回。
另外,在步骤S1402中,在即使选择了无线强度测量部110测量的全部的基站、也未能推测出3个距离信息的情况下,不能推测对象终端的位置信息,所以向步骤S1201返回,待机直到下次位置推测时。
通过上述图589所示的动作,推测从各个基站到对象终端的距离。
回到图587,说明步骤S1203的推测对象终端的临时的位置的处理。例如,通过步骤S1202,测量来自3个基站“AP-1”、“AP-2”及“AP-3”的信号的接收强度,将从基站“AP-1”、“AP-2”及“AP-3”到对象终端的距离分别推测为L1、L2及L3。在此情况下,如图578所示,将以基站“AP-1”为中心的半径L1的圆、以基站“AP-2”为中心的半径L2的圆、以及以基站“AP-3”为中心的半径L3的圆的交点推测为对象终端的临时的位置,将表示上述临时的位置的临时位置信息向修正部113输出。
另外,在上述中,假设Z坐标全部相同(固定)而进行了说明,但如果考虑Z坐标,则3个球面的交点被决定出2点。在此情况下,通过使用第4个距离信息、或者预先决定作为基准的对象终端的高度等的方法,能够缩减为1点。
图590是表示在步骤S1204中执行的将距离信息修正动作的详细情况的流程图。首先,修正部113依次选择位置推测部112在位置推测中利用的基站(步骤S1501)。
修正部计算对象终端相对于在步骤S1501中选择的基站的终端姿势(步骤S1502)。在本实施方式中,首先,修正部113基于从位置推测部112输入的临时位置信息和存储在存储部114中的基站的位置信息,计算从对象终端向所选择的基站的方位。
修正部113根据计算出的从对象终端向所选择的基站的方位、以及从终端信息检测部106输入的终端姿势,计算对象终端相对于所选择的基站的终端姿势。
在图591中表示从对象终端向所选择的基站的方位的计算结果例、以及对象终端相对于基站的终端姿势的计算结果例。图591表示从对象终端向基站“AP-1”、“AP-2”及“AP-3”的方位分别被计算为“北”、“南”及“东”、对象终端相对于基站的终端姿势分别被计算为“正面”、“背面”及“右侧面”。
如果计算出对象终端相对于基站的终端姿势,则修正部113参照由存储部114存储的表示相对于基站的终端姿势和修正倍率的表900,进行修正倍率的计算(步骤S1503)。
接着,修正部113在由步骤S1501选择的基站、对象终端和用户的位置关系中,判断在基站与对象终端之间是否存在用户(步骤S1504)。
这里,对计算基站、对象终端和用户的位置关系的处理进行说明。首先,修正部113根据从终端信息检测部106输入的安装状态,判断对象终端是安装在用户的前面、还是安装在后面。在本实施方式中,如果安装状态是胸口袋或裤子前口袋,则判断为对象终端安装在用户的前面,如果安装状态是裤子后口袋,则判断为对象终端安装在用户的后面。
接着,确定用户朝向的方位。由于从终端信息检测部106输入的对象终端的移动方向表示用户的移动方向,所以在本实施方式中,将对象终端的移动方向原样作为用户朝向的方位。
这里,修正部113在由步骤S1502计算出的从对象终端向所选择的基站的方位与用户朝向的方位一致、对象终端安装在用户的前面的情况下、以及由步骤S1502计算出的从对象终端向所选择的基站的方位与用户朝向的方位表示正相反的方位、对象终端安装在用户的后面的情况下,判断为在基站与对象终端之间存在用户。
在图592中,表示在基站与对象终端之间是否存在用户的判断结果例。在图592中,判断为在基站“AP-1”及“AP-3”与对象终端之间不存在用户,并判断为在基站“AP-2”与对象终端之间存在用户。
另外,如上述那样,即使基站、无线终端与用户的位置关系相同,人体干涉对接收强度的影响也根据无线终端的安装状态而变化。因而,也可以根据上述位置关系及安装状态,不是按照人体干涉的有无、而是制作将人体干涉的程度划分为多个等级的表,根据安装状态来变更修正量。
在基站与对象终端之间存在用户的情况下,修正部113参照由存储部114存储的表示基站、对象终端、用户的位置关系和修正倍率的表1100,计算修正倍率(步骤S1505)。
在步骤S1505后,修正部113对从距离推测部111输入的距离信息乘以在步骤S1503及步骤S1505中计算出的修正倍率而进行修正(步骤S1506)。
修正部113判断在步骤S1501中是否选择了在位置推测中利用的全部的基站,如果选择了全部的基站,则向步骤S1205前进,如果不是,则向步骤S1501返回(步骤S1507)。
回到图587,说明步骤S1205的处理。位置推测部112在步骤S1205中,基于从修正部113输入的修正距离信息及存储在存储部114中的基站的位置信息推测对象终端的当前位置。推测方法为,代替从距离推测部111输入的距离信息,使用上述修正距离信息进行与步骤S1203同样的处理,推测对象终端的当前位置。在图593中表示使用修正后的距离信息推测出的当前位置的例子。图593表示通过修正部113将从基站“AP-1”、“AP-2”及“AP-3”到终端的距离分别修正为L1’、L2’及L3’、将当前位置信息推测为从在步骤S1203中推测出的对象终端的临时的位置离开了距离L的位置。
在步骤S1206中,位置推测部112判断是否需要进行在步骤S1205中推测出的当前位置信息的再推测。位置推测部112将在步骤S1203中推测出的临时位置信息与在步骤S1205中推测出的当前位置信息比较,在两个位置信息间的距离L是规定的阈值(例如3m)以上的情况下判断为需要进行当前位置信息的再推测,将在步骤S1205中推测出的当前位置信息作为临时位置信息,向步骤S1204返回。如果两个位置信息表示的距离的差小于一定值,则将在步骤S1205中推测出的当前位置信息作为最终的位置推测结果,结束处理。
<1-3.总结>
本实施方式的位置推测装置100对于根据来自各基站的信号的接收电场强度推测的距离信息,进行与对象终端相对于基站的终端姿势、以及基站、对象终端和用户的位置关系对应的修正。
根据该结构,即使在因上述终端姿势及位置关系的影响而接收电场强度变弱、与实际相比基站与对象终端之间的距离被推测为较长的情况下,也能够更高精度地计算基站与对象终端之间的距离,结果,能够更正确地推测对象终端的位置。
(实施方式E2)
以下,对作为本发明的一实施方式的位置推测装置1900进行说明。在实施方式E1中,根据基站发送的信号的接收电场强度推测基站与对象终端之间的距离,使用相对于知道位置信息的基站的距离,推测对象终端的当前位置。在实施方式E2中,与实施方式E1不同的是具有按一定间隔的位置记录有来自能够接收的基站的信号的接收电场强度的电场强度地图,使用上述电场强度地图进行位置推测。对于与实施方式E1相同的构成要素使用相同的标号,省略说明。
<2-1.结构>
图594是表示实施方式E2的位置推测装置1900的结构的块图。如图594所示,位置推测装置1900与实施方式E1的位置推测装置100的结构相比,代替控制部105、位置推测部112、修正部113及存储部114而具备控制部1901、位置推测部1902、修正部1903及存储部1904,去除了距离推测部111。
位置推测部1902使用从无线强度测量部110输入的接收强度信息及由存储部1904预先存储的电场强度地图,推测表示对象终端的临时的位置的临时位置信息,向修正部1903输出。
此外,位置推测部1902具有基于从后述的修正部1903输入的修正强度信息及电场强度地图推测对象终端的当前位置的功能。
图595是电场强度地图2000的具体例。如图595所示,电场强度地图2000按一定间隔的位置记录了能够接收的基站的接收电场强度,通过使用各基站的接收电场强度参照电场强度地图2000,能够推测对象终端的当前位置。
回到图594继续说明。修正部1903基于从终端信息检测部输入的终端姿势信息、移动方向信息及安装状态信息、从位置推测部1902输入的临时的位置信息及基站的位置信息,将从无线强度测量部输入的接收强度信息修正,将修正结果的修正强度信息向位置推测部1902输出。另外,在实施方式E1中设定修正倍率以使距离变短,但在本实施方式中,设定修正倍率以使接收强度变强。
存储部1904存储图579所示的安装状态的模型模式信息400、图581所示的基站管理信息600及图595所示的电场强度地图2000。此外,存储部1904存储表示相对于基站的终端姿势与修正倍率的关系的表、表示基站、终端和用户的位置关系的修正倍率的关系的表。
<2-2.动作>
接着,对本实施方式的位置推测装置1900的动作进行说明。图596是表示本实施方式的位置推测装置1900的动作整体的流程图。
如图596所示,位置推测装置1900的动作由以下的步骤构成:取得加速度信息及方位信息、进行终端信息(安装状态、移动方向及终端姿势)的检测的步骤(步骤S1201);测量从基站发送的信号的接收强度的步骤(步骤S2101);推测表示对象终端的临时的位置的临时位置信息的步骤(步骤S2102);将在步骤2101中测量出的接收强度修正而计算修正强度信息的步骤(步骤S2103);基于修正强度信息推测表示对象终端的当前位置的当前位置信息的步骤(步骤S2104);以及判断是否需要当前位置信息的再推测的步骤(步骤S1206)。
步骤S1201由于进行与实施方式E1同样的处理,所以省略说明。
在步骤S2101中,无线强度测量部110测量多个基站发送的信号的接收电场强度,向位置推测部1902及修正部1903输出将测量出的接收电场强度与基站ID建立对应的接收强度信息。
在步骤S2102中,位置推测部1902基于从无线强度测量部110输入的接收强度信息及在存储部1904中存储的电场强度地图,推测表示对象终端的临时的位置的临时位置信息,向修正部1903输出。
图597是表示在步骤S2103中执行的接收强度信息的修正动作的详细情况的流程图。首先,修正部1903将无线强度测量部110测量出的基站依次选择(步骤S2201)。
修正部计算对象终端相对于在步骤S2201中选择的基站的终端姿势(步骤S2202)。计算对象终端相对于基站的终端姿势的处理进行与实施方式E1的步骤S1502的处理同样的处理。
如果计算出对象终端相对于基站的终端姿势,则修正部1903参照由存储部1904存储的表示相对于基站的终端姿势和修正倍率的表,进行修正倍率的计算(步骤S2203)。
接着,修正部1903在由步骤S2201选择的基站、对象终端和用户的位置关系中判断在基站与对象终端之间是否存在用户(步骤S2204)。在基站、对象终端和用户的位置关系中判断在基站与对象终端之间是否存在用户的判断,进行与实施方式E1的步骤S1504的处理同样的处理。
在基站与对象终端之间存在用户的情况下,修正部1903参照由存储部1904存储的表示基站与对象终端用户的位置关系和修正倍率的表,计算修正倍率(步骤S2205)。
在步骤S2205后,修正部1903对从无线强度测量部110输入的接收强度信息乘以在步骤S2203及步骤S2205中计算出的修正倍率,进行修正(步骤S2206)。
修正部1903判断是否选择了无线强度测量部111测量出的全部的基站,如果选择了全部的基站,则向步骤S2104前进,如果不是这样,则向步骤S2201返回(步骤S2207)。
回到图596,说明步骤S2104的处理。位置推测部1902在步骤S2104中,基于从修正部1903输入的修正强度信息及存储在存储部114中的电场强度地图,推测对象终端的当前位置。
在步骤S2105中,位置推测部1902判断是否需要进行在步骤S2104中推测的当前位置信息的再推测。位置推测部1902将在步骤S2102中推测出的临时位置信息与在步骤S2104中推测出的当前位置信息比较,在两个位置信息间的距离L是规定的阈值(例如3m)以上的情况下判断为需要进行当前位置信息的再推测,将在步骤S2104中推测出的当前位置信息作为临时位置信息,向步骤S2103返回。如果两个位置信息表示的距离的差不到一定值,则将在步骤S2104中推测的当前位置信息作为最终的位置推测结果,结束处理。
<2-3.总结>
本实施方式的位置推测装置1900根据来自各基站的信号的接收电场强度,参照电场强度地图进行对象终端的位置推测。
根据该结构,能够削减在距离信息的计算中需要的处理、及在位置信息的计算中需要的时间,与实施方式E1的位置推测装置相比能够高速地进行位置推测。
(3-1.补充)
以上,说明了有关本发明的位置推测装置的实施方式,但也可以将例示的位置推测装置如以下所示地变形,本发明并不限定于上述实施方式。
(1)在上述各实施方式中,图581所示的基站管理信息600预先存储在存储部中,但本发明并不限定于此。
上述基站管理信息600例如也可以存储在存在于外部的存储装置中,对象终端根据需要通过进行通信,来取得基站管理信息。
(2)上述实施方式通过对修正对象的距离信息及接收强度信息乘以修正倍率来进行修正,但距离信息及接收强度信息的修正方法并不限定于此。上述信息的修正方法例如也可以通过使用将记录有与各内容对应的修正量的表进行相加或相减来进行修正。
(3)也可以将上述各实施方式及各变形例部分地组合。
(4)也可以将用于使位置推测装置的处理器及连接在该处理器上的各种电路执行在上述实施方式中表示的距离推测处理及修正处理等的由机械语言或高级语言的程序代码构成的控制程序记录到记录介质中、或者经由各种通信路等流通或发布。在这样的记录介质中,有IC卡、硬盘、光盘、软盘、ROM、闪存存储器等。被流通、发布的控制程序通过保存到能够由处理器读出的存储器等中而供使用,通过由该处理器执行该控制程序,实现如在各实施方式中表示的各功能。另外,处理器除了直接执行控制程序以外,也可以编译后执行或通过翻译器执行。
(5)在上述实施方式中表示的各功能构成要素也可以作为执行该功能的电路实现,也可以通过由1或多个处理器执行程序来实现。此外,本发明的位置推测装置也可以构成为IC、LSI或其他集成电路的封装。该封装装入到各种装置中而供使用,由此,各种装置实现如在各实施方式中表示的各功能。
另外,距离推测部、位置推测部及修正部等的各功能块典型地作为集成电路即LSI实现。它们既可以单独地1芯片化,也可以包含全部的结构或一部分的结构而1芯片化。这里设为LSI,但根据集成度的差异,也有称作IC、系统LSI、超级LSI、特级LSI等的情况。此外,集成电路化的方法并不限定于LSI,也可以使用专用电路或通用处理器实现。还可以利用在LSI制造后能够编程的FPGA(Field Programmable Gate Array)、或能够再构成LSI内部的电路单元的连接及设定的可重构处理器。进而,如果因半导体技术的进步、或者因派生的其他技术而出现代替当前的半导体技术的集成电路化的技术,则当然也可以使用该技术进行功能块的集成化。有可能是生物技术的应用等。
(3-2.补充2)
以下,对作为本发明的一实施方式的位置推测装置的结构及其变形例和效果进行说明。
(a)本发明的一实施方式的位置推测装置是推测无线终端的当前位置的位置推测装置,具备:检测单元,检测上述无线终端的加速度信息及方位信息;距离推测单元,使用从多个基站接收到的信号的接收强度,推测表示相对于上述基站的距离的距离信息;位置推测单元,使用表示上述基站的位置的基站信息及上述距离信息,推测表示上述无线终端的临时的位置的临时位置信息;以及修正单元,使用上述加速度信息、上述方位信息、上述基站信息及上述临时位置信息将上述距离信息修正;上述位置推测单元还使用上述基站信息及上述修正的距离信息推测表示上述无线终端的当前位置的当前位置信息。
(b)上述实施方式(a)的位置推测装置也可以是,还具备使用上述加速度信息及上述方位信息检测上述无线终端的姿势信息的终端姿势检测单元;上述修正单元根据上述基站信息、上述临时位置信息及上述姿势信息将上述距离信息修正。
根据上述(a)及(b)的结构,基于加速度信息及方位信息计算无线终端的终端姿势,并根据终端姿势将距离信息修正,由此能够提高与基站之间的距离信息的精度。有关本发明的位置推测装置通过将精度较高的距离信息用于位置推测,能够将推测的位置信息的精度也同样提高。
(c)上述实施方式(a)的位置推测装置也可以是,还具备:安装信息检测单元,使用上述加速度信息判断表示上述无线终端安装在用户的哪个部位上的安装信息;以及移动方向检测单元,使用上述加速度信息及上述方位信息检测上述无线终端的移动方向;上述修正单元使用上述基站信息、上述临时位置信息、上述安装信息及上述移动方向确定基站、用户和无线终端的位置关系,根据上述位置关系将上述距离信息修正。
根据上述结构,能够判断出在基站与无线终端之间存在用户(人体),能够进行与由人体干涉引起的信号的衰减对应的修正。
(d)在上述实施方式(c)的位置推测装置中,也可以是,上述修正单元根据上述位置关系及上述基站所利用的频带,将上述距离信息修正。
根据上述结构,对于直线前进性及透过性等根据频率的性质而变化的无线信号的衰减,能够推测根据基站利用的频带而修正的距离信息。
(e)本发明的一实施方式的位置推测装置是推测无线终端的当前位置的位置推测装置,具备:检测单元,检测上述无线终端的加速度信息及方位信息;测量单元,测量多个基站发送的信号的接收强度;存储单元,存储按一定间隔的位置记录有从基站接收到的信号的接收强度的电场强度地图;位置推测单元,使用上述接收强度及上述电场强度地图,推测表示上述无线终端的临时的位置的临时位置信息;以及修正单元,使用上述加速度信息、上述方位信息、上述临时位置信息将上述接收强度修正;上述位置推测单元还使用上述修正后的接收强度及上述电场强度地图,推测表示上述无线终端的当前位置的当前位置信息。
根据上述结构,基于加速度信息及方位信息计算无线终端的终端姿势、根据终端姿势将接收强度修正,由此能够提高从基站的接收强度的精度。有关本发明的位置推测装置通过将精度较高的接收强度用于位置推测,能够将推测的位置信息的精度也同样提高。
此外,根据上述结构,由于使用无线强度地图进行位置推测,所以能够削减在距离推测及位置推测中花费的处理时间,缩短位置推测所需要的时间。
(实施方式F)
在以下的实施方式F中,对在预先知道位置的基站的数量较少的情况下、不需要追加特别的测位装置、能够实现位置推测精度的提高的位置推测装置进行说明。
以下,参照附图对本发明的实施方式F进行说明。本发明的位置推测装置100例如装备在便携电话等的无线终端中,具有推测该无线终端(以下,设为对象终端)的当前位置的功能。
<1.结构>
图598是表示实施方式F的位置推测装置100的结构的块图。如图598所示,位置推测装置100具备传感器部101、无线处理部105、控制部106及存储部119。此外,传感器部101具备加速度传感器102、角速度传感器103及地磁传感器104;控制部106具备终端信息计算部107、自主导航位置推测部110、无线强度测量部111、距离推测部112、RSSI位置推测部113、临时位置设定部114、通信模式(mode)变更指示部115、收发控制部116、存在可能区域计算部117及修正部118。终端信息计算部107还具备姿势变化量计算部108及终端移动量计算部109。
加速度传感器102检测对象终端的3轴方向的加速度,作为变换为电信号的加速度信息而向终端信息计算部107输出。
角速度传感器103检测对象终端的3轴方向的角速度,作为变换为电信号的角速度信息而向终端信息计算部107输出。
地磁传感器104检测3轴方向的地磁,作为变换为电信号的地磁信息而向终端信息计算部107输出。
无线处理部105由天线等构成,具有为了与其他无线站通信而收发无线信号的功能。这里,所谓无线站,是具有与其他无线站进行无线通信的功能的装置。作为无线站的例子,可以举出便携电话的母站、无线LAN接入点等的基站、便携电话或PHS等的移动站、具有无线功能的电视机等的位置被固定的固定站。
姿势变化量计算部108根据从传感器部101输入的角速度信息计算从前次位置推测时起的姿势变化量,将计算出的姿势变化量向自主导航位置推测部110输出。在本实施方式中,使用通过将角速度信息进行积分而计算的、角速度传感器的对象终端相对于3轴方向的角度的变化量,作为上述姿势变化量。
终端移动量计算部109基于从传感器部101输入的加速度信息及地磁信息,计算从前次位置推测时起的对象终端的移动量,将计算出的对象终端的移动量向自主导航位置推测部110输出。在本实施方式中,使用加速度信息及地磁信息,计算地心正交坐标系的X轴方向(东西方向)、Y轴方向(南北方向)及Z轴方向(高度)的加速度,使用通过将计算出的加速度积分两次而计算出的距离作为从前次位置推测时起的移动量。
自主导航位置推测部110具有在图598中没有记载的计时单元,具有如下功能:(1)计测从前次位置推测时起的经过时间的功能;(2)对前次位置推测时的位置信息加上从终端信息计算部107输入的对象终端的移动量,计算表示通过自主导航推测出的位置的自主(自律)位置信息的功能;以及(3)使用从终端信息计算部107输入的对象终端的姿势变化量及移动量、以及上述的经过时间,计算表示上述临时的位置的精度的自主位置精度信息的功能。自主导航位置推测部110将计算出的自主导航位置信息及自主导航精度信息向临时位置设定部114输出。
这里,对自主导航精度信息进行说明。在来自传感器部的输入中,包含某种程度的误差。一般而言,检测对象的值(加速度、角速度及地磁方向)越剧烈地变化,误差越大,此外,随着时间经过而误差被累积。
鉴于上述问题,自主航法位置推测部110计算随着对象终端的姿势变化量、对象终端的移动量及从前次位置推测时起的经过时间的各值变大而变低的值作为自主导航精度信息。在本实施方式中,例如计算从100减去将对象终端的姿势变化量的3轴合计、对象终端的移动量的3轴合计及从前次测量时起的经过时间分别除以规定的阈值Tangle[rad](例如π/18[rad])、Tdistance[m](例如100[mm])及Ttime“s”(例如100[ms])而得到的商后的值,作为自主导航精度信息。
无线强度测量部111按每个无线站测量无线处理部105接收到的信号的接收电场强度。无线强度测量部111将测量出的接收电场强度作为与用于识别各无线站的无线站ID建立对应的接收强度信息向距离推测部112输出。
距离推测部112使用从无线强度测量部111输入的接收强度信息计算到各无线站的推测距离及其精度,分别与无线站ID建立对应并作为推测距离信息及距离精度信息而向RSSI位置推测部113及存在可能区域计算部117输出。
这里,距离推测部112在存储部119中存储有距离推测对象的无线站的发送输出的情况下,使用该发送输出进行推测距离信息及距离精度信息的计算。
无线站中的基站的发送输出与在后述的处理中使用的关于基站的数据一起,预先存储在存储部119中。图599是基站管理信息200的例子。基站管理信息200由基站ID记录群构成,各基站ID记录由发送输出、位置信息的各项目构成。这里,基站ID是唯一地确定各基站的ID信息。此外,发送输出表示各基站的电波的发送功率,位置信息表示各基站的地心正交坐标系中的坐标(纬度、经度及高度)。
此外,距离推测部112在通过与其他无线站进行通信而取得了距离推测对象的无线站的发送输出的情况下也同样,使用从收发控制部116输入的发送输出,计算推测距离信息及距离精度信息。
对上述距离精度信息进行说明。图600是表示无线的接收电场强度与距离的关系的图。如图600所示,发送信号的无线站与接收的无线站之间的距离越短,接收电场强度呈现越大的变化,所以接收电场强度越强则推测距离信息的精度越高。因而,距离推测部112以在接收强度较强的情况下值变大的方式计算距离精度信息。
图601是距离推测部112的推测及计算出的推测距离信息及距离精度信息的例子。在图601中,表示无线站“AP-1”、“Mobile-2”及“TV-1”的推测距离信息分别被推测为“3m”、“9m”及“5m”、距离精度分别被计算为“90”、“60”及“80”。
回到图598,继续各结构的说明。RSSI位置推测部113基于从距离推测部112输入的推测距离信息及距离精度信息中的相对于基站的推测距离信息及距离精度信息、以及由存储部119存储的基站的位置信息,推测表示根据对象终端的接收电场强度推测出的位置的RSSI位置信息,并计算表示RSSI位置信息的精度的RSSI精度信息,向临时位置设定部114输出。关于RSSI精度信息,在本实施方式中,例如将在RSSI位置信息的推测中使用的推测距离信息的距离精度信息的平均值作为RSSI精度信息。
对RSSI位置推测部113推测的RSSI位置信息进行说明。例如,假设从距离推测部112输入相对于3个基站“AP-1”、“AP-2”及“AP-3”的距离信息“L1”、“L2”、“L3”,此外,在存储部119中存储有基站“AP-1”、“AP-2”及“AP-3”的位置信息(X1,Y1,Z1)、(X2,Y2,Z2)及(X3,Y3,Z3)。RSSI位置推测部113将以基站“AP-1”为中心的半径L1的球面((X-X1)2+(Y-Y1)2+(Z-Z1)2=L12)、以基站“AP-2”为中心的半径L2的球面((X-X2)2+(Y-Y2)2+(Z-Z2)2=L22)、与以基站“AP-3”为中心的半径L3的球面((X-X3)2+(Y-Y3)2+(Z-Z3)2=L32)的交点推测为RSSI位置信息。在上述式中,作为RSSI位置信息而决定出2点,但通过将Z轴固定、使用第4个距离信息等,将RSSI位置信息决定为1点。
临时位置设定部114基于从自主导航位置推测部110输入的自主导航位置信息及自主导航精度信息、以及从RSSI位置推测部113输入的RSSI位置信息及RSSI精度信息,计算表示对象终端的临时的位置的临时位置信息及表示其精度的临时位置精度信息,向修正部118输出。临时位置设定部114例如计算以自主导航精度信息及RSSI精度信息为权重的自主导航位置信息及RSSI位置信息的加权平均作为临时位置信息,将自主导航精度信息及RSSI精度信息的平均值作为临时位置精度信息。
另外,临时位置设定部114在RSSI位置推测部113不能推测RSSI位置信息的情况下,将自主导航位置信息及自主导航精度信息作为临时位置信息及临时位置精度信息,向修正部118输出。
图602是表示宅内等的私人空间的结构的地图信息及无线站在地图信息中的配置例。一般而言,在宅内等的私人空间中存在多个无线站,这些无线终端属于同一个网络。
回到图598,通信模式变更指示部115对属于上述同一个网络的无线站指示,以使其暂时变更通信模式。通信模式变更部115例如对移动站或固定站进行指示以使其为共享(tethering)模式等,如无线接入点那样动作,或进行指示以使其为对等(adhoc)模式等同样的状态。位置推测装置100根据上述指示接收无线站发送的信号,由此对于基站以外的无线站也能够计算推测距离信息。
另外,在上述通信模式变更指示中,也可以指示为进行即时应答(在变更通信模式前发送无线站所具有的信息)、或指示为在计测完成后应答(在无线站具有距离计测功能的情况下,发送计测出的距离信息及距离精度信息)。在计测完成后应答中,对象终端通过使用接收无线站计测出的与对象终端之间的距离信息而得到的双向的距离信息,能够提高距离信息的精度。此外,对象终端通过接收无线站计测出的与其他无线站的距离信息,能够取得包括对象终端在内的3个无线站之间的相对的距离信息。
收发控制部116与属于上述同一网络的无线站进行通信,在各无线站保持有该无线站的发送输出、位置信息等的情况下,取得该发送输出、位置信息。图603是将无线站ID与所取得的发送输出及位置信息建立对应的无线站信息600的具体例。图603表示取得了无线站“Mobile-2”的发送输出、无线站“TV-1”的位置信息。
此外,收发控制部116在属于上述同一网络的无线站也与对象终端同样具有推测与其他无线站的距离的功能、且保持有推测距离信息及距离精度信息的情况下,取得该推测距离信息及距离精度信息。图604是表示无线站保持的推测距离信息及距离精度信息的其他无线站信息700的具体例。图604表示无线站“Mobile-2”保持有无线站“TV-1”的推测距离信息及距离精度信息。
回到图598,收发控制部116将所取得的无线站信息600及其他无线站信息700向距离推测部112及存在可能区域计算部117输出。
接着,进行存在可能区域计算部117的说明。存在可能区域计算部117基于从距离推测部112输入的推测距离信息,计算表示对象终端在地图信息所表示的空间中可能存在的区域的存在可能区域,向修正部输出。
在图602中表示地图信息的例子。如图602所示,地图信息包含有使各无线站发送的信号衰减的障碍物的结构。存在可能区域计算部117针对如图602所示的地图信息,计算由推测距离信息表示的线段的两端可能存在的区域作为存在可能区域。
以下,参照附图对存在可能区域的计算方法详细地说明。在说明时,将位置推测对象的对象终端的无线站ID用圈标记表示为“Mobile-1”。此外,在存在可能区域的计算中使用的其他无线站将无线站ID设为“Mobile-2”、“Mobile-3”、“TV-1”而用三角标记表示。
图605是表示在地图信息表示的地图上没有障碍物的情况下的存在可能区域的计算方法的说明图。
首先,存在可能区域计算部117如图605(a)那样,将无线站“Mobile-2”固定在地图的四角中的左下角(西南),调查离开了推测距离信息的对象终端“Mobile-1”运动的轨迹。地图被对象终端“Mobile-1”运动的轨迹划分为两个区域。两个区域中的将无线站“Mobile-2”固定的地图的不包含左下角(西南)的区域设为(1)对象终端“Mobile-1”位于比无线站“Mobile-2”靠上(北)且右(东)的情况下的对象终端“Mobile-1”的存在可能区域。
存在可能区域计算部117将无线站“Mobile-2”固定在地图的四角的右下角(东南)、左上角(西北)及右上角(东北),进行同样的处理,计算出(2)对象终端“Mobile-1”位于比无线站“Mobile-2”靠上(北)且左(东)的情况下的对象终端“Mobile-1”的存在可能区域、(3)对象终端“Mobile-1”位于比无线站“Mobile-2”靠下(南)且右(东)的情况下的对象终端“Mobile-1”的存在可能区域、以及(4)对象终端“Mobile-1”位于比无线站“Mobile-2”靠下(南)且左(西)的情况下的对象终端“Mobile-1”的存在可能区域。
存在可能区域计算部117通过取上述计算出的4个存在可能区域的和集合,计算在地图信息表示的地图上没有障碍物的情况下的对象终端“Mobile-1”的存在可能区域。在图605(b)中表示对象终端“Mobile-1”的存在可能区域的计算结果例。
接着,对在地图上存在障碍物的情况进行说明。如上述那样,在地图信息中,有时包含使无线信号衰减的障碍物。存在可能区域计算部117在计算存在可能区域时,在对象终端“Mobile-1”与无线站“Mobile-2”之间存在上述障碍物的情况下,使用对推测距离信息进行了与该障碍物的种类和数量对应的修正后的修正距离信息,进行存在可能区域的计算。
图606是障碍物的种类和修正倍率的表900的例子。存在可能区域计算部117例如在对象终端“Mobile-1”与无线站“Mobile-2”之间存在“壁(薄)”的情况下,使用对推测距离信息乘以修正倍率0.9后的修正距离信息进行存在可能区域的计算。此外,存在可能区域计算部117在对象终端“Mobile-1”与无线站“Mobile-2”之间存在“壁(薄)”和“壁(厚)”这两个障碍物的情况下,使用对推测距离信息乘以修正倍率0.9×0.8=0.72后的修正距离信息进行存在可能区域的计算。
图607是表示在地图信息表示的地图上存在障碍物的情况下的存在可能区域的计算方法的说明图。
首先,存在可能区域计算部117如图607(a)那样,将无线站“Mobile-2”固定在地图的四角中的左下角(西南),调查对象终端“Mobile-1”运动的轨迹。此时,作为对象终端“Mobile-1”与无线站“Mobile-2”之间的距离,在其之间不存在障碍物的情况下使用推测距离信息,在其之间存在障碍物的情况下使用进行了与障碍物的种类和数量对应的修正后的修正距离信息。通过使用两种距离信息,将发生的不连续点间用直线连结,作为对象终端“Mobile-1”运动的轨迹。
地图被对象终端“Mobile-1”运动的轨迹划分为两个区域。两个区域中的不包含固定着无线站“Mobile-2”的地图的左下角(西南)的区域成为(1)对象终端“Mobile-1”位于比无线站“Mobile-2”靠上(北)且右(东)的情况下的对象终端“Mobile-1”的存在可能区域。
存在可能区域计算部117将无线站“Mobile-2”固定在地图的四角的右下角(东南)、左上角(西北)及右上角(东北)上,进行同样的处理,计算出(2)对象终端“Mobile-1”位于比无线站“Mobile-2”靠上(北)且左(东)的情况下的对象终端“Mobile-1”的存在可能区域、(3)对象终端“Mobile-1”位于比无线站“Mobile-2”靠下(南)且右(东)的情况下的对象终端“Mobile-1”的存在可能区域、以及(4)对象终端“Mobile-1”位于比无线站“Mobile-2”靠下(南)且左(西)的情况下的对象终端“Mobile-1”的存在可能区域。
存在可能区域计算部117通过取上述计算出的4个存在可能区域的和集合,计算在地图信息表示的地图上存在障碍物的情况下的对象终端“Mobile-1”的存在可能区域。在图607(b)中表示对象终端“Mobile-1”的存在可能区域的计算结果例。
收发控制部116在取得了在图603中表示例子的无线站信息600中的无线站的位置信息的情况下,存在可能区域计算部117使用无线站的位置信息进行存在可能区域的计算。
图608是表示使用无线站的位置信息的存在可能区域的计算方法的说明图。在取得了无线站“TV-1”的位置信息的情况下,在将以无线站“TV-1”为中心的半径作为推测距离信息的圆周上存在对象终端“Mobile-1”。将距离推测的误差考虑进来,将与从距离推测部112输入的距离精度信息成比例的宽度的环(doughnut)型区域作为对象终端的存在可能区域。
在收发控制部116取得了图604中例示的其他无线站信息700的情况下,存在可能区域计算部117进行使用其他无线站信息700的存在可能区域的计算。例如,假设从距离推测部112输入与无线站“Mobile-2”及“Mobile-3”之间的推测距离信息,从收发控制部116输入了无线站“Mobile-2”与无线站“Mobile-3”的距离推测信息L7。在此情况下,能够使用3个距离信息计算表示对象终端“Mobile-1”、无线站“Mobile-2”及无线站“Mobile-3”的相对位置的三角形。在该三角形在地图上移动的情况下,三角形的顶点中的表示对象终端“Mobile-1”的顶点所描绘的轨迹成为对象终端“Mobile-1”的存在可能区域。
图609及图610是表示使用其他无线站信息700的存在可能区域的计算方法的说明图。首先,对三角形的顶点在顺时针方向上为对象终端“Mobile-1”、无线站“Mobile-2”及无线站“Mobile-3”的情况进行说明。
存在可能区域计算部117如图609(a)所示,将无线站“Mobile-2”固定在地图的四角中的左下角(西南),调查离开了推测距离信息L2的对象终端“Mobile-1”运动的轨迹。此外,存在可能区域计算部117将无线站“Mobile-3”固定在地图的四角中的左下角(西南),调查对象终端“Mobile-1”运动的轨迹。
接着,存在可能区域计算部117如图609(b)所示,从无线站“Mobile-2”接触在地图的四角中的左下角(西南)、无线站“Mobile-3”接触在地图的左端(西端)上的状态向无线站“Mobile-3”接触在地图的四角中的左下角(西南)、无线站“Mobile-2”接触在地图的下端(南端)的状态,使无线站“Mobile-2”及无线站“Mobile-3”一边沿着地图的外端一边移动,来调查对象终端“Mobile-1”运动的轨迹。
通过上述操作,能够得到图609(c)所示的轨迹。通过该轨迹划分的两个区域中的、不包含地图的左下角(西南)的区域成为(1)对象终端“Mobile-1”位于比无线站“Mobile-2”靠上(北)、并且对象终端“Mobile-1”位于比无线站“Mobile-3”靠右(东)的情况下的对象终端“Mobile-1”的存在可能区域。
对于其余的四角也进行同样的操作,计算(2)对象终端“Mobile-1”位于比无线站“Mobile-2”靠右(东)、并且对象终端“Mobile-1”位于比无线站“Mobile-3”靠下(南)的情况下的对象终端“Mobile-1”的存在可能区域、(3)对象终端“Mobile-1”位于比无线站“Mobile-2”靠下(南)、并且对象终端“Mobile-1”位于比无线站“Mobile-3”靠左(西)的情况下的对象终端“Mobile-1”的存在可能区域、以及(4)对象终端“Mobile-1”位于比无线站“Mobile-2”靠左(西)、并且对象终端“Mobile-1”位于比无线站“Mobile-3”靠上(北)的情况下的对象终端“Mobile-1”的存在可能区域。
存在可能区域计算部117取上述计算出的4个存在可能区域的和集合,计算使用其他无线站信息的情况下的对象终端“Mobile-1”的存在可能区域。在图610(a)中表示对象终端“Mobile-1”的存在可能区域的计算结果例。
在三角形的顶点在顺时针方向上为对象终端“Mobile-1”、无线站“Mobile-3”及无线站“Mobile-2”的情况下也计算存在可能区域,通过取与图610(a)所示的存在可能区域的和集合,计算图610(b)所示的存在可能区域。
这样计算出的存在可能区域为使用其他无线站信息的情况下的对象终端“Mobile-1”的存在可能区域。
存在可能区域计算部117取基于输入的推测距离信息、无线站信息及其他无线站信息计算出的多个存在可能区域的交集,向修正部118输出。
将图602所示的地图信息及无线终端的配置例的存在可能区域的计算例表示在图611~图614中。图611是使用对象终端“Mobile-1”与无线站“Mobile-2”之间的推测距离信息进行的存在可能区域的计算例。此外,图612是使用对象终端“Mobile-1”与无线站“TV-1”之间的推测距离信息及从无线站“TV-1”取得的无线站信息进行的存在可能区域的计算例,图613是使用对象终端“Mobile-1”与无线站“AP-1”之间的推测距离信息及存储在存储部119中的基站管理信息进行的存在可能区域的计算例。存在可能区域计算部117例如计算这3个存在可能区域,将取交集的图614所示的存在可能区域向修正部118输出。
回到图598,继续位置推测装置100的结构的说明。修正部118基于从存在可能区域计算部117输入的存在可能区域,将从临时位置设定部输入的临时位置信息修正。具体而言,修正部118判断临时位置信息表示的坐标是存在可能区域内还是存在可能区域外,是存在可能区域外的情况下,修正为在存在可能区域内与临时位置信息表示的坐标最接近的位置。此时,在存在可能区域内与临时位置信息表示的坐标最接近的位置有多个的情况下,将临时位置信息修正为从这些位置中例如随机选择的位置。另外,在存在可能区域内与临时位置信息表示的坐标最接近的位置有多个的情况下,除了上述随机决定位置的方法以外,也可以按照预先决定的规则来选择(例如,选择从12点方向向顺时针方向看最初的位置,选择与多个位置的重心方向近的位置等)。
存储部119存储基站信息200、地图信息500、以及障碍物与修正倍率的表900。
另外,在上述说明中,计算平面上的存在可能区域,但关于3维的存在可能区域也通过同样的方法计算。即,通过将8个顶点作为支点调查对象终端的轨迹,计算存在可能区域。
<2.动作>
接着,对本实施方式的位置推测装置100的动作进行说明。
图615是表示本实施方式的位置推测装置100的动作整体的流程图。如图615所示,位置推测装置100的动作由如下步骤构成:通过自主导航推测自主导航位置信息的步骤(步骤S1801);使用接收电场强度推测RSSI位置信息的步骤(步骤S1802);设定表示对象终端的临时的位置的临时位置信息的步骤(步骤S1803);判断是否需要对临时位置信息进行修正的步骤(步骤S1804);以及使用存在可能区域将临时位置信息修正的步骤(步骤S1805)。
图616是表示推测自主导航位置信息的步骤(步骤S1801)的动作的流程图。
如图616所示,首先,姿势变化量计算部108基于从角速度传感器103输入的角速度信息计算对象终端的姿势变化量(步骤S1901),终端移动量计算部基于从加速度传感器102输入的加速度信息及从地磁传感器输入的地磁信息,计算对象终端的移动量(步骤S1902)。
接着,自主导航位置推测部110基于由存储部119存储的前次位置推测时的当前位置信息及对象终端的移动量,计算自主导航位置信息(步骤S1903),基于从前次位置推测时起的经过时间、对象终端的姿势变化量及对象终端的移动量,计算自主导航精度信息(步骤S1904)。
通过图616所示的动作,位置推测装置100计算自主导航位置信息及自主导航精度信息。
图617是表示推测RSSI位置信息的步骤(步骤S1802)的动作的流程图。如图617所示,首先,无线强度测量部111先测量多个基站发送的信号的接收电场强度(步骤S2001)。
接着,距离推测部112以接收电场强度强到弱的顺序选择无线强度测量部111测量的基站(步骤S2002)。
距离推测部112判断所选择的基站的接收电场强度是否是预先设定的阈值以上(步骤S2003)。在接收电场强度比阈值小的情况下,向步骤S2005前进。
距离推测部112在所选择的基站的接收电场强度是阈值以上的情况下,基于来自所选择的基站的信号的接收强度,推测从所选择的基站到对象终端的距离,计算与基站ID建立对应的推测距离信息、以及表示推测距离信息的精度的距离精度信息(步骤S2004)。
如图600所示,发送了信号的无线站与接收的无线站之间的距离越短,接收电场强度呈现越大的变化,所以推测为接收电场强度较弱的距离信息的精度较低。因而,通过预先设定阈值、并仅在接收强度为阈值以上的情况下进行距离推测,确保推测距离信息的最低限度的精度。
回到图617,距离推测部112判断是否计算出了无线强度测量部111测量的全部的基站的推测距离信息(步骤S2005),在还剩余有没有计算推测距离信息的基站的情况下,向步骤S2002返回。
如果计算了无线强度测量部111测量的全部的基站的推测距离信息,则RSSI位置推测部113判断距离推测部112是否推测了3个以上的基站的推测距离信息(步骤S2006)。在距离推测部112推测出的基站比3个少的情况下,向步骤S1803前进。
RSSI位置推测部113在距离推测部112推测了3个以上的基站的推测距离信息的情况下,使用存储在存储部119中的基站的位置信息及该推测距离信息,计算RSSI位置信息及RSSI精度信息(步骤S2007)。
回到图615,临时位置设定部114计算以自主导航精度信息及RSSI精度信息为权重的自主导航位置信息及RSSI位置信息的加权平均作为临时位置信息,计算自主导航精度信息及RSSI精度信息的平均值作为临时位置精度信息(步骤S1803)。
另外,在RSSI位置推测部113未能推测RSSI位置信息的情况下,将自主导航位置信息及自主导航精度信息作为临时位置信息及临时位置精度信息。
修正部118判断临时位置精度信息是否比预先设定的阈值小(步骤S1804),在阈值以上的情况下,将临时位置信息作为最终的位置推测结果,结束处理。
在临时位置精度信息比预先设定的阈值小的情况下,位置推测装置100使用存在可能区域将临时位置信息修正(步骤S1805)。
图618是表示使用存在可能区域将临时位置信息修正的动作的流程图。
首先,通信模式变更指示部115对属于同一网络的无线站指示变更通信模式(步骤S2101),收发控制部116与属于同一网络的无线站进行通信,取得无线站信息及其他无线站信息(步骤S2102)。
此外,无线强度测量部111测量属于同一网络的无线站发送的信号的接收电场强度(步骤S2103)。
接着,距离推测部112以接收电场强度强到弱的顺序选择无线强度测量部111测量出的无线站(步骤S2104)。
距离推测部112判断所选择的无线站的接收电场强度是否是预先设定的阈值以上(步骤S2105)。在接收电场强度比阈值小的情况下,向步骤S2107前进。
距离推测部112在所选择的无线站的接收电场强度是阈值以上的情况下,基于来自所选择的无线站的信号的接收强度,推测从所选择的无线站到对象终端的距离,计算与无线站ID建立对应的推测距离信息、以及表示推测距离信息的精度的距离精度信息(步骤S2106)。
判断是否计算了无线强度测量部111测量的全部的无线站的推测距离信息(步骤S2107),在还剩余有没有计算推测距离信息的无线站的情况下,向步骤S2104返回。
如果计算了无线强度测量部111测量的全部的无线站的推测距离信息,则存在可能区域计算部117基于推测距离信息、无线站信息、其他无线站信息及地图信息,计算存在可能区域(步骤S2108)。
如果计算出存在可能区域,则修正部118使用存在可能区域进行临时位置信息的修正(步骤S2109),将修正结果作为最终的位置推测结果,结束处理。
<3.总结>
本实施方式的位置推测装置100对于临时位置信息,使用表示空间的结构的地图信息和属于同一网络的无线站的信息计算存在可能区域,使用存在可能区域进行临时位置信息的修正。
根据该结构,在基站的数量较少的情况下、或在不具有特别的测位装置的无线终端中,也能够利用地图信息及属于同一网络的无线站信息更正确地推测对象终端的位置。
(补充)
以上,说明了有关本发明的位置推测装置的实施方式,但也可以将例示的位置推测装置如以下这样变形,本发明并不限定于上述实施方式。
(1)在上述各实施方式中,图599所示的基站管理信息200预先存储在存储部中,但本发明并不限定于此。
上述基站管理信息200例如也可以存储在存在于外部的存储装置中,对象终端根据需要通过进行通信,来取得基站管理信息。
(2)上述实施方式通过将加速度信息积分两次来计算对象终端的移动量,但计算对象终端的移动量的方法并不限定于此。例如,也可以将利用对象终端的用户的步幅等的信息通过来自用户的输入而预先取得,使用加速度信息检测用户的步数,通过步幅与步数的乘积来计算对象终端的移动量。
(3)在上述实施方式中,存在可能区域是将对象终端以外的无线站作为支点,通过调查对象终端运动的轨迹,来计算对象终端的存在可能区域,但存在可能区域的计算方法并不限于此。例如,也可以是,假定为对象终端存在于地图上的特定坐标,如果基于推测距离信息认为在地图上可能存在对象终端以外的无线站,则将上述特定坐标作为存在可能坐标,如果基于推测距离信息认为在地图上不可能存在对象终端以外的无线站,则将上述特定坐标作为存在不可能坐标,将地图上的全部的坐标分类为存在可能坐标及存在不可能坐标,将上述存在可能坐标的集合作为存在可能区域。
(4)也可以将上述各实施方式及各变形例部分地组合。
(5)也可以将用于使位置推测装置的处理器及连接在该处理器上的各种电路执行在上述实施方式中表示的距离推测处理及修正处理等的由机器语言或高级语言的程序代码构成的控制程序记录到记录介质中、或者经由各种通信路等流通或发布。在这样的记录介质中,有IC卡、硬盘、光盘、软盘、ROM、闪存存储器等。被流通、发布的控制程序通过保存到能够由处理器读出的存储器等中而供使用,通过由该处理器执行该控制程序,实现在各实施方式中表示那样的各功能。另外,处理器除了直接执行控制程序以外,也可以编译并执行或通过翻译器执行。
(6)在上述实施方式中表示的各功能构成要素也可以作为执行该功能的电路实现,也可以通过由1或多个处理器执行程序来实现。此外,本发明的位置推测装置也可以构成为IC、LSI或其他集成电路的封装。该封装装入到各种装置中而供使用,由此,各种装置实现在各实施方式中表示那样的各功能。
另外,距离推测部、各位置推测部、存在可能区域计算部及修正部等的各功能块典型地作为集成电路即LSI实现。它们既可以单独地1芯片化,也可以包含全部的结构或一部分的结构而1芯片化。这里设为LSI,但根据集成度的差异,也有称作IC、系统LSI、超级LSI、特级LSI等的情况。此外,集成电路化的方法并不限定于LSI,也可以使用专用电路或通用处理器实现。还可以利用在LSI制造后能够编程的FPGA(Field Programmable GateArray)、或能够再构成LSI内部的电路单元的连接及设定的可重构处理器。进而,如果因半导体技术的进步、或者因派生的其他技术而出现代替当前的半导体技术的集成电路化的技术,则当然也可以使用该技术进行功能块的集成化。有可能是生物技术的应用等。
(补充2)
以下,对作为本发明的一实施方式的位置推测装置的结构及其变形例和效果进行说明。
(a)本发明的一实施方式的位置推测装置是推测无线终端的当前位置的位置推测装置,具备:设定单元,设定上述无线终端的临时的位置信息;存储单元,存储表示空间的结构的地图信息;推测单元,使用从无线站接收到的信号的接收强度,推测表示相对于各个上述无线站的距离的距离信息;计算单元,使用上述地图信息及上述距离信息计算存在可能区域;以及修正单元,在上述临时的位置信息是上述存在可能区域外的情况下,将上述临时的位置信息修正到上述存在可能区域内。
根据上述结构,通过使用地图信息和相对于无线站的距离信息,在预先知道位置的基站的数量较少的情况下,也不需要追加特别的测位装置,能够实现无线终端的位置推测精度的提高。
(b)在上述实施方式(a)的位置推测装置中,也可以是,上述地图信息具有使无线信号衰减的障碍物的结构;上述计算单元在上述地图信息中的上述距离信息表示的两点间存在上述障碍物的情况下,根据上述障碍物将上述距离信息修正,计算上述存在可能区域。
根据上述结构,由于根据使无线信号衰减的障碍物进行距离信息的修正,所以能够实现无线终端的位置推测精度的提高。
(c)上述实施方式(a)的位置推测装置也可以是,还具备对属于同一网络的无线站指示变更通信模式的指示单元;上述推测单元根据上述指示测量上述无线站发送的信号的接收强度,使用测量的接收强度推测上述距离信息。
根据上述结构,能够推测相对于存在于同一网络的各个无线站的距离信息,能够用于位置推测。
(d)上述实施方式(c)的位置推测装置也可以是,还具备与各个上述无线站通信、取得各个上述无线站保持的无线站信息的取得单元;上述计算单元使用上述地图信息、上述距离信息及上述无线站信息计算上述存在可能区域。
(e)在上述实施方式(d)的位置推测装置中,上述取得单元也可以取得各个上述无线站保持的上述无线站的位置信息作为上述无线站信息。
根据上述结构,由于利用属于同一网络的无线站的位置信息计算存在可能区域,使用计算出的存在可能区域进行位置推测,所以能够实现无线终端的位置推测精度的提高。
(f)在上述实施方式(d)的位置推测装置中,也可以是,上述取得单元取得各个上述无线站保持的上述无线站与其他无线站之间的距离信息作为上述无线站信息。根据上述结构,能够使用各个上述无线站保持的上述无线站与其他无线站之间的距离信息计算属于同一网络的无线站彼此的相对的位置关系,利用属于同一网络的无线站彼此的相对的位置关系计算存在可能区域。结果,能够实现使用计算出的存在可能区域进行的无线终端的位置推测的精度提高。
(g)在上述实施方式(d)的位置推测装置中,也可以是,上述取得单元取得各个上述无线站发送的信号的发送强度作为上述无线站信息;上述推测单元使用上述接收强度及上述发送强度推测上述距离信息。
根据上述结构,能够实现相对于无线站的距离的推测精度的提高,结果,能够实现无线终端的位置的推测精度的提高。
(实施方式G)
在以下的实施方式G中,对不需要将特别的设备设置到室内就能够高精度地推测自己的位置的位置推测装置、位置推测方法进行说明。
以下,参照附图对本发明的实施方式G进行说明。
另外,以下说明的本发明的实施方式G表示本发明的优选的一具体例的。在本实施方式中表示的数值、形状、构成要素、构成要素的配置及连接形态等是一例,不是限定本发明的意思。本发明仅由权利要求书限定。由此,以下的实施方式G的构成要素中的、在权利要求书中没有记载的构成要素不是为了达到本发明的目的而必定需要的,但作为构成更优选的形态的要素进行说明。
(实施方式G)
图619是本发明的实施方式G的位置推测装置的功能块图。
图619所示的位置推测装置10固定地装备在例如便携终端等的移动终端中,检测自己的位置作为该移动终端的位置。
图619所示的位置推测装置具备加速度传感器101、角速度传感器102、地磁传感器103、移动状态检测部104、终端姿势检测部105、位置推测部106、信息保存部107、偏倚模式(pattern)信息保持部108、指示检测部109、偏在计算部110、位置修正部111和GUI显示部112。
另外,位置推测装置10固定装备在移动终端上,所以移动终端的位置、朝向、倾斜、加速度、加速度方向、移动方向、移动距离、旋转方向及角速度等的移动终端的状态(终端移动状态)与位置推测装置10的这些状态相同。
加速度传感器101在固定设定在位置推测装置10中的本地坐标系(由X轴、Y轴及Z轴构成的3轴的坐标系)中,检测加速度传感器101受到的重力及惯性力等的力的朝向及大小。例如,在位置推测装置10或上述移动终端的形状是在一方向上较长的形状的情况下,该位置推测装置10或移动终端的长度方向是Z轴方向,分别垂直于Z轴且相互正交的方向是X轴方向及Y轴方向。
角速度传感器102以预先设定的周期检测移动终端的旋转方向及角速度。
地磁传感器103以预先设定的周期检测本地坐标系中的磁场强度。具体而言,地磁传感器103检测沿着上述X轴、Y轴及Z轴的各个轴的方向的磁场强度。基于这3个轴的磁场强度,将移动终端的位置处的磁场(地磁)表示为1个磁场矢量。
移动状态检测部104对应于本发明的移动状态检测部,基于由终端姿势检测部105检测出的姿势(姿势信息)和加速度传感器101的检测结果,检测(计算)表示位置推测装置10的移动方向及移动距离的移动量、表示位置推测装置10被移动的状态的终端移动状态。
具体而言,移动状态检测部104基于由姿势检测部105计算出的姿势(姿势信息)和从加速度传感器101输出的加速度信息,以预先设定的周期计算(检测)固定设定在地球上的全局坐标系、或固定设定在宅内的宅内坐标系中的、移动终端的移动方向、移动速度及移动距离。另外,将表示移动方向及移动距离的参数称作移动量。
换言之,移动状态检测部104将加速度传感器101的输出(加速度信息)解析,判断位置推测装置10是否是移动状态。这样,移动状态检测部104计算(检测)位置推测装置10是否是终端移动状态。此外,移动状态检测部104根据最近累积的加速度传感器101的输出(加速度信息)及由地磁传感器103等得到的方位信息,计算(检测)位置推测装置10的移动方向。
在本实施方式中,例如,移动状态检测部104在位置推测装置10是移动状态的情况下,例如计算从在紧前的指示方向所指示的位置中有偏倚的时刻起至找到指示对象物的时刻为止的移动量、即某两点的时刻间的移动量。这里,所谓指示对象物,例如是处于宅内的TV或空调等。
姿势检测部105对应于本发明的姿势检测部,至少基于加速度传感器101和地磁传感器103的检测结果,检测(计算)位置推测装置10的姿势。这里,姿势是移动终端相对于水平面的倾斜、以及水平面中的移动终端的朝向。在本实施方式中,姿势检测部105基于由角速度传感器102检测的位置推测装置10的朝向的变化量、以及加速度传感器101及地磁传感器103的检测结果,检测位置推测装置10的姿势。
即,姿势检测部105基于加速度传感器101、角速度传感器102及地磁传感器103的检测结果,以预先设定的周期计算(检测)以地球为基准的移动终端的姿势。更具体地讲,终端姿势检测部105取得加速度传感器101的值(加速度信息),取得重力方向。终端姿势检测部105根据所取得的重力方向,计算(检测)位置推测装置10的相对于水平面(上述xy平面)的姿势(姿势信息)。并且,终端姿势检测部105取得由角速度传感器102得到的从过去的姿势的变化、或地磁传感器103的值,计算(检测)水平面上的位置推测装置10的姿势(朝向)。
位置推测部106对应于本发明的位置推测部,推测表示位置推测装置10的当前位置的当前地坐标。此外,位置推测部106根据终端移动状态和前次推测时的当前位置的信息(当前地坐标),推测当前位置。具体而言,位置推测部106将从前次推测的坐标离开了由移动状态检测部104检测出的移动量的坐标推测为当前地坐标。更具体地讲,位置推测部106基于紧前计算出的坐标和由移动状态检测部104计算出的移动量,计算(推测)位置推测装置10的当前地坐标作为当前位置。另外,该当前地坐标被用作用于计算下个当前地坐标的、紧前计算的坐标。以下,将该紧前计算出的坐标也称作紧前当前地坐标。例如,位置推测部106根据从前次推测时的紧前当前地坐标(X0,Y0,Z0)起的移动量,推测此次的当前地坐标(X,Y,Z)。
另外,位置推测部106还可以根据从位置推测装置10最近通过的基准点的坐标起的、位置推测装置10的移动距离、位置推测装置10的移动的复杂度、以及在位置推测装置10的移动中花费的时间中的至少1个,计算作为当前地坐标的精度的推测位置精度。在此情况下,位置推测部106将推测出的当前地坐标与计算出的推测位置精度建立关联,保存在信息保存部中。
指示检测部109具备指示方向检测部1091和指示对象物检测部1092。
指示方向检测部1091对应于本发明的指示方向检测部,检测由用户使用位置推测装置10指示的方向即指示方向。
指示对象物检测部1092对应于本发明的对象物检测部,基于由指示方向检测部1091检测的指示方向,检测用户指示的对象物即指示对象物。具体而言,指示对象物检测部1092检索(检测)在作为位置推测装置10的上方向(Z轴方向)的指示方向的延长线上是否有指示对象物。这里,所谓指示对象物,如上述那样,例如是处于宅内的TV或空调等。指示对象物作为指示对象物的候选预先与坐标一起保存在信息保存部107中。
信息保存部107对应于本发明的信息保存部,将由位置推测部106推测出的当前地坐标、与由位置推测部106计算出的推测位置精度建立关联而保存。
此外,在信息保存部107中,保存有作为指示对象物的候选的候选对象物、以及该候选对象物的坐标。另外,信息保存部107也可以将根据候选对象物被登录的方法而计算出的作为候选对象物的坐标的精度的对象物位置精度、与对应的候选对象物及其坐标一起保存。
偏在计算部110对应于本发明的偏在计算部。偏在计算部110在由指示对象物检测部1092检测到指示对象物的紧前的预先决定的时间以内中,确定该指示对象物不存在、且在由指示方向检测部1091检测出的指示方向所指示的位置中有偏倚(位置偏在)的区域。即,所谓有偏倚的(偏在的)区域,是没有指示对象物的特定区域,并且是包含由用户以一定以上的偏倚的分布通过指示方向指示的位置的区域。并且,偏在计算部110计算相对于有特定的偏倚的(偏在的)区域的方向即偏在方向。这里,所谓预先决定的时间,例如是3秒。
换言之,偏在计算部110在由指示对象物检测部1092检测到指示对象物时(当前时刻),从该当前时刻回溯,例如在3秒等的预先决定的时间以内中,确定有指示方向的偏倚的区域。
这里,偏在计算部110将为了搜索有偏倚的(偏在的)区域而以一定的大小划分的多个搜索区域中的一个确定为有偏倚的(偏在的)区域。
另外,偏在计算部110也可以根据推测位置精度或对象物位置精度的位置精度来调节搜索区域的大小。例如,偏在计算部110在位置精度较低的情况下,增大搜索区域的大小。
具体而言,偏在计算部110也可以根据保存在信息保存部107中的当前地坐标和与该当前地坐标建立关联的推测位置精度来变更搜索区域的大小。例如,偏在计算部110在与当前地坐标建立关联的推测位置精度为阈值以下的情况下,进行变更以使搜索区域变大。换言之,偏在计算部110在保存在信息保存部107中的推测位置精度的值是阈值以下的情况下,进行变更以使搜索区域变大。
此外,偏在计算部110也可以根据由指示对象物检测部1092检测到的指示对象物和保存在信息保存部107中的与该指示对象物对应的候选对象物的对象物位置精度来变更搜索区域的大小。例如,偏在计算部110在保存在信息保存部107中的对象物位置精度的值是阈值以下的情况下,进行变更以使搜索区域变大。
偏倚模式保持部108保持有用于确定偏在计算部110计算出的偏在的区域(有偏倚的区域)的信息。例如,偏倚模式保持部108保持有用于确定由用户以一定以上的偏倚的分布指示的区域的偏倚模式。此外,偏倚模式保持部108也可以保持由偏在计算部110确定的区域和针对它的偏在方向。
位置修正部111对应于本发明的位置修正部,使用由偏在计算部110计算出的偏在方向,将由位置推测部106推测的当前地坐标修正。
这里,位置修正部111以检测出的指示对象物的位置为基准,使用上述偏在方向计算存在可能区域,该存在可能区域是包括当由用户使用位置推测装置10指示了时该位置推测装置10有可能真实存在的坐标在内的区域。并且,位置修正部111在计算出的存在可能区域中,决定当由用户使用位置推测装置10指示了时位置推测装置10真实存在、并且应修正的坐标,将当前地坐标修正为所决定的坐标。
更具体地讲,位置修正部111使用从有偏倚的时刻的位置推测装置10的当前位置向计算出的偏在的区域的方位(偏在方向),计算从设为在逻辑空间上配置有临时的指示对象物的情况下的临时的指示对象物的当前位置起上述方位的反方向的直线上的预先决定的宽度的区域作为存在可能区域。即,位置修正部111以指示对象物的位置(坐标(X2,Y2,Z2))为基准定义自终端的当前位置的信息(当前地坐标)可能存在的区域(存在可能区域)。并且,位置修正部111将该当前地坐标修正为在计算出的存在可能区域中与当前地坐标(当前位置)最近的坐标。另外,位置修正部111并不限于将该当前地坐标修正为在计算出的存在可能区域中与当前地坐标(当前位置)最近的坐标计的情况。位置修正部111也可以将该当前地坐标修正为计算出的存在可能区域的中心。
另外,位置修正部111也可以根据推测位置精度或对象物位置精度的位置精度调节存在可能区域的宽度(区域)的大小。
具体而言,位置修正部111也可以根据保存在信息保存部107中的当前地坐标、以及与该当前地坐标建立了关联的推测位置精度来变更存在可能区域的宽度(区域)。例如,位置修正部111在与当前地坐标建立了关联的推测位置精度是阈值以下的情况下,进行变更以使存在可能区域的宽度(区域)变小。换言之,位置修正部111在保存在信息保存部107中的推测位置精度的值是阈值以下的情况下,进行变更以使存在可能区域的宽度(区域)变小。
这样,位置修正部111在推测位置精度较低的情况下,通过将存在可能区域的宽度(区域)取较窄,较强地施以位置修正。
此外,位置修正部111也可以根据由指示对象物检测部1092检测出的指示对象物、以及保存在信息保存部107中的与该指示对象物对应的候选对象物的对象物位置精度,变更存在可能区域的宽度(区域)的大小。例如,位置修正部111在保存在信息保存部107中的对象物位置精度的值是阈值以下的情况下,进行变更以使存在可能区域的宽度(区域)变大。
这样,位置修正部111在对象物位置精度较低的情况下,使存在可能区域的宽度(区域)的大小变大。这样,位置推测装置10在对象物精度较低的情况下通过将存在可能区域的宽度(区域)取较大,使得不怎么施以位置修正。
另外,上面对位置推测装置10不是移动状态的情况进行了说明,但并不限定于此。由于构成位置推测装置10的移动终端能够由用户携带,所以也有用户一边移动一边指示指示对象物的情况。在此情况下,位置修正部111只要如以下这样构成就可以。
即,位置修正部111在被检测出终端移动状态、并且由对象物检测部检测出指示对象物的情况下,引入位置推测装置10的移动量来修正当前地坐标。具体而言,位置修正部111将当前地坐标修正为如下坐标,该坐标为:从使用计算出的偏在方向进行修正后的坐标离开从偏在计算部110在预先决定的时间内中确定了指示方向偏在的区域时起至由指示对象物检测部1092检测到指示对象物为止的时间之间的位置推测装置10的移动量的坐标。
GUI显示部112对应于本发明的显示部,在由指示对象物检测部1092检测出指示对象物的情况下,显示与该指示对象物关联的控制信息。这里,所谓与指示对象物关联的控制信息,例如是控制用遥控器画面等的GUI(Graphical User Interface)画面,是用户界面信息(UI信息)。
位置推测装置10如以上这样构成。
根据该结构,不需要在室内设置例如室内GPS那样的专用的天线等特别的设备,能够高精度地推测自己的位置。
另外,信息保存部107并不一定需要由位置推测装置10具备。也可以存在于云等、具备位置推测装置10的便携终端等的移动终端能够访问的网络上的某处,只要能够根据需要而取得信息就可以。
接着,对有关实施方式G的位置推测装置10的特征性的动作进行说明。具体而言,说明位置推测装置10判断在推测出的当前位置的信息(当前地坐标)中有误差、将该当前位置的信息(当前地坐标)修正的方法的例子。
用户使用位置推测装置10对实际用眼睛看到的指示对象物指示,但指示对象物没有被立即检测到。因此,对在用户将位置推测装置10的前端随机地晃动的情况下、检测到指示对象物的情况进行说明。另外,以下假设在移动终端中具备位置推测装置10,使用用户实际拿在手中的移动终端这样的用语进行说明。
图620A及图620B是表示在上述情况中用户和移动终端针对指示对象物识别的位置关系的差异的图。图620A表示用户识别的位置关系,图620B表示移动终端识别的位置关系。
具体而言,在图620A中,首先,表示用户针对实际看到的指示对象物D1(坐标(X2,Y2,Z2)),将移动终端指示图中的上部(如图的T1)的状况。这里,如果用户携带的移动终端的当前位置的信息(当前地坐标)正确,则指示对象物D1被立即检测到,显示与指示对象物D1建立关联的控制信息。另一方面,在移动终端的当前位置的信息(当前地坐标)中有偏差(有误差)的情况下,移动终端不能检测到指示对象物D1。图620A表示移动终端的当前位置的信息有偏差的情况。即,移动终端即使被用户朝向指示对象物D1(如移动终端T1)指示,由于在移动终端的当前位置的信息中有误差,所以也不能检测到指示对象物D1。
接着,用户使用移动终端指示已指示过一次的指示对象物D1的周边。具体而言,用户将移动终端的上部随机地晃动等而使指示方向变动,以使移动终端能够检测到指示对象物。
于是,移动终端如图的T2所示,当被指示了指示对象物实际不存在的场所D2(坐标(X3,Y3,Z3))时,检测到指示对象物D1。如果将该内容以图620B所示的移动终端的视点进行说明则如下,移动终端的当前位置的信息(当前地坐标)不是用户实际所处的坐标(X1,Y1,Z1),而推测为坐标(X4,Y4,Z4)。因此,在由用户指示为如图的T2所示的情况下,在该指示方向的延长线上检测到指示对象物D1。
即,用户实际所处的正确的位置虽然是坐标(X1,Y1,Z1),但移动终端推测的当前位置的信息(当前地坐标)是坐标(X4,Y4,Z4),所以即使用户使移动终端指示实际看到的指示对象物D1(坐标(X2,Y2,Z2),也不能检测到指示对象物D1。
接着,说明在图620A及图620B所示的情况下,具备本发明的位置推测装置10的移动终端判断在推测出的当前位置的信息(当前地坐标)中是否有误差的方法。
图621是用于说明移动终端判断在推测出的当前位置的信息(当前地坐标)中是否有误差的方法的例子的图。这里,在图621中,示出了以移动终端推测出的当前位置的信息(当前地坐标)为基准的坐标。
如图621所示,如果在移动终端被如图的T2所示指示时检测到指示对象物D1,则计算是否有在检测到指示对象物D1的紧前用户所指示的指示方向指示的位置偏在的区域。所谓偏在的区域,换言之是用户指示过的区域,并且是在用户指示的位置中有一定的偏倚的区域。另外,可以认为该偏在的区域对于用户而言是位于看到实体的方向上的区域。
因此,移动终端如果能够判断出有偏在的区域,则能够判断出移动终端的当前位置的信息(当前地坐标)有偏差。这是因为,移动终端推测的当前位置的信息(当前地坐标)在坐标(X4,Y4,Z4)与实际的位置有偏差的情况下,可以认为在紧前用户对与指示对象物D1的位置不同的区域进行了指示。
接着,对在移动终端判断为在推测出的当前位置的信息(当前地坐标)中有误差的情况下将该当前位置的信息(当前地坐标)修正的方法的例子,使用附图进行说明。
图622是用于说明在移动终端判断为在推测出的当前位置的信息中有误差的情况下将该当前位置的信息修正的方法的例子的图。这里,也在图622中示出了以移动终端推测的当前位置的信息(当前地坐标)为基准的坐标。
即,首先,移动终端假定为用户在紧前指示的指示对象物的位置(坐标(X5,Y5,Z5))是指示对象物的位置(坐标(X2,Y2,Z2))。这里,移动终端以指示对象物的位置(坐标(X2,Y2,Z2))为基准定义自终端的当前位置的信息(当前地坐标)有可能存在的区域(存在可能区域)。具体而言,移动终端使从推测出的当前位置的信息(当前地坐标(X4,Y4,Z4))向用户在紧前指示的指示对象物的位置(坐标(X5,Y5,Z5))的方位(方位信息)以横切指示对象物D1的方式平行移动。并且,计算以从指示对象物D1的位置向上述方位的反方向的直线为中心有一定宽度的区域作为存在可能区域。
并且,移动终端将其当前地坐标(当前位置)修正为在计算出的存在可能区域中与当前地坐标最近的坐标。这样,移动终端能够通过用户的操作来将推测的当前地坐标的误差修正,所以能够使推测的该当前地坐标的精度提高。另外,这里,假设移动终端将其当前地坐标修正为在计算出的存在可能区域中与当前地坐标(当前位置)最近的坐标而进行了说明,但并不限定于该情况。如上述那样,移动终端也可以将其当前地坐标修正为计算出的存在可能区域的中心。
这里,使用图623,说明计算在移动终端检测到指示对象物D1的紧前用户指示的指示方向上是否有偏在的区域的方法。
图623是用于说明移动终端判断有指示方向的偏倚的区域的有无的方法的例子的图。
为了判断在一定的区域中指示方向偏在,依赖于移动终端与包含该区域的平面的距离。
在本实施方式中,如图623(a)所示,例如,以由移动终端指示的指示方向为轴,在与移动终端相离例如5m的预先决定的距离上设定逻辑上的平面(计测面)。此外,移动终端如图623(b)所示,在设定的计测面中划分为一定的大小的块。例如,可以将计测面划分为各边分别为50cm的正方形的块。
使用该计测面,如上述那样,判断在例如3秒间等的预先决定的时间以内指示的区域中是否存在有偏倚的(偏在的)区域。例如,移动终端在使用该计测面判断偏在的区域的情况下,以3×3块单位(搜索区域单位)进行与指示方向交叉的坐标的计测,计算与指示方向交叉的坐标的痕跡。并且,可以将与指示方向交叉的坐标的痕跡(存在)与平均相比表示阈值(例如:5倍)以上的值、并且痕跡(存在)最多的块(搜索区域)判断为是有偏倚的(偏在的)区域。
另外,移动终端在与指示方向交叉的坐标的痕跡(存在)与平均相比比阈值(例如:5倍)小的情况下,判断为不存在偏倚的(偏在的)区域。
此外,移动终端也可以根据推测位置精度或对象物位置精度的位置精度来调节搜索区域的大小。例如,移动终端在位置精度较低的情况下,也可以将搜索区域的大小从3×3块单位增大为5×5块单位。
如以上这样,位置推测装置10判断为在推测出的当前位置的信息(当前地坐标)中有误差,将该当前位置的信息(当前地坐标)修正。
另外,在上述中,对位置推测装置10不是移动状态的情况进行了说明,但并不限定于此。由于构成位置推测装置10的移动终端能够由用户携带,所以也有用户一边移动一边指示指示对象物的情况。以下,关于位置推测装置10为移动状态的情况,说明判断为在推测出的当前位置的信息(当前地坐标)中有误差、将该当前位置的信息(当前地坐标)修正的方法的例子。
说明的情况与图620A及图620B是同样的。不同的是,用户使用位置推测装置10对实际用眼睛看到的指示对象物指示的时刻、以及在用户将位置推测装置10的前端随机地左右晃动的情况下检测到指示对象物的时刻中移动终端在移动。
图624A及图624B是表示在上述情况中、用户和移动终端针对指示对象物识别的位置关系的差异的图。图624A表示用户识别的位置关系,图624B表示移动终端识别的位置关系。
具体而言,在图624A中,首先表示用户针对实际看到的指示对象物D1(坐标(X2,Y2,Z2))将移动终端指示图中的上部(如图的T3)的状况。这里,图624A与图620A同样,表示移动终端的当前位置的信息有偏差的情况。即,移动终端即使被用户朝向指示对象物D1(如移动终端T1)指示,由于在移动终端的当前位置的信息中有误差,所以也不能检测到指示对象物D1。
接着,用户使用移动终端指示已指示过一次的指示对象物D1的周边。具体而言,用户将移动终端的上部随机地晃动等而使指示方向变动,以使移动终端能够检测到指示对象物。这里,例如用户(移动终端)是移动中。
接着,移动终端如图的T4所示,当被指示了指示对象物实际不存在的场所D2(坐标(X3,Y3,Z3))时,检测到指示对象物D1。如果将其用图624B所示的移动终端的视点进行说明则如下,移动终端的当前位置的信息(当前地坐标)不是移动后的用户实际所处的坐标(X1,Y1,Z1),而是被推测为坐标(X4,Y4,Z4)。因此,在由用户如图624A或图624B的T4那样指示的情况下,在该指示方向的延长线上检测到指示对象物D1。
即,移动终端检测到指示对象物的时刻的用户实际所处的正确的位置是坐标(X1,Y1,Z1)。但是,在移动终端检测到指示对象物的时点的时刻推测的当前位置的信息(当前地坐标)如图的T4所示,是坐标(X4,Y4,Z4),所以即使用户使移动终端指示实际看到的指示对象物D1(坐标(X2,Y2,Z2)),也不能检测到指示对象物D1。换言之,用户如图624B的T3所示使移动终端指示,如图624B的T4‘所示,当在一定的移动后使移动终端指示时,移动终端在推测的当前位置的信息(当前地坐标)即坐标(X4,Y4,Z4)检测到指示对象物。
接着,使用附图,对在移动终端推测的当前位置的信息(当前地坐标)中有误差的情况下将该当前位置的信息(当前地坐标)修正的方法的例子的图进行说明。另外,关于判断在移动终端推测出的当前位置的信息(当前地坐标)中是否有误差的方法,与图621是同样的,所以省略说明。
图625、图626A及图626B是用于说明移动终端在判断为在推测出的当前位置的信息中有误差的情况下将该当前位置的信息修正的方法的例子的图。这里,在图625、图626A及图626B中,示出了以移动终端推测出的当前位置的信息(当前地坐标)为基准的坐标。
如图625所示,首先,移动终端与在图622中说明的同样,以有偏倚的时刻为基准定义存在可能区域。然后,移动状态检测部104计算从紧前的有指示方向的偏倚的时刻起至找到指示对象物的时刻之间的、移动终端的移动量。并且,位置推测部106使用由移动状态检测部104计算出的移动终端的移动量,将存在可能区域移动与移动量相当的量。
接着,移动终端将其当前地坐标(当前位置)修正为在计算出的存在可能区域中与当前地坐标(当前位置)最近的位置。这样,移动终端即使是移动中,也能够通过用户的操作将推测的当前地坐标的误差修正,所以能够使推测出的当前值坐标的精度提高。
如以上这样,不需要在室内设置特别的设施就能够进行位置的修正。
使用图626A及图626B对其说明。图626A是与图624A同样的图。不同的是,图624A的D2被用移动终端的识别替换。即,图624A的D2在图626A中被表示为在发现指示对象物的紧前用户指示的有偏倚的区域D3(坐标(X5,Y5,Z5))。此外,将移动终端检测到指示对象物的时点的时刻的当前位置的信息(当前地坐标)表示为坐标(X4,Y4,Z4)。
如图626B所示,首先,移动终端假定为在检测到指示对象物的紧前用户指示的有偏倚的区域D3的位置(坐标(X5,Y5,Z5))是指示对象物的位置(坐标(X5,Y5,Z5))。这里,移动终端在从指示有偏倚的区域D3后至实际检测到指示对象物之间进行了移动。因而,移动终端在引入自终端的移动量后,以指示对象物的位置(坐标(X2,Y2,Z2))为基准定义自终端的当前位置的信息(当前地坐标)有可能存在的区域(存在可能区域)。
具体而言,移动终端首先针对指示对象物D1(坐标(X2,Y2,Z2)),引入移动量而决定追加了移动量的临时的指示对象物D1‘的位置。接着,移动终端使该时刻的当前位置的信息(当前地坐标(X5,Y5,Z5))相对于在检测到指示对象物的紧前用户指示的有偏倚的区域D3的方位(方位信息)以横切临时的指示对象物D1‘的方式平行移动。并且,计算以从临时的指示对象物D1‘的位置起上述方位的反方向的直线为中心有一定的宽度的区域作为存在可能区域。
接着,移动终端将其当前地坐标修正为在计算出的存在可能区域中与当前地坐标(当前位置)最近的坐标。
这样,移动终端能够通过用户的操作将推测的当前地坐标的误差修正,所以能够使推测的该当前地坐标的精度提高。
另外,这里,设为移动终端将其当前地坐标修正为在计算出的存在可能区域中与当前地坐标(当前位置)最近的坐标而进行了说明,但并不限定于该情况。如上述那样,移动终端也可以将其当前地坐标修正为计算出的存在可能区域的中心。
接着,使用附图对移动终端的处理的流程进行说明。
图627~图632是用于说明移动终端的处理的流程的流程图。
首先,对图627所示的处理进行说明。另外,在图627中,表示了移动终端推测出当前位置的信息(当前地坐标)为止的处理的流程。
在图627中,首先,移动状态检测部104将加速度传感器101的输出(加速度信息)解析,判断移动终端是否是移动状态(S101)。
接着,如果由移动状态检测部104判断为移动终端不是移动状态(终端移动状态)(S102的“否”),则向图628的F01前进。
另一方面,如果由移动状态检测部104判断为移动终端是移动状态(终端移动状态)(S102的“是”),则姿势检测部105取得加速度传感器101的值,取得重力方向(S103)。
接着,姿势检测部105根据所取得的重力方向的值,计算移动终端的相对于水平面的姿势(姿势信息)(S104)。
接着,姿势检测部105取得由角速度传感器102得到的从过去的姿势的变化、或地磁传感器103的值,计算水平面上的移动终端的朝向(S105)。
接着,移动状态检测部104计算根据最近累积的加速度传感器101的输出、及基于地磁传感器103等的方位信息得到的移动终端的移动方向(S106)。
并且,位置推测部106根据从前次推测时的当前位置的信息(例如,前次推测时的当前地坐标(X0,Y0,Z0))的移动量,推测此次的当前位置的信息(坐标(X,Y,Z))(S107)。
接着,移动终端将处理前进到图630的F02。
接着,对图628所示的处理进行说明。另外,在图628中,表示移动终端检测指示对象物的处理的流程。
在图628中,首先,指示检测部109检索(检测)在移动终端的指示方向的延长线上是否有TV等的指示对象物(S108)。具体而言,在图627的S102中,在由移动状态检测部104判断为移动终端不是移动状态的情况下(S102的“否”),指示方向检测部1091检测由用户使用移动终端指示的方向即指示方向。接着,指示对象物检测部1092检索(检测)在移动终端的指示方向的延长线上是否有指示对象物。
接着,在指示对象物检测部1092没有检测到有指示对象物的情况下(S109的“是”),向图631的F05前进。
另一方面,在由移动状态检测部104、由指示对象物检测部109检测到有指示对象物的情况下(S109的“是”),GUI显示部112显示与指示对象物建立关联的遥控器画面等的GUI等的控制信息(S110)。
接着,GUI显示部112判断用户是否使用控制信息(S111)。在由GUI显示部112判断为用户不使用控制信息(GUI)的情况下(S111的“否”),向图631的F05前进。
另一方面,在由GUI显示部112判断为用户正使用控制信息(GUI)的情况下(S111的“是”),向图629的F03前进。
接着,对图629所示的处理进行说明。另外,在图629中,表示移动终端使用有偏倚的区域(偏在的区域)将推测出的当前位置的信息(当前地坐标)修正(校正)为止的处理的流程。
在图629中,首先,偏在计算部110判断是否存在有偏倚的区域(S112)。具体而言,在S111中,在由GUI显示部112判断为用户正使用控制信息(GUI)的情况下(S111的“是”),偏在计算部110判断在由指示对象物检测部1092检测到指示对象物之前的预先决定的时间以内中,是否能够确定该指示对象物不存在的区域、且由指示方向检测部1091检测出的指示方向所指示的位置偏在的区域。
另外,也可以是,不将由GUI显示部112进行的用户是否正在使用控制信息(GUI)的判断作为触发事件,偏在计算部110判断是否存在有偏倚的区域。
在S112中,在偏在计算部110没有计算为存在有偏倚的区域的情况下(S112的“否”),向图632的F06前进。
另一方面,在S112中,在由偏在计算部110计算为存在有偏倚的区域的情况下(S112的“是”),指示对象物检测部1092判断在有偏倚的区域中是否存在与用户希望的指示对象物不同的候选对象物(S113)。
在S113中指示对象物检测部1092在有偏倚的区域中检测到存在与用户希望的指示对象物不同的候选对象物的情况下(S113的“是”),向图632的F06前进。
另一方面,在S113中指示对象物检测部1092在有偏倚的区域中没有检测出存在与用户希望的指示对象物不同的候选对象物的情况下(S113的“否”),将处理向S114前进。即,移动状态检测部104假定为在有偏倚的区域中存在指示对象物的实体,取得移动终端指示有偏倚的区域时的方位信息(S114)。
作为方位信息,例如在图621中是D3的坐标相对于移动终端的坐标的方位。
接着,对于根据当前时刻的移动终端的位置取得的方位信息表示的方位,计算如下区域作为存在可能区域,该区域为:从配置了逻辑空间上的指示对象的情况下的指示对象物的位置起上述方位的反方向的直线上的预先决定的宽度的区域(S115)。
接着,向图632的F06前进。
接着,对图630所示的处理进行说明。另外,在图630中,表示移动终端检测指示对象物的处理的流程。
在图630中,首先,指示方向检测部1091检索(检测)在移动终端的指示方向的延长线上是否有指示对象物(TV等)(S116)。
接着,指示对象物检测部1092判断是否有指示对象物(S117)。
接着,如果由指示对象物检测部1092判断为没有指示对象物(S117的“否”),则向图631的F05前进。
另一方面,如果由指示对象物检测部1092判断为有指示对象物(S117的“是”),则GUI显示部112显示与指示对象物建立关联的控制信息(S118)。这里,所谓控制信息,是遥控器画面等的GUI等。
接着,GUI显示部112判断用户是否正使用GUI(S119)。
接着,如果由GUI显示部112判断为用户没有使用GUI(S119的“否”),则向图631的F05前进。
另一方面,如果由GUI显示部112判断为用户正使用GUI(S119的“是”),则偏在计算部110从当前时刻回溯,判断在预先决定的时间(3秒)以内是否存在有指示方向的偏倚的区域(S120)。
即,偏在计算部110判断在由指示对象物检测部1092检测到指示对象物的紧前的预先决定的时间以内中,是否能够确定该指示对象物不存在的区域、且由指示方向检测部1091检测出的指示方向指示的位置偏在(有偏倚)的区域。
接着,向图631的F04前进。
接着,对图631所示的处理进行说明。另外,在图631中,表示当移动终端是移动状态时(移动中)检测指示对象物的处理的流程。
在图631中,首先,偏在计算部110判断是否存在有偏倚的区域(S121)。具体而言,在S121中,在由GUI显示部112判断为用户正使用控制信息(GUI)的情况下(S119的“是”),偏在计算部110判断在由指示对象物检测部1092检测到指示对象物的紧前的预先决定的时间以内中、是否能够确定该指示对象物不存在的区域、且由指示方向检测部1091检测出的指示方向指示的位置偏在的区域。
另外,也可以不将由GUI显示部112进行的用户是否正使用控制信息(GUI)的判断作为触发事件,而是偏在计算部110判断是否存在有偏倚的区域。
在S121中,在偏在计算部110没有计算为存在有偏倚的区域的情况下(S121的“否”),向图632的F07前进。
另一方面,在S121中,在由偏在计算部110计算为存在有偏倚的区域的情况下(S121的“是”),指示对象物检测部1092判断在有偏倚的区域中是否有与用户希望的指示对象物不同的候选对象物(S122)。
在S122中指示对象物检测部1092在有偏倚的区域中检测出与用户希望的指示对象物不同的候选对象物的情况下(S122的“是”),向图632的F07前进。
另一方面,在S122中指示对象物检测部1092在有偏倚的区域中没有检测出与用户希望的指示对象物不同的候选对象物的情况下(S122的“否”),将处理向S123前进。即,移动状态检测部104计算从紧前有指示方向的偏倚的时刻至找到指示对象物的时刻之间的、移动终端的移动量(S123)。
接着,移动状态检测部104假定为在有偏倚的区域中存在指示对象物的实体,取得移动终端指示了有偏倚的区域时的方位信息(S124)。
接着,位置修正部111对指示对象物的位置追加移动量,制作临时的指示对象的坐标(S125)。
接着,位置修正部111对于根据有偏倚的时刻的移动终端的位置所取得的方位,计算如下区域作为存在可能区域,该区域为:从在逻辑空间上配置了临时的指示对象物的情况下的临时的指示对象物的位置起上述方位的逆方向的直线上的预先决定的宽度的区域(S126)。
接着,向图632的F06前进。
接着,对图632所示的处理进行说明。另外,在图632中,表示将与当前位置的信息(当前地坐标)的地点最近的存在可能区域内的位置修正为当前位置的信息的处理的流程。
首先,移动终端取得作为推测的当前地坐标的精度的推测位置精度信息(S127)。
接着,移动终端取得指示对象物的位置精度(对象物位置精度)(S128)。
接着,移动终端确认该推测位置精度的值是否较高(例如80%以上)(S129)。
接着,移动终端根据推测位置精度信息的值的大的程度,将存在可能区域的宽度取较大(S130)。例如,移动终端计算(推测位置精度的值-80)/10*(存在可能区域的宽度),决定存在可能区域的宽度。
接着,移动终端确认指示对象物的位置精度的值是否较低(例60%以下)(S131)。
接着,移动终端根据指示对象物的位置精度的值的小的程度,将存在可能区域的宽度取较大(S132)。例如,移动终端计算(60-位置精度)/10*(存在可能区域的宽度),决定存在可能区域的宽度。
接着,移动终端将与当前位置的信息的地点最近的存在可能区域内的位置修正为当前位置的信息(S133)。
接着,移动终端判断是否功能结束(S134),在判断为功能结束的情况下(S134的“是”),结束处理。
另一方面,在移动终端判断为没有功能结束的情况下(S134的“否”),回到图627的F08,开始处理。
另外,设为移动终端进行图632所示的S20的处理即S127~S132的处理而进行了说明,但也可以不进行S20的处理。
如以上这样,移动终端进行处理。
另外,移动终端并不限于将其当前地坐标修正为在计算出的存在可能区域中与当前地坐标(当前位置)最近的坐标的情况。移动终端也可以将其当前地坐标修正为计算出的存在可能区域的中心。
以上,根据本发明,能够实现不需要在室内设置特别的设备、能够高精度地推测自己的位置的位置推测装置及位置推测方法。
另外,在本实施方式中,设为位置推测装置10具备加速度传感器101、角速度传感器102、地磁传感器103、移动状态检测部104、终端姿势检测部105、位置推测部106、信息保存部107、偏倚模式信息保持部108、指示检测部109、偏在计算部110、位置修正部111和GUI显示部112,但并不限定于此。作为位置推测装置10的最小结构,只要具备图633所示的最小结构部10A就可以。这里,图633是表示有关本发明的位置推测装置的最小结构的功能块图。即,位置推测装置10的最小结构部10A只要具备位置推测部106、具有指示方向检测部1091及指示对象物检测部1092的指示检测部109、偏在计算部110和位置修正部111就可以。通过至少具备该最小结构部10A,不需要在室内设置特别的设备,能够高精度地推测自己的位置。
此外,以下这样的情况也包含在本发明中。
(1)上述装置及终端具体而言是由微处理器、ROM、RAM、硬盘单元、显示器单元、键盘、鼠标等构成的计算机系统。在上述RAM或硬盘单元中,存储有计算机程序。通过由上述微处理器按照上述计算机程序动作,各装置达到其功能。这里,计算机程序为了达到规定的功能,也可以将表示对计算机的指令的命令代码组合多个而构成。
(2)构成上述装置或终端的构成要素的一部分或全部也可以由1个系统LSI(Large Scale Integration:大规模集成电路)构成。系统LSI是将多个构成部分集成到1个芯片上而制造的超多功能LSI,具体而言,是包括微处理器、ROM、RAM等而构成的计算机系统。在上述RAM中,存储有计算机程序。通过由上述微处理器按照上述计算机程序动作,系统LSI达到其功能。例如,集成电路具备移动量检测部104、终端姿势检测部105、地磁噪声检测部106、坐标推测部107、地磁噪声模式管理部108、地磁噪声模式保存部109和坐标修正部110。
(3)构成上述装置或终端的构成要素的一部分或全部也可以由能够相对于装置或终端拆装的IC卡或单体的模组构成。上述IC卡或上述模组是由微处理器、ROM、RAM等构成的计算机系统。上述IC卡或上述模组也可以包括上述超多功能LSI。通过由微处理器按照计算机程序动作,上述IC卡或上述模组达到其功能。该IC卡或该模组也可以具有防篡改性。
(4)本发明也可以是上述所示的方法。此外,也可以是将这些方法通过计算机实现的计算机程序,也可以是由上述计算机程序构成的数字信号。
此外,本发明也可以是将上述计算机程序或上述数字信号记录到计算机可读取的记录介质、例如软盘、硬盘、CD-ROM、MO、DVD、DVD-ROM、DVD-RAM、BD(Blu-ray Disc)、半导体存储器等中的产品。此外,也可以是记录在这些记录介质中的上述数字信号。
此外,本发明也可以是将上述计算机程序或上述数字信号经由以电气通信线路、无线或有线通信线路、以因特网为代表的网络、数据广播等传送的系统。
此外,本发明也可以是具备微处理器和存储器的计算机系统,上述存储器存储有上述计算机程序,上述微处理器按照上述计算机程序动作。
此外,也可以通过将上述程序或上述数字信号记录到上述记录介质中并移送,或通过将上述程序或上述数字信号经由上述网络等移送,由独立的其他计算机系统实施。
(5)也可以将上述实施方式及上述变形例分别组合。
(实施方式H)
使用图634~图673对使用智能电话等的移动终端的家电接触操作的实施方式进行说明。
图640及图641是表示本实施方式的结构图及次序的图。
图640的7034、图641的7038表示具备近距离通信功能的家电。图640的7035、图641的7039是具备近距离通信功能和通用网络通信功能、通过安装各种各样的应用能够定制功能的智能电话等的移动终端。图640的7036、图641的7040是具备通用网络通信功能的服务器。
图647至图651是表示本实施方式的步骤的流程图。
使用上述流程图、图648,参照图634及图635,对本实施方式进行说明。
首先,用户在移动终端上启动家电接触应用。这里启动的应用既可以是占用画面整体的应用,也可以是不明示地占用画面的应用(S7100F)。
本步骤在图634中对应于画面7000和7002。画面7000表示应用的启动画面,另一方面,7002表示用户将移动终端拿在手中、站在家电的旁边的状况。轮询状态为关闭,即使接近家电也不通信。
此外同样,图635也表示对应于本步骤的内容。
图635的画面7004表示移动终端的启动画面。图635的家电接触应用在背景中动作,所以在画面的前面不明示地提示UI。此外,7003表示用户将移动终端拿在手中、想要接触在家电上的状况。
接着,移动终端将近距离通信功能启动,将轮询状态设定为开启。
这里,如果近距离通信功能已经启动,则也可以什么都不做。(S7100G)
本步骤在图634中对应于画面7001和7003,表示在画面7001中在象形区域通知了近距离通信。
在7003中,表示在用户拿着的移动终端中轮询状态成为开启、能够进行家电接触的状况。
接着,使用上述流程图、图647、图636、图637、图638及图639,对使用在智能电话等的移动终端中具备的图像识别功能的家电接触操作的辅助的实施方式进行说明。
首先,用户单击家电接触应用的启动图标。
此时,从节电的观点出发,近距离通信(NFC)的轮询状态成为关闭,即使靠近家电也不通信。(S7100A)
本步骤对应于图636的7010、7013、及图638的7020、7023。这里,7010、7020表示应用的启动画面。7013、7023表示用户将移动终端拿在手中、站在家电的旁边。轮询状态为关闭,即使靠近家电也不通信。
接着,移动终端将家电接触应用启动。
例如进行“请接触家电上”那样的显示,敦促接触,另一方面,移动终端将近距离通信(NFC)的轮询状态设为开启。
移动终端将照相机启动,通过用户的调整,将对象家电拍摄在像角中,另一方面,将图像识别功能启动。这里,也可以对用户提示用于选择家电的种类的按钮。
如果用户选择了某个家电、例如“微波炉”,则移动终端从服务器取得关于“微波炉”的信息、例如用于图像识别的的图案信息。(S7100B)
本步骤对应于图636的7011、7014、及图638的7021、7024中表示的内容。在7011、7012中,提示用于家电识别的UI,提示从照相机功能取得的图像。另一方面,在7014、7024中,表示用户拿着移动终端、将对象家电拍摄在照相机的像角中的状况。
并且,如果在照相机的像角中存在能够识别的家电(S7100C),则移动终端使用图像识别功能,识别由照相机拍摄的家电的固体,向用户提示。(S7100D)
本步骤对应于图636的7012、7015、及图638的7022、7025。在7012、7022中,通过识别由照相机捕捉的家电的固体、用四角形的框包围而提示,对用户通知家电的固体。在7015、7025中,表示关于对应的家电从服务器取得图像图案信息等的状况。
另一方面,在7015中,为了进一步提高辅助的精度,对用户请求使LED灯点亮。
在一定时间的期间中用户没有将家电用NFC接触的情况下,回到S7100C。
此外,在用户选择(单击)了由移动终端识别的家电的个体的情况下,移动终端根据家电的图案信息判断家电的机种,使用图像识别功能识别家电的形状、朝向,向用户提示近距离通信(NFC)的收发部。
这里,也可以向用户提示敦促家电的电源灯(LED)的点亮的消息,使家电的LED灯点亮,通过与LED灯的相对距离,以更高的精度提示近距离通信(NFC)收发部。
此外,也可以将移动终端的近距离通信的收发部的位置匹配于画面而提示。也可以通过提示将移动终端的收发部与家电的收发部连接的虚线或直线,向用户更直观而简单地敦促NFC接触。
本步骤对应于图637的7016、7018、及图639的7026、7031、以及7027、7032。
在画面7016中,将识别出的家电的个体的形状、朝向识别,向用户图示该家电的固体的近距离通信(NFC)的收发部。
7018表示用户将拿在手中的移动终端接触在家电上的状况。另一方面,在7031中,表示按照7022的指示、用户按下了对象家电的按钮的状况。7026表示照相机捕捉到家电的LED点亮,对LED进行识别的状况。
并且,在7027中,将识别出的家电的个体的形状、朝向识别,向用户图示该家电的固体的近距离通信(NFC)的收发部。此外,7032表示用户将拿在手中的移动终端接触在家电上的状况。
接着,使用流程图、图647、图648、图649、画面迁移图、图635、图637、图639、表示结构及顺序的图640、图641、表示移动终端持有的信息的图638、表示家电发送的信息的图643、表示作为实施近距离通信时的数据结构的一例而使用NDEF的情况的图644,对在接触了家电时、取得与接触的家电对应的家电操作应用的处理进行说明。
家电与移动终端的近距离通信的收发部接近到通信可能距离内(S7100H)。
本步骤在图640的顺序中,对应于家电接触应用启动(S7037A)、轮询(S7037B)、轮询应答(S7037C)。
此外,在图641的顺序中,同样对应于家电接触应用启动(S7041A)、轮询(S7041B)、轮询应答(S7041C)。
家电如果接受到近距离通信的通知,则将与家电有关的应用识别、以及与家电有关的信息一起构成为发送用数据。
图643表示在7043中向移动终端发送的数据的内容的一例。
这里,发送用数据采用NDEF形式。但是,并不需要一定是NDEF形式,也可以是其他格式。
应用识别如果例如NDEF形式,则在NDEF消息(Message)中作为NDEF记录(Record)而编码为识别应用的字符串或字节串。例如也可以是在JAVA(c)中使用的包名、与应用对应的URL或URI。
关于家电的信息也可以根据家电的种类而变化,也可以是由关于上述家电的应用使用的信息。
例如,也可以是家电的型号、制造号码、使用履历、故障状况,也可以是用于通过与上述家电有关的应用向制造源联系的邮件地址或主页的URL。
在图644的7044中表示NDEF形式下的数据结构。7044表示家电以NDEF消息形式发送的信息。7045以NDEF记录形式来表现应用识别。同样,7046、7047、7048、7049、7050及7051分别以NDEF记录形式来表现型号、制造号码、故障代码、使用履历、邮件地址、URL。
此外,7049使用履历的NDEF记录在内部中还包含NDEF记录,由7052表示以NDEF记录形式分别包含最终使用时刻、使用时间(S7100I)。
此外,本步骤在图640、图641的次序中对应于家电信息发送S7037D、S7041D。
接着,移动终端使用近距离通信接收家电构成的发送用数据,展开到终端内存储器中(S7100J)。
本步骤在图640、图641的次序中对应于家电信息发送S7037E、S7041E。
移动终端将所取得的家电的信息详细调查(S7100K)。
并且,首先检索关于家电的应用识别,将应用识别读出(S7100L)。
检查与应用识别对应的应用是否已经存在于终端中(S7100M)。
如果不存在应用,则向S7100O前进。如果存在应用,则向S7100R前进。
移动终端使用保持在终端中的服务器特定信息向服务器登陆。
图642表示在7042中移动终端持有的信息的一例。7042保持有服务器特定信息。
这里,服务器特定信息是服务器的URL、账户ID、账户口令。
此外,除了账户ID以外也还可以使用识别服务的服务ID、确定服务的提供者的提供商ID。
此外,如果原本已经实施登陆处理而从服务器取得了账户令牌,则也可以省略向服务器的登陆处理。(S71000)
本步骤对应于图641的次序的“用服务器特定信息的URL访问(S7041F)”、“用移动终端保持的服务器特定信息登陆(S7041G)”、“向服务器的连接通知(S7041H)”。
移动终端使用在登陆处理中取得的令牌,将家电的信息登录到服务器。
这里,也可以将移动终端的信息、例如型号、制造号码、位置信息与家电的信息一起发送(S7100P)。
本步骤对应于图641的次序的“将家电信息登录(S7041I)”。
服务器检索并准备与家电信息的应用识别对应的应用,移动终端开始应用的下载。
这里,在移动终端中,也可以将应用的下载的实施可否用弹出窗等通知,对用户敦促确认(S7100Q)。
本步骤对应于图641的次序的“将家电操作应用下载(S7041G)”。
移动终端将与应用识别对应的应用启动(S7100R)。
本步骤对应于图640及图641的次序的“家电应用启动(S7041K)”。
此外,分别对应于画面迁移图、图635、图637、图639中的7005、7017、7028。同样,提示与通过家电操作应用提示的家电对应的画面。此外,7009、7019、7033表示用户将移动终端拿在手中、接触在家电上、同时基于通过近距离通信取得的信息、取得为了该家电的信息的提示及操作而需要的数据、应用。
对于与应用识别对应的已启动的应用,移动终端通知来自家电的发送用数据中的、关于家电的信息(S7100S)。
移动终端将在图643的7043中表示的应用识别以外的关于家电的信息、型号、制造号码、故障代码、使用履历、邮件地址、URL向与应用识别对应的已启动的应用通知。
与应用识别对应的已启动的应用使用被通知的家电信息,进行与家电的种类对应的处理。例如,将型号、制造号码、故障状况与移动终端保持的位置信息一起作为家电的位置存储到移动终端中。
由此,移动终端能够知道目前接触的家电的位置(S7100T)。
接着,使用取得的家电信息、保持在移动终端中的位置信息、以及基于平面布置信息的区域列表,用家电和其位置信息构成。
关于制作、更新家电列表的步骤,使用流程图、图650、图651、表示移动终端持有的信息的图642、表示家电发送的信息的图643、表示基于平面布置信息的区域列表的图645、由家电和其位置信息构成的、由移动终端保持的家电列表图646、画面迁移图、图635、图637、及图639进行说明。
以下,沿着流程图、图650,按照顺序进行说明。
针对移动终端所接触的家电是否已被登录,移动终端保持有家电信息的型号及制造号码7043。
通过将家电列表7056的型号、制造号码比较来检查(S7100T)。
在家电列表中不存在相同的型号、制造号码的条目的情况下,向S7100W前进。
在家电列表中存在相同的型号、制造号码的条目的情况下,向S7100U前进。
移动终端将所接触的家电新追加到家电列表7056。
这里,移动终端也可以通过弹出显示等的功能、或画面的提示,对用户询问可否进行家电的追加登录(S7100W)。
本步骤对应于画面迁移图、图635、图637、图639的7006、7016、7029,分别表示关于家电的追加登录对用户进行询问的画面。
移动终端将与新登录的家电一起构成的位置信息登录到家电列表7056。
这里,所谓位置信息,是接触的时刻的移动终端持有的信息7042的位置信息和精度识别。
此外,这里移动终端也可以通过弹出显示等的功能或画面的提示来对用户询问可否进行家电的位置信息的登录(S7100X)。
本步骤对应于画面迁移图、图635、图637、图639的7007、7017、7030,分别表示关于家电的位置信息的登录对用户进行询问的画面。
在S7100T中,在家电列表中存在相同的型号、制造号码的条目的情况下,移动终端将与所接触的家电一起构成的位置信息、与登录在家电列表7056中的相同的型号、制造号码的位置信息比较。
这里,所谓位置信息,是接触的时刻的移动终端持有的信息7042的位置信息。
在位置信息不一致的情况下,向S7100V前进。在位置信息一致的情况下,向图651的S7100Y前进。
移动终端在家电列表7056的条目中将与位置信息建立对应而登录的精度识别与所接触的家电比较,如果所接触的家电的精度识别的精度更高,则将家电列表7056的条目的位置信息和精度识别更新。
这里,所谓位置信息,是接触的时刻的移动终端持有的信息7042的位置信息。
此外,这里,移动终端也可以通过弹出显示等的功能或画面的提示来对用户询问可否更新家电的位置信息(S7100V)。
移动终端将新登录的家电的位置信息与由移动终端保持的区域列表7055比较。
在图646的7055中表示区域列表的例子。
区域列表7055是根据移动终端预先取得的平面布置信息的3维地图计算出的列表。其条目由某个顶点(eX,eY,eZ)、以及相对于该顶点的进深(eD)、宽度(eW)、高度(eH)来定义。在由该条目定义的区域属于由用于识别是否包含其他条目的种类(G:组的意思(还包含条目),T:末端的意思(在内部中不包含条目))、和其他某些条目定义的区域的情况下,定义其所属区域(S7100Y)。
对于新登录的家电的坐标(X,Y,Z),分别将区域列表的区域的坐标(eX,eY,eZ)及进深(eD)、宽度(eW)、高度(eH)比较,在eX<X<eX+eD、且eY<Y<eY+eW、且eZ<Z<eZ+eH的情况下,将该区域识别名作为组名,作为所属组登录到家电列表中(S7100Z)。
在比较的区域列表的条目不是末端的情况下(在内部中包含其他区域的情况下),将处于区域列表中的其他未比较的条目比较。
在比较的区域列表的条目的区域是末端(在内部中不包含其他区域)的情况下,或者在已将全部的条目比较的情况下,使用家电信息、保持在移动终端中的位置信息、以及基于平面布置信息的区域列表制作并更新由家电和其位置信息构成的家电列表的处理结束。
通过使用上述本实施方式,能够带来以下的效果。
1)使用作为移动终端的功能的图像识别,能够辅助进行近距离通信时的用户的操作,能够使用户的操作变得更容易。
2)能够不迫使用户进行多余的按钮操作及单击,而简单地取得用于实施了家电接触的对象家电的操作的应用。
3)能够将家电接触的对象的家电的位置的信息与平面布置信息结合,使得具有组属性而进行分组,在使用家电操作应用时能够进行组单位下的操作。
(实施方式I)
使用图652~图663,对使用智能电话等的移动终端的、利用位置信息的家电操作的实施方式进行说明。
本实施方式是基于实施方式H的结构实现的,在实施方式H中记述的功能、构成要素、数据构造等在本实施方式也同样使用。
图652是表示本实施方式的结构的图。
图652的7150表示宅内。定义为能够与7157所示的无线LAN、宅内服务器进行通信的范围。
7151是服务器,存在于7150的外侧、宅外,存在于通用网络上。通过7153的无线通信装置与移动终端7154、7155通信。7153的无线通信装置既可以是所谓的3G线路,也可以是公众无线LAN。
此外,只要是其他的广域无线通信就能够采用。此外,当然即使是7150的框内也能够通信。
7152是在本实施方式中使用的数据库。
服务服务器7151在数据库7152中保持有平面布置信息、区域列表7055和对应于移动终端的家电列表7056。
7154、7155是在本实施方式中使用的移动终端。具有近距离无线通信的功能,能够与基准台7155、无触点充电器7159通信,此外,能够通过无线通信装置7153与服务服务器7151和无线LAN宅内服务器通信。
无线LAN-宅内服务器7157具有数据库7158。
宅内服务器7157在数据库7158中保持有平面布置信息、区域列表7055和对应于移动终端的家电列表7056。
图653是表示实现本实施方式时、特别是开始使用家电操作应用时的移动终端的画面的提示内容、以及包括俯视图的周边的家电与本实施方式的结构的关系的图。
7160表示实现了本实施方式的从住宅的上空的俯视图。7161表示在开始家电操作应用时接触的基准台,7162表示用于在宅内提供本实施方式的服务的无线LAN宅内服务器,7163表示无触点充电器,该无触点充电器为了充电而对移动终端供电,并且与无线LAN宅内服务器连接,与基准台同样由移动终端开始使用家电操作应用时接触。
7164表示用户将移动终端拿在手中、接触在基准台7161上的状况。
7165表示在本实施方式中作为操作对象的家电的门灯,7166表示门厅灯。此外,在本实施方式中,能够将家电分组而操作。7167表示住宅的2F部分,7168表示住宅的1F部分。在本实施方式中,能够将分别存在于1F、2F中的家电群以组来操作。
图654是表示实现本实施方式时、特别是家电操作应用的使用中的移动终端的画面的提示内容、以及包括俯视图的周边的家电与本实施方式的结构的关系的图。
另外,7160′~7168′与图653是同样的,所以省略说明。
图659到图663是表示本实施方式的步骤的流程图。
首先,使用图659的流程图,按照顺序对使用图653的基准台7161的家电操作应用开始的处理进行说明。
在移动终端中将家电操作应用启动。
这里启动的应用既可以是占用画面整体的应用,也可以是不明示地占用画面的应用(S7200A)。
接着,在移动终端中启动近距离通信功能,将轮询状态设定为开启。
这里,如果近距离通信功能已经启动,则也可以什么都不做(S7200B)。
设置在门厅或门等上、具备钥匙的功能的有近距离通信收发部的基准台7161与移动终端的近距离通信的收发部接近到通信可能距离内(S7200C)。
移动终端和基准台7161相互认证是合法的终端(终端认证)。
这里,基准台通过从移动终端供给的电力来动作(S7200D)。
另外,图650的7169表示实施了终端认证的状况。
如果终端认证成功,则向S7200E前进。
如果终端认证失败,则向用户通知该情况,应用结束。
如果在S7200D中终端认证成功,则移动终端确认用户是否被认证。这里,移动终端也可以提示为了用户认证而预先存储的用于使用户输入密码(passphrase)的画面,通过使用户输入密码来实施用户认证。
此外,或者也可以是,移动终端提示使用户输入用户预先登录的指纹信息等的生物体信息的画面,通过使用户输入生物体信息来实施用户认证。
图650的7170表示对用户要求用户认证的画面。
如果用户认证成功,则向S7200F前进。如果用户认证失败,则对用户通知该情况,应用结束。
移动终端对基准台7161进行用户认证完成通知和开锁请求(S7200F)。
基准台7161如果接受到认证完成通知,则确认自身的电路已被供电、宅内的无线LAN接入点的电源已接通、宅内的服务器已启动(S7200G)。
如果自身的电路被供电、宅内的无线LAN接入点的电源已接通,则向S7200I前进。如果自身的电路未被供电、或宅内的无线LAN接入点的电源没有接通,则向S7200H前进。
在自身的电路未被供电、或宅内的无线LAN接入点的电源没有接通的情况下,基准台7161向宅内的无线LAN接入点、宅内的服务器请求启动及向基准台7161的供电(S7200H)
如果向基准台7161的供电及宅内服务器的启动成功,则向S7200I前进。
如果失败,则向图662的S7203A前进。
基准台对宅内服务器相互认证后,将开锁许可的请求与加密而相互认证的移动终端的ID一起通知(S7200I)。
这里,所谓移动终端的ID,既可以是移动终端的制造号码,也可以是施加了一定的算法的散列函数的值。
宅内服务器确认发送来的移动终端的ID是已登录的,将开锁命令向基准台通知(S7200J)。
宅内服务器在数据库7158中保持有图658的开锁表7182。这里,参照开锁表7182,确认被通知的移动终端ID是否与能够将带有钥匙功能的基准台的ID的钥匙打开的可开锁移动终端ID一致。
当为未被许可开锁的移动终端ID的情况下,将该情况通过基准台向移动终端通知,将应用结束。这里,应用也可以将钥匙不匹配的情况提示给用户。
基准台实施开锁处理,并对移动终端进行宅内服务器的地址、基准台的位置信息和开锁的通知(S7200K)。
由此,用户能够使用基准台实现开锁、并完成使用宅内位置信息的家电操作应用的开始处理。
使用图661,对发生了区域列表更新的情况下的处理进行说明。
如果家电操作应用的开始处理完成,则移动终端将终端内的位置信息更新为基准台7161的位置的信息,从宅内服务器取得宅内的平面布置信息和区域列表、家电列表。这里,移动终端也可以根据平面布置信息将区域列表更新。
区域列表是移动终端根据所取得的平面布置信息的3维地图计算出的列表。其条目由某个顶点和相对于该顶点的进深、宽度、高度来定义,在由该条目定义的区域属于由用于识别是否包含其他条目的种类、以及其他某些条目定义的区域的情况下,定义其所属区域(S7202A)。
如果有区域地图的更新,则移动终端向宅内服务器通知更新后的区域列表,与宅内服务器将区域列表同步(S7202B)。
另一方面,关于在S7200H中没有向基准台的电源供给、宅内服务器也没有启动的情况下的处理,使用图663按照顺序说明。
基准台7161将不能自动开锁的情况和处于宅外的服务服务器7151的URL向移动终端通知。
这里,基准台7161也可以发送用于服务服务器7151的服务器认证的的证书(S7202A)。
移动终端用从基准台7161取得的URL连接到服务服务器7151,登陆系统。移动终端和服务服务器7151通过SSL通信连接。
这里,在服务器认证中也可以使用从基准台7161取得的证书。在系统的登陆中,也可以是通过用户认证而取得的密码。这里,在用户认证中使用生物体认证的情况下,也可以使用通过生物体认证取得的有限位的字母数字。此外,也可以为服务器登陆新设定密码。在此情况下,在登陆时对用户敦促密码的输入(S7202B)。
移动终端将移动终端的ID、基准台7161的ID和开锁请求加密,并对服务服务器7151发送。
这里,移动终端的ID和基准台的ID既可以是各个设备的制造号码,也可以是对制造号码使用了相同的算法的散列函数的值(S7202C)。
服务服务器7151确认所取得的移动终端的ID和基准台的ID是能够开锁的对(S7202D)。
服务服务器7151在数据库7152中保持有图655的开锁表7182。服务服务器7151在这里参照开锁表7182,确认带有钥匙功能的基准台的ID和可开锁移动终端ID的对是否与发送来的基准台的ID和移动终端的ID的对一致。
如果没有一致的对,则向S7202E前进。如果有一致的对,则向S7202G前进。
在S7202D中没有一致的对的情况下,服务服务器7151对移动终端返回不能开锁的通知(S7202E)。
移动终端在画面上提示不能开锁的消息(S7202F)。
在S7202D中存在一致的对的情况下,服务服务器7151对移动终端返回开锁许可通知(S7202G)。
如果接受到开锁通知,则移动终端转变为强制开锁模式,对基准台7161通知手动开锁请求(S7202H)。
如果接受到手动开锁请求,则基准台7161通过从移动终端的近距离通信取得的电力将锁控制变更为手动开锁(S7202I)。
如果用户将门或门厅的把手或门手柄转动,则基准台7161在门的把手或门厅的门手柄的旋转轴中具备发电器,用通过旋转而发电的电力将锁解除(S7202J)。
基准台7161对移动终端进行基准台的位置信息和开锁的通知(S7202K)
移动终端如果从基准台7161接受到基准台的位置信息和开锁的通知,则将终端内的位置信息更新为基准台的位置的信息,从服务服务器7151取得宅内的平面布置信息和区域列表7055、家电列表7056。作为处理,向图663、S7204A前进。
对于使用无触点充电器7163的移动终端上的家电操作应用开始处理,使用图660依次说明。
在移动终端中,将家电操作应用启动。
这里启动的应用既可以是占用画面整体的应用,也可以是不明示地占用画面的应用(S7201A)。
在移动终端中,将近距离通信功能启动,将轮询状态设定为开启。
这里,如果近距离通信功能已经启动,则也可以什么都不做(S7201B)。
具有近距离通信收发部、与宅内服务器通过网络连接的无触点充电器7163和移动终端的近距离通信的收发部接近到可通信距离内(S7201C)。
如果轮询状态为开启且在可通信距离内,则移动终端和无触点充电器7163首先相互认证是合法的终端(终端认证)(S7201D)。
如果终端认证失败,则对用户通知该情况,应用结束。如果成功,则向S7201E前进。
如果终端认证成功,移动终端确认是否认证了用户。这里,移动终端也可以提示为了用户认证而预先存储的用于使用户输入密码的画面,通过使用户输入密码来实施用户认证。
此外,或者也可以是,移动终端提示使用户输入用户预先登录的指纹信息等的生物体信息的画面,通过使用户输入生物体信息来实施用户认证(S7201E)。
如果用户认证失败,则向用户通知该情况,应用结束。如果成功,则向S7201F前进。
如果用户认证成功,则移动终端对无触点充电器7163进行用户认证完成通知(S7201F)。
如果接受到用户认证完成的通知,则无触点充电器7163对移动终端进行宅内服务器的地址和无触点充电器的位置信息的通知(S7201G)。
通过上述步骤,能够使用无触点充电器实施移动终端上的家电操作应用的开始处理。
使用流程图、图663、表示将家电操作应用使用中的UI画面与本实施方式的结构的关系的图654、表示分组的家电菜单的操作的画面迁移的图652、图653、表示平面布置图的信息、在各区域中在移动终端上使用家电操作应用的情况下的UI画面的图654,对使用本实施方式中的平面布置信息和位置信息的家电的分组及由移动终端进行的家电的提示方法进行说明。
在使用带有钥匙的基准台或无触点充电器实施家电操作应用的开始处理后,移动终端成为能够进行家电操作的状态。
在此状态下,如果将移动终端朝向宅内倾斜,则移动终端基于保持的家电位置数据,针对存在于家电列表中的家电,在画面上将与当前位置较近的家电的菜单配置在近侧、相反将较远的家电的菜单配置在里侧(同样,将右侧的置于右方,将左侧的置于左方)。
移动终端判断当前的位置信息属于区域列表7055中的哪个区域,向与该区域对应的组提示所属的家电的菜单。
此外,移动终端对于不仅将家电单独登录、而且还作为组登录的家电列表,作为一个菜单与其他家电同样地提示。
在被分组的菜单中,也可以使得一部分的家电作为组的外部公开登录家电而能够从组外参照(S7204A)。
这里,图654的7171提示对应于本步骤的画面,表示将移动终端从门灯的近侧朝向正面门厅倾斜时的画面。
但是,近侧的门灯7165′位于前面,处于建筑物的前面的门厅灯7166′位于门灯7165′的后面。
在图654的7171中,在门厅灯7166′的里侧,有包含在1F7168′中的家电群的组、和在其上部包含在2F7167′中的家电群的组。在图654的7171中,作为2F7167′的组的外部公开登录家电而登录了“楼层照明型号:FSA9999”。
S7204A的步骤在用户移动而移动终端的位置变化、或用户使拿持移动终端的角度变化的情况下反复实施。
在图654中表示在某个平面布置中、用户移动而移动终端的位置变化、或用户使拿持移动终端的角度变化的情况下的移动终端的画面的例子。平面布置图的7178是从上方俯视“松下家”的“1F”的状况的图。
将分别在3个位置的圈1的7183、圈2的7184、圈3的7185使用家电操作应用时的画面表示在7179、7180、7181中。
在圈1的7183中,从左手前方起,作为单独的家电而有电水壶(pot)、微波炉,在前方有起居室,所以在最前面提示电水壶的菜单,在其背面提示微波炉的菜单,在更里侧提示将起居室的家电分组的菜单。
如果移动到圈2的7184的位置,则移动终端当前所处的场所为起居室,所以能够直接操作起居室内的家电的菜单。
从右手的近前侧起,TV、空调这样家电单独存在,在左手侧有卧室,所以将卧室内的家电分组而提示。
接着,如果移动到圈3的7185的位置,则虽然在卧室中有空调,但存在于用户的背后,所以不作为移动终端的菜单提示。另一方面,提示左手侧的TV,并且因为此次移动到卧室中而从起居室离开,所以提示起居室的家电组的菜单。
这样,根据移动终端所处的位置,将提示在画面上的家电的菜单和分组的菜单动态地更新。
通过该机制,能够对用户实现更直观、容易使用的家电操作应用。
在用户单击(选择)了某个家电的菜单的情况下,移动终端将被用户单击的家电的菜单提示在画面的前面上(S7204B)
本步骤对应于图652的7172到7173的操作、图653的7175到7176的操作。
在图652中,将处于“门灯”的背后的“门厅灯”单击,显示到前面。在图653中,通过再将处于“门厅灯”的背后的“2F的家电”单击,在前面进行提示。
这里,如果(S7204B)用户操作家电菜单,则移动终端对对象的家电通知从用户指示的操作(S7204E)。
或者,如果用户在(S7204B)中双击菜单、或单击锁定按钮,则移动终端将对象的家电的操作应用启动,提示在整个面上(S7204C)。
本步骤对应于图652的7173到7174的操作、图653的7176到7177的操作。
在图652中,通过双击已经呈现在前面的“门厅灯”的菜单而锁定在前面,使用整个面提示对象家电的操作菜单。这里,在“门厅灯”的操作菜单中,与作为画面的一部分的菜单提示时相比,能够进行更详细的操作(调光功能)。
在图653中,通过双击已经呈现在前面上的“2F的家电”的菜单而锁定在前面,使用整个面提示关于家电组的操作菜单。这里,不仅是外部公开登录家电,还向用户提供“其他家电”按钮等,将存在于该组中的其他家电从菜单调出。
通过双击提示在整个面上的家电操作菜单、或将“开锁(UnLock)”按钮或移动终端所具备的“返回”按钮按下,将其整个画面占有、整面锁定解除。
这里,对于有关向整个画面的转变的操作,也可以不是双击,而是菜单的长按、或基于急速的加速度检测的触发事件(姿势)、其他软件或硬件的专用按钮或兼用按钮。
通过实施上述步骤,能够实现使用平面布置信息和位置信息的家电的分组及更直观易懂的家电的菜单提示方法。由此,能够实现对于用户而言更容易使用的家电操作应用。
(实施方式J)
在本实施方式中,主要对处于宅内的家电设备等的用户的周边设备因故障或状态的变化等而想要向用户通知信息的情况、特别是提供不使用显示器等的昂贵的模组而便宜地通知的方法的方式进行说明。
空调、电视机等几乎全部的家电制品使用LED(Light Emitting Diode:发光二极管)对用户提供某些信息。
例如在LED发光为绿色的情况下正常动作、在红色的闪烁的情况下为异常这样的信息向用户传递。但是,在此情况下,用户需要预先阅读说明书等、由用户自身观察LED的发光状态来判断。
这里,公开通过使用用户持有的智能电话等的便携终端感知LED的发光图案(模式)、来取得周边设备发送的信息的方法。
图664是表示在本实施方式中公开的基于光通信的通信的状况的例子。
如图664中所示,将便携终端的照相机朝向电视机的LED。此时,电视机将想要发送的信息调制为LED的发光图案而输出。便携终端利用照相机的摄像元件取得LED的闪烁等的发光图案并将信号解调,由此能够取出被调制的信息。通过将便携终端所取出的信息向用户通知,用户与用眼睛确认LED的状态相比,能够从LED取得更多的信息。在感知中主要使用照相机,但也可以使用光电二极管等能够用于光通信的接收的二极管。
图665是本实施方式的便携终端的结构。
如图665所示,本实施例的便携终端具有照相机6301、加速度传感器6032、角速度传感器6303、地磁传感器6304、LED闪烁模式(pattern)解析部6305、终端姿势及终端移动量检测部6306、光通信信息取得部6307、周边设备缩减部6308、周边设备信息保存部6309、位置信息计算部6310、服务器协同通信部6311和UI显示部6312。
周边设备信息保存部6309是处于宅内的家电设备等的信息,包括设备的ID和其被设置的位置信息。此外,也可以具有位置信息的精度识别符、设备的属性、设置朝向等的信息。
角速度传感器和地磁传感器使用双方用于便携终端的姿势信息计算,但也可以通过其中某一个来实现。另外,在本实施例中做成这样的结构,但并不需要一定是这样的结构。例如,在不进行服务器协同的情况下,也可以将相当于服务器侧的信息预先保存在终端中等、改变结构。也可以代替照相机6301而具有光电二极管等专用的受光部。
如图666所示,空调及电视机等的周边设备使用可视光通信等的作为通过使光的发光图案变化来通信信息的技术的光通信技术,发送自身的信息。用户使用便携终端的照相机取得基于光通信的信息。例如在需要进行空调的过滤器清扫的情况下,所取得的数据为使用周边设备的型号等的ID信息和表示过滤器清扫的必要性的错误代码。便携终端可以将这些信息原样对用户显示,但根据需要通过向云上的服务器(在此情况下设想了空调的制造商等所管理的顾客支持用的服务器)访问、下载对应的更丰富的GUI、应用、向支持站点的访问信息等并提示给用户,实现更容易理解的用户界面。
图667是周边设备侧通过光通信发送的信息的例子。根据需要,作为发送信息,不仅包含设备的ID和错误代码,也可以包含设备名、预先设定的设备的设置位置信息等。如果有这些信息,则能够用于向用户提示的信息、云上的检索、便携终端具有的位置信息的修正。特别是,能够取得周边设备的LED的光通信输出的信息的位置被限定,所以在便携终端取得了该信息的时刻成为被限定的位置,所以在便携终端没有成为该位置的情况下能够修正。
图668是设想了宅内的地图上的用户位置和周边设备的基于光通信的通信的例子。这里,根据持有便携终端的用户的位置,能够将预计通过光通信取得信息的周边设备缩减。例如,在坐标X0,Y0,Z0的位置,在用户的行进方向上有空调、电视机、录像机,所以如便携终端的画面例6330那样,显示电视机、录像机、空调、考虑到其他可能性的“其他”的菜单。然后,用户移动,在处于X1,Y1,Z1的情况下,只有空调成为对象,所以如便携终端的画面例6331那样,菜单中出现空调和其他。
进而,在处于坐标X5,Y5,Z5的情况下,如便携终端的画面例6332那样显示电视机和其他。这样,能够根据用户的位置和行进方向缩减周边设备,能够进行用户容易理解的信息提示,而且由于在通过光通信取得信息时设备的候选预先被缩减,所以能够迅速地补充信息,所以有能够对用户迅速地进行信息提示、而且能够包含追加的信息的优点。
以下说明处理的流程。从图669开始处理流程。
在步骤S6301a中,便携终端根据由加速度传感器、地磁传感器、角速度传感器得到的信息,测量终端的移动量,推测自终端的位置,作为(X,Y,Z)坐标保持。
在步骤S6301b中,便携终端从终端的移动方向的行进方向侧检测用户的行进方向。
在步骤S6301c中,便携终端针对用户终端的光通信用应用显示UI,以将便携终端的照相机朝向启动设备(此时,当为具有光通信用二极管等作为光通信用接收功能的光通信模组的便携终端的情况下,进行UI显示以将其朝向启动设备)。
在步骤S6301d中,便携终端根据终端的当前位置和终端的姿势信息参照周边设备的位置信息列表,取得用户的附近的设备的列表。
在步骤S6301e中,便携终端对用户显示从设备的列表和其以外的设备中选择的画面。
在步骤S6301f中,确认是否按钮未被按下、终端的姿势变为照相机接近水平方向(传感器检测)。
在“是”的情况下向步骤S6301g前进,便携终端对用户显示UI以将便携终端朝向对象设备。
在步骤S6301h中,便携终端将照相机的光通信信息取得功能启动,向F6301前进。
在步骤S6301f中为“否”的情况下向步骤S6301i前进,确认选择其他的按钮是否被按下。在“是”的情况下向步骤S6301g前进。
在“否”的情况下向步骤步骤S6301j前进,显示:为了取得设备信息、光通信的发光部的位置信息而需要将照相机朝向的最长时间,向步骤S6301h前进。
将步骤S6301d中的使用便携终端的位置信息的周边设备的缩减的结果确定为1个,通过步骤S6301f,用户采取将便携终端靠近作为对象的周边设备的动作,由此即使用户不进行按下按钮等麻烦的操作,也能够开始通过光通信的信息取得。
对图670进行说明。
从F6301起,在步骤S6311a中,确认便携终端是否取得了对象设备的确定(包括预先知道的情况)和对象设备的输出所需要的信息(错误代码等)?(如果在取得中取得可向用户显示的信息,则也可以依次显示)。
在“是”的情况下向步骤S6311b前进,便携终端对云上的服务器发送对象设备的ID和取得信息,将对应的用户提示信息下载(云上的服务器对应于用户登录的站点、或根据设备ID判断的制造商支持站点等)。
在步骤S6311c中,在便携终端取得的用户提示信息是URL的情况下向网络站点访问。在用户提示信息是文本、图像、应用等的情况下将其显示。
在步骤S6311d中,在对象设备需要故障、过滤器更换等应对的情况下,便携终端对用户提示应对方法。
在步骤S6311e中,确认用户是否选择部件订购。
在“是”的情况下向步骤S6311f前进,便携终端确认是否将当前时刻的用户作为使用者而已认证。在“是”的情况下向步骤S6311g前进,向F6302前进。
在步骤S6311a中为“否”的情况下向步骤S6311a返回。
在步骤S6311e中为“否”的情况下向F6302前进。
在步骤S6311f中为“否”的情况下向步骤S6311h前进,对用户显示UI,以将便携终端为了NFC通信而接触在卡(信用卡等可用于收费的卡)上,向步骤S6311g前进。
这样,便携终端基于通过光通信取得的信息,取得支持信息,进而,进行便携终端的收费所需要的用户认证处理,由此用户不需要进行使用便携终端的处理以外的麻烦的作业,方便性提高,而且也不发生部件的订购等中的输入错误的问题。
接着,对图671进行说明。
从F6302起,在步骤S6321a中,确认用户的选择的结果是请求专业人员的支持、还是用户自己进行作业。
在用户作业的情况下向F6303前进。
在请求支持的情况下,向步骤S6321b前进,便携终端通过无线通信对周边设备询问是否需要对故障或消耗品更换等的支持。
在步骤S6321c中,周边设备接受询问,在有消耗品的更换时期快到的设备的情况下,将设备ID和部件ID向便携终端通知。
在步骤S6321d中,便携终端向用户确认是否将从其他设备通知的其他设备的部件更换,关于用户回答(输入)了“是”的支持内容,检索能够提供需要的全部的支持和部件的用户家(支持对象设备)周边的支持中心。
在步骤S6321e中便携终端显示地图,显示作为检索的结果对象的前五位的用户的使用履历、用户家周边的支持中心的位置和过去的交货期履历。
在步骤S6321f中便携终端接受用户的选择,向作为对象的支持中心委托(设备列表、消耗品、使用履历)。
在步骤S6321g中,确认支持的担当者是否到达。
在“是”的情况下向F6304前进。在“否”的情况下向步骤S6321g返回。
接着,对图672进行说明。
从F6303起,在步骤S6331a中,便携终端显示作业次序,应用结束。
在步骤S6331b中,确认部件是否到达用户。
在“是”的情况下向步骤S6331c前进,如果在部件箱上有RFID,则用便携终端接触。
在步骤S6331d中,便携终端显示作业次序和对象设备名。
在步骤S6331e中,便携终端在过程中能够通过光通信确认中途的对象设备的状态的情况下向用户通知,成为照相机模式(在有光通信模组的情况下将其启动)。
在步骤S6331f中,对象设备在作业结束后,通过LED闪烁1分钟,发送结束的状态并结束。
在“否”的情况下向步骤S6331b返回。
接着,说明图673。
从F6304起,在步骤S6341a中,在支持的对象设备所对应的红外线遥控器代码中有“支持用输出开始”的情况下,从支持担当者拥有的红外线发送装置发行开始支持用输出的遥控器代码。在支持用输出中,发送更细致的信息。此时,闪烁Hz也可以变更为最大。
在步骤S6341b中,支持担当者在支持对象设备上有信息输出按钮的情况下按下按钮。
在步骤S6341c中,改变模式以使对象设备的闪烁周期最大,输出支持用的信息(使用履历、故障信息等)。
在步骤S6341d中,支持担当者在完成修理、更换的应对后,对用户传达完成。
在步骤S6341e中,从支持担当者的便携终端向云上的服务器通知应对完成和其内容,获得下次维护为止的期间的予测信息,向用户通知,向F6305前进。
这里,使用图674对同时实现用户容易理解的闪烁模式和光通信的方法进行说明。
在光通信中,在调制时使发送的信息变多的情况下,设想到使频率变高。例如在以比30Hz高的频率发送的情况下,用户的眼睛难以判断是意味着什么的闪烁。因此,将重复3次120ms点亮、120ms灭灯这样的用户能够辨识的程度的闪烁进行一定时间,然后进行光通信用的较高的频率下的发送。
由此,能够对用户传递正在基于光通信的信息发送中,而且基于光通信的数据通信也能够用相同的LED进行。另外,光通信部分也可以重复任意的次数(例如:5次)。由此,针对信息取得错误的恢复变快。
接着,对图675进行说明。
从F6305起,在步骤S6351a中,宅内用户周边设备进行例如5Hz以下的ON/OFF等比较容易由用户理解的闪烁(120ms点亮、120ms灭灯×3)。另外,由此对用户传递异常。也可以不包含信息。
在步骤S6351b中,在接下来的300ms的期间中(通过可视光通信的调制),调制为接近于接收侧的终端能够接收的最高的频率的频率(例如,由照相机接收时30Hz,由光通信专用二极管等接收时1000Hz)。
在步骤S6351c中,接收侧的便携终端将例如以30Hz以上的频率调制的光接收并解析、将用其以下的频率调制的东西废弃,由此取出需要的信息。
在步骤S6351d中,便携终端利用取出的信息对用户进行需要的UI显示,向F6306前进。
这里,使用图676,对使用NFC和光通信的信息交换方法进行说明。对智能便座等而言,对使用NFC将便携终端靠近有抵触的用户也较多。在此情况下,仅最初一次进行通过NFC的信息交换,然后通过光通信利用便携终端取得信息这样的处理是有效的。在光通信中,与NFC相比即使保持距离也能够进行信息的取得。
在本实施方式中,最初利用NFC从便携终端预先向智能便座写入:
1)便携终端唯一的ID,
2)下次开始进行通过光通信的错误代码发送的识别符
3)随机数
4)便携终端的当前位置(XYZ)。
另外,此时也可以写入便携终端能够接收的性能(100Hz等)、改变智能便座的闪烁模式。
在通过光通信发送的信息中,用户持有将相当于使用次数、时间段、节电设定等的履历信息的信息不想设为谁都能阅读的信息这样的希望。通过NFC,将在加密中需要的随机数及便携终端的ID更换,通过基于该信息加密而添加光通信中的发送数据,具有只有用户持有的便携终端才能阅览信息的效果。
图677是将来自智能便座的信息发送时的消息的例子和画面显示信息。在画面显示中,加密的部分带有钥匙标记,只要用户不按下要显示的按钮就不会显示。此时,也可以利用便携终端自身具有的用户认证功能进一步锁定。例如也能够通过再输入口令来进行画面迁移的设定。由此,能够防止本人以外的用户使用便携终端取得信息。
接着,说明图678。
从F6306起,在步骤S6361a中,用户将便携终端接触在智能便座的RFID标签上。从便携终端写入1)便携终端的唯一的ID、2)随机数、3)便携终端的当前位置(XYZ)。另外,由此,第2次以后也可以不将便携终端为了NFC通信而接触在智能便座上。
在步骤S6361b中,智能便座根据故障发生或用户按下光通信用按钮等的触发事件,开始基于LED的光通信用的闪烁。
在步骤S6361c中,智能便座将调制到闪烁中的信息中的、使用次数、日时等的信息使用从便携终端获得的ID和随机数加密而发送信息。
在步骤S6361d中,用户将便携终端靠近智能便座。取得数据,将加密部分通过用NFC交换的信息解密。
在步骤S6361e中,便携终端将没有被加密的部分显示,显示询问是否将没有被加密的部分显示的按钮,向F6307前进。
图679在智能便座与便携终端的通过NFC的通信时,便携终端从智能便座得到信息,然后,第二次以后的通信基于该信息利用光通信。
预先接触在智能便座的NFC标签上,从智能便座取得1)加密密钥、2)设备ID等智能便座的信息,输出表示对应于光通信的识别符。通过该信息,便携终端理解为作为对象的智能便座今后能够通过光通信发送信息、取得信息。此外可知,在被加密的情况下,能够使用交换的加密密钥进行解密。
加密密钥也可以是预先限制通过NFC的接触的次数、以便今后不通过NFC发行加密密钥等的处理。在此情况下,可以设为通过复位键使得没有数量的限制,但履历信息也消除的处理,由此能够防止信息的泄漏。
此外,在表示对应于光通信的识别符是ON的情况下,便携终端基于位置信息将智能便座添加到将能够进行光通信的周边设备缩减时的对象。
此外,在信息中不包含表示对应于光通信的识别符的情况下,通过使用设备ID对云上的服务器(管理家电等的设备信息的服务器)询问,取得光通信的对应/非对应的信息。
接着,说明图680。从F6307起,在步骤S6371a中,用户将便携终端接触在智能便座的RFIF标签上。从智能便座获得1)ID、2)位置信息(X,Y,Z)、3)加密密钥(在智能便座侧没有写入信息的情况下)。
在步骤S6371b中,智能便座根据发生故障、或用户按下光通信用按钮等的触发事件,开始通过LED的光通信用的闪烁。
在步骤S6371c中,智能便座将调制为LED的闪烁的信息中的、使用次数、日时等的履历信息使用保存在智能便座的内部中的加密密钥加密,将信息发送。
在步骤S6371d中,用户将便携终端靠近智能便座而取得数据,将加密部分通过用NFC交换的信息解密。
在步骤S6371e中,便携终端将没有被加密的部分显示,将询问是否显示加密的部分的按钮显示而询问,向F6308前进。
在图681中,记载将设备ID分割而发送、减少用于在取得错误代码等的重要的信息之前接收设备ID的时间上的损失的方法。在本实施例中,在便携终端根据位置信息确定了作为对象的周边设备的情况下,不需要取得设备ID。因此,如图681所示,取得1次量的代码后,确定出了代码和设备,所以能够更快地取得需要的信息,能够向用户提示。
在未能确定设备的情况下,通过取得3次量的信息,需要的信息齐备。
在发送分割后的设备ID时,有对信息的开头赋予表示是划分的识别符等的方法。
接着,说明图682。
从F6308起,在步骤S6381a中,在智能便座将信息通过LED的闪烁发送时,不将故障代码等的重要的信息分割,而将其他信息细致地分割并发送。
在步骤S6381b中,便携终端基于自己的位置信息,将对象设备缩减。例如,确认便携终端的当前位置的周边位置的周边设备是否缩减为智能便座一个。
在“是”的情况下向步骤S6381c前进,将设备与故障代码比较,确认是否是智能便座中可能出现的代码。
在“是”的情况下向F6309前进。由此,也可以不取得设备的ID,相应地能够高速地向用户显示。此外,在步骤S6381b或步骤S6381c中为“否”的情况下,在步骤S6381d中,使用户将便携终端靠近,直到能够取得需要的信息(包括设备ID),向F6309前进。
接着,对图683进行说明。
从F6309起,在步骤S6391a中,便携终端对云上的服务器发送对象设备的ID和取得信息,将对应的用户提示信息下载(云上的服务器对应于用户登录的支持站点、或通过设备ID判断的制造商支持站点等)。
在步骤S6391b中,在便携终端取得的用户提示信息是URL的情况下向网络站点访问,在用户提示信息是文本、图像、应用等的情况下将其显示。
在步骤S6391c中,在对象设备需要故障、过滤器更换等应对的情况下,便携终端向用户提示应对方法,向F6310前进。
在图684中,对在便携终端通过光通信取得了对象设备的位置信息的情况下、基于该位置信息、将在便携终端内部推测的自身的位置信息修正的方法进行说明。
如图所示,能够接收对象设备的通过光通信的发送信息的范围为从空调输出的以一定角度以放射线状展开的区域。该区域依存于LED的壳体内的位置及指向性,所以按机种而不同。
因此,通过服务器等,将输出的角度信息作为用于计算存在可能区域的信息来管理,按照来自便携终端的请求发送该信息。
根据角度信息定义存在可能区域,在该区域内没有便携终端的情况下,与接收到光通信的信息的情况矛盾,所以将便携终端的当前位置信息修正为存在可能区域内。
接着,对图685进行说明。
从F6310起,在步骤S6400a中,便携终端确认是否取得了能够确定对象设备的信息和对象设备的位置信息、以及设置朝向信息。
在“是”的情况下向步骤S6400b前进,便携终端对云上的服务器发送对象设备的ID信息(也可以只是型号),确定对象设备的形状和发光场所。
在步骤S6400c中,便携终端根据发光场所和对象设备的位置,确定接收到发光的时刻的存在可能区域。
在步骤S6400d中,在便携终端内推测的当前位置不在存在可能区域中的情况下,修正为存在可能区域内的最近的地方。另外,如果修正目标的位置在存在可能区域内,则既可以是对象周边设备的正面等,也可以预先决定或学习性地选择。
在步骤S6400e中,按照接收到的信息,确认对于对象设备的状态的对应是否完成,在“是”的情况下结束。
在步骤S6400a中为“否”的情况下向步骤S6400a返回。
在步骤S6400e中为“否”的情况下向F6311前进。
这样,通过由家电设备等的周边设备用可视光通信等的光通信技术发送信息,通过使用用户所持的智能电话等的便携终端感知LED的发光图案,能够取得周边设备发送的信息。特别是,在处于宅内的家电设备等的用户的周边设备根据故障或状态的变化等而想要向用户通知信息的情况下,特别是能够不使用显示器等的昂贵的模组而便宜地通知信息,能够对用户进行利用充分丰富的UI的信息提示。
另外,使用图686及图687,说明根据家电能够获得的人的位置信息进一步修正便携终端的位置信息的方法。
空调8001具有能够检测人8023的位置(方向、距离)的光传感器8009,所以能够检测人相对于空调的相对的位置信息。
使用能够改变方向的光传感器8010或CCD传感器8011得到的人的相对位置信息8002被发送至空调的风的方向的控制单元8004及风量控制单元8020传送,实现适当的室内温度,并且通过通信单元8000经由网络8019并通过无线通信单元8018向便携终端8022传送人的位置信息8014。具体而言,空调等的家电的位置信息8015和人相对于家电的相对的位置信息8016、具体而言将人相对于家电的θ等的方向数据8013、距离数据8013a传送至便携终端8022。
便携终端8022具有3轴的加速度传感器及3轴的角速度传感器,所以能够检测1.便携终端8022处于人8023的衣服之中、还是2.拿在人的手中、还是3.与人离开。
在1或2的情况下,由于能够判断出人与便携电话的距离很近,所以能够使用来自家电的位置数据8014得到便携电话的第2位置信息。
在使用GPS或自主导航用的9轴的陀螺仪传感器、地磁传感器、加速度传感器的位置检测单元进行位置检测的便携电话的情况下,虽然拥有第1位置信息,但如果进入到自家内,则GPS的电波变弱或位置检测单元的误差被累积,所以有精度下降的问题。
在本发明中,在家电的位置信息8015中,在家电或餐馆等的在具有ID的物件的标签中没有带有实际的位置信息的情况下,也带有设备ID、物件ID、或地图上的识别信息(日本MAP-ID等),对应于该ID的位置信息被发送到服务器并记录在服务器的存储器中,所以便携终端8022通过将上述ID向服务器发送,能够得到空调等的固定的家电或餐馆等的物件的现实的纬度、经度等的位置信息。也可以在通信终端侧预先持有与ID对应的设备或物件的物理的位置信息。
使用该位置信息和家电、物件、建筑物等与人的相对位置信息8016能够得到通信终端侧的现实的位置信息。在此情况下,在空调等的家电或餐馆等的物件中,根据测量了位置的装置或环境而标签的位置信息的精度不同。
因此,在标签中记录有位置信息的精度信息。只要家电的位置精度信息比便携终端的精度信息精度高,则将便携终端的位置信息修正,如果精度比便携终端的精度低则不修正就可以。
这样,通过得到便携终端的物理的位置信息,能够将便携终端的物理的位置信息修正。精度最高的是,如果使便携终端的NFC读取器向家电或物件的NFC标签接近或接触,则相互的距离为1~2cm较接近,所以能够更能获得标签的原来的精度的位置信息。
在图686中,作为家电而使用空调说明了本发明的效果,但并不限定于空调。如图687所示,空调8001的动作已在图686中说明。在TV8037的情况下,预想今后会增加在主体上搭载检测人的存在的人传感器8036的情况。一个动作是,在节电方面,如果在TV前面没有人,则将电源断开或切换为低耗电模式。通过这样,实现耗电的降低。该方式被广泛使用的可能性较高。
另一个动作是,在3DTV的情况下,检测人的眼睛等的方向、角度、距离的位置,控制显示器的3D信息,以使得在该方向上观看时能够得到最优的3D影像。
不论怎样,都能够得到来自TV的人传感器8036的人与TV的相对位置信息8033,所以只要知道TV的位置信息,就能够得到家中的人的位置信息。
为了得到TV的位置信息,也可以是,在TV上搭载NFC标签,使其与具有位置信息检测功能的便携终端进行近距离通信,由此TV持有TV的位置信息。该位置信息也可以与TV的设备ID链接而在服务器侧持有。
这样,将人的相对位置信息8033和家电的位置信息8034经由家中的网络8031、经由无线LAN的接入点等的无线收发设备的无线网络8030,向人持有的智能电话等的便携终端发送。在下个步骤中,便携终端8035得到位置信息8032,将自己的物理的位置信息修正。
由此,有即使在GPS到不了的家中也能够将自己的位置修正的效果。
微波炉8042a、电冰箱8050、电饭锅8051、洗衣机8050搭载有开闭的门。因而,能够知道门的开闭数据8042等的表示人直接操作了设备的操作数据8041。有该操作这表示在设备前面有人。即可以考虑作为人传感器的一种来利用。
将该操作数据8041与家电的位置信息8033一起经由网络8031a、经由无线LAN的接入点等的无线网络8030a向智能电话等的便携终端8035a发送。
使用上述方法,便携终端8035a能够判别出人持有便携终端的情况,所以假如在持有的情况下,能够在下个步骤中根据操作数据8041检测出人处于家电前面的可能性较高。因此,能够根据家电的位置信息8033得到便携终端的位置信息。
根据表示位置信息的精度的精度识别信息,在位置信息8033的精度比便携终端的位置信息的精度高的情况下,将位置信息修正。通过该修正,能够进行以往困难的、家庭内的位置信息的高精度的检测。在此情况下,由于各家电具有NFC功能,所以有能够得到较高的精度的家电的位置信息的效果。
在NFC的标签的存储器部中也可以记录物理上的位置信息,也可以将链接到设备ID上的位置信息记录到服务器中,但在上述存储器部中,记录有能够识别是否能够将位置信息记录到服务器中的识别信息。
因此,具有便携终端能够即时地检测出家电的位置信息存在于服务器中的效果。该方式省略了说明,但当然能够用在上述全部的实施例的位置信息的修正等中。将来,在家电与服务器在网络中协同的情况下,成为很有效的发明技术。
另外,在本发明的实施的便携终端中,无线通信终端也能够从外部终端使用近距离无线通信单元取得位置信息。无线通信终端一般在室内等不能取得正确的位置信息,所以例如在设置在特定场所的外部终端中记录位置信息,通过由无线通信终端与该外部终端通过近距离无线通信单元取得位置信息,在室内也能够取得无线通信终端的位置信息。
进而,外部终端即使是将外部通信终端的识别信息向无线通信终端发的结构,也能够得到同样的效果。进而,也可以做成外部终端将外部通信终端的识别信息向无线通信终端发送、无线通信终端对服务器发送该识别信息、由服务器将识别信息变换为位置信息、无线通信终端接收位置信息的结构。
通过该结构,服务器能够向无线通信终端发送与当前的无线通信终端的位置信息关联的信息。此外,也可以是,在无线通信终端向服务器发送的信息中,发送基于无线通信终端的操作履历或检索履历等的嗜好信息,在服务器向无线通信终端发送的信息中,包含当前的无线通信终端的位置信息、和与嗜好信息匹配的信息。通过添加无线通信终端的嗜好信息,能够发送对无线通信终端操作者更有益的信息。
此外,无线通信终端也可以做成使用具备近距离无线通信单元的摄像装置、近距离无线通信单元以及无线LAN等的高速无线通信,将记录在摄像装置中的照片数据通过无线通信终端的通信单元向因特网服务发送的结构。
即,摄像元件将无线LAN等的高速无线通信的连接信息、记录在摄像装置中的想要上载的照片、用于识别上载的因特网服务的信息、以及该因特网服务的登陆信息向无线通信终端发送。
作为具体的次序,首先,通过近距离无线通信单元,摄像装置向无线通信终端发送无线LAN等的高速无线通信的连接开始信息。该信息既可以仅是开始被规格化的相互连接处理的动作信息,也可以是用于连接的频道信息或加密密钥信息等。摄像装置向无线通信终端发送想要上载的照片、识别上载的因特网服务的信息、以及该因特网服务的ID、口令等的登陆信息。
无线通信终端基于这些信息向因特网服务访问,将想要上载的照片发送。或者也可以是,仅将想要上载的照片的缩略图信息向无线通信终端发送作为第一步骤,在由无线通信终端选择最终的想要发送的照片后,向因特网服务开始上载。
此外,识别上载的因特网服务的信息和该因特网服务的ID、口令等的登陆信息也可以使用近距离无线通信单元发送。
在摄像装置中预先设定想要上载的照片或想要上载的因特网服务,以近距离无线通信单元的通信为契机开始上载,因此能够立即进行照片的上载。此外,由于从摄像装置向因特网的连接手段较多,所以无线通信终端能够在更多种多样的场所中将照片向因特网服务上载。
以上,对于本发明,举各实施方式为例详细地进行了说明,但上述说明在所有的方面都不过是本发明的例示,并不是要限定其范围。在不脱离本发明的范围内能够对各实施方式进行各种改良或变形。
即,例如本发明不仅能够作为装置(系统)实现,也可以作为以构成该装置的处理单元为步骤的方法实现,或作为使计算机执行这些步骤的程序实现,或作为记录有该程序的计算机可读取的CD-ROM等的记录介质实现,或作为表示该程序的信息、数据或信号等实现。并且,这些程序、信息、数据及信号也可以经由因特网等的网络分发。
此外,在不脱离本发明的主旨的范围内对上述实施方式及变形例实施本领域的技术人员想到的各种变形而得到的形态、将实施方式及变形例的构成要素任意地组合而得到的其他形态也包含在本发明中。
此外,通过本发明,能够将向服务器保存的图像等的信息通过简单的步骤用电视机等的接收装置接收,在将电视机或PC等的显示装置通过因特网取得信息的操作简略化的系统全部中是有效的。此外,有关本发明的通信装置还能够适用于具备保存有识别信息及虚拟机用程序的RF-ID的所有的设备、例如照相机等的电子设备、电饭锅或电冰箱等的家电设备、牙刷等的日用品。
工业实用性
有关本发明的通信装置作为具有动作传感器、通过取得通信装置的指向方向、简单地提供家电设备的扩展用户界面的通信装置具有实用性。
标号说明
100 通信系统
101、1201、6002 终端设备
102、1202 便携设备
103 因特网
104 服务器设备
105 控制器
106 主存储器
107 近距离无线通信部
108、109 天线
110 显示部
111 按键
201 近距离无线通信部
202 近距离无线检测部
203 设备信息取得部
204 外部通信部
205 传感器部
206 位置感知部
207 方向感知部
208 指向空间取得部
209 设备判断部
210 移动判断部
211 遥控器信息设定部
212 遥控器信息取得部
213 存储部
214 显示信息决定部
215 操作信息发送部
216 操作履历取得部
217 声音传感器
219 通信天线
220 接收部
221 发送部
222 通信控制部
223 加速度传感器
224 GPS传感器
225 角速度传感器
226 方位传感器
227 绝对位置取得部
228 相对位置取得部
229 位置设定部
301 台数判断部
302 设备方向计算部
303 差计算部
304、306、309 设备决定部
305 空间信息存储部
307 设备候选显示部
308 用户输入取得部
310 俯仰角取得部
311 设备俯仰角存储部
1203 2维码

Claims (14)

1.一种无线通信终端,具有:
位置感知部,取得上述无线通信终端的位置信息;
设备信息取得部,通过近距离无线通信,从作为无线通信终端控制的对象的设备即控制对象设备,取得能够识别上述控制对象设备的设备信息;
请求生成部,根据上述设备信息请求上述控制对象设备的操作信息;
外部通信部,将上述请求向上述控制对象设备或持有操作信息的服务器发送,并接收上述操作信息;
存储部,将接收到的上述操作信息和与上述控制对象设备进行近距离无线通信的时刻的上述位置信息建立对应地存储;
操作信息发送部,将上述操作信息向上述控制对象设备发送;
方向感知部,感知上述无线通信终端被朝向的方向信息;
指向空间取得部,根据由上述位置感知部取得的位置信息和由上述方向感知部取得的方向信息计算上述无线通信终端的指向空间;以及
选择部,根据赋予给上述存储部的操作信息的至少一个以上的上述控制对象设备的位置信息,选择上述指向空间中存在的设备的操作信息。
2.一种无线通信终端,具有:
位置感知部,取得上述无线通信终端的位置信息;
设备信息取得部,通过近距离无线通信,从作为无线通信终端控制的对象的设备即控制对象设备,取得能够识别上述控制对象设备的设备信息;
请求生成部,根据上述设备信息请求上述控制对象设备的操作信息;
外部通信部,将上述请求向上述控制对象设备或持有操作信息的服务器发送,并接收上述操作信息;
存储部,将接收到的上述操作信息和与上述控制对象设备进行近距离无线通信的时刻的上述位置信息建立对应地存储;
操作信息发送部,将上述操作信息向上述控制对象设备发送;
周边设备位置信息取得部,在不存在预先存储的上述控制对象设备的位置信息的情况下,通过经由近距离无线通信或无线通信与上述控制对象设备进行通信而取得上述控制对象设备的位置信息;以及
举动管理部,根据上述无线通信终端的位置信息和上述控制对象设备的位置信息,测定上述无线通信终端与上述控制对象设备之间的距离,
举动管理部按照每个上述控制对象设备,对应于上述距离,根据预先设定的一个以上的阈值来规定设备动作,
操作信息发送部在上述测定距离达到上述阈值时发送用于执行上述规定的设备动作的控制信息。
3.如权利要求2所述的无线通信终端,上述无线通信终端具有:
动态图像分发请求部,向动态图像服务器请求动态图像的分发;
动态图像显示部,从上述外部通信部取得所请求分发的上述动态图像并显示在画面上;
再现延迟时间计测部,计测从上述动态图像的分发的请求开始到显示在上述画面上为止的再现延迟时间,并进行保存;
再现时刻同步部,在上述控制对象设备根据来自上述无线通信终端的动态图像分发请求而分发动态图像时,从上述控制对象设备接收分发源再现延迟时间和再现时刻信息,并通过在上述再现时刻信息上加上上述再现延迟时间与接收到的分发源再现延迟时间的差分,在所分发的数据中确定再现开始时刻,上述分发源再现延迟时间是上述控制对象设备自身的再现或经由其他显示装置当前再现的状态下的再现延迟时间,上述再现时刻信息是当前再现的动态图像的时刻信息;以及
再现延迟时间管理部,将上述再现延迟时间与动态图像服务器的种类、机种、通信方法、网络业务信息、以及设备的资源信息中的至少一个以上的信息建立关联地保存。
4.一种无线通信终端,具有:
设备信息取得部,通过设置在规定位置上的设备与上述无线通信终端之间的近距离无线通信,从所设置的该设备取得用于从多个设备中确定该设备的设备信息;
位置信息取得部,取得在所设置的上述设备与上述无线通信终端进行近距离无线通信时表示该无线通信终端的位置的位置信息;以及
发送部,在进行了上述近距离无线通信的情况下,将包含了由该近距离无线通信取得的上述设备信息和所取得的上述位置信息的发送信息向预先确定的服务器发送。
5.一种无线通信终端,通过推测表示被移动了的自身的位置的坐标,来检测上述位置,该无线通信终端具有:
地磁传感器;
坐标推测部,推测表示自身的当前的位置的推测当前地坐标;
地磁噪声检测部,检测由上述地磁传感器进行的地磁的检测是否发生了异常,在发生了上述异常的期间,生成地磁噪声模式,该地磁噪声模式是表示由上述地磁传感器检测的磁场强度的时间序列上的变化的模式;
地磁噪声模式管理部,从存储介质中存储的至少一个模式中检索修正基准噪声模式,该修正基准噪声模式是与发生上述异常时位于由上述坐标推测部推测出的处理对象的推测当前地坐标的周边的坐标建立了关联的、与上述地磁噪声模式类似的模式,
在通过检索没有发现上述修正基准噪声模式的情况下,将上述处理对象的推测当前地坐标与上述地磁噪声模式建立关联地存储在上述存储介质中,
在通过检索发现了上述修正基准噪声模式的情况下,指示修正上述处理对象的推测当前地坐标;以及
坐标修正部,根据由上述地磁噪声模式管理部进行的修正的指示,将上述处理对象的推测当前地坐标修正为与上述修正基准噪声模式建立了关联地存储在上述存储介质中的坐标。
6.一种无线通信终端,具有:
终端位置推测部,使用加速度传感器或角速度传感器、地磁传感器推测表示自身的当前的位置的推测当前地坐标;
用户位置推测部,根据无线通信终端的位置和画面的显示朝向,以移动设备的位置为基准,将用户的位置定位为画面显示的朝向的下侧的坐标;以及
显示朝向决定部,在无线通信终端的位置不改变而进行水平旋转的情况下,改变画面的显示朝向,以使得以用户的位置和无线通信终端的位置为基准,画面的下侧始终靠近用户的位置。
7.一种无线通信终端,推测无线终端的当前位置,具有:
检测机构,检测上述无线终端的加速度信息和方位信息;
距离推测机构,使用从多个基站接收的信号的接收强度来推测表示距各个上述基站的距离的距离信息;
位置推测机构,使用表示上述基站的位置的基站信息和上述距离信息来推测表示上述无线终端的临时的位置的临时位置信息;
安装信息检测机构,使用上述加速度信息判定表示上述无线终端安装在用户的哪个部位的安装信息;
移动方向检测机构,使用上述加速度信息和上述方位信息,检测上述无线终端的移动方向;以及
修正机构,使用上述基站信息、上述临时位置信息、上述安装信息以及上述移动方向,确定基站与用户与上述无线终端的位置关系,并根据上述位置关系修正上述距离信息,
上述位置推测机构还使用上述基站信息和上述修正后的距离信息推测表示上述无线终端的当前位置的当前位置信息。
8.一种无线通信终端,推测无线终端的当前位置,具有:
设定机构,通过使用加速度传感器或角速度传感器、地磁传感器检测移动量和移动方向来推测自身的当前位置,将推测出的当前位置设定为上述无线终端的临时的位置信息;
存储机构,存储表示对电波传输施加影响的周边的空间的结构的地图信息;
推测机构,使用从无线站接收的信号的接收强度,推测表示距各个上述无线站的距离的距离信息;
计算机构,使用上述地图信息和上述距离信息计算无线终端的存在可能区域;以及
修正机构,在上述临时的位置信息是在上述存在可能区域外的情况下,将上述临时的位置信息修正为在上述存在可能区域内,
上述地图信息具有使无线信号衰减的障碍物的结构,
在上述地图信息中的上述距离信息所示的两点间存在上述障碍物的情况下,上述计算机构根据上述障碍物修正上述距离信息并重新计算上述存在可能区域。
9.一种无线通信终端,推测自身的位置,具有:
位置推测部,推测表示该位置推测装置的当前位置的当前地坐标;
指示方向检测部,检测由用户使用该位置推测装置指示的方向即指示方向;
对象物检测部,根据由上述指示方向检测部检测的指示方向,检测用户所指示的对象物即指示对象物;
偏在计算部,在即将由上述对象物检测部检测上述指示对象物之前的预先决定的时间以内,确定不存在该指示对象物的、而且是通过由上述指示方向检测部检测出的指示方向所指示的位置所偏在的区域,并计算相对于所确定的上述区域的方向即偏在方向;以及
位置修正部,使用计算出的上述偏在方向,修正上述当前地坐标。
10.如权利要求1所述的无线通信终端,具有:
应用执行环境部,能够执行可追加或削除的应用;以及
近距离通信部,进行近距离无线通信,
具有:
上述设备信息取得部,取得包含应用识别符的用于识别设备的上述设备信息,该应用识别符用于识别与设备对应的应用;
上述外部通信部,接收上述设备操作信息;
上述位置感知部,取得上述无线通信终端的位置信息;以及
上述存储部,将所接收的上述操作信息与上述位置信息建立对应地存储上述操作信息,
上述无线通信终端按顺序执行如下步骤:
设备信息保持步骤,在与上述设备实施近距离无线通信时,将从上述设备取得的上述设备信息保持在上述无线通信终端内;
应用识别检索步骤,从上述设备信息检索上述应用识别符;
设备对应应用启动步骤,根据上述应用识别符,由上述应用执行环境部启动与上述设备对应的应用;以及
设备信息通知步骤,在与上述设备对应的应用启动后,将所保持的上述设备信息通知给与上述设备对应的应用。
11.如权利要求10所述的无线通信终端,上述无线通信终端还在上述设备对应应用启动步骤中实施如下步骤:
设备对应应用取得步骤,在由上述应用识别符所示的应用不存在于上述无线通信终端内的情况下,经由上述外部通信部取得包含与上述应用识别符所对应的上述设备相对应的应用的上述设备操作信息;以及
外部取得设备对应应用启动步骤,在上述应用执行环境部中启动与上述取得的上述设备相对应的应用。
12.如权利要求1或10所述的无线通信终端,上述设备信息取得部取得用于识别具有进行近距离无线通信的近距离通信部的设备的上述设备信息,
上述无线通信终端还具有:
设备摄影动作部,用于取入上述设备的图像;
设备图像识别部,分析由上述设备摄影动作部取得的上述设备的图像,识别上述设备的形状,
设备检索部,根据识别出的上述设备的形状,检索上述设备的型号,
设备近距离通信部提示部,根据上述型号,计算上述设备的近距离通信部的位置,并进行提示。
13.一种无线通信终端,具有:
位置信息取得部,使用内置的传感器推测自身的位置信息即终端位置信息;
周边设备信息保存部,作为与预先登记的周边设备对应的固有的信息,至少保存作为对象的周边设备的设备ID、位置信息、和用于表示是否与将信息作为发光的模式进行调制并发送的光通信相对应的识别符;
摄像元件,取得周边设备将信息作为发光的模式进行调制后的光;
光通信信息取得部,根据摄像元件取得的光源的发光的模式将信息解码;以及
服务器协同通信部,对如下步骤进行处理:将由光通信信息取得部取得的设备ID与表示对象设备的状态的信息即状态信息经由网络通知给服务器的步骤;从上述服务器取得与上述状态信息对应的画面信息、声音信息、应用、脚本、URL以及与其他服务器的链接信息中的至少一个即用户提示信息的步骤,
上述无线通信终端还具有周边设备缩减部,该周边设备缩减部根据上述终端位置信息和上述周边设备信息,选择基于当前时刻的无线通信终端的位置能够进行上述光通信的周边的设备,
上述光通信信息取得部使用与所选择的上述周边设备对应的信息,进行补充由光通信接收的信息的步骤。
14.如权利要求13所述的无线通信终端,上述无线通信终端将上述选择出的周边设备的信息与已经通过光通信接收的信息进行比较,在取得通过光通信所发送的全部信息之前,进行补充。
CN201180056560.3A 2010-11-25 2011-11-25 通信设备 Active CN103221986B (zh)

Applications Claiming Priority (17)

Application Number Priority Date Filing Date Title
JP2010262993 2010-11-25
JP2010-262993 2010-11-25
JPPCT/JP2010/006901 2010-11-26
PCT/JP2010/006901 WO2011065007A1 (ja) 2009-11-30 2010-11-26 携帯型通信装置、通信方法、集積回路、プログラム
JP2011131653 2011-06-13
JP2011-131653 2011-06-13
US201161521813P 2011-08-10 2011-08-10
JP2011-175453 2011-08-10
JP2011175453 2011-08-10
US61/521,813 2011-08-10
JP2011-238148 2011-10-31
JP2011238148 2011-10-31
JP2011238149 2011-10-31
JP2011-238149 2011-10-31
JP2011250170 2011-11-15
JP2011-250170 2011-11-15
PCT/JP2011/006583 WO2012070250A1 (ja) 2010-11-25 2011-11-25 通信機器

Publications (2)

Publication Number Publication Date
CN103221986A true CN103221986A (zh) 2013-07-24
CN103221986B CN103221986B (zh) 2016-04-13

Family

ID=46145615

Family Applications (2)

Application Number Title Priority Date Filing Date
CN201180041809.3A Active CN103098108B (zh) 2010-11-25 2011-11-25 通信设备
CN201180056560.3A Active CN103221986B (zh) 2010-11-25 2011-11-25 通信设备

Family Applications Before (1)

Application Number Title Priority Date Filing Date
CN201180041809.3A Active CN103098108B (zh) 2010-11-25 2011-11-25 通信设备

Country Status (5)

Country Link
US (3) US9142122B2 (zh)
EP (1) EP2645699B1 (zh)
JP (2) JP5937510B2 (zh)
CN (2) CN103098108B (zh)
WO (2) WO2012070251A1 (zh)

Cited By (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN103442297A (zh) * 2013-08-06 2013-12-11 北京小米科技有限责任公司 协作播放方法、装置、设备及系统
CN103475392A (zh) * 2013-08-09 2013-12-25 北京小米科技有限责任公司 信息获取方法、装置和终端
CN105320975A (zh) * 2014-05-26 2016-02-10 三菱电机株式会社 动态管理系统
CN105366460A (zh) * 2014-08-14 2016-03-02 尹一植 电梯用光通信装置
WO2016091023A1 (zh) * 2014-12-11 2016-06-16 华为技术有限公司 具有红外遥控功能的终端,以及红外遥控配对方法
CN110830910A (zh) * 2019-11-14 2020-02-21 上海银基信息安全技术股份有限公司 终端的定位状态识别方法及装置、电子设备和存储介质
CN116540613A (zh) * 2023-06-20 2023-08-04 威海海鸥智能电子科技有限责任公司 一种电器智能控制设备

Families Citing this family (297)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6666377B1 (en) * 2000-07-18 2003-12-23 Scott C. Harris Bar code data entry device
JP5270184B2 (ja) * 2008-02-13 2013-08-21 古野電気株式会社 衛星航法/推測航法統合測位装置
JP5419895B2 (ja) 2008-12-26 2014-02-19 パナソニック株式会社 通信装置
USD838288S1 (en) * 2009-02-24 2019-01-15 Tixtrack, Inc. Display screen or portion of a display screen with a computer generated venue map and a pop-up window appearing in response to an electronic pointer
US8931400B1 (en) * 2009-05-28 2015-01-13 iDevices. LLC Remote cooking systems and methods
USRE45980E1 (en) 2009-11-30 2016-04-19 Panasonic Intellectual Property Corporation Of America Communication device
EP2509334B1 (en) 2009-11-30 2018-09-12 Sun Patent Trust Communication apparatus
CN102301353A (zh) 2009-11-30 2011-12-28 松下电器产业株式会社 便携型通信装置、通信方法、集成电路、程序
US10977965B2 (en) 2010-01-29 2021-04-13 Avery Dennison Retail Information Services, Llc Smart sign box using electronic interactions
CN102725785B (zh) 2010-01-29 2015-03-25 艾利丹尼森公司 利用电子相互作用的智能标识箱
CN103098108B (zh) 2010-11-25 2017-09-08 松下电器(美国)知识产权公司 通信设备
US10630820B2 (en) 2011-03-11 2020-04-21 Ilumi Solutions, Inc. Wireless communication methods
JP5974005B2 (ja) * 2011-08-05 2016-08-23 パナソニック インテレクチュアル プロパティ コーポレーション オブ アメリカPanasonic Intellectual Property Corporation of America 測位サーバ装置および測位制御方法
US9015856B2 (en) * 2011-08-08 2015-04-21 Facebook, Inc. Mobile-device user authentication
EP2751979B1 (en) 2011-09-01 2020-02-26 Avery Dennison Corporation System and method for consumer tracking
WO2013065225A1 (ja) * 2011-10-31 2013-05-10 パナソニック株式会社 位置推定装置、位置推定方法、プログラムおよび集積回路
JP6026890B2 (ja) * 2011-10-31 2016-11-16 パナソニック インテレクチュアル プロパティ コーポレーション オブ アメリカPanasonic Intellectual Property Corporation of America 位置推定装置、位置推定方法、プログラムおよび集積回路
US9385816B2 (en) 2011-11-14 2016-07-05 Intel Corporation Methods and arrangements for frequency shift communications by undersampling
US20130144699A1 (en) * 2011-12-02 2013-06-06 Jijo Xavier Method for Simplifying Use of Commercial Website Interfaces for Secure Customer Purchases
DE112012005212T5 (de) * 2011-12-13 2014-09-18 International Business Machines Corporation Identitätsnachweisverfahren, Identitätsnachweissystem und Identitätsnachweisprogramm
FR2985131A1 (fr) * 2011-12-23 2013-06-28 France Telecom Systeme de controle pour jouer un flux de donnees sur un dispositif recepteur
US9131370B2 (en) 2011-12-29 2015-09-08 Mcafee, Inc. Simplified mobile communication device
KR101950998B1 (ko) * 2012-01-03 2019-02-21 삼성전자주식회사 엔에프씨 태그를 이용한 서비스 제공 시스템 및 방법
JP6093503B2 (ja) * 2012-01-31 2017-03-08 株式会社東海理化電機製作所 電子キー登録方法
US20130196681A1 (en) * 2012-01-31 2013-08-01 Qualcomm Incorporated Compensating for user occlusion in wi-fi positioning using mobile device orientation
DE102012201786A1 (de) * 2012-02-07 2013-08-08 Siemens Ag Österreich Verfahren zur Ausgabe von nutzerspezifischen Informationsinhalten in einem Beförderungsmittel
EP2629235B1 (en) * 2012-02-17 2016-04-13 ams AG RFID, reader, RFID network and method for communication in an RFID network
US20130223302A1 (en) * 2012-02-23 2013-08-29 Chien-Chih Kuo Multi-protocol switching control system suitable for controlling different electronic devices of different protocols
KR102116679B1 (ko) * 2012-03-05 2020-05-29 엘지전자 주식회사 영상 표시 장치 및 그 동작 방법
US9351094B2 (en) * 2012-03-14 2016-05-24 Digi International Inc. Spatially aware smart device provisioning
JP2013196508A (ja) * 2012-03-21 2013-09-30 Ricoh Co Ltd 機器管理システム、機器管理方法、サーバ装置、及び機器管理プログラム
US9338517B2 (en) * 2012-04-07 2016-05-10 Samsung Electronics Co., Ltd. Method and system for reproducing contents, and computer-readable recording medium thereof
US8682248B2 (en) * 2012-04-07 2014-03-25 Samsung Electronics Co., Ltd. Method and system for reproducing contents, and computer-readable recording medium thereof
US20130268687A1 (en) 2012-04-09 2013-10-10 Mcafee, Inc. Wireless token device
US9547761B2 (en) 2012-04-09 2017-01-17 Mcafee, Inc. Wireless token device
US9262592B2 (en) * 2012-04-09 2016-02-16 Mcafee, Inc. Wireless storage device
US8819445B2 (en) 2012-04-09 2014-08-26 Mcafee, Inc. Wireless token authentication
EP2677719A1 (en) * 2012-06-19 2013-12-25 Alcatel Lucent A method for interfacing a communication terminal with networked objects
US8861976B2 (en) * 2012-06-29 2014-10-14 Intel Corporation Transmit and receive MIMO protocols for light array communications
US9148250B2 (en) 2012-06-30 2015-09-29 Intel Corporation Methods and arrangements for error correction in decoding data from an electromagnetic radiator
JP5404860B2 (ja) * 2012-07-10 2014-02-05 株式会社東芝 情報処理端末及び情報処理方法
US9268424B2 (en) * 2012-07-18 2016-02-23 Sony Corporation Mobile client device, operation method, recording medium, and operation system
EP2701356B1 (en) 2012-08-20 2017-08-02 Alcatel Lucent A method for establishing an authorized communication between a physical object and a communication device enabling a write access
CN103677320B (zh) * 2012-08-30 2018-09-25 索尼公司 遥控器、远端设备、多媒体系统及控制方法
US9313669B2 (en) * 2012-08-30 2016-04-12 Lg Electronics Inc. Apparatus and method for calculating location of mobile station in wireless network
JP6207136B2 (ja) * 2012-09-04 2017-10-04 株式会社ナビタイムジャパン 情報処理システム、端末装置、携帯端末装置、サーバ、情報処理方法および情報処理プログラム
WO2014038170A1 (ja) * 2012-09-04 2014-03-13 パナソニック株式会社 端末装置及び制御方法
US9602172B2 (en) * 2012-09-05 2017-03-21 Crestron Electronics, Inc. User identification and location determination in control applications
JP6076656B2 (ja) * 2012-09-10 2017-02-08 株式会社イーフロー デバイスペアリング方法及びデバイス
JP6015265B2 (ja) * 2012-09-13 2016-10-26 ヤマハ株式会社 近接通信システム
JP6239906B2 (ja) * 2012-09-19 2017-11-29 パナソニック インテレクチュアル プロパティ コーポレーション オブ アメリカPanasonic Intellectual Property Corporation of America アクセス制御方法、アクセス制御システム、通信端末、及び、サーバ
KR101404380B1 (ko) * 2012-09-24 2014-06-09 주식회사 팬택 모바일 디바이스 및 모바일 디바이스의 화면 방향 전환 방법
US9178615B2 (en) 2012-09-28 2015-11-03 Intel Corporation Multiphase sampling of modulated light with phase synchronization field
US9218532B2 (en) 2012-09-28 2015-12-22 Intel Corporation Light ID error detection and correction for light receiver position determination
US9590728B2 (en) 2012-09-29 2017-03-07 Intel Corporation Integrated photogrammetric light communications positioning and inertial navigation system positioning
WO2014057634A1 (ja) * 2012-10-10 2014-04-17 パナソニック株式会社 通信装置、通信システム、携帯端末、プログラム、及びサーバ
JP2014078910A (ja) * 2012-10-12 2014-05-01 Sony Corp 画像処理装置、画像処理システム、画像処理方法、及びプログラム
EP2786304B1 (en) 2012-10-18 2017-06-07 Avery Dennison Corporation Method, system and apparatus for nfc security
CN102938729B (zh) * 2012-10-30 2016-12-21 山东智慧生活数据系统有限公司 智能网关、智能家居系统及家电设备的远程控制方法
US9825702B2 (en) * 2012-11-12 2017-11-21 Seoul National University Of Technology Center For Industry Collaboration OLED display apparatus and visible light communication system having the same
US9031502B2 (en) 2012-11-16 2015-05-12 Broadcom Corporation Antenna solution for wireless power transfer—near field communication enabled communication device
EP2795950B1 (en) 2012-11-19 2018-09-05 Avery Dennison Corporation Nfc security system and method for disabling unauthorized tags
US20140148095A1 (en) * 2012-11-27 2014-05-29 Broadcom Corporation Multiple antenna arrangement for near field communications
JP5638593B2 (ja) * 2012-11-30 2014-12-10 ヤフー株式会社 管理装置、会員管理プログラム、会員管理方法、サービス提供装置、会員カード管理プログラム及び会員管理システム
JP6024425B2 (ja) * 2012-12-03 2016-11-16 株式会社デンソー ナビゲーションシステム
KR20140077821A (ko) * 2012-12-14 2014-06-24 삼성전자주식회사 홈 네트워크 시스템에서 컨텐츠 백업 장치 및 방법
KR20140090297A (ko) * 2012-12-20 2014-07-17 삼성전자주식회사 근거리 무선 통신(nfc)을 이용하는 화상 형성 방법 및 장치
WO2014103308A1 (ja) * 2012-12-28 2014-07-03 パナソニック株式会社 制御方法
US9219937B2 (en) * 2013-01-10 2015-12-22 Yona Shaposhnik Universal multiplexer for content channels via injecting
DE102013100428B4 (de) * 2013-01-16 2014-08-07 MAQUET GmbH Verfahren und Vorrichtung zur drahtlosen Steuerung eines Operationstischs
JP6002119B2 (ja) * 2013-12-02 2016-10-05 竜哉 蒲生 ファイル転送システム、ファイル転送方法、サーバおよびその制御方法と制御プログラム、通信端末およびその制御方法と制御プログラム、および、アプリケーションプログラム
US9613047B2 (en) * 2013-02-13 2017-04-04 Dropbox, Inc. Automatic content item upload
JP5529358B1 (ja) 2013-02-20 2014-06-25 パナソニック株式会社 携帯情報端末の制御方法及びプログラム
WO2014128801A1 (ja) 2013-02-20 2014-08-28 パナソニック インテレクチュアル プロパティ コーポレーション オブ アメリカ 情報端末の制御方法及びプログラム
MY168889A (en) 2013-02-20 2018-12-04 Panasonic Ip Corp America Control method for information apparatus and program
EP2961189B1 (en) * 2013-02-20 2019-01-30 Panasonic Intellectual Property Corporation of America Methode for controlling information apparatus and program
JP5829226B2 (ja) * 2013-02-28 2015-12-09 本田技研工業株式会社 ナビゲーションシステム、情報提供方法及び移動通信端末
KR20140108821A (ko) * 2013-02-28 2014-09-15 삼성전자주식회사 이동 로봇 및 이동 로봇의 위치 추정 및 맵핑 방법
US20140354441A1 (en) * 2013-03-13 2014-12-04 Michael Edward Smith Luna System and constituent media device components and media device-based ecosystem
US20220164675A1 (en) * 2013-03-13 2022-05-26 Promega Corporation Radio frequency identification system
US9202353B1 (en) 2013-03-14 2015-12-01 Toyota Jidosha Kabushiki Kaisha Vibration modality switching system for providing navigation guidance
JP5939180B2 (ja) * 2013-03-15 2016-06-22 ブラザー工業株式会社 情報処理装置、中継サーバ、情報中継方法、情報中継プログラム及び通信システム
US9565173B2 (en) * 2013-03-26 2017-02-07 Xerox Corporation Systems and methods for establishing trusted, secure communications from a mobile device to a multi-function device
JP5820986B2 (ja) * 2013-03-26 2015-11-24 パナソニックIpマネジメント株式会社 映像受信装置及び受信映像の画像認識方法
JP6245254B2 (ja) * 2013-03-29 2017-12-13 ソニー株式会社 位置推定装置、位置推定方法、対象端末、通信方法、通信端末、記録媒体および位置推定システム
CN104303388B (zh) * 2013-03-29 2018-01-05 松下知识产权经营株式会社 蓄电池组、电气设备、通信控制方法
US8914863B2 (en) * 2013-03-29 2014-12-16 Here Global B.V. Enhancing the security of near-field communication
US20140325027A1 (en) * 2013-04-24 2014-10-30 Xiaomi Inc. Method and terminal device for requesting and presenting data
US9485607B2 (en) 2013-05-14 2016-11-01 Nokia Technologies Oy Enhancing the security of short-range communication in connection with an access control device
CN105247820B (zh) * 2013-05-30 2018-09-11 英派尔科技开发有限公司 用于提供无线通信的方案
US9704389B2 (en) 2013-06-07 2017-07-11 Hitachi Maxell, Ltd. Terminal device and remote control method
JP5863713B2 (ja) * 2013-06-21 2016-02-17 京セラドキュメントソリューションズ株式会社 アプリケーション検索システム
WO2014207792A1 (ja) * 2013-06-24 2014-12-31 日立マクセル株式会社 端末装置およびリモート制御方法
CN103399540B (zh) * 2013-07-19 2016-04-27 北京农业信息技术研究中心 自诊断与可恢复远程固件更新温室环境监测系统及方法
JP5730959B2 (ja) 2013-07-25 2015-06-10 オリンパス株式会社 Rfid付き無線通信端末、無線通信システム、無線通信方法およびプログラム
WO2015011877A1 (ja) 2013-07-26 2015-01-29 パナソニックIpマネジメント株式会社 映像受信装置、付加情報表示方法および付加情報表示システム
US9762951B2 (en) 2013-07-30 2017-09-12 Panasonic Intellectual Property Management Co., Ltd. Video reception device, added-information display method, and added-information display system
JP6071792B2 (ja) * 2013-07-31 2017-02-01 株式会社東芝 社会情報提供システムおよび社会情報配信装置
US20150048927A1 (en) * 2013-08-13 2015-02-19 Directed, Llc Smartphone based passive keyless entry system
KR102122266B1 (ko) * 2013-08-22 2020-06-26 엘지전자 주식회사 가전기기, 가전기기 시스템 및 그 제어방법
US9721462B2 (en) 2013-08-30 2017-08-01 Hitachi Maxell, Ltd. Terminal device and remote control method
KR20150026257A (ko) * 2013-09-02 2015-03-11 삼성전자주식회사 액세서리의 정보를 업 데이트하는 전자 장치 및 방법
JP6399681B2 (ja) * 2013-09-03 2018-10-03 株式会社東芝 通信装置、処理方法及びプログラム
WO2015033501A1 (ja) 2013-09-04 2015-03-12 パナソニックIpマネジメント株式会社 映像受信装置、映像認識方法および付加情報表示システム
US9906843B2 (en) 2013-09-04 2018-02-27 Panasonic Intellectual Property Management Co., Ltd. Video reception device, video recognition method, and display system for providing additional information to be superimposed on displayed image
JP2015052816A (ja) * 2013-09-05 2015-03-19 セイコーエプソン株式会社 情報表示システム、電子機器、情報表示システムの制御方法
JP2015069331A (ja) * 2013-09-27 2015-04-13 株式会社東芝 電子機器及び表示方法
MX356133B (es) * 2013-09-27 2018-05-14 Sony Corp Dispositivo de reproducción, método de reproducción y medio de grabación.
CN104519020B (zh) * 2013-09-29 2017-10-13 阿里巴巴集团控股有限公司 管理无线网络登录密码分享功能的方法、服务器及系统
CN105814604B (zh) * 2013-10-07 2019-07-02 苹果公司 用于提供位置信息或移动信息以用于控制车辆的至少一种功能的方法和系统
US10937187B2 (en) 2013-10-07 2021-03-02 Apple Inc. Method and system for providing position or movement information for controlling at least one function of an environment
CN103500495B (zh) * 2013-10-09 2017-01-11 广东索博智能科技有限公司 智能家居遥控系统
CN104580089A (zh) * 2013-10-18 2015-04-29 深圳市腾讯计算机系统有限公司 一种用户验证方法及移动终端
US9091561B1 (en) 2013-10-28 2015-07-28 Toyota Jidosha Kabushiki Kaisha Navigation system for estimating routes for users
JP6207343B2 (ja) * 2013-10-30 2017-10-04 京セラ株式会社 電子機器、判定方法、及びプログラム
CN103713588A (zh) * 2013-11-06 2014-04-09 南京信息职业技术学院 基于现场总线和3g网络的温室群体环境远程监控系统
JP5839018B2 (ja) * 2013-11-07 2016-01-06 カシオ計算機株式会社 情報端末、通信システム、サーバ、通信方法及びプログラム
US9900177B2 (en) 2013-12-11 2018-02-20 Echostar Technologies International Corporation Maintaining up-to-date home automation models
JP2015114865A (ja) * 2013-12-12 2015-06-22 ソニー株式会社 情報処理装置、中継コンピュータ、情報処理システム、および情報処理プログラム
US9769522B2 (en) 2013-12-16 2017-09-19 Echostar Technologies L.L.C. Methods and systems for location specific operations
US20150169039A1 (en) * 2013-12-16 2015-06-18 Kabushiki Kaisha Toshiba Electronic Apparatus, Method and Storage Medium
US10291329B2 (en) * 2013-12-20 2019-05-14 Infineon Technologies Ag Exchanging information between time-of-flight ranging devices
WO2015098172A1 (ja) * 2013-12-26 2015-07-02 株式会社Jvcケンウッド 認証システム、端末装置、認証サーバ、認証方法、認証プログラム
US9924215B2 (en) * 2014-01-09 2018-03-20 Hsni, Llc Digital media content management system and method
US9506761B2 (en) * 2014-01-10 2016-11-29 Alcatel Lucent Method and apparatus for indoor position tagging
GB201400601D0 (en) * 2014-01-14 2014-03-05 Tomtom Int Bv Apparatus and method for a probe data management
US9640060B2 (en) * 2014-01-21 2017-05-02 Mastercard International Incorporated Payment card location method and apparatus
CN106465438A (zh) * 2014-01-30 2017-02-22 瑞典爱立信有限公司 支持国家安全通信和公共安全通信的装置的预配置
JP6285733B2 (ja) * 2014-01-31 2018-02-28 キヤノン株式会社 情報処理装置、情報処理装置の制御方法、プログラム
JP6374666B2 (ja) * 2014-02-19 2018-08-15 キヤノン株式会社 通信装置およびその制御方法、ならびにプログラム
KR20150104711A (ko) * 2014-03-06 2015-09-16 엘지전자 주식회사 디스플레이 장치 및 그의 동작 방법
JP2017508263A (ja) * 2014-03-17 2017-03-23 フィリップス ライティング ホールディング ビー ヴィ ワイヤレス制御可能なポータブル照明器具
WO2015145492A1 (ja) 2014-03-26 2015-10-01 パナソニックIpマネジメント株式会社 映像受信装置、映像認識方法および付加情報表示システム
WO2015145491A1 (ja) 2014-03-26 2015-10-01 パナソニックIpマネジメント株式会社 映像受信装置、映像認識方法および付加情報表示システム
EP3123622B1 (en) * 2014-03-26 2020-03-04 Sony Corporation Electronic device enabling nfc communication
CN103955416A (zh) * 2014-03-29 2014-07-30 华为技术有限公司 一种硬盘管理方法、装置和系统
CN103928025B (zh) * 2014-04-08 2017-06-27 华为技术有限公司 一种语音识别的方法及移动终端
WO2015156151A1 (ja) * 2014-04-11 2015-10-15 富士フイルム株式会社 画像処理装置、撮像装置、画像処理方法及びプログラム
EP2955860B1 (en) * 2014-04-22 2018-06-27 Huawei Device (Dongguan) Co., Ltd. Device selection method and apparatus
EP3134195B1 (en) * 2014-04-24 2019-11-20 3M Innovative Properties Company System and method for maintenance and monitoring of filtration systems
US9462108B2 (en) 2014-05-12 2016-10-04 Lg Electronics Inc. Mobile terminal and method for controlling the mobile terminal
KR101632220B1 (ko) * 2014-07-22 2016-07-01 엘지전자 주식회사 이동 단말기, 이동 단말기의 제어방법, 그리고, 제어시스템과 그 제어방법
KR101618783B1 (ko) * 2014-05-12 2016-05-09 엘지전자 주식회사 이동 단말기, 이동 단말기의 제어방법, 그리고, 이동 단말기를 포함하는 제어시스템
JP6312519B2 (ja) * 2014-05-13 2018-04-18 キヤノン株式会社 撮像装置、その制御方法、及びプログラム
US11157960B2 (en) * 2014-05-22 2021-10-26 Opentv, Inc. Targeted advertising based on user product information
CN103986814B (zh) * 2014-05-26 2019-04-02 努比亚技术有限公司 创建通话记录的方法和移动终端
JP6132452B2 (ja) * 2014-05-30 2017-05-24 株式会社日立国際電気 無線通信装置及び無線通信システム
WO2015190992A1 (en) * 2014-06-09 2015-12-17 Razer (Asia-Pacific) Pte. Ltd. Radio communication systems and radio communication methods
EP2997788B1 (en) * 2014-06-09 2019-01-02 Razer (Asia-pacific) Pte Ltd Radio communication devices and methods for controlling a radio communication device
PL3155794T3 (pl) * 2014-06-12 2020-03-31 Koninklijke Philips N.V. System sygnalizacji dla urządzenia użytkownika
JP6071949B2 (ja) * 2014-06-25 2017-02-01 キヤノン株式会社 情報処理装置、その制御方法、及びプログラム
JP6539951B2 (ja) * 2014-06-26 2019-07-10 富士通株式会社 通信装置、中継装置および通信システム
CN106471869B (zh) * 2014-06-30 2019-12-10 飞利浦照明控股有限公司 设备管理
USD761316S1 (en) * 2014-06-30 2016-07-12 Samsung Electronics Co., Ltd. Display screen or portion thereof with icon
WO2016009479A1 (ja) * 2014-07-14 2016-01-21 三菱電機株式会社 無線通信システム及び無線通信方法
WO2016009637A1 (ja) 2014-07-17 2016-01-21 パナソニックIpマネジメント株式会社 認識データ生成装置、画像認識装置および認識データ生成方法
US9735868B2 (en) * 2014-07-23 2017-08-15 Qualcomm Incorporated Derivation of an identifier encoded in a visible light communication signal
FR3024267B1 (fr) 2014-07-25 2017-06-02 Redlime Procedes de determination et de commande d'un equipement a commander, dispositif, utilisation et systeme mettant en œuvre ces procedes
US9271141B1 (en) * 2014-07-29 2016-02-23 Cellco Partnership Method and apparatus for controlling home appliances over LTE
CA2957555C (en) * 2014-08-12 2019-12-03 Abl Ip Holding Llc System and method for estimating the position and orientation of a mobile communications device in a beacon-based positioning system
US9866893B2 (en) * 2014-08-19 2018-01-09 Comcast Cable Communications, Llc Methods and systems for accessing content
WO2016027457A1 (ja) 2014-08-21 2016-02-25 パナソニックIpマネジメント株式会社 コンテンツ認識装置およびコンテンツ認識方法
US9824578B2 (en) * 2014-09-03 2017-11-21 Echostar Technologies International Corporation Home automation control using context sensitive menus
JP6336864B2 (ja) * 2014-09-05 2018-06-06 シャープ株式会社 加熱調理システム
US10129412B1 (en) * 2014-09-08 2018-11-13 Whatsapp Inc. Establishing and maintaining a VOIP call
JP2016058887A (ja) * 2014-09-09 2016-04-21 パナソニックIpマネジメント株式会社 可視光通信装置、及び、受信装置
KR102320385B1 (ko) * 2014-09-11 2021-11-02 한국전자통신연구원 네트워크 협력기반 저전력형 유료방송 셋톱박스 및 그 제어 방법
US9989507B2 (en) 2014-09-25 2018-06-05 Echostar Technologies International Corporation Detection and prevention of toxic gas
KR102258052B1 (ko) * 2014-09-25 2021-05-28 삼성전자주식회사 전자 장치에서 다른 전자 장치와 컨텐츠를 공유하기 위한 장치 및 방법
CN104305650B (zh) * 2014-10-08 2016-03-09 深圳市兰丁科技有限公司 对戒式智能指环及其相互间传递信息的方法
CN106797501B (zh) 2014-10-15 2020-03-20 麦克赛尔株式会社 广播接收装置和广播接收方法以及广播接收程序
US9983011B2 (en) 2014-10-30 2018-05-29 Echostar Technologies International Corporation Mapping and facilitating evacuation routes in emergency situations
US9511259B2 (en) 2014-10-30 2016-12-06 Echostar Uk Holdings Limited Fitness overlay and incorporation for home automation system
US20160171504A1 (en) * 2014-12-11 2016-06-16 Schneider Electric Industries Sas Blink code product registration
KR20170092648A (ko) * 2014-12-12 2017-08-11 캐논 가부시끼가이샤 통신 장치, 통신 장치의 제어 방법, 및 컴퓨터 프로그램
USD790595S1 (en) * 2014-12-22 2017-06-27 Adtile Technologies Inc. Display screen with a transitional motion-activated graphical user interface
US9967614B2 (en) 2014-12-29 2018-05-08 Echostar Technologies International Corporation Alert suspension for home automation system
US9463868B2 (en) 2015-01-06 2016-10-11 Textron Innovations Inc. Systems and methods for aircraft control surface hardover and disconnect protection
US9686520B2 (en) * 2015-01-22 2017-06-20 Microsoft Technology Licensing, Llc Reconstructing viewport upon user viewpoint misprediction
US20180268403A1 (en) * 2015-01-27 2018-09-20 Abhishek Guglani Multiple protocol transaction encryption
US9654973B2 (en) * 2015-02-20 2017-05-16 Adtran, Inc. System and method for wireless management access to a telecommunications device
CN107407987B (zh) * 2015-03-02 2020-04-28 夏普株式会社 信息输出系统、控制方法以及存储有控制程序的计算机可读取的存储介质
US9832338B2 (en) 2015-03-06 2017-11-28 Intel Corporation Conveyance of hidden image data between output panel and digital camera
US10628564B2 (en) * 2015-03-12 2020-04-21 Mitsubishi Electric Corporation Air conditioner connection system
US9613505B2 (en) 2015-03-13 2017-04-04 Toyota Jidosha Kabushiki Kaisha Object detection and localized extremity guidance
CN107637020B (zh) * 2015-03-26 2020-10-23 飞利浦照明控股有限公司 用于照明设备的上下文有关调试的方法和系统
US20160283565A1 (en) * 2015-03-27 2016-09-29 Ncr Corporation Assistance processing apparatus, systems, and methods
US9542631B2 (en) * 2015-04-02 2017-01-10 Em Microelectronic-Marin S.A. Dual frequency HF-UHF identification device, in particular of the passive type
US10359849B2 (en) * 2015-04-14 2019-07-23 Jose Antonio DELMAR LISSA Portable communication device for transmitting touch-generated messages
KR101944029B1 (ko) * 2015-04-28 2019-01-30 가부시키가이샤 고마쓰 세이사쿠쇼 부품 정보 관리 시스템
US9948477B2 (en) 2015-05-12 2018-04-17 Echostar Technologies International Corporation Home automation weather detection
US9946857B2 (en) 2015-05-12 2018-04-17 Echostar Technologies International Corporation Restricted access for home automation system
JP6448778B2 (ja) * 2015-05-14 2019-01-09 マクセル株式会社 端末装置およびリモート制御方法
CN107850993A (zh) * 2015-06-11 2018-03-27 加里·舒斯特 聚集和协同搜索结果的方法
CN106325223A (zh) * 2015-06-17 2017-01-11 派斡信息技术(上海)有限公司 控管电子装置的方法以及应用该方法的控制系统
US10554713B2 (en) 2015-06-19 2020-02-04 Microsoft Technology Licensing, Llc Low latency application streaming using temporal frame transformation
US10509476B2 (en) * 2015-07-02 2019-12-17 Verizon Patent And Licensing Inc. Enhanced device authentication using magnetic declination
EP3320702B1 (en) 2015-07-07 2022-10-19 Ilumi Solutions, Inc. Wireless communication methods
CN106341735A (zh) * 2015-07-07 2017-01-18 阿里巴巴集团控股有限公司 一种信息推送方法和装置
US10339796B2 (en) 2015-07-07 2019-07-02 Ilumi Sulutions, Inc. Wireless control device and methods thereof
EP3320598B1 (en) * 2015-07-07 2020-11-25 Ilumi Solutions, Inc. Wireless control device and methods thereof
CN106714094B (zh) * 2015-07-20 2021-03-02 阿里巴巴集团控股有限公司 数据处理方法、装置及系统
CN105223815B (zh) * 2015-07-22 2017-10-31 广东天诚智能科技有限公司 智能家居无线控制系统
CN105137787B (zh) * 2015-08-13 2018-05-18 小米科技有限责任公司 用于控制家电设备的方法和装置
DE102015113489A1 (de) * 2015-08-14 2017-02-16 Ebm-Papst Mulfingen Gmbh & Co. Kg Netzwerkkonfiguration und Verfahren zur Vergabe von Netzwerkadressen an Ventilatoren in einem Netzwerk
US9960980B2 (en) 2015-08-21 2018-05-01 Echostar Technologies International Corporation Location monitor and device cloning
JP6664411B2 (ja) * 2015-11-11 2020-03-13 パイオニア株式会社 セキュリティ装置、セキュリティ制御方法、プログラム及び記憶媒体
US9923930B2 (en) 2015-11-19 2018-03-20 Bank Of America Corporation Selectively enabling and disabling biometric authentication based on mobile device state information
US9996066B2 (en) 2015-11-25 2018-06-12 Echostar Technologies International Corporation System and method for HVAC health monitoring using a television receiver
US20170171616A1 (en) * 2015-12-11 2017-06-15 Sasken Communication Technologies Ltd Control of unsuitable video content
US10101717B2 (en) 2015-12-15 2018-10-16 Echostar Technologies International Corporation Home automation data storage system and methods
WO2017111860A1 (en) 2015-12-26 2017-06-29 Intel Corporation Identification of objects for three-dimensional depth imaging
US10091017B2 (en) 2015-12-30 2018-10-02 Echostar Technologies International Corporation Personalized home automation control based on individualized profiling
US10073428B2 (en) 2015-12-31 2018-09-11 Echostar Technologies International Corporation Methods and systems for control of home automation activity based on user characteristics
US10060644B2 (en) 2015-12-31 2018-08-28 Echostar Technologies International Corporation Methods and systems for control of home automation activity based on user preferences
US11740782B2 (en) * 2016-01-06 2023-08-29 Disruptive Technologies Research As Out-of-band commissioning of a wireless device through proximity input
US10257256B2 (en) * 2016-01-20 2019-04-09 Google Llc IOT interaction system
KR102490548B1 (ko) * 2016-01-25 2023-01-19 삼성전자주식회사 사용자 단말 장치 및 그 제어 방법
CN105722012B (zh) * 2016-02-02 2020-08-11 腾讯科技(深圳)有限公司 一种连接通信设备的方法、终端设备及服务器系统
JP2017151894A (ja) * 2016-02-26 2017-08-31 ソニーモバイルコミュニケーションズ株式会社 情報処理装置、情報処理方法、およびプログラム
JP6569567B2 (ja) * 2016-03-11 2019-09-04 富士ゼロックス株式会社 情報処理装置、情報処理システム及び情報処理プログラム
RU2018140431A (ru) * 2016-04-19 2020-05-19 Тейдзин Лимитед Изделие, оснащенное системой сигнализации
CN105791320B (zh) * 2016-04-29 2019-12-03 镇江惠通电子有限公司 遥控终端切换协议的方法、控制方法和控制装置
CN105955485A (zh) * 2016-05-12 2016-09-21 珠海市魅族科技有限公司 屏幕显示方法、屏幕显示装置和终端
US9882736B2 (en) 2016-06-09 2018-01-30 Echostar Technologies International Corporation Remote sound generation for a home automation system
WO2018013117A1 (en) * 2016-07-14 2018-01-18 Hewlett-Packard Development Company, L.P. Contextual device unlocking
US10294600B2 (en) 2016-08-05 2019-05-21 Echostar Technologies International Corporation Remote detection of washer/dryer operation/fault condition
US10049515B2 (en) 2016-08-24 2018-08-14 Echostar Technologies International Corporation Trusted user identification and management for home automation systems
US10511671B2 (en) * 2016-09-16 2019-12-17 Kabushiki Kaisha Toshiba Communication device, communication method, controlled device, and non-transitory computer readable medium
US11044405B1 (en) 2016-09-16 2021-06-22 Apple Inc. Location systems for electronic device interactions with environment
JP6834284B2 (ja) * 2016-09-20 2021-02-24 カシオ計算機株式会社 方向推定装置、方向推定方法、及び、プログラム
US10412041B2 (en) * 2016-09-21 2019-09-10 Rockwell Automation Technologies, Inc. Internet protocol (IP) addressing using an industrial control program
JPWO2018055737A1 (ja) * 2016-09-23 2019-01-10 ヤマハ株式会社 制御装置、制御対象機器、表示用データの処理方法及びプログラム
US10623261B1 (en) * 2016-09-30 2020-04-14 EMC IP Holding Company LLC Contactless information capture and entry for device management
JP6856345B2 (ja) * 2016-10-05 2021-04-07 株式会社ディスコ 加工装置
CN108076216B (zh) * 2016-11-14 2020-11-24 夏普株式会社 移动通信终端、电子设备以及使用移动通信终端的电子设备控制方法
CN110121710A (zh) * 2016-11-16 2019-08-13 梅尔·戈兰 用于用户认证的系统、方法和软件
EP3340670B1 (en) * 2016-12-23 2020-02-19 SafeDrivePod International B.V. Anti-tampering mechanisms for a mobile device lock
JP6843662B2 (ja) * 2017-03-23 2021-03-17 株式会社日立製作所 モビリティデータ処理装置、モビリティデータ処理方法、及びモビリティデータ処理システム
US10134207B2 (en) * 2017-04-20 2018-11-20 Saudi Arabian Oil Company Securing SCADA network access from a remote terminal unit
CN107451799B (zh) * 2017-04-21 2020-07-07 阿里巴巴集团控股有限公司 一种风险识别方法及装置
EP4013122A1 (en) 2017-05-04 2022-06-15 Beijing Xiaomi Mobile Software Co., Ltd. Beam-based measurement configuration
JP2019003228A (ja) * 2017-06-09 2019-01-10 富士通株式会社 機器連携システム、機器連携装置、機器連携方法及び機器連携プログラム
US10499360B2 (en) * 2017-06-27 2019-12-03 Geoffrey E Korrub Passive wireless electronics detection system
US10165439B1 (en) * 2017-06-27 2018-12-25 Geoffrey E Korrub Passive wireless electronics detection system
JP6914749B2 (ja) * 2017-06-29 2021-08-04 キヤノン株式会社 サーバ装置、情報処理装置、および制御方法
US10014913B1 (en) * 2017-07-24 2018-07-03 Polaris Wireless, Inc. Estimating the location of a wireless terminal in the purview of a distributed-antenna system
JP6918628B2 (ja) * 2017-08-10 2021-08-11 キヤノン株式会社 画像処理装置、通信装置およびそれらの制御方法、並びにプログラム
KR102369121B1 (ko) * 2017-10-12 2022-03-03 삼성전자주식회사 영상 처리 장치 및 이를 포함하는 디스플레이 장치, 그 제어 방법
CN107659921B (zh) * 2017-11-08 2023-12-26 上海坤锐电子科技有限公司 Nfc的通用实现电路及芯片
US10289592B1 (en) * 2017-11-09 2019-05-14 Funai Electric Co., Ltd. Location-based address adapter and system
JP6934407B2 (ja) * 2017-11-27 2021-09-15 株式会社ディスコ 加工装置
KR102374570B1 (ko) * 2017-11-28 2022-03-14 제이에프이 스틸 가부시키가이샤 설비 관리 시스템
JP6977521B2 (ja) * 2017-12-07 2021-12-08 富士通株式会社 情報配信システム、情報配信方法及びサーバ装置
WO2019116649A1 (ja) * 2017-12-14 2019-06-20 ソニーモバイルコミュニケーションズ株式会社 情報処理装置、及び情報処理方法
CN108228748A (zh) * 2017-12-21 2018-06-29 华南理工大学 一种基于Hadoop的钢结构无损云检测系统
CN107976167B (zh) * 2017-12-29 2020-03-13 上海传英信息技术有限公司 Usb接口插接检测方法、接口及终端设备
EP3537683A1 (en) * 2018-03-07 2019-09-11 Nagravision S.A. An automated surveillance system
US11528582B2 (en) * 2018-05-29 2022-12-13 Apprentice FS, Inc. Assisting execution of manual protocols at production equipment
TWI665842B (zh) * 2018-06-13 2019-07-11 金碳洁股份有限公司 無線充電的電源管理系統及其方法
KR102521587B1 (ko) * 2018-07-30 2023-04-14 삼성전자주식회사 Em 신호를 발생시킨 외부 전자 장치를 결정하는 전자 장치
US11212847B2 (en) * 2018-07-31 2021-12-28 Roku, Inc. More secure device pairing
CN109348410B (zh) * 2018-11-16 2020-07-10 电子科技大学 基于全局和局部联合约束迁移学习的室内定位方法
US11140139B2 (en) * 2018-11-21 2021-10-05 Microsoft Technology Licensing, Llc Adaptive decoder selection for cryptographic key generation
JP7419258B2 (ja) * 2018-11-26 2024-01-22 株式会社半導体エネルギー研究所 二次電池システム
JP7321712B2 (ja) * 2019-01-30 2023-08-07 キヤノン株式会社 通信装置、通信装置の制御方法およびプログラム
US10897398B2 (en) 2019-02-04 2021-01-19 Saudi Arabian Oil Company Embedded dynamic configuration assignment for unprotected remote terminal unit (RTU)
US11169273B2 (en) * 2019-02-14 2021-11-09 Haier Us Appliance Solutions, Inc. Systems and methods for obtaining a location of an appliance
US11288378B2 (en) 2019-02-20 2022-03-29 Saudi Arabian Oil Company Embedded data protection and forensics for physically unsecure remote terminal unit (RTU)
US10984546B2 (en) * 2019-02-28 2021-04-20 Apple Inc. Enabling automatic measurements
US11328196B2 (en) * 2019-03-06 2022-05-10 Thinkify, Llc Dual mode RFID tag system
JP7180750B2 (ja) * 2019-03-25 2022-11-30 日本電気株式会社 情報処理装置、分析システム、データ集約方法及びデータ集約プログラム
JP6754544B1 (ja) * 2019-04-10 2020-09-16 タック株式会社 管理サーバと集約サーバの連繋システム、管理サーバ
CN111935465B (zh) * 2019-05-13 2022-06-17 中强光电股份有限公司 投影系统、投影装置以及其显示影像的校正方法
US11551541B2 (en) 2019-06-03 2023-01-10 Carrier Corporation Configuring devices in control systems
US11336684B2 (en) * 2019-06-07 2022-05-17 Lookout, Inc. Mobile device security using a secure execution context
JP6754471B1 (ja) * 2019-06-11 2020-09-09 株式会社 日立産業制御ソリューションズ 業務システムおよびプログラム
WO2021050294A1 (en) 2019-09-10 2021-03-18 Integrated Energy Services Corporation System and method for assuring building air quality
JP2022550602A (ja) * 2019-10-03 2022-12-02 スーパー セルフィー,インコーポレイテッド 自動被写体選択を備えるリモート画像キャプチャのための装置及び方法
JP2021081797A (ja) * 2019-11-14 2021-05-27 株式会社リコー 情報処理システム、情報処理装置、および情報処理方法
CN110940264B (zh) * 2019-11-29 2021-04-27 成都理工大学 基于低频磁感应通信的滑坡深部位移监测装置和监测方法
KR20210077191A (ko) * 2019-12-17 2021-06-25 현대자동차주식회사 차량 내 무선 통신 연결 제어 장치 및 그의 무선 통신 연결 제어 방법
JP7078600B2 (ja) * 2019-12-19 2022-05-31 新コスモス電機株式会社 警報器
EP3848918A1 (en) * 2020-01-08 2021-07-14 Nxp B.V. System and method for controlling electronic devices
CN111449681B (zh) * 2020-04-08 2023-09-08 深圳开立生物医疗科技股份有限公司 一种剪切波成像方法、装置、设备及可读存储介质
JP7204046B2 (ja) * 2020-04-21 2023-01-13 三菱電機株式会社 管理装置
US11363437B2 (en) * 2020-05-22 2022-06-14 Rajesh Tiwari Patron service method utilizing near-field communication tag identifiers
WO2021256492A1 (ja) * 2020-06-19 2021-12-23 パナソニック インテレクチュアル プロパティ コーポレーション オブ アメリカ アクチュエータ及び/又は加熱器を備える装置並びにその装置を制御する方法
AU2020103160B4 (en) * 2020-07-21 2021-07-15 Asbestos Reports Australia Pty Limited Data integrity management in a computer network
US11341830B2 (en) 2020-08-06 2022-05-24 Saudi Arabian Oil Company Infrastructure construction digital integrated twin (ICDIT)
US11670144B2 (en) 2020-09-14 2023-06-06 Apple Inc. User interfaces for indicating distance
US11749045B2 (en) * 2021-03-01 2023-09-05 Honeywell International Inc. Building access using a mobile device
US11687053B2 (en) 2021-03-08 2023-06-27 Saudi Arabian Oil Company Intelligent safety motor control center (ISMCC)
JP2022137884A (ja) * 2021-03-09 2022-09-22 富士フイルムビジネスイノベーション株式会社 情報処理プログラム、及び情報処理システム
JP7184948B2 (ja) * 2021-03-19 2022-12-06 本田技研工業株式会社 遠隔操作システム
US20220311759A1 (en) * 2021-03-23 2022-09-29 Ricoh Company, Ltd. Information processing apparatus, information processing method, and non-transitory recording medium
CN116434514B (zh) * 2023-06-02 2023-09-01 永林电子股份有限公司 一种红外遥控方法以及红外遥控装置

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN1524252A (zh) * 2001-05-07 2004-08-25 �¬ 红外手持遥控器
JP2004258766A (ja) * 2003-02-24 2004-09-16 Nippon Telegr & Teleph Corp <Ntt> 自己画像表示を用いたインタフェースにおけるメニュー表示方法、装置、プログラム
JP2010263506A (ja) * 2009-05-08 2010-11-18 Fujitsu Ltd 無線端末、無線端末制御方法、無線端末制御プログラム

Family Cites Families (102)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US5648813A (en) 1993-10-20 1997-07-15 Matsushita Electric Industrial Co. Ltd. Graphical-interactive-screen display apparatus and peripheral units
JP3035877B2 (ja) 1993-11-10 2000-04-24 松下電器産業株式会社 リモコン装置
JP2816104B2 (ja) * 1994-09-22 1998-10-27 アイシン・エィ・ダブリュ株式会社 ナビゲーション装置
DE69528945T2 (de) 1994-09-22 2003-04-24 Aisin Aw Co Navigationssystem
JPH09116985A (ja) 1995-10-13 1997-05-02 Sony Corp 遠隔操作器、遠隔操作制御方法及び装置
JP4190599B2 (ja) 1996-11-27 2008-12-03 ソニー株式会社 情報伝送装置及び情報伝送方法並びに情報受信装置及び情報受信方法
JP3848431B2 (ja) * 1997-04-28 2006-11-22 本田技研工業株式会社 車両位置推定装置と車両位置推定方法、および、走行車線維持装置と走行車線維持方法
US6148211A (en) 1997-09-05 2000-11-14 Motorola, Inc. Method and system for estimating a subscriber's location in a cluttered area
JPH11295409A (ja) * 1998-04-09 1999-10-29 Locus:Kk 位置決めシステム
JP2000250434A (ja) 1999-02-26 2000-09-14 Sharp Corp 携帯型情報機器および重力方向検出器
JP2000270237A (ja) 1999-03-15 2000-09-29 Nippon Hoso Kyokai <Nhk> 画像表示装置用選択装置
US20060168644A1 (en) * 2000-02-29 2006-07-27 Intermec Ip Corp. RFID tag with embedded Internet address
JP4644900B2 (ja) 2000-03-07 2011-03-09 ソニー株式会社 通信手段を介したサービス提供システム、サービス提供方法、およびサービス仲介装置、並びにプログラム提供媒体
JP2001349742A (ja) 2000-06-07 2001-12-21 Sharp Corp 歩行者誘導システム及び方法並びにこれに利用される記憶媒体
JP2002087536A (ja) 2000-09-14 2002-03-27 Sharp Corp 電子タグを利用した宅配便のサービス提供方法
US7945174B2 (en) * 2001-09-26 2011-05-17 Celight, Inc. Secure optical communications system and method with coherent detection
US7415212B2 (en) * 2001-10-23 2008-08-19 Sony Corporation Data communication system, data transmitter and data receiver
JP2003234840A (ja) 2002-02-12 2003-08-22 Seiko Epson Corp 連絡支援装置及び連絡支援プログラム、並びに連絡支援方法
JP3721141B2 (ja) * 2002-03-25 2005-11-30 松下電器産業株式会社 携帯端末装置
JP4205357B2 (ja) 2002-03-29 2009-01-07 ブラザー工業株式会社 サービス提供システム、機器及びサービス提供方法
JP2003345492A (ja) 2002-05-27 2003-12-05 Sony Corp 携帯電子機器
JP2004048132A (ja) * 2002-07-09 2004-02-12 Toshiba Corp 視聴装置および視聴方法
JP2004166193A (ja) 2002-09-27 2004-06-10 Matsushita Electric Ind Co Ltd リモコン装置
JP3915654B2 (ja) 2002-10-18 2007-05-16 株式会社日立製作所 屋内位置検出装置及び屋内位置検出方法
JP2004145720A (ja) 2002-10-25 2004-05-20 Sony Corp リモートコントロールシステム、リモートコントロール方法、無線タグ保持体
JP4207557B2 (ja) 2002-12-18 2009-01-14 ソニー株式会社 無線通信方法、無線通信システム及び無線通信装置
CN103279470B (zh) * 2003-02-19 2016-08-10 松下电器(美国)知识产权公司 移动终端装置、服务器装置、信息提供系统及方法
JP2004297334A (ja) 2003-03-26 2004-10-21 Ntt Comware Corp 位置情報測定端末装置、および無線タグによる位置情報測定方法、ならびにプログラム
US7155305B2 (en) * 2003-11-04 2006-12-26 Universal Electronics Inc. System and methods for home appliance identification and control in a networked environment
JP2008070884A (ja) 2004-01-28 2008-03-27 Softbank Mobile Corp 移動体通信端末
JP4393916B2 (ja) * 2004-04-27 2010-01-06 京セラ株式会社 磁気センサ付き携帯電話機
JP2005354543A (ja) 2004-06-14 2005-12-22 Sanyo Electric Co Ltd リモコン装置
JP2006033795A (ja) 2004-06-15 2006-02-02 Sanyo Electric Co Ltd リモートコントロールシステム、コントローラ、コンピュータにコントローラの機能を付与するプログラム、当該プログラムを格納した記憶媒体、およびサーバ。
US20100081375A1 (en) 2008-09-30 2010-04-01 Apple Inc. System and method for simplified control of electronic devices
JP2006099540A (ja) 2004-09-30 2006-04-13 Nec Mobiling Ltd アクセス管理システム、アクセス管理方法及び携帯情報端末
JP2006146753A (ja) * 2004-11-24 2006-06-08 Zybox Technology Co Ltd 移動体通信端末装置、移動体通信方法ならびに移動体通信プログラムおよびこれを記録したコンピュータ読み取り可能な記録媒体
JP2006266945A (ja) 2005-03-24 2006-10-05 Matsushita Electric Works Ltd 位置管理システム
JP2006279424A (ja) * 2005-03-29 2006-10-12 Yamaha Corp 電気機器遠隔操作システム
JP4778722B2 (ja) * 2005-04-28 2011-09-21 株式会社ワコム 位置指示器、及び、リモコン装置
JP4652886B2 (ja) 2005-04-28 2011-03-16 株式会社エヌ・ティ・ティ・ドコモ 位置推定装置および位置推定方法
WO2006123413A1 (ja) 2005-05-19 2006-11-23 Fujitsu Limited 通信システム及び携帯電話端末並びにrfidタグ書込み装置
JP4721805B2 (ja) 2005-08-01 2011-07-13 ソニー・エリクソン・モバイルコミュニケーションズ株式会社 レベル/周波数変換回路及び方法、a/d変換回路及び方法、信号レベル通知装置及び方法、携帯通信端末
JP2007134962A (ja) 2005-11-10 2007-05-31 Funai Electric Co Ltd リモートコントローラ
WO2007069323A1 (ja) 2005-12-15 2007-06-21 Matsushita Electric Industrial Co., Ltd. ユーザ登録代行サーバ、通信端末装置、ユーザ登録方法、及びユーザ登録システム
KR100790173B1 (ko) 2006-02-23 2008-01-02 삼성전자주식회사 단문 메시지 서비스를 이용하여 무선 기기를 제어하기 위한방법과 홈 네트워크 시스템 및 이동 단말기
JP2007228497A (ja) 2006-02-27 2007-09-06 Kyocera Corp 無線通信装置および無線通信方法
WO2007107982A1 (en) * 2006-03-17 2007-09-27 Sandisk Il Ltd Session handover between terminals
JP4489719B2 (ja) 2006-03-28 2010-06-23 株式会社エヌ・ティ・ティ・ドコモ ユーザインタフェース
JP2007304787A (ja) 2006-05-10 2007-11-22 Hitachi Information & Communication Engineering Ltd 遠隔操作システム、制御方法、及び、制御プログラム
JP2008017027A (ja) 2006-07-04 2008-01-24 Ntt Docomo Inc 位置推定装置及び位置推定方法
JP2008046893A (ja) * 2006-08-17 2008-02-28 Sony Ericsson Mobilecommunications Japan Inc 携帯通信端末、情報取得方法及び情報取得プログラム
JP2008070236A (ja) 2006-09-14 2008-03-27 Sanyo Electric Co Ltd 移動ロボット及び遠隔操作システム
US7983614B2 (en) * 2006-09-29 2011-07-19 Sony Ericsson Mobile Communications Ab Handover for audio and video playback devices
JP4350740B2 (ja) 2006-12-05 2009-10-21 レノボ・シンガポール・プライベート・リミテッド 携帯式電子機器、画面の表示方向の変更方法、プログラムおよび記憶媒体
JP2008170309A (ja) 2007-01-12 2008-07-24 Seiko Epson Corp 携帯ナビゲーションシステム、携帯ナビゲーション方法、携帯ナビゲーション用プログラム及び携帯端末
JP5266717B2 (ja) 2007-01-30 2013-08-21 大日本印刷株式会社 非接触リーダライタ、情報提供システム、リダイレクトサーバ、及びアドレス情報提供方法等
JP2008241663A (ja) 2007-03-29 2008-10-09 Oki Electric Ind Co Ltd 電界強度調査システムおよび方法
US8094037B2 (en) 2007-03-30 2012-01-10 Sony Corporation Method and apparatus for identifying an electronic appliance
JP4925116B2 (ja) * 2007-05-18 2012-04-25 シャープ株式会社 サービス管理装置、移動端末装置、サービス管理システム、サービス管理方法、およびサービス管理プログラム
GB2449510A (en) * 2007-05-24 2008-11-26 Asim Bucuk A method and system for the creation, management and authentication of links between people, entities, objects and devices
JP5070579B2 (ja) * 2007-06-11 2012-11-14 シャープ株式会社 情報通信端末および処理プログラム
JP4967838B2 (ja) 2007-06-13 2012-07-04 日本電気株式会社 Id発信装置設置位置情報の登録システム、装置、方法およびプログラム
JP4559452B2 (ja) 2007-06-29 2010-10-06 正 五井野 物流管理方法及び物流管理システム
JP5194673B2 (ja) 2007-09-26 2013-05-08 株式会社日立製作所 携帯端末、及び情報の送受信方法
KR100941460B1 (ko) 2007-11-14 2010-02-11 주식회사 케이티 전자 태그를 이용한 공항 수화물 관리 방법 및 그 시스템
JP2011061247A (ja) * 2007-11-15 2011-03-24 Panasonic Corp マルチリモコン制御装置
CN101990661B (zh) 2007-12-28 2013-11-06 松下电器产业株式会社 通信装置、通信系统、图像提示方法以及程序
JP2009193433A (ja) 2008-02-15 2009-08-27 Oki Electric Ind Co Ltd 電気機器管理システム、電気機器管理サーバおよび電気機器管理方法
JP2009224841A (ja) 2008-03-13 2009-10-01 Honda Motor Co Ltd ディスプレイ位置調整装置
JP5309643B2 (ja) * 2008-03-24 2013-10-09 富士通株式会社 位置情報処理装置、位置情報処理プログラムおよび移動体端末
JP2010026064A (ja) 2008-07-16 2010-02-04 Sony Computer Entertainment Inc 携帯型画像表示装置、その制御方法、プログラム及び情報記憶媒体
US8854320B2 (en) 2008-07-16 2014-10-07 Sony Corporation Mobile type image display device, method for controlling the same and information memory medium
EP2180652B1 (en) * 2008-10-21 2016-09-28 Telia Company AB Method and system for transferring media information
JP2010113503A (ja) 2008-11-06 2010-05-20 Sharp Corp 携帯端末装置
JP2010145228A (ja) 2008-12-18 2010-07-01 Sanyo Electric Co Ltd 位置表示装置および現在位置決定方法
JP2010147847A (ja) 2008-12-19 2010-07-01 Kyocera Corp 基地局装置および基地局制御方法
JP5419895B2 (ja) 2008-12-26 2014-02-19 パナソニック株式会社 通信装置
JP5185875B2 (ja) * 2009-03-30 2013-04-17 株式会社日本総合研究所 無線タグおよび撮像装置
JP2010237030A (ja) 2009-03-31 2010-10-21 Alps Electric Co Ltd 現在位置表示装置
JP4823342B2 (ja) 2009-08-06 2011-11-24 株式会社スクウェア・エニックス タッチパネル式ディスプレイを持った携帯型コンピュータ
CN102301353A (zh) 2009-11-30 2011-12-28 松下电器产业株式会社 便携型通信装置、通信方法、集成电路、程序
EP2509334B1 (en) 2009-11-30 2018-09-12 Sun Patent Trust Communication apparatus
EP2597779B1 (en) * 2010-07-23 2016-10-12 Panasonic Intellectual Property Corporation of America Nfc communication apparatus and method for controlling same
EP2442600B1 (en) * 2010-10-14 2013-03-06 Research In Motion Limited Near-field communication (NFC) system providing nfc tag geographic position authentication and related methods
US20120094596A1 (en) * 2010-10-14 2012-04-19 Research In Motion Limited Near-field communication (nfc) system providing nfc tag geographic position authentication and related methods
CN103098108B (zh) 2010-11-25 2017-09-08 松下电器(美国)知识产权公司 通信设备
WO2012073512A1 (ja) * 2010-11-30 2012-06-07 パナソニック株式会社 通信装置および通信方法
US8998076B2 (en) * 2011-06-03 2015-04-07 Arthur Chang Establishing connections among electronic devices
US8996298B2 (en) 2011-06-13 2015-03-31 Panasonic Intellectual Property Corporation Of America Noise pattern acquisition device and position detection apparatus provided therewith
US9214128B2 (en) 2011-08-10 2015-12-15 Panasonic Intellectual Property Corporation Of America Information display device
US20130052946A1 (en) * 2011-08-23 2013-02-28 Manjirnath Chatterjee Home automation using a mobile device
JP6026890B2 (ja) 2011-10-31 2016-11-16 パナソニック インテレクチュアル プロパティ コーポレーション オブ アメリカPanasonic Intellectual Property Corporation of America 位置推定装置、位置推定方法、プログラムおよび集積回路
WO2013065225A1 (ja) 2011-10-31 2013-05-10 パナソニック株式会社 位置推定装置、位置推定方法、プログラムおよび集積回路
US8943605B1 (en) * 2012-01-25 2015-01-27 Sprint Communications Company L.P. Proximity based digital rights management
US20130198056A1 (en) * 2012-01-27 2013-08-01 Verizon Patent And Licensing Inc. Near field communication transaction management and application systems and methods
US8504008B1 (en) * 2012-02-02 2013-08-06 Google Inc. Virtual control panels using short-range communication
US8515413B1 (en) * 2012-02-02 2013-08-20 Google Inc. Controlling a target device using short-range communication
US8880028B2 (en) * 2012-02-08 2014-11-04 Blackberry Limited Near field communication (NFC) accessory providing enhanced data transfer features and related methods
US20130331027A1 (en) * 2012-06-08 2013-12-12 Research In Motion Limited Communications system providing remote access via mobile wireless communications device and related methods
KR101866860B1 (ko) * 2012-09-04 2018-06-14 엘지전자 주식회사 전자기기 및 그것의 제어방법
JP2014147048A (ja) * 2013-01-30 2014-08-14 Toshiba Corp 通信装置及び通信方法
US9231698B2 (en) * 2014-02-25 2016-01-05 Google Inc. Optical communication terminal

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN1524252A (zh) * 2001-05-07 2004-08-25 �¬ 红外手持遥控器
JP2004258766A (ja) * 2003-02-24 2004-09-16 Nippon Telegr & Teleph Corp <Ntt> 自己画像表示を用いたインタフェースにおけるメニュー表示方法、装置、プログラム
JP2010263506A (ja) * 2009-05-08 2010-11-18 Fujitsu Ltd 無線端末、無線端末制御方法、無線端末制御プログラム

Cited By (11)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN103442297A (zh) * 2013-08-06 2013-12-11 北京小米科技有限责任公司 协作播放方法、装置、设备及系统
CN103475392A (zh) * 2013-08-09 2013-12-25 北京小米科技有限责任公司 信息获取方法、装置和终端
CN103475392B (zh) * 2013-08-09 2015-09-09 小米科技有限责任公司 信息获取方法、装置和终端
CN105320975A (zh) * 2014-05-26 2016-02-10 三菱电机株式会社 动态管理系统
CN105320975B (zh) * 2014-05-26 2018-04-27 三菱电机株式会社 动态管理系统
CN105366460A (zh) * 2014-08-14 2016-03-02 尹一植 电梯用光通信装置
CN105366460B (zh) * 2014-08-14 2017-07-18 尹一植 电梯用光通信装置
WO2016091023A1 (zh) * 2014-12-11 2016-06-16 华为技术有限公司 具有红外遥控功能的终端,以及红外遥控配对方法
US10304326B2 (en) 2014-12-11 2019-05-28 Huawei Technologies Co., Ltd. Terminal having infrared remote control function and pairing method for infrared remote control
CN110830910A (zh) * 2019-11-14 2020-02-21 上海银基信息安全技术股份有限公司 终端的定位状态识别方法及装置、电子设备和存储介质
CN116540613A (zh) * 2023-06-20 2023-08-04 威海海鸥智能电子科技有限责任公司 一种电器智能控制设备

Also Published As

Publication number Publication date
EP2645699A4 (en) 2015-12-23
US20130247117A1 (en) 2013-09-19
US9142122B2 (en) 2015-09-22
US20150310736A1 (en) 2015-10-29
JPWO2012070251A1 (ja) 2014-05-19
EP2645699B1 (en) 2020-08-05
WO2012070251A1 (ja) 2012-05-31
JP5937510B2 (ja) 2016-06-22
JPWO2012070250A1 (ja) 2014-05-19
CN103098108B (zh) 2017-09-08
WO2012070250A1 (ja) 2012-05-31
US9047759B2 (en) 2015-06-02
CN103098108A (zh) 2013-05-08
US9262913B2 (en) 2016-02-16
US20140009268A1 (en) 2014-01-09
EP2645699A1 (en) 2013-10-02
CN103221986B (zh) 2016-04-13
JP5886205B2 (ja) 2016-03-16

Similar Documents

Publication Publication Date Title
CN103221986B (zh) 通信设备
CN102301738B (zh) 通信装置
JP5707472B2 (ja) 通信装置
CN102301353A (zh) 便携型通信装置、通信方法、集成电路、程序
CN101990661B (zh) 通信装置、通信系统、图像提示方法以及程序
USRE45980E1 (en) Communication device
CN102132579A (zh) 通信装置

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
ASS Succession or assignment of patent right

Owner name: MATSUSHITA ELECTRIC (AMERICA) INTELLECTUAL PROPERT

Free format text: FORMER OWNER: MATSUSHITA ELECTRIC INDUSTRIAL CO, LTD.

Effective date: 20141009

C41 Transfer of patent application or patent right or utility model
TA01 Transfer of patent application right

Effective date of registration: 20141009

Address after: Seaman Avenue Torrance in the United States of California No. 2000 room 200

Applicant after: PANASONIC INTELLECTUAL PROPERTY CORPORATION OF AMERICA

Address before: Osaka Japan

Applicant before: Matsushita Electric Industrial Co.,Ltd.

C53 Correction of patent of invention or patent application
CB02 Change of applicant information

Address after: Seaman Avenue Torrance in the United States of California No. 20000 room 200

Applicant after: PANASONIC INTELLECTUAL PROPERTY CORPORATION OF AMERICA

Address before: Seaman Avenue Torrance in the United States of California No. 2000 room 200

Applicant before: PANASONIC INTELLECTUAL PROPERTY CORPORATION OF AMERICA

COR Change of bibliographic data

Free format text: CORRECT: ADDRESS; FROM:

C14 Grant of patent or utility model
GR01 Patent grant