CN112334787A - 发送装置、控制系统、以及发送方法 - Google Patents

发送装置、控制系统、以及发送方法 Download PDF

Info

Publication number
CN112334787A
CN112334787A CN201980042518.2A CN201980042518A CN112334787A CN 112334787 A CN112334787 A CN 112334787A CN 201980042518 A CN201980042518 A CN 201980042518A CN 112334787 A CN112334787 A CN 112334787A
Authority
CN
China
Prior art keywords
sensing
signal
information
unit
transmission
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN201980042518.2A
Other languages
English (en)
Inventor
村上豊
桥田伸彦
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Panasonic Intellectual Property Corp of America
Original Assignee
Panasonic Intellectual Property Corp of America
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Panasonic Intellectual Property Corp of America filed Critical Panasonic Intellectual Property Corp of America
Publication of CN112334787A publication Critical patent/CN112334787A/zh
Pending legal-status Critical Current

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L27/00Modulated-carrier systems
    • H04L27/26Systems using multi-frequency codes
    • H04L27/2601Multicarrier modulation systems
    • H04L27/2602Signal structure
    • H04L27/2605Symbol extensions, e.g. Zero Tail, Unique Word [UW]
    • GPHYSICS
    • G01MEASURING; TESTING
    • G01SRADIO DIRECTION-FINDING; RADIO NAVIGATION; DETERMINING DISTANCE OR VELOCITY BY USE OF RADIO WAVES; LOCATING OR PRESENCE-DETECTING BY USE OF THE REFLECTION OR RERADIATION OF RADIO WAVES; ANALOGOUS ARRANGEMENTS USING OTHER WAVES
    • G01S13/00Systems using the reflection or reradiation of radio waves, e.g. radar systems; Analogous systems using reflection or reradiation of waves whose nature or wavelength is irrelevant or unspecified
    • G01S13/02Systems using reflection of radio waves, e.g. primary radar systems; Analogous systems
    • G01S13/06Systems determining position data of a target
    • G01S13/42Simultaneous measurement of distance and other co-ordinates
    • GPHYSICS
    • G01MEASURING; TESTING
    • G01SRADIO DIRECTION-FINDING; RADIO NAVIGATION; DETERMINING DISTANCE OR VELOCITY BY USE OF RADIO WAVES; LOCATING OR PRESENCE-DETECTING BY USE OF THE REFLECTION OR RERADIATION OF RADIO WAVES; ANALOGOUS ARRANGEMENTS USING OTHER WAVES
    • G01S7/00Details of systems according to groups G01S13/00, G01S15/00, G01S17/00
    • G01S7/02Details of systems according to groups G01S13/00, G01S15/00, G01S17/00 of systems according to group G01S13/00
    • G01S7/03Details of HF subsystems specially adapted therefor, e.g. common to transmitter and receiver
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L27/00Modulated-carrier systems
    • H04L27/26Systems using multi-frequency codes
    • H04L27/2601Multicarrier modulation systems
    • H04L27/2602Signal structure
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04WWIRELESS COMMUNICATION NETWORKS
    • H04W72/00Local resource management
    • H04W72/04Wireless resource allocation
    • GPHYSICS
    • G01MEASURING; TESTING
    • G01SRADIO DIRECTION-FINDING; RADIO NAVIGATION; DETERMINING DISTANCE OR VELOCITY BY USE OF RADIO WAVES; LOCATING OR PRESENCE-DETECTING BY USE OF THE REFLECTION OR RERADIATION OF RADIO WAVES; ANALOGOUS ARRANGEMENTS USING OTHER WAVES
    • G01S7/00Details of systems according to groups G01S13/00, G01S15/00, G01S17/00
    • G01S7/02Details of systems according to groups G01S13/00, G01S15/00, G01S17/00 of systems according to group G01S13/00
    • G01S7/28Details of pulse systems
    • G01S7/282Transmitters
    • GPHYSICS
    • G01MEASURING; TESTING
    • G01SRADIO DIRECTION-FINDING; RADIO NAVIGATION; DETERMINING DISTANCE OR VELOCITY BY USE OF RADIO WAVES; LOCATING OR PRESENCE-DETECTING BY USE OF THE REFLECTION OR RERADIATION OF RADIO WAVES; ANALOGOUS ARRANGEMENTS USING OTHER WAVES
    • G01S7/00Details of systems according to groups G01S13/00, G01S15/00, G01S17/00
    • G01S7/02Details of systems according to groups G01S13/00, G01S15/00, G01S17/00 of systems according to group G01S13/00
    • G01S7/35Details of non-pulse systems
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04LTRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L5/00Arrangements affording multiple use of the transmission path
    • H04L5/0001Arrangements for dividing the transmission path
    • H04L5/0003Two-dimensional division
    • H04L5/0005Time-frequency
    • H04L5/0007Time-frequency the frequencies being orthogonal, e.g. OFDM(A), DMT

Landscapes

  • Engineering & Computer Science (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Radar, Positioning & Navigation (AREA)
  • Remote Sensing (AREA)
  • Signal Processing (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Radar Systems Or Details Thereof (AREA)

Abstract

发送装置(A3)具备:帧构成部(A31),构成基于OFDMA(Orthogonal Frequency‑Division Multiple Access)方式且包括时间频率资源的帧,该时间频率资源是由时间以及频率规定的资源;以及发送部(A32),将由帧构成部(A31)构成的帧,通过电波发送,帧构成部(A31)将包括通信用资源和感测用资源的帧作为上述帧来构成,通信用资源是配置包括通信数据的码元的时间频率资源,感测用资源是配置用于通过电波的感测的码元的时间频率资源,电波是由发送部(A32)发送的。

Description

发送装置、控制系统、以及发送方法
技术领域
本公开涉及发送装置、控制系统、以及发送方法。
背景技术
作为对周围的状况进行感测的方法,例如有利用相机等来检测周围的光的方法、以及向周围照射光、红外线、超声波等,从而对反射的光、红外线、超声波等进行检测的方法等。并且,近些年提出了利用电波来对周围的状况进行感测的方式。
(现有技术文献)
(非专利文献)
非专利文献1 S.Schuster,S.Scheiblhofer,R.Feger,and A.Stelzer,“Signalmodel and statistical analysis for the sequential sampling pulse radartechnique,”in Proc.IEEE Radar Conf,2008,pp.1-6,2008
非专利文献2 D.Cao,T.Li,P.Kang,H.Liu,S.Zhou,H.Su,“Single-Pulse Multi-Beams Operation of Phased Array Radar”,2016 CIE International Conference onRadar(RADAR),pp.1-4,2016
非专利文献3 A.Bourdoux,K.Parashar,and M.Bauduin,“Phenomenology ofmutual interference of FMCW and PMCW automotive radars,”in 2017 IEEE RadarConference(Radar Conf.),pp.1709-1714,2017
非专利文献4 J.Fink,F.K.Jondral,“Comparison of OFDM radar and chirpsequence radar,”in 2015 16th International Radar Symposium(IRS),pp.315-320,2015
利用空间的感测的目的、用途、利用环境逐步变得多样化。
发明内容
于是,本公开提供一种能够进行周围的感测的发送装置以及发送方法。
本公开的一个形态中的发送装置具备:帧构成部,构成基于OFDMA方式且包括多个时间频率资源的帧,所述时间频率资源是由时间以及频率规定的资源,所述OFDMA是指,Orthogonal Frequency-Division Multiple Access即正交频分多址;以及发送部,将由所述帧构成部构成的所述帧,通过电波发送,所述帧构成部,将包括通信用资源和感测用资源的帧作为所述帧来构成,所述通信用资源是配置包括通信数据的码元的时间频率资源,所述感测用资源是配置用于通过电波的感测的码元的时间频率资源,所述电波是由所述发送部发送的电波。
另外,这些概括性或具体的形态可以通过系统、方法、集成电路、计算机程序或者计算机可读取的CD-ROM等记录介质来实现,也可以通过系统、方法、集成电路、计算机程序以及记录介质的任意的组合来实现。
本公开的发送装置能够进行周围的感测。
附图说明
图1是示出实施方式1中的检测装置的构成的一个例子的图。
图2是示出实施方式1中的检测装置的构成的一个例子的图。
图3是示出实施方式1中的检测装置的构成的一个例子的图。
图4是示出实施方式1中的检测装置的构成的变形例的图。
图5是示出实施方式1中的检测装置的构成的变形例的图。
图6是示出实施方式1中的检测装置的构成的变形例的图。
图7是示出实施方式1中的检测装置的分离的构成的一个例子的图。
图8是示出实施方式1中的检测装置的分离的构成的一个例子的图。
图9是示出实施方式1中的检测装置的分离的构成的一个例子的图。
图10是示出实施方式1中的检测装置的分离的构成的一个例子图。
图11是示出实施方式2中的装置的状态的一个例子的图。
图12是示出实施方式2中的帧的结构的一个例子的图。
图13是示出实施方式2中的帧的结构的一个例子的图。
图14是示出实施方式3中的装置的构成的一个例子的图。
图15是示出实施方式3中的装置的构成的一个例子的图。
图16是示出实施方式3中的装置的构成的一个例子的图。
图17是示出实施方式4中的系统构成的一个例子的图。
图18是示出实施方式4中的装置的构成的一个例子的图。
图19是示出实施方式4中的帧的结构的一个例子的图。
图20是示出实施方式4中的帧的结构的一个例子的图。
图21是示出实施方式4中的帧的结构的一个例子的图。
图22是示出实施方式4中的帧的结构的一个例子的图。
图23是示出实施方式4中的帧的结构的一个例子的图。
图24是示出实施方式4中的帧的结构的一个例子的图。
图25是示出实施方式4中的帧的结构的一个例子的图。
图26是示出实施方式4中的帧的结构的一个例子的图。
图27是示出实施方式4中的帧的结构的一个例子的图。
图28是示出实施方式4中的帧的结构的一个例子的图。
图29是示出实施方式4中的帧的结构的一个例子的图。
图30是示出实施方式4中的帧的结构的一个例子的图。
图31是示出实施方式4中的帧的结构的一个例子的图。
图32是示出实施方式4中的帧的结构的一个例子的图。
图33是示出实施方式4中的帧的结构的一个例子的图。
图34是示出实施方式4中的帧的结构的一个例子的图。
图35是示出实施方式4中的帧的结构的一个例子的图。
图36是示出实施方式4中的帧的结构的一个例子的图。
图37是示出实施方式4中的帧的结构的一个例子的图。
图38是示出实施方式5中的控制系统的构成的一个例子的图。
图39是示出实施方式5中的控制系统的构成的一个例子的图。
图40是示出实施方式5中的控制系统的外观的一个例子的图。
图41是示出实施方式5中的控制系统的处理的一个例子的图。
图42是示出实施方式6中的发送装置的构成的一个例子的图。
图43是示出实施方式6中的发送装置的处理的一个例子的图。
图44是示出实施方式7中的装置的构成的一个例子的图。
图45是示出实施方式7中的装置与人的关系的一个例子的图。
图46是示出实施方式7中的人与终端与装置的状态的一个例子的图。
图47是示出实施方式7中的人与终端与装置的状态的一个例子的图。
图48是示出实施方式7中的装置与终端与人的关系的一个例子的图。
图49是示出实施方式7中的装置与终端与人的关系的一个例子的图。
图50是示出实施方式8中的各装置的状态的一个例子图。
图51是在实施方式8中的住宅内设置了AP时的工作例的流程图。
图52是实施方式8中的AP的工作例的流程图。
图53是实施方式8中的系统的工作例的流程图。
图54是实施方式8中的AP、云服务器的工作例的流程图。
图55是示出实施方式9中的各装置的状态的一个例子的图。
图56是在实施方式9中的住宅内设置了AP时的工作例的流程图。
图57是实施方式9中的AP的工作例的流程图。
图58是实施方式9中的系统的工作例的流程图。
图59是实施方式9中的AP、云服务器的工作例的流程图。
图60是示出实施方式10中的系统的构成的一个例子的图。
图61是示出实施方式10中的系统的构成的一个例子图。
图62是示出实施方式10中的系统的构成的一个例子图。
图63是示出实施方式10中的系统的构成的一个例子的图。
图64是示出各实施方式中的感测的方法的图。
图65是示出各实施方式中的感测的方法的图。
图66是各实施方式中的利用三角测量而进行的的位置的测量或者估计的说明图。
具体实施方式
本发明的一个形态所涉及的发送装置具备:帧构成部,构成基于OFDMA方式且包括多个时间频率资源的帧,所述时间频率资源是由时间以及频率规定的资源,所述OFDMA是指,Orthogonal Frequency-Division Multiple Access即正交频分多址;以及发送部,将由所述帧构成部构成的所述帧,通过电波发送,所述帧构成部,将包括通信用资源和感测用资源的帧作为所述帧来构成,所述通信用资源是配置包括通信数据的码元的时间频率资源,所述感测用资源是配置用于通过电波的感测的码元的时间频率资源,所述电波是由所述发送部发送的电波。
通过上述形态,发送装置能够通过发送部来进行利用了电波的通信、以及利用了电波的发送装置的周围的物体的感测。具体而言,发送装置能够利用被配置在发送部通过电波发送的帧内的通信用资源来进行通信,并且,能够利用被配置在该帧内的感测用资源来进行感测。据此,发送装置能够进行周围的感测。
例如也可以是,所述帧至少包括时间不同而频率相同的2个感测用资源,且所述2个感测用资源在时间方向上以夹着防护区间的方式而相邻配置。
通过上述形态,发送装置通过在帧内的2个感测用资源之间设置防护区间,从而能够回避该2个感测用资源的干扰,并能够进一步进行恰当的发送装置的周围的感测。据此,发送装置能够进一步进行恰当的周围的感测。
例如也可以是,所述帧包括2个防护区间,所述2个防护区间的时间长度不同,且频率不同。
通过上述形态,发送装置能够在帧内的彼此不同的频率设定时间长度不同的防护区间。据此,由于能够按照频率来灵活地设置防护区间,因此能够回避该2个感测用资源的干扰,并能够进一步进行恰当的发送装置的周围的感测。因此,发送装置能够进行更恰当的周围的感测。
例如也可以是,所述帧至少包括2个感测用资源,所述2个感测用资源的频率不同,且时间长度不同。
通过上述形态,发送装置能够在帧内,在彼此不同的频率配置时间长度不同的2个感测用资源。据此,由于能够按照频率来灵活地配置感测用资源,因此能够回避该2个感测用资源的干扰,并且能够进一步进行恰当的发送装置的周围的感测。因此,发送装置能够进行更恰当的周围的感测。
例如也可以是,所述发送装置进一步具备:接收部,接收由所述发送部发送的所述电波的反射波;以及处理部,通过对所述接收部接收的所述反射波进行解析,来执行感测处理。
通过上述形态,发送装置能够接收被发送的电波的反射波,并能够进行解析。因此,发送装置能够得到发送装置的周围的感测结果。
例如也可以是,所述感测处理至少包括,通过对所述接收部接收的所述反射波进行解析,从而对物体的位置进行检测的处理、对物体的有无进行检测的处理、或对物体的外形进行检测的处理。
通过上述形态,发送装置通过对物体的位置进行检测的处理、对物体的有无进行检测的处理、或对物体的外形进行检测的处理,从而能够更容易地得到发送装置的周围的感测结果。
例如也可以是,所述发送装置进一步包括控制部,该控制部根据由所述处理部进行的所述感测处理的结果,来对电气设备的驱动进行控制。
通过上述形态,发送装置能够根据发送装置的周围的感测结果,来控制电气设备的驱动。据此,能够利用周围的感测的结果,来对电气设备的驱动进行控制。
并且,本发明的一个形态所涉及的控制系统具备上述的发送装置、以及所述发送装置的所述控制部进行的控制来驱动的所述电气设备。
通过上述形态,控制系统能够实现与上述发送装置同样的效果。
并且,本发明的一个形态所涉及的发送方法包括:帧构成步骤,构成基于OFDMA方式且包括多个时间频率资源的帧,所述时间频率资源是由时间以及频率规定的资源,所述OFDMA是指,Orthogonal Frequency-Division Multiple Access即正交频分多址;以及发送步骤,将在所述帧构成步骤构成的所述帧,通过电波发送,在所述帧构成步骤中,将包括通信用资源和感测用资源的帧作为所述帧来构成,所述通信用资源是配置包括通信数据的码元的时间频率资源,所述感测用资源是配置用于通过电波的感测的码元的时间频率资源,所述电波是在所述发送步骤发送的电波。
通过上述形态,发送方法能够实现与上述发送装置同样的效果。
另外,这些概括性的或者具体的形态可以由系统、方法、集成电路、计算机程序或者计算机可读取的CD-ROM等记录介质来实现,也可以由系统、方法、集成电路、计算机程序或者记录介质的任意的组合来实现。
以下参照附图对本公开中的发送装置进行详细说明。
另外,以下将要说明的实施方式均为概括性的或具体的例子。以下的实施方式所示的数值、形状、材料、构成要素、构成要素的配置位置以及连接方式、步骤、步骤的顺序等均为一个例子,主旨并非是对本发明进行限定。并且,对于以下的实施方式的构成要素之中没有记载在示出最上位概念的独立技术方案中的构成要素,作为任意的构成要素来说明。
(实施方式1)
在本实施方式中,对能够检测周围的物体的位置、多个物体的位置关系、与物体的距离等的检测装置的构成进行说明。另外,检测装置也称为发送装置。
图1示出了本实施方式中的检测装置的构成的一个例子。
发送装置Y101将控制信号Y100作为输入。此时,控制信号Y100例如包括“开始物体检测的工作”的信息、“结束物体检测的工作”的信息、“开始静止图像或者运动图像的存储”的信息、“结束静止图像或者运动图像的存储”的信息等用于对检测装置中包括的一个或者多个构成的工作进行控制的信息。
在控制信号Y100包括“开始物体检测的工作”的信息的情况下,例如发送装置Y101生成M个用于在接收装置Y106进行电波的波达方向估计的调制信号,并输出M个发送信号。即,输出发送信号Y102_1至Y102_M。另外,M为1以上的整数。于是,发送信号Y102_i作为电波从天线Y103_i输出。另外,i为1以上M以下的整数。并且,天线Y103_i可以由一个天线构成,也可以由多个天线构成。由多个天线构成的天线Y103_i也可以具备进行指向性控制的功能。
从发送装置Y101被发送来的调制信号由位于放射方向或者放射范围的物体反射。于是,接收装置Y106接收该反射波。因此,接收装置Y106将“由天线Y104_1接收的接收信号群Y105_1”至“由天线Y104_N接收的接收信号群Y105_N”作为输入。另外,N为1以上的整数。
以下对天线Y104_i由多个天线构成的情况进行说明。因此在以下的说明中,将以天线Y104_i接收的信号称为“接收信号群Y105_i”。例如,在天线Y104_i由16个天线构成的情况下,接收信号群Y105_i则为由16个接收信号构成。
接收装置Y106例如针对接收信号群Y105_1,在进行波达方向估计的同时,利用发送装置Y101对调制信号进行发送的时刻以及得到接收信号群Y105_1的时刻,对物体的距离进行估计。因此,接收装置Y106对物体估计信息Y107_1进行输出。另外,上述的说明中的“物体的距离”这一用语中的距离是指,例如物体与检测装置之间的距离。在此,作为距离而被算出的值例如可以考虑为物体与天线之间的距离、物体与多个天线的中心位置之间的距离、物体与后述的传感器部之间的距离等。并且,“物体的距离”例如可以是调制信号在物体进行反射的点或者区域与检测装置之间的距离。并且,例如在对多个调制信号进行同时发送的情况下,在一个物体中的多个点或者区域每一个,“物体的距离”会有被同时测量的情况。
同样,接收装置Y106针对接收信号群Y105_i,在进行波达方向估计的同时,利用发送装置Y101对调制信号进行发送的时刻以及得到接收信号群Y105_i的时刻,对物体的距离进行估计。因此,接收装置Y106对物体估计信息Y107_i进行输出。另外,i为1以上N以下的整数。
第1处理部Y108将物体估计信息Y107_1至物体估计信息Y107_N作为输入。第1处理部Y108例如利用物体估计信息Y107_1至物体估计信息Y107_N,进行详细的物体估计,并输出物体估计信号Y109。
显示部Y113将图像信息Y124、用于限定对物体进行识别的区域的区域信息Y111作为输入,对图像与对物体进行识别的区域建立关联,并输出区域信号Y114。另外,图像与对物体进行识别的区域的关联例如是指,“在显示部Y113得到的图像中,指定进行物体识别的区域”。并且,图像与对物体进行识别的区域的关联例如也可以是,“按照以在显示部Y113得到的图像而被确定的区域,来确定第1处理部Y108进行物体识别的区域”。
选择部Y112将用于限定进行物体识别的区域的、区域信息Y111以及区域信号Y114作为输入。于是,选择部Y112根据区域信息Y111以及区域信号Y114,来决定对物体进行检测的区域,并输出选择区域信号Y115。另外,选择部Y112也可以不限定对物体进行检测的区域,在这种情况下,选择部Y112可以不输出选择区域信号Y115,并且可以将“不限定对物体进行检测的区域”这一信息包括在选择区域信号Y115中。
在此虽然记载了“存在显示部Y113”、“显示部Y113输出区域信号Y114”,不过也可以不是这种构成。并且,显示部Y113也可以通过液晶等画面中的触控面板的功能(对如液晶等面板这种显示装置与如触摸板这种位置输入装置进行了组合的装置),按照用户的指定来限定物体的检测区域。
第2处理部Y116将物体估计信号Y109、选择区域信号Y115、图像信息Y124作为输入。此时,第2处理部Y116进行第1处理方法以及第2处理方法。另外,第2处理部Y116也可以执行第1处理方法以及第2处理方法的任一个,还可以按照状况,对第1处理方法与第2处理方法进行切换来进行处理。并且也可以是,第2处理部Y116以物体估计信号Y109,来生成用于存储多个位置的距离信息的辅助信息。另外,辅助信息例如是多个“与成为拍摄候选的物体对应的位置信息”,第2处理部Y116可以从多个“与成为拍摄候选的物体对应的位置信息”中选择“与成为拍摄对象的物体对应的位置信息”。
第1处理方法:
第2处理部Y116根据图像信息Y124,进行物体的识别。于是,第2处理部Y116根据该物体的识别信息和物体估计信号Y109,对识别的各物体与检测装置之间的距离进行估计,并输出估计距离信息Y117。另外,第2处理部Y116也可以根据选择区域信号Y115,来限定对物体进行识别的区域。并且,第2处理部Y116也可以根据选择区域信号Y115,来限制进行距离估计的物体。
第2处理方法:
第2处理部Y116根据物体估计信号Y109和图像信息Y124,对各物体与检测装置之间的距离进行估计,并输出估计距离信息Y117。另外,第2处理部Y116可以根据选择区域信号Y115,来限定对物体进行识别的区域。并且,第2处理部Y116也可以根据选择区域信号Y115,来限制进行距离估计的物体。
透镜控制部Y110将物体估计信号Y109和估计距离信息Y117作为输入。于是,透镜控制部Y110“利用物体估计信号Y109以及估计距离信息Y117”、或者“利用物体估计信号Y109或者估计距离信息Y117的任一个”,来决定透镜关联的工作的控制,例如决定“针对成为对象的物体的焦距的控制”、“针对成为对象的物体的透镜的焦点(聚焦)的控制”、“拍摄成为对象的物体的方向的控制”等,输出工作控制信号Y118。
透镜部Y119将工作控制信号Y118作为输入,根据工作控制信号Y118,进行透镜关联的工作的控制,例如进行“针对成为对象的物体的焦距的控制”、“针对成为对象的物体的透镜的焦点(聚焦)的控制”、“拍摄成为对象的物体的方向的控制”等控制,输出物体信号Y120。另外,物体信号Y120是光信号。
快门部Y121将控制信号Y100和物体信号Y120作为输入,根据控制信号Y100,来控制快门的工作,输出控制后的物体信号Y122。
传感器部Y123将控制后的物体信号Y122作为输入,例如进行光电信号的转换,输出图像信息Y124。作为传感器部Y123,例如能够采用CCD(Charge-Coupled Device)图像传感器、CMOS(Complementary Metal Oxide Semiconductor)图像传感器、有机CMOS图像传感器等。
存储部Y125将控制信号Y100和图像信息Y124作为输入,根据控制信号Y100,存储图像信息,例如存储运动图像、静止图像。另外,存储部Y125也可以将由传感器部Y123获得的图像信息直接进行存储,利用图像编码技术,来存储被编码的编码数据。
另外也可以是,存储部Y125除了图像信息以外或者取代图像信息,而针对图像施加信号处理,将作为信号处理的结果的解析数据进行存储。解析数据例如是,针对人、动物、车辆或者无人机等被预先设定的任意的检测对象的信息,例如该检测对象是否被拍摄,即检测对象是否停留在拍摄区域内的信息。并且,解析数据可以包括检测对象的颜色或大小等与属性相关的信息、检测对象的朝向、移动路径、速度、停留时间、或者与在做什么、在看什么等工作有关的信息。与属性相关的信息例如在是人的情况下,可以使用性別或年龄等,在是车辆等情况下,可以是车辆种类、乘坐人数、被装载的货物量等。
如以上说明所示,通过本实施方式中的检测装置,能够利用电波来估计与物体的距离。并且,通过本实施方式中的检测装置,根据被估计的与物体的距离,来控制对物体进行拍摄时所使用的透镜,据此,例如能够对成为拍摄的对象的物体进行鲜明的拍摄等,从而能够按照目的来进行透镜的控制。并且,通过本实施方式中的检测装置,例如即使在周边较暗的状况下,也能够估计与物体的距离,从而能够提高与物体的距离的估计的可靠性。并且,通过进行基于电波的与物体的距离估计和基于光信号(图像)的与物体的距离估计,从而能够得到的效果是,能够以更高的精确度或高的可靠性来进行距离估计。
接着将要说明的构成是,能够对与图1不同的物体进行高精确度检测的检测装置。
图2示出了与图1不同的检测装置的构成例。另外,在图2中对于与图1同样的工作赋予相同的编号,并省略说明。
附带快门功能的传感器部Y200将控制信号Y100、物体信号Y120作为输入。附带快门功能的传感器部Y200将控制信号Y100作为输入,根据控制信号Y100,对快门的工作进行控制,于是例如通过进行光电信号的转换,来生成图像信息Y124并输出。另外,作为附带快门功能的传感器部Y200的快门,例如有电子快门、全局快门等。
在图2中,关于附带快门功能的传感器部Y200以外的部分的工作,与利用图1进行的说明相同。
通过上述构成的检测装置,能够利用电波来估计与物体的距离。并且,通过上述构成的检测装置,能够根据被估计的与物体的距离,来控制在对物体进行拍摄时所使用的透镜,据此,例如能够鲜明地拍摄成为拍摄的对象的物体等,从而能够进行与目的对应的透镜的控制。并且,通过上述构成的检测装置,例如即使在周边暗的情况下,也能够估计与物体的距离,并能够提高与物体的距离的估计的可靠性。并且,通过执行基于电波的与物体的距离估计和基于光信号(图像)的与物体的距离估计,从而能够得到的效果是,能够进行更高精确度的或者可靠性高的距离估计。
接着,对能够高精确地检测与图1以及图2不同的物体的检测装置的构成进行说明。
图3示出了与图1以及图2不同的检测装置的构成例。另外,在图3中对于与图1以及图2同样的工作赋予相同的编号,并省略说明。
在图3中具有特点之处是,“检测装置具备快门部Y121以及附带快门功能的传感器部Y200”。
例如,快门部Y121由焦平面快门这种机械式快门构成。并且,附带快门功能的传感器部Y200所具备的快门为电子快门或者全局快门。
附带快门功能的传感器部Y200将控制信号Y100作为输入,在控制信号Y100中包含的工作信息为运动图像模式的情况下,附带快门功能的传感器部Y200所具备的快门功能进行工作。另外,快门部Y121将控制信号Y100作为输入,在控制信号Y100中包含的工作信息为运动图像模式的情况下,快门部Y121不进行快门的工作,即快门成为打开的状态。
附带快门功能的传感器部Y200将控制信号Y100作为输入,在控制信号Y100中包含的工作信息为静止图像模式的情况下,在控制信号Y100中例如包括快门速度的信息。附带快门功能的传感器部Y200在静止图像模式的情况下,按照快门速度的信息,使附带快门功能的传感器部Y200的快门功能工作。
并且,快门部Y121将控制信号Y100作为输入,在控制信号Y100中包含的工作信息为静止图像模式的情况下,在控制信号Y100中例如包括快门速度的信息。快门部Y121在静止图像模式的情况下,按照快门速度的信息,使快门功能工作。
另外,在静止图像模式下,附带快门功能的传感器部Y200的快门功能工作时,快门部Y121的快门功能不工作。相反,在快门部Y121的快门功能工作时,附带快门功能的传感器部Y200的快门功能不工作。
在图3中,对于上述说明以外的部分的工作,与在图1中的说明相同。
通过上述构成的检测装置,能够利用电波来估计与物体的距离。并且,通过上述构成的检测装置,根据被估计的与物体的距离,来控制在对物体进行拍摄时所使用的透镜,据此,例如能够鲜明地拍摄成为拍摄的对象的物体等,从而能够进行与目的对应的透镜的控制。并且,通过上述构成的检测装置,例如即使在周边暗的情况下,也能够估计与物体的距离,并且能够提高与物体的距离的估计的可靠性。并且,通过执行基于电波的与物体的距离估计和基于光信号(图像)的与物体的距离估计,从而能够得到的效果是,能够以更高的精确度或者更高的可靠性来进行距离估计。
图4示出了图1的变形例。
在图4中,对于与图1同样的工作,赋予相同的编号并省略说明。
第2处理部Y116将物体估计信号Y109、选择区域信号Y115、图像信息Y124、数据群Y403作为输入。此时,第2处理部Y116根据数据群Y403,从图像信息Y124中进行物体的识别。于是,第2处理部Y116根据该物体的识别信息和物体估计信号Y109,对识别的各物体和图本身的检测装置的距离进行估计,并输出估计距离信息Y117。另外,第2处理部Y116也可以通过选择区域信号Y115,来限制进行距离估计的物体。
作为利用图像信息Y124进行物体的识别时所使用的信号处理的一个例子,例如可以是,对人或人脸等身体的一部分进行检测的处理、对人物进行识别的处理、对车辆や无人机等对象物进行检测的处理、对车辆或无人机等对象物进行识别的处理、对被检测的人或对象物的工作或者移动进行检测的处理、对被检测的人或对象物进行追踪的处理等。在此,图像信息Y124可以是一或者多个静止图像,也可以是由以预先规定的定时而被连续地获得的多个帧结构的运动图像。
这些信号处理例如是如下这样执行的,例如从图像信息Y124中,提取按照该信号处理的目的而决定的通过各自的规定的运算处理而得到的一个或者多个特征量,将被提取的特征量与想要识别的对象物或其工作所对应的已知的特征量进行比较,根据比较的结果来执行信号处理。并且,这些信号处理也可以根据被提取的特征量是否超过规定的阈值的判断结果而被执行。并且,这些信号处理也可以根据上述例子以外的信号处理而被执行,例如可以通过利用多层结构的神经网络进行机器学习而制作的模型而被执行。在利用通过多层结构的神经网络来进行机器学习而被制作的模型的情况下,可以在针对运动图像用的摄像数据进行前处理的基础上,将前处理后的数据输入到利用多层结构的神经网络来进行机器学习而制作的模型。
在图4中也可以是,第2处理部Y116针对查询数据部Y402输出数据。例如,可以根据该数据,查询数据部Y402减少数据群Y403的输出数据量。
在上述说明中虽然记载了,第2处理部Y116利用图像信息Y124进行物体的识别的例子,除了图像信息Y124以外还可以利用物体估计信号Y109来进行物体的识别。此时,物体估计信号Y109可以不必仅由距离信息来构成,例如也可以包括通过对接收信号群Y105_i进行解析而得到的反射率等信息。
并且,第2处理部Y116也可以输出物体的识别信息Y404。
通信装置Y400将物体的识别信息Y404作为输入,生成包括该数据的调制信号,并发送到通信对方的通信装置。此时,通信对方的通信装置例如与服务器连接,服务器从通信装置Y400所发送的调制信号中获得物体的识别信息Y404,制作物体识别的数据库,服务器经由通信装置,生成包括该数据库的调制信号,并发送到通信装置Y400。
通信装置Y400接收该调制信号,获得物体识别的数据库Y401,并输出给查询数据部Y402。于是,查询数据部Y402将物体识别的数据库Y401作为输入,对用于第2处理部Y116进行物体识别的的数据群Y403进行更新。
通过上述构成的检测装置,能够利用电波来估计与物体的距离。并且,通过上述构成的检测装置,根据被估计的与物体的距离,来控制在对物体进行拍摄时所使用的透镜,据此,例如能够鲜明地拍摄成为拍摄的对象的物体等,从而能够按照目的对透镜进行控制。并且,通过上述构成的检测装置,例如即使在周边暗的情况下,也能够估计与物体的距离,从而能够提高与物体的距离的估计的可靠性。并且,通过执行基于电波的与物体的距离估计和基于光信号(图像)的与物体的距离估计,从而能够得到的效果是,能够以更高的精确度或者更高的可靠性来进行距离估计。
而且,通过上述构成的检测装置,由于是对物体的识别时所使用的数据库进行更新的构成,因此能够提高物体识别中的精确度以及可靠性,这样,能够提高距离估计的精确度以及可靠性。并且,在除了图像信息以外,来利用通过电波得到的信息来进行物体识别的情况下,能够提高物体识别中的精确度以及可靠性。
图5是图2的变形例,对于与图1、图2以及图4相同的工作,赋予相同的编号并省略说明。关于图5中的各部的工作,由于已经进行了说明,因此省略说明。
图6是图3的变形例,对于与图1、图2以及图4同样的工作,赋予相同的编号并省略说明。关于图6中的各部的工作,由于已经进行了说明,因此省略说明。
通过上述构成的检测装置,能够利用电波来估计与物体的距离。并且,通过上述构成的检测装置,根据被估计的与物体的距离,来控制在对物体进行拍摄时所使用的透镜,据此,例如能够鲜明地拍摄成为拍摄的对象的物体等,从而能够按照目的对透镜进行控制。并且,通过上述构成的检测装置,例如即使在周边暗的情况下,也能够估计与物体的距离,从而能够提高与物体的距离的估计的可靠性。并且,通过执行基于电波的与物体的距离估计和基于光信号(图像)的与物体的距离估计,从而能够得到的效果是,能够以更高的精确度或者更高的可靠性来进行距离估计。
而且,通过上述构成的检测装置,由于是对物体的识别时所使用的数据库进行更新的构成,因此能够提高物体识别中的精确度以及可靠性,这样,能够提高距离估计的精确度以及可靠性。并且,在处理图像信息以外,还利用通过电波而得到的信息来进行物体识别的情况下,能够提高物体识别中的精确度以及可靠性。
在本实施方式中,作为图1至图6的构成的一个例子,虽然将装置称为“检测装置”进行了说明,关于名称并非受此所限。例如,本实施方式中的装置由于具备存储部,因此也可以称为“存储装置”,由于具备传感器部,也可以称为“相机”、“摄像机”、“监视用相机”、“安全监控用相机”、“记录装置”、“静止图像拍摄装置”。并且,可以简单称为“装置”。另外,关于名称并非受此所限。
并且,图1、图2、图3、图4、图5以及图6的构成也可以由分离的多个装置的组合而构成的系统来实现。以下对作为分离的多个装置来实现的情况下的例子进行说明。
图7示出第1个“装置的分离例”。
第2装置Y702是具备图1、图2、图3、图4、图5以及图6的装置中的透镜部Y119的装置。于是,第1装置Y701成为具备图1、图2、图3、图4、图5、图6的装置中的透镜部Y119以外的部分的装置。
于是,第1装置Y701具备用于与第2装置Y702连接的第1接口Y703,第2装置Y702具备用于与第1装置Y701连接的第2接口Y704。
因此,第1接口Y703将工作控制信号Y118作为输入。于是,第2接口Y704将信号输出到透镜部Y119。因此,通过对第1接口Y703与第2接口Y704进行连接,透镜部Y119能够得到相当于工作控制信号Y118的信号。另外,第1接口Y703与第2接口Y704可以是任意的连接。例如可以是第1接口Y703与第2接口Y704直接连接,也可以是第1接口Y703与第2接口Y704经由连接电缆等连接。另外,连接方法并非受这些例子所限。
图8是第2个“装置的分离例”。
第3装置Y802成为具备图1、图2、图3、图4、图5、图6的装置中的发送装置Y101、天线Y103_1至Y103_M、天线Y104_1至Y104_N、接收装置Y106、第1处理部Y108的装置。于是,第1’装置Y801成为具备图1、图2、图3、图4、图5、图6的装置中的“发送装置Y101、天线Y103_1至Y103_M、天线Y104_1至Y104_N、接收装置Y106、第1处理部Y108”以外的部分的装置。
于是,第1’装置Y801具备用于与第3装置Y802连接的第3接口Y803,第3装置Y802具备用于与第1’装置Y801连接的第4接口Y804。
因此,第3接口Y803将控制信号Y100作为输入。于是,第4接口Y804将信号输出到发送装置Y101。因此,通过对第3接口Y803与第4接口Y804进行连接,发送装置Y101能够得到相当于控制信号Y100的信号。
并且,第4接口Y804将物体估计信号Y109作为输入。于是,第3接口Y803输出信号。因此,通过对第3接口Y803与第4接口Y804进行连接,从而第3接口Y803输出相当于物体估计信号Y109的信号。
另外,第3接口Y803与第4接口Y804可以是任意的连接。例如,第3接口Y803与第4接口Y804可以被直接连接,第3接口Y803与第4接口Y804也可以经由连接电缆等来连接。另外,连接方法并非受这些例子所限。
图9是第3个“装置的分离例”。另外,在图9中,对于与图7以及图8同样的工作,赋予相同的编号并省略说明。
第1”装置Y901成为具备图1、图2、图3、图4、图5以及图6的装置中的“发送装置Y101、天线Y103_1至Y103_M、天线Y104_1至Y104_N、接收装置Y106、第1处理部Y108、透镜部Y119”以外的部分的装置。并且,第1”装置Y901具备第1接口Y703、第3接口Y803。
另外,在图9中,针对第1接口Y703、第2接口Y704、第3接口Y803、第4接口Y804的工作,与已经进行的说明相同。
图9是第3个“装置的分离例”。另外,在图9中,对于与图7以及图8同样的工作,赋予相同的编号并省略说明。
第1”装置Y901成为具备图1、图2、图3、图4、图5、图6的装置中的“发送装置Y101、天线Y103_1至Y103_M、天线Y104_1至Y104_N、接收装置Y106、第1处理部Y108、透镜部Y119”以外的部分的装置。于是,第1”装置Y901具备第1接口Y703、第3接口Y803。
另外,在图9中,对于第1接口Y703、第2接口Y704、第3接口Y803、第4接口Y804的工作,与已经进行的说明相同。
图10是第4个“装置的分离例”。另外,在图10中,对于与图7、图8、图9同样的工作,赋予相同的编号并省略说明。
第4装置Y1002具备图1、图2、图3、图4、图5、图6的装置中的“发送装置Y101、天线Y103_1至Y103_M、天线Y104_1至Y104_N、接收装置Y106、第1处理部Y108、透镜部Y119”,并且具备第2接口Y704、第4接口Y804。另外,对于图10中的各部的工作,由于已经进行了说明,在此省略说明。
以上虽然利用图1至图10对本实施方式的工作例进行了说明,图1至图10的构成为例子,并非受这些构成所限。
图1至图10中的发送装置Y101、接收装置Y106利用的是电波,对此时的工作进行了说明。与此不同,图1至图10中的发送装置Y101例如即使是如下的构成也能够执行,即生成如可见光这种光的调制信号,接收装置Y106对该光的调制信号进行接收。此时,取代天线Y103_1至Y103_M而采用LED(Light Emitting Diode)或有机EL(Electro-Luminescence)等,取代天线Y104_1至Y104_N而采用光电二极管、图像传感器等。
另外,在图1至图10等装置中,也可以利用通过电波来获得的信息,进行物体识别。在图1至图10中具有特点之处是,进行“物体识别、或者与物体的距离估计”、并且对“静止图像或者运动图像”进行记录(存储),具有这种特点的装置的构成并非受图1至图10的构成所限。
另外,在想要延长感测的距离时,需要使发送电力增大。例如能够通过使发送频带变窄的方法,来增大发送电力。并且,能够进行利用了极化波的感测。
(实施方式2)
在本实施方式中将要说明的是,采用了实施方式1中说明的图1至图10等的电波的距离估计、或者进行采用了电波的物体识别的装置所发送的调制信号的构成方法。
图11示出了实施方式1中所说明的进行“采用了电波的距离估计、或者采用了电波的物体识别”的装置Y1101、成为“距离估计或者物体识别”的对象的物体Y1102、以及其他的装置的状态的一个例子。另外,以下将进行“采用了电波的距离估计、或者采用了电波的物体识别”的装置Y1101,简单记载为“装置Y1101”。
在图11中除了装置Y1101、物体Y1102,还示出终端Y1103以及AP(访问接入点)Y1104。
终端Y1103和Y1104的AP在进行通信时使用第1频带。并且,装置Y1101在对物体Y1102进行距离估计或者物体识别时使用第1频带。
此时,在“终端Y1103和Y1104的AP的通信”与“装置Y1101针对物体Y1102的距离估计或者物体识别”被同时执行的情况下,会出现彼此的电波发生干扰,这样有可能导致通信质量降低以及距离估计、物体识别的精确度降低。
在本实施方式中,对用于改善这些降低的方法进行说明。
图12示出了图11中的、终端Y1103和AP(访问接入点)Y1104发送通信用的调制信号时的帧结构的例子,横轴为时间。
通信用基准码元(reference symbol)Y1201是用于“通信对方进行信号检测、时间同步、频率同步、信道估计等”的码元。并且,通信用基准码元Y1201也可以是为了进行数据通信的手续中所需要的控制信息、MAC(Media Access Control)帧。
通信用控制信息码元Y1202例如是通信用数据码元Y1203的例如用于通知通信方法的码元。因此,通信用控制信息码元Y1202例如是纠错编码方法(编码率、块长(码长)、纠错码的信息等)的信息、调制方式的信息、发送方法的信息(例如采用了单流传输或者多流传输的哪一个的信息)(MCS(Modulation and Coding Scheme)的信息)、数据长等信息。
通信用数据码元Y1203是用于向通信对方传输数据的码元。
另外,图12的帧结构仅为一个例子,也可以包括其他的码元。并且,在发送图12的帧时,可以采用单载波传输方式,也可以采用OFDM(Orthogonal Frequency DivisionMultiplexing:正交频分复用)等多载波传输方式。
在通信用基准码元Y1201中也可以包括传输数据的区域。在该传输数据的区域中可以包括用于识别发送信号是“发送通信用的信号”、还是“发送用于物体检测的信号”的数据。
并且,在此虽然称为通信用基准码元Y1201,关于名称并非受此所限,也可以将通信用基准码元Y1201称为导频码元、训练码元、训练字段、前导码、控制信息码元、Midamble码(中间码)等。
图13示出了装置Y1101发送的调制信号的帧结构的一个例子。另外,在图13中,对于与图12同样的工作赋予相同的编号,由于已经进行了说明,因此省略说明。
如在实施方式1的说明所示,根据控制信号Y100中包括的“开始物体检测的工作”、或者“开始静止图像或者运动图像的记录”的信息,首先,装置Y1101对通信用基准码元Y1201进行发送。
另外,“开始物体检测的工作”或者“开始静止图像或者运动图像的记录”可以通过装置Y1101所具备的“用户按下按键”、或者“用户触摸触控面板”、或者“用户按下快门键”、或者“用户按下开始录像键”来实现。
于是,装置Y1101对“用于物体检测的调制信号或者用于与物体的距离估计的调制信号Y1302”进行发送。
装置Y1101如图13所示通过对调制信号进行发送,图11中的终端Y1103以及Y1104的AP通过对图13的通信用基准码元Y1201进行检测,从而可以知道在第1频带存在调制信号。因此,在终端Y1103、以及Y1104的AP对通信用基准码元Y1201进行检测时,暂时对调制信号的发送进行保留。于是,终端Y1103、以及Y1104的AP能够在检测不到通信用基准码元Y1201时,开始调制信号的发送。
通过以上所述,由于能够抑制“由装置Y1101发送的调制信号”与“由终端Y1103、Y1104的AP发送的调制信号”相互干扰这种状况的发生,因此,能够得到“终端Y1103和Y1104的AP的通信的数据的接收质量的提高”、“装置Y1101的距离估计、物体识别的精确度的提高”的效果。
另外,图13的帧结构仅为一个例子,也可以包括其他的调制信号。
以下针对采用了电波的感测方法,举几个例子进行说明。另外,执行采用了以下的实施方式中所说明的电波的感测方法的装置,可以将该感测方法与采用了感测数据的处理组合起来使用,所述感测数据是由实施方式1以及2中说明所示的相机等具有摄像功能的传感器而得到的。并且,执行采用了以下的实施方式中所说明的电波的感测方法的装置,也可以不将该感测方法与采用了通过相机等具有摄像功能的传感器得到的感测数据的处理组合来实施。
在此,使用不与采用了感测数据的处理相组合的电波来执行的感测方法并非是指,不具备相机的装置使用电波来进行感测的情况,所述感测数据是由相机等具有摄像功能的传感器得到的。例如,智能手机这种具备相机的装置,可以将通过一个多个相机进行拍摄或测距等感测、与通过无线通信部或无线雷达等采用电波进行的感测独立进行。并且,智能手机这种具备相机的装置,为了对通过一个或者多个相机进行拍摄或测距等的感测进行控制,而不使用通过无线通信部或无线雷达等利用电波进行的感测结果,并且,为了对通过无线通信部或无线雷达等利用电波进行的感测进行控制,而不使用通过一个或者多个相机进行拍摄或测距等的感测结果,另外,也可以将双方的感测结果与一个应用进行组合来使用。
(实施方式3)
在本实施方式中,例如,系统由进行通信的装置、进行感测的装置、进行通信以及感测的装置之中的一个以上构成。首先,对进行感测的装置、进行通信以及感测的装置的构成等进行说明。
图14示出了对感测用的信号进行发送,并对从周围的物体反射回来的感测用的信号进行接收,进行感测的装置X100的构成的一个例子。
发送装置X101生成发送信号X102_1至X102_M,以用作感测用的信号,将发送信号X102_1至X102_M的每一个从天线X103_1至X103_M发送。在此,用于发送的天线的数量为M,M是1以上的整数、或者2以上的整数。
发送装置X101例如可以针对相同的感测信号乘以按每个天线规定的系数,来生成发送信号X102_1至X102_M,并从天线X103_1至X103_M发送,据此,进行感测信号的指向性控制。并且也可以是,发送装置X101例如针对多个感测信号的每一个,按每个感测信号来乘以按每个天线规定的系数并进行合成,来生成发送信号X102_1至X102_M,并从天线X103_1至X103_M发送。据此,能够按照每个感测信号来进行指向性控制。上述的按每个天线规定的系数、或者按每个感测信号且按每个天线规定的系数由复数或者实数来表示。按照该系数的值,从各天线发送的感测信号的振幅以及/或者位相被变更。不过,系数可以为1,在这种情况下,由发送装置X101生成的感测信号从系数值为1的天线被直接发送。
另外,发送装置X101也可以不进行指向性控制,而对发送信号进行发送。例如,发送装置X101可以将多个感测信号的的每一个,作为对应的天线的发送信号来直接输出,从天线X103_1至X103_M发送。另外,在上述说明中,对感测用信号以及天线的数量为多个的情况进行了说明,发送装置X101所生成的感测用信号的数量以及对感测用信号进行发送的天线的数量也可以是1。
从天线X103_1至X103_M发送的感测用信号在物体#1X110_1或物体#2X110_2反射,反射的感测用信号由装置X100所具备的天线X104_1至X104_N接收。在此,对感测用信号进行接收的天线的数量为N,N为1以上的整数、或者2以上的整数。用于发送的天线的数量M可以与用于接收的天线的数量N相同,也可以不同。
由天线X104_1至X104_N接收的接收信号X105_1至X105_N被输入导接收装置X106。接收装置X106针对接收信号X105_1至X105_N,进行如下的处理,并输出估计信号X107,所述处理例如是指,仅对感测用信号被发送的频带或者频带内的信道的成分进行提取的滤波处理、从无线频带范围变换到中间频带(IF)或基带信号的频带范围的频率变换处理、针对N个接收信号进行加权合成处理等。
针对N个接收信号进行加权合成处理中所使用的系数能够按接收信号X105_1至X105_N的每一个来设定,并且能够通过对系数的值进行变更,来进行接收的指向性控制。系数可以是预先估计的,也可以使用接收信号X105_1至X105_N,来估计加权合成后的感测信号成分的振幅或者信噪比(SNR(Signal-to-Noise Ratio))比采用了其他的系数的情况下大、或者超过规定的阈值的系数。并且也可以是,接收装置X106通过使用多个与接收信号X105_1至X105_N对应的N个系数的组,来同时获得与各系数的组对应的指向性的信号。不过,也可以不进行加权合成来执行。
估计部X108使用估计信号X107,来进行感测,即进行与周围环境相关的估计处理。关于估计部X108进行估计处理的详细将在以后说明。
控制信号X109是被输入到发送装置X101、接收装置X106、以及估计部X108的控制信号,针对发送装置X101、接收装置X106、以及估计部X108,进行感测的执行指示、或者感测范围、感测定时的控制等。
以上是关于本实施方式中的装置X100的构成的一个例子的说明。
另外,在图14中举例说明了,在装置X100生成的信号由M个天线发送,以N个天线接收的信号在接收装置X106被信号处理的情况,执行本实施方式中说明的感测方法的装置的构成并非受此所限。
例如,用于信号的发送的发送天线部可以由分别包括多个天线的多个天线单元来构成。在此,多个天线单元可以具有相同的指向性以及指向性控制功能,在天线单元间能够进行指向性控制的范围可以不同。此时,一个发送装置X101的构成可以是,从多个天线单元中,选择用于感测信号的发送的天线单元来使用,也可以从多个天线单元同时发送相同的感测信号。并且,发送装置X101可以对一个感测信号从一个天线单元发送、与从多个天线单元同时发送进行切换。并且,装置X100可以具备多个发送装置X101,也可以按每个天线单元来具备发送装置X101。
以天线X104_1至X104_N接收的接收信号X105_1至X105_N被输入到接收装置X106。接收装置X106针对接收信号X105_1至X105_N进行如下的处理,对估计信号X107进行输出,所述处理例如是指,仅提取发送了感测用信号的频带或者频带内的信道的成分的滤波处理、从无线频带变换为中间频带(IF)或基带信号的频带的频率变换处理、或针对N个接收信号的加权合成处理等。
针对N个接收信号的加权合成处理所使用的系数可以按接收信号X105_1至X105_N每一个来设定,并且可以通过对系数的值进行变更,来进行接收的指向性控制。系数可以被预先估计,并且可以使用接收信号X105_1至X105_N,来估计加权合成后的感测信号成分的振幅或者信噪比(SNR)比采用了其他的系数的情况下大、或者超过规定的阈值的系数。并且,接收装置X106通过使用多个与接收信号X105_1至X105_N对应的N个系数的组,从而能够同时获得与各系数的组对应的指向性的信号。不过,也可以不进行加权合成来执行。
估计部X108使用估计信号X107进行感测,即进行与周围环境相关的估计处理。关于估计部X108进行的估计处理的详细将在以后说明。
控制信号X109是被输入到发送装置X101、接收装置X106、以及估计部X108的控制信号,针对发送装置X101、接收装置X106、以及估计部X108进行感测的执行指示、或感测范围、感测定时的控制等。
以上是有关本实施方式中的装置X100的构成的一个例子的说明。
另外,在图14中虽然举例说明了,由装置X100生成的信号以M个天线发送,以N个天线接收的信号在接收装置X106被信号处理的情况,执行本实施方式所说明的感测方法的装置的构成并非受此所限。
例如,用于信号的发送的发送天线部可以由分别包括多个天线的多个天线单元构成。在此,多个天线单元可以具有相同的指向性以及指向性控制功能,并且在天线单元间,能够进行指向性控制的范围可以不同。此时,一个发送装置X101的构成可以是,从多个天线单元中选择用于感测信号的发送的天线单元来使用,并且可以从多个天线单元同时发送相同的感测信号。并且,发送装置X101可以对一个感测信号从一个天线单元发送、与多个天线单元同时发送进行切换。并且,装置X100可以具备多个发送装置X101,也可以按照每个天线单元具备发送装置X101。
同样,用于信号的发送的接收天线部可以由分别包括多个天线的多个天线单元构成。在此,多个天线单元可以是相同的指向性的控制范围以及指向性控制精确度等指向性控制能力,天线单元间的指向性控制能力也可以不同。并且,多个天线单元虽然可以是指向性的控制范围以及指向性控制精确度等指向性控制能力相同,也可以被设置成能够进行指向性控制的空间区域不同。此时,一个接收装置X106的构成可以是,从多个天线单元中选择用于接收信号的获得的天线单元来使用,也可以对从多个天线单元接收的信号同时进行信号处理。并且,接收装置X106可以对如下的信号处理进行切换,这些信号处理是指,仅对一个天线单元接收的接收信号进行的信号处理,以及同时对多个天线单元接收的接收信号进行的信号处理。并且,装置X100可以具备多个接收装置X106,也可以按照每个天线单元来具备接收装置X106。
并且,装置X100可以不必另外具备用于发送的多个天线和用于接收的多个天线,而可以具备既能够用于信号的发送又能够用于信号的接收的多个天线。在这种情况下,装置X100可以选择是按每个天线进行发送还是进行接收,并可以对此进行切换,还可以在时间上对是将多个天线用于发送还是用于接收进行切换。
并且,装置X100也可以具备能够在信号的发送以及接收中共用的收发天线部。在此,收发天线部可以包括多个天线单元,并能够按照每个天线单元来对是用于发送还是用于接收进行切换。装置X100也可以具备选择部,对用于在发送装置X101生成的信号的发送的天线单元、与用于在接收装置X106被信号处理的信号的接收的天线单元进行选择以及切换。
另外,在利用多个天线单元对感测信号进行同时发送的情况下,从各天线单元发送的信号的指向性可以相同也可以不同。在装置X100从多个天线单元以相同的指向性对感测信号进行发送的情况下,具有能够增长感测信号的到达距离、或者能够增长到达可以接收被反射的感测信号的反射位置的距离的可能性。
另外,构成上述所说明的天线单元的天线的数量无需在天线单元间为一致,天线单元间的天线数量可以不同。
接着将要举例说明的是,估计部X108进行的估计处理。
估计部X108例如对自身装置与反射了感测信号的物体之间的距离进行估计。自身装置与反射了感测信号的物体之间的距离的估计例如能够通过如下的方法来导出,即检测针对感测信号的发送时刻的接收时刻的延迟时间,通过在延迟时间上乘以电磁波的传播速度来导出。并且,估计部X108例如采用MUSIC(Multiple Signal Classification:多信号分类)算法等波达方向估计法(Direction of Arrival Estimation),对接收信号的波达方向即反射了感测信号的物体的方向进行估计。估计部X108通过对自身装置与物体之间的距离以及方向进行估计,从而能够对反射了被发送的信号的物体的位置进行估计。估计部X108例如通过MUSIC法等波达方向估计、发送天线的位置、接收天线的位置、发送指向控制的方向的信息等,来进行三角测量,从而能够对物体的位置进行估计。估计部X108也可以使用接收信号来进行物体的检测,例如检测物体的动作、物体的材质等。
在此,物体的位置可以由极坐标系来表示,也可以由三维的正交坐标系来表示。坐标系的原点例如可以是装置X100内的任意的位置,坐标系的坐标轴可以是任意的朝向。另外,在具备装置X100的设备除装置X100以外,还具备多个与装置X100相同或者不同构成的无线传感器或其他的距离传感器的情况下,由各传感器获得的数据的坐标系的原点以及坐标轴在传感器间可以是共通的,也可以是按各个传感器而固有的。估计部X108可以将上述固有的坐标系所表示的位置信息直接输出,也可以变换为在设备内共通的坐标系来输出。变换后的坐标系可以是设备固有的坐标系,也可以是与该设备所利用的三维地图数据相同的坐标系等与其他的设备共通的坐标系。
并且也可以是,估计部X108在多个方向的每一个方向中,对到反射了信号的物体的距离进行估计,将被估计的多个反射位置的三维坐标作为点云来获得。另外,在估计部X108获得的多个测距结果的数据的格式可以不是具有三维坐标的值的点云格式,例如可以是距离图像或其他的格式。在使用距离图像的格式的情况下,距离图像的二维平面内的位置(坐标)与从自身装置来看时的接收信号的波达方向对应,到与各图像的像素位置对应的方向中的物体的距离,作为像素的采样值而被存放。
估计部X108也可以进一步使用上述的点云数据或者距离图像数据,来进行物体的形状的估计等识别处理。例如,“距离为规定的范围内的接近位置上的一个以上的点”,或者,将多个点或者图像区域视为同一物体来提取,能够根据该一个或多个点的位置关系或者图像区域的形状,来估计物体的形状。估计部X108可以将被感测的物体的识别等,作为采用了物体的形状的估计结果的识别处理来执行。在这种情况下,估计部X108例如可以对在感测范围内的是人、还是其他的动物进行识别,或者进行物体的种类的识别等。另外,估计部X108进行的识别处理也可以是物体的识别以外的处理。例如,估计部X108可以将对感测范围内的人的数量、或车辆的数量等进行的检测,作为识别处理,来对检测到的人脸的位置或姿勢等进行估计。估计部X108也可以进行与上述的识别处理不同的识别处理,例如进行人脸识别等处理,判断检测到的人脸的形状是否与预先登记的人物一致,并判断是哪个人等。
并且也可以是,估计部X108以不同的定时对自身装置与物体之间的距离进行多次测量,来获得自身装置与物体之间的距离或者检测到的点的位置的时间的变化。在这种情况下,估计部X108可以对移动的物体的速度或加速度等进行估计,以此作为利用了自身装置与物体之间的距离或者点的位置的时间的变化的识别处理。例如,估计部X108可以对在感测范围内行使的车辆的速度进行估计,或者对移动方向等进行估计。另外,估计部X108利用距离或点的位置的时间的变化来进行的识别处理,也可以是物体的速度或加速度的估计以外的处理。例如,估计部X108根据检测到的人的姿势的变化,来检测人是否进行了特定的动作,将装置X100作为智能手机、平板电脑、个人电脑等电子设备的姿势输入用的装置来利用。
另外,上述的移动的物体的速度的估计可以通过对发送的感测信号的频率与接收的反射信号的频率进行比较,对通过反射信号所受到的多普勒效应的频率的变化进行估计来导出。
接着,举例对发送装置X101以及接收装置X106中所使用的感测信号进行说明。
装置X100可以发送非专利文献1或非专利文献2中公开的脉冲信号,以用作感测用的信号。装置X100以用于感测的频带对脉冲信号进行发送,根据针对脉冲信号的发送时刻的反射信号的接收时刻的延迟时间,来测量到反射了感测用信号的物体的距离。
作为感测用的信号的不同的例子,装置X100可以使用非专利文献3中记载的frequency modulated continuous wave(FMCW)方式或phase modulated continuouswave(PMCW)方式的信号。FMCW信号是在时间上对频率进行了变更的Chirp信号被变换为无线频率的信号。估计部X108利用混频器,对从装置X100发送的信号与由接收装置X106接收的信号进行重叠,以作为采用了FMCW信号的估计处理。其结果是,由于重叠后的信号成为依照接收的信号的飞行时间的频率的中间频率的信号,因此,通过对重叠后的信号中包括的频率成分进行检测,则能够测量到反射了FMCW信号的物体的距离。
作为感测用的信号的不同的例子,装置X100可以使用将规定的频率的调制信号,频率变换为用于感测的频带的信号后的信号。在这种情况下,估计部X108例如能够根据从装置X100发送的信号的调制成分的相位与由接收装置X106接收的信号的调制成分的相位的差,来估计到反射了感测用信号的物体的距离。并且,估计部X108也可以通过对发送的调制信号的频率与接收的调制信号的频率进行比较,来检测感测信号进行反射并到被接收为止,因多普勒效应而受到的频率的变动,从而对移动的物体的移动速度和方向进行估计。另外,调制信号中包括的频率成分可以是多个,例如,作为非专利文献4所记载的调制信号,可以使用包括多个频率成分的OFDM信号。
另外,作为感测用的信号的例子,并非受上述所限,可以是通过调制方式来调制的信号,也可以是无调制的载波,并且还可以使用除此以外的信号。
如以上所述,装置X100可以使用多个天线对多个感测信号进行同时发送,也可以使用分别包括多个天线的多个天线单元,来对多个感测信号进行同时发送。
在本实施方式中举例说明的例子是,作为估计部X108所进行的估计处理,根据感测信号的发送时刻与反射信号的接收时刻的差,来测量距离。不过,估计部X108所进行的估计处理并非受上述所限。例如,估计部X108根据接收的反射信号来估计传输路径的状态,基于被估计的传输路径状态在时间上的变化、或者与过去被估计的传输路径状态的平均值、特征量的比较来进行识别处理,据此,进行感测范围是否有物体的判断、或者进行是否有物体的移动的检测等。并且,估计部X108可以根据接收信号的衰减状况,来检测是否有降雨。
并且,在本实施方式中对将发送的感测信号的反射波用于感测的例子进行了说明。然而,利用感测信号来进行的感测,并非限定于发送了该感测信号的装置。例如也可以是,装置X100的接收装置X106接收从其他的装置发送来的感测信号,估计部X108根据该接收信号,来判断其他的装置是否位于能够收到感测信号的范围,并可以对其他的装置的方向进行估计。并且,可以根据接收的感测信号的信号强度,来估计到其他的装置的距离。并且,装置X100的发送装置X101也可以发送感测信号,以使其他的装置能够用于感测。此时被发送的感测信号可以是自身装置为了利用反射波来进行感测而发送的感测信号,也可以为了其他的装置的感测而周期性的发送感测信号。并且,装置X100在接收到从其他的装置发送来的感测信号的情况下,也可以利用发送装置X101,向接收了该接收信号的方向发送感测信号。另外,针对其他的装置发送的感测信号,可以不进行指向性的控制而被发送。
并且,在图14中示出的例子虽然是进行感测装置X100接收由物体#1、物体#2反射的信号,不过也可以是,由进行感测的装置X100获得从物体#1、物体#2反射后,再经由其他的物体、物质的反射而得到的信号,来进行物体的检测、与物体的距离、位置等的估计。
接着,对使用了与图14不同的电波的感测方法的例子进行说明。
图15例如示出了使用电波来进行感测的装置X200的构成的一个例子。对于图15所示的构成中具有与图14相同的功能的构成,赋予相同的编号,并省略对这些构成的详细说明。
装置X200与装置X100的不同之处是,利用感测用的调制信号以及/或者通信用的调制信号来进行感测。在此具有特点之处是,例如装置X200发送信号,作为通信对方的终端通过掌握到装置X200所发送的信号的变化,从而对物体(例如,图15的物体#1)的位置、大小、与物体(例如,图15的物体#1)的距离等进行估计。另外,在装置X200发送了通信用的调制信号的情况下,则也能够与终端进行数据通信。以下对利用通信用的调制信号来进行感测的情况进行说明。
发送装置X201将控制信号X109以及发送数据X210作为输入,执行纠错编码处理、调制处理、预编码、多重化处理等,生成通信用的发送信号X202_1至X202_M。装置X200将发送信号X202_1至X202_M的每一个从天线X103_1至X103_M发送。
关于发送信号以及用于发送的天线的数量,与图14中的相关说明相同,可以是2个以上的多个,也可以是1个。若与图14的相关说明进行比较,不同之处是,图14中的相关说明的发送信号包括感测信号的成分,而本说明的发送信号包括对发送数据进行调制后的信号的成分,相同之处是,通过用于发送装置X201生成发送信号的加权合成处理中所使用的系数来进行指向性控制。并且,装置X200与装置X100同样,可以仅具备一个由具备多个天线的天线单元,也可以具备多个天线单元。
另外,在进行指向性控制的情况下,图14中说明的发送装置X101进行的指向性控制是为了向想要进行感测的方向进行发送,而图15的发送装置X201以提高与作为通信对方的终端的通信质量为目的,来进行发送的指向性控制。不过,发送装置X201也可以向想要进行感测的方向,进行发送信号的指向性控制,并且也可以是,作为通信对方的终端使用装置X200所发送的信号,在进行感测的基础上,以能够得到所期待的感测结果的方式,来进行指向性控制。在为了终端中的感测,发送装置X201进行指向性控制的情况下,发送装置X201使用由终端指定的系数来进行信号的发送。在此所发送的信号可以包括使用发送数据而被调制的信号成分,也可以不包括使用发送数据而被调制的信号成分。不包括使用发送数据而被调制的信号成分的信号例如是,前导码或基准(reference)信号等在终端侧以已知的值而别调制的信号。并且,发送装置X201在对包括使用发送数据而被调制的信号成分的信号进行发送的情况,与不包括使用发送数据而被调制的信号成分的信号的情况下,进行不同的指向性控制。
另外,终端在接收到由装置X200发送的调制信号时,在得到数据(进行通信)的同时,也执行感测。
并且,终端发送信号,作为通信对方的装置X200通过掌握到终端所发送的信号的变化,从而可以对物体(例如,图15的物体#1)的位置、大小、与物体(例如,图15的物体#1)的距离、物体(例如,图15的物体#1)的种类、材质等进行估计。另外,在终端发送了通信用的调制信号的情况下,也能够进行与装置X200的数据通信。
例如,利用天线X104_1至X104_N,接收由终端发送的调制信号。于是,接收装置X206将控制信号X109以及接收信号X205_1至X205_N作为输入,进行解调处理以及纠错解码处理等,获得接收数据。并且,接收装置X206将通过接收处理而得到的传输路径特性等,作为估计信号X207来输出。
针对N个接收信号的加权合成处理中所使用的系数能够按照接收信号X105_1至X105_N的每一个来进行设定,并且能够通过变更系数的值,来进行接收的指向性控制。系数可以被预先估计,也可以被估计成在使用接收信号X105_1至X105_N,进行加权合成后的感测信号成分的振幅或者信噪比(CNR)比使用其他的系数的情况下大、或者超过规定的阈值的系数。并且,可以通过接收装置X206使用多个与接收信号X105_1至X105_N对应的N个系数的组,来同时获得与各系数的组对应的指向性的信号。
估计部X208将控制信号X109以及估计信号X207作为输入,使用估计信号X207来进行估计处理。估计部X208例如根据估计信号X207中包括的传输路径特性,来进行周围是否存在物体等的周围环境的估计。并且,估计部X208可以根据传输路径特性在时间上的变化,来检测物体的移动或物体的接近等。估计部X208例如可以利用MUSIC法等的波达方向估计法,来估计接收信号的波达方向,即估计反射了感测信号的物体的方向。估计部X208例如可以利用MUSIC法等的波达方向估计、天线位置(例如,发送装置和接收装置的位置)、发送指向性控制的方向的信息等,来进行三角测量,以对物体的位置进行估计。估计部X208使用接收信号,来进行物体的检测、物体的动作、物体的材质等的检测。
估计部X208针对估计信号X207执行上述的估计处理,例如执行与想要进行的上述的物体是否存在或物体的移动的有无等的检测相对应的信号处理。此时,估计处理例如根据由信号处理而被提取的特征量是否超过规定的阈值的判断结果来执行。并且,估计处理也可以根据上述例子以外的信号处理来执行。例如,估计处理可以通过利用了多层结构的神经网络的机器学习而作成的模型来执行。在针对估计处理利用通过采用了多层结构的神经网络的机器学习而作成的模型的情况下,估计部X208可以针对估计信号X207进行规定的前处理,将前处理后的数据输入到通过利用多层结构的神经网络的机器学习而作成的模型。并且,估计部X208也可以利用在通信所使用的频带或者频带内的信道编号等信息。并且,估计部X208也可以使用发送了接收的通信用的信号的通信装置的地址、或作为该信号的发送目的地的通信装置的地址。这样,通过使用与频带或通信装置的地址等的接收的通信用的信号相关的信息,从而能够对发送了信号的通信装置的位置或信号发送时所使用的指向性等条件相同、或者类似的通信用的信号间进行比较,这样会有提高估计精确度的可能性。
在上述的说明中,对利用通信对方发送的通信用的信号来进行感测的情况进行了说明。在图15中虽然举例示出了装置X200的如下的不同构成,即作为用于执行发送处理的构成的发送装置X201、天线X103_1至X103_M、作为用于执行接收处理的构成的接收装置X206以及天线X104_1至X104_N,不过装置X200的构成并非受此所限。例如,发送装置X201和接收装置X206可以作为一个构成要素来实现,也可以将多个天线在发送和接收中共享。并且,与图14的说明同样,装置X200中的发送用的多个天线可以由多个天线单元构成,接收用的多个天线可以由多个天线单元构成。并且,装置X200中的发送用的多个天线以及接收用的多个天线可以由共通的收发天线部构成。
并且也可以取代通信用的信号,而使用感测用的信号。即可以是,第1装置使用其他的装置发送的感测用的信号,来进行物体(例如,图15的物体#1)的位置、大小、与物体(例如,图15的物体#1)的距离、物体(例如,图15的物体#1)的种类、材质等估计。
于是,使用了通信用的信号的感测方法能够以与利用图14说明的针对其他的装置发送感测信号的例子相同的目的来利用。即,装置X200不是利用从终端等其他的装置发送来的通信用的信号,根据该信号的传输路径特性等来进行周围的环境的感测,而可以用于其他的装置是否位于能够收到通信用的信号的范围的判断、或其他的装置的方向估计。
另外,装置X200在接收作为通信对方的例如终端所发送的通信用的调制信号时,可以不进行感测的工作,而可以仅进行解调工作。
接着将要说明的是,进行通信以及感测的装置。
图16示出了进行通信以及感测的装置的构成的一个例子。在图16所示的构成中,对于具有与图14以及图15所示的构成相同的功能的构成赋予相同的编号,并省略对这些构成的详细说明。
装置X300进行利用了感测用的调制信号的感测,并且进行利用了通信用的调制信号的感测。即装置X300的发送装置X301与发送装置X101同样,具有发送感测用的信号的功能,并且与发送装置X201同样,具有向其他的通信装置发送通信用的信号的功能。并且,装置X300的接收装置X306与接收装置X106同样,具有接收感测用的信号的功能,并且与接收装置X206同样,具有接收由其他的通信装置发送的通信用的信号的功能。并且,估计部X308与估计部X108同样,进行使用了感测用的信号的估计处理,并且与估计部X208同样,进行使用了通信用的信号的估计处理。
装置X300的各构成要素所执行的处理,在发送/接收感测用信号的情况下,与图14的装置X100相同,在发送/接收通信用信号的情况下,与图15的装置X200相同。
在图16中虽然示出了装置X300的不同构成,即示出了作为用于执行发送处理的构成的发送装置X301以及天线X103_1至X103_M、与作为用于执行接收处理的构成的接收装置X306以及天线X104_1至X104_N的不同的构成,装置X300的构成并非受此所限。例如,发送装置X301和接收装置X306可以作为一个构成要素来实现,也可以将一个以上或者多个天线在发送以及接收中共享。
并且,装置X300除了通信用的发送装置以外,还可以另外具备感测用的发送装置。此时,通信用的发送装置与感测用的发送装置同样,可以对一个以上或者多个天线进行切换,也可以具备通信用与感测用不同的一个以上或者多个天线。另外,通信用以及感测用信号发送装置X301也可以根据控制信号X309中包括的模式的信息,对感测用的信号的发送与通信用的调制信号的发送进行切换,来从天线发送,即可以存在发送感测用的信号的模式和发送通信用的调制信号的模式。并且,通信用以及感测用发送装置X301也可以发送将感测用的信号与通信用的调制信号合在一起的信号。
并且,装置X300也可以与通信用的接收装置不同,另外具备感测用的接收装置。此时,通信用的接收装置与感测的接收装置同样,可以对一个以上或者多个天线进行切换,也可以在通信用与感测用中具备不同的一个以上或者多个天线。并且,装置X300可以分别具备通信用的发送装置、感测用的发送装置、通信用的接收装置、感测的接收装置。并且,装置X300也可以具备通信用的收发装置以及感测用的收发装置。并且,装置X300也可以具备通信用的收发装置、感测用的发送装置、感测用的接收装置。
并且,即使在本实施方式中也与图14的说明以及图15的说明同样,发送用的一个以上或者多个天线可以由一个以上或者多个天线单元来构成,接收用的一个以上或者多个天线也可以由一个以上或者多个天线单元来构成。并且,发送用的一个以上或者多个天线以及接收用的一个以上或者多个天线可以由共同的收发天线部构成。
通过采用以上这样的装置的构成,尤其能够使以后将要说明的实施方式成为可能,据此,能够得到各实施方式中所记载的效果。因此,以下对实施方法的具体的例子进行说明。
(实施方式4)
在本实施方式中,对具有无线通信功能的访问接入点(AP)或终端进行感测的情况下的感测方法的一个例子进行说明。
图17示出了本实施方式中的系统构成的一个例子。在图17中,Z100为访问接入点(AP),Z101_1、Z101_2、Z101_3分别是与AP进行无线通信的终端。另外,在图17虽然示出了各终端与AP之间进行通信的情况,各终端也可以具备在终端间进行通信的功能。
图18示出了APZ100以及终端Z101_1、Z101_2、Z101_3所具备的能够进行通信以及感测的装置的构成的一个例子。图18的装置利用能够用于与实施方式3所说明的图16的装置X300同样的通信的一个或者多个频带以及每个频带中的一个或者多个信道,来进行感测。
图18的装置具备收发部Z201、感测部Z202、收发天线部Z203、发送用信号选择部Z204、接收用信号选择部Z205、以及控制部Z206。
收发部Z201进行通信用的信号的收发。收发部所进行的通信用的信号的收发处理与实施方式3中说明的发送装置X201进行的发送处理以及接收装置X206进行的接收处理相同。
感测部Z202根据接收信号进行感测。感测部Z202可以执行发送实施方式3中所说明的感测用的信号,利用接收的反射信号来进行感测的感测方法,或者可以执行利用从实施方式3中所说明的终端或AP等其他的通信装置接收的通信用的信号,来进行感测的感测方法。并且,感测部Z202也可以执行发送感测信号的感测方法与利用了接收的通信用的信号的感测方法这双方。在执行对感测信号进行发送的感测方法的情况下,感测部Z202进行与实施方式1中的发送装置X101同样的处理,生成感测用的信号并输出。另外,感测部Z202也可以不执行对感测信号进行发送的感测方法,在仅执行利用了通信用的信号的感测方法的情况下,感测部Z202也可以不发送信号。
收发天线部Z203进行信号的收发。发送用信号选择部Z204将在收发部Z201以及感测部Z202生成的信号,从收发天线部Z203发送。接收用信号选择部Z205将由收发天线部Z203接收的信号输入到收发部Z201以及感测部Z202。控制部Z206生成用于对收发部Z201、感测部Z202、发送用信号选择部Z204、接收用信号选择部Z205的工作进行控制的控制信号,对进行通信的频率以及期間、以及进行感测的频率以及期間进行控制等。另外,发送用信号选择部Z204也对感测用的信号与通信用的信号进行组合,生成依照了帧的信号,进行输出。并且,接收用信号选择部Z205也根据接收信号,生成通信用的信号、感测用的信号,并对这双方进行输出。
图19至图37是本实施方式中的装置进行收发的帧的结构的例子。从图19至图37中,横轴为时间,在图19、图20、以及图22至图37中,纵轴为频率。纵轴的频率例如可以是OFDM(Orthogonal Frequency Division Multiplexing)信号的子载波等,也可以是一个频带中的一个信道内的频率,并且可以是一个或者多个频带内的多个信道。并且,纵轴的频率可以是跨在多个信道上的OFDM信号的多个子载波。因此,可以是单载波传输方式,也可以是OFDM等多载波传输方式。并且,在用于感测的帧、用于感测的信号的情况下,例如可以是被频带限制的脉冲信号,也可以是单音信号或载波。因此,在将图19至图37的帧用于通信以及/或者感测的情况下,图19的帧可以不是单载波传输方式的信号、也可以不是多载波传输方式信号。
图19至图37示出的基准码元是用于本实施方式中的装置执行感测的码元。另外,基准码元也可以具有用于“通信对方进行信号检测、时间同步、频率同步、信道估计等”的功能。并且,基准码元也可以是用于进行数据通信的手续中所需要的控制信息、MAC(MediaAccess Control)帧。
控制信息码元例如是用于通知数据码元中的通信方法的码元。因此,控制信息码元例如包括纠错编码方法(编码率、块长(码长)、纠错码的信息等)的信息、调制方式的信息、发送方法的信息(例如,利用了单流传输或者多流传输的哪一个的信息)(MCS(Modulation and Coding Scheme:调制与编码策略)的信息)、数据长等的信息。
数据码元是用于向通信对方传输数据的码元。
防护区间是紧接在基准信号之后而被配置的用于对感测进行辅助的区间。防护区间例如是为了回避被配置在该防护区间的前后的信号或码元彼此间的干扰而被设置的,或者是为了对防护区间前的码元与防护区间后的码元的发送指向性、接收指向性进行变更而被设置。例如,防护区间可以不存在信号。另外,针对帧可以不设置防护区间。感测部Z202被用于在防护区间,获得例如自身通信装置或者其他通信装置没有发送感测用的信号或者通信用的信号的状态下的信号的接收状态。
另外,图19至图37所示的帧结构仅为一个例子,帧结构并非受此所限。例如,帧内也可以包括其他的码元。并且,在发送帧时可以采用单载波传输方式,也可以采用OFDM等多载波传输方式。
在基准码元中可以包括传输数据的区域。在该传输数据的区域中,可以包括用于识别发送信号用于“是发送通信用的信号”、或者“是发送用于物体检测的信号”的数据。
并且,在此虽然称为基准码元,名称并非受此所限,也可以将基准码元称为导频码元、训练码元、训练字段、前导码、控制信息码元、Midamble码(中间码)等。例如,可以利用导频码元、训练码元、训练字段、前导码、控制信息码元、Midamble码等来执行感测。
图19是本实施方式的装置进行通信时的帧结构。
图19所示的帧包括前导码、控制信息码元、数据码元。
图20示出了本实施方式的装置进行感测时的帧结构。
图20的左侧示出了为了进行感测而发送的基准码元的帧结构。图20的左侧所示的帧包括基准码元。
图20的右侧示出了针对用于感测的基准码元而附加的前导码、控制信息码元。图20的右侧所示的帧包括前导码、控制信息码元、基准信号。
对图20的右侧的帧进行接收的装置例如即使是仅具备通信功能的装置,通过接收前导码、控制信息码元,也能够知道感测的信号的存在,据此,能够得到的效果是,该装置能够对调制信号的发送定时进行控制,以便不发生干扰。此时的信号的存在例子由图21示出。
如图21所示,在某个频带能够存在通信用的调制信号和感测用的调制信号。
另外,本实施方式的装置也可以是能够进行图19的帧的收发的仅具备通信功能的装置。
并且,本实施方式的装置也可以是能够进行图20的帧的收发的仅具备感测的功能的装置。
本实施方式的装置也可以是能够进行图22至图37的帧的收发的对通信和感测进行并行处理的装置。关于图22至图37的帧将在以后说明。另外,图22至图37示出了能够进行感测的帧的例子,除了感测以外还有能够进行通信的情况。并且,在图22至图37的帧中,虽然有存在防护区间的帧,即使不存在防护区间也能够执行。另外,在考虑图22至图37的帧的基础上,考虑图17的状态。而且,能够将AP作为中继器来考虑。图22所示的帧包括前导码、控制信息码元、数据码元、Midamble码、以及数据码元。此时,Midamble码是用于数据码元的解调的码元以及/或者用于感测的码元。关于这一点在其他的附图中也是同样。并且,前导码虽然是为了实现通信而被配置的,也可以为了进行感测,而由装置来使用前导码以及/或者控制信息码元。关于这一点在其他的附图中也是同样。
图23所示的帧包括前导码、控制信息码元、数据码元、Midamble码、以及数据码元。并且,在Midamble码与数据码元之间设置防护区间。另外,在防护区间前的码元与防护区间后的码元中,发送指向性可以不同。关于这一点在其他的附图中也是同样。并且,可以在Midamble码之前设置防护区间。而且,也可以是不存在防护区间的帧。关于这一点在其他的附图中也是同样。
图24所示的帧包括前导码、控制信息码元、数据码元、以及基准信号。数据码元被配置在彼此不同的2个频带F81以及F83。基准信号被配置在与配置了数据码元的频带不同的频带F82。并且,基准信号在频带F82以空出时间间隔的方式而被配置了3个。在基准信号之间设置防护区间。即3个基准信号夹着防护区间而被配置。另外,基准信号被用于感测。另外,关于这一点,在其他的附图中也是同样。并且,防护区间前的基准信号与防护区间后的基准信号的发送指向性可以不同。另外,关于这一点,在其他的附图中也是同样。
于是,在2个以上的频带或者2个以上的信道中配置数据码元或基准信号的情况下,可以采用通过OFDMA(Orthogonal Frequency Division Multiple Access)方式的多路访问。在这种情况下,数据码元或基准信号在时间方向以及频率方向上被分别配置在指定的范围。在此,将上述范围也称为由时间以及频率规定的资源即时间频率资源。并且,将包括通信数据的码元被配置的时间频率资源称为通信用资源,将用于通过电波来进行感测的码元被配置的时间频率资源称为感测用资源。以后也是同样。
图25所示的帧包括前导码、控制信息码元、数据码元、以及基准信号。数据码元被配置在彼此不同的5个频带F91至F95。基准信号被配置在频带F92以及F94。在频带F92以及F94,在基准信号与数据码元之间设置了防护区间。如频带F92、F94所示,在一部分的频率资源中,数据码元与基准信号可以混在。这样,能够得到提高频率利用效率的效果。另外,防护区间前后的基准信号与数据码元的发送指向性可以不同。关于这一点,在其他的附图中也是同样。
图26所示的帧包括前导码、控制信息码元、数据码元、以及基准信号。数据码元被配置在频带F101以及F103至F105。基准信号在频带F102中,以夹着防护区间的方式而被配置3个。并且,从频带F101直到F105配置了基准信号。在该基准信号之后,在频带F101至F103以及F105配置了数据码元,在频带F104中,基准信号以夹着防护区间的方式被配置2个。一个具有特点之处是,存在宽频带的基准信号和窄频带的基准信号。据此,能够进行高精确度的感测的可能性增高。
图27所示的帧包括前导码、控制信息码元、给用户的数据码元。给用户的数据码元包括将用户#1、#2、#3以及#4作为发送目的地的数据码元,分别被配置在频带F111、F112、F113以及F114。该帧结构能够考虑为是OFDMA的帧的例子。例如能够考虑为是AP、中继器等发送的帧。
图28所示的帧包括前导码、控制信息码元、给用户的数据码元、以及Midamble码。给用户的数据码元包括以用户#1、#2、#3以及#4为发送目的地的数据码元,分别被配置在频带F121、F122、F123以及F124。并且,给用户的数据码元以夹着Midamble码的方式而被配置。该帧结构能够考虑为是OFDMA的帧的例子。例如能够考虑为是AP、中继器等发送的帧。
图29所示的帧包括前导码、控制信息码元、给用户的数据码元、以及Midamble码。给用户的数据码元包括以用户#1、#2、#3以及#4为发送目的地的数据码元,分别被配置在频带F131、F132、F133以及F134。给用户的数据码元以夹着Midamble码的方式而被配置。在Midamble码与给用户的数据码元之间设置防护区间。另外,可以在Midamble码之前设置防护区间。该帧结构能够考虑为是OFDMA的帧的例子。例如,能够考虑为是AP、中继器等发送的帧。
图30所示的帧包括前导码、控制信息码元、给用户的数据码元、以及基准信号。给用户的数据码元包括以用户#1、#3以及#4为发送目的地的数据码元,分别被配置在频带F141、F143以及F144。在频带F142中,3个基准信号以夹着防护区间的方式而被配置。在利用OFDMA的情况下,会有不被用于给用户的数据码元的频带(例如图30中的频带F142)的情况,在这种情况下,在不被用于给用户的数据码元的频带配置基准信号。另外,频带F142能够用于对某个给用户的数据码元进行的传输中。并且,例如能够考虑为是AP、中继器等发送的帧。图31所示的帧包括前导码、控制信息码元、给用户的数据码元、以及基准信号。给用户的数据码元包括以用户#1、#2、#3以及#4为发送目的地的数据码元,分别被配置在频带F151、F152、F153以及F154。并且,在频带F151中,在给用户#1的数据码元之后,以夹着防护区间的方式配置2个基准信号。在频带F152中,在给用户#2的数据码元之后配置基准信号,在该基准信号之后设置防护区间。
在利用OFDMA的情况下,给用户的数据码元的时间长度会有因每个用户而不同的情况,在这种情况下,在没有被用于给用户的数据码元的频带以及时间段配置基准信号。例如,与给用户#4的数据码元的时间长度相比,给用户#1的数据码元的时间长度短,能够利用给用户#1的数据码元后的时间,发送基准码元。另外,例如能够考虑为是AP、中继器等发送的帧。图32所示的帧包括前导码、控制信息码元、给用户的数据码元、以及基准信号。给用户的数据码元包括以用户#1、#3以及#4为发送目的地的数据码元,分别被配置在频带F161、F163以及F164。并且,基准信号被配置在从频带F161到F164,在该基准信号之后设置防护区间。在频带F162,在基准信号之间设置防护区间。例如,能够考虑为是AP、中继器等发送的帧。
图33所示的帧包括前导码、控制信息码元、给用户的数据码元、以及基准信号。给用户的数据码元包括以用户#1、#2、#3以及#4为发送目的地的数据码元,分别被配置在频带F171、F172、F173以及F174。并且,基准信号被配置在从频带F171至F174,在该基准信号之后设置防护区间。在频带F171,在防护区间之后配置给用户#1的基准信号,在此之后设置防护区间。在频带F172,在防护区间之后配置给用户#2的基准信号,在此之后设置防护区间。在频带F171和F172,给用户的数据码元、基准信号以及防护区间的时间长度彼此不同。例如,能够考虑为是AP、中继器等发送的帧。
图34所示的帧是终端所发送的帧结构例,例如是由用户#1所持有的终端发送的帧的结构例,包括前导码、控制信息码元、(由用户#1所持有的终端发送的)数据码元。(由用户#1所持有的终端发送的)数据码元被配置在频带F181。频带F182没有被分配给用户#1所持有的终端。不过,频带F182能够用于其他的用户所持有的终端(用户#1以外的终端)对数据码元、基准信号进行的发送中。
图35所示的帧是终端所发送的帧结构例,例如是由用户#1所持有的终端发送的帧的结构例,包括前导码、控制信息码元、(由用户#1所持有的终端发送的)数据码元、以及基准信号。(由用户#1所持有的终端发送的)数据码元被配置在频带F191。频带F192没有被分配在用户#1所持有的终端。并且,在由用户#1所持有的终端发送的数据码元之后,设置基准信号以及防护区间。并且,在下一个由用户#1所持有的终端发送的数据码元之后,设置基准信号以及防护区间。不过,频带F192能够用于其他的用户所持有的终端(用户#1以外的终端)对数据码元、基准信号进行的发送中。
图36所示的帧是终端所发送的帧结构例,例如是由用户#1所持有的终端发送的帧的结构例,包括前导码、控制信息码元、(由用户#1所持有的终端发送的)数据码元、以及基准信号。(由用户#1所持有的终端发送的)数据码元被配置在频带F201以及F202。频带F203没有被分配在用户#1所持有的终端。并且,在频带F201,与图35的频带F191同样,在(由用户#1所持有的终端发送的)数据码元之后,设置基准信号以及防护区间,在下一个(由用户#1所持有的终端发送的)数据码元之后设置基准信号以及防护区间。在频带F202,与图34的频带F181同样,配置了(由用户#1所持有的终端发送的)数据码元,没有设置基准信号以及防护区间。不过,频带F203能够用于其他的用户所持有的终端(用户#1以外的终端)对数据码元、基准信号进行的发送中。
图37所示的帧是由终端发送的帧结构例,例如是由用户#1所持有的终端发送的帧的结构例,包括前导码、控制信息码元、(由用户#1所持有的终端发送的)数据码元、以及基准信号。(由用户#1所持有的终端发送的)数据码元被配置在频带F211以及F212。频带F213没有被分配在用户#1所持有的终端。并且,在频带F211,与图35的频带F191同样,在(由用户#1所持有的终端发送的)数据码元之后设置基准信号以及防护区间,在下一个(由用户#1所持有的终端发送的)数据码元之后也设置基准信号以及防护区间。在频带F212,配置了(由用户#1所持有的终端发送的)的数据码元与基准信号。不过,频带F213能够用于其他的用户所持有的终端(用户#1以外的终端)对数据码元、基准信号进行的发送中。作为一个特点是,宽频带的基准信号与在频带的基准信号均存在。据此,能够以更高的精确度来进行感测的可能性增高。
本实施方式的装置也可以是能够进行图19的帧、或图20的帧的收发的处理的装置。
本实施方式的装置也可以是能够进行图19的帧、图22至图37的帧的收发的处理的装置。
本实施方式的装置也可以是能够进行图20的帧、图22至图37的帧的收发的处理的装置。
本实施方式的装置也可以是能够进行图19的帧、图20的帧、图22至图37的帧的收发的处理的装置。
另外,在本实施方式的装置例如发送图19至图37的帧的情况下,本实施方式的装置可以从一个天线发送图19至图37的帧,并且,本实施方式的装置也可以从多个天线发送图19至图37的帧。
并且,在本实施方式的装置例如接收图19至图37的帧的调制信号的情况下,本实施方式的装置可以由一个天线来接收图19至图37的帧的信号,并且,本实施方式的装置也可以由多个天线来接收图19至图37的帧的信号。因此,作为传输方式,可以是SISO(Single-Input Single-Output)、MISO(Multiple-Input Single-Output)、SIMO(Single-InputMultiple-Output)、MIMO(Multiple-Input Multiple-Output)的任一个方式。
通过以上所述,能够得到的效果是,AP(或者中继器)、终端能够执行感测以及通信。
如以上所述,发送装置具备帧构成部以及发送部,帧构成部构成依照了OFDMA方式的且包括多个由时间以及频率规定的资源即时间频率资源,发送部将由帧构成部构成的帧通过电波来发送,帧构成部将包括通信用资源和感测用资源的帧作为上述帧来构成,通信用资源是配置了包括通信数据的码元的时间频率资源,感测用资源是配置了用于通过发送部所发送的电波来进行感测的码元的时间频率资源。
例如,上述帧可以至少包括2个感测用资源,上述2个感测用资源的时间不同而频率相同,并且2个感测用资源以夹着防护区间的方式在时间方向上相邻配置。例如,图30的频带F142中的基准信号相当于上述2个感测用资源。
例如,上述帧可以至少包括2个防护区间,上述2个防护区间的时间长度不同,并且频率也不同。例如,图33的频带F171的防护区间、以及频带F172的防护区间相当于上述2个防护区间。
例如,上述帧可以至少包括2个感测用资源,上述2个感测用资源的频率不同,且时间长度也不同。例如,图33的频带F171的基准信号、以及频带F172的基准信号相当于上述2个感测用资源。
而且,上述感测处理至少包括通过对由接收部接收的反射波进行解析,而进行的检测物体的位置的处理、检测物体的有无的处理、或检测物体的外形的处理中的一个处理。
(实施方式5)
在本实施方式中将要对一控制系统进行说明,该控制系统利用实施方式1至4说明的检测装置等,对设备的工作进行控制。
本实施方式中的检测装置进一步具备控制部,根据通过处理部进行的感测处理的结果,对电气设备的驱动进行控制。于是,本实施方式的控制系统具备检测装置和上述电气设备。
图38示出了本实施方式中的控制系统的构成的一个例子。
图38所示的控制系统具备设备A11、以及检测装置A12。在此,设备A11是能够在设备A11的装置的控制下来动作的电气设备,例如是电动摩托车、电动滑板车、吸尘器、电动车等。并且,设备A11是智能手机或平板电脑等的信息处理装置。
设备A11具备接口#1和#2、控制部A111、驱动部A112、传感器A113、以及通信部A114。
接口#1以及#2是与检测装置A12进行通信的接口装置。接口#1以及#2在图38的例子中,是不经由中继装置等其他的装置来进行通信的接口。另外,在此的通信例如可以是Bluetooth(注册商标)、无线LAN、光通信等无线通信,并且例如也可以是USB(UniversalSerial Bus)、PLC(Power Line Communication)等有线通信。并且,与图38的例子不同,可以经由中继器等其他的装置。接口#1从检测装置A12的接口#3接收信号(也称为第1信号)。接口#2向检测装置A12的接口#4发送信号(也称为第2信号)。另外,接口#1也可以从检测装置A12接收电力的供给。
控制部A111是进行驱动部A112的驱动的控制、以及传感器A113的控制的处理部。控制部A111经由接口#1来接收来自检测装置A12的信号,根据接收的信号,进行驱动部A112的驱动的控制、以及传感器A113的控制。并且,控制部A111获得示出驱动部A112以及传感器A113的状态等的信息,经由接口#2发送到检测装置A12。另外,控制部A111可以经由通信部A114,来获得用于使控制部A111工作的软件程序。
驱动部A112是使设备A11驱动的处理部。驱动部A112例如包括用于使设备A11移动的车轮、对车轮的朝向进行控制的掌舵装置、对车轮的转速进行控制的加速装置或制动装置等。驱动部A112也可以进一步具备作为用于车轮的驱动的动力源的电池等。驱动部A112通过由控制部A111进行的控制来工作,使设备A11的移动速度加速或减速,并且变更移动方向。并且,驱动部A112将示出驱动部A112的状态等的信息输出到控制部A111。
传感器A113是对设备A11的周围进行感测的传感器。传感器A113例如是对温度、湿度或照度等进行计测的传感器、或者是对到周围的物体的距离进行测量的距离传感器。传感器A113通过控制部A111进行的控制来工作,将传感器值等输出到控制部A111。
通信部A114是与AP(访问接入点)间进行无线通信的通信接口。不过,虽然记载为AP,也可以是基站、通信装置等。
检测装置A12具备:接口#3和#4、控制部A121、处理部A122、图像传感器A123、应用存储部A124、通信部#1和#2、以及感测部A125。
接口#3以及#4是与设备A11进行通信的接口装置。接口#3以及#4在图38的例子中,是不经由中继装置等其他的装置来进行通信的接口。另外,在此的通信例如可以是Bluetooth(注册商标)、无线LAN、光通信等无线通信,并且,例如也可以是USB、PLC等有线通信。并且,也可以与图38的例子不同,经由中继器等其他的装置。接口#3向设备A11的接口#1发送信号。接口#4从设备A11的接口#2接收信号。另外,接口#3也可以向设备A11供给电力。
控制部A121是对设备A11的工作进行控制的处理部。控制部A121从设备A11,经由接口#4,例如获得由传感器A113获得的传感器值、或示出驱动部A112的状态等的信息,根据获得的传感器值或信息,生成对驱动部A112的驱动以及/或者对控制部A111进行控制的信号。控制部A121将生成的信号经由接口#3,发送到设备A11,例如对控制部A111以及/或者驱动部A112进行控制。
对其他的方法进行说明。控制部A121是对设备A11的工作进行控制的处理部。控制部A121将由感测部A125获得的传感器值,经由处理部A122来获得,根据获得的传感器值,生成对驱动部A112的驱动以及/或者控制部A111进行控制的信号。另外,控制部A121在生成对驱动部A112的驱动以及/或者控制部A111进行控制的信号时,也可以使用从驱动部A112以及/或者传感器A113得到的信息。于是,控制部A121将生成的信号经由接口#3发送到设备A11,例如对控制部A111以及/或者驱动部A112进行控制。
处理部A122是进行检测装置A12中的信息处理的运算装置。处理部A122例如由CPU构成。
图像传感器A123是对检测装置A12的周围进行拍摄,并生成图像的传感器。图像传感器A123将与生成的图像相关的数据提供到处理部A122。
应用存储部A124是存储用于设备A11或检测装置A12的控制的应用(软件程序)的存储装置。应用存储部A124例如经由通信部#1或#2,来获得上述应用(软件程序)。
另外,通过对应用进行更新,从而控制部A121的控制的精确度提高,这样,能够得到由设备A11、检测装置A12构成的系统的驱动关联中的安全性提高的效果。
通信部#1是与AP(访问接入点)之间进行无线通信的通信接口。
通信部#2是与便携式电话的运营商网络的基站之间进行无线通信的通信接口。
感测部A125是利用用于通信的电波来进行感测的处理部。感测部A125对检测装置A12的周围的物体进行检测并对上述物体的工作进行识别,具体而言,周围的物体是指人、车辆、自行车、障碍物等。感测部A125可以通过发送与通信部#1相同的频率的电波来实现。
在图38所示的控制系统中,设备A11可以搭载检测装置A12,也可以被配置在与检测装置A12分离的位置。
在设备A11搭载了检测装置A12的情况下,设备A11由通过通信部A114、或者接口#1或#2而被收发的信号控制。
例如,在经由接口#1或#2而设备A11被控制的情况下,在用户外出时使用的情况下,可以将检测装置A12搭载于设备A11。
并且,例如在经由通信部A114而设备A11被控制的情况下,设备A11根据经由AP(访问接入点)而从检测装置A12发送的信号,而被控制。不过,在经由通信部A114进行设备A11的控制的情况下,有可能会受到功能限制。另外,在由设备A11经由通信部A114来与检测装置A12进行通信的情况下,不是经由AP(访问接入点)来进行通信,而是在检测装置A12的通信部#1之间直接进行通信。
根据本构成,通过对检测装置A12侧的应用进行更新,从而能够进行功能的更新、控制算法的更新。这样,能够得到的效果是,能够通过应用的更新来提供新的功能。
并且,通过针对检测装置A12来安装新的应用,从而能够将以往的设备A11的控制中没能利用的智能手机或平板电脑等的装置,利用到设备A11的控制。通过此构成,能够将以往的装置等利用于设备A11的控制。这样,例如即使没有被使用而处于放置状态的装置也能够被利用,从而能够得到没有被使用的装置所具备的CPU、GPU、内存、存储装置、调制解调器或显示器等浪费的资源能够被活用的效果。
另外,不仅是检测装置A12侧,即使在设备A11侧,也能够进行固件或应用的更新。通过此构成,能够提供仅检测装置A12侧的应用的更新不能对应的新的功能,或者在发现了设备A11侧的安全上的问题的情况下等,能够提供解除安全上的问题的固件或应用,从而能够迅速的采取措施。应用经由通信部#1、通信部#2,例如从云服务器等外部的装置来获得。
接着将要说明的是,以设备A11搭载了检测装置A12的状态,在用户外出时,对设备A11进行控制的控制系统的构成的一个例子。
图39示出了本实施方式中的控制系统的构成的一个例子。
图39所示的控制系统具备设备A11、检测装置A12、A21的AP、网络A22、基站A23、以及装置A24。
设备A11与检测装置A12经由接口#1、#2、#3以及#4,信号的收发。另外,关于详细工作已经进行了说明。
A21的AP是可以与检测装置A12的通信部#1连接的访问接入点。
网络A22是与A21的AP连接,并且与基站A23连接的网络。网络A22可以包括便携式电话的运营商网络的一部分、或互联网的一部分。并且,可以与包括执行信息处理的服务器的云服务器连接。
基站A23例如是与便携式电话的运营商网络连接的基站装置,与装置A24连接。
装置A24例如是用户所持有的智能手机或平板电脑等可携带的信息处理装置。
在控制系统中,检测装置A12由通信部#1经由APA21、网络A22以及基站A23,以能够与装置A24进行通信的方式而被连接。
例如,针对吸尘器等设备A11,检测装置A12经由接口#1、#2、#3以及#4来连接。装置A24例如经由一个以上的网络,来向被搭载于设备A11的检测装置A12进行接入,经由检测装置A12来控制设备A11。
本控制系统的特点之一是,利用由检测装置A12所具备的感测部A125感测到的数据,来进行设备A11的控制。通过此构成,能够在设备A11的控制中使用由设备A11不具备的传感器感测的数据。据此,仅以设备A11不能实现的功能也可能够实现。
并且,设备A11经由接口#1以及/或者#2,获得由检测装置A12的感测部A125感测的数据,据此,与通过通信部A114经由网络来获得数据的情况相比,能够使安全性提高,并且能够提供在安全上受到限制的情况下而不能实现的功能。
并且,本控制系统的特点之一是,经由被搭载于设备A11的检测装置A12,来进行设备A11的控制。通过此构成,能够将是否接受到从装置A24发送的控制用的指示这种判断,在检测装置A12执行。例如,通过在装置A24与检测装置A12之间进行认证等处理,从而能够提高针对不正当访问的安全性。
而且,如以前所述,通过对应用存储部A124中的应用进行更新,能够提高控制部A121的控制的精确度,这样,能够得到的效果是,能够提高由设备A11、检测装置A12构成的系统的驱动关联中的安全性。
图40示出了本实施方式中的控制系统的外观的一个例子。
图40所示的控制系统是在相当于设备A11的电动滑板车上搭载了检测装置A12的系统。检测装置A12根据通过感测部A125进行的感测的结果,例如进行设备A11的加速、减速等控制。
电动滑板车例如可以按照设备A11(即电动滑板车)侧或者检测装置A12侧的采用了操作输入用的输入部的用户的输入,而能够对驱动部A112进行控制。
控制部A121对驱动部A112进行控制,来进行设备A11(即电动滑板车)的加速或者行进方向的变更等工作。并且也可以是,控制部A121对驱动部A112进行控制,来进行设备A11的减速。减速可以由制动器来实现,也可以利用发电机等制动力来实现。
在此,控制部A121可以按照来自输入部的输入,来进行驱动部A112的控制,并可以根据从设备A11以及/或者感测部A125获得的感测数据,来进行驱动部A112的控制。
例如,感测部A125进行采用了电波的感测。另外,关于采用了电波的感测方法,与其他的实施方式中的说明相同。例如,感测部A125进行感测,对人进行检测。控制部A121根据从感测部A125得到的“对人进行检测”这一信息,将包括对速度进行减速这一信息的控制信号,经由接口#3、接口#4传输到设备A11。并且,设备A11的控制部A111、驱动部A112进行减速控制。
并且,感测部A125进行采用了电波的感测,对前方没有障碍物进行检测。控制部A121根据从感测部A125得到的“没有障碍物”这一信息,进行速度的加速,在此之后将包括进行单倍速行驶的这一信息的控制信号,经由接口#3、接口#4,传输到设备A11。同时,设备A11的控制部A111、驱动部A112在加速后,进行单倍速行驶这种控制。
并且,感测部A125进行采用了电波的感测,视为检测到在右侧有障碍物。控制部A121根据从感测部A125得到的“在右侧有障碍物”这一信息,将包括进行避开障碍物的动作这一信息的控制信号,经由接口#3、接口#4传输到设备A11。同时,设备A11的控制部A111、驱动部A112进行避开障碍物这种动作的控制。
对其他的工作例进行说明。感测部A125可以进行采用了电波的感测,根据感测的结果的信息,控制部A121进行自身位置估计或障碍物检测,并可以输出用于进行加速或减速的控制的控制信号。此时,控制部A121能够利用从图像传感器A123得到的图像信息、从传感器A113得到的信息,来进行自身位置估计或障碍物检测。控制部A121将该控制信号经由接口#3、接口#4传输到设备A11。同时,设备A11的控制部A111、驱动部A112进行基于控制信号的控制。
作为基于从感测部A125获得的感测数据的控制的另一个例子,控制部A121根据由速度传感器或加速度传感器获得的速度或加速度的数据,来检测用户的工作,并进行加速或减速的控制。在此,作为利用感测部A125而被检测的用户的工作,虽然是用户登地面的动作,也可以是除此以外的动作。例如,可以是用户移动身体的重心,也可以是用户的脸的朝向或用户的脸的朝向的变化。此时,作为感测部A125能够使用的传感器可以是重量传感器或无线雷达通过电波来进行感测。
通过以上这样的控制,能够得到提高用户的安全性的效果。
图41示出了本实施方式中的控制系统的处理的一个例子。利用流程图对控制部A121进行的控制工作的上述的例子中的控制的一个例子进行说明。
设备A11例如以如下的时刻来开始流程图的控制工作,这些时刻是指,用户通过开关或按键来执行控制工作的开始的时刻、用户接通设备A11的电源的时刻、用户将检测装置A12装配到设备A11的时刻、或者检测到用户搭乘作为设备A11的滑板车的时刻。
在步骤S001,控制部A121在开始控制工作时,从设备A11所具备的传感器A113以及/或者检测装置A12所具备的感测部A125,获得加速度数据。
在步骤S002,控制部A121根据加速度数据,来检测设备A11的加速动作。在检测到加速度动作的情况下(步骤S002的“是”),移向步骤S003,在没有检测到加速动作的情况下(步骤S002的“否”),移向步骤S004。
在步骤S003,控制部A121对驱动部A112进行控制,执行辅助处理,例如使电动机旋转,从而产生向行进方向加速的力。关于用于加速的力的产生,例如在根据加速度数据判断为进行了加速的时刻,直到为了进一步提高加速度而决定的时间内被进行,也可以是在加速被执行后,在加速结束的时刻或开始减速的时刻,通过在决定的时间内维持速度而被进行。在步骤S003的辅助处理结束时,返回到步骤S001。
在步骤S004,控制部A121判断是否结束驱动部A112的控制,在结束驱动部A112的控制的情况下结束处理,在不结束驱动部A112的控制的情况下返回到步骤S001。关于是否结束驱动部A112的控制的判断,例如可以在设备A11完全停止了的情况下,判断为结束驱动部A112的控制,也可以在用户断开设备A11的电源的情况下、用户从设备A11取下检测装置A12的情况下、或者检测到用户从作为设备A11的滑板车下来的情况下,判断为结束驱动部A112的控制。
对图41的其他的工作进行说明。设备A11例如在如下的时刻,开始流程图的控制工作,这些时刻是指,用户通过开关或按键指示了控制工作的开始的时刻、用户接通设备A11的电源的时刻、用户将检测装置A12装配到设备A11的时刻、或者检测到用户搭乘到作为设备A11的滑板车的时刻。
在步骤S001,控制部A111在开始控制工作时,从设备A11所具备的传感器A113获得加速度数据。
在步骤S002,控制部A111根据加速度数据,来检测设备A11的加速动作。在检测到加速度动作的情况下(步骤S002的“是”)移向步骤S003,在没有检测到加速动作的情况下(步骤S002的“否”)移向步骤S004。
在步骤S003,控制部A111对驱动部A112进行控制,执行辅助处理,例如使电动机旋转,而产生向行进方向加速的力。加速力的产生例如可以在根据加速度数据判断为进行了加速的时刻,直到决定进一步提高加速度的时间内被进行,也可以在进行了加速后,在加速结束的时刻或开始减速的时刻,以在被决定的时间内维持速度的方式而被进行。在步骤S003的辅助处理结束时,返回到步骤S001。
在步骤S004,控制部A111判断是否结束驱动部A112的控制,在结束驱动部A112的控制的情况下结束处理,在不结束驱动部A112的控制的情况下返回到步骤S001。是否结束驱动部A112的控制的判断例如可以在设备A11完全停止的情况下,判断为结束驱动部A112的控制,也可以在用户断开设备A11的电源的情况下、用户从设备A11取下检测装置A12的情况下、或者检测到用户从作为设备A11的滑板车下来的情况下,判断为结束驱动部A112的控制。
通过进行基于用户的动作的加速的辅助,从而能够进行与用户的动作对应的详细的控制,由于能够防止不希望的加速,从而能够得到提高安全性的效果。
(实施方式6)
在本实施方式中,对上述实施方式中的发送装置的构成以及处理的其他的形态进行说明。
图42示出了本实施方式6中的发送装置A3的构成的一个例子。
如图42所示,发送装置A3具备帧构成部A31、发送部A32、接收部A33、以及处理部A34。
帧构成部A31构成依照了单载波方式、或者OFDM这种多载波方式、或者OFDMA(Orthogonal Frequency-Division Multiple Access)方式的帧,且该帧包括多个由时间以及频率规定的资源即时间频率资源。
帧构成部A31将包括通信用资源和感测用资源的帧作为上述帧来构成,通信用资源是配置了包括通信数据的码元的时间频率资源,时间频率资源是配置了用于通过由发送部A32发送的电波来进行感测的码元的感测用资源。
发送部A32将由帧构成部A31构成的帧,通过电波来发送。
图43示出了实施方式6中的发送装置的处理的一个例子。
如图43所示,在步骤S1(帧构成步骤)中,构成依照了单载波方式、或者OFDM这种多载波方式、或者OFDMA方式的帧,且该帧包括多个通过时间以及/或频率规定的资源即时间频率资源。在此,在帧构成步骤中,将包括通信用资源和感测用资源的帧作为上述帧来构成,通信用资源是配置了包括通信数据的码元的时间频率资源,感测用资源是配置了由在发送步骤发送的电波进行的感测的码元的时间频率资源。
在步骤S2(发送步骤),将在帧构成步骤构成的帧通过电波来发送。
据此,发送装置能够进行周围的感测。
(实施方式7)
在本实施方式中,对能够进行感测的装置的具体的实施例进行说明。
图44示出了具有通信功能和感测功能这双方的装置的构成的一个例子。
收发部N102将数据N101以及控制信号N100作为输入。于是,在控制信号N100示出“执行通信”的情况下,收发部N102针对数据N101进行纠错编码、调制等的处理,并输出调制信号N103。另外,在控制信号N100示出“执行感测”的情况下,收发部N102不进行工作。
感测部N104将控制信号N100作为输入,在控制信号N100示出“执行感测”的情况下,感测部X204输出感测用信号N105。另外,在控制信号N100示出“执行通信”的情况下,感测部N104例如不进行工作。
并且,感测部N104将与动作有关的信号N180作为输入,根据与动作有关的信号N180,来决定感测工作,并根据该决定来进行工作。关于详细将在以后说明。
发送用信号选择部N106将控制信号N100、调制信号N103、感测用信号N105作为输入。于是,在控制信号N100示出“执行通信”的情况下,发送用信号选择部N106将调制信号N103作为选择的信号N107来输出。并且,在控制信号N100示出“执行感测”的情况下,发送用信号选择部N106将感测用信号N105作为选择的信号N107来输出。
功率调整部N108将选择的信号N107、控制信号N100作为输入。在控制信号N100示出“执行通信”的情况下,针对选择的信号N107,进行通信用的功率调整(例如,将与选择信号N107相乘的系数设为α),输出发送信号N109。
并且,在控制信号N100示出“执行感测”的情况下,针对选择的信号N107进行通信用的功率调整(例如将与选择信号N107相乘的系数设为β),输出发送信号N109。
另外,例如,α和β是0以上的实数。此时,α>β(α比β大)。这样,通过降低感测时的发送电力,据此,透过墙壁等的感测变得困难,从而能够提高确保个人隐私的可能性,并且还能够得到在通信时获得高的数据的接收质量的效果。
并且,α和β也可以是复数。此时,|α|>|β|。此时也能够降低感测时的发送电力,据此,透过墙壁等的感测变得困难,从而能够提高确保个人隐私的可能性,并且能够得到在通信时获得高的数据的接收质量的效果。
于是,发送信号N109作为电波,从收发天线部N110输出。
另外,也可以不具备功率调整部N108。此时,选择的信号N107从收发天线部N110,作为电波被输出。
收发天线部N110将接收信号N111作为输出。接收用信号选择部N112将控制信号N100、接收信号N111作为输入。在控制信号N100示出“执行通信”的情况下,接收用信号选择部N112将接收信号N111作为信号N113来输出。
并且,在控制信号N100示出“执行感测”的情况下,接收用信号选择部N112将接收信号N111作为信号N114来输出。
收发部N102将控制信号N100、信号N113作为输入。在控制信号N100示出“执行通信”的情况下,收发部N102针对信号N113进行解调、纠错解码等的处理,输出接收数据N115。
感测部N104将控制信号N100,信号N114作为输入。在控制信号N100示出“执行感测”的情况,感测部N104利用信号N114等进行感测,并输出感测结果N116。
控制部N151根据外部信号N150、接收数据N115等,生成控制信号N100并输出。
控制部N151根据外部信号N150、接收数据N115等,生成控制信号N100并输出。
登记部N180将外部信号N150、感测结果N116作为输入。例如,在外部信号N150示出进行用于动作登记的工作的情况下,登记部N180对包括执行动作登记的这一信息的与动作有关的信号N180进行输出。
在与动作有关的信号N180包括执行动作登记这一信息的情况下,感测部N104生成用于感测成为对象的姿势等的感测用信号N105,并输出。
于是,该感测用信号N105作为电波被发送,在此之后,能够感测的装置接收信号,感测部N104针对接收的信号,进行感测的估计,输出感测结果N116。
登记部N180对感测结果N116进行登记。
以下对具体的例子进行说明。
例1:
在住宅内,假设第1个人拿出“能够感测的设备”、或者“能够感测且具有通信功能的装置”,忘了放在哪里。在此,将“能够感测的设备”、或者“能够感测且具有通信功能的装置”命名为装置#A。另外,关于装置#A的具体例子与已经进行的说明相同。
第1个人有想要简单地找到忘了放在哪里的装置#A的需求。以下针对该需求的工作例进行说明。
图45示出了装置#A与第1个人的关系的例子。如图45所示,首先,装置#A“决定对姿势进行登记(N201)”。因此,装置#A对感测用信号进行发送。
对此,第1个人执行“向装置#A进行登记的动作(N202)”。另外,将该姿势命名为“第1姿势”。
于是,装置#A进行“对第1姿势进行登记(N203)”。另外,装置#A也可以存在对是否进行了正确的姿势的登记进行确认的功能。并且,装置#A也可以具有对登记的姿势进行编辑的功能。这些功能例如可以由第1个人利用,将第1姿势正确地登记到装置#A。
接着,使“登记的姿势(例如第1姿势)与装置#A的工作联动(N211)”。作为一个例子,与“在装置#A没有被找到时,当人进行第1姿势时,装置#A进行“发出声音”或者“振动”的工作”联动。例如,将上述(“发出声音”或者“振动”)命名为“第1工作”。另外,装置#A对与第1工作联动的内容进行登记。
在此之后,装置#A定期的、或规则的、或不规则地执行感测。
于是,例如,由于第1个人没有找到装置#A,因此“执行第1姿势(N212)”。另外,虽然将执行第1姿势的人视为第1个人,也可以由其他的人执行第1姿势。
于是,通过装置#A进行感测,识别第1姿势,从而执行第1工作(N213)。
这样,能够得到可以简单地找到装置#A的效果。此时,能够得到人可以不必持有特殊的装置的效果。
接着,对防止姿势的误识别的方法进行说明。
如以上所述,通过图45中的N201、N202、N203,装置#A能够对人做出的姿势进行登记。这样,装置#A对多个姿势进行登记。例如,装置#A对第1姿势、第2姿势、第3姿势、第4姿势进行登记。
但是,如以上所示,在仅由人做出第1姿势,装置#A就“发出声音”或者“振动”,这样,在某个人无意识地做出第1姿势时,装置#A也会有进行“发出声音”或者“振动”的可能性(在此称为误工作)。
为了防止这种误工作,而采取使多个姿势与装置#A的工作联动。
例如在连续地执行被登记到装置#A的第1姿势和第4姿势时,在装置#A进行“发出声音”或者“振动”这种工作时,第1个人向装置#A进行登记。
这样,在第1个人执行第1姿势和第4姿势时,装置#A对这些姿势进行识别,装置#A“发出声音”或者“振动”。
这样,在对姿势进行多个组合时,进行了登记的第1个人以外的人偶然做出被组合的动作的概率降低,因此,能够得到明显减少装置#A的误工作的效果。
另外,被登记到装置#A的姿势的数量并非受上述的例子所限,只要登记多个姿势就能够同样执行。并且,对于组合的姿势的数量也不受上述的例子所限,只要组合多个姿势来与装置#A的工作链接即可。
另外,被登记到装置#A的姿势的数量并非受上述的例子所限,只要登记多个姿势就能够同样执行。并且,对于组合的姿势的数量也不受上述的例子所限,只要组合多个姿势来与装置#A的工作链接即可。此时,作为装置#A的工作的例子,虽然对“发出声音”或者“振动”的例子进行了说明,对多个姿势与装置的工作的链接并非受这些所限,可以利用图46至图49,如以后所述那样,使多个姿势与装置(终端)的工作链接。
并且,人执行多个姿势,并由装置#A对这些多个姿势进行识别,从而,作为装置#A执行的工作,在上述的例子中虽然对“发出声音”或者“振动”进行了说明,不过并非受此所限,装置(终端)也可以利用图46至图49如以后所述的例子所示那样进行工作。
并且,在图45中虽然是对姿势进行登记,在此之后使姿势与装置#A的工作链接,不过,顺序并非受此所限,也可以在指定装置#A的工作之后,来登记进行链接的姿势。并且,与装置#A的工作进行链接的姿势可以是装置#A(预先)持有的姿势。在此,重要之处是,使一个或者多个姿势与终端#A的工作链接。
例2:
在例1中说明了使“姿势”与“装置#A的“发出声音”或者“振动”这种工作”链接的情况,在本例中对使“姿势”与“装置#A(终端#A)的通信功能的工作”链接的情况进行说明。
图46示出了第1个人N301、“能够感测且具有通信功能”的N302的终端#A、N303的装置#B的状态的例子。在图46中,N302的终端#A与N303的装置#B能够进行通信。
图47示出了与图46不同的例子,对于与图46相同的工作赋予相同的编号。在图47中示出了,第1个人N301、“能够感测且具备通信装置”的N302的终端#A、AP(访问接入点)N401、N303的装置#B。并且,也可以存在网络N402。在图47中,N302的终端#A与N401的AP能够进行通信,并且N303的装置#B与N401的AP能够进行通信。
利用图48对图46的各装置的工作进行说明。
首先,N302的终端#A“决定对姿势进行登记(N501)”。因此,N302的终端#A发送感测用信号。
据此,第1个人N301“向N302的终端#A进行登记的动作(N502)”。另外,将该姿势命名为“第2姿势”。
于是,N302的终端#A“对第2姿势进行登记(N503)”。另外,如以上所述,N302的终端#A也可以具有对是否正确地登记了姿势进行确认的功能。并且,N302的终端#A也可以具有对登记的姿势进行编辑的功能。这些功能例如可以由第1个人N301利用,将第2姿势正确地登记到N302的终端#A。
接着,使“登记的姿势(例如第2姿势)与N302的终端#A的工作联动(N511)”。作为一个例子,进行如下的联动。进行“在包括第1个人N301的人做出第2姿势时,N302的终端#A针对N303的装置#B,指示执行“第2工作”。因此,N302的终端#A将指示进行第2工作的信息,发送给N303的装置#B。”这样的联动。
在此之后,N302的终端#A执行定期的、或规则的、或不规则的感测。
于是,第1个人N301由于想向N303的装置#B请求“第2工作”的执行,因此“执行第2姿势(N512)”。另外,虽然将执行第2姿势的人视为第1个人N301,也可以是由其他的人来执行第2姿势。
于是,通过N0302的终端进行感测,从而识别第2姿势(N513),将指示执行“第2工作”的信息发送到N303的装置#B(N514)。
于是,N303的装置#B执行第2工作(N515)。
通过以上所述,能够针对装置#B简单地进行工作指示。
此时,能够得到人无需持有特殊的装置的效果。
利用图49对图47的各装置的工作进行说明。另外,在图49中,对于与图48同样的工作赋予相同的编号。
首先,N302的终端#A“决定对姿势进行登记(N501)”。因此,N302的终端#A对感测用信号进行发送。
对此,第1个人N301“向N302的终端#A进行登记的动作(N502)”。另外,将该姿势命名为“第2姿势”。
于是,N302的终端#A“对第2姿势进行登记(N503)”。另外,如以上所述,N302的终端#A也可以具有对是否正确地登记了姿势进行确认的功能。并且,N302的终端#A也可以具有对登记的姿势进行编辑的功能。可以将这些功能例如由第1个人N301来利用,也可以将第2姿势正确地登记到N302的终端A。
接着,使“登记的姿势(例如第2姿势)与N302的终端#A的工作联动(N611)”。作为例子,进行以下的联动。在包括第1个人N301的人做出第2姿势时,N302的终端#A针对N303的装置#B,指示执行“第3工作”。因此,N302的终端#A将指示执行第3工作的信息发送到N401的AP。于是,N401的AP将包括该信息(指示执行第3工作)的调制信号发送到N303的装置#B。
在此之后,N302的终端#A定期的、或规则的、或不规则的进行感测。
于是,第1个人N301由于想向N303的装置#B请求“第3工作”,因此“执行第2姿势(N612)”。另外,在此虽然将执行第2姿势的人设为第1个人N301,也可以由其他的人来执行第2姿势。
于是,通过N302的终端#A进行感测,识别第2姿势(N613),从而将指示执行“第3工作”的信息发送到N401的AP(N614)。
于是,N401的AP将包括该信息(第3工作执行的指示)的调制信号发送到N303的装置#B(N615)。
据此,N303的装置#B执行第3工作(N616)。
另外,在图47中也可以是N401的AP与网络N402进行通信。例如,N401的AP可以经由网络N402,与云服务器进行通信。于是,N401的AP从云服务器接受指示。
例如,云服务器可以从N302的终端#A、N303的装置#B、N401的AP等,获得与感测有关的信息。
在这种情况下,云服务器自身也可以进行姿势的登记内容的掌握、姿势的识别的运算。不过,N302的终端#A需要将成为这些的基础的信息加载到云服务器。并且,云服务器掌握与姿势联动的内容,据此,可以针对N302的终端#A、N303的装置#B、N401的AP进行指示。
这样,能够得到针对装置#B简单地进行工作指示的效果。此时,能够得到的效果是,人可以不必持有特殊的装置就能够对设备进行指示。
另外,在本说明中,虽然使用姿势这一用语进行了说明,也可以取代姿势而使用人的动作、人体的一部分的形状、人体的一部分的动作、人的检测、人的一部分的检测、人的认证、人的一部分的认证、物体的动作、物体的形状、物体的检测、物体的认证等,来执行本说明。
并且,感测的方法可以使用本说明书中记载的例子,也可以使用除此以外的方法。
(实施方式8)
在本实施方式中,对能够进行感测的装置存在的空间中的感测的具体例子进行说明。
图50示出了本实施方式中的各装置的状态的例子。N700作为一个例子示出了住宅内这一空间。如图50所示,例如在住宅内N700存在AP(访问接入点)N701、音响N702、“智能手机、或者智能音箱、或者平板电脑、或者计算机、或者便携式电话”等终端即设备N703、以及照明器具N704。另外,以后将设备N703称为设备#C。
并且,人N705在住宅内N700生活。
N701的AP如在其他的实施方式的说明所示,既能够感测又能够通信。
于是,N701的AP例如与音响N702、N703的设备#C、照明N704等进行通信。另外,N701的AP也可以与除此以外的装置进行通信。
并且,N701的AP经由网络N710,与(云)服务器N720进行通信。
而且,N701的AP经由网络N710,与基站N730进行通信。
基站N730与“智能手机、或者平板电脑、或者计算机、或者便携式电话”等终端即设备N731进行通信。另外,以后将设备N731称为设备#D。
接着,对图50中的N701的AP的详细的工作例进行说明。
图51示出了在住宅内设置了N701的AP时的工作例的流程图。
首先,N701的AP进行感测(N801),将住宅内的状况的信息、例如房间数量的信息、房间的形状的信息、设置的物品的信息、例如家具的位置的信息、家具的形状的信息、家电(当然包括音响N702、照明N704)的位置的信息、家电的形状的信息、电子设备(当然包括N703的设备#C)的位置的信息、电子设备的形状的信息等加载到云服务器(N802)。
据此,N701的AP结束初期感测(N803)。另外,在此虽然记载为初期感测,也可以在N701的AP设置后,由N701的AP定期的、或不定期的、或规则的、或不规则的进行图51的工作。
作为其他的例子,图51示出了N703的设备#C的工作。
首先,N703的设备#C进行感测(N801),将住宅内的状况的信息、例如房间数量的信息、房间的形状的信息、被设置的物品的信息、例如家具的位置的信息、家具的形状的信息、家电(当然包括音响N702、照明N704)的位置的信息、家电的形状的信息、电子设备的位置的信息、电子设备的形状的信息等,经由N701的AP加载到云服务器(N802)。
据此,N703的设备#C结束初期感测(N803)。另外,虽然记载为初期感测,N703的设备#C也可以定期的、或不定期的、或规则的、或不规则的进行图51的工作。
图52示出了N701的AP的一个工作例的流程图。
N701的AP将通过感测而得到的住宅内的设备例如家电(当然包括音响N702、照明N704)的信息、电子设备(当然包括N703的设备#C)的信息加载到云服务器(N901)。
于是,与住宅内的设备的工作和N701的AP进行的感测的联动的信息被加载到云服务器(N902)。另外,关于住宅内的设备的工作与能够感测的设备(在此为N701的AP)的感测的联动、联动的登记,在实施方式7中进行了举例说明。以下对与实施方式7不同的工作,尤其是联动的工作例进行说明。
作为其他的例子,图52示出了N703的设备#C的工作。
N703的设备#C将通过感测而得到的住宅内的设备例如家电(当然包括音响N702、照明N704)的信息、电子设备的信息,经由N701的AP,加载到云服务器(N901)。
于是,与住宅内的设备的工作和N703的设备#C所进行的感测的联动相关的信息被加载到云服务器(N902)。另外,关于住宅内的设备的工作和能够感测的设备(在此为N703的设备#C)的感测的联动、联动的登记,在实施方式7中进行了举例说明。以下对与实施方式7不同的工作,尤其是联动的工作例进行说明。
图53示出了与系统有关的工作例的流程图。以下利用图53,对音响N702与感测的联动、设备#C与感测的联动、照明N704与感测的联动的例子进行说明。
N701的AP执行感测(N1001)。
作为感测的结果,N701的AP确认是否检测到住宅内包括人在内的可动物体(N1002)。
N701的AP在没有检测到住宅内包括人在内的可动物体(N1002的“否”)的情况下,进入到“执行感测N1001”。
N701的AP在检测到住宅内的包括人在内的可动物体(N1002的“是”)的情况下,N701的AP经由网络N710,将与住宅内的状况有关的信息加载到云服务器N720(N1003)。
同时,云服务器N720向N701的AP,发送与音响N702的控制有关的信息、或者与N703的设备#C的控制有关的信息、或者与照明N704的控制有关的信息。于是,N701的AP701得到与控制有关的信息(控制信息)(N1004的“是”)。
于是,N701的AP向成为对象的设备(在图50的情况下为音响N702、或者N703的设备#C、或者照明N704)发送控制信息(N1005)。
同时,成为对象的设备进行基于该控制信息的控制,并结束控制(N1006)。
于是,N701的AP进行下一个感测(N1001)。
另外,N701的AP在检测到住宅内包括人在内的可动物体(N1002的“是”)的情况下,N701的AP经由网络N710,将与住宅内的状况有关的信息加载到云服务器N720(N1003),从而,N701的AP从云服务器N720得到控制信息(N1004的“否”)。在这种情况下,N701的AP进行下一个感测(N1001)。
例如,在N1005可以考虑到,N701的AP针对音响N702发送控制信息的情况。在这种情况下,根据由N701的AP通过感测得到的人的位置的信息,云服务器N720将与音响N702的声音/音响的指向性控制有关的信息发送到N701的AP。于是,N701的AP将与声音/音响的指向性控制有关的信息发送到音响N702,音响N702根据与声音/音响的指向性控制有关的信息,对声音/音响的指向性进行控制。
作为其他的例子,在N1005可以考虑到,N701的AP针对照明N704发送控制信息的情况。在这种情况下,根据由N701的AP进行感测而得到的人/可动物体的位置的信息,云服务器N720将照明N704的与照明的“ON/OFF、或者光的照射指向性控制”有关的信息发送到N701的AP。于是,N701的AP将与“ON/OFF、或者光的照射指向性控制”有关的信息发送到照明N704,照明N704根据与“ON/OFF、或者光的照射指向性控制”有关的信息,进行照明的ON/OFF、或者照明的照射方向的控制。
如以上所述,根据住宅内的状态,来对住宅内存在的设备进行控制,据此,能够得到能够提供舒适、安全的生活的效果。
对图53的其他的例子进行说明。
N703的设备#C执行感测(N1001)。
根据感测的结果,N703的设备#C对是否检测到住宅内包括人在内的可动物体进行确认(N1002)。
N703的设备#C在没有检测到住宅内包括人在内的可动物体(N1002的“否”)的情况下,进入到“执行感测N1001”。
N703的设备#C在检测到住宅内包括人在内的可动物体(N1002的“是”)情况下,N703的设备#C经由N701的AP、网络N710,将与住宅内的状况有关的信息加载到云服务器N720(N1003)。
同时,云服务器N720经由网络N710、N701的AP,向N703的设备#C发送与音响N702的控制有关的信息、或者与照明N704的控制有关的信息。于是,N703的设备#C得到与控制有关的信息(控制信息)(N1004的“是”)。
于是,N703的设备#C向成为对象的设备(在图50的情况下为音响N702、或者照明N704)发送控制信息(N1005)。不过,经由N701的AP。
同时,成为对象的设备根据该控制信息进行控制,并结束控制(N1006)。
于是,N703的设备#C进行下一个感测(N1001)。
另外,N703的设备#C在检测到住宅内包括人在内的可动物体(N1002的“是”)的情况下,N703的设备#C经由N701的AP、网络N710,将与住宅内的状况有关的信息加载到云服务器N720(N1003),N703的设备#C从云服务器N720获得控制信息(N1004的“否”)。在这种情况下,N703的设备#C进行下一个感测(N1001)。
例如,在N1005可以考虑到,N703的设备#C针对音响N702发送控制信息的情况。在这种情况下,根据由N703的设备#C进行感测而得到的人的位置的信息,云服务器N720将与音响N702的声音/音响的指向性控制有关的信息,经由N701的AP发送到N703的设备#C。于是,N703的设备#C将与声音/音响的指向性控制有关的信息,经由N701的AP发送到音响N702,音响N702根据与声音/音响的指向性控制有关的信息,进行声音/音响的指向性控制。
作为其他的例子,在N1005中可以考虑到,N703的设备#C针对照明N704发送控制信息的情况。在这种情况下,根据由N703的设备#C进行感测而得到的人/可动物体的位置的信息,云服务器N720将照明N704的与照明的“ON/OFF、或者光的照射指向性控制”有关的信息,经由N701的AP发送到N703的设备#C。于是,N703的设备#C将与“ON/OFF、或者光的照射指向性控制”有关的信息,经由N701的AP,发送给照明N704,照明N704根据与“ON/OFF、或者光的照射指向性控制”有关的信息,进行照明的ON/OFF、或者照明的照射方向的控制。
通过以上所述,通过根据住宅内的状态,来对住宅内存在的设备进行控制,从而能够得到能够提供舒适、安全的生活的效果。
图54示出了住宅内的N701的AP、N720的云服务器的工作例的流程图。
N701的AP进行感测(N1101),将住宅内的状况的信息例如房间数量的信息、房间的形状的信息、被设置的物品的信息例如家具的位置的信息、家具的形状的信息、家电(当然包括音响N702、照明N704)的位置的信息、家电的形状的信息、电子设备(当然包括N703的设备#C)的位置的信息、电子设备的形状的信息等加载到云服务器(N1102)。
N720的云服务器对保存的与住宅内的状况有关的信息、和新得到的与住宅内的状况有关的信息进行比较。于是,N720的云服务器对“检测到新的状态了吗”进行确认(N1103)。
在N720的云服务器确认到新的状态(N1103的“是”)时,对与住宅内的状况有关的信息进行更新(N1104)。于是,成为下一个的N701的AP的执行感测(N1101)。
在N720的云服务器没有确认到新的状态(N1103的“否”)时,成为下一个的N701的AP的执行感测(N1101)。
作为其他的例子,图54示出了N703的设备#C、N720的云服务器的工作。
N703的设备#C进行感测(N1101),将住宅内的状况的信息例如房间数量的信息、房间的形状的信息、被设置的物品的信息例如家具的位置的信息、家具的形状的信息、家电(当然包括音响N702、照明N704)的位置的信息、家电的形状的信息、电子设备的位置的信息、电子设备的形状的信息等,经由N701的AP加载到云服务器(N1102)。
N720的云服务器对保存的与住宅内的状况有关的信息、和新得到的与住宅内的状况有关的信息进行比较。于是,N720的云服务器对“检测到新的状态了吗”进行确认(N1103)。
在N720的云服务器确认到新的状态(N1103的“是”)时,对与住宅内的状况有关的信息进行更新(N1104)。于是,成为下一个的N703的设备#C的执行感测(N1101)。
在N720的云服务器没有确认到新的状态(N1103的“否”)时,成为下一个的N703的设备#C的执行感测(N1101)。
如以上所述,通过根据住宅内的状态,对住宅内存在的设备进行控制,从而能够得到能够提供舒适、安全的生活的效果,并且通过适宜地对由感测得到的信息进行更新,从而能够得到可以进行更恰当的控制的效果。
另外,在图53中,与云服务器相关的工作由虚线表示。同样,在图54中,与云服务器相关的工作由虚线表示。
(实施方式9)
在本实施方式中,对能够进行感测的装置存在的空间中的感测的具体例子进行说明。
图55示出了本实施方式中的各装置的状态的例子。另外,对于与图50同样的工作赋予相同的编号。
N700作为例子示出了住宅内这一空间。如图55所示,例如在住宅内N700中存在,AP(访问接入点)N701、音响N702、“智能手机、或者智能音箱、或者平板电脑、或者计算机、或者便携式电话”等终端即设备N703、照明器具N704。另外,以后将设备N703称为设备#C。于是,例如在住宅内N700存在服务器Q101。
并且,人N705在住宅内N700中生活。
N701的AP如其他的实施方式中的说明所示,既能够进行感测又能够进行通信。
于是,N701的AP例如与音响N702、N703的设备#C、照明N704等进行通信。另外,N701的AP可以与除此以外的装置进行通信。
并且,N701的AP经由网络Q102,与服务器Q101进行通信。
并且,N701的AP经由网络N701,与基站N730进行通信。
基站N730与“智能手机、或者平板电脑、或者计算机、或者便携式电话”等终端即设备N731进行通信。另外,以后将设备N731称为设备#D。
接着,对图55中的N701的AP的详细的工作例进行说明。
图56示出了在住宅内设置了N701的AP时的工作例的流程图。
首先,N701的AP进行感测(Q201),将住宅内的状况的信息例如房间数量的信息、房间的形状的信息、被设置的物品的信息例如家具的位置的信息、家具的形状的信息、家电(当然包括音响N702、照明N704)的位置的信息、家电的形状的信息、电子设备(当然包括N703的设备#C)的位置的信息、电子设备的形状的信息等,加载到服务器Q101(Q202)。
据此,N701的AP结束初期感测(Q203)。另外,虽然记载为初期感测,也可以在N701的AP设置后,由N701的AP定期的、或不定期的、或规则的、或不规则的进行图56的工作。
作为其他的例子,图56示出了N703的设备#C的工作。
首先,N703的设备#C进行感测(Q201),将住宅内的状况的信息例如房间数量的信息、房间的形状的信息、被设置的物品的信息例如家具的位置的信息、家具的形状的信息、家电(当然,包括音响N702、照明N704)的位置的信息、家电的形状的信息、电子设备的位置的信息、电子设备的形状的信息等,经由N701的AP加载到服务器Q101(Q202)。
据此,N703的设备#C结束初期感测(Q203)。另外,虽然记载为初期感测,N703的设备#C也可以定期的、或不定期的、或规则的、或不规则的进行图56的工作。
图57示出了N701的AP的一个工作例的流程图。
N701的AP将由感测得到的住宅内的设备的信息例如家电(当然包括音响N702、照明N704)的信息、电子设备(当然包括N703的设备#C)的信息加载到服务器Q101(Q301)。
于是,将与住宅内的设备的工作和N701的AP进行的感测的联动有关的信息加载到服务器Q101(Q302)。另外,关于住宅内的设备的工作与能够感测的设备(在此为N701的AP)的感测的联动、联动的登记,在实施方式7进行了举例说明。以下对与实施方式7不同的工作,尤其是联动的工作例进行说明。
作为其他的例子,图57示出了N703的设备#C的工作。
N703的设备#C将由感测得到的住宅内的设备例如家电(当然包括音响N702、照明N704)的信息、电子设备的信息,经由N701的AP,加载到服务器Q101(Q301)。
于是,将与住宅内的设备的工作和N703的设备#C进行的感测的联动有关的信息加载到云服务器(Q302)。另外,关于住宅内的设备的工作和能够感测的设备(在此为N703的设备#C)的感测的联动、联动的登记,在实施方式7中举例进行了说明。以下对与实施方式7不同的工作,尤其是联动的工作例进行说明。
图58例如示出了与图55的系统有关的工作例的流程图。以下利用图58,对音响N702与感测的联动、设备#C与感测的联动、照明N704与感测的联动的例子进行说明。另外,在图58中,对于与服务器相关的工作用虚线示出。
N701的AP执行感测(Q401)。
根据感测的结果,N701的AP对是否检测到住宅内包括人在内的可动物体进行确认(Q402)。
N701的AP在没有检测到住宅内包括人在内的可动物体(Q402的“否”)的情况下,进入到“执行感测Q401”。
N701的AP在检测到住宅内包括人在内的可动物体(Q402的“是”)的情况下,N701的AP经由网络Q102,将与住宅内的状况有关的信息加载到服务器Q101(Q403)。
同时,服务器Q101向N701的AP,发送与音响N702的控制有关的信息、或者与N703的设备#C的控制有关的信息、或者与照明N704的控制有关的信息。于是,N701的AP701得到与控制有关的信息(控制信息)(Q404的“是”)。
于是,N701的AP向成为对象的设备(在图55的情况下,音响N702、或者N703的设备#C、或者照明N704)发送控制信息(Q405)。
同时,成为对象的设备进行基于该控制信息的控制,并结束控制(Q406)。
于是,N701的AP进行下一个的感测(Q401)。
另外,N701的AP在检测到住宅内包括人在内的可动物体(Q402的“是”)的情况下,N701的AP经由网络Q102,将与住宅内的状况有关的信息加载到服务器Q101(Q403),N701的AP不从服务器Q101得到控制信息(Q404的“否”)。在这种情况下,N701的AP进行下一个的感测(Q401)。
例如,在Q405可以考虑到,N701的AP针对音响N702发送控制信息的情况。在这种情况下,根据由N701的AP进行感测而得到的人的位置的信息,服务器Q101将与音响N702的声音/音响的指向性控制有关的信息发送到N701的AP。于是,N701的AP将与声声音/音响的指向性控制有关的信息发送到音响N702,音响N702根据与声音/音响的指向性控制有关的信息,进行声音/音响的指向性控制。
作为其他的例子,在Q405可以考虑到,N701的AP针对照明N704发送控制信息的情况。在这种情况下,根据由N701的AP进行感测而得到的人/可动物体的位置的信息,服务器Q101将与照明N704的照明的“ON/OFF、或者光的照射指向性控制”有关的信息发送到N701的AP。于是,N701的AP将与“ON/OFF、或者光的照射指向性控制”有关的信息发送到照明N704,照明N704根据与“ON/OFF、或者光的照射指向性控制”有关的信息,进行照明的ON/OFF、或者照明的照射方向的控制。
如以上所述,通过根据住宅内的状态,来控制住宅内存在的设备,从而能够得到能够提供舒适、安全的生活的效果。
对图58的其他的例子进行说明。
N703的设备#C执行感测(Q401)。
根据感测的结果、N703的设备#C确认是否检测到住宅内包括人在内的可动物体(Q402)。
N703的设备#C在没有检测到住宅内包括人在内的可动物体(Q402的“否”)的情况下,进入到执行感测Q401。
N703的设备#C在检测到住宅内包括人在内的可动物体(Q402的“是”)的情况下,N703的设备#C经由N701的AP、网络Q102,将与住宅内的状况有关的信息加载到服务器Q101(Q403)。
同时,服务器Q101经由网络Q102、N701的AP,将与音响N702的控制有关的信息、或者与照明N704的控制有关的信息,发送到N703的设备#C。于是,N703的设备#C得到与控制有关的信息(控制信息)(Q404的“是”)。
于是,N703的设备#C向成为对象的设备(在图55的情况下为音响N702、或者照明N704)发送控制信息(Q405)。不过,在此经由N701的AP。
同时,成为对象的设备根据该控制信息进行控制,并结束控制(Q406)。
于是,N703的设备#C进行下一个的感测(Q401)。
另外,N703的设备#C在检测到住宅内包括人在内的可动物体(Q402的“是”)的情况下,N703的设备#C经由N701的AP、网络Q102,将与住宅内的状况有关的信息加载到服务器Q101(Q403),N703的设备#C不从服务器Q101获得控制信息(Q404的“否”)。在这种情况下,N703的设备#C进行下一个的感测(Q401)。
例如,在Q405可以考虑到,N703的设备#C针对音响N702发送控制信息的情况。在这种情况下,根据N703的设备#C进行感测而得到的人的位置的信息,服务器Q101将与音响N702的声音/音响的指向性控制有关的信息,经由N701的AP,发送到N703的设备#C。于是,N703的设备#C将与声音/音响的指向性控制有关的信息,经由N701的AP,发送到音响N702,音响N702根据与声音/音响的指向性控制的信息,进行声音/音响的指向性控制。
作为其他的例子,在Q405可以考虑到,N703的设备#C针对照明N704发送控制信息的情况。在这种情况下,根据N703的设备#C进行感测而得到的人/可动物体的位置的信息,服务器Q101将与照明N704的照明的“ON/OFF、或者光的照射指向性控制”有关的信息,经由N701的AP,发送到N703的设备#C。于是,N703的设备#C将与“ON/OFF、或者光的照射指向性控制”有关的信息,经由N701的AP,发送到照明N704,照明N704根据与“ON/OFF、或者光的照射指向性控制”有关的信息,对照明的ON/OFF、或者照明的照射方向进行控制。
如以上所述,通过根据住宅内的状态,来控制住宅内存在的设备,从而能够得到可以提供舒适、安全的生活的效果。
图59示出了住宅内的N701的AP、服务器Q101的工作例的流程图。另外,在图59中,对于与服务器关联的工作,用虚线表示。
N701的AP进行感测(Q501),将住宅内的状况的信息例如房间数量的信息、房间的形状的信息、被设置的物品的信息例如家具的位置的信息、家具的形状的信息、家电(当然,包括音响N702、照明N704)的位置的信息、家电的形状的信息、电子设备(当然,包括N703的设备#C)的位置的信息、电子设备的形状的信息等,加载到服务器Q101(Q502)。
服务器Q101对保存的与住宅内的状况有关的信息、与新得到的与住宅内的状况有关的信息进行比较。于是,服务器Q101对“检测到新的状态了吗”进行确认(Q503)。
服务器Q101在确认到新的状态(Q503的“是”)时,对与住宅内的状况有关的信息进行更新(Q504)。于是,成为下一个的N701的AP的执行感测(Q501)。
服务器Q101在没有确认到新的状态时(Q503的“否”),成为下一个的N701的AP的执行感测(Q501)。
作为其他的例子,图59示出了N703的设备#C、服务器Q101的工作。
N703的设备#C进行感测(Q501),将住宅内的状况的信息例如房间数量的信息、房间的形状的信息、被设置的物品的信息例如家具的位置的信息、家具的形状的信息、家电(当然,包括音响N702、照明N704)的位置的信息、家电的形状的信息、电子设备的位置的信息、电子设备的形状的信息等,经由N701的AP,加载服务器Q101(Q502)。
服务器Q101对保存的与住宅内的状况有关的信息、与新得到的与住宅内的状况有关的信息进行比较。于是,服务器Q101对“检测到新的状态了吗”进行确认(Q503)。
服务器Q101在确认到新的状态时(Q503的“是”),对与住宅内的状况有关的信息进行更新(Q504)。于是,成为下一个的N703的设备#C的执行感测(Q501)。
服务器Q101在没有确认到新的状态时(Q503的“否”),成为下一个的N703的设备#C的执行感测(Q501)。
如以上所述,通过根据住宅内的状态,来控制住宅内存在的设备,从而能够得到可以提供舒适、安全的生活的效果,并通过适宜地对感测到的信息进行更新,从而能够得到更优选的控制的效果。
另外,在图55中,N701的AP、Q102的网络、服务器Q101可以由一个装置来构成。此时,网络Q102既可以是有线通信也可以是无线通信,因此,N701的AP与服务器Q101在装置内可以是有线连接,也可以是无线连接。
(实施方式10)
在本实施方式中,对至少具有感测的功能的装置的具体的利用方法的例子进行说明。
例1:
根据通过感测而得到的物体,来生成特性,并显示到画面上。
通过在应用中利用特性,从而能够实现应用的多样性,并且能够得到相应的效果。
图60示出了本实施方式中的系统的构成的一个例子。
在图60中,第2装置搭载了监视器。
第1装置至少具有感测的功能。于是,第1装置进行感测,例如通过抓住第1个人物的特征,来生成信息,并将该信息传输到第2装置。
于是,第2装置从第1个人物的特征的信息,生成将在第2装置的监视器显示的第1特性。于是,第2装置的监视器能够对第1特性进行显示。另外,也可以针对第1特性来进行某种变形的符合需求的设计。
作为其他的方法,第1装置进行感测,例如抓住第2物体的特征,来生成第2特性的信息,并将该信息传输到第2装置。
于是,第2装置根据第2特性的信息,将第2特性显示到第2装置的监视器。另外,也可以针对第2特性来进行某种变形的符合需求的设计。
另外,可以由第1装置和第2装置来形成一个装置。
图61示出了与图60不同的本实施方式中的系统的构成的一个例子。
在图61中,第2装置能够与外部监视器连接。
第1装置至少具有感测的功能。于是,第1装置进行感测,例如通过抓住第1个人物的特征,来生成信息,并将该信息传输到第2装置。
于是,第2装置从第1个人物的特征的信息,生成将要在与第2装置连接的监视器显示的第1特性。于是,在监视器能够显示第1特性。另外,也可以针对第1特性进行某种变形的符合需求的设计。
作为其他的方法,第1装置进行感测,例如通过抓住第2物体的特性,来生成第2特性的信息,并将该信息传输到第2装置。
于是,第2装置根据第2特性的信息,在监视器显示第2特性。另外,也可以针对第2特性进行某种变形的符合需求的设计。
例2:
通过利用由相机等能够拍摄图像的传感器得到的物体的图像(静止图像、或者运动图像),例如通过利用无线的感测而得到的物体的估计信息,能够再现物体的三维空间。
图62示出了本实施方式中的系统的构成的一个例子。
在图62中,第3装置搭载了监视器。
第3装置具备相机等能够拍摄图像的传感器、以及通过无线的感测部。
通过利用无线的感测部,来获得物体的三维的空间估计信息。
通过由相机等能够拍摄图像的传感器来拍摄图像,来获得物体的二维(或者三维)的图像信息以及颜色信息。
三维空间估计部根据“物体的三维的空间估计信息”、“物体的二维(或者、三维)的图像信息以及颜色信息”,来生成物体的(带有颜色的)三维空间的估计信息,并显示到监视器。
另外,物体的(带有颜色的)三维空间的估计信息所具有的优点是,由于得到的是三维的信息,因此在监视器进行显示时,用于显示物体的视点能够自由地变更。
图63示出了与图62不同的本实施方式中的系统的构成的一个例子。
在图63中,第3装置能够与外部监视器连接。
各部的基本的工作与图62的说明相同。
另外,关于各实施方式中的感测的方法,进行补充说明。
图64以及图65示出各实施方式中的感测的方法。
图64是在三维上示出空间的模式图。如图64所示,在空间内存在物体和检测装置。检测装置例如通过电波等无线的方式来感测物体。另外,物体的形状可以是任意的。
图65示出了贯通物体的平面的一个例子,该平面是与图64的xy平面平行的平面,例如,示出了检测装置发送的电波的路径。在此,检测装置从物体获得的电波,可以是到达物体的电波由物体反射的反射波,也可以是物体自身反射的电波。
如图65所示,检测装置接收由物体自身反射,且直接到达检测装置的电波(称为直接波)W1。并且,检测装置发送电波,在墙壁反射后到达物体的电波由物体反射,进一步由墙壁反射,到达检测装置的电波(也称为反射波)W2、W3以及W4,由检测装置接收。
图65示出了截取三维空间的xy平面这一二维平面的例子,在截取三维空间的二维平面中,与上述的说明相同,检测装置能够利用直接波以及反射波,来检测物体的位置以及形状。换而言之,能够得到的效果是,检测装置能够检测相机等能够拍摄图像的传感器不能拍摄到的物体的一个部分。
(补充1)
当然,在本公开中所说明的实施方式、补充等其他的内容可以通过多个组合来实施。
在本公开中,虽然举例说明了将检测装置A12作为相机来执行的情况,不过,本公开中的检测装置A12也可以通过除此以外的形态来实现。检测装置A12例如可以是智能手机或个人电脑,也可以是车辆、机器人、无人机等。
(补充2)
当然、在本公开中所说明的实施方式、补充等其他的内容也可以通过进行多个组合来实施。
于是,终端与访问接入点(AP)进行通信,在发送调制信号时,可以发送一个调制信号,也可以将多个调制信号通过多个天线来发送。因此,可以采用MIMO(Multiple-InputMultiple-Output)的传输方式。因此,终端、AP可以是具有多个接收的天线的构成。
并且,在并说明书中,为了说明的简化,在实施方式中命名为终端、AP、基站、装置、检测装置、设备来进行了说明,关于名称并非受此所限。例如,“终端”也可以被称为基站、访问接入点、便携式电话(mobile phone)、智能手机、平板电脑等的通信/广播设备、电视机、无线电、个人电脑等的通信设备、通信装置、中继器、服务器。并且,“AP”也可以被称为基站、终端、便携式电话、智能手机、平板电脑等的通信/广播设备、电视机、无线电、个人电脑等的通信设备、通信装置、中继器、服务器。并且,“基站”也可以被称为AP、终端、便携式电话、智能手机、平板电脑等的通信/广播设备、电视机、无线电、个人电脑等的通信设备、通信装置、中继器、服务器。而且,进行感测的设备也可以被称为AP、终端、便携式电话、智能手机、平板电脑等的通信/广播设备、电视机、无线电、个人电脑等的通信设备、通信装置、中继器、服务器。“装置”、“检测装置”也可以被称为AP、终端、便携式电话、智能手机、平板电脑等的通信/广播设备、电视机、无线电、个人电脑等的通信设备、通信装置、中继器、服务器。“设备”、“设备A”也可以被称为AP、终端、便携式电话、智能手机、平板电脑等的通信/广播设备、电视机、无线电、个人电脑等的通信设备、通信装置、中继器、服务器、电动摩托车(e-摩托车)、电动滑板车、吸尘器、电动车、电动辅助自行车、电动辅助滑板车、摩托车、自动车辆、传播、飞机。
关于各实施方式仅为一个例子,例如举例示出了“调制方式、纠错编码方式(使用的纠错码、码长、编码率等)、控制信息等”,不过在适用了其他的“调制方式、纠错编码方式(使用的纠错码、码长、编码率等)、控制信息等”的情况下,也能够同样执行。
关于调制方式,即使可以使用本说明书记载的调制方式以外的调制方式,也能够执行本说明书中的实施方式、其他的内容。例如,可以适用APSK(Amplitude Phase ShiftKeying:幅度相移键控,例如16APSK、64APSK、128APSK、256APSK、1024APSK、4096APSK等),PAM(Pulse Amplitude Modulation:脉冲幅度调制,例如4PAM、8PAM、16PAM、64PAM、128PAM、256PAM、1024PAM、4096PAM等),PSK(Phase Shift Keying:相移键控,例如BPSK、QPSK、8PSK、16PSK、64PSK、128PSK、256PSK、1024PSK、4096PSK等),QAM(Quadrature AmplitudeModulation:正交振幅控制,例如4QAM、8QAM、16QAM、64QAM、128QAM、256QAM、1024QAM、4096QAM等),在各调制方式可以是均一映射、也可以是非均一映射。并且,I-Q平面中的2个、4个、8个、16个、64个、128个、256个、1024个等信号点的配置方法(具有2个、4个、8个、16个、64个、128个、256个、1024个等的信号点的调制方式),并非受本说明书所示的调制方式的信号点配置方法所限。
并且,本公开中的发送装置、接收装置是具有通信功能的设备,该设备的构成为,能够经由某种接口与电视机、收音机、个人计算机、便携式电话等用来执行应用的装置连接。并且,在本实施方式中,数据码元以外的码元,例如导频码元(前导码、独特字、后同步信号、基准码元、Midamble码等)、控制信息用的码元、空字符等在帧中可以是任意的配置。并且,在此虽然命名为基准码元、控制信息用的码元,命名的方式可以是任意的,功能本身是重要的。
基准码元以及基准信号例如在收发机中,只要是使用PSK调制进行了调制的已知的码元就可以,接收机利用该码元,进行频率同步、时间同步、各调制信号的信道估计(CSI(Channel State Information)的估计)、信号的检测等。或者,基准码元以及基准信号也可以通过与接收机同步,从而接收机能够知道由发送机发送的码元。
并且,控制信息用的码元是用来传输用于实现数据(应用等的数据)以外的通信的、需要传输给通信对方的信息(例如,在通信中使用的调制方式、纠错编码方式、纠错编码方式的编码率、上位层中的设定信息等)的码元。
另外,本公开并非受各实施方式所限,能够进行各种变更来实施。例如在各实施方式中,虽然对作为通信装置的情况进行了说明,但是并非受此所限,也可以将该通信方法作为软件来执行。
另外,例如可以将执行上述通信方法的程序预先存放到ROM中,通过CPU来使该程序工作。
并且,可以将执行上述通信方法的程序存放到计算机可读取的存储介质,将存放在存储介质的程序记录到计算机的RAM,使计算机按照该程序工作。
并且,上述的各实施方式等各构成典型的可以作为具有输入端子以及输出端子的集成电路即LSI来实现。它们既可以单独地制成一个芯片,也可以将各实施方式的所有的结构或者一部分的结构包括在一个芯片中。在此,虽然设为LSI,但是根据集成度的不同,也有称作IC、系统LSI、超级LSI、极大规模LSI的情况。并且,集成电路化的方法并非受LSI所限,也可以由专用电路或通用处理器来实现。也可以利用在LSI制造后能够编程的FPGA(FieldProgrammable Gate Array:现场可编程门阵列)、或能够再构成LSI内部的电路单元的连接及设定的可重构处理器。进而,如果因半导体技术的进步或派生的其他技术而出现代替LSI的集成电路化的技术,则当然也可以使用该技术进行功能块的集成化。也有生物技术的应用等可能性。
另外,AP、终端终端所对应的发送方法可以是OFDM等多载波方式,也可以是单载波方式。并且,AP、终端也可以对应多载波方式、单载波方式这双方。此时,生成单载波方式的调制信号的方法为多个,不论哪个方式的情况都能够实施。例如,作为单载波方式的例子有“DFT(Discrete Fourier Transform)-Spread OFDM(Orthogonal Frequency DivisionMultiplexing)”、“Trajectory Constrained DFT-Spread OFDM”、“OFDM based SC(SingleCarrier)”、“SC(Single Carrier)-FDMA(Frequency Division Multiple Access)”、“Guard interval DFT-Spread OFDM”等。
并且,FPGA(Field Programmable Gate Array:现场可编程门阵列)以及CPU(Central Processing Unit)的至少一方可以被构成为,能够通过无线通信或者有线通信来下载用于实现本公开中所说明的通信方法所需要的软件的全部或一部分。而且,可以构成为将用于更新的软件的全部或一部分通过无线通信或者有线通信来下载。而且,可以将下载的软件保存到存储部,根据被保存的软件使FPGA以及CPU的至少一方工作,来执行本公开中说明的数字信号处理。
此时,具备FPGA以及CPU的至少一方的设备可以通过无线或有线与通信调制解调器连接,可以通过该设备和通信调制解调器,来实现在本公开中说明的通信方法。
例如,本说明书所记载的AP、终端等的通信装置可以具备FPGA以及CPU中的至少一方,通信装置可以具备用来从外部获得用于使FPGA以及CPU的至少一方工作的软件的接口。而且,通信装置可以具备用于存放从外部获得的软件的存储部,可以通过根据存放的软件使FPGA、CPU工作,来实现本公开中说明的信号处理。
另外,在本说明书中记载的“感测”或“感测处理”至少包括如下处理之一,这些处理是指:对物体的位置进行检测的处理、对物体的有无进行检测的处理、对物体的材质进行预测的处理、对物体的动作进行检测的处理、对能够执行感测的装置的周围状况进行估计的处理、对能够进行感测的装置与物体的距离进行估计的处理、对物体的外形进行检测的处理。另外,在对物体的位置进行检测的处理中,会有物体的检测与物体的动作的检测同时进行的情况。并且,在对物体的有无进行检测的处理、或对物体的外形进行检测的处理中,也有确定对象物的情况。
另外,在上述实施方式中,当检测到物体(人、动物、车辆等)时,可以按下快门,即可以拍摄静止图像。并且,当检测到物体时,也可以拍摄运动图像。进行的检测中,可以是预先规定的姿势。
并且,感测例如可以通过采用了电波的无线来进行,也可以采用更高频率的无线,例如可以采用光来进行感测。
针对图14所示的感测用的装置与图15所示的通信用的装置,例如经由接口进行连接,从而可以实现能够进行感测和通信的图16所示的能够进行感测以及通信的装置。
另外,利用空间的感测的目的或用途、利用环境是多样化的,可以按照用途或利用环境,检测成为对象的物体、或者检测与成为对象的物体的距离、想要检测的距离的精确度、允许的延迟时间、或者想要与物体的检测同时获得的信息等可以不同。因此,可以按照利用空间的感测的目的或用途、利用环境,来对感测方法进行切换,或者可以组合多个的感测方法,获得与目的对应的感测结果的发送装置以及发送方法则成为一种需求。
在上述形态的检测装置中,通过进行利用了电波的与物体之间的距离的检测、利用了图像信息的检测位置的控制,从而能够容易地对距离的检测对象的物体进行确定,来进行距离的检测。
例如,根据被显示在具有触控面板等显示部和输入部的功能的装置的映像,在用户对检测对象的物体进行指定、或者输入选择的信号的情况下,进行采用了电波的感测的对象物能够容易地由用户指定。
并且,例如,通过使用了以摄像部获得的图像信息的图像处理,在对成为检测对象的物体进行检测,并对检测到的物体之间的距离进行测量的情况下,能够将图像信息中包括的颜色或形状等特征量用于物体的检测,这与仅通过电波进行检测的情况相比,能够促进物体的检测精确度的提高、以及物体的识别能力的提高。
在本公开中以三角测量为例进行了说明。以下利用图66对使用三角测量,来测量或者估计位置的其他的方法进行说明。
处理A:
在图66中,第1装置6601例如利用电波来发送信号。于是,该信号在第2装置6602反射,第1装置6601得到该反射的信号,据此知道“第1装置6601与第2装置6602的距离”。另外,第1装置6601与第2装置6602也可以共享“第1装置6601与第2装置6602的距离”的信息。
处理B:
第1装置6601例如利用电波来发送信号。于是,该信号在对象物(物体)6603反射,第1装置6601得到该反射的信号,从而知道“第1装置6601与对象物(物体)6603的距离”。另外,第1装置6601与第2装置6602也可以共享“第1装置6601与对象物(物体)6603的距离”的信息。
处理C:
第2装置6602例如利用电波来发送信号。于是,该信号在对象物(物体)6603反射,第2装置6602获得该反射的信号,从而知道“第2装置6602与对象物(物体)6603的距离”。另外,第2装置6602与第1装置6601可以共享“第2装置6602与对象物(物体)6603的距离”的信息。
处理D:
第1装置6601以及/或者第2装置6602通过处理A、处理B、处理C,获得“第1装置6601与第2装置6602的距离”的信息、“第1装置6601与对象物(物体)6603的距离”的信息、“第2装置6602与对象物(物体)6603的距离”的信息,利用这些信息来进行三角测量,据此能够知道对象物(物体)6603的位置。
接着,对与上述不同的方法进行说明。
处理E:
第1装置6601以及/或者第2装置6602例如以设置的时刻来保持“第1装置6601和第2装置6602的距离”的信息。
处理F:
第1装置6601例如利用电波来发送信号。于是,该信号在对象物(物体)6603反射,第1装置6601获得该反射的信号,据此知道“第1装置6601与对象物(物体)6603的距离”。另外,第1装置6601与第2装置6602可以共享“第1装置6601与对象物(物体)6603的距离”的信息。
处理G:
第2装置6602例如利用电波来发送信号。于是,该信号在对象物(物体)6603反射,第2装置6602获得该反射的信号,据此知道“第2装置6602与对象物(物体)6603的距离”。另外,第2装置6602与第1装置6601可以共享“第2装置6602与对象物(物体)6603的距离”的信息。
处理H:
第1装置6601以及/或者第2装置6602通过处理E、处理F、处理G,获得“第1装置6601与第2装置6602的距离”的信息、“第1装置6601与对象物(物体)6603的距离”的信息、“第2装置6602与对象物(物体)6603的距离”的信息,利用这些信息来进行三角测量,据此能够知道对象物(物体)6603的位置。另外,可以由第1装置6601以及第2装置6602构成一个装置。
在本公开中,对使姿势与装置的工作联动进行说明。以下对用于使姿势与装置的工作联动的登记处理的例子进行说明。
在本公开的实施方式7中,对使被登记的第1姿势、与装置#A的“发出声音”或者“振动”等的工作即第1工作的联动的例子进行说明。此时,对第1姿势与装置#A的工作进行组合,作为联动工作而登记的处理,例如可以利用用于设定设备#A中的设备的联动工作的设定画面等来进行。
例如,为了使姿势与设备的工作联动,用户操作设备#A,当打开设定画面时,在设定画面显示一个或多个候选姿势。在此,当用户从设定画面上显示的一个或者多个候选姿势中选择第1姿势时,在装置#A被允许利用的一个或者多个候选工作被显示在设定画面。当用户从多个候选工作中选择第1工作时,是否将第1姿势与第1工作联动的姿势和设备工作作为组合来决定的确认画面被显示,通过用户进行确认的输入,来进行登记。
另外,采用了上述的设定画面的姿势与设备工作的联动的登记方法是多个联动登记方法的一个例子,本公开中的姿势与设备工作的联动登记方法并非受上述的方法所限。
例如,不是在姿势的选择后来选择联动的工作,而可以在联动的工作的选择后来选择姿势。在这种情况下,在选择了联动的工作后,能够进行联动的多个姿势候选被显示在设定画面。
另外,如该例子所示,用于使姿势与装置的工作联动的多个的处理的流程、多个的处理的顺序并非受本说明书中的记载所限。
并且,姿势与设备工作的联动登记方法也可以通过图形用户界面(GUI)来提供。在采用了GUI的情况下,例如与多个姿势候选的每一个对应的图符或方框、与多个设备的工作候选的每一个对应的图符或方框等被显示在画面上,可以通过触控面板或鼠标等操作来移动这些图符或方框并进行连接,从而图符或方框间以线等连接器而被连接,据此来描述联动处理,并能够将被描述的联动处理进行登记。
另外,在上述说明中,对使姿势与设备的工作联动的情况进行了说明,不过,在设定画面中不仅是姿势,通过音声进行的指示等设备#A所具备的其他的传感器能够检测的周围的环境或用户的行动等,都可以作为能够与设备工作联动的输入的候选,而被有选择性的提示。通过上述构成,由于能够根据姿势以外的用户的行动或利用了设备的场所等,来对设备的工作进行控制,因此,能够实现操作的简单化或误操作的抑制的可能性增高,并会有助于操作性的提高。
另外,在上述说明中,虽然对姿势与设备工作的联动在设备#A的设定画面中进行的情况做了说明,也可以利用与设备#A不同的其他的设备来进行设定。在这种情况下,在其他的设备的设定画面,可以由用户从其他的设备中选择,能够进行联动工作的设定的多个候选设备中的成为进行设定的对象的设备。
并且,例如在实施方式8的说明中,在能够感测的设备所存在的住宅内等空间中,在将能够感测的设备所检测到的姿势等用户的动作与设备的工作的组合作为联动工作,登记到服务器等的情况下,可以由用户进行如下的选择,例如,能够感测的多个设备、或者传感器中哪个设备或传感器被联动登记的选择,将提供能够利用的工作的多个设备中的哪个设备进行联动登记的选择。
例如,为了进行联动登记,用户使用智能手机、平板电脑、计算机、便携式电话等的设备打开设定画面,将能够用于联动登记的一个或者多个候选设备或者候选传感器显示在设定画面。在用户从设定画面中显示的候选设备或者候选传感器中,选择了第1设备时,在被选择的第1设备中显示能够检测的一个或者多个候选姿势。在用户从被显示在设定画面的一个或者多个候选姿势中选择了第1姿势时,能够联动的一个或者多个候选装置被显示在设定画面。在用户从被显示的多个候选装置中选择了装置#A时,在装置#A中被允许利用的一个或者多个候选工作被显示在设定画面。在用户从多个候选工作中选择了第1工作时,是否作为使第1姿势与第1工作联动的姿势和设备工作的组合来决定的确认画面被显示,通过用户进行确认的输入,来进行登记。
通过上述的构成,例如由被配置在住宅内等对象空间中的能够联动的任意的设备或者传感器检测到的姿势、与能够联动的任意的设备的工作的联动登记成为可能。这样,例如即使针对不具备姿势的检测功能的设备,也能够进行基于姿势的工作的控制,因此,能够期待设备的操作性的提高等。
另外,利用了上述的设定画面的姿势与设备以及设备工作的组合的联动登记方法只是多个联动登记方法的一个例子,本公开中的姿势与设备以及设备工作的组合的联动登记方法并非受上述的方法所限。
例如,可以取代选择了联动的设备或者传感器后,被选择的设备或者传感器能够检测的姿势候选被显示的方式,而是针对多个设备或者传感器,按照设备或者传感器能够检测的一个或者多个姿势候选可以同时被显示在设定画面。同样,可以取代选择了联动的设备后,被选择的设备的工作候选被显示的方式,而是针对多个设备,按照每个设备而能够选择的多个工作被同时显示在设定画面。通过上述的构成,用户仅通过一次的输入操作就能够选择联动的设备与工作的组合,因此,操作变得简单,从而能够提高操作性。并且,也可以不是在选择了姿势后,选择设备的工作,而可以是在选择了设备的工作后,选择姿势。在这种情况下,在选择了设备的工作后,能够联动的多个候选姿势被显示在设定画面。
并且,在将多个姿势的组合与设备工作建立对应的情况下,也可以对由彼此不同的多个设备或者传感器能够检测的姿势进行组合来利用。
作为对能够由多个设备或者传感器检测的姿势进行了组合的联动工作的一个例子,对在图50或者图55中,AP(访问接入点)N701、音响N702各自具备感测功能的情况进行说明。
AP(访问接入点)N701从由AP(访问接入点)N701所具备的第1传感器获得的第1感测数据的时间的变化中,检测事前登记的第1变化模式。在此,第1变化模式是用户进行了第1姿势的情况下被检测的模式。另外,在此,虽然说明了由AP(访问接入点)N701执行从第1感测数据检测第1变化模式的处理,检测处理例如也可以由图50的云服务器N720、图55的服务器Q101感测数据或者其他的设备等其他的设备来执行。在这种情况下,AP(访问接入点)N701将第1感测数据,经由网络传送到其他的设备,在该其他的设备中利用第1感测数据,进行包括第1变化模式的一个或者多个变化模式的检测处理。
音响N702从由音响N702所具备的第2传感器获得的第2感测数据的时间的变化中,检测事前登记的第2变化模式。在此,第2变化模式是用户进行了第1姿势的情况下被检测的模式。另外,在此,虽然说明了由音响N702执行从第2感测数据检测第2变化模式的处理,检测处理例如也可以由AP(访问接入点)N701、图50的云服务器N720、图55的服务器Q101感测数据或者其他的设备等其他的设备来执行。在这种情况下,音响N702将第1感测数据经由网络传送给其他的设备,在该其他的设备中利用第1感测数据,进行包括第2变化模式的一个或者多个变化模式的检测处理。另外,在进行检测处理的其他的设备中,考虑到安全等,可以限制为AP(访问接入点)N701这种能够直接进行无线通信的设备、直接以有线的通信电缆来连接的设备。
在此,对将彼此不同的多个设备或者传感器进行组合,来用于姿势检测的第1例进行说明。在第1例中,在进行联动功能登记时,在从第1感测数据的第1变化模式的检测、从第2感测数据的第2变化模式的检测这双方发生了的情况下,例如以进行第4工作来建立对应后登记,第4工作例如是指,“提高从音响N702所搭载的例如扬声器输出的声音的音量、或者、增大以从音响输出端子输出的音声信号传输的音声成分的振幅”、或者“降低从音响N702所搭载的例如扬声器输出的声音的音量、或者减小以从音响输出端子输出的音声信号传输的音声成分的振幅”等。即,在从从第1感测数据检测到第1变化模式、从第2感测数据检测到第2变化模式的情况下,由音响N702进行第4工作。
作为上述的构成中的联动工作的一个例子,对用户进行了与第1姿势不同的第2姿势的情况进行说明。在用户进行第2姿势时,从AP(访问接入点)N701的位置,获得与第1姿势类似的感测结果,从音响N702的位置,获得不与第1姿势类似的感测结果。在这种情况下,在仅利用了第1感测数据的判断中,第1变化模式被检测,在音响N702,第4工作被执行。这是对于进行了第2姿势的用户来说,并非是有意识进行的动作。另外,在除了第1感测数据以外,还利用第2感测数据进行了判断的情况下,从第2感测数据中不会检测到第2变化模式,因此,第4工作不被执行。即,通过利用具有上述的多个的感测功能的设备或者传感器,进行用户的姿势的判断,将判断结果与任意的设备的工作进行联动的构成,则能够期待抑制用户不需要的设备工作的发生。
接着,对将彼此不同的多个设备或者传感器进行组合,用于姿势检测的第2例进行说明。在第2例中,在进行联动功能登记时,第1变化模式从第1感测数据被检测,且第2变化模式没有从第2感测数据被检测到的情况下,以执行第4工作的方式建立对应来登记。即,在从第1感测数据检测到第1变化模式、从第2感测数据没有检测到第2变化模式的情况下,在音响N702,第4工作被执行。
作为上述的构成中的联动工作的一个例子,对用户在能够从与音响N702近的位置等的AP(访问接入点)N701进行感测,且从音响N702也能够进行感测的位置,进行了第1姿势的情况进行说明。在这种情况下,由于从第1感测数据检测到第1变化模式、从第2感测数据检测到第2变化模式,因此,音响N702不执行第4工作。接着,作为上述的构成中的联动工作的其他的例子,对用户在远离音响N702的位置等的AP(访问接入点)N701能够进行感测、且从音响N702不能进行感测的位置(即音响N702的感测区域外的位置),进行了第1姿势的情况进行说明。在这种情况下,由于从第1感测数据检测第1变化模式,从第2感测数据没有检测到第2变化模式,因此,音响N702不执行第4工作。
在上述说明中,对在从AP(访问接入点)N701的感测结果,检测到第1姿势、从音响N702的感测结果没有检测到第1姿势的情况下,音响N702进行第4工作的情况的例子进行了说明,利用本公开中的具有多个的感测功能的设备或者传感器,来判断用户是否做出姿势,并且将判断结果与任意的设备的工作进行联动的构成,并非受这些例子所限。
例如,音响N702所执行的感测不进行姿势的检测,而可以是判断周围是否有物体存在的感测。在这种情况下,取代“从音响N702的感测结果没有检测到第1姿势”这一条件,例如采用“从音响N702的感测结果没有检测到周围有物体存在”这一条件。在此,“从音响N702的感测结果没有检测到周围有物体的存在”是指,例如在实施方式8或者9中说明的初期感测,检测到的物体以外的物体没有被检测到的状态、与在初期感测时得到的第2感测数据类似的第2感测数据被获得的状态。
并且,在从AP(访问接入点)N701的感测结果检测到第1姿势、从音响N702的感测结果检测到第1姿势的情况下,音响N702执行与第4工作不同的第5工作,在从AP(访问接入点)N701的感测结果检测到第1姿势、从音响N702的感测结果没有检测到第1姿势的情况下,音响N702可以执行第4工作。
如以上说明所示,通过利用具有多个感测功能的设备或者传感器,来进行用户是否做出了姿势的判断,将判断结果与任意的设备的工作进行联动的构成,即使用户做出了相同的姿势,也能够按照用户的位置或朝向、姿勢等,来对是否进行联动工作进行切换,并且能够根据用户的位置或朝向、姿勢等,来对执行的设备工作进行切换。这样,能够提高用户对设备的操作性,从而能够期待抑制用户不需要的设备工作的发生。
并且,对于上述的以多个设备或者传感器的感测数据能够检测的事项和设备工作的联动登记方法,也可以利用图形用户界面(GUI)来提供。在采用了GUI的情况下,例如,与以多个设备或者传感器的感测数据能够检测的事项的候选的每一个对应的图符或方框、与多个设备的工作候选的每一个对应的图符或方框等被显示在画面上,这些图符或方框可以通过触控面板或鼠标等的操作而被移动并连接,通过以线等来对图符或方框之间进行连接,来描述联动处理,并能够对描述的联动处理进行登记。
在上述的设定画面以及联动登记方法中说明的例子是,例如进行被指定的姿势是否被检测到、或者被指定的事项是否利用感测数据被检测到这种条件判断,执行在检测到的情况下、或者没有检测到的情况下被指定的设备工作的联动处理,提供对这种联动处理进行描述并登记的功能。不过,本公开能够登记的联动处理并非受此所限。例如,上述的设定画面以及联动登记方法可以提供如下的功能,即为了描述复杂的联动处理,例如使用逻辑和、逻辑积、异或、否定等任意的逻辑运算符,来描述多个姿势间、或姿势与设备工作间的关系性。并且,上述的设定画面以及联动登记方法也可以提供如下的功能,即为了描述复杂的联动处理,例如使用逻辑和、逻辑积、异或、否定等任意的逻辑运算符,来描述多个事项间、或事项与设备工作间的关系性。并且,除了基于感测数据的条件判断以外,例如可以对基于时刻信息的条件判断、或基于与网络连接的设备的数量、或设备所具备的功能等的条件判断等任意的条件判断进行组合来利用。
并且,在本公开中,用于感测的传感器并非受限于采用了电波的感测。例如,可以是采用了LIDAR(Light Detection and Ranging)等光的感测。并且,在对多个传感器进行组合来利用的情况下,组合的传感器也可以是任意的。例如,可以将作为传感器而使用相机而拍摄的映像自身、执行用于提取针对该映像的特征量的图像处理或者模式识别等图像处理而得到的结果,作为感测数据来利用。并且,例如可以将用户所装配的可配戴的终端所具备的例如麦克风、位置传感器、加速度传感器、肌肉电位传感器、温度传感器等任意的传感器所得到数据,作为感测数据来利用。
并且,在上述的说明中对如下的情况作为例子进行了说明,即对利用多个感测数据而检测到的事项进行组合的联动工作的登记,由用户利用设定画面或GUI等而被登记的情况,不过,也可以采用其他的方法来登记。例如,在向实施方式7所记载的设备的姿势的登记处理中,可以自动地被制作。例如,在实施方式8或者9所说明的系统中,在用户指示开始姿势的登记时,在用户做出姿势的期间中,同一设备或者彼此不同的多个设备所具备的第1传感器和第2传感器分别进行感测数据的获得,对由各自的传感器得到的感测数据的时间的变化的模式进行存储。在此之后,对登记的姿势是否被执行的判断,使用由第1传感器得到的感测数据和由第2传感器获得的感测数据来进行。通过上述构成,能够得到的效果是,能够简化对利用多个感测数据而检测到的事项进行了组合的联动工作的登记。
另外,在采用利用电波来进行感测的传感器的情况下,在上述的处理中所使用的感测数据例如可以是示出以点云网格等任意的形式表现的三维的位置或形状的数据,针对接收信号进行任意的信号处理而得到的数据,例如根据导频码元或基准信号而被估计的传输路径特性、基準信号与接收信号的相关值或者OFDM信号中的子载波间的相位差等数据。并且,感测数据例如可以是提取了如下感测结果的差分的数据,这些感测结果是指,在上述的初期感测等没有移动的对象物的状态下得到的感测结果、为了对象物的检测等而进行的通常的感测所得到的感测结果。
另外,在上述各实施方式中,各构成要素可以由专用的硬件来构成,也可以通过执行适于各构成要素的软件程序来实现。各构成要素可以通过CPU或者处理器等程序执行部,读出被记录在硬盘或者半导体存储器等记录介质的软件程序,并执行来实现。在此,实现上述各实施方式的发送装置等的软件可以是如下的程序。
即该程序使计算机执行如下的发送方法,该发送方法包括:帧构成步骤,构成基于OFDMA方式且包括多个时间频率资源的帧,所述时间频率资源是由时间以及频率规定的资源,所述OFDMA是指,Orthogonal Frequency-Division Multiple Access即正交频分多址;以及发送步骤,将在所述帧构成步骤构成的所述帧,通过电波发送,在所述帧构成步骤中,将包括通信用资源和感测用资源的帧作为所述帧来构成,所述通信用资源是配置包括通信数据的码元的时间频率资源,所述感测用资源是配置用于通过电波的感测的码元的时间频率资源,所述电波是在所述发送步骤发送的电波。
以上基于实施方式对一个或者多个形态所涉及的发送装置等进行了说明,基于本公开而能够掌握的发明并非受这些实施方式所限定。在不脱离本公开的主旨的范围内,将本领域技术人员所能够想到的各种变形执行于本实施方式而得到的形态、对不同的实施方式的构成要素进行组合而构筑的形态均包括在一个或者多个形态的范围内。
本公开包括例如能够适用于无线通信装置、有线通信装置以及具备这些装置的终端或设备的发明。
符号说明
A3、X101、X201、X301、Y101 发送装置
A11、N703、N731 设备
A111、A121、N151、Z206 控制部
A112 驱动部
A113 传感器
A114 通信部
A12 检测装置
A122、A34 处理部
A123 图像传感器
A124 应用存储部
A125、N104、X204、Z202 感测部
A21、N701、Y1104、Z100 AP
A22、N402、N710 网络
A23、N730 基站
A24、X100、X200、X300、Y1101 装置
A31 帧构成部
A32 发送部
A33 接收部
F81、F82、F83、F91、F92、F93、F94、F95、F101、F102、F103、F104、F105、F111、F112、F113、F114、F121、F122、F123、F124、F131、F132、F133、F134、F141、F142、F143、F144、F151、F152、F153、F154、F161、F162、F163、F164、F171、F172、F173、F174、F181、F182、F191、F192、F201、F202、F203、F211、F212、F213 频带
N100、X109、X309、Y100 控制信号
N102、Z201 收发部
N103、Y1302 调制信号
N106、Z204 发送用信号选择部
N110、Z203 收发天线部
N112、Z205 接收用信号选择部
N720 服务器
X102_1、X102_N、X202_1、X202_N、Y102 发送信号
X103_1、X103_N、X104_1、X104_N、Y103_1、Y103_M、Y104_1、Y104_N 天线
X105_1、X105_N、X205_1、X205_N 接收信号
X106、X206、X306、Y106 接收装置
X107、X207 估计信号
X108、X208、X308 估计部
X210 发送数据
Y1002 第4装置
Y105_1、Y105_N 接收信号群
Y107 物体估计信息
Y108 第1处理部
Y109 物体估计信号
Y110 透镜控制部
Y1102 物体
Y1103、Z101_1、Z101_2、Z101_3 终端
Y111 区域信息
Y112 选择部
Y113 显示部
Y114 区域信号
Y115 选择区域信号
Y116 第2处理部
Y117 估计距离信息
Y118 工作控制信号
Y119 透镜部
Y120、Y122 物体信号
Y1201 通信用基准码元
Y1202 通信用控制信息码元
Y1203 通信用数据码元
Y121 快门部
Y123 传感器部
Y124 图像信息
Y125 存储部
Y200 附带快门功能的传感器部
Y400 通信装置
Y401 数据库
Y402 查询数据部
Y403 数据群
Y404 识别信息
Y701 第1装置
Y702 第2装置
Y703 第1接口
Y704 第2接口
Y801 第1’装置
Y802 第3装置
Y803 第3接口
Y804 第4接口
Y901 第1”装置

Claims (9)

1.一种发送装置,
所述发送装置具备:
帧构成部,构成基于OFDMA方式且包括多个时间频率资源的帧,所述时间频率资源是由时间以及频率规定的资源,所述OFDMA是指,Orthogonal Frequency-Division MultipleAccess即正交频分多址;以及
发送部,将由所述帧构成部构成的所述帧,通过电波发送,
所述帧构成部,将包括通信用资源和感测用资源的帧作为所述帧来构成,所述通信用资源是配置包括通信数据的码元的时间频率资源,所述感测用资源是配置用于通过电波的感测的码元的时间频率资源,所述电波是由所述发送部发送的电波。
2.如权利要求1所述的发送装置,
所述帧至少包括时间不同而频率相同的2个感测用资源,且所述2个感测用资源在时间方向上以夹着防护区间的方式而相邻配置。
3.如权利要求2所述的发送装置,
所述帧包括2个防护区间,所述2个防护区间的时间长度不同,且频率不同。
4.如权利要求1至3的任一项所述的发送装置,
所述帧至少包括频率不同且时间长度不同的2个感测用资源。
5.如权利要求1至4的任一项所述的发送装置,
所述发送装置进一步具备:
接收部,接收由所述发送部发送的所述电波的反射波;以及
处理部,通过对所述接收部接收的所述反射波进行解析,来执行感测处理。
6.如权利要求5所述的发送装置,
所述感测处理至少包括,通过对所述接收部接收的所述反射波进行解析,从而对物体的位置进行检测的处理、对物体的有无进行检测的处理、或对物体的外形进行检测的处理。
7.如权利要求5或6所述的发送装置,
所述发送装置进一步包括控制部,该控制部根据由所述处理部进行的所述感测处理的结果,来对电气设备的驱动进行控制。
8.一种控制系统,具备:
权利要求7所述的发送装置;以及
由所述发送装置的所述控制部进行的控制来驱动的所述电气设备。
9.一种发送方法,
所述发送方法包括:
帧构成步骤,构成基于OFDMA方式且包括多个时间频率资源的帧,所述时间频率资源是由时间以及频率规定的资源,所述OFDMA是指,Orthogonal Frequency-Division MultipleAccess即正交频分多址;以及
发送步骤,将在所述帧构成步骤构成的所述帧,通过电波发送,
在所述帧构成步骤中,将包括通信用资源和感测用资源的帧作为所述帧来构成,所述通信用资源是配置包括通信数据的码元的时间频率资源,所述感测用资源是配置用于通过电波的感测的码元的时间频率资源,所述电波是在所述发送步骤发送的电波。
CN201980042518.2A 2018-12-13 2019-12-12 发送装置、控制系统、以及发送方法 Pending CN112334787A (zh)

Applications Claiming Priority (7)

Application Number Priority Date Filing Date Title
US201862779096P 2018-12-13 2018-12-13
US62/779,096 2018-12-13
US201962895673P 2019-09-04 2019-09-04
US62/895,673 2019-09-04
JP2019204317 2019-11-11
JP2019-204317 2019-11-11
PCT/JP2019/048833 WO2020122220A1 (ja) 2018-12-13 2019-12-12 送信装置、制御システム、および送信方法

Publications (1)

Publication Number Publication Date
CN112334787A true CN112334787A (zh) 2021-02-05

Family

ID=71075740

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201980042518.2A Pending CN112334787A (zh) 2018-12-13 2019-12-12 发送装置、控制系统、以及发送方法

Country Status (5)

Country Link
US (1) US20210149016A1 (zh)
EP (1) EP3896481A4 (zh)
JP (3) JP7499185B2 (zh)
CN (1) CN112334787A (zh)
WO (1) WO2020122220A1 (zh)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2022199647A1 (zh) * 2021-03-25 2022-09-29 华为技术有限公司 通信方法以及通信装置

Families Citing this family (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2021044075A1 (en) * 2019-09-04 2021-03-11 Nokia Technologies Oy Channel sensing techniques for wireless networks
JPWO2021215080A1 (zh) * 2020-04-24 2021-10-28
US11527299B2 (en) * 2020-06-03 2022-12-13 Samsung Electronics Co., Ltd. Polar neural network decoder for memory devices
US20220022056A1 (en) * 2020-07-14 2022-01-20 Qualcomm Incorporated Using base stations for air-interface-based environment sensing without user equipment assistance
KR20230045597A (ko) * 2020-08-07 2023-04-04 퀄컴 인코포레이티드 디바이스-탑재 타겟 오브젝트에 의해 보조되는 에어-인터페이스-기반 환경 감지
CN114584185A (zh) * 2020-12-01 2022-06-03 华为技术有限公司 通信方法、设备及系统
US11889377B2 (en) * 2021-09-01 2024-01-30 Qualcomm Incorporated Wireless sensing bandwidth aggregation
WO2023184483A1 (en) * 2022-04-01 2023-10-05 Zte Corporation Wireless communication and sensing method and device thereof
GB202207168D0 (en) * 2022-05-16 2022-06-29 Novelda As Wireless communication
US20240125918A1 (en) * 2022-10-12 2024-04-18 Nxp B.V. Systems and methods for joint communication and sensing

Family Cites Families (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US9055573B2 (en) * 2010-09-01 2015-06-09 Lg Electronics Inc. Method and device for transmitting control information in a wireless communication system
CN104956719A (zh) * 2013-01-29 2015-09-30 交互数字专利控股公司 调度分频间隙以启用子带感测
WO2014126514A1 (en) * 2013-02-15 2014-08-21 Telefonaktiebolaget L M Ericsson (Publ) A wireless device, a network node and methods therein for transmitting control information in a d2d communication
US20150063321A1 (en) * 2013-09-04 2015-03-05 Qualcomm Incorporated Radar detection
US10598763B2 (en) * 2016-07-27 2020-03-24 Raytheon Company System and method for concurrent communication of different signal types by a radar
EP3316534A1 (en) 2016-10-27 2018-05-02 Fraunhofer Gesellschaft zur Förderung der Angewand Channel estimation of frequency sub bands
US10299158B2 (en) * 2016-12-02 2019-05-21 Qualcomm Incorporated Vehicle-to-vehicle (V2V) sensor sharing
EP3339893A1 (en) 2016-12-22 2018-06-27 Airbus Defence and Space GmbH Multiple input multiple output, mimo, radar system
US11057170B2 (en) * 2018-07-27 2021-07-06 Raytheon Company Multidimensional shared spectrum access

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2022199647A1 (zh) * 2021-03-25 2022-09-29 华为技术有限公司 通信方法以及通信装置

Also Published As

Publication number Publication date
EP3896481A1 (en) 2021-10-20
WO2020122220A1 (ja) 2020-06-18
US20210149016A1 (en) 2021-05-20
JP2024056745A (ja) 2024-04-23
JP2024050713A (ja) 2024-04-10
JPWO2020122220A1 (ja) 2021-10-21
EP3896481A4 (en) 2022-03-02
JP7499185B2 (ja) 2024-06-13

Similar Documents

Publication Publication Date Title
CN112334787A (zh) 发送装置、控制系统、以及发送方法
US20160238692A1 (en) Accurate geographic tracking of mobile devices
WO2021215080A1 (ja) 通信装置及びセンシング方法
US11132004B2 (en) Spatial diveristy for relative position tracking
US20140192927A1 (en) Method and apparatus for selecting multi-antenna transmission mode in electronic device
CA2980496C (en) Tracking system and method for tracking a carrier of a mobile communication unit
KR101680667B1 (ko) 이동 단말기 및 이동 단말기의 제어방법
KR20160112537A (ko) 차량, 및 차량의 제어방법
US20220317275A1 (en) Methods and systems for detecting and passively monitoring communications of an unmanned aerial vehicle
CN110401932A (zh) 一种无人机群协同感知系统和方法
JP7405101B2 (ja) 通信装置、情報処理装置、及び情報処理方法
US20220183010A1 (en) Communication apparatus and communication method
US9188668B2 (en) Electromagnetic reflection profiles
KR101404689B1 (ko) 선박 감시시스템 및 그의 방법
US20200326402A1 (en) An apparatus and associated methods
KR20160011419A (ko) 이동 단말기, 이동 단말기의 제어방법, 그리고, 제어시스템과 그 제어방법
KR101549027B1 (ko) 이동 단말기 및 이동 단말기의 제어방법
CN111212312A (zh) 基于遥控器实现设备控制的方法、装置及遥控系统
US20150002395A1 (en) Method of Interaction Between a Digital Object Representing at Least One Real or Virtual Object Located in a Distant Geographic Perimeter and a Local Pointing Device
CN114556130A (zh) 通信装置及通信方法
CN114513771A (zh) IoT设备的控制方法、装置、控制系统及终端设备
Zhang et al. Integrated On-site Localization and Optical Camera Communication for Drones
US20240214161A1 (en) Wireless device and sensing method
EP4369671A1 (en) Wireless device and sensing method
WO2022101997A1 (ja) 状態推定システム、状態推定方法、状態推定装置、および、状態推定プログラム

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination