CN117044225A - 登记系统、空调系统和登记程序 - Google Patents

登记系统、空调系统和登记程序 Download PDF

Info

Publication number
CN117044225A
CN117044225A CN202280023032.6A CN202280023032A CN117044225A CN 117044225 A CN117044225 A CN 117044225A CN 202280023032 A CN202280023032 A CN 202280023032A CN 117044225 A CN117044225 A CN 117044225A
Authority
CN
China
Prior art keywords
user terminal
specific range
unit
real space
information
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN202280023032.6A
Other languages
English (en)
Inventor
魏亚光
村井雄一
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Daikin Industries Ltd
Original Assignee
Daikin Industries Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Daikin Industries Ltd filed Critical Daikin Industries Ltd
Publication of CN117044225A publication Critical patent/CN117044225A/zh
Pending legal-status Critical Current

Links

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0484Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range
    • G06F3/04847Interaction techniques to control parameter settings, e.g. interaction with sliders or dials
    • FMECHANICAL ENGINEERING; LIGHTING; HEATING; WEAPONS; BLASTING
    • F24HEATING; RANGES; VENTILATING
    • F24FAIR-CONDITIONING; AIR-HUMIDIFICATION; VENTILATION; USE OF AIR CURRENTS FOR SCREENING
    • F24F11/00Control or safety arrangements
    • F24F11/50Control or safety arrangements characterised by user interfaces or communication
    • FMECHANICAL ENGINEERING; LIGHTING; HEATING; WEAPONS; BLASTING
    • F24HEATING; RANGES; VENTILATING
    • F24FAIR-CONDITIONING; AIR-HUMIDIFICATION; VENTILATION; USE OF AIR CURRENTS FOR SCREENING
    • F24F11/00Control or safety arrangements
    • F24F11/50Control or safety arrangements characterised by user interfaces or communication
    • F24F11/52Indication arrangements, e.g. displays
    • FMECHANICAL ENGINEERING; LIGHTING; HEATING; WEAPONS; BLASTING
    • F24HEATING; RANGES; VENTILATING
    • F24FAIR-CONDITIONING; AIR-HUMIDIFICATION; VENTILATION; USE OF AIR CURRENTS FOR SCREENING
    • F24F11/00Control or safety arrangements
    • F24F11/50Control or safety arrangements characterised by user interfaces or communication
    • F24F11/52Indication arrangements, e.g. displays
    • F24F11/526Indication arrangements, e.g. displays giving audible indications
    • FMECHANICAL ENGINEERING; LIGHTING; HEATING; WEAPONS; BLASTING
    • F24HEATING; RANGES; VENTILATING
    • F24FAIR-CONDITIONING; AIR-HUMIDIFICATION; VENTILATION; USE OF AIR CURRENTS FOR SCREENING
    • F24F11/00Control or safety arrangements
    • F24F11/50Control or safety arrangements characterised by user interfaces or communication
    • F24F11/54Control or safety arrangements characterised by user interfaces or communication using one central controller connected to several sub-controllers
    • FMECHANICAL ENGINEERING; LIGHTING; HEATING; WEAPONS; BLASTING
    • F24HEATING; RANGES; VENTILATING
    • F24FAIR-CONDITIONING; AIR-HUMIDIFICATION; VENTILATION; USE OF AIR CURRENTS FOR SCREENING
    • F24F11/00Control or safety arrangements
    • F24F11/50Control or safety arrangements characterised by user interfaces or communication
    • F24F11/56Remote control
    • FMECHANICAL ENGINEERING; LIGHTING; HEATING; WEAPONS; BLASTING
    • F24HEATING; RANGES; VENTILATING
    • F24FAIR-CONDITIONING; AIR-HUMIDIFICATION; VENTILATION; USE OF AIR CURRENTS FOR SCREENING
    • F24F11/00Control or safety arrangements
    • F24F11/62Control or safety arrangements characterised by the type of control or by internal processing, e.g. using fuzzy logic, adaptive control or estimation of values
    • F24F11/63Electronic processing
    • FMECHANICAL ENGINEERING; LIGHTING; HEATING; WEAPONS; BLASTING
    • F24HEATING; RANGES; VENTILATING
    • F24FAIR-CONDITIONING; AIR-HUMIDIFICATION; VENTILATION; USE OF AIR CURRENTS FOR SCREENING
    • F24F11/00Control or safety arrangements
    • F24F11/70Control systems characterised by their outputs; Constructional details thereof
    • F24F11/72Control systems characterised by their outputs; Constructional details thereof for controlling the supply of treated air, e.g. its pressure
    • F24F11/79Control systems characterised by their outputs; Constructional details thereof for controlling the supply of treated air, e.g. its pressure for controlling the direction of the supplied air
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F1/00Details not covered by groups G06F3/00 - G06F13/00 and G06F21/00
    • G06F1/16Constructional details or arrangements
    • G06F1/1613Constructional details or arrangements for portable computers
    • G06F1/1633Constructional details or arrangements of portable computers not specific to the type of enclosures covered by groups G06F1/1615 - G06F1/1626
    • G06F1/1684Constructional details or arrangements related to integrated I/O peripherals not covered by groups G06F1/1635 - G06F1/1675
    • G06F1/1686Constructional details or arrangements related to integrated I/O peripherals not covered by groups G06F1/1635 - G06F1/1675 the I/O peripheral being an integrated camera
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F1/00Details not covered by groups G06F3/00 - G06F13/00 and G06F21/00
    • G06F1/16Constructional details or arrangements
    • G06F1/1613Constructional details or arrangements for portable computers
    • G06F1/1633Constructional details or arrangements of portable computers not specific to the type of enclosures covered by groups G06F1/1615 - G06F1/1626
    • G06F1/1684Constructional details or arrangements related to integrated I/O peripherals not covered by groups G06F1/1635 - G06F1/1675
    • G06F1/1694Constructional details or arrangements related to integrated I/O peripherals not covered by groups G06F1/1635 - G06F1/1675 the I/O peripheral being a single or a set of motion sensors for pointer control or gesture input obtained by sensing movements of the portable computer
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0481Interaction techniques based on graphical user interfaces [GUI] based on specific properties of the displayed interaction object or a metaphor-based environment, e.g. interaction with desktop elements like windows or icons, or assisted by a cursor's changing behaviour or appearance
    • G06F3/04815Interaction with a metaphor-based environment or interaction object displayed as three-dimensional, e.g. changing the user viewpoint with respect to the environment or object
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V20/00Scenes; Scene-specific elements
    • G06V20/50Context or environment of the image
    • G06V20/52Surveillance or monitoring of activities, e.g. for recognising suspicious objects
    • GPHYSICS
    • G08SIGNALLING
    • G08CTRANSMISSION SYSTEMS FOR MEASURED VALUES, CONTROL OR SIMILAR SIGNALS
    • G08C17/00Arrangements for transmitting signals characterised by the use of a wireless electrical link
    • G08C17/02Arrangements for transmitting signals characterised by the use of a wireless electrical link using a radio link
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04MTELEPHONIC COMMUNICATION
    • H04M1/00Substation equipment, e.g. for use by subscribers
    • H04M1/72Mobile telephones; Cordless telephones, i.e. devices for establishing wireless links to base stations without route selection
    • H04M1/724User interfaces specially adapted for cordless or mobile telephones
    • H04M1/72403User interfaces specially adapted for cordless or mobile telephones with means for local support of applications that increase the functionality
    • H04M1/72409User interfaces specially adapted for cordless or mobile telephones with means for local support of applications that increase the functionality by interfacing with external accessories
    • H04M1/72415User interfaces specially adapted for cordless or mobile telephones with means for local support of applications that increase the functionality by interfacing with external accessories for remote control of appliances
    • FMECHANICAL ENGINEERING; LIGHTING; HEATING; WEAPONS; BLASTING
    • F24HEATING; RANGES; VENTILATING
    • F24FAIR-CONDITIONING; AIR-HUMIDIFICATION; VENTILATION; USE OF AIR CURRENTS FOR SCREENING
    • F24F2120/00Control inputs relating to users or occupants
    • F24F2120/10Occupancy

Landscapes

  • Engineering & Computer Science (AREA)
  • General Engineering & Computer Science (AREA)
  • Human Computer Interaction (AREA)
  • Combustion & Propulsion (AREA)
  • Mechanical Engineering (AREA)
  • Chemical & Material Sciences (AREA)
  • Theoretical Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Signal Processing (AREA)
  • Computer Hardware Design (AREA)
  • Mathematical Physics (AREA)
  • Fuzzy Systems (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Multimedia (AREA)
  • User Interface Of Digital Computer (AREA)
  • Air Conditioning Control Device (AREA)
  • Position Input By Displaying (AREA)
  • Selective Calling Equipment (AREA)

Abstract

本发明提供一种对在真实空间中作为控制对象的特定范围进行登记的登记系统、空调系统和登记程序。登记系统具有控制部和存储部,所述控制部将基于用户终端在真实空间中的位置信息和针对所述用户终端的操作内容而决定的所述真实空间内的特定范围,登记在所述存储部中。

Description

登记系统、空调系统和登记程序
技术领域
本发明涉及一种登记系统、空调系统和登记程序。
背景技术
在如空调系统等那样提高真实空间的舒适性的系统中,例如有时对用户所在的特定范围进行与其他范围不同的空调控制。作为一例,在下述专利文献1等中公开了一种空气调节系统,其中,在真实空间中控制风量和风向,以使送风的空气不会吹到保持便携式发送机的用户所在的特定范围。
专利文献1:日本特开2017-211149号公报
发明内容
<本发明要解决的问题>
但是,在上述空调系统的情况下,存在下述问题:作为空调控制的控制对象的特定范围的大小和形状被预先登记,用户不能自由地改变。
本发明提供一种登记系统、空调系统和登记程序,用于在真实空间中登记作为控制对象的特定范围。
<用于解决问题的手段>
本发明的第1方面是一种登记系统,其具有控制部和存储部,其中,
所述控制部将基于用户终端在真实空间中的位置信息和对所述用户终端的操作内容而决定的所述真实空间内的特定范围,登记在所述存储部中。
根据本发明的第1方面,能够提供一种对在真实空间中作为控制对象的特定范围进行登记的登记系统。
此外,本发明的第2方面是根据第1方面所述的登记系统,其中,
所述控制部基于对所述用户终端进行了移动操作时的所述用户终端的位置信息的轨迹,决定所述真实空间内的特定范围,并登记在所述存储部中。
此外,本发明的第3方面是根据第1方面所述的登记系统,其中,
所述用户终端能够接受指示操作,
所述控制部将以所述用户终端接受指示操作时的所述用户终端的位置信息为基准的周边范围,决定为所述特定范围,并登记在所述存储部中。
此外,本发明的第4方面是根据第1方面所述的登记系统,其中,
所述用户终端能够接受指示操作,
所述控制部将以通过由所述用户终端接受指示操作而确定的对象物在所述真实空间中的位置信息为基准的周边范围,决定为所述真实空间内的特定范围,并登记在所述存储部中。
此外,本发明的第5方面是根据第4方面所述的登记系统,其中,
所述用户终端能够接受选择指示操作,
所述控制部将以通过由所述用户终端接受选择指示操作而确定的所述对象物的部位在所述真实空间中的位置信息为基准的周边范围,决定为所述真实空间内的特定范围,并登记在所述存储部中。
此外,本发明的第6方面是根据第1方面所述的登记系统,其中,
所述用户终端能够接受设定操作,
所述控制部基于所述用户终端接受的设定操作,决定所述特定范围的大小或形状。
此外,本发明的第7方面是根据第6方面所述的登记系统,其中,
所述用户终端能够接受设定操作,
所述控制部基于所述用户终端接受起点的设定操作时的所述用户终端的位置信息、或决定所述特定范围时作为基准的位置信息,以及所述用户终端接受终点的设定操作时的所述用户终端的位置信息,决定所述特定范围的大小。
此外,本发明的第8方面是根据第4方面所述的登记系统,其中,
所述用户终端具有:摄像装置;以及显示装置,显示由所述摄像装置拍摄的图像,
所述用户终端的控制部将所述图像中所包含的物体,确定为所述对象物。
此外,本发明的第9方面是根据第4方面所述的登记系统,其中,
所述用户终端具有:摄像装置;以及显示装置,将由所述摄像装置拍摄的图像显示在画面上,并且能够指示显示有图像的画面上的位置,
所述用户终端的控制部将所述图像中所包含的多个物体之中被指示的位置的物体,确定为所述对象物。
此外,本发明的第10方面是根据第1方面所述的登记系统,其中,
所述用户终端具有显示图像的显示装置,
所述用户终端的控制部在所述图像上重叠表示所述特定范围的图像,并显示在所述显示装置上。
此外,本发明的第11方面是根据第10方面所述的登记系统,其中,
所述用户终端具有摄像装置,
所述用户终端的控制部在由所述摄像装置拍摄的图像上,重叠基于所述用户终端在真实空间中的位置信息和姿势信息而生成的、表示所述特定范围的三维图像,进行显示。
此外,本发明的第12方面是根据第1方面所述的登记系统,其中,
所述用户终端具有输出装置,
在所述用户终端位于所述真实空间内的特定范围内的情况下,所述输出装置通知刺激。
此外,本发明的第13方面是根据第1方面所述的登记系统,其中,
所述用户终端具有输出装置,
所述输出装置根据所述真实空间内的特定范围与所述用户终端的位置关系,通知不同的刺激。
此外,本发明的第14方面是根据第4方面所述的登记系统,其中,
所述用户终端具有输出装置,
在所述用户终端位于所述真实空间内的特定范围内的情况下,所述输出装置根据所述特定范围是否是由所述对象物在所述真实空间的位置信息而决定的,通知不同的刺激,或者
在所述特定范围是由所述对象物在所述真实空间的位置信息而决定的情况下,根据上述对象物是否是人,通知不同的刺激。
此外,本发明的第15方面是根据第1方面所述的登记系统,其中,
所述用户终端具有传感器,
所述用户终端的控制部通过将所述真实空间的形状数据与由所述传感器测量出的数据进行对照,来计算所述用户终端在真实空间中的位置信息。
此外,本发明的第16方面是根据第15方面所述的登记系统,其中,
所述传感器是摄像装置,
所述用户终端的控制部通过将所述真实空间内的三维数据与基于由所述装置拍摄到的拍摄图像而生成的地图进行对照,来计算所述用户终端在真实空间中的位置信息。
此外,本发明的第17方面是根据第1方面所述的登记系统,其中,
所述控制部基于由安装在所述真实空间内的三维位置测量传感器测量出的数据,来计算所述用户终端在真实空间中的位置信息。
此外,本发明的第18方面是根据第17方面所述的登记系统,其中,
所述三维位置测量传感器由安装位置不同的多个摄像装置构成,
所述控制部通过使由所述多个摄像装置分别拍摄到的拍摄图像进行匹配,来计算所述用户终端在真实空间中的位置信息。
此外,本发明的第19方面是根据第1方面所述的登记系统,其中,
所述控制部通过将由所述用户终端具有的传感器测量出的数据与由安装在所述真实空间内的传感器测量出的数据进行对照,来计算所述用户终端在真实空间中的位置信息。
此外,本发明的第20方面是根据第1方面所述的登记系统,其中,
所述用户终端能够接受空调指示操作,
在所述用户终端接受了空调指示操作的情况下,所述控制部对所述存储部中所登记的所述真实空间内的特定范围,进行空调控制。
此外,本发明的第21方面是根据第20方面所述的登记系统,其中,
所述控制部通过使用安装在所述真实空间的多个空调装置,对所述存储部中所登记的所述真实空间内的特定范围与特定范围以外的非特定范围,执行不同的空调控制。
此外,根据本发明的第22方面的空调系统,
包括根据第1至第21方面中任一方面所述的登记系统。
根据本发明的第22方面,能够提供一种对在真实空间中作为控制对象的特定范围进行登记的空调系统。
此外,根据本发明的第23方面的登记程序,用于使控制部执行:
登记工序,将基于用户终端在真实空间中的位置信息和对所述用户终端的操作内容而决定的所述真实空间内的特定范围,登记在存储部中。
根据本发明的第23方面,能够提供一种对在真实空间中作为控制对象的特定范围进行登记的登记程序。
附图说明
图1是示出空调系统的系统结构的一例的图。
图2是示出应用了空调系统的真实空间的一例的图。
图3是示出控制装置的硬件结构和用户终端的硬件结构的一例的图。
图4是示出空调系统的运行模式和操作画面的一例的图。
图5是示出特定运行模式下的控制装置的功能结构的一例的图。
图6是示出特定范围输入部的功能结构和特定范围决定处理的具体例的第1图。
图7是示出特定范围输入部的功能结构和特定范围决定处理的具体例的第2图。
图8是示出特定范围输入部的功能结构和特定范围决定处理的具体例的第3图。
图9是示出特定范围输入部的功能结构和特定范围决定处理的具体例的第4图。
图10是示出特定范围输入部的功能结构和特定范围决定处理的具体例的第5图。
图11是示出特定范围输入部的功能结构和特定范围决定处理的具体例的第6图。
图12是示出特定范围输入部的功能结构和特定范围删除处理的具体例的图。
图13是示出特定范围输入部的功能结构和特定范围移动处理的具体例的图。
图14是示出特定范围输入部的功能结构和运行信息输入处理的具体例的图。
图15是示出特定范围输入部的功能结构和运行信息反转处理的具体例的图。
图16是示出特定范围输出部的功能结构和特定范围输出处理的具体例的第1图。
图17是示出特定运行模式下的特定范围登记处理的流程的第1流程图。
图18是示出特定运行模式下的特定范围登记处理的流程的第2流程图。
图19是示出基于空调系统的空调控制的一例的图。
图20是示出特定运行模式下的控制装置和用户终端的功能结构的一例的图。
图21是示出发送部和特定范围输出部的功能结构和特定范围显示处理的具体例的图。
图22是示出特定范围输出部的功能结构和特定范围输出处理的具体例的第2图。
图23是示出表示用户终端在真实空间中的位置的坐标信息的计算例的图。
图24是示出用户终端的功能结构的一例的图。
图25是示出特定范围输入部的功能结构的一例的图。
图26是示出中心位置决定处理的具体例的第1图。
图27是示出中心位置决定处理的具体例的第2图。
图28是示出中心位置决定处理的具体例的第3图。
图29是示出中心位置决定处理的具体例的第4图。
具体实施方式
以下,参照附图对各实施方式进行说明。注意,在本说明书和附图中,对于具有实质上相同的功能结构的结构要素标注相同的附图标记,从而省略重复的说明。
[第1实施方式]
<空调系统的系统结构>
首先,对第1实施方式的空调系统的系统结构进行说明。图1是示出空调系统的系统结构的一例的图。
如图1所示,空调系统100具有空调装置110、摄像装置120、显示装置130和用户终端140。空调装置110和用户终端140经由无线通信连接。
空调装置110例如包括家用空调装置的室内机111、商用空调装置的室内机112a、边缘装置112b(控制装置)和操作面板112c等。
室内机111进行真实空间的空调控制。具体而言,室内机111中,基于:
·从用户终端140经由无线通信发送的各种指示和各种信息、
·从摄像装置120发送的拍摄图像(例如,RGB图像)、
·由室内机111具有的传感器测量的数据,
内置的控制装置动作,进行真实空间的空调控制。注意,室内机111也可以内置摄像装置120。此外,室内机111将通过内置的控制装置动作而生成的各种信息,经由无线通信发送到用户终端140或者发送到显示装置130。
同样,室内机112a进行真实空间的空调控制。具体而言,室内机112a中,基于:
·从操作面板112c发送的、或者从用户终端140经由无线通信发送的各种指示和各种信息、
·从摄像装置120发送的拍摄图像、
·由室内机112a具有的传感器测量的数据,
边缘装置112b(控制装置)动作,进行真实空间的空调控制。
此外,室内机112a将通过边缘装置112b动作而生成的各种信息,经由无线通信发送到用户终端140或者发送到显示装置130。注意,操作面板112c也可以作为显示装置130发挥功能。
在第1实施方式中,
·内置于室内机111中的控制装置、以及
·与室内机112a连接的边缘装置112b
能够对真实空间内的特定范围进行与非特定范围(特定范围以外的范围)不同的空调控制。
摄像装置120例如包括室内的防盗摄像机121、监视摄像机122等。防盗摄像机121、监视摄像机122等对设置有家庭用空调装置的室内机111的真实空间内、设置有业务用空调装置的室内机112a的真实空间内进行拍摄,并将拍摄图像发送到空调装置110。
显示装置130例如包括监视器131等。监视器131等设置在设置有家庭用空调装置的室内机111的真实空间内、或设置有业务用空调装置的室内机112a的真实空间内。此外,监视器131等显示在内置于室内机111中的控制装置或与室内机112a连接的边缘装置112b中生成的显示图像。
用户终端140例如包括智能手机141和家庭用空调装置的遥控器142、可穿戴设备(未图示)等。智能手机141和遥控器142、可穿戴设备(未图示)等由真实空间内的用户保持(或安装),将由用户输入的各种指示和各种信息发送到空调装置110。由此,用户能够经由用户终端140在真实空间中登记特定范围。
此外,智能手机141和遥控器142、可穿戴设备(未图示)等基于从空调装置110发送的各种信息,将所登记的特定范围通知给用户。由此,用户能够经由用户终端140掌握在真实空间中哪个范围被登记为特定范围。
<真实空间的具体例>
接着,对应用了空调系统100的真实空间的具体例进行说明。图2是示出应用了空调系统的真实空间的一例的图。
在图1中,真实空间210是用户211自己的房间。应用于真实空间210的空调系统100具有内置有摄像装置120的室内机111和智能手机141。注意,室内机111的控制装置(未图示)通过基于坐标轴212的坐标信息来识别真实空间210内的各位置。
另一方面,真实空间220是用户221、222的办公室。应用于真实空间220的空调系统100具有室内机112a、边缘装置112b(未图示)、操作面板112c、防盗摄像机121、监视器131和智能手机141。注意,边缘装置112b(未图示)通过基于坐标轴223的坐标信息来识别真实空间220内的各位置。
<控制装置和用户终端的硬件结构>
接着,对内置于空调装置110的室内机111中的控制装置或与空调装置110的室内机112a连接的边缘装置112b(控制装置)的硬件结构、以及用户终端140的硬件结构,使用图3进行说明。
图3是示出控制装置的硬件结构和用户终端的硬件结构的一例的图。
(1)控制装置的硬件结构
其中,图3的3a示出空调装置110的控制装置的硬件结构的一例。如图3的3a所示,空调装置110的控制装置具有处理器301、存储器302、辅助存储装置303。此外,空调装置110的控制装置具有I/F(Interface:接口)装置304、通信装置305。注意,空调装置110的控制装置的各硬件经由总线306相互连接。
处理器301具有CPU(Central Processing Unit:中央处理部)等各种运算装置。处理器301将各种程序(例如,后述的登记程序等)读取到存储器302上并执行。
存储器302包括ROM(Read Only Memory:只读存储器)和RAM(Random AccessMemory:随机存取存储器)等主存储设备。处理器301和存储器302形成所谓的计算机(作为硬件的“控制部”),通过由处理器301执行在存储器302上读取的各种程序,空调装置110的控制装置实现各种功能。
辅助存储装置303是存储部的一例,存储各种程序、以及各种程序由处理器301执行时使用的各种数据。
I/F装置304是连接空调装置110的控制装置和其他装置的连接装置。在本实施方式中,其他装置包括摄像装置120、显示装置130。此外,在本实施方式中,其他装置包括电波收发装置310,其是空调装置110的室内机111所具有的传感器或室内机112a所具有的传感器的一例。电波收发装置310例如是TOF方式的深度传感器(三维位置测量传感器的一例),其通过利用激光对真实空间内进行扫描来获取电波信息(激光的反射信号)。通过使用由电波收发装置310获取的、真实空间210或220内的任意方向的电波信息,能够计算出表示真实空间210或220内的多个物体的位置的坐标信息(所谓的“深度地图”)。
通信装置305是在空调装置110的控制装置和用户终端140之间收发信息的通信装置。
(2)用户终端的硬件结构
另一方面,图3的3b示出用户终端140的硬件结构的一例。如图3的3b所示,用户终端140具有处理器321、存储器322、辅助存储装置323、通信装置324、操作装置325、显示装置326。此外,用户终端140具有摄像装置327、加速度传感器328、声音输入装置329、声音输出装置330、振动装置331。注意,用户终端140的各硬件经由总线332相互连接。
处理器321具有CPU(Central Processing Unit:中央处理部)等各种运算装置。处理器321将各种程序(例如,后述的空调操作程序等)读取到存储器322上并执行。
存储器322包括ROM(Read Only Memory:只读存储器)和RAM(Random AccessMemory:随机存取存储器)等主存储设备。处理器321和存储器322形成所谓的计算机(作为硬件的“控制部”),通过由处理器321执行在存储器322上读取的各种程序,用户终端140实现各种功能。
辅助存储装置323存储各种程序、以及各种程序由处理器321执行时使用的各种数据。
通信装置324是在用户终端140和空调装置110的控制装置之间收发信息的通信装置。
操作装置325接受来自用户211、221、222等对用户终端140的各种指示。显示装置326显示基于从空调装置110的控制装置发送的各种信息的显示图像。
摄像装置327例如拍摄真实空间210、220。加速度传感器328测量用户终端140在3轴方向上的加速度。声音输入装置329输入用户211、221、222等的声音。声音输出装置330例如输出基于从空调装置110的控制装置发送的各种信息的声音。振动装置331例如输出基于从空调装置110的控制装置发送的各种信息的振动。
<运行模式和操作画面>
接着,对在空调系统100工作时通过在用户终端执行上述空调操作程序而实现的运行模式、以及显示在用户终端140上的操作画面进行说明。图4是示出空调系统的运行模式和操作画面的一例的图。
其中,图4的4a示出空调系统100工作时的运行模式。如图4的4a所示,在空调系统100中,工作中转变为“通常运行模式”或“特定运行模式”中的某一个。
“通常运行模式”是指,使空调系统100基于以往的运行信息工作来进行真实空间210、220的空调控制的模式。另一方面,“特定运行模式”是指,在使空调系统100工作时,在特定范围和非特定范围中基于不同的运行信息进行空调控制的模式。
此外,图4的4b示出在特定运行模式下使空调系统100工作时显示在用户终端140上的操作画面的一例。如图4的4b所示,通过按下“特定运行”按钮412而迁移到特定运行模式的操作画面400。操作画面400包括运行信息显示栏411、特定范围输入栏413、“特定范围显示”按钮414、“运行信息输入”按钮415、“开始”按钮416、“停止”按钮417。
在运行信息显示栏411中显示设定为特定范围的运行信息。在特定范围存在多个的情况下,按每个特定范围显示运行信息。图4的例子示出了下述情形:在“特定范围1”中,作为运行信息,设定了温度=“XX℃”、风向=“不接触”、风量=“0”的状态。
在特定范围输入栏413中,包含用户211、221、222等在输入特定范围时使用的指示按钮。“范围输入”按钮是在指示特定范围的输入开始时进行按压操作的按钮。
“增减”按钮是在输入特定范围的大小时进行按压操作的按钮。注意,也可以进行设定操作,将表示特定范围的大小的数值直接输入到“半径信息”输入栏中,以代替对“增减”按钮进行按压操作而在“半径信息”输入栏(图中的“Rmm”)中输入特定范围的大小。
“对象拍摄”按钮是为了将对象物的区域设为特定范围而对对象物进行拍摄时进行按压操作的按钮。通过对“对象拍摄”按钮进行按压操作,使摄像装置327起动并开始拍摄。
“范围删除”按钮是在删除已经登记的特定范围时进行按压操作的按钮。“范围移动”按钮是在移动已经登记的特定范围时进行按压操作的按钮。
“反转”按钮是指,在对已经登记的特定范围进行空调控制时使用的运行信息和对与特定范围不同的非特定范围进行空调控制时使用的运行信息进行调换时进行按压操作的按钮。
通过对“特定范围显示”按钮414进行按压操作,使摄像装置327起动,将由摄像装置327拍摄的拍摄图像显示在显示画面上,并且重叠显示基于从空调装置110的控制装置发送的各种信息的显示图像。
“运行信息输入”按钮415是用户211、221、222等在输入运行信息时进行按压操作的按钮。通过对“运行信息输入”按钮415进行按压操作,显示在特定运行模式下能够输入的项目,用户211、221、222等输入与各项目对应的运行信息。
注意,运行信息可以构成为能够按每个特定范围登记相同的内容,也可以构成为能够对同一特定范围内的各位置登记不同的内容。此外,也可以构成为能够读取过去登记的运行信息的历史,并对其他特定范围进行登记。此外,也可以构成为,能够在特定范围间对与当前登记了的特定范围分别相关联的运行信息进行调换并登记。
“开始”按钮416是在指示空调装置110开始特定运行模式下的空调控制时使用的、用于空调指示操作的按钮。“停止”按钮417是在指示空调装置110停止基于特定运行模式的空调控制时使用的、用于空调指示操作的按钮。
<控制装置的功能结构>
接着,对特定运行模式下的空调装置110的控制装置的功能结构进行说明。图5是示出特定运行模式下的控制装置的功能结构的一例的图。如上所述,在空调装置110的控制装置中安装有登记程序,通过执行该程序,空调装置110的控制装置作为特定范围输入部501、空调控制部502、特定范围输出部503发挥功能。
特定范围输入部501基于从用户终端140发送的各种指示和各种信息、从摄像装置120发送的拍摄图像、由室内机111具有的传感器测量的数据等,决定特定范围和运行信息。此外,特定范围输入部501将所决定的特定范围和运行信息,登记在空调控制部502中。具体而言,特定范围输入部501将所决定的特定范围和运行信息,通知给空调控制部502。由此,空调控制部502存储在空调装置110的控制装置所具有的辅助存储装置303中的、作为空调控制部502可利用的存储区域的特定范围/运行信息存储部中。
空调控制部502基于由特定范围输入部501登记的特定范围和运行信息,进行空调控制。
特定范围输出部503将用于将登记在空调控制部502中的特定范围通知给用户211、221、222等的图像(特定范围图像)发送到显示装置130。
<特定范围输入部的功能结构和特定范围决定处理的具体例>
接着,对于特定范围输入部分501的功能结构(这里是指与决定特定范围有关的功能结构)的详细情况和特定范围决定处理的具体例,对模式(1)至(6)进行说明。
(1)模式1
图6是示出特定范围输入部的功能结构和特定范围决定处理的具体例的第1图。如图6所示,特定范围输入部501具有拍摄图像获取部601、电波信息获取部602、位置信息获取部603、操作内容获取部604、半径信息确定部605、特定范围决定部607。
拍摄图像获取部601获取由摄像装置120拍摄的拍摄图像,并通知给位置信息获取部603。
电波信息获取部602获取由电波收发装置310收发的电波信息,并通知给位置信息获取部603。
位置信息获取部603基于所通知的拍摄图像和电波信息,计算表示用户终端140在真实空间210或220内的位置的坐标信息(x,y,z)。例如,电波信息获取部602基于电波信息计算表示真实空间内的多个物体的位置的坐标信息,从计算出的表示多个物体的位置的坐标信息中,提取表示基于拍摄图像经图像识别出的用户终端140的位置的坐标信息。
操作内容获取部604获取从用户终端140发送的操作内容。图6的例子示出了下述情形:作为操作内容,对“范围输入”按钮进行了按压操作,并对“增减”按钮进行了按压操作。
在操作内容获取部604中,当通过按压操作“范围输入”按钮而获取到范围输入指示时,将该范围输入指示通知给特定范围决定部607。注意,在特定范围决定部607中,在由操作内容获取部604通知了范围输入指示时,将由位置信息获取部603通知的坐标信息作为表示特定范围的中心点的位置的中心位置信息(x0,y0,z0)进行保持。
此外,在操作内容获取部604中,当通过点击“增减”按钮n次(通过重复点击操作)而获取到点击信息时,将该点击信息通知给半径信息确定部605。或者,在操作内容获取部604中,当通过按压“增减”按钮t秒(通过按压操作持续规定时间)而获取到点击信息时,将点击信息通知给半径信息确定部605。
半径信息确定部605根据由操作内容获取部604通知的点击信息,计算半径信息(R),并通知给特定范围决定部607。在半径信息确定部605中,计算与点击次数(重复次数)或长按时间(持续时间)成比例的半径信息(R)。
特定范围决定部607参照形状存储部610,获取特定范围的规定形状的形状信息。图6的例子示出了通过参照形状存储部610而获取到球状信息的情形。但是,通过参照形状存储部610而获取的形状信息并不限于球状信息,例如也可以是圆锥状信息等其他任意的立体形状信息。
此外,特定范围决定部607基于特定范围的中心位置信息(x0,y0,z0)、由半径信息确定部605通知的半径信息(R)、以及由形状存储部610获取到的球状信息,决定特定范围621。即,特定范围决定部607将以中心位置信息为基准的周边范围决定为特定范围621。
图6的例子示出了基于中途的点击信息而生成了特定范围620的情形。这样,根据图6的例子,用户211通过调整点击次数或者长按时间,能够调整特定范围的大小。
注意,用户终端140也可以:
·通过由用户211点击“增减”按钮,或者
·通过长按,
每当半径信息(R)发生了一定量的变化时,将规定的刺激(声音、光或振动)通知给用户211。由此,用户211能够掌握半径信息(R)发生了一定量的变化。
(2)模式2
图7是示出特定范围输入部的功能结构和特定范围决定处理的具体例的第2图。如图7所示,特定范围输入部501具有拍摄图像获取部601、电波信息获取部602、位置信息获取部603、操作内容获取部701、特定范围决定部607。
其中,拍摄图像获取部601至位置信息获取部603已使用图6进行了说明,因此这里省略说明。
操作内容获取部701获取从用户终端140发送的操作内容。图7的例子示出了下述情形:作为操作内容,对“范围输入”按钮进行了按压操作,并在“半径信息”输入栏中直接输入了半径信息(R)。
在操作内容获取部701中,当通过按压操作“范围输入”按钮而获取到范围输入指示时,将该范围输入指示通知给特定范围决定部607。注意,在特定范围决定部607中,在由操作内容获取部604通知了范围输入指示时,将由位置信息获取部603通知的坐标信息作为特定范围的中心位置信息(x0,y0,z0)进行保持。
此外,在操作内容获取部701中,当通过在“半径信息”输入栏中直接输入半径信息(R)而获取到半径信息(R)时,将该半径信息(R)通知给特定范围决定部607。
注意,由于通过特定范围决定部607决定特定范围621的方法与图6相同,因此这里省略说明。
(3)模式3
图8是示出特定范围输入部的功能结构和特定范围决定处理的具体例的第3图。如图8所示,特定范围输入部501具有拍摄图像获取部601、电波信息获取部602、位置信息获取部603、操作内容获取部801、中心位置/半径信息计算部802、特定范围决定部803。
其中,拍摄图像获取部601至位置信息获取部603已使用图6进行了说明,因此这里省略说明。但是,在图8的情况下,位置信息获取部603将计算出的坐标信息通知给中心位置/半径信息计算部802。
操作内容获取部801获取从用户终端140发送的操作内容,并通知给中心位置/半径信息计算部802。图8的例子示出了下述情形:作为操作内容,通过对“范围输入”按钮进行按压操作,来通知范围输入指示。
注意,如图8所示,在模式3的情况下,用户211在对“范围输入”按钮进行了按压操作之后,通过对用户终端140进行移动操作,在真实空间210内描绘圆弧的轨迹,来指定特定范围的位置和大小。
具体而言,中心位置/半径信息计算部802在由操作内容获取部801通知了范围输入指示之后,获取从位置信息获取部603通知的移动操作中的坐标信息(坐标信息(x1,y1,z1)至(xm,ym,zm))。
此外,中心位置/半径信息计算部802基于所获取的坐标信息(坐标信息(x1,y1,z1)至(xm,ym,zm)),计算表示圆弧的中心点的位置的中心位置信息(x0,y0,z0),并通知给特定范围决定部803。
此外,中心位置/半径信息计算部802计算所获取的坐标信息(坐标信息(x1,y1,z1)至(xm,ym,zm))中距中心位置信息(x0,y0,z0)的距离的最大值。此外,中心位置/半径信息计算部802将计算出的最大值作为半径信息(R)通知给特定范围决定部803。
特定范围决定部803参照形状存储部610,获取特定范围的规定形状的形状信息。图8的例子示出了通过参照形状存储部610而获取到球状信息的情形。但是,通过参照形状存储部610而获取的形状信息并不限于球状信息,例如也可以是圆锥状信息等其他任意的立体形状信息。
此外,特定范围决定部803基于由中心位置/半径信息计算部802通知的中心位置信息(x0,y0,z0)、半径信息(R)以及由形状存储部610获取到的球状信息,决定特定范围621。即,特定范围决定部803将以中心位置信息为基准的周边范围决定为特定范围621。
(4)模式4
图9是示出特定范围输入部的功能结构和特定范围决定处理的具体例的第4图。如图9所示,特定范围输入部501具有拍摄图像获取部601、电波信息获取部602、位置信息获取部603、操作内容获取部801、中心位置/半径信息计算部802、投影方向判定部901、特定范围决定部902。
其中,拍摄图像获取部601至位置信息获取部603已使用图6进行了说明,因此这里省略说明。此外,操作内容获取部801至中心位置/半径信息计算部802已使用图8进行了说明,因此这里省略说明。
投影方向判定部901将摄像装置120对用户终端140进行拍摄时的拍摄方向作为投影方向,通知给特定范围决定部902。
特定范围决定部902参照形状存储部610,获取特定范围的规定形状的形状信息。图9的例子示出了通过参照形状存储部610而获取到球状信息的情形。
此外,特定范围决定部902基于由中心位置/半径信息计算部802通知的中心位置信息(x0,y0,z0)、半径信息(R)以及由形状存储部610获取到的球状信息,计算特定范围。此外,特定范围决定部902基于由投影方向判定部901通知的投影方向,在维持计算出的特定范围的大小和形状不变的情况下,将中心点的位置向投影方向偏移规定量,并计算中心位置信息(x’0,y’0,z’0)。由此,特定范围决定部902将投影区域决定为特定范围621。即,特定范围决定部902将以中心位置信息为基准的周边范围决定为特定范围621。
注意,在图9的例子中,对在计算出特定范围后进行投影的情况进行了说明,但也可以在对基于对用户终端140的移动操作的轨迹进行投影后,计算特定范围。具体而言,首先,基于由摄像装置120拍摄的拍摄图像,将坐标信息(坐标信息(x1,y1,z1)至(xm,ym,zm))投影在拍摄方向上。然后,将根据投影后的坐标信息而确定的投影区域(基于中心位置信息、半径信息(R)和球状信息而确定的区域)决定为特定范围。
(5)模式5
图10是示出特定范围输入部的功能结构和特定范围决定处理的具体例的第5图。如图10所示,特定范围输入部501具有拍摄图像获取部601、电波信息获取部602、位置信息获取部603、操作内容获取部801、中心位置/半径信息计算部802、投影方向判定部1001、特定范围决定部1002。
其中,拍摄图像获取部601至位置信息获取部603已使用图6进行了说明,因此这里省略说明。此外,操作内容获取部801至中心位置/半径信息计算部802已使用图8进行了说明,因此这里省略说明。
投影方向判定部1001将与用户终端140和用户211的位置关系相应的规定方向判定为投影方向,并将判定出的投影方向通知给特定范围决定部1002。
特定范围决定部1002参照形状存储部610,获取特定范围的规定形状的形状信息。图10的例子示出了通过参照形状存储部610而获取到球状信息的情形。
此外,特定范围决定部1002基于由中心位置/半径信息计算部802通知的中心位置信息(x0,y0,z0)、半径信息(R)以及由形状存储部610获取到的球状信息,计算特定范围。此外,特定范围决定部1002基于由投影方向判定部1001通知的投影方向,在维持计算出的特定范围的大小和形状不变的情况下,将中心点的位置向投影方向偏移规定量,并计算中心位置信息(x’0,y’0,z’0)。由此,特定范围决定部1002将投影区域决定为特定范围621。即,特定范围决定部1002将以中心位置信息为基准的周边范围决定为特定范围621。
注意,在图10的例子中,对在计算出特定范围后进行投影的情况进行了说明,但也可以在对基于对用户终端140的移动操作的轨迹进行投影后,计算特定范围。
具体而言,首先,基于根据由摄像装置120拍摄的拍摄图像而确定的用户211和用户终端140之间的位置关系,对坐标信息(坐标信息(x1,y1,z1)至(xm,ym,zm))进行投影。然后,将根据投影后的坐标信息而确定的投影区域(基于中心位置信息、半径信息(R)和球状信息而确定的区域)决定为特定范围。
(6)模式6
图11是示出特定范围输入部的功能结构和特定范围决定处理的具体例的第6图。如图11所示,特定范围输入部501具有拍摄图像获取部601、电波信息获取部602、位置信息获取部603、操作内容获取部1101、对象区域计算部1102、特定范围决定部1103。
其中,拍摄图像获取部601至位置信息获取部603已使用图6进行了说明,因此这里省略说明。
操作内容获取部1101获取从用户终端140发送的操作内容。图11的例子出了下述情形:作为操作内容示,首先对“范围输入”按钮进行按压操作,之后对“对象拍摄”按钮进行了按压操作。
在操作内容获取部1101中,通过按压操作“范围输入”按钮,获取范围输入指示。此外,在操作内容获取部1101中,通过按压操作“对象拍摄”按钮,在用户终端140开始拍摄之后,通过按压操作快门按钮(未图示),获取拍摄指示,并通知给对象区域计算部1102。注意,在对象区域计算部1102中,在由操作内容获取部1101通知了拍摄指示时,保持由位置信息获取部603通知的坐标信息。此时所保持的位置坐标是在计算对象区域的坐标信息时使用的、拍摄时的用户终端140的坐标信息即基准位置信息(xb,yb,zb)。
此外,在操作内容获取部1101中,当通过按压操作快门按钮(未图示)而从用户终端140获取了拍摄图像时,将该拍摄图像通知给对象区域计算部1102。
在对象区域计算部1102中,基于基准位置信息(xb,yb,zb)确定拍摄图像中包含的对象物,并计算对象物的区域(对象区域)在真实空间210内的坐标信息。
注意,在对象区域计算部1102中,当基于基准位置信息(xb,yb,zb)确定拍摄图像中包含的对象物时,参照布局信息存储部1104。在布局信息存储部1104中,预先存储有布局信息,该布局信息使配置在真实空间210内的各物体(例如,观叶植物、椅子等)的物体名与物体区域的坐标信息(三维数据等形状数据)相关联。
因此,在对象区域计算部1102中,从布局信息中确定与拍摄图像中包含的物体相对应的物体名,即与基准位置信息(xb,yb,zb)附近的坐标信息相对应的物体名。然后,在对象区域计算部1102中,将与所确定的物体名相关联的物体区域的坐标信息通知给特定范围决定部1103,作为所拍摄的对象物的区域(对象区域)的坐标信息。
特定范围决定部1103将从对象区域计算部1102通知的对象区域的坐标信息决定为特定范围621。
<特定范围输入部的功能结构和特定范围删除处理的具体例>
接着,对特定范围输入部501的功能结构(这里是指与特定范围的删除相关的功能结构)的详细情况和特定范围删除处理的具体例进行说明。
图12是示出特定范围输入部的功能结构和特定范围删除处理的具体例的图。如图12所示,特定范围输入部501具有拍摄图像获取部601、电波信息获取部602、位置信息获取部603、操作内容获取部1201、删除对象判定部1202、特定范围删除部1203。
其中,拍摄图像获取部601至位置信息获取部603已使用图6进行了说明,因此这里省略说明。但是,在图12的情况下,位置信息获取部603将计算出的坐标信息通知给删除对象判定部1202。
操作内容获取部1201获取从用户终端140发送的操作内容,并通知给删除对象判定部1202。图12的例子示出了下述情形:作为操作内容,通过对“范围删除”按钮进行按压操作,通知了范围删除指示。
删除对象判定部1202在由操作内容获取部1201通知了范围删除指示时,将由位置信息获取部603通知的坐标信息作为在特定范围的删除对象的判定中使用的删除位置信息(xd,yd,zd)进行保持。
此外,删除对象判定部1202读取已经登记在空调控制部502中的特定范围信息,判定包含删除位置信息(xd,yd,zd)的特定范围。此外,删除对象判定部1202将判定出的特定范围作为删除对象的特定范围,通知给特定范围删除部1203。
特定范围删除部1203从已经登记在空调控制部502中的特定范围信息中,删除由删除对象判定部1202通知的特定范围。
这样,当在用户终端140位于删除对象的特定范围内的状态下对“范围删除”按钮进行了按压操作时,特定范围删除部1203删除该删除对象的特定范围。
<特定范围输入部的功能结构和特定范围移动处理的具体例>
接着,对特定范围输入部501的功能结构(这里是指与特定范围的移动相关的功能结构)的详细情况和特定范围移动处理的具体例进行说明。
图13是示出特定范围输入部的功能结构和特定范围移动处理的具体例的图。如图13所示,特定范围输入部501具有拍摄图像获取部601、电波信息获取部602、位置信息获取部603、操作内容获取部1301、移动对象判定部1302、特定范围更新部1303。
其中,拍摄图像获取部601至位置信息获取部603已使用图6进行了说明,因此这里省略说明。但是,在图13的情况下,位置信息获取部603将计算出的坐标信息通知给移动对象判定部1302。
操作内容获取部1301获取从用户终端140发送的操作内容,并通知给移动对象判定部1302。图13的例子示出了下述情形:作为操作内容,通过对“范围移动”按钮进行按压操作,通知了范围移动开始指示和范围移动结束指示。
在由操作内容获取部1301通知了范围移动开始指示时,移动对象判定部1302将由位置信息获取部603通知的坐标信息作为移动前位置信息(xt,yt,zt)进行保持。
此外,移动对象判定部1302读取已经登记在空调控制部502中的特定范围信息,判定包含移动前位置信息(xt,yt,zt)的特定范围。此外,移动对象判定部1302获取作为判定出的特定范围的中心位置信息的移动前中心位置信息(x0,y0,z0)。
注意,移动对象判定部1302在对用户终端140进行移动操作后、由操作内容获取部1301通知了范围移动结束指示时,将由位置信息获取部603通知的坐标信息作为移动后位置信息(x’t,y’t,z’t)保持。
此外,移动对象判定部1302将移动前位置信息(xt,yt,zt)与移动后位置信息(x’t,y’t,z’t)的差分与移动前中心位置信息(x0,y0,z0)相加。由此,移动对象判定部1302计算移动后中心位置信息(x’0,y’0,z’0)。
此外,移动对象判定部1302将计算出的移动后中心位置信息(x’0,y’0,z’0)通知给特定范围更新部1303。
特定范围更新部1303基于由移动对象判定部1302通知的移动后中心位置信息(x’0,y’0,z’0),更新在空调控制部502中已经登记的对应的特定范围信息。
这样,当在用户终端140位于移动对象的特定范围内的状态下对“范围移动”按钮进行按压操作而进行了移动操作时,特定范围更新部1303在该移动对象的特定范围内移动。
<特定范围输入部的功能结构和运行信息输入处理的具体例>
接着,对特定范围输入部501的功能结构(这里是指与运行信息的输入有关的功能结构)的详细情况和运行信息输入处理的具体例进行说明。
图14是示出特定范围输入部的功能结构和运行信息输入处理的具体例的图。如图14所示,特定范围输入部501具有拍摄图像获取部601、电波信息获取部602、位置信息获取部603、操作内容获取部1401、运行信息获取部1402、运行信息设定部1403。
其中,拍摄图像获取部601至位置信息获取部603已使用图6进行了说明,因此这里省略说明。但是,在图14的情况下,位置信息获取部603将计算出的坐标信息通知给运行信息获取部1402。
操作内容获取部1401获取从用户终端140发送的操作内容,并通知给运行信息获取部1402。图14的例子示出了下述情形:作为操作内容,通过对“运行信息输入”按钮415进行按压操作,通知了运行信息输入指示。此外,图14的例子还示出了下述情形:作为操作内容,通过输入运行信息,通知了运行信息。
在由操作内容获取部1401通知了运行信息输入指示时,运行信息获取部1402将由位置信息获取部603通知的坐标信息作为输入位置信息(xi,yi,zi)进行保持。
此外,运行信息获取部1402读取已经登记在空调控制部502中的特定范围信息,判定包含输入位置信息(xi,yi,zi)的特定范围。此外,运行信息获取部1402将判定出的特定范围与所通知的运行信息一起通知给运行信息设定部1403。
运行信息设定部1403将由运行信息获取部1402通知的运行信息作为被通知的特定范围的运行信息,与特定范围相关联并登记。
这样,在用户终端140位于要登记运行信息的特定范围内的状态下对“运行信息输入”按钮进行按压操作而输入了运行信息时,运行信息设定部1403与该特定范围相关联地登记运行信息。
<特定范围输入部的功能结构和运行信息反转处理的具体例>
接着,对特定范围输入部501的功能结构(这里是指与运行信息的反转有关的功能结构)的详细情况和运行信息反转处理的具体例进行说明。图15是示出特定范围输入部的功能结构和运行信息反转处理的具体例的图。如图15所示,特定范围输入部501具有拍摄图像获取部601、电波信息获取部602、位置信息获取部603、操作内容获取部1501、反转指示获取部1502、运行信息更新部1503。
其中,拍摄图像获取部601至位置信息获取部603已使用图6进行了说明,因此这里省略说明。但是,在图15的情况下,位置信息获取部603将计算出的坐标信息通知给反转指示获取部1502。
操作内容获取部1501获取从用户终端140发送的操作内容,并通知给反转指示获取部1502。图15的例子示出了下述情形:作为操作内容,通过对“反转”按钮进行按压操作,通知了反转指示。
当从操作内容获取部1501通知了反转指示时,反转指示获取部1502将从位置信息获取部603通知的坐标信息作为反转位置信息(xr,yr,zr)进行保持。
此外,反转指示获取部1502读取已经登记在空调控制部502中的特定范围信息,判定包含反转位置信息(xr,yr,zr)的特定范围。此外,反转指示获取部1502读取与判定出的特定范围相关联的运行信息和与非特定范围相关联的运行信息,并通知给运行信息更新部1503。
运行信息更新部1503对与由反转指示获取部1502通知的特定范围相关联的运行信息和与非特定范围相关联的运行信息进行调换,并将调换后的运行信息登记在空调控制部502中。
这样,在用户终端140位于要反转运行信息的特定范围内的状态下对“反转”按钮进行了按压操作时,运行信息更新部1503将该特定范围的运行信息调换为非特定范围的运行信息。
<特定范围输出部的功能结构和特定范围显示处理的具体例>
接着,对特定范围输出部503的功能结构(这里是指与特定范围的显示有关的功能结构)的详细情况和特定范围显示处理的具体例进行说明。图16是示出特定范围输出部的功能结构和特定范围输出处理的具体例的第1图。如图16所示,特定范围输出部503具有特定范围信息获取部1601、拍摄图像获取部1602、特定范围图像生成部1603。
特定范围信息获取部1601读取在空调控制部502中登记的特定范围信息,并通知给特定范围图像生成部1603。
拍摄图像获取部1602获取由摄像装置120拍摄的拍摄图像,并通知给特定范围图像生成部1603。
特定范围图像生成部1603基于由特定范围信息获取部1601通知的特定范围信息,生成表示特定范围的图像。此外,特定范围图像生成部1603通过在由拍摄图像获取部1602通知的拍摄图像上的、与特定范围信息相应的位置上,重叠表示所生成的特定范围的图像,来生成特定范围图像。
此外,特定范围图像生成部1603通过将拍摄图像或所生成的特定范围图像发送到监视器131,在监视器131上显示拍摄图像或特定范围图像。
图16的例子分别示出了在监视器131上显示了拍摄图像1611的情形、以及在监视器131上显示了特定范围图像1612的情形。
<特定运行模式下的特定范围登记处理的流程>
接着,对空调系统100的特定运行模式中的特定范围登记处理的流程进行说明。图17和图18是示出特定运行模式下的特定范围登记处理的流程的第1流程图和第2流程图。
在步骤S1701中,特定范围输入部501计算用户终端140的坐标信息。
在步骤S1702中,特定范围输入部501判定是否获取了范围输入指示。当在步骤S1702中判定为未获取范围输入指示时(在步骤S1702中为“否”时),前进至步骤S1706。
另一方面,当在步骤S1702中判定为获取了范围输入指示时(在步骤S1702中为“是”时),特定范围输入部501前进至步骤S1703。
在步骤S1703中,特定范围输入部501获取对用户终端140的操作内容。
在步骤S1704中,特定范围输入部501基于用户终端140的坐标信息和对用户终端140的操作内容,决定特定范围,并生成特定范围信息。
在步骤S1705中,特定范围输入部501将所生成的特定范围信息登记在空调控制部502中。
在步骤S1706中,特定范围输入部501判定是否获取了范围删除指示。当在步骤S1706中判定为未获取范围删除指示时(在步骤S1706中为“否”时),前进至步骤S1709。
另一方面,当在步骤S1706中判定为获取了范围删除指示时(在步骤S1706中为“是”时),特定范围输入部501前进至步骤S1707。
在步骤S1707中,特定范围输入部501基于用户终端140的坐标信息,判定删除对象的特定范围。
在步骤S1708中,特定范围输入部501删除所判定的特定范围的特定范围信息。
在步骤S1709中,特定范围输入部501判定是否获取了范围移动开始指示和范围移动结束指示。当在步骤S1709中判定为未获取范围移动开始指示和范围移动结束指示时(在步骤S1709中为“否”时),前进至图18的步骤S1801。
另一方面,当在步骤S1709中判定为获取了范围移动开始指示和范围移动结束指示时(在步骤S1709中为“是”时),前进至步骤S1710。
在步骤S1710中,特定范围输入部501基于用户终端140的坐标信息,判定移动对象的特定范围。
在步骤S1711中,特定范围输入部501使所判定出的特定范围移动,并登记移动后的特定范围的特定范围信息。
在步骤S1801中,特定范围输入部501判定是否获取了运行信息输入指示。当在步骤S1801中判定为未获取运行信息输入指示时(在步骤S1801中为“否”时),前进至步骤S1804。
另一方面,当在步骤S1801中判定为获取了运行信息输入指示时(在步骤S1801中为“是”时),前进至步骤S1802。
在步骤S1802中,特定范围输入部501基于用户终端140的坐标信息,判定要登记运行信息的特定范围。
在步骤S1803中,特定范围输入部501与所判定出的特定范围相关联地登记运行信息。
在步骤S1804中,特定范围输入部501判定是否获取了反转指示。当在步骤S1804中判定为未获取反转指示时(在步骤S1804中为“否”时),前进至步骤S1807。
另一方面,当在步骤S1804中判定为获取了反转指示时(在步骤S1804中为“是”时),前进至步骤S1805。
在步骤S1805中,特定范围输入部501基于用户终端140的坐标信息,判定要反转运行信息的特定范围。
在步骤S1806中,特定范围输入部501将与所判定出的特定范围相关联的运行信息和与非特定范围相关联的运行信息反转,并登记反转后的运行信息。
在步骤S1807中,特定范围输入部501判定是否结束特定运行模式。当在步骤S1807中判定为继续特定运行模式时(在步骤S1807中为“否”时),返回到图17的步骤S1701。
另一方面,当在步骤S1807中判定为结束特定运行模式时(在步骤S1807中为“是”时),结束特定运行模式下的特定范围登记处理。
<空调系统的动作例>
接着,对空调系统100的动作例进行说明。图19是示出基于空调系统的空调控制的一例的图。图19的例子示出了下述情形:对特定范围621,以使被吹送的空气接触的方式登记了运行信息,对特定范围1901和1902,以使被吹送的空气不接触的方式登记了运行信息。
这样,根据第1实施方式的空调系统100,用户211能够自由地改变作为控制对象的特定范围的大小和形状,并且能够对一个用户211登记多个特定范围。
<小结>
从以上说明可知,第1实施方式的空调系统100:
·具有能够对真实空间内的特定范围进行空调控制的空调装置和用户终端,
·登记基于用户终端的真实空间中的位置信息和对用户终端的操作内容而决定的特定范围。
由此,根据第1实施方式,能够提供在真实空间中对作为控制对象的特定范围进行登记的空调系统和登记程序。
[第2实施方式]
在上述第1实施方式中,对特定范围输出部在空调装置110的控制装置中实现的情况进行了说明。但是,特定范围输出部例如也可以在用户终端140中实现。以下,关于第2实施方式,以与上述第1实施方式的不同点为中心进行说明。
<控制装置以及用户终端的功能结构>
首先,对第2实施方式的空调系统中的空调装置110的控制装置的功能结构和用户终端140的功能结构进行说明。
图20是示出特定运行模式下的控制装置和用户终端的功能结构的一例的图。如图20所示,在第2实施方式中,空调装置110的控制装置通过执行登记程序,作为特定范围输入部501、空调控制部502、发送部2001发挥功能。
其中,特定范围输入部501、空调控制部502在上述第1实施方式中已使用图5进行了说明,因此这里省略说明。
发送部2001向用户终端140发送用于将由空调控制部502登记的特定范围通知给用户211、221、222等的各种信息。
另一方面,在第2实施方式中,用户终端140通过执行空调操作程序,作为特定范围输出部2002发挥功能。
特定范围输出部2002基于从发送部2001发送的各种信息,对用户211、221、222等进行通知特定范围的处理。
<发送部和特定范围输出部的功能结构、特定范围输出处理的具体例>
接着,对发送部2001和特定范围输出部2002的功能结构(这里是指与特定范围输出处理有关的功能结构)的详细情况和特定范围输出处理的具体例进行说明。图21是示出发送部和特定范围输出部的功能结构和特定范围输出处理的具体例的图。
如图21所示,发送部2001具有拍摄图像获取部2101、电波信息获取部2102、位置信息获取部2103、位置信息发送部2104、特定范围信息获取部2105、特定范围发送部2106。
拍摄图像获取部2101获取由摄像装置120拍摄的拍摄图像,并通知给位置信息获取部2103。
电波信息获取部2102获取由电波收发装置310接收到的电波信息,并通知给位置信息获取部2103。
位置信息获取部2103基于所通知的拍摄图像和电波信息,计算表示用户终端140在真实空间210或220内的位置的坐标信息(x,y,z)。
位置信息发送部2104将由位置信息获取部2103计算出的坐标信息(x,y,z)发送到用户终端140的特定范围输出部2002。
特定范围信息获取部2105读取在空调控制部502中登记的特定范围信息,并通知给特定范围发送部2106。
特定范围发送部2106将由特定范围信息获取部2105通知的特定范围信息发送到特定范围输出部2002。
另一方面,特定范围输出部2002具有位置信息获取部2111、特定范围信息获取部2112、特定范围图像生成部2113、拍摄图像获取部2114、显示控制部2115。
位置信息获取部2111获取从位置信息发送部2104发送的坐标信息(x,y,z),并通知给特定范围图像生成部2113。
特定范围信息获取部2112获取从特定范围发送部2106发送的特定范围信息,并通知给特定范围图像生成部2113。
特定范围图像生成部2113基于由位置信息获取部2111通知的坐标信息(x,y,z),识别用户终端140当前位于真实空间内的何处。此外,特定范围图像生成部2113基于加速度传感器328的输出,识别用户终端140当前朝向哪个方向(用户终端140的姿势)。此外,特定范围图像生成部2113根据所识别的位置和方向(坐标信息和姿势信息),计算用户终端140的摄像装置327进行拍摄时的拍摄范围内的各位置的坐标信息。此外,特定范围图像生成部2113将由特定范围信息获取部2112通知的特定范围信息,应用于拍摄范围内的各位置的坐标信息。
由此,特定范围信息获取部2112能够在用户终端140的摄像装置327开始拍摄时的拍摄图像内的位置,生成与用户终端140的朝向相应的朝向的特定范围的图像。注意,在特定范围图像生成部2113中,将所生成的特定范围图像(三维图像)通知给显示控制部2115。
当在用户终端140的操作画面400上对“特定范围显示”按钮414进行按压操作并进行特定范围显示指示从而开始由摄像装置327进行拍摄时,拍摄图像获取部2114从摄像装置327获取所拍摄的拍摄图像。此外,拍摄图像获取部2114将所获取的拍摄图像通知给显示控制部2115。
显示控制部2115通过使由特定范围图像生成部2113通知的特定范围图像与由拍摄图像获取部2114通知的拍摄图像重合,生成显示图像。此外,显示控制部2115将所生成的显示图像显示在用户终端140的显示装置326的显示画面上。
图21的例子示出了下述情形:通过由用户211在由坐标信息(x,y,z)确定的位置,在用户终端140的操作画面400上,对“特定范围显示”按钮414进行按压操作,进行了特定范围显示指示,并开始了拍摄。
此外,图21的例子示出了对配置在真实空间210内的观叶植物2120登记了特定范围信息的情况。在这种情况下,在用户终端140的显示装置326的显示画面上,例如显示显示图像2122,其中,对从正侧面拍摄观叶植物2120而得到的拍摄图像2121,重叠了特定范围图像。
此外,在用户终端140的显示装置326的显示画面上,例如显示显示图像2132,其中,对从正上方拍摄观叶植物2120而得到的拍摄图像2131,重叠了特定范围图像。
这样,通过使用用户终端140的增强现实功能将真实空间210内登记的特定范围可视化,用户211能够经由用户终端140掌握真实空间210内的哪个位置被登记为特定范围。
<小结>
从以上说明可知,第2实施方式的空调系统100在上述第1实施方式中说明了的功能的基础上,还具有下述功能:
·在通过对用户终端进行拍摄操作而拍摄的拍摄图像上,重叠显示根据用户终端的真实空间中的位置信息和姿势信息而生成的、表示特定范围的三维图像。
由此,根据第2实施方式,能够享受与上述第1实施方式相同的效果,并且用户能够经由用户终端140掌握所登记的特定范围。
[第3实施方式]
在上述第2实施方式中,说明了通过在用户终端140的显示画面上显示在用户终端140的摄像装置327拍摄的拍摄图像上重叠了特定范围图像而得到的显示图像,从而将登记的特定范围信息通知给用户的情况。
然而,将特定范围信息通知给用户的通知方法不限于此。例如,也可以通过输出规定的刺激(声音、光或振动)来通知用户终端140在真实空间中位于特定范围内还是位于特定范围外(非特定范围内)。
以下,关于第3实施方式,以与上述的第1实施方式和第2实施方式的不同点为中心进行说明。
<用户终端中的特定范围输出部的功能结构、特定范围输出处理的具体例>
首先,对用户终端140中的特定范围输出部2002的功能结构(这里是指与特定范围输出处理有关的功能结构)的详细情况和特定范围输出处理的具体例进行说明。图22是示出特定范围输出部的功能结构和特定范围输出处理的具体例的第2图。
如图22所示,特定范围输出部2002具有位置信息获取部2111、特定范围信息获取部2112、位置关系判定部2201、输出装置控制部2202。
位置信息获取部2111具有与在图21中说明的位置信息获取部2111相同的功能,获取从位置信息发送部2104发送的坐标信息(x,y,z),并通知给位置关系判定部2201。
特定范围信息获取部2112具有与在图21中说明的特定范围信息获取部2112相同的功能,获取从特定范围发送部2106发送的特定范围信息,并通知给位置关系判定部2201。
位置关系判定部2201基于由位置信息获取部2111通知的坐标信息(x,y,z)识别用户终端140当前位于真实空间中的何处。此外,位置关系判定部2201基于由特定范围信息获取部2112通知的特定范围信息,判定特定范围和用户终端140的位置关系。此外,位置关系判定部2201将判定出的位置关系通知给输出装置控制部2202。
输出装置控制部2202基于由位置关系判定部2201通知的位置关系,控制输出装置(显示装置326、声音输出装置330或振动装置331),通过输出光、声音或振动来通知用户。由此,用户能够掌握特定范围与用户终端140的位置关系。注意,输出装置控制部2202既可以控制显示装置326来输出光,也可以控制未图示的LED来输出光。
图22的例子示出了用户211如何将用户终端140保持在由坐标信息(x,y,z)指定的位置。此外,图22的例子示出了特定范围621已登记的情形。
在该状况下,输出装置控制部2202例如以在用户终端140位于特定范围621内的情况下,输出光、声音、振动中的任一个,在位于特定范围621外的情况下,光、声音、振动中的任一个都不输出的方式,进行控制。
或者,输出装置控制部2202例如也可以以在用户终端140位于特定范围621内的情况和位于特定范围621外的情况下振动的大小、音量、图像内容、光的颜色或量发生变化的方式,控制输出。
或者,输出装置控制部2202例如也可以以在用户终端140位于特定范围621内的情况下输出光而在位于特定范围621外的情况下输出声音或振动等对刺激进行切换的方式,进行控制。
在任何情况下,在对用户终端140进行了移动操作时,与坐标信息(x,y,z)对应的范围从特定范围621内变化到特定范围621外(非特定范围内)的情况下,输出装置控制部2202都控制输出。或者,在对用户终端140进行了移动操作时,与坐标信息(x,y,z)对应的范围从特定范围621外(非特定范围内)变化到特定范围621内的情况下,输出装置控制部2202控制输出。
此外,输出装置控制部2202例如也可以以在特定范围621内,当用户终端140接近特定范围621的中心位置时,增大声音、光、振动中的任一个的输出的方式,进行控制。此外,输出装置控制部2202例如也可以以在特定范围621内,当用户终端140接近特定范围621的边界面时,减小声音、光、振动中的任一个的输出的方式,进行控制。
此外,输出装置控制部2202例如在用户终端140位于特定范围621内而输出光、声音、振动中的任一个时,也可以根据对应的运行信息来控制输出。在该情况下,例如,在多个特定范围中分别登记有不同的运行信息,且用户终端140跨该多个特定范围移动的情况下,振动的大小、音量、图像内容、光的颜色或量中的任一个发生变化。
注意,在1个特定范围内的各位置上登记了不同的运行信息的情况下,在用户终端140在该1个特定范围内移动期间,振动的大小、音量、图像内容、光的颜色或量中的任一个发生变化。
这样,通过以使用户能够掌握所登记的特定范围的方式,使用用户终端140的输出功能来控制输出,用户211能够经由用户终端140掌握:
·真实空间中的哪个范围被登记为特定范围,以及
·登记了哪些运行信息。
<小结>
从以上说明可知,第3实施方式的空调系统100在上述第1实施方式中说明了的功能的基础上,还具有下述功能:
·根据对用户终端的移动操作来控制输出。
由此,根据第3实施方式,能够享受与上述第1实施方式相同的效果,并且用户能够经由用户终端140掌握所登记的特定范围。
[第4实施方式]
在上述第1实施方式中,对在计算表示用户终端140在真实空间中的位置的坐标信息时使用下述电波信息和拍摄图像的情况进行了说明:
·由电波收发装置310(三维位置测量传感器的一例)获取的电波信息(激光的反射信号),以及
·由摄像装置120拍摄的拍摄图像(RGB图像)。
然而,计算表示用户终端140在真实空间中的位置的坐标信息的方法不限于此。例如,也可以通过由真实空间210或220内的安装位置不同的多个摄像装置120构成三维位置测量传感器,并对下述拍摄图像进行匹配,来计算表示用户终端140在真实空间中的位置的坐标信息:
·由第1摄像装置120拍摄的拍摄图像、
·由第2摄像装置120拍摄的拍摄图像、
……
·由第α摄像装置120拍摄的拍摄图像。
或者,可以使用SLAM(Simultaneous Localization and Mapping,同步定位与地图构建)技术来计算表示用户终端140在真实空间中的位置的坐标信息。具体而言,可以通过使三维位置测量传感器由通过臂安装在真实空间210或220内的摄像装置120构成,并且在用户终端140上安装用于发出摄像装置120能够接受的高亮度的光的传感器,并对下述三维空间数据与相对位置数据进行对照,来计算表示用户终端140在真实空间中的位置的坐标信息。
·由一边使摄像装置120摆动一边拍摄而得到的拍摄图像获取的三维空间数据,
·通过由摄像装置120接收由用户终端140发出的高亮度的光而获取的、用户终端140与摄像装置120的相对位置数据。
此外,在上述第1实施方式和本实施方式中,说明了使用用户终端140以外的装置获取的数据,由用户终端140以外的装置(空调装置的控制装置)计算表示用户终端140在真实空间中的位置的坐标信息的情况。
然而,表示用户终端140在真实空间中的位置的坐标信息也可以由用户终端140使用用户终端140获取的数据来计算。具体而言,也可以在用户终端140中提供能够基于由用户终端140的摄像装置327拍摄的拍摄图像来生成深度地图的API(ApplicationProgramming Interface:应用编程接口),并对下述深度地图与布局信息进行对照,来计算表示用户终端140在真实空间中的位置的坐标信息:
·使用API基于由摄像装置327拍摄的拍摄图像而生成的深度地图,
·真实空间210或220内的布局信息(三维数据等形状数据)。
图23是示出表示用户终端在真实空间中的位置的坐标信息的计算例的图。图23的计算例表示在对用户终端140的移动操作期间用户终端140总是拍摄真实空间210或220内的情形。
在图23中,拍摄图像2301和拍摄图像2302示出了在不同时刻拍摄的拍摄图像。如图23所示,通过使用从不同位置拍摄的拍摄图像2301和拍摄图像2302,在用户终端140,能够基于对极几何来计算距配置在真实空间210或220内的物体的特征点X的深度距离l1、l2
这里,假设预先获取了物体2303的坐标信息(a,b,c)作为物体的布局信息。在这种情况下,用户终端140能够基于物体的坐标信息(a,b,c)和计算出的深度距离l1和l2来计算用户终端140的当前坐标信息(x,y,z)。
这样,假设用于计算表示用户终端140在真实空间中的位置的坐标信息的传感器的结构、数量以及配置是任意的,选择适合于真实空间的环境的组合。
[第5实施方式]
在上述第1实施方式中,主要说明了将真实空间内的规定的区域(不存在对象物的区域)登记为特定范围的情况。或者,在上述第1实施方式中,说明了在将存在对象物的区域登记为特定范围的情况下预先存储有存在该对象物的物体区域的坐标信息。
与此相对,在第5实施方式中,对将真实空间内的对象物或人、或者存在这些部位的区域登记为特定范围的情况进行说明。此外,在第5实施方式中,说明在将存在对象物(或其部位)的区域作为特定范围进行登记时不预先存储该对象物的物体区域的坐标信息而每次进行计算的情况。
<用户终端的功能配置>
首先,对第5实施方式的用户终端140的功能结构(这里是指与基准位置计算处理有关的功能结构)进行详细说明。图24是示出用户终端的功能配置的例子的图。
在第5实施方式中,用户终端140通过执行空调操作程序,作为拍摄图像获取部2401、深度地图生成部2402、对象物检测部2403、中心位置决定部2404发挥功能。
拍摄图像获取部2401获取由摄像装置327拍摄的拍摄图像,并通知给深度地图生成部2402和对象物检测部2403。
对象物检测部2403检测由拍摄图像获取部2401获取的拍摄图像中所包含的对象物,并从检测出的对象物中提取由用户指定的类型的对象物,通知给深度地图生成部2402。
深度地图生成部2402是基于拍摄图像生成深度地图的API。深度地图生成部2402基于由拍摄图像获取部2401通知的拍摄图像,生成真实空间210或220内的深度地图。
此外,深度地图生成部1422在所生成的深度地图中确定与由对象物检测部2403通知的对象物对应的区域,并通知给中心位置决定部2404。
中心位置决定部2404基于由深度地图生成部2402确定的区域的深度地图,计算由对象物检测部2403通知的对象物的中心位置信息。
此外,中心位置决定部2404将计算出的中心位置信息发送到空调装置110的控制装置。
<特定范围输入部的功能结构>
接着,对在第5实施方式的空调装置110的控制装置中通过执行登记程序而实现的特定范围输入部501的功能结构(这里是指与特定范围的决定有关的功能结构)进行说明。图25是示出特定范围输入部的功能结构的一例的图。与图6所示的特定范围输入部的不同点在于,在图25的情况下具有中心位置信息获取部2501、以及特定范围决定部2502的功能与图6的特定范围决定部607的功能不同。
中心位置信息获取部2501从用户终端140获取中心位置信息,并通知给特定范围决定部2502。
特定范围决定部2502参照形状存储部610获取特定范围的规定形状的形状信息(例如,球状信息)。此外,特定范围决定部607基于由中心位置信息获取部2501通知的中心位置信息、由半径信息确定部605通知的半径信息(R)、以及由形状存储部610获取的球状信息,决定特定范围信息。
<中心位置决定处理的具体例>
接着,对由用户终端140执行的中心位置决定处理的具体例的模式(1)至(4)进行说明。
(1)模式1
图26是示出中心位置决定处理的具体例的第1图。如图26所示,通过由用户终端140的摄像装置327拍摄真实空间220,拍摄图像获取部2401在显示屏幕上显示拍摄图像2610,且对象物检测部2403检测拍摄图像2610中所包含的多个物体。此外,深度地图生成部2402基于拍摄图像2610生成深度地图。
通过显示拍摄图像2610,用户211对要检测的对象物的类型进行指示操作。图26的例子示出了用户211指示“物体”作为要检测的对象的类型的情形。
当指示“物体”作为要检测的对象物的类型时,对象物检测部2403将检测到的多个物体之中最接近用户终端140的物体确定为对象物,并将所确定的对象物通知给深度地图生成部2402。注意,图26的例子示出了最靠近用户终端140的“桌子”被确定为对象物的情形。
当确定了对象物时,深度地图生成部2402从所生成的深度地图中识别所确定的对象物的区域,并通知给中心位置决定部2404。
中心位置决定部2404基于所通知的对象物的区域的深度地图,计算对象物的中心位置信息。在图26中,附图标记2620表示由中心位置决定部2404计算出的中心位置信息。
注意,附图标记2620所表示的中心位置信息被输入到特定范围输入部501中,以中心位置信息为基准的周边范围被决定为特定范围2630。
(2)模式2
图27是示出中心位置决定处理的具体例的第2图。如图27所示,通过由用户终端140的摄像装置327拍摄真实空间220,拍摄图像获取部2401在显示屏幕上显示拍摄图像2710,且对象物检测部2403检测拍摄图像2710中所包含的多个物体。此外,深度地图生成部2402基于拍摄图像2710生成深度地图。
通过显示拍摄图像2710,用户211对要检测的对象物的类型进行指示操作。图27的例子示出了用户211指示“人”作为要检测的对象物的类型的情形。
当指示“人”作为要检测的对象物的类型时,对象物检测部2403将检测到的多个物体之中最接近用户终端140的人确定为对象物,并将所确定的对象物通知给深度地图生成部2402。注意,图27的例子示出了最接近用户终端140的用户222被确定为对象物的情形。
当确定了对象物时,深度地图生成部2402从所生成的深度地图中识别所确定的对象物的区域,并通知给中心位置决定部2404。
中心位置决定部2404基于所通知的对象物的区域的深度地图,计算对象物的中心位置信息。在图27中,附图标记2720表示由中心位置决定部2404计算出的中心位置信息。
注意,附图标记2720所表示的中心位置信息被输入到特定范围输入部501中,以中心位置信息为基准的周边范围被决定为特定范围2730。
(3)模式3
图28是示出中心位置决定处理的具体例的第3图。如图28所示,通过由用户终端140的摄像装置327拍摄真实空间220时,拍摄图像获取部2401在显示屏幕上显示拍摄图像2810,且对象物检测部2403检测拍摄图像2810中所包含的多个物体。此外,深度地图生成部2402基于拍摄图像2810生成深度地图。
通过显示拍摄图像2810,用户211对要检测的对象物的部位进行选择指示操作。图28的例子示出了用户211指示选择“人”的“头部”作为要检测的对象物的部位的情形。
当指示选择“人”的“头部”作为要检测的对象物的部位时,对象物检测部2403将检测到的多个物体之中最接近用户终端140的人的头部确定为对象物,并将所确定的对象物通知给深度地图生成部2402。图28的例子示出了最接近用户终端140的用户222的头部被确定为对象物的情形。
当确定了对象物时,深度地图生成部2402从所生成的深度地图中识别所确定的对象物的区域,并通知给中心位置决定部2404。
中心位置决定部2404基于所通知的对象物的区域的深度地图,计算对象物的中心位置信息。在图28中,附图标记2820表示由中心位置决定部2404计算出的中心位置信息。
注意,附图标记2820所表示的中心位置信息被输入到特定范围输入部501中,以中心位置信息为基准的周边范围被决定为特定范围2830。
(4)模式4
图29是示出中心位置决定处理的具体例的第4图。如图29所示,通过由用户终端140的摄像装置327拍摄真实空间220,拍摄图像获取部2401在显示屏幕上显示拍摄图像2910,且对象物检测部2403检测拍摄图像2810中所包含的多个物体。此外,深度地图生成部2402基于拍摄图像2910生成深度地图。
通过显示拍摄图像2910,用户211对要检测的对象物进行指示操作。注意,假设显示拍摄图像2910的显示屏幕能够被指示。图29的例子示出了通过由用户211指示显示屏幕上的“笔记本PC”的位置来接受关于要检测的对象物的指示操作的情形。
当“笔记本PC”被指示操作作为要检测的对象物时,对象物检测部2403将检测到的多个物体之中被指示操作的“笔记本PC”确定为对象物,并将所确定的对象物通知给深度地图生成部2402。
当确定了对象物时,深度地图生成部2402从所生成的深度地图中识别所确定的对象物的区域,并通知给中心位置决定部2404。
中心位置决定部2404基于所通知的对象物的区域的深度地图,计算对象物的中心位置信息。在图29中,附图标记2920表示由中心位置决定部2404计算出的中心位置信息。
注意,附图标记2920所表示的中心位置信息被输入到特定范围输入部501中,以中心位置信息为基准的周边范围被决定为特定范围2930。
<小结>
从以上说明可知,第5实施方式的空调系统100中:
·用户终端能够接受对象物的指示操作,将以用户终端所接受的对象物在真实空间中的中心位置信息为基准的周边范围,决定为特定范围;
·用户终端能够接受对象物的部位的选择指示操作,将以用户终端所接受的对象物的部位在真实空间中的中心位置信息为基准的周边范围,决定为特定范围;
·显示由用户终端的摄像装置拍摄的拍摄图像的显示画面构成为能够被指示,用户终端将拍摄图像所包含的多个物体之中被指示的位置的物体,确定为对象物。
由此,根据第5实施方式,能够将存在对象物的区域登记为特定范围,并且能够经由显示在用户终端上的拍摄图像来确定对象物。
[其他实施方式]
在上述各实施方式,构成为设定温度、风向、风量作为与特定范围相关联的运行信息,但能够作为与特定范围相关联的运行信息登记的登记项目并不限定于这些。
此外,在上述各实施方式中,说明了特定范围输入部501在空调装置110内的控制装置中实现的情况,但特定范围输入部501也可以在空调装置110内的控制装置以外的装置中实现。或者,也可以在空调装置110外的装置(空调系统100内的任意装置)中实现。
同样地,在上述各实施方式中,说明了特定范围输出部503在空调装置110内的控制装置或用户终端140中实现的情况,但特定范围输出部503也可以在空调装置110内的控制装置以外的装置中实现。或者,也可以在空调装置110及用户终端140以外的装置(空调系统100内的任意装置)中实现。
此外,在上述各实施方式中,说明了空调系统100具有空调装置110、摄像装置120、显示装置130和用户终端140的情况。但是,空调系统100的结构并不限定于此,例如也可以包括控制多个空调装置110的服务器装置。此外,在包含服务器装置的情况下,特定范围输入部501、特定范围输出部503也可以在该服务器装置中实现。
此外,在上述各实施方式中,说明了通过规定的设定操作来决定特定范围的大小的情况,但也可以构成为通过规定的设定操作来决定特定范围的形状。
此外,在上述第1实施方式中,作为决定特定范围的大小时的设定操作,例示了n次点击操作和规定时间的持续按压操作,但决定特定范围的大小时的设定操作不限于这些。例如,也可以构成为,基于对用户终端140进行起点的设定操作时的用户终端140的坐标信息、以及和进行终点的设定操作时的用户终端140的坐标信息,决定特定范围的大小。
或者,也可以构成为,在将以中心位置信息为基准的周边范围决定为特定范围的情况下,基于进行终点的设定操作时的用户终端的坐标信息、以及中心位置信息,决定特定范围的大小。
此外,在上述第2实施方式中,对在用户终端140的摄像装置327拍摄的拍摄图像上重叠特定范围图像(三维图像)的情况进行了说明,但重叠特定范围图像的对象不限于拍摄图像。例如,也可以将特定范围图像重叠在与真实空间210或220中的布局信息相关联的真实空间210或220的图像(静止图像)上。这是因为,如果在静止图像的各位置与真实空间210或220的坐标信息相关联,则能够适当地重叠特定范围图像。
此外,在上述第3实施方式中,说明了基于输出装置控制部2202的有关规定的刺激(声音、光或振动)的针对用户的通知方法的变形例,但针对用户的通知方法的变形例不限于此。
例如,如上述第5实施方式那样,在能够接受关于对象物的指示操作的情况下,也可以根据特定范围是否是由对象物的真实空间中的中心位置信息而决定的,通知不同的刺激。具体而言,也可以构成为,在将不存在对象物的区域决定为特定范围的情况下,与在将存在对象物的区域决定为特定范围的情况下,用户终端140位于特定范围内时的刺激不同。
此外,如上述第5实施方式所示,也可以构成为,在作为对象物能够接受“人”的指示操作的情况下,根据对象物是否是人,通知不同的刺激。具体而言,也可以构成为,在存在对象物的区域被决定为特定范围的情况下,在该对象物是人时,与在该对象物是人以外的物体时,用户终端140位于特定范围内时的刺激不同。
此外,在上述各实施方式中,作为用户终端140例示了智能手机141、遥控器142、可穿戴设备等,但用户终端140也可以不是电子设备。例如,如在上述第1实施方式中说明的模式3至模式5那样,在通过对用户终端140的移动操作来决定特定范围的情况下,也可以是没有内置电子设备的单纯的壳体。在该情况下,壳体的形状是任意的,例如也可以是棒状的部件。
此外,上述各实施方式以在空调系统中实现的方式进行了说明,但作为对象的系统并不限于空调系统,也可以是其他系统,只要是在真实空间内决定特定范围并登记所决定的特定范围的登记系统即可。即,在上述各实施方式中说明的空调系统是登记系统的一个应用例。
以上对实施方式进行了说明,但可以理解,在不脱离权利要求的主旨及范围的情况下,可以对形态及细节进行各种变更。
本申请基于2021年3月31日提交的日本专利申请第2021-059231号主张其优先权,通过参照该日本专利申请的全部内容而援引于本申请中。
附图标记说明
100:空调系统
110:空调装置
120:摄像装置
130:显示装置
140:用户终端
210、220:真实空间
326:显示装置
327:摄像装置
330:声音输出装置
331:振动装置
400:操作画面
501:特定范围输入部
503:特定范围输出部
601:拍摄图像获取部
602:电波信息获取部
603:位置信息获取部
604:操作内容获取部
605:半径信息确定部
607:特定范围决定部
701:操作内容获取部
801:操作内容获取部
802:中心位置/半径信息计算部
803:特定范围决定部
902:特定范围决定部
1001:投影方向判定部
1002:特定范围决定部
1101:操作内容获取部
1102:对象区域计算部
1103:特定范围决定部
1111:操作内容获取部
1112:基准位置计算部
1113:对象区域计算部
1114:特定范围决定部
1201:操作内容获取部
1202:删除对象判定部
1203:特定范围删除部
1301:操作内容获取部
1302:移动对象判定部
1303:特定范围更新部
1401:操作内容获取部
1402:运行信息获取部
1403:运行信息设定部
1501:操作内容获取部
1502:反转指示获取部
1503:运行信息更新部
1601:特定范围信息获取部
1602:拍摄图像获取部
1603:特定范围图像生成部
1611:拍摄图像
1612:特定范围图像
1901、1902:特定范围
2001:发送部
2002:特定范围输出部
2101:拍摄图像获取部
2102:电波信息获取部
2103:位置信息获取部
2104:位置信息发送部
2105:特定范围信息获取部
2106:特定范围发送部
2111:位置信息获取部
2112:特定范围信息获取部
2113:特定范围图像生成部
2114:拍摄图像获取部
2115:显示控制部
2121、2131:拍摄图像
2122、2132:显示图像
2201:位置关系判定部
2202:输出装置控制部
2401:拍摄图像获取部
2402:深度地图生成部
2403:对象物检测部
2404:中心位置决定部
2501:中心位置信息获取部
2502:特定范围决定部。

Claims (23)

1.一种登记系统,其具有控制部和存储部,其中,
所述控制部将基于用户终端在真实空间中的位置信息和对所述用户终端的操作内容而决定的所述真实空间内的特定范围,登记在所述存储部中。
2.根据权利要求1所述的登记系统,其中,
所述控制部基于对所述用户终端进行了移动操作时的所述用户终端的位置信息的轨迹,决定所述真实空间内的特定范围,并登记在所述存储部中。
3.根据权利要求1所述的登记系统,其中,
所述用户终端能够接受指示操作,
所述控制部将以所述用户终端接受指示操作时的所述用户终端的位置信息为基准的周边范围,决定为所述特定范围,并登记在所述存储部中。
4.根据权利要求1所述的登记系统,其中,
所述用户终端能够接受指示操作,
所述控制部将以通过由所述用户终端接受指示操作而确定的对象物在所述真实空间中的位置信息为基准的周边范围,决定为所述真实空间内的特定范围,并登记在所述存储部中。
5.根据权利要求4所述的登记系统,其中,
所述用户终端能够接受选择指示操作,
所述控制部将以通过由所述用户终端接受选择指示操作而确定的所述对象物的部位在所述真实空间中的位置信息为基准的周边范围,决定为所述真实空间内的特定范围,并登记在所述存储部中。
6.根据权利要求1所述的登记系统,其中,
所述用户终端能够接受设定操作,
所述控制部基于所述用户终端接受的设定操作,决定所述特定范围的大小或形状。
7.根据权利要求6所述的登记系统,其中,
所述用户终端能够接受设定操作,
所述控制部基于所述用户终端接受起点的设定操作时的所述用户终端的位置信息、或决定所述特定范围时作为基准的位置信息,以及所述用户终端接受终点的设定操作时的所述用户终端的位置信息,来决定所述特定范围的大小。
8.根据权利要求4所述的登记系统,其中,
所述用户终端具有:摄像装置;以及显示装置,显示由所述摄像装置拍摄的图像,
所述用户终端的控制部将所述图像中所包含的物体,确定为所述对象物。
9.根据权利要求4所述的登记系统,其中,
所述用户终端具有:摄像装置;以及显示装置,将由所述摄像装置拍摄的图像显示在画面上,并且能够指示显示有图像的画面上的位置,
所述用户终端的控制部将所述图像中所包含的多个物体之中被指示的位置的物体,确定为所述对象物。
10.根据权利要求1所述的登记系统,其中,
所述用户终端具有显示图像的显示装置,
所述用户终端的控制部在所述图像上重叠表示所述特定范围的图像,并显示在所述显示装置上。
11.根据权利要求10所述的登记系统,其中,
所述用户终端具有摄像装置,
所述用户终端的控制部在由所述摄像装置拍摄的图像上,重叠基于所述用户终端在真实空间中的位置信息和姿势信息而生成的、表示所述特定范围的三维图像,来进行显示。
12.根据权利要求1所述的登记系统,其中,
所述用户终端具有输出装置,
在所述用户终端位于所述真实空间内的特定范围内的情况下,所述输出装置通知刺激。
13.根据权利要求1所述的登记系统,其中,
所述用户终端具有输出装置,
所述输出装置根据所述真实空间内的特定范围与所述用户终端的位置关系,通知不同的刺激。
14.根据权利要求4所述的登记系统,其中,
所述用户终端具有输出装置,
在所述用户终端位于所述真实空间内的特定范围内的情况下,所述输出装置根据所述特定范围是否是由所述对象物在所述真实空间的位置信息而决定的,通知不同的刺激,或者
在所述特定范围是由所述对象物在所述真实空间的位置信息而决定的情况下,根据上述对象物是否是人,通知不同的刺激。
15.根据权利要求1所述的登记系统,其中,
所述用户终端具有传感器,
所述用户终端的控制部通过将所述真实空间的形状数据与由所述传感器测量出的数据进行对照,来计算所述用户终端在真实空间中的位置信息。
16.根据权利要求15所述的登记系统,其中,
所述传感器是摄像装置,
所述用户终端的控制部通过将所述真实空间内的三维数据与基于由所述装置拍摄到的拍摄图像而生成的地图进行对照,来计算所述用户终端在真实空间中的位置信息。
17.根据权利要求1所述的登记系统,其中,
所述控制部基于由安装在所述真实空间内的三维位置测量传感器测量出的数据,来计算所述用户终端在真实空间中的位置信息。
18.根据权利要求17所述的登记系统,其中,
所述三维位置测量传感器由安装位置不同的多个摄像装置构成,
所述控制部通过使由所述多个摄像装置分别拍摄到的拍摄图像进行匹配,来计算所述用户终端在真实空间中的位置信息。
19.根据权利要求1所述的登记系统,其中,
所述控制部通过将由所述用户终端具有的传感器测量出的数据与由安装在所述真实空间内的传感器测量出的数据进行对照,来计算所述用户终端在真实空间中的位置信息。
20.根据权利要求1所述的登记系统,其中,
所述用户终端能够接受空调指示操作,
在所述用户终端接受了空调指示操作的情况下,所述控制部对所述存储部中所登记的所述真实空间内的特定范围,进行空调控制。
21.根据权利要求20所述的登记系统,其中,
所述控制部通过使用安装在所述真实空间的多个空调装置,对所述存储部中所登记的所述真实空间内的特定范围与特定范围以外的非特定范围,执行不同的空调控制。
22.一种空调系统,包括根据权利要求1至21中任一项所述的登记系统。
23.一种登记程序,用于使控制部执行:
登记工序,将基于用户终端在真实空间中的位置信息和对所述用户终端的操作内容而决定的所述真实空间内的特定范围,登记在存储部中。
CN202280023032.6A 2021-03-31 2022-03-31 登记系统、空调系统和登记程序 Pending CN117044225A (zh)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
JP2021-059231 2021-03-31
JP2021059231 2021-03-31
PCT/JP2022/016825 WO2022211083A1 (ja) 2021-03-31 2022-03-31 登録システム、空気調和システム及び登録プログラム

Publications (1)

Publication Number Publication Date
CN117044225A true CN117044225A (zh) 2023-11-10

Family

ID=83459646

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202280023032.6A Pending CN117044225A (zh) 2021-03-31 2022-03-31 登记系统、空调系统和登记程序

Country Status (5)

Country Link
US (1) US20240175597A1 (zh)
EP (1) EP4319183A1 (zh)
JP (2) JP7189484B2 (zh)
CN (1) CN117044225A (zh)
WO (1) WO2022211083A1 (zh)

Family Cites Families (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2002099971A (ja) * 2000-09-22 2002-04-05 Sanyo Electric Co Ltd 緊急通報システム及び緊急通報装置
JP4983449B2 (ja) * 2007-07-12 2012-07-25 株式会社デンソー 車載ナビゲーション装置及び車載ナビゲーションシステム
JP5153608B2 (ja) * 2008-12-24 2013-02-27 京セラ株式会社 携帯端末、携帯端末の制御方法およびプログラム
JP5640904B2 (ja) * 2011-06-09 2014-12-17 株式会社Jvcケンウッド 携帯型受信機および放送受信方法
JP6616068B2 (ja) * 2014-10-20 2019-12-04 パイオニア株式会社 端末装置、エネルギー供給装置、サーバ装置、航行可能範囲表示方法、航行可能範囲表示プログラムおよび記録媒体
JP6732522B2 (ja) * 2016-05-02 2020-07-29 キヤノン株式会社 画像処理装置、画像処理方法およびプログラム
JP6903404B2 (ja) 2016-05-26 2021-07-14 三菱電機ビルテクノサービス株式会社 空気調和機
JP2018063537A (ja) * 2016-10-12 2018-04-19 株式会社東芝 ホームネットワーク、電子機器、処理装置および表示方法
JP7375440B2 (ja) 2019-10-07 2023-11-08 住友ゴム工業株式会社 空気入りタイヤ

Also Published As

Publication number Publication date
WO2022211083A1 (ja) 2022-10-06
JP2022159213A (ja) 2022-10-17
JP2023025145A (ja) 2023-02-21
JP7189484B2 (ja) 2022-12-14
US20240175597A1 (en) 2024-05-30
EP4319183A1 (en) 2024-02-07

Similar Documents

Publication Publication Date Title
JP4142460B2 (ja) 運動検出装置
KR101330805B1 (ko) 증강 현실 제공 장치 및 방법
JP5093053B2 (ja) 電子カメラ
US10917560B2 (en) Control apparatus, movable apparatus, and remote-control system
US10022626B2 (en) Information processing system, information processing apparatus, storage medium having stored therein information processing program, and information processing method, for performing augmented reality
JP2005167517A (ja) 画像処理装置、画像処理装置のキャリブレーション方法及び画像処理プログラム
CN105393079A (zh) 基于上下文的深度传感器控制
CN103907340A (zh) 图像生成装置和图像生成方法
JP6843164B2 (ja) プログラム、方法、および情報処理装置
JP6788845B2 (ja) 遠隔通信方法、遠隔通信システム及び自律移動装置
US11991477B2 (en) Output control apparatus, display terminal, remote control system, control method, and non-transitory computer-readable medium
KR101959366B1 (ko) 무인기와 무선단말기 간의 상호 인식 방법
US20040220767A1 (en) Image processing method and apparatus therefor
CN112135034A (zh) 基于超声波的拍照方法、装置、电子设备及存储介质
JP5152281B2 (ja) 画像処理装置、方法及びプログラム
TW202041882A (zh) 擴增實境系統及決定移動感測器型號與安裝位置的方法
US11445107B2 (en) Supervised setup for control device with imager
CN105814604A (zh) 用于提供位置信息或移动信息以用于控制车辆的至少一种功能的方法和系统
CN117044225A (zh) 登记系统、空调系统和登记程序
JP7379785B2 (ja) 3dツアーの比較表示システム及び方法
CN115904188A (zh) 户型图的编辑方法、装置、电子设备及存储介质
US20130155211A1 (en) Interactive system and interactive device thereof
US20200045234A1 (en) Image display method, image display system and virtual window
US20230300314A1 (en) Information processing apparatus, information processing system, and information processing method
CN104750248B (zh) 电子装置配对方法

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination