CN112005246A - 信息管理系统 - Google Patents

信息管理系统 Download PDF

Info

Publication number
CN112005246A
CN112005246A CN201980023874.XA CN201980023874A CN112005246A CN 112005246 A CN112005246 A CN 112005246A CN 201980023874 A CN201980023874 A CN 201980023874A CN 112005246 A CN112005246 A CN 112005246A
Authority
CN
China
Prior art keywords
person
data
unit
information
management system
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN201980023874.XA
Other languages
English (en)
Inventor
北川慧太
半田阳一
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Daikin Industries Ltd
Original Assignee
Daikin Industries Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Daikin Industries Ltd filed Critical Daikin Industries Ltd
Priority claimed from PCT/JP2019/012850 external-priority patent/WO2019189179A1/ja
Publication of CN112005246A publication Critical patent/CN112005246A/zh
Pending legal-status Critical Current

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q50/00—Systems or methods specially adapted for specific business sectors, e.g. utilities or tourism
    • G06Q50/10—Services
    • G06Q50/26—Government or public services
    • G06Q50/265—Personal security, identity or safety
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/10—Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q10/00—Administration; Management
    • G06Q10/10—Office automation; Time management
    • G06Q10/109—Time management, e.g. calendars, reminders, meetings or time accounting
    • G06Q10/1091—Recording time for administrative or management purposes
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q50/00—Systems or methods specially adapted for specific business sectors, e.g. utilities or tourism
    • G06Q50/10—Services
    • G06Q50/20—Education
    • G06Q50/205—Education administration or guidance
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00—Image analysis
    • G06T7/70—Determining position or orientation of objects or cameras
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V20/00—Scenes; Scene-specific elements
    • G06V20/50—Context or environment of the image
    • G06V20/52—Surveillance or monitoring of activities, e.g. for recognising suspicious objects
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/20—Movements or behaviour, e.g. gesture recognition
    • G—PHYSICS
    • G07—CHECKING-DEVICES
    • G07C—TIME OR ATTENDANCE REGISTERS; REGISTERING OR INDICATING THE WORKING OF MACHINES; GENERATING RANDOM NUMBERS; VOTING OR LOTTERY APPARATUS; ARRANGEMENTS, SYSTEMS OR APPARATUS FOR CHECKING NOT PROVIDED FOR ELSEWHERE
    • G07C1/00—Registering, indicating or recording the time of events or elapsed time, e.g. time-recorders for work people
    • G07C1/10—Registering, indicating or recording the time of events or elapsed time, e.g. time-recorders for work people together with the recording, indicating or registering of other data, e.g. of signs of identity
    • G—PHYSICS
    • G07—CHECKING-DEVICES
    • G07C—TIME OR ATTENDANCE REGISTERS; REGISTERING OR INDICATING THE WORKING OF MACHINES; GENERATING RANDOM NUMBERS; VOTING OR LOTTERY APPARATUS; ARRANGEMENTS, SYSTEMS OR APPARATUS FOR CHECKING NOT PROVIDED FOR ELSEWHERE
    • G07C9/00—Individual registration on entry or exit
    • G07C9/20—Individual registration on entry or exit involving the use of a pass
    • G07C9/28—Individual registration on entry or exit involving the use of a pass the pass enabling tracking or indicating presence
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00—Television systems
    • H04N7/18—Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast
    • H04N7/183—Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast for receiving images from a single remote source
    • H04N7/185—Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast for receiving images from a single remote source from a mobile camera, e.g. for remote control
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00—Indexing scheme for image analysis or image enhancement
    • G06T2207/30—Subject of image; Context of image processing
    • G06T2207/30196—Human being; Person

Landscapes

  • Engineering & Computer Science (AREA)
  • Business, Economics & Management (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • Human Resources & Organizations (AREA)
  • Tourism & Hospitality (AREA)
  • Strategic Management (AREA)
  • Multimedia (AREA)
  • Educational Administration (AREA)
  • General Health & Medical Sciences (AREA)
  • Health & Medical Sciences (AREA)
  • General Business, Economics & Management (AREA)
  • Marketing (AREA)
  • Economics (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Human Computer Interaction (AREA)
  • Educational Technology (AREA)
  • Primary Health Care (AREA)
  • Entrepreneurship & Innovation (AREA)
  • Signal Processing (AREA)
  • Development Economics (AREA)
  • Psychiatry (AREA)
  • Social Psychology (AREA)
  • Computer Security & Cryptography (AREA)
  • Quality & Reliability (AREA)
  • Operations Research (AREA)
  • Data Mining & Analysis (AREA)
  • Image Analysis (AREA)
  • Telephonic Communication Services (AREA)
  • Alarm Systems (AREA)
  • Time Recorders, Dirve Recorders, Access Control (AREA)
  • Management, Administration, Business Operations System, And Electronic Commerce (AREA)

Abstract

管理系统(100)具有摄影单元(40)、数据生成部(63)、存储部(61)以及管理部(64)。数据生成部(63)基于摄影数据(D1)中包含的人物(PS)的特征，提取对象空间(SP)内的人物(PS)。数据生成部(63)生成提取数据(D2)。提取数据(D2)是与提取出的人物(PS)相关联的数据。存储部(61)存储数据生成部(63)生成的提取数据(D2)。管理部(64)基于提取数据(D2)来管理对象空间(SP)中存在的人物(PS)的信息。

Description

信息管理系统
技术领域
本申请涉及信息管理系统。
背景技术
以往，如例如专利文献1(日本特开2017-45373号公报)所公开的那样，已知一种在对象空间(例如公司内、学校内等)中使用多个摄影设备的图像对人的所在进行管理的系统。在专利文献1中，通过根据摄影设备的图像取得人所佩戴的帽子上贴附的代码来识别人物。
发明内容
发明要解决的问题
在专利文献1中，对于没有佩戴贴附有代码的帽子的人无法进行提取。因此，无法管理对象空间中存在的特定的人以外的信息。
本申请提供一种能够管理对象空间中存在的人的信息的系统。
用于解决问题的方案
第1观点的信息管理系统具备摄影设备、数据生成部、存储部以及管理部。摄影设备设置于对象空间。数据生成部基于摄影设备拍摄到的图像中包含的人的特征来提取对象空间内的人。数据生成部生成人物数据。人物数据是与提取出的人相关联的数据。存储部存储数据生成部所生成的人物数据。管理部基于人物数据管理对象空间中存在的人的信息。
由此，识别设置于对象空间的摄影设备的摄影图像中包含的人的特征，基于与提取/确定出的人相关联地生成的人物数据，管理对象空间中存在的人的信息。其结果，能够容易地管理对象空间中的人的信息(例如所在信息、所在履历等的信息)。即，能够管理对象空间中存在的人。
此外，在此的“图像”包括静止图像和/或动图像。
另外，在此的“存储部”包括暂时存储人物数据的主存储部和/或存储物品数据的大容量的辅助存储部。
另外，在此的“提取”包括针对图像中包含的人进行人与物的识别、个别人的确定或动作内容的判别。
第2观点的信息管理系统在第1观点的信息管理系统中，数据生成部提取摄影设备拍摄到的图像中包含的人的所在位置。人物数据包括与人的所在位置有关的信息。
第3观点的信息管理系统在第1观点或第2观点的信息管理系统中，数据生成部提取摄影设备拍摄到的图像中包含的人的所在时刻。人物数据包括与提取出的人的所在时刻有关的信息。通过掌握人的所在时刻，能够掌握特定的人的所在履历。
第4观点的信息管理系统在第1观点至第3观点中的任一信息管理系统中，数据生成部提取摄影设备拍摄到的图像中包含的人的行动内容。人物数据包括与提取出的人的行动内容有关的信息。由此，能够掌握提取出的人的具体的行动内容。
第5观点的信息管理系统在第1观点或第2观点的信息管理系统中，数据生成部提取摄影设备拍摄到的图像中包含的人的所在时刻及行动内容。人物数据包括与提取出的人的所在时刻及行动内容有关的信息。由此，能够掌握提取出的人的所在时刻及具体的行动内容这双方。
此外，在第4观点或第5观点的信息管理系统中，“行动内容”不仅包括人在/不在对象空间中，还包括对象空间中的人的具体的行为、作业内容。例如，“行动内容”包括“读书”、“记笔记”、“使用PC的作业”、“PC中状态最活跃的应用(即主要正在使用的应用)”、“使用电话进行通话”、“对话”、“对话的对象”、“开会”、“吃饭”、“喝水”、“摄取的食物的内容(品种、摄取量或剩余量等)”、“使用打印机的作业”、“清扫作业”、“生产线上的作业”、“步行”或“体操”等人物PS的行动的详情。
第6观点的信息管理系统在第4观点或第5观点的信息管理系统中，数据生成部提取摄影设备拍摄到的图像中包含的人的对话对象来作为行动内容。由此，能够掌握特定的人的对话对象。
第7观点的信息管理系统在第4观点至第6观点中的任一信息管理系统中，人物数据包括与提取出的人的行动内容的履历有关的信息。由此，能够掌握特定的人的行动内容的履历。
第8观点的信息管理系统在第1观点至第7观点中的任一信息管理系统中，数据生成部提取正在使用信息处理设备进行作业的人在信息处理设备中的作业内容。人物数据包括与摄影设备拍摄到的图像中包含的人在信息处理设备中的作业内容有关的信息。由此，能够掌握特定的人在信息处理设备中的作业内容。
第9观点的信息管理系统在第1观点至第8观点中的任一信息管理系统中，还具备输出人物数据的输出部。
第10观点的信息管理系统在第1观点至第9观点中的任一信息管理系统中，数据生成部基于对象空间内的人的动作提取人。由此能够高精度地进行人的提取及个别人的确定。
也可以是，将辨识出步行的动作、进行作业的动作、案头工作、饮食等人特有的动作时正在进行该动作的对象辨识为人。
第11观点的信息管理系统在第1观点至第10观点中的任一信息管理系统中，数据生成部根据图像估计各要素间的距离。数据生成部基于估计出的距离提取人。由此，能够高精度地进行人的提取及个别人的确定。
第12观点的信息管理系统在第1观点至第11观点中的任一信息管理系统中，数据生成部包括学习部。学习部基于摄影设备拍摄到的图像对人的特征进行学习。由此，能够高精度地进行人的提取及个别人的确定。
第13观点的信息管理系统在第1观点至第12观点中的任一信息管理系统中，管理部基于存储部中存储的人物数据，针对对象空间中存在的人，独立地生成人物履历数据。人物履历数据是与人的所在履历或行动履历有关的数据。由此，自动地生成各人的所在履历或行动履历。
第14观点的信息管理系统在第1观点至第13观点中的任一信息管理系统中，具备多个摄影设备。数据生成部基于多个摄影设备拍摄到的图像，识别人的特征。通过具备多个摄影设备，能够广范围地提取人。
第15观点的信息管理系统在第1观点至第14观点中的任一信息管理系统中，摄影设备配置于空调机。空调机设置于对象空间。通过摄影设备配置于空调机，能够在对象空间内广范围地提取人。
此外，在此的“空调机”例如是设置于天花板的天花板埋入型、天花板吊下型的室内单元以及设置于天花板附近的侧壁的壁挂型的室内单元等。
附图说明
图1是管理系统的概要结构图。
图2是表示对象设施中的各设备的设置方式的一例的示意图。
图3是表示对象空间的一例的示意图。
图4是表示对象空间中的室内单元、遥控器及摄影单元的设置方式的一例的示意图。
图5是概要性地表示管理装置的结构方式的示意图。
图6是概要性地表示存储部中包含的存储区域的示意图。
图7是摄影单元信息表(摄影单元信息)的示意图。
图8是人物信息表(人物信息)的示意图。
图9是提取数据的示意图。
图10是人物履历数据的示意图。
图11是概要性地表示提取部的提取处理的一例的示意图。
图12是显示数据的示意图。
图13是表示管理装置的处理的流程的一例的流程图。
图14是变形例1所涉及的提取数据的示意图。
图15是变形例1所涉及的人物履历数据的示意图。
图16是变形例1所涉及的显示数据的示意图。
图17是表示变形例1所涉及的显示数据的显示方式的一例的示意图。
具体实施方式
以下，说明本申请的一个实施方式所涉及的管理系统100(信息管理系统)。此外，以下的实施方式是具体例，并非对技术范围进行限定，能够在不脱离主旨的范围内适当变更。
(1)管理系统100
图1是管理系统100的概要结构图。图2是表示对象设施1中的各设备的设置方式的一例的示意图。管理系统100是用于针对特定的空间(对象空间SP)中存在的人物PS 独立地生成数据(后述的人物履历数据D3)，基于所生成的数据进行各人物PS的信息管理(例如在室管理、所在管理及所在检索等)的系统。管理系统100例如应用于劳动者的考勤管理、行动管理、学校中的学生的出席欠席管理、行动管理、或设施中的安全管理等。
在本实施方式中，管理系统100应用于对象设施1。对象设施1包括对象空间SP。在本实施方式中，对象设施1包括多个对象空间SP(SP1、SP2、SP3、SP4、SP5、SP6 …)。对象空间SP例如是图3所示那样的人物PS进行活动的空间，例如是用作办公室的空间。但是，并不限定于此，对象空间SP也可以用作例如商场等的商业设施、学校、工厂、医院或住宅等。在此的人物PS是在对象设施1中工作、学习、生活的人、访问对象设施1的来访者等。
管理系统100主要具有空调装置10、多个摄影单元40以及管理装置60。
(1-1)空调装置10
空调装置10是用于在对象空间SP中实现制冷、制热等空气调节的装置。空调装置10通过在制冷剂回路中进行蒸汽压缩方式的制冷循环，来进行对象空间SP的制冷或制热。
空调装置10主要具备作为热源单元的室外单元15、作为利用单元的多台(在此为6台以上)的室内单元20(20a、20b、20c、20d、20e、20f、…)以及多个(在此为与室内单元20相同数量)遥控器30(30a、30b、30c、30d、30e、30f、…)。
在本实施方式中，室内单元20a设置于对象空间SP1，室内单元20b设置于对象空间SP2，室内单元20c设置于对象空间SP3，室内单元20d设置于对象空间SP4，室内单元20e设置于对象空间SP5，室内单元20f设置于对象空间SP6。在空调装置10 中，通过利用气体连接配管GP及液体连接配管LP将室外单元15和各室内单元20连接而构成制冷剂回路。
(1-1-1)室外单元15
室外单元15设置在对象空间SP的外部。室外单元15主要具有多个制冷剂配管、压缩机、室外热交换器、膨胀阀等(图示省略)，作为构成制冷剂回路的要素。另外，具有温度传感器及压力传感器等各种传感器、送风机等设备。
另外，室外单元15具有对室外单元15内的各种致动器的动作进行控制的室外单元控制部18。室外单元控制部18具有包括RAM、ROM等存储器和CPU的微型计算机、通信模块、各种电子部件及电气部件。室外单元控制部18经由布线与各种致动器、各种传感器电连接。
室外单元控制部18经由通信线cb1与各室内单元20的室内单元控制部25(后述)连接，相互进行信号的发送接收。另外，室外单元控制部18经由通信线cb2与因特网等包括WAN(Wide Area Network)的广域网络NW1连接，与连接于广域网络NW1的设备(例如服务器50)相互进行信号的发送接收。
(1-1-2)室内单元20
室内单元20是设置于对象空间SP的天花板CI的天花板埋入型或设置于天花板 CI附近的天花板吊下型的空调室内机。图4是表示对象空间SP中的室内单元20、遥控器30及摄影单元40的设置方式的一例的示意图。在图4中，在对象空间SP中，各室内单元20设置成其主体部分的一部分(吸气口及排气口)从天花板CI露出。室内单元 20具有室内热交换器、室内膨胀阀等来作为构成制冷剂回路的要素。另外，室内单元 20具有检测对象空间SP内的温度及制冷剂的温度的温度传感器、压力传感器等各种传感器。
另外，室内单元20具有对室内单元20内的各种致动器(送风机、膨胀阀等)的动作进行控制的室内单元控制部25。室内单元控制部25具有包括RAM、ROM等存储器和 CPU的微型计算机、通信模块、各种电子部件及电气部件。室内单元控制部25经由布线与各种致动器及各种传感器电连接，相互进行信号的发送接收。室内单元控制部 25经由通信线cb1与室外单元控制部18或其他室内单元控制部25连接，相互进行信号的发送接收。另外，室内单元控制部25经由通信线cb3与对应的遥控器30的遥控器控制部35(后述)连接，相互进行信号的发送接收。另外，室内单元控制部25经由通信线 cb4与对应的摄影单元40连接，相互进行信号的发送接收。
(1-1-3)遥控器30
遥控器30与某个室内单元20相对应，设置于与所对应的室内单元20相同的对象空间SP的侧壁SW。具体地说，遥控器30a与室内单元20a相对应。另外，遥控器30b 与室内单元20b相对应，遥控器30c与室内单元20c相对应，遥控器30d与室内单元20d 相对应，遥控器30e与室内单元20e相对应，遥控器30f与室内单元20f相对应。各遥控器30是所谓的有线式的远程控制器装置，经由通信线cb3与所对应的室内单元20(室内单元控制部25)连接。
各遥控器30作为用于将与各种设定有关的命令输入到空调装置10的输入装置发挥功能。另外，遥控器30也作为显示空调装置10的运转状态、设定项目的显示装置发挥功能。
各遥控器30具有对遥控器30的动作进行控制的遥控器控制部35。
(1-2)摄影单元40(摄影设备)
管理系统100具有多个(在此为6个以上)摄影单元40(40a、40b、40c、40d、40e、40f…)。摄影单元40是在所对应的对象空间SP内进行拍摄，生成并输出包括摄影结果的数据(摄影数据D1)的单元。摄影单元40配置于所对应的对象空间SP。在本实施方式中，摄影单元40配置于所对应的对象空间SP的天花板CI(或天花板附近)处设置的室内单元20。摄影单元40设置于天花板CI或天花板附近(与地面相比靠近天花板 CI的部分)，因此能够拍摄对象空间SP的广阔的范围。因此，能够高精度地检测对象空间SP中的人物PS的所在。
在本实施方式中，摄影单元40a配置于对象空间SP1(室内单元20a)，摄影单元40b配置于对象空间SP2(室内单元20b)，摄影单元40c配置于对象空间SP3(室内单元20c)，摄影单元40d配置于对象空间SP4(室内单元20d)，摄影单元40e配置于对象空间 SP5(室内单元20e)，摄影单元40f配置于对象空间SP6(室内单元20f)。
摄影单元40具有摄影部41、摄影数据生成部42以及摄影数据输出部43。摄影部41包括用于对所对应的对象空间SP的规定范围进行拍摄的镜头(没有特别限定，例如为鱼眼镜头、定焦镜头等)以及摄像元件。摄影数据生成部42对由摄影部41的摄像元件输出的电信号进行A/D变换，生成遵循规定的格式的摄影数据D1。摄影数据D1包括以规定的像素表示对象空间SP的规定范围的图像数据(动图像数据)。摄影数据输出部43将生成的摄影数据D1压缩后输出到管理装置60(直接输出到室内单元控制部 25)。
(1-3)管理装置60
管理装置60是对管理系统100的动作进行统一管理的计算机。在本实施方式中，如图5所示，管理装置60是通过经由通信网络将室外单元控制部18、室内单元控制部 25、遥控器控制部35及服务器50连接而构成的。
服务器50是在管理系统100中与室外单元控制部18、室内单元控制部25及遥控器控制部35一起构成管理装置60的计算机。服务器50配置于远离对象空间SP的远处。服务器50构成为通过通信线与广域网络NW1连接，能够经由广域网络NW1与室外单元控制部18、室内单元控制部25及遥控器控制部35进行通信。
管理装置60与摄影单元40及终端90相互进行数据的发送接收。管理装置60基于摄影数据D1进行处理。更具体地说，管理装置60独立地提取摄影数据D1中包含的人物 PS，生成并存储与该人物PS对应的数据(人物履历数据D3)。在此的“提取”包括针对摄影数据D1中包含的人物PS进行人与物的识别、个别人的确认、或动作内容的判别。人物履历数据D3是所提取的一个人物PS在对象设施1中的所在履历的数据。将在后面叙述人物履历数据D3的详情。
另外，管理装置60根据由用户输入的命令进行处理，输出处理结果。例如，管理装置60在被输入了请求输出特定的人物PS的所在履历的命令(输出请求命令)的情况下，针对该命令中指定的人物PS，基于人物履历数据D3，生成并输出与所在有关的信息的数据(后述的显示数据D4)。
(1-4)终端90
在此，说明管理装置60进行数据的发送接收的终端90。终端90是管理者、利用者持有的信息终端。设想终端90是智能手机、平板PC等便携终端、笔记本电脑等个人计算机，但也可以是其他信息处理设备。
终端90构成为具有通信模块，能够经由广域网络NW1与其他单元(室外单元控制部18、室内单元控制部25、遥控器控制部35、服务器50)进行通信。终端90通过无线通信和有线通信中的任一方或者双方与广域网络NW1连接。
终端90具有用于输入命令的输入部。在管理系统100中，能够使终端90作为用于输入命令的“命令输入部”发挥功能。用户通过使用终端90输入命令，能够适当控制摄影单元40、管理装置60的动作。
另外，终端90具有显示(输出)信息的显示部。在管理系统100中，能够使终端90 作为显示信息的“输出部”发挥功能。用户能够通过终端90掌握管理系统100的动作状況、处理结果。
终端90能够通过安装规定的应用程序来对管理装置60输入命令，显示管理装置60的响应结果。
(2)管理装置60的详情
如图1所示，管理装置60主要包括存储部61、取得部62、数据生成部63、管理部 64、受理部65、信息检索部66以及输出控制部67等功能部。各功能部通过管理装置60 的构成设备(在此为室外单元控制部18、各室内单元控制部25、各遥控器控制部35以及服务器50)中的任一个或全部进行动作来实现。管理装置60构成为能够独自或者从其他装置实时地取得时刻。
(2-1)存储部61
存储部61由管理装置60的构成设备中的任一个或全部所包含的ROM、RAM、闪存以及硬盘等存储器构成。存储部61包括多个存储区域，具有暂时性地存储信息的易失性的存储区域、存储各种信息的非易失性的存储区域。具体地说，如图6所示，在存储部61中包括程序信息存储区域M1、环境信息存储区域M2、系统信息存储区域 M3、人物信息存储区域M4、摄影数据存储区域M5、提取数据存储区域M6、人物履历数据存储区域M7、输入信息存储区域M8、输出信息存储区域M9以及特征数据存储区域M10等存储区域。各存储区域中存储的各种信息能够适当更新。
在程序信息存储区域M1中存储有定义了在管理装置60的各部中执行的各种处理的控制程序、在各单元间的通信中所使用的通信协议等。
在环境信息存储区域M2中存储有与对象设施1有关的信息(环境信息)。在环境信息中例如包括与对象设施1中包含的各对象空间SP的数量、位置、大小等有关的信息。
在系统信息存储区域M3中存储有与管理系统100中包含的各设备有关的信息。例如，在系统信息存储区域M3中存储有与配置于对象设施1的摄影单元40有关的信息(摄影单元信息)。在摄影单元信息中包括与配置于对象设施1的摄影单元40的ID、通信地址、配置位置及配置方式等有关的信息。摄影单元信息例如被存储为图7所示那样的摄影单元信息表TB1。在图7的摄影单元信息表TB1中，ID为“0120”的摄影单元40的通信地址为“172.16.**.01”，配置位置为“(对象空间)SP1”，作为配置方式确定有“内置于室内单元20a”等。
在人物信息存储区域M4中存储有与在对象设施1中预先登记的人物PS及过去检测到的人物PS有关的信息(人物信息)。在人物信息中包括与各人物PS的ID(任意或自动地赋予的ID)、姓名及所属组等有关的信息。人物信息例如被存储为图8所示那样的人物信息表TB2。在图8的人物信息表TB2中，例如关于ID为“01139”的人物 PS，确定出姓名为“田中○○”，所属组为“G3”，最新(最近)的所在位置为“(对象空间)SP2”，最新的所在时刻为“2018/03/05/17:55”等。
在摄影数据存储区域M5中存储有从各摄影单元40输出的摄影数据D1。在摄影数据存储区域M5中，按每个摄影单元40存储摄影数据D1。
在提取数据存储区域M6中存储有与根据从摄影单元40输出的摄影数据D1提取出的人物PS相关联的数据(提取数据D2)。提取数据D2(相当于技术方案中记载的“人物数据”)是按作为摄影数据D1的发送源的每个摄影单元40生成的。更详细地说，提取数据D2是按接收到的每个摄影数据D1生成的。提取数据D2包括与提取出的人物 PS的所在位置有关的信息以及与提取出的人物PS的所在时刻有关的信息。例如图9 所示，提取数据D2是与发送源摄影单元40的ID及其摄影场所、摄影数据D1的接收日期及时间以及在接收到的摄影数据D1中提取出的人物PS的ID等有关的信息。在图9中，例如，针对从ID为“0121”的摄影单元40发送的摄影场所为“(对象空间)SP2”、摄影日期及时间为“2018/03/06/17:55”的摄影数据D1，确定出提取出的人物PS的 ID为“01139”、“01564”、“00998”、“01321”等。
在人物履历数据存储区域M7中独立地存储有与对象设施1中的人物PS有关的所在履历的数据(人物履历数据D3)。人物履历数据D3是人物PS在对象设施1中的所在履历的信息。人物履历数据D3是按每个人物PS生成的。例如图10所示，人物履历数据D3是包括人物PS的ID、进行摄影的摄影单元40的ID、所在场所(摄影场所)及所在日期及时间(摄影的日期及时间)等的信息。在图10所示的人物履历数据D3中，例如确定有与ID为“01139”的人物PS有关的每5分钟的所在履历。此外，在人物履历数据D3中确定的所在履历无需一定是每5分钟的记录，所在履历的日期及时间能够适当变更。
在输入信息存储区域M8中存储有输入到管理装置60的信息。例如，在输入信息存储区域M8中存储有经由终端90输入的命令。
在输出信息存储区域M9中存储有从管理装置60向其他装置输出的信息。例如，在输出信息存储区域M9中存储有使终端90显示的显示数据D4(图12)。
在特征数据存储区域M10中存储有独立地确定人物PS的一般特征以及在对象空间SP中提取出的人物PS的固有特征的特征数据D5。特征数据D5是按每个人物PS 制作的。在此的“特征”是用于唯一地确定人物PS的信息。“特征”是各种各样的，例如是人物PS的部位(例如头、发旋儿、脸、肩、手臂、腿等)的形状、尺寸、颜色或动作(动作速度、动作范围、动作角度)等。
(2-2)取得部62
取得部62取得从各摄影单元40输出的摄影数据D1并适当保存于摄影数据存储区域M5。
(2-3)数据生成部63
数据生成部63提取摄影数据存储区域M5中存储的摄影数据D1中包含的人物PS 并生成提取数据D2。数据生成部63具有提取部631和提取数据生成部633。
提取部631取得摄影数据存储区域M5中存储的摄影数据D1，进行独立地提取包含于已取得的摄影数据D1中的人物PS的处理(提取处理)。提取部631按每小时进行提取处理。提取处理按每个摄影数据D1(即作为摄影数据D1的发送源的每个摄影单元40)进行。
提取部631构成为具有学习部632，能够进行机器学习。在此的学习部632使用“神经网络”、“深度学习”等方法进行机器学习。所述学习可以是所谓的有示教学习和无示教学习中的任一方。
提取部631的提取处理使用规定的方法(包括公知技术)来进行。例如，提取部631基于预先定义了人物PS所具有的特征的特征数据D5来提取(检测并确定)人物PS。例如，提取部631通过在摄影数据D1中识别人物PS所具有的特征来检测人物PS，通过将识别的特征与特征数据D5所定义的特征进行比较来唯一地确定人物PS。
在图11中表示提取部631的提取处理的一例。在图11中，示出了提取部631使用多个神经网络(N1、N2、N3、N4)提取对象空间SP中的人物PS的例子。
在图11中，首先，摄影数据D1被输入到第1神经网络N1。第1神经网络N1执行分别检测(估计)摄影数据D1中包含的各要素间的距离的处理P1。
另外，处理P1的结果与摄影数据D1一起被输入到第2神经网络N2。第2神经网络N2执行基于处理P1的结果来检测(估计)摄影数据D1中包含的人物PS的范围的处理P2。在能够检测人物PS的范围的情况下，能够检测人物PS的移动，能够在后述的处理P3中取得该人物PS所具有的特征。
并且，处理P2的结果与处理P1的结果一起输入到第3神经网络N3。第3神经网络 N3执行基于处理P1及处理P2的结果来检测并确定摄影数据D1中包含的人物PS的特征的处理P3。在处理P3中，基于检测的人物PS的特征和特征数据存储区域M10中存储的特征数据D5，唯一地确定人物PS。例如，在处理P3中，计算检测的人物PS 的各特征与特征数据存储区域M10中存储的各特征数据D5的类似度，计算出的类似度为规定的阈值以上的特征数据D5的对象人物PS被提取为与检测到的特征一致的人物PS，唯一地确定人物PS。另外，在特征数据存储区域M10中未存储与检测的人物PS的特征的类似度为规定的阈值以上的特征数据D5的情况下，针对具有该特征的人物PS，新生成特征数据D5，存储为新检测到的人物PS。处理P3的结果、生成的特征数据D5例如是100维的矢量数据。
并且，处理P2的结果与处理P1的结果一起输入到第4神经网络N4。第4神经网络 N4执行基于处理P1及处理P2的结果来检测摄影数据D1中包含的人物PS在对象空间 SP中的位置(坐标)的处理P4。
在以这种方式进行提取处理的情况下，可以说数据生成部63在提取处理中根据摄影数据D1估计各要素间的距离，基于估计出的距离提取人物PS。
学习部632使用各种信息(例如摄影数据D1、能够经由广域网络NW1取得的信息)适当学习各人物PS的特征。例如，学习部632独立地具体学习摄影数据D1中包含的人物PS的特征，适当更新所对应的特征数据D5。由此，能够抑制由人物PS的特征的变动(例如服装、发型的变化等)引起的检测结果的变动。
提取数据生成部633基于提取部631的提取处理的结果，生成提取数据D2(图9)。提取数据生成部633将提取出的人物PS的ID、检测到的场所(所在场所)以及检测到的时刻(所在时刻)的信息嵌入提取数据D2中。提取数据生成部633按作为摄影数据D1 的发送源的每个摄影单元40生成提取数据D2。
包括这样的提取部631及提取数据生成部633的数据生成部63可以说是提取摄影数据D1(摄影单元40拍摄到的图像)中包含的人物PS的所在位置及其所在时刻的功能部。
(2-4)管理部64
管理部64基于提取数据D2管理对象空间SP中存在的人物PS的信息。管理部64 定期地(例如以5分钟的周期)进行处理。例如，管理部64基于提取数据存储区域M6中存储的各提取数据D2，按提取出的每个人物PS独立地生成人物履历数据D3(图10) 并保存于人物履历数据存储区域M7。另外，例如，管理部64制作/更新人物信息表 TB2并保存于人物信息存储区域M4。
(2-5)受理部65
受理部65取得向管理装置输入的信息并保存于输入信息存储区域M8。例如，受理部65取得经由终端90输入的命令并保存于输入信息存储区域M8。对管理装置60输入的命令例如是指示与特定的人物PS的所在有关的信息(与所在场所、所在位置、或规定期间中的所在履历等有关的信息)的输出的输出请求命令。在输出请求命令中使用人物PS的ID、姓名或所属组等的信息来指定作为对象的人物PS。
(2-6)信息检索部66
信息检索部66基于输入信息存储区域M8中保存的输出请求命令(检索请求)来执行处理。针对在输出请求命令中指定的人物PS，信息检索部66参照存储部61中存储的各数据(人物履历数据D3或人物信息等)来进行检索，生成表示与该人物PS的所在有关的信息(例如最新的所在空间、所在位置或所在履历等)的显示数据D4来作为检索结果。
显示数据D4例如以图12那样的方式生成。在图12所示的显示数据D4中，在输出请求命令中指定的人物PS的ID为“01139”，姓名为“田中○○”，所属组为“G3”，确定出其从“2018/03/05/18:00”到“2018/03/06/18:00”的期间(指定期间)中的所在履历。信息检索部66将所生成的显示数据D4保存于输出信息存储区域M9。
(2-7)输出控制部67
输出控制部67将输出信息存储区域M9中存储的数据向作为目的地的设备发送(输出)。例如，输出控制部67将输出信息存储区域M9中保存的显示数据D4向作为输出请求命令的发送源的终端90发送。由此，由信息检索部66生成的显示数据D4(检索结果)发送到作为输出请求命令的发送源的终端90，显示于该终端90。
(3)管理装置60的处理的流程
以下，参照图13来说明管理装置60的处理的流程的一例。图13是表示管理装置60的处理的流程的一例的流程图。
管理装置60以从图13的步骤S101到步骤S106所示那样的流程执行处理。此外，图13所示的处理的流程能够适当变更，只要处理能够适当地进行，则既可以调换任一步骤的顺序，也可以同时执行任意的步骤，也可以追加未图示的其他步骤。
在步骤S101中，在管理装置60未接收到摄影数据D1的情况下(也就是说存储部61中未存储新的摄影数据D1的情况下，即“否”的情况下)，处理的流程进入步骤S105。另一方面，在管理装置60接收到摄影数据D1的情况下(也就是说存储部61中存储了新的摄影数据D1的情况下，即“是”的情况下)，处理的流程进入步骤S102。
在步骤S102中，管理装置60从存储部61取得摄影数据D1，执行提取在已取得的摄影数据D1中包含的人物PS的提取处理，生成提取数据D2。之后，处理的流程进入步骤S103。
在步骤S103中，在提取处理的结果是无法提取人物PS的情况下(未在摄影数据 D1中检测到人物PS的情况下)，即“否”的情况下，处理的流程进入步骤S105。另一方面，在提取处理的结果是能够提取人物PS的情况下(在摄影数据D1中检测到人物PS的情况下)，即“是”的情况下，处理的流程进入步骤S104。
在步骤S104中，管理装置60针对在提取处理中提取出的人物PS执行规定处理。例如，管理装置60针对在提取处理中提取出的人物PS，生成或更新人物履历数据D3。另外，例如，管理装置60针对在提取处理中提取出的人物PS，生成或更新人物信息表TB2。另外，例如，管理装置60学习在提取处理中提取出的人物PS的特征。另外，例如，管理装置60针对在提取处理中提取出的人物PS，生成或更新特征数据D5。之后，处理的流程进入步骤S105。
在步骤S105中，在管理装置60未接收到输出请求命令的情况下(即“否”的情况下)，处理的流程返回步骤S101。另一方面，在管理装置60接收到输出请求命令的情况下(即“是”的情况下)，处理的流程进入步骤S106。
在步骤S106中，管理装置60针对在输出请求命令中指定的人物PS生成表示指定的期间的所在履历的显示数据D4。管理装置60将生成的显示数据D4输出到作为输出请求命令的发送源的终端90。由此，生成的显示数据D4显示于作为输出请求命令的发送源的终端90。
(4)特征
(4-1)
上述实施方式所涉及的管理系统100具有：摄影单元40，其设置于对象空间SP；数据生成部63，其基于摄影数据D1(摄影单元40拍摄到的图像)中包含的人物PS的特征提取对象空间SP内的人物PS并生成提取数据D2(与提取出的人物PS相关联的数据)；存储部61，其存储数据生成部63所生成的提取数据D2；以及管理部64，其基于提取数据D2管理对象空间SP中存在的人物PS的信息。
由此，识别摄影单元40的摄影数据D1(摄影图像)中包含的人物PS的特征，基于与提取/确定出的人物PS相关联地生成的提取数据D2，管理对象空间SP中存在的人物PS的信息。其结果，能够容易地管理对象空间SP中的人物PS的信息(例如所在信息、所在履历等的信息)。例如，能够管理除了佩戴埋入包含ID信息的芯片的帽子等的人物等预先认定为管理对象的人物以外的人的信息。另外，这种管理系统100构成为能够用于例如公司中的劳动者的出勤管理、学校中的学生的出席缺席管理、设施中的安全管理等。
另外，摄影单元40设置于对象空间SP的天花板CI(或天花板附近)，由此能够拍摄对象空间SP的广阔的范围。由此，能够高精度地检测对象空间SP中的人物PS的所在。
(4-2)
在上述实施方式中，数据生成部63构成为提取摄影数据D1(摄影单元40拍摄到的图像)中包含的人物PS的所在位置。提取数据D2包含与人物PS的所在位置有关的信息。由此，能够容易地管理对象空间SP中的人物PS的所在。
(4-3)
在上述实施方式中，数据生成部63提取摄影数据D1(摄影单元40拍摄到的图像)中包含的人物PS的所在时刻。提取数据D2包含与提取出的人物PS的所在时刻有关的信息。由此，能够容易地管理对象空间SP中的人物PS的所在履历。
(4-4)
在上述实施方式中，数据生成部63基于对象空间SP内的人物PS的特征(动作等)提取人物PS。例如，在辨识出走路的动作、进行作业的动作、案头工作、饮食等人特有的动作时，针对进行该动作的对象，将其辨识为人物PS或者确定为个别人。由此能够高精度地进行人物PS的提取和个别人的确定。
(4-5)
在上述实施方式中，数据生成部63在提取处理中根据摄影数据D1估计各要素间的距离，基于估计出的距离提取人物PS。由此，能够高精度地进行人物PS的提取和个别人的确定。
(4-6)
在上述实施方式中，数据生成部63包括基于摄影单元40拍摄到的图像对人物PS的特征进行学习的学习部632。由此，能够高精度地进行人物PS的提取和个别人的确定。
(4-7)
在上述实施方式中，管理部64基于存储部61中存储的提取数据D2，针对对象空间SP中存在的人物PS，独立地生成与所在履历有关的人物履历数据D3。由此，自动生成人的所在履历。
(4-8)
上述实施方式所涉及的管理系统100构成为具有多个摄影单元40，数据生成部63基于多个摄影单元40拍摄到的图像，识别人物PS的特征。由此，能够广范围地提取人物PS。
(4-9)
在上述实施方式中，摄影单元40配置于对象空间SP中设置的空调机(室内单元20)。通过以该方式配置摄影单元40，能够在对象空间SP内的广阔的范围中提取人物 PS。
(5)变形例
上述实施方式能够如以下的变形例所示那样进行适当变形。此外，各变形例能够在不产生矛盾的范围内与其他变形例组合应用。
(5-1)变形例1
管理系统100也可以构成为如下的系统：基于针对在确定的空间(对象空间SP)中存在的人物PS独立地生成的人物履历数据D3，管理各人物PS的行动内容或行动履历。关于该情况，下面说明其与上述实施方式的不同之处。
具体地说，在该情况下，数据生成部63针对摄影数据D1中包含的人物PS，不仅提取所在位置及所在时刻，还提取行动内容。数据生成部63提取摄影数据存储区域 M5中存储的摄影数据D1中包含的人物PS以及人物PS的行动内容来生成提取数据 D2。
更详细地说，数据生成部63的提取部631在提取处理中取得摄影数据存储区域 M5中存储的摄影数据D1，提取已取得的摄影数据D1中包含的人物PS，并且独立地提取该人物的行动内容。提取部631基于该人物PS的所在位置、周围存在的人或物、动作范围或动作角度等，提取人物PS的行动内容。在此的“行动内容”不仅包含人物PS在/不在对象空间SP中，也包含对象空间SP中的人物PS的具体的行为、作业内容。例如，“行动内容”包括“读书”、“记笔记”、“使用PC的作业”、“PC 中状态最活跃的应用(即主要正在使用的应用)”、“使用电话进行通话”、“对话”、“对话的对象”、“开会”、“吃饭”、“喝水”、“摄取的食物的内容(品种、摄取量或剩余量等)”、“使用打印机的作业”、“清扫作业”、“生产线上的作业”、“步行”或“体操”等人物PS的行动的详情。
数据生成部63的提取数据生成部633基于提取部631的提取处理的结果生成提取数据D2。提取数据生成部633向提取数据D2中嵌入与所提取出的人物PS的ID、检测到的场所(所在场所)、检测到的时刻(所在时刻)、行动内容有关的信息。该情况下的提取数据D2包括与提取出的人物PS的所在位置及所在时刻有关的信息以及与提取出的人物PS的行动内容有关的信息。
例如图14所示那样，提取数据D2是发送源摄影单元40的ID及其摄影场所、摄影数据D1的接收日期及时间、在接收到的摄影数据D1中提取出的人物PS的ID以及与行动内容有关的信息。此外，提取数据D2无需一定以图14的方式生成，提取数据D2 的生成方式能够适当变更。例如，提取数据D2也可以包含其他信息来代替图14中包含的信息中的任一方。
在图14中，作为提取出的人物PS的行动内容，确定有活动状态(主要的活动)、活动内容(具体的活动内容)以及活动详情(活动内容的详情)等。更具体地说，在图14 中，例如，针对从ID为“0121”的摄影单元40发送的摄影场所为“(对象空间)SP2”、摄影日期及时间为“2018/03/06/17:45”的摄影数据D1，作为提取出的ID为“01139”的人物PS的行动内容，确定有处于进行“案头工作”的状态(活动状态)、正在进行“使用PC的作业”(活动内容)以及“主要使用表计算软件”(活动详情)等。即，在图 14中，针对提取出的人物PS，确定有与信息处理设备中的作业内容有关的信息。
另外，在图14中，对于摄影日期及时间为“2018/03/06/17:50”的摄影数据D1，作为提取出的ID为“01139”的人物PS的行动内容，确定有处于正在进行“案头工作”的状态(活动状态)、正在进行“摄取饮料”(活动内容)以及“摄取瓶装饮料(水)” (活动详情)等。
另外，在图14中，针对摄影日期及时间为“2018/03/06/17:55”的摄影数据D1，作为提取出的ID为“01139”的人物PS的行动内容，确定有处于“离开座位”的状态(活动状态)、正在“站着说话”(活动内容)以及“对话对象的人物ID为00998”(活动详情)等。即，在图14所示的提取数据D2中，针对提取出的人物PS，确定有对话的对象。
基于这种提取数据D2，人物履历数据D3生成与人物PS在对象设施1中的行动内容的履历(行动履历)有关的信息。人物履历数据D3例如是如图15所示的那样包括人物PS的ID、拍摄的摄影单元40的ID、所在场所(摄影场所)、所在日期及时间(摄影日期及时间)以及行动履历等的信息。在图15所示的人物履历数据D3中，确定有与ID 为“01139”的人物PS有关的每5分钟的行动履历。此外，在人物履历数据D3中定义的行动履历无需一定是按每5分钟的记录。另外，人物履历数据D3无需一定以图15 的方式生成，人物履历数据D3的生成方式能够适当变更。例如，人物履历数据D3 也可以包含其他信息来代替图15中包含的信息中的任一个。例如，人物履历数据D3 也可以包括与“所摄取的食物的摄取量或剩余量”有关的信息。另外例如人物履历数据D3也可以包含与“在使用中的PC中显示的因特网上的网页”有关的信息。
以这种方式生成的人物履历数据D3能够用于每日的行动的分析或最优化、计划的制作或评价、人物PS的评价或健康管理等各种各样的用途。
此外，关于“PC中最活跃状态的应用”的信息，当然可以是管理装置60基于摄影单元40中的摄影结果取得，但也可以经由通信网络从提取出的人物PS正在使用的个人计算机等信息处理设备取得该信息。在该情况下，管理装置与人物PS使用的信息处理设备利用通信网络(无线网络和/或有线网络)以能够通信的方式连接。另外，该信息例如由取得部62取得。
该管理装置60也可以构成为：在被输入了请求输出确定的人物PS的行动履历的输出请求命令的情况下，针对该命令中指定的人物PS，基于人物履历数据D3，生成并输出表示与行动履历有关的信息的显示数据D4。即，在图13的流程的步骤S106中可以构成为，管理装置60针对在输出请求命令中指定的人物PS生成表示指定的期间的行动内容的履历(行动履历)的显示数据D4。
例如，也可以是，信息检索部66参照存储部61中存储的各数据(人物履历数据D3或人物信息等)，针对在输出请求命令中指定的人物PS进行检索，生成表示与该人物 PS的行动履历有关的信息的显示数据D4作为检索结果。
在该情况下，显示数据D4例如以图16那样的方式生成。此外，显示数据D4无需一定以图16的方式生成，显示数据D4的生成方式能够适当变更。例如，显示数据D4 也可以包含其他信息来代替图16中包含的信息中的任一个。
在图16所示的显示数据D4中，在输出请求命令中指定的人物PS的ID为“01139”，姓名为“田中○○”，所属组为“G3”，确定出从“2018/03/06/09:00”到“2018/03/06/18:00”的期间(指定期间)中的行动履历。在图16所示的人物履历数据D3中，例如作为“2018/03/06/13:50”的行动履历，确定有处于正在参加“会议”的状态(活动状态)、正在进行“发表”(活动内容)、以及“其他参加者的ID为0164、00998、91321”(活动详情)等。
另外，管理装置60将生成的显示数据D4输出到作为输出请求命令的发送源的终端90。由此，所生成的显示数据D4在作为输出请求命令的发送源的终端90中显示。
此外，显示数据D4例如可以以如图17所示那样的方式生成。图17示出在终端90 的显示器中显示行动履历的情况下的显示数据D4的一例。在图17中详细地示出了指定的期间中的对象人物PS的行动履历。此外，显示数据D4的生成方式能够适当变更。
通过以本变形例的方式构成管理装置60，能够掌握人物PS的具体的行动内容。特别是能够抑制所花费的劳力地管理各人物PS的详细的行动履历。
(5-2)变形例2
在上述实施方式中，摄影单元40配置于埋入到对象空间SP的天花板CI的天花板埋入型的室内单元20内。但是，摄影单元40的配置方式不限定于此，能够适当变更。例如，任意/全部的摄影单元40也可以配置于从对象空间SP的天花板吊下的天花板吊下型的室内单元20内，也可以配置于设置在对象空间SP的侧壁SW的壁挂型的室内单元20内。另外，例如，任意/全部的摄影单元40无需一定配置于室内单元20内，也可以配置于其他设备内，也可以独立地设置。
另外，在对对象空间SP进行摄影时不存在障碍的情况下，摄影单元40无需一定配置于对象空间SP的天花板或天花板附近。例如，摄影单元40也可以配置在与天花板相比更靠近地面的位置。
(5-3)变形例3
在上述实施方式中，说明了以图11所示的方式进行提取处理的例子。但是，提取处理当然也可以以其他方式进行。例如，提取处理也可以使用神经网络以外的方法来执行。例如，也可以基于由管理者等预先登记的定义了人物PS的特征的数据，从摄影数据D1提取所述特征来提取/确定人物PS。另外，在提取处理中，无需一定基于人物PS的动作来提取人物PS。即，在提取处理中使用的人物PS的特征能够适当变更。
另外，提取处理无需一定始终进行，也可以在规定的定时进行。例如，提取处理定期地(例如以5分钟的周期)进行。
另外，提取处理无需一定基于动图像(摄影数据D1)进行。例如，提取处理也可以基于多个静止图像(摄影数据D1)进行。
(5-4)变形例4
在上述实施方式中，摄影数据D1包含以规定的像素表示对象空间SP的规定范围的图像数据(动图像数据)。但是，摄影数据D1的形式能够根据设置环境、设计规格等适当变更。例如，摄影数据D1也可以是以规定的像素表示对象空间SP的规定范围的图像数据(静止图像)。
(5-5)变形例5
在上述实施方式中，在一个对象空间SP中配置了1台摄影单元40。但是，摄影单元40的配置方式不限定于此，能够适当变更。例如，也可以在一个对象空间SP中配置多台摄影单元40。在该情况下，基于多台摄影单元40拍摄到的各摄影数据D1来识别人物PS的特征。即，基于在一个对象空间SP中以不同的拍摄角度拍摄到的摄影数据D1进行提取处理，因此能够高精度地进行人物PS的提取和个别人的确定。
(5-6)变形例6
在上述实施方式中，摄影单元信息生成为图7所示那样的摄影单元信息表TB1。摄影单元信息无需一定以该方式生成，摄影单元信息的生成方式能够适当变更。
(5-7)变形例7
在上述实施方式中，人物信息例如生成为如图8所示那样的人物信息表TB2。人物信息无需一定以该方式生成，人物信息的生成方式能够适当变更。即，人物信息表 TB2也可以包含其他信息(例如人物PS的尺寸、人物PS的状态以及人物PS间的关系性等的信息)来代替图8中包含的信息中的任一个。
(5-8)变形例8
在上述实施方式中，提取数据D2以图9所示那样的方式生成。但是，提取数据 D2无需一定以该方式生成，提取数据D2的生成方式能够适当变更。例如，提取数据 D2也可以包含其他信息来代替图9中包含的信息中的任一个。
(5-9)变形例9
在上述实施方式中，人物履历数据D3以图10所示那样的方式生成。但是，人物履历数据D3无需一定以该方式生成，人物履历数据D3的生成方式能够适当变更。例如，人物履历数据D3也可以包含其他信息来代替图10中包含的信息中的任一个。
(5-10)变形例10
在上述实施方式中，显示数据D4以图12所示那样的方式生成。但是，显示数据 D4无需一定以该方式生成，显示数据D4的生成方式能够适当变更。例如，显示数据 D4也可以包含其他信息来代替图12中包含的信息的任一个。另外，例如，也可以是，在输出请求命令请求人物PS的所在位置的情况下，显示数据D4仅表示该人物PS的最新的所在空间和所在位置。另外，例如也可以是，在输出请求命令请求人物PS的所在位置的情况下，输出对指定的人物PS所存在的对象空间SP进行拍摄的摄影单元40的摄影数据D1来作为显示数据D4。
(5-11)变形例11
在上述实施方式中，管理装置60在摄影数据D1中提取了人物PS后，针对提取出的人物PS执行规定处理(图13的步骤S104)。在此，也可以适当省略图13的步骤S104 的处理中的任一个。例如，管理装置60无需一定对在提取处理中提取出的人物PS的特征进行学习。另外，例如，管理装置60无需一定针对在提取处理中提取出的人物 PS生成或更新特征数据D5。
(5-12)变形例12
在上述实施方式中，管理装置60基于根据摄影数据D1生成的提取数据D2生成人物履历数据D3，基于人物履历数据D3生成针对输出请求命令(检索请求)的处理结果 (显示数据D4)。但是，管理装置60也可以代替基于人物履历数据D3而是基于提取数据D2生成针对输出请求命令(检索请求)的处理结果(显示数据D4)。
(5-13)变形例13
在上述实施方式中，数据生成部63具有基于摄影数据D1对人物PS的特征进行学习的学习部632。但是，数据生成部63无需一定具有学习部632。
(5-14)变形例14
在上述实施方式中，管理系统100应用于包括多个(6个)对象空间SP的对象设施1。但是，管理系统100所应用的对象设施1中的对象空间SP的数量能够适当变更。例如，管理系统100也可以应用于包括7个以上或5个以下的对象空间SP的对象设施。另外，例如，管理系统100也可以应用于包括一个对象空间SP的对象设施。
(5-15)变形例15
在上述实施方式中，终端90作为对管理装置60输入输出请求命令的“输入部”发挥功能。但是，不限定于此，也可以使终端90以外的装置作为该“输入部”发挥功能。例如也可以使遥控器30、服务器50或其他装置作为该“输入部”发挥功能。
另外，在上述实施方式中，终端90作为输出针对输出请求命令的处理结果(显示数据D4)的“输出部”发挥功能。但是，不限定于此，也可以使终端90以外的装置作为该“输出部”发挥功能。例如也可以使遥控器30、服务器50或其他装置作为该“输出部”发挥功能。
另外，作为“输出部”中的信息的输出方式，不限定于数据的显示。例如，也可以是，在“输出部”具有能够输出声音的扬声器的情况下，通过输出声音数据来输出针对输出请求命令的处理结果。
(5-16)变形例16
在上述实施方式中，在各单元之间(例如，室外单元控制部18―室内单元控制部25之间、室内单元控制部25―室内单元控制部25之间、室内单元控制部25―遥控器控制部35之间、以及室内单元控制部25―摄影单元40之间)，使用通信线构成通信网络。但是，各单元之间当然也可以在通信线的基础上或代替通信线而通过使用电波、红外线的无线通信来构成通信网络。另外，室外单元控制部18或服务器50也可以在通信线的基础上或代替通信线而通过无线通信与广域网络NW1连接。
(5-17)变形例17
在上述实施方式中，服务器50构成为能够经由广域网络NW1与室外单元控制部18、室内单元控制部25及遥控器控制部35进行通信，但也可以构成为能够经由LAN(局域网)与这些单元进行通信。
(5-18)变形例18
在上述实施方式中，管理装置60为经由通信网络将室外单元控制部18、室内单元控制部25、遥控器控制部35及服务器50连接而构成的。但是，管理装置60的构成方式不限定于此，也可以以其他方式构成。例如，作为管理装置60的构成设备，也可以省略室外单元控制部18、室内单元控制部25、遥控器控制部35及服务器50中的任一个。另外例如，也可以代替室外单元控制部18、室内单元控制部25、遥控器控制部35及服务器50中的任一个或与它们一起经由通信网络连接其他设备而构成管理装置60。另外，管理装置60无需一定跨越广域网络NW1来构成，也可以仅由连接于LAN的设备构成。
(5-19)变形例19
上述实施方式中的“人物”能够替换为生物。换言之，管理系统100也可以构成为如下的系统：基于针对在对象空间SP中存在的生物独立地生成的生物履历数据 D3，来管理各生物的所在履历、行动内容或行动履历。在此的生物只要能够从摄影数据D1中提取即可，没有特别限定，例如为宠物、家畜或野生动物等。即，本申请的思想也能够应用于人以外的生物。
(6)
以上，说明了实施方式，但可以理解的是，能够在不脱离权利要求书所记载的主旨和范围的情况下进行实施方式、详情的多种变更。
产业上的可利用性
本申请能够用于信息管理系统。
标号说明
1：对象设施；10：空调装置；15：室外单元；18：室外单元控制部；20、(20a― 20f)：室内单元(空调机)；25：室内单元控制部；30、(30a―30f)：遥控器；35：遥控器控制部；40、(40a―40f)：摄影单元(摄影设备)；41：摄影部；42：摄影数据生成部； 43：摄影数据输出部；50：服务器；60：管理装置；61：存储部；62：取得部；63：数据生成部；64：管理部；65：受理部；66：信息检索部；67：输出控制部(输出部)； 90：终端(输出部)；100：管理系统(信息管理系统)；631：提取部；632：学习部；633：提取数据生成部；CI：天花板；D1：摄影数据；D2：提取数据(人物数据)；D3：人物履历数据；D4：显示数据；D5：特征数据；GP：气体连接配管；LP：液体连接配管；M1：程序信息存储区域；M2：环境信息存储区域；M3：系统信息存储区域； M4：人物信息存储区域；M5：摄影数据存储区域；M6：提取数据存储区域；M7：人物履历数据存储区域；M8：输入信息存储区域；M9：输出信息存储区域；M10：特征数据存储区域；N1：第1神经网络；N2：第2神经网络；N3：第3神经网络；N4：第4神经网络；NW1：广域网络；PS：人物；SP、(SP1―SP6)：对象空间；SW：侧壁；TB1：摄影单元信息表；TB2：人物信息表；cb1―cb4：通信线。
现有技术文献
专利文献
专利文献1：日本特开2017-45373号公报。

Claims (15)

1.一种信息管理系统(100)，其具备：
摄影设备(40)，其设置于对象空间(SP)；
数据生成部(63)，其基于所述摄影设备拍摄到的图像(D1)中包含的人(PS)的特征，来提取所述对象空间内的所述人，生成与所提取出的所述人相关联的人物数据(D2)；
存储部(61)，其存储所述数据生成部生成的所述人物数据；以及
管理部(64)，其基于所述人物数据，管理所述对象空间中存在的所述人的信息。
2.根据权利要求1所述的信息管理系统(100)，其中，
所述数据生成部提取所述摄影设备拍摄到的所述图像中包含的所述人的所在位置，
所述人物数据包括与所述人的所在位置有关的信息。
3.根据权利要求1或2所述的信息管理系统(100)，其中，
所述数据生成部提取所述摄影设备拍摄到的所述图像中包含的所述人的所在时刻，
所述人物数据包括与提取出的所述人的所在时刻有关的信息。
4.根据权利要求1至3中的任一项所述的信息管理系统(100)，其中，
所述数据生成部提取所述摄影设备拍摄到的所述图像中包含的所述人的行动内容，
所述人物数据包括与提取出的所述人的行动内容有关的信息。
5.根据权利要求1或2所述的信息管理系统(100)，其中，
所述数据生成部提取所述摄影设备拍摄到的所述图像中包含的所述人的所在时刻及行动内容，
所述人物数据包括与提取出的所述人的所在时刻及行动内容有关的信息。
6.根据权利要求4或5所述的信息管理系统(100)，其中，
所述数据生成部提取所述摄影设备拍摄到的所述图像中包含的所述人的对话对象来作为所述行动内容。
7.根据权利要求4至6中的任一项所述的信息管理系统(100)，其中，
所述人物数据包括与提取出的所述人的所述行动内容的履历有关的信息。
8.根据权利要求1至7中的任一项所述的信息管理系统(100)，其中，
所述数据生成部提取正在使用信息处理设备进行作业的所述人在所述信息处理设备中的作业内容，
所述人物数据包括与所述摄影设备拍摄到的所述图像中包含的所述人在所述信息处理设备中的作业内容有关的信息。
9.根据权利要求1至8中的任一项所述的信息管理系统(100)，其中，
所述信息管理系统(100)还具备输出所述人物数据的输出部(67/90)。
10.根据权利要求1至9中的任一项所述的信息管理系统(100)，其中，
所述数据生成部基于所述对象空间内的所述人的动作提取所述人。
11.根据权利要求1至10中的任一项所述的信息管理系统(100)，其中，
所述数据生成部根据所述图像估计各要素间的距离，基于估计出的距离提取所述人。
12.根据权利要求1至11中的任一项所述的信息管理系统(100)，其中，
所述数据生成部包括学习部(632)，该学习部(632)基于所述摄影设备拍摄到的所述图像对所述人的特征进行学习。
13.根据权利要求1至12中的任一项所述的信息管理系统(100)，其中，
所述管理部基于所述存储部中存储的所述人物数据，针对所述对象空间中存在的所述人，独立地生成与所在履历或行动履历有关的人物履历数据(D3)。
14.根据权利要求1至13中的任一项所述的信息管理系统(100)，其中，
所述信息管理系统(100)具备多个所述摄影设备，
所述数据生成部基于多个所述摄影设备拍摄到的所述图像识别所述人的特征。
15.根据权利要求1至14中的任一项所述的信息管理系统(100)，其中，
所述摄影设备配置于所述对象空间中设置的空调机(20)。
CN201980023874.XA 2018-03-30 2019-03-26 信息管理系统 Pending CN112005246A (zh)

Applications Claiming Priority (5)

Application Number Priority Date Filing Date Title
JP2018070182 2018-03-30
JP2018-070182 2018-03-30
JP2018-200345 2018-10-24
JP2018200345A JP2019185724A (ja) 2018-03-30 2018-10-24 情報管理システム
PCT/JP2019/012850 WO2019189179A1 (ja) 2018-03-30 2019-03-26 情報管理システム

Publications (1)

Publication Number Publication Date
CN112005246A true CN112005246A (zh) 2020-11-27

Family

ID=68341533

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201980023874.XA Pending CN112005246A (zh) 2018-03-30 2019-03-26 信息管理系统

Country Status (4)

Country Link
US (1) US20210142051A1 (zh)
EP (1) EP3779870A4 (zh)
JP (1) JP2019185724A (zh)
CN (1) CN112005246A (zh)

Families Citing this family (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN117441189A (zh) * 2021-06-11 2024-01-23 松下知识产权经营株式会社 作业分析装置以及方法

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20020075450A1 (en) * 2000-11-30 2002-06-20 Michiharu Aratani Compound eye imaging system, imaging device, and electronic equipment
US20020143938A1 (en) * 2000-09-28 2002-10-03 Bruce Alexander System and method for providing configurable security monitoring utilizing an integrated information system
WO2017029718A1 (ja) * 2015-08-19 2017-02-23 株式会社 テクノミライ スマートセキュリティ・デジタルシステム、方法及びプログラム
JPWO2017072923A1 (ja) * 2015-10-29 2017-10-26 株式会社 テクノミライ デジタルセフテイ・サポートシステム、方法及びプログラム
US20180050229A1 (en) * 2016-08-16 2018-02-22 Gary Abernathy Real Time Damper Visual Verification Device and System

Family Cites Families (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH10134191A (ja) * 1996-11-01 1998-05-22 Corp Miyuki:Kk 顔形状による人物識別システム
JP5042135B2 (ja) * 2008-06-18 2012-10-03 ローレルバンクマシン株式会社 行動管理システム
JP2012208854A (ja) * 2011-03-30 2012-10-25 Nippon Telegraph & Telephone East Corp 行動履歴管理システムおよび行動履歴管理方法
GB201113633D0 (en) * 2011-08-08 2011-09-21 Vision Semantics Ltd User-primed iterative discovery of object associations in distributed multi-source data
US10194601B2 (en) * 2014-02-28 2019-02-05 Carlos R. Villamar System and method for solar greenhouse aquaponics and black soldier fly composter and auto fish feeder
JP2016017707A (ja) * 2014-07-09 2016-02-01 日立アプライアンス株式会社 空気調和システム
GB2569772B (en) * 2017-10-11 2023-01-18 Pci Pal U K Ltd Processing sensitive information over VOIP
JP6994606B2 (ja) * 2019-05-23 2022-01-14 日立ジョンソンコントロールズ空調株式会社 管理装置、管理方法、及びプログラム
US20220239817A1 (en) * 2021-01-22 2022-07-28 Magna Electronics Inc. Vehicular cooling system for forward camera module

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20020143938A1 (en) * 2000-09-28 2002-10-03 Bruce Alexander System and method for providing configurable security monitoring utilizing an integrated information system
US20020075450A1 (en) * 2000-11-30 2002-06-20 Michiharu Aratani Compound eye imaging system, imaging device, and electronic equipment
WO2017029718A1 (ja) * 2015-08-19 2017-02-23 株式会社 テクノミライ スマートセキュリティ・デジタルシステム、方法及びプログラム
JPWO2017072923A1 (ja) * 2015-10-29 2017-10-26 株式会社 テクノミライ デジタルセフテイ・サポートシステム、方法及びプログラム
US20180050229A1 (en) * 2016-08-16 2018-02-22 Gary Abernathy Real Time Damper Visual Verification Device and System

Also Published As

Publication number Publication date
JP2019185724A (ja) 2019-10-24
EP3779870A1 (en) 2021-02-17
US20210142051A1 (en) 2021-05-13
EP3779870A4 (en) 2021-08-25

Similar Documents

Publication Publication Date Title
CN105446162A (zh) 一种智能家居系统以及机器人的智能家居控制方法
CN103712313B (zh) 空调控制系统以及空调控制方法
KR102121785B1 (ko) 인공지능을 이용하여 지시된 위치로 풍향을 제어하는 에어컨 및 이를 제어하는 방법
JP5872306B2 (ja) 情報処理装置、情報処理方法及びプログラム
JP6828713B2 (ja) 心身状態認識システム
CN110799978B (zh) 居住环境中的人脸识别
JP6818866B2 (ja) 空気調和装置、空気調和システム、および、制御方法
CN107306383B (zh) 推定操作者的方法、装置以及记录介质
JP5958462B2 (ja) 撮影装置、撮影方法、及びプログラム
CN113251610A (zh) 用于空调控制的方法、装置和空调
CN104869299A (zh) 一种提示方法和装置
CN110908340A (zh) 智能家居的控制方法及装置
JP6509108B2 (ja) 空調管理システム及びプログラム
WO2019189179A1 (ja) 情報管理システム
JP2015087102A (ja) 機器管理システム、機器管理装置、制御方法及びプログラム
CN112005246A (zh) 信息管理系统
KR102172648B1 (ko) 애완동물 인터랙션 장치
KR20150018663A (ko) 영상데이터 처리를 통한 물체 및 위치 인식으로 사용자 맞춤형 생활서비스를 제공하는 시스템 및 방법
US11256910B2 (en) Method and system for locating an occupant
CN106796692A (zh) 经由可穿戴计算设备向用户提供技术支持
JP7311478B2 (ja) 情報処理装置、情報処理プログラム及び情報処理システム
US20180227473A1 (en) Smart home security control device
WO2013062007A1 (ja) 機器管理用装置および機器の管理方法
JP2019179524A (ja) 物品管理システム
JP2005260389A (ja) 設備ネットワークシステム

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination