CN111385770B - 车载装置、控制方法、存储有程序的非易失性存储介质以及车辆 - Google Patents

车载装置、控制方法、存储有程序的非易失性存储介质以及车辆 Download PDF

Info

Publication number
CN111385770B
CN111385770B CN201911348080.9A CN201911348080A CN111385770B CN 111385770 B CN111385770 B CN 111385770B CN 201911348080 A CN201911348080 A CN 201911348080A CN 111385770 B CN111385770 B CN 111385770B
Authority
CN
China
Prior art keywords
vehicle
detected
subject
unit
section
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201911348080.9A
Other languages
English (en)
Other versions
CN111385770A (zh
Inventor
长谷川英男
龟田惠子
江尻美纱
成濑真太郎
柏井忠大
冈尚哉
小池健介
文字宏之
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Toyota Motor Corp
Original Assignee
Toyota Motor Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Toyota Motor Corp filed Critical Toyota Motor Corp
Publication of CN111385770A publication Critical patent/CN111385770A/zh
Application granted granted Critical
Publication of CN111385770B publication Critical patent/CN111385770B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04W—WIRELESS COMMUNICATION NETWORKS
    • H04W4/00—Services specially adapted for wireless communication networks; Facilities therefor
    • H04W4/30—Services specially adapted for particular environments, situations or purposes
    • H04W4/40—Services specially adapted for particular environments, situations or purposes for vehicles, e.g. vehicle-to-pedestrians [V2P]
    • H04W4/48—Services specially adapted for particular environments, situations or purposes for vehicles, e.g. vehicle-to-pedestrians [V2P] for in-vehicle communication
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V20/00—Scenes; Scene-specific elements
    • G06V20/50—Context or environment of the image
    • G06V20/59—Context or environment of the image inside of a vehicle, e.g. relating to seat occupancy, driver state or inner lighting conditions
    • G06V20/597—Recognising the driver's state or behaviour, e.g. attention or drowsiness
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q20/00—Payment architectures, schemes or protocols
    • G06Q20/08—Payment architectures
    • G06Q20/20—Point-of-sale [POS] network systems
    • G06Q20/209—Specified transaction journal output feature, e.g. printed receipt or voice output
    • G—PHYSICS
    • G01—MEASURING; TESTING
    • G01C—MEASURING DISTANCES, LEVELS OR BEARINGS; SURVEYING; NAVIGATION; GYROSCOPIC INSTRUMENTS; PHOTOGRAMMETRY OR VIDEOGRAMMETRY
    • G01C21/00—Navigation; Navigational instruments not provided for in groups G01C1/00 - G01C19/00
    • G01C21/26—Navigation; Navigational instruments not provided for in groups G01C1/00 - G01C19/00 specially adapted for navigation in a road network
    • G01C21/34—Route searching; Route guidance
    • G01C21/3407—Route searching; Route guidance specially adapted for specific applications
    • G01C21/3438—Rendez-vous, i.e. searching a destination where several users can meet, and the routes to this destination for these users; Ride sharing, i.e. searching a route such that at least two users can share a vehicle for at least part of the route
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06N—COMPUTING ARRANGEMENTS BASED ON SPECIFIC COMPUTATIONAL MODELS
    • G06N20/00—Machine learning
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q20/00—Payment architectures, schemes or protocols
    • G06Q20/08—Payment architectures
    • G06Q20/20—Point-of-sale [POS] network systems
    • G06Q20/206—Point-of-sale [POS] network systems comprising security or operator identification provisions, e.g. password entry
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q20/00—Payment architectures, schemes or protocols
    • G06Q20/30—Payment architectures, schemes or protocols characterised by the use of specific devices or networks
    • G06Q20/308—Payment architectures, schemes or protocols characterised by the use of specific devices or networks using the Internet of Things
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q20/00—Payment architectures, schemes or protocols
    • G06Q20/30—Payment architectures, schemes or protocols characterised by the use of specific devices or networks
    • G06Q20/32—Payment architectures, schemes or protocols characterised by the use of specific devices or networks using wireless devices
    • G06Q20/322—Aspects of commerce using mobile devices [M-devices]
    • G06Q20/3223—Realising banking transactions through M-devices
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q30/00—Commerce
    • G06Q30/02—Marketing; Price estimation or determination; Fundraising
    • G06Q30/0201—Market modelling; Market analysis; Collecting market data
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q30/00—Commerce
    • G06Q30/02—Marketing; Price estimation or determination; Fundraising
    • G06Q30/0282—Rating or review of business operators or products
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q30/00—Commerce
    • G06Q30/06—Buying, selling or leasing transactions
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q50/00—Systems or methods specially adapted for specific business sectors, e.g. utilities or tourism
    • G06Q50/10—Services
    • G06Q50/22—Social work
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q50/00—Systems or methods specially adapted for specific business sectors, e.g. utilities or tourism
    • G06Q50/10—Services
    • G06Q50/26—Government or public services
    • G06Q50/265—Personal security, identity or safety
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V20/00—Scenes; Scene-specific elements
    • G06V20/50—Context or environment of the image
    • G06V20/56—Context or environment of the image exterior to a vehicle by using sensors mounted on the vehicle
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/20—Movements or behaviour, e.g. gesture recognition
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/20—Movements or behaviour, e.g. gesture recognition
    • G06V40/23—Recognition of whole body movements, e.g. for sport training
    • G—PHYSICS
    • G07—CHECKING-DEVICES
    • G07F—COIN-FREED OR LIKE APPARATUS
    • G07F9/00—Details other than those peculiar to special kinds or types of apparatus
    • G07F9/009—User recognition or proximity detection
    • G—PHYSICS
    • G16—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR SPECIFIC APPLICATION FIELDS
    • G16H—HEALTHCARE INFORMATICS, i.e. INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR THE HANDLING OR PROCESSING OF MEDICAL OR HEALTHCARE DATA
    • G16H10/00—ICT specially adapted for the handling or processing of patient-related medical or healthcare data
    • G16H10/60—ICT specially adapted for the handling or processing of patient-related medical or healthcare data for patient-specific data, e.g. for electronic patient records
    • G16H10/65—ICT specially adapted for the handling or processing of patient-related medical or healthcare data for patient-specific data, e.g. for electronic patient records stored on portable record carriers, e.g. on smartcards, RFID tags or CD
    • G—PHYSICS
    • G16—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR SPECIFIC APPLICATION FIELDS
    • G16H—HEALTHCARE INFORMATICS, i.e. INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR THE HANDLING OR PROCESSING OF MEDICAL OR HEALTHCARE DATA
    • G16H40/00—ICT specially adapted for the management or administration of healthcare resources or facilities; ICT specially adapted for the management or operation of medical equipment or devices
    • G16H40/20—ICT specially adapted for the management or administration of healthcare resources or facilities; ICT specially adapted for the management or operation of medical equipment or devices for the management or administration of healthcare resources or facilities, e.g. managing hospital staff or surgery rooms
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L67/00—Network arrangements or protocols for supporting network services or applications
    • H04L67/01—Protocols
    • H04L67/12—Protocols specially adapted for proprietary or special-purpose networking environments, e.g. medical networks, sensor networks, networks in vehicles or remote metering networks
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V2201/00—Indexing scheme relating to image or video recognition or understanding
    • G06V2201/07—Target detection

Landscapes

  • Engineering & Computer Science (AREA)
  • Business, Economics & Management (AREA)
  • General Physics & Mathematics (AREA)
  • Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • Accounting & Taxation (AREA)
  • Strategic Management (AREA)
  • General Business, Economics & Management (AREA)
  • Health & Medical Sciences (AREA)
  • Finance (AREA)
  • General Health & Medical Sciences (AREA)
  • Development Economics (AREA)
  • Economics (AREA)
  • Marketing (AREA)
  • Medical Informatics (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Primary Health Care (AREA)
  • Radar, Positioning & Navigation (AREA)
  • Remote Sensing (AREA)
  • Tourism & Hospitality (AREA)
  • Multimedia (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Computing Systems (AREA)
  • Entrepreneurship & Innovation (AREA)
  • Software Systems (AREA)
  • Public Health (AREA)
  • Data Mining & Analysis (AREA)
  • Epidemiology (AREA)
  • Game Theory and Decision Science (AREA)
  • Signal Processing (AREA)
  • Computer Security & Cryptography (AREA)
  • Psychiatry (AREA)
  • Human Computer Interaction (AREA)
  • Human Resources & Organizations (AREA)
  • Social Psychology (AREA)
  • Evolutionary Computation (AREA)
  • Artificial Intelligence (AREA)
  • General Engineering & Computer Science (AREA)
  • Mathematical Physics (AREA)
  • Automation & Control Theory (AREA)

Abstract

本发明提供一种车载装置，该车载装置(10)包括控制部(14)、存储每个人即被摄体的特征的存储部(13)、以及摄像部(11)，控制部(14)获取由摄像部(11)拍摄的图像，在所获取的图像中，根据存储在存储部(13)的特征检测出被摄体，从所获取的图像中识别检测出的被摄体的动作，将检测出的被摄体与识别出的动作相关联地进行存储。

Description

车载装置、控制方法、存储有程序的非易失性存储介质以及 车辆
技术领域
本发明涉及车载装置、控制方法、存储有程序的非易失性存储介质以及车辆。
背景技术
已知一种现有的系统，在该系统中，移动售卖车向注册了巡回服务的对象(例如家庭护理接受者)的通信终端发送电子邮件，通过从该通信终端接收“身体状况良好”等回复消息来确认是否安好(例如日本特开2003-256517号)。在移动售卖车没有从通信终端接收到回复消息的情况下，售卖员亲自访问上述用户的住宅。
上述系统使用户承受了回复消息的负担。如果没有回复，则售货员就会访问用户的住宅，然而售卖员每次都访问用户住宅的负担大，可行性低。
发明内容
鉴于上述问题而实现的本发明的目的在于，提供不给对象带来过多负担就能够掌握对象日常的健康状态的车载装置、控制方法、存储有程序的非易失性存储介质以及车辆。
本发明的一个实施方式涉及的车载装置，其包括控制部、存储每个人即被摄体的特征的存储部、以及摄像部，所述车载装置的特征在于，所述控制部获取由所述摄像部拍摄的图像，在所获取的所述图像中，根据存储在所述存储部的特征检测出被摄体，从所获取的所述图像中识别检测出的所述被摄体的动作，将检测出的所述被摄体与识别出的所述动作相关联地进行存储。
本发明的一个实施方式涉及的控制方法用于车载装置，所述车载装置包括控制部、存储每个人即被摄体的特征的存储部、以及摄像部，所述控制方法包括下述步骤：获取由所述摄像部拍摄的图像的步骤；在所获取的所述图像中，根据存储在所述存储部的特征检测出被摄体的步骤；从所获取的所述图像中识别检测出的所述被摄体的动作的步骤；以及将检测出的所述被摄体与识别出的所述动作相关联地进行存储的步骤。
本发明的一个实施方式涉及的存储有程序的非易失性存储介质，所述程序使包括控制部、存储每个人即被摄体的特征的存储部、以及摄像部的车载装置执行下述步骤：获取由所述摄像部拍摄的图像的步骤；在所获取的所述图像中，根据存储在所述存储部的特征检测出被摄体的步骤；从所获取的所述图像中识别检测出的所述被摄体的动作的步骤；以及将检测出的所述被摄体与识别出的所述动作相关联地进行存储的步骤。
本发明的一个实施方式涉及的车辆包括控制部、将一个以上的人即被摄体与每个被摄体的特征以及住址相关联地进行存储的存储部、以及摄像部，所述车辆的特征在于，所述控制部获取由所述摄像部拍摄的图像，在所获取的所述图像中，根据存储在所述存储部的特征检测出被摄体，从所获取的所述图像中识别检测出的所述被摄体的动作，将检测出的所述被摄体与识别出的所述动作相关联地进行存储，如果判定出所指定的一个以上被摄体的至少其中一个没有被检测到，则车辆向没有被检测到的至少其中一个被摄体的住址移动。
根据本发明的车载装置、控制方法、存储有程序的非易失性存储介质以及车辆，能够不给对象带来过多负担就能够掌握对象日常的健康状态。
附图说明
参考附图对本发明所示例的实施例的特征、优点、技术上及工业上的意义进行记述，附图中的相同的标号表示同一部件，其中：
图1是本实施方式的信息处理系统的整体图。
图2A是本实施方式的车载装置的功能框图。
图2B是本实施方式的服务器的功能框图。
图2C是本实施方式的用户终端的功能框图。
图3是本实施方式的车辆的立体图。
图4是示出本实施方式的存储部中存储的数据的第一示例的图。
图5是示出本实施方式的存储部中存储的数据的第二示例的图。
图6是本实施方式的车载装置所执行的处理的流程图。
具体实施方式
以下参照附图说明本发明的实施方式。
图1是本实施方式的信息处理系统S的整体图。信息处理系统S包括车辆1、服务器2、以及用户终端3。车辆1具备车载装置10。本实施方式的车辆1的一个例子是汽车，但不限于此，可以是任意的车辆。图1中为了便于说明，示出了一台车辆1以及一个服务器2。然而车辆1以及服务器2的数量分别可以是一个以上。车辆1、服务器2、用户终端3之间构成为能够经由例如包括移动通信网络以及互联网等的网络NW相互通信。
首先，说明本实施方式的信息处理系统S所执行的处理的概要。在本实施方式中将移动售卖车作为车辆1的一个示例。车辆1如果到达规定的地点，则进行商品或者服务的售卖，并且使用车载装置10拍摄周围的图像，从拍摄图像检测人即被摄体。车载装置10从拍摄图像识别检测出的被摄体的动作，将检测出的被摄体与识别出的动作相关联地进行存储。即，车载装置10拍摄图像，通过对拍摄图像进行图像分析而识别被摄体的动作。
这样根据本实施方式，不会给对象(例如老人等)带来终端操作等过多负担，而能够掌握对象日常的健康状态或者安好等。另外，车载装置10如果将掌握的信息共享给注册过的有关者(例如老人的家人、地方政府、政府机关、家庭医生等)，则能够完善对对象的守护或者医疗等。
详细说明车载装置10、服务器2、以及用户终端3的各内部结构。
如图2A所示，车载装置10具备摄像部11、位置信息获取部12、存储部13、控制部14、通信部15、输入输出部16、测量部17、以及结算部18。
摄像部11包括所谓的车载照相机，拍摄车辆1外部(例如，前方、侧方、后方等)的图像。摄像部11可以在车辆1的行驶中以及停车中生成车辆1的外部的连续影像，将生成的影像记录在存储部13中。作为替代例，智能手机等的任何通信终端都可作为摄像部11起作用
位置信息获取部12包括与任意的卫星定位系统对应的一个以上的接收器。例如，位置信息获取部12可以包括GPS(Global Positioning System)接收器。位置信息获取部12对示出车辆1停止或者正在行驶的位置的位置信息进行检测。位置信息获取部12也可以还包括电子罗盘，获取车辆1朝向的信息。
存储部13是记录或者存储各种信息的装置，包括一个以上的存储器。“存储器”是例如半导体存储器、磁存储器、或者光存储器等，但并不限定于此。存储部13所包含的各个存储器可以作为例如主存储装置、辅助存储装置、或者高速缓存而发挥功能。存储部13存储与车辆1的动作相关的任意信息。存储部13可以存储由控制部14进行分析、处理后的结果的信息。存储部13可以存储本车辆的车辆控制程序等与车辆1的动作或控制相关的各种信息。
控制部14具备一个以上处理器。“处理器”可以是通用处理器、或者为了特定处理专业化的专用处理器。例如，可以是搭载于车辆1中的ECU(Electronic Control Unit)作为控制部14起作用。控制部14控制车辆1整体的动作。控制部14对车载装置10所包含的其他功能部进行控制，并且进行与车辆1的行驶·动作有关的所有控制。例如控制部14能够从摄像部11获取图像，分析该图像从而检测被摄体以及该被摄体的动作。
通信部15包括在车辆1与服务器2之间进行通信的通信模块。根据需要，通信部15也可以包含不经由服务器2而是在车辆1与其他车辆之间进行车间通信的通信模块。通信部15也可以包含与网络NW连接的通信模块、或者与4G(4th Generation)及5G(5thGeneration)等移动通信标准对应的通信模块。例如，可以由搭载于车辆1中的DCM(DataCommunication Module)等车载通信设备作为通信部15起作用。
输入输出部16包括对用户输入进行检测并且将输入信息发送给控制部14的输入接口。输入接口例如是物理键盘、电容键盘、与面板显示器一体地设置的触摸屏、或接收声音输入的拾音器，但并不限定于此，也可以是任意的输入部。输入输出部16包括将控制部14所生成的信息或者从存储部13读取的信息向用户输出的输出接口。输出接口是例如将信息以图像或者影像形式输出的面板显示器、或者将信息以声音形式输出的扬声器等，但并不限定于此，也可以是任意的输出部。例如输入输出部16能够输出基于被摄体的动作的提议内容。
测量部17包括由人使用的测量装置，测量与对象相关的值。该值可以包括例如血压、体温、握力、体重等。
结算部18包括结算终端，完成售卖者与顾客之间的结算，该结算终端用于结算在车辆1中售卖的商品或者服务。结算部18从顾客接受例如信用卡、借记卡、预付卡、现金等，根据结算金额完成结算。作为替代例，结算部18能够通过被下载到顾客持有的手机终端的应用，完成结算。
如图2B所示，服务器2包括服务器通信部21、服务器存储部22、以及服务器控制部23。
服务器通信部21包括在服务器2与车辆1之间、或者在服务器2与用户终端3之间进行通信的通信模块。服务器通信部21可以包括与网络NW连接的通信模块。服务器通信部21能够获取从车辆1输出的信息，并且向已注册的有关者的终端发送该信息。
服务器存储部22是记录或者存储各种信息的装置，包括一个以上的存储器。服务器存储部22所包含的各个存储器可以作为例如主存储装置、辅助存储装置、或者高速缓存而发挥功能。服务器存储部22例如存储从车辆1输出的信息。服务器存储部22可存储与服务器控制程序或信息处理系统S的整体的动作或者控制有关的各种程序。
服务器控制部23包括一个以上的处理器。服务器控制部23控制服务器通信部21以及服务器存储部22，并且进行与服务器2整体的动作有关的全部控制。
如图2C所示，用户终端3包括通信部31、存储部32、输入输出部33以及控制部34。
通信部31、存储部32、输入输出部33以及控制部34的硬件构成分别与车载装置10的通信部15、存储部32、输入输出部16以及控制部14的硬件构成相同，此处省略说明。
以下，具体说明信息处理系统S执行的控制方法。车载装置10在车辆1行驶中或者停止时以任意的间隔拍摄图像。在本实施方式中作为一个示例，如图3所示，说明在车辆1停止时摄像部11拍摄动态影像的情况。
车载装置10从拍摄图像检测被摄体。车载装置10如果检测出被摄体，则参照存储部13中存储的数据库(参照图4)。图4所示的数据库将特征量以及住址信息与人的ID相关联地存储。该特征量例如可以从以前拍摄到的检测对象的被摄体的脸部等的图像中提取。下面说明的本实施方式中，作为一个示例，车载装置10从住在远方的家人的用户终端3接收守护高龄父母的委托，从与该委托一起接收的父母的图像中提取特征量存储到存储部13。车载装置10还从家人的用户终端3接收高龄父母的住址信息存储到存储部13。然而在其他的实施方式中，车载装置10也可以用其他任意方法获取特征量以及住址信息。在其他实施方式中，图4所示的数据库也可以与人的ID相关联地存储姓名或者出生年月日等。
本实施方式的车载装置10根据将事先存储在存储部13中的特征量与从拍摄图像提取的特征量进行比较，判断被检测出的被摄体是否是存储在数据库中的人。图3所示的例子中，车载装置10根据上述比较的结果从拍摄图像检测出人P01和人P02。
车载装置10如果检测出人P01和人P02，则通过分析拍摄图像而识别被摄体的动作。车载装置10在动作的识别中，可以采用例如机器学习等任意的图像分析方法。在本实施方式中，车载装置10识别人P01拄着拐杖、以及人P02跛行。在其他实施方式中，动作可以包括摇晃、咳嗽、戴着口罩、擤鼻涕等。如图5所示，车载装置10将检测出的日期时间以及识别出的动作与检测出的被摄体进行关联而存储。
本实施方式的车载装置10如图3所示包括血压计即测量部17、以及结算终端即结算部18。车载装置10通过分析拍摄图像，或者通过从使用者接收使用者识别信息的输入，能够判断出谁在使用测量部17或者结算部18。作为替代例，车载装置10能够从获取自结算部18的结算信息所包含的使用者识别信息，判断出谁买了哪个商品。
车载装置10获取人P01以及人P02分别使用测量部17测得的测量值，如图5所示，将其与人的ID相关联地存储。另外车载装置10获取人P02使用结算部18购入的购入品的信息，将其与人的ID进行关联地存储。
如图3所示，车载装置10包括输入输出部16。本实施方式的输入输出部16是显示器。车载装置10能够显示基于被摄体的动作的提议内容。例如车载装置10向拄拐的人P01提议购入药物。作为其他示例，车载装置10向跛行的人P02提议接受医生的诊断。
车载装置10能够根据被摄体的动作，计算通过网络NW向有关者的终端发送与被摄体关联的信息的必要度。有关者的例子如上所述。车载装置10如果判断出计算出的必要度为阈值以上，则执行发送。发送可以通过例如电子邮件而执行。例如车载装置10如果识别出人P01拄拐而且咳嗽，则判定为发送的必要度在阈值以上，将与人P01关联的信息、即动作、测量值以及购入品等信息，向委托了守护人P01的家人的用户终端3发送。另外，车载装置10也可以向家人的用户终端3追加通知最好带人P01去医院。
车载装置10也可以在向有关者的终端发送与被摄体关联的信息之前，通过输入输出部16询问该被摄体可否执行发送。车载装置10如果通过输入输出部16从被摄体接收到执行发送的指示，则执行该发送。
车载装置10如果判定出所指定的一个以上被摄体的至少其中一个没有被检测到，则能够指示车辆1向该被摄体的住址移动。例如车载装置10接收人P01、人P02以及人P03的指定。然而如图5所示，车载装置10还没有检测出人P03。因此车载装置10能够从存储部13获取人P03的住址信息，指示车辆1向其住址移动。如果车辆1移动至其住址且车载装置10对周边进行拍摄，则车载装置10大概率能够从拍摄图像中检测出人P03。车载装置10也可以追加性地从人P03的有关者的终端接收人P03大概率存在的场所的位置信息。车载装置10能够在仍然没有检测出人P03时，指示车辆1向人P03大概率存在的场所移动。
在其他实施方式中，在车辆1虽然移动至人P03的住址或者人P03大概率存在的的场所，但车载装置10没能检测到人P03时，车载装置10能够向其他车辆发送人P03的特征量，请求协助检测人P03。车载装置10能够在由其他车辆检测到人P03时接收检测通知。根据该构成，车载装置10能够在更广的范围进行搜索活动。在其他实施方式中，在虽然车辆1进行了移动但无法检测到人P03时，车载装置10能够在之后的商品或者服务的售卖中，在输入输出部16显示正在收集人P03的目击信息。此时车载装置10也可以在输入输出部16显示人P03的面部图像或者姓名等。根据该构成，车载装置10能够从其他顾客收集信息而更快发现人P03。车载装置10也可以在判定车辆1进行了移动但无法检测到人P03的次数达到规定值时，或者判定人P03从最后被检测到起经过规定期间(例如三个月)没有被检测到时，向与人P03关联的有关者的终端追加通知该判断内容。在另外一个实施方式中，车载装置10能够在车辆1移动后检测到人P03时，对检测到时的人P03的动作与前次检测到时的人P03的动作进行比较，检测变化。车载装置10也可以在该变化示出健康状态恶化(例如，从不跛行状态变化为跛行状态)时，向有关者的终端与检测到人P03的通知一起通知其健康状态恶化这一情况。根据该构成，有关者能够采取早期对策。
图6示出了本实施方式的车载装置10在任意时刻执行的信息处理方法的流程图。
步骤S1：车载装置10拍摄图像。
步骤S2：车载装置10从拍摄图像检测被摄体。
步骤S3：车载装置10识别检测出的被摄体的动作。
步骤S4：车载装置10测量与人有关的值。
步骤S5：车载装置10获取被摄体通过结算部18进行的结算的信息。
步骤S6：车载装置10显示基于被摄体的动作的提议内容。
步骤S7：车载装置10根据被摄体的动作，计算向有关者的终端发送与被摄体关联的信息的必要度，判断该必要度是否在阈值以上。
步骤S8：车载装置10如果判断出该必要度在阈值以上(步骤S7为“是”)，则判断是否从该被摄体接收了发送指示。
步骤S9：车载装置10如果判断出从被摄体接收了发送指示(步骤S8为“是”)，则执行发送。
步骤S10：车载装置10判断是否检测到被指定的全部被摄体。
步骤S11：车载装置10如果判断出被指定的全部被摄体中至少其中一个没有被检测到(步骤S10为“否”)，则指示车辆1移动。
如上所述，根据本实施方式，车载装置10获取由摄像部11拍摄的图像，在所获取的图像中，根据存储在存储部13的特征检测出被摄体，从所获取的图像中识别检测出的被摄体的动作，将检测出的被摄体与识别出的动作相关联地进行存储。根据该构成，车载装置10不会给对象(例如老人等)带来终端操作等过多负担，而能够使有关者掌握对象日常的健康状态或者安好等。
另外根据本实施方式，车载装置10还具有测量部17，其由人使用，测量与人相关的值。控制部14将检测出的被摄体与针对被摄体测量出的值相关联而存储于存储部13。根据该构成，车载装置10能够对对象使用了测量部17这一情况作出响应，不给对象增加额外的负担而获取对象的测量值。
另外根据本实施方式，车载装置10还包括输入输出部16。控制部14向输入输出部16输出基于被摄体的动作的提议内容。根据该构成，车载装置10能够向对象进行用于促进健康的提议。
另外根据本实施方式，车载装置10还包括通信部15，其经由网络NW与被摄体相关的有关者的终端进行通信。控制部14经由通信部15向有关者的终端发送与被摄体相关联的信息。根据该构成，车载装置10因为能够向有关者的终端通知对象的信息(例如血压、购入品等)，所以有关者例如能够从远方守护对象。
另外根据本实施方式，控制部14根据被摄体的动作，计算向有关者的终端发送与被摄体关联的信息的必要度，如果判断出该必要度在阈值以上则进行发送。根据该构成，车载装置10因为只在有必要发送的时候才发送信息，所以能够减少处理负荷。
另外根据本实施方式，控制部14经由输入输出部16，从被摄体接收关于可否向有关者的终端发送与被摄体相关联的信息的指示，当接收到可以发送这一内容的指示时，进行发送。根据该构成，车载装置10能够保护对象的个人信息。
另外根据本实施方式，存储部13将一个以上的被摄体与住址相关联地进行存储，控制部14如果判定出所指定的一个以上被摄体的至少其中一个没有被检测到，则指示车辆向没有被检测到的至少其中一个被摄体的住址移动。根据该构成，车载装置10能够详尽地掌握被指定的全部被摄体的日常健康状态。
另外根据本实施方式，车载装置10还包括结算部18。控制部14从结算部18获取结算信息，将检测出的被摄体、与被摄体经由所述结算部进行的结算的信息相关联地进行存储。根据该构成，车载装置10能够对对象使用了结算部18这一情况作出响应，不给对象增加额外的负担而获取结算信息。
另外根据本实施方式，控制部14如果判定一个以上被摄体的至少其中一个从最后被检测到起经过规定期间没有被检测到，则向与未检测到的被摄体相关联的有关者的终端进行通知。根据该构成，控制部14例如能够将外出恐有困难的对象通知给其有关者，使其能够采取早期对策。
虽然基于各附图及实施例对本发明进行了说明，但应当注意的是，本领域技术人员能够容易地基于本公开内容进行各种变形及修正。因此，应当留意这些变形及修正都包含在本发明的范围内。例如，各方法或各步骤等所包含的功能等都可以在逻辑上不矛盾的情况下进行再配置，可以将多个方法或步骤等组合成一个、或将一个方法或步骤进行拆分。
可以是任意车辆、服务器或用户终端各自作为上述实施方式所涉及的车辆1、服务器2或用户终端3而发挥功能的构成。具体地，将记载了实现实施方式所涉及的车辆1、服务器2或用户终端3的各个功能的处理内容的程序，存储在上述任意车辆、服务器或用户终端的存储器中，由该任意车辆、服务器或用户终端的处理器读取该程序并执行。因此，本实施方式所涉及的发明也可以作为处理器可执行的程序而实现。

Claims (11)

1.一种车载装置，其包括控制部、存储每个人即被摄体的特征的存储部、以及摄像部，所述车载装置的特征在于，
所述控制部获取由所述摄像部拍摄的图像，
在所获取的所述图像中，根据存储在所述存储部的特征检测出被摄体，
从所获取的所述图像中识别检测出的所述被摄体的动作，
将检测出的所述被摄体与识别出的所述动作相关联地进行存储，
所述存储部将一个以上的被摄体与住址相关联地进行存储，
所述控制部如果判定出所指定的一个以上被摄体的至少其中一个没有被检测到，则指示车辆向没有被检测到的至少其中一个被摄体的住址移动，
所述车辆移动至没有被检测到的至少其中一个被摄体的住址后，所述摄像部对周边进行拍摄，所述控制部获取由所述摄像部拍摄到的图像，在获取到的所述图像中基于存储在所述存储部的特征检测所述没有被检测到的至少其中一个被摄体。
2.根据权利要求1所述的车载装置，其特征在于，
还具有测量部，其由人使用，测量与人相关的值，
所述控制部将检测出的被摄体与针对被摄体测量出的值相关联而存储于所述存储部。
3.根据权利要求1或2所述的车载装置，其特征在于，
还包括输出部，
所述控制部向所述输出部输出基于被摄体的动作的提议内容。
4.根据权利要求1或2所述的车载装置，其特征在于，
还包括通信部，其经由网络与被摄体相关联的有关者的终端进行通信，
所述控制部经由所述通信部向所述有关者的终端发送与所述被摄体相关联的信息。
5.根据权利要求4所述的车载装置，其特征在于，
所述控制部根据被摄体的动作，计算向所述有关者的终端发送与所述被摄体相关联的信息的必要度，如果判断为所述必要度为阈值以上，则发送与所述被摄体相关联的信息。
6.根据权利要求5所述的车载装置，其特征在于，
还包括输入部，
所述控制部经由所述输入部，从所述被摄体接收关于可否向所述有关者的终端发送与被摄体相关联的信息的指示，当接收到可以发送这一内容的指示时，进行发送。
7.根据权利要求1或2所述的车载装置，其特征在于，
还包括支付部，其进行在包括所述车载装置的车辆中销售的商品或服务的支付，
所述控制部将检测出的被摄体、与被摄体经由所述支付部进行的支付的信息相关联地进行存储。
8.一种控制方法，其用于车载装置，所述车载装置包括控制部、存储每个人即被摄体的特征的存储部、以及摄像部，所述控制方法的特征在于，包括下述步骤：
获取由所述摄像部拍摄的图像的步骤；
在所获取的所述图像中，根据存储在所述存储部的特征检测出被摄体的步骤；
从所获取的所述图像中识别检测出的所述被摄体的动作的步骤；
将检测出的所述被摄体与识别出的所述动作相关联地进行存储的步骤；
所述存储部将一个以上的被摄体与住址相关联地进行存储的步骤；
所述控制部如果判定出所指定的一个以上被摄体的至少其中一个没有被检测到，则指示车辆向没有被检测到的至少其中一个被摄体的住址移动的步骤；以及
所述车辆移动至没有被检测到的至少其中一个被摄体的住址后，所述摄像部对周边进行拍摄，所述控制部获取由所述摄像部拍摄到的图像，在获取到的所述图像中基于存储在所述存储部的特征检测所述没有被检测到的至少其中一个被摄体的步骤。
9.一种存储有程序的非易失性存储介质，所述程序使包括控制部、存储每个人即被摄体的特征的存储部、以及摄像部的车载装置执行下述步骤：
获取由所述摄像部拍摄的图像的步骤；
在所获取的所述图像中，根据存储在所述存储部的特征检测出被摄体的步骤；
从所获取的所述图像中识别检测出的所述被摄体的动作的步骤；
将检测出的所述被摄体与识别出的所述动作相关联地进行存储的步骤；
所述存储部将一个以上的被摄体与住址相关联地进行存储的步骤；
所述控制部如果判定出所指定的一个以上被摄体的至少其中一个没有被检测到，则指示车辆向没有被检测到的至少其中一个被摄体的住址移动的步骤；以及
所述车辆移动至没有被检测到的至少其中一个被摄体的住址后，所述摄像部对周边进行拍摄，所述控制部获取由所述摄像部拍摄到的图像，在获取到的所述图像中基于存储在所述存储部的特征检测所述没有被检测到的至少其中一个被摄体的步骤。
10.一种车辆，其包括控制部、将一个以上的人即被摄体与每个被摄体的特征以及住址相关联地进行存储的存储部、以及摄像部，所述车辆的特征在于，
所述控制部获取由所述摄像部拍摄的图像，
在所获取的所述图像中，根据存储在所述存储部的特征检测出被摄体，
从所获取的所述图像中识别检测出的所述被摄体的动作，
将检测出的所述被摄体与识别出的所述动作相关联地进行存储，
所述存储部将一个以上的被摄体与住址相关联地进行存储，
如果判定出所指定的一个以上被摄体的至少其中一个没有被检测到，则车辆向没有被检测到的至少其中一个被摄体的住址移动，
所述车辆移动至没有被检测到的至少其中一个被摄体的住址后，所述摄像部对周边进行拍摄，所述控制部获取由所述摄像部拍摄到的图像，在获取到的所述图像中基于存储在所述存储部的特征检测所述没有被检测到的至少其中一个被摄体。
11.根据权利要求10所述的车辆，其特征在于，
所述控制部如果判定一个以上被摄体的至少其中一个从最后被检测到起经过规定期间没有被检测到，则向与未检测到的被摄体相关联的有关者的终端进行通知。
CN201911348080.9A 2018-12-26 2019-12-24 车载装置、控制方法、存储有程序的非易失性存储介质以及车辆 Active CN111385770B (zh)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
JP2018-243357 2018-12-26
JP2018243357A JP2020106965A (ja) 2018-12-26 2018-12-26 車載装置、制御方法、プログラム及び車両

Publications (2)

Publication Number Publication Date
CN111385770A CN111385770A (zh) 2020-07-07
CN111385770B true CN111385770B (zh) 2023-09-22

Family

ID=71123268

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201911348080.9A Active CN111385770B (zh) 2018-12-26 2019-12-24 车载装置、控制方法、存储有程序的非易失性存储介质以及车辆

Country Status (3)

Country Link
US (1) US11144771B2 (zh)
JP (1) JP2020106965A (zh)
CN (1) CN111385770B (zh)

Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN1442818A (zh) * 2002-03-05 2003-09-17 日本电气英富醍株式会社 移动服务系统
JP2007066311A (ja) * 2005-08-26 2007-03-15 Palo Alto Research Center Inc 車両における広告及びクーポン提示の管理システム及び管理方法
JP2014178770A (ja) * 2013-03-13 2014-09-25 Nomura Research Institute Ltd 情報処理システムおよび情報処理方法
JP2017033413A (ja) * 2015-08-04 2017-02-09 ユニファ株式会社 ロボット撮影システムおよび画像管理方法
WO2018116537A1 (ja) * 2016-12-22 2018-06-28 日本電気株式会社 情報処理システム、顧客特定装置、情報処理方法及びプログラム
CN108725432A (zh) * 2017-04-13 2018-11-02 丰田自动车株式会社 自动驾驶装置以及通知方法

Family Cites Families (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
DE102015105581A1 (de) * 2014-11-03 2016-05-04 Audi Ag System und Verfahren zur Überwachung des Gesundheitszustandes und/oder des Befindens eines Fahrzeuginsassen
JP6663703B2 (ja) 2015-12-14 2020-03-13 株式会社インターネット・イノベーション 見守りシステム
US9932041B2 (en) * 2016-08-10 2018-04-03 Toyota Jidosha Kabushiki Kaisha Personalized medical emergency autopilot system based on portable medical device data
US10233021B1 (en) * 2016-11-02 2019-03-19 Amazon Technologies, Inc. Autonomous vehicles for delivery and safety

Patent Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN1442818A (zh) * 2002-03-05 2003-09-17 日本电气英富醍株式会社 移动服务系统
JP2007066311A (ja) * 2005-08-26 2007-03-15 Palo Alto Research Center Inc 車両における広告及びクーポン提示の管理システム及び管理方法
JP2014178770A (ja) * 2013-03-13 2014-09-25 Nomura Research Institute Ltd 情報処理システムおよび情報処理方法
JP2017033413A (ja) * 2015-08-04 2017-02-09 ユニファ株式会社 ロボット撮影システムおよび画像管理方法
WO2018116537A1 (ja) * 2016-12-22 2018-06-28 日本電気株式会社 情報処理システム、顧客特定装置、情報処理方法及びプログラム
CN108725432A (zh) * 2017-04-13 2018-11-02 丰田自动车株式会社 自动驾驶装置以及通知方法

Also Published As

Publication number Publication date
CN111385770A (zh) 2020-07-07
JP2020106965A (ja) 2020-07-09
US20200210734A1 (en) 2020-07-02
US11144771B2 (en) 2021-10-12

Similar Documents

Publication Publication Date Title
JP5038899B2 (ja) 無線センサーネットワーク及び無線センサーネットワーク方法
EP2779045A1 (en) Computer-based method and system for providing active and automatic personal assistance using an automobile or a portable electronic device
US11151396B2 (en) Real time vehicle occupant emergency health data systems and methods
US10996474B2 (en) Virtual reality system and information processing system
CN111868773A (zh) 商店管理设备及商店管理方法
KR101983558B1 (ko) 보험금 청구 하는 방법 및 장치
US20170206664A1 (en) Method for identifying, tracking persons and objects of interest
CN111199180A (zh) 信息处理系统、程序和信息处理方法
JP7298594B2 (ja) 店舗管理装置および店舗管理方法、プログラム
US20230419670A1 (en) Information processing apparatus, information processing method, and program
JP2018195166A (ja) 姿勢判定プログラム、姿勢判定装置及び姿勢判定方法
US20190051414A1 (en) System and method for vehicle-based health monitoring
CN111385770B (zh) 车载装置、控制方法、存储有程序的非易失性存储介质以及车辆
CN111325088B (zh) 信息处理系统、记录介质以及信息处理方法
WO2006109954A1 (en) Rf-tag, mobile communication terminal and information providing device utilizing both of them
JP7237871B2 (ja) 対象検出方法
EP2575085B1 (en) System, method and product for managing interactions of a person with objects
JPWO2021240754A5 (ja) 医療情報制御装置、システム、方法及び医療情報制御プログラム
US20200372274A1 (en) Information processing apparatus, control method, and program
US20220318837A1 (en) Information processing apparatus and information processing system
US11694791B2 (en) On-board apparatus, first information processing apparatus, information processing system, and information processing method
CN111462848B (zh) 一种传染病风险评估方法、传染病风险评估装置及服务器
CN111403043A (zh) 基于物联网的资源推荐方法和服务器
EP4300509A1 (en) Closeup image linking
WO2022176427A1 (ja) 電子機器、サーバ、プログラム及び判定方法

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant