CN111133752B - 表情记录系统 - Google Patents

表情记录系统 Download PDF

Info

Publication number
CN111133752B
CN111133752B CN201780094857.6A CN201780094857A CN111133752B CN 111133752 B CN111133752 B CN 111133752B CN 201780094857 A CN201780094857 A CN 201780094857A CN 111133752 B CN111133752 B CN 111133752B
Authority
CN
China
Prior art keywords
stroller
camera
camera image
terminal device
expression
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201780094857.6A
Other languages
English (en)
Other versions
CN111133752A (zh
Inventor
武本卓也
真贝维摩
横尾俊辅
星野泰汉
暮桥昌宏
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Dentsu Group Inc
Original Assignee
Dentsu Inc
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Dentsu Inc filed Critical Dentsu Inc
Publication of CN111133752A publication Critical patent/CN111133752A/zh
Application granted granted Critical
Publication of CN111133752B publication Critical patent/CN111133752B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • BPERFORMING OPERATIONS; TRANSPORTING
    • B62LAND VEHICLES FOR TRAVELLING OTHERWISE THAN ON RAILS
    • B62BHAND-PROPELLED VEHICLES, e.g. HAND CARTS OR PERAMBULATORS; SLEDGES
    • B62B9/00Accessories or details specially adapted for children's carriages or perambulators
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60Control of cameras or camera modules
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00Television systems
    • H04N7/18Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Health & Medical Sciences (AREA)
  • Public Health (AREA)
  • Chemical & Material Sciences (AREA)
  • Combustion & Propulsion (AREA)
  • Transportation (AREA)
  • Mechanical Engineering (AREA)
  • Studio Devices (AREA)

Abstract

表情记录系统(1)具备安装于婴儿车(2)的相机(3)以及由婴儿车(2)的利用者所携带的终端装置(4)。相机(3)能拍摄婴儿车(2)的乘车者的相机图像,终端装置(4)能与相机(3)通信。终端装置(4)在输入由相机(3)拍摄出的相机图像时从该相机图像中检测婴儿车(2)的乘车者的特定的表情,在检测到特定的表情时,对相机(3)发送拍摄婴儿车(2)的周围的相机图像的周围拍摄请求。由此,能在利用婴儿车(2)的外出过程中记录乘坐该婴儿车(2)的婴幼儿的特定的表情。

Description

表情记录系统
技术领域
本发明涉及用于记录婴儿车的乘车者的特定的表情的表情记录系统。
背景技术
从以往,在带着婴幼儿外出时利用了婴儿车。在现有的婴儿车中,为了使就座于座椅的婴幼儿能尽可能舒适一些,花费了各种各样的工夫。例如,通过缓冲性优异的构件形成婴幼儿就座的座椅,来谋求乘坐舒适度的提高(参照专利文献1)。
另外,现有技术中,从使婴儿车成为对婴幼儿来说想要积极乘坐的交通工具的角度出发,还提出了能一边乘坐婴儿车一边欣赏影像、音乐这样的内容的婴儿车(参照专利文献2)。
在上述现有的婴儿车中,由于能得到舒适的乘坐感觉,或者能欣赏影像、音乐这样的内容,因此乘坐婴儿车的婴幼儿能在婴儿车中享受外出的乐趣,从而露出笑脸的机会增加。然而,在利用婴儿车的外出过程中对乘坐该婴儿车的婴幼儿的笑脸进行记录的系统到目前为止还没有被提出,存在开发的余地。
在先技术文献
专利文献
专利文献1:JP特开2004-216998号公报
专利文献1:JP特开2008-308053号公报
发明内容
(发明要解决的课题)
本发明是在上述背景下进行的。本发明的目的是提供一种表情记录系统,能在利用婴儿车的外出过程中记录乘坐该婴儿车的婴幼儿的特定的表情。
(用于解决课题的技术方案)
本发明的一形态是表情记录系统,该表情记录系统具备:相机,安装于婴儿车,能拍摄婴儿车的乘车者的相机图像;以及终端装置,由婴儿车的利用者所携带,能与相机通信,终端装置具备:数据输入部,输入由相机拍摄出的相机图像;表情检测部,从相机图像中检测婴儿车的乘车者的特定的表情;以及周围拍摄请求部,在检测到特定的表情时,周围拍摄请求部对相机发送拍摄婴儿车的周围的相机图像的周围拍摄请求。
本发明的另一形态是婴儿车,该婴儿车具备能拍摄乘车者的相机图像的相机,相机能与由婴儿车的利用者所携带的终端装置进行通信,在从相机拍摄出的相机图像中检测到婴儿车的乘车者的特定的表情时,终端装置对相机发送周围拍摄请求,相机根据周围拍摄请求来拍摄婴儿车的周围的相机图像。
本发明的又一形态是程序,该程序是在由婴儿车的利用者所携带的终端装置中执行的程序,终端装置能与安装于婴儿车的相机进行通信,相机能拍摄婴儿车的乘车者的相机图像,程序使终端装置执行如下处理:即,在输入由相机拍摄出的相机图像时,从相机图像中检测婴儿车的乘车者的特定的表情的处理;以及在检测到特定的表情时,对相机发送拍摄婴儿车的周围的相机图像的周围拍摄请求的处理。
本发明的再一形态是表情记录系统,该表情记录系统具备:相机,安装于移动体,能拍摄移动体的乘车者的相机图像;以及终端装置,由利用者所携带,能与相机进行通信,终端装置具备:数据输入部,输入由相机拍摄出的相机图像;表情检测部,从相机图像中检测移动体的乘车者的特定的表情;以及周围拍摄请求部,在检测到特定的表情时,周围拍摄请求部对相机发送拍摄移动体的周围的相机图像的周围拍摄请求。
如下说明,在本发明中存在其他形态。因此,该发明的公开旨在提供本发明的一部分的形态,并非旨在对在此记载请求的发明的范围进行限制。
附图说明
图1是本发明的实施方式中的表情记录系统(笑脸记录系统)的说明图。
图2是本发明的实施方式中的终端装置的框图。
图3是本发明的实施方式中的同一画面显示的说明图。
图4是本发明的实施方式中的笑脸检测位置显示的说明图。
图5是本发明的实施方式中的同一画面显示处理的流程图。
图6是本发明的实施方式中的笑脸图像选择处理的流程图。
图7是本发明的实施方式中的影像/音乐再现处理的流程图。
图8是本发明的实施方式中的笑脸检测位置记录处理/接近通知处理的流程图。
图9是本发明的实施方式中的视线方向检测处理的流程图。
具体实施方式
下面对本发明的详细说明进行阐述。但是,以下的详细的说明和附图并不限定发明。
本发明的表情记录系统具备:相机,安装于婴儿车,能拍摄婴儿车的乘车者的相机图像;以及终端装置,由婴儿车的利用者所携带,并能与相机进行通信,终端装置具备:数据输入部,输入由相机拍摄出的相机图像;表情检测部,从相机图像中检测婴儿车的乘车者的特定的表情;周围拍摄请求部,在检测到特定的表情时,周围拍摄请求部对相机发送拍摄婴儿车的周围的相机图像的周围拍摄请求。
根据该构成,能在利用婴儿车的外出过程中拍摄乘车者(例如婴幼儿等)的相机图像。而且例如,若在经过某个地点时婴儿车的乘车者变为特定的表情,则拍摄该地点的婴儿车的周围的相机图像。由此,不仅能得到婴儿车的乘车者的特定的表情的相机图像,而且能得到包含使该乘车者变为特定的表情的因素(该乘车者中意的对象物等)的婴儿车的周围的相机图像。
另外,在本发明的表情记录系统中,终端装置也可以具备显示处理部,显示处理部将检测到特定的表情时的乘车者的相机图像与检测到该特定的表情时的周围的相机图像显示于同一画面上。
根据该构成,能在同一画面上容易地掌握婴儿车的乘车者(例如婴幼儿等)的特定的表情与该乘车者变为特定的表情的因素(该乘车者的中意的对象物等)之间的对应关系。
另外,在本发明的表情记录系统中,终端装置还可以具备:继续拍摄请求部,在检测到特定的表情的期间,继续拍摄请求部对相机发送继续拍摄婴儿车的乘车者的相机图像的继续拍摄请求;以及图像选择部,从继续拍摄得到的乘车者的相机图像之中选择特定的表情的程度为给定值以上的相机图像。
根据该构成,婴儿车的乘车者(例如婴幼儿等)变为特定的表情的期间,继续地持续拍摄乘车者的相机图像(特定的表情的相机图像),并从中自动地选择特定的表情的程度高的相机图像。由此,能得到具有特征性的表情的相机图像。
另外,在本发明的表情记录系统中,终端装置还可以具备:感情分析部,从相机图像分析婴儿车的乘车者的感情;以及再现处理部,根据作为分析结果而得到的婴儿车的乘车者的感情来再现影像或者音乐。
根据该构成,从婴儿车的乘车者(例如婴幼儿等)的相机图像分析该乘车者的感情,并根据该感情自动地再现影像、音乐。由此,能在婴儿车的外出过程中演出与乘车者的感情相契合的影像、音乐。
另外,在本发明的表情记录系统中,终端装置也可以具备:位置信息获取部,从相机获取婴儿车的位置信息;记录处理部,将检测到特定的表情时的婴儿车的位置作为表情检测位置进行记录;以及通知处理部,在婴儿车接近表情检测位置时向婴儿车的利用者进行通知。
根据该构成,记录婴儿车的乘车者(例如婴幼儿等)变为特定的表情的位置(表情检测位置),其次,在接近该地点时会通知利用者。由此,婴儿车的利用者能掌握婴儿车的乘车者变成特定的表情的地点(乘车者中意的地点),在婴儿车的外出过程中接近该地点时能知道该情况。
另外,在本发明的表情记录系统中,终端装置还可以具备:朝向信息获取部,从相机获取婴儿车的朝向信息;以及视线方向检测处理部,将检测到特定的表情时的婴儿车的朝向检测为乘车者的视线方向。
根据该构成,在婴儿车的乘车者(例如婴幼儿等)变成特定的表情时,能知道该乘车者的视线方向(所观察的方向)。由此,能确定该乘车者中意的对象物。
本发明的婴儿车是具备能拍摄乘车者的相机图像的相机的婴儿车,相机能与由婴儿车的利用者所携带的终端装置进行通信,在从由相机拍摄出的相机图像中检测到婴儿车的乘车者的特定的表情时,终端装置对相机发送周围拍摄请求,相机根据周围拍摄请求来拍摄婴儿车的周围的相机图像。
根据该婴儿车,与上述系统同样,不仅能得到婴儿车的乘车者的特定的表情的相机图像,而且能得到包含使该乘车者变为特定的表情的因素(该乘车者中意的对象物等)的婴儿车的周围的相机图像。
本发明的程序是在由婴儿车的利用者所携带的终端装置中执行的程序,终端装置安装于婴儿车,能与相机进行通信,相机能拍摄婴儿车的乘车者的相机图像,程序使终端装置执行以下处理:在输入由相机拍摄出的相机图像时,从相机图像中检测婴儿车的乘车者的特定的表情的处理;以及在检测到特定的表情时,对相机发送拍摄婴儿车的周围的相机图像的周围拍摄请求的处理。
根据该程序,与上述系统同样,不仅能得到婴儿车的乘车者的特定的表情的相机图像,而且能得到包含使该乘车者变为特定的表情的因素(该乘车者中意的对象物等)的婴儿车的周围的相机图像。
根据本发明,能在婴儿车的外出过程中记录乘坐该婴儿车的婴幼儿的特定的表情。
(实施方式)
以下,使用附图来说明本发明的实施方式的表情记录系统。在本实施方式中,例示用于婴幼儿乘坐的婴儿车等的表情记录系统的情况。该表情记录系统具备在利用婴儿车的外出过程中对乘坐该婴儿车的婴幼儿的特定的表情进行记录的功能。以下,例示以“笑脸”来作为特定的表情的例子的情况进行说明,但关于“哭相”、“怒容”以及“鬼脸”等其他表情,也能同样实施。
参照附图来说明本发明的实施方式的表情记录系统(笑脸记录系统)的构成。图1是表示本实施方式的表情记录系统的概略构成的说明图。如图1所示,表情记录系统1具备安装于婴儿车2的相机3、以及由婴儿车2的利用者所携带的终端装置4。此外,婴儿车2的乘车者例如是婴幼儿,婴儿车2的利用者是例如婴幼儿的监护人。
首先,参照图1来说明相机3的构成。相机3安装于婴儿车2以能拍摄婴儿车2的乘车者的相机图像。相机图像既可以是静止图像,也可以是运动图像。例如,相机3以拍摄方向朝向婴儿车2的乘车者的状态(即,朝向臂5的内侧的状态)安装于婴儿车2的臂5等。臂5例如构成为圆弧状或者拱状,以在婴儿车2的座椅6的前方(就座于座椅6的乘车者的前方)横穿的方式配置。此外,相机3也可以内置于臂5,还可以以能装卸的方式安装于臂5。
另外,相机3构成为能拍摄婴儿车2的周围。例如,相机3构成为能使用广角镜头在广角下拍摄婴儿车2的周围。或者,相机3构成为能使用360度镜头拍摄婴儿车2的整个周围。另外,相机3也可以具备摇摄功能、倾斜功能。在此情况下,相机3构成为能通过使相机镜头在摇摄方向、倾斜方向上旋转来拍摄婴儿车2的周围(或者整个周围)。
进而,相机3具备GPS功能,即,通过与GPS卫星进行通信,来获取表示当前的相机3的位置(婴儿车2的位置)的位置信息(例如,经度纬度信息)。另外,相机3具备获取表示当前的相机3的朝向(婴儿车2的朝向)的朝向信息(例如,方位信息)的陀螺仪功能。另外,相机3具备与终端装置4以无线或者有线进行通信的功能。因此,相机3除拍摄出的相机图像的数据以外,还能将这些位置信息、朝向信息发送到终端装置4。另外,相机3能从终端装置4接收后述的周围拍摄请求、继续拍摄请求等请求信号。此外,相机3的蓄电池既可以在相机3自身中具备,也可以在婴儿车2中具备。
接下来,参照图2来说明终端装置4的构成。图2是用于说明终端装置4的构成的框图。终端装置4例如是智能手机等便携式的终端装置4。如图2所示,终端装置4具备触摸面板10、扬声器11、存储部12、通信部13、第一控制部14以及第二控制部15。此外,第一控制部14和第二控制部15也可以构成为一个控制部。
触摸面板10兼具输入部和显示部的功能。因此,终端装置4的利用者(婴儿车2的利用者)能从触摸面板10输入各种信息。另外,在触摸面板10显示各种信息,以能够供终端装置4的利用者(婴儿车2的利用者)确认。扬声器11具备对终端装置4的利用者(婴儿车2的利用者)输出声音的功能。
存储部12由存储器等构成,能保存各种数据。例如,在存储部12中,存储由相机3拍摄出的相机图像的数据。在该存储部12中,也可以存储影像、音乐等数据。另外,在该存储部12中,存储有用于实现终端装置4的各种功能(也包含表情记录功能)的程序。也可谓通过执行该程序来实现终端装置4的各种功能。
通信部13具备与外部装置以无线或者有线进行通信的功能。外部装置还包括上述相机3。因此,通信部13具备与相机3以无线或者有线进行通信的功能,终端装置4从相机3不仅能接收拍摄出的相机图像的数据,还能接收上述位置信息、朝向信息。另外,终端装置4能向相机3发送后述的周围拍摄请求、继续拍摄请求等请求信号。此外,通信方式能利用公知的方式。
第一控制部14是用于进行与表情记录功能相关的主控制的控制部,具备:数据输入部140、表情检测部141、周围拍摄请求部142、显示处理部143、继续拍摄请求部144以及图像选择部145。
数据输入部140为了实现表情记录功能,具有作为输入各种各样的数据的输入接口的功能。例如,在数据输入部140中,输入由相机3拍摄出的相机图像(例如,婴儿车2的乘车者的相机图像)。表情检测部141具备从输入至数据输入部140的相机图像中检测婴儿车2的乘车者的特定的表情的功能。例如,表情检测部141通过在相机图像中实施笑脸检测用的图像处理,能检测婴儿车2的乘车者的笑脸。此外,笑脸检测的手法能利用公知的手法。同样,关于其他特定的表情的检测(例如,哭相检测、怒容检测以及鬼脸检测等),也能利用公知的手法。
周围拍摄请求部142具备在由表情检测部141从相机图像中检测到婴儿车2的乘车者的笑脸时对相机3发送拍摄婴儿车2的周围的相机图像的周围拍摄请求的功能。周围拍摄请求经由通信部13从终端装置4向相机3发送。相机3若接收到周围拍摄请求则拍摄婴儿车2的周围的相机图像,并将该相机图像(婴儿车2的周围的相机图像)向终端装置4返送。
显示处理部143具备将该相机图像(婴儿车2的周围的相机图像)与检测到笑脸时的乘车者的相机图像一起显示于同一画面上的功能。图3是表示同一画面显示的一例的说明图。如图3所示,显示处理部143将检测到笑脸时的乘车者的相机图像与此时的婴儿车2的周围的相机图像排列于同一画面进行显示。此外,虽然在图3的例中是将检测到笑脸时的乘车者的相机图像与此时的婴儿车2的周围的相机图像上下排列进行显示,但只要在同一画面上,也可以是左右排列等其他的排列方法。另外,显示处理部143也可以具备将连续的相机图像连接起来作为动态图像再现(显示)的功能。在此情况下,能将从检测到笑脸时的乘车者的相机图像生成的动态图像与从此时的婴儿车2的周围的相机图像生成的动态图像排列显示于同一画面。
继续拍摄请求部144具备在由表情检测部141从相机图像中检测到婴儿车2的乘车者的笑脸的期间对相机3发送继续拍摄婴儿车2的乘车者的相机图像的继续拍摄请求的功能。继续拍摄请求经由通信部13而从终端装置4向相机3发送。若相机3接收到继续拍摄请求,则继续拍摄婴儿车2的乘车者的相机图像。如此拍摄出的多个相机图像(继续拍摄得到的乘车者的笑脸的相机图像)从相机3向终端装置4返送。
图像选择部145具备从这些多个相机图像(继续拍摄得到的乘车者的笑脸的相机图像)之中选择笑脸度为给定值以上的相机图像的功能。例如,图像选择部145从多个相机图像中分别检测笑脸,并按每个检测到的笑脸计算笑脸度。而且,图像选择部145从笑脸度为给定值以上的相机图像之中选择一个笑脸度最大的相机图像。此外,若是笑脸度为给定值以上的相机图像,则可以选择多个相机图像。另外,关于笑脸度的计算,能利用公知的手法。同样,关于其他特定的表情的程度(例如,哭相度、怒容度以及鬼脸度等)的计算,也能利用公知的手法。
第二控制部15是用于进行与表情记录功能相关的子控制的控制部,具备:感情分析部150、再现处理部151、位置获取部152、记录处理部153、通知处理部154、朝向信息获取部155以及视线方向检测处理部156。
感情分析部150具备从由相机3拍摄出的相机图像(婴儿车2的乘车者的相机图像)分析该婴儿车2的乘车者的感情的功能。例如,感情分析部150能从相机图像(婴儿车2的乘车者的相机图像)分析该婴儿车2的乘车者的感情是“喜”“怒”“哀”“乐”中的哪一种。此外,感情分析的手法能利用公知的手法。
再现处理部151具备根据感情分析部150的分析结果(作为分析结果而得到的婴儿车2的乘车者的感情)来再现影像或者音乐的功能。例如,若作为分析结果而得到的婴儿车2的乘车者的感情是“喜”、“乐”,则再现处理部151再现欢快气氛的影像、音乐,若作为分析结果而得到的婴儿车2的乘车者的感情是“怒”、“哀”,则再现处理部151再现压抑气氛的影像、音乐。
位置获取部152具备获取婴儿车2的位置信息的功能。例如,位置获取部152具备获取终端装置4的当前的位置信息(例如,经度纬度信息)的GPS功能。位置获取部152获取该终端装置4的位置信息作为婴儿车2的位置信息。另外,如上所述,相机3具备获取表示相机3的当前的位置的位置信息(例如,经度纬度信息)的GPS功能,因此位置获取部152也可以从相机3获取该相机3的位置信息来作为婴儿车2的位置信息(安装于该相机3的婴儿车2的位置信息)。
记录处理部153具备将表情检测部141从相机图像中检测到婴儿车2的乘车者的笑脸时的婴儿车2的位置(例如,纬度经度)记录为笑脸检测位置的功能。笑脸检测位置的信息记录于存储部12。此外,在存储部12中,也可以储存其他利用者的笑脸检测位置(检测到其他的婴儿车2的乘车者的笑脸的位置)。
通知处理部154具备在婴儿车2接近笑脸检测位置时向婴儿车2的利用者进行通知的功能。在婴儿车2的当前的位置(通过位置获取部152从相机3获取)接近笑脸检测位置(存储于存储部12)时,通知处理部154向婴儿车2的利用者进行通知。例如,若进入以笑脸检测位置为中心的给定半径的圆形区域内,则向婴儿车2的利用者进行通知。向婴儿车2的利用者进行的通知能以声音、光、振动等公知的手法进行。另外,通知处理部154也可以具备对婴儿车2的利用者进行与感情分析部150的分析结果(作为分析结果而得到的婴儿车2的乘车者的感情)相应的通知的功能。例如,在作为分析结果而得到的婴儿车2的乘车者的感情为“怒”、“哀”的情况下,通知处理部154可以通知最近的笑脸检测位置。向婴儿车2的利用者进行的通知例如能使用触摸面板10(基于画面显示的通知)、扬声器11(基于声音的通知)进行。
朝向信息获取部155具备检测婴儿车2的朝向的功能。如上所述,相机3具备获取表示相机3的当前的朝向的信息(例如,方位信息)的陀螺仪功能,朝向信息获取部155从相机3获取该相机3的朝向信息作为婴儿车2的朝向(安装有该相机3的婴儿车2的朝向)。
视线方向检测处理部156具备将表情检测部141从相机图像中检测到婴儿车2的乘车者的笑脸时的婴儿车2的朝向检测为该婴儿车2的乘车者的视线方向(例如,东西南北等的方位)的功能。此外,视线方向检测的手法能利用公知的手法。例如,可以关注婴儿车2的乘车者的相机图像当中眼睛的部分来实施图像解析等,计算乘车者的视线方向,将该时间点的婴儿车2的朝向(行进方向)纳入考虑,检测婴儿车2的乘车的视线方向(例如,东西南北等的方位)。检测到的视线方向的信息储存于存储部12。
此外,显示处理部143也可以将笑脸检测位置显示于地图上。图4是表示笑脸检测位置显示的一例的说明图。在图4的例子中,笑脸检测位置以“笑脸标记”显示于地图上。另外,在图4中,婴儿车2的当前位置以圆圈来显示,婴儿车2的朝向(行进方向)以三角箭头来显示。在图4的例子中,婴儿车2的朝向在地图上是朝右方向。
关于以上构成的表情记录系统1,参照图5~图9的流程图来说明其动作。
图5是本实施方式的表情记录系统1中的同一画面显示处理的流程图。在终端装置4中,始终以实时取景来显示由相机3拍摄的婴儿车2的乘车者的相机图像(运动图像)。在由终端装置4进行同一画面显示处理的情况下,如图5所示,首先,从相机3向终端装置4输入相机图像(S10),执行从输入的相机图像中检测婴儿车2的乘车者的笑脸的处理(S11)。
而且,在从相机图像中检测到婴儿车2的乘车者的笑脸的情况下(S12),从终端装置4向相机3发送周围拍摄请求(S13),根据该周围拍摄请求拍摄的婴儿车2的周围的相机图像由相机3进行拍摄。若将这样拍摄出的婴儿车2的周围的相机图像输入至终端装置4(S14),则将检测到笑脸时的婴儿车2的乘车者的相机图像(笑脸的相机图像)与检测到该笑脸时的婴儿车2的周围的相机图像显示于同一画面上(S15)。
图6是表示本实施方式的表情记录系统1中的笑脸图像选择处理的流程图。如图6所示,在由终端装置4进行笑脸图像选择处理的情况下,首先,从相机3向终端装置4输入相机图像(S20),执行从输入的相机图像中检测婴儿车2的乘车者的笑脸的处理(S21)。
而且,在从相机图像中检测到婴儿车2的乘车者的笑脸的情况下(S22),从终端装置4向相机3发送继续拍摄请求(S23),重复婴儿车2的乘车者的相机图像(笑脸的相机图像)的拍摄。而且,若不能从相机图像中检测到婴儿车2的乘车者的笑脸(S22),则从继续拍摄的相机图像(笑脸的相机图像)之中选择1个笑脸度为给定以上且笑脸度最大的相机图像(S24)。此外,只要是笑脸度为给定值以上的相机图像,就可以选择多个相机图像。
图7是表示本实施方式的表情记录系统1中的影像/音乐再现处理的流程图。如图7所示,在终端装置4中进行影像/音乐再现处理的情况下,在从相机3向终端装置4输入相机图像(S30)时,从该相机图像分析婴儿车2的乘车者的感情(例如“喜”“怒”“哀”“乐”)(S31)。而且,根据该婴儿车2的乘车者的感情来再现影像或者音乐(S32)。例如,在将婴儿车2的乘车者的感情分析为“喜”、“乐”的情况下,再现欢快气氛的影像、音乐。另一方面,在将婴儿车2的乘车者的感情分析为“怒”、“哀”的情况下,再现压抑气氛的影像、音乐。
图8是本实施方式的表情记录系统1中的笑脸检测位置记录处理/接近通知处理的流程图。如图8所示,在由终端装置4进行笑脸检测位置记录处理/接近通知处理的情况下,首先,在从相机3输入相机图像时,从该相机3获取相机3的位置信息(婴儿车2的位置信息)(S40)。而且,从输入的相机图像中检测婴儿车2的乘车者的笑脸(S41)。将此时的婴儿车2的位置作为笑脸检测位置记录于存储部12(S42)。
其后(例如,在下次利用婴儿车2的外出时等),在从相机3输入相机图像时,获取该相机3的位置信息(婴儿车2的位置信息)(S43)将该婴儿车2的位置与所记录的笑脸检测位置进行比较,若判定为婴儿车2接近笑脸检测位置(例如接近从笑脸检测位置起给定半径内)(S44),则向婴儿车2的利用者通知该情况(S45)。
图9是本实施方式的表情记录系统1中的视线方向检测处理的流程图。如图9所示,在由终端装置4进行视线方向检测处理的情况下,首先,在从相机3输入相机图像时,从该相机3获取婴儿车2的朝向信息(S50)。而且,从输入的相机图像中检测婴儿车2的乘车者的笑脸(S51)。将此时的婴儿车2的朝向检测为婴儿车2的乘车者的视线方向(S52),将检测到的视线方向记录于存储部12(S53)。
根据这样的本实施方式的表情记录系统1,能在利用婴儿车2的外出过程中记录乘坐该婴儿车2的婴幼儿的笑脸。
即,在本实施方式中,能在利用婴儿车2的外出过程中拍摄乘车者(例如婴幼儿等)的相机图像。而且例如,若在经过某个地点时婴儿车2的乘车者变为笑脸,则拍摄该地点的婴儿车2的周围的相机图像。由此,不仅能得到婴儿车2的乘车者的笑脸的相机图像,而且能得到包含使该乘车者变为笑脸的因素(该乘车者中意的对象物等)的婴儿车2的周围的相机图像。
另外,在本实施方式中,在同一画面上能容易地掌握婴儿车2的乘车者(例如婴幼儿等)的笑脸与该乘车者变为笑脸的因素(该乘车者中意的对象物等)之间的对应关系。
另外,在本实施方式中,在婴儿车2的乘车者(例如婴幼儿等)变为笑脸的期间,继续地持续拍摄乘车者的相机图像(笑脸的相机图像),并从中自动地选择笑脸度高的(好的笑脸的)相机图像。由此,能得到好的笑脸的相机图像。
另外,在本实施方式中,从婴儿车2的乘车者(例如婴幼儿等)的相机图像分析该乘车者的感情,并根据该感情来自动地再现影像、音乐。由此,在婴儿车2的外出过程中能演出与乘车者的感情相契合的影像、音乐。
另外,在本实施方式中,记录婴儿车2的乘车者(例如婴幼儿等)变为笑脸的位置(笑脸检测位置),接下来在接近该地点时通知利用者。由此,婴儿车2的利用者能掌握婴儿车2的乘车者变为笑脸的地点(乘车者中意的地点),并能在利用婴儿车2的外出过程中接近该地点时知道该情况。
另外,在本实施方式中,在婴儿车2的乘车者(例如婴幼儿等)变为笑脸时,能知道该乘车者的视线方向(所观察的方向)。由此,能确定该乘车者中意的对象物。
以上通过例示说明了本发明的实施方式,但本发明的范围不限于此,能在权利要求记载的范围内根据目的进行变更/变形。
例如,虽然在上述实施方式中说明了将相机3安装于婴儿车2的例子,但本发明的范围不限于此。相机3例如也可以安装于在汽车等移动体的座席设置的儿童座椅。此外,在儿童座椅不具备相当于婴儿车2的臂5的构件的情况下,相机3能设置于儿童座椅的外部的适合的位置(例如,顶棚、前座席的背面、支柱的内表面以及控制台面板的上表面等)。
另外,相机3的数量不限于1台。尤其是在相机3设置于乘用车的情况下,除了用于对乘车者的表情(笑脸)的相机图像进行拍摄的相机(车内相机)以外,也可以使用对车辆的周围的相机图像进行拍摄的相机(车外相机)。另外,针对车内相机、车外相机,可以分别使用多台相机3。
由此,能在利用乘用车的外出过程中拍摄坐在儿童座椅上的乘车者(例如婴幼儿等)的相机图像。而且例如,若在经过某个地点时乘车者变为笑脸,则拍摄该地点的车辆的周围的相机图像。由此,不仅能得到乘车者的笑脸的相机图像,而且能得到包含使该乘车者变为笑脸的因素(该乘车者中意的对象物等)的车辆的周围的相机图像。
以上说明了当前时间点所考虑的本发明的优选实施方式,但应理解为能对本实施方式进行各种变形,而且,权利要求请求保护的范围旨在包含本发明的真实主旨和范围内的全部变形。
(工业实用性)
综上所述,本发明所涉及的表情记录系统具有能在利用婴儿车的外出过程中记录乘坐该婴儿车的婴幼儿的笑脸这样的效果,适用于使婴幼儿乘坐的婴儿车等,具有实用性。
(标号说明)
1 表情记录系统(笑脸记录系统)
2 婴儿车
3 相机
4 终端装置
5 臂
6 座椅
10 触摸面板
11 扬声器
12 存储部
13 通信部
14 第一控制部
140 数据输入部
141 表情检测部
142 周围拍摄请求部
143 显示处理部
144 继续拍摄请求部
145 图像选择部
15 第二控制部
150 感情分析部
151 再现处理部
152 位置获取部
153 记录处理部
154 通知处理部
155 朝向信息获取部
156 视线方向检测处理部。

Claims (7)

1.一种表情记录系统,其特征在于,具备:
相机,安装于婴儿车,能拍摄所述婴儿车的乘车者的相机图像;以及
终端装置,由所述婴儿车的利用者所携带,能与所述相机通信,
所述终端装置具备:
数据输入部,输入由所述相机拍摄出的所述相机图像;
表情检测部,从所述相机图像中检测所述婴儿车的乘车者的特定的表情;
周围拍摄请求部,在检测到所述特定的表情时,所述周围拍摄请求部对所述相机发送拍摄所述婴儿车的周围的相机图像的周围拍摄请求;
位置信息获取部,获取所述婴儿车的位置信息;
记录处理部,将检测到所述特定的表情时的所述婴儿车的位置作为表情检测位置进行记录;以及
通知处理部,在所述婴儿车接近所述表情检测位置时向所述婴儿车的利用者进行通知。
2.根据权利要求1所述的表情记录系统,其中,
所述终端装置具备显示处理部,所述显示处理部将检测到所述特定的表情时的所述乘车者的相机图像与检测到该特定的表情时的所述周围的相机图像显示于同一画面上。
3.根据权利要求1所述的表情记录系统,其中,
所述终端装置具备:
继续拍摄请求部,在检测到所述特定的表情的期间,所述继续拍摄请求部对所述相机发送继续拍摄所述婴儿车的乘车者的相机图像的继续拍摄请求;以及
图像选择部,从继续拍摄得到的所述乘车者的相机图像之中选择特定的表情的程度为给定值以上的相机图像。
4.根据权利要求1所述的表情记录系统,其中,
所述终端装置具备:
感情分析部,从所述相机图像分析所述婴儿车的乘车者的感情;以及
再现处理部,根据作为分析结果而得到的所述婴儿车的乘车者的感情来再现影像或者音乐。
5.根据权利要求1所述的表情记录系统,其中,
所述终端装置具备:
朝向信息获取部,从所述相机获取所述婴儿车的朝向信息;以及
视线方向检测处理部,将检测到所述特定的表情时的所述婴儿车的朝向检测为所述乘车者的视线方向。
6.一种婴儿车,其特征在于,具备能拍摄乘车者的相机图像的相机,
所述相机能与由所述婴儿车的利用者所携带的终端装置进行通信,
在从所述相机拍摄出的所述相机图像中检测到所述婴儿车的乘车者的特定的表情时,所述终端装置对所述相机发送周围拍摄请求,
所述相机根据所述周围拍摄请求来拍摄所述婴儿车的周围的相机图像,
所述终端装置获取所述婴儿车的位置信息,将检测到所述特定的表情时的所述婴儿车的位置作为表情检测位置进行记录,并在所述婴儿车接近所述表情检测位置时向所述婴儿车的利用者进行通知。
7.一种计算机可读的记录介质,其特征在于,记录有在由婴儿车的利用者所携带的终端装置中执行的程序,
所述终端装置能与安装于所述婴儿车的相机进行通信,
所述相机能拍摄所述婴儿车的乘车者的相机图像,
所述程序使所述终端装置执行如下处理,即,
在输入由所述相机拍摄出的所述相机图像时,从所述相机图像中检测所述婴儿车的乘车者的特定的表情的处理;
在检测到所述特定的表情时,对所述相机发送拍摄所述婴儿车的周围的相机图像的周围拍摄请求的处理;
获取所述婴儿车的位置信息的处理;
将检测到所述特定的表情时的所述婴儿车的位置作为表情检测位置进行记录的处理;以及
在所述婴儿车接近所述表情检测位置时向所述婴儿车的利用者进行通知的处理。
CN201780094857.6A 2017-09-22 2017-09-22 表情记录系统 Active CN111133752B (zh)

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
PCT/JP2017/034248 WO2019058496A1 (ja) 2017-09-22 2017-09-22 表情記録システム

Publications (2)

Publication Number Publication Date
CN111133752A CN111133752A (zh) 2020-05-08
CN111133752B true CN111133752B (zh) 2021-12-21

Family

ID=65809576

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201780094857.6A Active CN111133752B (zh) 2017-09-22 2017-09-22 表情记录系统

Country Status (2)

Country Link
CN (1) CN111133752B (zh)
WO (1) WO2019058496A1 (zh)

Families Citing this family (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN114594698B (zh) * 2020-11-02 2024-01-02 宁波星巡智能科技有限公司 基于压力检测的智能儿童餐椅及其控制方法
CN113104093A (zh) * 2021-04-14 2021-07-13 潍坊科技学院 婴儿车智能控制系统
US20220408063A1 (en) * 2021-06-18 2022-12-22 Ernesto Williams Stroller Camera Assembly

Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102473264A (zh) * 2009-06-30 2012-05-23 伊斯曼柯达公司 根据观看者因素和反应进行图像显示控制的方法和装置
WO2012154944A2 (en) * 2011-05-10 2012-11-15 Stc.Unm Methods of treating autophagy-associated disorders and related pharmaceutical compositions, diagnostics, screening techniques and kits
CN103358996A (zh) * 2013-08-13 2013-10-23 吉林大学 汽车a柱透视化车载显示装置
WO2013173640A1 (en) * 2012-05-18 2013-11-21 Martin Rawls-Meehan System and method of a bed with a safety stop
CN105391970A (zh) * 2014-08-27 2016-03-09 Metaio有限公司 提供由车辆的场景相机捕获的至少一个图像的方法和系统
US10592103B2 (en) * 2016-11-22 2020-03-17 Lg Electronics Inc. Mobile terminal and method for controlling the same

Family Cites Families (11)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2003092747A (ja) * 2001-09-18 2003-03-28 Fuji Photo Film Co Ltd 監視装置
CN101270998A (zh) * 2007-03-20 2008-09-24 联发科技(合肥)有限公司 根据路段提示兴趣点的电子装置及其方法
JP5157704B2 (ja) * 2008-07-17 2013-03-06 株式会社ニコン 電子スチルカメラ
JP5477777B2 (ja) * 2010-03-31 2014-04-23 サクサ株式会社 画像取得装置
CN102123194B (zh) * 2010-10-15 2013-12-18 张哲颖 利用增强实景技术优化移动导航和人机交互功能的方法
JP2012124767A (ja) * 2010-12-09 2012-06-28 Canon Inc 撮像機器
CN103900591B (zh) * 2012-12-25 2017-11-07 上海博泰悦臻电子设备制造有限公司 沿导航路线周边精确检索兴趣点的导航方法和装置
US20160127657A1 (en) * 2013-06-11 2016-05-05 Sharp Kabushiki Kaisha Imaging system
US8755824B1 (en) * 2013-06-28 2014-06-17 Google Inc. Clustering geofence-based alerts for mobile devices
JP2015067254A (ja) * 2013-10-01 2015-04-13 パナソニックIpマネジメント株式会社 車載機器と、それを搭載した自動車
CN105203117B (zh) * 2014-06-12 2018-05-04 昆达电脑科技(昆山)有限公司 位置判断系统

Patent Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102473264A (zh) * 2009-06-30 2012-05-23 伊斯曼柯达公司 根据观看者因素和反应进行图像显示控制的方法和装置
WO2012154944A2 (en) * 2011-05-10 2012-11-15 Stc.Unm Methods of treating autophagy-associated disorders and related pharmaceutical compositions, diagnostics, screening techniques and kits
WO2013173640A1 (en) * 2012-05-18 2013-11-21 Martin Rawls-Meehan System and method of a bed with a safety stop
CN103358996A (zh) * 2013-08-13 2013-10-23 吉林大学 汽车a柱透视化车载显示装置
CN105391970A (zh) * 2014-08-27 2016-03-09 Metaio有限公司 提供由车辆的场景相机捕获的至少一个图像的方法和系统
US10592103B2 (en) * 2016-11-22 2020-03-17 Lg Electronics Inc. Mobile terminal and method for controlling the same

Also Published As

Publication number Publication date
WO2019058496A1 (ja) 2019-03-28
CN111133752A (zh) 2020-05-08

Similar Documents

Publication Publication Date Title
US9438806B2 (en) Photographing apparatus and photographing method for displaying combined avatar and map information related to a subject
JP3725134B2 (ja) 移動通信システム、移動通信端末、及びプログラム。
CN111133752B (zh) 表情记录系统
US20080030580A1 (en) Command system, imaging device, command device, imaging method, command processing method, and program
US8994785B2 (en) Method for generating video data and image photographing device thereof
KR102155001B1 (ko) 헤드 마운트 디스플레이 장치 및 그 동작방법
JP2011188061A (ja) 画像処理装置、画像処理方法およびプログラム
JP2013162333A (ja) 画像処理装置、画像処理方法、プログラムおよび記録媒体
WO2015186686A1 (ja) 位置特定装置、オーディオ装置、位置特定方法およびプログラム
JP2010093515A (ja) モバイル機器データの複数モニタ選択転送システム
JPH07286854A (ja) 電子地図装置
JP6679368B2 (ja) 表情記録システム
US11394882B2 (en) Display control device, display control method, and program
JP2009083791A (ja) 画像表示方法、車載用画像表示システム及び画像処理装置
TWI787205B (zh) 表情記錄系統、嬰兒車、及表情記錄程式
JP7243616B2 (ja) 情報記録再生装置、情報記録再生プログラムおよび情報記録再生システム
JP2007074081A (ja) 車載用通信装置
JP6146017B2 (ja) 携帯端末装置
JP2022164281A (ja) 再生制御システム及びコンピュータプログラム
JP2013157787A (ja) 動画データ生成システム
JP2017063276A (ja) 映像表示装置、映像表示方法、及びプログラム
WO2024069779A1 (ja) 制御システム、制御方法、および記録媒体
US20240087334A1 (en) Information process system
US20240087339A1 (en) Information processing device, information processing system, and information processing method
JP2019027824A (ja) 表示制御装置、表示制御システム、表示制御方法、及び表示制御プログラム

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
REG Reference to a national code

Ref country code: HK

Ref legal event code: DE

Ref document number: 40026563

Country of ref document: HK

CB02 Change of applicant information

Address after: No. 1, No. 8, No. 1, east new bridge, east new bridge, Tokyo, Japan

Applicant after: Diantong Group Co.,Ltd.

Address before: No. 1, No. 8, No. 1, east new bridge, east new bridge, Tokyo, Japan

Applicant before: DENTSU Inc.

CB02 Change of applicant information
TA01 Transfer of patent application right

Effective date of registration: 20211126

Address after: No. 1, No. 8, No. 1, east new bridge, east new bridge, Tokyo, Japan

Applicant after: DENTSU Inc.

Address before: No. 1, No. 8, No. 1, east new bridge, east new bridge, Tokyo, Japan

Applicant before: Diantong Group Co.,Ltd.

TA01 Transfer of patent application right
GR01 Patent grant
GR01 Patent grant