CN111479026B - 图像形成装置以及事件检测系统 - Google Patents

图像形成装置以及事件检测系统 Download PDF

Info

Publication number
CN111479026B
CN111479026B CN202010054907.1A CN202010054907A CN111479026B CN 111479026 B CN111479026 B CN 111479026B CN 202010054907 A CN202010054907 A CN 202010054907A CN 111479026 B CN111479026 B CN 111479026B
Authority
CN
China
Prior art keywords
event
image data
image forming
forming apparatus
video data
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN202010054907.1A
Other languages
English (en)
Other versions
CN111479026A (zh
Inventor
石仓知弥
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Sharp Corp
Original Assignee
Sharp Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Sharp Corp filed Critical Sharp Corp
Publication of CN111479026A publication Critical patent/CN111479026A/zh
Application granted granted Critical
Publication of CN111479026B publication Critical patent/CN111479026B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N1/00—Scanning, transmission or reproduction of documents or the like, e.g. facsimile transmission; Details thereof
    • H04N1/00885—Power supply means, e.g. arrangements for the control of power supply to the apparatus or components thereof
    • H04N1/00888—Control thereof
    • H04N1/00891—Switching on or off, e.g. for saving power when not in use
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F21/00—Security arrangements for protecting computers, components thereof, programs or data against unauthorised activity
    • G06F21/60—Protecting data
    • G06F21/606—Protecting data by securing the transmission between two devices or processes
    • G06F21/608—Secure printing
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/12—Digital output to print unit, e.g. line printer, chain printer
    • G06F3/1201—Dedicated interfaces to print systems
    • G06F3/1223—Dedicated interfaces to print systems specifically adapted to use a particular technique
    • G06F3/1237—Print job management
    • G06F3/1259—Print job monitoring, e.g. job status
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/12—Digital output to print unit, e.g. line printer, chain printer
    • G06F3/1201—Dedicated interfaces to print systems
    • G06F3/1202—Dedicated interfaces to print systems specifically adapted to achieve a particular effect
    • G06F3/1203—Improving or facilitating administration, e.g. print management
    • G06F3/1207—Improving or facilitating administration, e.g. print management resulting in the user being informed about print result after a job submission
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/80—Camera processing pipelines; Components thereof
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/95—Computational photography systems, e.g. light-field imaging systems
    • H04N23/951—Computational photography systems, e.g. light-field imaging systems by using two or more images to influence resolution, frame rate or aspect ratio
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00—Television systems
    • H04N7/18—Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00—Television systems
    • H04N7/18—Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast
    • H04N7/188—Capturing isolated or intermittent images triggered by the occurrence of a predetermined event, e.g. an object reaching a predetermined position

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Physics & Mathematics (AREA)
  • General Engineering & Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Human Computer Interaction (AREA)
  • Computing Systems (AREA)
  • General Health & Medical Sciences (AREA)
  • Bioethics (AREA)
  • Computer Hardware Design (AREA)
  • Computer Security & Cryptography (AREA)
  • Software Systems (AREA)
  • Health & Medical Sciences (AREA)
  • Accessory Devices And Overall Control Thereof (AREA)
  • Facsimiles In General (AREA)
  • Closed-Circuit Television Systems (AREA)
  • Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)
  • Image Analysis (AREA)

Abstract

一种图像形成装置(20)，其特征在于，具备：作业执行部，其执行作业；图像形成部，其基于所述作业进行图像形成处理；获取部，其获取拍摄到的图像数据；以及检测部，其对所述图像数据进行分析来检测事件，所述检测部在所述作业执行部为待机状态时，对所述事件进行检测。

Description

图像形成装置以及事件检测系统
技术领域
本发明涉及一种图像形成装置等。
背景技术
一直以来，正在发展网络摄像机(IP摄像机)、Web摄像机的利用。此外，提出了与通过将网络摄像机用作监视摄像机从而进行远程监视的监视系统相关的技术。例如，提出了如下的技术：在将网络摄像机拍摄到的影像逐次向服务器发送的情况下，不大幅改变各摄像机间所需的网络整体的频带，且为了继续重要的物体的监视而分配各摄像机所需的网络频带(例如，参照专利文献1)。
现有技术文献
专利文献
专利文献1：日本特开2018-093401
发明内容
本发明所要解决的技术问题
但是，即使使用专利文献1所记载的技术，也无法将网络摄像机拍摄到的影像作为影像数据而残留。因而，需要使用监视系统进行监视的人，总是对影像进行确认。此外，由于需要对网络摄像机进行管理的服务器，因此需要用于构建监视系统的时间和劳力、服务器的费用。
此外，有时即使利用能够与摄像机协作的装置(例如，具备摄像机的图像形成装置)，该装置也无法被应用于监视。例如，没有录像功能且之后无法确认图像、或没有摄像机拍摄到的图像的显示单元、或仅在使用者进行拍摄的时机能够进行拍摄且在发生了某些事件时无法拍摄。此外，即使具备能够与摄像机协作的装置对事件进行感测的传感器，在传感器进行了动作的情况下且在装置资源不足时，存在有错过由摄像机拍摄到的图像、或无法进行图像的分析且事件错过的可能性。
鉴于上述的课题，本发明的目的在于，提供一种能够获取拍摄装置中存储的影像数据，在作业执行的待机中，对影像数据进行分析来检测事件的图像形成装置等。
解决问题的方案
为了解决上述的课题，本发明的图像形成装置的特征在于，具备：
作业执行部，其执行作业；
图像形成部，其基于所述作业进行图像形成处理；
获取部，其获取拍摄到的图像数据；以及
检测部，其对所述图像数据进行分析来检测事件，
所述检测部在所述作业执行部为待机状态时，对所述事件进行检测。
本发明的事件检测系统，包含拍摄装置和图像形成装置，
所述事件检测系统的特征在于，
所述拍摄装置具备：
输入部，其供图像输入；以及
图像数据存储部，其将所述输入的图像存储为图像数据，
所述图像形成装置具备：
作业执行部，其执行作业；
图像形成部，其基于所述作业进行图像形成处理；
获取部，其从所述拍摄装置获取所述图像数据；以及
检测部，其对所述图像数据进行分析来检测事件，
所述检测部在所述作业执行部为待机状态时，对所述事件进行检测。
发明效果
根据本发明，能够获取拍摄装置中存储的影像数据，并在作业执行的待机中，对影像数据进行分析来检测事件。
附图说明
图1为用于对第一实施方式中的事件检测系统的整体结构进行说明的图。
图2为表示第一实施方式中的处理的概要的图。
图3为表示第一实施方式中的状态转变的图。
图4为用于对第一实施方式中的拍摄装置的功能构成进行说明的图。
图5为用于对第一实施方式中的图像形成装置的功能构成进行说明的图。
图6为表示第一实施方式中的影像数据数据库的数据构成的一个示例的图。
图7为表示第一实施方式中的分析数据数据库的数据构成的一个示例的图。
图8为表示第一实施方式中的认证信息存储区域的数据构成的一个示例的图。
图9为用于对第一实施方式中的终端装置的功能构成进行说明的图。
图10为用于对第一实施方式中的拍摄装置的主处理的流程进行说明的流程图。
图11为用于对第一实施方式中的图像形成装置的主处理的流程进行说明的流程图。
图12为用于对第一实施方式中的影像数据获取处理的流程进行说明的流程图。
图13为用于对第一实施方式中的影像数据分析处理的流程进行说明的流程图。
图14为用于对第一实施方式中的动态物体检测处理的流程进行说明的流程图。
图15为用于对第一实施方式中的遗留、带走检测处理的流程进行说明的流程图。
图16为用于对第一实施方式中的异常音检测处理的流程进行说明的流程图。
图17为用于对第一实施方式中的终端装置的主处理的流程进行说明的流程图。
图18为表示第一实施方式中的动作例的图。
图19为表示第一实施方式中的动作例的图。
图20为表示第一实施方式中的动作例的图。
图21为用于对第二实施方式中的动态物体检测处理的流程进行说明的流程图。
图22为用于对第三实施方式中的动态物体检测处理的流程进行说明的流程图。
具体实施方式
以下，参照附图对本发明的实施方式进行说明。另外，在本实施方式中，作为一个示例，对包含本发明的图像形成装置的事件检测系统进行说明。
[1.第一实施方式]
[1.1整体结构]
基于附图对本实施方式的事件检测系统1的整体结构进行图1说明。如图1所示，事件检测系统1由拍摄装置10、图像形成装置20、终端装置30经由网络NW连接来构成。作为网络NW，假定LAN(Local Area Network)，但也可以替代LAN而通过能够进行其他通信的装置(例如，经由LTE(Long Term Evolution)/5G等外部网络的英特网)连接。
拍摄装置10为连接于网络并能够将拍摄到的影像存储为影像数据的装置，且被称作所谓的IP摄像机的装置。图像形成装置20为将从外部输入的图像数据图像形成于记录纸张等从而输出图像的装置，且被称作所谓的多功能设备的装置。终端装置30为供使用者操作的信息处理装置。终端装置30由PC(Personal Computer)、智能电话、平板电脑这样的装置构成。
如图1所示，也可以在网络NW连接有多个拍摄装置10(拍摄装置10a、拍摄装置10b)。在该情况下，也可以按照每个拍摄装置10分别输出影像数据。另外，终端装置30也可以与多个网络NW连接。
[1.2处理的概要]
[1.2.1处理的流程的概要]
参照图2对本实施方式的处理的概要进行说明。图2所示的箭头表示数据的流程，带括号的数字表示发送数据的顺序以及处理数据的顺序。按顺序说明本实施方式的处理的流程的概要。
(1)影像数据的存储
拍摄装置10总是或在预设的期间(例如，平日的18点至次日的8点为止的期间)对恒定的范围的影像进行拍摄，将拍摄到的影像作为影像数据存储于与拍摄装置10连接的存储介质。存储介质例如也可以是SD卡、小型闪存、USB(Universal Serial Bus)存储器这样的便携式存储介质，也可以是HDD(Hard Disk Drive)、SSD(Solid State Drive)这样的不可移除的存储介质(存储装置)。
另外，在本实施方式中，说明在影像数据中包含由通过拍摄装置10输入(拍摄)的图像数据构成的动态图像数据、和由拍摄装置10录音的语音数据。此外，说明拍摄装置10将影像数据作为规定的时间的长度(例如，1小时)的影像文件，并存储于拍摄装置10的存储介质。
(2)影像数据的获取
图像形成装置20在待机状态(例如，未执行印刷作业的情况)时，定期地与拍摄装置10连接，来从拍摄装置10获取影像数据，并存储于图像形成装置20的存储介质。
(3)事件的检测
图像形成装置20对影像数据进行分析来检测事件。事件是指，基于影像数据检测的特征性的变化。具体而言，图像形成装置20对影像数据进行分析，在满足由图像形成装置20的管理者等设定的事件检测条件的情况下，检测与事件检测条件对应的事件。
事件检测条件为，在图像形成装置20检测事件的情况下，满足影像数据的条件。作为事件检测条件，例如作为检测动态物体的映入这样的事件的情况的条件而存储有与影像数据的连续的两帧间的图像数据中的亮度值的差值相关的条件(阈值)、发生变化的区域的大小的条件(阈值)这样的信息。事件检测条件也可以预设，也可以由图像形成装置20的管理者来设定。
在本实施方式中，图像形成装置20检测的事件如下所示。
(a)动态物体的映入的检测(动态物体检测)图像形成装置20一帧一帧读取影像数据中包含的构成动态图像数据的图像数据(帧图像数据)。并且，对连续的帧的图像数据进行比较，对是否发生急剧变化的区域进行判定。在包含发生急剧变化的区域的情况下，图像形成装置20判定为发生动态物体的映入，并对动态物体的映入的事件进行检测。
对于是否包含发生急剧变化的区域，例如基于帧图像数据的亮度值的变化和事件检测条件进行判定。在此，亮度值按照每个像素而取得0～255的值，此外，亮度值的差值的条件(例如，“50以上”)和面积的条件(例如，“20％以上”)预先存储于事件检测条件。此时，图像形成装置20相对于连续的两个帧图像数据按照每个像素求得亮度值，求得两个帧图像数据中对应的像素的亮度值之差，并计算出按每个像素的亮度值的差值。接下来，图像形成装置20求得亮度值的差值满足事件检测条件中存储的亮度值的差值的条件(50以上)的区域的面积。接下来，图像形成装置20对该区域的面积相对于帧图像数据的面积的比率是否满足事件检测条件中存储的面积的条件(20％以上)进行判定。此时，在比事件检测条件中存储的面积的条件大的情况下，图像形成装置20判定为影像数据中包含发生急剧变化的区域。
另外，除上述的方法以外，如果能够判定是否包含发生急剧变化的区域，则也可以使用任意的方法。例如，也可以不使用亮度值而使用颜色值的差值。此外，在产生多个亮度值的差值满足事件检测条件中存储的亮度值的差值的条件的区域的情况下，图像形成装置20也可以将各个区域作为发生不同的急剧变化的区域进行检测。
而且，图像形成装置20也可以对在发生急剧变化的区域发生何种的变化这样的、发生事件的原因进行分析。例如，图像形成装置20对发生急剧变化的区域进行面部检测、人体检测，在从发生急剧变化的区域检测到面部、人体的情况下，对人的映入进行检测。
此外，图像形成装置20还在事件检测条件中存储被视作发生了照明的闪烁的情况下的亮度值的差值的条件。并且，在发生急剧变化的区域的亮度值的差值比被视作发生了照明的闪烁的情况下的亮度值的差值的条件大的情况下，对照明的闪烁进行检测。
此外，图像形成装置20也可以求得拍摄装置10与动态物体所存在的位置的距离、移动速度、动态物体的实际的大小等。
(b)遗留、带走的检测
图像形成装置20预先存储对拍摄装置10所拍摄的范围进行了拍摄的图像数据即基准图像数据。接下来，图像形成装置20对基准图像数据和帧图像数据进行比较。此时，在帧图像数据中持续映入恒定的尺寸的物体但存在有未映入基准图像数据对应的区域的物体的情况下，图像形成装置20对遗留的事件进行检测。
此外，在恒定的尺寸的物体映入基准图像数据但该物体未映入影像数据对应的区域的情况下，图像形成装置20对带走的事件进行检测。
作为遗留、带走的检测中的事件检测条件，存储图像形成装置20判定为物体的尺寸的条件(例如，“2％以上”)、判定为遗留的情况(例如，“10秒以上”)。
(c)异常音的发生的检测(异常音检测)
按照每帧计算出影像数据中包含语音数据的音量的大小，对是否存在产生满足事件检测条件中存储的音量的条件(例如，“70dB以上”)的音量的声音的帧进行判定。在存在满足事件检测条件中存储的音量的条件的帧的情况下，图像形成装置20在与该帧对应的时刻，对异常音的发生的事件进行检测。作为异常音的具体例，认为有玻璃破碎的声音、脚步声。
(4)分析数据的输出
图像形成装置20在对影像数据进行了分析的结果为检测到事件的情况下，将与检测到的事件相关的信息作为分析数据存储于存储介质。如此，图像形成装置20对影像数据和分析数据进行关联。在分析数据包含表示发生了事件的日期和时间的事件发生日期和时间、表示发生的事件的种类的事件类别、表示事件的详情的信息的事件内容。
在事件内容中存储有与事件类别对应的信息。例如，如果事件类别为动态物体感测，则在事件内容中存储有表示包含有动态物体的区域的坐标信息。另外，也可以在事件内容中存储有到动态物体的距离、动态物体的大小、移动速度、亮度值的变化量这样的信息。
如果事件类别为遗留、带走的检测，则也可以在事件内容中存储有表示发生了遗留、带走的区域的坐标信息、被遗留的物体、被带走的物体的信息。在事件类别为异常音的发生的情况下,也可以在事件内容中存储有音量的大小的信息。
(5)分析数据的获取以及影像数据的再现
终端装置30从图像形成装置20获取图像形成装置20中存储的影像数据和分析数据。此外，终端装置30基于分析数据中包含的信息，附加并再现影像数据信息。例如，终端装置30将事件内容中存储的坐标信息所示的区域附加并显示于影像。通过如此设置，使用者能够掌握动态物体的映入、产生了遗留、带走的场所，能够容易地检查影像数据。此外，终端装置30根据事件类别、事件发生日期和时间对分析数据进行搜索，从而再现发生了事件的前后的影像数据。通过如此设置，使使用者注视并确认发生了事件时的影像，可节省对正常状态的影像进行确认的时间和劳力。
另外，终端装置30除了从图像形成装置20获取并显示影像数据、分析数据以外，也可以如单点划线所示，直接接收并显示拍摄装置10拍摄到的影像。通过如此设置，能够将拍摄装置10用作监视摄像机。
此外，拍摄装置10中存储的影像数据定期地被图像形成装置20获取。因而，图像形成装置20还作为对影像数据进行备份的装置发挥功能。
[1.2.2图像形成装置的状态转变]
接下来，参照图3对图像形成装置20的状态转变进行说明。图像形成装置20的状态通过图像形成装置20的控制部来管理。
在本实施方式中，说明作为图像形成装置20的状态而具有“待机状态”、“作业执行状态”、“影像数据获取处理执行状态”、“影像数据分析处理执行状态”的状态。
“待机状态”是指，图像形成装置20即使执行后述的影像数据获取处理、影像数据分析处理，也不会对作业的执行造成影响的状态。例如，“待机状态”为，等待来自使用者的作业的执行的指示的状态、或不执行作业的状态、或只执行优先级较低的作业的状态。
另外，在本实施方式中，作业是指图像形成装置20进行规定的处理的单位。例如，图像形成装置20分别使将图像数据向记录纸张输出(形成)的处理(复制、印刷)、对图像数据进行扫描并通过电子邮件进行发送的处理作为一个作业来处理。此外，优先级较低的作业例如并不是使用者的操作对象，但可以是处理自身执行的作业(背景作业)、之后发生的作业、能够中断处理的作业。
“作业执行状态”是指，由使用者执行指示了执行的作业的状态。例如，图像形成装置20执行复制、印刷的作业的状态。“影像数据获取处理执行状态”是指图像形成装置20执行从拍摄装置10获取影像数据的处理(影像数据获取处理)的状态。“影像数据分析处理执行状态”是指图像形成装置20执行对从拍摄装置10获取的影像数据进行分析的处理(影像数据分析处理)的状态。
接下来，对状态转变进行说明。在以下的说明中，将图像形成装置20的状态仅记载为“状态”。首先，图像形成装置20将状态设为待机状态，并等待来自使用者的作业的执行的指示(S100)。在由使用者指示了作业的执行的情况下，图像形成装置20将状态设为作业执行状态(S100→S102)。在状态为作业执行状态时，图像形成装置20执行由使用者指示的作业。并且，图像形成装置20在作业的执行完成的情况下，将状态设为待机状态(S102→S100)。
图像形成装置20在状态为待机状态时，在成为预设的日期和时间的时机，将状态设为影像数据获取处理执行状态(S100→S104)。另外，在成为预设的日期和时间的时机，在状态为作业执行状态的情况下，图像形成装置20在完成作业的执行之后将状态设为待机状态，而且设为影像数据获取处理执行状态。
此外，在影像数据获取处理执行状态下，在由使用者指示作业的执行的情况下，图像形成装置20将状态设为作业执行状态(S104→S102)。此时，图像形成装置20使影像数据获取处理中断，并执行由使用者指示执行的作业。并且，如果完成作业的执行，则图像形成装置20将状态设为影像数据获取处理执行状态，并再次开始影像数据获取处理(S102→S104)。通过如此设置，图像形成装置20在由使用者使用图像形成装置20的情况下，不会对图像形成装置20的使用者，造成影像数据获取处理的影响。
如果完成影像数据获取处理，则图像形成装置20将状态设为待机状态(S104→S100)。并且，图像形成装置20在影像数据获取处理中，判定是否是从拍摄装置10获取的新的影像数据。在获取新的影像数据的情况下，将状态设为影像数据分析处理执行状态(S100→S106)。另外，此时，在状态为作业执行状态时，图像形成装置20在完成作业的执行之后将状态设为待机状态，而且设为影像数据分析处理执行状态。
此外，在影像数据分析处理执行状态下，在由使用者指示作业的执行的情况下，图像形成装置20将状态设为作业执行状态(S106→S102)。此时，图像形成装置20使影像数据分析处理中断，并执行由使用者指示执行的作业。并且，如果完成作业的执行，则图像形成装置20将状态设为影像数据分析处理执行状态，并再次开始影像数据分析处理(S102→S106)。此外，如果完成影像数据分析处理，则图像形成装置20将状态设为待机状态(S106→S100)。如此，即使在影像数据分析处理执行状态下，也与影像数据获取处理执行状态同样地，在由使用者使用图像形成装置20的情况下，不会对图像形成装置20的使用者造成影像数据分析处理的影响。
另外，图像形成装置20如节电状态、休眠状态这样的状态那样，在不实施来自使用者的操作的情况下，具有临时性地停止图像形成装置20的动作的状态。图像形成装置20在状态为节电状态、休眠状态时，在设为影像数据获取处理执行状态的情况下，如果结束影像数据获取处理，则再次将状态设为节电状态、休眠状态即可。在状态为节电状态、休眠状态时，也与设为影像数据分析处理状态的情况同样地，图像形成装置20在结束影像数据获取处理之后，再次将状态设为节电状态、休眠状态即可。
此外，图像形成装置20在影像数据获取处理、影像数据分析处理的执行中，由使用者指示作业的执行的情况下，也可以以降低影像数据获取处理、影像数据分析处理的处理速度的方式来执行。通过如此设置，也可以使使用者的指示的作业对执行不造成影响。
另外，图像形成装置20也可以通过上述的方法以外的方法来改变状态。例如，在影像数据获取处理执行状态、影像数据分析处理执行状态的情况下，也可以在由使用者操作操作输入部240时，图像形成装置20将状态设为待机状态。通过如此设置，在由使用者操作操作输入部240的情况下，能够避免影像数据的获取、分析的处理对使用者的操作造成影响(例如，对使用者的操作的反应延迟这样的影响)。
在状态为影像数据获取处理执行状态、影像数据分析处理执行状态的情况下，在短时间连续地发生能够执行的作业时，图像形成装置20也可以在该发生的所有作业结束之后使状态返回原来的状态。也就是说，想到了在以短时间切换作业执行状态和影像数据获取处理执行状态、影像数据分析处理执行状态时，状态的变化频繁地发生，图像形成装置20的处理延迟的情况。图像形成装置20通过不频繁地改变状态，从而能够使图像形成装置20的处理延迟。
[1.3功能构成]
[1.3.1拍摄装置]
参照图4对拍摄装置10的功能构成进行说明。如图4所示，拍摄装置10构成为具备：控制部100、图像输入部110、语音输入部120、通信部130、以及存储部140。
控制部100为用于控制拍摄装置10的整体的功能部。控制部100通过读取并执行各种程序从而实现各种功能，例如由一个或多个运算装置(CPU(Central Processing Unit))等构成。
图像输入部110由摄像机这样的图像输入装置构成，且为将由图像输入装置输入的图像向控制部100输出的功能部。此外，语音输入部120由麦克风这样的语音输入装置构成，且为将由语音输入装置输入的语音向控制部100输出的功能部。控制部100基于从图像输入部110输出的图像和从语音输入部120输出的语音生成影像数据。
通信部130为供拍摄装置10与外部的装置进行通信的功能部。通信部130例如由能够与通过无线LAN来利用的NIC(Network Interface Card)、LTE(Long Term Evolution)/LTE-A(LTE-Advanced)/LAA(License-Assisted Access using LTE)/5G线路连接的通信模块构成。
存储部140为存储拍摄装置10的动作所需的各种程序、各种数据的功能部。存储部140也可以相对于拍摄装置10能够移除且由小型的存储介质构成，也可以由作为半导体存储器的SSD、HDD等构成。
存储部140确保用于存储影像数据的影像数据存储区域142。控制部100将生成的影像数据存储于影像数据存储区域142。
[1.3.2图像形成装置]
参照图5对图像形成装置20的功能构成进行说明。如图5所示，图像形成装置20构成为具备：控制部200、图像输入部210、图像形成部220、显示部230、操作输入部240、通信部250、影像数据分析部260、以及存储部270。
控制部200为用于控制图像形成装置20的整体的功能部。控制部200通过读取并执行各种程序从而实现各种功能，例如由一个或多个运算装置(CPU)等构成。
此外，控制部200进行图像形成装置20的状态的管理。图像形成装置20的状态如处理的流程的概要中说明的那样转变为“待机状态”、“作业执行状态”、“影像数据获取处理执行状态”、“影像数据分析处理执行状态”这四个状态。此外，控制部200在由使用者指示作业的执行时执行指示的作业。如果作业是将图像数据向记录纸张输出(形成)的作业，则对图像形成部220进行控制来进行图像形成的处理。
图像输入部210为读取原稿的图像而生成图像数据的功能部。例如，图像输入部210由具备将CCD(Charge Coupled Device)等光学信息转换为电信号的装置的扫描装置等构成。另外，图像输入部210也可以经由USB存储器、小型闪存(注册商标)等存储介质、通信部250从其他终端输入(接收)图像数据。
图像形成部220为将图像数据形成于记录介质(例如记录纸张)的功能部。例如，图像形成部220在从供纸托盘供给的记录纸张的表面形成图像，并从排纸托盘进行排纸。图像形成部220例如由利用了电子照片方式的激光束打印机等构成。
显示部230为用于向使用者显示各种信息的功能部，例如由LCD(Liquid crystaldisplay)等构成。此外，操作输入部240为用于接受使用者的操作指示的功能部，且由各种键式开关、检测通过接触进行输入的装置等构成。图像形成装置20的使用者经由操作输入部240输入要使用的功能、输出条件。另外，图像形成装置20也可以是显示部230与操作输入部240形成为一体的触控面板。在该情况下，检测触控面板的输入的方式例如只要是阻抗膜方式、红外线方式、电磁感应方式、静电电容方式这样的通常的检测方式即可。
通信部250为用于供图像形成装置20与外部的装置进行通信的功能部。通信部250例如由能够与通过无线LAN利用的NIC、LTE/LTE-A/LAA/5G线路连接的通信模块构成。
影像数据分析部260对影像数据进行分析来判定是否发生事件，并输出分析数据的功能部。此外，影像数据分析部260也可以执行与影像数据的分析相关联的处理，例如也可以进行对图像数据、语音数据的文件处理(例如，图像数据的锐化、色调变化、语音数据的特定的频率成分音量的递减化)。
存储部270为存储图像形成装置20的动作所需的各种程序、各种数据的功能部。存储部270例如由半导体存储器SSD、HDD等构成。
存储部270确保影像数据存储区域272和认证信息存储区域282，而且存储影像数据数据库274、分析数据数据库276、基准图像数据278、日程表信息280、以及事件检测条件284。影像数据存储区域272为用于存储从拍摄装置10获取的影像数据的区域。
影像数据数据库274为存储与由影像数据分析部260分析的影像数据相关的信息的数据库。图6为表示在本实施方式中影像数据数据库274中存储的数据的数据构成的图。如图6所示，在影像数据数据库274中存储有用于唯一地辨别影像数据的影像数据ID(例如，“201811011200”)、用于特定影像数据存储区域272中存储的对应的影像数据的文件的文件名(例如，“201811011200.mpg”)、表示从拍摄装置10获取影像数据的日期和时间的获取日期和时间(例如，“2018/11/01 13:02:00”)、表示是否检测到事件的事件检测有无(例如，“无”)。
影像数据ID也可以是文件名的一部分，也可以是序号，也可以是由规定的形式构成的码，也可以由随机的文字构成。此外，对于事件检测有无，通过影像数据的分析，如果检测到事件则为“有”，如果未检测到事件则为“无”，如果未实施影像数据的分析则不存储任何值。通过如此设置，通过参照事件检测有无，从而能够表示是否进行了影像数据的分析。
此外，也可以在影像数据存储区域272存储有影像数据的开始日期和时间、结束日期和时间、影像数据的长度、帧频、比特率、影像的分辨率、文件尺寸、影像数据的格式等这样的与影像数据相关的属性的信息。在存在有多个拍摄装置10的情况下，也可以在影像数据存储区域272存储有表示从哪个拍摄装置获取的影像数据的属性。
分析数据数据库276为存储由影像数据分析部260输出的分析数据的数据库。图7为表示在本实施方式中分析数据数据库276中存储的数据的数据构成的图。如图7所示，在分析数据数据库276中存储有用于唯一地辨别影像数据的影像数据ID(例如，“201811011300”)、发生了事件的日期和时间(例如，“2018/11/01 13:32:10.03”)、表示发生的事件的类别的事件类别(例如，“动态物体的映入”)、以及与发生的事件相关的信息即事件内容(例如，“(100,100)-(150,150)”)。
在本实施方式中，如处理的流程的概要中说明的那样，说明在事件类别中存储有“动态物体的映入”“遗留”“带走”“异常音的发生”中的任意一者，在事件内容中存储有与事件类别对应的信息。另外，也可以在事件类别中，如“动态物体的映入(人的映入)”那样，存储包含发生了事件的原因。
此外，说明本实施方式中的分析数据以帧单位来存储。因而，在动态物体以恒定时间映入的情况下，如图7的D100所示，按照每帧存储分析数据。另外，针对同一物体映入、或持续发生异常音等关联的事件，也可以对分析数据进行分组化来存储。
基准图像数据278是影像数据分析部260为了判定遗留或带走而与帧图像数据进行比较的图像数据。基准图像数据278也可以是从影像数据提取的帧图像数据，也可以是预先对拍摄装置10的拍摄范围进行了拍摄的图像数据。
日程表信息280为表示控制部200将图像形成装置20的状态转变为影像数据获取处理执行状态、影像数据分析处理执行状态的时机的信息。作为日程表信息280，例如存储有“每天5点”，“每个整点”这样的信息。如果作为日程表信息280而存储的信息为“每天5点”，则图像形成装置20仅一天一次，在时刻成为5点的时机，从拍摄装置10获取影像数据，并对获取的影像数据进行分析。另外，在拍摄装置10为多台的情况下，也可以按照每个拍摄装置10来改变获取影像数据的时机、对获取的影像数据进行分析的时机。通过如此设置，能够避免网络NW的拥塞、或错开图像形成装置20进行影像数据的获取、分析的时间段。
认证信息存储区域282为对影像数据存储区域272、影像数据数据库274、用于认证能够获取分析数据数据库276中存储的信息的使用者的信息即认证信息进行存储区域。图8为表示本实施方式中的认证信息的数据构成的图。如图8所示，在认证信息中存储有用于辨别使用者的账户名(例如，“user1”)、使用者的认证所需的密码(例如，“abc123”)。另外，认证方法能够使用公知的技术。例如，也可以使用面部认证、指纹认证、虹膜认证这样的生物测定认证。此外，根据用于认证的技术，将对应的认证信息(例如，在使用面部认证的情况下作为认证的对象的使用者的面部的信息)存储于认证信息存储区域282。
事件检测条件284为对影像数据分析部260从影像数据中检测事件的条件进行了存储的信息。
[1.3.3终端装置]
参照图9对终端装置30的功能构成进行说明。如图9所示，终端装置30构成为具备：控制部300、显示部310、操作输入部320、通信部330、以及存储部340。
控制部300为用于控制终端装置30的整体的功能部。控制部300通过读取并执行各种程序从而实现各种功能，例如由一个或多个运算装置(CPU)等构成。
显示部310为用于显示各种信息的功能部，例如由LCD、有机EL显示器这样的装置构成。此外，操作输入部320为用于接受来自使用者的操作输入的功能部，例如由键盘、鼠标等这样的外部输入装置构成。另外，如果终端装置30为智能电话、平板电脑这样的装置，则也可以构成为将显示部310和操作输入部320一体地作为触控面板。
通信部330为用于供终端装置30与外部的装置进行通信的功能部。通信部330例如由能够与通过无线LAN利用的NIC、LTE/LTE-A/LAA/5G线路连接的通信模块构成。
存储部340为存储终端装置30的动作所需的各种程序、各种数据的功能部。存储部340例如由作为半导体存储器的SSD、HDD等构成。
[1.4处理的流程]
接下来，对本实施方式中的拍摄装置10、图像形成装置20、终端装置30的处理的流程进行说明。
[1.4.1拍摄装置]
参照图10对拍摄装置10的主处理进行说明。首先，控制部100基于从图像输入部110输出的图像以及从语音输入部120输出的语音生成影像数据，并存储于影像数据存储区域142(步骤S1102)。
接下来，控制部100判定是否从图像形成装置20接收到影像数据要求(步骤S1104)。影像数据要求是指，用于要求从图像形成装置20获取影像数据存储区域142中存储的影像的通知。
在影像数据要求中包含最后获取影像数据的日期和时间这样的日期和时间的信息。控制部100在影像数据要求中包含日期和时间之后存储的影像数据存在于影像数据存储区域142的情况下，判定为存在有未发送的影像数据。也就是说，未发送的影像数据是指，在影像数据要求中包含的日期和时间之后存储的影像数据。控制部100如果接收到影像数据要求，则判定是否存在有未发送的影像数据(步骤S1104；是→步骤S1106)。
在存在有未发送的影像数据的情况下，控制部100将未发送的影像数据向影像数据要求的发送源的装置发送(步骤S1106；是→步骤S1108)。此时，在发送影像数据前，控制部100也可以向影像数据要求的发送源的装置通知存在有未发送的影像数据的情况。此外，在不存在未发送的影像数据的情况下，控制部100向影像数据要求的发送源的装置通知不存在未发送的影像数据的情况(步骤S1106；否→步骤S1110)。并且，返回步骤S1102。
另外，在步骤S1104中，即使在未接收到影像数据要求的情况下，也返回步骤S1102(步骤S1104；否→步骤S1102)。如此，拍摄装置10持续执行影像数据的生成以及影像数据的存储的处理。
另外，在上述的说明中，说明了在影像数据要求中包含日期和时间信息的情况，但也可以包含日期和时间信息。在影像数据要求中不包含日期和时间信息的情况下，控制部100将影像数据存储区域142中存储的影像数据中的、最近存储的影像数据中的一个或预设的数量的影像数据向图像形成装置20发送。
[1.4.2图像形成装置]
参照图11对图像形成装置20的主处理进行说明。另外，图像形成装置20的控制部200与主处理的执行并行地进行图像形成装置20的状态的管理。因而，图像形成装置20的控制部200根据图像形成装置20的状态执行主处理。
首先，控制部200在状态为影像数据获取处理执行状态的情况下，控制部200执行影像数据获取处理(步骤S1202)。参照图12对影像数据获取处理进行说明。
首先，控制部200参照影像数据数据库274，读取获取日期和时间中的、最后获取的影像数据的获取日期和时间(步骤S1222)。并且，控制部200将在步骤S1222中读取的最后获取的、包含影像数据的获取日期和时间的影像数据要求向拍摄装置10发送(步骤S1224)。
接下来，控制部200判定拍摄装置10中是否存在有未发送的影像数据(步骤S1226)。在存在有未发送的影像数据的情况下，控制部200从拍摄装置10获取影像数据(步骤S1226；是→步骤S1228)。控制部200只要基于从拍摄装置10发送的通知判断是否存在有未发送的影像数据即可。另外，在不存在未发送的影像数据的情况下，控制部200结束影像数据获取处理(步骤S1226；否)。
控制部200执行影像数据的获取直至完成影像数据的获取(步骤S1230；否→步骤S1228)。并且，如果完成影像数据的获取，则控制部200将获取的影像数据存储于影像数据存储区域272(步骤S1230；是→步骤S1232)。此外，控制部200作为与影像数据相关的信息，而将影像数据ID、影像数据存储区域272中存储的影像数据的文件名、影像数据的获取日期和时间存储于影像数据数据库274(步骤S1234)。另外，针对事件检测有无也可以不存储任何值。此外，如果影像数据获取处理结束，则控制部200将图像形成装置20的状态设为待机状态。
返回图11，控制部200在步骤S1202的影像数据获取处理中，判定是否从拍摄装置10获取了影像数据(步骤S1204)。例如，控制部200在存储有影像数据数据库274中存储的数据中的、针对事件检测有无而未存储任何值的数据的情况下，判定为从拍摄装置10获取了影像数据即可。在获取了影像数据的情况下且状态为影像数据分析处理执行状态时，影像数据分析部260执行影像数据分析处理(步骤S1204；是→步骤S1206)。参照图13对影像数据分析处理进行说明。
图13为影像数据分析部260进行的处理的流程图，图13所示的处理按照影像数据获取处理中获取的每个影像数据来进行。因而，在存在有多个影像数据获取处理中获取的影像数据的情况下，影像数据分析部260按照每个影像数据来执行影像数据分析处理。另外，影像数据分析部260在执行影像数据分析处理时，相对于作为影像数据分析处理的对象的影像数据，生成影像数据ID。
影像数据分析部260基于影像数据执行动态物体检测处理(步骤S1242)、遗留、带走检测处理(步骤S1244)、以及异常音检测处理(步骤S1246)。动态物体检测处理为影像数据分析部260用于检测动态物体检测的事件的处理。遗留、带走检测处理为影像数据分析部260用于检测遗留的事件的检测以及带走的事件的处理。异常音检测处理为影像数据分析部260用于检测异常音的发生的事件的处理。
参照图14对动态物体检测处理进行说明。首先，影像数据分析部260读取一帧大小的帧图像数据(步骤S1252)。
接下来，影像数据分析部260计算出步骤S1252中读取的帧图像数据与步骤S1252中读取的帧的紧前帧的帧图像数据的差值(步骤S1254)。另外，在步骤S1252中，在读取了第一帧的图像数据的情况等下，在不存在与紧前的帧相当的帧的图像数据的情况下，跳过步骤S1254～步骤S1258。
接下来，影像数据分析部260基于差值判定是否包含满足事件检测条件的区域(步骤S1256)。例如，在步骤S1254中计算出亮度值的差值，在步骤S1256中，对步骤S1254中计算出的亮度值的差值与事件检测条件中存储的亮度值的差值的条件以及面积的条件进行比较，提取满足事件检测条件的区域。如果提取了满足事件检测条件的区域，则影像数据分析部260在步骤S1256中判定为存在有满足事件检测条件的区域。
在存在有满足事件检测条件的区域的情况下，接下来，影像数据分析部260检测动态物体的映入的事件(步骤S1256；是→步骤S1258)。此时，影像数据分析部260作为事件的信息而获取步骤S1256中提取的区域的坐标、步骤S1252中读取的与帧对应的日期和时间。此外，影像数据分析部260也可以对步骤S1256中提取的区域进行分析，并进行是否发生了人的映入、或是否发生了照明的闪烁这样的判定。
接下来，影像数据分析部260判定是否读取了全帧的图像数据(步骤S1260)。在未读取全帧的图像数据的情况下，返回步骤S1252(步骤S1260；否→步骤S1252)。在读取了全帧的图像数据的情况下，结束动态物体检测处理(步骤S1260；是)。
参照图15对遗留、带走检测处理进行说明。首先，影像数据分析部260读取一帧大小的图像数据(步骤S1262)。接下来，影像数据分析部260判定是否是存储基准图像数据的时机(步骤S1264)。在是存储基准图像数据的时机的情况下，影像数据分析部260将步骤S1262中读取的图像数据存储为基准图像数据278(步骤S1264；是→步骤S1266)。
作为存储基准图像数据的时机，想到了如下那样的情况。
(1)读取到最初的帧图像数据时
在读取到动态图像数据的最初的帧图像数据时，成为不存在应进行比较的图像数据的状态。因而，影像数据分析部260将动态图像数据的最初的帧图像数据存储为基准图像数据278。如此，影像数据分析部260能够对动态图像数据的最初的帧图像数据和之后读入的帧图像数据进行比较。
(2)读取到刚检测到遗留或带走之后的帧图像数据时
影像数据分析部260如果检测到遗留或带走，则将其下一个帧图像数据存储为基准图像数据278。通过重新存储基准图像数据278，从而能够避免持续检测遗留或带走。
另外，影像数据分析部260也可以将在经过了规定的时间的情况下步骤S1262中读取的帧图像数据，存储为基准图像数据278，从而定期地重新存储基准图像数据278。此外，在持续使用预先存储的基准图像数据278的情况下，影像数据分析部260也可以在步骤S1264中，一直判定为不是基准图像数据的存储时机。
在不是存储基准图像数据的时机的情况下，接下来，影像数据分析部260在基准图像数据278与步骤S1262中读取的帧图像数据之间对映入的物体进行比较(步骤S1264；否→步骤S1268)。例如，影像数据分析部260从基准图像数据278中检测满足判定为事件检测条件284中存储的物体的尺寸的条件的物体。此外，影像数据分析部260从步骤S1262中读取的图像数据中检测满足判定为事件检测条件中存储的物体的尺寸的条件的物体。并且，影像数据分析部260对从基准图像数据278中检测到的物体与从步骤S1262中读取的图像数据中检测到的物体进行匹配，从而对映入各个图像数据的物体进行比较。
在基准图像数据中不存在的物体映入步骤S1262中读取的图像数据且该物体持续映入大致同一场所的情况下，影像数据分析部260对遗留的事件进行检测(步骤S1270；是→步骤S1272；是→步骤S1274)。对于物体是否持续映入大致同一场所的判定，首先影像数据分析部260在帧图像数据内的大致相同的区域相同的物体映入的帧图像持续连续的情况下，对该连续的帧的数量进行测量。并且，在连续的帧构成的影像的长度满足事件检测条件284中存储的物体映入的时间的条件的情况下，影像数据分析部260判定为物体持续映入大致同一场所即可。
此外，在对遗留的事件进行检测时，影像数据分析部260作为事件的信息而获取物体映入的区域的坐标、步骤S1262中读取的与帧对应的日期和时间。
此外，在基准图像数据中存在的物体未映入步骤S1262中读取的图像数据的情况下，即在消失的情况下，对带走的事件进行检测(步骤S1276；是→步骤S1278)。此时，影像数据分析部260作为事件的信息而获取物体映入的区域的坐标、步骤S1262中读取的与帧对应的日期和时间。
接下来，影像数据分析部260判定是否读取到全帧的图像数据(步骤S1280)。在未读取到全帧的图像数据的情况下，返回步骤S1262(步骤S1280；否→步骤S1262)。在读取到全帧的图像数据的情况下，结束遗留、带走检测处理(步骤S1280；是)。
参照图16对异常音检测处理进行说明。影像数据分析部260从影像数据中按照每帧获取在该帧的时刻产生的音量(步骤S1292)。接下来，影像数据分析部260按照每帧判定音量是否超过事件检测条件中存储的音量，并提取音量超过事件检测条件中存储的音量的帧(步骤S1294)。接下来，影像数据分析部260在与提取的帧对应的时刻发生异常音时，按照提取的每帧检测异常音的发生的事件(步骤S1296)。此时，影像数据分析部260作为事件的信息而获取与提取的帧对应的日期和时间。
如此，影像数据分析部260通过执行动态物体检测处理、遗留、带走检测处理、异常音检测处理从而对事件进行检测。并且，影像数据分析部260将与检测到的事件相关的信息(事件发生日期和时间、事件类别、事件内容)与影像数据ID一起存储于分析数据数据库276。
返回图11，接下来，控制部200判定是否从终端装置30接收到认证要求(步骤S1208)。认证要求是指，用于要求期望影像数据存储区域272、影像数据数据库274、分析数据数据库276中存储的信息的获取的使用者的授权的通知，并包含账户名、密码这样的认证所需的信息。在接收到认证要求的情况下，控制部200判定认证要求中包含的信息即账户名以及密码是否存储于认证信息存储区域282，并进行使用者的认证(步骤S1208；是→步骤S1210)。
在认证要求中包含的账户名以及密码存储于认证信息存储区域282的情况下，对发送了认证要求的使用者进行认证，并向认证要求的发送源的终端装置30通知认证的成功(步骤S1210；是→步骤S1212)。接下来，控制部200基于从认证成功的使用者操作的终端装置30发送的搜索要求，对影像数据存储区域272、影像数据数据库274、分析数据数据库276中存储的信息进行搜索。并且，控制部200将搜索到的结果(搜索结果)向终端装置30发送(步骤S1214)。另外，在认证未成功的情况下，向认证要求的发送源的终端装置30通知认证的失败(步骤S1210；否→步骤S1216)。
搜索要求是指，要求对影像数据存储区域272、影像数据数据库274、分析数据数据库276进行搜索，并发送搜索到的结果的通知。在搜索要求中，也可以包含用于限制影像数据存储区域272、影像数据数据库274、分析数据数据库276的条件即限制条件。在该限制条件中包含用于限制期间、事件类别、事件信息等的信息。例如，在限制条件中包含期间的情况下，控制部200提取与该期间发生的事件相关的分析数据，将与提取的分析数据对应的影像数据一并作为搜索结果。此外，在限制条件中包含事件类别的情况下，控制部200提取与该事件类别相关的分析数据，并针对与提取的分析数据对应的影像数据一并作为搜索结果。限制条件也可以指定多个，也可以包含上述的条件以外的条件。
另外，针对步骤S1258、步骤S1274、步骤S1278的处理，影像数据分析部260也可以将图像数据整体作为对象来对事件进行检测，也可以将图像数据的一部分的区域作为对象来对事件进行检测。
[1.4.3终端装置]
参照图17对终端装置30的主处理进行说明。首先，控制部300与图像形成装置20进行通信，判定是否建立了与图像形成装置20的通信(步骤S1302→步骤S1304)。在与图像形成装置20的通信建立的情况下，接下来，控制部300对图像形成装置20发送认证要求(步骤S1304；是→步骤S1306)。此时，控制部300只要催促使用者输入账户名以及密码，并将由使用者输入的账户名以及密码包含于认证要求即可。
接下来，控制部300判定是否从图像形成装置20通知认证的成功(步骤S1308)。在通知了认证的成功的情况下，接下来，控制部300向图像形成装置20发送搜索要求(步骤S1308；是→步骤S1310)。此时，控制部300也可以催促使用者输入搜索要求中包含的限制条件。控制部300在搜索要求的发送后，如果从图像形成装置20接收到搜索结果，则显示接收的搜索结果、或基于搜索结果再现影像数据(步骤S1312→步骤S1314)。此时，控制部300也可以在将动态图像的再现开始位置设于与事件发生日期和时间对应的位置或其近前，之后再现影像数据。通过如此设置，能够易于使使用者确认发生了事件时的影像。
另外，在步骤S1304中，在未建立与图像形成装置20的通信的情况下，控制部300使显示部310显示发生了通信错误的情况(步骤S1304；否→步骤S1318)。此外，在步骤S1308中，在从图像形成装置20通知认证的失败的情况下，控制部300使显示部310显示发生了认证错误的情况(步骤S1308；否→步骤S1316)。
[1.5动作例]
参照附图对本实施方式的动作例进行说明。图18为表示拍摄装置10存储影像数据的期间、从拍摄装置10向图像形成装置20发送影像数据的期间的图。如图18所示，拍摄装置10总是存储影像数据，但向图像形成装置20发送其一部分(未发送分)。此外，在图像形成装置20中，通过对发送的影像数据进行分析来检测事件。
图19为表示针对影像数据获取处理以及影像数据分析处理与作业的执行而执行各自的处理的时机的图。在图19中，状态转变时机表示图像形成装置20从待机状态向影像数据获取处理执行状态以及影像数据分析处理执行状态转变的时机。状态转变时机如图19所示基于日程表信息280定期地发生(例如，每个整点)。
例如，在状态转变时机T1，状态为待机状态的情况下，图像形成装置20将状态设为影像数据获取处理执行状态、影像数据分析处理执行状态。如果在影像数据获取处理以及影像数据分析处理的执行中由使用者指示作业的执行，则图像形成装置20不中断而结束影像数据获取处理以及影像数据分析处理。在该情况下，在作为状态转变时机T1的t1至t2，没有作业的执行的中断而执行影像数据获取处理以及影像数据分析处理。
此外，在图19中，如t3至t4那样，在指示作业的执行的情况下，图像形成装置20执行作业。该作业在状态转变时机T2之前完成，因此在状态转变时机T2的时间点，图像形成装置20的状态为待机状态。因而，在状态转变时机T2，图像形成装置20使状态转变为影像数据获取处理执行状态以及影像数据分析处理执行状态。因而，在作为状态转变时机T2的t5的时机，开始影像数据获取处理。
在此，在t6的时机，在由使用者指示作业的执行的情况下，图像形成装置20将状态设为作业执行状态，并进行作业的执行。当作业的执行在t7的时机完成的情况下，图像形成装置20返回向作业执行状态转变前的状态。如此，再次开始影像数据获取处理以及影像数据分析处理。在该情况下，影像数据获取处理以及影像数据分析处理在t5～t6的期间以及t7～t8的期间来执行。
在图19中，如t9至t10那样，在指示作业的执行的情况下，图像形成装置20执行作业。在该情况下，在状态转变时机T3的时机未完成作业，因此图像形成装置20不改变状态而进行待机，直至作业完成。当作业的执行在t10的时机完成的情况下，图像形成装置20将状态设为影像数据获取处理执行状态、影像数据分析处理执行状态。在该情况下，影像数据获取处理以及影像数据分析处理在t10～t11的期间来执行。
另外，在状态转变时机T4，状态为待机状态，因此图像形成装置20将状态设为影像数据获取处理执行状态，如果完成影像数据获取处理，则在将状态设为待机状态的基础上，进一步将状态设为影像数据分析处理执行状态。
图20为在步骤S1314中终端装置30使显示部310显示搜索结果的显示画面W100的画面例。显示画面W100例如在终端装置30中，从图像形成装置20获取影像数据和分析数据，并通过执行显示获取的数据的应用程序来进行显示。显示画面W100为按照每个拍摄装置10而将检测到图像形成装置20的事件呈列表状进行显示的显示画面。显示画面W100包含选择拍摄装置10的区域E100和显示列表的区域E102。在区域E100包含用于选择多个拍摄装置10中的、一个拍摄装置10的按钮。图20中示出通过强调显示表示拍摄装置10中的“摄像机A”的按钮B100，从而选择被命名为“摄像机A”的拍摄装置10的情形。
此外，在区域E102包含对生成“摄像机A”的影像数据进行分析而显示检测到的事件的列表。例如，项目B102为表示在2018年11月1日13:32:10检测到动态物体的映入的事件的项目。也可以在项目B102中显示发生了事件时的帧图像数据的缩略图像。此外，在由使用者选择项目B102的情况下，终端装置30显示对应的影像数据。此时，终端装置30也可以从发生了事件的时刻或发生了事件的时刻的稍微之前再现影像数据、或基于事件内容的显示再现影像数据(例如，基于事件内容的矩形区域的显示)。通过如此设置，能够使使用者适当地确认发生的事件。
另外，也可以在区域E102所显示的列表中，优先地显示未由使用者确认的事件、或发生的事件越是最近的事件越优先地显示。此外，也可以基于事件类别、事件内容进行限制、分组。此外，也可以在区域E102显示不是每个事件的项目而是每个影像数据的项目。此时，也可以基于影像数据数据库274中存储的事件检测有无，越是检测到事件的影像数据、检测到的事件的数量较多的影像数据越优先地显示。通过如此设置，终端装置30能够对使用者提示应优先地确认的影像数据。此外，也可以在显示画面W100显示针对发生的事件的统计信息(例如，表示针对每个拍摄装置10或所有拍摄装置10而发生的每个事件类别的件数的表、图表)、或当前拍摄拍摄装置10的影像。
根据本实施方式，能够有效利用图像形成装置所具备的控制部来进行影像数据的分析，能够有效利用图像形成装置所具备的存储部来存储分析数据。因而，能够节省导入用于构建事件检测系统的装置的时间和劳力、费用。此外，通过对分析数据进行搜索、或从与分析数据中包含事件发生日期和时间对应的位置再现影像数据，从而能够使使用者容易地进行事件的确认。例如，在没有人的特定的时间段使拍摄装置10进行拍摄，在该特定的时间段后图像形成装置20执行影像数据分析处理，从而事件检测系统1的使用者能够容易地确认在没有人的时间段检测到的事件。而且，基于影像数据进行分析，因此能够在动态物体传感器中检测无法检测的事件(例如，遗留、带走、异常音的发生)。
此外，拍摄装置总是或在确定的期间一直进行动作来存储影像数据，因此能够不错过且残留发生了事件的时间点的前后的影像。此外，即使在拍摄装置、图像形成装置中具备动态物体传感器的情况下，也会对该动态物体传感器的可动范围外的影像进行分析来检测事件，因此能够进行更广泛的范围的影像数据的获取、分析。影像数据存储于拍摄装置，因此即使在网络中发生不良情况，图像形成装置也会在网络修复后重新获取影像数据并进行分析，能够使影像数据与事件相关联。
在本实施方式中，使分析数据与影像数据相关联，因此对数据大小为轻量的分析数据进行搜索，能够显示与搜索结果对应的影像数据。通过如此设置，事件检测系统1的管理者等能够容易地搜索发生了事件的影像数据、事件的发生日期和时间、事件类别，能够确认事件。此外，事件检测系统1的管理者等能够节省确认任何事件也没有发生的时间段的影像数据的时间和劳力。
而且，事件的检测在图像形成装置20中进行，因此能够容易地在之后强化并变更检测事件的功能、或变更或追加要检测的事件种类。例如，能够追加使用人工智能对事件进行检测的功能、追加与检测门开闭等的IoT(Internet of Things)传感器联动地检测事件的功能。
另外，在上述的实施方式中，说明了图像形成装置进行影像数据的分析，但也可以利用设置于网络上的服务器、影像分析用的装置进行影像数据的分析，并将分析数据向图像形成装置发送。通过如此设置，图像形成装置能够使用基于利用图像形成装置的处理能力无法执行的分析(例如，使用了需要比较高的处理性能的机械学习的分析)的分析数据。
此外，图像形成装置20检测的事件也可以是上述的事件中的一部分，也可以是上述的事件以外的事件。此外，拍摄装置10、图像形成装置20也可以基于要检测的事件的种类，省略或追加功能部、处理。例如，在不检测异常音的发生的情况下，省略拍摄装置10的语音输入部120，影像数据分析部260只要执行图13的步骤S1246即可。
此外，事件检测条件也可以存储规定的状态继续的情况下检测事件这样的条件。例如，也可以在动态物体超过规定的时间(例如，“5秒”)而映入的情况下、超过规定的时间而异常音持续被录音的情况下，存储检测事件这样的条件。如此，通过在状态继续的情况下检测事件，从而能够减少事件的误检测。
[2.第二实施方式]
接下来，对第二实施方式进行说明。第二实施方式与第一实施方式不同，且为改变影像数据分析处理中使用的事件检测条件并且进行影像数据的分析的实施方式。在本实施方式中，将第一实施方式的图14置换为图21。另外，对同一功能部以及处理标注同一附图标记，并省略说明。
在本实施方式中，作为事件检测条件，存储第一事件检测条件和第二事件检测条件。在此，第二事件检测条件为能够以比第一事件检测条件高的精度检测事件的设定。
在此，在本实施方式中，说明在动态物体检测处理中改变影像数据分析部260所使用的事件检测条件的情况。在该情况下，作为第一事件检测条件，例如将面积的条件存储为“30％以上”(第一设定值)。此外，作为第二事件检测条件，例如将面积的条件存储为“15％以上”(第二设定值)。通过使用第二事件检测条件对事件进行检测，从而与使用第一事件检测条件的情况相比，即使动态物体映入的范围的大小较小，也能够检测动态物体的映入。在该情况下，影像数据分析部260能够以通过第一事件检测条件检测动态物体的映入为契机，判定是否映入细微的动态物体的移动。
另外，第一事件检测条件与第二事件检测条件只要由图像形成装置20的管理者等根据影像数据分析部260所检测的事件类别存储适当的条件即可。此外，也可以根据事件类别而将第一事件检测条件和第二事件检测条件存储为相同的条件。
图21为本实施方式中的动态物体检测处理的流程图。
影像数据分析部260如果计算出帧间的差值，则接下来基于差值判定是否包含满足第一事件检测条件的区域(步骤S2252)。
在包含满足第一事件检测条件的区域的情况下，影像数据分析部260使影像数据中的帧的读取位置返回与规定的时间量(例如，5秒钟)对应的量(步骤S2252；是→步骤S2254)。并且，读入一帧大小的图像，计算出帧间的差值(步骤S2256→步骤S2258)。
接下来，影像数据分析部260基于差值提取满足第二事件检测条件的区域(步骤S2260)，基于该区域来检测动态物体的映入(步骤S1258)。
接下来，影像数据分析部260判定是否读取了规定期间(例如，10秒)的帧(步骤S2262)。在未读取规定期间的帧的情况下，返回步骤S2256(步骤S2262；否→步骤S2256)。
例如，在步骤S2254中使帧的读取位置返回5秒钟，并自此对10秒钟的影像数据执行事件检测处理。在该情况下，影像数据分析部260在检测到事件的时间点的前后5秒的期间，通过第二事件检测条件进行事件检测处理。针对使用第一事件检测条件而检测到的事件，影像数据分析部260能够使用第二事件检测条件详细地获取事件内容。
另外，也可以详细地预设用于获取事件内容的期间的长度，也可以由图像形成装置20的管理者等来设定。此外，也可以根据通过第一事件检测条件检测到的事件类别详细地改变获取事件内容的期间。在通过第一事件检测条件检测到的事件的发生时刻接近影像数据的先头或末尾的情况下，也可以遍及多个影像数据而进行使用了第二设定值的分析。
另外，即使在遗留、带走检测处理中也可以改变事件检测条件来进行分析。例如，在遗留、带走检测处理中，针对判定为物体的尺寸的条件，与第一事件检测条件相比缩小第二事件检测条件。通过如此设置，在检测到基于第一事件检测条件的物体的遗留、带走时，能够一并检测利用第一事件检测条件未被检测的程度的较小的物体的遗留、带走。
根据本实施方式，在检测到事件时，能够以更高精度的事件检测条件检测事件。因而，能够高效地执行精度较高的事件的检测。
[3.第三实施方式]
接下来，对第三实施方式进行说明。第三实施方式与第一实施方式不同，且为在影像数据分析处理中，改变从影像数据读取的帧图像数据的间隔并且进行影像数据的分析的实施方式。在本实施方式中，将第一实施方式的图14置换为图22。另外，针对同一功能部以及处理标注同一附图标记，并省略说明。
图22为本实施方式中的动态物体检测处理的流程图。在本实施方式的动态物体检测处理中，说明按照每五帧或每一帧这两者改变从影像数据读取的帧图像数据的帧数的间隔。如此，图像形成装置20首先对一部分的帧图像数据进行事件检测处理，如果检测到事件，则对包含发生了事件的时刻的时间中的帧图像数据再次进行事件检测处理。另外，帧数的间隔也可以是五帧和一帧以外的帧数。
首先，影像数据分析部260按照每五帧从影像数据读取图像数据(步骤S3252)。并且，影像数据分析部260计算出步骤S3242中读取的图像数据与步骤S3252中在读取的紧前读取的图像数据的差值(步骤S3254)。如本实施方式那样，在按照每五帧读取图像数据的情况下，在步骤S3254中，计算出步骤S3252中读取的帧图像数据与该帧图像数据的五帧前的帧图像数据的差值。
影像数据分析部260基于差值，判定是否存在有满足事件检测条件的区域(步骤S3256)。在存在有满足事件检测条件的区域情况下，使帧的读取位置返回五帧大小(步骤S3258)，并进行一帧单位的事件的检测(步骤S1252～步骤S1258)。
接下来，影像数据分析部260判定是否读取到规定期间(例如，10秒)的帧(步骤S3260)。在未读取规定期间的帧的情况下，返回步骤S1252(步骤S3260；否→步骤S1252)。
另外，在遗留、带走检测处理、异常音检测处理中，也可以改变从影像数据读取的帧图像数据的间隔、获取音量的帧的间隔。
根据本实施方式，首先能够一边间除作为分析的对象的帧一边进行事件的检测，在检测到事件的情况下，详细地获取与发生了事件相关的事件内容。通过如此设置，能够高效地执行影像数据分析处理。
[4.第四实施方式]
接下来，对第四实施方式进行说明。第四实施方式为针对状态的状态转变，不是在预设的日期和时间而是在外界的变化、图像形成装置20成为休眠状态、节电状态的情况下进行向影像数据获取处理执行状态的转变的实施方式。
例如，在图像形成装置20中设置测量照度的照度传感器，在由照度传感器测量到的照度小于预设的照度时，图像形成装置20也可以将状态设为影像数据获取处理执行状态。此外，在图像形成装置20中设置对存在于图像形成装置20的周围的人进行感测的人感传感器，在图像形成装置20的周围未存在有人时，图像形成装置20也可以将状态设为影像数据获取处理执行状态。通过如此设置，能够以设置有图像形成装置20的房屋变暗、没有人这样的外界的变化为契机，图像形成装置20执行检测事件的处理。
此外，图像形成装置20也可以在未由使用者操作图像形成装置20而成为休眠状态、节电状态时，将状态设为影像数据获取处理执行状态。通过如此设置，能够在使用者未执行作业的时机，执行影像数据获取处理。
如此，在本实施方式中，能够基于外界的变化、图像形成装置20的状态，执行影像数据获取处理、影像数据分析处理。特别是在想到了在图像形成装置20的周围未存在有人的状况中，图像形成装置20执行影像数据获取处理、影像数据分析处理，因此能够对期望监视的空间，高效地进行事件的检测。
[5.第五实施方式]
接下来，对第五实施方式进行说明。第五实施方式为，影像数据分析部260对图像形成装置20的遗留、带走进行检测的实施方式。
在本实施方式中，拍摄装置10对设置有图像形成装置20的范围进行拍摄。此外，在本实施方式中，作为基准图像数据278，存储未使用图像形成装置20的状态的图像数据。未使用图像形成装置20的状态是指，例如在排纸托盘上未放置纸，此外图像形成装置20的备品未放置于规定的场所的状态。
通过如此设置，在本实施方式中，在遗留、带走检测处理中，对未使用图像形成装置20的状态和拍摄装置10拍摄的影像数据进行比较。因而，例如，在图像形成装置20的排纸托盘上保持放置有记录纸张的情况下，影像数据分析部260能够基于从拍摄装置10获取的影像数据，检测记录纸张被遗留的情况。此外，即使在图像形成装置20的备品被取走的情况下，影像数据分析部260也能够基于从拍摄装置10获取的影像数据，检测图像形成装置20的备品被带走的情况。
如此，在本实施方式中，能够检测与图像形成装置20相关的事件。
[6.变形例]
本发明并不限定于上述的各实施方式，而能够进行各种变更。即，在不脱离本发明的主旨的范围内对适当变更的技术手段进行组合而获得的实施方式也包含于本发明的技术范围。
此外，上述的实施方式为了便于说明，存在有分别单独进行了说明的部分，但是，当然能够在技术上可能的范围内进行组合并执行。
此外，在实施方式中各装置进行动作的程序为对CPU等进行控制的程序(使计算机发挥功能的程序)，以实现上述的实施方式的功能。并且，上述装置处理的信息在其处理时临时性地保存于临时存储装置(例如，RAM)，之后，保存于各种ROM(Read Only Memory)、HDD等存储装置，并根据需要通过CPU读取并可进行修正、写入。
在此，作为保存程序的存储介质也可以是半导体介质(例如，ROM、非易失性的存储卡等)、光存储介质、光磁存储介质(例如，DVD(Digital Versatile Disc)、MO(MagnetoOptical Disc)、MD(Mini Disc)、CD(Compact Disc)、BD(Blu-ray Disc)(注册商标)等)、磁存储介质(例如，磁带、软盘等)等中的任意一者。此外，通过执行下载的程序，从而不仅能够实现上述的实施方式的功能，还能够基于该程序的指示与操作系统或者其他应用程序程序等共同地进行处理，从而实现本发明的功能。
此外，在市场上流通的情况下，能够在便携式存储介质中保存程序来进行流通、或输送至经由英特网等网络而连接的服务器计算机。在该情况下，当然服务器计算机的存储装置也包含于本发明。
附图标记说明
1：事件检测系统
10：拍摄装置
100：控制部
110：图像输入部
120：语音输入部
130：通信部
140：存储部
142：影像数据存储区域
20：图像形成装置
200：控制部
210：图像输入部
220：图像形成部
230：显示部
240：操作输入部
250：通信部
260：影像数据分析部
270：存储部
272：影像数据存储区域
274：影像数据数据库
276：分析数据数据库
278：基准图像数据
280：日程表信息
282：认证信息存储区域
30：终端装置
300：控制部
310：显示部
320：操作输入部
330：通信部
340：存储部

Claims (7)

1.一种图像形成装置，其特征在于，具备：
作业执行部，其执行作业；
图像形成部，其基于所述作业进行图像形成处理；
获取部，其获取拍摄到的图像数据；
检测部，其对所述图像数据进行分析来检测事件；以及
设定值存储部，其存储用于事件的检测的第一设定值、和以比所述第一设定值高的精度检测事件的第二设定值，
所述检测部在所述作业执行部为待机状态时，对所述事件进行检测，并且
在使用所述第一设定值检测到事件的情况下，对于在包含发生了该检测到的事件的时刻的时间拍摄到的图像数据，使用所述第二设定值对图像数据进行分析。
2.根据权利要求1所述的图像形成装置，其特征在于，
所述获取部在所述作业执行部为待机状态时，获取所述图像数据。
3.根据权利要求1所述的图像形成装置，其特征在于，
所述检测部对所述获取的图像数据中的、一部分的图像数据进行分析来检测事件。
4.根据权利要求3所述的图像形成装置，其特征在于，
所述检测部在对所述一部分的图像数据进行分析来检测事件的情况下，对包含该一部分的图像数据的图像数据进行分析。
5.根据权利要求1所述的图像形成装置，其特征在于，
还具备基准图像数据存储单元，所述基准图像数据存储单元存储作为用于与所述图像数据进行比较的基准的基准图像数据，
所述检测部基于所述获取的图像数据与所述基准图像数据的差异来检测事件。
6.一种图像形成装置，其特征在于，具备：
作业执行部，其执行作业；
图像形成部，其基于所述作业进行图像形成处理；
获取部，其获取拍摄到的图像数据；
检测部，其对所述图像数据进行分析来检测事件；
照度测量部，其对照度进行测量；以及
设定值存储部，其存储用于事件的检测的第一设定值、和以比所述第一设定值高的精度检测事件的第二设定值，
所述检测部在所述作业执行部为待机状态且所述测量到的照度小于预设的照度时，对所述事件进行检测，并且
在使用所述第一设定值检测到事件的情况下，对于在包含发生了该检测到的事件的时刻的时间拍摄到的图像数据，使用所述第二设定值对图像数据进行分析。
7.一种事件检测系统，包含拍摄装置和图像形成装置，
所述事件检测系统的特征在于，
所述拍摄装置具备：
输入部，其供图像输入；以及
图像数据存储部，其将所述输入的图像存储为图像数据，
所述图像形成装置具备：
作业执行部，其执行作业；
图像形成部，其基于所述作业进行图像形成处理；
获取部，其从所述拍摄装置获取所述图像数据；
检测部，其对所述图像数据进行分析来检测事件；以及
设定值存储部，其存储用于事件的检测的第一设定值、和以比所述第一设定值高的精度检测事件的第二设定值，
所述检测部在所述作业执行部为待机状态时，对所述事件进行检测，并且
在使用所述第一设定值检测到事件的情况下，对于在包含发生了该检测到的事件的时刻的时间拍摄到的图像数据，使用所述第二设定值对图像数据进行分析。
CN202010054907.1A 2019-01-23 2020-01-17 图像形成装置以及事件检测系统 Active CN111479026B (zh)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
JP2019009121A JP2020119181A (ja) 2019-01-23 2019-01-23 画像形成装置及びイベント検出システム
JP2019-009121 2019-01-23

Publications (2)

Publication Number Publication Date
CN111479026A CN111479026A (zh) 2020-07-31
CN111479026B true CN111479026B (zh) 2022-05-13

Family

ID=71608975

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202010054907.1A Active CN111479026B (zh) 2019-01-23 2020-01-17 图像形成装置以及事件检测系统

Country Status (3)

Country Link
US (1) US11048456B2 (zh)
JP (1) JP2020119181A (zh)
CN (1) CN111479026B (zh)

Families Citing this family (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP7477590B1 (ja) 2022-12-26 2024-05-01 ソフトバンク株式会社 情報処理装置、情報処理方法、および情報処理プログラム

Family Cites Families (11)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US5999634A (en) * 1991-09-12 1999-12-07 Electronic Data Systems Corporation Device and method for analyzing an electronic image signal
US7460692B2 (en) * 2004-09-10 2008-12-02 Kabushiki Kaisha Toshiba Image forming apparatus
JP2006088499A (ja) * 2004-09-24 2006-04-06 Fuji Xerox Co Ltd 画像形成装置およびその制御方法
US20080309785A1 (en) * 2007-06-14 2008-12-18 Masahiko Sugimoto Photographing apparatus
JP5393236B2 (ja) * 2009-04-23 2014-01-22 キヤノン株式会社 再生装置及び再生方法
US20110087535A1 (en) * 2009-10-14 2011-04-14 Seiko Epson Corporation Information processing device, information processing system, control method for an information processing device, and a program
JP5790035B2 (ja) * 2011-03-07 2015-10-07 富士ゼロックス株式会社 電力供給制御装置、画像処理装置、電力供給制御プログラム
US9626580B2 (en) * 2014-07-22 2017-04-18 Verizon Patent And Licensing Inc. Defining region for motion detection
JP2016134103A (ja) * 2015-01-21 2016-07-25 富士ゼロックス株式会社 監視システム
JP2018093401A (ja) 2016-12-05 2018-06-14 キヤノンイメージングシステムズ株式会社 映像監視装置、映像監視方法および映像監視システム
JP2019015883A (ja) * 2017-07-07 2019-01-31 株式会社東芝 電源ｏｆｆ装置

Also Published As

Publication number Publication date
US11048456B2 (en) 2021-06-29
US20200233621A1 (en) 2020-07-23
CN111479026A (zh) 2020-07-31
JP2020119181A (ja) 2020-08-06

Similar Documents

Publication Publication Date Title
US9292088B2 (en) Display device, non-transitory computer-readable recording medium and image processing apparatus
JP5273998B2 (ja) 撮像装置、その制御方法及びプログラム
US8532345B2 (en) Camera and image recording program product
US20110280551A1 (en) Unintended Video Recording Detection in a Video Recording Device
US20110116716A1 (en) Method and apparatus for processing image
EP3255871B1 (en) Recording of sound information and document annotations during a meeting.
KR20190051594A (ko) 복수의 카메라들을 이용하여 영상을 촬영하는 전자 장치와 이의 동작 방법
US9838556B2 (en) Image processing apparatus, method for controlling image processing apparatus, electronic apparatus, and non-transitory recording medium
US20110181902A1 (en) Digital multifunction printer and image data storage system
US11170520B2 (en) Image processing apparatus for analyzing an image to detect an object within the image
US11765469B2 (en) Image capturing apparatus, device, control method, and computer-readable storage medium
US20120192120A1 (en) Image forming apparatus and terminal device each having touch panel
CN111479026B (zh) 图像形成装置以及事件检测系统
US20150229808A1 (en) System, and method for controlling the system
WO2020044479A1 (ja) 情報処理装置及び情報処理方法
JP2020126535A (ja) 情報処理装置、情報処理装置の制御方法およびプログラム
JP6642316B2 (ja) 情報処理システム、電子機器、情報処理装置、情報処理方法、電子機器処理方法、及びプログラム
JP2008236752A (ja) 複写又は走査の設定に対するユーザの好みの自動検出
JP2015184698A (ja) 電子機器及び操作支援プログラム
CN108647097B (zh) 文本图像处理方法、装置、存储介质及终端
KR20190124597A (ko) 이동단말기 및 그 제어방법
US20150356379A1 (en) Print monitoring system and method
US11516357B2 (en) Voice interaction in an image processing system
JP2009153077A (ja) 情報処理装置及びプログラム
JP2020178188A (ja) 画像形成装置、システム、制御方法及びプログラム。

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant