CN107071339A - 一种基于深度摄像监测的智能坐席系统及其实现方法 - Google Patents

一种基于深度摄像监测的智能坐席系统及其实现方法 Download PDF

Info

Publication number
CN107071339A
CN107071339A CN201611092025.4A CN201611092025A CN107071339A CN 107071339 A CN107071339 A CN 107071339A CN 201611092025 A CN201611092025 A CN 201611092025A CN 107071339 A CN107071339 A CN 107071339A
Authority
CN
China
Prior art keywords
module
depth camera
processing module
information
central processing
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN201611092025.4A
Other languages
English (en)
Inventor
王诚
杨奚诚
熊瑛
邵翔
高波
吴亮
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Hefei D2s Soft Information Technology Co Ltd
Original Assignee
Hefei D2s Soft Information Technology Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Hefei D2s Soft Information Technology Co Ltd filed Critical Hefei D2s Soft Information Technology Co Ltd
Priority to CN201611092025.4A priority Critical patent/CN107071339A/zh
Publication of CN107071339A publication Critical patent/CN107071339A/zh
Pending legal-status Critical Current

Links

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00Television systems
    • H04N7/18Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Measurement Of The Respiration, Hearing Ability, Form, And Blood Characteristics Of Living Organisms (AREA)
  • Length Measuring Devices By Optical Means (AREA)

Abstract

本发明提供了一种基于深度摄像监测的智能坐席系统及其实现方法,包括深度摄像模块、中央处理模块和显示输入模块;所述深度摄像模块与中央处理模块交互式连接,所述显示输入模块与中央处理模块交互式连接。本发明利用深度摄像模块,可以对检测到的图像进行深度图像处理,从而监测工作人员的状态信息,使检测更加准确;深度摄像模块还能够进行坐姿监测,获取办公人员的相关姿态。

Description

一种基于深度摄像监测的智能坐席系统及其实现方法
技术领域
本发明涉及一种基于深度摄像监测的智能坐席系统及其实现方法。
背景技术
基于营业厅规范管理深化应用的基础上,需要优化客户体验,提高服务质量。所以在柜员服务时需要根据柜员工作状态,即办公状态和离开状态需要使用坐席牌显示状态并且监测服务人员在岗时间,服务状态。
机械时自动翻转坐席牌存在如下问题:功能单一,无扩展空间;机械传动存在复位精准度问题;坐席牌对应到人,人员换岗需手动换上自己的坐席牌,拆卸易损坏。
而红外检测智能坐席系统采用普通的红外检测装置,其检测的范围有限,有时人员的移动超出范围,会造成误检测,从而影响相关显示信息,造成客户的困扰,并且无法进行相关的姿势检测。
发明内容
本发明旨在提供一种基于深度摄像监测的智能坐席系统及其实现方法,在营业厅规范管理深化应用的基础上,需要优化客户体验,提高服务质量,工作人员服务时需要根据工作状态,即办公状态和离开状态需要使用坐席牌显示状态并且监测服务人员在岗时间,并监测其服务状态。
本发明采用的技术方案为:
提供了一种基于深度摄像监测的智能坐席系统,包括深度摄像模块、中央处理模块和显示输入模块;所述深度摄像模块与中央处理模块交互式连接,所述显示输入模块与中央处理模块交互式连接;
所述深度摄像模块,用于检测工操作人员在岗/离岗状态,并将检测数据发送给中央处理模块;还用于接收中央处理模块的信息;
所述中央处理模块,用于接收、处理检测模块发送的检测数据;还用于将处理后的信息,发送给深度摄像模块及显示输入模块;
所述显示输入模块,用于接收并显示中央处理模块发送的信息,包括工作人员信息在岗/离岗状态及工作人员的状态信息;还用于记录客户信息,并发送给中央处理模块。
优选地,所述深度摄像模块包括投射装置和摄像装置。
优选地,所述中央处理模块包括接口模块和计算处理模块,所述深度摄像模块通过接口模块与计算处理模块交互式连接,所述显示输入模块通过接口模块与计算处理模块交互式连接。
优选地,所述显示输入模块为平板电脑或者触摸式液晶屏。
优选地,还包括与中央处理模块相连的其他输入模块,所述其他输入模块包括键盘、鼠标、扫描仪,所述键盘、鼠标、扫描仪的输出端与中央处理模块的输入端连接。
本发明还提供了一种实现基于深度摄像监测的智能坐席系统的方法,其步骤包括:
(1)深度摄像模块预先采集无人的办公区域的背景信息图像,并预先采集工作人员的标准坐姿图像,将采集到的背景信息图像及标准坐姿图像通过接口模块发送给计算处理模块;
(2)深度摄像模块实时对办公区域进行摄像并将检测数据通过接口模块发送给计算处理模块;
(3)计算处理模块根据背景信息和移动物体分割获取前景图像,并判断是否有工作人员;
(4)如果有工作人员,则利用结构光技术对当前图像进行深度处理,获取当前深度图像信息,其公式为:Z=(B×tanα×tanβ)/(tanα+tanβ),计算得到工作人员距离深度摄像模块的距离及其坐姿,B为投射装置O和摄像机X的距离,Z为目标P与结构光投射装置O和摄像机X连线的垂直距离,α为OP与OX的夹角,β为PX与OX的夹角;
(5)计算处理模块根据当前深度图像信息判断工作人员距离检测装置的最近距离,如果在规定的阈值范围内,则将工作人员在岗状态的信息通过接口模块发送给显示输入模块进行坐席牌的显示;
(6)计算处理模块根据当前工作人员的坐姿图像与标准坐姿图像之间的比对,若偏差较大,则将比对结果发送给显示输入模块,提醒工作人员调整其姿态;
(7)显示输入模块显示工作人员信息在岗/离岗状态及工作人员的状态信息;记录客户信息,投诉语音视频等,并发送给中央处理模块;同时还可以显示业务相关信息。
本发明的有益效果为:通过深度摄像模块检测工作人员信息在岗/离岗状态,并根据工作人员信息在岗/离岗状态自动调整显示输入模块的显示内容,不需要手动翻牌和更换工作人员名牌;同时本发明利用深度摄像模块,可以对检测到的图像进行深度图像处理,从而监测工作人员的状态信息,使检测更加准确;深度摄像模块还能够进行坐姿监测,获取办公人员的相关姿态,给予相关的提醒,既能够保证良好的操作姿势,避免长期不良姿势带来人体的损伤,同时能够保证前台服务人员的仪态形象。深度图像检测的精确性高,能够精确到2-5cm,比红外检测更好的检测人员在岗状态。引入了深度摄像头后,还能够清楚的判定操作人员是否出现的视野范围中,距离桌面多远距离,站姿还是坐姿,所以可以提供更加有效的监测。
附图说明
通过阅读下文优选实施方式的详细描述,各种其他的优点和益处对于本领域普通技术人员将变得清楚明了。附图仅用于示出优选实施方式的目的,而并不认为是对本发明的限制。而且在整个附图中,用相同的参考符号表示相同的部件。在附图中:
图1是本发明的系统结构示意图。
图2是本发明的深度图像检测原理图。
具体实施方式
下面将参照附图更详细地描述本公开的示例性实施方式。虽然附图中显示了本公开的示例性实施方式,然而应当理解,可以以各种形式实现本公开而不应被这里阐述的实施方式所限制。相反,提供这些实施方式是为了能够更透彻地理解本公开,并且能够将本公开的范围完整的传达给本领域的技术人员。
根据本发明的实施方式,如附图1所示,本发明提供的一种基于深度摄像监测的智能坐席系统,包括深度摄像模块100、中央处理模块200、显示输入模块300和其他输入模块400。深度摄像模块100包括结构光投射装置和摄像机,中央处理模块200包括接口模块202和计算处理模块201,显示输入模块为300采用平板电脑或者触摸式液晶屏,其他输入模块400包括键盘、鼠标、扫描仪,所述键盘、鼠标、扫描仪。
深度摄像模块100的通过接口模块202与计算处理模块201交互式连接,显示输入模块为300通过接口模块202与计算处理模块201交互式连接,其他输入模块400的输出端通过接口模块202与计算处理模块201的输入端连接。
本发明的工作原理是:
深度摄像模块100对办公区域进行摄像并将检测数据通过接口模块202发送给计算处理模块201,计算处理模块201根据背景信息和移动物体分割获取前景图像,并判断是否有工作人员,如果有工作人员,则对当前图像进行深度处理,获取当前深度图像,对当前图像进行深度处理的方法是结构光技术做深度图像检测,利用公式为:计算得到工作人员距离深度摄像模块的距离及其坐姿。
公式中:B为投射装置O和摄像机X的距离,Z为目标P与结构光投射装置O和摄像机X连线的垂直距离,α为OP与OX的夹角,β为PX与OX的夹角。
计算处理模块201根据当前深度图像信息判断目前操作人员距离检测装置的最近距离,如果在规定的阈值范围内,则将工作人员在岗状态的信息通过接口模块202发送给显示输入模块300进行坐席牌的显示。根据当前坐姿图像与标准坐姿图像之间的比对,若偏差较大,则将比对结果发送给显示输入模块300,提醒工作人员调整其姿态。
显示输入模块300显示工作人员信息在岗/离岗状态及工作人员的状态信息;记录客户信息,投诉语音视频等,并发送给中央处理模块;同时还可以显示业务相关信息。
在本发明中还预留了其他输入模块400的接口,可以扩展智能坐席系统的其他相关功能。
以上所述,仅为本发明较佳的具体实施方式,但本发明的保护范围并不局限于此,任何熟悉本技术领域的技术人员在本发明揭露的技术范围内,可轻易想到的变化或替换,都应涵盖在本发明的保护范围之内。因此,本发明的保护范围应所述以权利要求的保护范围为准。

Claims (6)

1.一种基于深度摄像监测的智能坐席系统,其特征在于:包括深度摄像模块、中央处理模块和显示输入模块;所述深度摄像模块与中央处理模块交互式连接,所述显示输入模块与中央处理模块交互式连接;
所述深度摄像模块,用于检测工操作人员在岗/离岗状态,并将检测数据发送给中央处理模块;还用于接收中央处理模块的信息;
所述中央处理模块,用于接收、处理检测模块发送的检测数据;还用于将处理后的信息,发送给深度摄像模块及显示输入模块;
所述显示输入模块,用于接收并显示中央处理模块发送的信息,包括工作人员信息在岗/离岗状态及工作人员的状态信息;还用于记录客户信息,并发送给中央处理模块。
2.如权利要求1所述的一种基于深度摄像监测的智能坐席系统,其特征在于:所述深度摄像模块包括投射装置和摄像装置。
3.如权利要求1所述的一种基于深度摄像监测的智能坐席系统,其特征在于:所述中央处理模块包括接口模块和计算处理模块,所述深度摄像模块通过接口模块与计算处理模块交互式连接,所述显示输入模块通过接口模块与计算处理模块交互式连接。
4.如权利要求1所述的一种基于深度摄像监测的智能坐席系统,其特征在于:所述显示输入模块为平板电脑或者触摸式液晶屏。
5.如权利要求1所述的一种基于深度摄像监测的智能坐席系统,其特征在于:还包括与中央处理模块相连的其他输入模块,所述其他输入模块包括键盘、鼠标、扫描仪,所述键盘、鼠标、扫描仪的输出端与中央处理模块的输入端连接。
6.一种用于实现如权利要求1所述的基于深度摄像监测的智能坐席系统的方法,其特征在于,其步骤包括:
(1)深度摄像模块预先采集无人的办公区域的背景信息图像,并预先采集工作人员的标准坐姿图像,将采集到的背景信息图像及标准坐姿图像通过接口模块发送给计算处理模块;
(2)深度摄像模块实时对办公区域进行摄像并将检测数据通过接口模块发送给计算处理模块;
(3)计算处理模块根据背景信息和移动物体分割获取前景图像,并判断是否有工作人员;
(4)如果有工作人员,则利用结构光技术对当前图像进行深度处理,获取当前深度图像信息,其公式为:计算得到工作人员距离深度摄像模块的距离及其坐姿,B为投射装置O和摄像机X的距离,Z为目标P与结构光投射装置O和摄像机X连线的垂直距离,α为OP与OX的夹角,β为PX与OX的夹角;
(5)计算处理模块根据当前深度图像信息判断工作人员距离检测装置的最近距离,如果在规定的阈值范围内,则将工作人员在岗状态的信息通过接口模块发送给显示输入模块进行坐席牌的显示;
(6)计算处理模块根据当前工作人员的坐姿图像与标准坐姿图像之间的比对,若偏差较大,则将比对结果发送给显示输入模块,提醒工作人员调整其姿态;
(7)显示输入模块显示工作人员信息在岗/离岗状态及工作人员的状态信息;记录客户信息,投诉语音视频等,并发送给中央处理模块;同时还可以显示业务相关信息。
CN201611092025.4A 2016-12-01 2016-12-01 一种基于深度摄像监测的智能坐席系统及其实现方法 Pending CN107071339A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201611092025.4A CN107071339A (zh) 2016-12-01 2016-12-01 一种基于深度摄像监测的智能坐席系统及其实现方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201611092025.4A CN107071339A (zh) 2016-12-01 2016-12-01 一种基于深度摄像监测的智能坐席系统及其实现方法

Publications (1)

Publication Number Publication Date
CN107071339A true CN107071339A (zh) 2017-08-18

Family

ID=59619868

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201611092025.4A Pending CN107071339A (zh) 2016-12-01 2016-12-01 一种基于深度摄像监测的智能坐席系统及其实现方法

Country Status (1)

Country Link
CN (1) CN107071339A (zh)

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN108648225A (zh) * 2018-03-31 2018-10-12 深圳奥比中光科技有限公司 目标图像获取系统与方法
CN112508536A (zh) * 2020-12-21 2021-03-16 深圳供电局有限公司 一种电力系统监控室的监控系统
CN114612939A (zh) * 2022-03-25 2022-06-10 珠海视熙科技有限公司 一种基于tof相机的坐姿识别方法、装置及智能台灯

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20120309517A1 (en) * 2011-06-01 2012-12-06 Microsoft Corporation Three-dimensional background removal for vision system
CN104268851A (zh) * 2014-09-05 2015-01-07 浙江捷尚视觉科技股份有限公司 一种基于深度信息的atm自助营业厅行为分析方法
CN104902246A (zh) * 2015-06-17 2015-09-09 浙江大华技术股份有限公司 视频监视方法和装置
CN104916093A (zh) * 2015-06-05 2015-09-16 重庆智韬信息技术中心 实现学生坐姿智能矫正提醒的方法
CN105741057A (zh) * 2016-04-21 2016-07-06 合肥大多数信息科技有限公司 一种多功能业务柜台辅助工具系统

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20120309517A1 (en) * 2011-06-01 2012-12-06 Microsoft Corporation Three-dimensional background removal for vision system
CN104268851A (zh) * 2014-09-05 2015-01-07 浙江捷尚视觉科技股份有限公司 一种基于深度信息的atm自助营业厅行为分析方法
CN104916093A (zh) * 2015-06-05 2015-09-16 重庆智韬信息技术中心 实现学生坐姿智能矫正提醒的方法
CN104902246A (zh) * 2015-06-17 2015-09-09 浙江大华技术股份有限公司 视频监视方法和装置
CN105741057A (zh) * 2016-04-21 2016-07-06 合肥大多数信息科技有限公司 一种多功能业务柜台辅助工具系统

Cited By (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN108648225A (zh) * 2018-03-31 2018-10-12 深圳奥比中光科技有限公司 目标图像获取系统与方法
US11445163B2 (en) 2018-03-31 2022-09-13 Orbbec Inc. Target image acquisition system and method
CN112508536A (zh) * 2020-12-21 2021-03-16 深圳供电局有限公司 一种电力系统监控室的监控系统
CN112508536B (zh) * 2020-12-21 2023-10-13 深圳供电局有限公司 一种电力系统监控室的监控系统
CN114612939A (zh) * 2022-03-25 2022-06-10 珠海视熙科技有限公司 一种基于tof相机的坐姿识别方法、装置及智能台灯
CN114612939B (zh) * 2022-03-25 2023-01-10 珠海视熙科技有限公司 一种基于tof相机的坐姿识别方法、装置及智能台灯

Similar Documents

Publication Publication Date Title
Padoy Machine and deep learning for workflow recognition during surgery
CN107609517B (zh) 一种基于计算机视觉的课堂行为检测系统
US20210239489A1 (en) Systems and methods for ems navigation user interface
CN111095264B (zh) 对象识别系统和方法
Hashemi et al. A computer vision approach for the assessment of autism-related behavioral markers
US20220181020A1 (en) System and method for remote patient monitoring
CN111344713B (zh) 用于对象识别的相机和图像校准
CN111344715B (zh) 对象识别系统和方法
US20130010068A1 (en) Augmented reality system
US10242271B2 (en) Facility use measuring device and facility use measuring system
CN107071339A (zh) 一种基于深度摄像监测的智能坐席系统及其实现方法
CN113240741A (zh) 基于图像差异的透明物体追踪方法、系统
CN112270533A (zh) 一种数据处理方法、装置、电子设备以及存储介质
CN113177468A (zh) 人体行为检测方法、装置、电子设备及存储介质
Borole et al. Diagnosis of COVID-19 Using Low-Energy IoT-Enabled System
Jeelani et al. Improving safety performance in construction using eye-tracking, visual data analytics, and virtual reality
Madrid et al. Recognition of dynamic Filipino Sign language using MediaPipe and long short-term memory
Li et al. CVPE: A computer vision approach for scalable and privacy-preserving socio-spatial, multimodal learning analytics
CN110334620A (zh) 教学质量的评估方法、装置、存储介质及电子设备
CN116664925B (zh) 一种重症监护室内目标识别方法、装置、设备及存储介质
US20190021652A1 (en) Monitoring the posture of a user
US20200168330A1 (en) System and method for automated multimodal summarization in controlled medical environments to improve information exchange for telemedicine
Li et al. Camera-based distance detection and contact tracing to monitor potential spread of COVID-19
ES2966109T3 (es) Dispositivo y programa de estimación de entorno de instalación
JP2018190012A (ja) 接客要否判定装置、接客要否判定方法、及びプログラム

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
RJ01 Rejection of invention patent application after publication
RJ01 Rejection of invention patent application after publication

Application publication date: 20170818