CN110300066A - 图片管理服务方法 - Google Patents
图片管理服务方法 Download PDFInfo
- Publication number
- CN110300066A CN110300066A CN201910443487.3A CN201910443487A CN110300066A CN 110300066 A CN110300066 A CN 110300066A CN 201910443487 A CN201910443487 A CN 201910443487A CN 110300066 A CN110300066 A CN 110300066A
- Authority
- CN
- China
- Prior art keywords
- grabgraf
- picture
- servicing
- management method
- elevator
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L47/00—Traffic control in data switching networks
- H04L47/50—Queue scheduling
- H04L47/52—Queue scheduling by attributing bandwidth to queues
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L47/00—Traffic control in data switching networks
- H04L47/50—Queue scheduling
- H04L47/62—Queue scheduling characterised by scheduling criteria
- H04L47/622—Queue service order
- H04L47/6225—Fixed service order, e.g. Round Robin
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L67/00—Network arrangements or protocols for supporting network services or applications
- H04L67/01—Protocols
- H04L67/02—Protocols based on web technology, e.g. hypertext transfer protocol [HTTP]
- H04L67/025—Protocols based on web technology, e.g. hypertext transfer protocol [HTTP] for remote control or remote monitoring of applications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L67/00—Network arrangements or protocols for supporting network services or applications
- H04L67/01—Protocols
- H04L67/06—Protocols specially adapted for file transfer, e.g. file transfer protocol [FTP]
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L67/00—Network arrangements or protocols for supporting network services or applications
- H04L67/01—Protocols
- H04L67/10—Protocols in which an application is distributed across nodes in the network
- H04L67/1001—Protocols in which an application is distributed across nodes in the network for accessing one among a plurality of replicated servers
- H04L67/1004—Server selection for load balancing
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L67/00—Network arrangements or protocols for supporting network services or applications
- H04L67/01—Protocols
- H04L67/10—Protocols in which an application is distributed across nodes in the network
- H04L67/1097—Protocols in which an application is distributed across nodes in the network for distributed storage of data in networks, e.g. transport arrangements for network file system [NFS], storage area networks [SAN] or network attached storage [NAS]
Landscapes
- Engineering & Computer Science (AREA)
- Computer Networks & Wireless Communication (AREA)
- Signal Processing (AREA)
- Indicating And Signalling Devices For Elevators (AREA)
Abstract
本发明公开了一种图片管理服务方法,包括以下步骤:从数据接入服务获取传感器数据,分析是否需要抓图;当需要抓图时由抓图模块发起抓图请求,通过相机接入服务转发抓图请求至相机进行抓图,抓图后等待相机上传图片到抓图模块;当接收到图片时,由抓图消息模块将数据写入云存储服务器并将图片地址以及其他数据封装为一条kafka消息写入kafka。本发明通过改变图片获取触发的时机,可大大减少图片采集次数,从而减少图片后续处理的传输过程中所需的带宽。
Description
技术领域
本发明属于大数据技术领域,具体涉及一种图片管理服务方法。
背景技术
随着电梯业务的发展,越来越多的应用需要依赖于通过抓拍电梯内的图片,对图片进行分析来解决业务问题。比如:当电梯开始运行时,通过抓拍图片来统计人流量;当电梯里的设备上报困人告警,需要抓拍一张图片通过分析该图片来确认是否为误报等。由于众多应用都需要抓图,存在诸多问题,例如,给相机性能带来一定的压力,如果多个应用同时抓图,可能造成部分应用获取图片失败;相机给每个应用上传图片,造成网络流量加大,需要购买更大的网络带宽。
假设1台电梯每天运行1000次,每次运行抓图1张,每张图片100KB,总共有50000台电梯,有10个应用需要抓图,如果每个应用自行抓图,则需要1000*50000*10=5亿次抓图,约50TB,数据量巨大,需要大量网络带宽进行数据传输。
发明内容
鉴于以上存在的技术问题,本发明用于提供一种图片管理服务方法。
为解决上述技术问题,本发明采用如下的技术方案:
一种图片管理服务方法,包括以下步骤:
从数据接入服务获取传感器数据,分析是否需要抓图;
当需要抓图时由抓图模块发起抓图请求,通过相机接入服务转发抓图请求至相机进行抓图,抓图后等待相机上传图片到抓图模块;
当接收到图片时,由抓图消息模块将数据写入云存储服务器并将图片地址以及其他数据封装为一条kafka消息写入kafka。
优选地,所述当需要抓图时包括电梯到达或者离开1楼或者-1楼。
优选地,所述当需要抓图时包括电梯开始运行。
优选地,所述电梯开始运行的条件是:电梯门处于关闭状态,并且电梯处于运行中或者楼层发生了变化。
优选地,所述抓图模块采用事件循环机制,相机上传的图片先加入一个阻塞队列,当队列中存在图片时,使用一个独立的线程不断的从队列中获取图片,并找到对应的等待对象,将该等待对象和图片发送给消息通知模块。
优选地,所述kafka消息包括版本号、消息ID、抓图时间戳、电梯编号、扩展属性类型、扩展属性和图片地址。
采用本发明具有如下的有益效果:通过改变图片获取触发的时机,可大大减少图片采集次数,从而减少图片后续处理的传输过程中所需的带宽。
附图说明
图1为本发明实施例的图片管理服务方法的步骤流程图;
图2为本发明实施例的图片管理服务方法的先进先出的阻塞队列示意图;
图3为本发明实施例的图片管理服务方法的kafka消息示意图。
具体实施方式
下面将结合本发明实施例中的附图,对本发明实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例是本发明一部分实施例,而不是全部的实施例。基于本发明中的实施例,本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例,都属于本发明保护的范围。
参照图1,所示为本发明实施例公开的一种图片管理服务方法的流程图,包括以下步骤:从数据接入服务获取传感器数据,分析是否需要抓图,此步骤为传感器数据分析;当需要抓图时由抓图模块发起抓图请求,通过相机接入服务转发抓图请求至相机进行抓图,抓图后等待相机上传图片到抓图模块;当接收到图片时,由抓图消息模块将数据写入云存储服务器并将图片地址以及其他数据封装为一条kafka消息写入kafka。
具体应用实例中,目前包括两种抓图场景:
a.电梯到达或者离开1楼或者-1楼时抓拍一张图片;
b.电梯开始运行时抓拍一张图片。
分析模块的作用还在于确定电梯何时开始运行,目前认为电梯运行的条件是:电梯门处于关闭状态,并且电梯处于运行中或者楼层发生了变化。由于抓图管理服务负责分析传感器数据,因此其他服务不需要读取该数据,因此传感器数据kafka集群的压力得到缓解。并且传感器数据到应用到抓图变为传感器数据直接到抓图,减少了处理环节,使得抓图更及时。另一方面,当分析结果为开始运行并且在1楼或者-1楼,则只需抓一张图片,减少了抓图次数。
具体应用实例中,云存储服务器可采用华为云提供的对象存储服务(OBS),其他的云服务器也可。
具体应用实例中,当传感器数据分析模块触发抓图时,会创建一个等待对象,并将该对象加入一个以相机ID作为key的映射表中。抓图模块采用事件循环机制,参见图2,相机上传的图片会先加入一个阻塞队列中,当队列中存在图片时,使用一个独立的线程不断的从队列中获取图片,并找到对应的等待对象。将该等待对象和图片发送给消息通知模块。采用事件循环机制,可以使用少量的线程处理大量图片,节省CPU资源。
具体应用实例中,消通知模块接收到图片和相关的数据后,将这些数据封装为一条kafka消息,并使用protoc进行序列化,然后将消息写入kafka。由于kafka会将数据保存一段时间,因此部分应用可以在半夜服务器空闲的时候进行数据分析。具体的kafka消息格式参见图3,包括版本号、消息ID、抓图时间戳、电梯编号、扩展属性类型、扩展属性和图片地址。
如背景技术中指出的,在现有技术中,假设1台电梯每天运行1000次,每次运行抓图1张,每张图片100KB,总共有50000台电梯,公司有10个应用需要抓图。如果每个应用自行抓图,需要1000*50000*10=5亿次抓图,约50TB。而采用本发明实施例实现的技术方案,先采用分析触发器数据抓图,只需抓取1000*50000=5000万次抓图,约5TB。因为图片时从电梯传到服务器,需要通过公网,因此节省了大量网络带宽资源。后续虽然每个应用都需获取图片,但是那是内外流量。并且由于图片保存到了云存储服务器,不需要实时分析的应用可以错开高峰期读取图片。
应当理解,本文所述的示例性实施例是说明性的而非限制性的。尽管结合附图描述了本发明的一个或多个实施例,本领域普通技术人员应当理解,在不脱离通过所附权利要求所限定的本发明的精神和范围的情况下,可以做出各种形式和细节的改变。
Claims (6)
1.一种图片管理服务方法,其特征在于,包括以下步骤:
从数据接入服务获取传感器数据,分析是否需要抓图;
当需要抓图时由抓图模块发起抓图请求,通过相机接入服务转发抓图请求至相机进行抓图,抓图后等待相机上传图片到抓图模块;
当接收到图片时,由抓图消息模块将数据写入云存储服务器并将图片地址以及其他数据封装为一条kafka消息写入kafka。
2.如权利要求1所述的图片管理服务方法,其特征在于,所述当需要抓图时包括电梯到达或者离开1楼或者-1楼。
3.如权利要求1所述的图片管理服务方法,其特征在于,所述当需要抓图时包括电梯开始运行。
4.如权利要求3所述的图片管理服务方法,其特征在于,所述电梯开始运行的条件是:电梯门处于关闭状态,并且电梯处于运行中或者楼层发生了变化。
5.如权利要求1至4任一所述的图片管理服务方法,其特征在于,所述抓图模块采用事件循环机制,相机上传的图片先加入一个阻塞队列,当队列中存在图片时,使用一个独立的线程不断的从队列中获取图片,并找到对应的等待对象,将该等待对象和图片发送给消息通知模块。
6.如权利要求1至4任一所述的图片管理服务方法,其特征在于,所述kafka消息包括版本号、消息TD、抓图时间戳、电梯编号、扩展属性类型、扩展属性和图片地址。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201910443487.3A CN110300066A (zh) | 2019-05-24 | 2019-05-24 | 图片管理服务方法 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201910443487.3A CN110300066A (zh) | 2019-05-24 | 2019-05-24 | 图片管理服务方法 |
Publications (1)
Publication Number | Publication Date |
---|---|
CN110300066A true CN110300066A (zh) | 2019-10-01 |
Family
ID=68027219
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201910443487.3A Pending CN110300066A (zh) | 2019-05-24 | 2019-05-24 | 图片管理服务方法 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN110300066A (zh) |
Citations (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN201181986Y (zh) * | 2008-02-15 | 2009-01-14 | 上海宝康电子控制工程有限公司 | 高清人像记录设备 |
CN101621673A (zh) * | 2009-07-30 | 2010-01-06 | 杭州联图科技有限公司 | 智能网络安防监控摄像机 |
WO2018120673A1 (zh) * | 2016-12-30 | 2018-07-05 | 移康智能科技(上海)股份有限公司 | 智能拍摄方法及装置 |
-
2019
- 2019-05-24 CN CN201910443487.3A patent/CN110300066A/zh active Pending
Patent Citations (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN201181986Y (zh) * | 2008-02-15 | 2009-01-14 | 上海宝康电子控制工程有限公司 | 高清人像记录设备 |
CN101621673A (zh) * | 2009-07-30 | 2010-01-06 | 杭州联图科技有限公司 | 智能网络安防监控摄像机 |
WO2018120673A1 (zh) * | 2016-12-30 | 2018-07-05 | 移康智能科技(上海)股份有限公司 | 智能拍摄方法及装置 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
Wang et al. | A smart home gateway platform for data collection and awareness | |
EP2852097B1 (en) | Efficient data center monitoring | |
CN107634848B (zh) | 一种采集分析网络设备信息的系统和方法 | |
CN108881147B (zh) | 一种视联网的数据处理方法和装置 | |
CN104243236B (zh) | 一种监控系统运维告警数据分析的方法、系统及服务器 | |
CN107302466A (zh) | 一种动环监控系统大数据分析平台及方法 | |
CN107528870A (zh) | 一种数据采集方法及其设备 | |
CN111813573B (zh) | 管理平台与机器人软件的通信方法及其相关设备 | |
CN110620699B (zh) | 消息到达率确定方法、装置、设备和计算机可读存储介质 | |
CN111950484A (zh) | 高空抛物信息的分析方法及电子设备 | |
WO2021114985A1 (zh) | 一种同行对象识别方法、装置、服务器及系统 | |
WO2014177023A1 (zh) | 业务类型确定方法和装置 | |
CN112416902A (zh) | 一种主机与数据库一键巡检方法 | |
CN107566785B (zh) | 一种面向大数据的视频监控系统及方法 | |
CN111817865A (zh) | 一种监控网管设备的方法及监控系统 | |
CN102355575A (zh) | 一种具有预警功能的分布式视频监控装置 | |
CN113627412A (zh) | 目标区域的检测方法、装置、电子设备和介质 | |
CN110300066A (zh) | 图片管理服务方法 | |
CN114189480B (zh) | 一种流量采样方法、装置、电子设备及介质 | |
CN113722182B (zh) | 一种并行异步高效采集分析方法及其系统 | |
CN113378674A (zh) | 人员到岗检测方法、装置、电子设备及存储介质 | |
CN104376027A (zh) | 基于社会化媒体的信息采集分析系统及其方法 | |
CN115086180A (zh) | 网络组网方法、网络组网装置及电子设备 | |
CN113901334A (zh) | 一种基于服务数据矩阵的社交软件用户行为识别方法 | |
CN112487850A (zh) | 一种基于人工智能人脸识别的司法场所快速点名方法 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
RJ01 | Rejection of invention patent application after publication |
Application publication date: 20191001 |
|
RJ01 | Rejection of invention patent application after publication |