CN116993253A - 一种实时物流信息跟踪方法及系统 - Google Patents
一种实时物流信息跟踪方法及系统 Download PDFInfo
- Publication number
- CN116993253A CN116993253A CN202310849429.7A CN202310849429A CN116993253A CN 116993253 A CN116993253 A CN 116993253A CN 202310849429 A CN202310849429 A CN 202310849429A CN 116993253 A CN116993253 A CN 116993253A
- Authority
- CN
- China
- Prior art keywords
- image
- management server
- frame
- image frames
- logistics management
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
- 238000000034 method Methods 0.000 title claims abstract description 41
- 230000002159 abnormal effect Effects 0.000 claims abstract description 75
- 238000007726 management method Methods 0.000 description 123
- 238000010586 diagram Methods 0.000 description 6
- 238000005516 engineering process Methods 0.000 description 6
- 238000011161 development Methods 0.000 description 3
- 238000012986 modification Methods 0.000 description 2
- 230000004048 modification Effects 0.000 description 2
- 230000009286 beneficial effect Effects 0.000 description 1
- 230000005540 biological transmission Effects 0.000 description 1
- 238000012217 deletion Methods 0.000 description 1
- 230000037430 deletion Effects 0.000 description 1
- 230000000694 effects Effects 0.000 description 1
- 238000000605 extraction Methods 0.000 description 1
- 230000009191 jumping Effects 0.000 description 1
- 238000012545 processing Methods 0.000 description 1
- 230000000717 retained effect Effects 0.000 description 1
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
- G06Q10/00—Administration; Management
- G06Q10/08—Logistics, e.g. warehousing, loading or distribution; Inventory or stock management
- G06Q10/083—Shipping
- G06Q10/0833—Tracking
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
- H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
- H04N21/234—Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs
- H04N21/2343—Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs involving reformatting operations of video signals for distribution or compliance with end-user requests or end-user device requirements
- H04N21/234381—Processing of video elementary streams, e.g. splicing of video streams or manipulating encoded video stream scene graphs involving reformatting operations of video signals for distribution or compliance with end-user requests or end-user device requirements by altering the temporal resolution, e.g. decreasing the frame rate by frame skipping
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N7/00—Television systems
- H04N7/01—Conversion of standards, e.g. involving analogue television standards or digital television standards processed at pixel level
- H04N7/0127—Conversion of standards, e.g. involving analogue television standards or digital television standards processed at pixel level by changing the field or frame frequency of the incoming video signal, e.g. frame rate converter
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N7/00—Television systems
- H04N7/18—Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast
Landscapes
- Engineering & Computer Science (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- Business, Economics & Management (AREA)
- Economics (AREA)
- Marketing (AREA)
- Entrepreneurship & Innovation (AREA)
- Human Resources & Organizations (AREA)
- Development Economics (AREA)
- Operations Research (AREA)
- Quality & Reliability (AREA)
- Strategic Management (AREA)
- Tourism & Hospitality (AREA)
- Physics & Mathematics (AREA)
- General Business, Economics & Management (AREA)
- General Physics & Mathematics (AREA)
- Theoretical Computer Science (AREA)
- Management, Administration, Business Operations System, And Electronic Commerce (AREA)
Abstract
本发明公开了一种实时物流信息跟踪方法,包括:由视频采集终端以恒定的采集帧率采集物流对象的视频分段;如果物流管理服务器确定视频播放模式指令指示快速播放模式,则由物流管理服务器从视频分段中抽取第一数量的图像帧,其中,视频分段具有第二数量的图像帧,其中,第一数量小于第二数量;由物流管理服务器基于第一数量的图像帧的各个图像帧的一个或多个特性来确定第一数量的图像帧中是否包括异常图像帧;由物流管理服务器将最终视频分段提供给用户终端。本发明的方法能够减少由于异常图像帧不能被用户正确理解,从而造成用户的误判和困惑的情况。
Description
技术领域
本发明是关于物流技术领域,特别是关于一种实时物流信息跟踪方法及系统。
背景技术
目前随着电商的发展,物流业已经成为一个重要产业。随着物流业和网络技术的发展,越来越多的物流用户希望能够观察货物在途过程中的视频画面,以确保贵重货物在运输过程中不发生损坏和丢失。目前一些物流公司已经开始研发为物流用户实时提供货物在途视频流的技术。在目前的技术研发过程中,已经发现了一些技术问题,但是现有技术尚不能有效解决这些技术问题。
发明内容
为实现上述目的,本发明提供了一种实时物流信息跟踪方法,包括:
由视频采集终端以恒定的采集帧率采集物流对象的视频分段;
由视频采集终端将视频分段发送给物流管理服务器;
由物流管理服务器接收由用户终端发送的视频播放模式指令;
如果物流管理服务器确定视频播放模式指令指示快速播放模式,则由物流管理服务器从视频分段中抽取第一数量的图像帧,其中,视频分段具有第二数量的图像帧,其中,第一数量小于第二数量;
由物流管理服务器基于第一数量的图像帧的各个图像帧的一个或多个特性来确定第一数量的图像帧中是否包括异常图像帧;
如果物流管理服务器确定第一数量的图像帧中包括异常图像帧,则由物流管理服务器利用第一数量的图像帧中的其它图像帧替换异常图像帧以生成最终视频分段;
由物流管理服务器将最终视频分段提供给用户终端。
在一优选的实施方式中,在由物流管理服务器确定第一数量的图像帧中是否包括异常图像帧之前,方法还包括:
由物流管理服务器基于视频播放模式指令来确定快速播放模式的播放速度是否高于门限播放速度;
其中,方法还包括:
如果物流管理服务器确定快速播放模式的播放速度低于门限播放速度,则物流管理服务器在忽略第一数量的图像帧的各个图像帧的一个或多个特性的情况下,确定第一数量的图像帧中不包括异常图像帧;
在物流管理服务器确定第一数量的图像帧中不包括异常图像帧的情况下,由物流管理服务器将第一数量的图像帧发送给用户终端。
在一优选的实施方式中,方法还包括:
如果物流管理服务器确定快速播放模式的播放速度高于门限播放速度,则由物流管理服务器基于第一数量的图像帧的各个图像帧的一个或多个特性来确定第一数量的图像帧中是否包括异常图像帧。
在一优选的实施方式中,由物流管理服务器基于第一数量的图像帧的各个图像帧的一个或多个特性来确定第一数量的图像帧中是否包括异常图像帧具体包括如下步骤:
由物流管理服务器将第一数量的图像帧按照时间顺序排列,其中,经过排列的第一数量的图像帧至少包括在时间上从前到后的第一帧图像、第二帧图像以及第三帧图像;
由物流管理服务器判断第一帧图像的一个或多个特性与第二帧图像的一个或多个特性之间的差异是否大于图像差异门限值;
如果物流管理服务器判断第一帧图像的一个或多个特性与第二帧图像的一个或多个特性之间的差异大于图像差异门限值,则由物流管理服务器判断第二帧图像的一个或多个特性与第三帧图像的一个或多个特性之间的差异是否大于图像差异门限值;
如果物流管理服务器判断第二帧图像的一个或多个特性与第三帧图像的一个或多个特性之间的差异小于图像差异门限值,则由物流管理服务器确定第一帧图像是异常图像。
在一优选的实施方式中,如果物流管理服务器判断第二帧图像的一个或多个特性与第三帧图像的一个或多个特性之间的差异大于图像差异门限值,则由物流管理服务器确定第二帧图像是异常图像。
在一优选的实施方式中,由物流管理服务器利用第一数量的图像帧中的其它图像帧替换异常图像帧以生成最终视频分段具体包括如下步骤:
如果物流管理服务器确定第一帧图像是异常图像,则由物流管理服务器获取在时间上位于第一帧图像和第二帧图像之间的第四帧图像;
由物流管理服务器判断第二帧图像的一个或多个特性与第四帧图像的一个或多个特性之间的差异是否大于图像差异门限值;
如果物流管理服务器判断第二帧图像的一个或多个特性与第四帧图像的一个或多个特性之间的差异小于图像差异门限值,则由物流管理服务器将第一帧图像替换为第四帧图像。
在一优选的实施方式中,由物流管理服务器利用第一数量的图像帧中的其它图像帧替换异常图像帧以生成最终视频分段具体包括如下步骤:
如果物流管理服务器判断第二帧图像的一个或多个特性与第四帧图像的一个或多个特性之间的差异大于图像差异门限值,则由物流管理服务器获取在时间上位于第二帧图像和第四帧图像之间的第五帧图像;
如果在时间上第二帧图像和第四帧图像之间不存在其它图像帧,则由物流管理服务器丢弃第一帧图像和第四帧图像,并由物流管理服务器在最终视频分段中指示最终视频分段中的图像帧数量小于第一数量。
本发明提供了一种实时物流信息跟踪系统,其特征在于,系统被配置为进行以下操作:
由视频采集终端以恒定的采集帧率采集物流对象的视频分段;
由视频采集终端将视频分段发送给物流管理服务器;
由物流管理服务器接收由用户终端发送的视频播放模式指令;
如果物流管理服务器确定视频播放模式指令指示快速播放模式,则由物流管理服务器从视频分段中抽取第一数量的图像帧,其中,视频分段具有第二数量的图像帧,其中,第一数量小于第二数量;
由物流管理服务器基于第一数量的图像帧的各个图像帧的一个或多个特性来确定第一数量的图像帧中是否包括异常图像帧;
如果物流管理服务器确定第一数量的图像帧中包括异常图像帧,则由物流管理服务器利用第一数量的图像帧中的其它图像帧替换异常图像帧以生成最终视频分段;
由物流管理服务器将最终视频分段提供给用户终端。
在一优选的实施方式中,在由物流管理服务器确定第一数量的图像帧中是否包括异常图像帧之前,系统还被配置为:
由物流管理服务器基于视频播放模式指令来确定快速播放模式的播放速度是否高于门限播放速度;
其中,系统还被配置为:
如果物流管理服务器确定快速播放模式的播放速度低于门限播放速度,则物流管理服务器在忽略第一数量的图像帧的各个图像帧的一个或多个特性的情况下,确定第一数量的图像帧中不包括异常图像帧;
在物流管理服务器确定第一数量的图像帧中不包括异常图像帧的情况下,由物流管理服务器将第一数量的图像帧发送给用户终端。
在一优选的实施方式中,系统还被配置为:
如果物流管理服务器确定快速播放模式的播放速度高于门限播放速度,则由物流管理服务器基于第一数量的图像帧的各个图像帧的一个或多个特性来确定第一数量的图像帧中是否包括异常图像帧。
与现有技术相比,本发明具有如下有益效果:可以通过删除视频中的部分图像帧的方式达到在不改变低成本摄像机的拍摄帧率,并且不改变用户终端的播放帧率情况下,提高播放速度的目的。但是,这种方法可能带来额外的问题,例如,由于为了提高视频播放速度而删除了部分图像帧,所以可能导致某些异常图像帧不能被用户正确理解,从而造成用户的误判和困惑,因此需要提出一种技术来解决该技术问题。本发明的方法能够减少由于异常图像帧不能被用户正确理解,从而造成用户的误判和困惑的情况。
附图说明
图1是本发明的一个实施例的系统架构示意图。
图2是本发明的一个实施例的方法流程图。
图3是本发明的另一个实施例的方法流程图。
实施方式
下面结合附图,对本发明的具体实施方式进行详细描述,但应当理解本发明的保护范围并不受具体实施方式的限制。
目前各大物流公司研发的为物流用户实时提供货物在途视频流的技术一般包括如下模块:安装在货车或者快递车内的低成本摄像机(或者称为图像获取设备或者视频采集终端)、物流管理服务器以及用户终端(例如智能手机或者平板电脑)。安装在货车或者快递车内的低成本摄像机获取货物的视频片段,然后低成本摄像机通过LTE、5G网络甚至是WiFi网络将视频片段上传至物流管理服务器,随后物流服务器按需将视频片段转发给用户终端。在系统的运行过程中,用户存在快速播放视频的需求,例如,低成本摄像机可能拍摄了长度为1分钟的视频片段,如果以正常速度播放,则播放整个视频片段的时间为1分钟,但是用户可能没有耐心和时间观看整个1分钟的视频片段,而是希望能够以2倍速、3倍速的方式快速观看该1分钟的视频片段,这样视频的播放时间降低为30s或者20s或者更低,这样用户可以节省时间。在以2倍速、3倍速的方式快速观看时,存在以下技术问题:由于安装在货车或者快递车内的摄像机是低成本摄像机,所以其拍摄帧率一般无法改变,而在用户终端处,如果使用手机视频播放软件的快进模式来调整播放速度,则存在快进速度选择不便的问题(例如目前各款手机视频播放软件中,播放速度的选择按钮较小,用户很容易误选不希望的播放速度;此外,对于某些特定格式的视频,一些手机视频播放软件不支持对其进行快进播放)。解决该矛盾的方法可以依赖减少存储的图像帧数量的技术。举例而言,低成本摄像机以60帧每秒(60fps)的帧率拍摄视频片段,并假定低成本摄像机连续拍摄30s,如果物流管理服务器将该30s内拍摄的所有图像帧发送给用户终端,并且如果用户终端的播放速度为60fps,则低成本摄像机30s内拍摄的视频将在用户终端上播放30s;如果物流管理服务器将该30s内拍摄的一部分图像帧(例如一半图像帧)发送给用户终端,并且如果用户终端的播放速度为60fps,则低成本摄像机30s内拍摄的视频将在用户终端上播放15s,这样达到了不改变低成本摄像机的拍摄帧率,并且不改变用户终端的播放帧率情况下,提高了播放速度,在用户侧,用户则认为视频被快放。一般而言,物流管理服务器将拍摄的一部分图像帧(例如一半图像帧)发送给用户终端的方式如下,例如物流管理服务器从低成本摄像机获得60帧图像(1s内拍摄的所有图像),而物流管理服务器例如每隔一帧删除一帧图像(也即保留60帧图像的第1、3、5、7等帧,删除60帧图像的第2、4、6、8等帧)。但是简单采用该技术将导致额外的技术问题。例如,由于为了提高视频播放速度而删除了部分图像帧,所以可能导致某些异常图像帧不能被用户正确理解,从而造成用户的误判和困惑,因此需要提出一种技术来解决该技术问题。
实施例
图1是本发明的一个实施例的系统架构示意图。如图所示,本发明的系统包括视频采集终端、物流管理服务器以及用户终端,其中,视频采集终端可以采集物流对象(例如,货物)的实时视频片段,视频采集终端可以将所采集的视频片段发送给物流管理服务器,而物流管理服务器可以将视频片段转发给用户终端。最后,用户终端可以将视频片段展示给用户。
实施例
图2是本发明的一个实施例的方法流程图。如图2所示,本发明的方法包括如下步骤:
步骤1:由视频采集终端以恒定的采集帧率采集物流对象的视频分段;在一个示例中,恒定的采集帧率例如可以是60fps,也即视频采集终端以每秒60帧的帧率采集物流对象的视频,需要本领域技术人员理解的是,本发明所述的“恒定的采集帧率”指的是在整个系统运行过程中,视频采集终端的采集帧率始终不变,例如始终保持60fps;
步骤2:由视频采集终端将视频分段发送给物流管理服务器;
步骤3:由物流管理服务器接收由用户终端发送的视频播放模式指令;在一个示例中,用户可以通过用户终端的人机界面预设一个视频播放速度,例如正常速度播放、1.1倍速播放、1.2倍速播放、1.3倍速播放、2倍速播放、3倍速播放等,用户终端随后可以将该预设的视频播放速度生成为一个视频播放模式指令;
步骤4:如果物流管理服务器确定视频播放模式指令指示快速播放模式,则由物流管理服务器从视频分段中抽取第一数量的图像帧,其中,视频分段具有第二数量的图像帧,其中,第一数量小于第二数量;在一个示例中,物流管理服务器可以以平均抽取的方式抽取视频分段中的视频帧,本领域技术人员应该理解的是,在本发明中,被抽取的图像帧是最终被保存并被发送给用户终端的图像帧,未被抽取的图像帧可以被保存在物流管理服务器备用,但是未被抽取的图像帧不被发送给用户终端;在一个示例中,例如视频采集终端以60fps的帧率采集视频,用户终端以60fps的帧率播放视频,假设物流管理服务器接收到180帧图像帧,用户希望以2倍速播放视频,则物流管理服务器可以每隔一帧抽取一帧图像,如果用户希望以3倍速播放视频,则物流管理服务器可以每隔一帧抽取两帧图像(例如保留第1、4、7等帧的图像,删除第2、3、5、6等帧的图像);在另一个示例中,物流服务器也可以从180帧图像帧中抽取170帧视频,从而使得用户终端获得大约1.06倍速的播放速度;
步骤5:由物流管理服务器基于第一数量的图像帧的各个图像帧的一个或多个特性来确定第一数量的图像帧中是否包括异常图像帧;在一个示例中,图像帧的一个或多个特性可以包括图像的亮度、图像中的主要物体的数量、图像的特征物体等;通过机器视觉算法确定图像中的主要物体的数量、图像的特征物体是本领域的公知技术,本发明对此不再赘述;
步骤6:如果物流管理服务器确定第一数量的图像帧中包括异常图像帧,则由物流管理服务器利用第一数量的图像帧中的其它图像帧替换异常图像帧以生成最终视频分段;
步骤7:由物流管理服务器将最终视频分段提供给用户终端。
实施例
图3是本发明的一个实施例的方法流程图。图3主要示出实施例3所描述的方法。在实施例3中,在由物流管理服务器确定第一数量的图像帧中是否包括异常图像帧之前,方法还包括:
由物流管理服务器基于视频播放模式指令来确定快速播放模式的播放速度是否高于门限播放速度;在一个示例中,门限播放速度的确定可以基于经验判断,设置该步骤的主要目的在于:如果用户只要求有限的快速播放(例如,1.05倍速播放),那么物流管理服务器只需要从视频分段中删除大约5%的图像帧即可达到用户要求的视频播放速度,由于被删除的图像数量较少,视频分段中的绝大部分信息被保留,加之视频播放速度并不快,所以即便第一数量的图像帧中存在部分异常图像,这种异常图像也不会引起用户的误解,在此情况下,没有必要对异常图像进行替换,这样可以加快视频传输速度。门限播放速度可以设置为1.05倍速、1.1倍速、1.15倍速等等;
其中,方法还包括:
如果物流管理服务器确定快速播放模式的播放速度低于门限播放速度,则物流管理服务器在忽略第一数量的图像帧的各个图像帧的一个或多个特性的情况下,确定第一数量的图像帧中不包括异常图像帧;
在物流管理服务器确定第一数量的图像帧中不包括异常图像帧的情况下,由物流管理服务器将第一数量的图像帧发送给用户终端。如图3所示,图3的步骤1-7与图2中的步骤1-7一致,不同之处在于,在步骤4与步骤5之间增加一个判断步骤,其中,由物流管理服务器基于视频播放模式指令来确定快速播放模式的播放速度是否高于门限播放速度,如果确定快速播放模式的播放速度高于门限播放速度,则方法可以继续进行到步骤5;如果确定快速播放模式的播放速度低于门限播放速度,则方法相当于直接跳到步骤7(即忽略步骤5和6),其中,物流管理服务器直接将从视频分段中抽取第一数量的图像帧发送给用户终端;当然在具体实现中,可以在确定快速播放模式的播放速度低于门限播放速度之后,强制物流管理服务器确定第一数量的图像帧中不包括异常图像帧,从而实现忽略步骤5和6的效果。
如果物流管理服务器确定快速播放模式的播放速度高于门限播放速度,则由物流管理服务器基于第一数量的图像帧的各个图像帧的一个或多个特性来确定第一数量的图像帧中是否包括异常图像帧。
实施例
在实施例4中,由物流管理服务器基于第一数量的图像帧的各个图像帧的一个或多个特性来确定第一数量的图像帧中是否包括异常图像帧具体包括如下步骤:
由物流管理服务器将第一数量的图像帧按照时间顺序排列,其中,经过排列的第一数量的图像帧至少包括在时间上从前到后的第一帧图像、第二帧图像以及第三帧图像;本领域技术人员应该理解,第一帧图像、第二帧图像以及第三帧图像是(在删除部分图像帧之后)在时间上紧挨着的三个图像帧,其中在时间上第一帧图像最先被拍摄、第二帧图像随后被拍摄以及第三帧图像最后被拍摄;
由物流管理服务器判断第一帧图像的一个或多个特性与第二帧图像的一个或多个特性之间的差异是否大于图像差异门限值;在一个示例中,第一帧图像的一个或多个特性与第二帧图像的一个或多个特性可以均是图像帧的亮度,在正常情况下,由于第一帧图像和第二帧图像是时间上紧挨着的两帧图像,因此两帧图像的亮度差应该较小,如果第一帧图像和第二帧图像的亮度差很大,这可能是由于外界环境短时间改变或者视频拍摄装置拍摄角度变化导致的亮度差异,并非是货物收到危险而导致的亮度差异,因此,基于第一帧图像和第二帧图像的亮度差大于门限值,可以推断第一帧图像和第二帧图像中的至少一者可能是异常图像。在另一个示例中,在一个示例中,第一帧图像的一个或多个特性与第二帧图像的一个或多个特性可以均是图像帧中的主要物体,在正常情况下,第一帧图像与第二帧图像中的主要物体应该均是用户快递的货物,但是可能由于苍蝇等飞虫近距离飞过摄像机镜头,导致短时间内第一帧图像与第二帧图像中的主要物体发生变化,此时可以将图像帧中的主要物体为货物的状态打分为1分,将图像帧中的主要物体为苍蝇等飞虫的状态打分为0分,例如第一帧图像打分为1分,第二帧图像打分为0分,两者分值差为1分,基于两者分值差为1分,可以推断第一帧图像和第二帧图像中的至少一者可能是异常图像。
如果物流管理服务器判断第一帧图像的一个或多个特性与第二帧图像的一个或多个特性之间的差异大于图像差异门限值,则由物流管理服务器判断第二帧图像的一个或多个特性与第三帧图像的一个或多个特性之间的差异是否大于图像差异门限值;该步骤的目的是进一步确定异常图像是第一帧图像还是第二帧图像,由于本发明的目的主要是消除快速播放的视频片段中的短时存在(存在于1帧或连续2帧中)的异常图像,因此,可以进一步判断第二帧图像的一个或多个特性与第三帧图像的一个或多个特性之间的差异是否大于图像差异门限值,如果判断第二帧图像的一个或多个特性与第三帧图像的一个或多个特性之间的差异大于图像差异门限值,则可以认为第二帧图像是异常图像,只有这样才会导致第二帧图像的一个或多个特性与第三帧图像的一个或多个特性之间的差异大于图像差异门限值并且第二帧图像的一个或多个特性与第一帧图像的一个或多个特性之间的差异也大于图像差异门限值;反之,如果判断第二帧图像的一个或多个特性与第三帧图像的一个或多个特性之间的差异小于图像差异门限值,则可以认为第一帧图像是异常图像;当然这种判断方法在某些特殊情况下将导致异常图像的判断出现错误,但是如果采用更加严谨的判别方法,则判别逻辑将过于复杂,导致物流管理服务器处对于视频片段的处理时间过长,并且即便使用更加严谨的判别方法,仍然无法保证将视频片段中的明显错误图像帧删除,并且仅保留有用且正确的图像帧;此外,即便本发明的方法在某些特殊情况下将导致异常图像的判断出现错误,那么用户在查阅视频之后即可立即发现错误,并要求物流管理服务器将原始的视频片段的所有图像帧发送给用户终端,并以正常速度播放,从而确保用户不会忽略货物存在的风险;
如果物流管理服务器判断第二帧图像的一个或多个特性与第三帧图像的一个或多个特性之间的差异小于图像差异门限值,则由物流管理服务器确定第一帧图像是异常图像。
在一优选的实施方式中,如果物流管理服务器判断第二帧图像的一个或多个特性与第三帧图像的一个或多个特性之间的差异大于图像差异门限值,则由物流管理服务器确定第二帧图像是异常图像。
实施例
在实施例5中,由物流管理服务器利用第一数量的图像帧中的其它图像帧替换异常图像帧以生成最终视频分段具体包括如下步骤:
如果物流管理服务器确定第一帧图像是异常图像,则由物流管理服务器获取在时间上位于第一帧图像和第二帧图像之间的第四帧图像;本领域技术人员应该理解的是,在时间上位于第一帧图像和第二帧图像之间的第四帧图像指的是物流管理服务器基于具有第二数量的图像帧的视频分段来获取的,也即物流管理服务器通过检索未进行抽取之前的视频分段来获取在时间上位于第一帧图像和第二帧图像之间的第四帧图像;本领域技术人员应该理解的是,在特殊情况下,如果第一帧图像和第二帧图像之间不存在第四帧图像,物流管理服务器可以直接丢弃第一帧图像,仅发送第二帧图像和第三帧图像,并在在最终视频分段中指示最终视频分段中的图像帧数量小于第一数量(此时最终视频分段中的图像帧数量=第一数量-1);
由物流管理服务器判断第二帧图像的一个或多个特性与第四帧图像的一个或多个特性之间的差异是否大于图像差异门限值;
如果物流管理服务器判断第二帧图像的一个或多个特性与第四帧图像的一个或多个特性之间的差异小于图像差异门限值,则由物流管理服务器将第一帧图像替换为第四帧图像。
在一优选的实施方式中,由物流管理服务器利用第一数量的图像帧中的其它图像帧替换异常图像帧以生成最终视频分段具体包括如下步骤:
如果物流管理服务器判断第二帧图像的一个或多个特性与第四帧图像的一个或多个特性之间的差异大于图像差异门限值,则由物流管理服务器获取在时间上位于第二帧图像和第四帧图像之间的第五帧图像;
如果在时间上第二帧图像和第四帧图像之间不存在其它图像帧,则由物流管理服务器丢弃第一帧图像和第四帧图像,并由物流管理服务器在最终视频分段中指示最终视频分段中的图像帧数量小于第一数量。
实施例
本发明提供了一种实时物流信息跟踪系统,其特征在于,系统被配置为进行以下操作:
由视频采集终端以恒定的采集帧率采集物流对象的视频分段;
由视频采集终端将视频分段发送给物流管理服务器;
由物流管理服务器接收由用户终端发送的视频播放模式指令;
如果物流管理服务器确定视频播放模式指令指示快速播放模式,则由物流管理服务器从视频分段中抽取第一数量的图像帧,其中,视频分段具有第二数量的图像帧,其中,第一数量小于第二数量;
由物流管理服务器基于第一数量的图像帧的各个图像帧的一个或多个特性来确定第一数量的图像帧中是否包括异常图像帧;
如果物流管理服务器确定第一数量的图像帧中包括异常图像帧,则由物流管理服务器利用第一数量的图像帧中的其它图像帧替换异常图像帧以生成最终视频分段;
由物流管理服务器将最终视频分段提供给用户终端。
在由物流管理服务器确定第一数量的图像帧中是否包括异常图像帧之前,系统还被配置为:
由物流管理服务器基于视频播放模式指令来确定快速播放模式的播放速度是否高于门限播放速度。
其中,系统还被配置为:
如果物流管理服务器确定快速播放模式的播放速度低于门限播放速度,则物流管理服务器在忽略第一数量的图像帧的各个图像帧的一个或多个特性的情况下,确定第一数量的图像帧中不包括异常图像帧;
在物流管理服务器确定第一数量的图像帧中不包括异常图像帧的情况下,由物流管理服务器将第一数量的图像帧发送给用户终端。
系统还被配置为:
如果物流管理服务器确定快速播放模式的播放速度高于门限播放速度,则由物流管理服务器基于第一数量的图像帧的各个图像帧的一个或多个特性来确定第一数量的图像帧中是否包括异常图像帧。
应当理解的是,本发明的上述具体实施方式仅仅用于示例性说明或解释本发明的原理,而不构成对本发明的限制。因此,在不偏离本发明的精神和范围的情况下所做的任何修改、等同替换、改进等,均应包含在本发明的保护范围之内。此外,本发明所附权利要求旨在涵盖落入所附权利要求范围和边界、或者这种范围和边界的等同形式内的全部变化和修改例。
Claims (10)
1.一种实时物流信息跟踪方法,其特征在于,包括如下步骤:
由视频采集终端以恒定的采集帧率采集物流对象的视频分段;
由视频采集终端将所述视频分段发送给物流管理服务器;
由物流管理服务器接收由用户终端发送的视频播放模式指令;
如果物流管理服务器确定所述视频播放模式指令指示快速播放模式,则由物流管理服务器从所述视频分段中抽取第一数量的图像帧,其中,所述视频分段具有第二数量的图像帧,其中,所述第一数量小于所述第二数量;
由物流管理服务器基于所述第一数量的图像帧的各个图像帧的一个或多个特性来确定所述第一数量的图像帧中是否包括异常图像帧;
如果物流管理服务器确定所述第一数量的图像帧中包括异常图像帧,则由物流管理服务器利用所述第一数量的图像帧中的其它图像帧替换所述异常图像帧以生成最终视频分段;
由物流管理服务器将所述最终视频分段提供给所述用户终端。
2.如权利要求1所述的实时物流信息跟踪方法,其中,在由物流管理服务器确定所述第一数量的图像帧中是否包括异常图像帧之前,所述实时物流信息跟踪方法还包括:
由物流管理服务器基于所述视频播放模式指令来确定所述快速播放模式的播放速度是否高于门限播放速度;
其中,所述实时物流信息跟踪方法还包括:
如果物流管理服务器确定所述快速播放模式的播放速度低于所述门限播放速度,则物流管理服务器在忽略所述第一数量的图像帧的各个图像帧的一个或多个特性的情况下,确定所述第一数量的图像帧中不包括异常图像帧;
在物流管理服务器确定所述第一数量的图像帧中不包括异常图像帧的情况下,由物流管理服务器将所述第一数量的图像帧发送给所述用户终端。
3.如权利要求2所述的实时物流信息跟踪方法,其中,所述实时物流信息跟踪方法还包括:
如果物流管理服务器确定所述快速播放模式的播放速度高于所述门限播放速度,则由物流管理服务器基于所述第一数量的图像帧的各个图像帧的一个或多个特性来确定所述第一数量的图像帧中是否包括异常图像帧。
4.如权利要求3所述的实时物流信息跟踪方法,其中,由物流管理服务器基于所述第一数量的图像帧的各个图像帧的一个或多个特性来确定所述第一数量的图像帧中是否包括异常图像帧具体包括如下步骤:
由物流管理服务器将所述第一数量的图像帧按照时间顺序排列,其中,经过排列的所述第一数量的图像帧至少包括在时间上从前到后的第一帧图像、第二帧图像以及第三帧图像;
由物流管理服务器判断所述第一帧图像的一个或多个特性与所述第二帧图像的一个或多个特性之间的差异是否大于图像差异门限值;
如果物流管理服务器判断所述第一帧图像的一个或多个特性与所述第二帧图像的一个或多个特性之间的差异大于图像差异门限值,则由物流管理服务器判断所述第二帧图像的一个或多个特性与所述第三帧图像的一个或多个特性之间的差异是否大于图像差异门限值;
如果物流管理服务器判断所述第二帧图像的一个或多个特性与所述第三帧图像的一个或多个特性之间的差异小于图像差异门限值,则由物流管理服务器确定所述第一帧图像是异常图像。
5.如权利要求4所述的实时物流信息跟踪方法,其中,如果物流管理服务器判断所述第二帧图像的一个或多个特性与所述第三帧图像的一个或多个特性之间的差异大于图像差异门限值,则由物流管理服务器确定所述第二帧图像是异常图像。
6.如权利要求5所述的实时物流信息跟踪方法,其中,由物流管理服务器利用所述第一数量的图像帧中的其它图像帧替换所述异常图像帧以生成最终视频分段具体包括如下步骤:
如果物流管理服务器确定所述第一帧图像是异常图像,则由物流管理服务器获取在时间上位于所述第一帧图像和第二帧图像之间的第四帧图像;
由物流管理服务器判断所述第二帧图像的一个或多个特性与所述第四帧图像的一个或多个特性之间的差异是否大于图像差异门限值;
如果物流管理服务器判断所述第二帧图像的一个或多个特性与所述第四帧图像的一个或多个特性之间的差异小于图像差异门限值,则由物流管理服务器将所述第一帧图像替换为所述第四帧图像。
7.如权利要求6所述的实时物流信息跟踪方法,其中,由物流管理服务器利用所述第一数量的图像帧中的其它图像帧替换所述异常图像帧以生成最终视频分段具体包括如下步骤:
如果物流管理服务器判断所述第二帧图像的一个或多个特性与所述第四帧图像的一个或多个特性之间的差异大于图像差异门限值,则由物流管理服务器获取在时间上位于所述第二帧图像和第四帧图像之间的第五帧图像;
如果在时间上所述第二帧图像和第四帧图像之间不存在其它图像帧,则由物流管理服务器丢弃所述第一帧图像和所述第四帧图像,并由物流管理服务器在所述最终视频分段中指示所述最终视频分段中的图像帧数量小于所述第一数量。
8.一种实时物流信息跟踪系统,其特征在于,所述实时物流信息跟踪系统被配置为进行以下操作:
由视频采集终端以恒定的采集帧率采集物流对象的视频分段;
由视频采集终端将所述视频分段发送给物流管理服务器;
由物流管理服务器接收由用户终端发送的视频播放模式指令;
如果物流管理服务器确定所述视频播放模式指令指示快速播放模式,则由物流管理服务器从所述视频分段中抽取第一数量的图像帧,其中,所述视频分段具有第二数量的图像帧,其中,所述第一数量小于所述第二数量;
由物流管理服务器基于所述第一数量的图像帧的各个图像帧的一个或多个特性来确定所述第一数量的图像帧中是否包括异常图像帧;
如果物流管理服务器确定所述第一数量的图像帧中包括异常图像帧,则由物流管理服务器利用所述第一数量的图像帧中的其它图像帧替换所述异常图像帧以生成最终视频分段;
由物流管理服务器将所述最终视频分段提供给所述用户终端。
9.如权利要求8所述的实时物流信息跟踪系统,其中,在由物流管理服务器确定所述第一数量的图像帧中是否包括异常图像帧之前,所述实时物流信息跟踪系统还被配置为:
由物流管理服务器基于所述视频播放模式指令来确定所述快速播放模式的播放速度是否高于门限播放速度;
其中,所述实时物流信息跟踪系统还被配置为:
如果物流管理服务器确定所述快速播放模式的播放速度低于所述门限播放速度,则物流管理服务器在忽略所述第一数量的图像帧的各个图像帧的一个或多个特性的情况下,确定所述第一数量的图像帧中不包括异常图像帧;
在物流管理服务器确定所述第一数量的图像帧中不包括异常图像帧的情况下,由物流管理服务器将所述第一数量的图像帧发送给所述用户终端。
10.如权利要求9所述的实时物流信息跟踪系统,其中,所述实时物流信息跟踪系统还被配置为:
如果物流管理服务器确定所述快速播放模式的播放速度高于所述门限播放速度,则由物流管理服务器基于所述第一数量的图像帧的各个图像帧的一个或多个特性来确定所述第一数量的图像帧中是否包括异常图像帧。
Priority Applications (2)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202310849429.7A CN116993253B (zh) | 2023-07-12 | 2023-07-12 | 一种实时物流信息跟踪方法及系统 |
CN202410717936.XA CN118536895A (zh) | 2023-07-12 | 2023-07-12 | 一种含有视频采集终端的物流信息跟踪方法及系统 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202310849429.7A CN116993253B (zh) | 2023-07-12 | 2023-07-12 | 一种实时物流信息跟踪方法及系统 |
Related Child Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN202410717936.XA Division CN118536895A (zh) | 2023-07-12 | 2023-07-12 | 一种含有视频采集终端的物流信息跟踪方法及系统 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN116993253A true CN116993253A (zh) | 2023-11-03 |
CN116993253B CN116993253B (zh) | 2024-06-25 |
Family
ID=88527597
Family Applications (2)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN202410717936.XA Pending CN118536895A (zh) | 2023-07-12 | 2023-07-12 | 一种含有视频采集终端的物流信息跟踪方法及系统 |
CN202310849429.7A Active CN116993253B (zh) | 2023-07-12 | 2023-07-12 | 一种实时物流信息跟踪方法及系统 |
Family Applications Before (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN202410717936.XA Pending CN118536895A (zh) | 2023-07-12 | 2023-07-12 | 一种含有视频采集终端的物流信息跟踪方法及系统 |
Country Status (1)
Country | Link |
---|---|
CN (2) | CN118536895A (zh) |
Cited By (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN118506250A (zh) * | 2024-07-16 | 2024-08-16 | 深圳市一秋医纺科技有限公司 | 一种医用织物分拣异常识别方法及装置 |
Citations (10)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2012049875A (ja) * | 2010-08-27 | 2012-03-08 | Fujitsu Ltd | 映像配信サーバ及び映像配信方法 |
CN105282560A (zh) * | 2014-06-24 | 2016-01-27 | Tcl集团股份有限公司 | 一种快速播放网络视频的方法及系统 |
WO2018120946A1 (zh) * | 2016-12-30 | 2018-07-05 | 广州虎牙信息科技有限公司 | 视频画面异常判断、装置及终端设备 |
CN110363463A (zh) * | 2019-06-04 | 2019-10-22 | 天津五八到家科技有限公司 | 货运数据处理方法、设备、系统及存储介质 |
CN111327965A (zh) * | 2020-03-27 | 2020-06-23 | 深圳市酷开网络科技有限公司 | 视频分片倍速播放方法、系统及存储介质 |
CN112565909A (zh) * | 2020-11-30 | 2021-03-26 | 维沃移动通信有限公司 | 视频播放方法、装置、电子设备及可读存储介质 |
WO2021233123A1 (zh) * | 2020-05-21 | 2021-11-25 | 腾讯科技(深圳)有限公司 | 视频处理方法、装置、计算机设备和存储介质 |
WO2022095502A1 (zh) * | 2020-11-04 | 2022-05-12 | 北京达佳互联信息技术有限公司 | 视频获取方法及终端 |
WO2022105597A1 (zh) * | 2020-11-20 | 2022-05-27 | 北京字跳网络技术有限公司 | 视频倍速播放方法、装置、电子设备及存储介质 |
CN116363554A (zh) * | 2023-03-04 | 2023-06-30 | 西安电子科技大学青岛计算技术研究院 | 一种监控视频关键帧提取方法、系统、介质、设备及终端 |
-
2023
- 2023-07-12 CN CN202410717936.XA patent/CN118536895A/zh active Pending
- 2023-07-12 CN CN202310849429.7A patent/CN116993253B/zh active Active
Patent Citations (10)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2012049875A (ja) * | 2010-08-27 | 2012-03-08 | Fujitsu Ltd | 映像配信サーバ及び映像配信方法 |
CN105282560A (zh) * | 2014-06-24 | 2016-01-27 | Tcl集团股份有限公司 | 一种快速播放网络视频的方法及系统 |
WO2018120946A1 (zh) * | 2016-12-30 | 2018-07-05 | 广州虎牙信息科技有限公司 | 视频画面异常判断、装置及终端设备 |
CN110363463A (zh) * | 2019-06-04 | 2019-10-22 | 天津五八到家科技有限公司 | 货运数据处理方法、设备、系统及存储介质 |
CN111327965A (zh) * | 2020-03-27 | 2020-06-23 | 深圳市酷开网络科技有限公司 | 视频分片倍速播放方法、系统及存储介质 |
WO2021233123A1 (zh) * | 2020-05-21 | 2021-11-25 | 腾讯科技(深圳)有限公司 | 视频处理方法、装置、计算机设备和存储介质 |
WO2022095502A1 (zh) * | 2020-11-04 | 2022-05-12 | 北京达佳互联信息技术有限公司 | 视频获取方法及终端 |
WO2022105597A1 (zh) * | 2020-11-20 | 2022-05-27 | 北京字跳网络技术有限公司 | 视频倍速播放方法、装置、电子设备及存储介质 |
CN112565909A (zh) * | 2020-11-30 | 2021-03-26 | 维沃移动通信有限公司 | 视频播放方法、装置、电子设备及可读存储介质 |
CN116363554A (zh) * | 2023-03-04 | 2023-06-30 | 西安电子科技大学青岛计算技术研究院 | 一种监控视频关键帧提取方法、系统、介质、设备及终端 |
Non-Patent Citations (1)
Title |
---|
郝燕玲;王文答;: "基于小波视频编码的动态码率传输与控制", 华中科技大学学报(自然科学版), no. 07, 15 July 2010 (2010-07-15), pages 100 * |
Cited By (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN118506250A (zh) * | 2024-07-16 | 2024-08-16 | 深圳市一秋医纺科技有限公司 | 一种医用织物分拣异常识别方法及装置 |
Also Published As
Publication number | Publication date |
---|---|
CN116993253B (zh) | 2024-06-25 |
CN118536895A (zh) | 2024-08-23 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US11871093B2 (en) | Socially annotated audiovisual content | |
CN116993253B (zh) | 一种实时物流信息跟踪方法及系统 | |
CN110198456B (zh) | 基于直播的视频推送方法、装置和计算机可读存储介质 | |
WO2015081776A1 (zh) | 视频画面的处理方法及装置 | |
US20140023341A1 (en) | Annotating General Objects in Video | |
CN111083515B (zh) | 处理直播内容的方法、装置、系统 | |
CN109089131B (zh) | 一种基于ios系统的录屏直播方法、装置、设备及存储介质 | |
US10749923B2 (en) | Contextual video content adaptation based on target device | |
CN110493638B (zh) | 视频帧对齐方法、装置、电子设备及可读存储介质 | |
CN113067994B (zh) | 一种视频录制方法及电子设备 | |
WO2009113280A1 (ja) | 画像処理装置およびそれを搭載した撮像装置 | |
US20230254528A1 (en) | Comment distribution system, comment distribution server, terminal, comment distribution method, and program | |
CN107295296B (zh) | 一种监控视频选择性存储与恢复方法及系统 | |
CN111861572A (zh) | 广告投放方法、装置、电子设备及计算机可读存储介质 | |
CN113068074B (zh) | 缓存方法和装置、计算机可读的存储介质及电子装置 | |
CN113286175A (zh) | 视频流处理方法、装置及存储介质 | |
US10091265B2 (en) | Catching up to the live playhead in live streaming | |
CN113242431B (zh) | 一种面向路侧感知的标注数据预处理方法 | |
CN111107388A (zh) | 处理直播内容的方法、装置、系统、设备、存储介质 | |
US11288512B2 (en) | Electronic apparatus, control device, and control method | |
US11653039B2 (en) | Video stream batching | |
EP2922060B1 (en) | Extraction method and device | |
CN112752150A (zh) | 一种视频解码方法、装置、电子设备及存储介质 | |
CN113207031A (zh) | 一种多路屏幕数据录制叠加方法及装置、存储介质 | |
Fernandez et al. | Worthy visual content on mobile through interactive video streaming |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
CB03 | Change of inventor or designer information | ||
CB03 | Change of inventor or designer information |
Inventor after: Yin Yue Inventor after: Gao Yuxiang Inventor after: Wang Renlong Inventor after: Zhao Jiayuan Inventor before: Yin Yue Inventor before: Gao Yuxiang Inventor before: Wang Renlong Inventor before: Zhao Jiayuan Inventor before: Request for anonymity |
|
GR01 | Patent grant | ||
GR01 | Patent grant |