CN101170507B - 异步并发处理方法 - Google Patents

异步并发处理方法 Download PDF

Info

Publication number
CN101170507B
CN101170507B CN2007101871160A CN200710187116A CN101170507B CN 101170507 B CN101170507 B CN 101170507B CN 2007101871160 A CN2007101871160 A CN 2007101871160A CN 200710187116 A CN200710187116 A CN 200710187116A CN 101170507 B CN101170507 B CN 101170507B
Authority
CN
China
Prior art keywords
content
module
file
backstage
uploading
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Expired - Fee Related
Application number
CN2007101871160A
Other languages
English (en)
Other versions
CN101170507A (zh
Inventor
付光
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
STATE GRID ZHEJIANG ZHUJI POWER SUPPLY Co Ltd
Zhuji Dongbai Electric Power Equipment Manufacturing Co Ltd
State Grid Corp of China SGCC
State Grid Zhejiang Electric Power Co Ltd
Shaoxing Power Supply Co of State Grid Zhejiang Electric Power Co Ltd
Original Assignee
ZTE Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by ZTE Corp filed Critical ZTE Corp
Priority to CN2007101871160A priority Critical patent/CN101170507B/zh
Publication of CN101170507A publication Critical patent/CN101170507A/zh
Application granted granted Critical
Publication of CN101170507B publication Critical patent/CN101170507B/zh
Expired - Fee Related legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Landscapes

  • Information Transfer Between Computers (AREA)

Abstract

本发明提供了一种异步并发处理方法,用于通过内容管理系统来批量完成文件的上传,其包括以下步骤:步骤一,当用户在浏览器上输入有关文件的内容信息时,通过数据库模块将内容信息保存在数据库中;步骤二,当用户上传文件时,通过数据库模块将文件内容的状态设为待后台处理状态,并在任务调度表中增加有关文件的上传任务标识;步骤三,当后台控制模块查询到任务调度表中存在有关文件的上传任务标识时,并启动后台内容上传执行模块;以及步骤四,如果当前的上传任务标识的数量不超过预定阈值时,后台内容上传执行模块上传文件,并删除上传任务标识。

Description

异步并发处理方法
技术领域
本发明涉及网络电视(IPTV)系统,更具体地,涉及一种用于通过内容管理系统来批量完成文件的内容的上传的异步并发处理方法。
背景技术
内容管理系统(CMS)是IPTV业务管理系统中一个非常重要的子系统,主要用于完成内容的上传、加密、审核、发布,节目编排等。其中,内容上传是起点也是重中之重。内容包括VOD、连续剧、卡拉OK、海报、片花等类型,在业务运作过程中这些类型的内容具有文件大、数量多,处理时间长、操作时间点较密集的特点。因而传统的通过WEB上传完一个文件再处理另一个文件的方式不能满足要求。
发明内容
鉴于现有技术中的问题,本发明提供了一种异步并发处理方法,通过异步并发处理方式来完成大批量大文件内容的上传,方便快捷,在CMS管理系统中与内容上传相关的模块包括如下七类:浏览器,数据库模块、后台启动模块、后台控制模块、后台内容上传执行模块、后台内容加密请求执行模块、和后台加密请求回应模块。
本发明提供了一种异步并发处理方法,用于通过内容管理系统来批量完成文件的内容的上传,其包括以下步骤:步骤一,当用户在浏览器上输入有关文件的内容信息时,通过数据库模块将内容信息保存在数据库中;步骤二,当用户上传文件时,通过数据库模块将文件的内容的状态设为待后台处理状态,并在任务调度表中增加有关文件的上传任务标识;步骤三,当后台控制模块查询到任务调度表中存在有关文件的上传任务标识时,并启动后台内容上传执行模块;以及步骤四,如果当前的上传任务标识的数量不超过预定阈值时,后台内容上传执行模块上传文件,并删除上传任务标识。
在步骤一之前,本方法还包括:启动浏览器服务器,同时启动后台启动模块和后台加密请求回应模块;以及通过后台启动模块来启动后台控制模块。
其中,内容信息包括:内容的描述信息和文件的位置。
在步骤一中还执行以下处理:判断内容的类型;基于内容信息,数据库模块对内容进行分割;以及数据库模块将有关分割后的各个子内容的内容信息保存到数据库中。
在步骤四中,当后台内容上传执行模块上传文件失败时,记录错误信息,并将内容的状态修改为待后台处理状态。
当对内容进行加密时,本发明还包括以下步骤:步骤a,将内容的状态修改为待加密状态并在任务调度表中增加加密任务标识;步骤b,当后台控制模块查询到加密任务标识时,通过加密服务器对文件进行加密,并向后台加密请求回应模块发送解析请求消息;步骤c,当后台加密请求回应模块接收到解析请求消息时,对加密后的文件进行解析;以及步骤d,当解析成功时,将加密后的文件上传到内容记录库中,并将内容的状态修改为上传成功状态以及删除加密任务标识。
在步骤b中,执行以下处理:后台控制模块查询到加密任务标识;后台控制模块启动加密请求执行模块;基于有关内容的消息,加密请求执行模块将文件上传给加密服务器;以及加密请求执行模块将内容的状态修改为加密正在处理状态。而当上传失败时,操作员通过错误信息来检查失败原因准备再次上传并返回步骤三。
在本发明中,内容的类型至少包括视频点播、连续剧、卡拉OK、海报和片花。
因而,采用本发明,具有响应速度快,处理过程透明、处理时间短、不影响操作人员进行其它操作的特点,让用户立刻看到自己的操作被计算机接收并能看到内容处理的具体步骤及完成情况,同时采用多文件同时并发上传的方式,不影响操作人员进行其它操作。
本发明的其它特征和优点将在随后的说明书中阐述,并且,部分地从说明书中变得显而易见,或者通过实施本发明而了解。本发明的目的和其他优点可通过在所写的说明书、权利要求书、以及附图中所特别指出的结构来实现和获得。
附图说明
附图用来提供对本发明的进一步理解,并且构成说明书的一部分,与本发明的实施例一起用于解释本发明,并不构成对本发明的限制。在附图中:
图1是内容管理系统在IPTV业务中的位置图;
图2是内容管理系统的示意结构图;
图3是根据本发明的异步并发处理方法的流程图;
图4是根据本发明实施例的内容上传过程的流程图;以及
图5是本发明中的内容状态的转移图。
具体实施方式
以下结合附图对本发明的优选实施例进行说明,应当理解,此处所描述的优选实施例仅用于说明和解释本发明,并不用于限定本发明。
由于在IPTV内容管理业务运作过程中的内容具有文件大、数量多,处理时间长、操作时间点较密集的特点,因此要求我们的内容管理系统(CMS)具有响应速度快,处理过程透明、处理时间短、不影响操作人员进行其它操作的特点。其中,响应速度快就是要让用户立刻看到自己的操作被计算机接收,处理过程透明就是要让用户能看到内容处理的具体步骤及完成情况,处理时间短就要采用多文件同时并发上传的方式,以及不影响操作人员进行其它操作说明要可以采用异步的途径。
图1是内容管理系统在IPTV业务中的位置图。如图1所示,IPTV系统主要由业务管理系统(SMS,由原运营支撑系统OSS和内容管理系统CMS融合而成)、电子节目单(EPG)、和内容分发网络(CDN)组成。
内容管理主要包括内容的上传、审核、发布、节目制作四个过程。图2是本发明中涉及到的内容管理系统特别是内容上传系统的结构图。如图2所示,主要包括Web网页(对应于浏览器),数据库模块、后台启动模块、后台控制模块、后台内容上传执行模块、后台内容加密请求执行模块和后台加密请求回应模块。
图3是根据本发明的异步并发处理方法的流程图。如图3所示,该方法包括以下步骤:
步骤S302,当用户在浏览器上输入有关文件的内容信息时,通过数据库模块将内容信息保存在数据库中;
步骤S304,当用户上传文件时,通过数据库模块将文件的内容的状态设为待后台处理状态,并在任务调度表中增加有关文件的上传任务标识;
步骤S306,当后台控制模块查询到任务调度表中存在有关文件的上传任务标识时,并启动后台内容上传执行模块;以及
步骤S308,如果当前的上传任务标识的数量不超过预定阈值时,后台内容上传执行模块上传文件,并删除上传任务标识。
在步骤S302之前,本方法还包括:启动浏览器服务器,同时启动后台启动模块和后台加密请求回应模块;以及通过后台启动模块来启动后台控制模块。
其中,上述内容信息包括:内容的描述信息和文件的位置。
在步骤S302中还执行以下处理:判断内容的类型;基于内容信息,数据库模块对内容进行分割;以及数据库模块将有关分割后的各个子内容的内容信息保存到数据库中。
在步骤S308中,当后台内容上传执行模块上传文件失败时,记录错误信息,并将内容的状态修改为待后台处理状态。
当对内容进行加密时,本发明还包括以下步骤:步骤a,将内容的状态修改为待加密状态并在任务调度表中增加加密任务标识;步骤b,当后台控制模块查询到加密任务标识时,通过加密服务器对文件进行加密,并向后台加密请求回应模块发送解析请求消息;步骤c,当后台加密请求回应模块接收到解析请求消息时,对加密后的文件进行解析;以及步骤d,当解析成功时,将加密后的文件上传到内容记录库中,并将内容的状态修改为上传成功状态以及删除加密任务标识。
在步骤b中,执行以下处理:后台控制模块查询到加密任务标识;后台控制模块启动加密请求执行模块;基于有关内容的消息,加密请求执行模块将文件上传给加密服务器;以及加密请求执行模块将内容的状态修改为加密正在处理状态。而当上传失败时,操作员通过错误信息来检查失败原因准备再次上传并返回步骤S306。
在本发明中,内容的类型至少包括视频点播、连续剧、卡拉OK、海报和片花。
图4是根据本发明实施例的内容上传过程的流程图。如图4所示,具体的处理过程如下:
步骤一、Web服务器启动时,启动后台启动模块、后台加密请求回应模块;
步骤二、后台启动模块启动后台控制模块;
步骤三、用户在Web网页上录入内容的描述信息及内容文件所在的物理位置,通过数据库模块保存到数据库中;
步骤四、如果录入内容是连续剧类型,保存时数据库模块根据在步骤三中录入的内容,自动生成多条单集的记录写入数据库;
步骤五、完成步骤三和步骤四的操作后,内容的状态为0,表示待上传;
步骤六、通过Web网页查询内容,选择要上传的内容,点上传按纽进行上传操作,通过数据库模块,修改所选中的内容的状态为998,表示待后台模块处理,并向任务调度表中加入一条内容上传的任务;
步骤七、每隔10秒钟,后台控制模块查询任务调度表,如果有内容上传类型的任务,则创建并启动后台内容上传执行模块;
步骤八、后台内容上传执行模块查询状态为998的内容,如果有此种状态的内容,且当前模块总数不超过最大值,则创建一个后台内容上传执行模块,否则什么都不做;
步骤九、后台内容上传执行模块将状态为998的内容的状态改为999,表示后台内容上传执行模块正在上传当前内容;
步骤十、后台内容上传执行模块执行内容上传操作,将文件FTP上传到片库,如果失败,则状态改为-1,记录错误信息,并将当前模块数减1;
步骤十一、如果文件FTP上传成功且内容不需要加密,将当前内容的状态改为1,并将当前模块数减1,若内容需要加密,则将内容的状态改为98表示内容待加密,并且向上传任务表中加入一条加密请求的任务,并携带内容代码;
步骤十二、后台控制模块查询任务表,发现有加密类型的任务,则创建并启动加密请求执行模块;
步骤十三、加密请求执行模块,根据任务表中的内容ID,将文件FTP上传到加密服务器上,并修改此内容的状态为99,表示加密正在处理;
步骤十四、加密服务器进行加密,加密结束后,给SMS的后台加密请求回应模块,发送消息;
步骤十五、后台加密请求回应模块接收加密服务器的消息并解析,如果成功,则再将加密服务器上加密后的文件FTP上传到片库上,并修改内容的状态为1,表示上传成功,否则改为-1表示上传失败,并将当前模块数减1;以及
步骤十六、对于上传失败的内容,操作员根据Web网页上的错误提示,检查原因,修正后,可以再次上传,重复步骤六。
在上述操作过程中,用户可以通过页面刷新,可以跟踪内容的处理状态,从而了解内容的处理当前状态及进度。
图5是本发明中的内容状态的转移图。如图5所示,当内容的描述信息填写完毕后,内容的状态为0等待上传。当用户在WEB上点上传按钮后,状态变成web上传998。当后台控制模块扫描到上传任务后,启动后台上传执行模块,将内容的状态改为999正在上传,如果内容不需要加密,直接将状态改为1成功,如果需要加密,则后台上传执行模块将内容状态改为98等待加密,并将内容FTP到加密服务器后将加密状态改为99正在加密。ftp加密服务器加密内容如果加密成功则加密回应模块将状态改为1成功,否则改为-1失败。失败的内容可以再次重新上传。
综上所述,通过本发明的方法,用户可以立刻看到自己的操作被计算机接收并能看到内容处理的具体步骤及完成情况,同时采用多文件同时并发上传的方式,不影响操作人员进行其它操作。
以上仅为本发明的优选实施例而已,并不用于限制本发明,对于本领域的技术人员来说,本发明可以有各种更改和变化。凡在本发明的精神和原则之内,所作的任何修改、等同替换、改进等,均应包含在本发明的保护范围之内。

Claims (9)

1.一种异步并发处理方法,用于通过内容管理系统来批量完成文件的内容的上传,其特征在于,包括以下步骤:
步骤一,当用户在浏览器上输入有关所述文件的内容信息时,通过数据库模块将所述内容信息保存在数据库中;
步骤二,当用户上传所述文件时,通过所述数据库模块将所述文件的内容的状态设为待后台处理状态,并在任务调度表中增加有关所述文件的上传任务标识;
步骤三,当后台控制模块查询到所述任务调度表中存在有关所述文件的上传任务标识时,并启动后台内容上传执行模块;以及
步骤四,如果当前的上传任务标识的数量不超过预定阈值时,所述后台内容上传执行模块上传所述文件,并删除所述上传任务标识。
2.根据权利要求1所述的方法,其特征在于,在所述步骤一之前,还包括:
启动浏览器服务器,同时启动后台启动模块和后台加密请求回应模块;以及
通过所述后台启动模块来启动所述后台控制模块。
3.根据权利要求1所述的方法,其特征在于,所述内容信息包括:所述内容的描述信息和所述文件的位置。
4.根据权利要求1所述的方法,其特征在于,在所述步骤一中还执行以下处理:
判断所述内容的类型;
基于所述内容信息,所述数据库模块对所述内容进行分割;以及
所述数据库模块将有关分割后的各个子内容的内容信息保存到所述数据库中。
5.根据权利要求1所述的方法,其特征在于,在所述步骤四中,当所述后台内容上传执行模块上传所述文件失败时,记录所述错误信息,并将所述内容的状态修改为所述待后台处理状态。
6.根据权利要求1所述的方法,其特征在于,在所述步骤四之后,还包括以下步骤:
步骤a,将所述内容的状态修改为待加密状态并在所述任务调度表中增加加密任务标识;
步骤b,当所述后台控制模块查询到所述加密任务标识时,通过加密服务器对所述文件进行加密,并向所述后台加密请求回应模块发送解析请求消息;
步骤c,当所述后台加密请求回应模块接收到所述解析请求消息时,对加密后的所述文件进行解析;以及
步骤d,当解析成功时,将加密后的所述文件上传到内容记录库中,并将所述内容的状态修改为上传成功状态以及删除所述加密任务标识。
7.根据权利要求6所述的方法,其特征在于,在所述步骤b中,执行以下处理:
所述后台控制模块查询到所述加密任务标识;
所述后台控制模块启动加密请求执行模块;
基于有关所述内容的消息,所述加密请求执行模块将所述文件上传给所述加密服务器;以及
所述加密请求执行模块将所述内容的状态修改为加密正在处理状态。
8.根据权利要求6所述的方法,其特征在于,在所述步骤d中还执行以下处理:
当所述上传失败时,操作员通过所述错误信息来检查失败原因准备再次上传并返回所述步骤三。
9.根据权利要求1所述的方法,其特征在于,所述内容的类型至少包括视频点播、连续剧、卡拉OK、海报和片花。
CN2007101871160A 2007-11-14 2007-11-14 异步并发处理方法 Expired - Fee Related CN101170507B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN2007101871160A CN101170507B (zh) 2007-11-14 2007-11-14 异步并发处理方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN2007101871160A CN101170507B (zh) 2007-11-14 2007-11-14 异步并发处理方法

Publications (2)

Publication Number Publication Date
CN101170507A CN101170507A (zh) 2008-04-30
CN101170507B true CN101170507B (zh) 2010-09-29

Family

ID=39390980

Family Applications (1)

Application Number Title Priority Date Filing Date
CN2007101871160A Expired - Fee Related CN101170507B (zh) 2007-11-14 2007-11-14 异步并发处理方法

Country Status (1)

Country Link
CN (1) CN101170507B (zh)

Families Citing this family (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR101145385B1 (ko) 2010-05-31 2012-05-15 (주)이앤비소프트 단축 명령을 통한 데이터 업로드 방법
CN103475733A (zh) * 2013-09-24 2013-12-25 上海斐讯数据通信技术有限公司 基于web 的文件上传方法及系统
CN104954433A (zh) * 2015-04-28 2015-09-30 成都品果科技有限公司 一种用于移动设备的图片数据上传方法
CN105577800B (zh) * 2016-02-17 2018-10-12 亿阳安全技术有限公司 一种上传文件时的异步提醒装置及方法
CN107666494B (zh) * 2016-07-27 2020-10-16 阿里巴巴(中国)有限公司 数据上传方法和装置以及便携式终端设备
CN106788970A (zh) * 2016-12-12 2017-05-31 暴风集团股份有限公司 对视频进行隐私保护的方法和系统
CN107172139B (zh) * 2017-05-10 2020-07-17 桃芯科技(苏州)有限公司 一种无线协议栈及其实现方法
CN109446179A (zh) * 2018-09-30 2019-03-08 天津天地伟业电子工业制造有限公司 一种基于Memory方式建立SQLITE数据库实现多业务并发的方法
CN109361757B (zh) * 2018-11-09 2022-02-25 网宿科技股份有限公司 一种数据传输方法、装置及计算机可读存储介质
CN110222016B (zh) * 2019-05-20 2023-08-22 平安银行股份有限公司 一种文件处理方法及装置

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN1458800A (zh) * 2002-05-14 2003-11-26 华为技术有限公司 移动通信系统中移动台接入网络的方法
WO2004092980A1 (en) * 2003-04-17 2004-10-28 Nokia Corporation File upload using a browser
WO2005091161A1 (en) * 2004-03-22 2005-09-29 Nitgen Technologies Inc. A streaming based contents distribution network system and methods for splitting, merging and retrieving files
CN1953542A (zh) * 2006-11-03 2007-04-25 张帆 网络视频传输系统及其处理方法

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN1458800A (zh) * 2002-05-14 2003-11-26 华为技术有限公司 移动通信系统中移动台接入网络的方法
WO2004092980A1 (en) * 2003-04-17 2004-10-28 Nokia Corporation File upload using a browser
WO2005091161A1 (en) * 2004-03-22 2005-09-29 Nitgen Technologies Inc. A streaming based contents distribution network system and methods for splitting, merging and retrieving files
CN1953542A (zh) * 2006-11-03 2007-04-25 张帆 网络视频传输系统及其处理方法

Also Published As

Publication number Publication date
CN101170507A (zh) 2008-04-30

Similar Documents

Publication Publication Date Title
CN101170507B (zh) 异步并发处理方法
CN111475757B (zh) 页面更新方法和装置
CN102819531B (zh) 一种云阅读服务系统、云阅读服务方法和装置
CN108133008B (zh) 数据库中业务数据的处理方法、装置、设备和存储介质
KR101618879B1 (ko) 사용자 장치를 통한 아이템들의 소비
US8997041B2 (en) Method of managing script, server performing the same and storage media storing the same
US20150237113A1 (en) Method and system for file transmission
CN108563958B (zh) 角色权限更新方法、装置、计算机设备和存储介质
CN101179519B (zh) 一种自定义群组标签的方法及系统
CN110399425B (zh) 一种智能网盘微服务系统
US20160330208A1 (en) Method and apparatus for implementing document sharing between user groups
US8874521B2 (en) Management of multimedia content
JP2009524889A (ja) 複数クライアントの検索方法およびシステム
US20120260096A1 (en) Method and system for monitoring a secure document
CN105677904B (zh) 基于分布式文件系统的小文件存储方法及装置
US20170078361A1 (en) Method and System for Collecting Digital Media Data and Metadata and Audience Data
CN104881466A (zh) 数据分片的处理以及垃圾文件的删除方法和装置
US20090178124A1 (en) Remote device communication platform
KR20130075546A (ko) 파일 클라우드 서비스 장치 및 방법
WO2014176679A1 (en) Method and system for processing data files using distributed services
CN113064562A (zh) 基于区块链的人机交互打印方法及打印系统
CN113934911B (zh) 一种文件爬取与搜索方法及系统
KR101525984B1 (ko) 파일 이름을 규칙에 따라 설정하는 문서 관리 장치 및 방법
US7299412B1 (en) Methods and apparatuses for publication of unconsciously captured documents
TWI723622B (zh) 能夠安全地存取及刪除資料的資料管理方法及系統

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
C14 Grant of patent or utility model
GR01 Patent grant
ASS Succession or assignment of patent right

Owner name: STATE GRID CORPORATION OF CHINA

Free format text: FORMER OWNER: ZTE CORPORATION

Effective date: 20141231

Owner name: STATE GRID ZHEJIANG ELECTRIC POWER COMPANY SHAOXIN

Effective date: 20141231

C41 Transfer of patent application or patent right or utility model
C53 Correction of patent for invention or patent application
CB03 Change of inventor or designer information

Inventor after: Zhang Hongda

Inventor after: Lou Liangming

Inventor after: Huang Jianyang

Inventor after: Xu Jin

Inventor after: Yu Hangke

Inventor after: Jiang Yucheng

Inventor after: Zhou Hui

Inventor after: Fu Guang

Inventor before: Fu Guang

COR Change of bibliographic data

Free format text: CORRECT: INVENTOR; FROM: FU GUANG TO: ZHANG HONGDA LOU LIANGMING HUANG JIANYANG XU JIN YU HANGKE JIANG YUCHENG ZHOU HUI FU GUANG

Free format text: CORRECT: ADDRESS; FROM: 518057 SHENZHEN, GUANGDONG PROVINCE TO: 100031 XICHENG, BEIJING

TR01 Transfer of patent right

Effective date of registration: 20141231

Address after: 100031 Xicheng District West Chang'an Avenue, No. 86, Beijing

Patentee after: State Grid Corporation of China

Patentee after: State Grid Zhejiang Electric Power Company

Patentee after: Shaoxing Power Supply Company of State Grid Zhejiang Electric Power Company

Patentee after: State Grid Zhejiang Zhuji Power Supply Co., Ltd.

Patentee after: Zhuji Dongbai Electric Power Equipment Manufacturing Co., Ltd.

Address before: 518057 Nanshan District science and Technology Industrial Park, Guangdong high tech Industrial Park, ZTE building

Patentee before: ZTE Corporation

CF01 Termination of patent right due to non-payment of annual fee

Granted publication date: 20100929

Termination date: 20171114

CF01 Termination of patent right due to non-payment of annual fee