CN109889856A - 一种基于人工智能的直播剪辑系统 - Google Patents
一种基于人工智能的直播剪辑系统 Download PDFInfo
- Publication number
- CN109889856A CN109889856A CN201910052831.6A CN201910052831A CN109889856A CN 109889856 A CN109889856 A CN 109889856A CN 201910052831 A CN201910052831 A CN 201910052831A CN 109889856 A CN109889856 A CN 109889856A
- Authority
- CN
- China
- Prior art keywords
- live streaming
- video
- live
- editing
- artificial intelligence
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
- 238000013473 artificial intelligence Methods 0.000 title claims abstract description 12
- 238000000034 method Methods 0.000 claims abstract description 9
- 238000012544 monitoring process Methods 0.000 claims description 3
- 238000007689 inspection Methods 0.000 claims 1
- 230000000977 initiatory effect Effects 0.000 abstract 1
- 238000000605 extraction Methods 0.000 description 2
- 238000006243 chemical reaction Methods 0.000 description 1
- 238000010586 diagram Methods 0.000 description 1
- 239000012634 fragment Substances 0.000 description 1
- 238000005498 polishing Methods 0.000 description 1
- 230000009885 systemic effect Effects 0.000 description 1
Landscapes
- Information Retrieval, Db Structures And Fs Structures Therefor (AREA)
- Television Signal Processing For Recording (AREA)
Abstract
本发明公开了一种基于人工智能的直播剪辑系统。该系统由直播系统(直播盒、摄像机、摄像头、照相机、服务器等)和智能剪辑系统组成。用户借助直播系统采集视频流，发起直播后，由智能剪辑系统监听画面，通过人工智能算法，实时识别画面中的主要人物，将同一个人物的视频自动剪裁为视频片段，存入相应的精彩集锦。通过应用本系统的直播剪辑系统及其方法，可简化直播会议以及培训视频的手工裁剪工作，还能消除人工剪裁导致的视频长度的误差。同时该系统能够实时生成视频片段，便于主办方在会议、培训过程中的快速整理和分发。该系统因便捷和智能的特点，可为企业会议管理、企业培训以及其他商业营销带来全新的体验。
Description
技术领域
本发明涉及通信领域，具体说，涉及一种基于人工智能的直播剪辑系统。
背景技术
随着移动4G网络的普及和“互联网+”理念的提出，移动流媒体应用，进来越来越受到行业和个人用户的青睐。特别对于行业用户来说，针对行业内培训和会议直播为他们节省了经费，提高了效率，他们有大量的此类需求。但是目前的针对行业内培训和会议直播的服务器，大多关注在直播过程中的观看体验，对培训内容的提炼和会议结束后的关注度不够。用户往往需要在直播结束后手动将历史视频进行裁剪，去除无实质内容的视频片段，同时通过手动方式将不同的演讲人或培训人剪辑为不同片段，重新上传到平台。用户需要在上传成功后，再次将相应的片段分发给其他需要的观看者。用户在手工裁剪视频时，往往存在耗时费力，需要来回重复观看历史视频，手工记录需要裁剪的时间段，然后通过本地的视频剪辑工具剪出片段。然后再通过平台提供的上传功能上传到网络。上传成功后，用户还需要再次全文观看并确定没有问题。如果有问题，用户还需要再次重复以上过程。如能实现一种基于人工智能的解决方案，在实时的行业内培训和会议直播中利用人工智能处理能力实时完成视频剪辑处理工作，将会大大降低用户处理工作强度，同时不需要上传和下载，节约用户的时间和带宽，从而显著提升用户体验。
发明内容
本发明要解决的技术问题是，在行业内培训和会议直播中，使直播系统能够：1、实时监视直播画面和声音；2、通过对直播实时画面和音频进行处理，抽取其中主要人物特征并进行识别；3、智能直播剪辑系统识别到的人物和现有数据库进行匹配；4、根据匹配结果，智能直播剪辑系统判断视频中主要人物所在的视频片段，并根据人物出现的占比和时长，和事先约定的值进行比较，判断视频片段是否是可用完整片段；5、如果是可用完整片段，系统通过在线剪辑系统将视频剪辑出来，并放入摘要精彩视频列表，系统通知用户有新的视频片段，用户检查生成摘要精彩片段，并对标题进行润色，然后根据业务需要将视频分发给相应人员。
为解决上述问题，本发明提出了一种基于人工智能的直播剪辑系统，其特征在于：一是监听直播中的音视频数据，通过人工智能系统实时地从画面和声音中识别主要人物特征；二、根据识别的人物特征，向数据库中匹配人物，根据人物在视频中的所占比例以及转换和时长来决定视频的剪辑要求；三、根据剪辑要求，由系统在线自动生成视频片段，并通知用户，用户可以将剪辑的视频分发给相应观看者。所述智能直播摘要生成步骤包括：
步骤110，在建立直播会话后，系统将智能分析系统接入直播，监听系统在不影响直播会话的情况下能够获取直播中的图像和声音信号；
步骤120，智能分析系统获取到图像和声音数据后，对图像和声音进行解码，将编码后的数据解码为单幅原始图像和定长声音；
步骤130，智能分析系统对单幅原始图像和定长声音数据中的主要人物通过人工智能方式进行特征抽取；
步骤140，智能分析系统将抽取的特征和数据库中的数据进行比对，并试图找到相关人物；
步骤150，如果未能匹配到人物信息，将该特征作为新人物存入数据库中，并为其建立档案；
步骤160，如果匹配到人员信息，将该人物信息和之前的人员信息进行比较，并记录该人物的时长和占比；
步骤170，根据系统预设的数值，如果智能分析系统判断当前信息表明该人物的时间段已经结束，判断该段人物视频特征是否满足作为视频剪辑片段的要求；
步骤180，如果该段人物视频满足作为摘要视频剪辑片段的要求，智能分析系统通知在线剪辑系统将该段视频裁剪出来作为精彩视频片段添加到摘要精彩视频列表中，并通知用户；
步骤190，用户收到通知后，可以检查该精彩视频片段是否符合要求，可做适当润色，并根据需要将视频片段分发给相关人员。
附图说明
图1是本发明实例方法的工作过程示意图
图2是本发明实例方法的视频片段判定流程。
Claims (1)
1.一种基于人工智能的直播摘要生成系统的方法，其特征在于，所述方法包括: 智能直播系统监听直播中的图像和语音信息，通过人工智能方法识别图像和语音信息中的主要人物，并根据识别的人物信息和所占长度，将同一个人物的视频剪裁为视频片段，并将此视频片段添加到摘要精彩视频列表中，用户可以将此摘要精彩视频片段再次分发给相关人员；
生成直播摘要系统的具体步骤包括: 用户通过智能直播设备启动直播，直播摘要生成系统的人工智能识别系统通过监听直播中的图片和语音信息，识别直播中的人员信息；直播摘要生成系统通过直播人员的出现时间和时长，通过自动剪辑系统生成视频片段；系统将剪辑完成的视频片段通过人员和相关的信息进行分类，并放入直播的摘要精彩剪辑列表中；主办方通过实时查看直播的摘要精彩剪辑列表，并将相应的视频列表链接通过社交软件分享给相关的人员；
相关人员在收到分享的视频列表链接，可以通过包括但不限于以下浏览器：PC、手机浏览器，平板浏览器打开链接，并可选择视频进行播放观看。
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN201910052831.6A CN109889856A (zh) | 2019-01-21 | 2019-01-21 | 一种基于人工智能的直播剪辑系统 |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN201910052831.6A CN109889856A (zh) | 2019-01-21 | 2019-01-21 | 一种基于人工智能的直播剪辑系统 |
Publications (1)
| Publication Number | Publication Date |
|---|---|
| CN109889856A true CN109889856A (zh) | 2019-06-14 |
Family
ID=66926371
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| CN201910052831.6A Pending CN109889856A (zh) | 2019-01-21 | 2019-01-21 | 一种基于人工智能的直播剪辑系统 |
Country Status (1)
| Country | Link |
|---|---|
| CN (1) | CN109889856A (zh) |
Cited By (5)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN111447505A (zh) * | 2020-03-09 | 2020-07-24 | 咪咕文化科技有限公司 | 视频剪辑方法、网络设备及计算机可读存储介质 |
| CN111800648A (zh) * | 2020-06-30 | 2020-10-20 | 北京玩在一起科技有限公司 | 一种电竞赛事直播流剪辑方法及系统 |
| CN113329259A (zh) * | 2021-05-27 | 2021-08-31 | 瑞芯微电子股份有限公司 | 一种基于连续兴趣点的视频剪辑方法及存储介质 |
| CN114268831A (zh) * | 2021-11-30 | 2022-04-01 | 乐美科技股份私人有限公司 | 一种视频剪辑方法及装置 |
| CN114584678A (zh) * | 2020-11-30 | 2022-06-03 | 北京市商汤科技开发有限公司 | 增强现实ar呈现方法、装置、电子设备及存储介质 |
Citations (5)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| US20140267749A1 (en) * | 2013-03-15 | 2014-09-18 | Xumanii | System, method and device for live stream editing |
| CN104796781A (zh) * | 2015-03-31 | 2015-07-22 | 小米科技有限责任公司 | 视频片段提取方法及装置 |
| US20170230719A1 (en) * | 2013-08-08 | 2017-08-10 | Nbcuniversal Media, Llc | Method and system for sourcing and editing live video |
| CN108540854A (zh) * | 2018-03-29 | 2018-09-14 | 努比亚技术有限公司 | 直播视频剪辑方法、终端及计算机可读存储介质 |
| CN109194978A (zh) * | 2018-10-15 | 2019-01-11 | 广州虎牙信息科技有限公司 | 直播视频剪辑方法、装置和电子设备 |
-
2019
- 2019-01-21 CN CN201910052831.6A patent/CN109889856A/zh active Pending
Patent Citations (5)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| US20140267749A1 (en) * | 2013-03-15 | 2014-09-18 | Xumanii | System, method and device for live stream editing |
| US20170230719A1 (en) * | 2013-08-08 | 2017-08-10 | Nbcuniversal Media, Llc | Method and system for sourcing and editing live video |
| CN104796781A (zh) * | 2015-03-31 | 2015-07-22 | 小米科技有限责任公司 | 视频片段提取方法及装置 |
| CN108540854A (zh) * | 2018-03-29 | 2018-09-14 | 努比亚技术有限公司 | 直播视频剪辑方法、终端及计算机可读存储介质 |
| CN109194978A (zh) * | 2018-10-15 | 2019-01-11 | 广州虎牙信息科技有限公司 | 直播视频剪辑方法、装置和电子设备 |
Cited By (7)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN111447505A (zh) * | 2020-03-09 | 2020-07-24 | 咪咕文化科技有限公司 | 视频剪辑方法、网络设备及计算机可读存储介质 |
| CN111800648A (zh) * | 2020-06-30 | 2020-10-20 | 北京玩在一起科技有限公司 | 一种电竞赛事直播流剪辑方法及系统 |
| CN114584678A (zh) * | 2020-11-30 | 2022-06-03 | 北京市商汤科技开发有限公司 | 增强现实ar呈现方法、装置、电子设备及存储介质 |
| CN113329259A (zh) * | 2021-05-27 | 2021-08-31 | 瑞芯微电子股份有限公司 | 一种基于连续兴趣点的视频剪辑方法及存储介质 |
| CN113329259B (zh) * | 2021-05-27 | 2022-08-12 | 瑞芯微电子股份有限公司 | 一种基于连续兴趣点的视频剪辑方法及存储介质 |
| CN114268831A (zh) * | 2021-11-30 | 2022-04-01 | 乐美科技股份私人有限公司 | 一种视频剪辑方法及装置 |
| CN114268831B (zh) * | 2021-11-30 | 2024-05-24 | 璀璨木星私人有限公司 | 一种视频剪辑方法及装置 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| CN109889856A (zh) | 一种基于人工智能的直播剪辑系统 | |
| CN109286825B (zh) | 用于处理视频的方法和装置 | |
| CN106303658A (zh) | 应用于视频直播的交互方法和装置 | |
| US20140219635A1 (en) | System and method for distributed and parallel video editing, tagging and indexing | |
| CN113641859B (zh) | 脚本生成方法、系统、计算机存储介质及计算机程序产品 | |
| Bampis et al. | Towards perceptually optimized adaptive video streaming-a realistic quality of experience database | |
| CN102368746A (zh) | 图片信息推送方法及装置 | |
| CN104463423A (zh) | 一种格式化的视频简历采集方法及系统 | |
| US11170336B2 (en) | Systems and methods supervisor whisper coaching priority recommendation engine for contact centers | |
| CN104135678A (zh) | 一种基于hls协议实现视频点播中视频广告投放的方法 | |
| CN113038185B (zh) | 弹幕处理方法及装置 | |
| CN104539678B (zh) | 一种信息推送、接收方法和装置 | |
| US20200364724A1 (en) | Systems and methods for automated whisper coaching | |
| US20050273840A1 (en) | Method and system for the automatic collection and transmission of closed caption text | |
| CN103401854A (zh) | 基于社交网络的电视内容分享方法 | |
| US7009657B2 (en) | Method and system for the automatic collection and conditioning of closed caption text originating from multiple geographic locations | |
| CN113660526B (zh) | 脚本生成方法、系统、计算机存储介质及计算机程序产品 | |
| CN109862375B (zh) | 云录播系统 | |
| CN110336959A (zh) | 一种原创视频自动化处理方法 | |
| US7268823B2 (en) | Method and system for the automatic collection and conditioning of closed caption text originating from multiple geographic locations, and resulting databases produced thereby | |
| CN104780389B (zh) | 一种视频处理方法及装置 | |
| US11934432B2 (en) | Systems and methods for dynamic labeling of real-time communication sessions | |
| CN115357772A (zh) | 数据处理方法及装置 | |
| CN108989905A (zh) | 媒体流控制方法、装置、计算设备及存储介质 | |
| CN114363103B (zh) | 一种处理会议信息的方法、装置及计算机可读介质 |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| PB01 | Publication | ||
| PB01 | Publication | ||
| SE01 | Entry into force of request for substantive examination | ||
| SE01 | Entry into force of request for substantive examination | ||
| CB03 | Change of inventor or designer information | ||
| CB03 | Change of inventor or designer information |
Inventor after: Li Deng Inventor after: Chen Bing Inventor before: Chen Bing Inventor before: Zang Lan Inventor before: Li Deng |
|
| TA01 | Transfer of patent application right | ||
| TA01 | Transfer of patent application right |
Effective date of registration: 20210423 Address after: Room 1009, Huizhi Building, Area A, 28 Ningshuang Road, Yuhuatai District, Nanjing City, Jiangsu Province, 210012 Applicant after: Li Deng Address before: Room 1009, Huizhi Building, Area A, 28 Ningshuang Road, Yuhuatai District, Nanjing City, Jiangsu Province, 210012 Applicant before: NANJING VTC NETWORK TECHNOLOGY Co.,Ltd. |
|
| RJ01 | Rejection of invention patent application after publication | ||
| RJ01 | Rejection of invention patent application after publication |
Application publication date: 20190614 |