CN113949834B - 一种视频展示方法、装置、电子设备及存储介质 - Google Patents

一种视频展示方法、装置、电子设备及存储介质 Download PDF

Info

Publication number
CN113949834B
CN113949834B CN202111022106.8A CN202111022106A CN113949834B CN 113949834 B CN113949834 B CN 113949834B CN 202111022106 A CN202111022106 A CN 202111022106A CN 113949834 B CN113949834 B CN 113949834B
Authority
CN
China
Prior art keywords
user
video
appeal
data
user video
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN202111022106.8A
Other languages
English (en)
Other versions
CN113949834A (zh
Inventor
杨健达
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Beijing New Oxygen World Wide Technology Consulting Co ltd
Original Assignee
Beijing New Oxygen World Wide Technology Consulting Co ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Beijing New Oxygen World Wide Technology Consulting Co ltd filed Critical Beijing New Oxygen World Wide Technology Consulting Co ltd
Priority to CN202111022106.8A priority Critical patent/CN113949834B/zh
Publication of CN113949834A publication Critical patent/CN113949834A/zh
Application granted granted Critical
Publication of CN113949834B publication Critical patent/CN113949834B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00Television systems
    • H04N7/14Systems for two-way working
    • H04N7/141Systems for two-way working between two video terminals, e.g. videophone
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F40/00Handling natural language data
    • G06F40/30Semantic analysis
    • GPHYSICS
    • G10MUSICAL INSTRUMENTS; ACOUSTICS
    • G10LSPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
    • G10L15/00Speech recognition
    • G10L15/08Speech classification or search
    • G10L15/18Speech classification or search using natural language modelling
    • G10L15/1822Parsing for meaning understanding
    • GPHYSICS
    • G10MUSICAL INSTRUMENTS; ACOUSTICS
    • G10LSPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
    • G10L15/00Speech recognition
    • G10L15/22Procedures used during a speech recognition process, e.g. man-machine dialogue
    • GPHYSICS
    • G10MUSICAL INSTRUMENTS; ACOUSTICS
    • G10LSPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
    • G10L15/00Speech recognition
    • G10L15/26Speech to text systems
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/431Generation of visual interfaces for content selection or interaction; Content or additional data rendering
    • H04N21/4312Generation of visual interfaces for content selection or interaction; Content or additional data rendering involving specific graphical features, e.g. screen layout, special fonts or colors, blinking icons, highlights or animations
    • H04N21/4316Generation of visual interfaces for content selection or interaction; Content or additional data rendering involving specific graphical features, e.g. screen layout, special fonts or colors, blinking icons, highlights or animations for displaying supplemental content in a region of the screen, e.g. an advertisement in a separate window
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/439Processing of audio elementary streams
    • H04N21/4398Processing of audio elementary streams involving reformatting operations of audio signals
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/44Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs
    • H04N21/4402Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs involving reformatting operations of video signals for household redistribution, storage or real-time display
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/47End-user applications
    • H04N21/478Supplemental services, e.g. displaying phone caller identification, shopping application
    • H04N21/4788Supplemental services, e.g. displaying phone caller identification, shopping application communicating with other users, e.g. chatting

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Computational Linguistics (AREA)
  • Physics & Mathematics (AREA)
  • Audiology, Speech & Language Pathology (AREA)
  • Health & Medical Sciences (AREA)
  • Acoustics & Sound (AREA)
  • Human Computer Interaction (AREA)
  • Artificial Intelligence (AREA)
  • General Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Marketing (AREA)
  • Business, Economics & Management (AREA)
  • General Health & Medical Sciences (AREA)
  • General Physics & Mathematics (AREA)
  • Management, Administration, Business Operations System, And Electronic Commerce (AREA)
  • User Interface Of Digital Computer (AREA)

Abstract

本发明公开了一种视频展示方法、装置、电子设备及存储介质,方法包括:在用户与咨询师视频沟通变美诉求过程中,获取用户终端和咨询终端上传的沟通数据,并从沟通数据中分析提取诉求数据;按照诉求数据对当前的用户视频进行处理,获得处理后的用户视频;将处理后的用户视频与当前采集的用户视频流进行分屏对比展示,以使用户对比诉求前和诉求后的效果。通过分析用户与咨询师之间的沟通数据,实时获知用户的诉求数据,并按照诉求数据对用户视频进行处理,从而将处理后的用户视频与实时的用户视频在一个屏幕中分屏展示,实现实时线上的变美诉求方案,让用户能够真实体验到现在与变美后的效果对比,提高了用户使用体验。

Description

一种视频展示方法、装置、电子设备及存储介质
技术领域
本发明涉及计算机技术领域,具体涉及一种视频展示方法、装置、电子设备及存储介质。
背景技术
不管是在真实的社交场合,还是在虚拟的网络社交世界中,爱美之心人皆有之。现有技术中有一些美容工具可以提供一些预设的美颜模板,例如瘦脸、磨皮、美白等美颜模板来满足人在虚拟世界中对美的需求。
然而,在一些应用场景中涉及到视频沟通过程中交流变美诉求,却无法实时查看变美效果,例如在医美场景中用户与咨询师视频交流变美诉求方案,用户无法实时体验变美效果,只能通过线下进行方案实施以体验变美效果,这样给用户带来不好的体验,并且也会带来一定体验风险。
发明内容
本发明的目的是针对上述现有技术的不足提出的一种视频展示方法、装置、电子设备及存储介质,该目的是通过以下技术方案实现的。
本发明的第一方面提出了一种视频展示方法,所述方法包括:
获取用户终端和咨询终端上传的沟通数据,并从所述沟通数据中分析提取诉求数据;
按照所述诉求数据对当前采集的用户视频进行处理,以获得处理后的用户视频;
将处理后的用户视频与当前采集的用户视频流进行分屏对比展示,以使用户对比诉求前和诉求后的效果。
在本申请的一些实施例中,所述从所述沟通数据中分析提取诉求数据,包括:
对所述沟通数据进行分词处理,得到分词结果;将所述分词结果中的每一分词与预设模型库进行匹配对比,以从所述预设模型库中提取匹配成功的目标关键词;对所述分词结果进行意图分析,以获得所述目标关键词的意图;将所述目标关键词和所述目标关键词的意图作为诉求数据。
在本申请的一些实施例中,所述对所述分词结果进行意图分析,以获得所述目标关键词的意图,包括:
在所述分词结果中定位与所述目标关键词匹配的分词的位置;对位于所述位置周围的分词进行意图分析,以获得所述目标关键词的意图。
在本申请的一些实施例中,所述按照所述诉求数据对当前采集的用户视频进行处理,以获得处理后的用户视频,包括:
针对所述用户视频中的每帧图像,将所述图像拆分为面部图像层和背景图像层,并按照所述诉求数据对所述面部图像层进行重绘,得到新的面部图像层,并将新的面部图像层与所述背景图像层合成为新的图像;将多帧新的图像合成视频数据作为处理后的用户视频。
在本申请的一些实施例中,所述按照所述诉求数据对所述面部图像层进行重绘,得到新的面部图像层,包括:
在所述面部图像层中定位所述目标关键词所指示的部位区域;根据所述目标关键词的意图对所述部位区域进行重新绘制,以获得新的面部图像层。
在本申请的一些实施例中,所述将处理后的用户视频与当前采集的用户视频流进行分屏对比展示,包括:
将处理后的用户视频分别回传至所述用户终端和所述咨询终端,以使所述用户终端和所述咨询终端将处理后的用户视频与当前采集的用户视频流进行分屏对比展示。
在本申请的一些实施例中,在按照所述诉求数据对当前采集的用户视频进行处理之后,所述方法还包括:
生成一个直播ID,将处理后的用户视频、当前采集的用户视频与生成的直播ID对应存储,并将所述直播ID推荐给其他用户终端;当接收到其他用户终端针对所述直播ID的视频请求时,将所述直播ID对应存储的处理后的用户视频、当前采集的用户视频发送至其他用户终端,以使其他用户终端将处理后的用户视频、当前采集的用户视频进行分屏对比展示。
本发明的第二方面提出了一种视频展示装置,所述装置包括:
分析提取模块,用于获取用户终端和咨询终端上传的沟通数据,并从所述沟通数据中分析提取诉求数据;
视频处理模块,用于按照所述诉求数据对当前采集的用户视频进行处理,以获得处理后的用户视频;
分屏展示模块,用于将处理后的用户视频与当前采集的用户视频流进行分屏对比展示,以使用户对比诉求前和诉求后的效果。
本发明的第三方面提出了一种电子设备,包括存储器、处理器及存储在存储器上并可在处理器上运行的计算机程序,所述处理器执行所述程序时实现如上述第一方面所述方法的步骤。
本发明的第四方面提出了一种计算机可读存储介质,其上存储有计算机程序,所述程序被处理器执行时实现如上述第一方面所述方法的步骤。
基于上述第一方面和第二方面所述的视频展示方法及装置,本发明至少具有如下有益效果或优点:
在用户与咨询师视频沟通过程中,通过分析用户与咨询师之间的沟通数据,实时获知用户的诉求数据,并按照诉求数据对视频沟通过程中产生的用户视频进行处理,从而将处理后的用户视频与实时产生的用户视频在一个屏幕中分屏展示,让用户能够对比诉求前和诉求后的效果。
当将本发明方案应用到医美场景中,用户与咨询师视频交流变美诉求过程中,用户可以在线上实时实现自己的变美诉求方案,能够真实体验到现在与变美后的效果对比,给用户带来比较好的使用体验。
附图说明
此处所说明的附图用来提供对本发明的进一步理解,构成本发明的一部分,本发明的示意性实施例及其说明用于解释本发明,并不构成对本发明的不当限定。在附图中:
图1为本发明根据一示例性实施例示出的一种视频展示方法的实施例流程图;
图2为本发明根据一示例性实施例示出的一种诉求数据分析提取流程示意图;
图3为本发明根据一示例性实施例示出的一种用户视频的处理流程示意图;
图4为本发明根据一示例性实施例示出的一种视频展示装置的结构示意图;
图5为本发明根据一示例性实施例示出的一种电子设备的硬件结构示意图图;
图6为本发明根据一示例性实施例示出的一种存储介质的结构示意图。
具体实施方式
这里将详细地对示例性实施例进行说明,其示例表示在附图中。下面的描述涉及附图时,除非另有表示,不同附图中的相同数字表示相同或相似的要素。以下示例性实施例中所描述的实施方式并不代表与本发明相一致的所有实施方式。相反,它们仅是与如所附权利要求书中所详述的、本发明的一些方面相一致的装置和方法的例子。
在本发明使用的术语是仅仅出于描述特定实施例的目的,而非旨在限制本发明。在本发明和所附权利要求书中所使用的单数形式的“一种”、“所述”和“该”也旨在包括多数形式,除非上下文清楚地表示其他含义。还应当理解,本文中使用的术语“和/或”是指并包含一个或多个相关联的列出项目的任何或所有可能组合。
应当理解,尽管在本发明可能采用术语第一、第二、第三等来描述各种信息,但这些信息不应限于这些术语。这些术语仅用来将同一类型的信息彼此区分开。例如,在不脱离本发明范围的情况下,第一信息也可以被称为第二信息,类似地,第二信息也可以被称为第一信息。取决于语境,如在此所使用的词语“如果”可以被解释成为“在……时”或“当……时”或“响应于确定”。
为了解决用户与咨询师视频交流变美诉求方案过程中无法实时体验变美效果的技术问题,本发明提出一种视频展示方法,即在用户与咨询师视频沟通诉求过程中,获取用户终端和咨询终端上传的沟通数据,并从所述沟通数据中分析提取诉求数据,然后按照诉求数据对当前采集的用户视频进行处理,以获得处理后的用户视频,并将处理后的用户视频与当前采集的用户视频流进行分屏对比展示,以使用户对比诉求前和诉求后的效果。
基于上述描述的技术方案可达到的技术效果有:
在用户与咨询师视频沟通过程中,通过分析用户与咨询师之间的沟通数据,实时获知用户的诉求数据,并按照诉求数据对视频沟通过程中产生的用户视频进行处理,从而将处理后的用户视频与实时产生的用户视频在一个屏幕中分屏展示,让用户能够对比诉求前和诉求后的效果。
当将本发明方案应用到医美场景中,用户与咨询师视频交流变美诉求过程中,用户可以在线上实时实现自己的变美诉求方案,能够真实体验到现在与变美后的效果对比,给用户带来比较好的使用体验。
为了使本领域技术人员更好的理解本申请方案,下面将结合本申请实施例中的附图,对本申请实施例中的技术方案进行清楚、完整地描述。
实施例一:
图1为本发明根据一示例性实施例示出的一种视频展示方法的实施例流程图,所述视频展示方法涉及的是用户与咨询师视频交流诉求过程中,提供的实时线上对比展示方案,让用户能够真实体验到诉求前与诉求后的效果对比。如图1所示,所述视频展示方法包括如下步骤:
步骤101:获取用户终端和咨询终端上传的沟通数据,并从沟通数据中分析提取诉求数据。
其中,用户与咨询师视频交流沟通过程中,用户终端和咨询终端上均展示有当前采集的用户视频流,并且用户与咨询师之间的沟通交流,不限于文字、语音、图片等,因此用户终端和咨询终端上传的沟通数据包括文字、语音等。
在具体实施时,为了便于从不同类型数据组成的沟通数据中分析提取诉求数据,可以将语音类型数据转换为文字类型数据,从而得到均是文字类型的沟通数据。
其中,对于语音类型数据,可以采用语音转译工具将语音转换为文字。
举例来说,用户用语音交流沟通做纹眉,用文字沟通要做双眼皮,对于做纹眉的语音和做双眼皮的文字内容均属于沟通数据。
在步骤101中,针对从沟通数据中分析提取诉求数据的具体实现,可以参见下述实施例的相关描述,本申请在此暂不详述。
步骤102:按照诉求数据对当前采集的用户视频进行处理,以获得处理后的用户视频。
其中,上述步骤101分析提取的诉求数据可以包括目标关键词和目标关键词的意图。
例如,用户与咨询师之间对话如下:
用户:我想把眉毛做一下,不喜欢现在的眉形;
咨询师:您想做哪个项目?想要什么样的眉形?
用户:做纹眉吧,换成那种柳叶眉形,把眉毛抬高1毫米。
从而,经过上述步骤101对对话过程中产生的沟通数据进行分析后,得到目标关键词为文眉,文眉的意图是柳叶眉形和抬高1毫米。
进一步地,当前采集的用户视频指的是从用户终端与咨询终端之间传输的实时视频流中截取出来的一段用户视频。
需要说明的是,针对按照诉求数据对用户视频进行处理的具体实现,可以参见下述实施例的相关描述,本申请在此暂不详述。
步骤103:将处理后的用户视频与当前采集的用户视频流进行分屏对比展示,以使用户对比诉求前和诉求后的效果。
在一可选的具体实施例中,通过将处理后的用户视频分别回传至用户终端和咨询终端,以使用户终端和咨询终端将处理后的用户视频与当前采集的用户视频流进行分屏对比展示,从而用户和咨询师都能够实时看到诉求前和诉求后的效果对比。
其中,分屏对比展示的具体实现是将用于播放当前采集的用户视频流的显示区域分割为两个显示区域,一个显示区域播放当前采集的用户视频流,另一个显示区域播放处理后的用户视频。
需要说明的是,在用户与咨询师实时视频过程中,采用上述步骤101至步骤103对视频过程中产生的用户视频进行处理需要消耗一定时间,因此用户终端和咨询终端显示的处理后的用户视频与实时直播的用户视频之间存在一定的延时。
需要进一步说明的是,还可以将处理后的用户视频在直播间或回放间进行展示,从而其他用户也能够看到直播视频与处理后视频的效果对比。
基于此,在按照诉求数据对当前采集的用户视频进行处理之后,生成一个直播ID,将处理后的用户视频、当前采集的用户视频与生成的直播ID对应存储,并将所述直播ID推荐给其他用户终端,当接收到其他用户终端针对所述直播ID的视频请求时,读取所述直播ID对应存储的处理后的用户视频、当前采集的用户视频发送至其他用户终端,以使其他用户终端将处理后的用户视频、当前采集的用户视频进行分屏对比展示。
其中,直播ID属于用户视频的唯一标识,通过该直播ID可以唯一读取到对应的用户视频播放。其他用户终端会将推荐来的直播ID添加到直播和回放数据列表中,当检测到用户的滑动切换操作时,获取本地当前播放视频的直播ID,并从直播和回放数据列表中提取位于该直播ID的下一个直播ID,从而发出针对下一个直播ID的视频请求。
进一步地,对于其他用户终端接收到的处理后的用户视频和当前采集的用户视频,如果当前请求的直播ID的视频直播仍在进行中,则在直播间分屏展示处理后的用户视频和当前采集的用户视频,如果当前请求的直播ID的视频直播已结束,则在回放间分屏展示处理后的用户视频和当前采集的用户视频,对于用户来说可以在直播间、回放间进行无限滑动切换。
至此,完成上述图1所示的视频展示流程,在用户与咨询师视频沟通过程中,通过分析用户与咨询师之间的沟通数据,实时获知用户的诉求数据,并按照诉求数据对视频沟通过程中产生的用户视频进行处理,从而将处理后的用户视频与实时产生的用户视频在一个屏幕中分屏展示,让用户能够对比诉求前和诉求后的效果。
当将本发明方案应用到医美场景中,用户与咨询师视频交流变美诉求过程中,用户可以在线上实时实现自己的变美诉求方案,能够真实体验到现在与变美后的效果对比,给用户带来比较好的使用体验。
实施例二:
图2为本发明根据一示例性实施例示出的一种诉求数据分析提取流程示意图,基于上述图1所示实施例的基础上,所述诉求数据分析提取流程包括如下步骤:
步骤201:对沟通数据进行分词处理,得到分词结果。
其中,由上述步骤101描述可知,用户与咨询师之间的沟通数据均被转换为文字类型数据,为了便于分析提取处理,可以采用分词工具将文字类型数据进行分词处理。
需要说明的是,可以去除分词结果中的停用词,以实现分词结果的过滤,因为停用词是一些高频、低价值的词语,对于分析提取不能提供有价值的信息。例如,“得”、“地”、“的”、“。”、“是”等在句子中经常使用,而又不能提供有价值的信息,属于停用词范畴。停用词的去除通常可以在开源的停用词表中进行查询去除,通过去除分词结果中的停用词可以提升匹配检索效率。
步骤202:将分词结果中的每一分词与预设模型库进行匹配对比,以从预设模型库中提取匹配成功的目标关键词。
其中,预设模型库中包含有与变美相关的关键词,并且每个关键词对应有英文、拼音、汉字等不同表示形式。例如,预设模型库中包含有双眼皮、纹眉、苹果肌、玻尿酸、开眼角等一些医美领域词语。
可选的,可以采用二分查找算法快速实现与预设模型库中关键词的匹配,减少匹配时间。
进一步地,在匹配过程中,如果分词结果中某分词与预设模型库中的一个关键词之间的相关性超过一定阈值,那么就确定匹配成功。值得注意的是,在沟通数据中可能有多个分词匹配到模型库中的同一个关键词,说明用户与咨询师之间围绕这一个关键词沟通了好几句话,因此可以将模型库模型库中的这个关键词作为目标关键词即可。
举例来说,假设预设模型库中包含有纹眉的关键词,对于“做\眉毛”或“眉形\抬高\1毫米”的分词结果中的一个分词“眉毛”或“眉形”与“纹眉”之间的相关性均会超过一定阈值,因此无论是“眉毛”还是“眉形”,均会与“纹眉”这个关键词匹配成功。
步骤203:对分词结果进行意图分析,以获得目标关键词的意图。
在一可选的具体实施例中,为了准确获得与目标关键词紧密关联的意图,可以通过在分词结果中定位与目标关键词匹配的分词的位置,进而对位于所述位置周围的分词进行意图分析,以获得目标关键词的意图。
其中,可以采用意图分析算法查找与目标关键词匹配的分词之前或之后的动词、形容词等修饰词语。
具体地,位于与目标关键词匹配的分词周围的分词范围可以是以结束符号为端点。
举例来说,分词结果为“换成\柳叶\眉形,把\眉毛\抬高\1毫米”,目标关键词与分词结果中的分词“眉形”和“眉毛”均匹配,采用意图分析算法可以查找到纹眉的两个意图:“柳叶”和“抬高”。
步骤204:将目标关键词和目标关键词的意图作为诉求数据。
需要说明的是,如果无法分析到目标关键词的意图,那么可以直接将目标关键词直接作为诉求数据。
至此,完成上述图2所示的诉求数据的提取流程。
实施例三:
图3为本发明根据一示例性实施例示出的一种用户视频的处理流程示意图,基于上述图1至图2所示实施例的基础上,所述用户视频的处理流程包括如下步骤:
步骤301:针对用户视频中的每帧图像,将所述图像拆分为面部图像层和背景图像层,并按照诉求数据对面部图像层进行重绘,得到新的面部图像层,并将新的面部图像层与背景图像层合成为新的图像。
其中,通过分离面部图像层和背景图像层进行处理,可以避免图像中背景带来的干扰。
在一可选的具体实施例中,针对按照诉求数据对面部图像层进行重绘,得到新的面部图像层的过程,可以在面部图像层中先定位出目标关键词所指示的部位区域,然后根据目标关键词的意图对部位区域进行重新绘制,以获得新的面部图像层。
其中,目标关键词所指示的部位区域指的是人脸面部中的某一具体部位,例如目标关键词是“纹眉”,那么所指示的部位区域即为眉毛。在进行定位过程中,可以对面部图像层进行人脸关键点检测,以将人脸各个部位的轮廓圈出来,便于提取出目标关键词所指示部位的轮廓区域。
进一步地,对定位出的部位区域重新绘制过程中,可以通过将定位出的部位区域复制一份到缓存区,并对面部图像层上定位出的部位区域进行擦除处理,然后根据目标关键词的意图对缓存区的图像进行重绘,并将缓存区的重绘图像合成到面部图像层中擦除后的区域上。
步骤302:将多帧新的图像合成视频数据作为处理后的用户视频。
其中,在对用户视频进行处理时,是需要对用户视频中的每帧图像分别处理,因此在处理完成后,还需要将处理后的多帧新图像采用视频合成技术,合成为视频数据。
至此,完成上述图3所示的用户视频处理流程。
与前述视频展示方法的实施例相对应,本发明还提供了视频展示装置的实施例。
图4为本发明根据一示例性实施例示出的一种视频展示装置的实施例流程图,该装置用于执行上述任一实施例提供的视频展示方法,如图4所示,该视频展示装置包括:
分析提取模块410,用于获取用户终端和咨询终端上传的沟通数据,并从所述沟通数据中分析提取诉求数据;
视频处理模块420,用于按照所述诉求数据对当前采集的用户视频进行处理,以获得处理后的用户视频;
分屏展示模块430,用于将处理后的用户视频与当前采集的用户视频流进行分屏对比展示,以使用户对比诉求前和诉求后的效果。
上述装置中各个单元的功能和作用的实现过程具体详见上述方法中对应步骤的实现过程,在此不再赘述。
对于装置实施例而言,由于其基本对应于方法实施例,所以相关之处参见方法实施例的部分说明即可。以上所描述的装置实施例仅仅是示意性的,其中所述作为分离部件说明的单元可以是或者也可以不是物理上分开的,作为单元显示的部件可以是或者也可以不是物理单元,即可以位于一个地方,或者也可以分布到多个网络单元上。可以根据实际的需要选择其中的部分或者全部模块来实现本发明方案的目的。本领域普通技术人员在不付出创造性劳动的情况下,即可以理解并实施。
本发明实施方式还提供一种与前述实施方式所提供的视频展示方法对应的电子设备,以执行上述视频展示方法。
图5为本发明根据一示例性实施例示出的一种电子设备的硬件结构图,该电子设备包括:通信接口601、处理器602、存储器603和总线604;其中,通信接口601、处理器602和存储器603通过总线604完成相互间的通信。处理器602通过读取并执行存储器603中与视频展示方法的控制逻辑对应的机器可执行指令,可执行上文描述的视频展示方法,该方法的具体内容参见上述实施例,此处不再累述。
本发明中提到的存储器603可以是任何电子、磁性、光学或其它物理存储装置,可以包含存储信息,如可执行指令、数据等等。具体地,存储器603可以是RAM(Random AccessMemory,随机存取存储器)、闪存、存储驱动器(如硬盘驱动器)、任何类型的存储盘(如光盘、DVD等),或者类似的存储介质,或者它们的组合。通过至少一个通信接口601(可以是有线或者无线)实现该系统网元与至少一个其他网元之间的通信连接,可以使用互联网、广域网、本地网、城域网等。
总线604可以是ISA总线、PCI总线或EISA总线等。所述总线可以分为地址总线、数据总线、控制总线等。其中,存储器603用于存储程序,所述处理器602在接收到执行指令后,执行所述程序。
处理器602可能是一种集成电路芯片,具有信号的处理能力。在实现过程中,上述方法的各步骤可以通过处理器602中的硬件的集成逻辑电路或者软件形式的指令完成。上述的处理器602可以是通用处理器,包括中央处理器(Central Processing Unit,简称CPU)、网络处理器(Network Processor,简称NP)等;还可以是数字信号处理器(DSP)、专用集成电路(ASIC)、现成可编程门阵列(FPGA)或者其他可编程逻辑器件、分立门或者晶体管逻辑器件、分立硬件组件。可以实现或者执行本申请实施例中的公开的各方法、步骤及逻辑框图。通用处理器可以是微处理器或者该处理器也可以是任何常规的处理器等。结合本申请实施例所公开的方法的步骤可以直接体现为硬件译码处理器执行完成,或者用译码处理器中的硬件及软件模块组合执行完成。
本申请实施例提供的电子设备与本申请实施例提供的视频展示方法出于相同的发明构思,具有与其采用、运行或实现的方法相同的有益效果。
本申请实施方式还提供一种与前述实施方式所提供的视频展示方法对应的计算机可读存储介质,请参考图6所示,其示出的计算机可读存储介质为光盘30,其上存储有计算机程序(即程序产品),所述计算机程序在被处理器运行时,会执行前述任意实施方式所提供的视频展示方法。
需要说明的是,所述计算机可读存储介质的例子还可以包括,但不限于相变内存(PRAM)、静态随机存取存储器(SRAM)、动态随机存取存储器(DRAM)、其他类型的随机存取存储器(RAM)、只读存储器(ROM)、电可擦除可编程只读存储器(EEPROM)、快闪记忆体或其他光学、磁性存储介质,在此不再一一赘述。
本申请的上述实施例提供的计算机可读存储介质与本申请实施例提供的视频展示方法出于相同的发明构思,具有与其存储的应用程序所采用、运行或实现的方法相同的有益效果。
本领域技术人员在考虑说明书及实践这里公开的发明后,将容易想到本发明的其它实施方案。本发明旨在涵盖本发明的任何变型、用途或者适应性变化,这些变型、用途或者适应性变化遵循本发明的一般性原理并包括本发明未公开的本技术领域中的公知常识或惯用技术手段。说明书和实施例仅被视为示例性的,本发明的真正范围和精神由下面的权利要求指出。
还需要说明的是,术语“包括”、“包含”或者其任何其他变体意在涵盖非排他性的包含,从而使得包括一系列要素的过程、方法、商品或者设备不仅包括那些要素,而且还包括没有明确列出的其他要素,或者是还包括为这种过程、方法、商品或者设备所固有的要素。在没有更多限制的情况下,由语句“包括一个……”限定的要素,并不排除在包括所述要素的过程、方法、商品或者设备中还存在另外的相同要素。
以上所述仅为本发明的较佳实施例而已,并不用以限制本发明,凡在本发明的精神和原则之内,所做的任何修改、等同替换、改进等,均应包含在本发明保护的范围之内。

Claims (8)

1.一种视频展示方法,其特征在于,所述方法包括:
获取用户终端和咨询终端上传的沟通数据,并从所述沟通数据中分析提取诉求数据,所述诉求数据包括目标关键词和目标关键词的意图;
按照所述诉求数据对当前采集的用户视频进行处理,以获得处理后的用户视频,包括:针对所述用户视频中的每帧图像,将所述图像拆分为面部图像层和背景图像层,在所述面部图像层中定位所述目标关键词所指示的部位区域;根据所述目标关键词的意图对所述部位区域进行重新绘制,以获得新的面部图像层,并将新的面部图像层与所述背景图像层合成为新的图像;将多帧新的图像合成视频数据作为处理后的用户视频;
将处理后的用户视频与当前采集的用户视频流进行分屏对比展示,以使用户对比诉求前和诉求后的效果。
2.根据权利要求1所述的方法,其特征在于,所述从所述沟通数据中分析提取诉求数据,包括:
对所述沟通数据进行分词处理,得到分词结果;
将所述分词结果中的每一分词与预设模型库进行匹配对比,以从所述预设模型库中提取匹配成功的目标关键词;
对所述分词结果进行意图分析,以获得所述目标关键词的意图;
将所述目标关键词和所述目标关键词的意图作为诉求数据。
3.根据权利要求2所述的方法,其特征在于,所述对所述分词结果进行意图分析,以获得所述目标关键词的意图,包括:
在所述分词结果中定位与所述目标关键词匹配的分词的位置;
对位于所述位置周围的分词进行意图分析,以获得所述目标关键词的意图。
4.根据权利要求1所述的方法,其特征在于,所述将处理后的用户视频与当前采集的用户视频流进行分屏对比展示,包括:
将处理后的用户视频分别回传至所述用户终端和所述咨询终端,以使所述用户终端和所述咨询终端将处理后的用户视频与当前采集的用户视频流进行分屏对比展示。
5.根据权利要求1所述的方法,其特征在于,在按照所述诉求数据对当前采集的用户视频进行处理之后,所述方法还包括:
生成一个直播ID,将处理后的用户视频、当前采集的用户视频与生成的直播ID对应存储,并将所述直播ID推荐给其他用户终端;
当接收到其他用户终端针对所述直播ID的视频请求时,将所述直播ID对应存储的处理后的用户视频、当前采集的用户视频发送至其他用户终端,以使其他用户终端将处理后的用户视频、当前采集的用户视频进行分屏对比展示。
6.一种视频展示装置,其特征在于,所述装置包括:
分析提取模块,用于获取用户终端和咨询终端上传的沟通数据,并从所述沟通数据中分析提取诉求数据,所述诉求数据包括目标关键词和目标关键词的意图;
视频处理模块,用于按照所述诉求数据对当前采集的用户视频进行处理,以获得处理后的用户视频;
分屏展示模块,用于将处理后的用户视频与当前采集的用户视频流进行分屏对比展示,以使用户对比诉求前和诉求后的效果;
所述视频处理模块,具体用于针对所述用户视频中的每帧图像,将所述图像拆分为面部图像层和背景图像层,在所述面部图像层中定位所述目标关键词所指示的部位区域;根据所述目标关键词的意图对所述部位区域进行重新绘制,以获得新的面部图像层,并将新的面部图像层与所述背景图像层合成为新的图像;将多帧新的图像合成视频数据作为处理后的用户视频。
7.一种电子设备,包括存储器、处理器及存储在存储器上并可在处理器上运行的计算机程序,其特征在于,所述处理器执行所述程序时实现如权利要求1-5任一项所述方法的步骤。
8.一种计算机可读存储介质,其上存储有计算机程序,其特征在于,所述
程序被处理器执行时实现如权利要求1-5任一项所述方法的步骤。
CN202111022106.8A 2021-09-01 2021-09-01 一种视频展示方法、装置、电子设备及存储介质 Active CN113949834B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202111022106.8A CN113949834B (zh) 2021-09-01 2021-09-01 一种视频展示方法、装置、电子设备及存储介质

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202111022106.8A CN113949834B (zh) 2021-09-01 2021-09-01 一种视频展示方法、装置、电子设备及存储介质

Publications (2)

Publication Number Publication Date
CN113949834A CN113949834A (zh) 2022-01-18
CN113949834B true CN113949834B (zh) 2024-06-04

Family

ID=79327673

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202111022106.8A Active CN113949834B (zh) 2021-09-01 2021-09-01 一种视频展示方法、装置、电子设备及存储介质

Country Status (1)

Country Link
CN (1) CN113949834B (zh)

Citations (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20060104027A (ko) * 2005-03-29 2006-10-09 (주)제니텀 엔터테인먼트 컴퓨팅 자동 얼굴 추출 기반 가상 얼굴 성형 방법 및 시스템
KR101592512B1 (ko) * 2015-05-15 2016-02-11 주식회사 이니셜티 지식 영상콘텐츠 제공 방법 및 시스템
KR20160060900A (ko) * 2014-11-20 2016-05-31 (주)엠제이앤파트너스 성형 수술 시뮬레이션을 통해 가상견적 또는 실제견적을 제공하는 시스템 및 그 방법
CN107016244A (zh) * 2017-04-10 2017-08-04 厦门波耐模型设计有限责任公司 一种美容整形效果评价系统及实现方法
CN109583263A (zh) * 2017-09-28 2019-04-05 丽宝大数据股份有限公司 结合扩增实境的身体信息分析装置及其眉型预览方法
CN110909137A (zh) * 2019-10-12 2020-03-24 平安科技(深圳)有限公司 基于人机交互的信息推送方法、装置和计算机设备
CN111935491A (zh) * 2020-06-28 2020-11-13 百度在线网络技术(北京)有限公司 直播的特效处理方法、装置以及服务器
CN112749344A (zh) * 2021-02-04 2021-05-04 北京百度网讯科技有限公司 信息推荐方法、装置、电子设备、存储介质及程序产品
CN112819767A (zh) * 2021-01-26 2021-05-18 北京百度网讯科技有限公司 图像处理方法、装置、设备、存储介质以及程序产品

Family Cites Families (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20020092534A1 (en) * 2001-01-08 2002-07-18 Shamoun John M. Cosmetic surgery preview system
US20080226144A1 (en) * 2007-03-16 2008-09-18 Carestream Health, Inc. Digital video imaging system for plastic and cosmetic surgery

Patent Citations (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20060104027A (ko) * 2005-03-29 2006-10-09 (주)제니텀 엔터테인먼트 컴퓨팅 자동 얼굴 추출 기반 가상 얼굴 성형 방법 및 시스템
KR20160060900A (ko) * 2014-11-20 2016-05-31 (주)엠제이앤파트너스 성형 수술 시뮬레이션을 통해 가상견적 또는 실제견적을 제공하는 시스템 및 그 방법
KR101592512B1 (ko) * 2015-05-15 2016-02-11 주식회사 이니셜티 지식 영상콘텐츠 제공 방법 및 시스템
CN107016244A (zh) * 2017-04-10 2017-08-04 厦门波耐模型设计有限责任公司 一种美容整形效果评价系统及实现方法
CN109583263A (zh) * 2017-09-28 2019-04-05 丽宝大数据股份有限公司 结合扩增实境的身体信息分析装置及其眉型预览方法
CN110909137A (zh) * 2019-10-12 2020-03-24 平安科技(深圳)有限公司 基于人机交互的信息推送方法、装置和计算机设备
WO2021068321A1 (zh) * 2019-10-12 2021-04-15 平安科技(深圳)有限公司 基于人机交互的信息推送方法、装置和计算机设备
CN111935491A (zh) * 2020-06-28 2020-11-13 百度在线网络技术(北京)有限公司 直播的特效处理方法、装置以及服务器
CN112819767A (zh) * 2021-01-26 2021-05-18 北京百度网讯科技有限公司 图像处理方法、装置、设备、存储介质以及程序产品
CN112749344A (zh) * 2021-02-04 2021-05-04 北京百度网讯科技有限公司 信息推荐方法、装置、电子设备、存储介质及程序产品

Also Published As

Publication number Publication date
CN113949834A (zh) 2022-01-18

Similar Documents

Publication Publication Date Title
KR102416558B1 (ko) 영상 데이터 처리 방법, 장치 및 판독 가능 저장 매체
CN110968736B (zh) 视频生成方法、装置、电子设备及存储介质
CN111988658B (zh) 视频生成方法及装置
CN108377418B (zh) 一种视频标注处理方法和装置
CN111050201B (zh) 数据处理方法、装置、电子设备及存储介质
CN110769312B (zh) 一种直播应用中推荐信息的方法及装置
CN105812920B (zh) 媒体信息处理方法及媒体信息处理装置
KR20180059117A (ko) 영상 인식에 의한 해시태그 삽입방법 및 그 방법을 수행하는 소프트웨어가 저장된 소프트웨어 분배 서버
CN107507620A (zh) 一种语音播报声音设置方法、装置、移动终端及存储介质
CN114359517A (zh) 虚拟形象生成方法、虚拟形象生成系统和计算设备
CN109979450A (zh) 信息处理方法、装置及电子设备
CN110570348A (zh) 一种脸部图像替换方法及设备
CN114449313B (zh) 视频的音画面播放速率调整方法及装置
CN112528049B (zh) 视频合成方法、装置、电子设备及计算机可读存储介质
CN113949834B (zh) 一种视频展示方法、装置、电子设备及存储介质
CN113222841A (zh) 一种图像处理方法、装置、设备及介质
US20220375223A1 (en) Information generation method and apparatus
CN112104914B (zh) 视频推荐方法及装置
US20200233903A1 (en) Systems and methods for searching and ranking personalized videos
CN114556969A (zh) 数据处理方法、装置和存储介质
CN109255807B (zh) 一种图像信息处理方法及服务器、计算机存储介质
CN111160051A (zh) 数据处理方法、装置、电子设备及存储介质
CN114691926A (zh) 一种信息显示方法及电子设备
CN114390133A (zh) 录音方法、装置和电子设备
WO2021120174A1 (zh) 数据处理方法、装置、电子设备和存储介质

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant