CN112165626A - 图像处理方法、资源获取方法、相关设备及介质 - Google Patents
图像处理方法、资源获取方法、相关设备及介质 Download PDFInfo
- Publication number
- CN112165626A CN112165626A CN202011019299.7A CN202011019299A CN112165626A CN 112165626 A CN112165626 A CN 112165626A CN 202011019299 A CN202011019299 A CN 202011019299A CN 112165626 A CN112165626 A CN 112165626A
- Authority
- CN
- China
- Prior art keywords
- target
- resource
- resource selection
- live broadcast
- user
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
- 238000000034 method Methods 0.000 title claims abstract description 79
- 238000003672 processing method Methods 0.000 title claims abstract description 29
- 230000001960 triggered effect Effects 0.000 claims abstract description 57
- 238000012790 confirmation Methods 0.000 claims abstract description 29
- 238000012545 processing Methods 0.000 claims description 29
- 238000012986 modification Methods 0.000 claims description 24
- 230000004048 modification Effects 0.000 claims description 24
- 230000004044 response Effects 0.000 claims description 9
- 238000003825 pressing Methods 0.000 claims description 8
- 238000005516 engineering process Methods 0.000 abstract description 27
- 230000003993 interaction Effects 0.000 abstract description 26
- 238000013473 artificial intelligence Methods 0.000 abstract description 10
- 230000000875 corresponding effect Effects 0.000 description 86
- 238000003860 storage Methods 0.000 description 47
- 238000010586 diagram Methods 0.000 description 45
- 238000013527 convolutional neural network Methods 0.000 description 24
- 238000004422 calculation algorithm Methods 0.000 description 21
- 230000006870 function Effects 0.000 description 19
- 230000008569 process Effects 0.000 description 15
- 238000004590 computer program Methods 0.000 description 14
- 238000000605 extraction Methods 0.000 description 14
- 230000002452 interceptive effect Effects 0.000 description 13
- 238000001514 detection method Methods 0.000 description 7
- 230000000694 effects Effects 0.000 description 5
- 238000010801 machine learning Methods 0.000 description 5
- 238000012549 training Methods 0.000 description 5
- 238000004891 communication Methods 0.000 description 4
- 238000007667 floating Methods 0.000 description 4
- 238000004458 analytical method Methods 0.000 description 3
- 238000011161 development Methods 0.000 description 3
- 238000011176 pooling Methods 0.000 description 3
- 238000013468 resource allocation Methods 0.000 description 3
- 239000013598 vector Substances 0.000 description 3
- 238000013528 artificial neural network Methods 0.000 description 2
- 230000006835 compression Effects 0.000 description 2
- 238000007906 compression Methods 0.000 description 2
- 238000013135 deep learning Methods 0.000 description 2
- 238000013461 design Methods 0.000 description 2
- 238000009432 framing Methods 0.000 description 2
- 238000007781 pre-processing Methods 0.000 description 2
- 238000005070 sampling Methods 0.000 description 2
- 238000012216 screening Methods 0.000 description 2
- 238000012546 transfer Methods 0.000 description 2
- VYPSYNLAJGMNEJ-UHFFFAOYSA-N Silicium dioxide Chemical compound O=[Si]=O VYPSYNLAJGMNEJ-UHFFFAOYSA-N 0.000 description 1
- 230000006399 behavior Effects 0.000 description 1
- 230000009286 beneficial effect Effects 0.000 description 1
- 230000015572 biosynthetic process Effects 0.000 description 1
- 230000000903 blocking effect Effects 0.000 description 1
- 238000004364 calculation method Methods 0.000 description 1
- 230000008859 change Effects 0.000 description 1
- 230000002596 correlated effect Effects 0.000 description 1
- 238000005520 cutting process Methods 0.000 description 1
- 238000009826 distribution Methods 0.000 description 1
- 210000005069 ears Anatomy 0.000 description 1
- 230000004927 fusion Effects 0.000 description 1
- GVVPGTZRZFNKDS-JXMROGBWSA-N geranyl diphosphate Chemical compound CC(C)=CCC\C(C)=C\CO[P@](O)(=O)OP(O)(O)=O GVVPGTZRZFNKDS-JXMROGBWSA-N 0.000 description 1
- 238000009499 grossing Methods 0.000 description 1
- 230000007774 longterm Effects 0.000 description 1
- 238000004519 manufacturing process Methods 0.000 description 1
- 238000013507 mapping Methods 0.000 description 1
- 238000010295 mobile communication Methods 0.000 description 1
- 238000003058 natural language processing Methods 0.000 description 1
- 238000005457 optimization Methods 0.000 description 1
- 238000003909 pattern recognition Methods 0.000 description 1
- 230000008447 perception Effects 0.000 description 1
- 238000011160 research Methods 0.000 description 1
- 238000010845 search algorithm Methods 0.000 description 1
- 230000005236 sound signal Effects 0.000 description 1
- 230000001360 synchronised effect Effects 0.000 description 1
- 238000003786 synthesis reaction Methods 0.000 description 1
- 230000009466 transformation Effects 0.000 description 1
Images
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
- H04N21/21—Server components or server architectures
- H04N21/218—Source of audio or video content, e.g. local disk arrays
- H04N21/2187—Live feed
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
- H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
- H04N21/431—Generation of visual interfaces for content selection or interaction; Content or additional data rendering
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
- H04N21/47—End-user applications
- H04N21/485—End-user interface for client configuration
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
- H04N21/80—Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
- H04N21/83—Generation or processing of protective or descriptive data associated with content; Content structuring
- H04N21/845—Structuring of content, e.g. decomposing content into time segments
- H04N21/8455—Structuring of content, e.g. decomposing content into time segments involving pointers to the content, e.g. pointers to the I-frames of the video stream
Landscapes
- Engineering & Computer Science (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- Human Computer Interaction (AREA)
- Databases & Information Systems (AREA)
- User Interface Of Digital Computer (AREA)
Abstract
本发明实施例基于人工智能技术公开了一种图像处理方法、资源获取方法、相关设备及介质,其中图像处理方法包括:在主播用户的用户界面中显示目标直播画面,所述目标直播画面中包括多个物体资源以及每个物体资源的资源标识;若所述目标直播画面被触发,则显示资源选择预览图;所述资源选择预览图中至少包括各物体资源的资源标识;响应针对所述资源选择预览图的确认操作,将所述资源选择预览图所对应的目标资源选择图发送至观众终端进行显示,使得观众用户通过所述目标资源选择图获取至少一个物体资源。本发明实施例可以丰富直播间的资源获取方式,提升观众用户的互动积极性,从而提升用户粘度。
Description
技术领域
本发明涉及互联网技术领域,具体涉及计算机技术领域,尤其涉及一种图像处理方法、一种资源获取方法、一种图像处理装置、一种资源获取装置、一种终端及一种计算机存储介质。
背景技术
随着直播行业的发展,越来越多的用户选择观看直播来丰富日常生活。用户在直播间(一种可供用户通过互联网进行信息交互的虚拟房间)中观看直播的过程中,可能存在一些物体资源的获取需求;基于此,如何丰富直播间的资源获取方式成为了研究热点。
发明内容
本发明实施例提供了一种图像处理方法、资源获取方法、相关设备及介质,可以丰富直播间的资源获取方式,提升观众用户的互动积极性,从而提升用户粘度。
一方面,本发明实施例提供了一种图像处理方法,所述方法包括:
在主播用户的用户界面中显示目标直播画面,所述目标直播画面中包括多个物体资源以及每个物体资源的资源标识;
若所述目标直播画面被触发,则显示资源选择预览图;所述资源选择预览图中至少包括各物体资源的资源标识;
响应针对所述资源选择预览图的确认操作,将所述资源选择预览图所对应的目标资源选择图发送至观众终端进行显示,使得观众用户通过所述目标资源选择图获取至少一个物体资源。
另一方面,本发明实施例提供了一种图像处理装置,所述装置包括:
显示单元,用于在主播用户的用户界面中显示目标直播画面,所述目标直播画面中包括多个物体资源以及每个物体资源的资源标识;
所述显示单元,用于若所述目标直播画面被触发,则显示资源选择预览图;所述资源选择预览图中至少包括各物体资源的资源标识;
处理单元,用于响应针对所述资源选择预览图的确认操作,将所述资源选择预览图所对应的目标资源选择图发送至观众终端进行显示,使得观众用户通过所述目标资源选择图获取至少一个物体资源。
再一方面,本发明实施例提供了一种主播终端,所述主播终端包括输入设备和输出设备,所述主播终端还包括:
处理器,适于实现一条或多条指令;以及,
计算机存储介质,所述计算机存储介质存储有一条或多条第一指令,所述一条或多条第一指令适于由所述处理器加载并执行如下步骤:
在主播用户的用户界面中显示目标直播画面,所述目标直播画面中包括多个物体资源以及每个物体资源的资源标识;
若所述目标直播画面被触发,则显示资源选择预览图;所述资源选择预览图中至少包括各物体资源的资源标识;
响应针对所述资源选择预览图的确认操作,将所述资源选择预览图所对应的目标资源选择图发送至观众终端进行显示,使得观众用户通过所述目标资源选择图获取至少一个物体资源。
再一方面,本发明实施例提供了一种计算机存储介质,所述计算机存储介质存储有一条或多条第一指令,所述一条或多条第一指令适于由处理器加载并执行如下步骤:
在主播用户的用户界面中显示目标直播画面,所述目标直播画面中包括多个物体资源以及每个物体资源的资源标识;
若所述目标直播画面被触发,则显示资源选择预览图;所述资源选择预览图中至少包括各物体资源的资源标识;
响应针对所述资源选择预览图的确认操作,将所述资源选择预览图所对应的目标资源选择图发送至观众终端进行显示,使得观众用户通过所述目标资源选择图获取至少一个物体资源。
本发明实施例中的主播终端可根据目标直播画面中的各个物体资源的资源标识生成电子版的资源选择预览图,并在目标直播画面被触发时显示该资源选择预览图。然后,可响应针对该资源选择预览图的确认操作,将资源选择预览图所对应的目标资源选择图发送至观众客户端进行显示。通过为观众用户提供一个目标资源选择图,可使得观众用户能够直观地通过选中目标资源选择图中的目标资源标识,来获取相应的目标物体资源;这样可丰富直播间的资源获取方式,提升资源获取的直观性和趣味性,从而提升观众用户的互动积极性,进而提升用户粘度。
再一方面,本发明实施例提供了一种资源获取方法,所述方法包括:
在观众用户的用户界面中显示关于目标直播画面的目标资源选择图;其中,所述目标资源选择图至少包括所述目标直播画面中的多个物体资源的资源标识,且存在至少一个物体资源的资源标识处于解锁状态;
若所述目标资源选择图中处于解锁状态的目标资源标识被选中,则显示所述目标资源标识对应的目标物体资源的获取结果提示;其中,所述获取结果提示是根据在所述目标资源标识被选中时,请求获取所述目标物体资源所得到的反馈信息生成的。
再一方面,本发明实施例提供了一种资源获取装置,所述装置包括:
第一显示单元,用于在观众用户的用户界面中显示关于目标直播画面的目标资源选择图;其中,所述目标资源选择图至少包括所述目标直播画面中的多个物体资源的资源标识,且存在至少一个物体资源的资源标识处于解锁状态;
第二显示单元,用于若所述目标资源选择图中处于所述解锁状态的目标资源标识被选中,则显示所述目标资源标识对应的目标物体资源的获取结果提示;其中,所述获取结果提示是根据在所述目标资源标识被选中时,请求获取所述目标物体资源所得到的反馈信息生成的。
再一方面,本发明实施例提供了一种观众终端,所述观众终端包括输入设备和输出设备,所述观众终端还包括:
处理器,适于实现一条或多条指令;以及,
计算机存储介质,所述计算机存储介质存储有一条或多条第二指令,所述一条或多条第二指令适于由所述处理器加载并执行如下步骤:
在观众用户的用户界面中显示关于目标直播画面的目标资源选择图;其中,所述目标资源选择图至少包括所述目标直播画面中的多个物体资源的资源标识,且存在至少一个物体资源的资源标识处于解锁状态;
若所述目标资源选择图中处于所述解锁状态的目标资源标识被选中,则显示所述目标资源标识对应的目标物体资源的获取结果提示;其中,所述获取结果提示是根据在所述目标资源标识被选中时,请求获取所述目标物体资源所得到的反馈信息生成的。
再一方面,本发明实施例提供了一种计算机存储介质,所述计算机存储介质存储有一条或多条第二指令,所述一条或多条第二指令适于由处理器加载并执行如下步骤:
在观众用户的用户界面中显示关于目标直播画面的目标资源选择图;其中,所述目标资源选择图至少包括所述目标直播画面中的多个物体资源的资源标识,且存在至少一个物体资源的资源标识处于解锁状态;
若所述目标资源选择图中处于所述解锁状态的目标资源标识被选中,则显示所述目标资源标识对应的目标物体资源的获取结果提示;其中,所述获取结果提示是根据在所述目标资源标识被选中时,请求获取所述目标物体资源所得到的反馈信息生成的。
本发明实施例中的观众终端可在观众用户的用户界面中显示关于目标直播画面的目标资源选择图;其中,目标资源选择图可至少包括目标直播画面中的多个物体资源的资源标识,且存在至少一个物体资源的资源标识处于解锁状态。当目标资源选择图中处于解锁状态的目标资源标识被选中时,可显示目标资源标识对应的目标物体资源的获取结果提示;该获取结果提示是根据在目标资源标识被选中时,请求获取目标物体资源所得到的反馈信息生成的。可见,观众终端通过为观众用户提供一个目标资源选择图,可使得观众用户能够直观地通过选中目标资源选择图中的目标资源标识,来获取相应的目标物体资源;这样可丰富直播间的资源获取方式,提升资源获取的直观性和趣味性,从而提升观众用户的互动积极性,进而提升用户粘度。并且,还可通过显示获取结果提示,来直观地告诉观众用户关于目标物体资源的获取结果,可进一步提升用户粘度。
附图说明
为了更清楚地说明本发明实施例技术方案,下面将对实施例描述中所需要使用的附图作简单地介绍,显而易见地,下面描述中的附图是本发明的一些实施例,对于本领域普通技术人员来讲,在不付出创造性劳动的前提下,还可以根据这些附图获得其他的附图。
图1是本发明实施例提供的一种直播系统的架构示意图;
图2是本发明实施例提供的一种图像处理方法的流程示意图;
图3a是本发明实施例提供的一种显示资源选择预览图的示意图;
图3b是本发明实施例提供的另一种显示资源选择预览图的示意图;
图3c是本发明实施例提供的另一种显示资源选择预览图的示意图;
图3d是本发明实施例提供的一种突出显示标题文本的示意图;
图3e是本发明实施例提供的另一种突出显示标题文本的示意图;
图3f是本发明实施例提供的另一种突出显示标题文本的示意图;
图3g是本发明实施例提供的一种更新显示资源选择预览图的示意图;
图3h是本发明实施例提供的一种资源选择预览图的产品形态示意图;
图3i是本发明实施例提供的另一种更新显示资源选择预览图的示意图;
图3j是本发明实施例提供的一种根据资源选择预览图生成目标资源选择图的示意图;
图3k是本发明实施例提供的一种将目标资源选择图发送至观众终端进行显示的示意图;
图3l是本发明实施例提供的一种继续显示新的直播画面的示意图;
图3m是本发明实施例提供的一种将目标盲盒内的目标物体的物体图像发送至目标观众终端进行显示的示意图;
图4是本发明另一实施例提供的一种图像处理方法的流程示意图;
图5a是本发明实施例提供的一种语音识别的原理图;
图5b是本发明实施例提供的一种将主播用户侧的语音数据分帧成多帧语音数据的示意图;
图6是本发明实施例提供的一种资源获取方法的流程示意图;
图7a是本发明实施例提供的一种显示目标资源选择图的示意图;
图7b是本发明实施例提供的一种显示获取结果提示的示意图;
图7c是本发明实施例提供的一种更新显示目标资源选择图的示意图;
图7d是本发明实施例提供的一种继续显示新的直播画面的示意图;
图7e是本发明实施例提供的另一种继续显示新的直播画面的示意图;
图7f是本发明实施例提供的一种显示目标物体的物体图像的示意图;
图8是本发明实施例提供的一种直播互动的流程示意图;
图9是本发明实施例提供的一种图像处理装置的结构示意图;
图10是本发明实施例提供的一种主播终端的结构示意图;
图11是本发明实施例提供的一种资源获取装置的结构示意图;
图12是本发明实施例提供的一种观众终端的结构示意图。
具体实施方式
下面将结合本发明实施例中的附图,对本发明实施例中的技术方案进行清楚、完整地描述。
随着互联网技术的不断发展,AI(Artificial Intelligence,人工智能)技术也随之得到更好的发展。所谓的AI是指利用数字计算机或者数字计算机控制的机器模拟、延伸和扩展人的智能,感知环境、获取知识并使用知识获得最佳结果的理论、方法、技术及应用系统。换句话说,人工智能是计算机科学的一个综合技术;其主要通过了解智能的实质,生产出一种新的能以人类智能相似的方式做出反应的智能机器,使得智能机器具有感知、推理与决策等多种功能。相应的,AI技术是一门综合学科,其主要包括计算机视觉技术(Computer Vision,CV)、语音技术(Speech Technology)、自然语言处理技术及机器学习(Machine Learning,ML)/深度学习等几大方向。其中,计算机视觉技术通常可包括图像处理、图像识别以及图像语义理解等技术;语音技术主要包括自动语音识别技术(AutomaticSpeech Recognition,ASR)、语音合成技术(Text To Speech,TTS)以及声纹识别技术等技术。
基于上述所提及的计算机视觉技术中的图像识别技术和语音技术中的自动语音识别技术,本发明实施例针对直播间中的物体资源,提出了一种直播互动方案以及相应的直播系统,以丰富直播间的资源获取方式。参见图1所示,该直播系统可至少包括:主播终端11、至少一个观众终端12以及服务器13。其中,主播终端11是指发布直播画面的主播用户所使用的终端,观众客户端12是指请求观看并播放直播画面的观众用户所使用的终端;此处所提及的终端可包括但不限于:智能电视,智能手机、平板电脑、笔记本电脑以及台式计算机,等等。具体实现中,主播终端11和观众终端12中均可运行各式各样的客户端,如直播客户端、社交客户端,多媒体播放客户端,等等;且无论是主播终端11还是观众终端12,其与服务器13之间均可通过任何通信方式实现通信,例如基于第三代合作伙伴计划(3rdGeneration Partnership Project,3GPP)、长期演进(Long Term Evolution,LTE)、全球互通微波访问(Worldwide Interoperability for Microwave Access,WiMAX)的移动通信,或基于TCP/IP协议族(TCP/IP Protocol Suite,TCP/IP)、用户数据报协议(User DatagramProtocol,UDP)协议的计算机网络通信等。
此处的服务器13是指可为主播终端11和各个观众终端12提供直播服务、数据转发服务、信息记录服务、评论信息转发服务等多种服务的服务设备。其具体可以是独立的物理服务器,也可以是多个物理服务器构成的服务器集群或者分布式系统,还可以是提供云服务、云数据库、云计算、云函数、云存储、网络服务、云通信、域名服务、安全服务、CDN(Content Delivery Network,内容分发网络)、以及大数据和人工智能平台等基础云计算服务的云服务器,等等。其中,云计算是一种计算模式;其通过将计算任务分布在大量计算机构成的资源地上,使各种应用系统能够根据需要获取计算力、存储空间和信息服务提供资源的网络可称作“云”,“云”中的资源支持随时获取、按需使用、随时扩展等功能。也就是说,云计算是网格计算(Grid Computing)、分布式计算(Distributed Computing)、并行计算(Parallel Computing)、效用计算(Utility Computing)、网络存储(Network StorageTechnologies)、虚拟化(Virtualization)、负载均衡(Load Balance)等传统计算机和网络技术发展融合的产物。大数据则是指无法在一定时间范围内用常规软件工具进行捕捉、管理和处理的数据集合,是需要新处理模式才能具有更强的决策力、洞察发现力和流程优化能力的海量、高增长率和多样化的信息资产。
在具体实现中,通过上述的直播系统实现本发明实施例所提出的直播互动方案的大致流程如下:主播终端11可通过摄像装置(如主播终端11上固定配置的摄像头、主播终端11外接的摄像设备等)实时采集主播用户侧的环境信息,以及通过音频采集装置(如主播终端11上固定配置的麦克风、主播终端11外接的收音设备等)实时采集相关语音数据。然后,根据采集到的环境信息和相关语音数据进行编码以得到直播画面,并在主播用户的用户界面中显示编码得到的直播画面;同时,主播终端11还可将编码得到的直播画面通过服务器13发送至各个观众终端12进行显示。
在此直播过程中,当主播用户想要使用一些物体资源来与观众用户进行互动游戏时,例如电商类的主播用户欲使用一些物体资源(如多个物品)与观众用户进行资源发放的互动游戏时,唱歌类的主播用户欲使用一些物体资源(如关联有不同歌曲的各个话筒设备)与观众用户进行选歌互动的互动游戏时;可触发主播终端在主播用户的用户界面中显示关于物体资源的物体浮层,并在该物体浮层中显示该物体资源的物体文案。另外,主播用户还可先将各个物体资源摆放在摄像装置的拍摄范围内,以使得主播终端11可调用摄像装置采集包含各个物体资源及各个物体资源的资源标识的目标环境信息,并调用音频采集装置采集主播用户侧的语音数据。应理解的是,上述所提及的目标环境信息的采集和语音数据的采集均是一个持续进行的过程。
在采集得到目标环境信息和主播用户侧的语音数据后,主播终端可根据采集到的目标环境信息以及主播用户侧的语音数据生成目标直播画面。然后,主播终端可在主播用户的用户界面中显示目标直播画面,并将目标直播画面通过服务器13发送至各个观众终端12进行显示。然后,主播用户可通过语音口令的方式或者对某组件执行触发操作的方式等各种触发方式,触发主播终端11基于语音识别和图像识别,根据采集到的主播用户侧的语音数据和目标直播画面生成一个电子版的目标资源选择图;该目标资源选择图中包括各物体资源的资源标识,且各物体资源的资源标识均支持选择。然后,主播终端11可将目标资源选择图通过服务器13发送至各个观众终端12进行显示;相应的,任一观众用户可通过选择目标资源选择图中的一个或多个资源标识,来触发观众终端12向服务器13请求获取被选择的资源标识所对应的物体资源。
需要说明的是,若物体资源为物品,则上述所提及的“请求获取被选择的资源标识所对应的物体资源”是指:请求获取被选择的资源标识所对应的物体资源(即物品)的拥有权;在此情况下,若观众用户A通过观众终端12成功获取到某物体资源(即某物品)的拥有权,则需将该物体资源(即物品)邮寄给观众用户A。若物体资源为话筒设备,则上述所提及的“请求获取被选择的资源标识所对应的物体资源”是指:请求获取被选择的资源标识所对应的物体资源(即话筒设备)所关联的歌曲的点歌权;在此情况下,若观众用户A通过观众终端12成功获取到某物体资源(即某话筒设备)所关联的歌曲的点歌权,则主播用户可在直播间中为该观众用户A演唱相应的歌曲。
由此可见,本发明实施例所提及直播互动方案通过根据主播用户侧的语音数据和目标直播画面,为观众用户提供一个电子版的目标资源选择图,可使得观众用户能够直观地通过选中目标资源选择图中的一个或多个资源标识,来获取相应的物体资源;这样可丰富直播间的资源获取方式,提升资源获取的直观性和趣味性,从而提升观众用户的互动积极性,进而提升用户粘度。
基于上述直播互动方案的相关描述,本发明实施例提出一种图像处理方法。该图像处理方法可由上述所提及的直播系统中的主播终端执行,或者由主播终端中运行的直播客户端执行;为便于阐述,后续均以主播终端执行该图像处理方法为例进行说明。请参见图2,该图像处理方法可包括以下步骤S201-S203:
S201,在主播用户的用户界面中显示目标直播画面。
在具体实现中,当主播用户想要使用多个物体资源来与观众用户进行互动时,主播用户可先将多个物体资源摆30放在主播终端的摄像装置的拍摄范围内。其中,物体资源30可包括但不限于:主播用户推荐购买的物品、用于奖励(赠送)给观众用户的物品、用于实现歌曲点播的话筒设备,等等;此处所提及的物品可以是盲盒,或者除盲盒以外的其他物体。所谓的盲盒是指内含物体但外表面未阐述物体详情信息的盒子,而物体详情信息则是指可用于反映物体外观形状的信息,如物体名称、物体的外观描述信息等;也就是说,盲盒的本质是一个装了物体的盒子,但该盒子的外表面没有物体的物体详情信息,只有打开该盒子才可知道物体的具体样子。盲盒中的物体可以是动漫、影视作品的周边(或称为产品),或者设计师单独设计的玩偶,等等。在本发明实施例中,每个物体资源30均可具有一个肉眼可见的资源标识;该资源标识是指可用于唯一标识物体资源30的信息,如物体资源的排列序号。并且,资源标识可以是在生产物体资源30时就印刷在物体资源30的外表面的,也可以是由主播用户在摆放各个物体资源30时手动在各物体资源30的外表面上标记的,本发明实施例对此不作限制。
待主播用户将多个物体资源摆放在主播终端的摄像装置的拍摄范围后,主播终端便可调用摄像装置采集包含各个物体资源及各个物体资源的资源标识的目标环境信息,以及调用音频采集装置采集主播用户侧的语音数据。可选的,主播终端还可实时监测本场直播的物体资源的物体浮层动态;并在检测到物体资源的物体浮层在主播用户的用户界面中弹出显示时,通过音频采集装置进行语音采集以得到主播用户侧的语音数据。然后,主播终端可根据采集到的目标环境信息以及主播用户侧的语音数据生成目标直播画面,并在主播用户的用户界面中显示目标直播画面。另外,主播终端还可同步将目标直播画面发送至观众终端进行显示。需要说明的是,本发明实施例所提及的目标直播画面是指包含多个物体资源以及各物体资源的资源标识的直播画面;也就是说,只要直播画面中包括了多个物体资源以及各物体资源的资源标识,那么该直播画面便可称为目标直播画面。例如,若连续5帧直播画面中均包括多个物体资源以及各物体资源的资源标识,则即使这5帧直播画面中存在一些内容差异,但也可将这5帧直播画面均称作目标直播画面。
可选的,主播终端还可在主播用户的用户界面中显示图像显示组件31,此处的图像显示组件31是指用于触发主播终端显示资源选择预览图的组件;通过显示图像显示组件31,可便于主播用户后续可通过触发该图像显示组件31,从而实现触发目标直播画面。在一种具体实现中,图像显示组件31和目标直播画面可以是独立显示的。例如主播终端可在开始显示直播画面时,便在主播用户的用户界面中持续显示图像显示组件31;待生成目标直播画面后,再在主播用户的用户界面中显示目标直播画面。再一种具体实现中,图像显示组件31和目标直播画面也可以是关联显示的。例如主播终端在生成目标直播画面之前,只在主播用户的用户界面中显示其他直播画面,不显示图像显示组件31;待生成目标直播画面后,再在主播用户的用户界面中同时显示目标直播画面和图像显示组件31。
S202,若目标直播画面被触发,则显示资源选择预览图。
在具体实现中,目标直播画面可以是通过目标操作被触发的;此处的目标操作可包括:针对主播用户的用户界面中的图像显示组件31的触发操作,针对目标直播画面的按压操作、在目标直播画面中输入预设手势的操作,输入关于目标直播画面的语音识别口令的操作,等等。其中,针对图像显示组件31的触发操作可包括但不限于:针对图像显示组件的点击操作、按压操作等。针对目标直播画面的按压操作可以是长按操作(即按压时长大于时长阈值的操作)或短按操作(即按压时长小于时长阈值的操作),对此不作限定。在目标直播画面中输入的预设手势可根据业务需求设置;关于目标直播画面的语音识别口令是指用于触发对目标直播画面进行图像识别的语音口令。相应的,主播终端可实时检测针对目标直播画面的目标操作;若检测到该目标操作,则可显示资源选择预览图,该资源选择预览图在后续所提及的界面示意图(如图3a)中采用32进行标识说明。
其中,资源选择预览图可以是在目标直播画面被触发后实时生成的,也可以是在目标直播画面被触发前预先生成的,对此不作限制。具体的,资源选择预览图中可至少包括各物体资源的资源标识321;相应的,生成资源选择预览图的具体实施方式可包括如下步骤:首先,主播终端可获取主播用户摆放的各个物体资源的资源标识;其次,主播终端可根据各物体资源的资源标识生成资源选择预览图。其中,获取各个物体资源的资源标识的一种实施方式可以是:由于目标直播画面中包括多个物体资源以及每个物体资源的资源标识,因此可对该目标直播画面进行图像识别,得到各物体资源的资源标识。或者,获取各个物体资源的资源标识的另一种实施方式可以是:主播用户在摆放好各物体资源后,可手动将各物体资源的资源标识以及各物体资源的排布位置等信息输入至主播终端进行缓存;那么此情况下,主播终端便可直接从缓存空间中读取各物体资源的资源标识。
可选的,资源选择预览图中还可包括标题文本322,该标题文本322用于指示关于各物体资源的获取规则。相应的,主播终端在根据各物体资源的资源标识生成资源选择预览图时,还可进一步获取标题文本;从而根据各物体资源的资源标识和标题文本生成资源选择预览图。其中,获取标题文本的一种实施方式可以是:由于主播用户在基于各物体资源进行互动前,通常会讲解关于各物体资源的互动方式(如获取规则、互动主题等);因此可对通过音频采集装置采集到的主播用户侧的语音数据进行语音识别,得到标题文本。或者,获取标题文本的另一种实施方式可以是:主播用户手动将标题文本输入至主播终端进行缓存;那么在此情况下,主播终端便可从缓存空间中读取该标题文本。可选的,该标题文本还可包括直播互动主题;在此情况下,直播互动主题可作为标题文本中的第一标题(如主标题)进行显示,关于各物体资源的获取规则可作为标题文本中的第二标题(如副标题)进行显示。
例如,设物体资源为盲盒,物体资源的资源标识为排列序号。若存在直播互动主题为“抽盲盒赢惊喜”,关于各物体资源的获取规则为“点击对应序号抽盲盒,主播现场开”;则标题文本可包括第一标题(如“抽盲盒赢惊喜”)和第二标题(如“点击对应序号抽盲盒,主播现场开”)。基于此,当目标操作为针对主播用户的用户界面中的图像显示组件31的触发操作时,显示资源选择预览图的示意图可参见图3a所示;当目标操作为针对目标直播画面的按压操作时,显示资源选择预览图的示意图可参见图3b所示;当目标操作为在目标直播画面中输入预设手势(如预设手势N)的操作时,显示资源选择预览图的示意图可参见图3c所示。
进一步的,若资源选择预览图中还包括标题文本,则在显示资源选择预览图之后,主播终端还可对标题文本进行突出显示,以提示标题文本支持修改。其中,突出显示可包括以下至少一项:采用目标显示参数对标题文本进行显示,以及显示关于标题文本的修改提示;此处的目标显示参数包括以下至少一项:目标闪动频率、目标显示颜色以及目标显示亮度。应理解的是,目标显示参数中的任一项的具体取值,以及修改提示均可根据实际业务需求或者经验值设置;例如,设目标闪动频率为1次/秒,则主播终端可按照1秒1次的频率闪动显示标题文本的示意图可参见图3d所示;又如,设目标显示颜色为灰色,则主播终端可采用灰色来显示标题文本的示意图可参见图3e所示;再如,修改提示为“可选择修改”,则主播终端显示该修改提示的示意图可参见图3f所示,等等。
在此情况下,主播用户可根据实际需求确定是否修改标题文本;若欲修改该标题文本,则可输入针对该标题文本的修改操作。相应的,若检测到关于标题文本的修改操作,则主播终端可根据所述修改操作对该标题文本进行修改,以更新资源选择预览图。具体的,此处的修改操作包括触发标题文本的第一操作,和修改标题文本的第二操作;相应的,主播终端若检测到触发标题文本的第一操作,则可输出显示信息输入区域;并在信息输入区域检测第二操作,根据第二操作对标题文本进行修改,以更新显示资源选择预览图。例如,标题文本包括第一标题“抽盲盒赢惊喜”和第二标题“点击对应序号抽盲盒,主播现场开”,修改操作指示了将标题文本的第一标题修改为“抽以下盲盒,赢惊喜”;那么,根据该修改操作对标题文本进行修改,以更新显示资源选择预览图的示意图可参见图3g所示。
需要说明的是,图3a-图3g均只是示例性地表征资源选择预览图的显示形态(如显示位置、显示形状等),并不对此进行限定。例如,在图3a-图3g所示的资源选择预览图中,各物体资源的资源标识(如排列序号)是按照宫格图的形式排列的;但在其他实施例中,资源选择预览图中的各物体资源的资源标识也可按照列表的形式进行排列(如图3h中的左侧图所示),或者随机排列(如图3h中的右侧图所示),等等。又如,图3a-图3g所示的资源选择预览图中还包括了重识别按钮323,该重识别按钮323是指用于触发主播终端重新识别目标直播画面和/或主播用户侧的语音数据的按钮;但在其他实施例中,若资源选择预览图中的各资源标识和标题文本是由从缓存空间读取到的,则资源选择预览图中也可不包括该重识别按钮323。
在一种可选的实施方式中,若资源选择预览图还包括重识别按钮323,则主播用户若对主播终端所识别得到的结果(如物体资源的资源标识、标题文本等)不满意,则还可对该重识别按钮323执行触发操作以触发主播终端进行重识别处理。相应的,主播终端可实时检测重识别按钮323是否被触发;若重识别按钮323被触发,则主播终端可更新显示资源选择预览图。其中,更新显示后的资源选择预览图中的标题文本是重新对语音数据进行语音识别得到的,更新后的资源选择预览图中的资源标识是重新对目标直播画面进行图像识别得到的。例如,在重识别按钮323被触发前,资源选择预览图中的标题文本包括:第一标题“抽盲盒赢惊喜”以及第二标题“点击对应序号抽盲盒,主播现场开”;在重识别按钮323被触发后,通过重新对语音数据进行语音识别得到的标题文本包括:第一标题“抽以下盲盒,赢惊喜”以及第二标题“点击序号便可抽盲盒,主播现场”;那么,更新显示资源选择预览图的示意图可参见图3i所示。应理解的是,若重新识别得到的标题文本与重识别按钮被触发前所显示的标题文本相同,且重新识别得到的资源标识也与重识别按钮被触发前所显示的资源标识相同,则表明更新显示前的资源选择预览图和更新显示后的资源选择预览图是相同的;那么在此情况下,主播终端在更新显示资源选择预览图时,主播用户不会感知到资源选择预览图的变化。
S203,响应针对资源选择预览图的确认操作,将资源选择预览图所对应的目标资源选择图发送至观众终端进行显示。
在具体实现中,若主播用户对终端所显示的资源选择预览图感到满意,即无需调整资源选择预览图后,则可对该资源选择预览图执行确认操作;此处的确认操作可以包括以下任一项:针对资源选择预览图中的确认按钮324的触发操作(如点击操作、按压操作),针对资源选择预览图中的关闭按钮325的触发操作(如点击操作、按压操作)、点击或按压主播用户的用户界面中除资源选择预览图的显示区域以外的任一区域的操作,输入确认语音的操作,等等。相应的,主播终端若检测到针对资源选择预览图的确认操作,则可根据该资源选择预览图生成对应的目标资源选择图,如图3j所示;然后,可将该目标资源选择图发送至观众终端进行显示,使得观众用户通过目标资源选择图获取至少一个物体资源,如图3k所示。
可选的,在检测到针对资源选择预览图的确认操作后,主播终端可关闭资源选择预览图,并在主播用户的用户界面中继续显示新的直播画面,如图3l所示。进一步的,若每个物体资源均为盲盒,则主播用户还可在新的主播画面中开启(拆开)盲盒以公开盲盒内的物体。相应的,主播终端还可实时在新的直播画面中检测目标盲盒是否被开启;若在新的直播画面中检测到目标盲盒被开启,则可将目标盲盒内的目标物体的物体图像发送至目标观众终端进行显示,如图3m所示;其中,目标盲盒为任一盲盒,目标观众终端为成功获取目标盲盒的观众终端。
本发明实施例中的主播终端可根据目标直播画面中的各个物体资源的资源标识生成电子版的资源选择预览图,并在目标直播画面被触发时显示该资源选择预览图。然后,可响应针对该资源选择预览图的确认操作,将资源选择预览图所对应的目标资源选择图发送至观众客户端进行显示。通过为观众用户提供一个目标资源选择图,可使得观众用户能够直观地通过选中目标资源选择图中的目标资源标识,来获取相应的目标物体资源;这样可丰富直播间的资源获取方式,提升资源获取的直观性和趣味性,从而提升观众用户的互动积极性,进而提升用户粘度。
基于上述描述,本发明实施例还提出一种更为具体的图像处理方法。该图像处理方法可由上述所提及的直播系统中的主播终端执行,或者由主播终端中运行的直播客户端执行;为便于阐述,后续均以主播终端执行该图像处理方法为例进行说明。并且,在本发明实施例中,主要以资源选择预览图包括各物体资源的资源标识和标题文本,且各物体的资源标识通过图像识别得到,标题文本通过语音识别得到为例进行说明。请参见图4,该图像处理方法可包括以下步骤S401-S405:
S401,在主播用户的用户界面中显示目标直播画面,该目标直播画面中包括多个物体资源以及每个物体资源的资源标识。
S402,若目标直播画面被触发,则对目标直播画面进行图像识别,得到目标直播画面中的各物体资源的资源标识。
在具体实现中,涉及了一种图像识别技术;该图像识别技术的过程主要分为以下几步:信息的获取、预处理、特征抽取和选择、分类器设计和分类决策。其中,信息的获取是指将光或/声音等信息转化为电信息;也就是获取直播间场景的基本信息并通过卷积神经网络的方法将其转化为机器能够认识的信息。预处理是指图像处理中的去噪、平滑、变换等操作,从而加强直播间所涉及的直播画面的重要特征。特征抽取和选择是指在模式识别中,需要进行特征的抽取和选择;简单的理解就是机器所研究的图像是各式各样的,可通过这些图像所具有的本身特征来识别,而获取这些特征的过程就是特征抽取,而从抽取得到的特征中选取有用特征的操作便可称为特征选择。分类器设计是指通过训练而得到一种识别规则,通过此识别规则可以得到一种特征分类,使图像识别技术能够得到高识别率。分类决策是指在特征空间中对被识别对象进行分类,从而更好地识别所研究的对象具体属于哪一类。
该图像识别技术可主要通过卷积神经网络(Convolutional Neural Networks,CNN)来实现,该卷积神经网络的优势在于:其利用了“同一图像中相邻像素的强相关性和强相似度”这一原理,即利用了“在一张图像中的两个相邻像素,比图像中两个分开的像素更具关联性”的原理;这样可使得在图像识别过程中,通过考虑同一图像中相邻像素的强相关性和强相似度来得到识别结果,提升识别结果的准确性。基于上述图像识别技术的相关描述,主播终端可通过调用卷积神经网络来识别得到目标直播画面中的各物体资源的资源标识。
相应的,在步骤S402的具体实施过程中,若目标直播画面被触发,则可先获取卷积神经网络;其中,该卷积神经网络是预先基于机器学习的原理,采用大量的样本进行网络训练得到的。此处的机器学习是AI的核心,是使计算机设备具有智能的根据途径;所谓的机器学习是一门多领域交叉学科,涉及概率论、统计学、逼近论、凸分析、算法复杂度理论等多门学科;其专门研究计算机设备怎样模拟或实现人类的学习行为,以获取新的知识或技能,重新组织已有的知识结构使之不断改善自身的性能。
然后,可调用卷积神经网络对目标直播画面进行图像识别,得到目标直播画面中的各物体资源的资源标识。具体的,本发明实施例采取了分两步的基于深度学习的识别方案进行图像识别,以提升图像识别结果的准确性;此处的识别方案可包括如下两部分:文本行检测+文本行识别。那么基于此识别方案,主播终端在调用卷积神经网络对目标直播画面进行图像识别,得到目标直播画面中的各物体资源的资源标识时,可先调用卷积神经网络定位出目标直播画面中的文本区域;然后再调用卷积神经网络采用端到端的算法,对文本区域进行文本识别,得到目标直播画面中的各物体资源的资源标识。其中,调用卷积神经网络定位出目标直播画面中的文本区域的具体实施方式可包括以下任一种:
实施方式一:卷积神经网络在实施的过程中,实际上可分为两层:一个是卷积层,一个是汇聚层。具体的,可先调用卷积神经网络中的卷积层将目标直播画面分散成多个目标尺寸的图块(或称为小像素块);此处的目标尺寸可根据经验值或者需求设置,例如可设置目标尺寸为3*3或者5*5等等。并将分别采用相应的数字表示各个图块中的内容,得到各个图块的输出值;其中,每个图块的输出值可为三维数值,且该三维数据是通过采用数轴分别代表图块的高度、宽度和颜色得到的。然后,可将各个图块的输出值排列在图组中;此处的图组可以是三维或四维,甚至更多维的。最后,可调用卷积神经网络中的汇聚层将这个三维(或是四维)图组的空间维度与采样函数结合起来,从而输出一个仅包含了目标直播画面中相对重要的部分画面区域(即文本区域)的联合数组;该联合数组不仅能使卷积神经网络计算负担最小化,还能有效避免过度拟合的问题。在得到联合数组后,便可根据该联合数组确定出目标直播画面中的文本区域。
实施方式二:可采用文本行检测算法并调用卷积神经网络对目标直播画面进行区域检测,从而定位出目标直播画面中的文本区域。此处的文本行检测算法源于物体识别的算法,其可包括但不限于:Faster R-CNN算法、由Faster R-CNN引发产生的CTPN(Connectionist Text Proposal Network,连接文本提议网络)算法、SSD算法、由SSD(Single Shot MultiBox Detector,一种使用单个深度神经网络进行检测的算法)引出的Textboxes(文本框)算法和Textboxes++算法,全卷积网络(Fully ConvolutionalNetworks,FCN)算法、由FCN或U-Net算法引出的EAST(Efficient and Accuracy SceneText,高效准确的场景文本)算法,等等。其中,FasterR-CNN主要使用神经网络RPN(RegionProposal Networks,区域候选网络),来代替传统的R-CNN(Region-CNN)和SPPNet(SpatialPyramid Pooling Convolutional Networks,空间金字塔池化卷积网络);其主要原理为:通过卷积神经网络来获取物体框,然后再使用后续的CNN来对物体框进行检测,进而定位出文本区域。SSD的主要原理如下:将同一张图片分成了多个级别,从每个级别到其下一个级别采用降采样的方式,从而检测出每个级别图片里的物体框,并予以呈现。FCN的主要原理如下:采用卷积神经网络,通过提取特征不断地进行卷积与池化操作,使得目标直播画面越来越小;接着再进行反卷积与反池化操作,使目标直播画面不断变大;进而找到物体边缘,从而定位到文本区域的边缘。
S403,根据各物体资源的资源标识生成资源选择预览图。
在一种实施方式中,可直接根据各物体资源的资源标识生成资源选择预览图。具体的,可按照各物体资源在目标直播界面中的排布方式(包括排列顺序以及排列形状),对各物体资源的资源标识进行排布,以得到资源选择预览图。这样可使得资源选择预览图中的各资源标识的排布方式与各物体资源在目标直播界面中的排布方式相同,从而便于用户在提前通过目标直播界面记住自己想要获取的物体资源的排列位置(如第一行第三个),以在主播用户开启互动活动并触发在观众终端显示资源选择预览图后,可直接选中资源选择预览图中位于用户记住的排列位置(即第一行第三个)的资源标识以获取相应的物体资源,进而实现用户所见即所得的效果。
再一种实施方式中,可对主播用户侧的语音数据进行语音识别,得到标题文本;然后,根据标题文本和各物体资源的资源标识,生成资源选择预览图。其中,主播终端进行语音识别的原理图可一并参见图5a所示:首先,可预先准备一个包含多个语音样本的语音数据库;并对该语音数据库中的语音样本进行特征提取,采用特征提取所得到的特征参数进行声学模型训练,得到声学模型(Acoustic Model,AM);此处的声学模型可理解为是对声音的建模,能够把语音输入转换成声学表示的输出,准确的说,是给出语音属于某个声学符号的概率。其次,还可预先准备包含多个文本样本的文本数据库,并采用文本数据库中的文本样本进行语言模型训练,得到语言模型(Language Model,LM);此处的语言模型是指用于计算一个句子出现概率的模型,其主要用于决定哪个词序列的可能性更大,或者在出现了几个词的时候预测下一个即将出现的词语。另外,还可预先准备一个字典;此处的字典可理解为是字词对应的音素集合,其主要包括字词和音素之间的映射关系。然后,可根据训练得到的声学模型、语言模型以及字典构建一个语音识别网络,该语音识别网络可包括多条识别路径,每条识别路径对应输出的文本不同。
相应的,对主播用户侧的语音数据进行语音识别,得到标题文本的具体实施方式可以包括以下步骤s11-s13:
s11,对主播用户侧的语音数据进行特征提取,得到目标特征参数。
需说明的是,本发明实施例所提及的特征参数均可以采用特征矢量进行表示。在一种具体实施方式中,可直接对主播用户侧的语音数据进行特征提取,得到目标特征参数。再一种具体实施方式中,可先采用静音切除算法对主播用户侧的语音声音进行分析;此处的静音切除算法是指从声音信号流中识别和消除长时间的静音期的算法,如VAD(VoiceActivity Detection,语音端点检测)算法。其次,可根据分析结果将主播用户侧的语音数据进行分帧,以将主播用户侧的语音数据切开成一小段一小段,每小段称为一帧语音数据。具体的,可根据分析结果采用移动窗函数对主播用户侧的语音数据进行滑窗分帧处理,得到多帧语音数据;每一帧语音数据均不包括静音,且任意两帧相邻的语音数据之间可存在交叠。例如,参见图5b所示:设移动窗函数的窗口尺寸为25毫秒,且每次滑窗的步长为15毫秒;则每帧语音数据的长度为25毫秒,且每相邻两帧语音数据之间可存在25-15=10毫秒的交叠。然后,可对多帧语音数据进行特征提取,得到目标特征参数。可见,此实施方式通过把主播用户侧的语音数据中的首尾端的静音切除,可有效减少对后续步骤造成的干扰。
进一步的,由于主播用户在直播过程中,其旁边可能存在工作人员,因此采集到的主播用户侧的语音数据可能包括工作人员的语音数据,这样可能导致特征提取所得到的目标特征参数的准确性较低。基于此,为了进一步提升目标特征参数的准确性,主播终端在得到多帧语音数据后,还可根据人耳的生理特性,将每帧语音数据变成一个多维向量。其次,分别对各帧语音数据对应的多维向量进行声学特征提取,得到各帧语音数据对应的声学特征。然后,可采用DTW(Dynamic Time Waplng,动态时间规整)算法根据各帧语音数据对应的声学特征和提前采集得到的主播用户的声学特征模板,从多帧语音数据中筛选出主播用户的目标语音数据;其中,DTW算法的原理为:分别计算各帧语音数据对应的声学特征和声学特征模板之间的相似度,并根据相似度从多帧语音数据中筛选出目标语音数据。最后,可对目标语音数据进行特征提取,得到目标特征参数。采用此方式可有效过滤掉工作人员的语音数据,通过只对主播用户的目标语音数据进行特征提取,可有效提升目标特征参数的准确性。
s12,根据目标特征参数从语音识别网络中的各识别路径中,搜索出与目标特征参数相匹配的目标识别路径。
在具体实现中,可先采用语音解码和搜索算法将该目标特征参数和语音识别网络中的各识别路径进行相似度匹配;然后,可根据匹配结果从语音识别网络中搜索得到一条目标识别路径。此处的语音解码和搜索算法在运用过程中,所依据的是对语音识别网络中的声学模型打分和语言模型打分。
需要说明的是,本发明实施例主要是以由主播终端进行语音识别为例进行说明的;在其他实施例中,也可由服务器进行语音识别。在此情况下,主播终端在采集到主播用户侧的语音数据后,可对主播用户侧的语音数据进行压缩编码,并将压缩编码得到的码流数据上传至服务器。相应的,服务器在接收到码流数据后,可对码流数据进行解压转码,得到主播用户侧的语音数据;然后执行步骤s12-s13以得到标题文本,并将得到的标题文本返回给主播终端。
s13,按照目标识别路径,分别调用语音识别网络中的声学模型、字典和语言模型对目标特征参数进行识别处理,得到标题文本。
在具体实施过程中,可按照目标识别路径调用语音识别网络中的声学模型,对目标特征参数进行识别,得到目标声学符号。其次,调用语音识别网络中字典和语言模型对目标声学符号进行识别,得到初始文本。然后,可根据初始文本得到标题文本。在一种实施方式中,可直接将初始文本作为标题文本。再一种实施方式中,还可联动大数据以筛选出初始文本中的核心关键词,并根据筛选出的核心关键词生成标题文本(如主副标题)。
具体的,主播终端可向服务器请求CDN(Content Delivery Network,内容分发网络)大数据;相应的,服务器可从云储存库里拉取到CDN大数据,并将该CDN大数据下发至主播终端。主播终端在接收到CDN大数据后,可联动AI(人工智能)技术,以去除初始文本中的口语化词汇(如哦,吧,嗯等)。并在去除口语化词汇所得到的剩余文本中筛选出重复次数较多(即重复次数大于次数阈值)的词汇,采用筛选出的词汇生成标题文本。例如,设主播用户连续说了2次“我们接下来要进行惊喜抽盲盒游戏哦”,则主播终端可采用上述方法得到标题文本为“抽盲盒赢惊喜”。可见,此实施方式通过去除口语化词汇以及考虑各词汇的重复次数,可有效提升标题文本的准确性。
应理解的是,由前述可知,若主播用户对主播终端生成的标题文本不满意,则还可主动手动修改该标题文本;或者通过触发重识别按钮来触发主播终端重新生成标题文本,具体实施方式可参见上述发明实施例的相关描述,在此不再赘述。
S404,显示资源选择预览图。
S405,响应针对资源选择预览图的确认操作,将资源选择预览图所对应的目标资源选择图发送至观众终端进行显示,使得观众用户通过目标资源选择图获取至少一个物体资源。
本发明实施例中的主播终端可根据目标直播画面中的各个物体资源的资源标识生成电子版的资源选择预览图,并在目标直播画面被触发时显示该资源选择预览图。然后,可响应针对该资源选择预览图的确认操作,将资源选择预览图所对应的目标资源选择图发送至观众客户端进行显示。通过为观众用户提供一个目标资源选择图,可使得观众用户能够直观地通过选中目标资源选择图中的目标资源标识,来获取相应的目标物体资源;这样可丰富直播间的资源获取方式,提升资源获取的直观性和趣味性,从而提升观众用户的互动积极性,进而提升用户粘度。
基于上述图像处理方法实施例的相关描述,本发明实施例还提出一种资源获取方法。该资源获取方法可由上述所提及的直播系统中的目标观众终端执行,或者由目标观众终端中运行的直播客户端执行;为便于阐述,后续均以目标观众终端执行该图像处理方法为例进行说明。请参见图6,该资源获取方法可包括以下步骤S601-S602:
S601,在观众用户的用户界面中显示关于目标直播画面的目标资源选择图。
其中,目标直播画面是由主播终端通过服务器下发至目标观众终端的,且该目标直播画面包括多个物体资源以及每个物体资源的资源标识。观众用户的用户界面中所显示的目标资源选择图是根据上述图2或图4所示的图像处理方法得到的,且该目标资源选择图在后续所提及的界面示意图(如图7a)中均采用71进行标识说明;其中,目标资源选择图至少包括目标主播画面中的多个物体资源的资源标识,且存在至少一个物体资源的资源标识均处于解锁状态。
在具体实现中,观众用户可通过目标观众终端进入主播用户的直播间以观看主播用户的直播内容。随着观众用户进入直播间的时刻不同,目标观众终端通过步骤S601显示关于目标直播画面的目标资源选择图的实施方式也随之不同,具体可包括如下几种实施方式:
在一种实施方式中,若观众用户进入主播用户的直播间的时刻等于主播终端通过服务器下发目标资源选择图的时刻,则在观众用户进入主播用户的直播间时,目标观众终端可正好接收到主播终端通过服务器发送的目标资源选择图。那么,目标观众终端在执行步骤S601时,可直接在观众用户的用户界面中显示主播终端通过服务器发送的目标资源选择图和目标直播画面。在此实施方式下,在观众用户的用户界面中显示的目标资源选择图为主播终端发送的目标资源选择图(即上述图2或图4所示的图像处理方法得到的目标资源选择图);且在观众用户的用户界面中显示的目标资源选择图中的各个物体资源的资源标识均处于解锁状态。
再一种实施方式中,若观众用户进入主播用户的直播间的时刻早于主播终端通过服务器下发目标资源选择图的时刻,则在观众用户进入主播用户的直播间时,目标观众终端还未接收到主播终端通过服务器发送的目标资源选择图。那么,目标观众终端在执行步骤S601时,可先在观众用户的用户界面中显示主播终端通过服务器发送的目标直播画面。若接收到主播终端发送的目标资源选择图,则再显示目标资源选择图,如图7a所示。在此实施方式下,在观众用户的用户界面中显示的目标资源选择图为主播终端发送的目标资源选择图(即上述图2或图4所示的图像处理方法得到的目标资源选择图);且在观众用户的用户界面中显示的目标资源选择图中的各个物体资源的资源标识均处于解锁状态。
再一种实施方式中,若观众用户进入主播用户的直播间的时刻晚于主播终端通过服务器下发目标资源选择图的时刻,则在观众用户进入主播用户的直播间时,可能已存在其他观众用户使用其他观众终端通过主播终端发送的目标资源选择图获取了部分物体资源。那么,目标观众终端在执行步骤S601时,可直接在观众用户的用户界面中,显示根据已被获取的物体资源的资源标识更新主播终端发送的目标资源选择图所得到的更新后的目标资源选择图。或者,可先在观众用户的用户界面中显示一个资源选择提示,以提示观众用户查看目标资源选择图;当该资源选择提示被触发时,在观众用户的用户界面中,显示根据已被获取的物体资源的资源标识更新主播终端发送的目标资源选择图所得到的更新后的目标资源选择图。在此实施方式下,在观众用户的用户界面中显示的目标资源选择图为对主播终端发送的目标资源选择图(即上述图2或图4所示的图像处理方法得到的目标资源选择图)进行更新后所得到的更新后的目标资源选择图;且在观众用户的用户界面中显示的目标资源选择图中存在至少一个物体资源的资源标识处于解锁状态。其中,处于锁定状态的资源标识对应的物体资源为已被获取的物体资源。需要说明的是,在此实施方式下,若在观众用户进入主播用户的直播间时,目标直播画面中的各个物体资源均未被获取(即不存在已被获取的物体资源的资源标识),则在观众用户的用户界面中显示的目标资源选择图与主播终端发送的目标资源选择图相同。
为便于阐述,后续所提及的目标观众终端通过步骤S201所显示的目标资源选择图均以主播终端通过服务器发送的目标资源选择图为例进行说明。
S602,若目标资源选择图中处于解锁状态的目标资源标识被选中,则显示目标资源标识对应的目标物体资源的获取结果提示。其中,获取结果提示是根据在目标资源标识被选中时,请求获取目标物体资源所得到的反馈信息生成的。
在具体实现中,目标观众终端在显示目标资源选择图后,观众用户便可通过选中目标资源选择图中的一个或多个资源标识以获取相应的物体资源。相应的,目标观众终端在检测到目标资源标识被选中后,便可向服务器发送携带目标资源标识的目标资源获取请求,该目标资源获取请求用于请求获取关于目标资源标识对应的目标物体资源。具体的,若目标资源标识所对应的目标物体资源为以下任一种:用于奖励(赠送)给观众用户的物品、用于实现歌曲点播的话筒设备等;则观众用户在获取目标物体资源时,无需支付相应的电子资源(如购买费用);那么在此情况下,目标观众终端在检测到目标资源标识被选中后,便可直接向服务器发送携带目标资源标识的目标资源获取请求。若目标资源标识所对应的目标物体资源为:主播用户推荐购买的物品;则观众用户在获取目标物体资源时,需要支付相应的电子资源(如购买费用);那么在此情况下,目标观众终端在检测到目标资源标识被选中后,可输出电子资源获取界面;并在通过该电子资源获取界面成功获取到电子资源后,再向服务器发送携带目标资源标识的目标资源获取请求。
在实际应用中,可能存在如下情况:虽然用户通过目标观众终端选中目标资源标识时,目标物体资源还未被其他观众终端获取;但由于网络延时、阻塞等情况,导致目标观众终端向服务器发送目标资源获取请求存在延时,从而导致在服务器接收到目标观众终端的目标资源获取请求之前,已接收到其他观众终端发送的携带目标资源标识的资源获取请求,并将该目标资源标识对应的目标物体资源分配给其他观众终端了;即可能存在目标资源标识对应的目标物体资源被其他观众终端获取到的情况。因此,服务器在接收到目标资源获取请求后,可检测目标物体资源是否已被分配给其他观众终端;并根据检测结果生成关于目标资源获取请求的反馈信息,然后将反馈信息返回给目标终端。其中,该反馈信息可用于指示目标观众终端是否成功获取到目标物体资源;具体的,若检测到目标物体资源已被分配给其他观众终端,则反馈信息可用于指示目标观众终端获取目标物体资源失败;若检测到目标物体资源未被分配给其他观众终端,则可将目标物体资源分配给目标观众终端,此情况下的反馈信息可用于指示目标观众终端获取目标物体资源成功。
相应的,目标观众终端可接收关于目标资源获取请求的反馈信息;并根据反馈信息显示关于目标物体资源的获取结果提示72;此处的获取结果提示72可至少包括提示文本721,该提示文本721用于提示获取目标物体资源成功或失败。例如,设被选中的目标资源标识为1号,且提示文本721用于提示获取目标物体资源成功为例;则该提示文本721可以是“你已成功开启1号盲盒,待会主播现场开启盲盒,开启后盲盒里物体的物体图像会通过系统同步给你”,那么显示获取结果提示72的示意图可参见图7b所示。需要说明的是,图7b只是示例性地表征获取结果提示72的输出示意图,并不对此进行限定;例如在图7b中,目标观众终端是直接在显示有目标资源选择图的界面(即图7b左侧所示的界面)中,弹窗显示获取结果提示72的;但在其他实施例中,目标观众终端可在检测到目标资源标识被选中后,可先从显示有目标资源选择图的界面(即图7b左侧所示的界面)切换至电子资源获取界面;并在电子资源获取界面获取相应的电子资源后,再从电子资源界面切换至观众用户的用户界面,并在观众用户的用户界面中显示获取结果提示72,等等。
在一种可选的实施方式中,获取结果提示72还可包括第一组件722,该第一组件722是指可用于触发显示目标资源选择图的组件。在实际应用中,若用户想要继续选中其他资源标识以获取其他物体资源,则可对该第一组件722执行触发操作;相应的,若第一组件722被触发,则目标观众终端可关闭获取结果提示72,并更新显示目标资源选择图,如图7c所示。其中,更新显示后的目标资源选择图中的目标资源标识处于锁定状态,以避免同个物体资源被多个用户打开的情况。
应理解的是,图7c只是示例性表征目标资源标识处于锁定状态的示意图,并不对此进行限定。例如。图7c是通过将目标资源标识置为灰色状态,以表示目标资源标识处于锁定状态;但在其他实施例中,也可在目标资源标识的显示位置处显示一个锁具图标,以表示目标资源标识处于锁定状态,等等。在更新显示目标资源选择图之后,用户还可通过选中目标资源选择图中的其他资源标识以触发目标观众终端获取其他资源标识所指示的其他物体资源。相应的,当更新显示后的目标资源选择图中的其他资源标识被选中时,目标观众终端还可显示其他资源标识对应的其他物体资源的获取结果提示。其中,其他资源标识是指更新显示后的目标资源选择图中处于解锁状态的任一资源标识;其他物体资源的获取结果提示是根据在其他资源标识被选中时,请求获取其他物体资源所得到的反馈信息生成的。具体的,当更新显示后的目标资源选择图中的其他资源标识被选中时,目标观众终端可先发送携带其他资源标识的其他资源获取请求,以请求获取其他资源标识所指示的其他物体资源;然后,可接收关于其他资源获取请求的反馈信息;并根据接收到的反馈信息显示其他物体资源的获取结果提示。
再一种可选的实施方式中,获取结果提示72还包括第二组件723,该第二组件是指可用于触发显示直播画面的组件。在实际应用中,若用户继续观看直播画面,则可对该第二组件723执行触发操作;相应的,若第二组件723被触发,则目标观众终端可关闭获取结果提示72和目标资源选择图;并在观众用户的用户界面中继续显示新的直播画面,如图7d所示。进一步的,若第二组件被触发时,目标直播画面包括的多个物体资源中存在未被获取的剩余物体资源,则目标观众终端在观众用户的用户界面继续显示新的直播画面的过程中,还可在观众用户的用户界面中,显示用于触发显示目标资源选择图的触发入口73,如图7e所示。在此情况下,若观众用户后续想继续通过目标资源选择图来获取物体资源,则可对该触发入口73执行触发操作;相应的,目标观众终端可响应针对触发入口73的触发操作,在观众用户的用户界面中更新显示目标资源选择图。其中,更新显示后的目标资源选择图中的各剩余物体资源的资源标识处于解锁状态,已被获取的各物体资源的资源标识处于锁定状态;例如设剩余物体资源的资源标识(如排列序号)依次为:2、3、4、5、8、10以及11,则更新显示目标资源选择图的示意图可参见图7e所示。然后,用户可继续在更新后的目标资源选择图中选择处于解锁状态的资源标识,以获取相应的物体资源。
需要说明的是,无论是更新显示前的目标资源选择图还是更新显示后的目标资源选择图,均还可包括关闭按钮;观众用户也可通过触发该关闭按钮,以触发目标观众终端关闭目标资源选择图,并在观众用户的用户界面中继续显示新的直播画面。还需说明的是,由于目标资源选择图是分别发送给各个观众终端的,因此在目标观众终端显示目标资源选择图的过程中,其他观众终端也可同步显示该目标资源选择图;相应的,其他观众用户也可在其他观众终端显示的目标资源选择图中选中自己感兴趣的物体资源的资源标识,以获取相应的物体资源。在此情况下,若存在某个物体资源A被其他观众终端成功获取到,则目标观众终端可接收到服务器下发的资源分配通知;其中,该资源分配通知用于通知物体资源A已被其他观众终端成功获取到。相应的,目标观众终端若在接收到资源分配通知时,正在显示目标资源选择图,则可直接将目标资源选择图中物体资源A的资源标识从解锁状态切换至锁定状态。
再一种可选的实施方式中,若提示文本用于提示获取目标物体资源成功,且目标物体资源为目标盲盒,则由前述可知,主播用户在直播开启目标盲盒之后,主播终端可将目标盲盒内的目标物体的物体图像发送至目标观众终端进行显示。相应的,目标观众终端还可检测是否接收到主播终端发送的目标盲盒内的目标物体的物体图像;若接收到主播终端发送的目标盲盒内的目标物体的物体图像,则可显示该目标物体的物体图像。在一种实施方式中,目标观众终端在接收到主播终端发送的目标盲盒内的目标物体的物体图像后,可直接显示该目标物体的物体图像。再一种实施方式中,目标观众终端在接收到主播终端发送的目标盲盒内的目标物体的物体图像后,可根据目标物体的物体图像生成盲盒开启通知74;然后,显示该盲盒开启通知74,如图7f所示。可选的,盲盒开启通知74除了包括目标物体的物体图像741后,还可包括通知确认按钮742和/或通知关闭按钮743;相应的,当通知确认按钮742和/或通知关闭按钮743被触发时,目标观众终端可关闭盲盒开启通知74,并继续在观众用户的用户界面显示新的直播画面。
本发明实施例中的观众终端可在观众用户的用户界面中显示关于目标直播画面的目标资源选择图;其中,目标资源选择图可至少包括目标直播画面中的多个物体资源的资源标识,且存在至少一个物体资源的资源标识处于解锁状态。当目标资源选择图中处于解锁状态的目标资源标识被选中时,可显示目标资源标识对应的目标物体资源的获取结果提示;该获取结果提示是根据在目标资源标识被选中时,请求获取目标物体资源所得到的反馈信息生成的。可见,观众终端通过为观众用户提供一个目标资源选择图,可使得观众用户能够直观地通过选中目标资源选择图中的目标资源标识,来获取相应的目标物体资源;这样可丰富直播间的资源获取方式,提升资源获取的直观性和趣味性,从而提升观众用户的互动积极性,进而提升用户粘度。并且,还可通过显示获取结果提示,来直观地告诉观众用户关于目标物体资源的获取结果,可进一步提升用户粘度。
基于上述描述,为了更清楚主播用户和观众用户之间的互动过程,以及观众用户获取物体资源的具体过程;下面以物体资源为盲盒,物体资源的资源标识为排列序号(简称序号)为例,并结合图8所示的流程图对主播用户和观众用户之间的互动过程作进一步阐述:
1)各个观众用户进入主播用户的直播间,以观看主播用户的直播。
2)主播用户可在主播终端的摄像装置的拍摄范围内摆放好要互动抽奖的各个盲盒,并为各个盲盒设置好对应的序号;此时的主播终端可通过摄像装置采集各个盲盒以及各个盲盒的序号等环境信息,以及通过音频采集装置采集主播用户侧的语音数据。然后,可根据采集到的环境信息和主播用户侧的语音数据在主播用户的用户界面中显示目标直播画面以及图像输出组件;该目标直播画面中包括各个盲盒以及各个盲盒的序号。然后,主播用户可点击图像输出组件以触发主播终端进行识别。相应的,主播终端在检测到图像输出组件被点击后,可开启图像识别功能并全程结合语音识别,以生成资源选择预览图,该资源选择预览图中包括各个盲盒的序号。其中,语音识别的目的是为了检测和校对主播用户口述的语音数据(即主播用户侧的语音数据),以生成抽盲盒互动游戏的标题文本(如主副标题);图像识别的目的是为了基于目标直播画面,识别得到各盲盒的序号,并将各盲盒的序号按照宫格图的形式排列,以方便观众用户互动操作。主播终端在生成资源选择预览图后,可在主播用户的用户界面中显示该资源选择预览图,以便主播用户对该资源选择预览图进行确认,或进行修改和确认。
3)主播用户确认资源选择预览图后,主播终端向各个观众终端推送资源选择预览图对应的目标资源选择图;使得各个观众终端以弹窗的形式显示目标资源选择图,从而使得观众用户可通过该目标资源选择图参与抽盲盒互动。具体的,在主播终端显示资源选择预览图后,主播用户可点击资源选择预览图中的确认按钮;此时主播终端可请求服务器向主播用户的直播间中的各个观众用户的观众终端推送资源选择预览图对应的目标资源选择图。此情况下,这个直播间的所有观众用户均可看到该目标资源选择图,并参与到抽盲盒的互动游戏中。任一观众用户均可点击目标资源选择图中的序号,并支付获取相应物体资源所需的电子资源,以并开启盲盒(后续以盲盒A为例);此时,服务器可记录观众用户的用户标识(如id(Identity document)号,用户昵称等)、被开启的盲盒A的序号和开启时间点等相关信息。当盲盒A被开启后,可在目标资源选择图中将盲盒A的序号置为锁定状态(如灰色状态),以避免其他观众用户再次选中盲盒A的序号,从而避免盲盒A被多个观众用户获取。
4)主播用户现场开启观众用户抽的盲盒A,公布结果并向对应的观众用户推送所抽盲盒A的开启结果。具体的,当主播用户现场直播开启用户抽的盲盒A并公布用户所抽盲盒A的开启结果时,主播终端可再次进行语音识别和图像识别(识别原理同上);以通过语音识别得到主播用户所说的观众用户的用户标识(如用户昵称)、盲盒昵称、盲盒的序号等信息,并图像识别得到主播用户手中开启的盲盒A中的公仔的图形特征,并根据图形特征和盲盒昵称从商品列表详情页或者数据库中匹配得到盲盒A中的公仔对应的详情图(即物体图像)。识别成功后,主播终端可通过服务器向识别得到的用户标识所指示的观众用户发送公布结果,公布结果包括用户标识(如用户昵称)、盲盒A的序号、盲盒A中的公仔的详情图。相应的,观众终端在接收到公布结果后,可根据公布结果在观众用户的用户界面中输出显示盲盒开启通知,该盲盒开启通知至少包括公仔的详情图;以便于观众用户可以清晰地知道自己抽中了什么公仔,不会轻易错过观众用户所选的盲盒A的开启结果,还可便于观众用户后期收货时核对盲盒A里的公仔,实现物体溯源的效果。
由此可见,本发明实施例可实现如下有益效果:基于语音识别和图像识别,根据主播用户口述的语音数据和直播间所对的目标直播画面,将直播间抽盲盒的画面和序号智能生成电子版的目标资源选择图(如宫格图);当主播用户开启抽盲盒的互动游戏时,观众用户可以实时点击用户界面中显示的目标资源选择图中的对应序号进行付款以抽取盲盒。这样可使得观众用户能够直观地通过选中目标资源选择图中的资源标识来获取相应的物体资源,丰富了直播间的资源获取方式,提升资源获取的直观性和趣味性,从而提升观众用户的互动积极性,进而提升用户粘度。并且,针对已抽的盲盒可置灰处理,这样可避免多个用户同时抽而产生混乱的局面。主播用户开启盲盒时,还可根据观众用户的用户标识自动记录盲盒里的公仔和盲盒的序号,并发送给主播用户和对应的观众用户存档;这样可有效减少灰产,提高电商直播间的互动玩法,进而提升用户互动效率和体验。
基于上述图像处理方法实施例的描述,本发明实施例还公开了一种图像处理装置,所述图像处理装置可以是运行于上述所提及的主播终端中的一个计算机程序(包括程序代码)。该图像处理装置可以执行图2或图4所示的方法。请参见图9,所述图像处理装置可以运行如下单元:
显示单元901,用于在主播用户的用户界面中显示目标直播画面,所述目标直播画面中包括多个物体资源以及每个物体资源的资源标识;
所述显示单元902,用于若所述目标直播画面被触发,则显示资源选择预览图;所述资源选择预览图中至少包括各物体资源的资源标识;
处理单元903,用于响应针对所述资源选择预览图的确认操作,将所述资源选择预览图所对应的目标资源选择图发送至观众终端进行显示,使得观众用户通过所述目标资源选择图获取至少一个物体资源。
在一种实施方式中,所述目标直播画面是通过目标操作被触发的;
所述目标操作包括:针对所述主播用户的用户界面中的图像显示组件的触发操作,针对目标直播画面的按压操作、在所述目标直播画面中输入预设手势的操作,输入关于所述目标直播画面的语音识别口令的操作。
再一种实施方式中,所述资源选择预览图中还包括标题文本,所述标题文本用于指示关于所述各物体资源的获取规则;相应的,所述若所述目标直播画面被触发,则显示资源选择预览图之后,显示单元901还可用于:
对所述标题文本进行突出显示,以提示所述标题文本支持修改;
其中,所述突出显示包括以下至少一项:采用目标显示参数对所述标题文本进行显示,以及显示关于所述标题文本的修改提示;所述目标显示参数包括以下至少一项:目标闪动频率、目标显示颜色以及目标显示亮度。
再一种实施方式中,显示单元901还可用于:
若检测到关于所述标题文本的修改操作,则根据所述修改操作对所述标题文本进行修改,以更新所述资源选择预览图。
再一种实施方式中,显示单元901在用于若所述目标直播画面被触发,则显示资源选择预览图时,可具体用于:
若所述目标直播画面被触发,则对所述目标直播画面进行图像识别,得到所述目标直播画面中的各物体资源的资源标识;
根据所述各物体资源的资源标识生成资源选择预览图,并显示所述资源选择预览图。
再一种实施方式中,显示单元901在用于根据所述各物体资源的资源标识生成资源选择预览图时,可具体用于:
对所述主播用户侧的语音数据进行语音识别,得到标题文本;所述标题文本用于指示关于所述各物体资源的获取规则;
根据所述标题文本和所述各物体资源的资源标识,生成资源选择预览图。
再一种实施方式中,所述资源选择预览图还包括重识别按钮;相应的,显示单元901还可用于:
若所述重识别按钮被触发,则更新显示所述资源选择预览图;
其中,更新显示后的资源选择预览图中的标题文本是重新对所述语音数据进行语音识别得到的,所述更新后的资源选择预览图中的资源标识是重新对所述目标直播画面进行图像识别得到的。
再一种实施方式中,所述每个物体资源均为盲盒,所述盲盒是指内含物体但外表面未阐述物体详情信息的盒子;相应的,显示单元901还可用于:
在检测到针对所述资源选择预览图的确认操作后,关闭所述资源选择预览图,并在所述主播用户的用户界面中继续显示新的直播画面;
若在所述新的直播画面中检测到目标盲盒被开启,则将所述目标盲盒内的目标物体的物体图像发送至目标观众终端进行显示;其中,所述目标盲盒为任一盲盒,所述目标观众终端为成功获取所述目标盲盒的观众终端。
根据本发明的一个实施例,图2或图4所示的方法所涉及的各个步骤均可以是由图9所示的图像处理装置中的各个单元来执行的。例如,图2中所示的步骤S201-S202均可由图9中所示的显示单元901来执行,步骤S203可由图9中所示的处理单元902来执行。又如,图4中所示的步骤S401-S404均可由图9中所示的显示单元901来执行,步骤S405可由图9中所示的处理单元902来执行,等等。
根据本发明的另一个实施例,图9所示的图像处理装置中的各个单元可以分别或全部合并为一个或若干个另外的单元来构成,或者其中的某个(些)单元还可以再拆分为功能上更小的多个单元来构成,这可以实现同样的操作,而不影响本发明的实施例的技术效果的实现。上述单元是基于逻辑功能划分的,在实际应用中,一个单元的功能也可以由多个单元来实现,或者多个单元的功能由一个单元实现。在本发明的其它实施例中,基于图像处理装置也可以包括其它单元,在实际应用中,这些功能也可以由其它单元协助实现,并且可以由多个单元协作实现。
根据本发明的另一个实施例,可以通过在包括中央处理单元(CPU)、随机存取存储介质(RAM)、只读存储介质(ROM)等处理元件和存储元件的例如计算机的通用计算设备上运行能够执行如图2或图4中所示的相应方法所涉及的各步骤的计算机程序(包括程序代码),来构造如图9中所示的图像处理装置设备,以及来实现本发明实施例的图像处理方法。所述计算机程序可以记载于例如计算机可读记录介质上,并通过计算机可读记录介质装载于上述计算设备中,并在其中运行。
本发明实施例中的主播终端可根据目标直播画面中的各个物体资源的资源标识生成电子版的资源选择预览图,并在目标直播画面被触发时显示该资源选择预览图。然后,可响应针对该资源选择预览图的确认操作,将资源选择预览图所对应的目标资源选择图发送至观众客户端进行显示。通过为观众用户提供一个目标资源选择图,可使得观众用户能够直观地通过选中目标资源选择图中的目标资源标识,来获取相应的目标物体资源;这样可丰富直播间的资源获取方式,提升资源获取的直观性和趣味性,从而提升观众用户的互动积极性,进而提升用户粘度。
基于上述图像处理方法实施例以及图像处理装置实施例的描述,本发明实施例还提供一种主播终端。请参见图10,该主播终端可至少包括处理器1001、输入设备1002、输出设备1003以及计算机存储介质1004。其中,终端内的处理器1001、输入设备1002、输出设备1003以及计算机存储介质1004可通过总线或其他方式连接。可选的,主播终端还可包括摄像头、麦克风、话筒等其他硬件装置。
计算机存储介质1004可以存储在主播终端的存储器中,所述计算机存储介质1004用于存储计算机程序,所述计算机程序包括程序指令,所述处理器1001用于执行所述计算机存储介质1004存储的程序指令。处理器1001(或称CPU(Central Processing Unit,中央处理器))是主播终端的计算核心以及控制核心,其适于实现一条或多条指令,具体适于加载并执行一条或多条指令从而实现相应方法流程或相应功能;在一个实施例中,本发明实施例所述的处理器1001可以用于进行一系列的图像处理,具体包括:在主播用户的用户界面中显示目标直播画面,所述目标直播画面中包括多个物体资源以及每个物体资源的资源标识;若所述目标直播画面被触发,则显示资源选择预览图;所述资源选择预览图中至少包括各物体资源的资源标识;响应针对所述资源选择预览图的确认操作,将所述资源选择预览图所对应的目标资源选择图发送至观众终端进行显示,使得观众用户通过所述目标资源选择图获取至少一个物体资源,等等。
本发明实施例还提供了一种计算机存储介质(Memory),所述计算机存储介质是主播终端中的记忆设备,用于存放程序和数据。可以理解的是,此处的计算机存储介质既可以包括主播终端中的内置存储介质,当然也可以包括主播终端所支持的扩展存储介质。计算机存储介质提供存储空间,该存储空间存储了主播终端的操作系统。并且,在该存储空间中还存放了适于被处理器1001加载并执行的一条或多条的指令,这些指令可以是一个或一个以上的计算机程序(包括程序代码)。需要说明的是,此处的计算机存储介质可以是高速RAM存储器,也可以是非不稳定的存储器(non-volatile memory),例如至少一个磁盘存储器;可选的还可以是至少一个位于远离前述处理器的计算机存储介质。
在一个实施例中,可由处理器1001加载并执行计算机存储介质中存放的一条或多条第一指令,以实现上述有关图像处理方法实施例中的方法的相应步骤;具体实现中,计算机存储介质中的一条或多条第一指令由处理器1001加载并执行如下步骤:
在主播用户的用户界面中显示目标直播画面,所述目标直播画面中包括多个物体资源以及每个物体资源的资源标识;
若所述目标直播画面被触发,则显示资源选择预览图;所述资源选择预览图中至少包括各物体资源的资源标识;
响应针对所述资源选择预览图的确认操作,将所述资源选择预览图所对应的目标资源选择图发送至观众终端进行显示,使得观众用户通过所述目标资源选择图获取至少一个物体资源。
在一种实施方式中,所述目标直播画面是通过目标操作被触发的;
所述目标操作包括:针对所述主播用户的用户界面中的图像显示组件的触发操作,针对目标直播画面的按压操作、在所述目标直播画面中输入预设手势的操作,输入关于所述目标直播画面的语音识别口令的操作。
再一种实施方式中,所述资源选择预览图中还包括标题文本,所述标题文本用于指示关于所述各物体资源的获取规则;相应的,所述若所述目标直播画面被触发,则显示资源选择预览图之后,所述一条或多条第一指令还可以由处理器1001加载并具体执行:
对所述标题文本进行突出显示,以提示所述标题文本支持修改;
其中,所述突出显示包括以下至少一项:采用目标显示参数对所述标题文本进行显示,以及显示关于所述标题文本的修改提示;所述目标显示参数包括以下至少一项:目标闪动频率、目标显示颜色以及目标显示亮度。
再一种实施方式中,所述一条或多条第一指令还可以由处理器1001加载并具体执行:
若检测到关于所述标题文本的修改操作,则根据所述修改操作对所述标题文本进行修改,以更新所述资源选择预览图。
再一种实施方式中,在若所述目标直播画面被触发,则显示资源选择预览图时,所述一条或多条第一指令可由处理器1001加载并具体执行:
若所述目标直播画面被触发,则对所述目标直播画面进行图像识别,得到所述目标直播画面中的各物体资源的资源标识;
根据所述各物体资源的资源标识生成资源选择预览图,并显示所述资源选择预览图。
再一种实施方式中,在根据所述各物体资源的资源标识生成资源选择预览图时,所述一条或多条第一指令可由处理器1001加载并具体执行:
对所述主播用户侧的语音数据进行语音识别,得到标题文本;所述标题文本用于指示关于所述各物体资源的获取规则;
根据所述标题文本和所述各物体资源的资源标识,生成资源选择预览图。
再一种实施方式中,所述资源选择预览图还包括重识别按钮;相应的,所述一条或多条第一指令还可以由处理器1001加载并具体执行:
若所述重识别按钮被触发,则更新显示所述资源选择预览图;
其中,更新显示后的资源选择预览图中的标题文本是重新对所述语音数据进行语音识别得到的,所述更新后的资源选择预览图中的资源标识是重新对所述目标直播画面进行图像识别得到的。
再一种实施方式中,所述每个物体资源均为盲盒,所述盲盒是指内含物体但外表面未阐述物体详情信息的盒子;相应的,所述一条或多条第一指令还可以由处理器1001加载并具体执行:
在检测到针对所述资源选择预览图的确认操作后,关闭所述资源选择预览图,并在所述主播用户的用户界面中继续显示新的直播画面;
若在所述新的直播画面中检测到目标盲盒被开启,则将所述目标盲盒内的目标物体的物体图像发送至目标观众终端进行显示;其中,所述目标盲盒为任一盲盒,所述目标观众终端为成功获取所述目标盲盒的观众终端。
本发明实施例中的主播终端可根据目标直播画面中的各个物体资源的资源标识生成电子版的资源选择预览图,并在目标直播画面被触发时显示该资源选择预览图。然后,可响应针对该资源选择预览图的确认操作,将资源选择预览图所对应的目标资源选择图发送至观众客户端进行显示。通过为观众用户提供一个目标资源选择图,可使得观众用户能够直观地通过选中目标资源选择图中的目标资源标识,来获取相应的目标物体资源;这样可丰富直播间的资源获取方式,提升资源获取的直观性和趣味性,从而提升观众用户的互动积极性,进而提升用户粘度。
基于上述资源获取方法实施例的描述,本发明实施例还公开了一种资源获取装置,所述资源获取装置可以是运行于上述所提及的目标观众终端中的一个计算机程序(包括程序代码)。该资源获取装置可以执行图6所示的方法。请参见图11,所述资源获取装置可以运行如下单元:
第一显示单元1101,用于在观众用户的用户界面中显示关于目标直播画面的目标资源选择图;其中,所述目标资源选择图至少包括所述目标直播画面中的多个物体资源的资源标识,且存在至少一个物体资源的资源标识均处于解锁状态;
第二显示单元1102,用于若所述目标资源选择图中处于所述解锁状态的目标资源标识被选中,则显示所述目标资源标识对应的目标物体资源的获取结果提示;其中,所述获取结果提示是根据在所述目标资源标识被选中时,请求获取所述目标物体资源所得到的反馈信息生成的。
在一种实施方式中,所述获取结果提示包括提示文本,所述提示文本用于提示获取所述目标物体资源成功或失败。
再一种实施方式中,所述获取结果提示还包括第一组件;相应的,第二显示单元1102还可用于:
若所述第一组件被触发,则关闭所述获取结果提示,并更新显示所述目标资源选择图;其中,更新显示后的目标资源选择图中的所述目标资源标识处于锁定状态;
当所述更新显示后的目标资源选择图中的其他资源标识被选中时,显示所述其他资源标识对应的其他物体资源的获取结果提示;其中,所述其他资源标识是指所述更新显示后的目标资源选择图中处于所述解锁状态的任一资源标识。
再一种实施方式中,所述获取结果提示还包括第二组件;相应的,第二显示单元1102还可用于:
若所述第二组件被触发,则关闭所述获取结果提示和所述目标资源选择图;
在所述观众用户的用户界面中继续显示新的直播画面。
再一种实施方式中,若所述第二组件被触发时,所述目标直播画面包括的多个物体资源中存在未被获取的剩余物体资源;则第二显示单元1102还可用于:
在所述观众用户的用户界面中,显示用于触发显示所述目标资源选择图的触发入口;
响应针对所述触发入口的触发操作,在所述观众用户的用户界面中更新显示所述目标资源选择图;其中,更新显示后的目标资源选择图中的各剩余物体资源的资源标识处于所述解锁状态,已被获取的各物体资源的资源标识处于锁定状态。
再一种实施方式中,所述提示文本用于提示获取所述目标物体资源成功,所述目标物体资源为目标盲盒,所述盲盒是指内含物体但外表面未阐述物体详情信息的盒子;相应的,第二显示单元1102还可用于:
若接收到所述主播终端发送的所述目标盲盒内的目标物体的物体图像,则显示所述目标物体的物体图像。
根据本发明的一个实施例,图6所示的方法所涉及的各个步骤均可以是由图11所示的资源获取装置中的各个单元来执行的。例如,图6中所示的步骤S601可由图11中所示的第一显示单元1101来执行,步骤S602可由图11中所示的第二显示单元1102来执行。
根据本发明的另一个实施例,图11所示的资源获取装置中的各个单元可以分别或全部合并为一个或若干个另外的单元来构成,或者其中的某个(些)单元还可以再拆分为功能上更小的多个单元来构成,这可以实现同样的操作,而不影响本发明的实施例的技术效果的实现。上述单元是基于逻辑功能划分的,在实际应用中,一个单元的功能也可以由多个单元来实现,或者多个单元的功能由一个单元实现。在本发明的其它实施例中,基于资源获取装置也可以包括其它单元,在实际应用中,这些功能也可以由其它单元协助实现,并且可以由多个单元协作实现。
根据本发明的另一个实施例,可以通过在包括中央处理单元(CPU)、随机存取存储介质(RAM)、只读存储介质(ROM)等处理元件和存储元件的例如计算机的通用计算设备上运行能够执行如图6中所示的相应方法所涉及的各步骤的计算机程序(包括程序代码),来构造如图11中所示的资源获取装置设备,以及来实现本发明实施例的资源获取方法。所述计算机程序可以记载于例如计算机可读记录介质上,并通过计算机可读记录介质装载于上述计算设备中,并在其中运行。
本发明实施例中的观众终端可在观众用户的用户界面中显示关于目标直播画面的目标资源选择图;其中,目标资源选择图可至少包括目标直播画面中的多个物体资源的资源标识,且存在至少一个物体资源的资源标识处于解锁状态。当目标资源选择图中处于解锁状态的目标资源标识被选中时,可显示目标资源标识对应的目标物体资源的获取结果提示;该获取结果提示是根据在目标资源标识被选中时,请求获取目标物体资源所得到的反馈信息生成的。可见,观众终端通过为观众用户提供一个目标资源选择图,可使得观众用户能够直观地通过选中目标资源选择图中的目标资源标识,来获取相应的目标物体资源;这样可丰富直播间的资源获取方式,提升资源获取的直观性和趣味性,从而提升观众用户的互动积极性,进而提升用户粘度。并且,还可通过显示获取结果提示,来直观地告诉观众用户关于目标物体资源的获取结果,可进一步提升用户粘度。
基于上述资源获取方法实施例以及资源获取装置实施例的描述,本发明实施例还提供一种观众终端。请参见图12,该观众终端可至少包括处理器1201、输入设备1202、输出设备1203以及计算机存储介质1204。其中,观众终端内的处理器1201、输入设备1202、输出设备1203以及计算机存储介质1204可通过总线或其他方式连接。可选的,观众终端还可包括摄像头、麦克风、话筒等其他硬件装置。
计算机存储介质1204可以存储在观众终端的存储器中,所述计算机存储介质1204用于存储计算机程序,所述计算机程序包括程序指令,所述处理器1201用于执行所述计算机存储介质1204存储的程序指令。处理器1201(或称CPU(Central Processing Unit,中央处理器))是观众终端的计算核心以及控制核心,其适于实现一条或多条指令,具体适于加载并执行一条或多条指令从而实现相应方法流程或相应功能;在一个实施例中,本发明实施例所述的处理器1201可以用于进行一系列的资源获取处理,具体包括:在观众用户的用户界面中显示关于目标直播画面的目标资源选择图;其中,所述目标资源选择图至少包括所述目标直播画面中的多个物体资源的资源标识,且存在至少一个物体资源的资源标识处于解锁状态;若所述目标资源选择图中处于解锁状态的目标资源标识被选中,则显示所述目标资源标识对应的目标物体资源的获取结果提示,等等。
本发明实施例还提供了一种计算机存储介质(Memory),所述计算机存储介质是观众终端中的记忆设备,用于存放程序和数据。可以理解的是,此处的计算机存储介质既可以包括观众终端中的内置存储介质,当然也可以包括观众终端所支持的扩展存储介质。计算机存储介质提供存储空间,该存储空间存储了观众终端的操作系统。并且,在该存储空间中还存放了适于被处理器1201加载并执行的一条或多条的指令,这些指令可以是一个或一个以上的计算机程序(包括程序代码)。需要说明的是,此处的计算机存储介质可以是高速RAM存储器,也可以是非不稳定的存储器(non-volatile memory),例如至少一个磁盘存储器;可选的还可以是至少一个位于远离前述处理器的计算机存储介质。
在一个实施例中,可由处理器1201加载并执行计算机存储介质中存放的一条或多条第二指令,以实现上述有关资源获取方法实施例中的方法的相应步骤;具体实现中,计算机存储介质中的一条或多条第二指令由处理器1201加载并执行如下步骤:
在观众用户的用户界面中显示关于目标直播画面的目标资源选择图;其中,所述目标资源选择图至少包括所述目标直播画面中的多个物体资源的资源标识,且存在至少一个物体资源的资源标识处于解锁状态;
若所述目标资源选择图中处于所述解锁状态的目标资源标识被选中,则显示所述目标资源标识对应的目标物体资源的获取结果提示;其中,所述获取结果提示是根据在所述目标资源标识被选中时,请求获取所述目标物体资源所得到的反馈信息生成的。
在一种实施方式中,所述获取结果提示包括提示文本,所述提示文本用于提示获取所述目标物体资源成功或失败。
再一种实施方式中,所述获取结果提示还包括第一组件;相应的,所述一条或多条第二指令还可以由处理器1201加载并具体执行:
若所述第一组件被触发,则关闭所述获取结果提示,并更新显示所述目标资源选择图;其中,更新显示后的目标资源选择图中的所述目标资源标识处于锁定状态;
当所述更新显示后的目标资源选择图中的其他资源标识被选中时,显示所述其他资源标识对应的其他物体资源的获取结果提示;其中,所述其他资源标识是指所述更新显示后的目标资源选择图中处于所述解锁状态的任一资源标识。
再一种实施方式中,所述获取结果提示还包括第二组件;相应的,所述一条或多条第二指令还可以由处理器1201加载并具体执行:
若所述第二组件被触发,则关闭所述获取结果提示和所述目标资源选择图;
在所述观众用户的用户界面中继续显示新的直播画面。
再一种实施方式中,若所述第二组件被触发时,所述目标直播画面包括的多个物体资源中存在未被获取的剩余物体资源;则所述一条或多条第二指令还可以由处理器1201加载并具体执行:
在所述观众用户的用户界面中,显示用于触发显示所述目标资源选择图的触发入口;
响应针对所述触发入口的触发操作,在所述观众用户的用户界面中更新显示所述目标资源选择图;其中,更新显示后的目标资源选择图中的各剩余物体资源的资源标识处于所述解锁状态,已被获取的各物体资源的资源标识处于锁定状态。
再一种实施方式中,所述提示文本用于提示获取所述目标物体资源成功,所述目标物体资源为目标盲盒,所述盲盒是指内含物体但外表面未阐述物体详情信息的盒子;相应的,所述一条或多条第二指令还可以由处理器1201加载并具体执行:
若接收到所述主播终端发送的所述目标盲盒内的目标物体的物体图像,则显示所述目标物体的物体图像。
本发明实施例中的观众终端可在观众用户的用户界面中显示关于目标直播画面的目标资源选择图;其中,目标资源选择图可至少包括目标直播画面中的多个物体资源的资源标识,且存在至少一个物体资源的资源标识处于解锁状态。当目标资源选择图中处于解锁状态的目标资源标识被选中时,可显示目标资源标识对应的目标物体资源的获取结果提示;该获取结果提示是根据在目标资源标识被选中时,请求获取目标物体资源所得到的反馈信息生成的。可见,观众终端通过为观众用户提供一个目标资源选择图,可使得观众用户能够直观地通过选中目标资源选择图中的目标资源标识,来获取相应的目标物体资源;这样可丰富直播间的资源获取方式,提升资源获取的直观性和趣味性,从而提升观众用户的互动积极性,进而提升用户粘度。并且,还可通过显示获取结果提示,来直观地告诉观众用户关于目标物体资源的获取结果,可进一步提升用户粘度。
需要说明的是,根据本申请的一个方面,还提供了一种计算机程序产品或计算机程序,该计算机程序产品或计算机程序包括计算机指令,该计算机指令存储在计算机可读存储介质中。计算机设备的处理器从计算机可读存储介质读取该计算机指令,处理器执行该计算机指令,使得该计算机设备执行上述图2或图4所示的图像处理方法实施例方面的各种可选方式中提供的方法;或者,使得该计算机设备执行上述图6所示的资源获取方法实施例方面的各种可选方式中提供的方法。
并且,应理解的是,以上所揭露的仅为本发明较佳实施例而已,当然不能以此来限定本发明之权利范围,因此依本发明权利要求所作的等同变化,仍属本发明所涵盖的范围。
Claims (15)
1.一种图像处理方法,其特征在于,包括:
在主播用户的用户界面中显示目标直播画面,所述目标直播画面中包括多个物体资源以及每个物体资源的资源标识;
若所述目标直播画面被触发,则显示资源选择预览图;所述资源选择预览图中至少包括各物体资源的资源标识;
响应针对所述资源选择预览图的确认操作,将所述资源选择预览图所对应的目标资源选择图发送至观众终端进行显示,使得观众用户通过所述目标资源选择图获取至少一个物体资源。
2.如权利要求1所述的方法,其特征在于,所述目标直播画面是通过目标操作被触发的;
所述目标操作包括:针对所述主播用户的用户界面中的图像显示组件的触发操作,针对目标直播画面的按压操作、在所述目标直播画面中输入预设手势的操作,输入关于所述目标直播画面的语音识别口令的操作。
3.如权利要求1或2所述的方法,其特征在于,所述资源选择预览图中还包括标题文本,所述标题文本用于指示关于所述各物体资源的获取规则;所述若所述目标直播画面被触发,则显示资源选择预览图之后,还包括:
对所述标题文本进行突出显示,以提示所述标题文本支持修改;
其中,所述突出显示包括以下至少一项:采用目标显示参数对所述标题文本进行显示,以及显示关于所述标题文本的修改提示;所述目标显示参数包括以下至少一项:目标闪动频率、目标显示颜色以及目标显示亮度。
4.如权利要求3所述的方法,其特征在于,所述方法还包括:
若检测到关于所述标题文本的修改操作,则根据所述修改操作对所述标题文本进行修改,以更新所述资源选择预览图。
5.如权利要求1或2所述的方法,其特征在于,所述若所述目标直播画面被触发,则显示资源选择预览图,包括:
若所述目标直播画面被触发,则对所述目标直播画面进行图像识别,得到所述目标直播画面中的各物体资源的资源标识;
根据所述各物体资源的资源标识生成资源选择预览图,并显示所述资源选择预览图。
6.如权利要求5所述的方法,其特征在于,所述根据所述各物体资源的资源标识生成资源选择预览图,包括:
对所述主播用户侧的语音数据进行语音识别,得到标题文本;所述标题文本用于指示关于所述各物体资源的获取规则;
根据所述标题文本和所述各物体资源的资源标识,生成资源选择预览图。
7.如权利要求6所述的方法,其特征在于,所述资源选择预览图还包括重识别按钮;所述方法还包括:
若所述重识别按钮被触发,则更新显示所述资源选择预览图;
其中,更新显示后的资源选择预览图中的标题文本是重新对所述语音数据进行语音识别得到的,所述更新后的资源选择预览图中的资源标识是重新对所述目标直播画面进行图像识别得到的。
8.如权利要求1所述的方法,其特征在于,所述每个物体资源均为盲盒,所述盲盒是指内含物体但外表面未阐述物体详情信息的盒子,所述方法还包括:
在检测到针对所述资源选择预览图的确认操作后,关闭所述资源选择预览图,并在所述主播用户的用户界面中继续显示新的直播画面;
若在所述新的直播画面中检测到目标盲盒被开启,则将所述目标盲盒内的目标物体的物体图像发送至目标观众终端进行显示;其中,所述目标盲盒为任一盲盒,所述目标观众终端为成功获取所述目标盲盒的观众终端。
9.一种资源获取方法,其特征在于,包括:
在观众用户的用户界面中显示关于目标直播画面的目标资源选择图;其中,所述目标资源选择图至少包括所述目标直播画面中的多个物体资源的资源标识,且存在至少一个物体资源的资源标识处于解锁状态;
若所述目标资源选择图中处于所述解锁状态的目标资源标识被选中,则显示所述目标资源标识对应的目标物体资源的获取结果提示;其中,所述获取结果提示是根据在所述目标资源标识被选中时,请求获取所述目标物体资源所得到的反馈信息生成的。
10.如权利要求9所述的方法,其特征在于,所述获取结果提示包括提示文本,所述提示文本用于提示获取所述目标物体资源成功或失败。
11.如权利要求10所述的方法,其特征在于,所述获取结果提示还包括第一组件;所述方法还包括:
若所述第一组件被触发,则关闭所述获取结果提示,并更新显示所述目标资源选择图;其中,更新显示后的目标资源选择图中的所述目标资源标识处于锁定状态;
当所述更新显示后的目标资源选择图中的其他资源标识被选中时,显示所述其他资源标识对应的其他物体资源的获取结果提示;其中,所述其他资源标识是指所述更新显示后的目标资源选择图中处于所述解锁状态的任一资源标识。
12.如权利要求10所述的方法,其特征在于,所述获取结果提示还包括第二组件;所述方法还包括:
若所述第二组件被触发,则关闭所述获取结果提示和所述目标资源选择图;
在所述观众用户的用户界面中继续显示新的直播画面。
13.如权利要求12所述方法,其特征在于,若所述第二组件被触发时,所述目标直播画面包括的多个物体资源中存在未被获取的剩余物体资源,则所述方法还包括:
在所述观众用户的用户界面中,显示用于触发显示所述目标资源选择图的触发入口;
响应针对所述触发入口的触发操作,在所述观众用户的用户界面中更新显示所述目标资源选择图;其中,更新显示后的目标资源选择图中的各剩余物体资源的资源标识处于所述解锁状态,已被获取的各物体资源的资源标识处于锁定状态。
14.如权利要求10-12任一项所述的方法,其特征在于,所述提示文本用于提示获取所述目标物体资源成功,所述目标物体资源为目标盲盒,所述盲盒是指内含物体但外表面未阐述物体详情信息的盒子,所述方法还包括:
若接收到所述主播终端发送的所述目标盲盒内的目标物体的物体图像,则显示所述目标物体的物体图像。
15.一种图像处理装置,其特征在于,包括:
显示单元,用于在主播用户的用户界面中显示目标直播画面,所述目标直播画面中包括多个物体资源以及每个物体资源的资源标识;
所述显示单元,用于若所述目标直播画面被触发,则显示资源选择预览图;所述资源选择预览图中至少包括各物体资源的资源标识;
处理单元,用于响应针对所述资源选择预览图的确认操作,将所述资源选择预览图所对应的目标资源选择图发送至观众终端进行显示,使得观众用户通过所述目标资源选择图获取至少一个物体资源。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202011019299.7A CN112165626B (zh) | 2020-09-24 | 2020-09-24 | 图像处理方法、资源获取方法、相关设备及介质 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202011019299.7A CN112165626B (zh) | 2020-09-24 | 2020-09-24 | 图像处理方法、资源获取方法、相关设备及介质 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN112165626A true CN112165626A (zh) | 2021-01-01 |
CN112165626B CN112165626B (zh) | 2024-06-18 |
Family
ID=73862848
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN202011019299.7A Active CN112165626B (zh) | 2020-09-24 | 2020-09-24 | 图像处理方法、资源获取方法、相关设备及介质 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN112165626B (zh) |
Cited By (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN113672819A (zh) * | 2021-05-25 | 2021-11-19 | 重庆大学 | 一种基于推荐感知和协作边缘缓存的内容请求处理系统 |
Citations (8)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US20040259631A1 (en) * | 2000-09-27 | 2004-12-23 | Milestone Entertainment Llc | Apparatus, systems and methods for implementing enhanced gaming and prizing parameters in an electronic environment |
CN106604048A (zh) * | 2016-12-15 | 2017-04-26 | 深圳市智联宝生态科技有限公司 | 一种直播间嵌入购物模块的直播方法及系统 |
CN107734351A (zh) * | 2017-09-29 | 2018-02-23 | 深圳市美知互动科技有限公司 | 快速上架商品的方法及装置 |
CN110139161A (zh) * | 2018-02-02 | 2019-08-16 | 阿里巴巴集团控股有限公司 | 直播中的信息处理方法及装置 |
CN110213607A (zh) * | 2019-06-03 | 2019-09-06 | 广州虎牙信息科技有限公司 | 直播间互动方法、装置、终端、服务器及可读存储介质 |
CN110730357A (zh) * | 2019-09-25 | 2020-01-24 | 北京达佳互联信息技术有限公司 | 直播交互方法、装置、服务器及存储介质 |
CN111314761A (zh) * | 2016-12-27 | 2020-06-19 | 广州华多网络科技有限公司 | 视频流关联信息直播交互方法及其终端设备 |
CN111556332A (zh) * | 2020-05-22 | 2020-08-18 | 咪咕文化科技有限公司 | 直播方法、电子设备和可读存储介质 |
-
2020
- 2020-09-24 CN CN202011019299.7A patent/CN112165626B/zh active Active
Patent Citations (8)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US20040259631A1 (en) * | 2000-09-27 | 2004-12-23 | Milestone Entertainment Llc | Apparatus, systems and methods for implementing enhanced gaming and prizing parameters in an electronic environment |
CN106604048A (zh) * | 2016-12-15 | 2017-04-26 | 深圳市智联宝生态科技有限公司 | 一种直播间嵌入购物模块的直播方法及系统 |
CN111314761A (zh) * | 2016-12-27 | 2020-06-19 | 广州华多网络科技有限公司 | 视频流关联信息直播交互方法及其终端设备 |
CN107734351A (zh) * | 2017-09-29 | 2018-02-23 | 深圳市美知互动科技有限公司 | 快速上架商品的方法及装置 |
CN110139161A (zh) * | 2018-02-02 | 2019-08-16 | 阿里巴巴集团控股有限公司 | 直播中的信息处理方法及装置 |
CN110213607A (zh) * | 2019-06-03 | 2019-09-06 | 广州虎牙信息科技有限公司 | 直播间互动方法、装置、终端、服务器及可读存储介质 |
CN110730357A (zh) * | 2019-09-25 | 2020-01-24 | 北京达佳互联信息技术有限公司 | 直播交互方法、装置、服务器及存储介质 |
CN111556332A (zh) * | 2020-05-22 | 2020-08-18 | 咪咕文化科技有限公司 | 直播方法、电子设备和可读存储介质 |
Cited By (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN113672819A (zh) * | 2021-05-25 | 2021-11-19 | 重庆大学 | 一种基于推荐感知和协作边缘缓存的内容请求处理系统 |
CN113672819B (zh) * | 2021-05-25 | 2023-09-29 | 重庆大学 | 一种基于推荐感知和协作边缘缓存的内容请求处理系统 |
Also Published As
Publication number | Publication date |
---|---|
CN112165626B (zh) | 2024-06-18 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
KR102290419B1 (ko) | 디지털 컨텐츠의 시각적 내용 분석을 통해 포토 스토리를 생성하는 방법 및 장치 | |
US12094209B2 (en) | Video data processing method and apparatus, device, and medium | |
CN111260545B (zh) | 生成图像的方法和装置 | |
CN109547819B (zh) | 直播列表展示方法、装置以及电子设备 | |
CN111835986B (zh) | 视频编辑处理方法、装置及电子设备 | |
CN110519636B (zh) | 语音信息播放方法、装置、计算机设备及存储介质 | |
WO2019174458A1 (en) | An intelligent video interaction method | |
US10341461B2 (en) | System and method for automatically recreating personal media through fusion of multimodal features | |
KR20210144625A (ko) | 영상 데이터 처리 방법, 장치 및 판독 가능 저장 매체 | |
US20170065889A1 (en) | Identifying And Extracting Video Game Highlights Based On Audio Analysis | |
CN111930994A (zh) | 视频编辑的处理方法、装置、电子设备及存储介质 | |
CN110557659B (zh) | 视频推荐方法、装置、服务器及存储介质 | |
CN109474843A (zh) | 语音操控终端的方法、客户端、服务器 | |
CN113569037A (zh) | 一种消息处理方法、装置以及可读存储介质 | |
JP7240505B2 (ja) | 音声パケット推薦方法、装置、電子機器およびプログラム | |
CN112149642A (zh) | 一种文本图像识别方法和装置 | |
CN114254158A (zh) | 视频生成方法及其装置、神经网络的训练方法及其装置 | |
CN112165626B (zh) | 图像处理方法、资源获取方法、相关设备及介质 | |
CN116049490A (zh) | 素材搜索方法、装置和电子设备 | |
CN113282770A (zh) | 一种多媒体推荐系统及方法 | |
CN109948426A (zh) | 应用程序调整方法、装置、电子设备及存储介质 | |
CN114422824A (zh) | 数据处理方法、视频处理方法、显示方法及设备 | |
CN115484474A (zh) | 视频剪辑处理方法、装置、电子设备及存储介质 | |
CN112807689B (zh) | 游戏视频处理方法、装置、电子设备和存储介质 | |
CN117857894A (zh) | 直播封面处理方法、装置、电子设备及计算机存储介质 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
REG | Reference to a national code |
Ref country code: HK Ref legal event code: DE Ref document number: 40038197 Country of ref document: HK |
|
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
GR01 | Patent grant | ||
GR01 | Patent grant |