CN111417028B - 信息处理方法、装置、存储介质及电子设备 - Google Patents

信息处理方法、装置、存储介质及电子设备 Download PDF

Info

Publication number
CN111417028B
CN111417028B CN202010175738.7A CN202010175738A CN111417028B CN 111417028 B CN111417028 B CN 111417028B CN 202010175738 A CN202010175738 A CN 202010175738A CN 111417028 B CN111417028 B CN 111417028B
Authority
CN
China
Prior art keywords
information
image
target image
display area
picture
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN202010175738.7A
Other languages
English (en)
Other versions
CN111417028A (zh
Inventor
高萌
黄贵华
曹超利
黄小凤
黄灵
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Tencent Technology Shenzhen Co Ltd
Original Assignee
Tencent Technology Shenzhen Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Tencent Technology Shenzhen Co Ltd filed Critical Tencent Technology Shenzhen Co Ltd
Priority to CN202010175738.7A priority Critical patent/CN111417028B/zh
Publication of CN111417028A publication Critical patent/CN111417028A/zh
Application granted granted Critical
Publication of CN111417028B publication Critical patent/CN111417028B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/47End-user applications
    • H04N21/478Supplemental services, e.g. displaying phone caller identification, shopping application
    • H04N21/4788Supplemental services, e.g. displaying phone caller identification, shopping application communicating with other users, e.g. chatting
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0484Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range
    • G06F3/04845Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range for image manipulation, e.g. dragging, rotation, expansion or change of colour
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0487Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser
    • G06F3/0488Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures
    • G06F3/04886Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures by partitioning the display area of the touch-screen or the surface of the digitising tablet into independently controllable areas, e.g. virtual keyboards or menus
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/431Generation of visual interfaces for content selection or interaction; Content or additional data rendering
    • H04N21/4312Generation of visual interfaces for content selection or interaction; Content or additional data rendering involving specific graphical features, e.g. screen layout, special fonts or colors, blinking icons, highlights or animations
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/431Generation of visual interfaces for content selection or interaction; Content or additional data rendering
    • H04N21/4312Generation of visual interfaces for content selection or interaction; Content or additional data rendering involving specific graphical features, e.g. screen layout, special fonts or colors, blinking icons, highlights or animations
    • H04N21/4316Generation of visual interfaces for content selection or interaction; Content or additional data rendering involving specific graphical features, e.g. screen layout, special fonts or colors, blinking icons, highlights or animations for displaying supplemental content in a region of the screen, e.g. an advertisement in a separate window
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/431Generation of visual interfaces for content selection or interaction; Content or additional data rendering
    • H04N21/4318Generation of visual interfaces for content selection or interaction; Content or additional data rendering by altering the content in the rendering process, e.g. blanking, blurring or masking an image region
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/442Monitoring of processes or resources, e.g. detecting the failure of a recording device, monitoring the downstream bandwidth, the number of times a movie has been viewed, the storage space available from the internal hard disk
    • H04N21/44213Monitoring of end-user related data
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/47End-user applications
    • H04N21/472End-user interface for requesting content, additional data or services; End-user interface for interacting with content, e.g. for content reservation or setting reminders, for requesting event notification, for manipulating displayed content
    • H04N21/47205End-user interface for requesting content, additional data or services; End-user interface for interacting with content, e.g. for content reservation or setting reminders, for requesting event notification, for manipulating displayed content for manipulating displayed content, e.g. interacting with MPEG-4 objects, editing locally
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/47End-user applications
    • H04N21/488Data services, e.g. news ticker
    • H04N21/4884Data services, e.g. news ticker for displaying subtitles

Abstract

本申请实施例公开了一种信息处理方法、装置、存储介质及电子设备。该方法包括:接收标记指令,并从信息互动界面的画面展示区中确定与标记指令匹配的目标图像,其中,画面展示区用于显示当前场景中的动态画面,目标图像从动态画面中确定;在画面展示区内生成标记信息对目标图像进行标记,基于目标图像的显示位置变化同步更新标记信息的显示位置,并将画面展示区显示的内容同步显示在被分享设备上。本方案可基于图像标识信息准确定位到共享画面中的图像并进行标记,有效提升设备之间的信息交互效率;另外当视图发生移动时将同步更新标记信息的显示位置,并同步共享给其他设备,提升了信息交互的准确性。

Description

信息处理方法、装置、存储介质及电子设备
技术领域
本申请涉及信息处理技术领域,具体涉及一种信息处理方法、装置、存储介质及电子设备。
背景技术
即时通信(Instant Messaging,简称IM)是一个实时通信系统,允许两人或多人使用网络实时的传递文字消息、文件、语音与视频交流。
如网络直播,其为用户提供了交流通道,各用户之间可通过直播间进行互动。例如,直播中用户经常会与主播针对直播间展示的某产品进行沟通,当直播间展示物品较多时,双方需要反复沟通确认才能锁定所需物品,极大降低了沟通效率,影响了直播的互动体验。
发明内容
本申请实施例提供一种信息处理方法、装置、存储介质及电子设备,可有效提升设备之间的信息交互效率、及信息交互的准确性。
本申请实施例提供了一种信息处理方法,应用于分享设备,所述方法包括:
接收标记指令,从信息互动界面的画面展示区中确定与所述图像标识信息匹配的目标图像,其中,所述画面展示区用于显示当前场景中的动态画面,所述目标图像从所述动态画面中确定;
在所述画面展示区内生成标记信息对所述目标图像进行标记,基于所述目标图像的显示位置变化同步更新所述标记信息的显示位置,并将所述画面展示区显示的内容同步显示在被分享设备上。
相应的,本申请实施例还提供了一种信息处理装置,应用于分享设备,所述装置包括:
确定单元,用于接收标记指令,从信息互动界面的画面展示区中确定与所述图像标识信息匹配的目标图像,其中,所述画面展示区用于显示当前场景中的动态画面,所述目标图像从所述动态画面中确定;
处理单元,用于在所述画面展示区内生成标记信息对所述目标图像进行标记,基于所述目标图像的显示位置变化同步更新所述标记信息的显示位置,并将所述画面展示区显示的内容同步显示在被分享设备上。
在一实施方式中,所述处理单元用于:
确定目标图像在所述画面展示区的尺寸信息;
根据尺寸信息确定预设样式的图形的显示尺寸;
基于所述显示尺寸和所述目标图像当前的显示位置,在所述画面展示区的相应位置上显示所述预设样式的图形,以对所述目标图像进行标记。
在一实施方式中,所述处理单元用于:
对所述目标图像进行边缘检测;
基于边缘检测结果生成所述目标图像的轮廓图;
调节所述轮廓图的尺寸,并在所述画面展示区的相应位置上显示所述轮廓图,以使所述目标图像位于调节尺寸后的轮廓图内。
在一实施方式中,所述标记信息包括编码信息,所述处理单元用于:
在所述画面展示区内关联性显示编码信息与所述目标图像,以对所述目标图像进行标记,其中,不同的图像对应的编码信息各不相同。
在一实施方式中,所述确定单元用于:
获取针对信息互动界面中画面展示区的触摸操作信息;
根据所述触摸操作信息确定在所述画面展示区中的触摸位置;
提取所述触摸位置所在区域的图像信息;
当所述图像信息包含实体内容时触发标记指令。
在一实施方式中,所述标记指令由被分享设备发起;所述确定单元用于:
接收标记指令,所述表指令包括图像标识信息;
从信息互动界面的画面展示区中确定与所述图像标识信息匹配的目标图像;
其中,被分享设备同步显示有所述画面展示区显示的动态画面,所述图像标识信息从被分享设备同步显示的动态画面中确定。
在一实施方式中,所述图像标识信息包括图像、识别码和/或位置信息。
在一实施方式中,所述图像标识信息为图像,所述确定单元用于:
从所述信息互动界面的画面展示区显示的动态画面中提取多个候选图像;
确定所述图像与每一候选图像的相似度;
确定与所述图像的相似度最大的候选图像为目标图像。
相应的,本申请实施例还提供了一种计算机可读存储介质,其特征在于,所述存储介质存储有多条指令,所述指令适于处理器进行加载,以执行如上所述信息处理方法。
相应的,本申请实施例还提供了一种电子设备,包括存储器,处理器及存储在存储器上并可在处理器上运行的计算机程序,其特征在于,所述处理器执行所述程序时实现如上所述信息处理方法。
本申请实施例中,从信息互动界面的画面展示区中确定与接收到标记指令匹配的目标图像,并在画面展示区内生成标记信息对目标图像进行标记,基于目标图像的显示位置变化同步更新标记信息的显示位置,并将画面展示区显示的内容同步显示在被分享设备上。本方案可基于图像标识信息准确定位到共享画面中的图像并进行标记,有效提升设备之间的信息交互效率;另外当视图发生移动时将同步更新标记信息的显示位置,并同步共享给其他设备,提升了信息交互的准确性。
附图说明
为了更清楚地说明本申请实施例中的技术方案,下面将对实施例描述中所需要使用的附图作简单地介绍,显而易见地,下面描述中的附图仅仅是本申请的一些实施例,对于本领域技术人员来讲,在不付出创造性劳动的前提下,还可以根据这些附图获得其他的附图。
图1是本申请实施例提供的信息处理方法的流程示意图。
图2是本申请实施例提供的一信息互动界面图。
图3a至3c为本申请实施例提供的信息处理方法的操作界面示意图。
图4是本申请实施例提供的信息处理方法的应用场景示意图。
图5是本申请实施例提供的信息处理装置的结构示意图。
图6是本申请实施例提供的信息处理装置的另一结构示意图。
图7是本申请实施例提供的电子设备的结构示意图。
具体实施方式
下面将结合本申请实施例中的附图,对本申请实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例仅仅是本申请一部分实施例,而不是全部的实施例。基于本申请中的实施例,本领域技术人员在没有作出创造性劳动前提下所获得的所有其他实施例,都属于本申请保护的范围。
本申请实施例提供一种信息处理方法、装置、存储介质及电子设备。
其中,该信息处理装置具体可以集成在平板PC(Personal Computer)、手机等具备储存单元并安装有微处理器而具有运算能力的电子设备中。
本申请实施例中,该信息处理方法可应用于带有视频交流功能的信息交流平台。例如,该信息交流平台可以为用于网络直播的直播客户端、集成有视频通话功能的即时通讯应用客户端等。
其中,网络直播是可以同一时间透过网络系统在不同的交流平台共享视图画面,是一种新兴的网络社交方式,网络直播平台也成为了一种崭新的社交媒体。而网络互动直播,是针对有现场直播需求的用户,利用互联网(或专网)和先进的多媒体通信技术,通过在网上构建一个系集音频、视频、桌面共享、文档共享、互动环节为一体的多功能网络直播平台,企业或个人可以直接在线进行语音、视频、数据的全面交流与互动。
网络直播为用户提供了交流通道,用户(称为主播)可在直播客户端开通直播间,并可与进入直播间的其他用户(称为观众)进行互动。主播可在该直播间中发布视频、音频等信息,而观众则可以查看主播发布的信息,并可针对发布的视频、音频等信息与主播或其他用户进行交流互动。
请参阅图1,图1为本申请实施例提供的信息处理方法的流程示意图,该信息处理方法应用于分享设备,其中,分享设备可为智能手机、平板电脑、笔记本电脑、计算机等带有显示屏幕的终端设备。本实施例中,将以该分享设备中安装有直播客户端且为主播端设备为例,对本申请中的信息处理方法进行描述,该信息处理方法具体流程如下:
101、接收标记指令,从信息互动界面的画面展示区中确定与标记指令匹配的目标图像,其中,画面展示区用于显示当前场景中的动态画面,目标图像从动态画面中确定。
在本实施例中,触发分享设备接收标记指令的方式可有多种。例如,该标记指令可以是通过用户操作触发分享设备发起的标记指令。也即,在一些实施例中,在接收标记指令时,可以包括以下流程:
获取针对信息互动界面中画面展示区的触摸操作信息;
根据触摸操作信息确定在该画面展示区中的触摸位置;
提取触摸位置所在区域的图像信息;
当图像信息包含实体内容时触发标记指令。
其中,该信息互动界面可以是当前直播客户端的直播界面,该直播界面至少包括可以用于显示视图画面的画面展示区。例如,参考图2,该直播界面可以包括视频区、用户弹幕区、功能面板及房间榜单。其中,该视频区即为上述画面展示区,用于显示主播的直播画面;用户弹幕区用于显示进入直播间的用户所评论的弹幕信息;功能面板可以包括一些功能控件,例如视频录制按钮、信息收发控件、画面参数调整控件等。实际应用中,视频区可以为全屏显示,用户弹幕区、功能面板及房间榜单等可在该视频区上悬浮显示,以提高视频显示的屏占比。
具体的,当用户在信息互动界面中的画面展示区进行滑动、点击等触摸操作时,可获取对应的触摸操作信息,并基于此确定在该画面展示区的触摸位置。其中,该触摸位置可以为一个位置点、也可以为滑动轨迹。
当该触摸位置为位置点时,可从多个样本区域中(即预先对画面展示区进行划分而得到的样本区域)确定该位置点所在区域并提取该区域内的图像信息。当该图像信息中包含实体内容时,将该图像信息作为图像标识信息,并触发标记指令;当该图像信息中不包含实体内容时,不执行任何操作。其中,实体即现实世界中客观存在并可相互区别的事物,例如物品、建筑物、动植物、人物等。
当该触摸位置构成滑动轨迹时,可以从多个样本区域中确定该滑动轨迹所环绕或横穿的区域,并提取该区域内的图像信息。当该图像信息中包含实体内容时,可触发标记指令;当该图像信息中不包含实体内容时,不执行任何响应操作。
在一些实施例中,该标记指令可以是其他设备向该分享设备发送的。也即,该标记指令可以由被分享设备发起,该被分享设备可以为智能手机、平板电脑、笔记本电脑、计算机等带有显示屏幕的终端设备,该被分享设备中同样安装有上述直播客户端。在一些实施方式中,分享设备可与该直播客户端的云端服务器之间建立无线链路,被分享设备也可与该直播客户端的云端服务器之间建立无线链路,以使分享设备可通过云端服务器向被分享设备传送需待分享内容,被分享设备可通过云端服务器向分享设备传送反馈信息。例如,被分享设备可向该云端服务器发送标记指令,云端服务器再向分享设备转发该标记指令。
在一些实施方式中,被分享设备还可与分享设备直接建立无线链路,以使被分享设备可以通过建立的无线链路直接向分享设备发送标记指令。
在一些实施例中,该标记指令可包括图像标识信息,该图像标识信息可以用于标识某一图像。其中,被分享设备同步显示有画面展示区显示的动态画面,该图像标识信息从被分享设备同步显示的动态画面中确定。也即,从信息互动界面的画面展示区中确定与标记指令匹配的目标图像时,具体可以从信息互动界面的画面展示区中确定与该图像标识信息匹配的目标图像。
在本实施例中,该图像标识信息可以包括以下至少一种:图像、识别码、位置信息。
例如,该图像标识信息可以为图像。具体的,用户端可通过被分享设备在其同步显示的动态画面中圈出感兴趣的图像,后台可对圈出的区域进行图像提取,并将提取得到的图像作为该图像标识信息,同时基于该图像标识信息向分享设备发送标记指令。
例如,该图像标识信息可以为识别码。具体的,可以预先对真实场景中的实体设置唯一的识别码,如条形码、二维码等。当用户端通过被分享设备在其同步显示的动态画面中圈出感兴趣的图像时,后台可获取该图像对应的识别码,并将该识别码作为图像标识信息,同时基于该图像标识信息向分享设备发送标记指令。
例如,该图像标识信息可以为位置信息。具体的,可以预先对被分享设备中显示动态画面的显示区构建二维坐标图区。当用户端通过被分享设备在其同步显示的动态画面中圈出感兴趣的图像时,后台可获取所圈出图区的坐标位置信息,并将该坐标位置信息作为图像标识信息,同时基于该图像标识信息向分享设备发送标记指令。
本实施例中,当前场景可以为现实世界中的真实场景,也可以为通过分享设备中安装的录屏工具对屏幕画面进行录制播放的录播场景。
以真实场景为例,具体实施时,该分享设备可以通过摄像头采集真实场景中的画面,该摄像头可以是分享设备内置的摄像头,也可以是其外置的摄像头。实际应用中,可通过调整摄像头的拍摄角度或动态调整真实场景中各实体的位置得到真实场景的动态画面。其中,动态画面中可以包括真实场景中不同实体的映射在该画面展示区的二维空间图像。
在一些实施例中,以上述图像标识信息为图像为例,步骤“从信息互动界面的画面展示区中确定与图像标识信息匹配的目标图像”,可以包括以下步骤:
从信息互动界面的画面展示区显示的动态画面中提取多个候选图像;
确定该图像与每一候选图像的相似度;
确定与所述图像的相似度最大的候选图像为目标图像。
具体的,可以采用图像识别技术,对画面展示区当前显示的画面进行分割和图像提取,从而得到多个候选图像。实际应用中,该多个候选图像为真实场景中的实体以一定角度映射在该画面展示区的二维空间图像。
随后,将该图像与候选图像进行比对,计算该图像与每一候选图像的相似度。本实施例中,计算图像相似度的方式可以有多种。例如,可以采用余弦相似度的计算方法,把两幅图像分别表示成一个向量,通过计算向量之间的余弦距离来表征两张图像的相似度;又例如,可采用图像的“指纹信息”进行相似度计算,将图像归一化成一定大小,计算一个序列作为该图像的指纹信息,通过比较两张图像指纹信息序列相同的位数来得到两者间的相似度。
在得到该图像与每一候选图像的相似度的计算结果后,从多个候选图像中筛选出与与该图像的相似度最大的候选图像为目标图像。
102、在画面展示区内生成标记信息对目标图像进行标记,基于目标图像的显示位置变化同步更新标记信息的显示位置,并将画面展示区显示的内容同步显示在被分享设备上。
具体的,画面展示区显示的内容会实时传送至被分享设备进行同步显示,当生成标记信息对目标图像进行标记时,该标记信息也将对被分享设备中显示的该目标图像进行标记显示。当画面展示区中该目标图像的显示位置变化时,该标记信息的显示位置也将随之同步更新。实际应用中,该标记信息可对该目标图像进行位置跟随,并保持在距离其一定范围内显示。此外,当分享设备中标记信息的显示位置发生更新时,被分享设备中该标记信息的显示位置也同步更新。
在一些实施例中,基于目标图像的显示位置变化同步更新标记信息的显示位置,可以包括以下流程:
(11)确定目标图像对应在真实场景中的目标实体;
(12)当检测到目标实体映射在画面展示区的显示位置变化时,基于变化的显示位置同步更新标记信息在画面展示区的显示位置。
由于真实场景中的实体是位于三维空间的,而画面展示区内显示的图像是位于二维空间的。当分享设备的摄像头拍摄采集真实场景中的画面时,若发生拍摄角度的变化,则会导致真实场景中的实体映射在该画面展示区中的二维空间图像的显示状态也发生变化(如发生形变、显示位置的改变等),使得直接在画面展示区中跟随目标图像的显示位置时容易出现误判断。因此,为了提高标记信息的准确标记,可通过识别目标图像对应在真实场景中的目标实体,利用AR(Augmented Reality,增强现实)技术实时跟随目标实体以确定标记信息的显示位置,并通过场景融合技术将标记信息与目标实体映射在画面展示区中的二维空间图像进行关联显示,以实现在画面展示区的视图发生变化时标记信息根据实体的移动而移动的画面效果。
在一些实施例中,在确定目标图像对应在真实场景中的目标实体时,可以包括以下流程:
(111)基于预设映射关系确定目标图像对应的三维空间图像,其中,预设映射关系包括:真实场景中每一实体的样本三维空间图像与实体的样本二维空间图像之间的映射关系;
(112)从真实场景中识别与三维空间图像匹配的目标实体。
在本实施例中,可以对真实场景进行实体扫描,基于3D建模(即三维建模)技术预先构建真实场景中各实体的三维空间图像(即三维空间模型),得到样本三维空间图像。同时采集真实场景中各实体不同角度的二维空间图像作为样本二维空间图像(即二维空间模型),并建立样本二维空间图像与其对应三维空间图像之间的映射关系。
具体实施时,便可基于上述预先构建的映射关系确定目标图像对应的三维空间图像,进而从真实场景中识别与三维空间图像匹配的目标实体。
实际应用中,对目标图像进行标记的方式可以有多种。例如,在一些实施例中,在画面展示区内生成标记信息对目标图像进行标记时,可以包括以下流程:
(21)确定目标图像在画面展示区的尺寸信息;
(22)根据尺寸信息确定预设样式的图形的显示尺寸;
(23)基于显示尺寸和目标图像当前的显示位置,在画面展示区的相应位置上显示预设样式的图形,以对目标图像进行标记。
其中,该预设样式的图形可以自定义设置。例如,该预设样式的图形可以为圆圈、方框、五角星等。在利用预设样式的图形对目标图形进行标记时,需使目标图像与预设样式的图形关联性显示在画面展示区内。例如,可将目标图像叠加在预设样式的图形上,或者将预设样式的图形靠近目标图像的外围轮廓进行显示等。
例如参考图3a,图3a为直播客户端的一界面图(即信息互动界面)。该界面图中显示有主播及粉丝信息、用户弹幕信息、功能控件及画面展示区显示的动态画面。其中,该预设样式的图形为圆圈。具体实施时,可基于目标图像在画面展示区的尺寸信息调整该圆圈标记的尺寸,以使目标图像可显示该圆圈标记内。
在一些实施例中,在画面展示区内生成标记信息对目标图像进行标记时,可以包括以下流程:
(31)对目标图像进行边缘检测;
(32)基于边缘检测结果生成目标图像的轮廓图;
(33)调节轮廓图的尺寸,并在画面展示区的相应位置上显示轮廓图,以使目标图像位于调节尺寸后的轮廓图内。
具体的,在边缘检测时依次对目标图像进行锐化处理、平滑处理,随后采用边缘检测算子对处理后的目标图像进行边缘检测,从而提取得到目标图像的边缘和轮廓特征。然后,基于提取得到的边缘和轮廓特征生成目标图像的轮廓图。最后,基于目标图像在画面展示区中的尺寸大小调节轮该廓图的尺寸,并在画面展示区的相应位置上显示调节尺寸后的轮廓图,以使目标图像位于调节尺寸后的轮廓图内(参考图3b),从而实现对该目标图像的标记。
在一些实施例中,可在画面展示区标记多个图像。为了区别不同标记,该标记信息可以包括编码信息。在画面展示区内生成标记信息对目标图像进行标记时,具体可以在画面展示区内关联性显示编码信息与所述目标图像,以对所述目标图像进行标记。其中,该编码信息可以为数字编码并予以相应的样式展示该编码(如1、2、3……),例如可参考图3c。另外,该编码信息可以为字母编码(如A、B、C……),还可以为数字与字母的组合编码(如1A、1B、2C……)等,不同的图像对应的编码信息各不相同。
实际应用中,可根据标记指令的接收顺序,对画面展示区内的需要标记的图像进行编码标记。
由上可知,本实施例提供的信息处理方法,通过从信息互动界面的画面展示区中确定与接收到标记指令匹配的目标图像,并在画面展示区内生成标记信息对目标图像进行标记,基于目标图像的显示位置变化同步更新标记信息的显示位置,并将画面展示区显示的内容同步显示在被分享设备上。本方案可基于图像标识信息准确定位到共享画面中的图像并进行标记,有效提升设备之间的信息交互效率;另外当视图发生移动时将同步更新标记信息的显示位置,并同步共享给其他设备,提升了信息交互的准确性和实时性。
在一实施例中,参考图4,图4为本实施例提供的信息处理方法的应用场景示意图。下面将以直播场景下,设备A和设备B都安装有直播客户端,且设备A为观看直播的用户端、设备B为主播端进行真实场景直播为例,对本方案中的信息处理方法进行详细描述。需要说明的是,设备A和设备B连接有可用网络,并可通过网络与其他设备或服务器进行通信。
本实施例中,需要基于VR(Virtual Reality,虚拟现实)实景扫描,构建直播场景的三维的实景图区以及三维坐标系,同时建立三维图区与二维图区的坐标映射关系。
如图4所示,设备A显示的为观看设备B主播端进行直播时的画面。在设备B的主播端在直播过程中,用户通过对设备A显示屏的触摸操作,从设备A当前显示界面中的视频区圈出一物品,后台识别该触摸操作,并根据触摸轨迹在该物品周围生成虚线圈以对该物品进行标记(参考图4中左上方视图中圆形虚线所圈出的物品)。随后,设备A后台利用图像识别技术对圈出物品进行识别并提取其图像信息。接着,设备A向直播客户端对应的云端服务器发送携带该图像信息的标记指令,并通过云端服务器将携带该图像信息的标记指令发送给设备B主播端,从而实现将设备A中所标记物品的图像信息呈现给设备B主播端。
设备B接收到设备A发送的图像信息后,后台利用图像识别技术对当前视频区显示的内容进行识别,以从显示的内容中识别出与该图像信息匹配的二维空间图像。随后,根据预先构建的二维图区与三维图区之间的映射关系,从真实场景中识别到目标物品。最后利用图像识别技术和图像绘制技术,在该目标物品映射在视频区的图像的外围,绘制其轮廓并显示标记(参考图4中右上方视图中的虚线轮廓标记),以提示主播该用户远程标记的物品。
参考图4中右下方视图和左下方视图,当设备B的视角发生移动导致视频区的画面中图像位置发生移动时,通过真实场景中目标物品的实时跟随和识别,所标记的外围轮廓也将跟随目标物品的移动而移动,同时将显示的画面内容与标记信息通过云端服务器实时同步显示在设备A上。
本方案中,当直播中用户与主播针对某一物品进行沟通时,用户圈出该物品,即将识别的图像信息和坐标信息发送给主播端,利用图像识别技术即刻识别用户所圈出的物品,并基于VR技术在主播侧建立该物品所处的三维空间坐标,基于坐标信息和图像内容,在主播侧视图中将该物品进行轮廓标注提示,从而实现在主播侧对用户圈出物品进行精准标注提示。通过二维与三维的映射关系数据,使主播端的标记信息可根据物品位置的变化而移动,实现直播间物品位置的双向高效沟通。
为便于更好的实施本申请实施例提供的信息处理方法,本申请实施例还提供一种基于上述信息处理方法的装置。其中名词的含义与上述信息处理方法中相同,具体实现细节可以参考方法实施例中的说明。
请参阅图5,图5为本申请实施例提供的信息处理装置的结构示意图,其中该信息处理装置400可以包括:确定单元401及处理单元401,具体可以如下:
确定单元401,用于接收标记指令,从信息互动界面的画面展示区中确定与所述图像标识信息匹配的目标图像,其中,所述画面展示区用于显示当前场景中的动态画面,所述目标图像从所述动态画面中确定;
处理单元402,用于在所述画面展示区内生成标记信息对所述目标图像进行标记,基于所述目标图像的显示位置变化同步更新所述标记信息的显示位置,并将所述画面展示区显示的内容同步显示在被分享设备上。
参考图6,在一些实施例中,当前场景为真实场景,所述处理单元401可以包括:
确定子单元4021,用于确定所述目标图像在所述真实场景中对应的目标实体;
更新子单元4022,用于当检测到所述目标实体在所述画面展示区的显示位置变化时,基于变化的显示位置同步更新所述标记信息在所述画面展示区的显示位置。
在一些实施例中,所述确定子单元4021可以用于:
基于预设映射关系确定所述目标图像对应的三维空间图像,其中,所述预设映射关系包括:所述真实场景中每一实体的样本三维空间图像与所述实体的样本二维空间图像之间的映射关系;
从所述真实场景中识别与所述三维空间图像匹配的目标实体。
在一些实施例中,处理单元402进一步可以用于:
确定目标图像在所述画面展示区的尺寸信息;
根据尺寸信息确定预设样式的图形的显示尺寸;
基于所述显示尺寸和所述目标图像当前的显示位置,在所述画面展示区的相应位置上显示所述预设样式的图形,以对所述目标图像进行标记。
在一些实施例中,处理单元402进一步可以用于:
对所述目标图像进行边缘检测;
基于边缘检测结果生成所述目标图像的轮廓图;
调节所述轮廓图的尺寸,并在所述画面展示区的相应位置上显示所述轮廓图,以使所述目标图像位于调节尺寸后的轮廓图内。
在一些实施例中,所述标记信息包括编码信息,处理单元402进一步可以用于:
在所述画面展示区内关联性显示编码信息与所述目标图像,以对所述目标图像进行标记,其中,不同的图像对应的编码信息各不相同。
在一些实施例中,确定单元401可以用于:
获取针对信息互动界面中画面展示区的触摸操作信息;
根据所述触摸操作信息确定在所述画面展示区中的触摸位置;
提取所述触摸位置所在区域的图像信息;
当所述图像信息包含实体内容时触发标记指令。
在一些实施例中,所述标记指令由被分享设备发起;确定单元401具体可以用于:
接收标记指令,所述标记指令包括图像标识信息;
从信息互动界面的画面展示区中确定与所述图像标识信息匹配的目标图像;
其中,被分享设备同步显示有所述画面展示区显示的动态画面,所述图像标识信息从被分享设备同步显示的动态画面中确定。
在一些实施例中,所述图像标识信息包括以下至少一种:图像、识别码或位置信息。
在一些实施例中,所述图像标识信息为图像,确定单元401可以用于:
从所述信息互动界面的画面展示区显示的动态画面中提取多个候选图像;
确定所述图像与每一候选图像的相似度;
确定与所述图像的相似度最大的候选图像为目标图像。
本申请实施例提供的信息处理装置,通过接收携带图像标识信息的标记指令,从信息互动界面的画面展示区中确定与标记指令匹配的目标图像,并在画面展示区内生成标记信息对目标图像进行标记,基于目标图像的显示位置变化同步更新标记信息的显示位置,并将画面展示区显示的内容同步显示在被分享设备上。本方案可基于图像标识信息准确定位到共享画面中的图像并进行标记,有效提升设备之间的信息交互效率;另外当视图发生移动时将同步更新标记信息的显示位置,并同步共享给其他设备,提升了信息交互的准确性。
本申请实施例还提供一种电子设备,该电子设备具体可以是智能手机、平板电脑等终端设备,该电子设备中安装有上述实施例客户端。如图7所示,该电子设备可以包括射频(RF,Radio Frequency)电路601、包括有一个或一个以上计算机可读存储介质的存储器602、输入单元603、显示单元604、传感器605、音频电路606、无线保真(WiFi,WirelessFidelity)模块607、包括有一个或者一个以上处理核心的处理器608、以及电源609等部件。本领域技术人员可以理解,图7中示出的电子设备结构并不构成对电子设备的限定,可以包括比图示更多或更少的部件,或者组合某些部件,或者不同的部件布置。其中:
RF电路601可用于收发信息或通话过程中,信号的接收和发送,特别地,将基站的下行信息接收后,交由一个或者一个以上处理器608处理;另外,将涉及上行的数据发送给基站。通常,RF电路601包括但不限于天线、至少一个放大器、调谐器、一个或多个振荡器、用户身份模块(SIM,Subscriber Identity Module)卡、收发信机、耦合器、低噪声放大器(LNA,Low Noise Amplifier)、双工器等。此外,RF电路601还可以通过无线通信与网络和其他设备通信。所述无线通信可以使用任一通信标准或协议,包括但不限于全球移动通讯系统(GSM,Global System of Mobile communication)、通用分组无线服务(GPRS,GeneralPacket Radio Service)、码分多址(CDMA,Code Division Multiple Access)、宽带码分多址(WCDMA,Wideband Code Division Multiple Access)、长期演进(LTE,Long TermEvolution)、电子邮件、短消息服务(SMS,Short Messaging Service)等。
存储器602可用于存储软件程序以及模块,处理器608通过运行存储在存储器602的软件程序以及模块,从而执行各种功能应用以及数据处理。存储器602可主要包括存储程序区和存储数据区,其中,存储程序区可存储操作系统、至少一个功能所需的应用程序(比如声音播放功能、图像播放功能等)等;存储数据区可存储根据电子设备的使用所创建的数据(比如音频数据、电话本等)等。此外,存储器602可以包括高速随机存取存储器,还可以包括非易失性存储器,例如至少一个磁盘存储器件、闪存器件、或其他易失性固态存储器件。相应地,存储器602还可以包括存储器控制器,以提供处理器608和输入单元603对存储器602的访问。
输入单元603可用于接收输入的数字或字符信息,以及产生与用户设置以及功能控制有关的键盘、鼠标、操作杆、光学或者轨迹球信号输入。具体地,在一个具体的实施例中,输入单元603可包括触敏表面以及其他输入设备。触敏表面,也称为触摸显示屏或者触控板,可收集用户在其上或附近的触摸操作(比如用户使用手指、触笔等任何适合的物体或附件在触敏表面上或在触敏表面附近的操作),并根据预先设定的程式驱动相应的连接装置。可选的,触敏表面可包括触摸检测装置和触摸控制器两个部分。其中,触摸检测装置检测用户的触摸方位,并检测触摸操作带来的信号,将信号传送给触摸控制器;触摸控制器从触摸检测装置上接收触摸信息,并将它转换成触点坐标,再送给处理器608,并能接收处理器608发来的命令并加以执行。此外,可以采用电阻式、电容式、红外线以及表面声波等多种类型实现触敏表面。除了触敏表面,输入单元603还可以包括其他输入设备。具体地,其他输入设备可以包括但不限于物理键盘、功能键(比如音量控制按键、开关按键等)、轨迹球、鼠标、操作杆等中的一种或多种。
显示单元604可用于显示由用户输入的信息或提供给用户的信息以及电子设备的各种图形用户接口,这些图形用户接口可以由图形、文本、图标、视频和其任意组合来构成。显示单元604可包括显示面板,可选的,可以采用液晶显示器(LCD,Liquid CrystalDisplay)、有机发光二极管(OLED,Organic Light-Emitting Diode)等形式来配置显示面板。进一步的,触敏表面可覆盖显示面板,当触敏表面检测到在其上或附近的触摸操作后,传送给处理器608以确定触摸事件的类型,随后处理器608根据触摸事件的类型在显示面板上提供相应的视觉输出。虽然在图7中,触敏表面与显示面板是作为两个独立的部件来实现输入和输入功能,但是在某些实施例中,可以将触敏表面与显示面板集成而实现输入和输出功能。
电子设备还可包括至少一种传感器605,比如光传感器、运动传感器以及其他传感器。具体地,光传感器可包括环境光传感器及接近传感器,其中,环境光传感器可根据环境光线的明暗来调节显示面板的亮度,接近传感器可在电子设备移动到耳边时,关闭显示面板和/或背光。作为运动传感器的一种,重力加速度传感器可检测各个方向上(一般为三轴)加速度的大小,静止时可检测出重力的大小及方向,可用于识别手机姿态的应用(比如横竖屏切换、相关游戏、磁力计姿态校准)、振动识别相关功能(比如计步器、敲击)等;至于电子设备还可配置的陀螺仪、气压计、湿度计、温度计、红外线传感器等其他传感器,在此不再赘述。
音频电路606、扬声器,传声器可提供用户与电子设备之间的音频接口。音频电路606可将接收到的音频数据转换后的电信号,传输到扬声器,由扬声器转换为声音信号输出;另一方面,传声器将收集的声音信号转换为电信号,由音频电路606接收后转换为音频数据,再将音频数据输出处理器608处理后,经RF电路601以发送给比如另一电子设备,或者将音频数据输出至存储器602以便进一步处理。音频电路606还可能包括耳塞插孔,以提供外设耳机与电子设备的通信。
WiFi属于短距离无线传输技术,电子设备通过WiFi模块607可以帮助用户收发电子邮件、浏览网页和访问流式媒体等,它为用户提供了无线的宽带互联网访问。虽然图7示出了WiFi模块607,但是可以理解的是,其并不属于电子设备的必须构成,完全可以根据需要在不改变发明的本质的范围内而省略。
处理器608是电子设备的控制中心,利用各种接口和线路连接整个手机的各个部分,通过运行或执行存储在存储器602内的软件程序和/或模块,以及调用存储在存储器602内的数据,执行电子设备的各种功能和处理数据,从而对手机进行整体控制。可选的,处理器608可包括一个或多个处理核心;优选的,处理器608可集成应用处理器和调制解调处理器,其中,应用处理器主要处理操作系统、用户界面和应用程序等,调制解调处理器主要处理无线通信。可以理解的是,上述调制解调处理器也可以不集成到处理器608中。
电子设备还包括给各个部件供电的电源609(比如电池),优选的,电源可以通过电源管理系统与处理器608逻辑相连,从而通过电源管理系统实现管理充电、放电、以及功耗管理等功能。电源609还可以包括一个或一个以上的直流或交流电源、再充电系统、电源故障检测电路、电源转换器或者逆变器、电源状态指示器等任意组件。
尽管未示出,电子设备还可以包括摄像头、蓝牙模块等,在此不再赘述。具体在本实施例中,电子设备中的处理器608会按照如下的指令,将一个或一个以上的应用程序的进程对应的可执行文件加载到存储器602中,并由处理器608来运行存储在存储器602中的应用程序,从而实现各种功能:
接收标记指令,从信息互动界面的画面展示区中确定与所述标记指令匹配的目标图像,其中,所述画面展示区用于显示当前场景中的动态画面,所述目标图像从所述动态画面中确定;
在所述画面展示区内生成标记信息对所述目标图像进行标记,基于所述目标图像的显示位置变化同步更新所述标记信息的显示位置,并将所述画面展示区显示的内容同步显示在被分享设备上。
本申请实施例提供的电子设备,通过接收标记指令,从信息互动界面的画面展示区中确定与标记指令匹配的目标图像,并在画面展示区内生成标记信息对目标图像进行标记,基于目标图像的显示位置变化同步更新标记信息的显示位置,并将画面展示区显示的内容同步显示在被分享设备上。本方案可基于图像标识信息准确定位到共享画面中的图像并进行标记,有效提升设备之间的信息交互效率;另外当视图发生移动时将同步更新标记信息的显示位置,并同步共享给其他设备,提升了信息交互的准确性。
本领域普通技术人员可以理解,上述实施例的各种方法中的全部或部分步骤可以通过指令来完成,或通过指令控制相关的硬件来完成,该指令可以存储于一计算机可读存储介质中,并由处理器进行加载和执行。
为此,本申请实施例提供一种计算机可读存储介质,其中存储有多条指令,该指令能够被处理器进行加载,以执行本申请实施例所提供的任一种信息处理方法中的步骤。例如,该指令可以执行如下步骤:
接收标记指令,从信息互动界面的画面展示区中确定与所述标记指令匹配的目标图像,其中,所述画面展示区用于显示当前场景中的动态画面,所述目标图像从所述动态画面中确定;
在所述画面展示区内生成标记信息对所述目标图像进行标记,基于所述目标图像的显示位置变化同步更新所述标记信息的显示位置,并将所述画面展示区显示的内容同步显示在被分享设备上。
其中,该存储介质可以包括:只读存储器(ROM,Read Only Memory)、随机存取记忆体(RAM,Random Access Memory)、磁盘或光盘等。
由于该存储介质中所存储的指令,可以执行本申请实施例所提供的任一种信息处理方法中的步骤,因此,可以实现本申请实施例所提供的任一种信息处理方法所能实现的有益效果,详见前面的实施例,在此不再赘述。
以上对本申请实施例所提供的信息处理方法、装置、存储介质及电子设备进行了详细介绍,本文中应用了具体个例对本申请的原理及实施方式进行了阐述,以上实施例的说明只是用于帮助理解本申请的方法及其核心思想;同时,对于本领域的技术人员,依据本申请的思想,在具体实施方式及应用范围上均会有改变之处,综上所述,本说明书内容不应理解为对本申请的限制。

Claims (15)

1.一种信息处理方法,应用于分享设备,其特征在于,所述方法包括:
接收标记指令,从信息互动界面的画面展示区中确定与所述标记指令匹配的目标图像,其中,所述画面展示区用于显示当前场景中的动态画面,所述目标图像从所述动态画面中确定;
在所述画面展示区内生成标记信息对所述目标图像进行标记,基于所述目标图像的显示位置变化同步更新所述标记信息的显示位置,并将所述画面展示区显示的内容同步显示在被分享设备上。
2.根据权利要求1所述的信息处理方法,其特征在于,当前场景为真实场景;所述基于所述目标图像的显示位置变化同步更新所述标记信息的显示位置,包括:
确定所述目标图像在所述真实场景中对应的目标实体;
当检测到所述目标实体在所述画面展示区的显示位置变化时,基于变化的显示位置同步更新所述标记信息在所述画面展示区的显示位置。
3.根据权利要求2所述的信息处理方法,其特征在于,所述确定所述目标图像在所述真实场景中对应的目标实体,包括:
基于预设映射关系确定所述目标图像对应的三维空间图像,其中,所述预设映射关系包括:所述真实场景中每一实体的样本三维空间图像与所述实体的样本二维空间图像之间的映射关系;
从所述真实场景中识别与所述三维空间图像匹配的目标实体。
4.根据权利要求1所述的信息处理方法,其特征在于,所述在所述画面展示区内生成标记信息对所述目标图像进行标记,包括:
确定目标图像在所述画面展示区的尺寸信息;
根据尺寸信息确定预设样式的图形的显示尺寸;
基于所述显示尺寸和所述目标图像当前的显示位置,在所述画面展示区的相应位置上显示所述预设样式的图形,以对所述目标图像进行标记。
5.根据权利要求1所述的信息处理方法,其特征在于,所述在所述画面展示区内生成标记信息对所述目标图像进行标记,包括:
对所述目标图像进行边缘检测;
基于边缘检测结果生成所述目标图像的轮廓图;
调节所述轮廓图的尺寸,并在所述画面展示区的相应位置上显示所述轮廓图,以使所述目标图像位于调节尺寸后的轮廓图内。
6.根据权利要求1所述的信息处理方法,其特征在于,所述标记信息包括编码信息,在所述画面展示区内生成标记信息对所述目标图像进行标记,包括:
在所述画面展示区内关联性显示编码信息与所述目标图像,以对所述目标图像进行标记,其中,不同的图像对应的编码信息各不相同。
7.根据权利要求1所述的信息处理方法,其特征在于,所述接收标记指令,包括:
获取针对信息互动界面中画面展示区的触摸操作信息;
根据所述触摸操作信息确定在所述画面展示区中的触摸位置;
提取所述触摸位置所在区域的图像信息;
当所述图像信息包含实体内容时触发标记指令。
8.根据权利要求1所述的信息处理方法,其特征在于,所述标记指令由被分享设备发起;
所述接收标记指令,从信息互动界面的画面展示区中确定与所述标记指令匹配的目标图像,包括:
接收标记指令,所述标记指令包括图像标识信息;
从信息互动界面的画面展示区中确定与所述图像标识信息匹配的目标图像;
其中,所述被分享设备同步显示有所述画面展示区显示的动态画面,所述图像标识信息从被分享设备同步显示的动态画面中确定。
9.根据权利要求8所述的信息处理方法,其特征在于,所述图像标识信息包括以下至少一种:图像本体、识别码或位置信息。
10.根据权利要求9所述的信息处理方法,其特征在于,所述图像标识信息为图像本体,所述从信息互动界面的画面展示区中确定与所述图像标识信息匹配的目标图像,包括:
从所述信息互动界面的画面展示区显示的动态画面中提取多个候选图像;
确定所述图像本体与每一候选图像的相似度;
确定与所述图像本体的相似度最大的候选图像为所述目标图像。
11.一种信息处理装置,应用于分享设备,其特征在于,所述装置包括:
确定单元,用于接收标记指令,从信息互动界面的画面展示区中确定与所述标记指令匹配的目标图像,其中,所述画面展示区用于显示当前场景中的动态画面,所述目标图像从所述动态画面中确定;
处理单元,用于在所述画面展示区内生成标记信息对所述目标图像进行标记,基于所述目标图像的显示位置变化同步更新所述标记信息的显示位置,并将所述画面展示区显示的内容同步显示在被分享设备上。
12.根据权利要求11所述的信息处理装置,其特征在于,当前场景为真实场景所述处理单元包括:
确定子单元,用于确定所述目标图像在所述真实场景中对应的目标实体;
更新子单元,用于当检测到所述目标实体在所述画面展示区的显示位置变化时,基于变化的显示位置同步更新所述标记信息在所述画面展示区的显示位置。
13.根据权利要求12所述的信息处理装置,其特征在于,所述确定子单元用于:
基于预设映射关系确定所述目标图像对应的三维空间图像,其中,所述预设映射关系包括:所述真实场景中每一实体的样本三维空间图像与所述实体的样本二维空间图像之间的映射关系;
从所述真实场景中识别与所述三维空间图像匹配的目标实体。
14.一种计算机可读存储介质,其特征在于,所述存储介质存储有多条指令,所述指令适于处理器进行加载,以执行权利要求1-10任一项所述的信息处理方法。
15.一种电子设备,包括存储器,处理器及存储在存储器上并可在处理器上运行的计算机程序,其特征在于,所述处理器执行所述程序时实现如权利要求1-10任一项所述信息处理方法。
CN202010175738.7A 2020-03-13 2020-03-13 信息处理方法、装置、存储介质及电子设备 Active CN111417028B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202010175738.7A CN111417028B (zh) 2020-03-13 2020-03-13 信息处理方法、装置、存储介质及电子设备

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202010175738.7A CN111417028B (zh) 2020-03-13 2020-03-13 信息处理方法、装置、存储介质及电子设备

Publications (2)

Publication Number Publication Date
CN111417028A CN111417028A (zh) 2020-07-14
CN111417028B true CN111417028B (zh) 2023-09-01

Family

ID=71494379

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202010175738.7A Active CN111417028B (zh) 2020-03-13 2020-03-13 信息处理方法、装置、存储介质及电子设备

Country Status (1)

Country Link
CN (1) CN111417028B (zh)

Families Citing this family (14)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN111880695B (zh) * 2020-08-03 2024-03-01 腾讯科技(深圳)有限公司 一种屏幕共享方法、装置、设备及存储介质
CN116114250A (zh) * 2020-11-12 2023-05-12 海信视像科技股份有限公司 显示设备、人体姿态检测方法及应用
CN112473121B (zh) * 2020-11-13 2023-06-09 海信视像科技股份有限公司 一种显示设备及基于肢体识别的躲避球显示方法
CN112486383B (zh) * 2020-11-26 2022-04-22 万翼科技有限公司 审图分享方法及相关装置
CN112714331B (zh) * 2020-12-28 2023-09-08 广州博冠信息科技有限公司 信息提示方法和装置、存储介质、电子设备
CN114971664A (zh) * 2021-02-26 2022-08-30 富联精密电子(天津)有限公司 广告投放方法及相关设备
CN115037952A (zh) * 2021-03-05 2022-09-09 上海哔哩哔哩科技有限公司 基于直播的标记方法、装置及系统
CN115037985A (zh) * 2021-03-05 2022-09-09 上海哔哩哔哩科技有限公司 基于直播的标记方法及装置
CN115037953A (zh) * 2021-03-05 2022-09-09 上海哔哩哔哩科技有限公司 基于直播的标记方法及装置
CN115209197A (zh) * 2021-04-09 2022-10-18 华为技术有限公司 一种图像处理方法、装置及系统
CN113642451B (zh) * 2021-08-10 2022-05-17 瑞庭网络技术(上海)有限公司 确定视频的匹配性的方法、装置、设备及可读记录介质
CN113676765B (zh) * 2021-08-20 2024-03-01 上海哔哩哔哩科技有限公司 交互动画展示方法及装置
CN114501051B (zh) * 2022-01-24 2024-02-02 广州繁星互娱信息科技有限公司 直播对象的标记显示方法和装置、存储介质及电子设备
CN115348468A (zh) * 2022-07-22 2022-11-15 网易(杭州)网络有限公司 直播互动方法、系统、观众直播客户端及主播直播客户端

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN103945161A (zh) * 2014-04-14 2014-07-23 联想(北京)有限公司 一种信息处理方法及电子设备
CN108521597A (zh) * 2018-03-21 2018-09-11 浙江口碑网络技术有限公司 直播信息动态展示方法及装置
CN109286824A (zh) * 2018-09-28 2019-01-29 武汉斗鱼网络科技有限公司 一种直播用户侧控制的方法、装置、设备及介质
WO2019084753A1 (zh) * 2017-10-31 2019-05-09 深圳市云中飞网络科技有限公司 信息处理方法、存储介质和移动终端

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN103945161A (zh) * 2014-04-14 2014-07-23 联想(北京)有限公司 一种信息处理方法及电子设备
WO2019084753A1 (zh) * 2017-10-31 2019-05-09 深圳市云中飞网络科技有限公司 信息处理方法、存储介质和移动终端
CN108521597A (zh) * 2018-03-21 2018-09-11 浙江口碑网络技术有限公司 直播信息动态展示方法及装置
CN109286824A (zh) * 2018-09-28 2019-01-29 武汉斗鱼网络科技有限公司 一种直播用户侧控制的方法、装置、设备及介质

Also Published As

Publication number Publication date
CN111417028A (zh) 2020-07-14

Similar Documents

Publication Publication Date Title
CN111417028B (zh) 信息处理方法、装置、存储介质及电子设备
CN109918975B (zh) 一种增强现实的处理方法、对象识别的方法及终端
WO2019184889A1 (zh) 增强现实模型的调整方法、装置、存储介质和电子设备
US20160171773A1 (en) Display control method, information processing apparatus, and storage medium
US9392248B2 (en) Dynamic POV composite 3D video system
CN111491197B (zh) 一种直播内容展示的方法、装置及存储介质
CN109409244B (zh) 一种物体摆放方案的输出方法和移动终端
CN109495616B (zh) 一种拍照方法及终端设备
CN108022274B (zh) 图像处理方法、装置、计算机设备和计算机可读存储介质
CN109284081B (zh) 一种音频的输出方法、装置及音频设备
CN108683850B (zh) 一种拍摄提示方法及移动终端
CN108460817B (zh) 一种拼图方法及移动终端
CN112068752B (zh) 一种空间展示方法、装置、电子设备及存储介质
CN109426343B (zh) 基于虚拟现实的协作训练方法及系统
CN107562288A (zh) 基于红外触控装置的响应方法、红外触控装置和介质
CN111464825B (zh) 一种基于地理信息的直播方法以及相关装置
CN110719527A (zh) 一种视频处理方法、电子设备及移动终端
CN109495638B (zh) 一种信息显示方法及终端
CN109947988B (zh) 一种信息处理方法、装置、终端设备及服务器
CN109166164B (zh) 一种表情图片的生成方法及终端
CN111723843B (zh) 一种签到方法、装置、电子设备及存储介质
CN112818733A (zh) 信息处理方法、装置、存储介质及终端
JP6413521B2 (ja) 表示制御方法、情報処理プログラム、及び情報処理装置
CN108471549B (zh) 一种遥控方法及终端
KR102462054B1 (ko) 라이브 경매의 사용자 인터페이스 구현 장치 및 방법

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
REG Reference to a national code

Ref country code: HK

Ref legal event code: DE

Ref document number: 40026392

Country of ref document: HK

SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant