CN109389550A - 数据处理方法、装置和计算设备 - Google Patents
数据处理方法、装置和计算设备 Download PDFInfo
- Publication number
- CN109389550A CN109389550A CN201811081653.1A CN201811081653A CN109389550A CN 109389550 A CN109389550 A CN 109389550A CN 201811081653 A CN201811081653 A CN 201811081653A CN 109389550 A CN109389550 A CN 109389550A
- Authority
- CN
- China
- Prior art keywords
- image
- equipment
- related information
- information
- background data
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
- 238000003672 processing method Methods 0.000 title claims abstract description 20
- 238000004422 calculation algorithm Methods 0.000 claims description 56
- 230000007613 environmental effect Effects 0.000 claims description 46
- 238000000034 method Methods 0.000 claims description 34
- 238000003860 storage Methods 0.000 claims description 20
- 238000004590 computer program Methods 0.000 claims description 16
- 230000004044 response Effects 0.000 claims description 6
- 238000010586 diagram Methods 0.000 description 22
- 230000006870 function Effects 0.000 description 15
- 230000005540 biological transmission Effects 0.000 description 13
- 230000000694 effects Effects 0.000 description 11
- 230000000903 blocking effect Effects 0.000 description 10
- 238000005286 illumination Methods 0.000 description 9
- 238000005516 engineering process Methods 0.000 description 7
- 230000005291 magnetic effect Effects 0.000 description 6
- 230000003287 optical effect Effects 0.000 description 6
- 230000005611 electricity Effects 0.000 description 5
- 239000000203 mixture Substances 0.000 description 5
- 238000004891 communication Methods 0.000 description 4
- 230000008859 change Effects 0.000 description 3
- 239000004065 semiconductor Substances 0.000 description 3
- 230000000007 visual effect Effects 0.000 description 3
- 238000004458 analytical method Methods 0.000 description 2
- 230000008901 benefit Effects 0.000 description 2
- 238000005538 encapsulation Methods 0.000 description 2
- 238000001914 filtration Methods 0.000 description 2
- 239000000463 material Substances 0.000 description 2
- 238000010606 normalization Methods 0.000 description 2
- 230000001902 propagating effect Effects 0.000 description 2
- 238000006748 scratching Methods 0.000 description 2
- 230000002393 scratching effect Effects 0.000 description 2
- 239000000758 substrate Substances 0.000 description 2
- 230000006399 behavior Effects 0.000 description 1
- 210000004556 brain Anatomy 0.000 description 1
- 238000004364 calculation method Methods 0.000 description 1
- 230000000052 comparative effect Effects 0.000 description 1
- 230000007423 decrease Effects 0.000 description 1
- 230000003247 decreasing effect Effects 0.000 description 1
- 238000009826 distribution Methods 0.000 description 1
- 230000008030 elimination Effects 0.000 description 1
- 238000003379 elimination reaction Methods 0.000 description 1
- 239000000835 fiber Substances 0.000 description 1
- 239000011521 glass Substances 0.000 description 1
- 238000003384 imaging method Methods 0.000 description 1
- 230000010365 information processing Effects 0.000 description 1
- 210000003127 knee Anatomy 0.000 description 1
- 230000035772 mutation Effects 0.000 description 1
- 239000013307 optical fiber Substances 0.000 description 1
- 238000005457 optimization Methods 0.000 description 1
- 238000000059 patterning Methods 0.000 description 1
- 238000002360 preparation method Methods 0.000 description 1
- 230000008569 process Effects 0.000 description 1
- 238000000926 separation method Methods 0.000 description 1
- 238000012706 support-vector machine Methods 0.000 description 1
Classifications
-
- G06T3/04—
Abstract
本公开提供了一种数据处理方法,该数据处理方法包括:采集第一图像,所述第一图像的至少部分背景包括遮挡图像;将图像关联信息发送给第二计算设备,其中,所述图像关联信息和所述第一图像相关联;至少基于所述第二计算设备提供的与所述图像关联信息对应的反馈信息获得第二图像,其中,所述第二图像为所述第一图像中至少部分遮挡图像被替换的图像;以及展示所述第二图像。本公开还提供了一种数据处理装置以及一种计算设备。
Description
技术领域
本公开涉及一种数据处理方法、装置和计算设备。
背景技术
随着智能手机、数码相机技术的快速发展,用户在户外进行取景、拍照的应用场景随处可见。然而,在取景或拍照的图像中常常会展现出用户所不希望的图像,例如,不相关游客的图像、商贩货物的图像等,这些图像会遮挡部分背景,由于旅游景点的图像被上述用户希望出现的图像遮挡,导致用户体验度下降。此外,为了拍摄到没有遮挡物的图像,用户需要等待遮挡物离开或者从新选择拍摄地点或拍摄角度,导致错失拍摄时机或者不能采取最佳的拍摄地点或拍摄角度,这会造成用户取景、拍摄效果不佳。
发明内容
本公开的一个方面提供了一种数据处理方法,该数据处理包括,首先,采集第一图像,其中,所述第一图像的至少部分背景包括遮挡图像,然后,将图像关联信息发送给第二计算设备,其中,所述图像关联信息和所述第一图像相关联,该图像关联信息可以为包括第一图像的信息,也可以只是与该第一图像相关的地理位置、天气等信息等,接着,至少基于所述第二计算设备提供的与所述图像关联信息对应的反馈信息获得第二图像,其中,所述第二图像为所述第一图像中至少部分遮挡图像被替换的图像,以及展示所述第二图像。这样使得第一计算设备展现出的图像为至少部分遮挡图像被替换的图像,使得用户不用为了获取无遮挡的图像而放弃了最佳取景角度或者被迫接受存在不希望的遮挡的图像。
可选地,所述反馈信息包括推荐算法和/或背景数据,具体地,所述至少基于所述第二计算设备提供的与所述图像关联信息对应的反馈信息获得第二图像包括以下三种情形:第一种,首先,接收所述第二计算设备发送的所述推荐算法和所述背景数据,然后,基于所述推荐算法和所述背景数据对所述至少部分遮挡图像进行遮挡替换处理,得到所述第二图像。第二种,首先,接收所述第二计算设备发送的所述背景数据,然后,基于本地算法和所述背景数据对所述至少部分遮挡图像进行遮挡替换处理,得到所述第二图像。第三种,首先,接收所述第二计算设备发送的所述推荐算法,然后,基于所述推荐算法对所述至少部分遮挡图像进行遮挡替换处理,得到所述第二图像。这样使得第一计算设备可以借助其他计算设备的图像资源、算法、图像处理能力中的一种或多种来帮助第一计算设备获取所需的图像。
可选地,所述反馈信息包括无遮挡图像,相应地,所述至少基于所述第二计算设备提供的与所述图像关联信息对应的反馈信息获得第二图像包括将所述无遮挡图像作为所述第二图像。这样使得第一计算设备可以借助第二计算设备,如云端服务器的图像资源、算法和图像处理能力实现获取至少部分遮挡被去除的图像,实现了资源的有效分配,至少部分地克服了移动终端的图像处理能力和图像资源匮乏的问题。
可选地,在一个实施例中,所述图像关联信息包括第一图像和/或环境信息,相应地,所述至少基于所述第二计算设备提供的与所述图像关联信息对应的反馈信息获得第二图像包括基于所述第二计算设备提供的与所述第一图像和/或所述环境信息对应的反馈信息获得第二图像。在另一个实施例中,所述图像关联信息包括第一图像和环境信息,相应地,所述至少基于所述第二计算设备提供的与所述图像关联信息对应的反馈信息获得第二图像包括基于所述环境信息和所述第二计算设备提供的与所述第一图像对应的反馈信息获得第二图像。这样可以根据环境信息对图像处理方法或要展示的图像进行优化以提升图像的美感。
可选地,所述方法还可以包括如下操作,响应于接收到所述第二计算设备发送的推荐操作,展示所述推荐操作,其中,所述推荐操作为所述第二计算设备基于所述第一图像和/或所述环境信息确定的推荐操作。这样进一步借助第二计算设备的庞大资源优势给用户推荐操作,如最近的拍摄地点,最佳取景角度等,以便于提升用户体验度。
本公开的另一个方面提供了数据处理方法,用于第二计算设备,所述数据处理方法可以包括如下操作,首先,接收第一计算设备发送的图像关联信息,其中,所述图像关联信息和第一图像相关联,所述第一图像的至少部分背景包括遮挡图像,然后,获取与所述图像关联信息对应的反馈信息,其中,所述反馈信息用于获取第二图像,所述第二图像为所述第一图像中至少部分遮挡图像被替换的图像,以及发送所述反馈信息给所述第一计算设备。这样使得第二计算设备可以利用自身强大的图像处理能力、丰富的信息资源等帮助第一计算设备获取用户更加满意的图像。
可选地,在一个实施例中,所述图像关联信息包括第一图像和/或环境信息,相应地,所述获取与所述图像关联信息对应的反馈信息包括根据所述第一图像和/或所述环境信息获取所述反馈信息。这样使得第二计算设备可以根据第一图像、环境信息或者第一图像和环境信息来获取所述图像关联信息。
可选地,在一个实施例中,所述反馈信息包括推荐算法和/或背景数据,其中,获取所述背景数据可以包括如下操作,首先,获取至少一个候选图像,然后,获取所述至少一个候选图像中与所述遮挡图像对应的候选背景数据,接着,将满足匹配度要求的候选背景数据作为所述背景数据。在另一个实施例中,所述反馈信息包括无遮挡图像,其中,获取所述无遮挡图像可以包括如下操作,首先,获取至少一个候选图像,然后,获取所述至少一个候选图像中与所述遮挡图像对应的候选背景数据,以及将满足匹配度要求的候选背景数据替换对应的遮挡图像,得到无遮挡图像。这样可以根据实际情况,如第一计算设备所需的图像信息、算法或者计算能力来提供信息。
可选地,所述方法还可以包括如下操作:首先,在接收到所述图像关联信息之后,根据所述图像关联信息获取推荐操作,然后,将所述推荐操作发送给所述第一计算设备。这样可以根据所述第一计算设备所处环境和/或图像给用户推荐操作,有助于提升用户体验度。
本公开的另一方面提供了一种数据处理装置,可以包括采集模块、第一发送模块、第一获取模块和展示模块,其中,所述采集模块用于采集第一图像,所述第一图像的至少部分背景包括遮挡图像,所述第一发送模块用于将图像关联信息发送给第二计算设备。所述图像关联信息和所述第一图像相关联,所述第一获取模块用于至少基于所述第二计算设备提供的与所述图像关联信息对应的反馈信息获得第二图像,其中,所述第二图像为所述第一图像中至少部分遮挡图像被替换的图像,以及所述展示模块用于展示所述第二图像。
可选地,所述反馈信息包括推荐算法和/或背景数据,相应地,在一个实施例中,所述第一获取模块包括第一接收单元和第一处理单元,其中,所述第一接收单元用于接收所述第二计算设备发送的所述推荐算法和所述背景数据,所述第一处理单元用于基于所述推荐算法和所述背景数据对所述至少部分遮挡图像进行遮挡替换处理,得到所述第二图像。在另一个实施例中,所述第一获取模块包括第二接收单元和第二处理单元,其中,所述第二接收单元用于接收所述第二计算设备发送的所述背景数据,所述第二处理单元用于基于本地算法和所述背景数据对所述至少部分遮挡图像进行遮挡替换处理,得到所述第二图像。在另一个实施例中,所述第一获取模块包括第三接收单元和第三处理单元,其中,所述第三接收单元用于接收所述第二计算设备发送的所述推荐算法,所述第二处理单元用于基于所述推荐算法对所述至少部分遮挡图像进行遮挡替换处理,得到所述第二图像。
可选地,所述反馈信息包括无遮挡图像,相应地,所述第一获取模块具体用于所述无遮挡图像作为所述第二图像。
可选地,在一个实施例中,所述图像关联信息包括第一图像和/或环境信息,相应地,所述第一获取模块具体用于基于所述第二计算设备提供的与所述第一图像和/或所述环境信息对应的反馈信息获得第二图像。在另一个实施例中,所述图像关联信息包括第一图像和环境信息,相应地,所述第一获取模块具体用于基于所述环境信息和所述第二计算设备提供的与所述第一图像对应的反馈信息获得第二图像。
可选地,所述装置还可以包括推荐模块,所述推荐模块用于响应于接收到所述第二计算设备发送的推荐操作,展示所述推荐操作,其中,所述推荐操作为所述第二计算设备基于所述第一图像和/或所述环境信息确定的推荐操作。
本公开的另一方面提供了一种数据处理装置,可以包括接收模块、第二获取模块和第二发送模块,其中,所述接收模块用于接收第一计算设备发送的图像关联信息,其中,所述图像关联信息和第一图像相关联,所述第一图像的至少部分背景包括遮挡图像,所述第二获取模块用于获取与所述图像关联信息对应的反馈信息,其中,所述反馈信息用于获取第二图像,所述第二图像为所述第一图像中至少部分遮挡图像被替换的图像,以及,所述第二发送模块用于发送所述反馈信息给所述第一计算设备。
可选地,所述图像关联信息包括第一图像和/或环境信息,相应地,所述第二获取模块用于根据所述第一图像和/或所述环境信息获取所述反馈信息。
可选地,在一个实施例中,所述反馈信息包括推荐算法和/或背景数据,相应地,所述第二获取模块可以包括第一获取单元、第二获取单元和第三获取单元,其中,所述第一获取单元用于获取至少一个候选图像,所述第二获取单元用于获取所述至少一个候选图像中与所述遮挡图像对应的候选背景数据,所述第三获取单元用于将满足匹配度要求的候选背景数据作为所述背景数据。在另一个实施例中,所述反馈信息包括无遮挡图像,相应地,所述第二获取模块可以包括第四获取单元、第五获取单元和第六获取单元,其中,所述第四获取单元用于获取至少一个候选图像,所述第五获取单元用于获取所述至少一个候选图像中与所述遮挡图像对应的候选背景数据,所述第六获取单元用于将满足匹配度要求的候选背景数据替换对应的遮挡图像,得到无遮挡图像。
可选地,所述装置还可以包括第三获取模块和第三发送模块,其中,所述第三获取模块用于在接收到所述图像关联信息之后,根据所述图像关联信息获取推荐操作,所述第三发送模块用于将所述推荐操作发送给所述第一计算设备。
本公开的另一方面提供了一种计算设备,该计算设备可以包括一个或多个处理器,以及可读存储介质,该可读存储介质用于存储一个或多个计算机程序,所述计算机程序在被所述处理器执行时,实现如上所述的方法。
本公开的另一方面提供了一种非易失性存储介质,存储有计算机可执行指令,所述指令在被执行时用于实现如上所述的方法。
本公开的另一方面提供了一种计算机程序,所述计算机程序包括计算机可执行指令,所述指令在被执行时用于实现如上所述的方法。
附图说明
为了更完整地理解本公开及其优势,现在将参考结合附图的以下描述,其中:
图1A示意性示出了根据本公开实施例的数据处理方法、装置和计算设备的应用场景;
图1B示意性示出了根据本公开实施例的第一图像;
图1C示意性示出了根据本公开另一实施例的第一图像;
图2A示意性示出了根据本公开实施例的数据处理方法的流程图;
图2B示意性示出了根据本公开实施例的数据处理示意图;
图2C示意性示出了根据本公开另一实施例的数据处理示意图;
图2D示意性示出了根据本公开另一实施例的数据处理示意图;
图2E示意性示出了根据本公开另一实施例的数据处理示意图;
图3A示意性示出了根据本公开另一实施例的数据处理方法的流程图;
图3B示意性示出了根据本公开另一实施例的数据处理示意图;
图4A示意性示出了根据本公开实施例的数据处理装置的框图;
图4B示意性示出了根据本公开另一实施例的数据处理装置的框图;以及
图5示意性示出了根据本公开实施例的计算设备的框图。
具体实施方式
以下,将参照附图来描述本公开的实施例。但是应该理解,这些描述只是示例性的,而并非要限制本公开的范围。在下面的详细描述中,为便于解释,阐述了许多具体的细节以提供对本公开实施例的全面理解。然而,明显地,一个或多个实施例在没有这些具体细节的情况下也可以被实施。此外,在以下说明中,省略了对公知结构和技术的描述,以避免不必要地混淆本公开的概念。
在此使用的术语仅仅是为了描述具体实施例,而并非意在限制本公开。在此使用的术语“包括”、“包含”等表明了所述特征、步骤、操作和/或部件的存在,但是并不排除存在或添加一个或多个其他特征、步骤、操作或部件。
在此使用的所有术语(包括技术和科学术语)具有本领域技术人员通常所理解的含义,除非另外定义。应注意,这里使用的术语应解释为具有与本说明书的上下文相一致的含义,而不应以理想化或过于刻板的方式来解释。
在使用类似于“A、B和C等中至少一个”这样的表述的情况下,一般来说应该按照本领域技术人员通常理解该表述的含义来予以解释(例如,“具有A、B和C中至少一个的系统”应包括但不限于单独具有A、单独具有B、单独具有C、具有A和B、具有A和C、具有B和C、和/或具有A、B、C的系统等)。在使用类似于“A、B或C等中至少一个”这样的表述的情况下,一般来说应该按照本领域技术人员通常理解该表述的含义来予以解释(例如,“具有A、B或C中至少一个的系统”应包括但不限于单独具有A、单独具有B、单独具有C、具有A和B、具有A和C、具有B和C、和/或具有A、B、C的系统等)。本领域技术人员还应理解,实质上任意表示两个或更多可选项目的转折连词和/或短语,无论是在说明书、权利要求书还是附图中,都应被理解为给出了包括这些项目之一、这些项目任一方、或两个项目的可能性。例如,短语“A或B”应当被理解为包括“A”或“B”、或“A和B”的可能性。
附图中示出了一些方框图和/或流程图。应理解,方框图和/或流程图中的一些方框或其组合可以由计算机程序指令来实现。这些计算机程序指令可以提供给通用计算机、专用计算机或其他可编程数据处理装置的处理器,从而这些指令在由该处理器执行时可以创建用于实现这些方框图和/或流程图中所说明的功能/操作的装置。
因此,本公开的技术可以硬件和/或软件(包括固件、微代码等)的形式来实现。另外,本公开的技术可以采取存储有指令的计算机可读介质上的计算机程序产品的形式,该计算机程序产品可供指令执行系统使用或者结合指令执行系统使用。在本公开的上下文中,计算机可读介质可以是能够包含、存储、传送、传播或传输指令的任意介质。例如,计算机可读介质可以包括但不限于电、磁、光、电磁、红外或半导体系统、装置、器件或传播介质。计算机可读介质的具体示例包括:磁存储装置,如磁带或硬盘(HDD);光存储装置,如光盘(CD-ROM);存储器,如随机存取存储器(RAM)或闪存;和/或有线/无线通信链路。
本公开的实施例提供了一种数据处理方法、装置以及能够应用该方法的计算机设备。该方法包括由第一计算设备采集第一图像,所述第一图像的至少部分背景包括遮挡图像,将图像关联信息发送给第二计算设备,其中,所述图像关联信息和所述第一图像相关联,该图像关联信息可以包括第一图像、与第一图像相关的信息中的一种或多种,第二计算设备根据接收的图像关联信息获取与所述图像关联信息相对应的反馈信息,该反馈信息用于获取第二图像,所述第二图像为所述第一图像中至少部分遮挡图像被替换的图像,然后展示该第二图像,这样就实现了在取景或拍摄时使得第一计算设备展示至少部分遮挡被去除的图像,使得用户不用等待遮挡物移除后再取景或拍摄,或者用户不用为了避免拍摄到遮挡物而放弃最佳拍摄角度。此外,去除遮挡物的取景方式能让用户预先预览到遮挡物被去除后的图像,不同于现有Photoshop(简称PS)只能在拍摄后再通过抠图等方式去除遮挡物,本公开的预览效果可以有效避免由于遮挡物被去除后导致构图改变,造成去除遮挡物后的图片效果达不到预期效果的情况发生。
图1A示意性示出了根据本公开实施例的数据处理方法、装置和计算设备的应用场景。需要注意的是,图1所示仅为可以应用本公开实施例的场景的示例,以帮助本领域技术人员理解本公开的技术内容,但并不意味着本公开实施例不可以用于其他设备、系统、环境或场景。
如图1所示,根据该实施例的系统架构100可以包括终端设备101、102、103,网络104和服务器105。网络104用以在终端设备101、102、103和服务器105之间提供通信链路的介质。网络104可以包括各种连接类型,例如有线、无线通信链路或者光纤电缆等等。优选地,该网络104为5G网络,具有很高的数据传输速率,能满足实时图像信息和处理后图像信息传输要求。
用户可以使用终端设备101、102、103通过网络104与服务器105交互,以接收或发送消息等。终端设备101、102、103上可以安装有摄像头用于采集图像,此外,还可以安装有各种通讯客户端应用,例如即时通信工具、购物类应用、网页浏览器应用、搜索类应用、邮箱客户端、社交平台软件等(仅为示例)。
终端设备101、102、103可以是具有显示屏并且支持预览取景或拍摄的各种电子设备,包括但不限于智能手机、数码相机、数码摄像机、平板电脑、膝上型便携计算机和具有摄像头的台式计算机等等,此外,还可以为具有图像拍摄功能和预览功能的智能眼镜、虚拟现实设备等。
服务器105可以是提供各种服务的服务器,例如对用户利用终端设备101、102、103所采集的图像提供图像处理支持的后台管理服务器(仅为示例)。后台管理服务器可以对接收到的用户请求等数据进行分析等处理,并将处理结果(例如根据用户请求获取生成信息、算法或数据等)反馈给终端设备。所述服务器105反馈的数据可以是从网络收集的数据,也可以是其它终端设备同步或异步采集的数据,然后发送给服务器105,在此不做限定。
需要说明的是,本公开实施例所提供的一种数据处理方法,用于第一计算设备的情形时,一般可以由终端设备101、102、103执行。相应地,对应的数据处理装置可以设置于终端设备101、102、103中。另外,本公开实施例所提供的一种数据处理方法,用于第二计算设备的情形时,一般可以由服务器105执行。相应地,本公开实施例所提供的数据处理装置一般可以设置于服务器105中。本公开实施例所提供的数据处理方法也可以由不同于服务器105且能够与终端设备101、102、103和/或服务器105通信的服务器或服务器集群执行。相应地,本公开实施例所提供的数据处理装置也可以设置于不同于服务器105且能够与终端设备101、102、103和/或服务器105通信的服务器或服务器集群中。
应该理解,图1中的终端设备、网络和服务器的数目仅仅是示意性的。根据实现需要,可以具有任意数目的终端设备、网络和服务器。
图1B示意性示出了根据本公开实施例的第一图像。如图1B所示,以故宫为背景进行举例说明,图1B所示的图片为根据计算设备中预览的图像而获取的图片,从图片中可以看到,预览图像中存在很多游客,将故宫的背景遮挡了很大一部分,这是用户所不希望的。用户为了获得较好的拍摄效果,会希望背景中只有较少的其他游客或没有其他游客最好,这样便于用户拍摄到满意的景点图形,或者用户与故宫的合影的效果最好。此时,如果预览图像时能自动将其他游客数量减少或完全去除,则能大幅提升用户的体验效果。此外,由于预览图像中如果没有遮挡物,则用户可以以最终成像的视觉效果来审视拍摄的故宫的图像或者用户与故宫合影的效果,比如,选取最优的拍摄角度、和拍摄位置,而现有的PS抠图方式,只能在拍摄完成后通过抠图去除遮挡物,由于在取景时遮挡物实际上成为了构图的一部分,当通过抠图方式去除遮挡物时,往往会发现最终形成的图片的与预期效果不一样,这是由于去除遮挡物后的构图实际上发生了改变。
图1C示意性示出了根据本公开另一实施例的第一图像。如图1C所示,以会场为背景为例进行举例说明,在转播会议时,需要在会场布置多个摄像机,当如图1C所示的取景情形下,前方布置的摄像机就成为遮挡,影响了图像的美观度,现有技术无法在拍摄时即去除该遮挡,这是由于拍摄时需要不停的移动位置,该遮挡在取景框中的位置也在不停的变化。如果能在取景、直播等时直接将该遮挡去除能有效提升图像的美观度,例如,使用同会场的其它摄像机中相同场景没有遮挡的图像对本摄像机采集的图像中的遮挡物进行去除。此外,也便于拍摄人员根据最终展示图像进行构图。
图2A示意性示出了根据本公开实施例的数据处理方法的流程图。
如图2A所示,该方法可以包括操作S201~S204。
在操作S201中,采集第一图像,所述第一图像的至少部分背景包括遮挡图像。
在本实施例中,可以由用户利用终端进行图像采集,该终端为具有图像传感器和图像显示器的终端,包括但不限于:智能手机、数码相机、数码摄像机、平板电脑、笔记本电脑、具有摄像头的台式机等。以智能手机为例进行说明,用户可以手持智能手机在希望拍照的场景中利用摄像头进行取景,摄像头取景得到的图像可以不直接展示在显示屏上,当然,为了便于比对等用户所需的功能,摄像头取景得到的图像也可以至少部分地展示在显示屏上。
在操作S202中,将图像关联信息发送给第二计算设备,其中,所述图像关联信息和所述第一图像相关联。
在本实施例中,以智能手机为例进行示例性说明,当智能手机的摄像头采集到图像后,可以把采集到的图像和/或与该图像相关联的图像关联信息发送给第二计算设备(如服务器),该图像关联信息可以包括以下任意一种或多种信息:第一图像信息、拍摄第一图像时所处环境的环境信息等,其中,所述环境信息包括但不限于:地理位置、天气、时间或者光照强度中的一种或多种,该环境信息可以通过第一计算设备上安装的传感器获取,例如,通过GPS或北斗定位系统等获取地理位置,通过光强传感器确定当前的光照强度等,另外,也可以是通过网络获取的,例如,通过互联网获取准确的时间、天气等环境信息,在此不做限定。此外,该图像关联信息还可以包括用来表明第一图像中的遮挡图像的信息,例如,由用户选取的希望去除的遮挡图像的信息。
在操作S203中,至少基于所述第二计算设备提供的与所述图像关联信息对应的反馈信息获得第二图像,其中,所述第二图像为所述第一图像中至少部分遮挡图像被替换的图像。
在本实施例中,所述反馈信息可以包括推荐算法和/或背景数据。其中,所述背景数据可以为已经处理好的可以直接用来替换遮挡图像的背景数据,也可以是包含用来替换遮挡图像的背景数据的图像,以便于第一计算设备从图像中获取用来替换遮挡图像的背景数据,进而进行遮挡图像替换。所述算法可以是用来对第一图像进行遮挡替换处理的算法,也可以是用来从第一图像中确定遮挡物的算法。具体地,用于替换遮挡图像的替换图像可以由第二计算设备直接处理好发送给第一计算设备,也可以是由第二计算设备将包含替换图像的素材和相应的处理的推荐算法发送给第一计算设备,由第一计算设备自行获取用于替换遮挡图像的替换图像。此外,还可以是由第二计算设备根据遮挡图像在构图中的占比和背景的复杂程度来推荐算法,例如,当遮挡图像面积较小,且背景较简洁(如纯色、具有规律的图像等),则可以由第二计算设备将推荐算法发送给第一计算设备进行图像处理,这样可以有效降低网络传输数据量。
需要说明的是,本公开涉及大量实时数据的采集和传输,对网络的数据传输速率要求较高,因此,优选采用网络数据传输能力强,时延小的网络,如5G网络等来满足数据高速实时传输的要求。
具体地,所述至少基于所述第二计算设备提供的与所述图像关联信息对应的反馈信息获得第二图像可以包括如下四种方案。
在一个实施例中,获得第二图像可以包括:首先,接收所述第二计算设备发送的所述推荐算法和所述背景数据,然后,基于所述推荐算法和所述背景数据对所述至少部分遮挡图像进行遮挡替换处理,得到所述第二图像。
图2B示意性示出了根据本公开实施例的数据处理示意图。如图2B所示,第二计算设备给所述第一计算设备发送了背景数据和推荐的算法,该背景数据为已经处理好的用于替换遮挡图像的图像数据,以及便于利用该背景数据处理遮挡图像的推荐算法;或者,该背景数据为推荐的与所述第一图像相对应的至少不包含部分遮挡图像的图像数据,以及便于从推荐的图像数据中找到遮挡图像对应的推荐算法和进行图像处理的推荐算法。如图所示,背景数据为与图1B对应的故宫背景的图像,可以为一张或多张图像。当第一计算设备接收到背景数据时,可以根据用户的设定展示背景数据以便选取合适的背景数据,或者不展示背景数据,直接采用相似度最高且遮挡物最少的背景数据作为遮挡替换处理的素材。该推荐算法可以用于如轮廓分析、图像正规化、图像过滤(角的处理形式、噪声的滤波等)、超平面分离(如广义肖像的方法,支持向量机)等。这样,经过遮挡替换处理后得到的第二图像可以展示在第一计算设备上,作为取景的图像或者拍摄的图像。本公开可以借助第二计算设备的计算能力辅助进行图像处理,或者借助第二计算设备的丰富资源给第一计算设备推荐与所述图像关联信息相应的优选算法,以便于第一计算设备至少基于所述第二计算设备提供的与所述图像关联信息对应的反馈信息获得第二图像,并进行展示。
在另一个实施例中,获得第二图像可以包括:首先,接收所述第二计算设备发送的所述背景数据,然后,基于本地算法和所述背景数据对所述至少部分遮挡图像进行遮挡替换处理,得到所述第二图像。
图2C示意性示出了根据本公开另一实施例的数据处理示意图。在图2C中,第二计算设备给所述第一计算设备发送了背景数据,使得第一计算设备可以根据自身存储的本地算法和所述背景数据对所述至少部分遮挡图像进行遮挡替换处理,得到所述第二图像。例如,当第二计算设备发送的背景数据为较规则的图像,且和第一图像的吻合度较高,无需进行大量图像处理,如轮廓分析、图像正规化等,可以基于第一计算设备自身存储的本地算法利用背景数据对第一图像进行处理得到第二图像,这样可以减小网络资源的占用率和第二计算设备的信息处理量。例如,如图2C下方的矩形背景数据,可以直接对对应的遮挡物所在区域的图像进行覆盖即可实现去除遮挡物,这样第二计算设备无需发送推荐的算法。
在又一个实施例中,获得第二图像可以包括:首先,接收所述第二计算设备发送的所述推荐算法,然后,基于所述推荐算法对所述至少部分遮挡图像进行遮挡替换处理,得到所述第二图像。
图2D示意性示出了根据本公开另一实施例的数据处理示意图。在图2D中,为一个房屋的照片,可以看到墙壁上有污物,将原有的墙纸遮挡了,为了提高拍摄的美观度,可以对污物进行遮挡替换处理,如图中方框内的图像进行遮挡替换处理。由于图2D中所示的污物遮挡的图像为纯色图案,如果将未被污物遮挡的墙纸图像覆盖污物即可实现至少部分遮挡图像被替换成无遮挡图像,因此,无需第二计算设备给第一计算设备发送背景数据,只需要给所述第一计算设备发送推荐算法以便于第一计算设备进行遮挡去除、消除边缘突变等,这样做可以进一步降低对网络资源的占用,且仅发送算法对网速要求也低于实时发送背景数据对网速的要求。
在又一个实施例中,所述反馈信息包括无遮挡图像。相应地,所述至少基于所述第二计算设备提供的与所述图像关联信息对应的反馈信息获得第二图像包括将所述无遮挡图像作为所述第二图像。
图2E示意性示出了根据本公开另一实施例的数据处理示意图。在图2E中,以故宫为背景进行示例性说明,由于第二计算设备中存储有相符度很高的故宫背景图片、当前服务器能提供足够的数据处理资源、且网络状况良好,则可以由第二计算设备直接对第一图像进行去遮挡处理,得到较少遮挡甚至无遮挡的第二图形,并发送给第一计算设备。这样可以很好的避免了一些图像处理能力有限的设备无法实时进行去遮挡处理的问题,例如,手机的图像处理能力虽然在不断提高,但图像处理能力仍然有限,由第二计算设备将去遮挡处理完成的第二图像直接发送给第一计算设备进行展示可以有效满足第一计算设备,如手机的图像处理能力无法满足实时进行遮挡去除的需求。
需要说明的是,所述图像关联信息可以包括第一图像和/或环境信息,例如,所述图像关联信息可以为第一图像,环境信息,或者第一图像和环境信息,相应地,所述至少基于所述第二计算设备提供的与所述图像关联信息对应的反馈信息获得第二图像可以包括:基于所述第二计算设备提供的与所述第一图像和/或所述环境信息对应的反馈信息获得第二图像。具体地,由于同一个地点在不同时间的光照、空气洁净度等不同,如果第二计算设备给第一计算设备提供的背景数据的光照、空气洁净度等与第一计算设备当前的环境信息不匹配,例如,故宫的同一地点同一拍摄角度在中午和傍晚拍摄的效果相差较大,如果第二计算设备仅考虑图片中物体的相似度,将时刻相差较大的背景数据发送给第一计算设备进行去遮挡处理,处理的效果可能达不到用户要求,因此,所述图像关联信息还可以包括环境信息,使得第二计算设备给第一计算设备发送更加相符的反馈信息。其中,如果第二计算设备没有找到相同环境信息下的背景数据,可以在第二计算设备上根据第一计算设备所处的环境信息对背景数据进行处理,使得给第一计算设备发送的背景数据更加符合第一计算设备所处的环境,例如,将中午时刻的背景数据通过图像处理生成模仿傍晚时刻的背景数据,以满足用户的各种需求。
此外,在另一种情形下,所述图像关联信息可以包括第一图像和环境信息,相应地,所述至少基于所述第二计算设备提供的与所述图像关联信息对应的反馈信息获得第二图像可以包括:基于所述环境信息和所述第二计算设备提供的与所述第一图像对应的反馈信息获得第二图像。也就是说,上述由第二计算设备对背景数据进行处理使得其更加符合第一计算设备所处的环境的操作,可以由第一计算设备在本地进行处理,由于相应的算法比较成熟,例如,通过调整色调等改变图像的显示模式的技术比较成熟,不会给第一计算设备带来过大的负荷,且能避免第二计算设备由于处理过多的请求导致延迟升高等问题。
另外,所述反馈信息中的背景数据可以是第二计算设备中存储的相关的图像数据,也可以是从网络上获取的图像数据,还可以是由其他计算设备实时提供的图像数据,例如,在前述会议场景中,通常会存在多个设备采集图像,当一个设备采集的图像中具有遮挡图像,相邻的设备采集的图像中没有该遮挡图像,且采集的图像中包括该遮挡图像对应的背景数据,则可以由该相邻的设备将实时采集的图像发送给第二计算设备,以便于第二计算设备根据接收的图像获取反馈信息。
在操作S204中,展示所述第二图像。
在本实施例中,第一计算设备展示给用户的图像为所述第一图像中至少部分遮挡图像被替换的图像,可以有效改善取景中显示图像的视觉效果,当用户进行拍摄时,也可以有效减少背景中的遮挡物的数量。此外,由于用户在拍摄的构图过程中,可以直接以与最终的拍摄图像一致的效果进行取景,有助于避免由于后期去遮挡处理(如抠图、打标、模糊处理等)导致拍摄的图像的构图发生改变,造成图像的视觉效果变差,无法满足用户需求的情况发生。
在又一个实施例中,该数据处理方法还可以进一步包括操作S205。
在操作S205中,响应于接收到所述第二计算设备发送的推荐操作,展示所述推荐操作,其中,所述推荐操作为所述第二计算设备基于所述第一图像和/或所述环境信息确定的推荐操作。
在本实施例中,由于用户作为游客可能是第一次去某个旅游景点,用户对旅游景点的最佳拍摄地点、拍摄角度、拍摄参数等不清楚,只能根据自己的拍摄经验进行取景,这可能导致错过一些绝佳的拍摄图像,因此,本公开还可以给用户推荐操作,具体地,响应于接收到所述第二计算设备发送的推荐操作,展示所述推荐操作。具体地,第二计算设备根据第一计算设备发送的第一图像和/或环境信息,确定用户是否处于旅游景点等可能需要拍摄视图、且该环境中或附近存在较佳的拍摄地点和/或拍摄角度等信息时,可以推荐给第一计算设备的用户,以便于用户拍摄到心仪的图像,提升用户体验度。
相应地,本公开还提供了一种用于第二计算设备的数据处理方法。
图3A示意性示出了根据本公开另一实施例的数据处理方法的流程图。如图3A所示,该数据处理方法可以包括操作S301~操作S303。
在操作S301中,接收第一计算设备发送的图像关联信息,其中,所述图像关联信息和第一图像相关联,所述第一图像的至少部分背景包括遮挡图像。
在本实施例中,第二计算设备可以是通过互联网与所述第一计算设备相连的计算设备,能提供较强的数据处理能力,例如,台式计算机、服务器、服务器集群等。该图像关联信息可以包括以下任意一种或多种信息:第一图像信息、拍摄第一图像时所处环境的环境信息等,其中,所述环境信息包括但不限于:地理位置、天气、时间或者光照强度中的一种或多种,该环境信息可以通过第一计算设备上安装的传感器获取,例如,通过GPS或北斗定位系统等获取地理位置,通过光强传感器确定当前的光照强度等,另外,也可以是通过网络获取的,例如,通过互联网获取准确的时间、天气等环境信息,在此不做限定。
在操作S302中,获取与所述图像关联信息对应的反馈信息,其中,所述反馈信息用于获取第二图像,所述第二图像为所述第一图像中至少部分遮挡图像被替换的图像。
在本实施例中,当所述图像关联信息包括第一图像时,则获取与所述第一图像对应的反馈信息,例如与第一图像中遮挡图像对应的背景数据;当所述图像关联信息包括环境信息时,则获取与所述环境信息对应的反馈信息,例如,根据当前地点相关的拍摄图像获取相应的反馈信息;当所述图像关联信息包括第一图像和环境信息时,则根据第一图像和环境信息确定反馈信息,例如,从与第一图像的时间属性、季节数据、天气属性相一致的图像中获取第一图像中的遮挡图像对应的背景数据,在此不再一一列举。
在一个具体实施例中,所述反馈信息可以包括推荐算法和/或背景数据,相应地,获取所述背景数据可以包括如下操作。
图3B示意性示出了根据本公开另一实施例的数据处理示意图。如图3B所示,首先,获取至少一个候选图像。其中,所述候选图像可以为一个或多个,如与第一图像相似的图像,当存在多个候选图像时,可以从中选取一个遮挡最少的图像或者选取数个可以拼成无遮挡图像的图像备用。
接着,获取所述至少一个候选图像中与所述遮挡图像对应的候选背景数据。其中,可以首先识别第一图像中的遮挡图像,当然,如果第一计算设备的用户已经发送了表面希望去除的遮挡图像的信息时,则无需进行遮挡物识别。当识别出第一图像中的遮挡图像之后,可以确定出遮挡图像的外部轮廓线。可以将第一图像与至少一个候选图像进行匹配,以确定包括上述遮挡图像的区域对应至少一个候选图像中的候选区域,然后可以识别该候选区域中是否包含遮挡图像,如果不包含遮挡图像,则该候选区域的图像可以作为候选背景数据。
接着,将满足匹配度要求的候选背景数据作为所述背景数据。例如,遮挡面积占比小于一定比例或者直接选取遮挡最少的候选背景数据作为背景数据。当然,如果用户希望最终形成的第二图像中存在一定比例的遮挡图像以提升图像的真实感,可以根据第一计算设备发送的请求筛选最合适的背景数据,在此不做限定。
具体地,可以将匹配度最高的一个或数个候选背景数据作为所述背景数据。其中,上述遮挡物的轮廓线可以后续作为反馈信息一并发送给第一计算设备,以便第一计算设备根据该轮廓线进行遮挡去除。
在又一个具体实施例中,所述反馈信息可以包括无遮挡图像,相应地,获取所述背景数据可以包括如下操作。
首先,获取至少一个候选图像。该操作可以同之前的实施例,在此不再详述。
然后,获取所述至少一个候选图像中与所述遮挡图像对应的候选背景数据。该操作可以同之前的实施例,在此不再详述。
接着,将满足匹配度要求的候选背景数据替换对应的遮挡图像,得到无遮挡图像。具体地,第二计算设备在确定了第一图像中的遮挡图像和所述遮挡图像对应的候选背景数据之后,利用所述候选背景数据替换所述第一图像中的遮挡图像,这样就可以得到无遮挡图像。
需要说明的是,在得到遮挡图像对应的候选背景数据之后,可以根据第一计算设备发送的图像关联信息对候选背景数据进行图像处理,使得候选背景数据与第一图像更加匹配,例如,候选背景数据为光照强度较高时拍摄的图像,而第一图像是在光照强度较低的时刻拍摄的图像,则可以对候选背景数据进行色度调整等,使得其与第一图像更加匹配。上述举例仅为对候选背景数据进行图像处理,使得候选背景数据与第一图像更加匹配的示意性举例,不能理解为对本公开的限定。
在操作S303中,发送所述反馈信息给所述第一计算设备。
这样就可以实现给第一计算设备发送与第一图像相对应的反馈信息。
在又一个实施例中,所述方法还可以包括操作S304和操作S305。
在操作S304中,在接收到所述图像关联信息之后,根据所述图像关联信息获取推荐操作。
在本实施例中,由于所述图像关联信息中可能包含有表明用户所处环境的信息,因此,可以根据这些信息获取用户所处环境是否存在推荐的操作,例如,某个位置最适合进行拍摄,拍摄角度是多少,又比如,根据第一计算设备发送的光照强度等推荐拍摄参数等。这样可以辅助用户在不熟悉的环境中快速的找到理想的拍摄点等,进而可以拍摄到心仪的图像,以提升用户的体验度。
在操作S305中,将所述推荐操作发送给所述第一计算设备。
在本实施例中,具体地,可以将拍摄地点,如坐标或特征物发送给第一计算设备,或者根据用户的实际地理位置和推荐的拍摄点的位置给用户发送导航信息等。又比如,将拍摄角度发送给第一计算设备等,在此不再一一列举。
图4A示意性示出了根据本公开实施例的数据处理装置的框图,本公开的另一方面提供了一种数据处理装置400,可以包括采集模块410、第一发送模块420、第一获取模块430和展示模块440,该装置400可以执行上面参考图2A至图2E描述的方法,以实现拍摄、取景等场景下的数据处理方案。
具体地,所述采集模块410用于采集第一图像,所述第一图像的至少部分背景包括遮挡图像。
所述第一发送模块420用于将图像关联信息发送给第二计算设备,其中,所述图像关联信息和所述第一图像相关联。
所述第一获取模块430用于至少基于所述第二计算设备提供的与所述图像关联信息对应的反馈信息获得第二图像,其中,所述第二图像为所述第一图像中至少部分遮挡图像被替换的图像。
所述展示模块440用于展示所述第二图像。
可选地,所述反馈信息可以包括推荐算法和/或背景数据,相应地,在一个实施例中,所述第一获取模块430包括第一接收单元和第一处理单元。
具体地,所述第一接收单元用于接收所述第二计算设备发送的所述推荐算法和所述背景数据。
所述第一处理单元用于基于所述推荐算法和所述背景数据对所述至少部分遮挡图像进行遮挡替换处理,得到所述第二图像。
在另一个实施例中,所述第一获取模块430包括第二接收单元和第二处理单元。
具体地,所述第二接收单元用于接收所述第二计算设备发送的所述背景数据,所述第二处理单元用于基于本地算法和所述背景数据对所述至少部分遮挡图像进行遮挡替换处理,得到所述第二图像。
在另一个实施例中,所述第一获取模块430包括第三接收单元和第三处理单元。
其中,所述第三接收单元可以用于接收所述第二计算设备发送的所述推荐算法。
所述第二处理单元用于基于所述推荐算法对所述至少部分遮挡图像进行遮挡替换处理,得到所述第二图像。
此外,所述反馈信息可以包括无遮挡图像,相应地,所述第一获取模块430具体用于将所述无遮挡图像作为所述第二图像。
在一个实施例中,所述图像关联信息包括第一图像和/或环境信息,相应地,所述第一获取模块430具体用于基于所述第二计算设备提供的与所述第一图像和/或所述环境信息对应的反馈信息获得第二图像。
在另一个实施例中,所述图像关联信息可以包括第一图像和环境信息,相应地,所述第一获取模块430具体用于基于所述环境信息和所述第二计算设备提供的与所述第一图像对应的反馈信息获得第二图像。也就是说,第一计算设备利用自身获取的环境信息和第二计算设备发送的反馈信息获取更加符合第一计算设备所处环境的反馈信息。
另外,所述装置还可以包括推荐模块450,所述推荐模块450用于响应于接收到所述第二计算设备发送的推荐操作,展示所述推荐操作,其中,所述推荐操作为所述第二计算设备基于所述第一图像和/或所述环境信息确定的推荐操作。
图4B示意性示出了根据本公开另一实施例的数据处理装置的框图。
如图4B所示,本公开的另一方面提供了一种数据处理装置4000,该数据处理装置4000可以包括接收模块460、第二获取模块470和第二发送模块480。其中,该装置4000可以执行上面参考图3A至图3B描述的方法,以实现推荐反馈信息的数据处理方案。
具体地,所述接收模块460用于接收第一计算设备发送的图像关联信息,其中,所述图像关联信息和第一图像相关联,所述第一图像的至少部分背景包括遮挡图像。
所述第二获取模块470用于获取与所述图像关联信息对应的反馈信息,其中,所述反馈信息用于获取第二图像,所述第二图像为所述第一图像中至少部分遮挡图像被替换的图像。
所述第二发送模块480用于发送所述反馈信息给所述第一计算设备。
在一个实施例中,所述图像关联信息可以包括第一图像和/或环境信息,相应地,所述第二获取模块470用于根据所述第一图像和/或所述环境信息获取所述反馈信息。
在另一个实施例中,所述反馈信息可以包括推荐算法和/或背景数据,相应地,所述第二获取模块470可以包括第一获取单元、第二获取单元和第三获取单元。
具体地,所述第一获取单元用于获取至少一个候选图像。
所述第二获取单元用于获取所述至少一个候选图像中与所述遮挡图像对应的候选背景数据。
所述第三获取单元用于将满足匹配度要求的候选背景数据作为所述背景数据。
在又一个实施例中,所述反馈信息可以包括无遮挡图像,相应地,所述第二获取模块470可以包括第四获取单元、第五获取单元和第六获取单元。
具体地,所述第四获取单元用于获取至少一个候选图像。
所述第五获取单元用于获取所述至少一个候选图像中与所述遮挡图像对应的候选背景数据。
所述第六获取单元用于将满足匹配度要求的候选背景数据替换对应的遮挡图像,得到无遮挡图像。
此外,所述装置还可以包括第三获取模块490和第三发送模块411。
具体地,所述第三获取模块490用于在接收到所述图像关联信息之后,根据所述图像关联信息获取推荐操作。
所述第三发送模块411用于将所述推荐操作发送给所述第一计算设备。
根据本公开的实施例的模块、子模块、单元、子单元中的任意多个、或其中任意多个的至少部分功能可以在一个模块中实现。根据本公开实施例的模块、子模块、单元、子单元中的任意一个或多个可以被拆分成多个模块来实现。根据本公开实施例的模块、子模块、单元、子单元中的任意一个或多个可以至少被部分地实现为硬件电路,例如现场可编程门阵列(FPGA)、可编程逻辑阵列(PLA)、片上系统、基板上的系统、封装上的系统、专用集成电路(ASIC),或可以通过对电路进行集成或封装的任何其他的合理方式的硬件或固件来实现,或以软件、硬件以及固件三种实现方式中任意一种或以其中任意几种的适当组合来实现。或者,根据本公开实施例的模块、子模块、单元、子单元中的一个或多个可以至少被部分地实现为计算机程序模块,当该计算机程序模块被运行时,可以执行相应的功能。
例如,采集模块410、第一发送模块420、第一获取模块430、展示模块440、推荐模块450、接收模块460、第二获取模块470、第二发送模块480、第三获取模块490以及第三发送模块411中的任意多个可以合并在一个模块中实现,或者其中的任意一个模块可以被拆分成多个模块。或者,这些模块中的一个或多个模块的至少部分功能可以与其他模块的至少部分功能相结合,并在一个模块中实现。根据本公开的实施例,采集模块410、第一发送模块420、第一获取模块430、展示模块440、推荐模块450、接收模块460、第二获取模块470、第二发送模块480、第三获取模块490以及第三发送模块411中的至少一个可以至少被部分地实现为硬件电路,例如现场可编程门阵列(FPGA)、可编程逻辑阵列(PLA)、片上系统、基板上的系统、封装上的系统、专用集成电路(ASIC),或可以通过对电路进行集成或封装的任何其他的合理方式等硬件或固件来实现,或以软件、硬件以及固件三种实现方式中任意一种或以其中任意几种的适当组合来实现。或者,采集模块410、第一发送模块420、第一获取模块430、展示模块440、推荐模块450、接收模块460、第二获取模块470、第二发送模块480、第三获取模块490以及第三发送模块411中的至少一个可以至少被部分地实现为计算机程序模块,当该计算机程序模块被运行时,可以执行相应的功能。
图5示意性示出了根据本公开实施例的适于实现上文描述的方法的计算设备的框图。图5示出的计算设备仅仅是一个示例,不应对本公开实施例的功能和使用范围带来任何限制。
如图5所示,所述计算设备500包括:一个或多个处理器510和计算机可读存储介质520。该计算设备可以执行根据本公开实施例的方法。
具体地,处理器510例如可以包括通用微处理器、指令集处理器和/或相关芯片组和/或专用微处理器(例如,专用集成电路(ASIC)),等等。处理器510还可以包括用于缓存用途的板载存储器。处理器510可以是用于执行根据本公开实施例的方法流程的不同动作的单一处理单元或者是多个处理单元。
计算机可读存储介质520,例如可以是能够包含、存储、传送、传播或传输指令的任意介质。例如,可读存储介质可以包括但不限于电、磁、光、电磁、红外或半导体系统、装置、器件或传播介质。可读存储介质的具体示例包括:磁存储装置,如磁带或硬盘(HDD);光存储装置,如光盘(CD-ROM);存储器,如随机存取存储器(RAM)或闪存;和/或有线/无线通信链路。
计算机可读存储介质520可以包括程序521,该程序521可以包括代码/计算机可执行指令,其在由处理器510执行时使得处理器510执行根据本公开实施例的方法或其任何变形。
程序521可被配置为具有例如包括计算机程序模块的计算机程序代码。例如,在示例实施例中,程序521中的代码可以包括一个或多个程序模块,例如包括程序模块521A、程序模块521B、……。应当注意,程序模块的划分方式和个数并不是固定的,本领域技术人员可以根据实际情况使用合适的程序模块或程序模块组合,当这些程序模块组合被处理器510执行时,使得处理器510可以执行根据本公开实施例的方法或其任何变形。
根据本公开的实施例,处理器510可以与计算机可读存储介质520进行交互,来执行根据本公开实施例的方法或其任何变形。
根据本公开的实施例,采集模块410、第一发送模块420、第一获取模块430、展示模块440、推荐模块450、接收模块460、第二获取模块470、第二发送模块480、第三获取模块490以及第三发送模块411中的至少一个可以实现为参考图5描述的程序模块,其在被处理器510执行时,可以实现上面描述的相应操作。
本公开还提供了一种计算机可读介质,该计算机可读介质可以是上述实施例中描述的设备/装置/系统中所包含的;也可以是单独存在,而未装配入该设备/装置/系统中。上述计算机可读介质承载有一个或者多个程序,当上述一个或者多个程序被执行时,实现如上所述的方法。
根据本公开的实施例,计算机可读介质可以是计算机可读信号介质或者计算机可读存储介质或者是上述两者的任意组合。计算机可读存储介质例如可以是——但不限于——电、磁、光、电磁、红外线、或半导体的系统、装置或器件,或者任意以上的组合。计算机可读存储介质的更具体的例子可以包括但不限于:具有一个或多个导线的电连接、便携式计算机磁盘、硬盘、随机访问存储器(RAM)、只读存储器(ROM)、可擦式可编程只读存储器(EPROM或闪存)、光纤、便携式紧凑磁盘只读存储器(CD-ROM)、光存储器件、磁存储器件、或者上述的任意合适的组合。在本公开中,计算机可读存储介质可以是任何包含或存储程序的有形介质,该程序可以被指令执行系统、装置或者器件使用或者与其结合使用。而在本公开中,计算机可读的信号介质可以包括在基带中或者作为载波一部分传播的数据信号,其中承载了计算机可读的程序代码。这种传播的数据信号可以采用多种形式,包括但不限于电磁信号、光信号或上述的任意合适的组合。计算机可读的信号介质还可以是计算机可读存储介质以外的任何计算机可读介质,该计算机可读介质可以发送、传播或者传输用于由指令执行系统、装置或者器件使用或者与其结合使用的程序。计算机可读介质上包含的程序代码可以用任何适当的介质传输,包括但不限于:无线、有线、光缆、射频信号等等,或者上述的任意合适的组合。
附图中的流程图和框图,图示了按照本公开各种实施例的系统、方法和计算机程序产品的可能实现的体系架构、功能和操作。在这点上,流程图或框图中的每个方框可以代表一个模块、程序段、或代码的一部分,上述模块、程序段、或代码的一部分包含一个或多个用于实现规定的逻辑功能的可执行指令。也应当注意,在有些作为替换的实现中,方框中所标注的功能也可以以不同于附图中所标注的顺序发生。例如,两个接连地表示的方框实际上可以基本并行地执行,它们有时也可以按相反的顺序执行,这依所涉及的功能而定。也要注意的是,框图或流程图中的每个方框、以及框图或流程图中的方框的组合,可以用执行规定的功能或操作的专用的基于硬件的系统来实现,或者可以用专用硬件与计算机指令的组合来实现。
本领域技术人员可以理解,本公开的各个实施例和/或权利要求中记载的特征可以进行多种组合或/或结合,即使这样的组合或结合没有明确记载于本公开中。特别地,在不脱离本公开精神和教导的情况下,本公开的各个实施例和/或权利要求中记载的特征可以进行多种组合和/或结合。所有这些组合和/或结合均落入本公开的范围。
尽管已经参照本公开的特定示例性实施例示出并描述了本公开,但是本领域技术人员应该理解,在不背离所附权利要求及其等同物限定的本公开的精神和范围的情况下,可以对本公开进行形式和细节上的多种改变。因此,本公开的范围不应该限于上述实施例,而是应该不仅由所附权利要求来进行确定,还由所附权利要求的等同物来进行限定。
Claims (10)
1.一种数据处理方法,用于第一计算设备,所述方法包括:
采集第一图像,所述第一图像的至少部分背景包括遮挡图像;
将图像关联信息发送给第二计算设备,其中,所述图像关联信息和所述第一图像相关联;
至少基于所述第二计算设备提供的与所述图像关联信息对应的反馈信息获得第二图像,其中,所述第二图像为所述第一图像中至少部分遮挡图像被替换的图像;以及
展示所述第二图像。
2.根据权利要求1所述的方法,其中,所述反馈信息包括推荐算法和/或背景数据;
所述至少基于所述第二计算设备提供的与所述图像关联信息对应的反馈信息获得第二图像包括:
接收所述第二计算设备发送的所述推荐算法和所述背景数据,
基于所述推荐算法和所述背景数据对所述至少部分遮挡图像进行遮挡替换处理,得到所述第二图像;
或者
接收所述第二计算设备发送的所述背景数据,
基于本地算法和所述背景数据对所述至少部分遮挡图像进行遮挡替换处理,得到所述第二图像;
或者
接收所述第二计算设备发送的所述推荐算法,
基于所述推荐算法对所述至少部分遮挡图像进行遮挡替换处理,得到所述第二图像。
3.根据权利要求1所述的方法,其中,所述反馈信息包括无遮挡图像;
所述至少基于所述第二计算设备提供的与所述图像关联信息对应的反馈信息获得第二图像包括将所述无遮挡图像作为所述第二图像。
4.根据权利要求1至3任一项所述的方法,其中:
所述图像关联信息包括第一图像和/或环境信息,
所述至少基于所述第二计算设备提供的与所述图像关联信息对应的反馈信息获得第二图像包括基于所述第二计算设备提供的与所述第一图像和/或所述环境信息对应的反馈信息获得第二图像;
或者
所述图像关联信息包括第一图像和环境信息,
所述至少基于所述第二计算设备提供的与所述图像关联信息对应的反馈信息获得第二图像包括基于所述环境信息和所述第二计算设备提供的与所述第一图像对应的反馈信息获得第二图像。
5.根据权利要求4所述的方法,还包括:
响应于接收到所述第二计算设备发送的推荐操作,展示所述推荐操作,其中,
所述推荐操作为所述第二计算设备基于所述第一图像和/或所述环境信息确定的推荐操作。
6.一种数据处理方法,用于第二计算设备,所述方法包括:
接收第一计算设备发送的图像关联信息,其中,所述图像关联信息和第一图像相关联,所述第一图像的至少部分背景包括遮挡图像;
获取与所述图像关联信息对应的反馈信息,其中,所述反馈信息用于获取第二图像,所述第二图像为所述第一图像中至少部分遮挡图像被替换的图像;以及
发送所述反馈信息给所述第一计算设备。
7.根据权利要求6所述的方法,其中:
所述图像关联信息包括第一图像和/或环境信息;
所述获取与所述图像关联信息对应的反馈信息包括根据所述第一图像和/或所述环境信息获取所述反馈信息。
8.根据权利要求7所述的方法,其中:
所述反馈信息包括推荐算法和/或背景数据,其中,
获取所述背景数据包括:
获取至少一个候选图像;
获取所述至少一个候选图像中与所述遮挡图像对应的候选背景数据;
将满足匹配度要求的候选背景数据作为所述背景数据;
或者
所述反馈信息包括无遮挡图像,其中,
获取所述无遮挡图像包括:
获取至少一个候选图像;
获取所述至少一个候选图像中与所述遮挡图像对应的候选背景数据;以及
将满足匹配度要求的候选背景数据替换对应的遮挡图像,得到无遮挡图像。
9.根据权利要求6所述的方法,还包括:
在接收到所述图像关联信息之后,根据所述图像关联信息获取推荐操作;
将所述推荐操作发送给所述第一计算设备。
10.一种计算设备,包括:
一个或多个处理器;
可读存储介质,用于存储一个或多个计算机程序,所述计算机程序在被所述处理器执行时,实现根据权利要求1~9中任一项所述的方法。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201811081653.1A CN109389550B (zh) | 2018-09-17 | 2018-09-17 | 数据处理方法、装置和计算设备 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201811081653.1A CN109389550B (zh) | 2018-09-17 | 2018-09-17 | 数据处理方法、装置和计算设备 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN109389550A true CN109389550A (zh) | 2019-02-26 |
CN109389550B CN109389550B (zh) | 2023-12-26 |
Family
ID=65418786
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201811081653.1A Active CN109389550B (zh) | 2018-09-17 | 2018-09-17 | 数据处理方法、装置和计算设备 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN109389550B (zh) |
Cited By (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN110266913A (zh) * | 2019-06-17 | 2019-09-20 | 苏州佳世达光电有限公司 | 影像捕获设备及影像补偿方法 |
CN110490854A (zh) * | 2019-08-15 | 2019-11-22 | 中国工商银行股份有限公司 | 对象状态检测方法、对象状态检测装置和电子设备 |
CN110971825A (zh) * | 2019-12-06 | 2020-04-07 | 深圳前海达闼云端智能科技有限公司 | 一种图像矫正方法、电子设备及存储介质 |
CN117097878A (zh) * | 2023-10-16 | 2023-11-21 | 杭州穿石物联科技有限责任公司 | 一种基于超低延迟视频传输技术的云控交互系统 |
Citations (13)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2009211525A (ja) * | 2008-03-05 | 2009-09-17 | Mitsubishi Electric Corp | 物体検出装置 |
JP2013021473A (ja) * | 2011-07-11 | 2013-01-31 | Sony Corp | 情報処理装置、情報取得方法およびコンピュータプログラム |
CN103024266A (zh) * | 2012-11-15 | 2013-04-03 | 北京百度网讯科技有限公司 | 移动终端的拍摄优化方法、系统和装置 |
CN103823858A (zh) * | 2014-02-21 | 2014-05-28 | 联想(北京)有限公司 | 信息处理方法及信息处理装置 |
CN104079811A (zh) * | 2014-07-24 | 2014-10-01 | 广东欧珀移动通信有限公司 | 一种拍照时滤除障碍物的方法及装置 |
CN104301613A (zh) * | 2014-10-16 | 2015-01-21 | 深圳市中兴移动通信有限公司 | 移动终端及其拍摄方法 |
CN106331460A (zh) * | 2015-06-19 | 2017-01-11 | 宇龙计算机通信科技(深圳)有限公司 | 一种图像处理方法、装置及终端 |
CN106357804A (zh) * | 2016-10-31 | 2017-01-25 | 北京小米移动软件有限公司 | 图像处理方法、电子设备及云端服务器 |
CN106937055A (zh) * | 2017-03-30 | 2017-07-07 | 维沃移动通信有限公司 | 一种图像处理方法及移动终端 |
US20170208244A1 (en) * | 2016-01-19 | 2017-07-20 | Line Corporation | Method and system for recommending optimum position of photography |
US9892538B1 (en) * | 2016-10-06 | 2018-02-13 | International Business Machines Corporation | Rebuilding images based on historical image data |
CN107705275A (zh) * | 2017-09-08 | 2018-02-16 | 维沃移动通信有限公司 | 一种拍照方法及移动终端 |
CN108134906A (zh) * | 2017-12-21 | 2018-06-08 | 联想(北京)有限公司 | 图像处理方法及其系统 |
-
2018
- 2018-09-17 CN CN201811081653.1A patent/CN109389550B/zh active Active
Patent Citations (17)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2009211525A (ja) * | 2008-03-05 | 2009-09-17 | Mitsubishi Electric Corp | 物体検出装置 |
JP2013021473A (ja) * | 2011-07-11 | 2013-01-31 | Sony Corp | 情報処理装置、情報取得方法およびコンピュータプログラム |
CN103024266A (zh) * | 2012-11-15 | 2013-04-03 | 北京百度网讯科技有限公司 | 移动终端的拍摄优化方法、系统和装置 |
CN103823858A (zh) * | 2014-02-21 | 2014-05-28 | 联想(北京)有限公司 | 信息处理方法及信息处理装置 |
CN104079811A (zh) * | 2014-07-24 | 2014-10-01 | 广东欧珀移动通信有限公司 | 一种拍照时滤除障碍物的方法及装置 |
CN104301613A (zh) * | 2014-10-16 | 2015-01-21 | 深圳市中兴移动通信有限公司 | 移动终端及其拍摄方法 |
CN106331460A (zh) * | 2015-06-19 | 2017-01-11 | 宇龙计算机通信科技(深圳)有限公司 | 一种图像处理方法、装置及终端 |
US20170208244A1 (en) * | 2016-01-19 | 2017-07-20 | Line Corporation | Method and system for recommending optimum position of photography |
US20180101971A1 (en) * | 2016-10-06 | 2018-04-12 | International Business Machines Corporation | Rebuilding images based on historical image data |
US9892538B1 (en) * | 2016-10-06 | 2018-02-13 | International Business Machines Corporation | Rebuilding images based on historical image data |
US20180122120A1 (en) * | 2016-10-06 | 2018-05-03 | International Business Machines Corporation | Rebuilding images based on historical image data |
US20180144528A1 (en) * | 2016-10-06 | 2018-05-24 | International Business Machines Corporation | Rebuilding images based on historical image data |
US20180144529A1 (en) * | 2016-10-06 | 2018-05-24 | International Business Machines Corporation | Rebuilding images based on historical image data |
CN106357804A (zh) * | 2016-10-31 | 2017-01-25 | 北京小米移动软件有限公司 | 图像处理方法、电子设备及云端服务器 |
CN106937055A (zh) * | 2017-03-30 | 2017-07-07 | 维沃移动通信有限公司 | 一种图像处理方法及移动终端 |
CN107705275A (zh) * | 2017-09-08 | 2018-02-16 | 维沃移动通信有限公司 | 一种拍照方法及移动终端 |
CN108134906A (zh) * | 2017-12-21 | 2018-06-08 | 联想(北京)有限公司 | 图像处理方法及其系统 |
Cited By (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN110266913A (zh) * | 2019-06-17 | 2019-09-20 | 苏州佳世达光电有限公司 | 影像捕获设备及影像补偿方法 |
CN110490854A (zh) * | 2019-08-15 | 2019-11-22 | 中国工商银行股份有限公司 | 对象状态检测方法、对象状态检测装置和电子设备 |
CN110971825A (zh) * | 2019-12-06 | 2020-04-07 | 深圳前海达闼云端智能科技有限公司 | 一种图像矫正方法、电子设备及存储介质 |
CN117097878A (zh) * | 2023-10-16 | 2023-11-21 | 杭州穿石物联科技有限责任公司 | 一种基于超低延迟视频传输技术的云控交互系统 |
Also Published As
Publication number | Publication date |
---|---|
CN109389550B (zh) | 2023-12-26 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN109389550A (zh) | 数据处理方法、装置和计算设备 | |
US9129429B2 (en) | Augmented reality on wireless mobile devices | |
CN104871214B (zh) | 用于具扩增实境能力的装置的用户接口 | |
US20140176733A1 (en) | Method and system for image and metadata management | |
CN111599020B (zh) | 房屋展示方法、装置和电子设备 | |
CN107870962B (zh) | 适地性空间物件远距管理方法与系统 | |
CN109115221A (zh) | 室内定位、导航方法及装置、计算机可读介质和电子设备 | |
CN113936085B (zh) | 三维重建方法和装置 | |
CN108733272B (zh) | 适地性空间物件可视范围管理方法与系统 | |
CN113989173A (zh) | 视频融合方法、装置、电子设备及存储介质 | |
US20200204649A1 (en) | Location enabled augmented reality (ar) system and method for interoperability of ar applications | |
CN112346845A (zh) | 编码任务的调度方法、装置、设备及存储介质 | |
CN109801354B (zh) | 全景处理方法和装置 | |
US9792021B1 (en) | Transitioning an interface to a neighboring image | |
US8885952B1 (en) | Method and system for presenting similar photos based on homographies | |
CN112750190B (zh) | 三维热力图生成方法、装置、设备及存储介质 | |
CN111797266B (zh) | 图像处理方法和装置、存储介质和电子设备 | |
CN103188608A (zh) | 基于用户位置的彩像图片生成方法、装置及系统 | |
CN105608128B (zh) | 基于路径规划的街景视频生成方法和装置 | |
KR101481103B1 (ko) | 이미지 기반에 의한 사용자 참여형 멀티미디어 융합 콘텐츠 제공 시스템 | |
CN110796706A (zh) | 视觉定位方法及系统 | |
JP2017108356A (ja) | 画像管理システム、画像管理方法、プログラム | |
CN116452778A (zh) | 一种增强现实系统、多设备构建三维地图的方法及设备 | |
CN115908679A (zh) | 纹理映射方法、装置、设备及存储介质 | |
KR101146665B1 (ko) | 지역 검색 서비스에 기반한 광고 방법, 이를 이용한 지역 검색 서비스 제공 방법 및 지역 검색 서비스 제공 시스템 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
GR01 | Patent grant | ||
GR01 | Patent grant |