CN105338242A - 一种图像合成方法和装置 - Google Patents

一种图像合成方法和装置 Download PDF

Info

Publication number
CN105338242A
CN105338242A CN201510715985.0A CN201510715985A CN105338242A CN 105338242 A CN105338242 A CN 105338242A CN 201510715985 A CN201510715985 A CN 201510715985A CN 105338242 A CN105338242 A CN 105338242A
Authority
CN
China
Prior art keywords
image
background
target image
background image
target
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN201510715985.0A
Other languages
English (en)
Inventor
张登康
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Nubia Technology Co Ltd
Original Assignee
Nubia Technology Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Nubia Technology Co Ltd filed Critical Nubia Technology Co Ltd
Priority to CN201510715985.0A priority Critical patent/CN105338242A/zh
Publication of CN105338242A publication Critical patent/CN105338242A/zh
Priority to PCT/CN2016/101937 priority patent/WO2017071476A1/zh
Pending legal-status Critical Current

Links

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/80Camera processing pipelines; Components thereof
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/95Computational photography systems, e.g. light-field imaging systems
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00Details of television systems
    • H04N5/222Studio circuitry; Studio devices; Studio equipment
    • H04N5/262Studio circuits, e.g. for mixing, switching-over, change of character of image, other special effects ; Cameras specially adapted for the electronic generation of special effects
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00Details of television systems
    • H04N5/222Studio circuitry; Studio devices; Studio equipment
    • H04N5/262Studio circuits, e.g. for mixing, switching-over, change of character of image, other special effects ; Cameras specially adapted for the electronic generation of special effects
    • H04N5/2628Alteration of picture size, shape, position or orientation, e.g. zooming, rotation, rolling, perspective, translation

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Computing Systems (AREA)
  • Theoretical Computer Science (AREA)
  • Image Processing (AREA)
  • Mobile Radio Communication Systems (AREA)

Abstract

本发明实施例公开了一种图像合成方法,所述方法包括:获取与拍摄背景相似的背景图像;获取作为拍摄主体的目标图像;将目标图像和背景图像合成,得到合成图像。本发明实施例还同时公开了一种图像合成装置。

Description

一种图像合成方法和装置
技术领域
本发明涉及图像处理领域,尤其涉及一种图像合成方法和装置。
背景技术
随着科技的发展,拍照设备例如照相机、带拍照功能的手机越来越普及。在人们生活中,通过拍照设备用户可以记录生活的点点滴滴,以便于在未来的日子里通过这些珍藏的图像回忆过往。但是,很多时候用户拍出图像包括了很多用户不想出现的景象,影响了图像的整个效果,这样图像可能就失去了珍藏的意义。
特别别是,在假期出去旅行,不拍个照片留个纪念会遗憾,但拍照又全是人头,当然等等待人少的时候进行拍照,但一般要等待较长的时间却也不能有效的拍出合适的照片,因此,大大降低了用户体验。
发明内容
为解决上述技术问题,本发明实施例期望提供一种图像合成方法和装置,能够合成符合用户要求的图像,提升用户体验。
本发明的技术方案是这样实现的:
第一方面,提供一种图像合成方法,所述方法包括:
获取与拍摄背景相似的背景图像;
获取作为拍摄主体的目标图像;
将所述目标图像和所述背景图像合成,得到合成图像。
可选的,所述获取与拍摄背景相似的背景图像包括:
通过摄像头扫描所述拍摄背景,获取所述拍摄背景的特征信息;
向服务器发送所述特征信息,以便于所述服务器根据所述特征信息确定内容与所述拍摄景物最为接近的背景图像、所述目标图像在所述背景图像的目标位置和所述目标图像的视觉比例;
接收所述服务器发送的所述背景图像、所述目标位置和所述视觉比例。
可选的,所述获取所述拍摄背景的特征信息之后,所述方法还包括:
获取当前位置的位置信息;
向服务器发送所述特征信息和所述位置信息,以便于所述服务器根据所述特征信息和所述位置信息确定内容与所述拍摄景物最为接近的背景图像、所述目标图像在所述背景图像的目标位置和所述目标图像的视觉比例;
接收所述服务器发送的所述背景图像、所述目标位置和所述视觉比例。
可选的,所述获取作为拍摄主体的目标图像包括:
获取包括所述目标图像的原始图像;
从所述原始图像中提取所述目标图像。
可选的,所述将所述目标图像和所述背景图像合成,得到合成图像包括:
根据所述背景图像与所述目标图像的视觉比例,缩放所述目标图像;
将缩放后的目标图像叠加在所述目标位置,得到所述合成图像。
第二方面,提供一种图像合成装置,所述装置包括:
获取单元,用于获取与拍摄背景相似的背景图像;获取作为拍摄主体的目标图像;
合成单元,用于将所述目标图像和所述背景图像合成,得到合成图像。
可选的,所述获取单元具体用于:
通过摄像头扫描所述拍摄背景,获取所述拍摄背景的特征信息;
向服务器发送所述特征信息,以便于所述服务器根据所述特征信息确定内容与所述拍摄景物最为接近的背景图像、所述目标图像在所述背景图像的目标位置和所述目标图像的视觉比例;
接收所述服务器发送的所述背景图像、所述目标位置和所述视觉比例。
可选的,所述获取单元还用于:获取当前位置的位置信息;
所述装置还包括:
发送单元,用于向服务器发送所述特征信息和所述位置信息,以便于所述服务器根据所述特征信息和所述位置信息确定内容与所述拍摄景物最为接近的背景图像、所述目标图像在所述背景图像的目标位置和所述目标图像的视觉比例;
接收单元,用于接收所述服务器发送的所述背景图像、所述目标位置和所述视觉比例。
可选的,所述获取单元还用于:
获取包括所述目标图像的原始图像;
从所述原始图像中提取所述目标图像。
可选的,所述合成单元具体用于:
根据所述背景图像与所述目标图像的视觉比例,缩放所述目标图像;
将缩放后的目标图像叠加在所述目标位置,得到所述合成图像。
本发明实施例提供了一种图像合成方法和装置,获取与拍摄背景相似的背景图像和作为拍摄主体的目标图像,再将目标图像和背景图像合成,得到合成图像。这样一来,背景图像可以是用户比较满意的且与拍摄背景相似的背景图像,这样,合成的图像就可以只包括目标图像和用户满意的背景图像,用户无需多次拍摄或者等待合适的时间再进行拍摄。因此,提高了用户体验。
附图说明
图1为实现本发明各个实施例的移动终端的硬件结构示意图;
图2为如图1所示的移动终端的无线通信系统示意图;
图3为本发明实施例提供的一种图像合成方法的流程图;
图4为本发明实施例提供的另一种图像合成方法的流程图;
图5为拍摄的实际的背景图像;
图6为下载的背景图像;
图7为存储或拍摄的目标图像;
图8为通过实施例二提供的方法合成的图像;
图9为本发明实施例提供的一种图像合成装置的结构示意图;
图10为本发明实施例提供的另一种图像合成装置的结构示意图。
具体实施方式
下面将结合本发明实施例中的附图,对本发明实施例中的技术方案进行清楚、完整地描述。
应当理解,此处所描述的具体实施例仅仅用以解释本发明,并不用于限定本发明。
现在将参考附图描述实现本发明各个实施例的移动终端。在后续的描述中,使用用于表示元件的诸如“模块”、“部件”或“单元”的后缀仅为了有利于本发明的说明,其本身并没有特定的意义。因此,"模块"与"部件"可以混合地使用。
移动终端可以以各种形式来实施。例如,本发明中描述的终端可以包括诸如移动电话、智能电话、笔记本电脑、数字广播接收器、个人数字助理(PDA)、平板电脑(PAD)、便携式多媒体播放器(PMP)、导航装置等等的移动终端以及诸如数字TV、台式计算机等等的固定终端。下面,假设终端是移动终端。然而,本领域技术人员将理解的是,除了特别用于移动目的的元件之外,根据本发明的实施方式的构造也能够应用于固定属性的终端。
图1为实现本发明各个实施例的移动终端的硬件结构示意。
移动终端100可以包括无线通信单元110、音频/视频(A/V)输入单元120、用户输入单元130、感测单元140、输出单元150、存储器160、接口单元170、控制器180和电源单元190等等。图1示出了具有各种组件的移动终端,但是应理解的是,并不要求实施所有示出的组件。可以替代地实施更多或更少的组件。将在下面详细描述移动终端的元件。
无线通信单元110通常包括一个或多个组件,其允许移动终端100与无线通信系统或网络之间的无线电通信。例如,无线通信单元可以包括广播接收模块111、移动通信模块112、无线互联网模块113、短程通信模块114和位置信息模块115中的至少一张。
广播接收模块111经由广播信道从外部广播管理服务器接收广播信号和/或广播相关信息。广播信道可以包括卫星信道和/或地面信道。广播管理服务器可以是生成并发送广播信号和/或广播相关信息的服务器或者接收之前生成的广播信号和/或广播相关信息并且将其发送给终端的服务器。广播信号可以包括TV广播信号、无线电广播信号、数据广播信号等等。而且,广播信号可以进一步包括与TV或无线电广播信号组合的广播信号。广播相关信息也可以经由移动通信网络提供,并且在该情况下,广播相关信息可以由移动通信模块112来接收。广播信号可以以各种形式存在,例如,其可以以数字多媒体广播(DMB)的电子节目指南(EPG)、数字视频广播手持(DVB-H)的电子服务指南(ESG)等等的形式而存在。广播接收模块111可以通过使用各种属性的广播系统接收信号广播。特别地,广播接收模块111可以通过使用诸如多媒体广播-地面(DMB-T)、数字多媒体广播-卫星(DMB-S)、数字视频广播-手持(DVB-H),前向链路媒体(MediaFLO)的数据广播系统、地面数字广播综合服务(ISDB-T)等等的数字广播系统接收数字广播。广播接收模块111可以被构造为适合提供广播信号的各种广播系统以及上述数字广播系统。经由广播接收模块111接收的广播信号和/或广播相关信息可以存储在存储器160(或者其它属性的存储介质)中。
移动通信模块112将无线电信号发送到基站(例如,接入点、节点B等等)、外部终端以及服务器中的至少一张和/或从其接收无线电信号。这样的无线电信号可以包括语音通话信号、视频通话信号、或者根据文本和/或多媒体消息发送和/或接收的各种属性的数据。
无线互联网模块113支持移动终端的无线互联网接入。该模块可以内部或外部地耦接到终端。该模块所涉及的无线互联网接入技术可以包括无线局域网(WLAN)(Wi-Fi)、无线宽带(Wibro)、全球微波互联接入(Wimax)、高速下行链路分组接入(HSDPA)等等。
短程通信模块114是用于支持短程通信的模块。短程通信技术的一些示例包括蓝牙TM、射频识别(RFID)、红外数据协会(IrDA)、超宽带(UWB)、紫蜂TM等等。
位置信息模块115是用于检查或获取移动终端的位置信息的模块。位置信息模块的典型示例是GPS(全球定位系统)。根据当前的技术,GPS模块115计算来自三个或更多卫星的距离信息和准确的时间信息并且对于计算的信息应用三角测量法,从而根据经度、纬度和高度准确地计算三维当前位置信息。当前,用于计算位置和时间信息的方法使用三颗卫星并且通过使用另外的一颗卫星校正计算出的位置和时间信息的误差。此外,GPS模块115能够通过实时地连续计算当前位置信息来计算速度信息。
A/V输入单元120用于接收音频或视频信号。A/V输入单元120可以包括相机121和麦克风122,相机121对在视频捕获模式或图像捕获模式中由图像捕获装置获得的静态图像或视频的图像数据进行处理。处理后的图像帧可以显示在显示单元151上。经相机121处理后的图像帧可以存储在存储器160(或其它存储介质)中或者经由无线通信单元110进行发送,可以根据移动终端的构造提供两个或更多相机121。麦克风122可以在电话通话模式、记录模式、语音识别模式等等运行模式中经由麦克风接收声音(音频数据),并且能够将这样的声音处理为音频数据。处理后的音频(语音)数据可以在电话通话模式的情况下转换为可经由移动通信模块112发送到移动通信基站的格式输出。麦克风122可以实施各种属性的噪声消除(或抑制)算法以消除(或抑制)在接收和发送音频信号的过程中产生的噪声或者干扰。
用户输入单元130可以根据用户输入的命令生成键输入数据以控制移动终端的各种操作。用户输入单元130允许用户输入各种属性的信息,并且可以包括键盘、锅仔片、触摸板(例如,检测由于被接触而导致的电阻、压力、电容等等的变化的触敏组件)、滚轮、摇杆等等。特别地,当触摸板以层的形式叠加在显示单元151上时,可以形成触摸屏。
感测单元140检测移动终端100的当前状态,(例如,移动终端100的打开或关闭状态)、移动终端100的位置、用户对于移动终端100的接触(即,触摸输入)的有无、移动终端100的取向、移动终端100的加速或减速移动和方向等等,并且生成用于控制移动终端100的操作的命令或信号。例如,当移动终端100实施为滑动型移动电话时,感测单元140可以感测该滑动型电话是打开还是关闭。另外,感测单元140能够检测电源单元190是否提供电力或者接口单元170是否与外部装置耦接。感测单元140可以包括接近传感器141将在下面结合触摸屏来对此进行描述。
接口单元170用作至少一张外部装置与移动终端100连接可以通过的接口。例如,外部装置可以包括有线或无线头戴式耳机端口、外部电源(或电池充电器)端口、有线或无线数据端口、存储卡端口、用于连接具有识别模块的装置的端口、音频输入/输出(I/O)端口、视频I/O端口、耳机端口等等。识别模块可以是存储用于验证用户使用移动终端100的各种信息并且可以包括用户识别模块(UIM)、用户识别模块(SIM)、通用用户识别模块(USIM)等等。另外,具有识别模块的装置(下面称为"识别装置")可以采取智能卡的形式,因此,识别装置可以经由端口或其它连接装置与移动终端100连接。接口单元170可以用于接收来自外部装置的输入(例如,数据信息、电力等等),并且将接收到的输入传输到移动终端100内的一个或多个元件或者可以用于在移动终端和外部装置之间传输数据。
另外,当移动终端100与外部底座连接时,接口单元170可以用作允许通过其将电力从底座提供到移动终端100的路径或者可以用作允许从底座输入的各种命令信号通过其传输到移动终端的路径。从底座输入的各种命令信号或电力可以用作用于识别移动终端是否准确地安装在底座上的信号。输出单元150被构造为以视觉、音频和/或触觉方式提供输出信号(例如,音频信号、视频信号、警报信号、振动信号等等)。输出单元150可以包括显示单元151、音频输出模块152、警报单元153等等。
显示单元151可以显示在移动终端100中处理的信息。例如,当移动终端100处于电话通话模式时,显示单元151可以显示与通话或其它通信(例如,文本消息收发、多媒体文件下载等等)相关的用户界面(UI)或图形用户界面(GUI)。当移动终端100处于视频通话模式或者图像捕获模式时,显示单元151可以显示捕获的图像和/或接收的图像、示出视频或图像以及相关功能的UI或GUI等等。
同时,当显示单元151和触摸板以层的形式彼此叠加以形成触摸屏时,显示单元151可以用作输入装置和输出装置。显示单元151可以包括液晶显示器(LCD)、薄膜晶体管LCD(TFT-LCD)、有机发光二极管(OLED)显示器、柔性显示器、三维(3D)显示器等等中的至少一种。这些显示器中的一些可以被构造为透明状以允许用户从外部观看,这可以称为透明显示器,典型的透明显示器可以例如为透明有机发光二极管(TOLED)显示器等等。根据特定想要的实施方式,移动终端100可以包括两个或更多显示单元(或其它显示装置),例如,移动终端可以包括外部显示单元(未示出)和内部显示单元(未示出)。触摸屏可用于检测触摸输入压力以及触摸输入位置和触摸输入面积。
音频输出模块152可以在移动终端处于呼叫信号接收模式、通话模式、记录模式、语音识别模式、广播接收模式等等模式下时,将无线通信单元110接收的或者在存储器160中存储的音频数据转换音频信号并且输出为声音。而且,音频输出模块152可以提供与移动终端100执行的特定功能相关的音频输出(例如,呼叫信号接收声音、消息接收声音等等)。音频输出模块152可以包括扬声器、蜂鸣器等等。
警报单元153可以提供输出以将事件的发生通知给移动终端100。典型的事件可以包括呼叫接收、消息接收、键信号输入、触摸输入等等。除了音频或视频输出之外,警报单元153可以以不同的方式提供输出以通知事件的发生。例如,警报单元153可以以振动的形式提供输出,当接收到呼叫、消息或一些其它进入通信(incomingcommunication)时,警报单元153可以提供触觉输出(即,振动)以将其通知给用户。通过提供这样的触觉输出,即使在用户的移动电话处于用户的口袋中时,用户也能够识别出各种事件的发生。警报单元153也可以经由显示单元151或音频输出模块152提供通知事件的发生的输出。
存储器160可以存储由控制器180执行的处理和控制操作的软件程序等等,或者可以暂时地存储己经输出或将要输出的数据(例如,电话簿、消息、静态图像、视频等等)。而且,存储器160可以存储关于当触摸施加到触摸屏时输出的各种方式的振动和音频信号的数据。
存储器160可以包括至少一种属性的存储介质,所述存储介质包括闪存、硬盘、多媒体卡、卡型存储器(例如,SD或DX存储器等等)、随机访问存储器(RAM)、静态随机访问存储器(SRAM)、只读存储器(ROM)、电可擦除可编程只读存储器(EEPROM)、可编程只读存储器(PROM)、磁性存储器、磁盘、光盘等等。而且,移动终端100可以与通过网络连接执行存储器160的存储功能的网络存储装置协作。
控制器180通常控制移动终端的总体操作。例如,控制器180执行与语音通话、数据通信、视频通话等等相关的控制和处理。另外,控制器180可以包括用于再现(或回放)多媒体数据的多媒体模块181,多媒体模块181可以构造在控制器180内,或者可以构造为与控制器180分离。控制器180可以执行模式识别处理,以将在触摸屏上执行的手写输入或者图像绘制输入识别为字符或图像。
电源单元190在控制器180的控制下接收外部电力或内部电力并且提供操作各元件和组件所需的适当的电力。
这里描述的各种实施方式可以以使用例如计算机软件、硬件或其任何组合的计算机可读介质来实施。对于硬件实施,这里描述的实施方式可以通过使用特定用途集成电路(ASIC)、数字信号处理器(DSP)、数字信号处理装置(DSPD)、可编程逻辑装置(PLD)、现场可编程门阵列(FPGA)、处理器、控制器、微控制器、微处理器、被设计为执行这里描述的功能的电子单元中的至少一种来实施,在一些情况下,这样的实施方式可以在控制器180中实施。对于软件实施,诸如过程或功能的实施方式可以与允许执行至少一种功能或操作的单独的软件模块来实施。软件代码可以由以任何适当的编程语言编写的软件应用程序(或程序)来实施,软件代码可以存储在存储器160中并且由控制器180执行。
至此,己经按照其功能描述了移动终端。下面,为了简要起见,将描述诸如折叠型、直板型、摆动型、滑动型移动终端等等的各种属性的移动终端中的滑动型移动终端作为示例。因此,本发明能够应用于任何属性的移动终端,并且不限于滑动型移动终端。
如图1中所示的移动终端100可以被构造为利用经由帧或分组发送数据的诸如有线和无线通信系统以及基于卫星的通信系统来操作。
现在将参考图2描述其中根据本发明的移动终端能够操作的通信系统。
这样的通信系统可以使用不同的空中接口和/或物理层。例如,由通信系统使用的空中接口包括例如频分多址(FDMA)、时分多址(TDMA)、码分多址(CDMA)和通用移动通信系统(UMTS)(特别地,长期演进(LTE))、全球移动通信系统(GSM)等等。作为非限制性示例,下面的描述涉及CDMA通信系统,但是这样的教导同样适用于其它属性的系统。
参考图2,CDMA无线通信系统可以包括多个移动终端100、多个基站(BS)270、基站控制器(BSC)275和移动交换中心(MSC)280。MSC280被构造为与公共电话交换网络(PSTN)290形成接口。MSC280还被构造为与可以经由回程线路耦接到基站270的BSC275形成接口。回程线路可以根据若干己知的接口中的任一种来构造,所述接口包括例如E1/T1、ATM,IP、PPP、帧中继、HDSL、ADSL或xDSL。将理解的是,如图2中所示的系统可以包括多个BSC275。
每个BS270可以服务一个或多个分区(或区域),由多向天线或指向特定方向的天线覆盖的每个分区放射状地远离BS270。或者,每个分区可以由用于分集接收的两个或更多天线覆盖。每个BS270可以被构造为支持多个频率分配,并且每个频率分配具有特定频谱(例如,1.25MHz,5MHz等等)。
分区与频率分配的交叉可以被称为CDMA信道。BS270也可以被称为基站收发器子系统(BTS)或者其它等效术语。在这样的情况下,术语"基站"可以用于笼统地表示单个BSC275和至少一张BS270。基站也可以被称为"蜂窝站"。或者,特定BS270的各分区可以被称为多个蜂窝站。
如图2中所示,广播发射器(BT)295将广播信号发送给在系统内操作的移动终端100。如图1中所示的广播接收模块111被设置在移动终端100处以接收由BT295发送的广播信号。在图2中,示出了几个全球定位系统(GPS)卫星500。卫星500帮助定位多个移动终端100中的至少一张。
在图2中,描绘了多个卫星500,但是理解的是,可以利用任何数目的卫星获得有用的定位信息。如图1中所示的GPS模块115通常被构造为与卫星500配合以获得想要的定位信息。替代GPS跟踪技术或者在GPS跟踪技术之外,可以使用可以跟踪移动终端的位置的其它技术。另外,至少一张GPS卫星500可以选择性地或者额外地处理卫星DMB传输。
作为无线通信系统的一个典型操作,BS270接收来自各种移动终端100的反向链路信号。移动终端100通常参与通话、消息收发和其它属性的通信。特定基站270接收的每个反向链路信号被在特定BS270内进行处理。获得的数据被转发给相关的BSC275。BSC提供通话资源分配和包括BS270之间的软切换过程的协调的移动管理功能。BSC275还将接收到的数据路由到MSC280,其提供用于与PSTN290形成接口的额外的路由服务。类似地,PSTN290与MSC280形成接口,MSC与BSC275形成接口,并且BSC275相应地控制BS270以将正向链路信号发送到移动终端100。
基于上述移动终端硬件结构以及通信系统,提出本发明方法各个实施例。
实施例一
本发明实施例提供一种图像合成方法,该方法应用于图像合成装置,该装置可以是一个独立的装置,也可以是照相机、带百兆功能的手机等等的一部分。如图3所示,该方法可以包括:
步骤301、获取与拍摄背景相似的背景图像。
这里,获取的背景图像可以是从图像合成装置中存储的图像,也可以是从网络上下载的图像。
具体的,通过摄像头扫描拍摄背景,获取拍摄背景的特征信息;向服务器发送特征信息,以便于所述服务器根据特征信息确定内容与拍摄景物最为接近的背景图像、目标图像在背景图像的目标位置和目标图像的视觉比例;接收服务器发送的背景图像、目标位置和视觉比例。特征信息可以包颜色特征、纹理特征、形状特征、空间关系特征等等。这些特征提取的方法现有技术都是非常完善的本实施例就不再详述。
这里,获取特征信息不一定是通过扫描背景,也可以是已对拍摄背景拍摄的图像进行解析,提取出特征信息。
进一步的,为了获取更加准确的背景图像,步骤101之后,方法还包括:获取当前位置的位置信息,向服务器发送特征信息和位置信息,以便于服务器根据特征信息和位置信息确定内容与拍摄景物最为接近的背景图像、目标图像在背景图像的目标位置和目标图像的视觉比例;接收服务器发送的背景图像、目标位置和视觉比例。这里获取当前位置的位置信息可以通过全球定位系统(GlobalPositioningSystem,GPS)或者中国北斗卫星导航系统(BeiDouNavigationSatelliteSystem,BDS)进行定位。
其中,GPS是由美国国防部研制建立的一种具有全方位、全天候、全时段、高精度的卫星导航系统,能为全球用户提供低成本、高精度的三维位置、速度和精确定时等导航信息,是卫星通信技术在导航领域的应用典范,它极大地提高了地球社会的信息化水平,有力地推动了数字经济的发展。
BDS是中国自行研制的全球卫星导航系统。是继GPS、俄罗斯格洛纳斯卫星导航系统(GlobalNavigationSatelliteSystemGlonass)之后第三个成熟的卫星导航系统。BDS由空间段、地面段和用户段三部分组成,可在全球范围内全天候、全天时为各类用户提供高精度、高可靠定位、导航、授时服务,并具短报文通信能力,已经初步具备区域导航、定位和授时能力,定位精度10米,测速精度0.2米/秒,授时精度10纳秒。
例如,如鼓浪屿的海边,与三亚的海边的特征信息存在差别并不大,单纯的依靠特征信息区分是非常困难的,但结合当前位置的位置信息就能准确的判断出是处于三亚海边还是鼓浪屿的海边;将特征信息和位置信息上传至服务器,依靠服务器的智能分析系统,给出最佳的背景图像,以及主体人物最佳的目标位置,视觉比例等信息。
步骤302、获取作为拍摄主体的目标图像。
具体的,获取包括目标图像的原始图像;从原始图像中提取所述目标图像。
示例的,提取的方法可以采用边缘提取法。其中,经典的边缘提取方法是考察图像的每个像素在某个邻域内灰度的变化,利用边缘临近一阶或二阶方向导数变化规律,用简单的方法检测边缘。这种方法称为边缘检测局部算子法。
其中,图像的边缘是图像的最基本特征。所谓边缘是指其周围像素灰度有阶跃变化或屋顶变化的那些像素的集合。因此,边缘是图像分割所依赖的重要特征。边缘的种类可以分为两种:一种称为阶跃性边缘,它两边的像素的灰度值有着显著的不同;另一种称为屋顶状边缘,它位于灰度值从增加到减少的变化转折点。对于阶跃性边缘,二阶方向导数在边缘处呈零交叉;而对于屋顶状边缘,二阶方向导数在边缘处取极值。边缘检测算子检查每个像素的邻域并对灰度变化率进行量化,也包括方向的确定。大多数使用基于方向导数掩模求卷积的方法。现有的边缘算子很多,例如,该边缘提取算法可以包括Sobel(索贝尔)边沿算子和Prewitt(普瑞维特)边缘算子。
其中,Sobel边缘算子:矩阵[-1-2-1;000;121]和[-101;-202;-101]两个卷积核形成了sobel算子,图像中的每个点都用这两个核做卷积,一个核对通常的垂直边缘相应最大,而另一个对水平边缘相应最大。两个卷积的最大值作为该点的输出位。运算结果是一幅边缘幅度图像。
Prewitt边缘算子:矩阵[-1-1-1;000;111]和[-101;-101;-101]卷积核形成了Prewitt算子。和使用Sobel算子的方法一样,图像中的每个点都用这两个核进行卷积,取最大值作为输出。Prewitt算子也产生一幅边缘幅度图像。
步骤303、将目标图像和背景图像合成,得到合成图像。
具体的,根据背景图像与目标图像的视觉比例,缩放目标图像;将缩放后的目标图像叠加在目标位置,得到合成图像。
在步骤303之前,所述方法还可以包括:接收用户修改目标位置的修改指令;根据修改指令,修改目标位置。这样,缩放后的目标图像将会叠加在修改后的目标位置上。
这里,视觉比例是图像中目标图像对应的目标和背景图像的背景叠加后能够确保整个合成图像不失真的比例。
这样一来,背景图像可以是用户比较满意的且与拍摄背景相似的背景图像,这样,合成的图像就可以只包括目标图像和用户满意的背景图像,用户无需多次拍摄或者等待合适的时间再进行拍摄。因此,提高了用户体验。
示例的,当前用户想在大雁塔下拍照的时候,大雁塔景点的人流量非常大,拍摄许久都拍摄不出来合适的图像,此时只需要用户开启本实施例的功能,打开摄像头对大雁塔主体进行扫描,将对当前预览图像进行智能分析,获取特征信息,并同时获取当前位置的位置信息(大雁塔),上传至服务器,服务器将根据上述信息,提供给当前拍摄者一个最佳的大雁塔背景图像,同时人像提取模块获取当前要合成的目标图像,最终将两图像进行合成,以便当前拍摄者以最佳的合成图像进行社交/分享。
实施例二
本发明实施例提供一种图像合成方法,该方法应用于带有拍照功能的手机。其中,持有该手机的用户在黄金周的某一天在天安门城楼下合影留念。如图4所示,该方法包括:
步骤401、手机通过手机的摄像头扫描需要拍摄的拍摄背景。
图5为拍摄出的拍摄对应所对应的图片,可以看出黄金周期间,天安门城楼的游客量是非常大的,用户按照现有方法拍摄出的图像,用户可能自己都找不到自己在哪里,这样拍出的图像毫无留念意义。
步骤402、手机获取拍摄背景的特征信息。
很显然,本实施例中天安门城楼的特征可以作为拍摄背景的特征信息。
步骤403、手机通过全球定位系统,获取手机的位置信息。
步骤404、手机向服务器发送位置信息和特征信息。
步骤405、服务器根据位置信息和特征信息确定内容与拍摄景物最为接近的背景图像、人物图像在背景图像的目标位置和人物图像的视觉比例。
位置信息用于从网络上的各个图像中,将在该位置信息对应的位置拍摄的图像筛选出来,拍摄背景的特征信息用于将筛选出的图像的特征信息与拍摄背景的特征信息对比,按照一定的算法确定出最为接近的图像,也可以确定并显示出多张为接近的图像,用户自行从中选出最为接近的图像,如图6所示。相应,根据网络上的图像确定出人物图像的人物应站在背景图像中的哪个位置和人物站在这个位置之后与背景图像中的天安门城楼的非失真比例,将这个位置作为目标位置,将这个非失真比例作为视觉比例。
步骤406、服务器向手机发送背景图像、目标位置和视觉比例。
步骤407、手机确定用户从拍摄过的照片中选择出的原始图像。
具体的,手机判断是否存在作为目标图像的人物图像。若是,则生成并显示提示拍摄人物图像的提示信息,接收用户输入的拍照指令,根据拍照指令,对着人物进行拍照,得到原始图像;若否,则从手机的图库中获取一张包括人物图像的原始图像。
这里,原始图像可以是用户在天安门城楼下拍摄的包括需要拍摄人物的原始图像,也可以是用户手动选择的包括需要拍摄人物的原始图像。
步骤408、手机从原始图像中,提取人物图像。
人物图像如图7所示。
步骤409、手机按照人物图像与背景图像的视觉比例,缩放人物图像。
人物图像中的人物和北京图像中的天安门城楼的视觉比例,也就是按照天安门城楼和人物的距离,两者的大小,确定出一个不失真的视觉比例,这样,缩放后的人物图像看起来真的在天安门城楼拍摄的中人物的大小。
步骤410、手机将缩放后的目标图像叠加在目标位置,得到合成图像。
这里,合成图像如8所示。
实施例三
本发明实施例提供一种图像合成装置50,如图9所示,该装置50可以包括:
获取单元501,用于获取与拍摄背景相似的背景图像;获取作为拍摄主体的目标图像。
合成单元502,用于将所述目标图像和所述背景图像合成,得到合成图像。
这样一来,背景图像可以是用户比较满意的且与拍摄背景相似的背景图像,这样,合成的图像就可以只包括目标图像和用户满意的背景图像,用户无需多次拍摄或者等待合适的时间再进行拍摄。因此,提高了用户体验。
进一步的,所述获取单元501具体用于:
通过摄像头扫描所述拍摄背景,获取所述拍摄背景的特征信息;
向服务器发送所述特征信息,以便于所述服务器根据所述特征信息确定内容与所述拍摄景物最为接近的背景图像、所述目标图像在所述背景图像的目标位置和所述目标图像的视觉比例;
接收所述服务器发送的所述背景图像、所述目标位置和所述视觉比例。
进一步的,所述获取单元501还用于:获取当前位置的位置信息。
相应的,如图10所示,所述装置50还包括:
发送单元503,用于向服务器发送所述特征信息和所述位置信息,以便于所述服务器根据所述特征信息和所述位置信息确定内容与所述拍摄景物最为接近的背景图像、所述目标图像在所述背景图像的目标位置和所述目标图像的视觉比例;
接收单元504,用于接收所述服务器发送的所述背景图像、所述目标位置和所述视觉比例。
进一步的,所述获取单元501还用于:
获取包括所述目标图像的原始图像;
从所述原始图像中提取所述目标图像。
进一步的,所述合成单元502具体用于:
确定所述目标图像在所述背景图像中占据的目标位置;
根据背景图像与所述目标图像的视觉比例,缩放所述目标图像;
将缩放后的目标图像叠加在所述目标位置,得到所述合成图像。
在实际应用中,所述获取单元501、合成单元502、发送单元503和接收单元504均可由位于图像合成装置50中的中央处理器(CentralProcessingUnit,CPU)、微处理器(MicroProcessorUnit,MPU)、数字信号处理器(DigitalSignalProcessor,DSP)、或现场可编程门阵列(FieldProgrammableGateArray,FPGA)等实现。
本领域内的技术人员应明白,本发明的实施例可提供为方法、系统、或计算机程序产品。因此,本发明可采用硬件实施例、软件实施例、或结合软件和硬件方面的实施例的形式。而且,本发明可采用在一个或多个其中包含有计算机可用程序代码的计算机可用存储介质(包括但不限于磁盘存储器和光学存储器等)上实施的计算机程序产品的形式。
本发明是参照根据本发明实施例的方法、设备(系统)、和计算机程序产品的流程图和/或方框图来描述的。应理解可由计算机程序指令实现流程图和/或方框图中的每一流程和/或方框、以及流程图和/或方框图中的流程和/或方框的结合。可提供这些计算机程序指令到通用计算机、专用计算机、嵌入式处理机或其他可编程数据处理设备的处理器以产生一个机器,使得通过计算机或其他可编程数据处理设备的处理器执行的指令产生用于实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能的装置。
这些计算机程序指令也可存储在能引导计算机或其他可编程数据处理设备以特定方式工作的计算机可读存储器中,使得存储在该计算机可读存储器中的指令产生包括指令装置的制造品,该指令装置实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能。
这些计算机程序指令也可装载到计算机或其他可编程数据处理设备上,使得在计算机或其他可编程设备上执行一系列操作步骤以产生计算机实现的处理,从而在计算机或其他可编程设备上执行的指令提供用于实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能的步骤。
以上所述,仅为本发明的较佳实施例而已,并非用于限定本发明的保护范围。

Claims (10)

1.一种图像合成方法,其特征在于,所述方法包括:
获取与拍摄背景相似的背景图像;
获取作为拍摄主体的目标图像;
将所述目标图像和所述背景图像合成,得到合成图像。
2.根据权利要求1所述的方法,其特征在于,所述获取与拍摄背景相似的背景图像包括:
通过摄像头扫描所述拍摄背景,获取所述拍摄背景的特征信息;
向服务器发送所述特征信息,以便于所述服务器根据所述特征信息确定内容与所述拍摄景物最为接近的背景图像、所述目标图像在所述背景图像的目标位置和所述目标图像的视觉比例;
接收所述服务器发送的所述背景图像、所述目标位置和所述视觉比例。
3.根据权利要求2所述的方法,其特征在于,所述获取所述拍摄背景的特征信息之后,所述方法还包括:
获取当前位置的位置信息;
向服务器发送所述特征信息和所述位置信息,以便于所述服务器根据所述特征信息和所述位置信息确定内容与所述拍摄景物最为接近的背景图像、所述目标图像在所述背景图像的目标位置和所述目标图像的视觉比例;
接收所述服务器发送的所述背景图像、所述目标位置和所述视觉比例。
4.根据权利要求1所述的方法,其特征在于,所述获取作为拍摄主体的目标图像包括:
获取包括所述目标图像的原始图像;
从所述原始图像中提取所述目标图像。
5.根据权利要求1至4任一项所述的方法,其特征在于,所述将所述目标图像和所述背景图像合成,得到合成图像包括:
根据所述背景图像与所述目标图像的视觉比例,缩放所述目标图像;
将缩放后的目标图像叠加在所述目标位置,得到所述合成图像。
6.一种图像合成装置,其特征在于,所述装置包括:
获取单元,用于获取与拍摄背景相似的背景图像;获取作为拍摄主体的目标图像;
合成单元,用于将所述目标图像和所述背景图像合成,得到合成图像。
7.根据权利要求6所述的装置,其特征在于,所述获取单元具体用于:
通过摄像头扫描所述拍摄背景,获取所述拍摄背景的特征信息;
向服务器发送所述特征信息,以便于所述服务器根据所述特征信息确定内容与所述拍摄景物最为接近的背景图像、所述目标图像在所述背景图像的目标位置和所述目标图像的视觉比例;
接收所述服务器发送的所述背景图像、所述目标位置和所述视觉比例。
8.根据权利要求7所述的装置,其特征在于,
所述获取单元还用于:获取当前位置的位置信息;
所述装置还包括:
发送单元,用于向服务器发送所述特征信息和所述位置信息,以便于所述服务器根据所述特征信息和所述位置信息确定内容与所述拍摄景物最为接近的背景图像、所述目标图像在所述背景图像的目标位置和所述目标图像的视觉比例;
接收单元,用于接收所述服务器发送的所述背景图像、所述目标位置和所述视觉比例。
9.根据权利要求6所述的装置,其特征在于,所述获取单元还用于:
获取包括所述目标图像的原始图像;
从所述原始图像中提取所述目标图像。
10.根据权利要求6至9任一项所述的装置,其特征在于,所述合成单元具体用于:
根据所述背景图像与所述目标图像的视觉比例,缩放所述目标图像;
将缩放后的目标图像叠加在所述目标位置,得到所述合成图像。
CN201510715985.0A 2015-10-29 2015-10-29 一种图像合成方法和装置 Pending CN105338242A (zh)

Priority Applications (2)

Application Number Priority Date Filing Date Title
CN201510715985.0A CN105338242A (zh) 2015-10-29 2015-10-29 一种图像合成方法和装置
PCT/CN2016/101937 WO2017071476A1 (zh) 2015-10-29 2016-10-12 一种图像合成方法和装置、存储介质

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201510715985.0A CN105338242A (zh) 2015-10-29 2015-10-29 一种图像合成方法和装置

Publications (1)

Publication Number Publication Date
CN105338242A true CN105338242A (zh) 2016-02-17

Family

ID=55288497

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201510715985.0A Pending CN105338242A (zh) 2015-10-29 2015-10-29 一种图像合成方法和装置

Country Status (2)

Country Link
CN (1) CN105338242A (zh)
WO (1) WO2017071476A1 (zh)

Cited By (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN106534683A (zh) * 2016-11-09 2017-03-22 深圳天珑无线科技有限公司 智能化相机实时置换背景图的方法及其系统
WO2017071476A1 (zh) * 2015-10-29 2017-05-04 努比亚技术有限公司 一种图像合成方法和装置、存储介质
CN107707823A (zh) * 2017-10-18 2018-02-16 维沃移动通信有限公司 一种拍摄方法及移动终端
CN107959790A (zh) * 2017-11-15 2018-04-24 维沃移动通信有限公司 一种图像拍摄方法、装置及移动终端
CN108965695A (zh) * 2018-06-27 2018-12-07 努比亚技术有限公司 一种拍摄方法、移动终端及计算机可读存储介质
CN109639969A (zh) * 2018-12-12 2019-04-16 维沃移动通信(杭州)有限公司 一种图像处理方法、终端及服务器
CN111107261A (zh) * 2018-10-25 2020-05-05 华勤通讯技术有限公司 照片生成方法和设备
CN115063208A (zh) * 2022-07-05 2022-09-16 拉扎斯网络科技(上海)有限公司 一种商品的展示方法、电子设备、程序产品及存储介质
WO2023045710A1 (zh) * 2021-09-27 2023-03-30 北京字节跳动网络技术有限公司 多媒体显示及匹配方法、装置、设备及介质

Families Citing this family (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN110493511B (zh) * 2019-07-30 2023-05-09 维沃移动通信有限公司 一种全景图像生成方法及移动终端
CN111131892B (zh) * 2019-12-31 2022-02-22 安博思华智能科技有限责任公司 一种控制直播背景的系统和方法

Citations (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20050122412A1 (en) * 2002-04-17 2005-06-09 Seiko Epson Corporation Digital camera
US20090257681A1 (en) * 2008-04-14 2009-10-15 Ricoh Company, Ltd. Image processing system, image processing method, and storage medium
CN101919234A (zh) * 2008-01-08 2010-12-15 索尼爱立信移动通讯有限公司 利用捕获的背景图像拍照
US20120120273A1 (en) * 2010-11-16 2012-05-17 Casio Computer Co., Ltd. Imaging apparatus and image synthesizing method
CN102800045A (zh) * 2012-07-12 2012-11-28 北京小米科技有限责任公司 一种图像处理的方法及装置
CN103929597A (zh) * 2014-04-30 2014-07-16 杭州摩图科技有限公司 一种辅助拍摄的方法及其装置
CN104424624A (zh) * 2013-08-28 2015-03-18 中兴通讯股份有限公司 一种图像合成的优化方法及装置
CN104902189A (zh) * 2015-06-24 2015-09-09 小米科技有限责任公司 图片处理方法及装置

Family Cites Families (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2004297143A (ja) * 2003-03-25 2004-10-21 Fuji Photo Film Co Ltd 撮影システム
JP2005079776A (ja) * 2003-08-29 2005-03-24 Fuji Photo Film Co Ltd 画像生成装置、画像生成方法、及びプログラム
CN101826212B (zh) * 2009-03-02 2012-09-19 深圳富泰宏精密工业有限公司 Gps照片合成系统及方法
JP5045776B2 (ja) * 2010-03-23 2012-10-10 カシオ計算機株式会社 カメラ、カメラ制御プログラム及び撮影方法並びに被写体情報送受信システム
CN103188428A (zh) * 2011-12-30 2013-07-03 富泰华工业(深圳)有限公司 拍摄装置及方法
CN103856617A (zh) * 2012-12-03 2014-06-11 联想(北京)有限公司 一种拍照方法和用户终端
KR102000536B1 (ko) * 2012-12-28 2019-07-16 삼성전자주식회사 합성 이미지를 촬영하는 촬영 장치 및 그 방법
CN105338242A (zh) * 2015-10-29 2016-02-17 努比亚技术有限公司 一种图像合成方法和装置
CN105869198A (zh) * 2015-12-14 2016-08-17 乐视移动智能信息技术(北京)有限公司 多媒体照片生成方法、装置、设备及手机

Patent Citations (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20050122412A1 (en) * 2002-04-17 2005-06-09 Seiko Epson Corporation Digital camera
CN101919234A (zh) * 2008-01-08 2010-12-15 索尼爱立信移动通讯有限公司 利用捕获的背景图像拍照
US20090257681A1 (en) * 2008-04-14 2009-10-15 Ricoh Company, Ltd. Image processing system, image processing method, and storage medium
US20120120273A1 (en) * 2010-11-16 2012-05-17 Casio Computer Co., Ltd. Imaging apparatus and image synthesizing method
CN102800045A (zh) * 2012-07-12 2012-11-28 北京小米科技有限责任公司 一种图像处理的方法及装置
CN104424624A (zh) * 2013-08-28 2015-03-18 中兴通讯股份有限公司 一种图像合成的优化方法及装置
CN103929597A (zh) * 2014-04-30 2014-07-16 杭州摩图科技有限公司 一种辅助拍摄的方法及其装置
CN104902189A (zh) * 2015-06-24 2015-09-09 小米科技有限责任公司 图片处理方法及装置

Cited By (11)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2017071476A1 (zh) * 2015-10-29 2017-05-04 努比亚技术有限公司 一种图像合成方法和装置、存储介质
CN106534683A (zh) * 2016-11-09 2017-03-22 深圳天珑无线科技有限公司 智能化相机实时置换背景图的方法及其系统
CN106534683B (zh) * 2016-11-09 2019-10-25 尚云(广州)信息科技有限公司 智能化相机实时置换背景图的方法及其系统
CN107707823A (zh) * 2017-10-18 2018-02-16 维沃移动通信有限公司 一种拍摄方法及移动终端
CN107959790A (zh) * 2017-11-15 2018-04-24 维沃移动通信有限公司 一种图像拍摄方法、装置及移动终端
CN108965695A (zh) * 2018-06-27 2018-12-07 努比亚技术有限公司 一种拍摄方法、移动终端及计算机可读存储介质
CN111107261A (zh) * 2018-10-25 2020-05-05 华勤通讯技术有限公司 照片生成方法和设备
CN109639969A (zh) * 2018-12-12 2019-04-16 维沃移动通信(杭州)有限公司 一种图像处理方法、终端及服务器
CN109639969B (zh) * 2018-12-12 2021-01-26 维沃移动通信(杭州)有限公司 一种图像处理方法、终端及服务器
WO2023045710A1 (zh) * 2021-09-27 2023-03-30 北京字节跳动网络技术有限公司 多媒体显示及匹配方法、装置、设备及介质
CN115063208A (zh) * 2022-07-05 2022-09-16 拉扎斯网络科技(上海)有限公司 一种商品的展示方法、电子设备、程序产品及存储介质

Also Published As

Publication number Publication date
WO2017071476A1 (zh) 2017-05-04

Similar Documents

Publication Publication Date Title
CN105338242A (zh) 一种图像合成方法和装置
CN105227837A (zh) 一种图像合成方法和装置
CN104954689A (zh) 一种利用双摄像头获得照片的方法及拍摄装置
CN105956999A (zh) 缩略图生成装置和方法
CN105141833A (zh) 终端拍摄方法和装置
CN104660912A (zh) 拍摄方法及拍摄装置
CN104731472A (zh) 一种图标快速整理方法及装置
CN105100603A (zh) 一种智能终端内嵌的触发拍照装置及其方法
CN105227865A (zh) 一种图像处理方法及终端
CN104917965A (zh) 拍摄方法及装置
CN104968033A (zh) 终端网络处理方法及装置
CN106850941A (zh) 照片拍摄方法及装置
CN104951549A (zh) 一种移动终端及其照片/视频分类管理方法
CN105160628A (zh) 一种获取rgb数据的方法和装置
CN106372607A (zh) 一种从视频中提取图片的方法及移动终端
CN105100642A (zh) 图像处理方法和装置
CN105488756A (zh) 图片合成方法及装置
CN106506965A (zh) 一种拍摄方法及终端
CN105227829A (zh) 图片预览装置及其实现方法
CN105245792A (zh) 一种移动终端和图像拍摄方法
CN105491548A (zh) 一种搜网的方法及装置
CN105205361A (zh) 一种图像筛选方法和装置
CN104935822A (zh) 一种处理图像的方法和装置
CN106021292B (zh) 一种查找图片的装置和方法
CN105183830A (zh) 图片浏览方法及装置

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
RJ01 Rejection of invention patent application after publication
RJ01 Rejection of invention patent application after publication

Application publication date: 20160217