CN110944109A - 一种拍照方法、装置与设备 - Google Patents
一种拍照方法、装置与设备 Download PDFInfo
- Publication number
- CN110944109A CN110944109A CN201811105629.7A CN201811105629A CN110944109A CN 110944109 A CN110944109 A CN 110944109A CN 201811105629 A CN201811105629 A CN 201811105629A CN 110944109 A CN110944109 A CN 110944109A
- Authority
- CN
- China
- Prior art keywords
- terminal
- image
- video stream
- scene
- picture
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
- 238000000034 method Methods 0.000 title claims abstract description 99
- 238000004891 communication Methods 0.000 claims description 30
- 238000012545 processing Methods 0.000 claims description 30
- 230000006870 function Effects 0.000 claims description 21
- 238000006073 displacement reaction Methods 0.000 claims description 14
- 238000004590 computer program Methods 0.000 claims description 11
- 238000010295 mobile communication Methods 0.000 claims description 5
- IRLPACMLTUPBCL-KQYNXXCUSA-N 5'-adenylyl sulfate Chemical compound C1=NC=2C(N)=NC=NC=2N1[C@@H]1O[C@H](COP(O)(=O)OS(O)(=O)=O)[C@@H](O)[C@H]1O IRLPACMLTUPBCL-KQYNXXCUSA-N 0.000 claims description 2
- 230000036544 posture Effects 0.000 abstract description 9
- 230000014509 gene expression Effects 0.000 abstract description 4
- 230000008569 process Effects 0.000 description 32
- 239000003999 initiator Substances 0.000 description 23
- 238000007726 management method Methods 0.000 description 21
- 238000010586 diagram Methods 0.000 description 20
- 230000001360 synchronised effect Effects 0.000 description 15
- 238000013461 design Methods 0.000 description 14
- 230000005540 biological transmission Effects 0.000 description 13
- 238000003860 storage Methods 0.000 description 10
- 238000005516 engineering process Methods 0.000 description 7
- 230000000007 visual effect Effects 0.000 description 7
- 230000000694 effects Effects 0.000 description 6
- 230000011664 signaling Effects 0.000 description 6
- 230000009471 action Effects 0.000 description 5
- 230000000977 initiatory effect Effects 0.000 description 5
- 230000003993 interaction Effects 0.000 description 5
- 238000012986 modification Methods 0.000 description 5
- 230000004048 modification Effects 0.000 description 5
- 230000003287 optical effect Effects 0.000 description 5
- 231100000289 photo-effect Toxicity 0.000 description 5
- 238000013519 translation Methods 0.000 description 5
- 238000005520 cutting process Methods 0.000 description 4
- 238000003384 imaging method Methods 0.000 description 4
- 238000004422 calculation algorithm Methods 0.000 description 3
- 239000002131 composite material Substances 0.000 description 3
- 238000001514 detection method Methods 0.000 description 3
- 238000011161 development Methods 0.000 description 3
- 230000018109 developmental process Effects 0.000 description 3
- 238000009877 rendering Methods 0.000 description 3
- 230000005236 sound signal Effects 0.000 description 3
- 230000001276 controlling effect Effects 0.000 description 2
- 238000012805 post-processing Methods 0.000 description 2
- 238000005070 sampling Methods 0.000 description 2
- 230000001960 triggered effect Effects 0.000 description 2
- 230000004075 alteration Effects 0.000 description 1
- 238000003491 array Methods 0.000 description 1
- 230000002457 bidirectional effect Effects 0.000 description 1
- 210000005252 bulbus oculi Anatomy 0.000 description 1
- 238000004364 calculation method Methods 0.000 description 1
- 230000001413 cellular effect Effects 0.000 description 1
- 230000008859 change Effects 0.000 description 1
- 238000006243 chemical reaction Methods 0.000 description 1
- 230000006835 compression Effects 0.000 description 1
- 238000007906 compression Methods 0.000 description 1
- 238000012790 confirmation Methods 0.000 description 1
- 238000007599 discharging Methods 0.000 description 1
- 235000019800 disodium phosphate Nutrition 0.000 description 1
- 238000009826 distribution Methods 0.000 description 1
- 230000008451 emotion Effects 0.000 description 1
- 230000003631 expected effect Effects 0.000 description 1
- 238000001914 filtration Methods 0.000 description 1
- 230000008014 freezing Effects 0.000 description 1
- 238000007710 freezing Methods 0.000 description 1
- 210000003128 head Anatomy 0.000 description 1
- 230000002452 interceptive effect Effects 0.000 description 1
- 230000007774 longterm Effects 0.000 description 1
- 238000004519 manufacturing process Methods 0.000 description 1
- 238000012544 monitoring process Methods 0.000 description 1
- 230000006855 networking Effects 0.000 description 1
- 238000005192 partition Methods 0.000 description 1
- 230000008447 perception Effects 0.000 description 1
- 238000007781 pre-processing Methods 0.000 description 1
- 238000003825 pressing Methods 0.000 description 1
- 239000002994 raw material Substances 0.000 description 1
- 230000011514 reflex Effects 0.000 description 1
- 230000001105 regulatory effect Effects 0.000 description 1
- 230000004044 response Effects 0.000 description 1
- 239000000523 sample Substances 0.000 description 1
- 230000011218 segmentation Effects 0.000 description 1
- 238000010897 surface acoustic wave method Methods 0.000 description 1
- 238000009966 trimming Methods 0.000 description 1
- 230000007306 turnover Effects 0.000 description 1
Images
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N5/00—Details of television systems
- H04N5/222—Studio circuitry; Studio devices; Studio equipment
- H04N5/262—Studio circuits, e.g. for mixing, switching-over, change of character of image, other special effects ; Cameras specially adapted for the electronic generation of special effects
- H04N5/2624—Studio circuits, e.g. for mixing, switching-over, change of character of image, other special effects ; Cameras specially adapted for the electronic generation of special effects for obtaining an image which is composed of whole input images, e.g. splitscreen
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/60—Control of cameras or camera modules
- H04N23/62—Control of parameters via user interfaces
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/60—Control of cameras or camera modules
- H04N23/63—Control of cameras or camera modules by using electronic viewfinders
- H04N23/631—Graphical user interfaces [GUI] specially adapted for controlling image capture or setting capture parameters
- H04N23/632—Graphical user interfaces [GUI] specially adapted for controlling image capture or setting capture parameters for displaying or modifying preview images prior to image capturing, e.g. variety of image resolutions or capturing parameters
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/60—Control of cameras or camera modules
- H04N23/66—Remote control of cameras or camera parts, e.g. by remote control devices
- H04N23/661—Transmitting camera control signals through networks, e.g. control via the Internet
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/90—Arrangement of cameras or camera modules, e.g. multiple cameras in TV studios or sports stadiums
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/95—Computational photography systems, e.g. light-field imaging systems
- H04N23/951—Computational photography systems, e.g. light-field imaging systems by using two or more images to influence resolution, frame rate or aspect ratio
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N5/00—Details of television systems
- H04N5/222—Studio circuitry; Studio devices; Studio equipment
- H04N5/262—Studio circuits, e.g. for mixing, switching-over, change of character of image, other special effects ; Cameras specially adapted for the electronic generation of special effects
- H04N5/2628—Alteration of picture size, shape, position or orientation, e.g. zooming, rotation, rolling, perspective, translation
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N5/00—Details of television systems
- H04N5/222—Studio circuitry; Studio devices; Studio equipment
- H04N5/262—Studio circuits, e.g. for mixing, switching-over, change of character of image, other special effects ; Cameras specially adapted for the electronic generation of special effects
- H04N5/265—Mixing
Landscapes
- Engineering & Computer Science (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- Human Computer Interaction (AREA)
- Computing Systems (AREA)
- Theoretical Computer Science (AREA)
- Studio Devices (AREA)
Abstract
本发明提出了一种拍照方法,该方法基于两地终端的视频通话,各终端在预设模板中预览双方的实时预览视频流,双方可以各自调整本地预览流的画面,并在满意预览合影图像时进行抓拍得到各自的高清图像,通过文件回传,使得一个终端可以根据抓拍到的各端的高清图像,以及抓拍时的画面调整参数以及上述预设模板生成高分辨率的远程合影。解决远程合影无法实时预览,远程合影交互性差、表情姿态无法对齐、画面质量低等体验问题,从易用性及可用性角度提出完整的远程高清合影的解决方案。
Description
技术领域
本发明涉及终端技术领域,尤其涉及一种拍照方法、装置与设备。
背景技术
随着通信技术和终端硬件的不断发展,手机摄像头的性能越来越好,拍照也越来越流行,用户可以通过拍照随时随地记录自己的生活状态,留住身边美丽的事物,非常方便。
与亲人相聚是非常美好的事情,当用户与好友在同一地点需要合照时,可以借助三脚架或者邀请第三者来拍摄用户与好友的合照。但现代快节奏的工作与生活,使人经常与亲人、好友相隔两地,物理位置隔离,使得彼此无法完成合影。
有人通过后期处理,如PS,产生异地合影效果,该方式不但需要专业的裁剪与修图技巧且会耗费大量时间,这种合照的获取方法操作繁琐,同时因无法实时取景预览,双方的动作与表情往往无法匹配出好的视觉效果,难以满足广大用户自由拍摄的要求,局限性强。
发明内容
随着现代网络与终端技术的发展与演进(如:5G低时延高带宽、高质量图像传感器、高清视频通信),将给用户带来更好的视频互联体验,也为多机互联的远程合影带来了更多的想象空间。
本发明实施例提供了一种拍照方法,具体地,可以提供一种实时视频预览的远程合影方法,拍摄过程中达到所见即所得的合影效果,解决了后期修图裁剪带来的耗时及远程无法互动等问题,提高用户的拍照体验。
本发明实施例提供的具体技术方案如下:
第一方面,本发明实施例提供一种拍照方法,该方法具体包括:第一终端获取第一视频流和第二视频流;其中,第一视频流对应于第一终端获取的第一场景的预览视频流,第二视频流对应于第二终端获取的第二场景的预览视频流;在第一终端的显示界面中根据预设模板呈现第一视频流和第二视频流;其中,预设模板包含第一区域和第二区域,第一区域用于呈现第一视频流,第二区域用于呈现第二视频流;第一终端对第一场景进行拍摄得到第一图像;第一图像的分辨率高于第一视频流的分辨率;第一终端获取第二图像;其中,第二图像是由第二终端对第二场景拍摄得到的;第二图像的分辨率高于第二视频流的分辨率;获取第一终端拍摄第一图像时的第一画面调整参数;获取第二终端拍摄第二图像时的第二画面调整参数;其中,第一画面调整参数和/或第二画面调整参数分别包括缩放比例、旋转角度、平移位移、翻转角度中的至少一个;第一终端根据第一图像、第一画面调整参数、第二图像、第二画面调整参数以及预设模板生成合照图像。
第二方面,本发明实施例提供一种拍照装置,该装置还包括:
获取模块,用于获取第一视频流和第二视频流;其中,第一视频流对应于第一终端获取的第一场景的预览视频流,第二视频流对应于第二终端获取的第二场景的预览视频流;显示模块,用于在第一终端的显示界面中根据预设模板呈现第一视频流和第二视频流;其中,预设模板包含第一区域和第二区域,第一区域用于呈现第一视频流,第二区域用于呈现第二视频流;采集模块,用于对第一场景进行拍摄得到第一图像;第一图像的分辨率高于第一视频流的分辨率;接收模块,用于获取第二图像;其中,第二图像是由第二终端对第二场景拍摄得到的;第二图像的分辨率高于第二视频流的分辨率;调整模块,用于获取第一终端拍摄第一图像时的第一画面调整参数;还用于获取第二终端拍摄第二图像时的第二画面调整参数;其中,第一画面调整参数和/或第二画面调整参数分别可以包括缩放比例、旋转角度、平移位移、翻转角度中的至少一个;图像处理模块,用于根据第一图像、第一画面调整参数、第二图像、第二画面调整参数以及预设模板生成合照图像。
根据本发明实施例提供的上述方法和装置的技术方案,可以实现远程合影,并形成高清的合影图像,同时姿态可以由双方自由调控,所见即所得;提升用户的使用体验。
根据第一方面或者第二方面,在一种可能的设计中,第一终端控制第二终端的显示界面根据预设模板呈现第一视频流和第二视频流;且第二终端呈现第一视频流和第二视频流的方式与第一终端相同。对应地,上述装置中还可以包含控制模块,该方法可以由控制模块执行。该方案保证多个终端显示预览画面的排布方式一致,使得各终端用户能够对合照结果有一致的感知,进而更好地调整自己的姿态和画面。
根据第一方面或者第二方面,在一种可能的设计中,第一终端对第一场景进行拍摄得到第一图像包括:第一终端接收第一抓拍指令,对第一场景进行拍摄得到的第一图像;第一终端获取第二图像包括:第一终端向第二终端转发第一抓拍指令,使得第二终端对第二场景进行拍摄得到第二图像,并将第二图像发送给第一终端;第一终端接收第二终端发送的第二图像。该方法可以由采集模块和接收模块协作执行。这是一种同步抓拍的方式,能够让合照发起方具有合照的绝对掌控权,方便操作。
根据第一方面或者第二方面,在一种可能的设计中,第一终端对第一场景进行拍摄得到第一图像包括:第一终端接收第一抓拍指令,对第一场景进行拍摄得到第一图像;第一终端获取第二图像包括:第二终端接收第二抓拍指令,对第二场景进行拍摄得到第二图像,并将第二图像发送给第一终端;第一终端接收第二图像。该方法可以由采集模块和接收模块协作执行。第二抓拍指令可以是第二终端的用户进行控制的,这是一种异步抓拍的方式,能够让合照参与方具有合照的自由控制权,充分发挥各参与方的主观意愿,具有良好的互动性。
根据第一方面或者第二方面,在一种可能的设计中,第一终端接收第一抓拍指令,对第一场景进行拍摄得到的第一图像包括:第一终端调用拍照功能,对第一场景在第一抓拍指令时刻进行拍照得到第一图像;或第一终端在视频采集缓冲区中找到与第一抓拍指令的时刻对应的未编码的第一场景的缓存图像作为第一图像。该方法可以由采集模块执行。这是获取高清图像的方法,旨在生成不同于现有技术的截图或者低分辨率视频帧的高清图像,以便于后续能够生成高清合照。
根据第一方面或者第二方面,在一种可能的设计中,第二图像与第一图像的分辨率相同。该技术方案可以统一各个合影终端的拍摄参数,融合画面时更加协调。
根据第一方面或者第二方面,在一种可能的设计中,第二图像与第一图像的长宽比相同。该技术方案可以统一各个合影终端的拍摄参数,更加方便裁剪。
根据第一方面或者第二方面,在一种可能的设计中,第一终端根据第一图像、第一画面调整参数、第二图像、第二画面调整参数以及预设模板生成合照图像包括:第一终端根据第一图像、第一画面调整参数以及第一区域确定出第一子图像;第一终端根据第二图像、第二画面调整参数以及第二区域确定出第二子图像;第一终端根据第一子图像和第二子图像以及预设模板生成合照图像。该方法可以由图像处理模块执行。
根据第一方面或者第二方面,在一种可能的设计中,由SIP或XMPP等视频通信信令协议完成合影双方或多方的呼叫、鉴权、挂断、保持等操作,并通过信令协议传递实时预览控制命令及数据。
根据第一方面或者第二方面,在一种可能的设计中,终端还对预览画面进行管理,需确保所有参与合影的终端在建立通信进行合影时,各终端上显示的画面一致(例如但不仅限于画面内容、相对位置/尺寸等)。另外,参与合影的任一终端可对前后摄像头进行切换,以获得不同的视角;可以将因摄像头的切换而引起的画面内容的切换同步在参与合影的各个终端中;保持在合影过程中各终端上显示的画面一致。
根据第一方面或者第二方面,在一种可能的设计中,发起合影的终端可以通过对视频流RTP扩展字段或信令等方式将抓拍命令传达给其它合影方,抓拍命令中包含分辨率与长宽比等信息,确保各合影方采用相同的参数抓拍。
根据第一方面或者第二方面,在一种可能的设计中,为保障合影的高清晰度,需将抓拍的高清晰度照片回传至合影发起方,在发起方的本地生成合影,可选地,发起方再下发给各合影方;或者各合影方将抓拍的高清晰度照片彼此交换,并在各合影方本地生成合影;或者各合影方将抓拍的高清晰度照片发送到服务器,由服务器生成合影并回传到各合影方。
根据第一方面或者第二方面,在一种可能的设计中,合影的预览窗口尺寸小于摄像头采集图像尺寸,用户可通过“默认、手工、智能”三种方式对预览窗口进行画面调节。在默认模式下,系统自动选择采集图像中央区域作为预览画面;手动模式下,用户通过手势或菜单等方式对本方的预览画面进行调整(平移/旋转/缩放);智能模式下,系统通过感兴趣区域识别、人脸检测等技术,自动从摄像头采集画面中选取预览画面。在这三种模式下,各合影方画面同步刷新调整结果,保证所见即所得效果直至用户满意。
更具体地,上述可能的技术实现可以由处理器调用存储器中的程序与指令进行相应的处理,如使能摄像头,控制摄像头采集图像,对采集的图像进行一定的算法处理,生成最终的高清合影图像。
第三方面,本发明实施例提供一种终端设备,包含存储器、处理器、总线、摄像头、收发器;存储器、摄像头、收发器以及处理器通过总线相连;摄像头用于在处理器的控制下采集图像信号;收发器用于收发指令和数据;存储器用于存储计算机程序和指令;处理器用于调用存储器中存储的计算机程序和指令控制摄像头和收发器,还具体用于使终端设备执行如上述任何一种可能的设计方法。
根据第三方面,在一种可能的设计中,终端设备还包括天线系统、天线系统在处理器的控制下,收发无线通信信号实现与移动通信网络的无线通信;移动通信网络包括以下的一种或多种:GSM网络、CDMA网络、3G网络、4G网络、5G网络、FDMA、TDMA、PDC、TACS、AMPS、WCDMA、TDSCDMA、WIFI以及LTE网络。
上述方法、装置与设备既可以应用于终端自带的拍照软件进行拍摄的场景;也可以应用于终端中运行第三方拍照软件进行拍摄的场景。同一个软件可以集成各拍摄方的所有合拍功能。
附图说明
图1为本发明实施例中一种终端的结构示意图;
图2为本发明实施例中一种远程合影的系统架构图;
图3为本发明实施例中一种终端的客户端组件示意图;
图4为本发明实施例中一种远程合影实例方法流程图;
图5为本发明实施例中一种远程合影中终端之间的信号流图;
图6为本发明实施例中一种远程合影中各终端显示界面示意图;
图7为本发明实施例中一种远程合影中各参与方的角色分布示意图;
图8为本发明实施例中一种远程合影中用户调整预览画面示意图;
图9为本发明实施例中一种远程合影智能模式下的合影效果示意图;
图10为本发明实施例中的一种抓拍命令的示意图;
图11为本发明实施例中一种远程合影的示例示意图;
图12为本发明实施例中一种远程合影的方法流程图;
图13为本发明实施例中一种远程合影的装置示意图。
具体实施方式
下面将结合本发明实施例中的附图,对本发明实施例中的技术方案进行清楚、完整地描述,显然,所描述的实施例仅仅是本发明一部分实施例,并不是全部的实施例。基于本发明中的实施例,本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例,都属于本发明保护的范围。
本发明实施例中,终端,可以是向用户提供拍照和/或数据连通性的设备,具有无线连接功能的手持式设备、或连接到无线调制解调器的其他处理设备,比如:数码相机、单反相机、摄像机、移动电话(或称为“蜂窝”电话)、智能手机,可以是便携式、袖珍式、手持式、可穿戴设备(如智能手表等)、平板电脑、个人电脑(PC,Personal Computer)、PDA(PersonalDigital Assistant,个人数字助理)、车载电脑、无人机、航拍器等。
图1示出了终端100的一种可选的硬件结构示意图。
参考图1所示,终端100可以包括射频单元110、存储器120、输入单元130、显示单元140、摄像头150、音频电路160、扬声器161、麦克风162、处理器170、外部接口180、电源190等部件。本领域技术人员可以理解,图1仅仅是便携式多功能装置的举例,并不构成对便携式多功能装置的限定,可以包括比图示更多或更少的部件,或者组合某些部件,或者不同的部件。
摄像头150用于采集图像或视频,可以通过应用程序指令触发开启,实现拍照或者摄像功能。摄像头可以包括成像镜头,滤光片,图像传感器等部件。物体发出或反射的光线进入成像镜头,通过滤光片,最终汇聚在图像传感器上。成像镜头主要是用于对拍照视角中的所有物体(也可称为待拍摄场景、待拍摄对象、目标场景或目标对象,也可以理解为用户期待拍摄的场景图像)发出或反射的光汇聚成像;滤光片主要是用于将光线中的多余光波(例如除可见光外的光波,如红外)滤去;图像传感器主要是用于对接收到的光信号进行光电转换,转换成电信号,并输入到处理器170进行后续处理。其中,摄像头可以位于终端设备的前面,也可以位于终端设备的背面,它们个个数以及具体的排布方式可以根据设计者或厂商策略的需求灵活确定,本申请不做限定。
所述输入单元130可用于接收输入的数字或字符信息,以及产生与所述便携式多功能装置的用户设置以及功能控制有关的键信号输入。具体地,输入单元130可包括触摸屏131以及其他输入设备132。所述触摸屏131可收集用户在其上或附近的触摸操作(比如用户使用手指、关节、触笔等任何适合的物体在触摸屏上或在触摸屏附近的操作),并根据预先设定的程序驱动相应的连接装置。触摸屏可以检测用户对触摸屏的触摸动作,将所述触摸动作转换为触摸信号发送给所述处理器170,并能接收所述处理器170发来的命令并加以执行;所述触摸信号至少包括触点坐标信息。所述触摸屏131可以提供所述终端100和用户之间的输入界面和输出界面。此外,可以采用电阻式、电容式、红外线以及表面声波等多种类型实现触摸屏。除了触摸屏131,输入单元130还可以包括其他输入设备。具体地,其他输入设备132可以包括但不限于物理键盘、功能键(比如音量控制按键132、开关按键133等)、轨迹球、鼠标、操作杆等中的一种或多种。
所述显示单元140可用于显示由用户输入的信息或提供给用户的信息以及终端100的各种菜单。在本发明实施例中,显示单元还用于显示设备利用摄像头150获取到的图像,可以包括某些拍摄模式下的预览图像、拍摄的初始图像以及拍摄后经过一定算法处理后的目标图像。
进一步的,触摸屏131可覆盖显示面板141,当触摸屏131检测到在其上或附近的触摸操作后,传送给处理器170以确定触摸事件的类型,随后处理器170根据触摸事件的类型在显示面板141上提供相应的视觉输出。在本实施例中,触摸屏与显示单元可以集成为一个部件而实现终端100的输入、输出、显示功能;为便于描述,本发明实施例以触摸显示屏代表触摸屏和显示单元的功能集合;在某些实施例中,触摸屏与显示单元也可以作为两个独立的部件。
所述存储器120可用于存储指令和数据,存储器120可主要包括存储指令区和存储数据区,存储数据区可存储媒体文件和文本等数据;存储指令区可存储操作系统、应用、至少一个功能所需的指令等软件单元,或者他们的子集、扩展集。还可以包括非易失性随机存储器;向处理器170提供包括管理计算处理设备中的硬件、软件以及数据资源,支持控制软件和应用,还用于多媒体文件的存储,以及运行程序和应用的存储。
处理器170是终端100的控制中心,利用各种接口和线路连接整个手机的各个部分,通过运行或执行存储在存储器120内的指令以及调用存储在存储器120内的数据,执行终端100的各种功能和处理数据,从而对手机进行整体监控。可选的,处理器170可包括一个或多个处理单元;优选的,处理器170可集成应用处理器和调制解调处理器,其中,应用处理器主要处理操作系统、用户界面和应用程序等,调制解调处理器主要处理无线通信。可以理解的是,上述调制解调处理器也可以不集成到处理器170中。在一些实施例中,处理器、存储器、可以在单一芯片上实现,在一些实施例中,他们也可以在独立的芯片上分别实现。处理器170还可以用于产生相应的操作控制信号,发给计算处理设备相应的部件,读取以及处理软件中的数据,尤其是读取和处理存储器120中的数据和程序,以使其中的各个功能模块执行相应的功能,从而控制相应的部件按指令的要求进行动作。
所述射频单元110可用于收发信息或通话过程中信号的接收和发送,特别地,将基站的下行信息接收后,给处理器170处理;另外,将设计上行的数据发送给基站。通常,RF电路包括但不限于天线、至少一个放大器、收发信机、耦合器、低噪声放大器(Low NoiseAmplifier,LNA)、双工器等。此外,射频单元110还可以通过无线通信与网络设备和其他设备通信。所述无线通信可以使用任一通信标准或协议,包括但不限于全球移动通讯系统(Global System of Mobile communication,GSM)、通用分组无线服务(General PacketRadio Service,GPRS)、码分多址(Code Division Multiple Access,CDMA)、宽带码分多址(Wideband Code Division Multiple Access,WCDMA)、长期演进(Long Term Evolution,LTE)、电子邮件、短消息服务(Short Messaging Service,SMS)等。
音频电路160、扬声器161、麦克风162可提供用户与终端100之间的音频接口。音频电路160可将接收到的音频数据转换后的电信号,传输到扬声器161,由扬声器161转换为声音信号输出;另一方面,麦克风162用于收集声音信号,还可以将收集的声音信号转换为电信号,由音频电路160接收后转换为音频数据,再将音频数据输出处理器170处理后,经射频单元110以发送给比如另一终端,或者将音频数据输出至存储器120以便进一步处理,音频电路也可以包括耳机插孔163,用于提供音频电路和耳机之间的连接接口。
终端100还包括给各个部件供电的电源190(比如电池),优选的,电源可以通过电源管理系统与处理器170逻辑相连,从而通过电源管理系统实现管理充电、放电、以及功耗管理等功能。
终端100还包括外部接口180,所述外部接口可以是标准的Micro USB接口,也可以是多针连接器,可以用于连接终端100与其他装置进行通信,也可以用于连接充电器为终端100充电。
尽管未示出,终端100还可以包括闪光灯、无线保真(wireless fidelity,WiFi)模块、蓝牙模块、不同功能的传感器等,在此不再赘述。下文中描述的部分或全部方法均可以应用在如图1所示的终端中。
本发明应用场景为用户出于社交、情感、娱乐等方面诉求,两人或多人合影是一种应用场景,但若合影的人不在同一地点或同一时间出现,则无法实现。针对该诉求,本发明提出了在智能终端(手机/平板)用户之间、家庭摄像头(机顶盒/IPC/智能音箱)用户之间,实现远程互动合影创意合影拍照。当节日来临却无法团聚,情侣相隔千里无法见面,通过远程互动合影满足达到娱乐和社交的诉求目的。当前用户一般采用拼图软件进行后期拼接实现合影效果,缺少时间的对齐(所见即所得的意思,时间对齐指可以在同一时刻出现在画面中进行彼此互动),姿态上的互动不足,合影分辨率和整体的姿态呈现均无法满足用户诉求。
本发明可以应用于远程协同合影场景,系统架构如图2所示,系统由至少两个智能终端(如第一终端和第二终端,进一步地,具体实现可如手机、相机、PAD、电脑、可穿戴设备等等可拍照且可通信设备)以及服务器(如视频通信组网)组成。用户通过智能终端向好友发起合影请求,一旦第一终端和第二终端通过服务器建立通信,则第一终端和第二终端可以通过服务器互传数据,如图像文件、指令等,进而可以实现实时的图像或视频预览、显示画面的调整、拍照控制、照片回传、合影生成等。提升远程合影的可用性易用性。
本发明的落地产品形态可以是智能终端(手机/平板/便携电脑)或家庭摄像头(智能摄像头/可视机顶盒/智能音箱),具体的可以是其中的应用程序或软件,本发明部署在终端设备上,通过软件安装或升级,通过硬件的调用配合,可给用户提供远程协同合影的功能。在具体实现过程中,终端可以包含一些必要的客户端组件,如图3所示,在硬件平台(处理器/存储器/射频单元/触摸屏/摄像头)和软件操作系统(任务管理/硬件驱动)的支持下,可以运行远程合影的应用程序,该程序可以包含以下模块:合影用户鉴权与管理101、预览模板管理102、抓拍控制103、文件回传104、合影生成105、视频通信引擎106(采集/编码/传输/显示)、预览画面编辑107等组成。其中,各个模块的功能描述如下。
合影用户鉴权与管理101:由SIP或XMPP等视频通信信令协议完成合影双方或多方的呼叫、鉴权、挂断、保持等操作,并通过信令协议传递实时预览控制命令及数据。
预览模板管理102:可供用户选择预览模板与主题,模板是指合影画面的分割模式(例如但不限于等分、画中画、斜线、拼图等,应理解拼图包含了不同的子图数量和不同的子图的排布方式),主题是指画面的模板和滤镜风格(例如但不限于生日风格,节日风格,用户自主设计的主题、在线主题等)。该模块还对预览画面进行管理,需确保所有参与合影的终端在建立通信进行合影时,各终端上显示的画面一致(例如但不仅限于画面内容、相对位置/尺寸等)。另外,参与合影的任一终端可对前后摄像头进行切换,以获得不同的拍摄视角;预览模板管理102可以将因摄像头的切换而引起的画面内容的切换同步在参与合影的各个终端中;保持在合影过程中各终端上显示的画面一致。
抓拍控制103:接收用户的抓拍操作(包括但不限于按键/声控/手势等),触发对高清照片的捕获。在一种具体实现过程中,发起合影的终端可以通过对视频流RTP扩展字段或信令等方式将抓拍命令传达给其它合影方,抓拍命令中包含分辨率与长宽比等信息,确保各合影方采用相同的参数抓拍。合影时可以有同步抓拍和异步抓拍两种方式。同步抓拍是指统一的抓拍命令同时下达给所有合影方时,无需用户响应,同步完成所有合影方对各自场景拍摄高清照片,通常由主控方来完成;异步抓拍是指将抓拍的触发指令下达给所有合影方,并需要每个合影方进行响应确认,进行了抓拍确认的合影方可单独完成自己画面的抓拍,当某一合影方完成抓拍后,该用户对应的预览画面即刻被冻结,其他用户可继续调整姿态,直到所有合影方响应抓拍,所有的预览画面全部定格,合影完成。应理解,这里的抓拍即可以是终端拍摄视频流时所拍摄到的未编码的高清图像;也可以是直接调用相机拍摄到的高清图像。这些抓拍到的图像的分辨率要比终端之间传输的视频流的图像的分辨率要高;这些抓拍的高清图像是生成最终合影的“原始材料”,因此保证了合影的高清晰度。
文件回传104:应理解,在实时视频预览时,图像传输需考虑流量带宽及处理功耗问题,因此预览图像的画面清晰度会低于用户单独调用相机进行拍照时的清晰度。例如,实时视频典型的场景是高清1280x720,15帧@768kbps,而手机拍照分辨率可达3264x1840。因此,本发明为保障合影的高清晰度,需将抓拍的高清晰度照片回传至合影发起方,在发起方的本地生成合影,可选地,发起方再下发给各合影方;或者各合影方将抓拍的高清晰度照片彼此交换,并在各合影方本地生成合影;或者各合影方将抓拍的高清晰度照片发送到服务器,由服务器生成合影并回传到各合影方。随着终端性能及5G网络技术的发展,也可采用超高清的实时预览流,使用视频预览数据生成合影不用再回传照片。本模块负责对抓拍后的照片进行收发和存取。
合影生成105:获取文件回传104的回传照片,根据预览画面编辑107提供的保存的预览画面编辑参数(旋转/缩放等)进行裁剪与拼接,得到与各合影方预览一致的超高清合影照片。
视频通信引擎106:该模块主要负责摄像头对场景的预览画面的采集、编码、传输、解码、显示等实时处理,为视频通信的基础组件。视频通信引擎106接收合影用户鉴权与管理101协商得到的合影方IP地址及端口号信息,并负责将抓拍控制103、文件回传104、合影生成105的抓拍控制数据、图像文件、预览视频流等数据通过对应的IP地址与端口号传输到各合影方。并与预览画面编辑107进行交互,用户通过预览画面编辑107预览画面编辑模块对画面进行调整,视频通信引擎106还用于画面调整处理及显示渲染。此外,不同的智能终端之间还可以通过视频通信引擎106实现终端与终端之间的数据传输。
预览画面编辑107:因合影的预览窗口尺寸小于摄像头采集图像尺寸,用户可通过“默认、手工、智能”三种方式对预览窗口进行画面调节。在默认模式下,系统自动选择采集图像中央区域作为预览画面;手动模式下,用户通过手势或菜单等方式对本方的预览画面进行调整(平移/旋转/缩放);智能模式下,系统通过感兴趣区域识别、人脸检测等技术,自动从摄像头采集画面中选取预览画面。在这三种模式下,各合影方画面同步刷新调整结果,保证所见即所得效果直至用户满意。
应理解,上述组件的名称和描述不构成对终端软件实现的限制,一些组件功能可以存在部分交叉;在合影过程中因终端角色不同发挥的作用也可能不同。
应理解,本发明实施例中,所有参与合照的终端均可称为合照参与方,第一个主动发起合照的一方可以称为合照发起方(可简称发起方),任何进行响应的一方称为合照响应方(可简称响应方,或合影方),合照响应方可以是一个或者多个,本发明实施例并不对合照参与方的数量进行限定。
如图4所示,一种可选的异地合照实例如下:
步骤201:用户选择好友发起合影请求;如第一终端(发起方)向第二终端(响应方)发起合影请求。
步骤202:由合影用户鉴权与管理101发起协商,探测IP地址与端口号。如第一终端的合影用户鉴权与管理101和第二终端的合影用户鉴权与管理101建立连接和握手。具体地,如第一终端的合影用户鉴权与管理101向第二终端的合影用户鉴权与管理101发起呼叫,涵盖防火墙穿越,最终获得第二终端的通信IP地址与端口号。
步骤203:第二终端若接受合影请求,则继续执行步骤204;第二终端若不接受合影请求,则合影建立失败,流程结束。
步骤204:视频通信引擎106按照合影用户鉴权与管理101提供的通信地址建立多方实时预览视频流;例如但不仅限于建立视频通话。此时,第一终端和第二终端的拍摄功能均已开启,开始实时图像采集,经过编码、网络传输,将预览视频流传输到服务器,再转发给其他终端。如第一终端可以将第一终端摄像头内的场景预览图像编码为第一视频流进行传输,进一步地可以通过服务器转发给第二终端;同理第二终端可以将第二终端摄像头内的场景预览图像编码为第二视频流进行传输,进一步地可以通过服务器转发给第一终端。
在一种具体实现过程中,请参阅图5所示,以第一终端为例,第一终端采集第一终端摄像头内的场景图像,采集视频帧缓存,通过视频下采样、前处理、视频编码,将视频报文网络发送,经由服务器的转发,又第二终端进行视频报文网络接收,接下来进行视频解码、后处理、视频上采样等操作,最终在第二终端中呈现出解码后的流畅视频;这样第二终端的可以获取并显示第一终端采集的视频流。值得说明的是,在一些实例中,后续的抓拍动作(如步骤207)发生在采集视频帧缓存之前,以保证抓拍的到的是高清图像或者是无损图像。
步骤205:预览模板管理102供用户选择模板及场景/主题,由预览画面编辑107负责渲染与显示。如,第一终端用户可以通过预览模板管理102选择出自己喜欢的主题和屏幕画面的展示方式,例如选择2等分图的模板(左半区域+右半区域)和普通边框主题。第一终端中的预览画面编辑107按照默认方式,在左半区域中显示第一终端的拍摄场景(第一场景)的实时预览视频流(第一视频流的部分),在右半区域中显示第二终端的拍摄场景(第二场景)的实时预览视频流(第二视频流的部分)。应理解,左半区域中实际显示第一终端的拍摄场景要比第一终端实际取景的拍摄场景要小,右半区域中实际显示第二终端的拍摄场景要比第二终端实际取景的拍摄场景要小。第一终端通过的预览模板管理102与第二终端的预览模板管理102进行通信协商和数据传输,将第一终端使用的模板和场景/主题发送给第二终端,使得第一终端和第二终端的显示的画面一致。一种实例如图6所示。另一种实现过程中,模板或主题的选择也可以由第二终端来确定,使得第一终端和第二终端显示预览画面一致的原理类似,此处不再赘述。
在具体实现过程中,视频通话常按主被叫对画面进行布局显示,以显示对方画面为主,双方看到的画面不一致,因此无法直接用于远程协同合影。第二终端需按照相同规则,对合影预览画面进行渲染显示。本实施例中可以以第一终端为基准,按照加入合影先后顺序,至左向右、至上向下进行预览布局,一种示例如图7所示,第一用户加入在最左侧,第二个用户加在右侧,第三个用户加入的时候由上到下排布,对于多人参与的时候,合影的发起方可以对各个用户的位置进行调整,如将最重要的人放在最显眼的位置或者面积最大的区域等。同时第一终端有权对第二终端的显示布局进行同步调整,第一终端和第二终端预览画面实时同步调整结果。应理解,本发明实施例的拍摄场景不仅限于人,也包括其他任意可拍照场景。
此外,第一终端和第二终端也可切换前后摄像头,采用不同的视角拍摄。各个终端使用前置摄像头或后置摄像头由各终端用户自由决定。
总之,任何画面的改变都同步显示在第一终端和第二终端中,第一终端通过的预览模板管理102与第二终端的预览模板管理102进行通信协商和数据传输,确定好第一终端和第二终端使用统一的模板,并对模板的各个区域的使用策略给出规定,如左半区域用于显示第一终端的第一场景预览视频流,右半区域用于显示第二终端的第二场景预览视频流;此外,还可以按合影方数量、加入顺序和/或用户手机屏幕大小,将预览画面划分成若干区域。
另外,第一终端中显示的第一场景预览视频流是第一终端获取的,第一终端中显示的第二场景预览视频流是第二终端通过服务器转发给第一终端的;第二终端中显示的第二场景预览视频流是第二终端获取的,第二终端中显示的第一场景预览视频流是第一终端通过服务器转发给第二终端的。
步骤206:预览画面编辑107用户调整自己画面(平移/缩放/旋转)直至满意,并记录画面调整参数,各合影方同步调整预览画面。例如,在第一终端和第二终端建立实时视频流之后,用户可以根据自己看到的画面进行实时调整姿态和画面大小以及呈现的方式,直到用户彼此确定好自己满意的画面并进行抓拍(该动作由步骤207完成)。在这一过程中,第一终端将会记载第一终端用户在这一步骤中的所有操作,即第一画面调整参数;可选的,第二终端也可以记录第二终端用户在这一步骤中的所有操作,即第二画面调整参数。这些操作或者画面调整参数可以以文本的形式记录和传输。
在一种具体实现过程中,以双方合影为例,合影双方的身高、臂长、手机镜头视场角的差异,往往导致双方各自的预览画面大小不匹配或者位置不匹配,没有呈现出很好的位姿和配合;例如但不仅限于第一终端中预览的人第二终端中预览的人小很多,或第一终端中预览的人脸比第二终端中预览的人脸大很多,或第一终端中预览的人与第二终端中预览的人严重错位等。因此需要对各自终端中对应的画面进行手动或自动调整,本发明实施例提出“默认、手动、智能”三种方式对预览窗口进行画面调节。在默认模式下,系统自动选择采集图像中央区域作为预览画面;手动模式下,用户通过手势或菜单等方式对本终端的预览画面进行调整(平移/旋转/缩放);智能模式下,系统通过感兴趣区域识别、人脸检测等技术,自动从摄像头采集画面中选取预览画面区域。下面重点描述手动模式和智能模式。
1)手动画面调整详细描述:
如图8所示,因显示窗口小于视频预览画面,用户可通过手势对自己的预览画面进行调整,含平移、缩放、旋转、翻转等方式;记录手势平移像素值(X,Y),缩放比例R,旋转角度A,翻转角度B,并将相关参数保存在本地,用于后续合影生成。同时,视频通信引擎将调整后的预览画面通过视频流发送给各合影方,保持各合影方预览画面一致。
2)智能画面调整详细描述:
通过图像感兴趣区域识别,将人脸、背景等感兴趣区域呈现在显示窗口中,比如在人像合影时,通过识别人脸区域及人脸区域占比,自动将人脸画面与预览窗口相匹配,达到自动编辑裁剪的目的。另外,在智能画面调整模式下,用户通过点击选取人像分割目标,可将对方合影人像拖动到本方背景中,实现同背景的异地合影,效果如图9所示。
应理解,第一画面调整参数可以理解为第一终端抓拍到图像时对应的缩放比例、旋转角度、平移位移、或翻转角度中的至少一个;第二画面调整参数可以理解为第二终端抓拍到图像时对应的缩放比例、旋转角度、平移位移、或翻转角度中的至少一个。第一画面调整参数可以理解为第一终端从启动合影开始,直到抓拍这一过程中所有画面调整参数的总和,即该过程中缩放比例、旋转角度、平移位移、或翻转角度中至少一个的变化量;第二画面调整参数可以理解为第二终端从参与合影开始,直到抓拍这一过程中所有画面调整参数的总和,即该过程中缩放比例、旋转角度、平移位移、或翻转角度中至少一个的变化量。
例如第一终端抓拍时,画面缩放比例为2x,旋转角度为30°,平移位移为(128,128),翻转角度为180°,可将这些参数记录为第一画面调整参数。这些参数可以通过本文形式传输。
步骤207:抓拍控制103通过同步或异步抓拍捕获高清照片。一种具体实现过程中,当第一终端的用户已经满意当前合照画面时,可以通过抓拍控制103触发抓拍指令/拍照指令,该拍照指令将实时传达给第二终端的抓拍控制103,如,在用户调整姿态的过程中,第一终端触发拍照时,第一终端将对第一场景拍摄得到第一图像,同步地,第二终端将对第二场景拍摄得到第二图像,实现同步抓拍;其中第一图像和第二图像还没有经过压缩编码,因此分辨率高于第一视频流和第二视频流中的图像。另外一种具体实现过程中,拍摄指令由第一终端和第二终端的抓拍控制103各自掌控,即第一终端的用户只能控制第一终端是否拍照,第二终端的用户只能控制第二终端是否拍照,实现异步抓拍;如,在用户调整姿态的过程中,第一终端先触发拍照时,第一终端将对第一场景拍摄得到第一图像,并且第一终端和第二终端的显示界面中第一场景区域会冻结;而第二终端由于还没有触发拍照,因此第一终端和第二终端的显示界面中第二场景区域依旧是实时的第二场景的预览视频流,直到第二终端触发拍照时,第二终端将对第二场景拍摄得到第二图像,并且第一终端和第二终端的显示界面中第二场景区域也被冻结,此时,第一终端和第二终端的显示界面中显示的就是合照的画面,也可以称为合照预览图。
一种具体实现过程中,一种同步抓拍方法可以是,当合影方(发起方)通过按钮/声控/手势等方式,发出同步抓拍命令后,各合影方收到抓拍命令后,各终端进行同步抓拍,获得所见即所得的合影效果。具体流程如下:
用户通过按钮/声控/手势等方式,发出同步抓拍命令;命令可以以视频流RTP扩展头的方式携带,为防止命令在传输过程中丢包导致合拍失败,采用重复发送方式,并标记重复次数,直到合影方抓拍成功返回ACK消息为止;参与合影方接收到抓拍命令后,立即执行抓拍,按命令要求捕获高清照片,若抓拍命令为重复命令则忽略。
一种具体实现过程中,一种异步抓拍方法流程如下:
各合影方只能对自己的预览画面进行抓拍,合影方发以按钮/声控/手势等方式,发出异步抓拍命令时,发起命令的合影方立即抓拍高清照片。照片获取后,发起命令的合影方立即向其他合影方发出异步抓拍通知,同时可以将抓拍高清照片的时戳TS通过视频通信引擎发送给其它合影方;其它合影方收到异步抓拍通知及时戳后,在本地终端显示界面中冻结该合影方对应的画面,直至所有合影参与方的画面全部完成抓拍冻结,完成合影。
在具体实现过程中,一种具体的抓拍命令结构可以参照如图10所示。抓拍命令可以包含用户ID、分辨率标识、命令号、命令重复次数,可选的,还可以包含异步抓拍帧时戳;其中用户ID用于视频通信引擎建立连接和协商时对应IP地址和端口号。分辨率标识用来统一各终端抓拍高清图像时的分辨率,如字段的数值为0表示4k,字段的数值为1表示1080p,字段的数值为2表示720P。命令号用来表示抓拍的类型,如字段的数值为1表示同步抓拍,字段的数值为2表示异步抓拍。命令重复次数:如取值可以包括0~128的任意次数,表示命令重复次数,重传的目的是为了防止丢包。异步抓拍帧时戳,用于保存异步抓拍获取高清照片的时戳,用于各个合影方冻结所述高清照片对应的预览画面,视觉上直观反馈用户抓拍的图像。
在具体实现过程中,在同步抓拍和异步抓拍的过程中,第一终端和第二终端可以通过抓拍命令的字段设置,采用相同的分辨率或画面长宽比或拍摄场景或其他拍摄参数拍摄图像,使得最后合成合影图像的画质更和谐统一。
步骤208:文件回传104将捕获的高清照片和相应操作回传至合影发起方。例如第二终端的文件回传104将拍摄到的第二图像回传给第一终端。可选的,步骤208还可以是第一终端和第二终端互传第一图像和第二图像。可选的,步骤208还可以是第一终端的文件回传104将拍摄到的第一图像回传给第二终端。此外,第一终端还可以将第一画面调整参数与转发给第二终端,第二终端也可以将第二画面调整参数转发给第一终端。
通过同步或异步方式完成合影后,各合影方抓拍的图像通过无损编码的方式保存在各合影方的终端文件系统中,合影参与方的文件回传模块通过协商确定的IP地址与端口号,将高清照片传输并汇总到合影发起方,用于合照生成。
步骤209:合影生成105按预览画面编辑107记录的调整参数,裁剪拼接生成合照,产生所见即所得的效果。例如第一终端的合影生成105根据预览画面编辑107记录的第一画面调整参数和第一图像得到第一子图像,使得第一终端实际拍摄的第一图像变为经过用户复杂调整后第一子图像,第一子图像包含最终合照画面中第一场景的部分;同理,第一终端的合影生成105根据第二终端中预览画面编辑107记录的第二画面调整参数(可以在第二终端回传第二图像的时候一起转发给第一终端)和第二图像得到第二子图像,使得第二终端实际拍摄的第二图像变为经过用户经过复杂调整后第二子图像,第二子图像包含最终合照画面中第二场景的部分;最后根据第一子图像和第二子图像以及预设的模板生成高清的合照图。该高清的合照图与用户触发合照时终端显示的预览合照图相同。可选的,第一终端的显示屏中将高清的合照图替换掉原来的预览合照图,呈现给用户。进一步的,第一终端的用户可以将高清的合照图发送给第二终端的用户或者其他用户。
在具体实现过程中,一种合照生成的流程可以如下:
合影发起方获取各合影方抓拍到的高清照片以及抓拍时相应记录的预览画面编辑参数(即画面调整参数);将合影方照片解码成YUV数据,将合影方照片与调整参数一一对应;按照调整参数(显示窗口大小、位置、缩放比例、旋转角度、平移像素、或翻转角度中的至少一个)对各合影方高清照片进行编辑调整;对编辑后各合影方照片进行拼接并编码成JPEG格式照片,将合影结果呈现在合影发起方的终端的显示界面上。
一种例子可以参见图11,假设合影发起方1接收合影参与方2和合影参与方3回传回来的图像进行解码得到高清图像,来自合影参与方2的高清图像的内容包含D1E1F1,来自合影参与方3的高清图像的内容包含G1H1I1,由于合影发起方抓拍的高清图像存储于本地,因此不需要回传,合影发起方1的高清图像的内容包含A1B1C1。根据来自合影参与方2的一系列画面调整参数,如旋转角度、缩放倍数、或平移位移等,D1E1F1对应变为D2E2F2;根据来自合影参与方3的一系列画面调整参数,如旋转角度、缩放倍数、或平移位移等,G1H1I1对应变为G2H2I2;根据来自合影发起方1的一系列画面调整参数,如旋转角度、缩放倍数、或平移位移等,A1B1C1对应变为A2B2C2。根据模板中的主题以及各合影方画面的布局,对应裁剪出D2,H2,和C2这几个局部区域,最后根据D2,H2,和C2以及模板主题拼接成高清合影,并编码成为不同格式的图像,如JPEG。
以图2为例,第一终端与第二终端均为合照参与方,以第一终端为合照发起方,以第二终端为合照响应方为例,对本发明一种可选的实施例进行展开说明。本发明实施例提供一种拍照方法,该方法应用于一种拍摄终端,该方法包括如下步骤:
步骤31:第一终端获取第一视频流和第二视频流;其中,第一视频流对应于第一终端获取的第一场景的预览视频流,第二视频流对应于第二终端获取的第二场景的预览视频流。即第一视频流为合影开启后,第一终端本地产生的预览视频流,第二视频流为参与合影后,第二终端产生并发送过来的预览视频流。
此外,第二终端同时也可以获取第一视频流和第二视频流。
步骤31的具体实现可以参照步骤204的部分或全部描述。
步骤32:在第一终端的显示界面中根据预设模板呈现第一视频流和第二视频流;其中,预设模板包含第一区域和第二区域,第一区域用于呈现第一视频流,第二区域用于呈现第二视频流;
应理解,由于第一区域和第二区域通常小于显示界面,因此第一区域和第二区域显示的可以是第一视频流和第二视频流的部分内容或全部内容;具体地,第一区域显示的内容可以比第一终端完整显示第一场景的内容要少;第二区域显示的内容可以比第二终端完整显示第二场景的内容要少。
此外,第一终端可以与第二终端协商通信,采用相同的模板,以及统一对第一视频流和第二视频流的布局,使得第一终端和第二终端的显示界面显示的预览画面内容完全一致,即合影区域的内容一致。可选的,预览画面的一致性可以在合影完成之前一直保持。
步骤32的具体实现可以参照步骤205的部分或全部描述。
步骤33:第一终端对第一场景进行拍摄得到第一图像;第一图像的分辨率高于第一视频流的分辨率;
步骤34:第一终端获取第二图像;其中,第二图像是由第二终端对第二场景拍摄得到的;第二图像的分辨率高于第二视频流的分辨率;
步骤33和步骤34的具体实现可以参照步骤207以及步骤208的部分或全部描述。
步骤35:获取第一终端拍摄第一图像时的第一画面调整参数;获取第二终端拍摄第二图像时的第二画面调整参数;其中,第一画面调整参数和第二画面调整参数包括缩放比例、旋转角度、平移位移、或翻转角度中的至少一个;
具体实现过程中,用户在预览拍摄场景时,可以对场景进行调整,如缩放、平移、旋转、翻转等操作,当然还可以包含PS技术中的任意一种调整技术,以达到自己期待的效果。用户在调整抓拍之前所有的操作效果,本发明实施例中终端都会记录。对应上述实施例,第一终端记录第一画面调整参数,第二终端可以记录第二画面调整参数,并将其传送给第一终端。具体实现过程中,第一终端和第二终端可以进行通信,将第一画面调整参数和第二画面调整参数以文本的形式可以双向发送或者单向发送。
步骤35的具体实现可以参照步骤206的部分或全部描述。
步骤36:第一终端根据第一图像、第一画面调整参数、第二图像、第二画面调整参数以及预设模板生成合照图像。
具体实现过程中,第一终端根据第一图像、第一画面调整参数以及第一区域确定出第一子图像。具体的,根据第一画面调整参数将第一终端实际拍摄到的第一图像变成用户抓拍时的图像状态,进一步地根据第一区域进行裁剪,得到抓拍时终端显示界面中的第一区域的子图。第一终端根据第二图像、第二画面调整参数以及所述第二区域确定出第二子图像。具体的,根据第二画面调整参数将第二终端实际拍摄到的第二图像变成用户抓拍时的图像状态,进一步地根据第二区域进行裁剪,得到抓拍时终端显示界面中的第二区域的子图。第一终端根据第一子图像和第二子图像以及所述预设模板生成合照图像。具体的,第一终端将第一区域的子图和第二区域的子图拼接到模板中,生成最终合照,并生成图片格式。
步骤36具体实现可以参照步骤209的部分或全部描述。
本发明提出了基于远程协同(互动)的合影方案,通过本发明实施例提供的合影方案,贴近真实场景,提出了实时预览模板的管理方法,使各合影参与方预览画面可保持一致,模拟本地预览效果;同时提出了一种预览画面编辑方法与同步方法,还提出了一种同步抓拍与异步抓拍的方法,提升了各合影方的互动性及趣味性;另外,抓拍高清图像的方式,并使得图像质量接近单机本地合影,远比视频截图质量要高得多;特别地,本发明提出了预览画面编辑与合影生成对应的方法,需要记录用户抓拍图像时的画面调整参数,编辑相关参数用于后期合影生成;确保合影生成画面与抓拍时的预览合影画面一致,增加用户对摆拍姿态的调整灵活性和趣味性,增加操作空间更大程度发挥用户的想象。解决了现有技术中无法实时预览,表情取景难对齐合影质量低的问题,达到所见即所得的用户体验。当前手机拍照及视频录制质量已得到极大提升,通过业务创新更容易吸引用户眼球,提升用户粘性,随着终端性能及5G技术的演进,不同于以往的远程合影方式成为可能。
基于上述实施例提供的拍照方法,本发明实施例提供一种拍照装置40,所述装置40可以应用于各类拍照设备,如图13所示,该装置40包括获取模块41、显示模块42、采集模块43、接收模块44、调整模块45、以及图像处理模块46。
获取模块41,用于获取第一视频流和第二视频流;其中,第一视频流对应于第一终端获取的第一场景的预览视频流,第二视频流对应于第二终端获取的第二场景的预览视频流。该获取模块41可以由处理器调用相应的程序指令获取本地数据以及网络传输数据来实现。
显示模块42,用于在第一终端的显示界面中根据预设模板呈现第一视频流和第二视频流;其中,预设模板包含第一区域和第二区域,第一区域用于呈现第一视频流,第二区域用于呈现第二视频流。该显示模块42可以由处理器调用存储器中的程序指令对显示数据进行布局来实现。
采集模块43,用于对第一场景进行拍摄得到第一图像;第一图像的分辨率高于第一视频流的分辨率。该采集模块43可以由处理器调用传感器以及摄像头拍摄来实现,并将采集到的图像存储在存储器中。
接收模块44,用于获取第二图像;其中,第二图像是由第二终端对第二场景拍摄得到的;第二图像的分辨率高于第二视频流的分辨率。该接收模块44可以由处理器调用相应的程序指令获取网络传输数据来实现。
调整模块45,用于获取第一终端拍摄第一图像时的第一画面调整参数;还用于获取第二终端拍摄第二图像时的第二画面调整参数;其中,第一画面调整参数和第二画面调整参数包括缩放比例、旋转角度、平移位移、或翻转角度中的至少一个。该调整模块45可以由处理器调用相应的程序指令获取本地数据以及网络传输数据来实现。
图像处理模块46,用于根据第一图像、第一画面调整参数、第二图像、第二画面调整参数以及预设模板生成合照图像。该图像处理模块46可以由处理器调用本地存储器或云端服务器中的数据以及算法,进行相应计算实现,并输出最终用户期待得到的目标场景的图片。
该装置还可以包括控制模块47,用于控制第二终端的显示界面根据所述预设模板呈现所述第一视频流和所述第二视频流;且第二终端呈现所述第一视频流和所述第二视频流的方式与所述第一终端相同。在完成抓拍合影之前,两个终端中的视频流实时显示。以便于合影参与方能够清晰地感知到各用户参与方的姿态,实现所见即所得。
在具体实现过程中,获取模块41具体用于执行步骤31中所提到的方法以及可以等同替换的方法;显示模块42具体用于执行步骤32中所提到的方法以及可以等同替换的方法;采集模块43具体用于执行步骤33中所提到的方法以及可以等同替换的方法;接收模块44具体用于执行步骤34中所提到的方法以及可以等同替换的方法;调整模块45具体用于执行步骤35中所提到的方法以及可以等同替换的方法;图像处理模块46具体用于执行步骤36中所提到的方法以及可以等同替换的方法。
其中,上述具体的方法实施例以及实施例中技术特征的解释、表述、以及多种实现形式的扩展也适用于装置中的方法执行,装置实施例中不予以赘述。
应理解以上装置40中的各个模块的划分仅仅是一种逻辑功能的划分,实际实现时可以全部或部分集成到一个物理实体上,也可以物理上分开。例如,以上各个模块可以为单独设立的处理元件,也可以集成在终端的某一个芯片中实现,此外,也可以以程序代码的形式存储于控制器的存储元件中,由处理器的某一个处理元件调用并执行以上各个模块的功能。此外各个模块可以集成在一起,也可以独立实现。这里所述的处理元件可以是一种集成电路芯片,具有信号的处理能力。在实现过程中,上述方法的各步骤或以上各个模块可以通过处理器元件中的硬件的集成逻辑电路或者软件形式的指令完成。该处理元件可以是通用处理器,例如中央处理器(英文:central processing unit,简称:CPU),还可以是被配置成实施以上方法的一个或多个集成电路,例如:一个或多个特定集成电路(英文:application-specific integrated circuit,简称:ASIC),或,一个或多个微处理器(英文:digital signal processor,简称:DSP),或,一个或者多个现场可编程门阵列(英文:field-programmable gate array,简称:FPGA)等。
应理解本发明的说明书和权利要求书及上述附图中的术语“第一”、“第二”等是用于区别类似的对象,而不必用于描述特定的顺序或先后次序。应该理解这样使用的数据在适当情况下可以互换,以便这里描述的实施例能够以除了在这里图示或描述的内容以外的顺序实施。此外,术语“包括”和“具有”以及他们的任何变形,意图在于覆盖不排他的包含,例如,包含了一系列步骤或模块的过程、方法、系统、产品或设备不必限于清楚地列出的那些步骤或模块,而是可包括没有清楚地列出的或对于这些过程、方法、产品或设备固有的其它步骤或模块。
本领域内的技术人员应明白,本发明的实施例可提供为方法、系统、或计算机程序产品。因此,本发明可采用完全硬件实施例、完全软件实施例、或结合软件和硬件方面的实施例的形式。而且,本发明可采用在一个或多个其中包含有计算机可用程序代码的计算机可用存储介质(包括但不限于磁盘存储器、CD-ROM、光学存储器等)上实施的计算机程序产品的形式。
本发明是参照根据本发明实施例的方法、设备(系统)、和计算机程序产品的流程图和/或方框图来描述的。应理解可由计算机程序指令实现流程图和/或方框图中的每一流程和/或方框、以及流程图和/或方框图中的流程和/或方框的结合。可提供这些计算机程序指令到通用计算机、专用计算机、嵌入式处理机或其他可编程数据处理设备的处理器以产生一个机器,使得通过计算机或其他可编程数据处理设备的处理器执行的指令产生用于实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能的装置。
这些计算机程序指令也可存储在能引导计算机或其他可编程数据处理设备以特定方式工作的计算机可读存储器中,使得存储在该计算机可读存储器中的指令产生包括指令装置的制造品,该指令装置实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能。
这些计算机程序指令也可装载到计算机或其他可编程数据处理设备上,使得在计算机或其他可编程设备上执行一系列操作步骤以产生计算机实现的处理,从而在计算机或其他可编程设备上执行的指令提供用于实现在流程图一个流程或多个流程和/或方框图一个方框或多个方框中指定的功能的步骤。
尽管已描述了本发明的部分实施例,但本领域内的技术人员一旦得知了基本创造性概念,则可对这些实施例作出另外的变更和修改。所以,所附权利要求意欲解释为包括已列举实施例以及落入本发明范围的所有变更和修改。显然,本领域的技术人员可以对本发明实施例进行各种改动和变型而不脱离本发明实施例的精神和范围。倘若本发明实施例的这些修改和变型属于本发明权利要求及其等同技术的范围之内,则本发明也包含这些改动和变型在内。
Claims (16)
1.一种拍照方法,其特征在于,所述方法包括:
第一终端获取第一视频流和第二视频流;其中,所述第一视频流对应于所述第一终端获取的第一场景的预览视频流,所述第二视频流对应于第二终端获取的第二场景的预览视频流;
在所述第一终端的显示界面中根据预设模板呈现所述第一视频流和所述第二视频流;其中,所述预设模板包含第一区域和第二区域,所述第一区域用于呈现所述第一视频流,所述第二区域用于呈现所述第二视频流;
所述第一终端对所述第一场景进行拍摄得到第一图像;所述第一图像的分辨率高于所述第一视频流的分辨率;
所述第一终端获取第二图像;其中,所述第二图像是由所述第二终端对所述第二场景拍摄得到的;所述第二图像的分辨率高于所述第二视频流的分辨率;
所述第一终端获取所述第一终端拍摄所述第一图像时的第一画面调整参数;
所述第一终端获取所述第二终端拍摄所述第二图像时的第二画面调整参数;其中,所述第一画面调整参数和所述第二画面调整参数包括缩放比例、旋转角度、平移位移、或翻转角度中的至少一个;
所述第一终端根据所述第一图像、所述第一画面调整参数、所述第二图像、所述第二画面调整参数以及所述预设模板生成合照图像。
2.如权利要求1所述方法,其特征在于,在所述第一终端的显示界面中根据预设模板呈现所述第一视频流和所述第二视频流时,所述方法还包括:
所述第一终端控制所述第二终端的显示界面根据所述预设模板呈现所述第一视频流和所述第二视频流;且所述第二终端呈现所述第一视频流和所述第二视频流的方式与所述第一终端相同。
3.如权利要求1所述方法,其特征在于,所述第一终端对所述第一场景进行拍摄得到第一图像包括:
所述第一终端接收第一抓拍指令,对所述第一场景进行拍摄得到第一图像;
所述第一终端获取第二图像包括:
所述第一终端向所述第二终端转发所述第一抓拍指令,使得所述第二终端对所述第二场景进行拍摄得到第二图像,并将所述第二图像发送给所述第一终端;
第一终端接收第二终端发送的第二图像。
4.如权利要求1所述方法,其特征在于,所述第一终端对所述第一场景进行拍摄得到第一图像包括:
所述第一终端接收第一抓拍指令,对所述第一场景进行拍摄得到第一图像;
所述第一终端获取第二图像包括:
所述第二终端接收第二抓拍指令,对所述第二场景进行拍摄得到第二图像,并将所述第二图像发送给所述第一终端;
所述第一终端接收所述第二图像。
5.如权利要求3或4所述方法,其特征在于,所述第一终端接收第一抓拍指令,对所述第一场景进行拍摄得到的第一图像包括:
所述第一终端调用拍照功能,对所述第一场景在第一抓拍指令时刻进行拍照得到第一图像;或
所述第一终端在视频采集缓冲区中找到与所述第一抓拍指令的时刻对应的未编码的第一场景的缓存图像作为第一图像。
6.如权利要求1-5中任一项所述方法,其特征在于,所述第二图像与所述第一图像的分辨率和画面长宽比相同。
7.如权利要求1-6中任一项所述方法,其特征在于,所述第一终端根据所述第一图像、所述第一画面调整参数、所述第二图像、所述第二画面调整参数以及所述预设模板生成合照图像包括:
所述第一终端根据所述第一图像、所述第一画面调整参数以及所述第一区域确定出第一子图像;
所述第一终端根据所述第二图像、所述第二画面调整参数以及所述第二区域确定出第二子图像;
所述第一终端根据所述第一子图像和所述第二子图像以及所述预设模板生成合照图像。
8.一种拍照装置,所述拍照装置位于第一终端中,其特征在于,所述装置包括:
获取模块,用于获取第一视频流和第二视频流;其中,所述第一视频流对应于所述第一终端获取的第一场景的预览视频流,所述第二视频流对应于第二终端获取的第二场景的预览视频流;
显示模块,用于在所述第一终端的显示界面中根据预设模板呈现所述第一视频流和所述第二视频流;其中,所述预设模板包含第一区域和第二区域,所述第一区域用于呈现所述第一视频流,所述第二区域用于呈现所述第二视频流;
采集模块,用于对所述第一场景进行拍摄得到第一图像;所述第一图像的分辨率高于所述第一视频流的分辨率;
接收模块,用于获取第二图像;其中,所述第二图像是由所述第二终端对所述第二场景拍摄得到的;所述第二图像的分辨率高于所述第二视频流的分辨率;
调整模块,用于获取所述第一终端拍摄所述第一图像时的第一画面调整参数;还用于获取所述第二终端拍摄所述第二图像时的第二画面调整参数;其中,所述第一画面调整参数和所述第二画面调整参数包括缩放比例、旋转角度、平移位移、或翻转角度中的至少一个;
图像处理模块,用于根据所述第一图像、所述第一画面调整参数、所述第二图像、所述第二画面调整参数以及所述预设模板生成合照图像。
9.如权利要求8所述装置,其特征在于,所述装置还包括控制模块,用于控制所述第二终端的显示界面根据所述预设模板呈现所述第一视频流和所述第二视频流;且所述第二终端呈现所述第一视频流和所述第二视频流的方式与所述第一终端相同。
10.如权利要求8所述装置,其特征在于,所述采集模块具体用于:接收第一抓拍指令,对所述第一场景进行拍摄得到第一图像;
所述接收模块具体用于:向所述第二终端转发所述第一抓拍指令,使得所述第二终端对所述第二场景进行拍摄得到第二图像,并将所述第二图像发送给所述第一终端;
接收第二终端发送的第二图像。
11.如权利要求8所述装置,其特征在于,所述采集模块具体用于:接收第一抓拍指令,对所述第一场景进行拍摄得到第一图像;
所述接收模块具体用于:所述第二终端接收第二抓拍指令,对所述第二场景进行拍摄得到第二图像,并将所述第二图像发送给所述第一终端;
接收所述第二图像。
12.如权利要求10或11所述装置,其特征在于,所述采集模块具体用于:
调用拍照功能,对所述第一场景在第一抓拍指令时刻进行拍照得到第一图像;或
在视频采集缓冲区中找到与所述第一抓拍指令的时刻对应的未编码的第一场景的缓存图像作为第一图像。
13.如权利要求8-12中任一项所述装置,其特征在于,所述第二图像与所述第一图像的分辨率和画面长宽比相同。
14.如权利要求8-13中任一项所述装置,其特征在于,所述图像处理模块具体用于:
根据所述第一图像、所述第一画面调整参数以及所述第一区域确定出第一子图像;
根据所述第二图像、所述第二画面调整参数以及所述第二区域确定出第二子图像;
根据所述第一子图像和所述第二子图像以及所述预设模板生成合照图像。
15.一种终端设备,其特征在于,所述终端设备包含存储器、处理器、总线、摄像头、收发器;所述存储器、所述摄像头、所述收发器以及所述处理器通过所述总线相连;
所述摄像头用于在所述处理器的控制下采集图像信号;
所述收发器用于收发指令和数据;
所述存储器用于存储计算机程序和指令;
所述处理器用于调用所述存储器中存储的所述计算机程序和指令控制所述摄像头和所述收发器,还具体用于使所述终端设备执行如权利要求1~7中任一项所述方法。
16.如权利要求15所述的终端设备,所述终端设备还包括天线系统、所述天线系统在处理器的控制下,收发无线通信信号实现与移动通信网络的无线通信;所述移动通信网络包括以下的一种或多种:GSM网络、CDMA网络、3G网络、4G网络、5G网络、FDMA、TDMA、PDC、TACS、AMPS、WCDMA、TDSCDMA、WI FI以及LTE网络。
Priority Applications (3)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201811105629.7A CN110944109B (zh) | 2018-09-21 | 2018-09-21 | 一种拍照方法、装置与设备 |
PCT/CN2019/107131 WO2020057661A1 (zh) | 2018-09-21 | 2019-09-21 | 一种拍照方法、装置与设备 |
US17/205,816 US11218649B2 (en) | 2018-09-21 | 2021-03-18 | Photographing method, apparatus, and device |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN201811105629.7A CN110944109B (zh) | 2018-09-21 | 2018-09-21 | 一种拍照方法、装置与设备 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN110944109A true CN110944109A (zh) | 2020-03-31 |
CN110944109B CN110944109B (zh) | 2022-01-14 |
Family
ID=69888334
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201811105629.7A Active CN110944109B (zh) | 2018-09-21 | 2018-09-21 | 一种拍照方法、装置与设备 |
Country Status (3)
Country | Link |
---|---|
US (1) | US11218649B2 (zh) |
CN (1) | CN110944109B (zh) |
WO (1) | WO2020057661A1 (zh) |
Cited By (12)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN111654676A (zh) * | 2020-06-10 | 2020-09-11 | 上海趣人文化传播有限公司 | 一种协作拍摄系统及其拍摄方法 |
CN111667590A (zh) * | 2020-06-12 | 2020-09-15 | 上海商汤智能科技有限公司 | 一种互动合影方法、装置、电子设备及存储介质 |
CN111968199A (zh) * | 2020-08-31 | 2020-11-20 | 深圳传音控股股份有限公司 | 图片的处理方法、终端设备和存储介质 |
CN113973178A (zh) * | 2021-10-24 | 2022-01-25 | 云景文旅科技有限公司 | 一种旅游过程中交互拍照处理方法和装置 |
CN114449134A (zh) * | 2020-10-30 | 2022-05-06 | 华为技术有限公司 | 一种拍摄方法和终端设备 |
CN114500822A (zh) * | 2020-11-11 | 2022-05-13 | 华为技术有限公司 | 控制相机的方法与电子设备 |
CN114827098A (zh) * | 2021-01-28 | 2022-07-29 | 华为技术有限公司 | 合拍的方法、装置、电子设备和可读存储介质 |
CN114845035A (zh) * | 2021-01-30 | 2022-08-02 | 华为技术有限公司 | 一种分布式拍摄方法,电子设备及介质 |
CN115134506A (zh) * | 2021-03-26 | 2022-09-30 | 阿里巴巴新加坡控股有限公司 | 摄像画面调整方法、视频画面处理方法以及装置和系统 |
WO2023005427A1 (en) * | 2021-07-29 | 2023-02-02 | International Business Machines Corporation | Context based adaptive resolution modulation countering network latency fluctuation |
WO2023016040A1 (zh) * | 2021-08-12 | 2023-02-16 | 荣耀终端有限公司 | 视频处理方法、装置、电子设备和存储介质 |
WO2023036007A1 (zh) * | 2021-09-07 | 2023-03-16 | 荣耀终端有限公司 | 一种获取图像的方法及电子设备 |
Families Citing this family (8)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN112352215A (zh) * | 2019-01-24 | 2021-02-09 | 华为技术有限公司 | 一种分享图像方法和移动设备 |
US10523900B1 (en) * | 2019-03-20 | 2019-12-31 | Zoom Video Communications, Inc. | Method and apparatus for capturing a group photograph during a video conferencing session |
CN112036242B (zh) * | 2020-07-28 | 2023-07-21 | 重庆锐云科技有限公司 | 人脸图片采集方法、装置、计算机设备及存储介质 |
CN112947756A (zh) * | 2021-03-03 | 2021-06-11 | 上海商汤智能科技有限公司 | 内容导览方法、装置、系统、计算机设备及存储介质 |
CN113158893A (zh) * | 2021-04-20 | 2021-07-23 | 北京嘀嘀无限科技发展有限公司 | 一种目标识别的方法和系统 |
CN113628292B (zh) * | 2021-08-16 | 2023-07-25 | 上海云轴信息科技有限公司 | 一种在目标终端中预览图片的方法及设备 |
CN114697555B (zh) * | 2022-04-06 | 2023-10-27 | 深圳市兆珑科技有限公司 | 一种图像处理方法、装置、设备及存储介质 |
CN116708751B (zh) * | 2022-09-30 | 2024-02-27 | 荣耀终端有限公司 | 一种拍照时长的确定方法、装置和电子设备 |
Citations (11)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN101431613A (zh) * | 2007-11-09 | 2009-05-13 | 陆云昆 | 网络合影的实现方法 |
CN101521754A (zh) * | 2008-02-25 | 2009-09-02 | 方大晟 | 异地双人大头贴 |
CN101562682A (zh) * | 2008-04-14 | 2009-10-21 | 鸿富锦精密工业(深圳)有限公司 | 视频图像处理系统及其服务器、用户端和视频图像处理方法 |
CN102158681A (zh) * | 2011-02-16 | 2011-08-17 | 中兴通讯股份有限公司 | 一种可视电话中协同拍照的方法及移动终端 |
CN102665026A (zh) * | 2012-05-03 | 2012-09-12 | 华为技术有限公司 | 一种利用视频会议实现远程合影的方法、设备及系统 |
CN102821253A (zh) * | 2012-07-18 | 2012-12-12 | 上海量明科技发展有限公司 | 即时通信工具实现合影功能的方法及系统 |
CN103716537A (zh) * | 2013-12-18 | 2014-04-09 | 宇龙计算机通信科技(深圳)有限公司 | 照片合成方法和终端 |
CN104333693A (zh) * | 2014-11-03 | 2015-02-04 | 深圳市中兴移动通信有限公司 | 拍摄方法、拍摄系统和拍摄装置 |
CN104580930A (zh) * | 2013-10-28 | 2015-04-29 | 腾讯科技(深圳)有限公司 | 合影方法及系统 |
CN106657791A (zh) * | 2017-01-03 | 2017-05-10 | 广东欧珀移动通信有限公司 | 一种合成图像的生成方法及装置 |
US9798933B1 (en) * | 2016-12-12 | 2017-10-24 | Logitech Europe, S.A. | Video conferencing system and related methods |
Family Cites Families (21)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US7774032B2 (en) * | 2006-04-05 | 2010-08-10 | Graco Children's Products Inc. | Video baby monitor system with battery back-up |
JP2008092228A (ja) * | 2006-09-29 | 2008-04-17 | Toshiba Corp | ビデオ会議システムおよびビデオ会議方法 |
US8237765B2 (en) * | 2007-06-22 | 2012-08-07 | Lifesize Communications, Inc. | Video conferencing device which performs multi-way conferencing |
US8587653B1 (en) * | 2009-04-30 | 2013-11-19 | Verint Systems, Inc. | Modifying the resolution of video before transferring to a display system |
GB2473429B (en) * | 2009-09-07 | 2013-12-11 | Snow Leopard Invest Ltd | A video-collaboration apparatus and method |
US8537195B2 (en) * | 2011-02-09 | 2013-09-17 | Polycom, Inc. | Automatic video layouts for multi-stream multi-site telepresence conferencing system |
US9445052B2 (en) * | 2011-08-31 | 2016-09-13 | Hewlett-Packard Development Company, L.P. | Defining a layout for displaying images |
CN102714705A (zh) * | 2012-03-08 | 2012-10-03 | 华为技术有限公司 | 视频会议中突显关注者的方法、设备及系统 |
JP2013254432A (ja) * | 2012-06-08 | 2013-12-19 | Canon Inc | 画像処理装置及び画像処理方法 |
SG11201500693QA (en) * | 2012-07-31 | 2015-04-29 | Nec Corp | Image processing system, image processing method, and program |
KR101576130B1 (ko) * | 2015-07-22 | 2015-12-09 | (주)씨프로 | 고해상도용 cctv 파노라마 카메라 장치 |
CN106488106B (zh) | 2015-08-31 | 2019-04-26 | 杭州华为数字技术有限公司 | 一种图像处理方法及装置 |
KR20170082349A (ko) * | 2016-01-06 | 2017-07-14 | 삼성전자주식회사 | 디스플레이 장치 및 그 제어 방법 |
US9807341B2 (en) * | 2016-02-19 | 2017-10-31 | Microsoft Technology Licensing, Llc | Communication event |
EP3249928A1 (en) * | 2016-05-23 | 2017-11-29 | Thomson Licensing | Method, apparatus and stream of formatting an immersive video for legacy and immersive rendering devices |
CN106375193A (zh) | 2016-09-09 | 2017-02-01 | 四川长虹电器股份有限公司 | 远程合照方法 |
CN106331528A (zh) * | 2016-10-24 | 2017-01-11 | 宇龙计算机通信科技(深圳)有限公司 | 一种拍摄处理方法及图像拍摄设备 |
CN106331529A (zh) * | 2016-10-27 | 2017-01-11 | 广东小天才科技有限公司 | 一种图像拍摄方法及装置 |
CN107404617A (zh) * | 2017-07-21 | 2017-11-28 | 努比亚技术有限公司 | 一种拍摄方法及终端、计算机存储介质 |
CN109769087A (zh) * | 2017-11-09 | 2019-05-17 | 中兴通讯股份有限公司 | 远程合照的拍摄方法、装置及移动终端 |
CN108495032B (zh) * | 2018-03-26 | 2020-08-04 | Oppo广东移动通信有限公司 | 图像处理方法、装置、存储介质及电子设备 |
-
2018
- 2018-09-21 CN CN201811105629.7A patent/CN110944109B/zh active Active
-
2019
- 2019-09-21 WO PCT/CN2019/107131 patent/WO2020057661A1/zh active Application Filing
-
2021
- 2021-03-18 US US17/205,816 patent/US11218649B2/en active Active
Patent Citations (11)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN101431613A (zh) * | 2007-11-09 | 2009-05-13 | 陆云昆 | 网络合影的实现方法 |
CN101521754A (zh) * | 2008-02-25 | 2009-09-02 | 方大晟 | 异地双人大头贴 |
CN101562682A (zh) * | 2008-04-14 | 2009-10-21 | 鸿富锦精密工业(深圳)有限公司 | 视频图像处理系统及其服务器、用户端和视频图像处理方法 |
CN102158681A (zh) * | 2011-02-16 | 2011-08-17 | 中兴通讯股份有限公司 | 一种可视电话中协同拍照的方法及移动终端 |
CN102665026A (zh) * | 2012-05-03 | 2012-09-12 | 华为技术有限公司 | 一种利用视频会议实现远程合影的方法、设备及系统 |
CN102821253A (zh) * | 2012-07-18 | 2012-12-12 | 上海量明科技发展有限公司 | 即时通信工具实现合影功能的方法及系统 |
CN104580930A (zh) * | 2013-10-28 | 2015-04-29 | 腾讯科技(深圳)有限公司 | 合影方法及系统 |
CN103716537A (zh) * | 2013-12-18 | 2014-04-09 | 宇龙计算机通信科技(深圳)有限公司 | 照片合成方法和终端 |
CN104333693A (zh) * | 2014-11-03 | 2015-02-04 | 深圳市中兴移动通信有限公司 | 拍摄方法、拍摄系统和拍摄装置 |
US9798933B1 (en) * | 2016-12-12 | 2017-10-24 | Logitech Europe, S.A. | Video conferencing system and related methods |
CN106657791A (zh) * | 2017-01-03 | 2017-05-10 | 广东欧珀移动通信有限公司 | 一种合成图像的生成方法及装置 |
Cited By (22)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN111654676A (zh) * | 2020-06-10 | 2020-09-11 | 上海趣人文化传播有限公司 | 一种协作拍摄系统及其拍摄方法 |
CN111654676B (zh) * | 2020-06-10 | 2021-11-19 | 上海趣人文化传播有限公司 | 一种协作拍摄系统及其拍摄方法 |
CN111667590A (zh) * | 2020-06-12 | 2020-09-15 | 上海商汤智能科技有限公司 | 一种互动合影方法、装置、电子设备及存储介质 |
CN111667590B (zh) * | 2020-06-12 | 2024-03-22 | 上海商汤智能科技有限公司 | 一种互动合影方法、装置、电子设备及存储介质 |
CN111968199A (zh) * | 2020-08-31 | 2020-11-20 | 深圳传音控股股份有限公司 | 图片的处理方法、终端设备和存储介质 |
CN114449134A (zh) * | 2020-10-30 | 2022-05-06 | 华为技术有限公司 | 一种拍摄方法和终端设备 |
CN114449134B (zh) * | 2020-10-30 | 2024-02-13 | 华为技术有限公司 | 一种拍摄方法和终端设备 |
CN114500822A (zh) * | 2020-11-11 | 2022-05-13 | 华为技术有限公司 | 控制相机的方法与电子设备 |
CN114500822B (zh) * | 2020-11-11 | 2024-03-05 | 华为技术有限公司 | 控制相机的方法与电子设备 |
WO2022161006A1 (zh) * | 2021-01-28 | 2022-08-04 | 华为技术有限公司 | 合拍的方法、装置、电子设备和可读存储介质 |
CN114827098A (zh) * | 2021-01-28 | 2022-07-29 | 华为技术有限公司 | 合拍的方法、装置、电子设备和可读存储介质 |
WO2022160985A1 (zh) * | 2021-01-30 | 2022-08-04 | 华为技术有限公司 | 一种分布式拍摄方法,电子设备及介质 |
CN115514882A (zh) * | 2021-01-30 | 2022-12-23 | 华为技术有限公司 | 一种分布式拍摄方法,电子设备及介质 |
CN114845035A (zh) * | 2021-01-30 | 2022-08-02 | 华为技术有限公司 | 一种分布式拍摄方法,电子设备及介质 |
CN114845035B (zh) * | 2021-01-30 | 2024-04-26 | 华为技术有限公司 | 一种分布式拍摄方法,电子设备及介质 |
CN115514882B (zh) * | 2021-01-30 | 2024-06-14 | 华为技术有限公司 | 一种分布式拍摄方法,电子设备及介质 |
CN115134506A (zh) * | 2021-03-26 | 2022-09-30 | 阿里巴巴新加坡控股有限公司 | 摄像画面调整方法、视频画面处理方法以及装置和系统 |
WO2023005427A1 (en) * | 2021-07-29 | 2023-02-02 | International Business Machines Corporation | Context based adaptive resolution modulation countering network latency fluctuation |
US11653047B2 (en) | 2021-07-29 | 2023-05-16 | International Business Machines Corporation | Context based adaptive resolution modulation countering network latency fluctuation |
WO2023016040A1 (zh) * | 2021-08-12 | 2023-02-16 | 荣耀终端有限公司 | 视频处理方法、装置、电子设备和存储介质 |
WO2023036007A1 (zh) * | 2021-09-07 | 2023-03-16 | 荣耀终端有限公司 | 一种获取图像的方法及电子设备 |
CN113973178A (zh) * | 2021-10-24 | 2022-01-25 | 云景文旅科技有限公司 | 一种旅游过程中交互拍照处理方法和装置 |
Also Published As
Publication number | Publication date |
---|---|
CN110944109B (zh) | 2022-01-14 |
US20210227151A1 (en) | 2021-07-22 |
WO2020057661A1 (zh) | 2020-03-26 |
US11218649B2 (en) | 2022-01-04 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN110944109B (zh) | 一种拍照方法、装置与设备 | |
CN108781271B (zh) | 用于提供图像服务的方法和装置 | |
US9024997B2 (en) | Virtual presence via mobile | |
TWI462566B (zh) | 在多攝影機行動裝置的視訊會議期間的切換攝影機技術 | |
CN103905741A (zh) | 超高清全景视频实时生成与多通道同步播放系统 | |
WO2016003896A1 (en) | Compositing and transmitting contextual information during an audio or video call | |
CN102694980A (zh) | 移动终端、移动终端摄像头的远程控制系统及方法 | |
JP6182911B2 (ja) | 伝送端末、伝送システム、プログラム | |
CN105190511A (zh) | 图像处理方法、图像处理装置和图像处理程序 | |
WO2010118611A1 (zh) | 一种截取动态图像的方法、系统及设备 | |
WO2015117513A1 (zh) | 视频会议控制方法和系统 | |
CN104777991A (zh) | 一种基于手机的远程互动投影系统 | |
CN112714327B (zh) | 基于直播应用程序的互动方法、装置、设备及存储介质 | |
US20150244756A1 (en) | Method, Apparatus and System for Determining Terminal That is to Share Real-Time Video | |
CN114610253A (zh) | 一种投屏方法及设备 | |
US9007531B2 (en) | Methods and apparatus for expanding a field of view in a video communication session | |
US20210126955A1 (en) | Communication terminal, communication system, method for sharing data, and non-transitory recording medium | |
CN103841326A (zh) | 拍摄录像的方法及装置 | |
US10560500B2 (en) | Systems and methods for recording and storing media content | |
CN110267093A (zh) | 直播视频推送方法、装置、存储介质、终端及直播镜 | |
EP2482549A1 (en) | Apparatus and method for synchronizing media capture in a wireless device | |
CN109218612B (zh) | 一种追踪拍摄系统及拍摄方法 | |
WO2022088926A1 (zh) | 一种拍摄方法和终端设备 | |
CN203930321U (zh) | 一种嵌入式投影仪及远程会议系统 | |
CN112351201A (zh) | 多媒体数据处理方法、系统、装置、电子设备和存储介质 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
GR01 | Patent grant | ||
GR01 | Patent grant |