CN117407094A - 一种显示方法、电子设备和系统 - Google Patents
一种显示方法、电子设备和系统 Download PDFInfo
- Publication number
- CN117407094A CN117407094A CN202210786399.5A CN202210786399A CN117407094A CN 117407094 A CN117407094 A CN 117407094A CN 202210786399 A CN202210786399 A CN 202210786399A CN 117407094 A CN117407094 A CN 117407094A
- Authority
- CN
- China
- Prior art keywords
- electronic device
- preview
- interface
- application
- preview stream
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
- 238000000034 method Methods 0.000 title claims abstract description 116
- 230000004044 response Effects 0.000 claims description 86
- 230000003993 interaction Effects 0.000 claims description 49
- 238000004891 communication Methods 0.000 claims description 40
- 230000006854 communication Effects 0.000 claims description 40
- 230000015654 memory Effects 0.000 claims description 29
- 238000004590 computer program Methods 0.000 claims description 13
- 230000001976 improved effect Effects 0.000 abstract description 8
- 239000010410 layer Substances 0.000 description 200
- 230000006870 function Effects 0.000 description 27
- 230000008569 process Effects 0.000 description 25
- 238000007726 management method Methods 0.000 description 22
- 238000012545 processing Methods 0.000 description 15
- 238000010586 diagram Methods 0.000 description 14
- 230000000694 effects Effects 0.000 description 14
- 230000002452 interceptive effect Effects 0.000 description 14
- 230000005236 sound signal Effects 0.000 description 13
- 238000010295 mobile communication Methods 0.000 description 12
- 210000000988 bone and bone Anatomy 0.000 description 9
- 210000004027 cell Anatomy 0.000 description 7
- 238000009432 framing Methods 0.000 description 5
- 230000003287 optical effect Effects 0.000 description 5
- 230000001133 acceleration Effects 0.000 description 4
- 238000013528 artificial neural network Methods 0.000 description 4
- 238000001514 detection method Methods 0.000 description 4
- 230000009467 reduction Effects 0.000 description 4
- 229920001621 AMOLED Polymers 0.000 description 3
- 230000005540 biological transmission Effects 0.000 description 3
- 230000008859 change Effects 0.000 description 3
- 230000008878 coupling Effects 0.000 description 3
- 238000010168 coupling process Methods 0.000 description 3
- 238000005859 coupling reaction Methods 0.000 description 3
- 238000013461 design Methods 0.000 description 3
- 238000012546 transfer Methods 0.000 description 3
- 230000003416 augmentation Effects 0.000 description 2
- 230000003190 augmentative effect Effects 0.000 description 2
- 230000036772 blood pressure Effects 0.000 description 2
- 238000004422 calculation algorithm Methods 0.000 description 2
- 230000001413 cellular effect Effects 0.000 description 2
- 238000005516 engineering process Methods 0.000 description 2
- 230000005484 gravity Effects 0.000 description 2
- 239000004973 liquid crystal related substance Substances 0.000 description 2
- 230000007774 longterm Effects 0.000 description 2
- 230000006855 networking Effects 0.000 description 2
- 230000002093 peripheral effect Effects 0.000 description 2
- 239000002096 quantum dot Substances 0.000 description 2
- 238000006467 substitution reaction Methods 0.000 description 2
- 230000000007 visual effect Effects 0.000 description 2
- 230000002159 abnormal effect Effects 0.000 description 1
- 230000008901 benefit Effects 0.000 description 1
- 230000007175 bidirectional communication Effects 0.000 description 1
- 238000013529 biological neural network Methods 0.000 description 1
- 210000004556 brain Anatomy 0.000 description 1
- 238000004364 calculation method Methods 0.000 description 1
- 230000000295 complement effect Effects 0.000 description 1
- 239000004020 conductor Substances 0.000 description 1
- 239000012792 core layer Substances 0.000 description 1
- 238000013500 data storage Methods 0.000 description 1
- 238000011161 development Methods 0.000 description 1
- 238000001914 filtration Methods 0.000 description 1
- 230000004927 fusion Effects 0.000 description 1
- 230000036541 health Effects 0.000 description 1
- 230000001939 inductive effect Effects 0.000 description 1
- 238000003780 insertion Methods 0.000 description 1
- 230000037431 insertion Effects 0.000 description 1
- 238000009434 installation Methods 0.000 description 1
- 239000010985 leather Substances 0.000 description 1
- 239000011159 matrix material Substances 0.000 description 1
- 229910044991 metal oxide Inorganic materials 0.000 description 1
- 150000004706 metal oxides Chemical class 0.000 description 1
- 230000001537 neural effect Effects 0.000 description 1
- 210000002569 neuron Anatomy 0.000 description 1
- 230000002138 osteoinductive effect Effects 0.000 description 1
- 230000010349 pulsation Effects 0.000 description 1
- 230000005855 radiation Effects 0.000 description 1
- 238000009877 rendering Methods 0.000 description 1
- 230000002441 reversible effect Effects 0.000 description 1
- 239000004065 semiconductor Substances 0.000 description 1
- 238000000926 separation method Methods 0.000 description 1
- 230000003238 somatosensory effect Effects 0.000 description 1
- 230000008093 supporting effect Effects 0.000 description 1
- 230000001360 synchronised effect Effects 0.000 description 1
- 230000001755 vocal effect Effects 0.000 description 1
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F9/00—Arrangements for program control, e.g. control units
- G06F9/06—Arrangements for program control, e.g. control units using stored programs, i.e. using an internal store of processing equipment to receive or retain programs
- G06F9/44—Arrangements for executing specific programs
- G06F9/451—Execution arrangements for user interfaces
- G06F9/452—Remote windowing, e.g. X-Window System, desktop virtualisation
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F9/00—Arrangements for program control, e.g. control units
- G06F9/06—Arrangements for program control, e.g. control units using stored programs, i.e. using an internal store of processing equipment to receive or retain programs
- G06F9/46—Multiprogramming arrangements
- G06F9/54—Interprogram communication
- G06F9/545—Interprogram communication where tasks reside in different layers, e.g. user- and kernel-space
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F2209/00—Indexing scheme relating to G06F9/00
- G06F2209/54—Indexing scheme relating to G06F9/54
- G06F2209/545—Gui
Landscapes
- Engineering & Computer Science (AREA)
- Software Systems (AREA)
- Theoretical Computer Science (AREA)
- Physics & Mathematics (AREA)
- General Engineering & Computer Science (AREA)
- General Physics & Mathematics (AREA)
- Human Computer Interaction (AREA)
- Telephone Function (AREA)
Abstract
本申请提供了一种显示方法、电子设备和系统,该方法包括:第一电子设备打开第一相机应用;响应于打开第一相机应用,显示第一界面,该第一界面显示第一相机应用的预览画面;第一电子设备从其硬件抽象层中获取第一预览流,并向第二电子设备发送该第一预览流。第二电子设备接收到第一电子设备发送的第一预览流后,显示第二界面,该第二界面显示所述第一相机应用的预览画面。本申请中,第一电子设备通过从其硬件抽象层中直接获取摄像头采集到的第一预览流,并将该第一预览流发送给第二电子设备,使得第二电子设备可以根据该第一预览流呈现与手机侧第一相机应用相同的预览画面,可以满足使用第三方应用进行拍摄的场景,有助于提升用户的体验。
Description
技术领域
本申请涉及终端领域,并且更具体地,涉及一种显示方法、电子设备和系统。
背景技术
目前,用户在智能手表侧预览手机的拍摄画面或者通过智能手表控制手机拍照时,需要在手机侧安装与手机侧相同的相机应用,无法满足使用第三方应用进行拍摄时,通过智能手表控制手机的使用场景。
发明内容
本申请提供一种显示方法、电子设备和系统,第一电子设备通过从其硬件抽象层中直接获取预览流,并将预览流发送给第二电子设备,第二电子设备侧无需安装与第一电子设备侧相匹配的应用,可以满足用户使用任意拍照应用时,通过第二电子设备控制第二电子设备的需求,有助于提升用户使用体验。
第一方面,提供了一种显示方法,该方法应用于第一电子设备中,该第一电子设备通过近距离无线连接与第二电子设备通信,该方法包括:该第一电子设备打开第一相机应用;响应于打开第一相机应用,该第一电子设备显示第一界面,第一界面显示第一相机应用的预览画面;第一电子设备从该第一电子设备的硬件抽象层中获取第一预览流,并向第二电子设备发送该第一预览流,该第一预览流用于在第二电子设备的第二界面上显示第一相机应用的预览画面。
本申请实施例中,第一电子设备(例如手机)可以在检测到打开第一相机应用后,从其硬件抽象层中直接获取摄像头采集到的第一预览流,并将该第一预览流发送给第二电子设备(例如智能手表),从而使得第二电子设备可以根据该第一预览流呈现与手机侧第一相机应用相同的预览画面,有助于提升用户的体验。同时,第二电子设备呈现预览画面无需依赖于安装该第一相机应用,可以满足使用任意第三方应用进行拍摄的场景。
结合第一方面,在第一方面的某些实现方式中,第一电子设备从该第一电子设备的硬件抽象层中获取第一预览流,并向第二电子设备发送该第一预览流,具体包括:第一电子设备的第一相机应用向第一电子设备的应用程序框架层发送第一控制指令;第一电子设备的应用程序框架层向第一电子设备的硬件抽象层发送该第一控制指令;第一电子设备的应用程序框架层从第一电子设备的硬件抽象层获取第一预览流,并向第二电子设备发送该第一预览流。
结合第一方面,在第一方面的某些实现方式中,响应于检测到第一相机应用的预览画面发生更新,第一电子设备向第二电子设备发送更新后的第一预览流。
本申请实施例中,当第一电子设备中的第一相机应用显示的预览画面发生更新时,第一电子设备可以实时向第二电子设备发送更新后的预览流,这样可以保证第一电子设备和第二电子设备显示的预览画面的同步。
结合第一方面,在第一方面的某些实现方式中,第二电子设备的第二界面中包括拍摄控件,该方法还包括:第一电子设备接收第二电子设备发送的第二控制指令,该第二控制指令用于指示第二电子设备检测到用户的第一操作,其中,所述第一操作为针对所述拍摄控件的输入操作;响应于接收到该第二控制指令,第一电子设备执行拍摄操作并获取第一图像信息。
本申请实施例中,当第二电子设备检测到用户针对拍摄控件的输入(例如,点击或者语音输入)时,第二电子设备可以指示第一电子设备其检测到用户针对拍摄控件的输入,从而使得第一电子设备可以执行拍摄操作并获取第一图像信息。这样用户可以通过第二电子设备来控制拍摄,无需用户回到第一电子设备控制拍摄,有助于提升用户的体验。
结合第一方面,在第一方面的某些实现方式中,第一电子设备的第一界面包括第一图库入口,第二电子设备的第二界面上包括第二图库入口,该方法还包括:在执行所述拍摄操作并获取第一图像信息之前,第一电子设备通过第一图库入口显示第二图像信息的缩略图信息;响应于获取到该第一图像信息,第一电子设备将第一图库入口中第二图像信息的缩略图信息更新为第一图像信息的缩略图信息,并向第二电子设备发送第二预览流,使得第二电子设备将第二图库入口中第二图像信息的缩略图信息更新为第一图像信息的缩略图信息;其中,该第二预览流包括第一图像信息的缩略图信息。
本申请实施例中,当第一电子设备和第二电子设备的显示界面上都包括图库入口时,若第一电子设备拍摄获得了一张新的图像信息,那么第一电子设备可以向第二电子设备发送该新的图像信息的缩略图信息,从而使得第二电子设备可以更新图库入口中显示的缩略图信息,这样可以保证两个设备上图库入口中缩略图信息的同步。
结合第一方面,在第一方面的某些实现方式中,第一电子设备向第二电子设备发送第二预览流,包括:第一电子设备从其硬件抽象层中获取该第二预览流,并向第二电子设备发送该第二预览流。
结合第一方面,在第一方面的某些实现方式中,该方法还包括:第一电子设备检测到用户打开第二相机应用的操作;响应于该操作,第一电子设备显示第三界面,该第三界面显示第二相机应用的预览画面;第一电子设备从其硬件抽象层中获取第三预览流,并向第二电子设备发送该第三预览流,该第三预览流用于在第二电子设备的第四界面上显示第二相机应用的预览画面;其中,第二界面和第四界面包括的交互控件相同。
本申请实施例中,用户在使用第一电子设备中使用不同的相机应用进行拍摄时,第二电子设备侧均可以显示统一的拍摄控制界面,可以满足用户使用第三方拍照应用时的遥控拍摄需求,提高了用户的使用体验。
结合第一方面,在第一方面的某些实现方式中,第一电子设备打开第一相机应用之前,该方法还包括:第一电子设备接收到第二电子设备发送的第三控制指令,该第三控制指令用于指示第二电子设备检测到用户的第二操作,其中,该第二操作用于指示打开第一电子设备中的第一相机应用。
本申请实施例中,用户可以在第二电子设备上通过第二操作控制打开第一电子设备中的相机应用,可以进一步提高用户的使用体验。
一种可能的实现方式中,第一相机应用为第一电子设备中与第二操作对应的相机应用。这样,用户可以在第二电子设备中通过第二操作默认打开第一电子设备中的第一相机应用。
结合第一方面,在第一方面的某些实现方式中,该第二电子设备的第二界面中还包括倒计时控件,该方法还包括:第一电子设备接收第二电子设备发送的第四控制指令,该第四控制指令用于指示该第二电子设备检测到用户对该倒计时控件的输入;响应于接收到该第四控制指令,第一电子设备在倒计时结束时进行拍摄操作。
结合第一方面,在第一方面的某些实现方式中,第一相机应用为注册过的相机应用。这样,只有在第一电子设备中打开注册过的相机应用时,才会将预览流发送给手表,可以满足第三方应用和用户的自定义需求。
第二方面,提供了一种显示方法,该方法应用于第二电子设备,该第二电子设备通过近距离无线连接与第一电子设备通信,该方法包括:第二电子设备接收到第一电子设备发送的第一预览流,其中,该第一预览流是第一电子设备从第一电子设备的硬件抽象层获取的;响应于接收到该第一预览流,第二电子设备显示第二界面,该第二界面显示第一相机应用的预览画面。
结合第二方面,在第二方面的某些实现方式中,该方法还包括:第一相机应用的预览画面发送更新时,第二电子设备接收第一电子设备发送的更新后的第一预览流;响应于接收到更新后的该第一预览流,第二电子设备在第二界面上显示更新后的预览画面。
结合第二方面,在第二方面的某些实现方式中,第二电子设备的第二界面中包括拍摄控件,该方法还包括:响应于检测到用户的第一操作,第二电子设备向第一电子设备发送第二控制指令,该第二控制指令用于指示第二电子设备检测到该第一操作,其中,该第一操作为针对拍摄控件的输入操作。
结合第二方面,在第二方面的某些实现方式中,第二电子设备的第二界面上包括第二图库入口,该方法还包括:在向第一电子设备发送第二控制指令之前,第二电子设备通过第二图库入口显示第二图像信息的缩略图信息;在向第一电子设备发送该第二控制指令之后,第二电子设备接收第一电子设备发送的第二预览流,该第二预览流包括第一图像信息的缩略图信息;响应于接收到该第二预览流,将第二图库入口中第二图像信息的缩略图信息更新为第一图像信息的缩略图信息。
结合第二方面,在第二方面的某些实现方式中,该方法还包括:第二电子设备接收到第一电子设备发送的第三预览流,其中,该第三预览流是第一电子设备从其硬件抽象层获取的;响应于接收到该第三预览流,第二电子设备显示第四界面,该第四界面显示第二相机应用的预览画面;其中,第二界面和第四界面包括的交互控件相同。
结合第二方面,在第二方面的某些实现方式中,第二电子设备接收到第一电子设备发送的第一预览流之前,该方法还包括:第二电子设备检测到用户的第二操作,该第二操作用于指示打开第一电子设备中的第一相机应用;响应于该第二操作,第二电子设备向第一电子设备发送第三控制指令,使得第一电子设备打开第一相机应用。
一种可能的实现方式中,第一相机应用为第一电子设备中与第二操作对应的相机应用。
结合第二方面,在第二方面的某些实现方式中,该第二电子设备的第二界面中还包括倒计时控件,该第二电子设备还用于响应于检测到用户对该倒计时控件的输入,向该第一电子设备发送第四控制指令,该第四控制指令用于指示该第二电子设备检测到用户对该倒计时控件的输入。
结合第二方面,在第二方面的某些实现方式中,第一相机应用为注册过的相机应用。
第二方面及各个可能的设计的有益效果可以参考第一方面相关的描述,在此不予赘述。
第三方面,提供了一种系统,该系统包括第一电子设备和第二电子设备,第一电子设备通过近距离无线连接与第二电子设备通信,其中,该第一电子设备,用于打开第一相机应用;响应于打开第一相机应用,显示第一界面,第一界面显示第一相机应用的预览画面;从第一电子设备的硬件抽象层中获取第一预览流,并向第二电子设备发送该第一预览流。该第二电子设备,用于接收到第一电子设备发送的第一预览流;响应于接收到该第一预览流,显示第二界面,该第二界面显示所述第一相机应用的预览画面。
结合第三方面,在第三方面的某些实现方式中,该第一电子设备具体用于:第一电子设备的第一相机应用向第一电子设备的应用程序框架层发送第一控制指令;第一电子设备的应用程序框架层向第一电子设备的硬件抽象层发送第一控制指令;第一电子设备的应用程序框架层从其硬件抽象层获取第一预览流,并向第二电子设备发送该第一预览流。
结合第三方面,在第三方面的某些实现方式中,该第一电子设备还用于:响应于检测到第一相机应用的预览画面发生更新,第一电子设备向第二电子设备发送更新后的第一预览流。该第二电子设备,还用于当第一相机应用的预览画面发送更新时,接收第一电子设备发送的更新后的第一预览流;响应于接收到更新后的该第一预览流,在第二界面上显示更新后的预览画面。
结合第三方面,在第三方面的某些实现方式中,第二电子设备的第二界面中包括拍摄控件。该第二电子设备还用于:响应于检测到用户的第一操作,向第一电子设备发送第二控制指令,该第二控制指令用于指示第二电子设备检测到该第一操作,其中,该第一操作为针对拍摄控件的输入操作。该第一电子设备,还用于接收第二电子设备发送的第二控制指令;响应于接收到该第二控制指令,执行拍摄操作并获取第一图像信息。
结合第三方面,在第三方面的某些实现方式中,第一电子设备的第一界面包括第一图库入口,第二电子设备的第二界面上包括第二图库入口。该第一电子设备还用于:在执行拍摄操作并获取第一图像信息之前,通过第一图库入口显示第二图像信息的缩略图信息;响应于获取到第一图像信息,将第一图库入口中第二图像信息的缩略图信息更新为第一图像信息的缩略图信息,并向第二电子设备发送第二预览流;其中,该第二预览流包括第一图像信息的缩略图信息。该第二电子设备,还用于在向第一电子设备发送第二控制指令之前,通过第二图库入口显示第二图像信息的缩略图信息;在向第一电子设备发送第二控制指令之后,接收第一电子设备发送的第二预览流;响应于接收到该第二预览流,将第二图库入口中第二图像信息的缩略图信息更新为第一图像信息的缩略图信息。
结合第三方面,在第三方面的某些实现方式中,该第一电子设备具体用于:从其硬件抽象层中获取第二预览流,并向第二电子设备发送该第二预览流。
结合第三方面,在第三方面的某些实现方式中,该第一电子设备还用于:检测到用户打开第二相机应用的操作;响应于该操作显示第三界面,第三界面显示第二相机应用的预览画面;从其硬件抽象层中获取第三预览流,并向第二电子设备发送该第三预览流。该第二电子设备,还用于接收到第一电子设备发送的第三预览流;响应于接收到该第三预览流,显示第四界面,第四界面显示所述第二相机应用的预览画面;其中,第二界面和第四界面包括的交互控件相同。
结合第三方面,在第三方面的某些实现方式中,该第二电子设备还用于:检测到用户的第二操作,该第二操作用于指示打开第一电子设备中的第一相机应用;响应于该第二操作,向第一电子设备发送第三控制指令。该第一电子设备,还用于接收到第二电子设备发送的第三控制指令,该第三控制指令用于指示第二电子设备检测到用户的第二操作。
一种可能的实现方式中,第一相机应用为第一电子设备中与第二操作对应的相机应用。
结合第三方面,在第三方面的某些实现方式中,该第二电子设备的第二界面中还包括倒计时控件,该第二电子设备还用于响应于检测到用户对该倒计时控件的输入,向该第一电子设备发送第四控制指令,该第四控制指令用于指示该第二电子设备检测到用户对该倒计时控件的输入。该第一电子设备还用于接收第二电子设备发送的第四控制指令;响应于接收到该第四控制指令,第一电子设备在倒计时结束时进行拍摄操作。
结合第三方面,在第三方面的某些实现方式中,第一相机应用为注册过的相机应用。
结合第三方面,在第三方面的某些实现方式中,该第一电子设备为手机,该第二电子设备为智能手表。
第三方面及各个可能的设计的有益效果可以参考第一方面相关的描述,在此不予赘述。
第四方面,提供了一种装置,该装置包括:检测单元,用于检测到第一电子设备打开第一相机应用;显示单元,用于响应于打开第一相机应用,显示第一界面,该第一界面显示所述第一相机应用的预览画面;发送单元,用于从第一电子设备的硬件抽象层中获取第一预览流,并向第二电子设备发送所述第一预览流,该第一预览流用于在第二电子设备的第二界面上显示第一相机应用的预览画面。
第五方面,提供了一种装置,该装置包括:接收单元,用于接收第一电子设备发送的第一预览流,其中,该第一预览流是第一电子设备从第一电子设备的硬件抽象层获取的;显示单元,用于响应于接收到该第一预览流,显示第二界面,该第二界面显示第一相机应用的预览画面。
第六方面,提供了一种电子设备,包括:一个或多个处理器;存储器;以及一个或多个计算机程序。其中,一个或多个计算机程序被存储在存储器中,一个或多个计算机程序包括指令。当指令被电子设备执行时,使得电子设备执行上述第一方面中任一项可能的实现中的方法。
第七方面,提供了一种电子设备,包括:一个或多个处理器;存储器;以及一个或多个计算机程序。其中,一个或多个计算机程序被存储在存储器中,一个或多个计算机程序包括指令。当指令被电子设备执行时,使得电子设备执行上述第二方面中任一项可能的实现中的方法。
第八方面,提供了一种包含指令的计算机程序产品,当所述计算机程序产品在第一电子设备上运行时,使得所述电子设备执行上述第一方面所述的方法;或者,当所述计算机程序产品在第二电子设备上运行时,使得所述电子设备执行上述第二方面所述的方法。
第九方面,提供了一种计算机可读存储介质,包括指令,当所述指令在第一电子设备上运行时,使得所述电子设备执行上述第一方面所述的方法;或者,当所述指令在第二电子设备上运行时,使得所述电子设备执行上述第二方面所述的方法。
第十方面,提供了一种芯片用于执行指令,当所述芯片运行时,所述芯片执行上述第一方面所述的方法;或者,所述芯片执行上述第二方面所述的方法。
上述第四方面至第十方面中的各个方面以及各个方面可能达到的技术效果请参照上述针对第一方面至第三方面中的各种可能方案可以达到的技术效果说明,这里不再重复赘述。
附图说明
图1是本申请实施例提供的一种电子设备的硬件结构示意图。
图2是本申请实施例提供的一种电子设备的软件结构示意图。
图3是本申请实施例提供的一组图形用户界面。
图4是本申请实施例提供的另一组图形用户界面。
图5是本申请实施例提供的另一组图形用户界面。
图6是本申请实施例提供的本申请实施例提供的一种系统架构的示意性框图。
图7是本申请实施例提供的本申请实施例提供的另一种系统架构的示意性框图。
图8是本申请实施例提供的手机和智能手表在拍照场景下的交互过程。
图9是本申请实施例提供的手机和智能手表在拍照场景下的另一交互过程。
图10是本申请实施例提供的本申请实施例提供的另一种系统架构的示意性框图。
图11是本申请实施例提供的另一组图形用户界面。
图12是本申请实施例提供的本申请实施例提供的另一种系统架构的示意性框图。
图13是本申请实施例提供的手机和智能手表在拍照场景下的另一交互过程。
图14是本申请实施例提供的显示方法的示意性流程图。
图15是本申请实施例提供的装置的示意性结构图。
图16是本申请实施例提供的装置的另一示意性结构图。
图17是本申请实施例提供的电子设备的另一结构示意图。
具体实施方式
下面将结合本申请实施例中的附图,对本申请实施例中的技术方案进行描述。其中,在本申请实施例的描述中,除非另有说明,“/”表示或的意思,例如,A/B可以表示A或B;本文中的“和/或”仅仅是一种描述关联对象的关联关系,表示可以存在三种关系,例如,A和/或B,可以表示:单独存在A,同时存在A和B,单独存在B这三种情况。另外,在本申请实施例的描述中,“复数个”或者“多个”是指两个或多于两个。
以下,术语“第一”、“第二”仅用于描述目的,而不能理解为指示或暗示相对重要性或者隐含指明所指示的技术特征的数量。由此,限定有“第一”、“第二”的特征可以明示或者隐含地包括一个或者更多个该特征。在本实施例的描述中,除非另有说明,“多个”的含义是两个或两个以上。
本申请实施例提供的方法可以应用于手机、平板电脑、可穿戴设备、车载设备、增强现实(augmented reality,AR)/虚拟现实(virtual reality,VR)设备、笔记本电脑、超级移动个人计算机(ultra-mobile personal computer,UMPC)、上网本、个人数字助理(personal digital assistant,PDA)等电子设备上,本申请实施例对电子设备的具体类型不作任何限制。
示例性的,图1示出了电子设备100的结构示意图。电子设备100可以包括处理器110,外部存储器接口120,内部存储器121,通用串行总线(universal serial bus,USB)接口130,充电管理模块140,电源管理模块141,电池142,天线1,天线2,移动通信模块150,无线通信模块160,音频模块170,扬声器170A,受话器170B,麦克风170C,耳机接口170D,传感器模块180,按键190,马达191,指示器192,摄像头193,显示屏194,以及用户身份识别(subscriber identification module,SIM)卡接口195等。其中传感器模块180可以包括压力传感器180A,陀螺仪传感器180B,气压传感器180C,磁传感器180D,加速度传感器180E,距离传感器180F,接近光传感器180G,指纹传感器180H,温度传感器180J,触摸传感器180K,环境光传感器180L,骨传导传感器180M等。
可以理解的是,本申请实施例示意的结构并不构成对电子设备100的具体限定。在本申请另一些实施例中,电子设备100可以包括比图示更多或更少的部件,或者组合某些部件,或者拆分某些部件,或者不同的部件布置。图示的部件可以以硬件,软件或软件和硬件的组合实现。
处理器110可以包括一个或多个处理单元,例如:处理器110可以包括应用处理器(application processor,AP),调制解调处理器,图形处理器(graphics processingunit,GPU),图像信号处理器(image signal processor,ISP),控制器,存储器,视频编解码器,数字信号处理器(digital signal processor,DSP),基带处理器,和/或神经网络处理器(neural-network processing unit,NPU)等。其中,不同的处理单元可以是独立的器件,也可以集成在一个或多个处理器中。
其中,控制器可以是电子设备100的神经中枢和指挥中心。控制器可以根据指令操作码和时序信号,产生操作控制信号,完成取指令和执行指令的控制。
处理器110中还可以设置存储器,用于存储指令和数据。在一些实施例中,处理器110中的存储器为高速缓冲存储器。该存储器可以保存处理器110刚用过或循环使用的指令或数据。如果处理器110需要再次使用该指令或数据,可从所述存储器中直接调用。避免了重复存取,减少了处理器110的等待时间,因而提高了系统的效率。
在一些实施例中,处理器110可以包括一个或多个接口。接口可以包括集成电路(inter-integrated circuit,I2C)接口,集成电路内置音频(inter-integrated circuitsound,I2S)接口,脉冲编码调制(pulse code modulation,PCM)接口,通用异步收发传输器(universal asynchronous receiver/transmitter,UART)接口,移动产业处理器接口(mobile industry processor interface,MIPI),通用输入输出(general-purposeinput/output,GPIO)接口,用户身份识别(subscriber identity module,SIM)接口,和/或通用串行总线(universal serial bus,USB)接口等。
I2C接口是一种双向同步串行总线,包括一根串行数据线(serial data line,SDA)和一根串行时钟线(derail clock line,SCL)。在一些实施例中,处理器110可以包含多组I2C总线。处理器110可以通过不同的I2C总线接口分别耦合触摸传感器180K,充电器,闪光灯,摄像头193等。例如:处理器110可以通过I2C接口耦合触摸传感器180K,使处理器110与触摸传感器180K通过I2C总线接口通信,实现电子设备100的触摸功能。
I2S接口可以用于音频通信。在一些实施例中,处理器110可以包含多组I2S总线。处理器110可以通过I2S总线与音频模块170耦合,实现处理器110与音频模块170之间的通信。在一些实施例中,音频模块170可以通过I2S接口向无线通信模块160传递音频信号,实现通过蓝牙耳机接听电话的功能。
PCM接口也可以用于音频通信,将模拟信号抽样,量化和编码。在一些实施例中,音频模块170与无线通信模块160可以通过PCM总线接口耦合。在一些实施例中,音频模块170也可以通过PCM接口向无线通信模块160传递音频信号,实现通过蓝牙耳机接听电话的功能。所述I2S接口和所述PCM接口都可以用于音频通信。
UART接口是一种通用串行数据总线,用于异步通信。该总线可以为双向通信总线。它将要传输的数据在串行通信与并行通信之间转换。在一些实施例中,UART接口通常被用于连接处理器110与无线通信模块160。例如:处理器110通过UART接口与无线通信模块160中的蓝牙模块通信,实现蓝牙功能。在一些实施例中,音频模块170可以通过UART接口向无线通信模块160传递音频信号,实现通过蓝牙耳机播放音乐的功能。
MIPI接口可以被用于连接处理器110与显示屏194,摄像头193等外围器件。MIPI接口包括摄像头串行接口(camera serial interface,CSI),显示屏串行接口(displayserial interface,DSI)等。在一些实施例中,处理器110和摄像头193通过CSI接口通信,实现电子设备100的拍摄功能。处理器110和显示屏194通过DSI接口通信,实现电子设备100的显示功能。
GPIO接口可以通过软件配置。GPIO接口可以被配置为控制信号,也可被配置为数据信号。在一些实施例中,GPIO接口可以用于连接处理器110与摄像头193,显示屏194,无线通信模块160,音频模块170,传感器模块180等。GPIO接口还可以被配置为I2C接口,I2S接口,UART接口,MIPI接口等。
USB接口130是符合USB标准规范的接口,具体可以是Mini USB接口,Micro USB接口,USB Type C接口等。USB接口130可以用于连接充电器为电子设备100充电,也可以用于电子设备100与外围设备之间传输数据。也可以用于连接耳机,通过耳机播放音频。该接口还可以用于连接其他电子设备,例如AR设备等。
可以理解的是,本申请实施例示意的各模块间的接口连接关系,只是示意性说明,并不构成对电子设备100的结构限定。在本申请另一些实施例中,电子设备100也可以采用上述实施例中不同的接口连接方式,或多种接口连接方式的组合。
充电管理模块140用于从充电器接收充电输入。其中,充电器可以是无线充电器,也可以是有线充电器。在一些有线充电的实施例中,充电管理模块140可以通过USB接口130接收有线充电器的充电输入。在一些无线充电的实施例中,充电管理模块140可以通过电子设备100的无线充电线圈接收无线充电输入。充电管理模块140为电池142充电的同时,还可以通过电源管理模块141为电子设备供电。
电源管理模块141用于连接电池142,充电管理模块140与处理器110。电源管理模块141接收电池142和/或充电管理模块140的输入,为处理器110,内部存储器121,外部存储器,显示屏194,摄像头193,和无线通信模块160等供电。电源管理模块141还可以用于监测电池容量,电池循环次数,电池健康状态(漏电,阻抗)等参数。在其他一些实施例中,电源管理模块141也可以设置于处理器110中。在另一些实施例中,电源管理模块141和充电管理模块140也可以设置于同一个器件中。
电子设备100的无线通信功能可以通过天线1,天线2,移动通信模块150,无线通信模块160,调制解调处理器以及基带处理器等实现。
天线1和天线2用于发射和接收电磁波信号。电子设备100中的每个天线可用于覆盖单个或多个通信频带。不同的天线还可以复用,以提高天线的利用率。例如:可以将天线1复用为无线局域网的分集天线。在另外一些实施例中,天线可以和调谐开关结合使用。
移动通信模块150可以提供应用在电子设备100上的包括2G/3G/4G/5G等无线通信的解决方案。移动通信模块150可以包括至少一个滤波器,开关,功率放大器,低噪声放大器(low noise amplifier,LNA)等。移动通信模块150可以由天线1接收电磁波,并对接收的电磁波进行滤波,放大等处理,传送至调制解调处理器进行解调。移动通信模块150还可以对经调制解调处理器调制后的信号放大,经天线1转为电磁波辐射出去。在一些实施例中,移动通信模块150的至少部分功能模块可以被设置于处理器110中。在一些实施例中,移动通信模块150的至少部分功能模块可以与处理器110的至少部分模块被设置在同一个器件中。
调制解调处理器可以包括调制器和解调器。其中,调制器用于将待发送的低频基带信号调制成中高频信号。解调器用于将接收的电磁波信号解调为低频基带信号。随后解调器将解调得到的低频基带信号传送至基带处理器处理。低频基带信号经基带处理器处理后,被传递给应用处理器。应用处理器通过音频设备(不限于扬声器170A,受话器170B等)输出声音信号,或通过显示屏194显示图像或视频。在一些实施例中,调制解调处理器可以是独立的器件。在另一些实施例中,调制解调处理器可以独立于处理器110,与移动通信模块150或其他功能模块设置在同一个器件中。
无线通信模块160可以提供应用在电子设备100上的包括无线局域网(wirelesslocal area networks,WLAN)(如无线保真(wireless fidelity,Wi-Fi)网络),蓝牙(bluetooth,BT),全球导航卫星系统(global navigation satellite system,GNSS),调频(frequency modulation,FM),近距离无线通信技术(near field communication,NFC),红外技术(infrared,IR)等无线通信的解决方案。无线通信模块160可以是集成至少一个通信处理模块的一个或多个器件。无线通信模块160经由天线2接收电磁波,将电磁波信号调频以及滤波处理,将处理后的信号发送到处理器110。无线通信模块160还可以从处理器110接收待发送的信号,对其进行调频,放大,经天线2转为电磁波辐射出去。
在一些实施例中,电子设备100的天线1和移动通信模块150耦合,天线2和无线通信模块160耦合,使得电子设备100可以通过无线通信技术与网络以及其他设备通信。所述无线通信技术可以包括全球移动通讯系统(global system for mobile communications,GSM),通用分组无线服务(general packet radio service,GPRS),码分多址接入(codedivision multiple access,CDMA),宽带码分多址(wideband code division multipleaccess,WCDMA),时分码分多址(time-division code division multiple access,TD-SCDMA),长期演进(long term evolution,LTE),BT,GNSS,WLAN,NFC,FM,和/或IR技术等。所述GNSS可以包括全球卫星定位系统(global positioning system,GPS),全球导航卫星系统(global navigation satellite system,GLONASS),北斗卫星导航系统(beidounavigation satellite system,BDS),准天顶卫星系统(quasi-zenith satellitesystem,QZSS)和/或星基增强系统(satellite based augmentation systems,SBAS)。
电子设备100通过GPU,显示屏194,以及应用处理器等实现显示功能。GPU为图像处理的微处理器,连接显示屏194和应用处理器。GPU用于执行数学和几何计算,用于图形渲染。处理器110可包括一个或多个GPU,其执行程序指令以生成或改变显示信息。
显示屏194用于显示图像,视频等。显示屏194包括显示面板。显示面板可以采用液晶显示屏(liquid crystal display,LCD),有机发光二极管(organic light-emittingdiode,OLED),有源矩阵有机发光二极体或主动矩阵有机发光二极体(active-matrixorganic light emitting diode的,AMOLED),柔性发光二极管(flex light-emittingdiode,FLED),Miniled,MicroLed,Micro-oLed,量子点发光二极管(quantum dot lightemitting diodes,QLED)等。在一些实施例中,电子设备100可以包括1个或N个显示屏194,N为大于1的正整数。
电子设备100可以通过ISP,摄像头193,视频编解码器,GPU,显示屏194以及应用处理器等实现拍摄功能。
ISP用于处理摄像头193反馈的数据。例如,拍照时,打开快门,光线通过镜头被传递到摄像头感光元件上,光信号转换为电信号,摄像头感光元件将所述电信号传递给ISP处理,转化为肉眼可见的图像。ISP还可以对图像的噪点,亮度,肤色进行算法优化。ISP还可以对拍摄场景的曝光,色温等参数优化。在一些实施例中,ISP可以设置在摄像头193中。
摄像头193用于捕获静态图像或视频。物体通过镜头生成光学图像投射到感光元件。感光元件可以是电荷耦合器件(charge coupled device,CCD)或互补金属氧化物半导体(complementary metal-oxide-semiconductor,CMOS)光电晶体管。感光元件把光信号转换成电信号,之后将电信号传递给ISP转换成数字图像信号。ISP将数字图像信号输出到DSP加工处理。DSP将数字图像信号转换成标准的RGB,YUV等格式的图像信号。在一些实施例中,电子设备100可以包括1个或N个摄像头193,N为大于1的正整数。
数字信号处理器用于处理数字信号,除了可以处理数字图像信号,还可以处理其他数字信号。例如,当电子设备100在频点选择时,数字信号处理器用于对频点能量进行傅里叶变换等。
视频编解码器用于对数字视频压缩或解压缩。电子设备100可以支持一种或多种视频编解码器。这样,电子设备100可以播放或录制多种编码格式的视频,例如:动态图像专家组(moving picture experts group,MPEG)1,MPEG2,MPEG3,MPEG4等。
NPU为神经网络(neural-network,NN)计算处理器,通过借鉴生物神经网络结构,例如借鉴人脑神经元之间传递模式,对输入信息快速处理,还可以不断的自学习。通过NPU可以实现电子设备100的智能认知等应用,例如:图像识别,人脸识别,语音识别,文本理解等。
外部存储器接口120可以用于连接外部存储卡,例如Micro SD卡,实现扩展电子设备100的存储能力。外部存储卡通过外部存储器接口120与处理器110通信,实现数据存储功能。例如将音乐,视频等文件保存在外部存储卡中。
内部存储器121可以用于存储计算机可执行程序代码,所述可执行程序代码包括指令。处理器110通过运行存储在内部存储器121的指令,从而执行电子设备100的各种功能应用以及数据处理。内部存储器121可以包括存储程序区和存储数据区。其中,存储程序区可存储操作系统,至少一个功能所需的应用程序(比如声音播放功能,图像播放功能等)等。存储数据区可存储电子设备100使用过程中所创建的数据(比如音频数据,电话本等)等。此外,内部存储器121可以包括高速随机存取存储器,还可以包括非易失性存储器,例如至少一个磁盘存储器件,闪存器件,通用闪存存储器(universal flash storage,UFS)等。
电子设备100可以通过音频模块170,扬声器170A,受话器170B,麦克风170C,耳机接口170D,以及应用处理器等实现音频功能。例如音乐播放,录音等。
音频模块170用于将数字音频信息转换成模拟音频信号输出,也用于将模拟音频输入转换为数字音频信号。音频模块170还可以用于对音频信号编码和解码。在一些实施例中,音频模块170可以设置于处理器110中,或将音频模块170的部分功能模块设置于处理器110中。
扬声器170A,也称“喇叭”,用于将音频电信号转换为声音信号。电子设备100可以通过扬声器170A收听音乐,或收听免提通话。
受话器170B,也称“听筒”,用于将音频电信号转换成声音信号。当电子设备100接听电话或语音信息时,可以通过将受话器170B靠近人耳接听语音。
麦克风170C,也称“话筒”,“传声器”,用于将声音信号转换为电信号。当拨打电话或发送语音信息时,用户可以通过人嘴靠近麦克风170C发声,将声音信号输入到麦克风170C。电子设备100可以设置至少一个麦克风170C。在另一些实施例中,电子设备100可以设置两个麦克风170C,除了采集声音信号,还可以实现降噪功能。在另一些实施例中,电子设备100还可以设置三个,四个或更多麦克风170C,实现采集声音信号,降噪,还可以识别声音来源,实现定向录音功能等。
耳机接口170D用于连接有线耳机。耳机接口170D可以是USB接口130,也可以是3.5mm的开放移动电子设备平台(open mobile terminal platform,OMTP)标准接口,美国蜂窝电信工业协会(cellular telecommunications industry association of the USA,CTIA)标准接口。
压力传感器180A用于感受压力信号,可以将压力信号转换成电信号。在一些实施例中,压力传感器180A可以设置于显示屏194。压力传感器180A的种类很多,如电阻式压力传感器,电感式压力传感器,电容式压力传感器等。电容式压力传感器可以是包括至少两个具有导电材料的平行板。当有力作用于压力传感器180A,电极之间的电容改变。电子设备100根据电容的变化确定压力的强度。当有触摸操作作用于显示屏194,电子设备100根据压力传感器180A检测所述触摸操作强度。电子设备100也可以根据压力传感器180A的检测信号计算触摸的位置。在一些实施例中,作用于相同触摸位置,但不同触摸操作强度的触摸操作,可以对应不同的操作指令。例如:当有触摸操作强度小于第一压力阈值的触摸操作作用于短消息应用图标时,执行查看短消息的指令。当有触摸操作强度大于或等于第一压力阈值的触摸操作作用于短消息应用图标时,执行新建短消息的指令。
陀螺仪传感器180B可以用于确定电子设备100的运动姿态。在一些实施例中,可以通过陀螺仪传感器180B确定电子设备100围绕三个轴(即,x,y和z轴)的角速度。陀螺仪传感器180B可以用于拍摄防抖。示例性的,当按下快门,陀螺仪传感器180B检测电子设备100抖动的角度,根据角度计算出镜头模组需要补偿的距离,让镜头通过反向运动抵消电子设备100的抖动,实现防抖。陀螺仪传感器180B还可以用于导航,体感游戏场景。
气压传感器180C用于测量气压。在一些实施例中,电子设备100通过气压传感器180C测得的气压值计算海拔高度,辅助定位和导航。
磁传感器180D包括霍尔传感器。电子设备100可以利用磁传感器180D检测翻盖皮套的开合。在一些实施例中,当电子设备100是翻盖机时,电子设备100可以根据磁传感器180D检测翻盖的开合。进而根据检测到的皮套的开合状态或翻盖的开合状态,设置翻盖自动解锁等特性。
加速度传感器180E可检测电子设备100在各个方向上(一般为三轴)加速度的大小。当电子设备100静止时可检测出重力的大小及方向。还可以用于识别电子设备姿态,应用于横竖屏切换,计步器等应用。
距离传感器180F,用于测量距离。电子设备100可以通过红外或激光测量距离。在一些实施例中,拍摄场景,电子设备100可以利用距离传感器180F测距以实现快速对焦。
接近光传感器180G可以包括例如发光二极管(LED)和光检测器,例如光电二极管。发光二极管可以是红外发光二极管。电子设备100通过发光二极管向外发射红外光。电子设备100使用光电二极管检测来自附近物体的红外反射光。当检测到充分的反射光时,可以确定电子设备100附近有物体。当检测到不充分的反射光时,电子设备100可以确定电子设备100附近没有物体。电子设备100可以利用接近光传感器180G检测用户手持电子设备100贴近耳朵通话,以便自动熄灭屏幕达到省电的目的。接近光传感器180G也可用于皮套模式,口袋模式自动解锁与锁屏。
环境光传感器180L用于感知环境光亮度。电子设备100可以根据感知的环境光亮度自适应调节显示屏194亮度。环境光传感器180L也可用于拍照时自动调节白平衡。环境光传感器180L还可以与接近光传感器180G配合,检测电子设备100是否在口袋里,以防误触。
指纹传感器180H用于采集指纹。电子设备100可以利用采集的指纹特性实现指纹解锁,访问应用锁,指纹拍照,指纹接听来电等。
温度传感器180J用于检测温度。在一些实施例中,电子设备100利用温度传感器180J检测的温度,执行温度处理策略。例如,当温度传感器180J上报的温度超过阈值,电子设备100执行降低位于温度传感器180J附近的处理器的性能,以便降低功耗实施热保护。在另一些实施例中,当温度低于另一阈值时,电子设备100对电池142加热,以避免低温导致电子设备100异常关机。在其他一些实施例中,当温度低于又一阈值时,电子设备100对电池142的输出电压执行升压,以避免低温导致的异常关机。
触摸传感器180K,也称“触控面板”。触摸传感器180K可以设置于显示屏194,由触摸传感器180K与显示屏194组成触摸屏,也称“触控屏”。触摸传感器180K用于检测作用于其上或附近的触摸操作。触摸传感器可以将检测到的触摸操作传递给应用处理器,以确定触摸事件类型。可以通过显示屏194提供与触摸操作相关的视觉输出。在另一些实施例中,触摸传感器180K也可以设置于电子设备100的表面,与显示屏194所处的位置不同。
骨传导传感器180M可以获取振动信号。在一些实施例中,骨传导传感器180M可以获取人体声部振动骨块的振动信号。骨传导传感器180M也可以接触人体脉搏,接收血压跳动信号。在一些实施例中,骨传导传感器180M也可以设置于耳机中,结合成骨传导耳机。音频模块170可以基于所述骨传导传感器180M获取的声部振动骨块的振动信号,解析出语音信号,实现语音功能。应用处理器可以基于所述骨传导传感器180M获取的血压跳动信号解析心率信息,实现心率检测功能。
按键190包括开机键,音量键等。按键190可以是机械按键。也可以是触摸式按键。电子设备100可以接收按键输入,产生与电子设备100的用户设置以及功能控制有关的键信号输入。
马达191可以产生振动提示。马达191可以用于来电振动提示,也可以用于触摸振动反馈。例如,作用于不同应用(例如拍照,音频播放等)的触摸操作,可以对应不同的振动反馈效果。作用于显示屏194不同区域的触摸操作,马达191也可对应不同的振动反馈效果。不同的应用场景(例如:时间提醒,接收信息,闹钟,游戏等)也可以对应不同的振动反馈效果。触摸振动反馈效果还可以支持自定义。
指示器192可以是指示灯,可以用于指示充电状态,电量变化,也可以用于指示消息,未接来电,通知等。
SIM卡接口195用于连接SIM卡。SIM卡可以通过插入SIM卡接口195,或从SIM卡接口195拔出,实现和电子设备100的接触和分离。电子设备100可以支持1个或N个SIM卡接口,N为大于1的正整数。SIM卡接口195可以支持Nano SIM卡,Micro SIM卡,SIM卡等。同一个SIM卡接口195可以同时插入多张卡。所述多张卡的类型可以相同,也可以不同。SIM卡接口195也可以兼容不同类型的SIM卡。SIM卡接口195也可以兼容外部存储卡。电子设备100通过SIM卡和网络交互,实现通话以及数据通信等功能。在一些实施例中,电子设备100采用嵌入式SIM(embedded-SIM,eSIM)卡,即:嵌入式SIM卡。eSIM卡可以嵌在电子设备100中,不能和电子设备100分离。
应理解,本申请实施例中的电话卡包括但不限于SIM卡、eSIM卡、全球用户识别卡(universal subscriber identity module,USIM)、通用集成电话卡(universalintegrated circuit card,UICC)等等。
电子设备100的软件系统可以采用分层架构,事件驱动架构,微核架构,微服务架构,或云架构。本申请实施例以分层架构的Android系统为例,示例性说明电子设备100的软件结构。
图2是本申请实施例的电子设备100的软件结构框图。分层架构将软件分成若干个层,每一层都有清晰的角色和分工。层与层之间通过软件接口通信。在一些实施例中,可以基于分层架构将Android系统从上至下分为应用程序层,应用程序框架层,安卓运行时(Android runtime),系统库,硬件抽象层(hardware abstraction layer,HAL),内核层以及硬件层等等。应用程序层可以包括一系列应用程序包。
如图2所示,应用程序层可以包括图库,日历,地图,WLAN,音乐,蓝牙,相机,通话,主题管理等应用程序(Application,App)。
应用程序框架层为应用程序层的应用程序提供应用编程接口(applicationprogramming interface,API)和编程框架。应用程序框架层包括一些预先定义的函数。
如图2所示,应用程序框架层可以包括内容提供器,电话管理器,通知管理器,窗口管理器,视图系统等。
内容提供器用来存放和获取数据,并使这些数据可以被应用程序访问。所述数据可以包括视频,图像,音频,拨打和接听的电话,浏览历史和书签,电话簿等。
电话管理器用于提供电子设备100的通信功能。例如通话状态的管理(包括接通,挂断等)。
通知管理器使应用程序可以在状态栏中显示通知信息,可以用于传达告知类型的消息,可以短暂停留后自动消失,无需用户交互。比如通知管理器被用于告知下载完成,消息提醒等。通知管理器还可以是以图表或者滚动条文本形式出现在系统顶部状态栏的通知,例如后台运行的应用程序的通知,还可以是以对话窗口形式出现在屏幕上的通知。例如在状态栏提示文本信息,发出提示音,电子设备振动,指示灯闪烁等。
窗口管理器用于管理窗口程序。窗口管理器可以获取显示屏大小,判断是否有状态栏,锁定屏幕,截取屏幕等。
视图系统包括可视控件,例如显示文字的控件,显示图片的控件等。视图系统可用于构建应用程序。显示界面可以由一个或多个视图组成的。例如,包括短信通知图标的显示界面,可以包括显示文字的视图以及显示图片的视图。
Android Runtime包括核心库和虚拟机。Android runtime负责安卓系统的调度和管理。
核心库包含两部分:一部分是java语言需要调用的功能函数,另一部分是安卓的核心库。
应用程序层和应用程序框架层运行在虚拟机中。虚拟机将应用程序层和应用程序框架层的java文件执行为二进制文件。虚拟机用于执行对象生命周期的管理,堆栈管理,线程管理,安全和异常的管理,以及垃圾回收等功能。
系统库可以包括多个功能模块。例如:表面管理器(surface manager),媒体库(media libraries),二维图形引擎(例如:SGL)等。
表面管理器用于对显示子系统进行管理,并且为多个应用程序提供了2D和3D图层的融合。
媒体库支持多种常用的音频,视频格式回放和录制,以及静态图像文件等。媒体库可以支持多种音视频编码格式,例如:MPEG4,H.264,MP3,AAC,AMR,JPG,PNG等。
二维图形引擎是二维绘图的绘图引擎。
硬件抽象层的目的在于将硬件抽象化。它隐藏了特定平台的硬件接口细节,为操作系统提供虚拟硬件平台,使其可在多种平台上进行移植。硬件抽象层可以包括CameraHAL、Audio HAL等。
内核层是硬件和软件之间的层。内核层至少包含显示驱动,摄像头驱动,音频驱动,传感器驱动。
硬件层是位于操作系统最底层的硬件。硬件层可以包括摄像头、加速度传感器、重力传感器等。
应理解,本申请实施例中的技术方案可以用于Android、IOS、鸿蒙等系统中。
如图2所示,以相机应用为例,应用程序框架层中可设置与相机应用相匹配的系统服务,例如相机服务(CameraService)。相机应用可通过调用预设的API启动CameraService。CameraService在运行过程中可以与硬件抽象层中的Camera HAL交互。其中,Camera HAL负责与手机中实现拍摄功能的硬件设备(例如摄像头)进行交互,CameraHAL一方面隐藏了相关硬件设备的实现细节(例如具体的图像处理算法),另一方面可向Android系统提供调用相关硬件设备的接口。
示例性的,相机应用可将用户下发的相关控制指令(例如拍照、录像、变焦等指令)发送至CameraService。进而,CameraService可将接收到的控制指令发送至Camera HAL,使得Camera HAL根据接收到的控制指令调用内核层中的相机驱动,由相机驱动驱动摄像头等硬件设备响应该控制指令采集拍摄画面。例如,摄像头可按照一定的拍摄帧率,将采集到的每一帧拍摄画面通过相机驱动传递给Camera HAL。其中,控制指令在操作系统内部的传递过程可参见图2中控制流的具体传递过程。
Camera HAL接收到摄像头采集到的每一帧拍摄画面后,可将得到的拍摄画面通过CameraService上报给相机应用。可选的,Camera HAL也可以对采集到的拍摄画面进行降噪、插帧等数据处理,本申请实施例对此不做任何限制。相机应用可以将获取到的每一帧拍摄画面显示在显示界面中,或者,相机应用可以以照片或视频的形式将获取到的每一帧拍摄画面保存在手机内。其中,拍摄画面(即图像数据)在操作系统内部的传递过程可参见图2中数据流的具体传递过程。
目前,用户可以通过智能手表遥控手机拍照或者录制视频,智能手表侧可以同步显示手机拍摄的预览画面,从而帮助用户更方便地取景和遥控拍摄。智能手表和手机之间建立连接后,当用户在手机侧启动相机应用程序(Application,App),例如系统相机时,可以通过智能手表和手机之间建立的连接通道启动智能手表侧对应的系统服务,该系统服务可以从手机侧实时获取相机预览画面、并同步至智能手表侧。此外,用户可以在智能手表侧对手机侧的相机应用进行反控,例如点击快门拍摄、切换前后置摄像头、变焦等。示例性的,当用户在手机侧启动系统相机时,手机可以通过分布式融合感知平台(distribute mobilesensing development platform,DMSDP)将视频流数据传输至手表,此外,DMSDP可以启动手表侧的系统相机应用。从而,用户可以在手表侧实时预览手机侧相机应用采集的画面,并且,用户可以在手表侧控制相机应用的拍照、录像、变焦等。用户在手表侧控制手机拍照后,手机侧相机应用可以将照片的存储路径发送给DMSDP,DMSDP可以根据存储路径获取照片、并将照片传输至手表,从而实现在手表侧实时查看手机拍摄的最新照片。
然而,在上述方案中,智能手表侧需要集成与手机侧相机应用相匹配的系统服务、或者智能手表侧需要安装于手机侧相同的相机应用,可扩展性较差,无法满足用户使用第三方应用进行拍摄的场景,影响了用户使用智能手表遥控手机拍摄的使用体验。
图3是本申请实施例提供的一组图形用户界面(graphical user interface,GUI)。
如图3中的(a)所示,手机显示手机的桌面,该桌面上包括多个应用程序的图标,该多个应用程序的图标中包括系统相机应用对应的图标。智能手表显示智能手表的显示界面,该显示界面上显示日期和时间信息。
当智能手表靠近手机后,手机和智能手表可以通过无线连接方式组网。其中,无线连接可以是高保真无线通信(Wi-Fi)连接、蓝牙连接、红外线连接、NFC连接、ZigBee连接等近距离连接。此外,无线连接还可以是远距离连接,远距离连接包括但不限于支持2G,3G,4G,5G以及后续标准协议的移动网络。例如,多个电子设备可以登录同一用户账号(例如华为账号),然后通过服务器进行远距离连接。示例性的,手机和智能手表可以是通过超级终端(例如:多设备组成的超级终端)连接的电子设备。
当手机检测到用户点击系统相机应用的图标时,手机和智能手表可以显示如图3中的(b)所示的GUI。
如图3中的(b)所示的GUI,响应于检测到用户点击系统相机应用的图标的操作,手机可以显示系统相机应用的显示界面,该显示界面上包括多个界面元素,例如,智慧识屏控件301、闪光灯自动开启控件302、AI摄影控件303、滤镜选择控件304、设置控件305、取景框306、焦距选择控件307、光圈模式308、夜景模式309、人像模式310、拍照模式311、录像模式312、专业模式313、更多选项314、图库入口315、拍照控件316以及前置摄像头和后置摄像头切换控件317。
一些实施例中,响应于用户在手机上启动系统相机应用,手机可以向智能手表发送指示信息,该指示信息用于指示手机当前启动了系统相机应用。响应于接收到该指示信息,智能手表可以显示提示框,提示框中可以包括提示信息,该提示信息可以提醒用户是否需要通过手表控制拍照。当智能手表检测到用户选择通过智能手表控制手机拍照后,智能手表可以向手机发送响应,该响应用于指示通过智能手表进行控制拍照。响应于接收到该响应,手机可以从硬件抽象层获取预览流,并向智能手表发送其获取的预览流,其中,手机从硬件抽象层获取的预览流用于显示手机摄像头当前的预览画面。示例性的,该预览流可以是以一定帧率和/或分辨率采集的图像画面。智能手表接收到手机从硬件抽象层获取的预览流之后,可以使用预配置(或者预定义)的交互界面显示手机摄像头的预览画面。示例性的,预配置的交互界面可以理解为交互界面包括的交互控件的类型、交互控件的位置、预览画面的位置等。
另一些实施例中,响应于用户在手机上启动系统相机应用,手机上可以显示提示框,提示框中可以包括提示信息,该提示信息可以提示用户是否将系统相机应用的预览画面发送给智能手表,也即用户是否希望使用智能手表控制手机拍照。当手机检测到用户确定将系统相机应用的预览画面发送给智能手表的操作时,手机可以从硬件抽象层获取预览流,并向智能手表发送其获取的预览流,智能手表接收到手机从硬件抽象层获取的预览流之后,可以使用预配置(或者预定义)的交互界面显示手机摄像头的预览画面。
再一些实施例中,响应于用户在手机上启动系统相机应用,手机可以直接从硬件抽象层获取预览流,并向智能手表发送其获取的预览流,智能手表接收到手机从硬件抽象层获取的预览流之后,可以使用预配置(或者预定义)的交互界面显示手机摄像头的预览画面。
示例性的,当手机检测到用户启动系统相机应用时,如果手机已经和智能手表已经组网,手机可以将其从硬件抽象层获取的预览流通过无线连接发送给智能手表。如果手机和智能手表尚未组网,手机可以提示用户是否与智能手表建立组网,当用户选择与智能手表建立组网后,手机可以将其从硬件抽象层获取的预览流通过无线连接发送给智能手表。
上述实施例中,当手机和智能手表组网时,手机可以向智能手表发送该预览流。可选的,当手机和智能手表组网、且手机和智能手表之间的距离小于或者等于预设距离时,手机可以向智能手表发送该预览流。
如图3中的(b)所示,智能手表接收到手机发送的预览流后,智能手表可以显示拍照界面。示例性的,该拍照界面中包括手机摄像头采集到的预览画面、显示图库入口318、拍照控件319以及倒计时(例如,倒计时5s)拍照控件320。其中,手机发送的预览流用于显示拍照界面中的预览画面。此外,图3中的(b)中,预配置的交互界面可以包括显示图库入口318、拍照控件319以及倒计时拍照控件320。可以理解,智能手表中预配置的交互界面也可以为其他形式,例如,拍照界面中可以包括其他交互控件(如切换前后摄的控件、录像控件等)、又例如,图库入口318、拍照控件319以及倒计时拍照控件320的位置和样式可以为其他形式,本申请对此不作限定。
当智能手表检测到用户点击拍照控件319的操作时,智能手表可以向手机发送指示信息,该指示信息用于在指示智能手表检测到用户点击了拍照控件319。响应于接收到该指示信息,手机可以进行拍摄操作。如图3中的(c)所示,手机在完成拍摄操作时,手机拍照界面的图库入口315可以显示刚刚拍摄得到的照片的缩略图。此外,手机可以从硬件抽象层获取刚刚拍摄得到的图片的缩略图的预览流,并向智能手表发送该预览流。响应于接收到手机发送的图片的缩略图的预览流,智能手表可以更新拍照界面。如图3中的(c),智能手表上的拍摄界面上显示的图库入口318可以显示刚刚拍摄得到的照片的缩略图。
当智能手表检测到用户点击图库入口318的操作时,智能手表可以向手机发送指示信息,该指示信息用于指示智能手表检测到用户点击了图库入口318。如图3中的(d)所示,响应于接收到智能手表发送的指示信息,手机可以显示刚刚拍摄得到的照片的显示界面。该显示界面上包括多个界面元素,例如,返回控件321和照片322。同时,手机可以从硬件抽象层获取刚刚拍摄的得到的照片的预览流,并向智能手表发送该预览流。响应于接收到该预览流,智能手表可以显示该照片的显示界面,该显示界面上可以显示返回控件323以及上述照片322。
示例性的,图3中的(b)中,当用户启动第一相机应用(例如:系统相机应用)和第二相机应用(例如:应用)时,手机均可以从硬件抽象层中获取摄像头采集的图像的预览流,并将其获取的预览流发送给智能手表。这样,智能手表侧可以不需要配置与手机侧相机应用相匹配的系统服务,就可以实现显示手机摄像头拍摄的预览画面。智能手表接收到手机发送的预览流后,可以以相同的交互界面显示拍照界面,也就是说,智能手表上呈现的交互界面可以是预配置的,与手机上启动的相机应用无关。
本申请实施例中,手机可以从硬件抽象层直接获取摄像头采集的图像的预览流,并将预览流发送给智能手表,使得用户可以在智能手表上看到手机侧的相机应用的显示画面,无需用户在手机上进行操作就可以利用手机上的相机完成拍摄,有助于提升用户的拍摄体验。同时,智能手表侧不需要集成与手机侧相机应用相匹配的系统服务,用户在使用三方拍照应用进行拍摄时,智能手表侧均可以显示统一的拍摄控制界面,可以满足用户使用三方拍照应用时的遥控拍摄需求,提高了用户的使用体验。
图4示出了本申请实施例提供的另一组GUI。
如图4中的(a)所示,当智能手表检测到用户的双指朝相反方向在屏幕上滑动的操作时,智能手表可以向手机发送指示信息,该指示信息用于指示智能手表检测到用户双指朝相反方向在屏幕上滑动。示例性的,该指示信息中可以包括触控事件以及触控参数,该触控事件可以为滑动事件,且该触控参数可以为双指朝相反方向的滑动距离。
应理解,图4中的(a)可以对应于图3中的(b),不同之处在于图3中的(b)为智能手表检测到用户点击拍摄控件的操作,而图4中的(a)为智能手表检测到用户的双指朝相反方向在屏幕上滑动的操作。
如图4中的(b)所示,响应于接收到该指示信息,手机可以确定用户在智能手表上检测到了双指朝相反方向滑动的操作,从而手机可以确定用户希望将取景框306的焦距变大。如图4中的(b),手机可以确定从1倍焦距扩大为2倍焦距。手机可以根据用户双指滑动的距离确定焦距放大的倍数,从而手机可以按照该放大的倍数进行取景、且在取景框306显示按照放大的倍数进行取景后得到的图像信息。同时,手机可以从硬件抽象层获取按照放大的倍数进行取景后得到的图像信息对应的预览流,并将该预览流发送给智能手表,从而智能手表可以显示按照放大的倍数进行取景后得到的图像信息。
图5示出了本申请实施例提供的另一组GUI。
如图5中的(a)所示,当智能手表检测到用户点击倒计时拍照控件320的操作时,智能手表可以显示如图5中的(b)所示的GUI。
应理解,图5中的(a)可以对应于图3中的(b),不同之处在于图3中的(b)为智能手表检测到用户点击拍摄控件的操作,而图5中的(a)为智能手表检测到用户点击倒计时拍照控件的操作。
如图5中的(b)所示,响应于检测到用户点击倒计时拍照控件320的操作,智能手表可以显示倒计时信息且智能手表可以向手机发送指示信息,该指示信息用于指示手机在接收到该指示信息起的5秒后进行拍摄操作。
如图5中的(c)所示,智能手表可以显示当前倒计时的信息(例如,剩余1s)。
一个实施例中,响应于接收到智能手表发送的指示信息,手机也可以显示该倒计时的信息。
如图5中的(d)所示,手机可以在接收到该指示信息起的5秒后进行拍摄操作,得到一张照片。手机在完成拍摄操作时,手机的图库入口315可以显示拍照得到的照片的缩略图。同时,响应于图库入口315发生更新,手机可以从硬件抽象层获取更新后照片的缩略图对应的预览流。响应于接收到手机发送的该预览流,智能手表可以更新后的拍照界面。如图5中的(d),智能手表的拍摄界面上显示的图库入口318可以显示手机刚刚拍摄得到的照片的缩略图。
可以理解,智能手表控制手机进行拍照的操作不限于上述图3至图5所示的实施例,智能手表还可以控制手机执行其他操作,例如切换前置摄像头和后置摄像头、录像、切换滤镜等等,本申请对此不做限定。
以上结合图3至图5介绍了本申请实施例中的几组GUI,下面结合附图介绍本申请实施例的技术方案的实现过程。
图6示出了用户在手机侧启动相机应用时手机和智能手表的模块之间的交互示意图。图6所示的系统架构中包括手机和智能手表,手机和智能手表可以通过无线连接方式组网。其中,手机和智能手表的硬件结构和软件结构可以参考图1和图2中关于电子设备100的相关描述。示例性的,手机的应用程序层中可以包括第一相机应用(例如:系统相机应用)和第二相机应用(例如:应用),应用程序框架层中可以包括手机侧拍摄服务模块,硬件抽象层中可以包括Camera HAL。智能手表的应用程序层中可以包括统一交互模块,应用程序框架层中可以包括手表侧拍摄服务模块。下面结合用户在手机侧启动相机应用的流程,对手机和智能手表中的各个模块进行具体说明。
当用户在手机侧启动相机应用(例如第一相机应用)后,第一相机应用可以下发控制指令至手机侧拍摄服务模块(如图6中步骤①),进而,手机侧拍摄服务模块可以发送控制指令至硬件抽象层的Camera HAL(如图6中步骤②),并从Camera HAL中获取当前摄像头采集的图像的预览流(如图6中步骤③)。示例性的,手机中的Camera HAL可以根据接收到的控制指令调用内核层中的相机驱动,由相机驱动驱动摄像头等硬件设备响应该控制指令采集拍摄画面。例如,摄像头可按照一定的拍摄帧率,将采集到的每一帧拍摄画面通过相机驱动传递给Camera HAL。手机侧拍摄服务模块从Camera HAL中获取预览流之后,可以将其获取的预览流发送至智能手表中的手表侧拍摄服务模块(如图6中步骤④)。手表侧拍摄服务模块获取到该预览流后,可以将该预览流发送至应用程序层的统一交互模块(如图6中步骤⑤)。统一交互模块可以用于将智能手表获取的预览流在统一的交互组件内显示,进而,智能手表的显示界面中可以显示手机的第一相机应用中的预览画面(即手机摄像头采集的图像画面)。此外,手机侧拍摄服务模块还可以将预览流上报给应用程序层的第一相机应用(如图6中步骤⑥),进而,手机的第一相机应用的显示界面中可以显示摄像头采集的图像画面。其中,控制指令和预览流(即拍摄画面)在操作系统内部的传递过程和顺序可参见图6中控制流和数据流的具体传递过程和顺序。可选的,图6中步骤④和步骤⑥可以同时执行,也可以先后执行,本申请对步骤④和步骤⑥的执行先后顺序不作限制。
可以理解,用户在手机侧启动第二相机应用时,手机和智能手表的模块之间的交互可以与上述流程相同,此外,当用户启动第一相机应用和第二相机应用时,智能手表中的统一交互模块可以将从手机侧获取的预览流呈现在统一的交互组件内。
示例性的,如图3中的(a)所示,当手机检测到用户打开系统相机应用的操作时,系统相机应用可以下发控制指令至手机侧拍摄服务模块,进而,手机侧拍摄服务模块可以从HAL层中的Camera HAL中获取当前摄像头采集的图像的预览流,并将该预览流发送至手表侧拍摄服务模块。手表侧拍摄服务模块获取到该预览流后,将该预览流发送至应用程序层的统一交互模块。如图3中的(b)所示,智能手表的显示界面中以预定义的交互组件呈现手机侧相机的预览画面。
图7示出了用户在智能手表侧控制手机拍照时手机和智能手表的模块之间的交互示意图。下面结合用户在智能手表侧控制手机拍照的流程,对手机和智能手表中的各个模块进行具体说明。
当用户在智能手表侧操作控制手机拍摄后,智能手表侧的统一交互模块可以下发控制指令至手表侧拍摄服务模块(如图7中步骤①),进而,手表侧拍摄服务模块可以发送控制指令至手机侧拍摄服务模块(如图7中步骤②)。手机侧拍摄服务模块接收到该控制指令后,将接收到的控制指令发送至相机应用(例如第一相机应用)(如图7中步骤③)。接着,第一相机应用下发控制指令至手机侧拍摄服务模块(如图7中步骤④),手机侧拍摄服务模块再发送控制指令至硬件抽象层的Camera HAL(如图7中步骤⑤),使得Camera HAL根据接收到的控制指令调用内核层中的相机驱动,由相机驱动驱动摄像头等硬件设备响应该控制指令采集拍摄画面。Camera HAL接收到摄像头采集到的每一帧拍摄画面后,可将得到的拍摄画面(即预览流)发送至手机侧拍摄服务模块(图7中步骤⑥),进而,手机侧拍摄服务模块将拍摄画面上报给第一相机应用(图7中步骤⑦)。进而,第一相机应用可以将获取到的拍摄画面显示在手机的显示界面中,或者,第一相机应用可以以照片或视频的形式将获取到的每一帧拍摄画面保存在手机内。此外,手机侧拍摄服务模块获取到拍摄画面后,可以将该预览流发送至手表侧拍摄服务模块(图7中步骤⑧)。手表侧拍摄服务模块获取到该预览流后,可以将该预览流发送至应用程序层的统一交互模块(图7中步骤⑨)。统一交互模块可以用于将智能手表获取的预览流在统一的交互组件内显示,进而,智能手表的显示界面中可以显示手机的第一相机应用中的预览画面(即手机摄像头采集的图像画面)。其中,控制指令和预览流(即拍摄画面)在操作系统内部的传递过程和顺序可参见图7中控制流和数据流的具体传递过程和顺序。可选的,图7中步骤⑦和步骤⑧可以同时执行,也可以先后执行,本申请对步骤⑦和步骤⑧的执行先后顺序不作限制。
可以理解,用户在智能手表侧控制手机中的第二相机应用拍摄时,手机和智能手表的模块之间的交互可以与上述流程相同,在此不再赘述。
示例性的,如图3中的(b)所示,当智能手表检测到用户点击拍照控件318的操作时,智能手表中的统一交互模块可以向手表侧拍摄服务模块下发控制指令,手表侧拍摄服务模块可以将控制指令发送至手机侧拍摄服务模块。手机侧拍摄服务模块可以从硬件抽象层中的Camera HAL中获取当前摄像头采集的图像的预览流,并将该预览流通过手机侧拍摄服务模块上报给系统相机应用。进而,手机拍照界面的图库入口315可以显示刚刚拍摄得到的照片的缩略图。此外,手机侧拍摄服务模块还可以将该预览流发送至手表侧拍摄服务模块。手表侧拍摄服务模块获取到该预览流后,将该预览流发送至应用程序层的统一交互模块。如图3中的(c)所示,智能手表上的拍摄界面上显示的图库入口318可以显示刚刚拍摄得到的照片的缩略图。
图8示出了本申请实施例提供的手机和智能手表在拍照场景下的交互过程。如图8所示,用户在手机侧启动相机应用时,该过程包括:
S801:手机的应用程序层检测到用户启动了相机应用。
如图3中的(a)所示,当手机检测到用户点击相机应用的图标时,手机的应用程序层可以检测到用户启动了相机应用。应理解,手机的应用程序层检测到用户启动相机应用的过程可以参考现有技术中的实现过程,此处不再赘述。
S802:手机的应用程序层向应用程序框架层发送第一控制指令,该第一控制指令用于指示相机已经启动。
如图6中步骤①所示,当手机的应用程序层检测到用户启动了相机应用时,应用程序层中的相机应用可以向应用程序框架层的手机侧拍摄服务模块发送该第一控制指令。
S803:手机的应用程序框架层向硬件抽象层发送该第一控制指令。
如图6中步骤②所示,手机的应用程序框架层中的手机侧拍摄服务模块可以向硬件抽象层中的Camera HAL发送该第一控制指令。
S804:响应于接收到该第一控制指令,手机的硬件抽象层向应用程序框架层发送第一预览流。
如图6中步骤③所示,手机的硬件抽象层中的Camera HAL可以向手机侧拍摄服务模块发送第一预览流。示例性的,第一预览流可以是手机的摄像头采集的图像画面。
S805:手机的应用程序框架层向智能手表的应用程序框架层发送该第一预览流。
如图6中步骤④所示,手机的应用程序框架层中的手机侧拍摄服务模块可以向智能手表的应用程序框架层中的手表侧拍摄服务模块发送该第一预览流。示例性的,手机的应用程序框架层可以通过手机和智能手表之间的无线连接向智能手表中的应用程序框架层发送该第一预览流。
S806:响应于接收到该第一预览流,智能手表的应用程序框架层可以向应用程序层发送该第一预览流。
如图6中的步骤⑤所示,智能手表的应用程序框架层中的手表侧拍摄服务模块可以向应用程序层中的统一交互模块发送该第一预览流。
S807:响应于接收到该第一预览流,智能手表的应用程序层以第二界面显示预览画面。
其中,第二界面中的交互组件可以是预配置的。智能手表的显示屏上显示的预览画面是基于第一预览流呈现的画面。
S808:手机的应用程序框架层向手机的应用程序层发送该第一预览流。
如图6中的步骤⑥所示,手机的应用程序框架层中的手机侧拍摄服务模块可以向应用程序层中的相机应用发送该第一预览流。
S809:响应于接收到该第一预览流,手机的应用程序层以第一界面显示预览画面。
具体的,手机的应用程序层中的相机应用可以基于该第一预览流呈现手机摄像头采集的预览画面。可以理解,步骤S807中智能手表上显示的第二界面的预览画面和步骤S809中手机上显示的第一界面的预览画面相同。
可选的,步骤S805和步骤S808可以同时执行,也可以先后执行,本申请对步骤S805和步骤S808的执行先后顺序不作限制。
需要注意的是,手机的摄像头采集的图像画面不断更新时,手机可以向智能手表发送更新后的预览流。响应于接收到更新后的预览流,智能手表可以更新智能手表显示的预览画面,从而实现了手机和智能手表上显示的预览画面的同步。
上述实施例中,当手机启动相机应用时,手机的应用程序框架层可以直接从硬件抽象层中获取预览流,并将预览流发送至智能手表,智能手表的应用程序框架层接收到该预览流后,将预览流发送至应用程序层以统一的交互组件呈现,不需要在智能手表侧预置与手机侧相机应用相匹配的服务,可以满足三方相机应用使用智能手表遥控拍摄的需求。
图9示出了本申请实施例提供的手机和智能手表在拍照场景下的交互过程。如图9所示,用户在智能手表侧控制手机拍照时,该过程包括:
S901:智能手表的应用程序层检测到用户的第一操作。
示例性的,第一操作可以是用户在拍摄界面的交互操作。例如,第一操作可以是如图3中的(b)所示的点击拍照控件319的操作;又例如,第一操作可以是如图3中的(c)所示的点击图库入口318的操作;又例如,第一操作可以是如图4中的(a)所示的用户的双指朝相反方向在屏幕上滑动的操作;再例如,第一操作可以是如图5中的(a)所示的用户点击倒计时拍照控件320的操作。可以理解,第一操作也可以是用户在拍摄界面点击其他控件的操作、或者其他手势操作等,本申请对此不作限定。
S902:响应于用户的第一操作,智能手表的应用程序层向应用程序框架层发送第二控制指令,该第二控制指令用于指示用户执行的第一操作。
如图7中步骤①所示,当智能手表的应用程序层检测到用户的第一操作时,智能手表的应用程序层中的统一交互模块可以向应用程序框架层的手表侧拍摄服务模块发送该第二控制指令。
S903:智能手表的应用程序框架层向手机的应用程序框架层发送该第二控制指令。
如图7中步骤②所示,智能手表的应用程序框架层中的手表侧拍摄服务模块可以向手机的应用程序框架层中的手机侧拍摄服务模块发送该第二控制指令。示例性的,智能手表的应用程序框架层可以通过手机和智能手表之间的无线连接向手机中的应用程序框架层发送该第二控制指令。
S904:响应于接收到该第二控制指令,手机的应用程序框架层向应用程序层发送该第二控制指令。
如图7中步骤③所示,手机的应用程序框架层中的手机侧拍摄服务模块可以向手机的应用程序层中的相机应用(例如第一相机应用)发送该第二控制指令。
S905:手机的应用程序层向应用程序框架层发送第五控制指令。
如图7中的步骤④所示,手机的应用程序层中的相机应用接收到第二控制指令后,可以向应用程序框架层中的手机侧相机服务模块发送该第五控制指令。示例性的,第五控制指令可以和第二控制指令相同,也可以和第二控制指令不同。
S906:手机的应用程序框架层向硬件抽象层发送该第五控制指令。
如图7中步骤⑤所示,手机的应用程序框架层中的手机侧拍摄服务模块可以向硬件抽象层中的Camera HAL发送该第五控制指令。
S907:响应于接收到该第二控制指令,手机的硬件抽象层向应用程序框架层发送第二预览流。
如图7中步骤⑥所示,手机的硬件抽象层中的Camera HAL可以向手机侧拍摄服务模块发送第二预览流。示例性的,当第一操作是如图3中的(b)所示的点击拍照控件319的操作时,第二预览流可以是手机刚刚拍摄的照片的缩略图;当第一操作是如图3中的(c)所示的点击图库入口318的操作时,第二预览流可以是手机刚刚拍摄的照片的预览图;当第一操作是如图4中的(a)所示的用户的双指朝相反方向在屏幕上滑动的操作时,第二预览流可以是摄像头以按照放大的倍数进行取景后得到的图像画面。
S908:手机的应用程序框架层向应用程序层发送该第二预览流。
如图7中步骤⑦所示,手机的应用程序框架层中的手机侧拍摄服务模块可以向应用程序层中的相机应用发送该第二预览流。
S909:响应于接收到该第二预览流,手机的应用程序层显示预览画面。
具体的,手机的应用程序层中的相机应用可以基于该第二预览流呈现手机摄像头刚刚拍摄的图像的缩略图或者预览图、或者手机摄像头实时采集的预览画面。图7所示实施例中,当第一操作是如图3中的(b)所示的点击拍照控件319的操作时,手机侧的第一相机应用的图库入口可以显示刚刚拍摄得到的照片的缩略图。例如,手机侧的第一相机应用的图库入口315可以从图3中的(b)所示的不包括照片的缩略图信息、更新为如图3中的(c)所示显示刚刚拍摄得到的照片的缩略图信息。当第一操作是如图3中的(c)所示的点击图库入口318的操作时,手机侧的第一相机应用的界面中可以显示刚刚拍摄得到的照片的预览图。当第一操作是如图4中的(a)所示的用户的双指朝相反方向在屏幕上滑动的操作时,手机侧的第一相机应用的拍照界面中可以显示摄像头以按照放大的倍数进行取景后得到的图像画面。
S910:手机的应用程序框架层向手表的应用程序框架层发送该第二预览流。
如图7中步骤⑧所示,手机的应用程序框架层中的手机侧拍摄服务模块可以向智能手表的应用程序框架层中的手表侧拍摄服务模块发送该第二预览流。示例性的,手机的应用程序框架层可以通过手机和智能手表之间的无线连接向智能手表中的应用程序框架层发送该第二预览流。
S911:响应于接收到该第二预览流,智能手表的应用程序框架层可以向应用程序层发送该第二预览流。
如图7中步骤⑨所示,智能手表的应用程序框架层中的手表侧拍摄服务模块可以向应用程序层中的统一交互模块发送该第二预览流。
S912:响应于接收到该第二预览流,智能手表的应用程序层以更新的第二界面显示预览画面。
其中,第二界面中的交互组件可以是预配置的。智能手表的显示屏上显示的预览画面是基于第二预览流呈现的画面。例如,图7所示实施例中,当第一操作是如图3中的(b)所示的点击拍照控件319的操作时,智能手表侧的图库入口可以显示刚刚拍摄得到的照片的缩略图。可以理解,智能手表上显示的照片的缩略图和手机上显示的照片的缩略图相同。
又例如,当第一操作是如图3中的(c)所示的点击图库入口318的操作时,智能手表侧的显示界面中显示刚刚拍摄得到的照片的预览图。可以理解,智能手表上显示的照片的预览图和手机上显示的照片的预览图相同。
再例如,当第一操作是如图4中的(a)所示的用户的双指朝相反方向在屏幕上滑动的操作时,智能手表侧的预览画面中可以显示摄像头以按照放大的倍数进行取景后得到的图像画面。可以理解,智能手表上显示的预览画面和手机上显示的预览画面相同。
可选的,步骤S908和步骤S910可以同时执行,也可以先后执行,本申请对步骤S908和步骤S910的执行先后顺序不作限制。
上述实施例中,用户可以在智能手表侧对手机侧的相机应用进行控制,同时,手机侧的应用程序框架层接收到智能手表发送的控制指令后,可以直接从硬件抽象层获取预览流,并将预览流发送至智能手表,智能手表的应用程序框架层接收到该预览流后,将预览流发送至应用程序层以统一的交互组件呈现。通过上述方法,用户可以在手表侧实现对手机侧相机应用的控制,且可以在智能手表侧同步呈现手机侧相机应用执行控制指令后更新的预览画面,方便用户在智能手表侧同步查看控制结果,提高了用户的使用体验。
图6至图9所示实施例中,当用户在手机上启动相机应用时,手机的应用程序框架层可以直接从硬件抽象层中获取预览流,并将预览流发送至智能手表,智能手表的应用程序框架层接收到该预览流后,将预览流发送至应用程序层以统一的交互组件呈现。并且,用户可以通过智能手表侧统一的交互组件,在智能手表侧对手机侧的相机应用进行控制,并在手机侧和智能手表侧同步显示操作的结果。通过该方法,不需要在智能手表侧预置与手机侧相机应用相匹配的服务,就可以实现手机和智能手表上显示的预览画面的同步,满足三方相机应用使用智能手表遥控拍摄的需求。
可选的,一些实施例中,为了实现当用户在手机侧启动相机应用时,智能手表侧自动显示手机摄像头采集的预览流,相机应用需要预先进行注册。如图10所示,手机侧拍摄服务模块可以进一步包括注册模块和鉴权模块。例如,若第一相机应用在手机侧拍摄服务模块进行了注册,第二相机应用在手机侧拍摄服务模块未进行注册。进一步的,图6所示步骤①中,当用户在手机上启动第一相机应用时,第一相机应用可以向应用程序框架层的手机侧拍摄服务模块发送控制指令,手机侧拍摄服务模块接收到该控制指令后,手机侧拍摄服务模块中的鉴权模块可以判断第一相机应用在手机侧拍摄服务模块进行了注册,进而,手机侧拍摄服务模块可以将该控制指令下发到硬件抽象层的Carame HAL,从而执行图6所述实施例的相关流程,自动在智能手表上以预定义的交互组件显示手机摄像头采集的预览流。当用户在手机上启动第二相机应用时,第二相机应用可以向应用程序框架层的手机侧拍摄服务模块发送控制指令,手机侧拍摄服务模块接收到该控制指令后,手机侧拍摄服务模块中的鉴权模块可以判断第二相机应用未在手机侧拍摄服务模块进行注册。因此,手机侧拍摄服务模块不会将预览流发送到智能手表侧。另一些实施例中,也可以由用户自定义用户开启哪一个(或几个)相机应用时,自动启动智能手表侧的预览画面。
上述实施例中,均是在手机侧启动相机应用自动触发智能手表侧启动预览画面。一些场景中,用户也可以控制在智能手表侧启动手机的摄像头。图11示出了本申请实施例提供的另一组GUI。
如图11中的(a)所示,智能手表显示智能手表的显示界面,该显示界面上显示日期和时间信息。智能手表的显示界面上还可以包括相机控件321。当智能手表检测到用户对相机控件321的点击操作后,手机可以显示系统相机的显示界面,该显示界面上包括多个界面元素。关于手机中系统相机的显示界面的描述,可以参考图3中的(b)中的相关介绍,在此不再赘述。
如图11中的(b)所示,手机的系统相机启动后,手机可以显示相机的显示界面,同时,手机可以直接从硬件抽象层获取预览流,并向智能手表发送其获取的预览流,智能手表接收到手机从硬件抽象层获取的预览流之后,可以使用预配置(或者预定义)的交互界面显示手机摄像头的预览画面。进一步的,用户可以在智能手表侧控制相机应用的拍照、录像、变焦等。关于用户在智能手表侧控制手机侧相机应用的具体交互过程可以参照图3至图5所示实施例中的相关描述,在此不再赘述。
本实施例中,用户可以通过在智能手表侧点击相机控件321,自动启动手机侧的相机应用。另一些实施例中,用户也可以通过其他预定义的操作启动手机侧的相机应用,例如,用户在智能手表的显示屏上的预设手势操作(如三指上滑、三指捏合、双击等),又例如,用户对智能手表的表冠的操作(如连续按表冠两次等),本申请对用户在智能手表侧触发手机启动相机应用的操作不作限定。
此外,上述实施例中,用户通过在智能手表侧的预设操作,可以自动启动手机侧的系统相机应用。另一些实施例中,用户也可以通过在智能手表侧的预设操作启动其他相机应用。例如,当用户在智能手表侧执行预设操作时,手机侧可以默认启动系统相机应用,又例如,用户可以设置其在智能手表侧的预设操作对应开启手机侧哪个相机应用,再例如,用户可以通过在智能手表侧不同的预设操作对应开启手机侧不同的相机应用。
可选的,用户在智能手表侧触发手机启动相机应用时,可以默认启动手机中对应的相机应用的拍摄界面。或者,用户在智能手表侧触发手机启动相机应用时,可以默认打开手机的主界面,由用户选择其希望打开的相机应用。
图12示出了用户在智能手表侧启动相机应用时手机和智能手表的模块之间的交互示意图。图12所示的系统架构中包括手机和智能手表,手机和智能手表可以通过无线连接方式组网。
如图12所示,手机的应用程序层中可以包括第一相机应用(例如:系统相机应用)和第二相机应用(例如:应用),示例性的,智能手表控制手机侧启动的相机应用可以默认为第一相机应用。智能手表的应用程序层中还可以包括控制模块。其中,控制模块用于在手表侧启动手机侧拍照服务。当用户在智能手表侧执行预设操作,例如图11中的(a)所示对相机控件321的点击操作后,智能手表的应用程序层中的控制模块可以检测到用户的点击操作。进而,控制模块可以发送控制指令至应用程序框架层中的手表侧拍摄服务模块(如图12中步骤①),手表侧拍摄服务模块可以将该控制指令通过手机和智能手表之间的无线连接发送给手机的应用程序框架层中的手机侧拍摄服务模块(如图12中步骤②)。手机侧拍摄服务模块接收到该控制指令后,可以获取该预设操作对应的相机应用,并将控制指令发送给手机侧应用程序框架层中该预设操作对应的相机应用,即第一相机应用(如图12中步骤③)。此后,手机中的第一相机应用可以显示手机摄像头采集的图像画面,手机还可以直接从硬件抽象层中的Camera HAL获取预览流,并发送给手表侧拍摄服务模块,手表侧拍摄服务模块将预览流发送给应用程序层的统一交互模块,进而,手表的显示界面中可以显示手机的相机应用中的预览画面(即手机摄像头采集的图像画面)。
图13示出了本申请实施例提供的手机和智能手表在拍照场景下的交互过程。如图8所示,用户在手机侧启动相机应用时,该过程包括:
S1301:智能手表的应用程序层检测到用户执行第二操作。
示例性的,第二操作可以是对预设控件的点击操作、或者预设手势操作、或者对智能手表的硬件的操作等。如图11中的(a)所示,当用户点击相机控件321后,智能手表的应用程序层可以检测到用户执行了第二操作。
S1302:智能手表的应用程序层向应用程序框架层发送第三控制指令,该第三控制指令用于指示用户执行了该第二操作。
如图12中步骤①所示,当智能手表的应用程序层的控制模块检测到用户执行了第二操作后,应用程序层的控制模块可以向应用程序框架层的手表侧拍摄服务模块发送第三控制指令。
S1303:智能手表的应用程序框架层向手机的应用程序框架层发送该第三控制指令。
如图12中步骤②所示,智能手表的应用程序框架层中的手表侧拍摄服务模块可以向手机的应用程序框架层中的手机侧拍摄服务模块发送该第三控制指令。
S1304:手机的应用程序框架层向应用程序层发送该第三控制指令。
如图12中步骤③所示,手机的应用程序框架层中的手机侧拍摄服务模块可以确定该第二操作对应的相机应用为第一相机应用,并向应用程序层中的第一相机应用发送该第三控制指令。其中,第一相机应用为智能手表侧执行预设操作时手机侧默认启动的相机应用。
S1305:响应于接收到该第三控制指令,手机启动该第一相机应用。
示例性的,手机启动该第一相机应用后,手机侧拍摄服务模块可以监控到该第一相机应用的API被调用,从而从硬件抽象层中获取预览流。
用户在手表侧控制手机开启第一相机应用后,手机侧拍摄服务模块从硬件抽象层中获取预览流、并将预览流发送至手表侧拍摄服务模块,手表侧拍摄服务模块将预览流发送至统一交互模块显示的过程,与图6和图8所示实施例中的流程相同。智能手表以统一的交互组件呈现从手机侧接收的预览流后,用户在智能手表上控制手机中第一相机应用的操作的过程,与图7和图9所述实施例中的流程相同,本申请在此不再赘述。
图14示出了本申请实施例提供的显示方法的示意性流程图,该方法可以由第一电子设备和第二电子设备执行,该第一电子设备可以但不限于是上述手机,该第二电子设备可以但不限于是上述智能手表。该方法包括:
S1401:第一电子设备打开第一相机应用。
一个实施例中,第一电子设备可以响应于用户点击相机应用的图标的操作打开第一相机应用。示例性的,如图3中的(b)所示,第一电子设备可以为手机,响应于用户点击相机应用的图标的操作,第一电子设备可以打开第一相机应用。
一个实施例中,第一电子设备可以响应于用户在锁屏界面上的向预设方向滑动的操作打开相机应用。
一个实施例中,第一电子设备还可以响应于用户在第二电子设备上的第二操作打开第一相机应用。示例性的,如图11中的(a)所示,第一电子设备可以为手机,第二电子设备可以为智能手表,响应于用户在第二电子设备上对相机控件321的点击操作后,第一电子设备可以打开第一相机应用。
应理解,本申请实施例中对于第一电子设备如何启动相机应用并不作具体限定,用户还可以通过预设的操作方式来启动相机应用(例如,按电源键两次)。
S1402:响应于打开第一相机应用,第一电子设备显示第一界面,第一界面显示第一相机应用的预览画面。
示例性的,如图3中的(b)所示,该第一电子设备可以为手机,该第一界面可以为相机应用的显示界面,该显示界面上可以显示第一相机应用的预览画面。
S1403:第一电子设备从该第一电子设备的硬件抽象层中获取第一预览流,并向第二电子设备发送该第一预览流,该第一预览流用于在第二电子设备的第二界面上显示第一相机应用的预览画面。
一个实施例中,第一相机应用可以向第一电子设备的应用程序框架层发送第一控制指令,应用程序框架层再向硬件抽象层发送该第一控制指令。进而,第一电子设备的应用程序框架层可以从其硬件抽象层中获取第一预览流,并向第二电子设备发送该第一预览流。
可选的,步骤S1402和步骤S1403可以同时执行,也可以先后执行,本申请对步骤S1402和步骤S1403的执行先后顺序不作限定。
一个实施例中,响应于检测到第一相机应用的预览画面发生更新,第一电子设备可以向第二电子设备发送更新后的第一预览流。响应于接收到更新后的该第一预览流,第二电子设备可以在第二界面上显示更新后的预览画面。
一个实施例中,第二电子设备的第二界面中包括拍摄控件。响应于检测到用户的第一操作,第二电子设备可以向第一电子设备发送第二控制指令,该第二控制指令用于指示第二电子设备检测到该第一操作,其中,该第一操作为针对拍摄控件的输入操作。响应于接收到第二电子设备发送的该第二控制指令,第一电子设备可以执行拍摄操作并获取第一图像信息。
一个实施例中,第一电子设备的第一界面包括第一图库入口,第二电子设备的第二界面上包括第二图库入口,第一电子设备在执行拍摄操作并获取第一图像信息之前,可以通过该第一图库入口显示第二图像信息的缩略图信息;第一电子设备响应于获取到第一图像信息,可以将第一图库入口中第二图像信息的缩略图信息更新为第一图像信息的缩略图信息,并向第二电子设备发送第二预览流;其中,该第二预览流可以包括所述第一图像信息的缩略图信息。第二电子设备在向第一电子设备发送第二控制指令之前,可以通过第二图库入口显示第二图像信息的缩略图信息;第二电子设备在向第一电子设备发送第二控制指令之后,可以接收第一电子设备发送的第二预览流;响应于接收到该第二预览流,第二电子设备可以将第二图库入口中第二图像信息的缩略图信息更新为第一图像信息的缩略图信息。
示例性的,如图3中的(b)所示,第一电子设备可以为手机,第二电子设备可以为智能手表,智能手表检测到用户点击了拍照控件319时,可以向手机发送控制指令,指示手机进行拍摄操作。如图3中的(c)所示,手机在完成拍摄操作时,手机拍照界面的图库入口315可以显示刚刚拍摄得到的照片的缩略图。如图3中的(c)所示,手机在完成拍摄操作时,手机拍照界面的图库入口315可以显示刚刚拍摄得到的照片的缩略图。此外,手机可以向智能手表发送该预览流。响应于接收到手机发送的图片的预览流,智能手表可以更新拍照界面。如图3中的(c),智能手表上的拍摄界面上显示的图库入口318可以显示刚刚拍摄得到的照片的缩略图。
一个实施例中,第一电子设备可以从其硬件抽象层中获取上述第二预览流,并向第二电子设备发送该第二预览流。
一个实施例中,第一电子设备检测到用户打开第二相机应用的操作时,可以显示第三界面,该第三界面显示第二相机应用的预览画面;第一电子设备可以从其硬件抽象层中获取第三预览流,并向第二电子设备发送该第三预览流。第二电子设备接收到第一电子设备发送的第三预览流后,可以显示第四界面,该第四界面显示第二相机应用的预览画面。其所述第二界面和第四界面包括的交互控件可以相同。
示例性的,图3中的(b)中,当用户启动第一相机应用和第二相机应用时,手机均可以从硬件抽象层中获取摄像头采集的图像的预览流,并将其获取的预览流发送给智能手表。智能手表接收到手机发送的预览流后,可以以相同的交互界面显示拍照界面,也就是说,智能手表上呈现的交互界面与手机上启动的相机应用无关。
一个实施例中,第二电子设备检测到用户的第二操作时,可以向第一电子设备发送第三控制指令;其中,该第二操作用于指示打开第一电子设备中的第一相机应用。第一电子设备接收到第二电子设备发送的第三控制指令后,可以打开第一相机应用;其中,该第三控制指令可以用于指示第二电子设备检测到用户的第二操作。
示例性的,如图11中的(a)所示,第一电子设备可以为手机,第二电子设备可以为智能手表,第二操作可以是用户在第二电子设备上对相机控件321的点击操作。
本申请提供的实施例中,第一电子设备可以从其硬件抽象层中直接获取预览流,并将预览流发送给第二电子设备,第二电子设备侧无需安装与第一电子设备侧相匹配的应用,可以满足用户使用任意拍照应用时,通过第二电子设备控制第一电子设备拍摄的需求。
图15示出了本申请实施例提供的装置1500的示意性框图。该装置1500可以设置于上述图14中的第一电子设备中,该装置1500中包括:检测单元1510,用于检测打开第一相机应用;显示单元1520,用于响应于打开第一相机应用,显示第一界面,该第一界面显示第一相机应用的预览画面;发送单元1530,用于从第一电子设备的硬件抽象层中获取第一预览流,并向第二电子设备发送该第一预览流,该第一预览流用于在第二电子设备的第二界面上显示第一相机应用的预览画面。
图16示出了本申请实施例提供的装置1600的示意性框图。该装置1600可以设置于上述图14中的第二电子设备中,该装置1600中包括:接收单元1610,用于接收第一电子设备发送的第一预览流,其中,该第一预览流是第一电子设备从其硬件抽象层获取的。显示单元1620,用于响应于接收到该第一预览流,显示第二界面,该第二界面显示第一相机应用的预览画面。
图17示出了本申请实施例提供的电子设备1700的示意性结构图。如图17所示,该电子设备包括:一个或多个处理器1710,一个或多个存储器1720,该一个或多个存储器存储1720存储有一个或多个计算机程序,该一个或多个计算机程序包括指令。当该指令被所述一个或多个处理器1710运行时,使得第一电子设备或者第二电子设备执行上述实施例中的技术方案。
本申请实施例提供了一种系统,包括第一电子设备和第二电子设备,该系统用于执行上述实施例中的技术方案。其实现原理和技术效果与上述方法相关实施例类似,此处不再赘述。
本申请实施例提供一种可读存储介质,所述可读存储介质包含指令,当所述指令在第一电子设备(或者,上述实施例中的手机)运行时,使得所述第一电子设备执行上述实施例的技术方案。其实现原理和技术效果类似,此处不再赘述。
本申请实施例提供一种可读存储介质,所述可读存储介质包含指令,当所述指令在第二电子设备(或者,上述实施例中的智能手表)运行时,使得所述第二电子设备执行上述实施例的技术方案。其实现原理和技术效果类似,此处不再赘述。
本申请实施例提供一种计算机程序产品,当所述计算机程序产品在第一电子设备(或者,上述实施例中的手机)运行时,使得第一电子设备执行上述实施例中的技术方案。其实现原理和技术效果与上述方法相关实施例类似,此处不再赘述。
本申请实施例提供一种计算机程序产品,当所述计算机程序产品在第二电子设备(或者,上述实施例中的智能手表)运行时,使得第二电子设备执行上述实施例中的技术方案。其实现原理和技术效果与上述方法相关实施例类似,此处不再赘述。
本申请实施例提供一种芯片,所述芯片用于执行指令,当所述芯片运行时,执行上述实施例中的技术方案。其实现原理和技术效果类似,此处不再赘述。
本领域普通技术人员可以意识到,结合本文中所公开的实施例描述的各示例的单元及算法步骤,能够以电子硬件、或者计算机软件和电子硬件的结合来实现。这些功能究竟以硬件还是软件方式来执行,取决于技术方案的特定应用和设计约束条件。专业技术人员可以对每个特定的应用来使用不同方法来实现所描述的功能,但是这种实现不应认为超出本申请的范围。
所属领域的技术人员可以清楚地了解到,为描述的方便和简洁,上述描述的系统、装置和单元的具体工作过程,可以参考前述方法实施例中的对应过程,在此不再赘述。
在本申请所提供的几个实施例中,应该理解到,所揭露的系统、装置和方法,可以通过其它的方式实现。例如,以上所描述的装置实施例仅仅是示意性的,例如,所述单元的划分,仅仅为一种逻辑功能划分,实际实现时可以有另外的划分方式,例如多个单元或组件可以结合或者可以集成到另一个系统,或一些特征可以忽略,或不执行。另一点,所显示或讨论的相互之间的耦合或直接耦合或通信连接可以是通过一些接口,装置或单元的间接耦合或通信连接,可以是电性,机械或其它的形式。
所述作为分离部件说明的单元可以是或者也可以不是物理上分开的,作为单元显示的部件可以是或者也可以不是物理单元,即可以位于一个地方,或者也可以分布到多个网络单元上。可以根据实际的需要选择其中的部分或者全部单元来实现本实施例方案的目的。
另外,在本申请各个实施例中的各功能单元可以集成在一个处理单元中,也可以是各个单元单独物理存在,也可以两个或两个以上单元集成在一个单元中。
所述功能如果以软件功能单元的形式实现并作为独立的产品销售或使用时,可以存储在一个计算机可读取存储介质中。基于这样的理解,本申请的技术方案本质上或者说对现有技术做出贡献的部分或者该技术方案的部分可以以软件产品的形式体现出来,该计算机软件产品存储在一个存储介质中,包括若干指令用以使得一台计算机设备(可以是个人计算机,服务器,或者网络设备等)执行本申请各个实施例所述方法的全部或部分步骤。而前述的存储介质包括:U盘、移动硬盘、只读存储器(read-only memory,ROM)、随机存取存储器(random access memory,RAM)、磁碟或者光盘等各种可以存储程序代码的介质。
以上所述,仅为本申请的具体实施方式,但本申请的保护范围并不局限于此,任何熟悉本技术领域的技术人员在本申请揭露的技术范围内,可轻易想到变化或替换,都应涵盖在本申请的保护范围之内。因此,本申请的保护范围应以所述权利要求的保护范围为准。
Claims (26)
1.一种显示方法,其特征在于,所述方法应用于第一电子设备中,所述第一电子设备通过近距离无线连接与第二电子设备通信,所述方法包括:
所述第一电子设备打开第一相机应用;
响应于所述打开第一相机应用,所述第一电子设备显示第一界面,所述第一界面显示所述第一相机应用的预览画面;
所述第一电子设备从所述第一电子设备的硬件抽象层中获取第一预览流,并向所述第二电子设备发送所述第一预览流,所述第一预览流用于在所述第二电子设备的第二界面上显示所述第一相机应用的预览画面。
2.根据权利要求1所述的方法,其特征在于,所述第一电子设备从所述第一电子设备的硬件抽象层中获取第一预览流,并向所述第二电子设备发送所述第一预览流,包括:
所述第一相机应用向所述第一电子设备的应用程序框架层发送第一控制指令;
所述应用程序框架层向所述硬件抽象层发送所述第一控制指令;
所述应用程序框架层从所述硬件抽象层获取所述第一预览流,并向所述第二电子设备发送所述第一预览流。
3.根据权利要求1或2所述的方法,其特征在于,所述方法还包括:响应于检测到所述第一相机应用的预览画面发生更新,所述第一电子设备向所述第二电子设备发送更新后的所述第一预览流。
4.根据权利要求1至3中任一项所述的方法,其特征在于,所述第二界面中包括拍摄控件,所述方法还包括:
所述第一电子设备接收所述第二电子设备发送的第二控制指令,所述第二控制指令用于指示所述第二电子设备检测到用户的第一操作,其中,所述第一操作为针对所述拍摄控件的输入操作;
响应于接收到所述第二控制指令,所述第一电子设备执行拍摄操作并获取第一图像信息。
5.根据权利要求4所述的方法,其特征在于,所述第一界面包括第一图库入口,所述第二界面上包括第二图库入口,所述方法还包括:
在执行所述拍摄操作并获取所述第一图像信息之前,所述第一电子设备通过所述第一图库入口显示第二图像信息的缩略图信息;
响应于获取到所述第一图像信息,所述第一电子设备将所述第一图库入口中所述第二图像信息的缩略图信息更新为所述第一图像信息的缩略图信息,并向所述第二电子设备发送第二预览流,使得所述第二电子设备将所述第二图库入口中所述第二图像信息的缩略图信息更新为所述第一图像信息的缩略图信息;其中,所述第二预览流包括所述第一图像信息的缩略图信息。
6.根据权利要求5所述的方法,其特征在于,所述第一电子设备向所述第二电子设备发送第二预览流,包括:
所述第一电子设备从所述硬件抽象层中获取所述第二预览流,并向所述第二电子设备发送所述第二预览流。
7.根据权利要求1所述的方法,其特征在于,所述方法还包括:
所述第一电子设备检测到用户打开第二相机应用的操作;
响应于所述操作,所述第一电子设备显示第三界面,所述第三界面显示所述第二相机应用的预览画面;
所述第一电子设备从所述硬件抽象层中获取第三预览流,并向所述第二电子设备发送所述第三预览流,所述第三预览流用于在所述第二电子设备的第四界面上显示所述第二相机应用的预览画面;其中,所述第二界面和所述第四界面包括的交互控件相同。
8.根据权利要求1所述的方法,其特征在于,所述第一电子设备打开第一相机应用之前,所述方法还包括:
所述第一电子设备接收到所述第二电子设备发送的第三控制指令,所述第三控制指令用于指示所述第二电子设备检测到用户的第二操作,其中,所述第二操作用于指示打开所述第一电子设备中的所述第一相机应用。
9.一种显示方法,其特征在于,所述方法应用于第二电子设备,所述第二电子设备通过近距离无线连接与第一电子设备通信,所述方法包括:
所述第二电子设备接收到所述第一电子设备发送的第一预览流,其中,所述第一预览流是所述第一电子设备从所述第一电子设备的硬件抽象层获取的;
响应于接收到所述第一预览流,所述第二电子设备显示第二界面,所述第二界面显示所述第一相机应用的预览画面。
10.根据权利要求9所述的方法,其特征在于,所述方法还包括:
所述第一相机应用的预览画面发送更新时,所述第二电子设备接收所述第一电子设备发送的更新后的所述第一预览流;
响应于接收到所述更新后的所述第一预览流,所述第二电子设备在所述第二界面上显示所述更新后的预览画面。
11.根据权利要求9或10所述的方法,其特征在于,所述第二界面中包括拍摄控件,所述方法还包括:
响应于检测到用户的第一操作,所述第二电子设备向所述第一电子设备发送第二控制指令,所述第二控制指令用于指示所述第二电子设备检测到所述第一操作,其中,所述第一操作为针对所述拍摄控件的输入操作。
12.根据权利要求11所述的方法,其特征在于,所述第二界面上包括第二图库入口,所述方法还包括:
在向所述第一电子设备发送所述第二控制指令之前,所述第二电子设备通过所述第二图库入口显示第二图像信息的缩略图信息;
在向所述第一电子设备发送所述第二控制指令之后,所述第二电子设备接收所述第一电子设备发送的第二预览流,所述第二预览流包括所述第一图像信息的缩略图信息;
响应于接收到所述第二预览流,将所述第二图库入口中所述第二图像信息的缩略图信息更新为所述第一图像信息的缩略图信息。
13.根据权利要求9所述的方法,其特征在于,所述方法还包括:
所述第二电子设备接收到所述第一电子设备发送的第三预览流,其中,所述第三预览流是所述第一电子设备从所述硬件抽象层获取的;
响应于接收到所述第三预览流,所述第二电子设备显示第四界面,所述第四界面显示所述第二相机应用的预览画面;其中,所述第二界面和所述第四界面包括的交互控件相同。
14.根据权利要求9所述的方法,其特征在于,所述第二电子设备接收到所述第一电子设备发送的第一预览流之前,所述方法还包括:
所述第二电子设备检测到用户的第二操作,所述第二操作用于指示打开所述第一电子设备中的所述第一相机应用;
响应于所述第二操作,所述第二电子设备向所述第一电子设备发送第三控制指令,使得所述第一电子设备打开所述第一相机应用。
15.一种系统,其特征在于,所述系统包括第一电子设备和第二电子设备,所述第一电子设备通过近距离无线连接与所述第二电子设备通信,其中,
所述第一电子设备,用于打开第一相机应用;响应于所述打开第一相机应用,显示第一界面,所述第一界面显示所述第一相机应用的预览画面;从所述第一电子设备的硬件抽象层中获取第一预览流,并向所述第二电子设备发送所述第一预览流;
所述第二电子设备,用于接收到所述第一电子设备发送的第一预览流;响应于接收到所述第一预览流,显示第二界面,所述第二界面显示所述第一相机应用的预览画面。
16.根据权利要求15所述的系统,其特征在于,所述第一电子设备具体用于:所述第一电子设备的所述第一相机应用向所述第一电子设备的应用程序框架层发送第一控制指令;所述应用程序框架层向所述硬件抽象层发送所述第一控制指令;所述应用程序框架层从所述硬件抽象层获取所述第一预览流,并向所述第二电子设备发送所述第一预览流。
17.根据权利要求15或16所述的系统,其特征在于,所述第一电子设备还用于:响应于检测到所述第一相机应用的预览画面发生更新,所述第一电子设备向所述第二电子设备发送更新后的所述第一预览流;
所述第二电子设备,还用于当所述第一相机应用的预览画面发送更新时,接收所述第一电子设备发送的更新后的所述第一预览流;响应于接收到所述更新后的所述第一预览流,在所述第二界面上显示所述更新后的预览画面。
18.根据权利要求15至17中任一项所述的系统,其特征在于,所述第二界面中包括拍摄控件;所述第二电子设备还用于:响应于检测到用户的第一操作,向所述第一电子设备发送第二控制指令,所述第二控制指令用于指示所述第二电子设备检测到所述第一操作,其中,所述第一操作为针对所述拍摄控件的输入操作;
所述第一电子设备,还用于接收所述第二电子设备发送的所述第二控制指令;响应于接收到所述第二控制指令,执行拍摄操作并获取第一图像信息。
19.根据权利要求18所述的系统,其特征在于,所述第一界面包括第一图库入口,所述第二界面上包括第二图库入口,所述第一电子设备还用于:在执行所述拍摄操作并获取所述第一图像信息之前,通过所述第一图库入口显示第二图像信息的缩略图信息;响应于获取到所述第一图像信息,将所述第一图库入口中所述第二图像信息的缩略图信息更新为所述第一图像信息的缩略图信息,并向所述第二电子设备发送第二预览流;其中,所述第二预览流包括所述第一图像信息的缩略图信息;
所述第二电子设备,还用于在向所述第一电子设备发送所述第二控制指令之前,通过所述第二图库入口显示第二图像信息的缩略图信息;在向所述第一电子设备发送所述第二控制指令之后,接收所述第一电子设备发送的第二预览流;响应于接收到所述第二预览流,将所述第二图库入口中所述第二图像信息的缩略图信息更新为所述第一图像信息的缩略图信息。
20.根据权利要求19所述的系统,其特征在于,所述第一电子设备具体用于,从所述硬件抽象层中获取所述第二预览流,并向所述第二电子设备发送所述第二预览流。
21.根据权利要求15所述的系统,其特征在于,所述第一电子设备还用于:检测到用户打开第二相机应用的操作;响应于所述操作显示第三界面,所述第三界面显示所述第二相机应用的预览画面;从所述硬件抽象层中获取第三预览流,并向所述第二电子设备发送所述第三预览流;
所述第二电子设备,还用于接收到所述第一电子设备发送的第三预览流;响应于接收到所述第三预览流,显示第四界面,所述第四界面显示所述第二相机应用的预览画面;其中,所述第二界面和所述第四界面包括的交互控件相同。
22.根据权利要求15所述的系统,其特征在于,所述第二电子设备还用于:检测到用户的第二操作,所述第二操作用于指示打开所述第一电子设备中的所述第一相机应用;响应于所述第二操作,向所述第一电子设备发送第三控制指令;
所述第一电子设备,还用于接收到所述第二电子设备发送的第三控制指令,所述第三控制指令用于指示所述第二电子设备检测到用户的第二操作。
23.根据权利要求15至22中任一项所述的系统,其特征在于,所述第一电子设备为手机,所述第二电子设备为智能手表。
24.一种电子设备,其特征在于,所述电子设备包括:
一个或多个处理器;
一个或多个存储器;
所述一个或多个存储器存储有一个或者多个计算机程序,所述一个或者多个计算机程序包括指令,当所述指令被所述一个或多个处理器执行时,使得所述电子设备执行如权利要求1至8中任一项所述的方法,或者执行如权利要求9至14中任一项所述的方法。
25.一种计算机可读存储介质,其特征在于,包括计算机指令,当所述计算机指令在电子设备上运行时,使得所述电子设备执行如权利要求1至8中任一项所述的方法,或者执行如权利要求9至14中任一项所述的方法。
26.一种包含指令的计算机程序产品,其特征在于,当所述计算机程序产品在计算机上运行时,使得所述计算机执行如权利要求1至8中任一项所述的方法,或者执行如权利要求9至14中任一项所述的方法。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202210786399.5A CN117407094A (zh) | 2022-07-04 | 2022-07-04 | 一种显示方法、电子设备和系统 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202210786399.5A CN117407094A (zh) | 2022-07-04 | 2022-07-04 | 一种显示方法、电子设备和系统 |
Publications (1)
Publication Number | Publication Date |
---|---|
CN117407094A true CN117407094A (zh) | 2024-01-16 |
Family
ID=89487610
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN202210786399.5A Pending CN117407094A (zh) | 2022-07-04 | 2022-07-04 | 一种显示方法、电子设备和系统 |
Country Status (1)
Country | Link |
---|---|
CN (1) | CN117407094A (zh) |
-
2022
- 2022-07-04 CN CN202210786399.5A patent/CN117407094A/zh active Pending
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN114467297B (zh) | 一种应用于电子设备的视频通话的显示方法及相关装置 | |
CN114679537B (zh) | 一种拍摄方法及终端 | |
CN112231025B (zh) | Ui组件显示的方法及电子设备 | |
CN115866121B (zh) | 应用界面交互方法、电子设备和计算机可读存储介质 | |
CN113885759B (zh) | 通知消息处理方法、设备、系统及计算机可读存储介质 | |
CN113542839B (zh) | 电子设备的投屏方法和电子设备 | |
CN112887583B (zh) | 一种拍摄方法及电子设备 | |
WO2020029306A1 (zh) | 一种图像拍摄方法及电子设备 | |
CN114615423B (zh) | 一种回调流的处理方法及设备 | |
CN113067940B (zh) | 一种电子设备在来电时呈现视频的方法和电子设备 | |
CN114125130B (zh) | 控制通信服务状态的方法、终端设备和可读存储介质 | |
CN115967851A (zh) | 快速拍照方法、电子设备及计算机可读存储介质 | |
CN114827581A (zh) | 同步时延测量方法、内容同步方法、终端设备及存储介质 | |
CN116048358B (zh) | 悬浮球的控制方法和相关装置 | |
CN113703894A (zh) | 通知消息的显示方法和显示装置 | |
CN113141483B (zh) | 基于视频通话的共享屏幕方法及移动设备 | |
CN114528581A (zh) | 一种安全显示方法及电子设备 | |
CN112532508B (zh) | 一种视频通信方法及视频通信装置 | |
CN115509651A (zh) | 一种屏幕共享的方法及相关设备 | |
CN116389884B (zh) | 缩略图显示方法及终端设备 | |
CN115941836A (zh) | 一种界面显示方法、电子设备及存储介质 | |
CN113950045B (zh) | 签约数据的下载方法和电子设备 | |
CN113497888B (zh) | 照片预览方法、电子设备和存储介质 | |
CN113645595B (zh) | 设备交互方法和装置 | |
CN117009005A (zh) | 一种显示方法、汽车和电子设备 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination |