CN108965694B - 用于相机水平矫正的陀螺仪信息的获取方法及便携式终端 - Google Patents

用于相机水平矫正的陀螺仪信息的获取方法及便携式终端 Download PDF

Info

Publication number
CN108965694B
CN108965694B CN201810670964.5A CN201810670964A CN108965694B CN 108965694 B CN108965694 B CN 108965694B CN 201810670964 A CN201810670964 A CN 201810670964A CN 108965694 B CN108965694 B CN 108965694B
Authority
CN
China
Prior art keywords
camera
images
portable terminal
video frames
face
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201810670964.5A
Other languages
English (en)
Other versions
CN108965694A (zh
Inventor
文丹霞
刘靖康
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Insta360 Innovation Technology Co Ltd
Original Assignee
Insta360 Innovation Technology Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Insta360 Innovation Technology Co Ltd filed Critical Insta360 Innovation Technology Co Ltd
Priority to CN201810670964.5A priority Critical patent/CN108965694B/zh
Publication of CN108965694A publication Critical patent/CN108965694A/zh
Application granted granted Critical
Publication of CN108965694B publication Critical patent/CN108965694B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60—Control of cameras or camera modules
    • H04N23/61—Control of cameras or camera modules based on recognised objects
    • H04N23/611—Control of cameras or camera modules based on recognised objects where the recognised objects include parts of the human body
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04M—TELEPHONIC COMMUNICATION
    • H04M1/00—Substation equipment, e.g. for use by subscribers
    • H04M1/72—Mobile telephones; Cordless telephones, i.e. devices for establishing wireless links to base stations without route selection
    • H04M1/724—User interfaces specially adapted for cordless or mobile telephones
    • H04M1/72403—User interfaces specially adapted for cordless or mobile telephones with means for local support of applications that increase the functionality
    • H04M1/7243—User interfaces specially adapted for cordless or mobile telephones with means for local support of applications that increase the functionality with interactive means for internal management of messages
    • H04M1/72439—User interfaces specially adapted for cordless or mobile telephones with means for local support of applications that increase the functionality with interactive means for internal management of messages for image or video messaging
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04M—TELEPHONIC COMMUNICATION
    • H04M1/00—Substation equipment, e.g. for use by subscribers
    • H04M1/72—Mobile telephones; Cordless telephones, i.e. devices for establishing wireless links to base stations without route selection
    • H04M1/724—User interfaces specially adapted for cordless or mobile telephones
    • H04M1/72448—User interfaces specially adapted for cordless or mobile telephones with means for adapting the functionality of the device according to specific conditions
    • H04M1/72454—User interfaces specially adapted for cordless or mobile telephones with means for adapting the functionality of the device according to specific conditions according to context-related or environment-related conditions
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60—Control of cameras or camera modules
    • H04N23/66—Remote control of cameras or camera parts, e.g. by remote control devices

Landscapes

  • Engineering & Computer Science (AREA)
  • Signal Processing (AREA)
  • Multimedia (AREA)
  • Human Computer Interaction (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Business, Economics & Management (AREA)
  • General Business, Economics & Management (AREA)
  • Environmental & Geological Engineering (AREA)
  • Studio Devices (AREA)

Abstract

本发明适用于图像处理领域，提供了一种用于相机水平矫正的陀螺仪信息的获取方法及便携式终端。所述方法包括：建立便携式终端与相机的通信连接；获取相机的每个相机镜头拍摄的视频帧或图像；对获取的视频帧或图像进行人脸识别，识别出视频帧或图像中的所有人脸；确定获取的视频帧或图像中识别出的所有人脸中面积最大的人脸；将所述面积最大的人脸所在的视频帧或图像对应的相机镜头的方向，并将所述方向作为相机水平矫正的陀螺仪信息。本发明能正确获取相机水平矫正的陀螺仪信息，有效地对相机进行水平矫正。

Description

用于相机水平矫正的陀螺仪信息的获取方法及便携式终端
技术领域
本发明属于图像处理领域，尤其涉及一种用于相机水平矫正的陀螺仪信息的获取方法及便携式终端。
背景技术
当相机(例如全景相机、VR相机等)自身没有陀螺仪，而是使用便携式终端(例如手机、平板电脑等)自带的陀螺仪进行水平矫正时，必须区分相机是正插还是反插在便携式终端上的，否则水平矫正会失效。相机通常是通过便携式终端的通信接口，例如Type C接口、MicroUSB接口等与便携式终端建立通信连接，相机拍摄的图像/视频实时传输至便携式终端播放。然而，便携式终端无法识别相机是正插还是反插的。因为Type C接口不能区分正反，虽然MicroUSB接口能区分正反，但厂商多，即使厂商相同，而手机类型繁多，不同机型也有正反方向不一致的情况。因此，现有技术无法正确获取相机水平矫正的陀螺仪信息，从而会导致水平矫正失效。
发明内容
本发明的目的在于提供一种用于相机水平矫正的陀螺仪信息的获取方法、装置、计算机可读存储介质及便携式终端，旨在解决现有技术无法正确获取相机水平矫正的陀螺仪信息，从而会导致水平矫正失效的问题。
第一方面，本发明提供了一种用于相机水平矫正的陀螺仪信息的获取方法，所述方法包括：
S101、建立便携式终端与相机的通信连接；
S102、获取相机的每个相机镜头拍摄的视频帧或图像；
S103、对获取的视频帧或图像进行人脸识别，识别出视频帧或图像中的所有人脸；
S104、确定获取的视频帧或图像中识别出的所有人脸中面积最大的人脸；
S105、将所述面积最大的人脸所在的视频帧或图像对应的相机镜头的方向作为便携式终端的屏幕朝向人脸的方向，并将所述方向作为相机水平矫正的陀螺仪信息。
第二方面，本发明提供了一种用于相机水平矫正的陀螺仪信息的获取装置，所述装置包括：
通信连接建立模块，用于建立便携式终端与相机的通信连接；
获取模块，用于获取相机的每个相机镜头拍摄的视频帧或图像；
识别模块，用于对获取的视频帧或图像进行人脸识别，识别出视频帧或图像中的所有人脸；
确定模块，用于确定获取的视频帧或图像中识别出的所有人脸中面积最大的人脸；
陀螺仪信息确定模块，用于将所述面积最大的人脸所在的视频帧或图像对应的相机镜头的方向作为便携式终端的屏幕朝向人脸的方向，并将所述方向作为相机水平矫正的陀螺仪信息。
第三方面，本发明提供了一种计算机可读存储介质，所述计算机可读存储介质存储有计算机程序，所述计算机程序被处理器执行时实现如上述的用于相机水平矫正的陀螺仪信息的获取方法的步骤。
第四方面，本发明提供了一种便携式终端，包括：
一个或多个处理器；
存储器；以及
一个或多个计算机程序，其中所述一个或多个计算机程序被存储在所述存储器中，并且被配置成由所述一个或多个处理器执行，所述处理器执行所述计算机程序时实现如上述的用于相机水平矫正的陀螺仪信息的获取方法的步骤。
在本发明中，由于通过对获取的视频帧或图像进行人脸识别，确定获取的视频帧或图像中识别出的所有人脸中面积最大的人脸，将所述面积最大的人脸所在的视频帧或图像对应的相机镜头的方向作为便携式终端的屏幕朝向人脸的方向，或者，如果获取的视频帧或图像中没有识别出面积最大的人脸，则根据获取的视频帧或图像中识别出的所有人脸，确定包括人脸数量最多的视频帧或图像，将包括人脸数量最多的视频帧或图像对应的相机镜头的方向作为便携式终端的屏幕朝向人脸的方向，并将所述方向作为相机水平矫正的陀螺仪信息。由于用户一般是手持手机连接相机拍照，持手机者人脸一般是最大的，或者拍到的人通常是最多的。因此本发明能正确获取相机水平矫正的陀螺仪信息，有效地对相机进行水平矫正。
附图说明
图1是本发明实施例一提供的用于相机水平矫正的陀螺仪信息的获取方法的流程图。
图2是本发明实施例二提供的用于相机水平矫正的陀螺仪信息的获取装置的功能模块框图。
图3是本发明实施例四提供的便携式终端的具体结构框图。
具体实施方式
为了使本发明的目的、技术方案及有益效果更加清楚明白，以下结合附图及实施例，对本发明进行进一步详细说明。应当理解，此处所描述的具体实施例仅仅用以解释本发明，并不用于限定本发明。
为了说明本发明所述的技术方案，下面通过具体实施例来进行说明。
实施例一：
请参阅图1，本发明实施例一提供的用于相机水平矫正的陀螺仪信息的获取方法包括以下步骤：需注意的是，若有实质上相同的结果，本发明的用于相机水平矫正的陀螺仪信息的获取方法并不以图1所示的流程顺序为限。
S101、建立便携式终端与相机的通信连接。
便携式终端可以是手机、平板电脑等。相机可以是全景相机、VR相机等。全景相机和VR相机通常至少具有前后两个鱼眼镜头。
在本发明实施例一中，S101具体可以为：
通过便携式终端的通信接口与相机的通信接口建立便携式终端与相机的通信连接。
通信接口可以是Type C接口、MicroUSB接口等。
S102、获取相机的每个相机镜头拍摄的视频帧或图像。
在本发明实施例一中，S102具体可以为：
通过便携式终端的通信接口与相机的通信接口获取相机的每个相机镜头拍摄的视频帧或图像。
S103、对获取的视频帧或图像进行人脸识别，识别出视频帧或图像中的所有人脸。
在本发明实施例一中，S103具体可以为：
通过第三方人脸识别库对获取的视频帧或图像进行人脸识别，识别出视频帧或图像中的所有人脸。
S104、确定获取的视频帧或图像中识别出的所有人脸中面积最大的人脸。
S105、将所述面积最大的人脸所在的视频帧或图像对应的相机镜头的方向作为便携式终端的屏幕朝向人脸的方向，并将所述方向作为相机水平矫正的陀螺仪信息。
在本发明实施例一中，在S104中，如果获取的视频帧或图像中没有识别出面积最大的人脸，则根据获取的视频帧或图像中识别出的所有人脸，确定包括人脸数量最多的视频帧或图像，将包括人脸数量最多的视频帧或图像对应的相机镜头的方向作为便携式终端的屏幕朝向人脸的方向，并将所述方向作为相机水平矫正的陀螺仪信息。
由于每一次在便携式终端中插入相机，都可能改变相机的正反。因此在本发明实施例一中，S105之后，所述方法还可以包括以下步骤：
当便携式终端与相机断开通信连接后，再次建立便携式终端与相机的通信连接时，返回S102。
实施例二：
请参阅图2，本发明实施例二提供的用于相机水平矫正的陀螺仪信息的获取装置包括：
通信连接建立模块11，用于建立便携式终端与相机的通信连接；
获取模块12，用于获取相机的每个相机镜头拍摄的视频帧或图像；
识别模块13，用于对获取的视频帧或图像进行人脸识别，识别出视频帧或图像中的所有人脸；
确定模块14，用于确定获取的视频帧或图像中识别出的所有人脸中面积最大的人脸；
陀螺仪信息确定模块15，用于将所述面积最大的人脸所在的视频帧或图像对应的相机镜头的方向作为便携式终端的屏幕朝向人脸的方向，并将所述方向作为相机水平矫正的陀螺仪信息。
本发明实施例二提供的用于相机水平矫正的陀螺仪信息的获取装置及本发明实施例一提供的用于相机水平矫正的陀螺仪信息的获取方法属于同一构思，其具体实现过程详见说明书全文，此处不再赘述。
实施例三：
本发明实施例三提供了一种计算机可读存储介质，所述计算机可读存储介质存储有计算机程序，所述计算机程序被处理器执行时实现如本发明实施例一提供的用于相机水平矫正的陀螺仪信息的获取方法的步骤。
实施例四：
图3示出了本发明实施例四提供的便携式终端的具体结构框图，一种便携式终端100包括：一个或多个处理器101、存储器102、以及一个或多个计算机程序，其中所述处理器101和所述存储器102通过总线连接，所述一个或多个计算机程序被存储在所述存储器102中，并且被配置成由所述一个或多个处理器101执行，所述处理器101执行所述计算机程序时实现如本发明实施例一提供的用于相机水平矫正的陀螺仪信息的获取方法的步骤。
在本发明中，由于通过对获取的视频帧或图像进行人脸识别，确定获取的视频帧或图像中识别出的所有人脸中面积最大的人脸，将所述面积最大的人脸所在的视频帧或图像对应的相机镜头的方向作为便携式终端的屏幕朝向人脸的方向，或者，如果获取的视频帧或图像中没有识别出面积最大的人脸，则根据获取的视频帧或图像中识别出的所有人脸，确定包括人脸数量最多的视频帧或图像，将包括人脸数量最多的视频帧或图像对应的相机镜头的方向作为便携式终端的屏幕朝向人脸的方向，并将所述方向作为相机水平矫正的陀螺仪信息。由于用户一般是手持手机连接相机拍照，持手机者人脸一般是最大的，或者拍到的人通常是最多的。因此本发明能正确获取相机水平矫正的陀螺仪信息，有效地对相机进行水平矫正。
本领域普通技术人员可以理解上述实施例的各种方法中的全部或部分步骤是可以通过程序来指令相关的硬件来完成，该程序可以存储于一计算机可读存储介质中，存储介质可以包括：只读存储器(ROM，Read Only Memory)、随机存取记忆体(RAM，RandomAccess Memory)、磁盘或光盘等。
以上所述仅为本发明的较佳实施例而已，并不用以限制本发明，凡在本发明的精神和原则之内所作的任何修改、等同替换和改进等，均应包含在本发明的保护范围之内。

Claims (10)

1.一种用于相机水平矫正的陀螺仪信息的获取方法，其特征在于，所述方法包括：
S101、建立便携式终端与相机的通信连接；
S102、获取相机的每个相机镜头拍摄的视频帧或图像；
S103、对获取的视频帧或图像进行人脸识别，识别出视频帧或图像中的所有人脸；
S104、确定获取的视频帧或图像中识别出的所有人脸中面积最大的人脸；
S105、将所述面积最大的人脸所在的视频帧或图像对应的相机镜头的方向作为便携式终端的屏幕朝向人脸的方向，并将所述面积最大的人脸所在的视频帧或图像对应的相机镜头的方向作为相机水平矫正的陀螺仪信息。
2.如权利要求1所述的方法，其特征在于，在所述S104中，如果获取的视频帧或图像中没有识别出面积最大的人脸，则根据获取的视频帧或图像中识别出的所有人脸，确定包括人脸数量最多的视频帧或图像，将包括人脸数量最多的视频帧或图像对应的相机镜头的方向作为便携式终端的屏幕朝向人脸的方向，并将所述包括人脸数量最多的视频帧或图像对应的相机镜头的方向作为相机水平矫正的陀螺仪信息。
3.如权利要求1所述的方法，其特征在于，所述相机是全景相机或VR相机，所述全景相机和VR相机至少具有前后两个鱼眼镜头。
4.如权利要求1所述的方法，其特征在于，所述S101具体为：
通过便携式终端的通信接口与相机的通信接口建立便携式终端与相机的通信连接。
5.如权利要求4所述的方法，其特征在于，所述S102具体为：
通过便携式终端的通信接口与相机的通信接口获取相机的每个相机镜头拍摄的视频帧或图像。
6.如权利要求1所述的方法，其特征在于，所述S103具体为：
通过第三方人脸识别库对获取的视频帧或图像进行人脸识别，识别出视频帧或图像中的所有人脸。
7.如权利要求1所述的方法，其特征在于，所述S105之后，所述方法还包括以下步骤：
当便携式终端与相机断开通信连接后，再次建立便携式终端与相机的通信连接时，返回S102。
8.一种用于相机水平矫正的陀螺仪信息的获取装置，其特征在于，所述装置包括：
通信连接建立模块，用于建立便携式终端与相机的通信连接；
获取模块，用于获取相机的每个相机镜头拍摄的视频帧或图像；
识别模块，用于对获取的视频帧或图像进行人脸识别，识别出视频帧或图像中的所有人脸；
确定模块，用于确定获取的视频帧或图像中识别出的所有人脸中面积最大的人脸；
陀螺仪信息确定模块，用于将所述面积最大的人脸所在的视频帧或图像对应的相机镜头的方向作为便携式终端的屏幕朝向人脸的方向，并将所述面积最大的人脸所在的视频帧或图像对应的相机镜头的方向作为相机水平矫正的陀螺仪信息。
9.一种计算机可读存储介质，所述计算机可读存储介质存储有计算机程序，其特征在于，所述计算机程序被处理器执行时实现如权利要求1至7任一项所述的用于相机水平矫正的陀螺仪信息的获取方法的步骤。
10.一种便携式终端，包括：
一个或多个处理器；
存储器；以及
一个或多个计算机程序，其中所述一个或多个计算机程序被存储在所述存储器中，并且被配置成由所述一个或多个处理器执行，其特征在于，所述处理器执行所述计算机程序时实现如权利要求1至7任一项所述的用于相机水平矫正的陀螺仪信息的获取方法的步骤。
CN201810670964.5A 2018-06-26 2018-06-26 用于相机水平矫正的陀螺仪信息的获取方法及便携式终端 Active CN108965694B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201810670964.5A CN108965694B (zh) 2018-06-26 2018-06-26 用于相机水平矫正的陀螺仪信息的获取方法及便携式终端

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201810670964.5A CN108965694B (zh) 2018-06-26 2018-06-26 用于相机水平矫正的陀螺仪信息的获取方法及便携式终端

Publications (2)

Publication Number Publication Date
CN108965694A CN108965694A (zh) 2018-12-07
CN108965694B true CN108965694B (zh) 2020-11-03

Family

ID=64486774

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201810670964.5A Active CN108965694B (zh) 2018-06-26 2018-06-26 用于相机水平矫正的陀螺仪信息的获取方法及便携式终端

Country Status (1)

Country Link
CN (1) CN108965694B (zh)

Families Citing this family (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN113589942B (zh) * 2021-09-29 2022-01-21 北京启瞳智能科技有限公司 Vr画面矫正方法、装置、设备及存储介质

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN103024338A (zh) * 2011-04-08 2013-04-03 数字光学欧洲有限公司 具有图像捕获和分析模块的显示设备
CN105635657A (zh) * 2014-11-03 2016-06-01 航天信息股份有限公司 基于人脸检测的摄像机云台全方位交互方法和装置
CN106303029A (zh) * 2016-08-15 2017-01-04 广东欧珀移动通信有限公司 一种画面的旋转控制方法、装置及移动终端
CN106934772A (zh) * 2017-03-02 2017-07-07 深圳岚锋创视网络科技有限公司 一种全景图像或视频的水平校准方法、系统及便携式终端

Family Cites Families (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP6012982B2 (ja) * 2012-02-24 2016-10-25 京セラ株式会社 較正処理装置、カメラ較正装置、カメラシステム、およびカメラ較正方法
TWI511081B (zh) * 2014-01-28 2015-12-01 Altek Semiconductor Corp 影像擷取裝置及其影像形變校正方法
TWI591377B (zh) * 2015-12-11 2017-07-11 財團法人工業技術研究院 廣角鏡頭校正系統及其方法

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN103024338A (zh) * 2011-04-08 2013-04-03 数字光学欧洲有限公司 具有图像捕获和分析模块的显示设备
CN105635657A (zh) * 2014-11-03 2016-06-01 航天信息股份有限公司 基于人脸检测的摄像机云台全方位交互方法和装置
CN106303029A (zh) * 2016-08-15 2017-01-04 广东欧珀移动通信有限公司 一种画面的旋转控制方法、装置及移动终端
CN106934772A (zh) * 2017-03-02 2017-07-07 深圳岚锋创视网络科技有限公司 一种全景图像或视频的水平校准方法、系统及便携式终端

Also Published As

Publication number Publication date
CN108965694A (zh) 2018-12-07

Similar Documents

Publication Publication Date Title
US11050915B2 (en) Method for zooming by switching between dual cameras, mobile terminal, and storage apparatus
JP4274233B2 (ja) 撮影装置、画像処理装置、および、これらにおける画像処理方法ならびに当該方法をコンピュータに実行させるプログラム
US11386699B2 (en) Image processing method, apparatus, storage medium, and electronic device
CN108197586B (zh) 脸部识别方法和装置
CN107370942B (zh) 拍照方法、装置、存储介质及终端
CN106165391B (zh) 增强的图像捕获
CN110769158B (zh) 增强的图像捕获
CN109981964B (zh) 基于机器人的拍摄方法、拍摄装置及机器人
CN111131698B (zh) 图像处理方法及装置、计算机可读介质、电子设备
CN104754216A (zh) 一种拍照方法及装置
CN107395957B (zh) 拍照方法、装置、存储介质及电子设备
CN111641835A (zh) 视频处理方法、视频处理装置和电子设备
US20180077359A1 (en) Image processing method and apparatus and terminal device
CN112087574A (zh) 增强的图像捕获
WO2017124899A1 (zh) 一种信息处理方法及装置、电子设备
CN108632536B (zh) 一种相机控制方法及装置、终端、存储介质
CN103297696A (zh) 拍摄方法、装置和终端
CN106503682B (zh) 视频数据中的关键点定位方法及装置
CN108776800B (zh) 一种图像处理方法、移动终端及计算机可读存储介质
CN112308018A (zh) 一种图像识别方法、系统、电子设备及存储介质
CN108965694B (zh) 用于相机水平矫正的陀螺仪信息的获取方法及便携式终端
CN108259769B (zh) 图像处理方法、装置、存储介质及电子设备
CN108289176B (zh) 一种拍照搜题方法、搜题装置及终端设备
CN113591526A (zh) 人脸活体检测方法、装置、设备及计算机可读存储介质
CN109788199B (zh) 一种适用于具有双摄像头终端的对焦方法

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
CB02 Change of applicant information

Address after: 518000 Guangdong, Shenzhen, Baoan District Xin'an street, Hai Xiu Road 23, 6 A 601603605, long Kong Century Towers, 601603605

Applicant after: Yingshi Innovation Technology Co., Ltd

Address before: 518000 Guangdong, Shenzhen, Baoan District Xin'an street, Hai Xiu Road 23, 6 A 601603605, long Kong Century Towers, 601603605

Applicant before: SHENZHEN ARASHI VISION Co.,Ltd.

CB02 Change of applicant information
GR01 Patent grant
GR01 Patent grant