CN114938469A - 摄像头的图像处理方法、装置及摄像头和显示系统 - Google Patents

摄像头的图像处理方法、装置及摄像头和显示系统 Download PDF

Info

Publication number
CN114938469A
CN114938469A CN202210533106.2A CN202210533106A CN114938469A CN 114938469 A CN114938469 A CN 114938469A CN 202210533106 A CN202210533106 A CN 202210533106A CN 114938469 A CN114938469 A CN 114938469A
Authority
CN
China
Prior art keywords
image
camera
cropping
preview resolution
rotation angle
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN202210533106.2A
Other languages
English (en)
Inventor
康登立
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Shenzhen Konka Electronic Technology Co Ltd
Original Assignee
Shenzhen Konka Electronic Technology Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Shenzhen Konka Electronic Technology Co Ltd filed Critical Shenzhen Konka Electronic Technology Co Ltd
Priority to CN202210533106.2A priority Critical patent/CN114938469A/zh
Publication of CN114938469A publication Critical patent/CN114938469A/zh
Pending legal-status Critical Current

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/41—Structure of client; Structure of client peripherals
    • H04N21/422—Input-only peripherals, i.e. input devices connected to specially adapted client devices, e.g. global positioning system [GPS]
    • H04N21/4223—Cameras
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/44—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs
    • H04N21/4402—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs involving reformatting operations of video signals for household redistribution, storage or real-time display
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/44—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs
    • H04N21/4402—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs involving reformatting operations of video signals for household redistribution, storage or real-time display
    • H04N21/440263—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs involving reformatting operations of video signals for household redistribution, storage or real-time display by altering the spatial resolution, e.g. for displaying on a connected PDA
    • H04N21/440272—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs involving reformatting operations of video signals for household redistribution, storage or real-time display by altering the spatial resolution, e.g. for displaying on a connected PDA for performing aspect ratio conversion
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/80—Camera processing pipelines; Components thereof

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Studio Devices (AREA)

Abstract

本公开提供一种摄像头的图像处理方法、装置及摄像头和显示系统，其中，摄像头被配置为与可旋转显示设备连接且两者之间形成固定位置关系，摄像头的图像处理方法包括：接收可旋转显示设备发送的预览分辨率和旋转角度；获取光学图像传感器采集的第一图像；根据预览分辨率剪裁第一图像得到第二图像；根据旋转角度旋转第二图像得到第三图像；根据预览分辨率缩放第三图像得到第四图像；对第四图像进行编码得到第五图像；向可旋转显示设备发送第五图像，以在可旋转显示设备显示。通过本公开，降低硬件成本，且先裁剪实现全屏预览播放，解决了目前摄像头预览画面旋转后不能全屏播放显示(存在黑边)等体验性差的问题，同时裁剪后旋转处理速度更快。

Description

摄像头的图像处理方法、装置及摄像头和显示系统
技术领域
本公开涉及图像处理技术领域，尤其涉及一种摄像头的图像处理方法、装置及摄像头和显示系统。
背景技术
智能电视领域，现有可旋转电视显示方法需要借助多个摄像头，根据可旋转电视的旋转角度来匹配选择合适的摄像头，例如，在横屏显示时，使用横屏对应的摄像头，在竖屏显示时，使用竖屏对应的摄像头。
现有的可旋转电视需在多个方向上布置摄像头，硬件成本较高。
发明内容
根据本公开的一方面，提供了一种摄像头的图像处理方法，其中，摄像头被配置为与可旋转显示设备连接且两者之间形成固定位置关系，该方法包括：接收可旋转显示设备发送的预览分辨率和旋转角度；获取光学图像传感器采集的第一图像；根据预览分辨率剪裁第一图像得到第二图像，其中，所述第二图像的宽高比基于所述旋转角度与所述预览分辨率的宽高比相匹配或对调；根据旋转角度旋转第二图像得到第三图像，其中，所述第三图像的宽高比与所述预览分辨率的宽高比相匹配；根据预览分辨率缩放第三图像得到第四图像；对第四图像进行编码得到第五图像；向可旋转显示设备发送第五图像，以在可旋转显示设备显示。
在一些可能的实施方式中，还包括：获取剪裁模式，其中，所述剪裁模式配置剪裁中心；其中，根据所述预览分辨率剪裁所述第一图像得到第二图像，包括：根据所述剪裁模式确定剪裁中心；确定与所述预览分辨率对应的剪裁区域大小；按照所述剪裁中心和所述剪裁区域大小剪裁所述第一图像得到第二图像。
在一些可能的实施方式中，所述剪裁模式为中心剪裁，根据所述剪裁模式和所述预览分辨率剪裁所述第一图像得到第二图像，包括：确定与所述预览分辨率对应的剪裁区域大小；以所述第一图像的中心为中心，按照所述剪裁区域大小剪裁所述第一图像得到第二图像。
在一些可能的实施方式中，还包括：检测所述第一图像中是否包含人像；在所述第一图像中包括所述人像时，以所述人像为中心，按照所述预览分辨率对应的剪裁区域大小剪裁所述第一图像得到第二图像。
在一些可能的实施方式中，根据所述预览分辨率剪裁所述第一图像得到第二图像之后，还包括：将所述第二图像缓存至第一缓存区；根据所述旋转角度旋转所述第二图像得到第三图像之前，还包括：从所述第一缓存区读取所述第二图像；根据所述旋转角度旋转所述第二图像得到第三图像之后，还包括：将所述第三图像缓存至第二缓存区；根据所述预览分辨率缩放所述第三图像得到第四图像之前，还包括：从所述第二缓存区读取所述第三图像。
在一些可能的实施方式中，所述可旋转显示设备的初始角度为0°，所述旋转角度包括相对于所述初始角度的90°、180°或270°。
在一些可能的实施方式中，在所述旋转角度为90°或270°时，所述第二图像的宽高比与所述预览分辨率的宽高比对调；在所述旋转角度为180°时，所述第二图像的宽高比与所述预览分辨率的宽高比相匹配。
根据本公开的另一方面，提供了一种图像处理装置，包括：接收模块，用于接收所述可旋转显示设备发送的预览分辨率和旋转角度；获取模块，用于获取光学图像传感器采集的第一图像；剪裁模块，用于根据所述预览分辨率剪裁所述第一图像得到第二图像，其中，所述第二图像的宽高比基于所述旋转角度与所述预览分辨率的宽高比相匹配或对调；旋转模块，用于根据所述旋转角度旋转所述第二图像得到第三图像，其中，所述第三图像的宽高比与所述预览分辨率的宽高比相匹配；缩放模块，用于根据所述预览分辨率缩放所述第三图像得到第四图像；编码模块，用于对所述第四图像进行编码得到第五图像；发送模块，用于向所述可旋转显示设备发送所述第五图像，以在所述可旋转显示设备显示。
根据本公开的又一方面，提供了一种摄像头，包括：光学图像传感器；处理器；以及存储程序的存储器，其中，所述程序包括指令，所述指令在由所述处理器执行时使所述处理器执行本公开的方法。
根据本公开的再一方面，提供了一种显示系统，包括：可旋转显示设备；本公开的摄像头；摄像头，被配置为与可旋转显示设备连接且两者之间形成固定位置关系；可旋转显示设备，被配置为向所述摄像头发送旋转角度和预览分辨率，以及接收摄像头发送的图像，对所述图像进行解码并显示。
根据本公开的再一方面，提供了一种存储有计算机指令的非瞬时计算机可读存储介质，其中，所述计算机指令用于使所述计算机执行本公开的方法。
本公开实施例中提供的一个或多个技术方案，可使用一个摄像头实现可旋转显示设备横竖屏切换播放，降低了硬件成本，提高产品竞争力。并且，先裁剪再旋转，裁剪后需要旋转的图像尺寸更小，处理速度更快。进一步的，由摄像头实现图像处理，可旋转显示设备实现发送旋转角度给摄像头，而无需更改可旋转显示设备的底层代码来实现图像处理，软件开发以及维护相对简单。且先裁剪实现全屏预览播放，解决了目前摄像头预览画面旋转后不能全屏播放显示(存在黑边)等体验性差的问题。
附图说明
在下面结合附图对于示例性实施例的描述中，本公开的更多细节、特征和优点被公开，在附图中：
图1示出了根据本公开示例性实施例的图像处理方法的流程图；
图2示出了根据本公开示例性实施例的横屏状态下摄像头与可旋转显示设备的示意图；
图3示出了根据本公开示例性实施例的竖屏状态下摄像头与可旋转显示设备的示意图；
图4示出了图2所示的状态下摄像头采集的图像与剪裁图像的示意图；
图5示出了图2所示的状态下显示结果的示意图；
图6示出了图3所示的状态下摄像头采集的图像与剪裁图像的示意图；
图7示出了图3所示的状态下显示结果的示意图；
图8示出了根据本公开示例性实施例的图像处理装置的示意性框图；
图9示出了能够用于实现本公开的实施例的示例性可旋转显示设备的结构框图。
具体实施方式
下面将参照附图更详细地描述本公开的实施例。虽然附图中显示了本公开的某些实施例，然而应当理解的是，本公开可以通过各种形式来实现，而且不应该被解释为限于这里阐述的实施例，相反提供这些实施例是为了更加透彻和完整地理解本公开。应当理解的是，本公开的附图及实施例仅用于示例性作用，并非用于限制本公开的保护范围。
应当理解，本公开的方法实施方式中记载的各个步骤可以按照不同的顺序执行，和/或并行执行。此外，方法实施方式可以包括附加的步骤和/或省略执行示出的步骤。本公开的范围在此方面不受限制。
本文使用的术语“包括”及其变形是开放性包括，即“包括但不限于”。术语“基于”是“至少部分地基于”。术语“一个实施例”表示“至少一个实施例”；术语“另一实施例”表示“至少一个另外的实施例”；术语“一些实施例”表示“至少一些实施例”。其他术语的相关定义将在下文描述中给出。需要注意，本公开中提及的“第一”、“第二”等概念仅用于对不同的装置、模块或单元进行区分，并非用于限定这些装置、模块或单元所执行的功能的顺序或者相互依存关系。
需要注意，本公开中提及的“一个”、“多个”的修饰是示意性而非限制性的，本领域技术人员应当理解，除非在上下文另有明确指出，否则应该理解为“一个或多个”。
本公开实施方式中的多个装置之间所交互的消息或者信息的名称仅用于说明性的目的，而并不是用于对这些消息或信息的范围进行限制。
本公开示例性实施例提供了一种摄像头的图像处理方法，摄像头能够与可旋转显示设备连接且两者之间形成固定位置关系。摄像头可通过但不限于USB接口与可旋转显示设备通信连接。可旋转显示设备包括但不限于电视等。
本公开示例性实施例的图像处理方法，可应用于相机应用、视频通话应用等，可实现在相机应用中实时预览摄像头视野内的图像，在视频通话应用中实时在本地显示摄像头视野内的图像，并可将图像发送至视频通话的对端。
图1示出了根据本公开示例性实施例的图像处理方法的流程图，如图1所示，该方法包括：步骤S101至步骤S107。
步骤S101，摄像头接收可旋转显示设备发送的预览分辨率和旋转角度。
可旋转显示设备的初始角度为0°，旋转角度包括相对于初始角度的90°、180°或270°。该旋转角度相对于顺时针或逆时针方向。此外，旋转角度可包括方向和角度，例如，旋转角度可表示为顺时针90°、逆时针90°(相当于顺时针270°)。
作为一种示例，如图2所示，初始角度下可旋转显示设备为横屏显示，摄像头位于上方，如图3所示，顺时针旋转90°的情况下，可旋转显示设备为竖屏显示，摄像头位于右侧。类似的，顺时针旋转180°的情况下，可旋转显示设备为横屏显示，并相对于初始角度翻转，摄像头位于下方。
在一些可能的实施方式中，可旋转显示设备通过陀螺仪检测其旋转角度，并向摄像头发送其旋转角度。在一些可能的实施方式中，可旋转显示设备可通过其他方式检测其旋转角度，并向摄像头发送其旋转角度，本实施例对此不作限定。
在一些可能的实施方式中，用户可设置可旋转显示设备的旋转角度，可旋转显示设备可接收用户的设置，向摄像头发送用户设置的旋转角度。作为一个示例，用户在手动将可旋转显示设备从初始角度顺时针旋转90°后，设置旋转角度为90°。作为一个例子，用户可通过遥控器向可旋转设备发送指令，以设置旋转角度为90°，可旋转显示设备接收该指令，并向摄像头发送旋转角度。作为另一个例子，可旋转显示设备具有触敏显示器，触敏显示器可显示图形用户界面，检测用户在图形用户界面上设置旋转角度的操作，基于用户的操作设置旋转角度，并向摄像头发送旋转角度。应当理解，遥控(电视遥控器)、语音控制、手势识别控制等控制方式都可以用于设置旋转角度，本实施例对此不作限定。
步骤S102，摄像头获取光学图像传感器采集的第一图像。
第一图像为摄像头的坐标系下的图像。
步骤S103，摄像头根据预览分辨率剪裁第一图像得到第二图像，其中，第二图像的宽高比基于旋转角度与预览分辨率的宽高比相匹配或对调。
可包括多种预览分辨率，例如，全屏预览或在预定窗口中预览，可对应于不同的分辨率。在本实施例中，根据预览分辨率剪裁第一图像，以在经过后续缩放处理后按照预览分辨率显示。
在一些可能的实施方式中，还包括：获取剪裁模式，其中，剪裁模式配置剪裁中心；其中，上述步骤S103包括：根据剪裁模式确定剪裁中心；确定与预览分辨率对应的剪裁区域大小；按照剪裁中心和剪裁区域大小剪裁第一图像得到第二图像。其中，剪裁区域的宽高比基于旋转角度与预览分辨率的宽高比相匹配或对调。
在一些可能的实施方式中，剪裁模式为中心剪裁，以使摄像头视野的中心处于第二图像的中心，上述步骤S103包括：确定与预览分辨率对应的剪裁区域大小；以第一图像的中心为中心，按照剪裁区域大小剪裁第一图像得到第二图像。其中，剪裁区域的宽高比基于旋转角度与预览分辨率的宽高比相匹配或对调。
在一些可能的实施方式中，为了使拍照或视频通话中人像处于第二图像的中心，可检测所述第一图像中是否包含人像；在第一图像中包括人像时，以检测到的人像为中心，按照预览分辨率对应的剪裁区域大小剪裁第一图像得到第二图像。其中，剪裁区域的宽高比基于旋转角度与预览分辨率的宽高比相匹配或对调。
剪裁得到的第二图像的宽高比基于旋转角度与预览分辨率的宽高比相匹配或对调，以使旋转得到的第三图像与预览分辨率的宽高比相匹配。
其中，在旋转角度为90°或270°时，第二图像的宽高比与预览分辨率的宽高比对调。作为一个示例，预览分辨率对应的宽高比为16:9，在摄像头的坐标系下，剪裁得到的第二图像的宽高比为9:16。
其中，在旋转角度为180°时，第二图像的宽高比与预览分辨率的宽高比相匹配。作为一个示例，预览分辨率对应的宽高比为16:9，在摄像头的坐标系下，剪裁得到的第二图像的宽高比为16:9。
步骤S104，摄像头根据旋转角度旋转第二图像得到第三图像，其中，第三图像的宽高比与预览分辨率的宽高比相匹配。
在旋转角度为0°时，如图2所示，可旋转显示设备与摄像头均处于初始角度，不旋转第二图像。
在旋转角度为90°时，如图3所示，可旋转显示设备为竖屏状态，摄像头位于右侧，将第二图像旋转90°得到第三图像，此时，在摄像头的坐标系下，第三图像的宽高比与第二图像的宽高比对调。例如由16:9变为9:16。
在旋转角度为180°时，可旋转显示设备为横屏状态，摄像头位于下侧，将第二图像旋转180°得到第三图像，此时，在摄像头的坐标系下，第三图像的宽高比与第二图像的宽高比相同。例如均为16:9。
在旋转角度为270°时，可旋转显示设备为竖屏状态，摄像头位于左侧，将第二图像旋转270°得到第三图像，此时，在摄像头的坐标系下，第三图像的宽高比与第二图像的宽高比对调。例如由16:9变为9:16。
步骤S105，摄像头根据预览分辨率缩放第三图像得到第四图像。
由于第三图像的宽高比与预览分辨率的宽高比相匹配，因此，缩放得到的第四图像的宽高比与预览分辨率的宽高比相匹配，进而第四图像可充满预览窗口，而避免相关技术中存在黑边的问题。
例如，第三图像的尺寸为3840x2160，预览分辨率的尺寸为1920x1080，则缩放系数K＝3840/1920＝2，也就是说第四图像比第三图像缩小了2倍。
步骤S106，摄像头对第四图像进行编码得到第五图像。
步骤S107，摄像头向可旋转显示设备发送第五图像，以在可旋转显示设备显示。
在一些可能的实施方式中，根据预览分辨率剪裁第一图像得到第二图像之后，将第二图像缓存至第一缓存区，从第一缓存区读取所述第二图像以根据旋转角度旋转第二图像得到第三图像，将第三图像缓存至第二缓存区，从第二缓存区读取第三图像以根据预览分辨率缩放第三图像得到第四图像。
下面以旋转角度为0°和90°为例对图像剪裁、旋转和缩放进行示例性说明。
图4示出了图2所示的状态下摄像头采集的图像与剪裁图像的示意图。参考图2和图4所示，可旋转显示设备处于横屏状态，摄像头位于可旋转显示设备的上方，摄像头的坐标系与可旋转显示设备的坐标系成0°关系。摄像头采集的第一图像401分辨率为M*N，图4中第一图像401左上角为为摄像头坐标系的原点。在第一图像401上按照可旋转显示设备的预览分辨率进行剪裁。示例性的，预览分辨率为1920*1080，宽高比为16：9。示例性的，在第一图像401上进行居中剪裁，剪裁区域402如图4所示，剪裁区域402所示的区域即为第二图像。由于可旋转显示设备处于横屏状态，摄像头成像方向与可旋转显示设备的播放显示方向匹配，因此剪裁得到的第二图像不进行旋转，直接经缩放、编码后在可旋转显示设备上显示，显示结果403如图5所示，在图5中左上角(以用户视角)为渲染原点。
应当理解，图4中示出了第一图像与剪裁区域的宽高比不一致的情形，但本实施例并不限于此。在一些实施例中，第一图像的宽高比与预览分辨率可相同，例如均为16：9，此时，可不对第一图像进行剪裁，将第一图像缩放、编码后可在可旋转显示设备显示。本实施例对此不作限定。
图6示出了图3所示的状态下摄像头采集的图像与剪裁图像的示意图。参考图3和图6所示，可旋转电视设备处于竖屏状态，摄像头位于可旋转设备的右侧(以用户视角)，摄像头的坐标系与可旋转显示设备的坐标系成90°关系。摄像头采集的第一图像601分辨率为M*N，图6中第一图像601左上角为摄像头坐标系的原点。与图4相比，由于摄像头的旋转角度为90°，第一图像601左上角为摄像头的坐标系的原点，第一图像601中的对象与第一图像401中的对象存在90°关系，如图6所示，图像中的人物存在90°关系，第一图像601旋转90°后对应于第一图像401的状态。在第一图像601上按照可旋转显示设备的预览分辨率进行剪裁。由于可旋转显示设备处于竖屏状态，预览分辨率由1920*1080变为1080*1920，宽高比为9：16。在图2和图3中可旋转显示设备的渲染坐标系均为左上角(以用户视角)。在第一图像601上进行居中剪裁，剪裁区域602如图6所示，剪裁区域602的宽高比与预览分辨率的宽高比成对调关系，以使得剪裁得到的图像经旋转后与预览分辨率相适配。此时，剪裁区域602的宽高比为16：9，剪裁区域602所示的区域即为第二图像。第二图像进行90°旋转得到第三图像603，对第三图像603进行缩放后在可旋转显示设备显示，显示结果604如图7所示，在图7中左上角(以用户视角)为渲染原点。与图5相比，渲染原点对应于可旋转设备的不同顶点。
参考图7所示，在竖屏状态下，经过剪裁、旋转和缩放，可旋转显示设备显示的图像中对象(人物)具有正确的形态，与图5相比，图像中人物具有相同的状态。
上述图4至图7中以居中剪裁(即剪裁中心为摄像头采集的图像的中心)为例进行了示例性说明。其他剪裁方式，在此不作赘述。例如，人像居中剪裁，可以图4或6中任意人像为中心，剪裁得到人像居中的图像。
本公开实施例还提供了一种图像处理装置。
图8示出了根据本公开示例性实施例的图像处理装置的示意性框图，如图8所示，图像处理装置包括：
接收模块810，用于接收所述可旋转显示设备发送的预览分辨率和旋转角度；
获取模块820，用于获取光学图像传感器采集的第一图像；
剪裁模块830，与接收模块810相连，用于根据所述预览分辨率剪裁所述第一图像得到第二图像；
旋转模块840，与接收模块810和剪裁模块830相连，用于根据旋转角度旋转第二图像得到第三图像；
缩放模块850，与接收模块810和旋转模块840相连，用于根据预览分辨率缩放第三图像得到第四图像；
编码模块860，与缩放模块850相连，用于对第四图像进行编码得到第五图像；
发送模块870，与编码模块860相连，用于向可旋转显示设备发送第五图像，以在可旋转显示设备显示。
在一些可能的实施方式中，接收模块810，还用于获取剪裁模式，其中，剪裁模式配置剪裁中心。剪裁模块830，用于根据剪裁模式确定剪裁中心，确定与预览分辨率对应的剪裁区域大小，按照剪裁中心和剪裁区域大小剪裁第一图像得到第二图像。
在一些可能的实施方式中，剪裁模式为中心剪裁，剪裁模块830，用于确定与预览分辨率对应的剪裁区域大小；以第一图像的中心为中心，按照剪裁区域大小剪裁第一图像得到第二图像。
在一些可能的实施方式中，还包括：检测模块，用于检测第一图像中是否包含人像；剪裁模块830，用于在第一图像中包括人像时，以人像为中心，按照预览分辨率对应的剪裁区域大小剪裁第一图像得到第二图像。
在一些可能的实施方式中，剪裁模块830，用于根据预览分辨率剪裁第一图像得到第二图像之后，将第二图像缓存至第一缓存区。旋转模块840，用于从第一缓存区读取第二图像，以及根据旋转角度旋转所述第二图像得到第三图像之后，将第三图像缓存至第二缓存区。缩放模块，用于从第二缓存区读取第三图像。
在一些可能的实施方式中，可旋转显示设备的初始角度为0°，旋转角度包括相对于所述初始角度的90°、180°或270°。
在一些可能的实施方式中，在旋转角度为90°或270°时，第二图像的宽高比与预览分辨率的宽高比对调；在旋转角度为180°时，第二图像的宽高比与所述预览分辨率的宽高比相匹配。
本公开实施例还提供了一种摄像头。摄像头，包括：光学图像传感器；处理器；以及存储程序的存储器，其中，所述程序包括指令，所述指令在由所述处理器执行时使所述处理器执行本公开的图像处理方法。
本公开实施例还提供了一种显示系统，包括：可旋转显示设备；摄像头；摄像头，被配置为与可旋转显示设备连接且两者之间形成固定位置关系；可旋转显示设备，被配置为向所述摄像头发送旋转角度和预览分辨率，以及接收摄像头发送的图像，对所述图像进行解码并显示。
本公开示例性实施例还提供一种可旋转显示设备，包括：至少一个处理器；以及与至少一个处理器通信连接的存储器。所述存储器存储有能够被所述至少一个处理器执行的计算机程序，所述计算机程序在被所述至少一个处理器执行时用于使所述可旋转显示设备执行根据本公开实施例的方法。
本公开示例性实施例还提供一种存储有计算机程序的非瞬时计算机可读存储介质，其中，所述计算机程序在被计算机的处理器执行时用于使所述计算机执行根据本公开实施例的方法。
本公开示例性实施例还提供一种计算机程序产品，包括计算机程序，其中，所述计算机程序在被计算机的处理器执行时用于使所述计算机执行根据本公开实施例的方法。
参考图9，现将描述可以作为本公开的服务器或客户端的可旋转显示设备900的结构框图，其是可以应用于本公开的各方面的硬件设备的示例。可旋转显示设备旨在表示各种形式的数字电子的显示设备。本文所示的部件、它们的连接和关系、以及它们的功能仅仅作为示例，并且不意在限制本文中描述的和/或者要求的本公开的实现。
如图9所示，可旋转显示设备900包括计算单元901，其可以根据存储在只读存储器(ROM)902中的计算机程序或者从存储单元908加载到随机访问存储器(RAM)903中的计算机程序，来执行各种适当的动作和处理。在RAM 903中，还可存储设备900操作所需的各种程序和数据。计算单元901、ROM 902以及RAM 903通过总线904彼此相连。输入/输出(I/O)接口905也连接至总线904。
可旋转显示设备900中的多个部件连接至I/O接口905，包括：输入单元906、输出单元907、存储单元908以及通信单元909。输入单元906可以是能向可旋转显示设备900输入信息的任何类型的设备，输入单元906可以接收输入的数字或字符信息，以及产生与可旋转显示设备的用户设置和/或功能控制有关的键信号输入。输出单元907可以是能呈现信息的任何类型的设备，并且可以包括但不限于显示器、扬声器、视频/音频输出终端、振动器和/或打印机。存储单元908可以包括但不限于磁盘、光盘。通信单元909允许可旋转显示设备900通过诸如因特网的计算机网络和/或各种电信网络与其他设备交换信息/数据，并且可以包括但不限于调制解调器、网卡、红外通信设备、无线通信收发机和/或芯片组，例如蓝牙设备、WiFi设备、WiMax设备、蜂窝通信设备和/或类似物。
计算单元901可以是各种具有处理和计算能力的通用和/或专用处理组件。计算单元901的一些示例包括但不限于中央处理单元(CPU)、图形处理单元(GPU)、各种专用的人工智能(AI)计算芯片、各种运行机器学习模型算法的计算单元、数字信号处理器(DSP)、以及任何适当的处理器、控制器、微控制器等。计算单元901执行上文所描述的各个方法和处理。例如，在一些实施例中，与摄像头共同实现相机、视频通话等方法可被实现为计算机软件程序，其被有形地包含于机器可读介质，例如存储单元908。在一些实施例中，计算机程序的部分或者全部可以经由ROM 902和/或通信单元909而被载入和/或安装到可旋转显示设备900上。在一些实施例中，计算单元901可以通过其他任何适当的方式(例如，借助于固件)而被配置为执行与摄像头共同实现相机、视频通话等方法。
用于实施本公开的方法的程序代码可以采用一个或多个编程语言的任何组合来编写。这些程序代码可以提供给通用计算机、专用计算机或其他可编程数据处理装置的处理器或控制器，使得程序代码当由处理器或控制器执行时使流程图和/或框图中所规定的功能/操作被实施。程序代码可以完全在机器上执行、部分地在机器上执行，作为独立软件包部分地在机器上执行且部分地在远程机器上执行或完全在远程机器或服务器上执行。
在本公开的上下文中，机器可读介质可以是有形的介质，其可以包含或存储以供指令执行系统、装置或设备使用或与指令执行系统、装置或设备结合地使用的程序。机器可读介质可以是机器可读信号介质或机器可读储存介质。机器可读介质可以包括但不限于电子的、磁性的、光学的、电磁的、红外的、或半导体系统、装置或设备，或者上述内容的任何合适组合。机器可读存储介质的更具体示例会包括基于一个或多个线的电气连接、便携式计算机盘、硬盘、随机存取存储器(RAM)、只读存储器(ROM)、可擦除可编程只读存储器(EPROM或快闪存储器)、光纤、便捷式紧凑盘只读存储器(CD-ROM)、光学储存设备、磁储存设备、或上述内容的任何合适组合。
如本公开使用的，术语“机器可读介质”和“计算机可读介质”指的是用于将机器指令和/或数据提供给可编程处理器的任何计算机程序产品、设备、和/或装置(例如，磁盘、光盘、存储器、可编程逻辑装置(PLD))，包括，接收作为机器可读信号的机器指令的机器可读介质。术语“机器可读信号”指的是用于将机器指令和/或数据提供给可编程处理器的任何信号。
以上对本公开所提供一种摄像头的图像处理方法、装置及摄像头和显示系统进行了详细介绍，本文中应用了具体个例对本公开的原理及实施方式进行了阐述，以上实施例的说明只是用于帮助理解本公开的方法及其核心思想；同时，对于本领域的一般技术人员，依据本公开的思想，在具体实施方式及应用范围上均会有改变之处，综上所述，本说明书内容不应理解为对本公开的限制。

Claims (10)

1.一种摄像头的图像处理方法，其中，所述摄像头被配置为与可旋转显示设备连接且两者之间形成固定位置关系，其特征在于，所述方法包括：
接收所述可旋转显示设备发送的预览分辨率和旋转角度；
获取光学图像传感器采集的第一图像；
根据所述预览分辨率剪裁所述第一图像得到第二图像，其中，所述第二图像的宽高比基于所述旋转角度与所述预览分辨率的宽高比相匹配或对调；
根据所述旋转角度旋转所述第二图像得到第三图像，其中，所述第三图像的宽高比与所述预览分辨率的宽高比相匹配；
根据所述预览分辨率缩放所述第三图像得到第四图像；
对所述第四图像进行编码得到第五图像；
向所述可旋转显示设备发送所述第五图像，以在所述可旋转显示设备显示。
2.如权利要求1所述的图像处理方法，其特征在于，还包括：
获取剪裁模式，其中，所述剪裁模式配置剪裁中心；
其中，根据所述预览分辨率剪裁所述第一图像得到第二图像，包括：根据所述剪裁模式确定剪裁中心；确定与所述预览分辨率对应的剪裁区域大小；按照所述剪裁中心和所述剪裁区域大小剪裁所述第一图像得到第二图像。
3.如权利要求2所述的图像处理方法，其特征在于，所述剪裁模式为中心剪裁，根据所述剪裁模式和所述预览分辨率剪裁所述第一图像得到第二图像，包括：
确定与所述预览分辨率对应的剪裁区域大小；
以所述第一图像的中心为中心，按照所述剪裁区域大小剪裁所述第一图像得到第二图像。
4.如权利要求1所述的图像处理方法，其特征在于，还包括：
检测所述第一图像中是否包含人像；
在所述第一图像中包括所述人像时，以所述人像为中心，按照所述预览分辨率对应的剪裁区域大小剪裁所述第一图像得到第二图像。
5.如权利要求1所述的图像处理方法，其特征在于：
根据所述预览分辨率剪裁所述第一图像得到第二图像之后，还包括：将所述第二图像缓存至第一缓存区；
根据所述旋转角度旋转所述第二图像得到第三图像之前，还包括：从所述第一缓存区读取所述第二图像；
根据所述旋转角度旋转所述第二图像得到第三图像之后，还包括：将所述第三图像缓存至第二缓存区；
根据所述预览分辨率缩放所述第三图像得到第四图像之前，还包括：从所述第二缓存区读取所述第三图像。
6.如权利要求1所述的图像处理方法，其特征在于，所述可旋转显示设备的初始角度为0°，所述旋转角度包括相对于所述初始角度的90°、180°或270°。
7.如权利要求6所述的图像处理方法，其特征在于，
在所述旋转角度为90°或270°时，所述第二图像的宽高比与所述预览分辨率的宽高比对调；
在所述旋转角度为180°时，所述第二图像的宽高比与所述预览分辨率的宽高比相匹配。
8.一种图像处理装置，其特征在于，包括：
接收模块，用于接收所述可旋转显示设备发送的预览分辨率和旋转角度；
获取模块，用于获取光学图像传感器采集的第一图像；
剪裁模块，用于根据所述预览分辨率剪裁所述第一图像得到第二图像，其中，所述第二图像的宽高比基于所述旋转角度与所述预览分辨率的宽高比相匹配或对调；
旋转模块，用于根据所述旋转角度旋转所述第二图像得到第三图像，其中，所述第三图像的宽高比与所述预览分辨率的宽高比相匹配；
缩放模块，用于根据所述预览分辨率缩放所述第三图像得到第四图像；
编码模块，用于对所述第四图像进行编码得到第五图像；
发送模块，用于向所述可旋转显示设备发送所述第五图像，以在所述可旋转显示设备显示。
9.一种摄像头，其特征在于，包括：
光学图像传感器；
处理器；以及
存储程序的存储器，
其中，所述程序包括指令，所述指令在由所述处理器执行时使所述处理器执行根据权利要求1-7中任一项所述的方法。
10.一种显示系统，其特征在于，包括：
可旋转显示设备；
根据权利要求9所述的摄像头；
所述摄像头，被配置为与所述可旋转显示设备连接且两者之间形成固定位置关系；
所述可旋转显示设备，被配置为向所述摄像头发送旋转角度和预览分辨率，以及接收所述摄像头发送的图像，对所述图像进行解码并显示。
CN202210533106.2A 2022-05-16 2022-05-16 摄像头的图像处理方法、装置及摄像头和显示系统 Pending CN114938469A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN202210533106.2A CN114938469A (zh) 2022-05-16 2022-05-16 摄像头的图像处理方法、装置及摄像头和显示系统

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN202210533106.2A CN114938469A (zh) 2022-05-16 2022-05-16 摄像头的图像处理方法、装置及摄像头和显示系统

Publications (1)

Publication Number Publication Date
CN114938469A true CN114938469A (zh) 2022-08-23

Family

ID=82865162

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202210533106.2A Pending CN114938469A (zh) 2022-05-16 2022-05-16 摄像头的图像处理方法、装置及摄像头和显示系统

Country Status (1)

Country Link
CN (1) CN114938469A (zh)

Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20130016122A1 (en) * 2011-07-12 2013-01-17 Apple Inc. Multifunctional Environment for Image Cropping
CN104065999A (zh) * 2014-06-11 2014-09-24 四川政企网络信息服务有限公司 可实现图像旋转的图像处理组件及方法
CN106303571A (zh) * 2016-08-29 2017-01-04 武汉斗鱼网络科技有限公司 图像采集过程中实现自适应屏幕旋转的方法及系统
CN108614634A (zh) * 2016-12-09 2018-10-02 北京视联动力国际信息技术有限公司 一种移动设备显示屏幕旋转的方法和移动设备
CN114222188A (zh) * 2021-12-28 2022-03-22 深圳小湃科技有限公司 基于旋转屏的全屏显示方法、装置、设备及存储介质
CN114285985A (zh) * 2021-08-06 2022-04-05 海信视像科技股份有限公司 一种摄像头预览方向的确定方法及显示设备
CN114285986A (zh) * 2021-08-06 2022-04-05 海信视像科技股份有限公司 一种摄像头拍摄图像的方法及显示设备

Patent Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20130016122A1 (en) * 2011-07-12 2013-01-17 Apple Inc. Multifunctional Environment for Image Cropping
CN104065999A (zh) * 2014-06-11 2014-09-24 四川政企网络信息服务有限公司 可实现图像旋转的图像处理组件及方法
CN106303571A (zh) * 2016-08-29 2017-01-04 武汉斗鱼网络科技有限公司 图像采集过程中实现自适应屏幕旋转的方法及系统
CN108614634A (zh) * 2016-12-09 2018-10-02 北京视联动力国际信息技术有限公司 一种移动设备显示屏幕旋转的方法和移动设备
CN114285985A (zh) * 2021-08-06 2022-04-05 海信视像科技股份有限公司 一种摄像头预览方向的确定方法及显示设备
CN114285986A (zh) * 2021-08-06 2022-04-05 海信视像科技股份有限公司 一种摄像头拍摄图像的方法及显示设备
CN114222188A (zh) * 2021-12-28 2022-03-22 深圳小湃科技有限公司 基于旋转屏的全屏显示方法、装置、设备及存储介质

Similar Documents

Publication Publication Date Title
EP3198866B1 (en) Reconstruction of three-dimensional video
US11531458B2 (en) Video enhancement control method, electronic apparatus and storage medium
CN106803884B (zh) 图像处理装置
EP2991339B1 (en) Photographing method and electronic device
AU2012352520B2 (en) Multiple-angle imagery of physical objects
KR20110091378A (ko) 카메라 동영상 처리 및 재생 방법 및 장치
JP6026443B2 (ja) ビデオ・ビットストリーム中の描画方向情報
US10235795B2 (en) Methods of compressing a texture image and image data processing system and methods of generating a 360 degree panoramic video thereof
US9420156B2 (en) Imaging control system, control apparatus, control method, and storage medium
US20150271401A1 (en) Receiver-controlled panoramic view video share
CN110139040B (zh) 云台摄像机定位的方法、装置、云台摄像机、设备及介质
CN101150645A (zh) 一种图像处理的方法及图像处理装置
CN115514897B (zh) 一种处理图像的方法和装置
JP2010124381A (ja) 監視システム
CN110874809A (zh) 图像处理方法及装置、电子设备和存储介质
CN111726666A (zh) 视频显示控制方法和装置
CN114222188A (zh) 基于旋转屏的全屏显示方法、装置、设备及存储介质
CN112927163A (zh) 图像数据增强方法、装置、电子设备及存储介质
US20140002695A1 (en) Image processing apparatus, image relaying apparatus, method for processing image, and method for relaying image
WO2017024954A1 (zh) 图像显示方法及装置
CN114938469A (zh) 摄像头的图像处理方法、装置及摄像头和显示系统
CN109361888B (zh) 通话背景的调整方法和装置、视频通话设备及存储介质
CN112367552B (zh) 一种图像变形适配方法和装置
US20220060801A1 (en) Panoramic Render of 3D Video
CN112269886B (zh) 共享图像采集方法、窗口共享方法和共享图像采集装置

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination