CN112367552A - 一种图像变形适配方法和装置 - Google Patents

一种图像变形适配方法和装置 Download PDF

Info

Publication number
CN112367552A
CN112367552A CN202011456034.3A CN202011456034A CN112367552A CN 112367552 A CN112367552 A CN 112367552A CN 202011456034 A CN202011456034 A CN 202011456034A CN 112367552 A CN112367552 A CN 112367552A
Authority
CN
China
Prior art keywords
image
deformation
deformation adaptation
frequency
adaptation processing
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN202011456034.3A
Other languages
English (en)
Other versions
CN112367552B (zh
Inventor
吴迪
黄思远
孙晔
李磊
邹烈
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Samsung Electronics China R&D Center
Samsung Electronics Co Ltd
Original Assignee
Samsung Electronics China R&D Center
Samsung Electronics Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Samsung Electronics China R&D Center, Samsung Electronics Co Ltd filed Critical Samsung Electronics China R&D Center
Publication of CN112367552A publication Critical patent/CN112367552A/zh
Priority to PCT/KR2021/018652 priority Critical patent/WO2022124822A1/en
Application granted granted Critical
Publication of CN112367552B publication Critical patent/CN112367552B/zh
Priority to US18/199,127 priority patent/US20230289918A1/en
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T3/00—Geometric image transformations in the plane of the image
    • G06T3/18—Image warping, e.g. rearranging pixels individually
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/431—Generation of visual interfaces for content selection or interaction; Content or additional data rendering
    • H04N21/4312—Generation of visual interfaces for content selection or interaction; Content or additional data rendering involving specific graphical features, e.g. screen layout, special fonts or colors, blinking icons, highlights or animations
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/44—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs
    • H04N21/4402—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs involving reformatting operations of video signals for household redistribution, storage or real-time display
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T3/00—Geometric image transformations in the plane of the image
    • G06T3/40—Scaling of whole images or parts thereof, e.g. expanding or contracting
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T3/00—Geometric image transformations in the plane of the image
    • G06T3/60—Rotation of whole images or parts thereof
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/44—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs
    • H04N21/4402—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs involving reformatting operations of video signals for household redistribution, storage or real-time display
    • H04N21/440263—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs involving reformatting operations of video signals for household redistribution, storage or real-time display by altering the spatial resolution, e.g. for displaying on a connected PDA
    • H04N21/440272—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs involving reformatting operations of video signals for household redistribution, storage or real-time display by altering the spatial resolution, e.g. for displaying on a connected PDA for performing aspect ratio conversion
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/47—End-user applications
    • H04N21/472—End-user interface for requesting content, additional data or services; End-user interface for interacting with content, e.g. for content reservation or setting reminders, for requesting event notification, for manipulating displayed content
    • H04N21/47205—End-user interface for requesting content, additional data or services; End-user interface for interacting with content, e.g. for content reservation or setting reminders, for requesting event notification, for manipulating displayed content for manipulating displayed content, e.g. interacting with MPEG-4 objects, editing locally
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00—Details of television systems
    • H04N5/222—Studio circuitry; Studio devices; Studio equipment
    • H04N5/262—Studio circuits, e.g. for mixing, switching-over, change of character of image, other special effects ; Cameras specially adapted for the electronic generation of special effects
    • H04N5/2628—Alteration of picture size, shape, position or orientation, e.g. zooming, rotation, rolling, perspective, translation

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • Databases & Information Systems (AREA)
  • Human Computer Interaction (AREA)
  • Controls And Circuits For Display Device (AREA)

Abstract

本申请公开了一种图像变形适配方法和装置，包括：在显示设备旋转过程中，对于每个变形适配处理时刻需要显示的图像，采用先旋转后剪裁的方式，对所述图像进行处理，并在所述变形适配处理时刻显示所述处理得到的图像；其中，图像的旋转角度为所述显示设备当前旋转的角度；所述变形适配处理时刻基于预设的变形适配处理频率确定，所述变形适配处理频率基于当前的屏幕刷新频率降频得到。采用本发明，能够使得显示设备旋转过程中所显示的画面与用户的视角相匹配，从而可以有效提高用户观看体验。

Description

一种图像变形适配方法和装置
技术领域
本发明涉及计算机技术领域，特别是涉及一种图像变形适配方法和装置。
背景技术
传统的视频显示方案，通常是采用横向构图的方式，在显示设备上显示视频画面。但是，随着智能手机的普及，在智能手机所支持的竖向持握方式下，获得的竖向构图视频越来越多。例如，像当下流行的很多视频社交网站上，基本播放的视频都是竖向构图的视频。这种横向视频和竖向视频同时存在的现状，对传统的显示设备也提出了更多的要求，可旋转的显示设备由此诞生，比如可旋转的TV。
发明人在实现本发明的过程中发现，现有的可旋转显示设备存在：旋转过程中所显示的画面内容会随着显示器的旋转而旋转的问题。即，在旋转过程中所显示的画面会随着显示器的旋转而不断地倾斜，这样，在显示设备旋转过程中，用户将会不由自主地随着画面的倾斜而歪着头观看画面，从而会降低用户的视频观看体验，尤其是大型的显示设备(如可旋转电视)旋转时由于旋转时长较为明显，旋转过程中观看体验不佳的问题更为明显。
发明内容
有鉴于此，本发明的主要目的在于提供一种图像变形适配方法和装置，可以提高显示设备旋转过程中的用户观看体验。
为了达到上述目的，本发明提出的技术方案为：
一种图像变形适配方法，包括：
在显示设备旋转过程中，对于每个变形适配处理时刻需要显示的图像，采用先旋转后剪裁的方式，对所述图像进行处理，并在所述变形适配处理时刻显示所述处理得到的图像；
其中，图像的旋转角度与所述显示设备在相应时刻的旋转角度相同，且图像的旋转方向与所述显示设备的旋转方向相反；所述变形适配处理时刻基于预设的变形适配处理频率确定，所述变形适配处理频率基于当前的屏幕刷新频率降频得到。
在一个实施方式中，所述对于每个变形适配处理时刻需要显示的图像，采用先旋转后剪裁的方式，对所述图像进行处理包括：
在显示设备旋转过程中的每个变形适配处理时刻t，根据预设的变形适配处理频率，确定下一个变形适配处理时刻t+1；
获取在所述时刻t+1需要显示的图像Pt+1；
根据所述显示设备当前的旋转角度和旋转角速度，预测所述显示设备在所述时刻t+1对应的旋转角度θ；
根据所述旋转角度θ、所述图像Pt+1的宽w和所述图像Pt+1的高h，计算第一尺寸规格；
根据预设的图像缩放比例r，对所述图像Pt+1进行缩放处理，得到图像P't+1；
将所述图像P't+1，转换为所述第一尺寸规格的图像；
按照所述旋转角度θ，采用与所述显示设备相反的旋转方向，旋转所述转换得到的图像；
对所述旋转得到的图像进行剪裁，得到具有第二尺寸规格的图像。
在一个实施方式中，所述将所述图像P't+1，转换为第一尺寸规格的图像包括：
将所述图像P't+1置于画面的中心区域；所述画面具有所述第一尺寸规格；
如果当前所述画面中存在空白区域，则对所述空白区域进行填充，得到具有所述第一尺寸规格的图像。
在一个实施方式中，所述计算第一尺寸规格包括：
按照
Figure BDA0002828433460000031
计算所述第一尺寸规格的宽W1；
按照
Figure BDA0002828433460000032
计算所述第一尺寸规格的高H1；
其中，α＝tan-1(h/w)。
在一个实施方式中，所述对所述旋转得到的图像进行剪裁，得到具有第二尺寸规格的图像包括：
根据预设的剪裁策略，确定当前的剪裁中心；
根据所述剪裁中心，以所述第二尺寸规格作为图像剪裁尺寸，对所述旋转后的图像进行剪裁。
在一个实施方式中，所述剪裁策略为以图像中心为剪裁中心；或者，根据预设的重点区域检测策略，检测视频帧的图像的重点区域，将所述重点区域作为剪裁中心。
在一个实施方式中，所述第二尺寸规格的宽为所述w，所述第二尺寸规格的高为所述h。
在一个实施方式中，所述方法进一步包括：
当所述显示设备检测到用户的显示方向切换请求时，判定当前需要旋转所述显示设备，并触发执行相应的显示设备旋转过程。
在一个实施方式中，所述方法进一步包括：
对于当前需要显示的每帧图像，判断当前所述显示设备的显示方向与当前经过T时间后需要显示的相应帧图像的图像显示方向是否一致，如果不一致，则判定需要旋转所述显示设备，并触发相应的旋转过程；所述T为所述显示设备完成所述旋转过程需要的时间。
在一个实施方式中，所述变形适配处理频率预先按照f1＝max(f0×a,b)得到；其中，f1为所述变形适配处理频率；f0为当前的屏幕刷新频率；所述a为预设的降频系数，0<a<1；所述b为预设的最小变形适配处理频率。
一种图像变形适配装置，包括：
变形处理模块，用于在显示设备旋转过程中，对于每个变形适配处理时刻需要显示的图像，采用先旋转后剪裁的方式，对所述图像进行处理；
显示模块，用于在每个所述变形适配处理时刻，显示该时刻对应的所述处理结果；
其中，图像的旋转角度与所述显示设备在相应时刻的旋转角度相同，且图像的旋转方向与所述显示设备的旋转方向相反；所述变形适配处理时刻基于预设的变形适配处理频率确定，所述变形适配处理频率基于当前的屏幕刷新频率降频得到。
本申请还公开了一种图像变形适配设备，包括处理器和存储器；
所述存储器中存储有可被所述处理器执行的应用程序，用于使得所述处理器执行如上所述的图像变形适配方法。
本申请还公开了一种计算机可读存储介质，其中存储有计算机可读指令，该计算机可读指令用于执行如上所述的图像变形适配方法。
由上述技术方案可见，本发明提出的图像变形适配方法和装置，在显示设备旋转过程中，对于每个变形适配处理时刻需要显示的图像，根据显示设备当前旋转的角度，对其进行处理后再显示所述处理得到的图像；且所述变形适配处理时刻基于预设的变形适配处理频率确定，所述变形适配处理频率基于当前的屏幕刷新频率降频得到。如此，可以使得显示设备旋转过程中所显示的画面与用户的视角相匹配，从而有效提高了用户观看体验。
附图说明
图1为本发明实施例的图像变形适配方法流程示意图；
图2为在显示设备旋转过程应用本发明实施例的效果示意图；
图3为本发明实施例的图像变形适配装置结构示意图。
具体实施方式
为使本发明的目的、技术方案和优点更加清楚，下面将结合附图及具体实施例对本发明作进一步地详细描述。
图1为本发明实施例的图像变形适配方法流程示意图，如图1所示，该实施例实现的图像变形适配方法，主要包括：
步骤101、在显示设备旋转过程中，对于每个变形适配处理时刻需要显示的图像，采用先旋转后剪裁的方式，对所述图像进行处理。
其中，图像的旋转角度与所述显示设备在相应时刻的旋转角度相同，且图像的旋转方向与所述显示设备的旋转方向相反。
所述变形适配处理时刻基于预设的变形适配处理频率确定。
所述变形适配处理频率基于当前的屏幕刷新频率降频得到，如此，通过基于当前的屏幕刷新频率进行降频确定变形适配处理时刻，使得图像的显示频率和屏幕刷新频率相匹配，一方面使得图像的更新频率不会太高，有效减少了处理开销，另一方面可以获得平滑过渡显示效果，使得图像的显示符合用户视觉需求，从而可以提高用户的图像观看体验。
步骤101中，在显示设备旋转过程中，在每个变形适配处理时刻显示图像之前，需要先对该图像进行变形处理，即，采用先旋转后剪裁的方式，对所述图像进行处理，以使得每个变形适配处理时刻所显示的图像不会随着显示设备的旋转而旋转，而是与显示设备正立时所显示的图像在水平方向保持一致，从而使得显示设备所显示的画面与用户视角相匹配，进而可以有效提高用户观看体验。
在一个实施方式中，所述变形适配处理频率可以按照f1＝max(f0×a,b)得到。
其中，f1为所述变形适配处理频率。
f0为当前的屏幕刷新频率。
所述a为预设的降频系数，0<a<1。具体可以由本领域技术人员根据实际需要设置，例如，可以设置为a＝1/2、a＝1/3。
所述b为预设的最小变形适配处理频率。具体可以由本领域技术人员根据实际需要设置，例如，可以设置为30HZ。
公式f1＝max(f0×a,b)表示从f0×a和b中选择最大值作为f1，如此，可以确保f1的最小值为最小变形适配处理频率。
步骤102、在所述变形适配处理时刻显示所述处理得到的图像。
本步骤中，将在每个变形适配处理时刻显示经过变形适配处理的图像，以使得显示设备旋转过程中所显示的画面始终与用户的视角相匹配。
在一个实施方式中，步骤101中可以采用下述步骤，对于每个变形适配处理时刻需要显示的图像，采用先旋转后剪裁的方式，对所述图像进行处理：
步骤x1、在显示设备旋转过程中的每个变形适配处理时刻t，根据预设的变形适配处理频率，确定下一个变形适配处理时刻t+1。
本步骤，将在变形适配处理时刻t，根据当前的变形适配处理频率，来确定下一个变形适配处理时刻t+1，以便进一步获取下一个变形适配处理时刻t+1的图像，并进行变形处理，从而使得变形适配处理时刻t+1所显示的图像是经过变形适配处理后的图像，以确保变形适配处理时刻t+1所显示的图像与显示设备正立时所显示的图像在水平方向保持一致。
步骤x2、获取在所述时刻t+1需要显示的图像Pt+1。
步骤x3、根据所述显示设备当前的旋转角度和旋转角速度，预测所述显示设备在所述时刻t+1对应的旋转角度θ。
步骤x4、根据所述旋转角度θ、所述图像Pt+1的宽w和所述图像Pt+1的高h，计算第一尺寸规格。
在一个实施方式中，步骤x4具体可以采用下述方法计算第一尺寸规格包括：
步骤x41、按照
Figure BDA0002828433460000071
计算所述第一尺寸规格的宽W1；
步骤x42、按照
Figure BDA0002828433460000072
计算所述第一尺寸规格的高H1；
其中，α＝tan-1(h/w)。
步骤x5、根据预设的图像缩放比例r，对所述图像Pt+1进行缩放处理，得到图像P't+1。
步骤x6、将所述图像P't+1，转换为所述第一尺寸规格的图像。
在一个实施方式中，步骤x6具体可以采用下述方法将所述图像P't+1，转换为第一尺寸规格的图像：
步骤x61、将所述图像P't+1置于画面的中心区域；所述画面具有所述第一尺寸规格。
步骤x62、如果当前所述画面中存在空白区域，则对所述空白区域进行填充，得到具有所述第一尺寸规格的图像。
这里，具体的填充方法可以采用平铺或者高斯模糊填充，本发明实施例不做限制。
步骤x7、按照所述旋转角度θ，采用与所述显示设备相反的旋转方向，旋转所述转换得到的图像。
本步骤中，通过对步骤x6得到的第一尺寸规格的图像进行与显示设备的旋转方向相反的方向旋转，可以使得图像的显示效果与显示平面方向始终一致，从而使得显示设备旋转过程中所显示的画面与用户的视角相匹配，进而可以有效提高用户观看体验。
步骤x8、对所述旋转得到的图像进行剪裁，得到具有第二尺寸规格的图像。
在一个实施方式中，步骤x8具体可以采用下述方法对所述旋转得到的图像进行剪裁，得到具有第二尺寸规格的图像：
步骤x81、根据预设的剪裁策略，确定当前的剪裁中心。
步骤x82、根据所述剪裁中心，以所述第二尺寸规格作为图像剪裁尺寸，对所述旋转后的图像进行剪裁。
在一个实施方式中，为了最大程度地确保显示出图像的主要内容，上述剪裁策略可以为以图像中心为剪裁中心；或者，根据预设的重点区域检测策略，检测视频帧的图像的重点区域，将所述重点区域作为剪裁中心。
在一个实施方式中，所述第二尺寸规格可以与图像的原始大小一致，即第二尺寸规格的宽为所述w，所述第二尺寸规格的高为所述h。
进一步地，在实际应用中，显示设备的旋转可以采用多种触发机制。
例如，在一个实施方式中，显示设备可以根据用户的显示方向切换请求，触发设备进行相应的旋转，即：
当所述显示设备检测到用户的显示方向切换请求时，判定当前需要旋转所述显示设备，并触发执行相应的显示设备旋转过程。
较佳地，考虑到的实际应用中，一段视频可能同时存在横屏方向和竖屏方向的视频帧，为了获得更好地视频显示效果，在一个实施方式中，显示设备可以采用下述方法自动触发执行相应的旋转：
对于当前需要显示的每帧图像，判断当前所述显示设备的显示方向与当前经过T时间后需要显示的相应帧图像的图像显示方向是否一致，如果不一致，则判定需要旋转所述显示设备，并触发相应的旋转过程；所述T为所述显示设备完成所述旋转过程需要的时间。
通过上述方法，在每显示一帧图像时，需要判断相应的时间T后帧的图像显示方向是否与当前所述显示设备的显示方向一致，如此，可以及时检测到不同显示方向的帧，并触发显示设备的显示方向的切换，从而可以使得显示设备的显示方向能够与待显示的帧图像的显示方向相匹配，因此，可以进一步实现视频播放过程中视频显示方向的自适应，确保在显示设备的显示方向切换过程中所显示的图像效果不受显示设备旋转的影响，有效提高了视频播放效果。
上述显示设备的显示方向包括横屏方向(简称横向)和竖屏方向(简称竖向)两种。
在实际应用中，对于一个视频帧而言，其图像显示方向的判断可以采用现有方法实现，具体说明如下：
解析获得视频帧的宽w、高h以及旋转角度δ信息，当δ为0度或者180度时，如果w>h，则显示方向为横屏方向，否则，为竖屏方向；当δ为90度或者270度时，如果w>h，则显示方向为竖屏方向，否则，为横屏方向。
通过上述方法实施例可以看出，上述方案通过匹配视频方向与设备显示方向，自动切换显示设备的显示方向，并在显示方向切换过程中，通过对显示图像的缩放，填充，旋转和剪裁处理，使得视频内容与显示平面方向始终合一，平滑过渡显示效果，并且在无黑色区域的情况下尽可能将视频中原有图像信息全部显示，提高用户的观看体验。图2给出了将上述方法实施例应用于显示设备旋转过程中的效果示意图，简单起见，假设旋转过程中所显示的图像内容保持不变，从图2可以看出在显示设备旋转过程中所显示的内容始终是与用户视角一致的，即无论显示设备是否水平，所显示的“AA”都是水平的。
与上述方法实施例相对应，本申请还提供了一种图像变形适配装置。图3为该实施例的图像变形适配装置结构示意图，如图3所示，该装置包括：
变形处理模块301，用于在显示设备旋转过程中，对于每个变形适配处理时刻需要显示的图像，采用先旋转后剪裁的方式，对所述图像进行处理。
显示模块302，用于在每个所述变形适配处理时刻，显示该时刻对应的所述处理结果。
其中，图像的旋转角度与所述显示设备在相应时刻的旋转角度相同，且图像的旋转方向与所述显示设备的旋转方向相反；所述变形适配处理时刻基于预设的变形适配处理频率确定，所述变形适配处理频率基于当前的屏幕刷新频率降频得到。
与上述方法实施例相对应，本申请还公开了一种图像变形适配设备，包括处理器和存储器；
所述存储器中存储有可被所述处理器执行的应用程序，用于使得所述处理器执行如上所述的图像变形适配方法。
其中，存储器具体可以实施为电可擦可编程只读存储器(EEPROM)、快闪存储器(Flash memory)、可编程程序只读存储器(PROM)等多种存储介质。处理器可以实施为包括一或多个中央处理器或一或多个现场可编程门阵列，其中现场可编程门阵列集成一或多个中央处理器核。具体地，中央处理器或中央处理器核可以实施为CPU或MCU。
需要说明的是，上述各流程和各结构图中不是所有的步骤和模块都是必须的，可以根据实际的需要忽略某些步骤或模块。各步骤的执行顺序不是固定的，可以根据需要进行调整。各模块的划分仅仅是为了便于描述采用的功能上的划分，实际实现时，一个模块可以分由多个模块实现，多个模块的功能也可以由同一个模块实现，这些模块可以位于同一个设备中，也可以位于不同的设备中。
各实施方式中的硬件模块可以以机械方式或电子方式实现。例如，一个硬件模块可以包括专门设计的永久性电路或逻辑器件(如专用处理器，如FPGA或ASIC)用于完成特定的操作。硬件模块也可以包括由软件临时配置的可编程逻辑器件或电路(如包括通用处理器或其它可编程处理器)用于执行特定操作。至于具体采用机械方式，或是采用专用的永久性电路，或是采用临时配置的电路(如由软件进行配置)来实现硬件模块，可以根据成本和时间上的考虑来决定。
本发明还提供了一种机器可读的存储介质，存储用于使一机器执行如本申请所述方法的指令。具体地，可以提供配有存储介质的系统或者装置，在该存储介质上存储着实现上述实施例中任一实施方式的功能的软件程序代码，且使该系统或者装置的计算机(或CPU或MPU)读出并执行存储在存储介质中的程序代码。此外，还可以通过基于程序代码的指令使计算机上操作的操作系统等来完成部分或者全部的实际操作。还可以将从存储介质读出的程序代码写到插入计算机内的扩展板中所设置的存储器中或者写到与计算机相连接的扩展单元中设置的存储器中，随后基于程序代码的指令使安装在扩展板或者扩展单元上的CPU等来执行部分和全部实际操作，从而实现上述实施方式中任一实施方式的功能。
用于提供程序代码的存储介质实施方式包括软盘、硬盘、磁光盘、光盘(如CD-ROM、CD-R、CD-RW、DVD-ROM、DVD-RAM、DVD-RW、DVD+RW)、磁带、非易失性存储卡和ROM。可选择地，可以由通信网络从服务器计算机或云上下载程序代码。
在本文中，“示意性”表示“充当实例、例子或说明”，不应将在本文中被描述为“示意性”的任何图示、实施方式解释为一种更优选的或更具优点的技术方案。为使图面简洁，各图中的只示意性地表示出了与本发明相关部分，而并不代表其作为产品的实际结构。另外，以使图面简洁便于理解，在有些图中具有相同结构或功能的部件，仅示意性地绘示了其中的一个，或仅标出了其中的一个。在本文中，“一个”并不表示将本发明相关部分的数量限制为“仅此一个”，并且“一个”不表示排除本发明相关部分的数量“多于一个”的情形。在本文中，“上”、“下”、“前”、“后”、“左”、“右”、“内”、“外”等仅用于表示相关部分之间的相对位置关系，而非限定这些相关部分的绝对位置。
以上所述，仅为本发明的较佳实施例而已，并非用于限定本发明的保护范围。凡在本发明的精神和原则之内，所作的任何修改、等同替换、改进等，均应包含在本发明的保护范围之内。

Claims (13)

1.一种图像变形适配方法，其特征在于，包括：
在显示设备旋转过程中，对于每个变形适配处理时刻需要显示的图像，采用先旋转后剪裁的方式，对所述图像进行处理，并在所述变形适配处理时刻显示所述处理得到的图像；
其中，图像的旋转角度与所述显示设备在相应时刻的旋转角度相同，且图像的旋转方向与所述显示设备的旋转方向相反；所述变形适配处理时刻基于预设的变形适配处理频率确定，所述变形适配处理频率基于当前的屏幕刷新频率降频得到。
2.根据权利要求1所述的方法，其特征在于，所述对于每个变形适配处理时刻需要显示的图像，采用先旋转后剪裁的方式，对所述图像进行处理包括：
在显示设备旋转过程中的每个变形适配处理时刻t，根据预设的变形适配处理频率，确定下一个变形适配处理时刻t+1；
获取在所述时刻t+1需要显示的图像Pt+1；
根据所述显示设备当前的旋转角度和旋转角速度，预测所述显示设备在所述时刻t+1对应的旋转角度θ；
根据所述旋转角度θ、所述图像Pt+1的宽w和所述图像Pt+1的高h，计算第一尺寸规格；
根据预设的图像缩放比例r，对所述图像Pt+1进行缩放处理，得到图像P't+1；
将所述图像P't+1，转换为所述第一尺寸规格的图像；
按照所述旋转角度θ，采用与所述显示设备相反的旋转方向，旋转所述转换得到的图像；
对所述旋转得到的图像进行剪裁，得到具有第二尺寸规格的图像。
3.根据权利要求2所述的方法，其特征在于，所述将所述图像P't+1，转换为第一尺寸规格的图像包括：
将所述图像P't+1置于画面的中心区域；所述画面具有所述第一尺寸规格；
如果当前所述画面中存在空白区域，则对所述空白区域进行填充，得到具有所述第一尺寸规格的图像。
4.根据权利要求2所述的方法，其特征在于，所述计算第一尺寸规格包括：
按照
Figure FDA0002828433450000021
计算所述第一尺寸规格的宽W1；
按照
Figure FDA0002828433450000022
计算所述第一尺寸规格的高H1；其中，α＝tan-1(h/w)。
5.根据权利要求2所述的方法，其特征在于，所述对所述旋转得到的图像进行剪裁，得到具有第二尺寸规格的图像包括：
根据预设的剪裁策略，确定当前的剪裁中心；
根据所述剪裁中心，以所述第二尺寸规格作为图像剪裁尺寸，对所述旋转后的图像进行剪裁。
6.根据权利要求5所述的方法，其特征在于，所述剪裁策略为以图像中心为剪裁中心；或者，根据预设的重点区域检测策略，检测视频帧的图像的重点区域，将所述重点区域作为剪裁中心。
7.根据权利要求2所述的方法，其特征在于，所述第二尺寸规格的宽为所述w，所述第二尺寸规格的高为所述h。
8.根据权利要求1所述的方法，其特征在于，所述方法进一步包括：
当所述显示设备检测到用户的显示方向切换请求时，判定当前需要旋转所述显示设备，并触发执行相应的显示设备旋转过程。
9.根据权利要求1所述的方法，其特征在于，所述方法进一步包括：
对于当前需要显示的每帧图像，判断当前所述显示设备的显示方向与当前经过T时间后需要显示的相应帧图像的图像显示方向是否一致，如果不一致，则判定需要旋转所述显示设备，并触发相应的旋转过程；所述T为所述显示设备完成所述旋转过程需要的时间。
10.根据权利要求1所述的方法，其特征在于，所述变形适配处理频率预先按照f1＝max(f0×a,b)得到；其中，f1为所述变形适配处理频率；f0为当前的屏幕刷新频率；所述a为预设的降频系数，0<a<1；所述b为预设的最小变形适配处理频率。
11.一种图像变形适配装置，其特征在于，包括：
变形处理模块，用于在显示设备旋转过程中，对于每个变形适配处理时刻需要显示的图像，采用先旋转后剪裁的方式，对所述图像进行处理；
显示模块，用于在每个所述变形适配处理时刻，显示该时刻对应的所述处理结果；
其中，图像的旋转角度为所述显示设备当前旋转的角度；所述变形适配处理时刻基于预设的变形适配处理频率确定，所述变形适配处理频率基于当前的屏幕刷新频率降频得到。
12.一种图像变形适配设备，其特征在于，包括处理器和存储器；
所述存储器中存储有可被所述处理器执行的应用程序，用于使得所述处理器执行如权利要求1至10中任一项所述图像变形适配方法。
13.一种计算机可读存储介质，其特征在于,其中存储有计算机可读指令,该计算机可读指令用于执行如权利要求1至10中任一项所述图像变形适配方法。
CN202011456034.3A 2020-06-08 2020-12-10 一种图像变形适配方法和装置 Active CN112367552B (zh)

Priority Applications (2)

Application Number Priority Date Filing Date Title
PCT/KR2021/018652 WO2022124822A1 (en) 2020-06-08 2021-12-09 Image morphing adaption method and apparatus
US18/199,127 US20230289918A1 (en) 2020-06-08 2023-05-18 Image morphing adaption method and apparatus

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
CN202010511471.4A CN111683282A (zh) 2020-06-08 2020-06-08 一种图像变形适配方法和装置
CN2020105114714 2020-06-08

Publications (2)

Publication Number Publication Date
CN112367552A true CN112367552A (zh) 2021-02-12
CN112367552B CN112367552B (zh) 2023-04-14

Family

ID=72454939

Family Applications (2)

Application Number Title Priority Date Filing Date
CN202010511471.4A Pending CN111683282A (zh) 2020-06-08 2020-06-08 一种图像变形适配方法和装置
CN202011456034.3A Active CN112367552B (zh) 2020-06-08 2020-12-10 一种图像变形适配方法和装置

Family Applications Before (1)

Application Number Title Priority Date Filing Date
CN202010511471.4A Pending CN111683282A (zh) 2020-06-08 2020-06-08 一种图像变形适配方法和装置

Country Status (3)

Country Link
US (1) US20230289918A1 (zh)
CN (2) CN111683282A (zh)
WO (1) WO2022124822A1 (zh)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN114938469A (zh) * 2022-05-16 2022-08-23 深圳康佳电子科技有限公司 摄像头的图像处理方法、装置及摄像头和显示系统

Families Citing this family (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN111683282A (zh) * 2020-06-08 2020-09-18 三星电子（中国）研发中心 一种图像变形适配方法和装置

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN103489155A (zh) * 2013-09-18 2014-01-01 厦门美图网科技有限公司 一种基于传感器的水平自动矫正的拍照方法
CN104935857A (zh) * 2015-06-10 2015-09-23 联想(北京)有限公司 一种视频处理方法和电子设备
CN105100396A (zh) * 2015-05-21 2015-11-25 努比亚技术有限公司 一种移动终端及其旋转显示方法和装置
CN109922204A (zh) * 2017-12-13 2019-06-21 中兴通讯股份有限公司 图像处理方法及终端
CN111010476A (zh) * 2019-11-13 2020-04-14 北京奇艺世纪科技有限公司 一种图像显示方法、装置、终端和可读存储介质

Family Cites Families (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2004145291A (ja) * 2002-10-03 2004-05-20 Casio Comput Co Ltd 画像表示装置、画像表示方法及びプログラム
KR20140133363A (ko) * 2013-05-10 2014-11-19 삼성전자주식회사 디스플레이 장치 및 이의 제어 방법
CN104866080B (zh) * 2014-02-24 2020-08-18 腾讯科技（深圳）有限公司 屏幕内容显示方法和系统
CN111679731A (zh) * 2019-03-11 2020-09-18 三星电子株式会社 显示装置及其控制方法
CN111683282A (zh) * 2020-06-08 2020-09-18 三星电子（中国）研发中心 一种图像变形适配方法和装置

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN103489155A (zh) * 2013-09-18 2014-01-01 厦门美图网科技有限公司 一种基于传感器的水平自动矫正的拍照方法
CN105100396A (zh) * 2015-05-21 2015-11-25 努比亚技术有限公司 一种移动终端及其旋转显示方法和装置
CN104935857A (zh) * 2015-06-10 2015-09-23 联想(北京)有限公司 一种视频处理方法和电子设备
CN109922204A (zh) * 2017-12-13 2019-06-21 中兴通讯股份有限公司 图像处理方法及终端
CN111010476A (zh) * 2019-11-13 2020-04-14 北京奇艺世纪科技有限公司 一种图像显示方法、装置、终端和可读存储介质

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN114938469A (zh) * 2022-05-16 2022-08-23 深圳康佳电子科技有限公司 摄像头的图像处理方法、装置及摄像头和显示系统

Also Published As

Publication number Publication date
CN112367552B (zh) 2023-04-14
WO2022124822A1 (en) 2022-06-16
US20230289918A1 (en) 2023-09-14
CN111683282A (zh) 2020-09-18

Similar Documents

Publication Publication Date Title
US9240056B2 (en) Video retargeting
US8659592B2 (en) 2D to 3D video conversion
US20180359415A1 (en) Panoramic video processing method and device and non-transitory computer-readable medium
CN112367552B (zh) 一种图像变形适配方法和装置
US9396519B2 (en) Content aware video resizing
WO2012025042A1 (zh) 视频画面显示方法及装置
CN110139040B (zh) 云台摄像机定位的方法、装置、云台摄像机、设备及介质
JP2012532553A (ja) オーバーレイグラフィックによる画像のリターゲッティング
US9743062B2 (en) Method and device for retargeting a 3D content
EP2382772A1 (en) Image scaling curve generation
US8213512B2 (en) Determining an intermediate image
CN111240780A (zh) 图像显示方法、装置、显示终端以及可读存储介质
CN111325798A (zh) 相机模型纠正方法、装置、ar实现设备及可读存储介质
US20160163024A1 (en) Electronic device and method for adjusting images presented by electronic device
CN114222188A (zh) 基于旋转屏的全屏显示方法、装置、设备及存储介质
US8264555B2 (en) Reducing video shaking
CN111726666A (zh) 视频显示控制方法和装置
EP2840782A1 (en) Method for improving video output definition and terminal device
US8938128B2 (en) Weighted image enhancement method
CN106873963B (zh) 用于形成计算机视频桌面的背景的方法及装置
US11741570B2 (en) Image processing device and image processing method of same
US10681327B2 (en) Systems and methods for reducing horizontal misalignment in 360-degree video
CN113126836B (zh) 一种画面显示方法、存储介质及终端设备
CN117170418B (zh) 云台控制方法、装置、设备以及存储介质
CN112837211B (zh) 一种图片处理方法、装置、电子设备及可读存储介质

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant