CN114424520A - 图像处理方法和支持该图像处理方法的电子装置 - Google Patents

图像处理方法和支持该图像处理方法的电子装置 Download PDF

Info

Publication number
CN114424520A
CN114424520A CN202080065936.6A CN202080065936A CN114424520A CN 114424520 A CN114424520 A CN 114424520A CN 202080065936 A CN202080065936 A CN 202080065936A CN 114424520 A CN114424520 A CN 114424520A
Authority
CN
China
Prior art keywords
image
information
image frame
tone mapping
electronic device
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN202080065936.6A
Other languages
English (en)
Other versions
CN114424520B (zh
Inventor
朴灿植
朴灿律
金容辍
金志泓
金炯奭
卢沅俊
徐正益
李贤泽
赵宰宪
廉东铉
李姃恩
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Samsung Electronics Co Ltd
Original Assignee
Samsung Electronics Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Samsung Electronics Co Ltd filed Critical Samsung Electronics Co Ltd
Publication of CN114424520A publication Critical patent/CN114424520A/zh
Application granted granted Critical
Publication of CN114424520B publication Critical patent/CN114424520B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T5/00—Image enhancement or restoration
    • G06T5/90—Dynamic range modification of images or parts thereof
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T5/00—Image enhancement or restoration
    • G06T5/90—Dynamic range modification of images or parts thereof
    • G06T5/92—Dynamic range modification of images or parts thereof based on global image properties
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T5/00—Image enhancement or restoration
    • G06T5/50—Image enhancement or restoration using two or more images, e.g. averaging or subtraction
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N1/00—Scanning, transmission or reproduction of documents or the like, e.g. facsimile transmission; Details thereof
    • H04N1/46—Colour picture communication systems
    • H04N1/56—Processing of colour picture signals
    • H04N1/60—Colour correction or control
    • H04N1/603—Colour correction or control controlled by characteristics of the picture signal generator or the picture reproducer
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/57—Mechanical or electrical details of cameras or camera modules specially adapted for being embedded in other devices
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60—Control of cameras or camera modules
    • H04N23/62—Control of parameters via user interfaces
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60—Control of cameras or camera modules
    • H04N23/63—Control of cameras or camera modules by using electronic viewfinders
    • H04N23/633—Control of cameras or camera modules by using electronic viewfinders for displaying additional information relating to control or operation of the camera
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/80—Camera processing pipelines; Components thereof
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/80—Camera processing pipelines; Components thereof
    • H04N23/84—Camera processing pipelines; Components thereof for processing colour signals
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N9/00—Details of colour television systems
    • H04N9/64—Circuits for processing colour signals
    • H04N9/643—Hue control means, e.g. flesh tone control
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00—Indexing scheme for image analysis or image enhancement
    • G06T2207/20—Special algorithmic details
    • G06T2207/20004—Adaptive image processing
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00—Indexing scheme for image analysis or image enhancement
    • G06T2207/20—Special algorithmic details
    • G06T2207/20172—Image enhancement details
    • G06T2207/20208—High dynamic range [HDR] image processing
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N1/00—Scanning, transmission or reproduction of documents or the like, e.g. facsimile transmission; Details thereof
    • H04N1/46—Colour picture communication systems
    • H04N1/56—Processing of colour picture signals
    • H04N1/60—Colour correction or control
    • H04N1/6058—Reduction of colour to a range of reproducible colours, e.g. to ink- reproducible colour gamut

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • Human Computer Interaction (AREA)
  • Studio Devices (AREA)
  • Image Processing (AREA)

Abstract

一种电子装置，包括：相机；存储器，所述存储器被配置为存储多个色调映射信息集，所述多个色调映射信息集中的每一者均包括图像帧的图像信息和所述图像帧的色调映射信息；以及存储器。其中，所述处理器被配置为：基于用户输入选择色调映射信息集；获取通过所述相机捕获的第一图像帧；通过分析所述第一图像帧获得所述第一图像帧的第一特征；基于第二图像帧的图像信息，识别与所选择的色调映射信息集相对应的所述第二图像帧的第二特征；比较所述第一特征与所述第二特征；基于所述比较的结果，使用所述第二图像帧的色调映射信息，将色调映射应用于所述第一图像帧；以及在所述存储器中存储所述第一图像帧的图像数据。

Description

图像处理方法和支持该图像处理方法的电子装置
技术领域
本公开的某些实施例涉及图像处理技术。
背景技术
近来，诸如独立的数码相机、数码摄像机或并入智能手机的数码相机/摄像机的数码相机功能已经变得普及。包括相机的电子装置可以提供与图像捕获相关的各种功能。例如，电子装置可以将从相机获取的预览图像输出到显示器，并且可以在快门操作时从相机获取捕获的图像。
为用户提供视觉上愉悦的高质量图像是很重要的。
电子装置可以提供诸如自动聚焦调整、自动曝光设置、放大、缩小、连续拍摄、定时拍摄、闪光灯开/关、过滤等功能。
同时，包括相机的电子装置可以应用用于将光的可见范围表示到图像的技术(例如，高动态范围(HDR))，以便减小用户实际观看的背景或对象与通过捕获背景或对象获得的图像之间的差异。在HDR的情况下，由相机捕获的表示图像数据的范围(例如，灰度范围)比标准动态范围(SDR)宽。因此，与SDR图像相比，HDR图像可以被表示为使得图像的亮区域更亮，图像的暗区域更暗。
HDR技术可包括静态色调映射方案(例如，HDR 10)和动态色调映射(DTM)方案(例如，HDR 10+或杜比视觉)，在静态色调映射方案中，相同的色调映射信息被均匀地应用于包括在一个图像中的图像帧，在动态色调映射方案中，不同的色调映射信息以图像帧为单位被应用。在静态色调映射方案中，由于即使图像具有带有许多场景变化或亮度差异的图像帧，也应用相同的色调映射信息，因此可能难以以图像帧为单位优化图像。另一方面，在DTM方案中，由于独立的色调映射信息被应用于每个图像帧或场景，所以图像质量可以被逼真地表示，并且可以准确地反映制作者的意图。
发明内容
技术问题
然而，为了制作DTM方案的图像，可能需要高规格的设备、专业的掌握技术和专门的工具。此外，在制作DTM的形象方案时，还有专业或精致的DTM操作。由于个人可能难以产生DTM方案的图像，所以用户可能别无选择，只能通过以与捕获图像时应用的DTM方案相同的方式解释由诸如电影公司的专业公司产生的图像来观看再现的图像。此外，即使用户通过使用电子装置的相机直接生成(或记录)图像，也别无选择，只能通过使用电子装置制造商预设的DTM方案来生成图像。因此，当生成或再现图像时，电子装置可能难以生成或再现适合用户偏好或品味的图像。
问题的解决方案
根据某些实施例的电子装置包括：相机；存储器，所述存储器被配置为存储多个色调映射信息集，所述多个色调映射信息集中的每一者均包括图像帧的图像信息和所述图像帧的色调映射信息；以及处理器。其中，所述处理器被配置为：基于用户输入从所述多个色调映射信息集中选择色调映射信息集；获取通过所述相机捕获的第一图像帧；通过分析所述第一图像帧获得所述第一图像帧的第一特征；基于包括在所选择的色调映射信息集中的第二图像帧的图像信息，识别与所选择的色调映射信息集相对应的所述第二图像帧的第二特征；比较所述第一特征与所述第二特征；基于所述比较的结果，使用包括在所选择的色调映射信息集中的所述第二图像帧的色调映射信息，将色调映射应用于所述第一图像帧；以及在所述存储器中存储所述第一图像帧的图像数据。
根据某些实施例的电子装置的图像处理方法包括：基于用户输入从多个色调映射信息集中选择色调映射信息集，所述多个色调映射信息集中的每一者均包括存储在所述电子装置的存储器中的图像帧的图像信息和所述图像帧的色调映射信息；获取通过所述电子装置的相机捕获的第一图像帧；通过分析所述第一图像帧获得所述第一图像帧的第一特征；基于包括在所选择的色调映射信息集中的第二图像帧的图像信息，识别与所选择的色调映射信息集相对应的所述第二图像帧的第二特征；比较所述第一特征和所述第二特征；基于所述比较的结果，使用包括在所选择的色调映射信息集中的所述第二图像帧的色调映射信息，将色调映射应用于所述第一图像帧；以及在所述存储器中存储所述第一图像帧的图像数据。
本发明的有益效果
根据本公开的某些实施例，由于在生成或再现图像时基于用户的偏好选择动态色调映射(DTM)方案，因此可以通过反映用户的偏好来生成或再现图像。
除此之外，可以提供通过本文直接或间接理解的各种效果。
附图说明
图1是根据某些实施例的网络环境中的电子装置的框图；
图2示出了根据本公开实施例的用于图像处理的电子装置；
图3示出了根据本公开实施例的图像处理方法；
图4示出了根据本公开的实施例的基于用户输入选择色调映射信息集的方法；
图5是根据本公开实施例的基于用户输入选择色调映射信息集的屏幕的示例性视图；
图6示出了根据本公开实施例的基于色调映射信息集的选择历史信息选择色调映射信息集的方法；
图7示出了根据本公开实施例的当再现图像时存储基于用户输入选择的图像帧的图像信息和色调映射信息的方法；
图8示出了根据本公开实施例的存储图像帧的图像信息和色调映射信息的方法；
图9示出了根据本公开实施例的从发送端发送多条时间映射信息的方法；
图10示出了根据本公开实施例的从发送端发送多条色调映射信息的另一种方法。
附图中相同或相似的附图标记可以用于相同或相似的组件。
具体实施方式
电子装置可以提供诸如自动聚焦调整、自动曝光设置、放大、缩小、连续拍摄、定时拍摄、闪光灯开/关、过滤等功能。
同时，包括相机的电子装置可以应用用于将光的可见范围表示到图像的技术(例如，高动态范围(HDR))，以便减小用户实际观看的背景或对象与通过捕获背景或对象获得的图像之间的差异。在HDR的情况下，由相机捕获的表示图像数据的范围(例如，灰度范围)比标准动态范围(SDR)宽。因此，与SDR图像相比，HDR图像可以被表示为使得图像的亮区域更亮，图像的暗区域更暗。
HDR技术可包括静态色调映射方案(例如，HDR 10)和动态色调映射(DTM)方案(例如，HDR10+或杜比视觉)，在静态色调映射方案中，相同的色调映射信息被均匀地应用于包括在一个图像中的图像帧，在动态色调映射方案中，不同的色调映射信息以图像帧为单位被应用。在静态色调映射方案中，由于即使图像具有带有许多场景变化或亮度差异的图像帧，也应用相同的色调映射信息，因此可能难以以图像帧为单位优化图像。另一方面，在DTM方案中，由于独立的色调映射信息被应用于每个图像帧或场景，所以图像质量可以被逼真地表示，并且可以准确地反映制作者的意图。
然而，为了制作DTM方案的图像，可能需要高规格的设备、专业的掌握技术和专门的工具。此外，在制作DTM的形象方案时，还有专业或精致的DTM操作。由于个人可能难以产生DTM方案的图像，所以用户可能别无选择，只能通过以与捕获图像时应用的DTM方案相同的方式解释由诸如电影公司的专业公司产生的图像来观看再现的图像。此外，即使用户通过使用电子装置的相机直接生成(或记录)图像，也别无选择，只能通过使用电子装置制造商预设的DTM方案来生成图像。因此，当生成或再现图像时，电子装置可能难以生成或再现适合用户偏好或品味的图像。
本公开的某些实施例可以提供一种当产生或再现图像时基于用户的偏好应用DTM方案的图像处理方法，以及支持该方法的电子装置。
根据本公开的某些实施例，由于在生成或再现图像时基于用户的偏好选择动态色调映射(DTM)方案，因此可以通过反映用户的偏好来生成或再现图像。
除此之外，可以提供通过本文直接或间接理解的各种效果。
在下文中，将参照附图详细描述本公开的某些实施例。例如，为了便于解释，附图中示出的组件在尺寸上可能被放大或缩小，并且本公开不一定局限于此。
图1是示出根据某些实施例的结合了相机功能的电子装置101的框图。电子装置101处于网络环境100中。参照图1，网络环境100中的电子装置101可经由第一网络198(例如，短距离无线通信网络)与电子装置102进行通信，或者经由第二网络199(例如，长距离无线通信网络)与电子装置104或服务器108进行通信。根据实施例，电子装置101可经由服务器108与电子装置104进行通信。根据实施例，电子装置101可包括处理器120、存储器130、输入装置150、声音输出装置155、显示装置160、音频模块170、传感器模块176、接口177、触觉模块179、相机180、电力管理模块188、电池189、通信模块190、用户识别模块(SIM)196或天线模块197。在一些实施例中，可以从电子装置101中省略至少一个组件，或者可以在电子装置101中添加一个或更多个其他组件。在一些实施例中，一些组件可以被实现为单个集成电路。例如，传感器模块176(例如，指纹传感器、虹膜传感器或照度传感器)可以被实现为嵌入在显示装置160(例如，显示器)中。
处理器120可运行例如软件(例如，程序140)来控制电子装置101的与处理器120连接的至少一个其他部件(例如，硬件部件或软件部件)，并可执行各种数据处理或计算。根据实施例，作为所述数据处理或计算的至少部分，处理器120可将从另一部件(例如，传感器模块176或通信模块190)接收到的命令或数据加载到易失性存储器132中，对存储在易失性存储器132中的命令或数据进行处理，并将结果数据存储在非易失性存储器134中。根据实施例，处理器120可包括主处理器121(例如，中央处理器(CPU)或应用处理器(AP))以及与主处理器121在操作上独立的或者相结合的辅助处理器123(例如，图形处理单元(GPU)、图像信号处理器(ISP)、传感器中枢处理器或通信处理器(CP))。另外地或者可选择地，辅助处理器123可被适配为比主处理器121耗电更少，或者被适配为具体用于指定的功能。可将辅助处理器123实现为与主处理器121分离，或者实现为主处理器121的部分。
在主处理器121处于未激活(例如，睡眠)状态时，辅助处理器123可控制与电子装置101(而非主处理器121)的部件之中的至少一个部件(例如，显示装置160、传感器模块176或通信模块190)相关的功能或状态中的至少一些，或者在主处理器121处于激活状态(例如，运行应用)时，辅助处理器123可与主处理器121一起来控制与电子装置101的部件之中的至少一个部件(例如，显示装置160、传感器模块176或通信模块190)相关的功能或状态中的至少一些。根据实施例，可将辅助处理器123(例如，图像信号处理器或通信处理器)实现为在功能上与辅助处理器123相关的另一部件(例如，相机180或通信模块190)的部分。
术语处理器120可以是单个处理器或多个处理器。因此，本文中使用的术语“处理器”应被理解为指代单数和复数上下文。
存储器130可以存储由电子装置101的至少一个组件(例如，处理器120或传感器模块176)使用的各种数据。各种数据可以包括例如软件(例如，程序140)和与其相关的命令的输入数据或输出数据。存储器130可以包括易失性存储器132或非易失性存储器134。
程序140可以作为软件存储在存储器130中，并且可以包括例如操作系统(OS)142、中间件144或应用146。
输入装置150可从电子装置101的外部(例如，用户)接收将由电子装置101的其他部件(例如，处理器120)使用的命令或数据。输入装置150可包括例如麦克风、鼠标、键盘或数字笔(例如，手写笔)。
声音输出装置155可将声音信号输出到电子装置101的外部。声音输出装置155可包括例如扬声器或接收器。扬声器可用于诸如播放多媒体或播放唱片的通用目的，接收器可用于呼入呼叫。根据实施例，可将接收器实现为与扬声器分离，或实现为扬声器的部分。
显示装置160可以向电子装置101的外部(例如，用户)可视地提供信息。显示装置160可以包括例如显示器、全息设备或投影仪以及控制显示器、全息设备和投影仪中相应一个的控制电路。根据实施例，显示装置160可以包括适于检测触摸的触摸电路，或者适于测量触摸引起的力的强度的传感器电路(例如，压力传感器)。
音频模块170可以将声音转换成电信号，反之亦然。根据实施例，音频模块170可经由输入装置150获得声音，或者经由声音输出装置155或与电子装置101直接(例如，有线地)连接或无线连接的外部电子装置(例如，电子装置102)的耳机输出声音。
传感器模块176可检测电子装置101的操作状态(例如，功率或温度)或电子装置101外部的环境状态(例如，用户的状态)，然后产生与检测到的状态相应的电信号或数据值。根据实施例，传感器模块176可包括例如手势传感器、陀螺仪传感器、大气压力传感器、磁性传感器、加速度传感器、握持传感器、接近传感器、颜色传感器、红外(IR)传感器、生物特征传感器、温度传感器、湿度传感器或照度传感器。
接口177可支持将用来使电子装置101与外部电子装置(例如，电子装置102)直接(例如，有线地)或无线连接的一个或更多个特定协议。根据实施例，接口177可包括例如高清晰度多媒体接口(HDMI)、通用串行总线(USB)接口、安全数字(SD)卡接口或音频接口。
连接端178可包括连接器，其中，电子装置101可经由所述连接器与外部电子装置(例如，电子装置102)物理连接。根据实施例，连接端178可包括例如HDMI连接器、USB连接器、SD卡连接器或音频连接器(例如，耳机连接器)。
触觉模块179可将电信号转换为可被用户经由他的触觉或动觉识别的机械刺激(例如，振动或运动)或电刺激。根据实施例，触觉模块179可包括例如电机、压电元件或电刺激器。
相机180可以捕获静止图像或运动图像。根据实施例，相机180可以包括一个或更多个透镜、图像传感器、图像信号处理器或闪光灯。
电力管理模块188可管理对电子装置101的供电。根据实施例，可将电力管理模块188实现为例如电力管理集成电路(PMIC)的至少部分。
电池189可对电子装置101的至少一个部件供电。根据实施例，电池189可包括例如不可再充电的原电池、可再充电的蓄电池、或燃料电池。
通信模块190可支持在电子装置101与外部电子装置(例如，电子装置102、电子装置104或服务器108)之间建立直接(例如，有线)通信信道或无线通信信道，并经由建立的通信信道执行通信。通信模块190可包括能够与处理器120(例如，应用处理器(AP))独立操作的一个或更多个通信处理器，并支持直接(例如，有线)通信或无线通信。根据实施例，通信模块190可包括无线通信模块192(例如，蜂窝通信模块、短距离无线通信模块或全球导航卫星系统(GNSS)通信模块)或有线通信模块194(例如，局域网(LAN)通信模块或电力线通信(PLC)模块)。这些通信模块中的相应一个可经由第一网络198(例如，短距离通信网络，诸如蓝牙、无线保真(Wi-Fi)直连或红外数据协会(IrDA))或第二网络199(例如，长距离通信网络，诸如蜂窝网络、互联网、或计算机网络(例如，LAN或广域网(WAN)))与外部电子装置进行通信。可将这些各种类型的通信模块实现为单个部件(例如，单个芯片)，或可将这些各种类型的通信模块实现为彼此分离的多个部件(例如，多个芯片)。无线通信模块192可使用存储在用户识别模块196中的用户信息(例如，国际移动用户识别码(IMSI))识别并验证通信网络(诸如第一网络198或第二网络199)中的电子装置101。
天线模块197可将信号或电力发送到电子装置101的外部(例如，外部电子装置)或者从电子装置101的外部(例如，外部电子装置)接收信号或电力。根据实施例，天线模块197可包括天线，所述天线包括辐射元件，所述辐射元件由形成在基底(例如，PCB)中或形成在基底上的导电材料或导电图案构成。根据实施例，天线模块197可包括多个天线。在此情况下，可由例如通信模块190(例如，无线通信模块192)从所述多个天线中选择适合于在通信网络(诸如第一网络198或第二网络199)中使用的通信方案的至少一个天线。随后可经由所选择的至少一个天线在通信模块190和外部电子装置之间发送或接收信号或电力。根据实施例，除了辐射元件之外的另外的组件(例如，射频集成电路(RFIC))可附加地形成为天线模块197的一部分。
上述部件中的至少一些可经由外设间通信方案(例如，总线、通用输入输出(GPIO)、串行外设接口(SPI)或移动工业处理器接口(MIPI))相互连接并在其之间通信地传送信号(例如，命令或数据)。
根据实施例，可经由与第二网络199连接的服务器108在电子装置101和外部电子装置104之间发送或接收命令或数据。电子装置102和电子装置104中的每一个可以是与电子装置101相同类型的装置，或者是与电子装置101不同类型的装置。根据实施例，将在电子装置101运行的全部操作或一些操作可在外部电子装置102、外部电子装置104或服务器108中的一个或更多个运行。例如，如果电子装置101应该自动执行功能或服务或者应该响应于来自用户或另一装置的请求执行功能或服务，则电子装置101可请求所述一个或更多个外部电子装置执行所述功能或服务中的至少部分，而不是运行所述功能或服务，或者电子装置101除了运行所述功能或服务以外，还可请求所述一个或更多个外部电子装置执行所述功能或服务中的至少部分。接收到所述请求的所述一个或更多个外部电子装置可执行所述功能或服务中的所请求的所述至少部分，或者执行与所述请求相关的另外功能或另外服务，并将执行的结果传送到电子装置101。电子装置101可在对所述结果进行进一步处理的情况下或者在不对所述结果进行进一步处理的情况下将所述结果提供作为对所述请求的至少部分答复。为此，可使用例如云计算技术、分布式计算技术或客户机-服务器计算技术。
在某些实施例中，处理器120可以提供图像处理方法，该方法在生成或再现由相机180捕获的图像时基于用户的偏好应用DTM方案。
根据本公开的某些实施例，由于在生成或再现图像时基于用户的偏好选择动态色调映射(DTM)方案，因此可以通过反映用户的偏好来生成或再现图像。
图2示出了根据本公开实施例的用于图像处理的电子装置。
参考图2，电子装置200(例如，电子装置101)可以提供图像处理功能，例如图像生成或再现。例如，电子装置200可以使用相机210(诸如相机180)通过捕获功能来生成(或记录)捕获的图像。捕获的图像可以包括一个或更多个图像帧。电子装置200可以在显示器220(例如显示装置160)上显示(或再现)捕获的图像。此外，电子装置200可以将高动态范围(HDR)应用于图像，以便提供具有真实外观的图像。具体地，电子装置200可以通过动态色调映射(DTM)方案来提供更真实的图像，该方案将不同的色调映射信息(以下称为TM信息)应用于图像中包括的不同图像帧。在此情况下，电子装置200可以基于用户的偏好应用DTM方案，以通过反映用户的偏好来支持图像的产生或再现。
用于执行前述功能的电子装置200可以包括相机210(例如，相机180)、显示器220(例如，显示装置160)、输入装置230(例如，输入装置150)、通信电路240(例如，通信模块190)、存储器250(例如，存储器130)和处理器260(例如，处理器120)。然而，电子装置200的结构不限于此。根据某些实施例，电子装置200可以省略前述组件中的至少一个，并且可以进一步包括至少一个不同的组件。
相机210可以捕获静止图片和运动图片。为此，相机210可以包括成像装置。成像装置可以包括例如接收对象的图像光以形成图像的透镜、调节通过透镜的光量的光圈、用于打开和关闭光圈以使得图像传感器由于光通过透镜而曝光特定时间的快门、接收形成在透镜上的图像作为光信号的图像传感器和内部存储器中的至少一个。图像可以包括一个或更多个图像帧。
显示器220可以向用户显示例如各种内容(例如，文本、图像、视频、图标、符号等)。例如，显示器220可以显示通过相机210捕获的图像。根据实施例，显示器220可以包括触摸屏，并且可以接收例如使用电子笔或用户身体部位的触摸、手势、接近或悬停输入。
输入装置230可以从电子装置200的外部(例如，用户)接收命令或数据。例如，输入装置230可以接收用户输入。根据实施例，输入装置230可以包括输入感测电路(例如，触摸板和/或数字化仪)，其感测用户身体部位或电子笔的接近或接触。此外，输入感测电路可以被堆叠，使得显示器220的显示面板与至少一些区域重叠，或者可以与显示器220一体地提供。在此情况下，输入感测电路和显示器220可以被称为触摸屏显示器(或触摸屏)。
通信电路240可以支持电子装置200与外部电子装置之间的通信。根据实施例，通信电路240可以从外部电子装置接收图像。
存储器250可以存储由电子装置200的至少一个组件使用的各种数据。例如，存储器250可以存储与图像处理相关的命令和数据。当处理器260执行该命令时，处理器260可以执行对应于该命令的功能。根据实施例，存储器250可以存储通过相机210捕获的图像，并且可以存储通过通信电路240从外部电子装置接收的图像。
根据实施例，存储器250可以存储图像中包括的每个图像帧的图像信息和TM信息251。图像信息可包括相应图像帧的图像数据、图像数据的子采样数据、图像数据的差分脉冲编码调制(DPCM)数据、关于图像数据的特征点的信息和图像数据的频域数据中的至少一个。根据实施例，频域数据可指小波转换后的低-低(LL)带的数据，或者可指NN离散余弦变换(DCT)转换后的DC值。例如，存储器250可以不加改变地存储图像帧的图像数据，或者可以存储经过图像数据处理(例如，压缩)以减少要存储的数据量的图像数据。
TM信息可包括与应用于相应图像帧的色调映射曲线相对应的色调映射元数据和关于色调映射曲线的多个拐点(例如，包括拐点的曲线锚)的信息中的至少一个。色调映射元数据可以包括例如图像的最小/最大亮度、表示显示背光单元的亮度映射参数的背光峰化信息、表示图像的色域和温度的颜色规范、表示伽马和对比度增强(CE)控制参数的传递参数、诸如室内/室外、夜晚/白天等的场景信息、表示最小/最大/最佳像素值信息的直方图信息、表示图像的边界区域的强度信息的锐度参数。
根据实施例，存储器250可以成对地存储每个图像帧的图像信息和TM信息251，称为色调映射信息集(在下文中，称为TM信息集)。此外，存储器250可以基于能够分别标识多个TM信息集的标识信息的属性，通过对每个类别的信息进行分类来存储信息。标识信息可以包括例如关于制作图像的电影公司或导演的信息，或者关于图像的制作年份或类型的信息。
处理器260可以控制电子装置的至少一个不同组件，并且可以执行各种数据处理或计算。处理器260可基于由用户输入表达的用户偏好，从包括存储在存储器250中的多个图像帧中的每一个的图像信息和TM信息251的多个TM信息集中选择TM信息集。例如，处理器260可以在显示器220上显示标识多个TM信息集的标识信息。处理器260然后可以通过输入装置230接收选择任一个标识信息的用户输入。处理器然后可以基于用户的偏好选择对应于所选标识信息的TM信息集作为TM信息集。应当理解，基于用户输入选择TM信息集的处理器260不限于明确选择TM信息集的用户输入，而是可以是基于用户输入的隐含TM信息集，或者是基于先前用户输入和使用模式选择TM信息集的算法。
这里，标识信息可以包括例如关于制作图像的电影公司或导演的信息，或者关于图像的制作年份或类型的信息。又例如，处理器260可以获取关于存储在存储器250中的多个TM信息集中的每一个的选择历史信息，并且可以基于所获取的选择历史信息从多个TM信息集中选择基于用户偏好的TM信息集。例如，处理器260可以基于用户的偏好选择最频繁选择的TM信息集或最近选择的TM信息集作为TM信息集。
根据实施例，处理器260可以获取通过相机210捕获的捕获图像，并且可以分析包括在所获取的捕获图像中的图像帧的特征。例如，处理器260可以提取特征点(例如，边缘、边界点等)，分析直方图，或者分析关于包括在捕获图像中的每个图像帧的频域。处理器260可获取关于包括在捕获图像中的每个图像帧的图像数据的子采样数据、差分脉冲编码调制(DPCM)数据、关于特征点的信息和频域数据中的至少一种。
根据实施例，处理器260可以识别所选TM信息集的图像信息的图像帧的特征。这里，图像信息可以包括图像帧的图像数据、图像数据的子采样数据、图像数据的DPCM数据、关于图像数据的特征点的信息和图像数据的频域数据中的至少一个。因此，当图像信息包括关于捕获图像中包括的每个图像帧的图像数据的子采样数据、DPCM数据、关于特征点的信息和频域数据中的至少一个时，处理器260可直接使用图像信息。然而，当图像信息仅包括对应于选择的TM信息集的每个图像帧的图像数据时，处理器260可通过使用图像数据的特征点提取、直方图分析、频域分析等，执行获取关于图像数据的子采样数据、DPCM数据、关于特征点的信息和频域数据中的至少一个的处理。
处理器260可以比较捕获图像中包括的图像帧的特征和所选TM信息集的图像信息的图像帧的特征。此外，基于比较结果，处理器260可通过使用包括在所选择的TM信息集中的TM信息，将色调映射应用于包括在捕获图像中的至少一个图像帧。例如，如果比较结果确定包括在捕获图像中的任一个图像帧(例如，第一图像帧)与对应于选择的TM信息集的图像帧中的任一个图像帧(例如，第二图像帧)的相似度大于或等于指定大小，则处理器260可通过使用包括在所选择的TM信息集中的图像帧(例如，第二图像帧)的TM信息，将色调映射应用于包括在捕获图像中的图像帧(例如，第一图像帧)。这里，处理器260可以通过使用与具有大于或等于指定大小的相似性的所有图像帧中的每一个相对应的TM信息来应用色调映射，而不是仅将色调映射应用于任一个图像帧。在一些实施例中，如果比较结果确定不存在具有大于或等于指定大小的相似度的图像帧，则处理器260可以基于配置信息将色调映射应用于捕获图像中包括的图像帧。这里，配置信息可以包括例如在电子装置200中默认配置的TM信息或者由处理器260基于捕获图像生成的TM信息。
处理器260可以将应用了色调映射的捕获图像的图像数据存储(或记录或写入)在存储器250中。根据实施例，处理器260可通过使用关于应用了色调映射的捕获图像的图像帧的信息来产生捕获图像的色调映射元数据，并可将产生的色调映射元数据与捕获图像的图像数据一起存储在存储器250中。
根据实施例，处理器260可以通过通信电路240从外部电子装置接收图像。例如，处理器260可以通过通信电路240从内容提供商(CP)(可以是电影公司)的操作服务器获取诸如电影的图像。处理器260可以分析从外部电子装置接收的图像中包括的图像帧的特征，以获取图像中包括的每个图像帧的图像信息和TM信息。此外，处理器260可以将获取的图像信息和TM信息作为TM信息集存储在存储器250中。也就是说，处理器260可以通过从外部电子装置接收的图像在存储器250中累积新的TM信息集。
根据实施例，处理器260可以在显示器220上显示(或再现)预先存储在存储器250中的图像。此外，在图像显示在显示器220上的状态下，处理器260可以通过输入装置230接收用户输入。这里，用户输入可以是从显示器220上显示的图像中选择用户偏好的场景的输入。当接收到用户输入时，处理器260可以基于用户输入识别图像中包括的图像帧中的至少一个图像帧。例如，处理器260可以识别与用户选择的场景相对应的图像帧。此外，处理器260可以分析所识别的图像帧的特征以获取图像帧的图像信息和TM信息，并且可以将所获取的图像信息和TM信息作为TM信息集存储在存储器260中。也就是说，处理器260可以通过显示器220上显示的图像中的用户偏好指示(例如，用户输入)在存储器260中累积新的TM信息集。
根据实施例，当存储(或记录)捕获图像时，处理器260可以将DTM应用于捕获图像。此外，当存储在存储器250中的图像被再现时，处理器260可将DTM应用于再现的图像。例如，当接收到用于再现预先存储在存储器250中的图像的命令(例如，图像再现命令)时，处理器260可以基于用户的偏好从存储在存储器250中的多个TM信息集中选择TM信息集。此外，处理器260可以分析包括在将被再现的图像(以下称为再现图像)中的图像帧的特征，基于包括在所选择的TM信息集中的图像信息识别对应于选择的TM信息集的图像帧的特征，并且比较包括在再现图像中的图像帧的特征和对应于选择的TM信息集的图像帧的特征。此后，基于比较结果，处理器260可通过使用包括在所选择的TM信息集中的至少一条TM信息，将色调映射应用于包括在捕获图像中的至少一个图像帧，并可在显示器上显示应用了色调映射的再现图像。
如上所述，根据某些实施例，电子装置(例如，电子装置101或电子装置200)可以包括相机(例如，相机180或相机210)、被配置为存储包括多个图像帧中的每一个的图像信息和色调映射信息的多个色调映射信息集的存储器(例如，存储器130或存储器250)、以及处理器(例如，处理器120或处理器260)。该处理器可以被配置为基于用户的偏好从多个TM信息集中选择TM信息集，获取通过相机捕获的第一图像，分析包含在获取的第一图像中的图像帧的特征，基于包含在所选择的TM信息集中的图像信息识别对应于选择的TM信息集的图像帧的特征，将包括在所获取的第一图像中的图像帧的特征与对应于所选择的TM信息集的图像帧的特征进行比较，基于比较结果，通过使用包括在所选择的TM信息集中的至少一个TM信息，将色调映射应用于包括在所获取的第一图像中的至少一个图像帧，并且将应用了色调映射的第一图像的图像数据存储在存储器中。
根据某些实施例，如果比较结果确定包括在所获取的第一图像中的第一图像帧和对应于所选择的TM信息集的图像帧中的第二图像帧的相似性大于或等于指定大小，则处理器可以被配置为通过使用包括在所选择的TM信息集中的第二图像帧的TM信息将色调映射应用于第一图像帧。
根据某些实施例，处理器可以被配置为通过使用关于应用了色调映射的至少一个图像帧的信息来生成第一图像的元数据，并将生成的元数据与第一图像的图像数据一起存储在存储器中。第一图像的元数据可包括第一图像的最小和/或最大亮度、表示显示背光单元的亮度映射参数的背光峰化信息、表示第一图像的色域和温度的颜色规范、表示伽马和对比度增强(CE)控制参数的传递参数、场景信息、表示最小/最大/最佳像素值信息的直方图信息和表示第一图像的边界区域的强度信息的锐度参数中的至少一个。
根据某些实施例，电子装置可以进一步包括显示器(例如，显示装置160或显示器220)和输入装置(例如，输入装置150或输入装置230)。处理器可以被配置为在显示器上显示分别能够标识多个TM信息集的多条标识信息，通过输入装置接收用于从多条标识信息中选择任一条标识信息的用户输入，并且基于用户的偏好选择对应于所选择的标识信息的TM信息集作为TM信息集。
根据某些实施例，电子装置还可以包括通信电路(例如，通信模块190或通信电路240)。处理器可以被配置为通过通信电路从外部电子装置接收第二图像，获取包括在接收的第二图像中的每个图像帧的图像信息和TM信息，并且将获取的图像信息和TM信息作为TM信息集存储在存储器中。
根据某些实施例，电子装置可以进一步包括显示器(例如，显示装置160或显示器220)和输入装置(例如，输入装置150或输入装置230)。处理器可以被配置为在显示器上显示预先存储在存储器中的第二图像，在第二图像显示在显示器上的状态下，通过输入装置接收用户输入，基于用户输入识别第二图像中包括的图像帧中的至少一个图像帧，获取所识别的至少一个图像帧的图像信息和TM信息，并且将所获取的图像信息和色调映射图像作为TM信息集存储在存储器中。
根据某些实施例，多个图像帧中的每一个的图像信息可以包括每个图像帧的图像数据、图像数据的子采样数据、图像数据的差分脉冲编码调制(DPCM)数据、关于图像数据的特征点的信息和图像数据的频域数据中的至少一个。
根据某些实施例，多个图像帧中的每一个的TM信息可以包括与应用于每个图像帧的色调映射曲线相对应的色调映射元数据和关于色调映射曲线的多个拐点的信息中的至少一个。
根据某些实施例，基于能够分别标识多个TM信息集的多条标识信息的属性，可以通过对每个类别进行分类来存储多个TM信息集。
根据某些实施例，电子装置可以进一步包括显示器。该处理器可以被配置为接收用于再现预存储在存储器中的第二图像的命令，基于用户的偏好从多个TM信息集中选择TM信息集，分析包括在第二图像中的图像帧的特征，基于包括在所选择的TM信息集中的图像信息识别对应于选择的TM信息集的图像帧的特征，将包括在第二图像中的图像帧的特征与对应于所选择的TM信息集的图像帧的特征进行比较，基于比较结果，通过使用包括在所选择的TM信息集中的至少一个TM信息，将色调映射应用于包括在第二图像中的至少一个图像帧，并且在显示器上显示应用了色调映射的第二图像。
图3示出了根据本公开实施例的图像处理方法。
参照图3，在操作310中，电子装置(例如，电子装置200)的处理器(例如，处理器260)可以基于用户输入从多个TM信息集中选择TM信息集。TM信息集包括存储在存储器(例如，存储器250)中的多个图像帧中的每一个的图像信息和TM信息(例如，图像信息和TM信息251)。例如，处理器可以在显示器(例如，显示器220)上显示标识多个TM信息集的标识信息。用户可以通过输入装置(例如，输入装置230)提供用于从标识信息中选择任一个标识信息的输入。然后使用对应于所选标识信息的TM信息集。通过用户输入的TM信息集选择不限于显式选择。作为另一个示例，处理器可以获取关于存储在存储器中的多个TM信息集中的每一个的选择历史(如用户输入所指示的)信息，并且可以基于选择历史来选择TM信息集。例如，处理器可以基于最近的用户输入，选择通过先前的用户输入最频繁选择的TM信息集或最近选择的TM信息集作为TM信息集。
在操作320中，处理器可获取通过相机(例如，相机210)捕获的图像(捕获图像)。图像可以包括一个或更多个图像帧。
在操作330中，处理器可以分析捕获图像中包括的一个或更多个图像帧的特征。例如，处理器可以对捕获图像中包括的每个图像帧执行特征点提取、直方图分析、频域分析等。因此，处理器可以获取关于包括在捕获图像中的每个图像帧的图像数据的子采样数据、DPCM数据、关于特征点的信息和频域数据中的至少一个。
在操作340中，处理器可以识别对应于所选TM信息集的图像帧的特征。例如，处理器可以基于包括在所选TM信息集中的图像信息来识别图像帧的特征。当图像信息包括关于包括在捕获图像中的每个图像帧的图像数据的子采样数据、DPCM数据、关于特征点的信息和频域数据中的至少一个时，处理器可以直接使用图像信息。对于另一个示例，当图像信息仅包括对应于所选择的TM信息集的每个图像帧的图像数据时，处理器可以通过使用图像数据的特征点提取、直方图分析、频域分析等，执行获取关于图像数据的子采样数据、DPCM数据、关于特征点的信息和频域数据中的至少一个的过程。
在操作350中，处理器可以将捕获图像中包括的图像帧的特征与对应于所选TM信息集的图像帧的特征进行比较。
在操作360中，基于比较结果，处理器可确定是否存在相似性大于或等于指定大小的图像帧。例如，基于比较结果，处理器可确定包括在捕获图像中的任一个图像帧(例如，第一图像帧)与对应于选择的TM信息集的图像帧中的任一个图像帧(例如，第二图像帧)的相似度是否大于或等于指定大小。
在存在具有大于或等于指定大小的相似性的图像帧的情况下，在操作370中，处理器可通过使用包括在所选TM信息集中的至少一些TM信息，将色调映射应用于包括在捕获图像中的至少一个图像帧。例如，如果比较结果确定包括在捕获图像中的任一个图像帧(例如，第一图像帧)与对应于选择的TM信息集的图像帧中的任一个图像帧(例如，第二图像帧)的相似度大于或等于指定大小，则处理器可以通过使用包括在所选择的TM信息集中的图像帧(例如，第二图像帧)的TM信息，将色调映射应用于包括在捕获图像中的图像帧(例如，第一图像帧)。这里，处理器可以通过使用与具有大于或等于指定大小的相似性的所有图像帧中的每一个相对应的TM信息来应用色调映射，而不是仅将色调映射应用于任一个图像帧。
在操作380中，处理器可将应用了色调映射的捕获图像的图像数据存储(或记录)在存储器中。根据实施例，处理器可通过使用关于应用了色调映射的捕获图像的图像帧的信息来生成捕获图像的色调映射元数据，并且可将生成的色调映射元数据与捕获图像的图像数据一起存储在存储器中。
如果不存在具有大于或等于指定大小的相似性的图像帧，则在操作390中，处理器可基于配置信息将色调映射应用于包括在捕获图像中的图像帧。这里，配置信息可以包括例如在电子装置中默认配置的TM信息或者由处理器基于捕获图像生成的TM信息。
图4示出了根据本公开实施例的基于用户输入选择TM信息集的方法，以及图5是根据本公开实施例的基于用户输入选择TM信息集的屏幕视图。
参照图4和图5，在操作410中，电子装置(例如，电子装置200)的处理器(例如，处理器260)可在显示器(例如，显示器220)上显示标识存储在存储器(例如，存储器250)中的多个图像帧中的每一个的包括图像信息和TM信息(例如，图像信息和TM信息251)的多个TM信息集的标识信息。例如，如图5所示，处理器可以在显示器上显示屏幕500，该屏幕500包括分别用于多个TM信息集的标识信息510、530、550和570。
标识信息510、530、550和570可以包括例如关于制作图像的电影公司或导演的信息，或者关于图像的制作年份或类型的信息。图5示出了标识信息510、530、550和570分别包括导演的信息513、533、553和573以及导演拍摄的电影的信息515a、515b、535a、535b、555a、555b、575a和575b的状态。另外，多条标识信息510、530、550和570可以包括能够选择多条标识信息510、530、550和570中的任一条的对象，例如按钮对象511、531、551和571。例如，当通过用户输入从多条标识信息510、530、550和570中选择第一按钮对象511时，可以选择对应于第一标识信息510的第一TM信息集。当选择第二按钮对象531时，可以选择对应于第二标识信息530的第二TM信息集。当选择第三按钮对象551时，可以选择对应于第三标识信息550的第三TM信息集。当选择第四按钮对象571时，可以选择对应于第四标识信息570的第四TM信息集。
在操作420中，处理器可以通过输入装置(例如，输入装置230)接收用于选择显示在显示器上的多条标识信息510、530、550和570中的任一条的用户输入。例如，处理器可以接收用于选择分别包括在多条标识信息510、530、550和570中的按钮对象511、531、551和571的用户输入。在某些实施例中，用户输入可以是标识信息510、530、550和570上的触摸输入。
在操作430中，处理器可基于用户输入选择对应于所选标识信息的TM信息集。例如，当包括在第一标识信息510中的第一按钮对象511被用户输入选择时，处理器可以基于用户的偏好选择对应于第一标识信息510的第一TM信息集作为TM信息集。同样，当用户输入选择了包括在第二标识信息430中的第二按钮对象531、包括在第三标识信息550中的第三按钮对象551和包括在第四标识信息570中的第四按钮对象571时，处理器可以基于用户的偏好分别选择对应于第二标识信息530的第二TM信息集、对应于第三标识信息550的第三TM信息集和对应于第四标识信息570的第四TM信息集作为TM信息集。
图6示出根据本公开的实施例的基于TM信息集的选择历史信息来选择TM信息集的方法。选择历史可以根据先前提供的选择TM信息集的用户输入来确定。
参照图6，在操作610中，电子装置(例如，电子装置200)的处理器(例如，处理器260)可获取存储在存储器(例如，存储器250)中的多个图像帧中的每一个的包括图像信息和TM信息(例如，图像信息和TM信息251)的多个TM信息集中的每一个的选择历史信息。选择历史信息可以包括关于多个TM信息集中的每一个的选择计数、选择定时等的信息。
在操作630中，处理器可基于获取的选择历史信息从多个TM信息集中选择基于用户偏好的TM信息集。例如，处理器可以基于用户的偏好选择最频繁选择的TM信息集或最近选择的TM信息集作为TM信息集。
图7示出了根据本公开实施例的当再现图像时存储基于用户输入选择的图像帧的图像信息和TM信息的方法。
参照图7，在操作710中，电子装置(例如，电子装置200)的处理器(例如，处理器260)可以再现或显示预存储在存储器(例如，存储器250)中的图像。例如，处理器可以在显示器(例如，显示器220)上显示预先存储在存储器中的图像。
在操作730中，当再现图像时，处理器可以接收用户输入。例如，在图像显示在显示器上的状态下，处理器可以通过输入装置(例如，输入装置230)接收用户输入。这里，用户输入可以是用于由用户从显示器上显示的图像中选择至少一个场景(例如，用户偏好的场景)的输入。
在操作750中，处理器可基于用户输入从包括在再现的图像中的图像帧中识别至少一个图像帧。例如，处理器可以从图像中识别与用户选择的至少一个方案相对应的至少一个图像帧。
在操作770中，处理器可以获取识别的图像帧的图像信息和TM信息。例如，处理器可以分析所识别的至少一个图像帧的特征，从而可以获取所识别的至少一个图像帧的图像信息和TM信息。根据实施例，处理器可以通过针对所识别的至少一个图像帧的特征点提取、直方图分析、频域分析等，获取关于至少一个图像帧的子采样数据、DPCM数据、关于特征点的信息和频域数据中的至少一个。例如，识别的图像帧的图像信息可以包括识别的图像帧的图像数据、图像数据的子采样数据、图像数据的DPCM数据、关于图像数据的特征点的信息和图像数据的频域数据中的至少一个。此外，所识别的图像帧的TM信息可以包括与应用于所识别的图像帧的色调映射曲线相对应的色调映射元数据和关于色调映射曲线的多个拐点的信息中的至少一个。
在操作790中，处理器260可将获取的图像信息和TM信息作为TM信息集存储在存储器中。也就是说，处理器可以通过显示器上显示的图像中的用户偏好指示(例如，用户输入)在存储器中累积新的TM信息集。
图8示出了根据本公开实施例的存储图像帧的图像信息和TM信息的方法。
参照图8，电子装置(例如，电子装置200)的存储器(例如，存储器250)可以存储多个图像帧810、830和850中的每一个的图像信息和TM信息(例如，图像信息和TM信息251)。根据实施例，存储器可以成对地存储多个图像帧810、830和850中的每一个的图像信息和TM信息。例如，图像信息和TM信息可以被存储为TM信息集。
图像信息可以包括图像帧810、830和850的图像数据。或者，图像信息可以包括经过图像数据处理(例如，压缩)以减少要存储的数据量的数据。例如，图像信息可以包括图像数据的子采样数据、图像数据的DPCM数据、关于图像数据的特征点的信息和图像数据的频域数据中的至少一个。根据实施例，频域数据可指小波转换后的LL频带的数据，或者可指NNDCT转换后的DC值。
TM信息可包括与应用于图像帧810、830和850的色调映射曲线811、831和851对应的色调映射元数据和关于色调映射曲线811、831和851的多个拐点的信息中的至少一个。色调映射元数据可包括例如图像的最小/最大亮度、表示显示背光单元的亮度映射参数的背光峰化信息、表示图像的色域和温度的颜色规范、表示伽马和对比度增强(CE)控制参数的传递参数、诸如室内/室外、夜晚/白天等的场景信息、表示最小/最大/最佳像素值信息的直方图信息、表示图像的边界区域的强度信息的锐度参数中的至少一个。或者，TM信息可以是用于色调映射的实际元数据，例如ST.2094等。
根据实施例，存储器可以基于标识多个TM信息集的标识信息的属性，通过对每个类别的信息进行分类来存储信息。标识信息可以包括例如关于制作图像的电影公司或导演的信息，或者关于图像的制作年份或类型的信息。
图9示出了根据本公开实施例的从发送端发送多个色调映射信息的方法，图10示出了根据本公开实施例的从发送端发送多条TM信息的另一种方法。
根据实施例，关于DTM，图像的元数据可以具有对应于每个图像帧一条色调映射曲线的色调映射元数据。因此，可能需要一种将关于多个色调映射曲线的信息发送(或处理)到用于处理图像的图像处理器的方法。在此情况下，发送(或处理)关于多条色调映射曲线的信息的方法优选地保持与发送(或处理)关于一条色调映射曲线的信息的方法的兼容性。可以通过使用网络抽象层(NAL)的补充增强信息(SEI)消息来发送(或处理)关于多个色调映射曲线的信息。图9示出了使用多SEI消息的方法，图10示出了使用单SEI消息的方法。
参照图9，关于多个色调映射曲线的信息可以分别包括在单SEI消息910、920、930和940中。例如，关于第一条映射曲线的信息可以包括在第一SEI消息910中，关于第二色调映射曲线的信息可以包括在第二SEI消息920中，关于第三色调映射曲线的信息可以包括在第三SEI消息930中，关于第四色调映射曲线的信息可以包括在第四SEI消息940中。此外，关于多个色调映射曲线的信息可以通过多SEI消息被发送到接收端(例如，图像处理器)，在该多SEI消息中，第一SEI消息910、第二SEI消息920、第三SEI消息930和第四SEI消息940被组合。此后，在接收端，可以存储关于每条色调映射曲线的信息，并且可以选择其中一条曲线并将其用于应用色调映射。可替换地，关于几个色调映射曲线的信息可以在接收端用于生成一个色调映射曲线，并且所生成的色调映射曲线可以用于应用色调映射。
在不支持多SEI消息结构的系统中，可以不使用图9的方法来发送(或处理)关于多个色调映射曲线的信息。例如，在不支持多SEI消息结构的系统中，通常仅使用包括在最后一个SEI消息(例如，第四SEI消息940)中的关于色调映射曲线的信息。因此，在多SEI消息结构中，关于缺省配置的色调映射曲线的信息优选地包括在最后一级的SEI消息中。
参照图10，可以使用单SEI消息1000来发送(或处理)关于多个色调映射曲线的信息。根据与DTM相关的SEI标准(例如，ST 2094-40)，在该方法中考虑了SEI消息大小可变的事实。例如，当将从第二色调映射曲线上的信息1010连接到第n色调映射曲线上的信息1030的单SEI消息1000作为一个消息发送到接收端时，接收端可以通过解析单SEI消息1000中关于n色调映射曲线的信息来获取关于多条色调映射曲线的信息。此后，接收端可以使用关于所获取的多条色调映射曲线的信息中的任一条色调映射曲线的信息，或者可以使用关于几条色调映射曲线的信息来生成一条色调映射曲线，并且可以使用所生成的色调映射曲线来应用色调映射。
根据某些实施例，电子装置包括：相机；存储器，被配置为存储多个色调映射信息集，每个色调映射信息集包括图像帧的图像信息和图像帧的色调映射信息；以及处理器，其中该处理器被配置为：基于用户输入从多个色调映射信息集中选择色调映射信息集；获取通过相机捕获的第一图像帧；通过分析第一图像帧获得第一图像帧的第一特征；基于包括在所选择的色调映射信息集中的第二图像帧的图像信息，识别对应于所选择的色调映射信息集的第二图像帧的第二特征；比较第一特征和第二特征；基于比较结果，使用包括在所选择的色调映射信息集中的第二图像帧的色调映射信息，将色调映射应用于第一图像帧；并将第一图像帧的图像数据存储在存储器中。
根据某些实施例，处理器被配置为当比较结果确定第一图像帧和第二图像帧的相似度大于或等于指定大小时，使用第二图像帧的色调映射信息将色调映射应用于第一图像帧。
根据某些实施例，处理器被配置为：使用关于第一图像帧的信息生成第一图像帧的元数据；以及将产生的元数据与第一图像帧的图像数据一起存储在存储器中，其中第一图像帧的元数据包括第一图像帧的最小和/或最大亮度、表示显示背光单元的亮度映射参数的背光峰化信息、表示第一图像帧的色域和温度的颜色规范、表示伽马和对比度增强(CE)控制参数的传递参数、场景信息、表示最小/最大/最佳像素值信息的直方图信息、以及表示第一图像帧的边界区域的强度信息的锐度参数。
根据某些实施例，电子装置还包括：显示器；以及输入装置。并且该处理器还被配置为：在显示器上显示标识多个色调映射信息集的标识信息；通过输入装置接收用于从标识信息中选择任一个标识信息的用户输入；以及选择对应于所选择的标识信息的色调映射信息集作为色调映射信息集。
根据某些实施例，电子装置还包括通信电路，并且处理器被配置为：通过该通信电路从外部电子装置接收第三图像帧；获取第三图像帧的图像信息和第三图像帧的色调映射信息；以及将所获取的图像信息和色调映射信息作为多个色调映射信息集中的一个存储在存储器中。
根据某些实施例，电子装置还包括：显示器；以及输入装置。并且其中该处理器还被配置为：在显示器上显示预先存储在存储器中的第三图像帧；当第三图像帧显示在显示器上时，通过输入装置接收用户输入；基于用户输入识别第三图像帧；获取第三图像帧的图像信息和第三图像帧的色调映射信息；以及将所获取的图像信息和色调映射图像作为多个色调映射信息集之一存储在存储器中。
根据某些实施例，图像帧的图像信息包括图像帧的图像数据、图像数据的子采样数据、图像数据的差分脉冲编码调制(DPCM)数据、关于图像数据的特征点的信息和图像数据的频域数据中的至少一个。
根据某些实施例，图像帧的色调映射信息包括与应用于图像帧的色调映射曲线相对应的色调映射元数据和关于色调映射曲线的多个拐点的信息中的至少一个。
根据某些实施例，基于标识多个色调映射信息集的标识信息的属性，通过对每个类别进行分类来存储多个色调映射信息集。
根据某些实施例，电子装置还包括显示器，其中处理器被配置为：接收用于再现预存储在存储器中的第三图像帧的命令；基于用户输入从多个色调映射信息集中选择色调映射信息集；通过分析第三图像帧获得第三图像帧的第三特征；基于包括在所选择的色调映射信息集中的第四图像帧的图像信息，识别对应于所选择的色调映射信息集的第四图像帧的第四特征；比较第三特征和第四特征；基于比较结果，使用包括在所选择的色调映射信息集中的第四图像帧的色调映射信息，将色调映射应用于第三图像帧；以及在显示器上显示应用了色调映射的第三图像帧。
根据某些实施例，电子装置的图像处理方法包括：基于用户输入从多个色调映射信息集中选择色调映射信息集，每个色调映射信息集包括图像帧的图像信息和存储在电子装置的存储器中的图像帧的色调映射信息；获取通过电子装置的相机捕获的第一图像帧；通过分析第一图像帧获得第一图像帧的第一特征；基于包括在所选择的色调映射信息集中的第二图像帧的图像信息，识别对应于所选择的色调映射信息集的第二图像帧的第二特征；比较第一特征和第二特征；基于比较结果，使用包括在所选择的色调映射信息集中的第二图像帧的色调映射信息，将色调映射应用于第一图像帧；以及将第一图像帧的图像数据存储在存储器中。
根据某些实施例的电子装置可以是各种类型的电子装置之一。电子装置可包括例如便携式通信装置(例如，智能电话机)、计算机装置、便携式多媒体装置、便携式医疗装置、相机、可穿戴装置或家用电器。根据本公开的实施例，电子装置不限于以上所述的那些电子装置。
应该理解的是，本公开的各种实施例以及其中使用的术语并不意图将在此阐述的技术特征限制于具体实施例，而是包括针对相应实施例的各种改变、等同形式或替换形式。对于附图的描述，相同的参考标号可用来指代相同或相关的元件。将理解的是，与术语相应的单数形式的名词可包括一个或更多个事物，除非相关上下文另有明确指示。如这里所使用的，诸如“A或B”、“A和B中的至少一个”、“A或B中的至少一个”、“A、B或C”、“A、B和C中的至少一个”以及“A、B或C中的至少一个”的短语中的每一个短语可包括在与所述多个短语中的相应一个短语中一起列举出的项的任一项或所有可能组合。如这里所使用的，诸如“第1”和“第2”或者“第一”和“第二”的术语可用于将相应部件与另一部件进行简单区分，并且不在其他方面(例如，重要性或顺序)限制所述部件。将理解的是，在使用了术语“可操作地”或“通信地”的情况下或者在不使用术语“可操作地”或“通信地”的情况下，如果一元件(例如，第一元件)被称为“与另一元件(例如，第二元件)结合”、“结合到另一元件(例如，第二元件)”、“与另一元件(例如，第二元件)连接”或“连接到另一元件(例如，第二元件)”，则意味着所述一元件可与所述另一元件直接(例如，有线地)连接、与所述另一元件无线连接、或经由第三元件与所述另一元件连接。
如这里所使用的，术语“模块”可包括以硬件、软件或固件实现的单元，并可与其他术语(例如，“逻辑”、“逻辑块”、“部分”或“电路”)可互换地使用。模块可以是被适配为执行一个或更多个功能的单个集成部件或者是该单个集成部件的最小单元或部分。例如，根据实施例，可以以专用集成电路(ASIC)的形式来实现模块。
可将在此阐述的各种实施例实现为包括存储在存储介质(例如，内部存储器136或外部存储器138)中的可由机器(例如，电子装置101)读取的一个或更多个指令的软件(例如，程序140)。例如，在处理器的控制下，所述机器(例如，电子装置101)的处理器(例如，处理器120)可在使用或无需使用一个或更多个其他部件的情况下调用存储在存储介质中的所述一个或更多个指令中的至少一个指令并运行所述至少一个指令。这使得所述机器能够操作用于根据所调用的至少一个指令执行至少一个功能。所述一个或更多个指令可包括由编译器产生的代码或能够由解释器运行的代码。可以以非暂时性存储介质的形式来提供机器可读存储介质。其中，术语“非暂时性”仅意味着所述存储介质是有形装置，并且不包括信号(例如，电磁波)，但是该术语并不在数据被半永久性地存储在存储介质中与数据被临时存储在存储介质中之间进行区分。
根据实施例，可在计算机程序产品中包括和提供根据本公开的各种实施例的方法。计算机程序产品可作为产品在销售者和购买者之间进行交易。可以以机器可读存储介质(例如，紧凑盘只读存储器(CD-ROM))的形式来发布计算机程序产品，或者可经由应用商店(例如，PlayStoreTM)在线发布(例如，下载或上传)计算机程序产品，或者可直接在两个用户装置(例如，智能电话)之间分发(例如，下载或上传)计算机程序产品。如果是在线发布的，则计算机程序产品中的至少部分可以是临时产生的，或者可将计算机程序产品中的至少部分至少临时存储在机器可读存储介质(诸如制造商的服务器、应用商店的服务器或转发服务器的存储器)中。
根据各种实施例，上述部件中的每个部件(例如，模块或程序)可包括单个实体或多个实体。根据各种实施例，可省略上述部件中的一个或更多个部件，或者可添加一个或更多个其它部件。可选择地或者另外地，可将多个部件(例如，模块或程序)集成为单个部件。在这种情况下，根据各种实施例，该集成部件可仍旧按照与所述多个部件中的相应一个部件在集成之前执行一个或更多个功能相同或相同的方式，执行所述多个部件中的每一个部件的所述一个或更多个功能。根据各种实施例，由模块、程序或另一部件所执行的操作可顺序地、并行地、重复地或以启发式方式来执行，或者所述操作中的一个或更多个操作可按照不同的顺序来运行或被省略，或者可添加一个或更多个其它操作。

Claims (15)

1.一种电子装置，所述电子装置包括：
相机；
存储器，所述存储器被配置为存储多个色调映射信息集，所述多个色调映射信息集中的每一者均包括图像帧的图像信息和所述图像帧的色调映射信息；以及
处理器，
其中，所述处理器被配置为：
基于用户输入从所述多个色调映射信息集中选择色调映射信息集；
获取通过所述相机捕获的第一图像帧；
通过分析所述第一图像帧获得所述第一图像帧的第一特征；
基于在所选择的色调映射信息集中包括的第二图像帧的图像信息，识别与所选择的色调映射信息集相对应的所述第二图像帧的第二特征；
比较所述第一特征与所述第二特征；
基于所述比较的结果，利用在所选择的色调映射信息集中的所述第二图像帧的色调映射信息，将色调映射应用于所述第一图像帧；以及
将所述第一图像帧的图像数据存储在所述存储器中。
2.根据权利要求1所述的电子装置，其中，所述处理器被配置为当所述比较的结果确定所述第一图像帧和所述第二图像帧的相似度大于或等于指定大小时，利用所述第二图像帧的色调映射信息将色调映射应用于所述第一图像帧。
3.根据权利要求1所述的电子装置，其中，所述处理器被配置为：
利用关于所述第一图像帧的信息，生成所述第一图像帧的元数据；以及
将所生成的元数据与所述第一图像帧的图像数据一起存储在所述存储器中，
其中，所述第一图像帧的元数据包括所述第一图像帧的最小和/或最大亮度、表示显示背光单元的亮度映射参数的背光峰化信息、表示所述第一图像帧的色域和温度的颜色规范、表示伽马和对比度增强(CE)控制参数的传递参数、场景信息、表示最小/最大/最佳像素值信息的直方图信息、以及表示所述第一图像帧的边界区域的强度信息的锐度参数中的至少一者。
4.根据权利要求1所述的电子装置，所述电子装置还包括：
显示器；以及
输入装置，并且
其中，所述处理器被进一步配置为：
在所述显示器上显示标识所述多个色调映射信息集的标识信息，
通过所述输入装置接收用于从所述标识信息中选择任一个标识信息的用户输入，以及
选择与所选择的标识信息相对应的色调映射信息集作为所述色调映射信息集。
5.根据权利要求1所述的电子装置，所述电子装置还包括：
通信电路，并且
其中，所述处理器被配置为：
通过所述通信电路从外部电子装置接收第三图像帧；
获取所述第三图像帧的图像信息和所述第三图像帧的色调映射信息；以及
将所获取的图像信息和色调映射信息作为所述多个色调映射信息集中的一个存储在所述存储器中。
6.根据权利要求1所述的电子装置，所述电子装置还包括：
显示器；以及
输入装置，
其中，所述处理器被进一步配置为：
在所述显示器上显示预先存储在所述存储器中的第三图像帧；
当所述第三图像帧显示在所述显示器上时，通过所述输入装置接收用户输入；
基于所述用户输入识别所述第三图像帧；
获取所述第三图像帧的图像信息和所述第三图像帧的色调映射信息；以及
将所获取的图像信息和色调映射图像作为所述多个色调映射信息集中的一个存储在所述存储器中。
7.根据权利要求1所述的电子装置，其中，所述图像帧的图像信息包括所述图像帧的图像数据、所述图像数据的子采样数据、所述图像数据的差分脉冲编码调制(DPCM)数据、关于所述图像数据的特征点的信息、以及所述图像数据的频域数据中的至少一者。
8.根据权利要求1所述的电子装置，其中，所述图像帧的色调映射信息包括与应用于所述图像帧的色调映射曲线相对应的色调映射元数据和关于所述色调映射曲线的多个拐点的信息中的至少一个。
9.根据权利要求1所述的电子装置，其中，所述多个色调映射信息集是通过基于标识所述多个色调映射信息集的标识信息的属性对每个类别进行分类而被存储的。
10.根据权利要求1所述的电子装置，所述电子装置还包括：
显示器，
其中，所述处理器被配置为：
接收用于再现预先存储在所述存储器中的第三图像帧的命令；
基于用户输入从所述多个色调映射信息集中选择色调映射信息集；
通过分析所述第三图像帧获得所述第三图像帧的第三特征；
基于包括在所选择的色调映射信息集中的第四图像帧的图像信息，识别与所选择的色调映射信息集相对应的所述第四图像帧的第四特征；
比较所述第三特征和所述第四特征；
基于所述比较的结果，利用在所选择的色调映射信息集中的所述第四图像帧的色调映射信息，将色调映射应用于所述第三图像帧；以及
在所述显示器上显示应用了所述色调映射的所述第三图像帧。
11.一种电子装置的图像处理方法，所述图像处理方法包括：
基于用户输入从多个色调映射信息集中选择色调映射信息集，所述多个色调映射信息集中的每一者均包括存储在所述电子装置的存储器中的图像帧的图像信息和所述图像帧的色调映射信息；
获取通过所述电子装置的相机捕获的第一图像帧；
通过分析所述第一图像帧获得所述第一图像帧的第一特征；
基于在所选择的色调映射信息集中包括的第二图像帧的图像信息，识别与所选择的色调映射信息集相对应的所述第二图像帧的第二特征；
比较所述第一特征和所述第二特征；
基于所述比较的结果，利用在所选择的色调映射信息集中的所述第二图像帧的色调映射信息，将色调映射应用于所述第一图像帧；以及
将所述第一图像帧的图像数据存储在所述存储器中。
12.根据权利要求11所述的图像处理方法，其中，应用所述色调映射包括：当所述比较的结果确定所述第一图像帧和所述第二图像帧的相似度大于或等于指定大小时，利用所述第二图像帧的色调映射信息将色调映射应用于所述第一图像帧。
13.根据权利要求11所述的图像处理方法，其中，选择所述色调映射信息集包括：
在所述电子装置的显示器上显示标识所述多个色调映射信息集的标识信息；
通过所述电子装置的输入装置接收用于从所述标识信息中选择任一个标识信息的用户输入；以及
选择与所选择的标识信息相对应的色调映射信息集作为所述色调映射信息集。
14.根据权利要求11所述的图像处理方法，所述图像处理方法进一步包括：
通过所述电子装置的通信电路从外部电子装置接收第三图像帧；
获取所述第三图像帧的图像信息和所述第三图像帧的色调映射信息；以及
将所获取的图像信息和色调映射信息作为所述多个映射信息集中的一个存储在所述存储器中。
15.根据权利要求11所述的图像处理方法，所述图像处理方法进一步包括：
在所述电子装置的显示器上显示预先存储在所述存储器中的第三图像帧；
当所述第三图像帧显示在所述显示器上时，通过所述电子装置的输入装置接收用户输入；
基于所述用户输入识别所述第三图像帧；
获取所述第三图像帧的图像信息和所述第三图像帧的色调映射信息；以及
将所获取的图像信息和色调映射图像作为所述多个色调映射信息集中的一个存储在所述存储器中。
CN202080065936.6A 2019-09-30 2020-09-29 图像处理方法和支持该图像处理方法的电子装置 Active CN114424520B (zh)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
KR10-2019-0120870 2019-09-30
KR1020190120870A KR102641738B1 (ko) 2019-09-30 2019-09-30 영상 처리 방법 및 이를 지원하는 전자 장치
PCT/KR2020/013406 WO2021066565A1 (en) 2019-09-30 2020-09-29 Image processing method and electronic device supporting the same

Publications (2)

Publication Number Publication Date
CN114424520A true CN114424520A (zh) 2022-04-29
CN114424520B CN114424520B (zh) 2024-06-21

Family

ID=75163316

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202080065936.6A Active CN114424520B (zh) 2019-09-30 2020-09-29 图像处理方法和支持该图像处理方法的电子装置

Country Status (5)

Country Link
US (1) US11416974B2 (zh)
EP (1) EP3994657B1 (zh)
KR (1) KR102641738B1 (zh)
CN (1) CN114424520B (zh)
WO (1) WO2021066565A1 (zh)

Families Citing this family (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20220132941A (ko) 2021-03-24 2022-10-04 주식회사 엘지에너지솔루션 배터리 분류 장치 및 방법
US11734806B2 (en) * 2021-11-24 2023-08-22 Roku, Inc. Dynamic tone mapping
KR102564447B1 (ko) 2021-11-30 2023-08-08 엘지전자 주식회사 디스플레이 장치

Citations (14)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20070081721A1 (en) * 2005-08-31 2007-04-12 Sony Corporation Apparatus, method, and program for taking an image, and apparatus, method, and program for processing an image
US20110292246A1 (en) * 2010-05-25 2011-12-01 Apple Inc. Automatic Tone Mapping Curve Generation Based on Dynamically Stretched Image Histogram Distribution
JP2012119761A (ja) * 2010-11-29 2012-06-21 Sanyo Electric Co Ltd 電子機器、画像処理方法及びプログラム
US20130076763A1 (en) * 2010-06-08 2013-03-28 Dolby Laboratories Licensing Corporation Tone and Gamut Mapping Methods and Apparatus
CN105187691A (zh) * 2014-10-06 2015-12-23 三星电子株式会社 图像形成装置、图像形成方法、图像处理装置及图像处理方法
CN105787908A (zh) * 2012-08-08 2016-07-20 杜比实验室特许公司 用于高动态范围图像的图像处理
US20170048461A1 (en) * 2015-08-12 2017-02-16 Samsung Electronics Co., Ltd. Method for processing image and electronic device supporting the same
US20170272690A1 (en) * 2016-03-16 2017-09-21 Thomson Licensing Methods, apparatus, and systems for extended high dynamic range ("hdr") hdr to hdr tone mapping
CN107302664A (zh) * 2017-08-11 2017-10-27 维沃移动通信有限公司 一种拍摄方法及移动终端
US20180025477A1 (en) * 2015-02-16 2018-01-25 Samsung Electronics Co., Ltd. Metadata-based image processing method and apparatus
US20180047141A1 (en) * 2016-08-11 2018-02-15 Intel Corporation Brightness control for spatially adaptive tone mapping of high dynamic range (hdr) images
CN110033418A (zh) * 2019-04-15 2019-07-19 Oppo广东移动通信有限公司 图像处理方法、装置、存储介质及电子设备
US20190279579A1 (en) * 2018-03-12 2019-09-12 Apple Inc. Pixel contrast control systems and methods
US20190295504A1 (en) * 2018-03-26 2019-09-26 Dell Products, Lp System and method for adaptive tone mapping for high dynamic ratio digital images

Family Cites Families (12)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2001298631A (ja) * 2000-04-17 2001-10-26 Seiko Epson Corp 画像処理制御プログラムを記録した記録媒体、画像処理方法および画像処理装置
US8606009B2 (en) 2010-02-04 2013-12-10 Microsoft Corporation High dynamic range image generation and rendering
MX2014003556A (es) 2011-09-27 2014-05-28 Koninkl Philips Nv Aparato y metodo para transformacion de intervalo dinamico de imagenes.
US9275445B2 (en) * 2013-08-26 2016-03-01 Disney Enterprises, Inc. High dynamic range and tone mapping imaging techniques
US9852499B2 (en) * 2013-12-13 2017-12-26 Konica Minolta Laboratory U.S.A., Inc. Automatic selection of optimum algorithms for high dynamic range image processing based on scene classification
EP3249605A1 (en) 2016-05-23 2017-11-29 Thomson Licensing Inverse tone mapping method and corresponding device
GB2554669B (en) * 2016-09-30 2022-04-06 Apical Ltd Image processing
US10176561B2 (en) 2017-01-27 2019-01-08 Microsoft Technology Licensing, Llc Content-adaptive adjustments to tone mapping operations for high dynamic range content
US10504263B2 (en) 2017-08-01 2019-12-10 Samsung Electronics Co., Ltd. Adaptive high dynamic range (HDR) tone mapping with overlay indication
KR20190017303A (ko) 2017-08-10 2019-02-20 엘지전자 주식회사 이동 단말기
US10284785B2 (en) * 2017-08-30 2019-05-07 Gopro, Inc. Local tone mapping
US10957024B2 (en) * 2018-10-30 2021-03-23 Microsoft Technology Licensing, Llc Real time tone mapping of high dynamic range image data at time of playback on a lower dynamic range display

Patent Citations (14)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20070081721A1 (en) * 2005-08-31 2007-04-12 Sony Corporation Apparatus, method, and program for taking an image, and apparatus, method, and program for processing an image
US20110292246A1 (en) * 2010-05-25 2011-12-01 Apple Inc. Automatic Tone Mapping Curve Generation Based on Dynamically Stretched Image Histogram Distribution
US20130076763A1 (en) * 2010-06-08 2013-03-28 Dolby Laboratories Licensing Corporation Tone and Gamut Mapping Methods and Apparatus
JP2012119761A (ja) * 2010-11-29 2012-06-21 Sanyo Electric Co Ltd 電子機器、画像処理方法及びプログラム
CN105787908A (zh) * 2012-08-08 2016-07-20 杜比实验室特许公司 用于高动态范围图像的图像处理
CN105187691A (zh) * 2014-10-06 2015-12-23 三星电子株式会社 图像形成装置、图像形成方法、图像处理装置及图像处理方法
US20180025477A1 (en) * 2015-02-16 2018-01-25 Samsung Electronics Co., Ltd. Metadata-based image processing method and apparatus
US20170048461A1 (en) * 2015-08-12 2017-02-16 Samsung Electronics Co., Ltd. Method for processing image and electronic device supporting the same
US20170272690A1 (en) * 2016-03-16 2017-09-21 Thomson Licensing Methods, apparatus, and systems for extended high dynamic range ("hdr") hdr to hdr tone mapping
US20180047141A1 (en) * 2016-08-11 2018-02-15 Intel Corporation Brightness control for spatially adaptive tone mapping of high dynamic range (hdr) images
CN107302664A (zh) * 2017-08-11 2017-10-27 维沃移动通信有限公司 一种拍摄方法及移动终端
US20190279579A1 (en) * 2018-03-12 2019-09-12 Apple Inc. Pixel contrast control systems and methods
US20190295504A1 (en) * 2018-03-26 2019-09-26 Dell Products, Lp System and method for adaptive tone mapping for high dynamic ratio digital images
CN110033418A (zh) * 2019-04-15 2019-07-19 Oppo广东移动通信有限公司 图像处理方法、装置、存储介质及电子设备

Also Published As

Publication number Publication date
EP3994657A1 (en) 2022-05-11
CN114424520B (zh) 2024-06-21
WO2021066565A1 (en) 2021-04-08
EP3994657A4 (en) 2022-08-10
US20210097655A1 (en) 2021-04-01
US11416974B2 (en) 2022-08-16
KR102641738B1 (ko) 2024-02-29
EP3994657B1 (en) 2024-07-24
KR20210038129A (ko) 2021-04-07

Similar Documents

Publication Publication Date Title
US10924677B2 (en) Electronic device and method for providing notification related to image displayed through display and image stored in memory based on image analysis
EP3579544B1 (en) Electronic device for providing quality-customized image and method of controlling the same
US9692959B2 (en) Image processing apparatus and method
CN114424520B (zh) 图像处理方法和支持该图像处理方法的电子装置
CN109756671B (zh) 使用多个相机记录图像的电子装置及其操作方法
KR102664723B1 (ko) 프리뷰를 제공하는 방법 및 프리뷰를 표시하는 전자 장치
US11563889B2 (en) Electronic device and method for controlling camera using external electronic device
CN113455013B (zh) 用于处理图像的电子设备及其图像处理方法
KR20200101741A (ko) 영상에 보케 효과를 적용하는 전자 장치 및 그 제어 방법
US11144197B2 (en) Electronic device performing function according to gesture input and operation method thereof
US20230259264A1 (en) Method for providing filter and electronic device supporting the same
CN114868180A (zh) 用于改变显示器的指定区域中的显示的电子装置及其操作方法
US12081879B2 (en) Method for generating image and electronic device therefor
US11380096B2 (en) Electronic device for performing image processing and method thereof
KR20210101790A (ko) 전자 장치 및 전자 장치의 타임 랩스 영상 생성 방법

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant