CN105814879B - 能够重新配置图像信号处理器的数字拍摄设备及其控制方法 - Google Patents

能够重新配置图像信号处理器的数字拍摄设备及其控制方法 Download PDF

Info

Publication number
CN105814879B
CN105814879B CN201480067549.0A CN201480067549A CN105814879B CN 105814879 B CN105814879 B CN 105814879B CN 201480067549 A CN201480067549 A CN 201480067549A CN 105814879 B CN105814879 B CN 105814879B
Authority
CN
China
Prior art keywords
image signal
signal processing
photographing apparatus
digital photographing
processing blocks
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Expired - Fee Related
Application number
CN201480067549.0A
Other languages
English (en)
Other versions
CN105814879A (zh
Inventor
韩熙喆
李星昊
金铉中
韩智渊
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Samsung Electronics Co Ltd
Original Assignee
Samsung Electronics Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Samsung Electronics Co Ltd filed Critical Samsung Electronics Co Ltd
Priority claimed from PCT/KR2014/012013 external-priority patent/WO2015088212A1/en
Publication of CN105814879A publication Critical patent/CN105814879A/zh
Application granted granted Critical
Publication of CN105814879B publication Critical patent/CN105814879B/zh
Expired - Fee Related legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00Details of television systems
    • H04N5/76Television signal recording
    • H04N5/765Interface circuits between an apparatus for recording and another apparatus
    • H04N5/77Interface circuits between an apparatus for recording and another apparatus between a recording apparatus and a television camera
    • H04N5/772Interface circuits between an apparatus for recording and another apparatus between a recording apparatus and a television camera the recording apparatus and the television camera being placed in the same enclosure

Abstract

一种能够重新配置图像信号处理器(ISP)的数字拍摄设备、控制数字拍摄设备的方法、用于控制数字拍摄设备的系统。所述方法包括:接收对将被安装在ISP中的至少一个图像信号处理模块的选择;从外部系统下载所选择的至少一个图像信号处理模块;通过使用下载的至少一个图像信号处理模块重新配置ISP。

Description

能够重新配置图像信号处理器的数字拍摄设备及其控制方法
技术领域
示例性实施例的一个或多个方面涉及一种能够重新配置图像信号处理器(ISP)的数字拍摄设备、控制所述数字拍摄设备的方法以及用于控制所述数字拍摄设备的系统。
背景技术
数字拍摄设备的发展使捕捉并处理高质量、高清晰度图像成为可能。因此,数字拍摄设备需要其中可安装有多种功能模块的图像信号处理器(ISP)。
发明内容
技术问题
然而,一般而言,可在ISP中安装的模块的类型和数量存在诸多限制,尤其在性能与成本方面。例如,在ISP中包括的模块越多,其体积越大,然而其处理速度可被降低。此外,在ISP中包括的模块越多,成本越高。
技术方案
根据一个或多个实施例,一种控制能够重新配置图像信号处理器(ISP)的数字拍摄设备的方法包括:接收对将被安装在ISP中的至少一个图像信号处理模块的选择;从外部系统下载所选择的至少一个图像信号处理模块;通过使用下载的至少一个图像信号处理模块重新配置ISP。
有益效果
一个或多个实施例包括一种能够通过选择性地下载用户期望的图像信号处理模块重新配置图像信号处理器(ISP)从而获得重量轻的数字拍摄设备并提高处理速度的数字拍摄设备以及控制所述数字拍摄设备的方法。
一个或多个实施例包括一种使用户能够方便地下载通过使用云服务器交换的硬件模块的驱动器的数字拍摄设备以及控制所述数字拍摄设备的方法。
一个或多个实施例包括一种能够从云服务器下载优化软件并在交换后的硬件模块中安装优化软件的数字拍摄设备以及控制所述数字拍摄设备的方法。
附加的方面部分地将在随后的描述中被阐述,部分地将从描述中变得清楚,或者可通过所呈现的实施例的实践而被获知。
附图说明
从以下结合附图的实施例的描述中,这些和/或其它方面将变得清楚且更容易理解,其中:
图1是根据示例性实施例的一方面的示出数字拍摄设备的结构的框图;
图2是根据示例性实施例的一方面的示出ISP的操作的示图;
图3是根据示例性实施例的一方面的示出控制器的结构的框图;
图4是根据示例性实施例的一方面的示出控制数字拍摄设备的方法的流程图;
图5是根据示例性实施例的一方面的示出在显示器上所显示的图像信号处理模块的表;
图6是根据示例性实施例的一方面的示出用于控制数字拍摄设备的系统的示图;
图7是根据示例性实施例的一方面的示出数字拍摄设备的操作的流程图;
图8是根据示例性实施例的一方面的示出控制用于控制数字拍摄设备的服务器的操作的流程图;
图9是根据示例性实施例的一方面的示出用于控制数字拍摄设备的系统的框图;
图10是根据示例性实施例的一方面的示出由数字拍摄设备执行的基于云服务器的图像信号处理操作的流程图;
图11是根据示例性实施例的一方面的示出用于控制数字拍摄设备的系统的示图;
图12是根据示例性实施例的一方面的示出数字拍摄设备从两个数字拍摄设备下载图像信号处理模块的操作的流程图;
图13A是根据示例性实施例的一方面的示出数字拍摄设备的可交换硬件模块的分解图;
图13B是根据示例性实施例的一方面的示出数字拍摄设备的可交换硬件模块的框图;
图14是根据示例性实施例的一方面的示出数字拍摄设备控制器的框图;
图15是根据示例性实施例的一方面的示出控制数字拍摄的方法的流程图;
图16是根据示例性实施例的一方面的示出可交换硬件模块和数字拍摄设备的示图;
图17是根据示例性实施例的一方面的示出提供驱动器的列表的数字拍摄设备的示图;
图18是根据示例性实施例的一方面的示出提供应用的列表的数字拍摄设备的示图。
最佳实施方式
根据一个或多个实施例,一种控制能够重新配置图像信号处理器(ISP)的数字拍摄设备的方法包括:接收对将被安装在ISP中的至少一个图像信号处理模块的选择;从外部系统下载所选择的至少一个图像信号处理模块;通过使用下载的至少一个图像信号处理模块重新配置ISP。
所述接收选择的步骤可包括:接收在外部系统中存储的图像信号处理模块的列表;接收对接收到的图像信号处理模块的列表之中的至少一个图像信号处理模块的选择。
所述接收选择的步骤可包括:向外部系统发送有关数字拍摄设备的信息;从外部系统搜索与所述有关数字拍摄设备的信息相应的一个或更多个图像信号处理模块;从外部系统接收所找到的图像信号处理模块的列表。
所述图像信号处理模块的列表可包括:针对在所述列表中包括的图像信号处理模块中的每个的容量和下载计数信息。
所述接收所述列表的处理可包括:接收开源图像信号处理模块的列表。
所述方法可还包括:使用下载的至少一个图像信号处理模块执行图像处理操作;重新配置后的ISP可执行所述图像处理操作。
所述外部系统可以是提供能够交易所述至少一个图像信号处理模块的在线市场的市场服务器、连接到所述数字拍摄设备的云服务器以及另一数字拍摄设备中的一个。
所述方法可还包括:使用下载的至少一个图像信号处理模块执行图像处理操作;所述外部系统可以是连接到所述数字拍摄设备的云服务器,并且所述云服务器执行所述图像处理操作。
所述执行图像处理操作的处理可还包括:将图像数据和环境信息上传到所述云服务器。
所述接收选择的处理可包括:通过云服务器接收在第二数字拍摄设备中存储的图像信号处理模块的列表;接收对接收到的图像信号处理模块的列表之中的至少一个图像信号处理模块的选择。
所述方法可还包括:通过交换在ISP中包括的硬件模块将ISP升级。
根据示例性实施例的一方面,一种数字拍摄设备可包括:图像信号处理器(ISP),被配置为执行与预定图像信号处理模块相应的图像处理操作;选择器,被配置为接收对将被安装在ISP中的至少一个图像信号处理模块的选择;下载控制器,被配置为控制从外部系统下载所选择的至少一个图像信号处理模块;重新配置器,用于通过使用下载的至少一个图像信号处理模块重新配置ISP。
所述选择器可还被配置为:接收包括有关在外部系统中注册的图像信号处理模块的信息的列表;接收对接收到的图像信号处理模块的列表之中的至少一个图像信号处理模块的选择。
所述数字拍摄设备可还包括:通信器,被配置为向外部系统发送有关数字拍摄设备的信息,所述选择器可还被配置为接收与所述有关数字拍摄设备的信息相应的图像信号处理模块的列表。
所述有关图像信号处理模块的信息可包括:针对所述图像信号处理模块中的每个的容量和下载计数。
所述选择器可还被配置为:接收开源图像信号处理模块的列表。
所述数字拍摄设备可还包括:重新配置的ISP,被配置为使用下载的至少一个图像信号处理模块执行图像处理操作。
所述外部系统可以是被配置为提供能够交易所述至少一个图像信号处理模块的在线市场的市场服务器、连接到所述数字拍摄设备的云服务器以及第二数字拍摄设备中的一个。
可通过交换在ISP中包括的硬件模块将ISP升级。
根据示例性实施例的一方面,一种用于控制数字拍摄设备的系统,可包括:数字拍摄设备;服务器,被配置为向数字拍摄设备提供多个图像信号处理模块。所述数字拍摄设备可包括:图像信号处理器(ISP),被配置为执行与预定图像信号处理模块相应的图像处理操作;选择器,被配置为接收对将被安装在ISP中的至少一个图像信号处理模块的选择;下载控制器,被配置为控制从外部系统下载所选择的至少一个图像信号处理模块;重新配置器,被配置为通过使用下载的至少一个图像信号处理模块重新配置ISP。
所述服务器可包括:服务器图像信号处理器,被配置为允许所述服务器执行由所述数字拍摄设备下载的所述至少一个图像信号处理模块的图像处理操作。
所述图像信号处理器可被配置为:将对其执行图像处理操作的图像数据以及所述数字拍摄设备所在的场所的环境信息上传到所述服务器。
根据示例性实施例的一方面,一种控制数字拍摄设备(其中,数字拍摄设备的硬件模块是可交换的)的方法可包括:获得有关交换后的硬件模块的信息;基于所述有关交换后的硬件模块的信息提供与交换后的硬件模块相关的多个驱动器的列表;从外部系统下载从所提供的列表中选择的驱动器;通过使用下载的驱动器重新配置交换后的硬件模块。
所述交换后的硬件模块可用的功能可根据从所述列表中提供的所述多个驱动器中的每个而不同。
所述方法可还包括:提供与在所述数字拍摄设备中安装的交换后的硬件模块相关的应用列表;基于用户输入下载并安装从所述应用列表中选择的应用。
根据示例性实施例的一方面,一种用于控制数字拍摄设备(其中,数字拍摄设备的硬件模块是可交换的)的设备可包括:硬件模块信息获得器,被配置为获得有关交换后的硬件模块的信息;选择器,被配置为基于有关交换后的硬件模块的信息提供与交换后的硬件模块相关的多个驱动器的列表;下载控制器,被配置为控制从外部系统下载从所提供的列表中选择的将被下载的驱动器;重新配置器,被配置为通过使用下载的驱动器重新配置交换后的硬件模块。
所述选择器可被配置为提供在数字拍摄设备中安装的应用之中与所述交换后的硬件模块相关的应用列表,下载控制器可被配置为控制基于用户输入下载并安装从所述应用列表中选择的应用。
根据示例性实施例的一方面,一种提供针对电子设备的软件的方法可包括:检测硬件模块;从软件数据库搜索与检测到的硬件模块相应的一个或更多个程序;安装与检测到的硬件模块相应的程序中的一个或更多个。
所述搜索处理可包括:显示来自与检测到的硬件相应的软件数据库的所述一个或更多个程序的列表;接收与来自所显示的列表的一个或更多个程序相应的输入。被安装的所述一个或更多个程序可与接收到的输入相应。
所述安装处理可包括:从外部装置下载与接收到的输入相应的所述一个或更多个程序。
根据示例性实施例的一方面,一种电子设备可包括:可交换组件接收器,被配置为允许在所述电子设备中安装组件;组件检测器,被配置为检测一个或更多个所安装的组件;通信器,被配置为与外部系统进行通信;重新配置器,被配置为基于经由通信器从外部系统接收到的程序重新配置所述一个或更多个所安装的组件。
所述电子设备可还包括:显示器,被配置为显示在所述外部系统上可用的程序的列表;操作器,被配置为从用户接收输入。如果所述操作器接收到选择输入,则所述通信器可从所述外部系统下载相应程序。
具体实施方式
提供以下详细描述以帮助读者获得对在此描述的方法、设备和/或系统的全面理解。然而,在此描述的方法、设备和/或系统的各种改变、调整及等同物对本领域普通技术人员而言将是显而易见的。
应将在此使用的全部术语(包括描述性或技术术语)理解为具有对本领域技术人员而言是显而易见的含义。然而,所述术语可根据本领域普通技术人员的意图、先例或新技术的出现而具有不同含义。此外,一些术语可由申请人任意选择,在这种情况下,将在本公开的详尽描述中详细描述所选择的术语的含义。因此,必须基于所述术语的含义连同贯穿说明书的描述来限定在此使用的术语。
当部件“包括”或“包含”一个元件时,除非存在与其相反的特定描述,否则所述部件可还包括其它元件而不排除其它元件。
可按照功能块组件和各种处理步骤描述本公开。可通过被配置为执行特定功能的许多硬件和/或软件组件实施所述功能块。例如,本公开可采用各种集成电路组件(例如,存储器元件、处理元件、逻辑元件、查询表等),其中,所述集成电路组件可在一个或多个微处理器或者其它控制装置的控制下执行各种功能。类似地,在使用软件编程或软件元件实施所述元件时,可利用各种算法通过任何编程或脚本语言(诸如C、C++、Java、汇编器等)实施本公开,其中,通过数据结构、对象、处理、例行程序或其它编程元件的任何组合来实施所述算法。可在由一个或多个处理器执行的算法中实施功能方面。此外,本公开可采用用于电子配置、信号处理和/或控制、数据处理等的若干传统技术。词汇“机制”和“元件”被广义使用且不限于机械或物理实施例,而是可包括与处理器等结合的软件例行程序。
这里示出并描述的特定实施方式是说明性的示例并且并非意在以任何方式限制本公开的范围。为了简洁,传统的电子器件、控制系统、软件开发及所述系统的其它功能方面(以及所述系统的各个操作组件的组成部分)可不被详细描述。另外,在所呈现的各种附图中示出的连接线或连接器意在表示各种元件之间的示例性功能关系和/或物理或逻辑耦合。应注意到,许多可选的或附加的功能关系、物理连接或逻辑连接可存在于实际装置中。此外,除非元件被明确描述为“必要的”或“关键的”,否则没有项目或组件对本公开的实践是必要的。
这里描述的所有方法的步骤可按照任何适当顺序执行,除非这里另有指示或者明显与语境相矛盾。这里提供的任何和所有的示例或示例性语言(例如,“诸如”)的使用仅仅意在更好地阐明本公开,并且除非另有主张,否则其并不构成对本公开的范围的限制。
在描述本公开的语境中(尤其是在权利要求书的语境中)使用的术语和类似的指称将被理解为包含单数和复数两者。此外,这里引用的数值范围仅仅意在分别指示落入所述范围的每个单独的数值,除非这里另有指示,并且每个单独的数值被合并到说明书中,如同每个单独的数值被各自地引用于此。
如在此所使用,术语“实施例”指示针对在至少一个实施例中包括的实施例而言所描述的属性、结构、特征等。因此,表述(诸如“根据实施例”和“根据示例性实施例的一方面”)并非总是指示同一实施例。
术语“通信”、“通信网络”及“网络”可被视为基本上具有相同含义。以上三个术语包括有线的和无线的、近距离和广域数据发送和接收网络并且可在图像信号处理器模块中的两个或更多个、用于捕捉图像文件的数字拍摄设备、服务器、个人计算机(PC)、移动终端等之间使用。
术语“市场服务器”指示被配置为提供在线市场以交易软件模块(诸如图像信号处理器模块)的服务器计算机。就此而言,在线市场指示可获得由开发者开源开发的基于平台和服务基础架构的软件模块的在线空间。市场服务器可被连接到针对用于支付处理的数据库或服务器的中间件,其描述将在本公开中予以省略。
术语“云服务器”意指客户机接入以接收云计算服务(在下文中称之为“云服务”)的服务器计算机。就此而言,云服务意指经由互联网将信息永久存储在服务器中并且将所述信息临时存储在作为信息技术(IT)装置的客户机(诸如数字拍摄装置、平板PC、计算机、膝上型计算机、上网本、智能电话等)中的计算机环境。也就是说,云服务是不考虑时间和地点经由互联网在服务器中存储有关用户的信息并经由各种IT装置使用所述信息的概念。换言之,云服务意指用户凭借其可通过向其支付费用借用具有如同云的无形形式的期望计算资源(例如,硬件/软件资源)的计算服务,即,凭借其将在物理上不同的地点存在的计算资源集成并通过虚拟化技术提供的技术。
根据实施例的“数字拍摄设备”可不仅包括数码单镜头反光相机(DSLR)和无反光镜相机,而且包括嵌有相机模块的设备(诸如智能电话或可穿戴装置),其中,所述相机模块包括镜头和捕捉装置,捕捉被摄体并产生图像。
现在将参照附图更全面地描述本公开的一个或多个示例性实施例。然而,本公开的所述一个或多个示例性实施例可按照许多不同形式实施并且不应被理解为限于在此阐述的示例性实施例。相反地,提供这些示例性实施例使得本公开将是彻底和完整的并将向本领域普通技术人员充分地传达本公开的所述一个或多个示例性实施例的构思。在以下描述中,公知的功能或构造将不被描述,因为公知的功能将利用不必要的细节使本公开的所述一个或多个示例性实施例模糊。贯穿说明书,在附图中同样的附图标号表示同样或类似的元件。
图1是根据示例性实施例的一方面的示出能够重新配置图像信号处理器(ISP)120的数字拍摄设备100的框图。
数字拍摄设备100包括捕捉器110、ISP 120、模拟信号处理器121、存储器130、存储读取控制器140、数据存储器142、程序存储器150、显示驱动器162、显示器164、控制器170、操作器180以及通信器190。
控制器170控制数字拍摄设备100的整体操作。控制器170提供用于操作元件(诸如镜头驱动器112、光圈驱动器115以及图像传感器控制器119)的控制信号。
捕捉器110是用于从入射光产生电像信号的元件。捕捉器110包括镜头111、镜头驱动器112、光圈113、光圈驱动器115、图像传感器118以及图像传感器控制器119。
镜头111可包括多组透镜或多个透镜。镜头111的位置由镜头驱动器112控制。镜头驱动器112根据来自控制器170的控制信号控制镜头111的位置。
可调整光圈113以控制在图像传感器118上入射的光量。光圈驱动器115控制光圈113的打开程度。
穿过镜头111和光圈113的光信号在图像传感器118的光接收表面上形成被摄体的图像。图像传感器118可将光信号转换为电信号并且可以是电荷耦合器件(CCD)图像传感器或互补金属氧化物半导体(CIS)图像传感器。图像传感器118的光敏度可由图像传感器控制器119控制。图像传感器控制器119可根据响应于输入的图像信号自动产生的控制信号或由用户手动输入的控制信号实时控制图像传感器118。
模拟信号处理器121可对由图像传感器118提供的模拟信号执行降噪处理、增益调整、波形整形、模数转换等。
ISP 120是可对由模拟信号处理器121处理的图像数据信号执行特定功能处理的信号处理器。ISP 120可降低输入的图像数据的噪声,并可执行图像信号处理以提高图像质量。所述处理可包括伽马校正、色彩滤波阵列插值、色彩矩阵、色彩校正、色彩增强、白平衡、亮度平滑、色彩阴影等。ISP 120可提供关于图像数据信号的特效处理。ISP 120也可将输入的图像数据压缩以便产生图像文件或从图像文件恢复图像数据。图像数据的压缩格式可以是可逆的或不可逆的。针对静止图像的压缩格式的示例包括联合图像专家组(JPEG)格式或JPEG 2000格式。当捕捉运动图像时,可通过根据(例如)运动图像专家组(MPEG)标准将多个帧压缩来产生运动图像文件。可根据可交换图像文件格式(Exif)标准产生图像文件。
ISP 120可从由图像传感器118产生的成像信号产生运动图像文件。成像信号可由图像传感器118产生并由模拟信号处理器121处理。ISP 120可从成像信号产生将被包括在运动图像文件中的帧,根据标准(诸如MPEG4、H.264/AVC或windows媒体视频(WMV))将帧编码并将帧压缩以产生运动图像文件。可按照各种格式(诸如mpg、mp4、3gpp、avi、asf或mov)产生运动图像文件。
从ISP 120中输出的图像数据可被直接或经由存储器130输入到存储读取控制器140。存储读取控制器140可自动或根据从用户输入的信号将图像数据存储在数据存储器142中。存储读取控制器140可从在数据存储器142中存储的图像文件读取图像数据,并经由存储器130或另一路径向显示驱动器162提供图像数据,以便在显示器164上显示图像。数据存储器142可以是单独的组件或数字拍摄设备100的内建组件。
ISP 120也可对输入的图像数据执行遮挡、着色、模糊、边缘增强、图像分析处理、图像识别处理、图像效果处理等。图像识别处理可以是面部识别处理、场景检测处理等。另外,ISP 120可处理将在显示器164上显示的图像信号。例如,可执行亮度等级调整、色彩校正、对比度调整、轮廓增强、屏幕分割、字符图像产生以及图像合成。
根据示例性实施例的一方面,ISP 120可被实施为可由图像信号处理模块重新配置的专用指令处理器(ASIP)。可下载图像信号处理模块,并且所述图像信号处理模块可使ISP 120能够执行多种多样的附加功能。ISP 120不限于上述配置,本领域普通技术人员将理解:ISP 120可被实施为能够根据下载的图像信号处理模块被重新配置的不同类型的硬件。
根据示例性实施例的一方面,可将ISP 120升级。也就是说,可通过在物理硬件计算模块中安装图像信号处理模块将ISP 120升级。因此,可通过交换物理硬件模块将ISP120的性能升级。例如,可通过交换(例如)中央处理单元(CPU)或随机存取存储器(RAM)将ISP 120中包括的硬件模块升级。
可根据在ISP 120中包括的硬件模块的类型在ISP 120中安装各种图像信号处理模块。因此,可交换在ISP 120中包括的硬件模块中的至少一个,并且可执行新的图像处理功能。
由ISP 120处理的信号可直接或经由存储器130输入控制器170。存储器130可作为数字拍摄设备100的主存储器运作并且可临时存储ISP 120或控制器170的操作所需要的信息。程序存储器150可存储用于操作数字拍摄设备100的一个或多个程序,诸如操作系统、应用系统等。
另外,数字拍摄设备100包括用于显示有关数字拍摄设备100捕捉到的图像的操作状态或信息的显示器164。显示器164可向用户提供视觉信息。显示器164可包括(例如)液晶显示器(LCD)面板、有机发光显示面板等,以便提供视觉信息。显示器164也可包括被配置为检测一个或多个触摸输入的触摸屏。
显示驱动器162向显示器164提供驱动信号。
控制器170可根据输入的图像信号或外部输入信号处理输入的图像信号并控制每个元件。控制器170可包括一个或多个处理器。可通过多个逻辑门的阵列实施处理器或者所述处理器可被实施为通用微处理器以及存储可由微处理器执行的程序的存储器的组合。本领域普通技术人员将理解:可通过各种类型的硬件中的任何一种实施所述处理器。
控制器170可执行在程序存储器150中存储的程序。控制器170可包括用于产生针对自动对焦、变焦比调整、焦点移位、自动曝光校正等的控制信号。控制器170可向光圈驱动器115、镜头驱动器112及图像传感器控制器119提供相应控制信号。因此,控制器170可控制数字拍摄设备100的一个或多个组件,诸如快门、闪光灯等。
根据示例性实施例的一方面,控制器170可被连接到外部监视器。控制器170可对从ISP 120输入的图像信号上执行预定处理以被显示在外部监视器上并发送处理后的图像信号,使得处理后的图像信号可被显示在外部监视器上。
控制器170可从外部系统下载图像信号处理模块,并且可控制通过使用下载的图像信号处理模块重新配置ISP 120。外部系统可以是能够交易信号处理模块的市场服务器、共享信号处理模块的云服务器或另一数字拍摄设备。
用户可经由操作器180输入控制信号。操作器180可包括各种功能按钮,诸如用于输入快门释放信号的快门释放按钮、用于输入电能控制信号的电能按钮、用于使视角变宽或变窄的缩放按钮、用于选择模式的模式选择按钮等。可按照允许用户输入控制信号的任何形式(诸如按钮、键盘、触摸板、触摸屏及遥控器)实施操作器180。
通信器190可包括网络接口卡(NIC)或调制解调器,并且可允许数字拍摄设备100经由有线或无线网络与外部系统进行通信。
图2是根据示例性实施例的一方面的示出ISP 120的操作的示图。
如图2所示,输入到捕捉器110的图像200被图像传感器118转换为电信号。转换后的信号被模拟信号处理器121转换为数字信号,然后被输入ISP120。ISP 120可执行一个或多个处理,以便产生作为压缩图像文件或原始数据格式的图像数据210。就此而言,图像传感器控制器119可提供针对图像传感器118的垂直信号的电压驱动以及定时脉冲以控制模拟信号处理器121和ISP 120的操作。
根绝示例性实施例的一方面,ISP 120可包括用于对由模拟信号处理器121转换的数字信号执行特定功能处理的多个模块中的一个或多个。图像信号处理模块可提高输入图像200的图像质量并执行图像信号处理以便提供特效。示例性图像信号处理模块包括降噪模块、伽马校正模块、色彩滤波器、色彩滤波阵列插值模块、色彩矩阵模块、色彩校正模块、色彩增强模块、白平衡模块、亮度平滑模块、增强现实模块、快门定时器模块、直方图分析模块、面部识别模块、色彩阴影模块等。
例如,ISP 120可移除在图像传感器中产生的对温度改变敏感的暗电流黑电平(dark current black level)。ISP 120可根据人类视力的非线性特性执行对信息进行编码的伽马校正。ISP 120可执行对被实施为预定数据的RGRG线和GBGB线的拜耳图案进行插值的色彩滤波阵列(CFA)插值,其中,在所述预定数据上,将伽马校正执行为RGB线。ISP 120可将插值后的RGB信号转换为YUV信号,执行边缘补偿,并移除U信号及Y信号的噪声。可通过使用高通滤波器对Y信号滤波并清晰地处理图像和色彩校正来执行边缘补偿,以通过使用标准色彩坐标系对YUV信号的色彩值进行校正。ISP 120可处理移除噪声的YUV信号并产生图像数据210。可根据预定压缩标准(例如,JPEG)按照原始数据格式或压缩数据格式输出图像数据210。
在ISP 120中包括的模块不限于上述模块,其具体操作是公知的,因此省略上述操作的详细描述。
根据在ISP 120中包括的图像信号处理模块的性能和效果,上述图像信号处理模块的操作可以是不同的。也就是说,根据所述模块的制造商和规范,所述模块的性能和处理速度可以是不同的。
例如,用于处理噪声补偿的降噪模块的能力和处理速度可根据算法和硬件性能而不同。针对一个图像信号处理模块的成本投入也可根据图像信号处理模块的性能而不同。另外,技术的发展可产生更高性能的降噪模块。
因此,根据示例性实施例的一方面,可基于用户选择通过至少一个图像信号处理模块的安装或删除重新配置ISP 120。例如,可容易地下载并安装或升级模块。
根据示例性实施例的一方面,ISP 120可被实施为专用集成电路(ASIC)。因此,ISP120可被配置为通过在作为硬件的ASIC中的灵活硬件模块中安装图像信号处理软件模块并驱动图像信号处理模块以控制ASIC的预定区域来执行多种多样的功能。例如,可按照ISP120初始作为用于输出实时取景图像数据的图像信号处理模块被释放的方式重新配置ISP120。稍后,可根据用户选择(例如,可安装针对3D图像数据处理的视频编解码器的图像信号处理模块使ISP 120的区域能够执行3D图像数据处理)另外安装至少一个图像信号处理模块。同时,可由控制器170控制通过安装预定图像信号处理模块重新配置ISP 120的操作。
根据示例性实施例的一方面,也可将ISP 120升级。也就是说,可通过在物理硬件模块中安装图像信号处理模块将ISP 120升级。因此,可通过交换物理硬件模块将ISP 120的性能升级。例如,可按照与升级台式PC中的CPU或RAM的处理类似的方式交换在ISP 120中包括的硬件模块。
取决于在ISP 120中包括的硬件模块的类型,可在ISP 120中安装各种图像信号处理模块。因此,可交换构成ISP 120的多个硬件模块中的一个或多个,并且可执行新的图像处理功能。
另外,可交换其它硬件模块(诸如在数字拍摄设备100中包括的捕捉器110、ISP120、模拟信号处理器121、存储器130、存储读取控制器140、数据存储器142、程序存储器150、显示驱动器162、显示器164、控制器170及操作器180)。
图3是根据示例性实施例的一方面的示出控制器170的结构的框图。
如图3所示,控制器170可包括被配置为接收对将被安装在ISP 120中的至少一个图像信号处理模块的选择的选择器171。控制器170可还包括控制从外部系统下载所选择的图像信号处理模块的下载控制器172以及通过使用下载的图像信号处理模块重新配置ISP120的重新配置器173。
根据示例性实施例的一方面,图像信号处理模块可包括可提高输入图像200的图像质量并执行用于提供特效的图像信号处理的不同类型的模块,诸如降噪模块、伽马校正模块、色彩滤波器、色彩滤波阵列插值模块、色彩矩阵模块、色彩校正模块、色彩增强模块、白平衡模块、亮度平滑模块、增强现实模块、快门定时器模块、直方图分析模块、面部识别模块、色彩阴影模块等。
下文将参照图4详细描述根据示例性实施例的一方面的控制器170的操作。
图4是根据示例性实施例的一方面的示出控制数字拍摄设备100的方法的流程图。所述方法可由图1的数字拍摄设备100执行。图4的数字拍摄设备100可由控制器170结合各种外围元件控制。
在操作410,选择器171可接收指示将被安装在ISP 120中的至少一个图像信号处理模块的选择。例如,可在显示器164上显示图像信号处理模块的列表。可从外部系统接收图像信号处理模块的列表。外部系统可以是市场服务器、云服务器或另一数字拍摄设备。例如,可通过接入市场服务器接收在线市场中注册的图像信号处理模块的列表。可选地,如果外部系统是云服务器,则可从云服务器接收图像信号处理模块的列表;如果外部系统是另一数字拍摄设备,则可从所述另一数字拍摄设备接收图像信号处理模块的列表。
选择器171可基于用户输入接收对接收到的图像信号处理模块的列表之中的至少一个图像信号处理模块的选择。附加地,可经由选择器171选择先前在数字拍摄设备100中安装的图像信号处理模块的升级版本。
图5是根据示例性实施例的一方面的在显示器164上所显示的图像信号处理模块的表500。
列表500可包括图像信号处理模块的名称510、容量520、下载计数530等。如本领域普通技术人员将理解,列表500不限于上述配置,并且也可显示关于图像信号处理模块的附加信息,诸如制造商、用户评价得分以及附加解释。
例如,列表500可还包括当下载相应图像信号处理模块时支付的购买价格。
根据示例性实施例的一方面,可接收在另一数字拍摄设备中安装的图像信号处理模块的列表。图像信号处理模块的列表可还包括所述另一数字拍摄设备的名称以及在数字拍摄设备100与所述另一数字拍摄设备之间的距离。
如图4所示,根据示例性实施例的一方面,在操作420,下载控制器172可控制从外部系统下载所选择的图像信号处理模块。例如,可通过接入市场服务器接收所选择的在在线市场中注册的图像信号处理模块。作为另一示例,可通过接入云服务器接收在云服务器上注册的图像信号处理模块。作为另一示例,可通过接入另一数字拍摄设备下载在所述另一数字拍摄设备中安装的图像信号处理模块。
在操作430,重新配置器173可通过使用下载的图像信号处理模块重新配置ISP120。上文参照图2描述了利用下载的图像信号处理模块对ISP 120的重新配置,因此这里将不再重复其描述。
现将参照图6至图12描述根据示例性实施例的一方面的控制数字拍摄设备的详细方法。
图6示出根据实施例的用于控制数字拍摄设备600的系统60。
如图6所示,数字拍摄设备600可包括ISP 620和控制器670。控制器670可还包括选择器671、下载控制器672以及重新配置器673。
数字拍摄设备600可通过安装从服务器610下载的至少一个图像信号处理模块重新配置ISP 620。
服务器610可以是提供能够交易图像信号处理模块的在线市场的市场服务器或向数字拍摄设备600提供云服务的云服务器。因此,如图8所示,数字拍摄设备600可经由市场服务器下载在市场服务器中存储的图像信号处理模块或在云服务器中存储的图像信号处理模块。
数字拍摄设备600可包括用于捕捉并再现图像的基本图像信号处理模块。随后,用户可从在线市场下载期望的图像信号处理模块并且可在ISP 620中安装下载的图像信号处理模块。也就是说,可通过在数字拍摄设备600中安装从在线市场下载的图像信号处理模块来重新配置ISP 620。
数字拍摄设备600的用户可将开源图像信号处理模块上传到在线市场。就此而言,开源图像信号处理模块指示由个人开发或修改的图像信号处理模块。
也就是说,可通过广告宣传由数字拍摄设备600的个人用户开发的开源图像信号处理模块来交易图像信号处理模块。这允许另一数字拍摄设备620的用户购买开源图像信号处理模块,从而创建新的盈利模式。
同时,可将第三代(3G)或第四代(4G)通信网络用于发送和接收图像信号处理模块数据。
图7是根据示例性实施例的一方面的示出数字拍摄设备600的操作的流程图。
在操作701,数字拍摄设备600可向服务器610提供关于数字拍摄设备600的信息。所述信息可包括ISP 620的配置、性能、可用容量及数字拍摄设备600的类型。根据示例性实施例的一方面,所述信息可还包括用户输入的搜索术语。
在操作702,服务器610可搜索针对与数字拍摄设备600提供的所述信息相应的图像信号处理模块的数据库。在操作703,服务器610可向数字拍摄设备600提供一个或多个图像信号处理模块搜索结果的列表。根据示例性实施例的一方面,在图像信号处理模块的所述列表中仅包括与提出请求的数字拍摄设备600的ISP 620兼容的图像信号处理模块。根据示例性实施例的一方面,图像信号处理模块的所述列表可仅包括与用户输入的搜索术语相应的图像信号处理模块。图像信号处理模块的列表可包括图像信号处理模块的名称、容量、下载计数等。
在操作704,数字拍摄设备600接收图像信号处理模块的所述列表,选择器671可接收对在所述列表中包括的所述一个或多个图像信号处理模块之中的至少一个图像信号处理模块的选择。可根据用户输入的选择信号做出所述选择。可选地,可由控制器670产生选择信号以更新在ISP 620中安装的图像信号处理模块。
在操作705,服务器610接收图像信号处理模块的选择信号。在操作706,下载控制器672可控制数字拍摄设备600下载所选择的图像信号处理模块。
在操作707,重新配置器673可通过使用下载的图像信号处理模块重新配置ISP620。
重新配置后的ISP 620可使用下载的图像信号处理模块执行图像处理。
图8是根据示例性实施例的一方面的示出在用于控制数字拍摄设备600的系统60中包括的服务器610的操作的流程图。
服务器610可以是提供能够交易图像信号处理模块的在线市场的市场服务器612或向数字拍摄设备600提供云服务的云服务器611。因此,如图8所示,可经由市场服务器612下载在云服务器611中存储的图像信号处理模块。
云服务器611可向市场服务器612发送包括所存储的图像信号处理模块的列表、容量、总的下载计数等的信息以允许在线市场向用户提供图像信号处理模块的列表。云服务器611也可发送计算机所需的知识数据库以查看市场服务器612。
市场服务器612可搜索云服务器611的图像信号处理模块以允许用户上传在在线市场或云服务器611上上传的开源图像信号处理模块。
图9是根据示例性实施例的一方面的示出用于控制数字拍摄设备900的系统90的框图。
如图9所示,数字拍摄设备900可包括ISP 920和控制器970。控制器970可还包括选择器971、下载控制器972及重新配置器973。
数字拍摄设备900可通过使用云服务器911处理预定图像信号处理模块的图像处理操作。例如,可通过使用云服务器911的ISP 915而不是数字拍摄设备900的ISP 920高速执行需要相对长的处理时间的图像信号处理模块(例如,增强现实模块、快门定时器模块、直方图分析模块、面部识别模块等)。
也就是说,当数字拍摄设备900需要执行图像信号处理操作时,如果将数字拍摄设备900连接到云系统,则数字拍摄设备900可通过使用云服务器911的图像信号处理器915而不是图像信号处理器920控制一些图像信号处理模块以执行图像信号处理操作。图像信号处理模块920的操作速度可用于确定是否使用图像信号处理器915执行图像信号处理操作。
根据示例性实施例的一方面,当数字拍摄设备900从服务器910下载至少一个图像信号处理模块并重新配置ISP 920时,下载的图像信号处理模块可不包括实际图像处理操作所需的所有数据。下载的图像信号处理模块可仅包括与云服务器911之间的发送和接收处理所需的数据。因此,在特定的图像信号处理模块(诸如那些具有高授权成本的图像信号处理模块)中,数字拍摄设备900可获得所需要的针对由云服务器911提供的尽可能多的图像信号处理模块的授权。针对云服务器911的图像信号处理模块中的一个或多个,可能需要授权和使用费。
图10是根据示例性实施例的一方面的示出由数字拍摄设备900执行的基于云服务器的图像信号处理操作的流程图。
在操作1001,数字拍摄设备900可确定针对特定图像信号处理模块的图像信号处理时间。例如,数字拍摄设备900可确定图像信号处理模块的操作是否花费相对长的时间或者所述操作是否是可由数字拍摄设备900中包括的ISP 920处理的操作。
在操作1002,数字拍摄设备900可向云服务器911发送将在其上执行图像信号处理操作的图像数据以及数字拍摄设备900所在的地点的环境信息。也就是说,数字拍摄设备900可发送数据以允许云服务器911执行图像信号处理操作。所述环境信息可包括天气、位置、时间等。
在操作1003,云服务器911可对接收到的图像数据执行图像信号处理操作。
在操作1004,在图像信号处理操作完成时,云服务器911可向数字拍摄设备900发送处理后的图像数据。
如上所述,数字拍摄设备900使用云服务器911以执行需要相对长的处理时间的图像信号处理模块的操作,从而提高图像信号处理模块的操作速度。
图11示出根据示例性实施例的一方面的用于控制数字拍摄设备1100的系统11。
如图11所示,数字拍摄设备1100可包括ISP 1120和控制器1170。控制器1170可还包括选择器1171、下载控制器1172及重新配置器1173。
数字拍摄设备1100可从另一数字拍摄设备1101下载至少一个图像信号处理模块。数字拍摄设备1100可安装下载的至少一个图像信号处理模块并由此重新配置ISP。
图12是根据示例性实施例的一方面的示出数字拍摄设备1100和第二数字拍摄设备1102的操作的流程图。
在操作1201,数字拍摄设备1100可经由网络向第一数字拍摄设备1101和第二数字拍摄设备1102发送图像信号处理模块搜索信号。所述网络可以是用于在数字拍摄设备之间发送和接收数据的有线或无线、近距离或广域数据发送和接收网络。
在操作1202,第一数字拍摄设备1101和第二数字拍摄设备1102可提供它们拥有的并且与所述搜索信号相应的图像信号处理模块的列表。可经由(例如)图6的服务器610接收图像信号处理模块的列表。也就是说,当第一数字拍摄设备1101和第二数字拍摄设备1102向图6的服务器610提供它们在云服务器中拥有的图像信号处理模块的列表并且数字拍摄设备1100请求图像信号处理模块的列表时,第一数字拍摄设备1101和第二数字拍摄设备1102可向数字拍摄设备1100提供它们自己的图像信号处理模块的列表。第一数字拍摄设备1101和第二数字拍摄设备1102可相对靠近数字拍摄设备1100。可选地,第一数字拍摄设备1101和第二数字拍摄设备1102的位置可较远,可经由网络向数字拍摄设备1100提供图像信号处理模块。
在操作1203,数字拍摄设备1100可从接收到的图像信号处理模块的列表中选择至少一个图像信号处理模块,在操作1204,可向拥有所选择的图像信号处理模块的第一数字拍摄设备1101发送图像信号处理模块选择信号。
在操作1205,接收到图像信号处理模块选择信号的第一数字拍摄设备1101可向数字拍摄设备1100发送所选择的图像信号处理模块。
在操作1206,数字拍摄设备1100可通过使用下载的图像信号处理模块重新配置ISP 1120。
如上所述,根据示例性实施例的一个或多个方面,数字拍摄设备100、600、900及1100可通过选择性地下载图像信号处理模块重新配置ISP。因此,数字拍摄设备100、600、900及1100可具有提高的处理速度而重量轻。
以上参照图1至图12描述交换构成数字拍摄设备100、600、1000及1200的ISP 120的软件模块的示例性实施例的各方面,不过不限于此。
如上所述,可交换构成ISP 120的硬件模块。另外,可交换构成在数字拍摄设备100中包括的捕捉器110、ISP 120、模拟信号处理器121、存储器130、存储读取控制器140、数据存储器142、程序存储器150、显示驱动器162、显示器164、控制器170及操作器180的所有硬件模块。在下文中,将参照图13A至图18描述控制可交换其硬件模块的数字拍摄设备1300的方法。同时,数字拍摄设备1300可与上文参照图1至图12描述的数字拍摄设备100、600、900及1100相应。因此,虽然在下文被省略,但是数字拍摄设备1300可执行上文参照数字拍摄设备100、600、900及1100描述的操作。
图13A是根据示例性实施例的一方面的示出包括可交换硬件模块的数字拍摄设备1300的分解图。图13B是根据示例性实施例的一方面的示出包括可交换硬件模块的数字拍摄设备1300的框图。
如图13A所示,数字拍摄设备1300可包括硬件模块1310、连接板1320及显示器1330。
硬件模块1310、连接板1320及显示器1330可相互电连接。更详细地讲,在硬件模块1310中包括的多个硬件模块可包括接触件并且可电连接到连接板1320。
如图13B所示,数字拍摄设备1300可包括无线通信模块1311(蓝牙、WiFi、LTE等)、位置感测模块1312(GPS、陀螺仪传感器等)、电池模块1313、控制模块1340、扬声器模块1314、相机模块1315、存储介质模块1316、天线模块1317以及音频模块1318。可通过交换各种性能和制造商的相应硬件模块来改变这些硬件模块中的每个。
然而,硬件模块的驱动器对于在数字拍摄设备1300中正常连接和使用交换后的硬件模块是必要的。
所述驱动器可以是被配置为控制构成数字拍摄设备1300的硬件模块的输入和输出的软件。所述驱动器可从数字拍摄设备1300的操作系统接收输入命令和输出命令。所述驱动器可根据接收到的输入和输出命令控制外围装置。外围装置可被归类为各种类型并且具有各种控制方法。因此,一般而言,从操作系统接收到的到所述驱动器的输入和输出命令具有统一格式,同时通过使用所述驱动器唯一控制外围装置中的每个。当新的外围装置出现时,在没有相关驱动器的情况下,操作系统可能无法控制所述外围装置。因此,数字拍摄设备1300可安装与交换后的硬件模块相关的驱动器,从而重新配置硬件模块并实现对交换后的硬件模块的控制。
然而,每次交换硬件模块时亲自重新安装所述驱动器对用户而言是非常不方便的。另外,数字拍摄设备1300的所述多个硬件模块单独运行。在交换后的硬件模块之间的兼容性及其性能可根据驱动器的类型而不同。因此,当用户亲自重新安装驱动器时,可能难以考虑在所述驱动器和数字拍摄设备1300的硬件模块之间的兼容性。
因此,根据示例性实施例的一方面,数字拍摄设备1300可使用云服务器以容易下载与交换后的硬件模块相关的优化驱动器。因此,用户可便利地使用交换后的硬件模块。
另外,数字拍摄设备1300可基于所使用的驱动器的特定版本重新配置硬件模块。各种驱动器版本可选择性地实现交换后的硬件模块的功能。例如,硬件模块销售商可向具有有限功能可用于硬件模块的消费者提供驱动器版本。因此,用户可根据针对硬件模块所需的功能选择性地购买驱动器。用户可在数字拍摄设备1300中安装驱动器以便使用硬件模块的特定功能。
在下文中,将参照图14至图18描述根据示例性实施例的一方面的控制数字拍摄设备1300的方法。
图14是根据实施例的示出其硬件模块可交换的数字拍摄设备1300的控制器1340的结构的框图。
如图14所示,数字拍摄设备的控制器1340可包括硬件模块信息获得器1341、选择器1342、下载控制器1343及重新配置器1344。
硬件模块信息获得器1341可检测交换后的硬件模块。根据示例性实施例的一方面,硬件模块信息获得器1341可在将数字拍摄设备1300开启时读取硬件模块信息并确定是否存在一个或多个交换后的硬件模块。
根据示例性实施例的一方面,硬件模块信息获得器1341可获得硬件模块信息并每隔一定时间检测其改变。
选择器1342可基于交换后的硬件模块提供与交换后的硬件模块相关的多个驱动器的列表。根据示例性实施例的一方面,选择器1342可向外部系统发送交换后的硬件模块信息,从云服务器接收有关与交换后的硬件模块相关的所述多个驱动器的信息并通过显示器1330向用户提供所述驱动器的列表。
所述外部系统可以是(例如)提供能够交易驱动器的在线市场的市场服务器。云服务器可连接到数字拍摄设备1300或另一数字拍摄设备。根据示例性实施例的一方面,如果所述外部系统是市场服务器,则当用户通过使用支付手段为所选择的驱动器进行支付时,选择器1342可完成驱动器交易。
根据示例性实施例的一方面,可预先利用针对预定数量的硬件模块的驱动器加载数字拍摄设备1300。因此,在没有向外部系统发送数据的情况下,选择器1342可提供在数字拍摄设备1300中包括的驱动器的列表。
在提供与交换后的硬件模块相关的驱动器的列表之前,选择器1342可通过弹出窗口接收对是否提供驱动器的列表的选择。
根据示例性实施例的一方面,选择器1342可提供在数字拍摄设备1300中安装的多个应用之中与交换后的硬件模块相关的一个或多个应用的列表。
根据示例性实施例的一方面,可通过交换数字拍摄设备1300的硬件模块中的一个或多个来改变在数字拍摄设备1300中安装的应用中的一个或多个的兼容性或使用所述应用的功能。因此,选择器1342可提供应用的列表,因此可下载应用版本以实现新的功能。由于针对在数字拍摄设备1300中安装的应用的硬件模块的交换或针对交换后的硬件模块而优化后的应用版本,新的功能可以是可用的。
根据示例性实施例的一方面,下载控制器1343可从外部系统下载从所提供的列表中选择的驱动器。例如,如果用户输入选择在所述列表中包括的驱动器中的一个,则下载控制器1343可向外部系统发送有关所选择的驱动器的数据请求信号并从外部系统下载有关所选择的驱动器的数据。
根据示例性实施例的一方面,下载控制器1343可控制下载并安装(或更新)从与交换后的硬件模块相关的应用的列表中所选择的应用。
根据示例性实施例的一方面,重新配置器1344可通过使用下载的驱动器重新配置交换后的硬件模块。因此,控制器1340可通过使用重新配置的交换后的硬件模块控制交换后的硬件模块。
根据在所述列表中提供的驱动器,不同的功能通过交换后的硬件模块可以是可用的。例如,当相机模块被交换时,特定驱动器可支持光学手抖校正同时另一特定驱动器可不支持光学手抖校正。
因此,用户可根据必要功能设定支出优先级,选择性地下载必要驱动器,并重新配置交换后的硬件模块。
图15是根据示例性实施例的一方面的示出控制其中硬件模块可交换的数字拍摄设备1300的方法的流程图。
在操作1510,数字拍摄设备1300可获得交换后的硬件模块的信息。根据示例性实施例的一方面,当将数字拍摄设备1300关闭时并且硬件模块被交换时,可在将数字拍摄设备1300开启时获得硬件模块交换信息。
在操作1520,数字拍摄设备1300可基于所述硬件模块交换信息提供与交换后的硬件模块相关的多个驱动器的列表。
根据示例性实施例的一方面,数字拍摄设备1300可在提供与交换后的硬件模块相关的驱动器的列表之前通过弹出窗口接收对是否提供驱动器的列表的选择。
图16是根据示例性实施例的一方面的示出数字拍摄设备1300的硬件模块被交换的情况的示图。
如图16所示,当数字拍摄设备1300的相机模块1315被交换时,数字拍摄设备1300可显示询问是否根据相机模块1315的交换下载驱动器的弹出窗口1600。
数字拍摄设备1300可在将数字拍摄设备1300从关闭状态改变为开启状态时确定硬件模块是否被交换。也可在将数字拍摄设备1300开启时交换相机模块1315。数字拍摄设备1300可每隔一定时间确定硬件模块是否被交换,并获得有关交换后的硬件模块的信息。
图17是根据示例性实施例的一方面的示出数字拍摄设备1300提供与硬件模块相关的驱动器的列表的情况的示图。
如图17所示,当相机模块被交换时,数字拍摄设备1300可根据交换后的相机模块的制造商和功能提供多个驱动器的列表1700。就此而言,列表1700的第一驱动器1701、第二驱动器1702、第三驱动器1703可按照不同价格提供不同功能。例如,第一驱动器1701可按照最高价格实现相机模块的大多数功能。同时,第二驱动器1702可按照较低的价格仅实现相机模块的基本功能。第三驱动器1703可以是第二驱动器1702的不同版本并按照相同价格提供类似功能。例如,第三驱动器1703可以是提供提高后的稳定性和性能的更新版本。
因此,数字拍摄设备1300可通过下载根据用户的需求所选择的驱动器重新配置可交换的硬件模块。
如图15所示,在操作1530,数字拍摄设备1300可从外部系统下载所选择的驱动器。例如,如果用户输入选择来自外部系统的驱动器中的一个,则下载控制器1343可向外部系统发生有关所选择的驱动器的数据请求信号并从外部系统下载所选择的驱动器。
在操作1540,数字拍摄设备1300可通过使用下载的驱动器重新配置交换后的硬件模块。因此,数字拍摄设备1300的控制器1340可通过重新配置的硬件模块控制交换后的硬件模块。
数字拍摄设备1300可仅实现由通过交换后的硬件模块安装的驱动器支持的功能。
根据示例性实施例的一方面,在硬件模块被交换后,数字拍摄设备1300可更新并提供所安装的应用之中与交换后的硬件模块相关的应用的列表。交换后的硬件模块可提供不同的兼容性或可用功能,因而用户可期望不同的应用或版本。
例如,图18是示出示例性实施例的一方面的数字拍摄设备1300提供与硬件模块相关的应用的列表的示图。
如图18所示,当相机模块1315被交换时,数字拍摄设备1300可提供与交换后的相机模块1315相关的应用的列表1810。
根据示例性实施例的一方面,数字拍摄设备1300可确定是否存在可使用在交换后的相机模块1315中可用的新功能的应用的更新版本或针对交换后的相机模块1315而优化的应用的更新版本。可通过使用外部系统进行上述确定,并且可根据确定结果提供相关应用的列表1810。
与交换后的硬件模块相关的应用的列表1810可不仅包括先前在数字拍摄设备1300中安装的应用的更新列表,而且包括根据交换后的硬件模块推荐安装的应用的列表。例如,也可提供特定硬件模块的用户频繁使用的应用的列表。
因此,当硬件模块被交换时,数字拍摄设备1300可自动获得并提供可使用交换后的硬件模块的新功能的应用版本。也可向用户提供针对交换后的硬件模块而优化的应用版本的列表,从而促进用户便利性并提高数字拍摄设备1300的性能。
本领域普通技术人员将理解:参照图16至图18提供的以上描述涉及相机模块1315被交换的情况,所述描述也可被应用于一个或多个其它硬件模块(诸如无线通信模块1311(蓝牙、WiFi、LTE等)、位置感测模块1312(GPS、陀螺仪传感器等)、电池模块1313、控制模块1340、扬声器模块1314、存储介质模块1316、天线模块1317以及音频模块1318)被交换的情况。
在此描述的装置可包括用于执行程序数据的处理器、用于存储程序数据的存储器、永久存储装置(诸如盘驱动器)、用于与外部装置进行通信的通信端口以及用户接口装置(诸如显示器、键等)。软件模块可被存储为在计算机可读介质上的程序指令或可执行计算机可读代码。计算机可读介质可包括只读存储器(ROM)、随机存取存储器(RAM)、CD-ROM、磁带、软盘以及光学数据存储装置。也可经由联网的计算机系统连接计算机可读记录介质,使得计算机可读代码按照分布式方式被存储并被执行。这种介质可由计算器读取,存储在存储器中并由处理器执行。
应理解:应仅在描述性意义上考虑在此描述的示例性实施例而并非为了限制的目的。在每个实施例中的特征或方面的描述应通常理解为对于在其它实施例中的其它类似特征或方面而言是可用的。本领域普通技术人员将理解:虽然已经参照附图描述一个或多个实施例,但是在不脱离由权利要求书限定的精神和范围的情况下,可在其中做出在形式和细节方面的各种改变。

Claims (14)

1.一种控制能够重新配置图像信号处理器ISP的数字拍摄设备的方法,所述方法包括:
接收对将被安装在ISP中的至少一个图像信号处理模块的选择;
从外部系统下载所选择的至少一个图像信号处理模块;
通过使用下载的至少一个图像信号处理模块重新配置ISP;以及
使用下载的至少一个图像信号处理模块对图像数据执行图像信号处理操作,
其中,使用下载的至少一个图像信号处理模块对图像数据执行图像信号处理操作的步骤包括:基于下载的至少一个图像信号处理模块对所述图像数据执行图像信号处理操作所需的图像信号处理时间来确定是在数字拍摄设备上对所述图像数据执行图像信号处理操作还是将所述图像数据发送到外部系统以在外部系统上对所述图像数据执行图像信号处理操作。
2.如权利要求1所述的方法,其中,接收选择的步骤包括:
接收在外部系统中存储的图像信号处理模块的列表;以及
接收对接收到的图像信号处理模块的列表之中的至少一个图像信号处理模块的选择。
3.如权利要求2所述的方法,其中,接收选择的步骤包括:
向外部系统发送有关数字拍摄设备的信息;
从外部系统搜索与有关数字拍摄设备的信息相应的一个或多个图像信号处理模块;以及
从外部系统接收所找到的图像信号处理模块的列表。
4.如权利要求2所述的方法,其中,图像信号处理模块的列表包括:针对在所述列表中包括的图像信号处理模块中的每个的容量和下载计数信息。
5.如权利要求1所述的方法,其中,重新配置后的ISP执行图像处理操作。
6.如权利要求1所述的方法,其中,外部系统是提供能够交易所述至少一个图像信号处理模块的在线市场的市场服务器、连接到数字拍摄设备的云服务器以及另一数字拍摄设备中的至少一个。
7.如权利要求1所述的方法,其中,外部系统是连接到数字拍摄设备的云服务器,
拍摄设备将图像数据和环境信息上传到云服务器并且云服务器执行图像处理操作。
8.如权利要求1所述的方法,其中,接收选择的步骤包括:
通过云服务器接收在第二数字拍摄设备中存储的图像信号处理模块的列表;以及
接收对接收到的图像信号处理模块的列表之中的至少一个图像信号处理模块的选择。
9.一种数字拍摄设备,包括:
图像信号处理器ISP,被配置为执行与预定图像信号处理模块相应的图像处理操作;
控制器,被配置为:
接收对将被安装在ISP中的至少一个图像信号处理模块的选择,
控制从外部系统下载所选择的至少一个图像信号处理模块,
通过使用下载的至少一个图像信号处理模块重新配置ISP,以及
使用下载的至少一个图像信号处理模块对图像数据执行图像信号处理操作,
其中,使用下载的至少一个图像信号处理模块对图像数据执行图像信号处理操作的步骤包括:基于下载的至少一个图像信号处理模块对所述图像数据执行图像信号处理操作所需的图像信号处理时间来确定是在数字拍摄设备上对所述图像数据执行图像信号处理操作还是将所述图像数据发送到外部系统以在外部系统上对所述图像数据执行图像信号处理操作。
10.如权利要求9所述的数字拍摄设备,其中,控制器还被配置为:接收包括有关在外部系统中注册的图像信号处理模块的信息的列表,并接收对接收到的图像信号处理模块的列表之中的至少一个图像信号处理模块的选择。
11.如权利要求10所述的数字拍摄设备,其中,控制器还被配置为向外部系统发送有关数字拍摄设备的信息,以及接收与有关数字拍摄设备的信息相应的图像信号处理模块的列表。
12.如权利要求10所述的数字拍摄设备,其中,有关图像信号处理模块的信息包括:针对图像信号处理模块中的每个的容量和下载计数。
13.如权利要求9所述的数字拍摄设备,其中,外部系统是被配置为提供能够交易所述至少一个图像信号处理模块的在线市场的市场服务器、连接到所述数字拍摄设备的云服务器以及第二数字拍摄设备中的一个。
14.一种用于控制数字拍摄设备的系统,所述系统包括数字拍摄设备和被配置为向数字拍摄设备提供多个图像信号处理模块的服务器,
其中,所述数字拍摄设备包括:
图像信号处理器ISP,被配置为执行与预定图像信号处理模块相应的图像处理操作;
控制器,被配置为:
接收对将被安装在ISP中的至少一个图像信号处理模块的选择,
控制从外部系统下载所选择的至少一个图像信号处理模块,
通过使用下载的至少一个图像信号处理模块重新配置ISP,以及
使用下载的至少一个图像信号处理模块对图像数据执行图像信号处理操作,
其中,使用下载的至少一个图像信号处理模块对图像数据执行图像信号处理操作的步骤包括:基于下载的至少一个图像信号处理模块对所述图像数据执行图像信号处理操作所需的图像信号处理时间来确定是在数字拍摄设备上对所述图像数据执行图像信号处理操作还是将所述图像数据发送到外部系统以在外部系统上对所述图像数据执行图像信号处理操作。
CN201480067549.0A 2013-12-09 2014-12-08 能够重新配置图像信号处理器的数字拍摄设备及其控制方法 Expired - Fee Related CN105814879B (zh)

Applications Claiming Priority (5)

Application Number Priority Date Filing Date Title
KR20130152647 2013-12-09
KR10-2013-0152647 2013-12-09
KR10-2014-0106229 2014-08-14
KR1020140106229A KR102146859B1 (ko) 2013-12-09 2014-08-14 이미지 신호 처리부를 재구성 가능한 디지털 촬영 장치 및 그 제어방법
PCT/KR2014/012013 WO2015088212A1 (en) 2013-12-09 2014-12-08 Digital photographing apparatus capable of reconfiguring image signal processor and method of controlling the same

Publications (2)

Publication Number Publication Date
CN105814879A CN105814879A (zh) 2016-07-27
CN105814879B true CN105814879B (zh) 2019-06-28

Family

ID=53515167

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201480067549.0A Expired - Fee Related CN105814879B (zh) 2013-12-09 2014-12-08 能够重新配置图像信号处理器的数字拍摄设备及其控制方法

Country Status (2)

Country Link
KR (1) KR102146859B1 (zh)
CN (1) CN105814879B (zh)

Families Citing this family (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2017094940A1 (ko) * 2015-12-04 2017-06-08 엘지전자 주식회사 조립형 이동 단말기 및 그의 모듈 정보 제공 방법

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102473440A (zh) * 2009-08-07 2012-05-23 高通股份有限公司 处理图像的设备及方法
CN102665039A (zh) * 2012-05-17 2012-09-12 北京工业大学 一种数码相机以及利用云计算平台对相机进行操作的方法
KR20130077216A (ko) * 2011-12-29 2013-07-09 엘지이노텍 주식회사 카메라 모듈 및 카메라 모듈의 오토 포커싱 방법

Family Cites Families (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP5316363B2 (ja) * 2009-10-20 2013-10-16 ソニー株式会社 情報処理装置、機能管理方法、コンピュータプログラム及び情報処理システム
US8570381B2 (en) * 2011-03-08 2013-10-29 Neal Solomon Multi-functional modular digital imaging system
US20130013438A1 (en) * 2011-07-05 2013-01-10 Li-Hui Chen Grouping Method for Group-buying Based on Wireless Communication Protocol
US9081798B1 (en) * 2012-03-26 2015-07-14 Amazon Technologies, Inc. Cloud-based photo management
US9405832B2 (en) * 2012-05-31 2016-08-02 Apple Inc. Application search query classifier

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102473440A (zh) * 2009-08-07 2012-05-23 高通股份有限公司 处理图像的设备及方法
KR20130077216A (ko) * 2011-12-29 2013-07-09 엘지이노텍 주식회사 카메라 모듈 및 카메라 모듈의 오토 포커싱 방법
CN102665039A (zh) * 2012-05-17 2012-09-12 北京工业大学 一种数码相机以及利用云计算平台对相机进行操作的方法

Also Published As

Publication number Publication date
CN105814879A (zh) 2016-07-27
KR20150066999A (ko) 2015-06-17
KR102146859B1 (ko) 2020-08-21

Similar Documents

Publication Publication Date Title
EP3579544B1 (en) Electronic device for providing quality-customized image and method of controlling the same
AU2015336948B2 (en) Camera application
TWI588776B (zh) 在行動裝置中到影像相關應用程式的進入點
KR101247054B1 (ko) 구성 파일들을 가져오기 위한 방법, 휴대용 장치 및 컴퓨터 메모리
US9819897B2 (en) Digital photographing apparatus capable of reconfiguring image signal processor and method of controlling the same
US9361319B2 (en) Systems, methods, and computer program products for digital photography
US20180025478A1 (en) Electronic device for processing image
KR20170034428A (ko) 추천을 위한 카메라 메타데이터의 사용 기법
US9578188B1 (en) Enterprise photo / video experience platform and kiosk systems
CN109756671A (zh) 使用多个相机记录图像的电子装置及其操作方法
US20150020122A1 (en) Mobile device, display apparatus and method for sharing contents thereof
KR20140125983A (ko) 전자 장치 운용 방법 및 이를 지원하는 전자 장치
CN104349047A (zh) 图像拍摄设备及其拍摄方法
CN107111371A (zh) 一种展示全景视觉内容的方法、装置及终端
KR20140125984A (ko) 영상 처리 방법 및 이를 지원하는 전자 장치와 시스템
TW201007491A (en) System and method for efficiently performing image processing operations
WO2020206927A1 (zh) 用户智能设备及其基于地理位置的相机参数智能配置方法
CN105611176A (zh) 一种拍照方法、系统及装置
CN105814879B (zh) 能够重新配置图像信号处理器的数字拍摄设备及其控制方法
US20230188991A9 (en) Smart wearable devices and system therefor
US20200074217A1 (en) Techniques for providing user notice and selection of duplicate image pruning
CN104104870B (zh) 拍摄控制方法、拍摄控制装置及拍摄设备
WO2023071933A1 (zh) 相机拍摄参数调整方法、装置及电子设备
US9456148B1 (en) Multi-setting preview for image capture
CN115359105A (zh) 景深扩展图像生成方法、设备及存储介质

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant
CF01 Termination of patent right due to non-payment of annual fee

Granted publication date: 20190628

Termination date: 20211208

CF01 Termination of patent right due to non-payment of annual fee