CN104754196A - 电子装置及方法 - Google Patents

电子装置及方法 Download PDF

Info

Publication number
CN104754196A
CN104754196A CN201410844363.3A CN201410844363A CN104754196A CN 104754196 A CN104754196 A CN 104754196A CN 201410844363 A CN201410844363 A CN 201410844363A CN 104754196 A CN104754196 A CN 104754196A
Authority
CN
China
Prior art keywords
data
image
processor
primary processor
preview
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN201410844363.3A
Other languages
English (en)
Other versions
CN104754196B (zh
Inventor
尹准浩
吴时天
车祥赫
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Samsung Electronics Co Ltd
Original Assignee
Samsung Electronics Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Samsung Electronics Co Ltd filed Critical Samsung Electronics Co Ltd
Publication of CN104754196A publication Critical patent/CN104754196A/zh
Application granted granted Critical
Publication of CN104754196B publication Critical patent/CN104754196B/zh
Expired - Fee Related legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00Details of television systems
    • H04N5/76Television signal recording
    • H04N5/765Interface circuits between an apparatus for recording and another apparatus
    • H04N5/77Interface circuits between an apparatus for recording and another apparatus between a recording apparatus and a television camera
    • H04N5/772Interface circuits between an apparatus for recording and another apparatus between a recording apparatus and a television camera the recording apparatus and the television camera being placed in the same enclosure
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60Control of cameras or camera modules
    • H04N23/63Control of cameras or camera modules by using electronic viewfinders
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/80Camera processing pipelines; Components thereof
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N9/00Details of colour television systems
    • H04N9/79Processing of colour television signals in connection with recording
    • H04N9/80Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback
    • H04N9/804Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback involving pulse code modulation of the colour picture signal components
    • H04N9/8042Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback involving pulse code modulation of the colour picture signal components involving data reduction
    • H04N9/8047Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback involving pulse code modulation of the colour picture signal components involving data reduction using transform coding

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Studio Devices (AREA)

Abstract

提供一种控制包括主处理器和图像处理器的拍摄装置的方法。该方法包括:由该图像处理器将发送数据发送到该主处理器,其中该发送数据包括通过拍摄模块拍摄的图像的预览图像数据,以及若存在与所述预览图像数据并行处理的图像数据,则发送数据还包括所述图像数据;由所述主处理器从发送数据中提取预览图像数据;并在所述拍摄装置的显示部分上显示所提取的预览图像数据;并且,若在所述发送数据中包括所述图像数据,则由主处理器将所述图像数据存储在存储器中。

Description

电子装置及方法
相关申请的交叉引用
本申请要求2013年12月30日向韩国知识产权局提交的第10-2013-0167242号韩国专利申请的优先权权益,其全部公开通过引用整体并入本文。
技术领域
本发明的一个或多个实施例涉及电子装置(如拍摄装置)及方法。
背景技术
最近,在大多数移动设备上安装了移动操作系统(OS)。移动OS提供包括相机功能的许多功能。其上安装了移动OS的设备包括图像处理器,从而向应用处理器提供由用于图像捕捉的图像传感器所接收的物体(object)的图像数据。
在基于移动OS的拍摄装置中,当诸如快门、变焦(zoom)、聚焦(focus)等拍摄参数的值被改变或按下快门以进行拍摄时,该应用处理器检查改变的值并根据改变的值发送命令到该图像处理器,由此操作相机。
发明内容
本发明的一个或多个实施例提供一种可减少拍摄时间或连拍间隔(shot-to-shot,STS)时间(即执行前一拍照(shot)之后到执行下一拍照之前花费的时间)的包括主处理器和图像处理器的电子装置(如拍摄装置),以及控制该拍摄装置的方法。
附加方面将在以下说明书中部分地阐述,并将从说明书中部分地变得明显,或者可以通过对所提出的实施例的实践来习得。
根据一个或多个实施例,提供一种控制包括主处理器和图像处理器的拍摄装置的方法。该方法包括:由该图像处理器将发送数据发送到该主处理器,其中该发送数据包括通过拍摄模块拍摄的图像的预览图像数据,以及,若存在与所述预览图像数据并行处理的图像数据时,发送数据还包括所述图像数据。该方法还包括由该主处理器从所述发送数据中提取预览图像数据,并在拍摄装置的显示部分上显示所提取的预览图像数据,以及,若在该发送数据中存在所述图像数据,则由主处理器将所述图像数据存储在存储器中。
所述图像数据可以是压缩的图像数据。
所述主处理器可以从存储在存储器中的压缩的图像数据创建所拍摄的图像的压缩文件。
所述发送数据可以通过主处理器和图像处理器之间的移动行业处理器接口(MIPI)来发送。
所述发送数据的格式可以是该MIPI的用户定义的类型。
所述发送数据的发送可包括顺序地发送多条发送数据,该多条发送数据包括与所拍摄的图像的多个帧相对应的多条预览图像数据。
一条所述发送数据可包括关于一个帧的预览图像数据、一个所述图像数据的块(block)、以及包括块的索引和块的数目的报头数据(header data)。
若所述发送数据包括预览图像数据、所述图像数据和报头数据,则主处理器可以解析所述报头数据并确定所述图像数据是否存在。
所述主处理器和图像处理器中的至少一者可以不支持MIPI的虚拟通道协议(virtual channel protocol)。
所述主处理器可以是应用处理器。
根据一个或多个实施例,一种拍摄装置包括:图像处理器,其将发送数据发送到主处理器,其中该发送数据包括通过拍摄模块拍摄的图像的预览图像数据,以及若存在与所述预览图像数据并行处理的图像数据,则发送数据还包括所述图像数据。所述主处理器从发送数据中提取预览图像数据并在所述拍摄装置的显示部分上显示所提取的预览图像数据。若在所述发送数据中包括所述图像数据,则主处理器将所述图像数据存储在存储器中。
所述图像数据可以是压缩的图像数据。
所述主处理器可以从存储在存储器中的压缩的图像数据创建所拍摄的图像的压缩文件。
所述发送数据可以通过主处理器和图像处理器之间的移动行业处理器接口(MIPI)来发送。
所述发送数据的格式可以是该MIPI的用户定义的类型。
所述图像处理器可以顺序地发送多条发送数据。该多条发送数据包括与所拍摄的图像的多个帧相对应的多条预览图像数据。
一条所述发送数据可包括关于一个帧的预览图像数据、一个所述并行处理的图像数据的块(block)、以及包括块的索引和块的数目的报头数据。
当所述发送数据包括预览图像数据、所述图像数据和报头数据时,主处理器可以解析所述发送数据的报头数据并确定所述图像数据是否存在。
所述主处理器和图像处理器中的至少一者可以不支持MIPI的虚拟通道协议。
附图说明
从以下结合附图对实施例的描述,这些和/或其他方面将变得明显且更容易理解,在附图中:
图1是示出根据一个实施例的、电子装置(如拍摄装置)的外观的图。
图2为示意地示出了图1的拍摄装置的结构的框图。
图3是示出图2中的图像处理器和主处理器之间的接口的框图。
图4A至图4C为示出根据另一实施例的、在拍摄装置的图像处理器中处理的发送数据的格式的图。
图5为示出根据另一实施例的、在拍摄过程期间图像处理器和主处理器之间的数据发送的图。
图6A为示出相关技术中的控制拍摄装置的方法的图。
图6B为示出根据一个实施例的、控制拍摄装置的方法的图。
图7为示出根据另一个实施例的、控制拍摄装置的方法的流程图。
具体实施方式
现在将详细参考实施例,实施例的示例在附图中示出,附图中相同的标号始终指代相同的元件。在这一点上,本实施例可具有不同的形式并且不应该被解释为受限于本文所阐述的描述。因此,下面参照附图描述的实施例仅仅是为了解释本描述的各个方面。在以下描述中,当与相关的已知功能或结构有关的详细描述被确定为会使得本发明的要旨不清楚时,该详细描述将在本文中被省略。
图1是示出根据一个实施例的、电子装置(如拍摄装置100)的外观的图。
参照图1,根据本实施例的该拍摄装置100可以不仅具有拍摄功能还具有各种其他功能。该拍摄装置100包括用于操作相机的图像处理器块101以及用于执行各种应用的主处理器块201。主处理器块201的主处理器可以是应用处理器(AP)。
图像处理器块101包括具有变焦环103和聚焦环104的镜头筒107、传感器105、图像处理器102和快门按钮106。主处理器块201可包括主处理器203和显示部分202。上述配置是为了方便解释而提供的并且可以以各种方式修改。
图2为示意地示出了图1的拍摄装置的结构的框图。
参照图2,该拍摄装置100可被划分为图像处理器块101和主处理器块201。操纵部分120被连接到主处理器块201的主处理器203。
主处理器块201可包括主处理器203、显示部分202和存储部分210。
主处理器203通过执行拍摄装置100的拍摄应用来控制拍摄装置100的整体操作,即,拍摄准备、图像再现准备、拍摄的图像显示、存储等。此外,主处理器203可以压缩由图像处理器102发送的拍摄图像并且将所压缩的图像存储在存储部分210,或者主处理器203可以从图像处理器102接收压缩的拍摄图像并将所接收的图像存储在存储部分210中。
虽然未示出,但图像处理器块101的拍摄模块110可以包括镜头单元、镜头驱动器、光圈、光圈驱动器、成像器件、成像器件控制器、模拟信号处理器等。该镜头单元使光信号聚焦。该镜头单元可包括:根据焦距控制视角的增大或减小的变焦镜头以及对物体进行聚焦的聚焦镜头。变焦镜头、聚焦镜头和物镜(object lens)都可以或者作为单个镜头来提供,或者作为多个镜头的组来提供。光圈通过控制其打开/关闭的程度来控制入射到光圈上的光量。镜头驱动器和光圈驱动器根据来自图像处理器102的控制信号分别地驱动镜头和光圈。镜头驱动器通过控制镜头的位置来控制焦距并执行诸如自动聚焦、变焦、聚焦改变(focus changing)等操作。光圈驱动器控制光圈的打开/关闭的程度,具体地,f-数或光圈值,并且从而可以执行诸如自动聚焦、自动曝光校正、聚焦改变、景深控制等操作。
通过镜头单元的光信号到达成像器件的光接收表面从而形成物体的图像。成像器件可以是将光信号转换成电信号的电荷耦合器件(CCD)、互补金属氧化物半导体图像传感器(CIS)或高速图像传感器。成像器件的灵敏度可以由成像器件控制器控制。成像器件控制器可以根据由用户的操纵手动输入的控制信号或者由实时输入的图像信号自动生成的控制信号来控制成像器件。成像器件的曝光时间由快门控制。快门包括:通过移动多个叶片(blade)来控制光的入射的机械快门,或通过向成像器件提供电信号来控制曝光的电子快门。模拟信号处理器对从成像器件提供的模拟信号执行降噪、增益调整、波形整形、模拟到数字转换等。
操纵部分120从外部接收用户的输入,如控制信号。操纵部分120可包括:图1中的快门按钮106,其用于输入快门释放信号以通过将成像器件曝光预定时间段来拍摄图像;电源按钮,其用于输入控制信号以控制电源开/关;广角变焦按钮和长焦距变焦按钮,其用于根据输入增大或减小视角;图1中的变焦环103;用于手动调整聚焦的图1中的聚焦环104;以及各种功能按钮,用于输入文本、选择诸如拍摄模式或再现模式的模式、选择白平衡设定功能、选择曝光设定功能等。
拍摄装置100在存储部分210中存储:诸如用于操作拍摄装置100的操作系统和应用系统的程序、以及执行操作所需的数据或因此而产生的数据。主处理器203执行拍摄操作所需的程序。
拍摄装置100包括显示部分202,以用于显示拍摄装置100的操作状态或关于所拍摄的图像的信息。显示部分202可向用户提供可视信息和可听(audible)信息。为提供可视信息,显示部分202可以是,例如,液晶显示(LCD)面板、有机发光显示(OLED)面板等。显示部分202显示从主处理器203输出的图像数据。
图像处理器102处理输入的图像信号并根据输入的图像信号或根据外部输入信号来控制每个组成元件。图像处理器102可以降低输入图像数据的噪声,并且可以执行用于增强图像质量的图像信号处理,诸如伽马校正、滤色器阵列内插(color filter array interpolation)、色彩矩阵、色彩校正、色彩增强等。此外,图像处理器102通过将由执行用于提高图像质量的图像信号处理所生成的图像数据压缩来创建图像文件,或者从该图像文件恢复图像数据。图像压缩的格式可以可逆格式或者不可逆格式。作为适当格式的例子,到联合图像专家组(JPEG)格式或者JPEG 2000格式的转换可以被使用。虽然图像处理器102压缩所拍摄的图像数据,但主处理器203也可以接收和压缩所拍摄的图像数据。所压缩的数据被存储在存储部分210中。此外,图像处理器102可以在功能上执行清晰处理(clear processing)、色彩处理、模糊处理、边缘增强处理、图像分析处理、图像识别处理、图像效果处理等。面部识别处理或场景识别处理可以作为图像识别处理来执行。例如,亮度水平调整,颜色校正,对比度调整,轮廓强调调整,屏幕划分处理,生成字符图像,和图像合成处理可被执行。
此外,图像处理器102生成控制信号以控制自动聚焦、变焦、聚焦改变、自动曝光校正等,并提供该控制信号到镜头驱动器、光圈驱动器和成像器件控制器,并且因此,可以控制拍摄模块110中提供的组成元件(例如快门或闪光灯)的操作。
参照图1和图2来描述包括主处理器203和图像处理器102的拍摄装置100的拍摄操作。
在本实施例中,当由快门按钮106生成的快门释放信号被发送到主处理器203时,主处理器203将该快门释放信号发送到图像处理器102。然后,根据该快门释放信号执行拍摄,并且图像处理器102发送所拍摄的物体的图像信息(图像数据或压缩的图像数据)到主处理器203。主处理器203将从图像处理器102接收到的物体的图像信息,以未压缩的文件或压缩的文件的形式存储在存储部分210或者存储卡(未示出)中。
图3是示出图2中的图像处理器102和主处理器203之间的接口的框图。
参照图3,图像处理器102和主处理器203通过移动行业处理器接口(MIPI)交换图像数据。在根据本实施例的拍摄装置100中,该MIPI可以被用于处理器之间的数据通信,即,主处理器203和图像处理器102之间的数据通信。
通常,移动设备一般被配置有硬件和软件。在硬件方面,由各种制造商制造的处理器或片上系统(SOC)被安装在移动设备的中心并且被连接到相机、显示器、存储器等。应用程序,即软件,被安装在处理器中。MIPI是用于处理器和外围设备之间的硬件和软件的新接口标准。
如图3中所示,由图像处理器102对所拍摄的图像执行图像处理,经处理的图像通过MIPI被传送到主处理器203,并且该图像数据被发送到并显示在显示部分202上或者被存储在存储部分210中。
当使用MIPI时,彼此不同的交错数据(interleaved data)可以通过虚拟通道在数据流中发送。同样,不同类型的数据可以使用虚拟通道标识符通过物理MIPI通道来发送。
在使用图像处理器和主处理器的拍摄装置中,由图像处理器处理的预览和JPEG图像数据可以通过MIPI来接收。为增加STS拍摄速度,甚至可以在图像处理器102完成捕捉并且通过MIPI的虚拟通道发送JPEG数据之前,发送预览数据。并且当准备好JPEG数据时,该JPEG数据可以通过单独的虚拟通道来发送。然而,若图像处理器102和主处理器203之一不支持MIPI的虚拟通道协议,则不可以使用虚拟通道。因此,可以通过上述方法来改善STS拍摄速度。
即使当主处理器203和图像处理器102之一不支持虚拟通道时,由于根据本实施例的拍摄装置选择性地发送图像数据或压缩的数据以预览该图像数据,故预览显示的时间也可以被减少,并且因此S1(AF Lock,自动聚焦锁定)可以首先开始,由此减少STS拍摄时间。
图4A至图4C为示出根据另一实施例的、在拍摄装置100的图像处理器102中的发送数据的格式的图。在根据本实施例的图像处理器102的发送数据中,MIPI数据格式被设置为用户定义的类型并且如图4A至4C中所示的数据格式可以被使用。
参照图3以及图4A至图4C,描述了图像处理器102中的发送数据的生成。
图像处理器102可以对通过拍摄模块110捕捉的图像执行图像处理,以生成如图4A中所示的、包括预览YUV数据410和报头数据(header data)420的数据格式,并且可以发送该数据格式到主处理器203。虽然在这个实施例中描述了预览YUV数据410,但预览YUV数据410不限于YUV颜色空间中的图像信号。图像处理器102将由图像传感器获取的物体的图像信号(RGB)转换为YUV信号,并执行图像处理以通过缩减原始图像来生成预览图像。图像处理器102生成由缩减原始图像数据得到的预览YUV数据410。报头数据420可包括关于预览YUV数据410的信息和关于相继的预览图像的帧的信息。
当对原始图像执行图像处理时,如图4B中所示的,图像处理器102可以生成包括预览YUV数据410、YUV块数据430和报头数据420的数据格式,并发送该数据格式到主处理器203。当原始图像的大小较大时,YUV块数据430代表根据与一个帧相对应的预览YUV数据410来划分原始图像而得到的块数据。报头数据420可以包括YUV块数据430的索引和块的数目。
当对原始图像执行图像处理时,如图4C中所示的,图像处理器102可以生成包括预览YUV数据410、JPEG块数据440和报头数据420的数据格式,并发送该数据格式到主处理器203。JPEG块数据440是通过压缩原始图像数据或YUV原始图像数据而得到的数据。若压缩的数据的大小较大,则JPEG块数据440代表根据与一个帧相对应的预览YUV数据410来划分原始图像数据的压缩数据而得到的块数据。报头数据420可以包括JPEG块数据440的索引和块的数目。虽然JPEG被描述为静态图像压缩方法,但本发明不限于此,并且,在不同压缩方法中使用的压缩数据可以通过相同的方法来发送。
主处理器203接收根据图4A至图4C之一的发送数据并解析报头数据420,以便检查图像数据或JPEG数据是否被包括在所接收的发送数据中。当图像数据或JPEG数据被包括在所接收的发送数据中时,所接收的图像数据或JPEG数据被临时地存储在存储部分210中。存储部分210可以是临时缓存区或临时存储器。此外,当通过压缩图像数据创建了压缩文件或者从JPEG数据创建了JPEG文件时,与图像数据或JPEG数据一同接收的报头数据420可以被使用。
主处理器203提取包括在如图4A至图4C之一所示的发送数据中的预览YUV数据410,并在显示部分202上将所提取的预览YUV数据显示为预览图像。
图5为示出根据另一实施例的、在拍摄过程期间图像处理器102和主处理器203之间的数据发送的图。
参照图5,图像处理器102将采用图4A和图4B中所示的数据格式的图像数据发送到主处理器203。
当发送每个帧的预览YUV数据时,图像处理器102在图像捕捉开始(即捕捉起始,Capturing Starts)时停止该发送。在该发送过程中,执行图像处理以生成所捕捉的图像的预览图像。当预览的准备或实时预览的准备完成时(即,“预览准备(Preview Preparation)”),与每个帧相对应的预览YUV数据被发送。并且当JPEG图像的准备完成时(即,“JPEG准备(JPEGPreparation)”),JPEG块数据通过被包括在预览YUV数据中来发送。当JPEG图像的发送完成时(即,“JPEG发送完成(JPEG Transmission Completed)”),预览YUV数据再次被发送。
如图5中所示的,当JPEG数据的大小较大时,JPEG数据难以通过一个帧来发送。因此,JPEG数据被划分为特定大小的块,从而在多个帧中被发送,例如如图5所示的在三个帧中来发送。在本实施例中,在图像捕捉操作之后甚至当产生JPEG数据之前当准备好创建预览图像数据时,即,当第一图像处理完成时,图像处理器102执行用于并行压缩的第二图像处理,然后将预览图像数据和所压缩的图像数据发送到主处理器203。因此,在主处理器203中,拍摄之后的预览显示时间可以被减少,并且因此S1(自动对焦锁定)可以首先开始,由此减少STS拍摄时间。该第一图像处理可以表示对预览图像的处理。该第二图像处理可以表示对原始图像数据的图像处理。此外,第二图像处理可以表示用于同时处理和发送该预览数据的图像处理。
尽管图5示出预览YUV数据的发送以及如图4C中所示的预览YUV数据和JPEG数据二者的发送,但预览YUV数据以及预览YUV数据和YUV数据二者(如图4B中所示的)也可以被发送。
图6A为示出相关技术中的控制拍摄装置的方法的图。图6B为示出根据一个实施例的、控制拍摄装置(如拍摄装置100)的方法的图。
如图6A中所示的,根据从相关技术的拍摄装置的主处理器发送的S2请求,图像处理器对第一捕捉图像执行第一图像处理、对第一捕捉图像执行第二图像处理、生成关于该第一捕捉图像的第一JPEG数据、然后发送该第一JPEG数据到主处理器。从而,主处理器创建第一JPEG文件。在相关技术的图像处理器中,由于在图像处理器中生成JPEG数据之后数据被发送到主处理器,因此预览图像可能直到JPEG文件被创建时才被显示。
根据图6B中所示的,根据从主处理器203发送的S2请求,图像处理器102对第一捕捉图像执行第一图像处理、并发送预览图像到主处理器203,然后主处理器203显示该预览图像。在发送实时取景图像到主处理器203的同时,图像处理器102并行地对第一捕捉图像执行第二图像处理。当产生第一JPEG数据时,第一JPEG数据与下一预览图像一起被发送。如图6B所示的,虽然第一JPEG数据在发送关于第一捕捉图像的预览数据之后被发送,但随着下一预览数据的发送,对第二捕捉图像的第二图像处理可以与如下操作同时执行:用于第三捕捉操作的预览数据的发送以及第二JPEG数据的生成。因此,由于实时取景图像的发送和对第一捕捉图像的第二图像处理被并行地执行,因而,在用于第二图像捕捉操作的预览数据的发送期间,随着用于第二图像捕捉操作的预览数据的发送,第一捕捉图像的第一JPEG数据可以一起被发送(当对第一捕捉图像的第二图像处理完成时)。因此,由于根据本实施例的并行处理与预览数据和压缩数据的发送同时执行,故预览显示时间可以被减少并且因此用于下一拍摄操作的时间可以被减少。
图7为示出根据另一个实施例的、控制拍摄装置100的方法的流程图。
参照图7,在操作700中,主处理器203接收帧数据。帧数据表示用于预览显示的连续的数据序列。帧数据,如图4A至图4C中所示,可以包括预览数据和报头数据,或者预览数据、图像数据/压缩数据和报头数据。换言之,在图像处理器102中,在完成预览数据的处理之后,对图像数据或压缩的数据的处理彼此并行地执行。在完成该并行处理之后,与该预览数据并行处理的图像数据/压缩数据被与该预览数据一同发送。
在操作702中,帧数据中包括的报头数据被解析。主处理器203解析该报头数据并确定该图像数据/压缩数据是否被包括在帧数据中。此外,当图像数据/压缩数据较大时,报头数据包括被划分的块的大小以及块的数目。如操作712和714中所描述的,报头数据可以被用于确定是否接收到完整的压缩数据或者该报头数据可以被用于创建JPEG文件。虽然图7示出当接收到压缩数据时的情况,但本实施例还可以用于当接收到图像数据的情况。此外,当主处理器203接收到图像数据时,所接收的图像数据可以被压缩并且主处理器203可以将所压缩的图像数据改变为压缩数据。
在操作704中,确定是否存在JPEG块。若报头数据包括关于JPEG块的信息,若不存在JPEG块,则程序前进到操作706。若存在JPEG块,那么操作710、712、714以及操作706、708、716被一同执行。
若在操作704中确定存在JPEG块,则在操作710中JPEG块被复制到缓存区(未示出)。在操作712中,确定是否接收到完整的JPEG数据。若在操作712中确定接收到完整的JPEG数据,则在操作714中创建JPEG文件。否则,程序返回操作700。
若在操作704中确定JPEG块不存在,则程序前进到操作706。若在操作704中确定存在JPEG块,那么操作710、712、714与操作706同时且并行地执行。
在操作706中,包括在帧数据中预览数据被提取。
在操作708中,预览数据被显示。
在操作716中,若存在预览结束请求,则该预览结束。否则,程序返回操作700。
根据本实施例的拍摄装置100可以在主处理器203或图像处理器102不支持MIPI虚拟通道协议时使用。这种情况对于相关技术的拍摄装置造成问题,即,在相关技术的拍摄装置中,只有在完成对捕捉图像的处理之后并且创建JPEG文件之后,预览显示数据和S1的操作才可以执行。
此外,由于与预览数据并行处理的图像数据或压缩数据与该预览数据一起发送,故预览显示时间和STS拍摄时间可以被减少。
本文引用的所有参考,包括公开、专利申请、专利通过引用结合于此,以达到与如下方式相同的程度:单独地和明确地指出每个参考文献通过引用进行并入并且在本文中阐述其全部。
出于促进对本发明的原理的理解的目的,对附图中示出的优选实施例进行了引用,并且使用了特定语言来描述这些实施例。然而,此特定语言并不意在限制本发明的范围,而且本发明应当解释为包含对本领域普通技术人员之一来说将正常发生的全部实施例。这里使用的术语仅用于描述特定实施例的目的,而不意为限制本发明的示范性实施例。在实施例的描述中,当推定相关技术的某些详细说明可能不必要地模糊本发明的本质时,将其略去。
这里描述的装置可以包含处理器、用于存储将由处理器运行的编程数据的存储器、诸如盘驱动器之类的永久性存储器、用于操控与外部装置的通信的通信端口以及包括显示器、触摸板、键、按钮等等的用户界面设备。当涉及软件模块时,这些软件模块可以作为可以由处理器运行的程序指令或者计算机可读代码存储在非暂态计算机可读介质上,计算机可读介质诸如临时性磁存储介质(例如,磁带、硬盘、软盘)、临时性光记录介质(例如,CD-ROM、数字光盘(DVD)等等)和临时性固态存储器(例如,随机存取存储器(RAM)、只读存储器(ROM)、静态随机存取存储器(SRAM)、电可擦可编程只读存储器(EEPROM)、闪存、拇指驱动器等等)。计算机可读记录介质还可分布在耦合计算机系统的网络上,从而计算机可读代码以分布式方式被存储和执行。计算机可读记录介质可以由计算机读取,存储在存储器中,并且由处理器执行。
此外,使用本文的公开内容,本发明所属领域的具有普通技术的程序员可轻易实现用于制造和使用本发明的功能程序、代码、以及代码段中。
本发明可以按照功能块组件和各种处理步骤的方式来描述。这种功能块可被认为是:被配置为执行特定功能的任一数目的硬件和/或软件组件。例如,本发明可使用各种集成电路组件,例如存储器元件、处理器元件、逻辑元件、查找表等,这些组件可在一个或多个微处理器或其他控制装置的控制下实现各种功能。类似地,在本发明中的元件使用软件编程或软件元件来实现的情况下,本发明可以用例如C,汇编程序等的任何编程或脚本语言,并用各种由数据结构,对象,程序,例程或其它编程元素的任意组合实现的算法来实现。功能的方面可以在一个或多个处理器上执行的算法来实现。此外,本发明可以使用任何数目的用于电子电路配置、信号处理和/或控制、数据处理等的传统技术。最后,本文描述的全部方法的步骤可以以任何合适的次序执行,除非此处另有指示或以其他方式与上下文矛盾。
为了简洁起见,传统的电子电路、控制系统、软件开发和系统的其它功能方面(和系统的单独操作组件的组件)可以不进行详细描述。此外,连接线,或者在提交的各附图中所示的连接器旨在表示各种元件之间的示例性功能关系和/或物理或逻辑耦合。应当注意的是,许多替换或附加功能关系,物理连接或逻辑连接可以存在于实际设备中。词语“机构(mechanism)”,“元件”,“单元”,“结构”,“工具”和“结构”被广义地使用,并且不限于机械或物理的实施例,而是可以包括与处理器等一起使用软件程序。
本文所提供的任何和所有示例、或示范性语言(例如,“诸如”)的使用仅仅是为了更好地阐释本发明,并且不对本发明的范围进行限制,除非另作声明。在不背离以下权利要求所限定的本发明的精神和范围的情况下,对于本领域普通技术人员而言许多修改和变化将是十分明显的。因此,本发明的范围不是由本发明的详细描述定义的而是由下列的权利要求来定义,并且所有该范围内的差异将被视为包含在本发明中。
除非元件被明确地描述为“必需”或“关键的”。否则没有项目或组件对本发明的实施是必不可少的。还将认识到,如这里使用的术语“包含”、“包括”、“具有”,专门用于读作本领域开放式术语。在描述本发明的上下文(特别是在所附权利要求的上下文)中使用术语“一个”、“一”、“该”以及类似的指代,将被解释为覆盖单数形式和复数形式,除非上下文清楚地指示并非如此。此外,应理解,尽管本文可能使用术语“第一、“第二”等等来描述各种的元件,但这些的元件不应受限于这些术语,这些术语仅仅是用于对一个元件和另一元件进行区分。此外,本文对数值范围的描述仅旨在用作单独地对在所述范围之内涉及的每个独立的值的速记方法,除非在此另有说明,并且每个独立的值被并入说明书中如同其在本文中单独地描述。
虽然本发明的一个或多个实施例已经参照附图进行了描述,但本领域普通技术人员将理解,可以对其进行各种形式和细节上的改变而不脱离由所附权利要求所定义的本发明的精神和范围。

Claims (14)

1.一种控制包括主处理器和图像处理器的拍摄装置的方法,该方法包括:
由所述图像处理器将发送数据发送到主处理器,其中所述发送数据包括:
通过拍摄模块拍摄的图像的预览图像数据,以及
当存在与所述预览图像数据并行处理的图像数据时的所述图像数据;
由所述主处理器从发送数据中提取预览图像数据;并且
在所述拍摄装置的显示部分上显示所提取的预览图像数据,
其中,若在所述发送数据中包括所述图像数据,则由主处理器将所述图像数据存储在存储器中。
2.如权利要求1所述的方法,其中所述图像数据是压缩图像数据。
3.如权利要求2所述的方法,还包括:
由所述主处理器从存储在存储器中的压缩图像数据创建所拍摄的图像的压缩文件。
4.如权利要求1所述的方法,其中所述发送数据是通过主处理器和图像处理器之间的移动行业处理器接口(MIPI)来发送的。
5.如权利要求4所述的方法,其中所述发送数据的格式是所述MIPI的用户定义的类型。
6.如权利要求1所述的方法,其中所述发送数据的发送包括:顺序地发送多条发送数据,该多条发送数据包括与所拍摄的图像的多个帧相对应的多条预览图像数据。
7.如权利要求6所述的方法,其中一条所述发送数据包括:
关于一个帧的预览图像数据、
所述并行处理的图像数据的一个块、以及
包括块的索引和块的数目的报头数据。
8.如权利要求1所述的方法,其中,若所述发送数据包括预览图像数据、所述图像数据和报头数据,则所述方法还包括:
由所述主处理器解析所述报头数据;以及
确定所述图像数据是否存在。
9.如权利要求1所述的方法,其中所述主处理器和图像处理器中的至少一者不支持MIPI的虚拟通道协议。
10.一种拍摄装置,包括:
图像处理器,其将发送数据发送到主处理器,其中所述发送数据包括:
通过拍摄模块拍摄的图像的预览图像数据、以及
当存在与所述预览图像数据并行处理的图像数据时的所述图像数据;并且
所述主处理器从发送数据中提取预览图像数据并在所述拍摄装置的显示部分上显示所提取的预览图像数据,
其中,若在所述发送数据中包括所述图像数据,则主处理器将所述图像数据存储在存储器中。
11.如权利要求10所述的拍摄装置,其中,所述图像数据是压缩图像数据,所述主处理器从存储在存储器中的压缩图像数据创建所拍摄的图像的压缩文件。
12.如权利要求10所述的拍摄装置,其中,所述发送数据是通过主处理器和图像处理器之间的移动行业处理器接口(MIPI)来发送的,其中,所述发送数据的格式是所述MIPI的用户定义的类型。
13.如权利要求10所述的拍摄装置,其中,所述图像处理器顺序地发送多条发送数据,该多条发送数据包括与所拍摄的图像的多个帧相对应的多条预览图像数据,
其中,一条所述发送数据包括:关于一个帧的预览图像数据、所述并行处理的图像数据的一个块、以及包括块的索引和块的数目的报头数据。
14.如权利要求10所述的拍摄装置,其中,当所述发送数据包括预览图像数据、所述图像数据和报头数据时,主处理器解析所述发送数据中的报头数据并确定所述图像数据是否存在。
CN201410844363.3A 2013-12-30 2014-12-30 电子装置及方法 Expired - Fee Related CN104754196B (zh)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
KR10-2013-0167242 2013-12-30
KR1020130167242A KR102146854B1 (ko) 2013-12-30 2013-12-30 촬영 장치 및 이의 제어 방법

Publications (2)

Publication Number Publication Date
CN104754196A true CN104754196A (zh) 2015-07-01
CN104754196B CN104754196B (zh) 2019-09-17

Family

ID=52444059

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201410844363.3A Expired - Fee Related CN104754196B (zh) 2013-12-30 2014-12-30 电子装置及方法

Country Status (4)

Country Link
US (1) US9635269B2 (zh)
EP (1) EP2890115B1 (zh)
KR (1) KR102146854B1 (zh)
CN (1) CN104754196B (zh)

Cited By (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN106657788A (zh) * 2016-12-28 2017-05-10 深圳众思科技有限公司 电子设备的图像处理方法及电子设备
CN106937052A (zh) * 2017-03-29 2017-07-07 维沃移动通信有限公司 一种图像数据的处理方法及移动终端
CN108769522A (zh) * 2018-06-06 2018-11-06 中科创达软件科技(深圳)有限公司 图像处理终端及图像处理方法
CN109814785A (zh) * 2019-01-18 2019-05-28 深圳云瀚科技有限公司 基于外部设备的图像处理方法和装置
CN114845036A (zh) * 2021-02-01 2022-08-02 Oppo广东移动通信有限公司 电子设备、图像处理器、应用处理器及图像处理方法

Families Citing this family (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US9654699B2 (en) * 2015-07-02 2017-05-16 Omnivision Technologies, Inc. High dynamic range imaging with reduced frame buffer
KR20170025004A (ko) * 2015-08-27 2017-03-08 전자부품연구원 실시간 초고해상도 영상 획득 및 프리뷰 제공이 가능한 영상 처리 시스템 및 방법
US9743025B2 (en) 2015-12-30 2017-08-22 Omnivision Technologies, Inc. Method and system of implementing an uneven timing gap between each image capture in an image sensor
CN106791408A (zh) * 2016-12-27 2017-05-31 努比亚技术有限公司 一种拍摄预览装置、终端及方法

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20030090585A1 (en) * 1997-07-10 2003-05-15 Anderson Eric C. Method and apparatus for providing live view and instant review in an image capture device
US20090273686A1 (en) * 2008-05-02 2009-11-05 Nokia Corporation Methods, computer program products and apparatus providing improved image capturing
CN101690173A (zh) * 2007-06-25 2010-03-31 韩国科亚电子股份有限公司 用于没有时间延迟地显示所捕获的图像的图像处理设备和方法、以及在其上存储用于执行该方法的计算机可执行指令的计算机可读介质
US20130135499A1 (en) * 2011-11-28 2013-05-30 Yong-Bae Song Method of eliminating a shutter-lag, camera module, and mobile device having the same

Family Cites Families (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
EP2495953A4 (en) * 2009-10-27 2015-11-25 Nec Casio Mobile Comm Ltd IMAGE RECORDING AND IMAGE RECORDING
TWI519155B (zh) * 2012-02-24 2016-01-21 宏達國際電子股份有限公司 影像連續拍攝方法與相關影像擷取系統
KR101917650B1 (ko) * 2012-08-03 2019-01-29 삼성전자 주식회사 이미지 처리 방법 및 장치
US20140078343A1 (en) * 2012-09-20 2014-03-20 Htc Corporation Methods for generating video and multiple still images simultaneously and apparatuses using the same
US9355613B2 (en) * 2012-10-09 2016-05-31 Mediatek Inc. Data processing apparatus for transmitting/receiving compression-related indication information via display interface and related data processing method
US9077965B2 (en) * 2012-10-12 2015-07-07 Mediatek Inc. Method and apparatus for performing lossy image compression through source quantization and lossless compression kernel, and related method and apparatus for image decompression
JP6006083B2 (ja) * 2012-10-30 2016-10-12 オリンパス株式会社 撮像装置および撮像方法
US8879858B1 (en) * 2013-10-01 2014-11-04 Gopro, Inc. Multi-channel bit packing engine

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20030090585A1 (en) * 1997-07-10 2003-05-15 Anderson Eric C. Method and apparatus for providing live view and instant review in an image capture device
CN101690173A (zh) * 2007-06-25 2010-03-31 韩国科亚电子股份有限公司 用于没有时间延迟地显示所捕获的图像的图像处理设备和方法、以及在其上存储用于执行该方法的计算机可执行指令的计算机可读介质
US20090273686A1 (en) * 2008-05-02 2009-11-05 Nokia Corporation Methods, computer program products and apparatus providing improved image capturing
US20130135499A1 (en) * 2011-11-28 2013-05-30 Yong-Bae Song Method of eliminating a shutter-lag, camera module, and mobile device having the same

Cited By (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN106657788A (zh) * 2016-12-28 2017-05-10 深圳众思科技有限公司 电子设备的图像处理方法及电子设备
CN106937052A (zh) * 2017-03-29 2017-07-07 维沃移动通信有限公司 一种图像数据的处理方法及移动终端
CN108769522A (zh) * 2018-06-06 2018-11-06 中科创达软件科技(深圳)有限公司 图像处理终端及图像处理方法
CN108769522B (zh) * 2018-06-06 2021-03-26 中科创达软件科技(深圳)有限公司 图像处理终端及图像处理方法
CN109814785A (zh) * 2019-01-18 2019-05-28 深圳云瀚科技有限公司 基于外部设备的图像处理方法和装置
CN114845036A (zh) * 2021-02-01 2022-08-02 Oppo广东移动通信有限公司 电子设备、图像处理器、应用处理器及图像处理方法
CN114845036B (zh) * 2021-02-01 2023-09-12 Oppo广东移动通信有限公司 电子设备、图像处理器、应用处理器及图像处理方法

Also Published As

Publication number Publication date
CN104754196B (zh) 2019-09-17
KR102146854B1 (ko) 2020-08-21
US20150189187A1 (en) 2015-07-02
KR20150078127A (ko) 2015-07-08
EP2890115B1 (en) 2018-08-08
US9635269B2 (en) 2017-04-25
EP2890115A1 (en) 2015-07-01

Similar Documents

Publication Publication Date Title
CN104754196A (zh) 电子装置及方法
JP4193804B2 (ja) 撮像装置、画像記憶装置、撮像方法、記憶方法及びプログラム
US8633998B2 (en) Imaging apparatus and display apparatus
CN102088559B (zh) 数字拍摄设备及其控制方法
KR101700366B1 (ko) 디지털 촬영 장치 및 이의 제어 방법
US20110102621A1 (en) Method and apparatus for guiding photographing
US8526685B2 (en) Method and apparatus for selectively supporting raw format in digital image processor
US9413922B2 (en) Photographing apparatus and method for synthesizing images
JP2009081808A (ja) 撮影制御装置、撮影制御方法、撮影制御プログラム、および撮影装置
KR101737086B1 (ko) 디지털 촬영 장치 및 이의 제어 방법
JP2005217874A (ja) ファイル管理方法
EP2890116B1 (en) Method of displaying a photographing mode by using lens characteristics, computer-readable storage medium of recording the method and an electronic apparatus
KR20100018335A (ko) 썸네일 표시 제어 방법 및 장치, 및 이를 이용한 디지털촬영 장치
CN111953909B (zh) 图像处理设备、图像处理方法和存储介质
JP6706167B2 (ja) 撮像装置、画像合成方法、およびプログラム
JP2012019341A (ja) 撮像装置、撮像装置の制御方法および制御プログラム
US20210400192A1 (en) Image processing apparatus, image processing method, and storage medium
JP7378963B2 (ja) 画像処理装置、画像処理方法、及び、コンピュータプログラム
JP7395258B2 (ja) 画像処理装置、画像処理方法、コンピュータプログラム及び記憶媒体
CN102025915B (zh) 数字拍摄设备以及控制该设备的方法
CN105453541B (zh) 电子装置和控制电子装置的方法
KR20060062314A (ko) 디지털 카메라에서 촬영 영상에 객체를 합성하는 장치 및방법
US9313407B2 (en) Electronic apparatus, method for controlling the same, and computer-readable recording medium
JP7395259B2 (ja) 画像処理装置、画像処理方法、コンピュータプログラム及び記憶媒体
JP6312430B2 (ja) 撮像装置及びその制御方法

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant
CF01 Termination of patent right due to non-payment of annual fee
CF01 Termination of patent right due to non-payment of annual fee

Granted publication date: 20190917

Termination date: 20211230