CN104854854A - 图像传感器及其数据传输方法、信息处理装置及方法、电子设备和程序 - Google Patents

图像传感器及其数据传输方法、信息处理装置及方法、电子设备和程序 Download PDF

Info

Publication number
CN104854854A
CN104854854A CN201380061208.8A CN201380061208A CN104854854A CN 104854854 A CN104854854 A CN 104854854A CN 201380061208 A CN201380061208 A CN 201380061208A CN 104854854 A CN104854854 A CN 104854854A
Authority
CN
China
Prior art keywords
data
original image
many pixel
compressed format
comp
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN201380061208.8A
Other languages
English (en)
Other versions
CN104854854B (zh
Inventor
若林准人
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Sony Semiconductor Solutions Corp
Original Assignee
Sony Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Sony Corp filed Critical Sony Corp
Publication of CN104854854A publication Critical patent/CN104854854A/zh
Application granted granted Critical
Publication of CN104854854B publication Critical patent/CN104854854B/zh
Expired - Fee Related legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/80Camera processing pipelines; Components thereof
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N1/00Scanning, transmission or reproduction of documents or the like, e.g. facsimile transmission; Details thereof
    • H04N1/41Bandwidth or redundancy reduction
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N1/00Scanning, transmission or reproduction of documents or the like, e.g. facsimile transmission; Details thereof
    • H04N1/00127Connection or combination of a still picture apparatus with another apparatus, e.g. for storage, processing or transmission of still picture signals or of information associated with a still picture
    • H04N1/00204Connection or combination of a still picture apparatus with another apparatus, e.g. for storage, processing or transmission of still picture signals or of information associated with a still picture with a digital computer or a digital computer system, e.g. an internet server
    • H04N1/00209Transmitting or receiving image data, e.g. facsimile data, via a computer, e.g. using e-mail, a computer network, the internet, I-fax
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N1/00Scanning, transmission or reproduction of documents or the like, e.g. facsimile transmission; Details thereof
    • H04N1/21Intermediate information storage
    • H04N1/2104Intermediate information storage for one or a few pictures
    • H04N1/2112Intermediate information storage for one or a few pictures using still video cameras
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/115Selection of the code volume for a coding unit prior to coding
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/134Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
    • H04N19/154Measured or subjectively estimated visual quality after decoding, e.g. measurement of distortion
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60Control of cameras or camera modules
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N25/00Circuitry of solid-state image sensors [SSIS]; Control thereof
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N25/00Circuitry of solid-state image sensors [SSIS]; Control thereof
    • H04N25/70SSIS architectures; Circuits associated therewith
    • H04N25/76Addressed sensors, e.g. MOS or CMOS sensors

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • General Engineering & Computer Science (AREA)
  • Computing Systems (AREA)
  • Compression Or Coding Systems Of Tv Signals (AREA)
  • Compression Of Band Width Or Redundancy In Fax (AREA)
  • Studio Devices (AREA)

Abstract

本技术涉及图像传感器、所述图像传感器的数据传输方法、信息处理装置、信息处理方法、电子设备和程序,所述图像传感器使得能够拥有高的压缩自由度或使所述图像传感器与DSP之间的连接性变得容易。4个像素的呈12位原始图像数据格式的数据Pixel4*N到Pixel4*N+3被转换成6位压缩数据,且每两个像素被布置为具有与所述12位原始图像数据格式的结构一样的结构的12位压缩数据格式,由此,构成了数据Data2*N和Data2*N+1。所述压缩数据格式Data2*N和Data2*N+1各者中的较高8位被取出且被布置于数据Byte3*N和Byte3*N+1中,且所述压缩数据格式Data2*N和Data2*N+1各者中的较低4位被布置于数据Byte3*N+2中。本技术适用于摄像装置。

Description

图像传感器及其数据传输方法、信息处理装置及方法、电子设备和程序
技术领域
本技术涉及图像传感器、该图像传感器的数据传输方法、信息处理装置、信息处理方法、电子设备和程序。具体地,本发明涉及如下的图像传感器、该图像传感器的数据传输方法、信息处理装置、信息处理方法、电子设备和程序:它们使得能够传输规定格式的图像数据而无需改变现有的数据传输用接口,并且能够提高在压缩方式或与图像处理大规模集成电路(LSI:large scale integration)的连接性方面的自由度。
背景技术
在以数码相机等为代表的设备中,由图像传感器摄像而获得的图像被转换成压缩数据,然后通过接口而被提供给数字信号处理器(DSP:digital signal processor)等中所包含的图像处理LSI,并且在经过各种各样的处理后被输出。
顺带提及地,作为在图像传感器的接口与图像处理LSI的接口之间被传输的压缩数据方式,例如采用了差分脉冲编码调制(DPCM:differential pulse code modulation)和脉冲编码调制(PCM:pulse codemodulation)相组合的方法。例如,关于移动电话用的芯片间的接口,曾提供了标准移动图像处理体系结构(SMIA:standard mobile imagingarchitecture)规格以作为压缩数据用的规格(参看非专利文献1)。
而且,曾提出了一种用于将N位(bit)信号压缩成n位信号、接着进行该信号的分解和连结、且执行作为N位的输出的方法(参看专利文献1)。该方法的目的是通过把被减小到n比特的数据率(data rate)调整成N比特的数据率来缩短像素数据输出周期。即,例如,将12位像素数据压缩成8位,且将接下来的像素分解成4位。然后,执行作为12位数据的传输。
引用文献列表
非专利文献
非专利文献1:SMIA 1.0Part 1:Functional specification(SMIA 1.0第一部分:功能规范)
专利文献
专利文献1:日本专利申请公开案第2011-049901号
发明内容
本发明所要解决的问题
然而,在SMIA规格中,必须将压缩后的数据看作1个像素的RAW数据(原始数据)。因而,为了应对各种各样的压缩数据,需要重新制定RAW规格。
因此,为了改变压缩率,就有必要改变链路层(LINK layer)中的格式转换器电路且对打包电路(packing circuit)进行校正。
而且,在专利文献1的技术中,假设在压缩之前的像素数据的位数和在数据传输期间的像素数据的位数相同。因此,例如,以将12位像素数据转换成5位的方式来设定压缩率是很困难的,且不可能自由地设定压缩率。此外,没有说明与高速传输对应的、应用于符合时钟数据恢复方式的8B10B传输的方法。
鉴于上述问题,提供了本技术。具体地,本技术使得能够通过将多条像素数据转换成各种不同的像素数的压缩格式、执行向规定传输格式的转换且执行传输,由此在利用现有的接口的情形下设定各种各样的压缩率。
解决问题所采取的技术方案
本技术第一方面的图像传感器包括:摄像部,所述摄像部被构造成进行摄像以获得原始图像;压缩部,所述压缩部被构造成将所述原始图像的多条像素数据压缩成压缩格式;以及转换部,所述转换部被构造成将所述原始图像的所述多条像素数据的所述压缩格式转换成所述多条像素数据的传输格式。
所述传输格式的位长度可以不同于所述压缩格式的位长度。
所述传输格式的位长度可以与所述压缩格式的位长度相同。
所述压缩部可以执行以所述原始图像的所述多条像素数据为单位的向所述压缩格式的压缩,并且所述转换部可以把以所述原始图像的所述多条像素数据为单位而被压缩的所述压缩格式转换成多个所述传输格式。
在把以所述原始图像的所述多条像素数据为单位而被压缩的所述压缩格式转换成多个所述传输格式时,所述转换部可以将虚拟数据布置成与块大小(block size)相匹配的、且以所述多条像素数据为单位而被处理的像素数据。
所述图像传感器还可以包括设定部,所述设定部被构造成根据所述原始图像的图像质量来设定压缩率,其中所述压缩部可以按照由所述设定部设定的压缩率将所述原始图像的所述多条像素数据压缩成所述压缩格式。
本技术第一方面的图像传感器的数据传输方法包括以下步骤:进行摄像以获得原始图像;将所述原始图像的多条像素数据压缩成压缩格式;以及将所述原始图像的所述多条像素数据的所述压缩格式转换成所述多条像素数据的传输格式。
本技术第一方面的程序用来致使计算机执行如下的处理,该处理包括:摄像步骤,用于进行摄像以获得原始图像;压缩步骤,用于将所述原始图像的多条像素数据压缩成压缩格式;以及转换步骤,用于将所述原始图像的所述多条像素数据的所述压缩格式转换成所述多条像素数据的传输格式。
本技术第二方面的信息处理装置包括:复原部,所述复原部被构造成将原始图像的多条像素数据的传输格式复原成所述多条像素数据的压缩格式,所述压缩格式是将所述原始图像的所述多条像素数据压缩而得到的,所述传输格式是从所述原始图像的所述多条像素数据的所述压缩格式转换而来的;以及解压缩部,所述解压缩部被构造成把被所述复原部复原后的所述压缩格式解压成所述原始图像的所述多条像素数据。
所传输格式的位长度可以不同于所述压缩格式的位长度。
所述传输格式的位长度可以与所述压缩格式的位长度相同。
所述复原部可以将多个所述传输格式复原成以所述原始图像的所述多条像素数据为单位的所述压缩格式,并且所述解压缩部可以把以所述原始图像的所述多条像素数据为单位而被压缩的所述压缩格式解压成所述多条像素数据。
所述信息处理装置还可以包括设定部,所述设定部被构造成根据所述原始图像的图像质量来设定压缩率,其中所述解压缩部基于由所述设定部设定的所述压缩率而将所述压缩格式解压成所述原始图像的所述多条像素数据。
本技术第二方面的信息处理方法,其包括以下步骤:将原始图像的多条像素数据的传输格式复原成所述多条像素数据的压缩格式,所述压缩格式是将所述原始图像的所述多条像素数据压缩而得到的,所述传输格式是从所述原始图像的所述多条像素数据的所述压缩格式转换而来的;以及把被复原后的所述压缩格式解压成所述原始图像的所述多条像素数据。
本技术第二方面的程序用来致使计算机执行如下的处理,该处理包括:复原步骤,用于将原始图像的多条像素数据的传输格式复原成所述多条像素数据的压缩格式,所述压缩格式是将所述原始图像的所述多条像素数据压缩而得到的,所述传输格式是从所述原始图像的所述多条像素数据的所述压缩格式转换而来的;以及解压缩步骤,用于把被所述复原步骤中的处理复原后的所述压缩格式解压成所述原始图像的所述多条像素数据。
本技术第三方面的电子设备包括:摄像部,所述摄像部被构造成进行摄像以获得原始图像;压缩部,所述压缩部被构造成将所述原始图像的多条像素数据压缩成压缩格式;以及转换部,所述转换部被构造成将所述原始图像的所述多条像素数据的所述压缩格式转换成所述多条像素数据的传输格式。
本技术第四方面的电子设备包括:复原部,所述复原部被构造成将原始图像的多条像素数据的传输格式复原成所述多条像素数据的压缩格式,所述压缩格式是将所述原始图像的所述多条像素数据压缩而得到的,所述传输格式是从所述原始图像的所述多条像素数据的所述压缩格式转换而来的;以及解压缩部,所述解压缩部被构造成把被所述复原部复原后的所述压缩格式解压成所述原始图像的所述多条像素数据。
在本技术的第一方面和第三方面中,通过摄像而获得原始图像,将所述原始图像的多条像素数据压缩成压缩格式,然后将所述原始图像的所述多条像素数据的所述压缩格式转换成所述多条像素数据的传输格式。
在本技术的第二方面和第四方面中,将所述多条像素数据的所述传输格式复原成所述多条像素数据的压缩格式(其中所述压缩格式是将所述原始图像的所述多条像素数据压缩而得到的,所述传输格式是从所述原始图像的所述多条像素数据的所述压缩格式转换而来的),然后把被复原后的所述压缩格式解压成所述原始图像的所述多条像素数据。
本技术第一方面至第四方面的图像传感器和电子设备每一者可以是独立的装置或电子设备,或可以是用来执行各处理的块。
本发明的效果
根据本技术的第一方面至第四方面,可以无需改变现有的数据传输用接口就能传输规定格式的图像数据,且可以提高在压缩率或与各种类型的图像处理LSI的连接性方面的自由度。
附图说明
图1是图示了传输系统的第一构造示例的图。
图2是图示了传输系统的第二构造示例的图。
图3是图示了传输系统的第三构造示例的图。
图4是图示了帧格式的示例的图。
图5是图示了发送部和接收部各者的构造示例的图。
图6是图示了报头结构的图。
图7是图示了报头信息的内容和信息量的图。
图8是图示了位阵列的示例的图。
图9是用来说明摄像装置中的处理的流程图。
图10是用来说明在图9的步骤S2中所进行的数据发送处理的流程图。
图11是用来说明通过将12位原始图像数据格式转换成6位压缩数据格式来执行数据发送处理和数据接收处理的示例的图。
图12是用来说明在图9的步骤S3中所进行的数据接收处理的流程图。
图13是用来说明通过将12位原始图像数据格式转换成5位压缩数据格式来执行数据发送处理和数据接收处理的示例的图。
图14是用来说明通过将12位原始图像数据格式转换成4位压缩数据格式来执行数据发送处理和数据接收处理的第一示例的图。
图15是用来说明通过将12位原始图像数据格式转换成4位压缩数据格式来执行数据发送处理和数据接收处理的第二示例的图。
图16是用来说明通过将10位原始图像数据格式转换成6位压缩数据格式来执行数据发送处理和数据接收处理的示例的图。
图17是用来说明通过将10位原始图像数据格式转换成5位压缩数据格式来执行数据发送处理和数据接收处理的示例的图。
图18是用来说明通过将32个像素的12位原始图像数据格式转换成16个像素的压缩数据格式(该格式具有与12位原始图像数据格式的结构相同的结构)来执行数据发送处理和数据接收处理的示例的图。
图19是用来说明通过将32个像素的12位原始图像数据格式转换成16个像素的压缩数据格式(该格式具有与12位原始图像数据格式的结构相同的结构)来执行数据发送处理和数据接收处理的示例的图。
图20是用来说明通过将32个像素的12位原始图像数据格式转换成16个像素的压缩数据格式(该格式具有与12位原始图像数据格式的结构相同的结构)来执行数据发送处理和数据接收处理的示例的图。
图21是用来说明用于设定原始图像数据格式的位数及其压缩率的设定处理的图。
图22是用来说明一般的个人计算机的构造示例的图。
具体实施方式
传输系统的第一构造示例
首先,参照图1,将说明根据本发明实施例的传输系统的第一构造示例。
图1中的传输系统1包括图像传感器11和DSP 12。图像传感器11和DSP 12分别包括互不相同的大规模集成电路(LSI)。图像传感器11和DSP 12被设置于诸如数码相机或移动电话等包括摄像功能的摄像装置中。摄像部21和发送部22被设置于图像传感器11中。接收部31和图像处理部32被设置于DSP 12中。
图像传感器11中的摄像部21包括诸如互补金属氧化物半导体(CMOS:complementary metal oxide semiconductor)等摄像元件,并且执行对于通过透镜而接收到的光的光电转换。而且,摄像部21执行对于利用光电转换而获得的信号的A/D(模拟-数字)转换等,并且把一帧图像中所含的像素数据以一个像素的数据为单位依次地输出至发送部22。
发送部22把由摄像部21提供过来的各个像素的数据例如按照由摄像部21提供过来的顺序分配给多个传输路径,并且将所述数据通过所述多个传输路径并行地发送至DSP 12。在图1的示例中,通过使用8个传输路径来执行像素数据的传输。图像传感器11与DSP 12之间的传输路径可以是有线传输路径或者无线传输路径。在下文中,图像传感器11与DSP 12之间的传输路径在适当的时候被称作通道(Lane)。
DSP 12中的接收部31接收通过8个通道从发送部22传输过来的像素数据,并且将各个像素的数据依次地输出至图像处理部32。
基于由接收部31提供过来的像素数据,图像处理部32生成一帧图像,且通过使用所生成的图像来执行各种各样的图像处理。从图像传感器11传输至DSP 12的图像数据是RAW数据。在图像处理部32中,执行诸如下列之类的各种各样的处理:图像数据的压缩、图像的显示、或将图像数据记录到记录媒介中,等等。
传输系统的第二构造示例
接着,参照图2,将说明传输系统1的第二构造示例。图2中所示的与图1所示的构造相同的构造被赋予相同的附图标记。将会适当地省略重复说明。
摄像部21以及两个发送部22-1和22-2被设置于图2的传输系统1的图像传感器11中。两个接收部31-1和31-2以及图像处理部32被设置于DSP 12中。
摄像部21将通过摄像而获得的一帧图像中所含的像素数据以一个像素的数据为单位并行地输出至发送部22-1和发送部22-2。例如,摄像部21将奇数行中的像素的数据输出至发送部22-1且将偶数行中的像素的数据输出至发送部22-2。
发送部22-1把由摄像部21提供过来的各个像素的数据例如按照由摄像部21提供过来的顺序分配给多个通道,并且将该数据通过这多个通道并行地发送至DSP 12。同样地,发送部22-2把由摄像部21提供过来的各个像素的数据例如按照由摄像部21提供过来的顺序分配给多个通道,并且将该数据通过这多个通道并行地发送至DSP 12。
在图2的示例中,图像传感器11和DSP 12也是通过8个通道而彼此连接的。发送部22-1和发送部22-2各者通过使用4个通道来传输像素数据。
DSP 12中的接收部31-1接收通过4个通道从发送部22-1传输过来的像素数据,且将各个像素的数据依次地输出至图像处理部32。同样地,接收部31-2接收通过4个通道从发送部22-2传输过来的像素数据,且将各个像素的数据依次地输出至图像处理部32。
基于由接收部31-1提供过来的像素数据和由接收部31-2提供过来的像素数据,图像处理部32生成一帧图像,且通过使用所生成的图像来执行各种各样的图像处理。
如图2所示,两个发送部被设置于图像传感器11中且相应地两个接收部被设置于DSP 12中。因此,即使当从摄像部21输出的像素数据的传输速率较高时,也能够将该像素数据传输至DSP 12。
传输系统的第三构造示例
接着,参照图3,将说明传输系统1的第三构造示例。图3中所示的与图1所示的构造相同的构造被赋予相同的附图标记。将会适当地省略重复说明。
图像传感器11-1和图像传感器11-2这两个图像传感器被设置于图3的传输系统1中。摄像部21-1和发送部22-1被设置于图像传感器11-1中。摄像部21-2和发送部22-2被设置于图像传感器11-2中。类似于图2中的情况,两个接收部31-1和31-2以及图像处理部32被设置于DSP 12中。
图像传感器11-1中的摄像部21-1将通过摄像而获得的一帧图像中所含的像素数据以一个像素的数据为单位依次地输出至发送部22-1。
发送部22-1把由摄像部21-1提供过来的各个像素的数据例如按照由摄像部21-1提供过来的顺序分配给多个通道,并且将该数据通过该多个通道并行地发送至DSP 12。
图像传感器11-2中的摄像部21-2将通过摄像而获得的一帧图像中所含的像素数据以一个像素的数据为单位依次地输出至发送部22-2。
发送部22-2把由摄像部21-2提供过来的各个像素的数据例如按照由摄像部21-2提供过来的顺序分配给多个通道,并且将该数据通过该多个通道并行地发送至DSP 12。
在图3的示例中,图像传感器这一侧与DSP 12也是通过8个通道而彼此连接的。图像传感器11-1和图像传感器11-2各者分别被分配有4个通道。发送部22-1和发送部22-2各者通过使用4个通道来传输像素数据。
DSP 12中的接收部31-1接收通过4个通道从图像传感器11-1中的发送部22-1传输过来的像素数据,且将各个像素的数据依次地输出至图像处理部32。同样地,接收部31-2接收通过4个通道从图像传感器11-2中的发送部22-2传输过来的像素数据,且将各个像素的数据依次地输出至图像处理部32。
图像处理部32基于由接收部31-1提供过来的像素数据而生成一帧图像,并且基于由接收部31-2提供过来的像素数据而生成一帧图像。图像处理部32通过使用所生成的图像来执行各种各样的图像处理。
如图3中所示,通过设置有两个图像传感器,例如,就能够利用一个DSP 12来处理包括由图像传感器11-1摄像而得到的左眼图像和由图像传感器11-2摄像而得到的右眼图像的3D图像。左眼图像与右眼图像之间存在视差(parallax)。
如上所述,在传输系统1的图像传感器中设置有一个以上的发送部以用来传输通过摄像而得到的一帧图像数据。另一方面,在DSP中与图像传感器中的发送部对应地设置有一个以上的接收部以用来接收从图像传感器传输过来的数据。
在下面,将说明图1所示的其中在图像传感器11中设置有一个发送部且在DSP 12中设置有一个接收部的传输系统1中的数据传输。在图2和图3中的发送部22-1与接收部31-1之间和发送部22-2与接收部31-2之间是以类似的方式进行数据传输的。
帧格式
接着,参照图4,将说明被用来在图像传感器11与DSP 12之间传输一帧图像数据的格式的示例。
有效像素区域A1是通过摄像部21摄像而获得的一帧图像中的有效像素的区域。在有效像素区域A1的左侧,设置有边缘区域A2,边缘区域A2的沿垂直方向的像素数与有效像素区域A1的沿垂直方向的像素数相同。
在有效像素区域A1的上侧,设置有前虚设区域(front dummy region)A3,前虚设区域A3的沿水平方向的像素数与有效像素区域A1及边缘区域A2的沿水平方向的像素总数相同。在图4的示例中,嵌入式数据(“Embedded Data”)被插入到前虚设区域A3中。该嵌入式数据包括诸如快门速度、光圈值或增益等与由摄像部21进行的摄像有关的设定值信息。也存在着嵌入式数据被插入到后虚设区域A4中的情况。
后虚设区域A4被设置于有效像素区域A1的下侧,后虚设区域A4的沿水平方向的像素数与有效像素区域A1及边缘区域A2的沿水平方向的像素总数相同。
图像数据区域A11包括有效像素区域A1、边缘区域A2、前虚设区域A3和后虚设区域A4。
报头(“header”)被添加到图像数据区域A11中所包括的各行的前面,且起始码(“Start Code”)被添加到报头的前面。而且,脚注(“Footer”)可任选地被添加到图像数据区域A11中所包括的各行的后面,且稍后将要说明的诸如结束码(“End Code”)等控制码被添加到脚注的后面。如果没有添加脚注,那么诸如End Code等控制码就被添加到图像数据区域A11中所包括的各行的后面。
每次当通过摄像部21摄像而获得的一帧图像从图像传感器11向DSP 12传输时,呈图4所示格式的全部数据就作为传输数据而被传输。
图4上侧的带状图说明了被用于图4下侧所示的传输数据的传输的包结构。当假设沿水平方向的一连串像素是一行时,图像数据区域A11的一行中的像素的数据被存储于包的有效负载中。通过使用比图像数据区域A11的沿垂直方向的像素数多的包来执行一帧中的全部图像数据的传输。
当报头和脚注被添加给存储有一行中的像素数据的有效负载时,一个包就被构成了。如稍后所述,报头包括被存储于有效负载中的像素数据的附加信息,例如Frame Start(“帧开始”)、Frame End(“帧结束”)、Line Valid(“行有效”)、Line Number(“行编号”)或ECC(“纠错码”)。至少Start Code和End Code(它们是控制码)被添加到各个包中。
以这样的方式,通过采取用来逐行地传输一帧图像中的像素数据的格式,就可以在每行的消隐期间(blanking period)内传输诸如报头等附加信息或者诸如Start Code或End Code等控制码。
发送部22和接收部31的构造
接着,参照图5,将说明发送部22和接收部31各者的构造示例。
图5左侧所示的被虚线包围着的构造是发送部22的构造,并且右侧所示的被虚线包围着的构造是接收部31的构造。发送部22和接收部31各者均包括链路层的构造和物理层的构造。在实线L2的上侧所图示出来的构造是链路层的构造,并且在实线L2的下侧所图示出来的构造是物理层的构造。
需要注意的是,在实线L1的上侧所图示出来的构造是应用层的构造。系统控制部51、帧数据输入部52、寄存器53和压缩部54被实现于在摄像部21中。系统控制部51执行与发送部22中的LINK-TX协议管理部61的通信,且例如通过提供与帧格式有关的信息来控制图像数据的传输。帧数据输入部52根据用户的命令等来执行摄像,且将利用该摄像的执行而获得的图像中所含的各个像素的数据经由压缩部54而提供给发送部22中的转换部62。压缩部54将各个像素的数据的位数压缩成既定位数,并且将压缩后的像素数据提供给发送部22中的转换部62。寄存器53存储诸如压缩部54中的压缩率、转换部62中的转换的位数、和通道的数量等信息。根据存储于寄存器53中的信息而被压缩的图像数据的发送处理就被执行。
另外,应用层的构造中的帧数据输出部141、寄存器142、系统控制部143和解压缩部144被实现于图像处理部32中。基于由接收部31提供过来的、然后被解压缩部144解压的各行像素数据,帧数据输出部141生成且输出一帧图像。通过使用从帧数据输出部141输出的图像,执行各种各样的处理。寄存器142存储与图像数据的接收有关的各种设定值,例如解压缩部144中的解压缩率、转换部125中的转换的位数、和通道的数量等。根据存储于寄存器142中的信息来执行图像数据的接收处理。系统控制部143执行与LINK-RX协议管理部121的通信,并且控制诸如模式变化等序列。
解压缩部144根据压缩部54中的压缩率而将各行中的像素数据解压缩。而且,图像传感器11中的系统控制部51和DSP 12中的系统控制部143利用串行通信来发送/接收被存储于寄存器53中的信息(诸如压缩部54中的压缩率、解压缩部144所对应的压缩率、转换部62和转换部125各者中的转换的位数、和通道的数量等),并且系统控制部51和系统控制部143分别将上述信息设定于寄存器53和142中。这里,基于用来接收用户的输入(未图示)的操作信号,DSP 12中的系统控制部143接收诸如原始图像数据格式的位数或压缩数据格式的位数等信息,并且设定将要针对于图像传感器11中的系统控制部51而被设定的压缩率且设定转换部62和转换部125各者中的转换率。而且,系统控制部143根据摄像条件来设定压缩率。换句话说,当在摄像部21的摄像具有高感光度(按照国际标准化组织(ISO:international organization for standardization)感光度)的情况下进行摄像时,很容易受到噪声的影响,且因此,系统控制部143以让像素数据格式的压缩率较低的方式执行设定。相反地,在低感光度的情况下,噪声的影响小,且因此,系统控制部143将压缩率设定得较高。
首先,将说明发送部22的链路层的构造。
LINK-TX协议管理部61、转换部62、有效负载ECC插入部63、包生成部64和通道分配部65作为链路层的构造而被设置于发送部22中。LINK-TX协议管理部61包括状态控制部71、报头生成部72、数据插入部73和脚注生成部74。
LINK-TX协议管理部61中的状态控制部71管理发送部22的链路层的状态。
报头生成部72生成将要向存储有一行中的像素数据的有效负载添加的报头,且将所生成的报头输出至包生成部64。
图6是图示了由报头生成部72生成的报头的结构的图。
如上所述,整体的一个包具有报头和有效负载数据,该有效负载数据是一行中的像素数据。也存在着在包内添加有脚注的情况。报头包括报头信息和报头ECC。
报头信息包括Frame Start、Frame End、Line Valid、Line Number和Reserved(“预留的”)。图7中图示了各条信息的内容和信息量。
Frame Start是用于指示帧头的1位信息。在用来传输图4中的图像数据区域A11的第一行中的像素数据的包的报头的Frame Start中,设定值为1。在用来传输其他各行中的像素数据的包的报头的Frame Start中,设定值为0。
Frame End是用于指示帧尾的1位信息。在有效负载中包括了有效像素区域A1的最终行中的像素数据的包的报头的Frame End中,设定值为1。在用来传输其他各行中的像素数据的包的报头的Frame End中,设定值为0。
Frame Start和Frame End是与帧有关的帧信息。
Line Valid是用于指示被存储于有效负载中的像素数据的行是否为有效像素的行的1位信息。在用来传输有效像素区域A1的某行中的像素数据的包的报头的Line Valid中,设定值为1。在用来传输其他各行中的像素数据的包的报头的Line Valid中,设定值为0。
Line Number是用于指示包括了被存储于有效负载中的像素数据的行的行编号的13位信息。
Line Valid和Line Number是与行有关的行信息。
Reserved是扩展用的32位区域。整个报头信息的数据量是6字节。
如图6所示,在紧接着被布置于报头信息后边的报头ECC中,包括循环冗余校验(CRC:cyclic redundancy check)码,该循环冗余校验码是基于6字节的报头信息而被计算得出的2字节的错误检测码。而且,在报头ECC中,紧接着CRC码后边还包括两条信息,该两条信息每一者都等同于作为一对报头信息和CRC码的8字节信息。
即,在一个包的报头中,包括相同的三对报头信息和CRC码。整个报头的数据量是24字节,该24字节是第一对报头信息和CRC码的8字节、第二对报头信息和CRC码的8字节、以及第三对报头信息和CRC码的8字节的总数。
图8是图示了构成一对报头信息和CRC码的8字节位阵列的示例的图。
在字节H7(其是用于构成报头的8字节中的第一个1字节)中,从第1位开始依次包括1位的Frame Start、1位的Frame End、1位的LineValid、以及13位的Line Number中的第1位至第5位。而且,在字节H6(其是第二个1字节)中,包括13位的Line Number中的第6位至第13位。
从字节H5(其是第三个1字节)到字节H2(其是第六个1字节)都是Reserved。在字节H1(其是第七个1字节)和字节H0(其是第八个1字节)中,所包括的是CRC码的各位。
返回对图5的说明,报头生成部72根据系统控制部51的控制而生成报头信息。例如,从帧数据输入部52输出的用于指示像素数据的行编号的信息或者用于指示帧头和帧尾的信息是从系统控制部51提供而来的。
而且,报头生成部72把报头信息应用到生成多项式(generatorpolynomial)中且计算CRC码。例如,利用下面的公式(1)来表达应用了报头信息的CRC码的生成多项式。
数学公式1
CRC16=X16+X15+X2+1  (1)
报头生成部72通过将CRC码添加给报头信息而生成一对报头信息和CRC码。通过把同样的成对的报头信息和CRC码重复地布置三次,报头生成部72生成了报头。报头生成部72将所生成的报头输出至包生成部64。
数据插入部73生成被用于填充(stuffing)的数据,且将所生成的数据输出至转换部62和通道分配部65。有效负载填充数据(其是被提供给转换部62的填充数据)被添加给由转换部62转换后的像素数据,且用来调节被存储于有效负载中的像素数据的数据量。而且,通道填充数据(其是被提供给通道分配部65的填充数据)被添加给经过通道分配后的数据,且用来调节通道之间的数据量。
根据系统控制部51的控制,脚注生成部74适当地将有效负载数据应用到生成多项式中且计算32位的CRC码。然后,脚注生成部74将所计算得出的CRC码作为脚注而输出至包生成部64。例如,利用下面的公式(2)来表达作为脚注而被添加的CRC码的生成多项式。
数学公式2
CRC32=X32+X31+X4+X3+X+1  (2)
转换部62获得先作为由帧数据输入部52提供过来的像素数据、然后被压缩部54压缩的压缩数据,并且转换部62将各个像素的压缩数据转换成以1字节为单位的数据。例如,用作为8位、10位、12位、14位和16位之中的任何一者的位数来表达由摄像部21摄像而获得的图像中的各个像素的像素值(RGB)的压缩数据。
图5中的转换部62例如从一行的左端的像素开始、依次地执行这样的对各个像素的转换。而且,转换部62通过把由数据插入部73提供过来的有效负载填充数据添加到通过转换所获得的以字节为单位的压缩数据中而生成有效负载数据,并且将所生成的有效负载数据输出至有效负载ECC插入部63。
由转换部62转换后的压缩数据按照通过转换而被获得的顺序被分组为既定数量的组。
在发送部22的链路层中,在以这样的方式进行分组以后,在由时钟信号规定的每个周期内在各组中的相同位置处对压缩数据并行地进行处理。
如上所述,在一个包的有效负载中,包括与一行中的像素数据对应的压缩数据。
在与一行中的像素数据对应的压缩数据被分组之后,以各组的数据长度变为相同长度的方式来添加有效负载填充数据。该有效负载填充数据是1字节数据。
基于由转换部62提供过来的有效负载数据,有效负载ECC插入部63计算出被用于有效负载数据的错误校正的错误校正码,且将校验(parity)(其是所计算出的错误校正码)插入到有效负载数据中。作为错误校正码,例如使用里德-所罗门码(Reed-Solomon code)。需要注意的是,错误校正码的插入是任选的。例如,可以执行由有效负载ECC插入部63执行的校验的插入和由脚注生成部74执行的脚注的添加之中的仅仅一者。
有效负载ECC插入部63将插入了校验的有效负载数据输出至包生成部64。当校验的插入没有被执行时,由转换部62提供给有效负载ECC插入部63的有效负载数据按照原样被输出至包生成部64。
包生成部64通过把由报头生成部72生成的报头添加给由有效负载ECC插入部63提供过来的有效负载数据从而生成包。当脚注生成部74执行了脚注的生成时,包生成部64也将该脚注添加至有效负载数据。
包生成部64将包数据(其是所生成的一个包中所包括的数据)输出至通道分配部65。针对通道分配部65,被提供的是:包括报头数据和有效负载数据的包数据;或者包括报头数据、有效负载数据和脚注数据的包数据;或者包括报头数据和插入了校验的有效负载数据的包数据。图6中的包结构是合乎逻辑的。在链路层和物理层中,具有图6中所示结构的包的数据是以字节为单位而被处理的。
通道分配部65将由包生成部64提供过来的包数据按照从处于前头的数据开始的顺序分配给通道0至通道7之中的用于数据传输的各个通道。
通道分配部65把以这样的方式被分配给各个通道的包数据输出至物理层。在下面,将会主要说明通过使用通道0至通道7这8个通道来传输数据的情况。然而,即使在用于数据传输的通道的数量是其他不同数量的情况下,也进行类似的处理。
接着,将说明发送部22的物理层的构造。
PHY-TX状态控制部81、时钟生成部82、信号处理部83-0至83-N作为物理层的构造被设置于发送部22中。信号处理部83-0包括控制码插入部91、8B10B符号编码器92、同步部93和发送部94。从通道分配部65输出的且被分配给通道0的包数据被输入到信号处理部83-0中,并且被分配给通道1的包数据被输入到信号处理部83-1中。而且,被分配给通道N的包数据被输入到信号处理部83-N中。
以这样的方式,在发送部22的物理层中,设置有与通道的数量相同数量的信号处理部83-0至83-N。通过使用各个通道而被传输的包数据的处理是在信号处理部83-0至83-N中被并行地进行的。将会说明信号处理部83-0的构造。信号处理部83-1至83-N各者包括类似的构造。
PHY-TX状态控制部81控制信号处理部83-0至83-N中的各部。例如,通过PHY-TX状态控制部81来控制由信号处理部83-0至83-N执行的各种处理的时序。
时钟生成部82生成时钟信号,且将所生成的时钟信号输出至信号处理部83-0至83-N各者中的同步部93。
信号处理部83-0中的控制码插入部91将控制码添加给由通道分配部65提供过来的包数据。控制码是由从事先准备的多种符号中选出的一个符号表示或由多种符号的组合表示的代码。被控制码插入部91插入的各个符号都是8位数据。在后面阶段的电路中进行8B10B转换,借此,被控制码插入部91插入的一个符号变为10位数据。另一方面,如稍后所述,对接收部31中的接收数据进行10B8B转换。接收数据中所包括的在10B8B转换之前的各个符号是10位数据,且在10B8B转换之后的各个符号是8位数据。
作为控制码,存在有Idle Code(“空闲码”)、Start Code(“起始码”)、End Code(“结束码”)、Pad Code(“填补码”)、Sync Code(“同步码”)、Deskew Code(“去偏斜码”)和Standby Code(“备用码”)。
Idle Code是在包数据传输期间以外的期间内被反复地发送的符号组。Idle Code由作为8B10B码的D字符D00.0(00000000)来表示。
Start Code是用于表明包的开始的符号组。如上所述,Start Code被添加到包的前面。Start Code由K28.5、K27.7、K28.2和K27.7这四个符号(它们是三种K字符(K Character)的组合)来表示。
End Code是用于表明包的结束的符号组。如上所述,End Code被添加到包的后面。End Code由K28.5、K29.7、K30.7和K29.7这四个符号(它们是三种K字符的组合)来表示。
Pad Code是为了填补像素数据带与PHY传输带之间的差异而被插入到有效负载数据中的符号组。像素数据带是从摄像部21输出的、且向发送部22中输入的经过压缩后的像素数据的传输速率,并且PHY传输带是从发送部22发送的、且向接收部31中输入的经过压缩后的像素数据的传输速率。Pad Code由K23.7、K28.4、K28.6和K28.7这四个符号(它们是四种K字符的组合)来表示。
Pad Code向被分配给通道0的有效负载数据中的插入是由信号处理部83-0中的控制码插入部91执行的。同样地,Pad Code向被分配给其他不同通道的有效负载数据中的插入是由信号处理部83-1至83-N各者在相同时序下执行的。Pad Code的数量是基于像素数据带与PHY传输带之间的差异、或者由时钟生成部82生成的时钟信号的频率等而被确定的。
以这样的方式,当像素数据带较窄且PHY传输带较宽时,Pad Code被插入以便调节这两个带之间的差异。例如,因为Pad Code被插入,所以按照让像素数据带与PHY传输带之间的差异适配于一定范围内的方式来进行调节。
Sync Code是被用来确保发送部22与接收部31之间的位同步和符号同步的符号组。Sync Code由K28.5和Any**这两个符号来表示。Any**意味着可以使用任何种类的符号。Sync Code例如在发送部22与接收部31之间的包数据传输开始之前在训练模式(training mode)下被反复地发送。
Deskew Code是被用来修正通道之间的Data Skew(即,在接收部31的各通道中所接收的数据的接收时序的差异)的符号组。Deskew Code由K28.5和Any**这两个符号来表示。稍后将说明通过使用Deskew Code而进行的对于通道之间的Data Skew(数据偏斜)的修正。
Standby Code是被用来把下列消息通知给接收部31的符号组,该消息是:来自发送部22的输出已变为诸如高阻抗(High-Z:high impedance)等状态且数据传输不再被执行。即,当包数据的传输结束、且状态变为Standby状态时,Standby Code就被传输至接收部31。Standby Code由K28.5和Any**这两个符号来表示。
控制码插入部91将已添加了这样的控制码的包数据输出至8B10B符号编码器92。
8B10B符号编码器92对由控制码插入部91提供过来的包数据(已添加了控制码的包数据)进行8B10B转换,且把已被转换成以10位为单位的数据的包数据输出至同步部93。
同步部93把由8B10B符号编码器92提供过来的包数据中的各位按照由时钟生成部82生成的时钟信号而输出至发送部94。
发送部94通过通道0中所包括的传输路径而将由同步部93提供过来的包数据发送至接收部31。在通过使用8个通道来进行数据传输的情况下,也是通过使用通道1至通道7中所包括的传输路径而将包数据发送至接收部31的。
接着,将说明接收部31的物理层的构造。
PHY-RX状态控制部101以及信号处理部102-0至102-N作为物理层的构造被设置于接收部31中。信号处理部102-0包括接收部111、时钟生成部112、同步部113、符号同步部114、10B8B符号解码器115、偏斜修正部116和控制码去除部117。通过通道0中所包括的传输路径而被发送的包数据被输入到信号处理部102-0中,且通过通道1中所包括的传输路径而被发送的包数据被输入到信号处理部102-1中。而且,通过通道N中所包括的传输路径而被发送的包数据被输入到信号处理部102-N中。
以这样的方式,在接收部31的物理层中,设置有与通道的数量相同数量的信号处理部102-0至102-N。通过使用各个通道而被传输的包数据的处理是在信号处理部102-0至102-N中被并行地进行的。将会说明信号处理部102-0的构造。信号处理部102-1至102-N各者包括相同的构造。
接收部111接收到表明通过通道0中所包括的传输路径而从发送部22传输过来的包数据的信号,且将该信号输出至时钟生成部112。
通过检测出由接收部111提供过来的信号的边缘,时钟生成部112执行位同步且基于该边缘的检出周期而生成时钟信号。时钟生成部112把由接收部111提供过来的所述信号和该时钟信号一起输出至同步部113。
根据由时钟生成部112生成的时钟信号,同步部113对接收部111中所接收的信号进行采样,且将通过采样而获得的包数据输出至符号同步部114。时钟数据恢复(CDR:clock data recovery)的功能是由时钟生成部112和同步部113实现的。
通过检测出包数据中所包括的控制码或通过检测出控制码中所包括的一部分符号,符号同步部114执行符号同步。例如,符号同步部114检测到Start Code、End Code和Deskew Code各者中所包括的K28.5这个符号,且执行符号同步。符号同步部114将表明了各符号且以10位为单位的包数据输出至10B8B符号解码器115。
而且,通过检测出在包数据的传输开始之前在训练模式下从发送部22反复地发送过来的Sync Code中所包括的符号的边界,符号同步部114执行符号同步。
10B8B符号解码器115对由符号同步部114提供过来的以10位为单位的包数据执行10B8B转换,且将被转换成以8位为单位的数据的包数据输出至偏斜修正部116。
偏斜修正部116从由10B8B符号解码器115提供过来的包数据中检测Deskew Code。被偏斜修正部116执行检测的Deskew Code的检出时序的信息被提供给PHY-RX状态控制部101。
而且,偏斜修正部116以如下方式来修正通道之间的Data Skew,该方式是:Deskew Code的时序与由PHY-RX状态控制部101提供过来的信息所表明的时序相匹配。用于表明信号处理部102-0至102-N各者中所检测出的Deskew Code的时序之中的最新时序的信息是由PHY-RX状态控制部101提供的。
在信号处理部102-1至102-N各者中也执行相同的处理,借此,修正了通道之间的Data Skew。
偏斜修正部116将其中Data Skew已被修正的包数据输出至控制码去除部117。
控制码去除部117去除被添加到包数据中的控制码,并且把从StartCode到End Code的数据作为包数据而输出至链路层。
PHY-RX状态控制部101控制信号处理部102-0至102-N中的各部,且执行例如通道之间的Data Skew的修正。而且,当在既定通道中发生了传输错误且控制码被丢失时,PHY-RX状态控制部101通过添加在其他不同的通道中被传输的控制码来代替丢失的控制码,由此执行控制码的错误校正。
接着,将说明接收部31的链路层的构造。
LINK-RX协议管理部121、通道集成部122、包分离部123、有效负载错误校正部124和转换部125作为链路层的构造被设置于接收部31中。LINK-RX协议管理部121包括状态管理部131、报头错误校正部132、数据去除部133和脚注错误检测部134。
通道集成部122通过把由物理层中的信号处理部102-0至102-N提供过来的多个包数据按照与由发送部22中的通道分配部65实施的对各个通道的分配顺序相反的顺序进行排序,由此执行集成。
包分离部123将由通道集成部122集成的一个包内的包数据分离成报头数据中所包括的包数据和有效负载数据中所包括的包数据。包分离部123将所述报头数据输出至报头错误校正部132且将所述有效负载数据输出至有效负载错误校正部124。
此外,当包内包括了脚注时,包分离部123将一个包内的数据分离成报头数据中所包括的包数据、有效负载数据中所包括的包数据和脚注数据中所包括的包数据。包分离部123将所述报头数据输出至报头错误校正部132且将所述有效负载数据输出至有效负载错误校正部124。而且,包分离部123将所述脚注数据输出至脚注错误检测部134。
当由包分离部123提供过来的有效负载数据中被插入有校验时,有效负载错误校正部124基于该校验通过执行错误校正计算来检测出有效负载数据中的错误且校正所检测出的错误。
有效负载错误校正部124将通过对Basic Block(基本区块)和ExtraBlock(额外区块)各者进行错误校正而获得的、经过错误校正之后的像素数据的压缩数据输出至转换部125。当由包分离部123提供过来的有效负载数据中未插入有校验时,由包分离部123提供过来的有效负载数据按照原样被输出至转换部125。
根据由数据去除部133进行的控制,转换部125去除由有效负载错误校正部124提供过来的有效负载数据中所包括的有效负载填充数据。
而且,转换部125将通过去除有效负载填充数据而获得的以字节为单位的各条像素数据的压缩数据转换成以8位、10位、12位、14位或16位为单位的压缩数据。在转换部125中,执行了通过发送部22中的转换部62进行的转换的逆转换。
转换部125将通过转换而获得的以8位、10位、12位、14位或16位为单位的压缩后的像素数据经由解压缩部144而输出至帧数据输出部141。这里,解压缩部144对压缩后的像素数据执行解压处理且复原原始像素数据。然后,解压缩部144将复原后的像素数据输出至帧数据输出部141。例如,在帧数据输出部141中,基于由转换部125获得的像素数据而生成由报头信息中的Line Valid指定的有效像素的各行,并且按照报头信息中的Line Number而把各行排列起来,由此生成一帧图像。
LINK-RX协议管理部121中的状态管理部131管理接收部31的链路层的状态。
基于由包分离部123提供过来的报头数据,报头错误校正部132获得三对报头信息和CRC码。针对每一对的报头信息和CRC码,报头错误校正部132通过利用与该报头信息属于同一对的CRC码来进行错误检测计算,该错误检测计算是用来检测该报头信息中的错误的计算。
此外,基于每一对中的报头信息的错误检测结果和通过错误检测计算而获得的数据的比较结果中的至少一者,报头错误校正部132推测正确的报头信息且输出被推测为校正信息的报头信息和解码结果。通过错误检测计算而计算得出的数据是通过将CRC的生成多项式应用于报头信息而计算出的值。而且,解码结果是表明该解码是成功或是失败的信息。
所述三对报头信息和CRC码分别被称作第一对、第二对和第三对。在这种情况下,通过针对于第一对的错误检测计算,报头错误校正部132获得在第一对中的报头信息中是否存在有错误的信息(错误检测结果)和通过该错误检测计算而计算出的数据1。而且,通过针对于第二对的错误检测计算,报头错误校正部132获得在第二对中的报头信息中是否存在有错误的信息和通过该错误检测计算而计算出的数据2。通过针对于第三对的错误检测计算,报头错误校正部132获得在第三对中的报头信息中是否存在有错误的信息和通过该错误检测计算而计算出的数据3。
而且,报头错误校正部132判定数据1和数据2是否彼此一致、数据2和数据3是否彼此一致、以及数据3和数据1是否彼此一致。
例如,当针对于第一对、第二对和第三对任一者的错误检测计算中都没有检测到错误时且当通过错误检测计算而计算出的任何一条数据的比较结果都彼此一致时,报头错误校正部132选择表明该解码已成功的信息作为解码结果。而且,报头错误校正部132推测任何一条报头信息都是正确的,并且选择第一对中的报头信息、第二对中的报头信息和第三对中的报头信息之中的一者作为输出信息。
另一方面,当只在针对于第一对的错误检测计算中没有检测到错误时,报头错误校正部132选择表明该解码已成功的信息作为解码结果,并且推测第一对中的报头信息是正确的。然后,报头错误校正部132选择第一对中的报头信息作为输出信息。
此外,当只在针对于第二对的错误检测计算中没有检测到错误时,报头错误校正部132选择表明该解码已成功的信息作为解码结果,并且推测第二对中的报头信息是正确的。然后,报头错误校正部132选择第二对中的报头信息作为输出信息。
当只在针对于第三对的错误检测计算中没有检测到错误时,报头错误校正部132选择表明该解码已成功的信息作为解码结果,并且推测第三对中的报头信息是正确的。然后,报头错误校正部132选择第三对中的报头信息作为输出信息。
报头错误校正部132输出以上述方式而被选择的解码结果和输出信息,且将它们存储于寄存器142中。这样,通过使用CRC码而从多条报头信息中检测出不存在错误的报头信息且将所检测出的报头信息输出,由此执行了利用报头错误校正部132对报头信息的错误校正。
数据去除部133通过控制通道集成部122而去除通道填充数据,且通过控制转换部125而去除有效负载填充数据。
基于由包分离部123提供过来的脚注数据,脚注错误检测部134获得被存储于该脚注中的CRC码。通过使用所获得的CRC码,脚注错误检测部134进行错误检测计算且检测有效负载数据中的错误。脚注错误检测部134将错误检测结果输出且存储到寄存器142中。
图像传感器11和DSP 12的操作
接着,将说明分别包括上述构造的发送部22和接收部31中的一系列处理。
首先,参照图9中的流程图,将说明包括传输系统1的摄像装置的操作。当例如通过按压被设置于摄像装置上的快门按钮来命令开始摄像时,开始图9中的处理。
在步骤S1中,图像传感器11中的摄像部21进行摄像。在利用压缩部54将通过摄像而获得的一帧图像中所含的像素数据以一个像素中的数据为单位依次地转换成压缩数据之后,摄像部21中的帧数据输入部52(图5)将转换后的数据输出至发送部22。
在步骤S2中,由发送部22进行数据发送处理。通过数据发送处理,生成了将一行中的像素数据存储于有效负载中的包,且该包中所包括的包数据被发送至接收部31。稍后将参照图10中的流程图来说明数据发送处理。
在步骤S3中,由接收部31进行数据接收处理。通过数据接收处理,从发送部22发送过来的包数据被接收,且存储于有效负载中的像素数据的压缩数据被输出至图像处理部32。稍后将参照图12中的流程图来说明数据接收处理。
针对一行中的像素数据,交替地进行步骤S2中的由发送部22进行的数据发送处理和步骤S3中的由接收部31进行的数据接收处理。即,当通过数据发送处理发送了某一行中的像素数据时,就执行数据接收处理。当通过数据接收处理接收了该一行中的像素数据时,就针对下一行中的像素数据进行数据发送处理。存在着在适当的时候以在时间上并行的方式执行利用发送部22的数据发送处理和利用接收部31的数据接收处理的情况。在步骤S4中,图像处理部32中的帧数据输出部141判定所述一帧图像中所包含的所有行中的像素数据的发送/接收是否结束。当判定发送/接收还没有结束时,重复地进行步骤S2之后的处理。
当在步骤S4中判定所述一帧图像中所包含的所有行中的像素数据的发送/接收已结束时,图像处理部32中的帧数据输出部141在步骤S5中基于由接收部31提供过来的像素数据而生成一帧图像。
在步骤S6中,图像处理部32通过使用所述一帧图像来执行图像处理,并且结束该处理。
数据发送处理
接着,参照图10中的流程图,将说明在图9的步骤S2中所进行的数据发送处理。需要注意的是,在图9中,所作出的说明是基于如下的假设:在步骤S1的处理中,像素数据是在被压缩之后而被提供给转换部62的。为了说明的方便,将基于如下的假设来作出说明:在数据发送处理中包括用于将像素的数据压缩成压缩数据的处理。因此,在步骤S1中,执行的是直到像素数据被提供给压缩部54的处理。
在步骤S11中,报头生成部72生成包括Frame Start、Frame End、Line Valid、Line Number和Reserved的报头信息。
在步骤S12中,报头生成部72将报头信息应用于生成多项式且计算CRC码。
在步骤S13中,报头生成部72通过将CRC码添加给报头信息而生成一对报头信息和CRC码。通过将同样的一对报头信息和CRC码重复地布置三次,报头生成部72生成了报头。
在步骤S14中,压缩部54对由帧数据输入部52提供过来的图像进行压缩,并且将压缩后的图像提供给转换部62。
更具体地,例如,在原始图像的像素数据呈12位原始图像数据格式的情况下且当该数据格式从12位被压缩成6位时,压缩部54将图11中的最左边一列所示的原始图像数据格式压缩成从左边算起第二列所示的数据格式。在图11中,最左边一列是原始图像数据格式且从左边算起第二列是被执行了压缩的压缩数据格式。而且,第三列是在稍后说明的处理中由转换部62根据通道的数量而从压缩数据格式转换得到的传输数据格式。从右边算起第二列是在稍后说明的处理中从传输数据格式逆转换得到的压缩数据格式,且最右边一列表示将该压缩数据格式解压后得到的原始图像数据格式。而且,在最左边一列的情况下,D_N[11]表示MSB,且数字最小的D_N[0]表示LSB。在其他列中也是这样的表示。
即,压缩部54将图11中的最左边一列所示的12位数据D_N[0]至D_N[11]和12位数据D_N+1[0]至D_N+1[11]分别压缩成如图11中的从左边算起第二列所示的方式的包括数据COMP_N[0]至COMP_N[5]的6位数据和包括数据COMP_N+1[0]至COMP_N+1[5]的6位数据,所述12位数据D_N[0]至D_N[11]和所述12位数据D_N+1[0]至D_N+1[11]分别表示原始图像中的像素N(Pixel4*N)的像素数据和像素N+1(Pixel4*N+1)的像素数据。然后,压缩部54将两个像素的6位数据条转换为呈如下的压缩数据格式的数据Data2*N:该压缩数据格式具有与跟原始图像中的一个像素对应的12位原始图像数据格式的结构相同的结构。这里,包括用于构成经过转换后的数据Data2*N的两个像素的压缩数据的压缩数据格式与原始图像中的一个像素的原始图像数据格式相同。因此,图11中的从左边算起第二列的压缩数据是一个像素的其中布置有经过压缩后的两个像素的呈压缩数据格式的数据的原始图像数据格式。
而且,同样地,如图11中的从左边算起第二列所示,将图11中的最左边一列所示的12位数据D_N+2[0]至D_N+2[11]和12位数据D_N+3[0]至D_N+3[11]压缩成包括数据COMP_N+2[0]至COMP_N+2[5]的6位压缩数据和包括数据COMP_N+3[0]至COMP_N+3[5]的6位压缩数据,所述12位数据D_N+2[0]至D_N+2[11]和所述12位数据D_N+3[0]至D_N+3[11]分别表示原始图像中的像素N+2(Pixel4*N+2)的像素数据和像素N+3(Pixel4*N+3)的像素数据。而且,两个像素的呈压缩数据格式的6位压缩数据条被布置为与一个像素的呈原始图像数据格式的数据对应的12位压缩数据格式,借此,执行了向数据Data2*N+1的转换。
以这样的方式,在压缩部54中,呈12位原始图像数据格式的原始图像数据被压缩成规定位数的压缩数据格式且被重新布置为与原始图像的像素数据格式相同的压缩数据格式。结果,关于数据格式,在维持了原始图像数据格式的同时,将两个像素的呈压缩数据格式的压缩数据记录为与一个像素对应的数据格式,由此,像素数据从整体上被压缩了。
在步骤S15中,转换部62获得由帧数据输入部52提供过来的且被压缩部54压缩后的压缩数据,并且进行转换。转换部62输出有效负载数据,该有效负载数据例如是通过把利用转换而获得的以字节为单位的像素数据分组或通过执行有效负载填充数据的添加而被生成的。利用有效负载ECC插入部63,校验在适当的情况下被插入到有效负载数据中。
即,例如,如图11中的从左边算起第二列所示,当由压缩部54提供过来的压缩数据是呈压缩数据格式的数据Data2*N(其包括两个6位数据条,这两个6位数据条是数据COMP_N[0]至COMP_N[5]和数据COMP_N+1[0]至COMP_N+1[5])和呈压缩数据格式的数据Data2*N+1(其包括两个6位数据条,这两个6位数据条是数据COMP_N+2[0]至COMP_N+2[5]和数据COMP_N+3[0]至COMP_N+3[5])时,转换部62将图11中的从左边算起第二列所示的压缩数据Data2*N和Data2*N+1转换成图11中的从左边算起第三列所示的呈传输数据格式的数据Byte3*N到Byte3*N+2。即,转换部62将数据COMP_N[0]至COMP_N[5]和COMP_N+1[4]至COMP_N+1[5](它们是呈压缩数据格式的数据Data2*N中的较高8位)布置为呈传输数据格式的数据Byte3*N。接着,转换部62将COMP_N+2[0]至COMP_N+2[5]以及COMP_N+3[4]和COMP_N+3[5](它们是压缩数据Data2*N+1中的较高8位)布置为呈传输数据格式的数据Byte3*N+1。而且,转换部62将压缩数据COMP_N+1[0]至COMP_N+1[3](它们是压缩数据Data2*N中的较低4位)和压缩数据COMP_N+3[0]至COMP_N+3[3](它们是压缩数据Data2*N+1中的较低4位)布置为呈传输数据格式的数据Byte3*N+2。
通过上述处理,压缩后的像素数据被分组为以字节为单位的像素数据。
在步骤S16中,包生成部64基于包括与一行中的像素数据对应的压缩图像数据的有效负载数据和由报头生成部72生成的报头来生成包,并且将构成了一个包的包数据输出。
在步骤S17中,通道分配部65将由包生成部64提供过来的包数据分配给用于数据传输的多个通道。
在步骤S18中,控制码插入部91将控制码添加到由通道分配部65提供过来的包数据中。
在步骤S19中,8B10B符号编码器92进行已被添加了控制码的包数据的8B10B转换,且输出被转换成以10位为单位的数据的包数据。
在步骤S20中,同步部93把由8B10B符号编码器92提供过来的包数据按照由时钟生成部82生成的时钟信号而输出,且执行该包数据从发送部94的发送。由信号处理部83-0至83-N并行地进行步骤S18至S20中的处理。当一行中的像素数据的发送结束时,处理就返回到图9中的步骤S2并且进行此后的处理。
数据接收处理
接着,参照图12中的流程图,将说明在图9的步骤S3中所进行的数据接收处理。
在步骤S31中,接收部111接收表明从发送部22传输过来的包数据的信号。由信号处理部102-0至102-N并行地进行步骤S31至S36中的处理。
在步骤S32中,时钟生成部112通过检测由接收部111提供过来的信号的边缘来执行位同步。同步部113对接收部111中所接收到的信号进行采样,且将包数据输出至符号同步部114。
在步骤S33中,符号同步部114例如通过检测包数据中所包括的控制码来执行符号同步。
在步骤S34中,10B8B符号解码器115对经过符号同步之后的包数据进行10B8B转换,并且输出被转换成以8位为单位的数据的包数据。
在步骤S35中,偏斜修正部116检测Deskew Code。如上所述,偏斜修正部116以如下方式来修正通道之间的Data Skew,该方式是:Deskew Code的时序与由PHY-RX状态控制部101提供过来的信息所表明的时序相匹配。
在步骤S36中,控制码去除部117去除被添加到包数据中的控制码。
在步骤S37中,通道集成部122把由信号处理部102-0至102-N提供过来的多条包数据集成。
在步骤S38中,包分离部123把被通道集成部122集成的包数据分离成报头数据中所包括的包数据和有效负载数据中所包括的包数据。
在步骤S39中,报头错误校正部132通过使用CRC码而对被包分离部123分离出的报头数据中所包括的每一对报头信息和CRC码进行错误检测计算。而且,基于每一对的错误检测结果和通过错误检测计算而获得的数据的比较结果,报头错误校正部132选择出不存在错误的报头信息且输出该报头信息。
在步骤S40中,转换部125将有效负载数据转换成以8位、10位、12位、14位或16位为单位的规定位数的压缩数据格式,且将转换后的数据输出至解压缩部144。对于将要被转换的有效负载数据,在适当的情况下由有效负载错误校正部124执行使用校验的错误校正。这里,假设执行了向12位压缩数据格式的转换。
这里,例如,当有效负载数据是图11中的从左边算起第三列所示的呈传输数据格式的数据Byte3*N到Byte3*N+2时,转换部125执行向图11中的从右边算起第二列所示的呈压缩数据格式的压缩数据Data2*N和Data2*N+1的转换。
更具体地,通过使用呈传输数据格式的数据Byte3*N中的数据COMP_N[0]至COMP_N[5]和COMP_N+1[4]至COMP_N+1[5]以及数据Byte3*N+2中的数据COMP_N+1[0]至COMP_N+1[3],转换部125将两个像素的6位数据COMP_N[0]至COMP_N[5]和COMP_N+1[0]至COMP_N+1[5]重新布置成与一个像素的12位原始图像数据格式相同的压缩数据格式,且构成了压缩数据Data2*N。同样地,通过使用呈传输数据格式的数据Byte3*N+1中的数据COMP_N+2[0]至COMP_N+2[5]及COMP_N+3[4]和COMP_N+3[5]以及呈传输数据格式的数据Byte3*N+2中的数据COMP_N+3[0]至COMP_N+3[3],转换部125将两个像素的6位数据COMP_N+2[0]至COMP_N+2[5]和COMP_N+3[0]至COMP_N+3[5]重新布置成压缩数据格式,且构成了数据Data2*N+1。
在步骤S41中,解压缩部144将呈所述压缩数据格式的压缩数据解压、然后执行向原始图像的像素数据的复原、且输出复原后的数据。
然后,当一行中的像素数据的处理结束时,处理就返回到图9中的步骤S3且执行此后的处理。
更具体地,例如,当由转换部125提供过来的数据是图11中的从右边算起第二列所示的数据Data2*N和Data2*N+1(数据Data2*N和Data2*N+1各者是通过与一个像素的原始图像数据格式对应的、两个像素的呈压缩数据格式的压缩数据的重新布置而被构成的)时,解压缩部144将压缩数据Data2*N和Data2*N+1解压成图11中的最右边一列所示的原始图像中的12位像素Pixel4*N到Pixel4*N+3。
即,解压缩部144将数据Data2*N(其是通过呈与一个像素的12位原始图像数据格式对应的压缩数据格式的、2个像素的压缩数据COMP_N[0]至COMP_N[5]和COMP_N+1[0]至COMP_N+1[5]的布置而被构成的)解压成2个像素的呈12位原始图像数据格式的数据D_N[0]至D_N[11]和数据D_N+1[0]至D_N+1[11],并且将该解压数据作为呈1个像素的12位原始图像数据格式的像素数据Pixel4*N和Pixel4*N+1而输出。而且,同样地,解压缩部144将数据Data2*N+1(其是通过呈与一个像素的12位原始图像数据格式对应的压缩数据格式的、2个像素的压缩数据COMP_N+2[0]至COMP_N+2[5]和COMP_N+3[0]至COMP_N+3[5]的布置而被构成的)解压为呈12位原始图像数据格式的像素数据D_N+2[0]至D_N+2[11]和像素数据D_N+3[0]至D_N+3[11],并且将该解压数据作为呈1个像素的12位原始图像数据格式的像素数据Pixel4*N+2和Pixel4*N+3输出。
如上所述,通过使用其中1帧中的一行对应于一个包的包格式来执行图像传感器11与DSP 12之间的数据传输。
可以说,用于图像传感器11与DSP 12之间的数据传输的包格式是最小程度地抑制了报头信息、或者诸如Start Code或End Code等表明包边界的控制码的传输的格式,且该包格式能够防止传输效率降低。当采取其中被存储于一个包的有效负载中的像素数据比1行中的像素数据少的包格式时,必须传输更多的包以便传输一整个帧中的像素数据。因为待传输的报头信息的条数或控制码的数量增加了,所以传输效率降低。
而且,能够通过防止传输效率的降低而抑制传输延迟,并且能够实现需要高速地传输大量图像数据的具有高像素/高帧速率的接口。
通过采取其中假设以提高了传输的可靠度/冗长度且在接收部31侧进行错误校正为前提的包格式,就能够确保针对报头信息的传输错误的对策。因为通过使用报头信息来执行Frame/Line(Vs/H)的同步信息等的传输,所以当报头信息因为传输错误而被丢失时,可能在系统中引起重大麻烦。然而,能够防止这样的麻烦。
而且,能够抑制实施成本或电力消耗的增大以便确保针对报头信息的传输错误的对策。即,因为CRC码被添加到用于图像传感器11与DSP12之间的数据传输的包格式中,所以能够在DSP 12中检测出是否存在着报头信息的传输错误。而且,通过三对报头信息和CRC码的传输,当产生了报头信息的传输错误时,可以在DSP 12中进行校正以将该报头信息校正为正确的报头信息。
当错误校正码被用作针对报头信息的传输错误的对策时,必须在发送部22中准备用于进行错误校正码的计算的电路,并且必须在接收部31中准备用于进行错误校正计算的电路。因为CRC码(其是错误检测码)被添加到报头信息中,所以与必须准备用于执行与错误校正有关的计算的电路的情况相比较而言,能够减小电路规模和电力消耗。而且,当在报头信息中检测到错误时,接收部31不会请求发送部22再次发送报头信息。因此,没有必要准备用于请求再次发送的沿逆方向的传输路径。
通过提高冗长度且通过将8B10B码的多个K字符组合起来而构成控制码,可以减小控制码的错误概率。因此,可以利用相对简单的电路来确保针对控制码的传输错误的对策。
更具体地,可以将三种K字符的4个符号组合起来且用作Start Code。然而,当能够检测到至少一个除了K28.5以外的符号时,就能够在接收部31中指定Start Code。可以说,对于传输错误的耐性较高。End Code也是如此。
而且,可以将4种K字符组合起来且用作Pad Code。因为与其他控制码相比较而言,Pad Code被分配了更多种类的K字符,所以与其他控制码相比较而言,可以提高对于错误的耐性。即,当在四种符号之中可以检测到一种符号时,就能够在接收部31中指定Pad Code。因为与StartCode或End Code相比较而言,Pad Code是被频繁地传输的,所以具有能够提高对于错误的耐性的结构。
此外,在每个通道中,相同的控制码在相同时序下被传输。因此,当在1个通道中产生了传输错误且控制码被丢失时,可以通过使用其他不同通道中的控制码来重建其中产生了错误的控制码。
而且,因为K字符的数量是有限的,所以每个控制码是由最小数量的K字符的组合来构成的。例如,在利用反复执行的发送因而比较能够容许传输错误的Sync Code、Deskew Code和Standby Code各者中,使用没有必要添加K字符的数据结构。
因为再同步所必需的控制码被分配在各个包(各行)中,所以当位同步由于诸如静电等干扰或由于噪声而被丢失时,可以迅速地进行再同步。而且,可以使由于同步丢失而引起的传输错误的影响最小化。
更具体地,在由时钟生成部112和同步部113实现的CDR中检测到8B10B转换之后的位数据的转变/边缘,由此能够进行位同步。当发送部22继续发送数据时,能够在被假定为CDR锁定时间(CDR lock time)的周期内执行位同步。
而且,即使当符号同步被丢失时,也能够通过在符号同步部114中检测特定的K字符(K28.5)而迅速地进行再同步。因为K28.5被用于Start Code、End Code和Deskew Code各者中,所以在一个包的包数据的传输的期间内能够在三个点处进行符号同步。
而且,通过使用Deskew Code而使得能够修正通道之间的DataSkew,还能够执行通道之间的同步。
在链路层中,以诸如16等为分组单位来并行地处理各条包数据。因此,与在一个时钟周期内处理1条包数据的情况相比较而言,能够抑制电路规模或记忆量。在实施时,关于一次处理1条包数据的情况和以每个既定单位来处理包数据的情况,在后一种情况下能够更多地抑制电路规模等。因为能够控制电路规模,所以还能够抑制电力消耗。
此外,在通道的分配中,能够通过将连续多条包数据分配给不同的通道来提高对于错误的耐性。甚至当在条数超过了某一通道中的校验的错误校正能力的连续多条包数据中产生了错误时,包数据中的产生了错误的位置也会被分散开,这是因为接收部31中执行了通道集成。因此,能够通过使用校验来进行错误校正。利用校验而实现的错误校正能力是依赖于校验长度而被确定的。
此外,在通道分配/通道集成的上层(通道分配/通道集成的更靠近物理层的一侧是下层)中进行ECC处理,借此,能够减小发送部22和接收部31各者的电路规模。例如,当在发送部22中执行了包数据向各个通道的分配之后而将ECC的校验插入到有效负载中时,有必要在每个通道中都准备有效负载ECC插入部,这样电路规模就变大了。然而,能够避免这样的情况。
在物理层的多个电路中并行地进行包数据的处理。然而,利用PHY-TX状态控制部81或时钟生成部82的共用化,与在每个通道中都准备这些电路的情况相比较而言,能够简化电路。而且,通过使用不是将不同的控制码传输至每个通道的协议,能够简化用来进行各个通道的包数据的处理的电路。
将12位原始图像数据格式转换成8位压缩数据格式且进行发送/接收的示例
在上面,已经说明了如下的示例。即,呈12位原始图像数据格式的原始图像的像素数据以50%的压缩率被压缩为呈6位压缩数据格式的压缩数据。然后,执行向8位传输数据格式的转换且执行发送/接收。然而,也能够发送/接收除了上面已说明的位数以外的位数的压缩数据。
例如,当在将12位原始图像数据格式压缩为呈8位压缩数据格式的压缩数据数据之后来执行向8位传输格式的转换以及发送/接收时,呈1个像素的压缩数据格式的位数和呈传输数据格式的位数各者均变为8位。因此,能够通过将压缩数据按原样应用于传输格式而进行发送/接收。即,在这种情况下,由图11中的呈传输数据格式的数据Byte3*N+2表示的、且其中收集的是较低位的数据就成为不必要的。结果,即使当呈8位压缩数据格式的压缩数据被传输时,也能够实现利用与时钟数据恢复对应的8B10B转换而进行的高速传输。
将12位原始图像数据格式转换成5位压缩数据格式的示例
此外,例如,通过将1个像素的呈12位原始图像数据格式的数据压缩成5位压缩数据格式且将2个像素的5位压缩数据格式布置为具有与在1个像素中有10位的原始图像数据格式的结构相同的结构的压缩数据格式,就能够执行向现有的8位传输格式的转换且能够进行发送/接收。
更具体地,如图13中的最左边一列所示,利用步骤S14中的上述处理来压缩8个像素的呈原始图像数据格式的数据Pixel8*N到Pixel8*N+7,借此,执行转换以便转换成图13中从左边算起第二列所示的呈具有与10位原始图像数据格式的结构相同的结构的压缩数据格式的数据Data4*N到Data4*N+3。即,压缩部54将数据Pixel8*N到Pixel8*N+7的呈原始图像数据格式的12位数据D_N[0]~[11]到D_N+7[0]~[11]转换成5位压缩数据COMP_N[0]~[4]到COMP_N+7[0]~[4]。此外,如图13中的从左边算起第二列所示,压缩部54将2个像素的数据COMP_N[0]至COMP_N[4]和COMP_N+1[0]至COMP_N+1[4]布置成呈压缩数据格式的数据Data4*N,将数据COMP_N+2[0]至COMP_N+2[4]和COMP_N+3[0]至COMP_N+3[4]布置成呈压缩数据格式的数据Data4*N+1,将数据COMP_N+4[0]至COMP_N+4[4]和COMP_N+5[0]至COMP_N+5[4]布置成呈压缩数据格式的数据Data4*N+2,且将数据COMP_N+6[0]至COMP_N+6[4]和COMP_N+7[0]至COMP_N+7[4]布置成呈压缩数据格式的数据Data4*N+3。利用这样的处理,12位原始图像数据格式被压缩成5位,并且被转换成具有与以2个像素中的10位为单位的原始图像数据格式的结构相同的结构的压缩数据格式。
然后,利用步骤S15中的处理,将图13中的从左边算起第二列所示的呈压缩数据格式的数据Data4*N到Data4*N+3转换为呈8位传输数据格式的数据Byte5*N到Byte5*N+4。即,如图13中的从左边算起第三列所示,转换部62将数据Data4*N中的较高8位(它们包括数据COMP_N[0]至COMP_N[4]和数据COMP_N+1[2]至COMP_N+1[4])布置为呈传输数据格式的数据Byte5*N。同样地,转换部62将数据Data4*N+1中的数据COMP_N+2[0]至COMP_N+2[4]和数据COMP_N+3[2]至COMP_N+3[4]布置成数据Byte5*N+1,将数据Data4*N+2中的数据COMP_N+4[0]至COMP_N+4[4]和数据COMP_N+5[2]至COMP_N+5[4]布置成数据Byte5*N+2,将数据Data4*N+3中的数据COMP_N+6[0]至COMP_N+6[4]和数据COMP_N+7[2]至COMP_N+7[4]布置成数据Byte5*N+3,且将数据COMP_N+1[0]至COMP_N+1[1]、COMP_N+3[0]至COMP_N+3[1]、COMP_N+5[0]至COMP_N+5[1]和COMP_N+7[0]至COMP_N+7[1](它们分别包括数据Data4*N到Data4*N+3中的较低2位)布置成数据Byte5*N+4。
此外,利用步骤S40中的处理,将图13中的从左边算起第三列所示的呈传输数据格式的Byte5*N到Byte5*N+4转换成如图13中的从右边算起第二列所示的呈具有与10位原始图像数据格式的结构相同的结构的压缩数据格式的数据Data4*N到Data4*N+3。即,转换部125将呈传输数据格式的数据Byte5*N中的数据COMP_N[0]至COMP_N[4]和数据COMP_N+1[2]至COMP_N+1[4]以及数据Byte5*N+4中的数据COMP_N+1[0]至COMP_N+1[1](它们作为2个像素的被压缩成5位的数据条)布置为呈10位压缩数据格式的数据Data4*N。同样地,转换部125将数据Byte5*N+1中的数据COMP_N+2[0]至COMP_N+2[4]和数据COMP_N+3[2]至COMP_N+3[4]以及数据Byte5*N+4中的数据COMP_N+3[0]至COMP_N+3[1]布置成数据Data4*N+1,将数据Byte5*N+2中的数据COMP_N+4[0]至COMP_N+4[4]和数据COMP_N+5[2]至COMP_N+5[4]以及数据Byte5*N+4中的数据COMP_N+5[0]至COMP_N+5[1]布置成数据Data4*N+2,且将数据Byte5*N+3中的数据COMP_N+6[0]至COMP_N+6[4]和数据COMP_N+7[2]至COMP_N+7[4]以及数据Byte5*N+4中的数据COMP_N+7[0]至COMP_N+7[1]布置成数据Data4*N+3。
然后,利用步骤S41中的处理,呈各自布置有以2个像素为单位的压缩数据、且具有与图13中从左边算起第二列所示的10位原始图像数据格式的结构相同的结构的压缩数据格式的数据Data4*N到Data4*N+3被解压成图13中最右边一列所示的呈原始图像数据格式的数据Pixel8*N到Pixel8*N+7。
即,解压缩部144将呈具有与10位原始图像数据格式的结构相同的结构的10位压缩数据格式的数据Data4*N中的2个像素的5位数据COMP_N[0]至COMP_N[4]和COMP_N+1[0]至COMP_N+1[4]分别解压成D_N[0]至D_N[11]和D_N+1[0]至D_N+1[11],且将数据Pixel8*N和Pixel8*N+1中的该解压数据布置为12位原始图像数据格式。同样地,解压缩部144将数据Data4*N+1中的数据COMP_N+2[0]至COMP_N+2[4]和COMP_N+3[0]至COMP_N+3[4]分别解压成D_N+2[0]至D_N+2[11]和D_N+3[0]至D_N+2[11],且将这条解压数据布置于数据Pixel8*N+2和Pixel8*N+3中。而且,解压缩部144将数据Data4*N+2中的数据COMP_N+4[0]至COMP_N+4[4]和COMP_N+5[0]至COMP_N+5[4]分别解压成D_N+4[0]至D_N+4[11]和D_N+5[0]至D_N+5[11],且将该解压数据布置于数据Pixel8*N+4和Pixel8*N+5中。此外,解压缩部144将数据Data4*N+3中的数据COMP_N+6[0]至COMP_N+6[4]和COMP_N+7[0]至COMP_N+7[4]分别解压成D_N+6[0]至D_N+6[11]和D_N+7[0]至D_N+7[11],且将该解压数据布置于数据Pixel8*N+6和Pixel8*N+7中。
利用上述处理,在12位原始图像数据格式被压缩成5位压缩数据格式的情况下,实现了在8位传输数据格式下的发送/接收。
将12位原始图像数据格式转换成4位压缩数据格式且进行发送/接收的第一示例
此外,例如,在将呈1个像素中具有12位的原始图像数据格式的数据压缩成4位压缩数据格式之后,按照每两个像素来执行布置从而布置成具有与在1个像素中有8位的原始图像数据格式的结构相同的结构的压缩数据格式,由此能够执行向现有的8位传输格式的转换且能够进行发送/接收。
更具体地,如图14中的最左边一列所示,利用步骤S14中的上述处理来压缩两个像素的呈原始图像数据格式的数据Pixel2*N和Pixel2*N+1。因此,执行转换以便转换成图14中从左边算起第二列所示的呈具有与8位原始图像数据格式的结构相同的结构的压缩数据格式的数据DataN。即,压缩部54将呈原始图像数据格式的数据Pixel2*N和Pixel2*N+1中的12位数据D_N[0]至D_N[11]和数据D_N+1[0]至D_N+1[11]转换成4位压缩数据COMP_N[0]至COMP_N[3]和COMP_N+1[0]至COMP_N+1[3]。此外,如图14中的从左边算起第二列所示,压缩部54将两个像素的8位数据COMP_N[0]至COMP_N[3]和COMP_N+1[0]至COMP_N+1[3]布置为呈压缩数据格式的数据DataN。利用这样的处理,12位原始图像数据格式被压缩成4位数据条。然后,按照每两个像素来执行布置,从而布置成以8位为单位且具有与8位原始图像数据格式的结构相同的结构的压缩数据格式。
然后,利用步骤S15中的处理,将图14中的从左边算起第二列所示的呈压缩数据格式的数据DataN转换为呈8位传输数据格式的数据ByteN。即,如图14中的从左边算起第三列所示,转换部62将数据DataN的包括数据COMP_N[0]至COMP_N[3]和数据COMP_N+1[0]至COMP_N+1[3]在内的这8位布置为呈8位传输数据格式的数据ByteN。
此外,利用步骤S40中的处理,将图14中的从左边算起第三列所示的呈传输数据格式的ByteN转换成图14中的从右边算起第二列所示的呈具有与8位原始图像数据格式的结构相同的结构的压缩数据格式的数据DataN。即,转换部125将呈传输数据格式的数据ByteN的数据COMP_N[0]至COMP_N[3]和COMP_N+1[0]至COMP_N+1[3]布置成呈压缩数据格式的数据DataN。
然后,利用步骤S41中的处理,将图14中的从右边算起第二列所示的呈具有与8位原始图像数据格式的结构相同的结构的压缩数据格式的数据DataN解压成图14中的最右边一列所示的呈原始图像数据格式的数据Pixel2*N和Pixel2*N+1。
即,解压缩部144将2个像素的呈8位压缩数据格式(该格式具有与8位原始图像数据格式的结构相同的结构)的数据DataN中所包括的4位数据COMP_N[0]至COMP_N[3]和COMP_N+1[0]至COMP_N+1[3]分别解压成数据D_N[0]至D_N[11]和D_N+1[0]至D_N+1[11],且将该解压数据条分别布置为呈12位原始图像数据格式的数据Pixel2*N和Pixel2*N+1。
利用上述处理,在12位原始图像数据格式被压缩成4位压缩数据格式的情况下,实现了在8位传输数据格式下的发送/接收。
将12位原始图像数据格式转换成4位压缩数据格式且进行发送/接收的第二示例
关于将12位原始图像数据格式转换成4位压缩数据格式的情况,存在着其他不同的方法。即,例如,把呈在1个像素中有12位的原始图像数据格式的数据压缩成4位压缩数据格式之后,按照每三个像素来进行布置从而布置成具有与在1个像素中有12位的原始图像数据格式的结构相同的结构的压缩数据格式,由此能够执行向现有的8位传输格式的转换且能够进行发送/接收。
更具体地,如图15中的最左边一列所示,利用步骤S14中的上述处理来压缩6个像素的呈原始图像数据格式的数据Pixel6*N到Pixel6*N+5。因此,执行转换以便转换成图15中从左边算起第二列所示的呈具有与12位原始图像数据格式的结构相同的结构的压缩数据格式的数据Data2*N和Data2*N+1。即,压缩部54将呈原始图像数据格式的数据Pixel6*N到Pixel6*N+5的12位数据D_N[0]~[11]到D_N+5[0]~[11]转换成4位压缩数据COMP_N[0]~[3]到COMP_N+5[0]~[3]。此外,如图15中的从左边算起第二列所示,压缩部54将3个像素的数据COMP_N[0]~[3]到COMP_N+2[0]~[3]布置成呈压缩数据格式的数据Data2*N,且将数据COMP_N+3[0]~[3]到COMP_N+5[0]~[3]布置成呈压缩数据格式的数据Data2*N+1。利用这样的处理,12位原始图像数据格式被转换成4位压缩数据且被转换成以12位为单位的压缩数据格式。
然后,利用步骤S15中的处理,将图15中从左边算起第二列所示的呈与12位原始图像数据格式对应的压缩数据格式的数据Data2*N和Data2*N+1转换为呈8位传输数据格式的数据Byte3*N到Byte3*N+2。即,如图15中的从左边算起第三列所示,转换部62将数据Data2*N中的较高8位(包括数据COMP_N[0]至COMP_N[3]和数据COMP_N+1[0]至COMP_N+1[3])布置为呈传输数据格式的数据Byte3*N。同样地,转换部62将数据Data2*N+1中的数据COMP_N+3[0]至COMP_N+3[3]和数据COMP_N+4[0]至COMP_N+4[3]布置成数据Byte3*N+1,且将数据COMP_N+2[0]至COMP_N+2[3]和COMP_N+5[0]至COMP_N+5[3](它们分别包括数据Data2*N中的较低4位和数据Data2*N+1中的较低4位)布置成数据Byte3*N+2。
此外,利用步骤S40中的处理,将图15中的从左边算起第三列所示的呈传输数据格式的Byte3*N到Byte3*N+2转换为如图15中从右边算起第二列所示的呈具有与12位原始图像数据格式的结构相同的结构的压缩数据格式的数据Data2*N和Data2*N+1。即,转换部125将呈传输数据格式的数据Byte3*N中的数据COMP_N[0]至COMP_N[3]和COMP_N+1[0]至COMP_N+1[3]以及数据Byte3*N+2中的数据COMP_N+2[0]至COMP_N+2[3]布置成呈压缩数据格式的数据Data2*N。同样地,转换部125将数据Byte3*N+1中的数据COMP_N+3[0]至COMP_N+3[3]和数据COMP_N+4[0]至COMP_N+4[3]以及数据Byte3*N+2中的数据COMP_N+5[0]至COMP_N+5[3]布置成数据Data2*N+1。
然后,利用步骤S41中的处理,将图15中从右边算起第二列所示的呈具有与12位原始图像数据格式的结构相同的结构的压缩数据格式的数据Data2*N和Data2*N+1解压成图15中最右边一列所示的呈原始图像数据格式的数据Pixel6*N到Pixel6*N+5。
即,解压缩部144将呈3个像素的4位压缩数据格式(该格式具有与12位原始图像数据格式的结构相同的结构)的数据DataN2*N中的4位数据COMP_N[0]~[3]到COMP_N+2[0]~[3]分别解压成数据D_N[0]~[11]到D_N+2[0]~[11],且将该解压数据布置为呈12位原始图像数据格式的数据Pixel6*N到Pixel6*N+2。同样地,解压缩部144将数据Data2*N+1中的数据COMP_N+3[0]~[3]到COMP_N+5[0]~[3]分别解压成数据D_N+3[0]~[11]到D_N+5[0]~[11],且将该解压数据布置成数据Pixel6*N+3至Pixel6*N+5。
利用上述处理,在12位原始图像数据格式被压缩成4位压缩数据格式的情况下,实现了在8位传输数据格式下的发送/接收。
将10位原始图像数据格式转换成6位压缩数据格式且进行发送/接收的示例
在上面,已经说明了原始图像数据格式是12位的情况。然而,例如,10位原始图像数据格式可以被转换成6位压缩数据格式。即,例如,在将呈1个像素中具有10位的原始图像数据格式的数据压缩成6位数据之后,按照每2个像素来进行布置从而布置成具有与在1个像素中具有12位的原始图像数据格式的结构相同的结构的压缩数据格式,由此能够执行向现有的8位传输格式的转换且能够进行发送/接收。
更具体地,如图16中的最左边一列所示,利用步骤S14中的上述处理来压缩4个像素的呈10位的原始图像数据格式的数据Pixel4*N到Pixel4*N+3。因此,执行转换以便转换成图16中从左边算起第二列所示的呈具有与12位原始图像数据格式的结构相同的结构的压缩数据格式的数据Data2*N和Data2*N+1。即,压缩部54将呈原始图像数据格式的数据Pixel4*N到Pixel4*N+3中的10位数据D_N[0]~[9]到D_N+3[0]~[9]转换成6位压缩数据COMP_N[0]~[5]到COMP_N+3[0]~[5]。此外,如图16中的从左边算起第二列所示,压缩部54将2个像素的数据COMP_N[0]至COMP_N[5]和COMP_N+1[0]至COMP_N+1[5]布置成呈压缩数据格式的数据Data2*N,且将数据COMP_N+2[0]至COMP_N+2[5]和COMP_N+3[0]至COMP_N+3[5]布置成呈压缩数据格式的数据Data2*N+1。利用这样的处理,10位原始图像数据格式被压缩成6位数据,且每2个像素地被布置成以12位为单位的压缩数据格式。
然后,利用步骤S15中的处理,将图16中的从左边算起第二列所示的呈压缩数据格式的数据Data2*N和Data2*N+1转换为呈8位传输数据格式的数据Byte3*N到Byte3*N+2。即,如图16中的从左边算起第三列所示,转换部62将Data2*N中的较高8位(包括数据COMP_N[0]至COMP_N[5]和COMP_N+1[4]至COMP_N+1[5])布置为呈传输数据格式的数据Byte3*N。同样地,转换部62将数据Data2*N+1中的较高8位(包括数据COMP_N+2[0]至COMP_N+2[5]和数据COMP_N+4[4]至COMP_N+4[5])布置成数据Byte3*N+1,并且将数据COMP_N+1[0]至COMP_N+1[3]和COMP_N+3[0]至COMP_N+3[3](包括数据Data2*N和Data2*N+1各者中的较低4位)布置成数据Byte3*N+2。
此外,利用步骤S40中的处理,将图16中的从左边算起第三列所示的呈传输数据格式的Byte3*N到Byte3*N+2转换成如图16中从右边算起第二列所示的呈具有与12位原始图像数据格式的结构相同的结构的压缩数据格式的数据Data2*N和Data2*N+1。即,转换部125将呈传输数据格式的数据Byte3*N中的数据COMP_N[0]至COMP_N[5]和数据COMP_N+1[4]至COMP_N+1[5]以及数据Byte3*N+2中的数据COMP_N+1[0]至COMP_N+1[3]布置成呈压缩数据格式的数据Data2*N。同样地,转换部125将数据Byte3*N+1中的数据COMP_N+2[0]至COMP_N+2[5]和数据COMP_N+3[4]至COMP_N+3[5]以及数据Byte3*N+2中的数据COMP_N+3[0]至COMP_N+3[3]布置成数据Data2*N+1。
然后,利用步骤S41中的处理,将图16中从右边算起第二列所示的呈具有与12位原始图像数据格式的结构相同的结构的压缩数据格式的数据Data2*N和Data2*N+1解压成图16中最右边一列所示的呈10位原始图像数据格式的数据Pixel4*N到Pixel4*N+3。
即,解压缩部144将呈2个像素的6位压缩数据格式(该格式具有与12位原始图像数据格式的结构相同的结构)的数据DataN2*N中的6位数据COMP_N[0]至COMP_N[5]和COMP_N+1[0]至COMP_N+1[5]分别解压成D_N[0]至D_N[9]和D_N+1[0]至D_N+1[9],且将该解压数据布置为呈10位原始图像数据格式的数据Pixel4*N和Pixel4*N+1。同样地,解压缩部144将数据Data2*N+1中的数据COMP_N+2[0]至COMP_N+2[5]和COMP_N+3[0]至COMP_N+3[5]分别解压成数据D_N+2[0]至D_N+2[9]和D_N+3[0]至D_N+3[9],且将该解压数据布置成数据Pixel4*N+2和Pixel4*N+3。
利用上述处理,在10位原始图像数据格式被压缩成6位压缩数据格式的情况下,实现了在8位传输数据格式下的发送/接收。
将10位原始图像数据格式转换成5位压缩数据格式的示例
在上面,已经说明了将10位原始图像数据格式转换成6位压缩数据格式的情况。然而,例如,在将呈1个像素中具有10位的原始图像数据格式的数据压缩成5位压缩数据格式之后,每2个像素地进行布置从而布置成具有与在1个像素中具有10位的原始图像数据格式的结构相同的结构的压缩数据格式,由此能够执行向现有的8位传输格式的转换且能够进行发送/接收。
更具体地,如图17中的最左边一列所示,利用步骤S14中的上述处理来压缩8个像素的呈原始图像数据格式的数据Pixel8*N到Pixel8*N+7。因此,执行转换以便转换成图17中从左边算起第二列所示的呈具有与10位原始图像数据格式的结构相同的结构的压缩数据格式的数据Data4*N到Data4*N+3。即,压缩部54将呈原始图像数据格式的数据Pixel8*N到Pixel8*N+7的10位数据D_N[0]~[9]到D_N+7[0]~[9]转换成5位,且执行向数据COMP_N[0]~[4]到COMP_N+7[0]~[4]的转换。此外,如图17中的从左边算起第二列所示,压缩部54将2个像素的数据COMP_N[0]至COMP_N[4]和COMP_N+1[0]至COMP_N+1[4]布置成呈压缩数据格式的数据Data4*N,将数据COMP_N+2[0]至COMP_N+2[4]和COMP_N+3[0]至COMP_N+3[4]布置为呈压缩数据格式的数据Data4*N+1,将数据COMP_N+4[0]至COMP_N+4[4]和COMP_N+5[0]至COMP_N+5[4]布置为呈压缩数据格式的数据Data4*N+2,且将数据COMP_N+6[0]至COMP_N+6[4]和COMP_N+7[0]至COMP_N+7[4]布置为呈压缩数据格式的数据Data4*N+3。利用这样的处理,10位原始图像数据格式被压缩成5位,且每2个像素地被布置为以10位为单位的压缩数据格式。
然后,利用步骤S15中的处理,将图17中从左边算起第二列所示的呈压缩数据格式的数据Data4*N到Data4*N+3转换为呈8位传输数据格式的数据Byte5*N到Byte5*N+4。即,如图17中的从左边算起第三列所示,转换部62将数据Data2*N中的较高8位(包括数据COMP_N[0]至COMP_N[4]和数据COMP_N+1[2]至COMP_N+1[4])布置为呈传输数据格式的数据Byte5*N。同样地,转换部62将数据Data4*N+1中的数据COMP_N+2[0]至COMP_N+2[4]和COMP_N+3[2]至COMP_N+3[4]布置成数据Byte5*N+1,将数据Data4*N+2中的数据COMP_N+4[0]至COMP_N+4[4]和COMP_N+5[2]至COMP_N+5[4]布置成数据Byte5*N+2,将数据Data4*N+3中的数据COMP_N+6[0]至COMP_N+6[4]和COMP_N+7[2]至COMP_N+7[4]布置成数据Byte5*N+3,且将数据COMP_N+1[0]至COMP_N+1[1]、COMP_N+3[0]至COMP_N+3[1]、COMP_N+5[0]至COMP_N+5[1]以及COMP_N+7[0]至COMP_N+7[1](它们分别包括数据Data4*N到Data4*N+3中的较低2位)布置成数据Byte5*N+4。
此外,利用步骤S40中的处理,将图17中的从左边算起第三列所示的呈传输数据格式的数据Byte5*N到Byte5*N+4转换成如图17中从右边算起第二列所示的呈具有与10位原始图像数据格式的结构相同的结构的压缩数据格式的数据Data4*N到Data4*N+3。即,转换部125将呈传输数据格式的数据Byte5*N中的数据COMP_N[0]至COMP_N[4]和数据COMP_N+1[2]至COMP_N+1[4]以及数据Byte5*N+4中的数据COMP_N+1[0]至COMP_N+1[1]布置为呈压缩数据格式的数据Data4*N。同样地,转换部125将数据Byte5*N+1中的数据COMP_N+2[0]至COMP_N+2[4]和数据COMP_N+3[2]至COMP_N+3[4]以及数据Byte5*N+4中的数据COMP_N+3[0]至COMP_N+3[1]布置成数据Data4*N+1,将数据Byte5*N+2中的数据COMP_N+4[0]至COMP_N+4[4]和数据COMP_N+5[2]至COMP_N+5[4]以及数据Byte5*N+4中的数据COMP_N+5[0]至COMP_N+5[1]布置成数据Data4*N+2,且将数据Byte5*N+3中的数据COMP_N+6[0]至COMP_N+6[4]和数据COMP_N+7[2]至COMP_N+7[4]以及数据Byte5*N+4中的数据COMP_N+7[0]至COMP_N+7[1]布置成数据Data4*N+3。
然后,利用步骤S41中的处理,将图17中从右边算起第二列所示的呈具有与10位原始图像数据格式的结构相同的结构的压缩数据格式的数据Data4*N到Data4*N+3解压成图17中的最右边一列所示的呈原始图像数据格式的数据Pixel8*N到Pixel8*N+7。
即,解压缩部144将呈具有与10位原始图像数据格式的结构相同的结构的、2个像素的10位压缩数据格式的数据Data4*N中的5位数据COMP_N[0]至COMP_N[4]和COMP_N+1[0]至COMP_N+1[4]分别解压成数据D_N[0]至D_N[9]和D_N+1[0]至D_N+1[9],且将该解压数据布置为呈10位原始图像数据格式的数据Pixel8*N和Pixel8*N+1。同样地,解压缩部144将数据Data4*N+1中的数据COMP_N+2[0]至COMP_N+2[4]和COMP_N+3[0]至COMP_N+3[4]分别解压成数据D_N+2[0]至D_N+2[9]和D_N+3[0]至D_N+3[9],且将该解压数据布置成数据Pixel8*N+2和Pixel8*N+3。而且,解压缩部144将数据Data4*N+2中的数据COMP_N+4[0]至COMP_N+4[4]和COMP_N+5[0]至COMP_N+5[4]分别解压成数据D_N+4[0]至D_N+4[9]和D_N+5[0]至D_N+5[9],且将该解压数据布置成数据Pixel8*N+4和Pixel8*N+5。而且,解压缩部144将数据Data4*N+3中的数据COMP_N+6[0]至COMP_N+6[4]和COMP_N+7[0]至COMP_N+7[4]分别解压成数据D_N+6[0]至D_N+6[9]和D_N+7[0]至D_N+7[9],且将该解压数据布置成数据Pixel8*N+6和Pixel8*N+7。
利用上述处理,10位原始图像数据格式被压缩成5位,借此,在每2个像素地进行布置从而布置成具有与原始图像数据格式的结构相同的结构的压缩数据格式且进行压缩的情况下,实现了在8位传输数据格式下的发送/接收。
将呈12位原始图像数据格式的多个像素转换成与不同的多个像素的原始图像数据格式对应的压缩数据格式且进行发送/接收的示例
在上面,已经说明了针对各个像素把按像素单位而被固定了位数的压缩数据格式分配给既定的原始图像数据格式且执行向8位传输数据格式的转换的示例。然而,可以将与多个像素对应的原始图像数据格式转换成与不同的多个像素对应的可变长度型压缩数据格式,从而进行向既定的原始图像数据格式的分配且执行向8位传输格式的转换。
即,例如,通过将32个像素的12位原始图像数据格式转换成16个像素的可变长度型位数的压缩数据格式且通过将该压缩数据格式布置成与16个像素的既定的12位原始图像数据格式对应的压缩数据格式,就能够执行向现有的8位传输格式的转换且能够进行发送/接收。
更具体地,如图18所示,利用步骤S14中的上述处理来压缩32个像素的呈12位原始图像数据格式的数据PixelN到PixelN+31。因此,在针对各个像素执行了向可变长度位的压缩数据的转换之后,执行转换以便转换成图19中从左边到第四列的所有列所示的呈具有与12位原始图像数据格式的结构相同的结构的压缩数据格式的数据DataN到DataN+15。即,压缩部54将32个像素的呈原始图像数据格式的数据PixelN到PixelN+31中的12位数据D_N[0]~[11]到D_N+31[0]~[11]转换成与总计16个像素的12位原始图像数据格式(在该格式中,各个像素的长度是可变的)对应的数据COMP[0]到COMP[191]。此外,如图19中的从左边到第四列的所有列所示,压缩部54按照从头开始每12位的方式将与原始图像数据格式的1个像素对应的数据COMP_N[0]至COMP_N[11]布置成数据DataN,将数据COMP[12]至COMP[23]布置成数据DataN+1,…,且将数据COMP[180]至COMP[191]布置成数据DataN+15。利用这样的处理,32个像素的12位原始图像数据格式被转换成16个像素的具有与12位原始图像数据格式的结构相同的结构的压缩数据格式。
然后,利用步骤S15中的处理,按照每24位的方式将图19中从左边到第四列的所有列所示的呈与12位原始图像数据格式对应的压缩数据格式的数据DataN到DataN+15转换为呈8位传输数据格式的数据Byte3*N到Byte3*N+2。即,如图19中的最右边一列所示,转换部62将数据DataN中的较高8位(包括数据COMP[4]至COMP[11])布置为呈传输数据格式的数据Byte3*N。同样地,转换部62将数据DataN+1中的数据COMP[16]至COMP[23]布置成数据Byte3*N+1,且将数据COMP[0]至COMP[3]和COMP[12]至COMP[15](它们分别包括数据DataN中的较低4位和DataN+1中的较低4位)布置成数据Byte3*N+2。而且,利用相同的处理,将其他14个像素的呈具有与12位原始图像数据格式的结构相同的结构的压缩数据格式的数据DataN+2至DataN+15转换成8位传输数据格式。
此外,利用步骤S40中的处理,将图19中的最右边一列所示的呈传输数据格式的Byte3*N到Byte3*N+2依次地转换为呈如图19中从左边到第四列的所有列所示的具有与12位原始图像数据格式的结构相同的结构的压缩数据格式的数据DataN到DataN+15。即,转换部125将呈传输数据格式的数据Byte3*N中的数据COMP[4]至COMP[11]和数据COMP[0]至COMP[3]布置为呈压缩数据格式的数据DataN。同样地,转换部125将数据Byte3*N+1中的数据COMP[16]至COMP[23]和数据COMP[12]至COMP[15]布置成数据DataN+1。利用相同的处理,将8位传输数据格式转换成16个像素的具有与12位原始图像数据格式的结构相同的结构的压缩数据格式。
然后,利用步骤S41中的处理,将图19中从左边到第四列的所有列所示的呈16个像素的具有与12位原始图像数据格式的结构相同的结构的压缩数据格式的数据DataN到DataN+15解压成图20所示的呈原始图像数据格式的数据PixelN到PixelN+31。
即,解压缩部144将呈16个像素的12位压缩数据格式(该格式具有与12位原始图像数据格式的结构相同的结构)的数据DataN到DataN+15,即16个像素的12位数据COMP[0]到COMP[191],解压成数据D_N[0]~[11]到D_N+31[0]~[11],并且将该解压数据布置为呈12位原始图像数据格式的数据PixelN到PixelN+31。
利用上述处理,在32个像素(多个像素)的12位原始图像数据格式被压缩成16个像素(不同的多个像素)的可变长度位的压缩数据格式的情况下,实现了在8位传输数据格式下的发送/接收。即,在压缩像素数据格式中,没有进行在像素单位方面设定以12位为单位。然而,通过设定多个像素的单位,能够在图像传感器11与DSP 12之间进行图像数据的发送/接收。而且,利用相同的方法,将32个像素的10位原始图像数据格式转换成16个像素的可变长度型位数的压缩数据格式,且进行布置从而布置成16个像素的与现有的10位原始图像数据格式对应的压缩数据格式,由此能够进行向现有的8位传输格式的转换且能够进行发送/接收。
需要注意的是,在以多个像素为单位进行处理的情况下,例如,可以认为,多个像素的单位的倍数与沿水平方向的像素数量不一致。在这样的情况下,通过复制作为水平方向上的末端附近的尾数的像素且为了与32的倍数一致而添加虚拟数据,或通过复制平均值的虚拟数据且为了与32的倍数一致而添加该虚拟数据,就可以进行调节。以这样的方式,具有高的相关性的数据被虚拟地布置着,且能够减小图像质量的劣化。
利用上述处理,即使在由各种各样的压缩率生成的位数的压缩数据格式中,通过使用现有的接口,作为8位、10位、12位、14位和16位中的任一者的现有位数的应用也成为可能。结果,能够使用现有的接口而无需重新地设定诸如RAW4或RAW5等尚未投入实际使用的数据格式。
而且,在图像传感器11与DSP 12之间的接口中,能够压缩图像数据且削减带域。因此,可以传输更多的图像。而且,因为可以传输更多的图像而不用改变接口中的通道的数量,所以实施的优势得到提高。例如,因为能够减少所传输的数据量,所以能够在不用改变帧存储器的容量的前提下存储更多的图像,且能够实施在降噪方面或高动态范围(HDR:high dynamic range)摄像方面的应用。而且,因为可以在现有的接口中以传输数据格式高速地传输图像,所以能够提高压缩的自由度或改善图像传感器与DSP之间的连接性。
位数和压缩率的设定处理
接着,参照图21中的流程图,将说明压缩率的设定处理。在压缩率的设定处理中,存在着基于通过用户对操作部(未图示)的操作而生成的操作信号的手动模式设定和取决于ISO感光度的自动模式设定。关于手动模式和自动模式,设置有用来进行切换的开关等(未图示)且它被用户事先操作。
在步骤S61中,基于操作部(未图示)的操作信号,DSP 12中的系统控制部143判定该模式是否是自动模式。例如,当在步骤S61中判定该模式是自动模式时,处理进入步骤S62。
在步骤S62中,系统控制部143测量当前的ISO感光度设定值。ISO感光度可以是通过操作部(未图示)的操作而被预先设定的值,或可以根据照度或光阑而被测量或计算出来。
在步骤S63中,系统控制部143设定图像数据格式的压缩率以便设定与ISO感光度对应的图像质量。这里,随着ISO感光度变得越高,所受到的来自噪声的影响就会越多。因此,系统控制部143以图像数据格式的压缩率随着ISO感光度的变高而减小的方式来进行设定。相反地,随着ISO感光度变得越低,来自噪声的影响就会变小。因此,系统控制部143以像素数据格式的压缩率随着ISO感光度的变低而增大的方式来进行设定。系统控制部143将设定信息存储于它的寄存器142中。
在步骤S64中,系统控制部143利用串行通信与图像传感器11中的系统控制部51进行通信,且提供设定信息。利用这个处理,图像传感器11中的系统控制部51将设定信息存储于寄存器53中。
另一方面,当在步骤S61中判定该模式不是自动模式时,就判定该模式是手动模式。然后,处理进入步骤S65。
在步骤S65中,系统控制部143读出用于表明利用操作按钮(未图示)等而被设定的压缩率的信息的操作内容。
在步骤S66中,基于与操作按钮的操作内容对应的信息,系统控制部143设定压缩率,且处理进入步骤S64。
利用上述处理,设定了像素数据格式的压缩率(该压缩率决定了图像质量)的信息,并且能够以所设定的像素数据格式的压缩率来实现上述的数据发送处理和数据接收处理。结果,通过现有的接口,可以针对与用户的意图对应的图像质量或与ISO感光度等对应的图像质量来适当地设定像素数据格式的压缩率。
顺便提及地,能够由硬件或由软件来执行上述一系列的处理。在由软件来执行这一系列处理的情况下,当进行计算机的安装或被嵌入特定硬件中的各种程序的安装时,将软件中所包括的程序从例如记录媒介安装到能够执行各种功能的通用个人计算机中。
图22是图示了通用个人计算机的构造示例的图。该个人计算机包括中央处理器(CPU)1001。输入及输出接口1005通过总线1004而被连接至CPU 1001。只读存储器(ROM)1002和随机存取存储器(RAM)1003被连接至总线1004。
输入部1006、输出部1007、存储部1008和通信部1009被连接至输入及输出接口1005,输入部1006包括诸如键盘或鼠标等输入设备,用户能够用该输入设备输入操作指令,输出部1007用来将诸如处理操作画面或处理结果等图像输出至显示设备上,存储部1008包括硬盘驱动器等以便存储程序或各种数据,通信部1009包括局域网(LAN)适配器等且通过诸如因特网等网络来执行通信处理。而且,用来读出/写入数据的驱动器1010被连接至可移动媒介1011,该可移动媒介1011例如是磁盘(包括软盘)、光盘(包括只读光盘存储器(CD-ROM)和数字化通用光盘(DVD))、磁光盘(包括迷你光盘(MD))或半导体存储器等。
CPU 1001根据如下程序而执行各种处理:该程序是被存储于ROM1002中的,或该程序是从诸如磁盘、光盘、磁光盘或半导体存储器等可移动媒介1011中读出、被安装到存储部1008中且从存储部1008装载到RAM 1003中的。CPU 1001在执行各种处理时所必需的数据等也被适宜地存储在RAM 1003中。
在以上述方式构造而成的计算机中,CPU 1001通过输入及输出接口1005和总线1004而将例如被存储于存储部1008中的程序装载到RAM1003中,且执行该程序,借此,所述一系列处理被执行。
例如,由计算机(CPU 1001)执行的程序可以被记录于为了起到包媒介等的作用而被提供的可移动媒介1011中。而且,能够通过诸如局域网、因特网或数字卫星广播等有线或无线传输媒介来提供程序。
在该计算机中,通过将可移动媒介1011安装到驱动器1010上,能够经由输入及输出接口1005而将程序安装到存储部1008中。而且,能够通过所述有线或无线传输媒介而在通信部1009中接收程序,并且能够将该程序安装到存储部1008中。此外,能够将程序预先安装到ROM 1002或存储部1008中。
需要注意的是,由计算机执行的程序可以是以本说明书中所说明的顺序而按照时间顺序来执行处理的程序,或可以是并行地执行处理或在诸如当进行呼叫时等必要时间下执行处理的程序。
而且,在本说明中,系统的意思是多个部件(装置、模块(部件)等)的组合体,且所有部件是否处于同一壳体中并非是必要的。因此,无论是被封装于不同壳体中且通过网络彼此连接起来的多个装置,还是其中有多个模块被封装于一个壳体中的一个装置,这两者都是系统。
需要注意的是,本技术的实施例不局限于上述那些实施例,且能够在本技术的要旨和范围内作出各种变形。
例如,本技术可以包括如下的云计算的构造:在该云计算中,一个功能通过网络而被多个装置分担处理或共同处理。
而且,上述流程图中所说明的每个步骤不仅能够由一个装置来执行,而且能够由多个装置来执行。
此外,当一个步骤中包括多种处理时,该一个步骤中所包括的多种处理不仅能够由一个装置来执行,而且能够由多个装置来执行。
需要注意的是,本技术还可以包括下列技术方案。
(1)一种图像传感器,其包括:
摄像部,它被构造成进行摄像以获得原始图像;
压缩部,它被构造成将所述原始图像的多条像素数据压缩成压缩格式;以及
转换部,它被构造成将所述原始图像的所述多条像素数据的所述压缩格式转换成所述多条像素数据的传输格式。
(2)根据(1)所述的图像传感器,其中
所述传输格式的位长度不同于所述压缩格式的位长度。
(3)根据(1)所述的图像传感器,其中
所述传输格式的位长度与所述压缩格式的位长度相同。
(4)根据(1)至(3)中任一者所述的图像传感器,其中
所述压缩部执行以所述原始图像的所述多条像素数据为单位的向所述压缩格式的压缩,且
所述转换部把以所述原始图像的所述多条像素数据为单位而被压缩的所述压缩格式转换成多个所述传输格式。
(5)根据(4)所述的图像传感器,其中
在把以所述原始图像的所述多条像素数据为单位而被压缩的所述压缩格式转换成多个所述传输格式时,所述转换部将虚拟数据布置成与块大小相匹配的、且以所述多条像素数据为单位而被处理的像素数据。
(6)根据(1)所述的图像传感器,其还包括设定部,所述设定部被构造成根据所述原始图像的图像质量来设定压缩率,其中
所述压缩部按照由所述设定部设定的压缩率将所述原始图像的所述多条像素数据压缩成压缩格式。
(7)一种图像传感器的数据传输方法,该方法包括以下步骤:
进行摄像以获得原始图像;
将所述原始图像的多条像素数据压缩成压缩格式;且
将所述原始图像的所述多条像素数据的所述压缩格式转换成所述多条像素数据的传输格式。
(8)一种用来致使计算机执行如下的处理的程序,该处理包括:
摄像步骤,用于进行摄像以获得原始图像;
压缩步骤,用于将所述原始图像的多条像素数据压缩成压缩格式;以及
转换步骤,用于将所述原始图像的所述多条像素数据的所述压缩格式转换成所述多条像素数据的传输格式。
(9)一种信息处理装置,其包括:
复原部,所述复原部被构造成将原始图像的多条像素数据的传输格式复原成所述多条像素数据的压缩格式,所述压缩格式是将所述原始图像的所述多条像素数据压缩而得到的,所述传输格式是从所述原始图像的所述多条像素数据的所述压缩格式转换而来的;以及
解压缩部,所述解压缩部被构造成将被所述复原部复原后的所述压缩格式解压成所述原始图像的所述多条像素数据。
(10)根据(9)所述的信息处理装置,其中
所传输格式的位长度不同于所述压缩格式的位长度。
(11)根据(9)所述的信息处理装置,其中
所述传输格式的位长度与所述压缩格式的位长度相同。
(12)根据(9)至(11)中任一者所述的信息处理装置,其中
所述复原部将多个所述传输格式复原成以所述原始图像的所述多条像素数据为单位的所述压缩格式,且
所述解压缩部将以所述原始图像的所述多条像素数据为单位而被压缩的所述压缩格式解压成所述多条像素数据。
(13)根据(9)所述的信息处理装置,其还包括设定部,所述设定部被构造成根据所述原始图像的图像质量来设定压缩率,其中
所述解压缩部基于由所述设定部设定的所述压缩率而将所述压缩格式解压成所述原始图像的所述多条像素数据。
(14)一种信息处理方法,其包括以下步骤:
将原始图像的多条像素数据的传输格式复原成所述多条像素数据的压缩格式,所述压缩格式是将所述原始图像的所述多条像素数据压缩而得到的,所述传输格式是从所述原始图像的所述多条像素数据的所述压缩格式转换过来的;且
将被复原后的所述压缩格式解压成所述原始图像的所述多条像素数据。
(15)一种用来致使计算机执行如下的处理的程序,该处理包括:
复原步骤,用于将原始图像的多条像素数据的传输格式复原成所述多条像素数据的压缩格式,所述压缩格式是将所述原始图像的所述多条像素数据压缩而得到的,所述传输格式是从所述原始图像的所述多条像素数据的所述压缩格式转换而来的;以及
解压缩步骤,用于将被所述复原步骤中的处理复原后的所述压缩格式解压成所述原始图像的所述多条像素数据。
(16)一种电子设备,其包括:
摄像部,其被构造成进行摄像以获得原始图像;
压缩部,其被构造成将所述原始图像的多条像素数据压缩成压缩格式;以及
转换部,其被构造成将所述原始图像的所述多条像素数据的所述压缩格式转换成所述多条像素数据的传输格式。
(17)一种电子设备,其包括:
复原部,其被构造成将原始图像的多条像素数据的传输格式复原成所述多条像素数据的压缩格式,所述压缩格式是将所述原始图像的所述多条像素数据压缩而得到的,所述传输格式是从所述原始图像的所述多条像素数据的所述压缩格式转换过来的;以及
解压缩部,其被构造成将被所述复原部复原后的所述压缩格式解压成所述原始图像的所述多条像素数据。
附图标记列表
1   传输系统
11  图像传感器
12  DSP(数字信号处理器)
21  摄像部
22  发送部
31  接收部
32  图像处理部
51  系统控制部
53  寄存器
54  压缩部
62  转换部
63  有效负载ECC插入部
64  包生成部
65  通道分配部
72  报头生成部
83-0至83-N  信号处理部
91  控制码插入部
92  8B10B符号编码器
93  同步部
94  发送部
102-0至102-N  信号处理部
111 接收部
112 时钟生成部
113 同步部
114 符号同步部
115 10B8B符号解码器
116 偏斜修正部
117 控制码去除部
122 通道集成部
123 包分离部
124 有效负载错误校正部
125 转换部
132 报头错误校正部
142 寄存器
143 系统控制部
144 解压缩部

Claims (17)

1.图像传感器,其包括:
摄像部,所述摄像部被构造成进行摄像以获得原始图像;
压缩部,所述压缩部被构造成将所述原始图像的多条像素数据压缩成压缩格式;以及
转换部,所述转换部被构造成将所述原始图像的所述多条像素数据的所述压缩格式转换成所述多条像素数据的传输格式。
2.根据权利要求1所述的图像传感器,其中
所述传输格式的位长度不同于所述压缩格式的位长度。
3.根据权利要求1所述的图像传感器,其中
所述传输格式的位长度与所述压缩格式的位长度相同。
4.根据权利要求1所述的图像传感器,其中
所述压缩部执行以所述原始图像的所述多条像素数据为单位的向所述压缩格式的压缩,并且
所述转换部把以所述原始图像的所述多条像素数据为单位而被压缩的所述压缩格式转换成多个所述传输格式。
5.根据权利要求4所述的图像传感器,其中
在把以所述原始图像的所述多条像素数据为单位而被压缩的所述压缩格式转换成多个所述传输格式时,所述转换部将虚拟数据布置成与块大小相匹配的、且以所述多条像素数据为单位而被处理的像素数据。
6.根据权利要求1所述的图像传感器,其还包括设定部,所述设定部被构造成根据所述原始图像的图像质量来设定压缩率,
其中,所述压缩部按照由所述设定部设定的所述压缩率将所述原始图像的所述多条像素数据压缩成所述压缩格式。
7.图像传感器的数据传输方法,其包括以下步骤:
进行摄像以获得原始图像;
将所述原始图像的多条像素数据压缩成压缩格式;以及
将所述原始图像的所述多条像素数据的所述压缩格式转换成所述多条像素数据的传输格式。
8.用于致使计算机执行如下处理的程序,该处理包括:
摄像步骤,用于进行摄像以获得原始图像;
压缩步骤,用于将所述原始图像的多条像素数据压缩成压缩格式;以及
转换步骤,用于将所述原始图像的所述多条像素数据的所述压缩格式转换成所述多条像素数据的传输格式。
9.信息处理装置,其包括:
复原部,所述复原部被构造成将原始图像的多条像素数据的传输格式复原成所述多条像素数据的压缩格式,所述压缩格式是将所述原始图像的所述多条像素数据压缩而得到的,所述传输格式是从所述原始图像的所述多条像素数据的所述压缩格式转换而来的;以及
解压缩部,所述解压缩部被构造成把被所述复原部复原后的所述压缩格式解压成所述原始图像的所述多条像素数据。
10.根据权利要求9所述的信息处理装置,其中
所传输格式的位长度不同于所述压缩格式的位长度。
11.根据权利要求9所述的信息处理装置,其中
所述传输格式的位长度与所述压缩格式的位长度相同。
12.根据权利要求9所述的信息处理装置,其中
所述复原部将多个所述传输格式复原成以所述原始图像的所述多条像素数据为单位的所述压缩格式,并且
所述解压缩部把以所述原始图像的所述多条像素数据为单位而被压缩的所述压缩格式解压成所述多条像素数据。
13.根据权利要求9所述的信息处理装置,其还包括设定部,所述设定部被构造成根据所述原始图像的图像质量来设定压缩率,
其中,所述解压缩部基于由所述设定部设定的所述压缩率而将所述压缩格式解压成所述原始图像的所述多条像素数据。
14.信息处理方法,其包括以下步骤:
将原始图像的多条像素数据的传输格式复原成所述多条像素数据的压缩格式,所述压缩格式是将所述原始图像的所述多条像素数据压缩而得到的,所述传输格式是从所述原始图像的所述多条像素数据的所述压缩格式转换而来的;以及
把被复原后的所述压缩格式解压成所述原始图像的所述多条像素数据。
15.用于致使计算机执行如下处理的程序,该处理包括:
复原步骤,用于将原始图像的多条像素数据的传输格式复原成所述多条像素数据的压缩格式,所述压缩格式是将所述原始图像的所述多条像素数据压缩而得到的,所述传输格式是从所述原始图像的所述多条像素数据的所述压缩格式转换而来的;以及
解压缩步骤,用于把被所述复原步骤中的处理复原后的所述压缩格式解压成所述原始图像的所述多条像素数据。
16.电子设备,其包括:
摄像部,所述摄像部被构造成进行摄像以获得原始图像;
压缩部,所述压缩部被构造成将所述原始图像的多条像素数据压缩成压缩格式;以及
转换部,所述转换部被构造成将所述原始图像的所述多条像素数据的所述压缩格式转换成所述多条像素数据的传输格式。
17.电子设备,其包括:
复原部,所述复原部被构造成将原始图像的多条像素数据的传输格式复原成所述多条像素数据的压缩格式,所述压缩格式是将所述原始图像的所述多条像素数据压缩而得到的,所述传输格式是从所述原始图像的所述多条像素数据的所述压缩格式转换而来的;以及
解压缩部,所述解压缩部被构造成把被所述复原部复原后的所述压缩格式解压成所述原始图像的所述多条像素数据。
CN201380061208.8A 2012-11-29 2013-11-18 图像传感器及其数据传输方法、信息处理装置及方法、电子设备和程序 Expired - Fee Related CN104854854B (zh)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
JP2012-261208 2012-11-29
JP2012261208 2012-11-29
PCT/JP2013/080978 WO2014084072A1 (ja) 2012-11-29 2013-11-18 イメージセンサおよびそのデータ伝送方法、情報処理装置および情報処理方法、電子機器、並びにプログラム

Publications (2)

Publication Number Publication Date
CN104854854A true CN104854854A (zh) 2015-08-19
CN104854854B CN104854854B (zh) 2019-04-05

Family

ID=50827716

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201380061208.8A Expired - Fee Related CN104854854B (zh) 2012-11-29 2013-11-18 图像传感器及其数据传输方法、信息处理装置及方法、电子设备和程序

Country Status (7)

Country Link
US (1) US10362220B2 (zh)
EP (1) EP2928175A4 (zh)
JP (1) JP6349259B2 (zh)
KR (1) KR20150091467A (zh)
CN (1) CN104854854B (zh)
TW (1) TWI686085B (zh)
WO (1) WO2014084072A1 (zh)

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN107483279A (zh) * 2017-10-10 2017-12-15 福建星网智慧软件有限公司 一种基于以太网侦的本地批量操作网络设备的方法
CN110868266A (zh) * 2019-10-31 2020-03-06 维沃移动通信有限公司 一种电子设备及信息处理方法
CN111373736A (zh) * 2019-04-23 2020-07-03 深圳市大疆创新科技有限公司 接口时序转化装置、图像数据处理方法、传输方法及系统、存储介质

Families Citing this family (13)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US8687086B1 (en) 2012-03-30 2014-04-01 Gopro, Inc. On-chip image sensor data compression
TWI686085B (zh) * 2012-11-29 2020-02-21 日商索尼半導體解決方案公司 攝像裝置及圖像感測器之資料傳送方法、資訊處理裝置及資訊處理方法以及程式
US10146727B2 (en) * 2015-04-14 2018-12-04 Qualcomm Incorporated Enhanced virtual GPIO with multi-mode modulation
JP6087037B1 (ja) * 2015-07-24 2017-03-01 オリンパス株式会社 画像データ伝送システム
EP3174286B1 (en) 2015-11-25 2021-01-06 Canon Kabushiki Kaisha Image sensor and image capturing apparatus
JP6603558B2 (ja) * 2015-11-25 2019-11-06 キヤノン株式会社 撮像素子および撮像装置
JP6694284B2 (ja) * 2016-01-29 2020-05-13 シナプティクス・ジャパン合同会社 画像データ伝送システム、送信回路及び受信回路
US9881664B1 (en) * 2017-01-12 2018-01-30 Cadence Design Systems, Inc. Per-group delay line architecture to de-skew input/output timing between a high bandwidth memory (HBM) physical (PHY) interface and the HBM device
US20190342609A1 (en) * 2017-01-16 2019-11-07 Sony Semiconductor Solutions Corporation Transmission control apparatus, reception control apparatus, and transceiving control system
JP7094952B2 (ja) 2017-06-09 2022-07-04 ソニーセミコンダクタソリューションズ株式会社 受信装置、制御方法、プログラム、および送受信システム
US10708524B2 (en) 2017-09-01 2020-07-07 Semiconductor Components Industries, Llc Methods and apparatus for high dynamic range imaging
JPWO2021100627A1 (zh) * 2019-11-20 2021-05-27
JP2022182021A (ja) * 2021-05-27 2022-12-08 キヤノン株式会社 シリアル通信装置及びシリアル通信方法

Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH08154246A (ja) * 1994-11-28 1996-06-11 Fuji Xerox Co Ltd 画像圧縮装置
CN1574901A (zh) * 2003-06-03 2005-02-02 三星电子株式会社 用于自动设定压缩格式的摄影设备及其方法
CN101094305A (zh) * 2006-06-19 2007-12-26 夏普株式会社 图像压缩装置及方法和图像读取、处理、形成装置
JP2009130563A (ja) * 2007-11-22 2009-06-11 Sony Corp データ処理装置、データ処理方法およびデータ処理プログラム、ならびに、撮像装置、撮像装置の制御方法および撮像装置の制御プログラム
WO2012029208A1 (ja) * 2010-09-03 2012-03-08 パナソニック株式会社 画像符号化方法、画像復号化方法、画像符号化装置及び画像復号化装置
US20120081577A1 (en) * 2010-09-30 2012-04-05 Apple Inc. Image sensor data formats and memory addressing techniques for image signal processing

Family Cites Families (25)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US5995553A (en) * 1997-01-28 1999-11-30 Tft, Inc. Encoder/decoder for emergency alert system
JP3782542B2 (ja) * 1997-04-02 2006-06-07 キヤノン株式会社 画像処理装置及び画像処理システム
US6522694B1 (en) * 1998-10-09 2003-02-18 Matsushita Electric Industrial Co., Ltd. Programmable filter for removing stuffing bits from an MPEG-2 bit-stream
JP3990055B2 (ja) * 1998-10-30 2007-10-10 富士通株式会社 画像符号化・復号システムおよび画像符号化・復号方法並びに画像符号化装置および画像復号装置並びに画像符号化方法および画像復号方法並びに画像符号化・復号装置
JP3349490B2 (ja) * 2000-02-14 2002-11-25 インターナショナル・ビジネス・マシーンズ・コーポレーション 画像表示方法、画像表示システム、ホスト装置、画像表示装置、およびディスプレイ用インターフェイス
US6831947B2 (en) * 2001-03-23 2004-12-14 Sharp Laboratories Of America, Inc. Adaptive quantization based on bit rate prediction and prediction error energy
FI114071B (fi) * 2003-01-13 2004-07-30 Nokia Corp Kuvien käsitteleminen rajoitetulla bittimäärällä
JP3610975B2 (ja) * 2003-04-16 2005-01-19 ソニー株式会社 記録装置および方法
US7821548B2 (en) * 2005-06-03 2010-10-26 Nokia Corporation Temporal image buffer for image processor using compressed raw image
KR100972482B1 (ko) * 2005-12-21 2010-07-26 파나소닉 주식회사 화상 압축 장치, 화상 신장 장치 및 초음파 진단 장치
US7742083B2 (en) * 2006-04-13 2010-06-22 Eastman Kodak Company In-camera dud image management
WO2007132877A1 (ja) * 2006-05-16 2007-11-22 Sony Corporation 通信システム、送信装置及び受信装置、通信方法、並びにプログラム
US8121534B2 (en) * 2006-09-27 2012-02-21 Sirius Xm Radio Inc. System and method for sending and receiving images via wireless audio channels
US8699808B2 (en) * 2007-10-15 2014-04-15 Chih-Ta Star Sung Method and apparatus of temporary image frame compression
JP5358931B2 (ja) * 2007-11-28 2013-12-04 ソニー株式会社 送信装置及び受信装置
JP2009177447A (ja) * 2008-01-24 2009-08-06 Panasonic Corp 動画像送受信システム
US8233728B2 (en) * 2008-11-07 2012-07-31 Cisco Technology, Inc. Embedded image quality stamps
JP4702463B2 (ja) * 2009-03-03 2011-06-15 コニカミノルタビジネステクノロジーズ株式会社 画像データ送信装置、画像データ送信方法、およびコンピュータプログラム
JP2011049901A (ja) 2009-08-27 2011-03-10 Panasonic Corp 固体撮像装置、撮像装置
JP5618143B2 (ja) * 2010-11-12 2014-11-05 ソニー株式会社 符号化装置、符号化方法、復号装置、復号方法、プログラム、および伝送システム
CN108366300B (zh) * 2011-11-25 2020-11-06 麦克赛尔株式会社 图像接收装置
JP5987319B2 (ja) * 2012-01-06 2016-09-07 富士ゼロックス株式会社 送受信システム及びプログラム
JP5982869B2 (ja) * 2012-02-28 2016-08-31 富士ゼロックス株式会社 送受信システム及びプログラム
KR101367777B1 (ko) * 2012-08-22 2014-03-06 주식회사 핀그램 적응 이미지 압축시스템 및 그 방법
TWI686085B (zh) * 2012-11-29 2020-02-21 日商索尼半導體解決方案公司 攝像裝置及圖像感測器之資料傳送方法、資訊處理裝置及資訊處理方法以及程式

Patent Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH08154246A (ja) * 1994-11-28 1996-06-11 Fuji Xerox Co Ltd 画像圧縮装置
CN1574901A (zh) * 2003-06-03 2005-02-02 三星电子株式会社 用于自动设定压缩格式的摄影设备及其方法
CN101094305A (zh) * 2006-06-19 2007-12-26 夏普株式会社 图像压缩装置及方法和图像读取、处理、形成装置
JP2009130563A (ja) * 2007-11-22 2009-06-11 Sony Corp データ処理装置、データ処理方法およびデータ処理プログラム、ならびに、撮像装置、撮像装置の制御方法および撮像装置の制御プログラム
WO2012029208A1 (ja) * 2010-09-03 2012-03-08 パナソニック株式会社 画像符号化方法、画像復号化方法、画像符号化装置及び画像復号化装置
US20120081577A1 (en) * 2010-09-30 2012-04-05 Apple Inc. Image sensor data formats and memory addressing techniques for image signal processing

Non-Patent Citations (1)

* Cited by examiner, † Cited by third party
Title
NOKIA ET AL: "《标准移动图像处理体系结构·SMIA1.0第2部:CCP2说明书》", 1 January 2004 *

Cited By (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN107483279A (zh) * 2017-10-10 2017-12-15 福建星网智慧软件有限公司 一种基于以太网侦的本地批量操作网络设备的方法
CN107483279B (zh) * 2017-10-10 2020-06-12 福建星网智慧软件有限公司 一种基于以太网帧的本地批量操作网络设备的方法
CN111373736A (zh) * 2019-04-23 2020-07-03 深圳市大疆创新科技有限公司 接口时序转化装置、图像数据处理方法、传输方法及系统、存储介质
CN110868266A (zh) * 2019-10-31 2020-03-06 维沃移动通信有限公司 一种电子设备及信息处理方法

Also Published As

Publication number Publication date
CN104854854B (zh) 2019-04-05
JP6349259B2 (ja) 2018-06-27
KR20150091467A (ko) 2015-08-11
TW201424369A (zh) 2014-06-16
WO2014084072A1 (ja) 2014-06-05
EP2928175A1 (en) 2015-10-07
US10362220B2 (en) 2019-07-23
JPWO2014084072A1 (ja) 2017-01-05
EP2928175A4 (en) 2016-08-03
TWI686085B (zh) 2020-02-21
US20150312476A1 (en) 2015-10-29

Similar Documents

Publication Publication Date Title
CN104854854A (zh) 图像传感器及其数据传输方法、信息处理装置及方法、电子设备和程序
CN202889529U (zh) 图像输出装置、图像处理装置和成像装置
CN101312387B (zh) 数据传输设备、数据发送和接收装置以及数据传输系统
CN202353700U (zh) 图像输出装置、图像处理装置和图像拾取装置
CN102130742B (zh) 纠错编码装置和方法、及纠错解码装置和方法
JP2672382B2 (ja) 可変長コードにより符号化された一連の画像の、非同期チャネルでの伝送のための同期方法および、この方法の実施のための装置
CN202663412U (zh) 发送设备、接收设备、以及传输系统
CN108668144B (zh) 一种数据流控方法、装置及设备
EP2456112B1 (en) Error correction methods and apparatus
US20220053053A1 (en) Transmission device, transmission method, reception device, reception method, and transmission-reception device
US7561746B2 (en) Image transmitter for transmitting a frame of a fixed number of packets where each packet has a fixed number of image data
US11930296B2 (en) Transmission device, reception device, and transmission system with padding code insertion
US9872035B2 (en) System and method for transcoding data
JP4006726B2 (ja) 誤り訂正機能を有する伝送装置
US7170431B2 (en) Data transmitting circuit and method based on differential value data encoding
KR100474722B1 (ko) 디지털 통신시스템에서 데이터 프레임을 동기화하는 방법
WO2008041305A1 (en) High-quality compressed video transmitting system
JP5624433B2 (ja) 非圧縮データ送信装置及び受信装置
US20220385959A1 (en) Transmission device, reception device, and transmission system
JPS631121A (ja) 誤り訂正方式

Legal Events

Date Code Title Description
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
C41 Transfer of patent application or patent right or utility model
TA01 Transfer of patent application right

Effective date of registration: 20160919

Address after: Kanagawa

Applicant after: SONY semiconductor solutions

Address before: Tokyo, Japan

Applicant before: Sony Corp

GR01 Patent grant
GR01 Patent grant
CF01 Termination of patent right due to non-payment of annual fee
CF01 Termination of patent right due to non-payment of annual fee

Granted publication date: 20190405

Termination date: 20201118