CN105637849A - 发送/接收随机存取压缩像素数据组的数据处理装置以及相关数据处理方法 - Google Patents

发送/接收随机存取压缩像素数据组的数据处理装置以及相关数据处理方法 Download PDF

Info

Publication number
CN105637849A
CN105637849A CN201480057138.3A CN201480057138A CN105637849A CN 105637849 A CN105637849 A CN 105637849A CN 201480057138 A CN201480057138 A CN 201480057138A CN 105637849 A CN105637849 A CN 105637849A
Authority
CN
China
Prior art keywords
pixel data
compression
data group
data processing
processing equipment
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN201480057138.3A
Other languages
English (en)
Inventor
朱启诚
刘子明
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
MediaTek Inc
Original Assignee
MediaTek Inc
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by MediaTek Inc filed Critical MediaTek Inc
Publication of CN105637849A publication Critical patent/CN105637849A/zh
Pending legal-status Critical Current

Links

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/182—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being a pixel
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/102—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
    • H04N19/115—Selection of the code volume for a coding unit prior to coding
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/134—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or criterion affecting or controlling the adaptive coding
    • H04N19/136—Incoming video signal characteristics or properties
    • H04N19/14—Coding unit complexity, e.g. amount of activity or edge presence estimation
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
    • H04N19/169—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
    • H04N19/17—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object
    • H04N19/176—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object the region being a block, e.g. a macroblock
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/42—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals characterised by implementation details or hardware specially adapted for video compression or decompression, e.g. dedicated software implementation
    • H04N19/423—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals characterised by implementation details or hardware specially adapted for video compression or decompression, e.g. dedicated software implementation characterised by memory arrangements
    • H04N19/426—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals characterised by implementation details or hardware specially adapted for video compression or decompression, e.g. dedicated software implementation characterised by memory arrangements using memory downsizing methods
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/42—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals characterised by implementation details or hardware specially adapted for video compression or decompression, e.g. dedicated software implementation
    • H04N19/436—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals characterised by implementation details or hardware specially adapted for video compression or decompression, e.g. dedicated software implementation using parallelised computational arrangements
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/65—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using error resilience
    • H04N19/68—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using error resilience involving the insertion of resynchronisation markers into the bitstream
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/85—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using pre-processing or post-processing specially adapted for video compression
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
    • H04N19/85—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using pre-processing or post-processing specially adapted for video compression
    • H04N19/88—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using pre-processing or post-processing specially adapted for video compression involving rearrangement of data among different coding units, e.g. shuffling, interleaving, scrambling or permutation of pixel data or permutation of transform coefficient data among different blocks
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00—Details of television systems
    • H04N5/44—Receiver circuitry for the reception of television signals according to analogue transmission standards
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00—Details of television systems
    • H04N5/63—Generation or supply of power specially adapted for television receivers
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00—Television systems
    • H04N7/01—Conversion of standards, e.g. involving analogue television standards or digital television standards processed at pixel level

Abstract

一种数据处理装置，包含压缩电路和第一输出接口。压缩电路，用于通过基于图片的像素数据分组设定压缩图片的多个像素的像素数据，生成多个压缩的像素数据组，以及生成指示连续的压缩的像素数据组之间边界的至少一个边界的指示信息。第一输出接口，用于将压缩的像素数据组打包进入至少一个输出比特流，并经由照相机接口输出至少一个输出比特流。

Description

发送/接收随机存取压缩像素数据组的数据处理装置以及相关数据处理方法
【相关申请的交叉参考】
本发明要求2013年10月17日申请的序列号为62/892,227的美国临时专利申请的优先权，美国临时专利申请在此全部并入参考。
【技术领域】
本发明的实施例关于通过照相机接口发送和接收数据，且更特别地，涉及发送/接收随机存取压缩像素数据组的数据处理装置以及相关数据处理方法。
【背景技术】
照相机接口位于第一芯片和第二芯片之间，以从第一芯片发送多媒体数据到第二芯片用于进一步处理。例如，第一芯片可包含照相机模块，以及第二芯片可包含图像信号处理器(ISP)。多媒体数据可包含图像数据(即，单个静止图像)或视频数据(即，包含连续图像的视频序列)。当具有高分辨率的照相机传感器在照相机模块中采用，通过照相机接口发送的多媒体数据将具有更大的数据大小/数据率，其必然增加照相机接口的功耗。如果照相机模块和ISP均位于由电池装置供电的便携式装置(例如，智能电话)，则电池寿命将由于照相机接口的增加的功耗而缩短。因此，需要一种新颖的设计，其可有效地降低照相机接口的功耗。
【发明内容】
根据示范性本发明的实施例，提出发送/接收随机存取压缩像素数据组的数据处理装置以及相关数据处理方法。
根据本发明的第一方面，揭示一种示范性数据处理装置。示范性数据处理装置包含压缩电路和第一输出接口。压缩电路，用于通过基于图片的像素数据分组设定压缩图片的多个像素的像素数据，生成多个压缩的像素数据组，以及生成指示连续的压缩的像素数据组之间边界的至少一个边界的指示信息；以及第一输出接口，用于将压缩的像素数据组打包进入至少一个输出比特流，并经由照相机接口输出至少一个输出比特流。
根据本发明的第二方面，揭示一种示范性数据处理装置。示范性数据处理装置包含压缩电路、率控制器和输出接口。压缩电路，用于通过基于图片的像素数据分组设定压缩所述图片的多个像素的像素数据，生成多个压缩的像素数据组。率控制器，用于执行比特率控制。输出接口，用于打包压缩的像素数据组进入输出比特流，并经由照相机接口输出输出比特流。至少一个连续的压缩的像素数据组的至少部分是在由率控制器控制的固定的压缩率下生成。
据本发明的第三方面，揭示一种示范性数据处理装置。示范性数据处理装置包含输入接口和解压缩器。输入接口，用于从照相机接口接收输入比特流，解打包输入比特流为图片的多个压缩的像素数据组，并解析包含于输入比特流中的指示信息，其中指示信息指示打包于输入比特流流中的连续的压缩的像素数据组的每个边界的至少一个边界。解压缩器，用于参考指示信息以从多个压缩的像素数据组选择压缩的像素数据组，并解压缩压缩的像素数据组以生成解压缩的像素数据组。
根据本发明的第四方面，揭示一种示范性数据处理装置。示范性数据处理装置包含第一输入接口、第二输入接口和解压缩器。第一输入接口，用于从照相机接口接收输入比特流，并解打包输入比特流为图片的多个压缩的像素数据组。第二输入接口，用于从带外信道接收指示信息，其中指示信息指示打包于输入比特流中连续的压缩的像素数据组的每个边界的至少一个边界。解压缩器，用于参考指示信息以从多个压缩的像素数据组选择压缩的像素数据组，并解压缩压缩的像素数据组以生成解压缩的像素数据组。
根据本发明的第五方面，揭示一种示范性数据处理装置。数据处理装置包含输入接口和解压缩电路。输入接口，用于从照相机接口接收输入比特流，并解打包输入比特流为多个压缩的像素数据组，其中打包于输入比特流中的至少一个连续的压缩的像素数据组的至少部分是在固定的压缩率下生成的。解压缩电路，用于根据至少固定的压缩率从多个压缩的像素数据组选择压缩的像素数据组，并解压缩压缩的像素数据组以生成解压缩的像素数据组。
根据本发明的第六方面，揭示一种示范性数据处理方法。示范性数据处理方法包含：通过基于图片的像素数据分组设定压缩图片的多个像素的像素数据，生成多个压缩的像素数据组；生成指示连续的压缩的像素数据组之间边界的至少一个边界的指示信息；以及将压缩的像素数据组打包进入至少一个输出比特流，并经由照相机接口输出至少一个输出比特流。
根据本发明的第七方面，揭示一种示范性数据处理方法。示范性数据处理方法包含：执行比特流控制；通过基于图片的像素数据分组设定压缩图片的多个像素的像素数据，生成多个压缩的像素数据组；以及打包压缩的像素数据组进入输出比特流，并经由照相机接口输出输出比特流；其中至少一个连续的压缩的像素数据组的至少部分由率控制控制的固定的压缩率生成。
根据本发明的第八方面，揭示一种示范性数据处理方法。示范性数据处理方法包含：从照相机接口接收输入比特流，解打包输入比特流为图片的多个压缩的像素数据组，并解析包含于输入比特流中的指示信息，其中指示信息指示打包于输入比特流流中的连续的压缩的像素数据组的每个边界的至少一个边界；以及参考指示信息以从多个压缩的像素数据组选择压缩的像素数据组，并解压缩压缩的像素数据组以生成解压缩的像素数据组。
根据本发明的第九方面，揭示一种示范性数据处理方法。示范性数据处理方法包含：从照相机接口接收输入比特流，并解打包输入比特流为图片的多个压缩的像素数据组；从带外信道接收指示信息，其中指示信息指示打包于输入比特流中连续的压缩的像素数据组的每个边界的至少一个边界；以及参考指示信息以从多个压缩的像素数据组选择压缩的像素数据组，并解压缩压缩的像素数据组以生成解压缩的像素数据组。
根据本发明的第十方面，揭示一种示范性数据处理方法。示范性数据处理方法包含：从照相机接口接收输入比特流，并解打包输入比特流为多个压缩的像素数据组，其中打包于输入比特流中的至少一个连续的压缩的像素数据组的至少部分是在固定的压缩率下生成的；以及根据至少固定的压缩率从多个压缩的像素数据组选择压缩的像素数据组，并解压缩压缩的像素数据组以生成解压缩的像素数据组。
在阅读了图示于各种图和附图中的优先实施例的以下详细描述后，本发明的这些和其它目的将对本领域的普通技术人员变得明显。
【附图说明】
图1是图示根据本发明的实施例的数据处理系统的示意图。
图2是根据本发明的实施例的显示于图1中的照相机模块的示意图。
图3是根据本发明的实施例的显示于图1中的图像信号处理器的示意图。
图4是图示本发明提出的第一随机存取能力增强技术的示意图。
图5是图示本发明提出的第二随机存取能力增强技术的示意图。
图6是图示本发明提出的第三随机存取能力增强技术的示意图。
图7是图示根据本发明的实施例的显示于图1中的数据处理系统的一个控制和数据流的流程图。
图8是图示本发明提出的第四随机存取能力增强技术的示意图。
图9是图示本发明提出的第五随机存取能力增强技术的示意图。
图10是图示根据本发明的实施例的显示于图1中的数据处理系统的另一个控制和数据流的流程图。
图11是图示本发明提出的第六随机存取能力增强技术的示意图。
图12是图示本发明提出的第七随机存取能力增强技术的示意图。
图13是图示根据本发明的实施例的显示于图1中的数据处理系统的又一个控制和数据流的流程图。
图14是图示根据本发明的实施例的另一数据处理系统的示意图。
图15是根据本发明的实施例的显示于图14的照相机模块的示意图。
图16是根据本发明的实施例的显示于图14的图像信号处理器的示意图。
【具体实施方式】
遍及整篇描述和权利要求的某些术语用于指代特定部件。如本领域的技术人员意识到的，制造商可用不同的名称指代部件。此文档不打算区别名称不同但功能相同的部件。在权利要求和下文的描述中，术语“包括”和“包含”用于开放方式，且因此应该解释为意思是“包含，但不限于”。而且，术语“耦合”意于表示间接或直接电连接。因此，如果一个装置耦合到另一装置，那个连接可以通过直接电连接，或通过经由其它装置和连接的间接电连接。
本发明提出将数据压缩应用到多媒体数据，并然后通过照相机接口发送压缩的多媒体数据。由于压缩的多媒体数据的数据大小/数据率小于原始未压缩的多媒体数据的数据大小/数据率，照相机接口的功耗对应地降低。当具有更高分辨率的照相机传感器用于图像俘获时，单个图像信号处理器可要求更高的计算功率，用于及时处理多媒体数据，和/或照相机接口的单个照相机端口可要求高传送带宽。为了减轻带宽要求，多个图像信号处理器可用于并行处理一个图片中的不同的图像分区。
如果一个图片的压缩的多媒体数据是从照相机模块经由照相机接口发送到图像信号处理器，每个图像信号处理器难以随机存取压缩的多媒体数据以获得所希望的压缩的数据部分。具体地，关于压缩的多媒体数据的生成，率控制被采用以最佳或较佳地调整每个压缩单元(例如，XxY个像素，其中X可以是4以及Y可以是2)的比特率，以便实现内容识别位预算分配，并因此改进视觉的质量。例如，通常采用可变长度编码(VLC)以实现所希望的比特率控制。然而，当率控制压缩被用于数据大小/数据率减小时，压缩的多媒体数据的随机存取能力受损。其结果是，当使能通过照相机接口传送的压缩的数据时，由于缺乏压缩的多媒体数据的随机存取能力，使用多个图像信号处理器以并行处理一个图片中的不同的图像分区不容易实现。为了解决此问题，本发明因此提出若干解决方案，每个能够使压缩的像素数据组由图像信号处理器随机存取。此外，当压缩的数据在从照相机模块经由照相机接口发送到图像信号处理器之前发送到缓冲器，提出的解决方案还可以被采用以使压缩的像素数据组由照相机模块的输出接口随机存取。进一步细节将在以下描述。
图1是图示根据本发明的实施例的数据处理系统的示意图。数据处理系统100包含多个数据处理装置，例如，一个照相机模块102和多个图像信号处理器(ISP)104_1-104_N。每个图像信号处理器104_1-104_N可以是应用处理器(AP)的部分。在本实施例中，图像信号处理器104_1-104_N的数目取决于照相机模块102的实际照相机分辨率。为了减轻图像信号处理器的计算电力要求，图像信号处理器104_1-104_N用于以并行方式处理一个图片中不同的图像分区。换句话说，每个图像信号处理器104_1-104_N负责用于仅仅处理由照相机模块102俘获的一个图片的部分，并因此不需要处理一个完整图片的所有多媒体数据。
照相机模块102和图像信号处理器104_1-104_N可以实施于不同的芯片中，以及照相机模块102可与图像信号处理器104_1-104_N经由照相机接口103通信。在本实施例中，照相机接口103可以是由移动产业处理器接口(MIPI)标准化的照相机串行接口(CSI)。每个图像信号处理器104_1-104_N从照相机模块102接收一个图片IMG的相同的压缩的多媒体数据。对于一个示例，比特流BS可以是从照相机模块102的单个照相机端口P发送到相应图像信号处理器104_1-104_N的输出比特流。
为了实现通过照相机接口103的压缩的数据传送，照相机模块102支持数据压缩，以及图像信号处理器104_1-104_N支持数据解压缩。因此，照相机模块102具有包含于其中的一个压缩器114，且每个图像信号处理器104_1-104_N具有包含于其中的一个解压缩器124。
关于照相机模块102，其俘获一个图片IMG，通过压缩从图片IMG派生的输入多媒体数据生成压缩的多媒体数据，并经由照相机接口103发送相同的压缩的多媒体数据到每个图像信号处理器104_1-104_N，其中图片IMG可以是单个静止图像或可以是视频序列的连续图像的一个。换句话说，输入多媒体数据可以是包含由照相机模块102俘获的一个图片IMG的多个像素的像素数据DI的图像数据或视频数据。
请参考图2，图2是根据本发明的实施例的显示于图1中的照相机模块102的示意图。照相机模块102包含照相机控制器111、输出接口112、处理电路113以及照相机传感器118。照相机传感器118用于获得输入多媒体数据，包含一个图片IMG的多个像素的像素数据DI。由于图片IMG的像素的像素数据DI是从照相机传感器118生成的，每个像素的像素数据格式取决于照相机传感器118的设计。例如，当照相机传感器118采用拜耳图案滤色器阵列(CFA)并在RGB颜色空间执行去马赛克时，每个像素可包含一个蓝色组分(B)、一个绿色组分(G)以及一个红色组分(R)。对于另一示例，当照相机传感器118采用拜耳图案CFA并在YUV颜色空间中执行去马赛克时，每个像素可包含一个亮度组分(Y)和两个色度组分(U，V)。应该注意到，此仅仅是用于说明性的目的，并非打算作为本发明的限制。本领域的技术人员应该意识到本发明提出的随机存取能力增强技术可以应用于由照相机传感器118支持的任何像素数据格式的像素数据DI。
处理电路113包含要求用于处理图片IMG的像素数据DI的电路元件。例如，处理电路113具有压缩器114、率控制器115以及其它电路116。其它的电路116可具有照相机缓冲器、复用器等。在一个示范性设计中，照相机缓冲器可用于缓冲像素数据DI，并通过复用器输出缓冲的像素数据DI到压缩器114。在另一示范性设计中，像素数据DI可旁路照相机缓冲器并通过复用器进入压缩器114。换句话说，待由压缩器114处理的像素数据DI可直接从照相机传感器118提供或间接地从照相机传感器118通过照相机缓冲器提供。
压缩器114用于通过基于图片IMG的像素数据分组设定DGSET压缩图片IMG的像素数据DI生成多个压缩的像素数据组。以示例的方式，像素数据分组设定DGSET是基于用于处理图片IMG的不同的图像分区的图像信号处理器的数目来确定的。具体地，照相机控制器111控制照相机模块102的操作。因此，照相机控制器111可首先检查耦合到照相机模块102的使能的图像信号处理器的数目，并然后响应于检查结果确定像素数据分组设定DGSET。例如，当从接收照相机模块102的照相机控制器111发出的询问时，实施于数据处理系统100的每个图像信号处理器104_1-104_N生成确认消息到照相机控制器111。因此，照相机控制器111参考图像信号处理器104_1-104_N的确认消息，以知道有N个使能的图像信号处理器104_1-104_N耦合到照相机模块102。因为图像信号处理器104_1-104_N用于分别处理相同图片中多个图像分区的图像内容，对应于显示于图1中的图像分区A1-AN的示范性布置的像素数据分组设定DGSET可以由照相机控制器111决定。即，属于图像分区A1的像素的像素数据将用于生成指定由图像信号处理器104_1处理的压缩的多媒体数据，且属于图像分区AN的像素的像素数据将用于生成指定由图像信号处理器104_N处理的压缩的多媒体数据。因此，基于像素数据分组设定DGSET，压缩器114知道对应于不同图像分区的像素组之间的像素边界，并压缩每个像素组中像素的像素数据(即，一个像素数据组)到压缩的像素数据组。
如图2所示，图片IMG的宽度是W，且图片IMG的高度是H。假设图像信号处理器104_1-104_N具有相同的计算电力，图像分区A1-AN可以由相同的大小来设置。因此，每个图像分区A1-AN具有相同的分辨率(W/N)xH。应该注意到此仅仅是用于说明性的目的。在备选设计中，图像信号处理器104_1-104_N可具有不同的计算电力，以及图像分区A1-AN可以由不同的大小设置。此外，应用于图片IMG的水平图像分区并非是本发明的限制。在备选设计中，垂直图像分区可以应用于图片IMG，故导致多个图像分区垂直分布于图片IMG。
关于位于相同的行的压缩单元(例如，每个具有XxY个像素的压缩单元，其中X可以是4以及Y可以是2)，包含于对应于每个图像分区的压缩单元的所有像素的像素数据被压缩，以生成对应的压缩的像素数据组。例如，包含于对应于图像分区A1(即，像素数据组D1)的压缩单元的所有像素的像素数据被压缩，以生成对应压缩的像素数据组D1’，以及包含于对应于图像分区AN(即，像素数据组DN)的压缩单元的所有像素的像素数据被压缩，以生成对应压缩的像素数据组DN’。换句话说，压缩器114通过分别压缩像素数据组D1-DN生成压缩的像素数据组D1’-DN’。
率控制器115用于将比特率控制应用于压缩器114，用于控制每个压缩单元的位预算分配。以此方式，每个压缩的像素数据组(例如，D1’-DN’)以所希望的比特率生成。输出接口112用于根据照相机接口103的传送协议打包/分组压缩的像素数据组(例如，D1’-DN’)进至少一个输出比特流，并经由照相机接口103发送至少一个输出比特流到每个图像信号处理器104_1-104_N。以示例的方式，一个比特流BS可以从照相机模块102经由照相机接口103的一个照相机端口P生成到每个图像信号处理器104_1-104_N。照相机模块102采用提出的随机存取增强设计中的一个，以使经由照相机接口103发送的压缩的像素数据组D1’-DN’对每个图像信号处理器104_1-104_N可随机存取。提出的随机存取增强设计的进一步细节将在以后描述。
请再次参考图1。当照相机模块102发送压缩的多媒体数据到图像信号处理器104_1-104_N时，每个图像信号处理器104_1-104_N用于从照相机接口103接收相同的压缩的多媒体数据，并且仅仅解压缩随机存取的压缩的多媒体数据(由于使用提出的随机存取增强技术每个图像信号处理器可随机存取)的部分，以生成对应于图片IMG的部分的解压缩的多媒体数据。例如，关于图片IMG中相同行的压缩单元，照相机模块102根据属于不同图像分区A1-AN的像素数据组D1-DN生成压缩的像素数据组D1’-DN’。当接收打包在输入比特流(即，从照相机模块102生成的比特流BS)中的压缩的像素数据组D1’-DN’时，图像信号处理器104_1仅仅生成和处理解压缩的像素数据组D1”，解压缩的像素数据组D1”从解压缩选自压缩的像素数据组D1’-DN’的压缩的像素数据组D1’派生。类似地，当接收打包在输入比特流(例如，从照相机模块102生成的比特流BS)中的压缩的像素数据组D1’-DN’时，图像信号处理器104_N仅仅生成和处理解压缩的像素数据组DN”，解压缩的像素数据组DN”从解压缩选自压缩的像素数据组D1’-DN’的压缩的像素数据组DN’派生。
如图1所示，每个图像信号处理器104_1-104_N经由照相机接口103与照相机模块102通信，且可具有相同的电路配置。为了清楚和简洁，仅在以下详细描述图像信号处理器104_1-104_N中的一个。请参考图3，图3是根据本发明的实施例图示显示于图1中的图像信号处理器104_N的示意图。图像信号处理器104_N耦合到照相机接口103，并支持压缩的数据接收。在本实施例中，图像信号处理器104_N包含ISP控制器121、输入接口122和处理电路123。输入接口122用于从照相机接口103接收输入比特流(例如，从照相机模块102生成的比特流BS)，并解打包/解分组输入比特流为一个图片的多个压缩的像素数据组(例如，打包于比特流BS的压缩的像素数据组D1’-DN’)。应该注意到，如果在数据传送中没有错误引入，从输入接口122解打包/解分组的压缩的像素数据组应该与由输出接口112接收的压缩的像素数据组D1’-DN’相同。
ISP控制器121用于控制处理电路123的操作。处理电路123可包含需要用于从压缩的多媒体数据派生重建的多媒体数据的电路元件，且还可包含用于将附加的处理应用于重建的多媒体数据的其它电路元件。例如，处理电路123具有解压缩器124和其它电路125。其它的电路125可具有直接存储器访问(DMA)控制器、复用器、开关、图像处理器、照相机处理器、视频处理器、图形处理器等。在本实施例中，ISP控制器121能够检测/决定从输入接口122解打包的任何连续的压缩的像素数据组之间的边界。因此，关于从输入接口122解打包的压缩的像素数据组D1’-DN’，ISP控制器121命令解压缩器124仅仅解压缩一个选择的压缩的像素数据组(例如，DN’)，并丢弃未选择的压缩的像素数据组(例如，D1’-DN-1’)。
如上所述，每个图像信号处理器104_1-104_N负责用于仅仅处理图片IMG的一个图像分区。因此，在提出的随机存取能力增强技术的帮助下，每个图像信号处理器104_1-104_N可识别并以随机存取方式处理图片IMG中所接收的压缩的多媒体数据的所希望的数据部分，并丢弃图片IMG中所接收的压缩的多媒体数据的的剩余数据部分。本发明提出的若干随机存取能力增强技术在以下描述。
在具有增强的随机存取能力的一个示范性数据处理系统设计中，输出接口112还记录输出比特流中的指示信息，其中指示信息指示打包于输出比特流中的两个连续的压缩的像素数据组之间的每个边界中的至少一个边界。此外，输入接口122还解析包含于输入比特流中的指示信息，其中指示信息指示打包于输入比特流中的两个连续的压缩的像素数据组之间的每个边界中的至少一个边界。在本实施例中，指示信息通过带内信道(即，照相机接口103)发送。
例如，指示信息可以记录于从照相机模块102发送到每个图像信号处理器104_1-104_N的比特流BS的负载部分。请参考图4，图4是图示本发明提出的第一随机存取能力增强技术的示意图。显示于图2中的照相机控制器111生成控制信号C1到压缩器114，以使能对应于相同图片IMG中不同的图像分区的两个压缩的像素数据组之间的一个重同步标记CWresync的插入。如图4所示，一个重同步标记CWresync插入于压缩的像素数据组D1’和D2’之间，以及一个重同步标记CWresync插入于压缩的像素数据组DN-1’和DN’之间。重同步标记CWresync用作记录于比特流BS的负载部分的前述指示信息，并指示比特流BS中独立可解的压缩的像素数据组的开始。
应该注意到重同步标记CWresync可以使用不同于可以通过照相机接口103发送的所有可能负载码字和所有可能的头句法样式的唯一的码字实施。因此，当具有合适地插入于负载部分的重同步标记CWresync的比特流BS由一个图像信号处理器(例如，图像信号处理器104_N)接收时，输入接口122还用于检测重同步标记CWresync并通知ISP控制器121检测的重同步标记sCWresync的位置。基于检测的重同步标记CWresync的位置，ISP控制器121知道比特流BS的负载部分中压缩的数据分区的布置。因此，在压缩的像素数据组D1’-DN’相继地从比特流BS解打包/解分组后，ISP控制器121确定待被解压缩的所希望的压缩的像素数据组DN’的位置，并命令解压缩器124跳过/丢弃压缩的像素数据组D1’-DN-1’，并直接解压缩所希望的压缩的像素数据组DN’。在重同步标记的帮助下，压缩的像素数据组可由图像信号处理器104_1-104_N随机存取。
对于另一示例，指示信息可以记录于从照相机模块102发送到每个图像信号处理器104_1-104_N的比特流BS的头部分。请参考图5，图5是图示本发明提出的第二随机存取能力增强技术的示意图。显示于图2中的照相机控制器111生成控制信号C2到输出接口112，以使能对应于相同图片IMG中不同图像分区的两个压缩的像素数据组的边界位置信息的传送。如图5所示，边界位置信息INF(S2)记录打包于比特流BS中连续的压缩的像素数据组D1’和D2’之间的边界的位置S2，以及边界位置信息INF(SN)记录打包于比特流BS中连续的压缩的像素数据组DN-1’和DN’之间边界的位置SN。边界位置信息INF(S2)-INF(SN)用作记录于比特流BS的头部分的前述指示信息，并直接指示比特流BS中独立可解的压缩的像素数据组的开始。因此，当具有合适地包含于头部分的边界位置信息INF(S2)-INF(SN)的比特流BS由一个图像信号处理器(例如，图像信号处理器104_N)接收时，输入接口122还用于通知ISP控制器121从比特流BS解析的边界位置信息INF(S2)-INF(SN)。基于边界位置，ISP控制器121知道比特流BS的负载部分中压缩的数据分区的布置。因此，在压缩的像素数据组D1’-DN’相继地从比特流BS解打包/解分组后，ISP控制器121确定带被解压缩的所希望的压缩的像素数据组DN’的位置，并命令解压缩器124跳过/丢弃压缩的像素数据组D1’-DN-1’，并直接解压缩所希望的压缩的像素数据组DN’。在边界位置信息的帮助下，压缩的像素数据组可由图像信号处理器104_1-104_N随机存取。
使用边界位置信息INF(S2)-INF(SN)以用作记录于经由照相机接口103发送的比特流BS的头部分的指示信息仅仅是一个可行的实现。备选地，记录于经由照相机接口103发送的比特流BS的头部分的指示信息可以由压缩的像素数据组的长度信息设定。请参考图6，图6是图示本发明提出的第三随机存取能力增强技术的示意图。显示于图2中的照相机控制器111生成控制信号C2到输出接口112，以使能对应于相同图片IMG中不同图像分区的压缩的像素数据组的长度信息的传送。如图6所示，长度信息INF(L1)记录打包于比特流BS中压缩的像素数据组D1’的长度L1，长度信息INF(L2)记录打包于比特流BS中压缩的像素数据组D2’的长度L2，长度信息INF(LN-1)记录打包于比特流BS中压缩的像素数据组DN-1’的长度LN-1，以及长度信息INF(LN)记录打包于比特流BS中压缩的像素数据组DN’的长度LN。
长度信息INF(L1)-INF(LN)用作记录于比特流BS中头部分的前述指示信息，且可用于计算比特流BS中独立可解的压缩的像素数据组。即，边界位置可以基于压缩的像素数据组的长度间接地知道。因此，当具有合适地包含于头部分的长度信息INF(L1)-INF(LN)的比特流BS由一个图像信号处理器(例如，图像信号处理器104_N)接收时，输入接口122还用于通知ISP控制器121从比特流BS解析的长度信息INF(L1)-INF(LN)。基于压缩的像素数据组的长度，ISP控制器121知道比特流BS的负载部分的压缩的数据分区的布置。因此，在压缩的像素数据组D1’-DN’相继地从比特流BS解打包/解分组后，ISP控制器121确定待被解压缩的所希望的压缩的像素数据组DN’的位置，并命令解压缩器124跳过/丢弃压缩的像素数据组D1’-DN-1’，并直接解压缩所希望的压缩的像素数据组DN’。在长度位置信息的帮助下，压缩的像素数据组可由图像信号处理器104_1-104_N随机存取。
图7是根据本发明的实施例图示显示于图1中的数据处理系统100的一个控制和数据流的流程图。假设结果基本相同，步骤不要求以显示于图7中的精确顺序来执行。示范性控制和数据流可以简短地由以下步骤概括。
步骤702：检查耦合到照相机模块的使能的图像信号处理器的数目。
步骤704：根据检查结果确定像素数据分组设定。例如，如图1所示，当检查结果指示N个图像信号处理器被使能以处理相同图片中不同的图像分区时，像素数据组分组设定可以基于图片IMG中图像分区A1-AN的示范性布置来确定。
步骤706：通过基于图片的像素数据分组设定压缩图片的多个像素的像素数据，生成多个压缩的像素数据组。
步骤708：打包/分组压缩的像素数据组进入输出比特流。
步骤710：记录输出比特流中的指示信息，其中指示信息指示打包于输出比特流中的两个连续的压缩的像素数据组之间的边界的至少一个边界。在一个示范性设计中，指示信息记录于输出比特流的负载部分。例如，指示信息包含插入于两个连续的压缩的像素数据组之间的一个重同步标记。在另一示范性设计中，指示信息记录于输出比特流的头部分。例如，指示信息可以是边界位置信息，其记录打包于输出比特流中的连续的压缩的像素数据组之间的边界的每个边界的位置。对于另一示例，指示信息可以是长度信息，其记录打包于输出比特流中的每个压缩的像素数据组的长度。
步骤712：经由照相机接口发送输出比特流。
步骤714：从照相机接口接收输入比特流。
步骤716：从输入比特流解析指示信息。
步骤718：解打包/解分组输入比特流为多个压缩的数据组。
步骤720：参考指示信息以识别来自多个压缩的数据组的压缩的数据组。
步骤722：解压缩所选择的压缩的数据组，以生成解压缩的像素数据组。
应该注意到步骤702-712由照相机模块102执行，以及步骤714-722由图像信号处理器104_1-104_N中的一个执行。本领域的技术人员在读取了以上段落后可容易理解显示于图7中每个步骤的细节，为了简明此处省略进一步描述。
在具有增强的随机存取能力的另一示范性数据处理系统设计中，照相机模块102可具有另一输出接口(例如，图2中的输出接口117)用于经由带外信道105_1-105_N发送指示信息到每个图像信号处理器104_1-104_N，其中指示信息指示打包于经由带内信道(即，照相机接口103)发送的输出比特流中的两个连续的压缩的像素数据组之间的边界的至少一个边界。此外，每个图像信号处理器(例如，图3中的图像信号处理器104_N)具有另一输入接口(例如，图3中的输入接口122)用于从对应带外信道(例如，图3中的带外信道105_N)接收指示信息，其中指示信息指示打包于经由带内信道(即，照相机接口103)发送的输入比特流中的两个连续的压缩的像素数据组之间的边界的至少一个边界。例如，每个带外信道105_1-105_N可以是I2C(间集成电路)总线，照相机模块102可以是I2C主装置，且图像信号处理器104_1-104_N可以是I2C从装置。对于另一示例，每个带外信道105_1-105_N可以是控制总线，例如，照相机控制接口(CCI)，对于MIPI的CSI接口。
请参考图8，图8是图示本发明提出的第四随机存取能力增强技术的示意图。前述边界位置信息INF(S2)-INF(SN)经由每个带外信道105_1-105_N发送。因此，当边界位置信息INF(S2)-INF(SN)由一个图像信号处理器(例如，图像信号处理器104_N)接收时，输入接口122转发所接收的边界位置信息INF(S2)-INF(SN)到ISP控制器121。基于边界位置，ISP控制器121知道比特流BS的负载部分中压缩的数据分区的布置。因此，在压缩的像素数据组D1’-DN’从比特流BS相继地解打包/解分组后，ISP控制器121确定待被解压缩的所希望的压缩的像素数据组DN’的位置，并命令解压缩器124跳过/丢弃压缩的像素数据组D1’-DN-1’，并直接解压缩所希望的压缩的像素数据组DN’。
请参考图9，图9是图示本发明提出的第五随机存取能力增强技术的示意图。前述长度信息INF(L1)-INF(LN)经由每个带外信道105_1-105_N发送。因此，当长度信息INF(L1)-INF(LN)由一个图像信号处理器(例如，图像信号处理器104_N)接收时，输入接口122转发所接收的长度信息INF(L1)-INF(LN)到ISP控制器121。基于压缩的像素数据组的长度，ISP控制器121知道比特流BS的负载部分中压缩的数据分区的布置。因此，当压缩的像素数据组D1’-DN’相继地从比特流BS解打包/解分组时，ISP控制器121确定待被解压缩的所希望的压缩的像素数据组DN’的位置，并命令解压缩器124跳过/丢弃压缩的像素数据组D1’-DN-1’，并直接解压缩所希望的压缩的像素数据组DN’。
图10是图示根据本发明的实施例显示于图1中的数据处理系统100的另一控制和数据流的流程图。假设结果基本相同，步骤不要求以显示于图10中的精确顺序来执行。示范性控制和数据流可以简短地由以下步骤概括。
步骤1002：检查耦合到照相机模块的使能的图像信号处理器的数目。
步骤1004：根据检查结果确定像素数据分组设定。例如，如图1所示，当检查结果指示N个图像信号处理器被使能以处理相同图片中不同的图像分区，像素数据分组设定可以基于图片IMG中图像分区A1-AN的示范性布置来确定。
步骤1006：通过基于图片的像素数据分组设定压缩图片的多个像素的像素数据生成多个压缩的像素数据组。
步骤1008：打包/分组压缩的像素数据组进入输出比特流。
步骤1010：经由至少一个带外信道发送指示信息，其中指示信息指示打包于输出比特流中的连续的压缩的像素数据组之间的至少一个边界。例如，指示信息可以是边界位置信息，其记录打包于输出比特流中连续的压缩的像素数据组之间每个边界的位置。对于另一示例，指示信息可以是长度信息，其记录打包于输出比特流中的每个压缩的像素数据组的长度。
步骤1012：经由照相机接口发送输出比特流。
步骤1014：从照相机接口接收输入比特流。
步骤1016：从对应带外信道接收指示信息。
步骤1018：解打包/解分组输入比特流为多个压缩的数据组。
步骤1020：请参考指示信息以从多个压缩的数据组识别压缩的数据组。
步骤1022：解压缩所选择的压缩的数据组以生成解压缩的像素数据组。
应该注意到步骤1002-1012由照相机模块102执行，以及步骤1014-1022由图像信号处理器104_1-104_N中的一个执行。本领域的技术人员在读取了以上段落后可容易理解显示于图10中每个步骤的细节，为了简明此处省略进一步描述。
在具有增强的随机存取能力的又一示范性数据处理系统设计中，率控制器115用于确保打包于输出比特流中的至少一个连续的压缩的像素数据组的至少部分(即，部分或所有)基于固定的压缩率CR生成，其中在本实施例中，照相机模块102可通过任何灵活的握手机制通知图像信号处理器104_1-104_N固定的压缩率CR的设定。尽管可变长度编码操作应用于至少部分(即，部分或所有)像素数据组，由于固定的压缩率CR，至少部分(即，部分或所有)像素数据组的率控值压缩结果确保具有已知大小。以此方式，从压缩像素数据组派生的对应压缩的像素数据组的结束可以至少部分基于固定的压缩率CR确定。
例如，显示于图2中的照相机控制器111可生成控制信号C3，以命令率控制器115部分地使能用于每个像素数据组的压缩的率控制。请参考图11，图11是图示本发明提出的第六随机存取能力增强技术的示意图。从随机存取要求的角度，包含属于图片IMG中一个图像分区的像素的像素数据的每个像素数据组可以看作具有不关心区域和希望区域，其中不关心区域的压缩结果不需要在图像信号处理器侧随机存取，以及希望区域的压缩结果需要在图像信号处理器侧随机存取。如图11所示，像素数据组D1和D2之间的边界也是像素数据组D1和D2的希望区域之间的边界，以及像素数据组DN-1和DN之间的边界也是像素数据组DN-1和DN的希望区域之间的边界。
当压缩器114正在压缩像素数据组的不关心区域，率控制器115使能具有固定压缩率CR的率控制RC。因此，不关心区域中的每个压缩单元可经历可变长度编码，以便压缩单元的压缩结果可具有不同的长度。因为从压缩不关心区域中的压缩单元生成的压缩结果具有可变长度，所以难以随机存取压缩结果。然而，由于由率控制器115良好控制的固定的压缩率CR，不关心区域的整个压缩的数据大小将具有固定值。基于固定的压缩率CR，不关心区域的压缩结果和希望区域的压缩结果之间的边界可以容易地知道。当压缩器114压缩像素数据组的希望区域，率控制器115禁能率控制RC。希望区域中每个压缩单元可经历固定长度编码，以便压缩单元的压缩结果可具有相同的长度。因为从压缩希望区域中的压缩单元生成的压缩结果具有提前知道的固定的长度，所以易于随机存取压缩结果。因此，连续的压缩的像素数据组之间的边界可以确定。即，比特流BS中的独立可解的压缩的像素数据组可开始可以识别。
当具有由部分使能率控制生成的每个压缩的像素数据组的比特流BS，由一个图像信号处理器(例如，图像信号处理器104_N)接收时，ISP控制器121可参考固定的压缩率CR和每个像素数据组的固定的大小(其还可由照相机模块102通过握手机制通知)以知道比特流BS的负载部分中压缩的数据分区的布置。因此，在压缩的像素数据组D1’-DN’从比特流BS相继地解打包/解分组后，ISP控制器121确定待被解压缩的所希望的压缩的像素数据组DN’的位置，并命令解压缩器124解压缩所希望的压缩的像素数据组DN’。在率控制器115的帮助下，率控制器115对每个像素数据组的压缩部分地执行使能的率控制，以使得像素数据组的部分的压缩结果具有固定的压缩率，压缩的像素数据组可由图像信号处理器104_1-104_N随机存取。
如上所述，从压缩希望区域中的压缩单元生成的压缩结果可以由于固定的长度编码而被随机存取。当在压缩的像素数据组执行解压缩时，一个图像信号处理器的解压缩器可从邻近压缩的像素数据组的希望区域获取并解压缩更多的压缩的像素数据，用于改进解压缩的像素数据组的边界的图像质量。然而，此仅仅是用于说明性的目的，且并非是本发明的限制。
在备选设计中，随机存取能力仅仅对于完整的压缩的像素数据组可用。例如，照相机控制器111生成控制信号C3，以命令率控制器115完全地使能比特率控制，用于每个完整像素数据组的压缩。请参考图12，图12是图示本发明提出的第七随机存取能力增强技术的示意图。从随机存取要求的角度，包含属于图片IMG中一个图像分区的像素的像素数据的每个像素数据组可以看作仅具有不关心区域。如上所述，不关心区域的压缩结果不需要在图像信号处理器侧随机存取。
当压缩器114压缩每个像素数据组是，率控制器115使能具有固定的压缩率CR的比特率控制RC。因此，像素数据中的每个压缩单元可经历可变长度编码，以便压缩单元的压缩结果可具有不同的长度。然而，像素数据组中压缩单元的整个压缩的数据大小将由于由率控制器115较好控制的固定的压缩率CR而具有固定值。因此，固定大小的压缩的像素数据组从压缩器114生成。基于固定的压缩率CR，连续的压缩的像素数据组之间的边界可以容易地知道。即，比特流BS中独立可解的压缩的像素数据组的开始可以识别。
当具有由完全使能的率控制生成的每个压缩的像素数据组的比特流BS，由一个图像信号处理器(例如，图像信号处理器104_N)接收时，ISP控制器121可参考固定的压缩率CR，以知道比特流BS的负载部分中压缩的数据分区的布置。因此，在压缩的像素数据组D1’-DN’从比特流BS相继地解打包/解分组后，ISP控制器121确定待被解压缩的所希望的压缩的像素数据组DN’的位置，并命令解压缩器124跳过/丢弃压缩的像素数据组D1’-DN-1’，并直接解压缩所希望的压缩的像素数据组DN’。在率控制器115的帮助下，率控制器115对每个像素数据组的压缩执行完全使能的率控制，以使对应压缩的像素数据组具有固定的压缩率，压缩的像素数据组可由图像信号处理器104_1-104_N随机存取。
图13是图示根据本发明的实施例显示于图1中的数据处理系统100的又一控制和数据流的流程图。假设结果基本相同，步骤不要求以显示于图13中的精确顺序来执行。示范性控制和数据流可以简短地由以下步骤概括。
步骤1302：检查耦合到照相机模块的使能的图像信号处理器的数目。
步骤1304：根据检查结果确定像素数据分组设定。例如，如图1所示，当检查结果指示N个图像信号处理器被使能，以处理相同图片中的不同的图像分区时，像素数据分组设定可以基于图片IMG中的图像分区A1-AN的示范性布置来确定。
步骤1306：将率控制应用到压缩器，以部分地或完全地使能比特率控制用于每个像素数据组的压缩，以便至少一个连续的压缩的像素数据组的至少部分(即，部分或所有)以固定的压缩率生成。
步骤1308：通过基于图片的像素数据分组设定压缩一个图片的多个像素的像素数据生成多个压缩的像素数据组。
步骤1310：打包/分组压缩的像素数据组进入输出比特流。
步骤1312：经由照相机接口发送输出比特流。
步骤1314：从照相机接口接收输入比特流。
步骤1316：解打包/解分组输入比特流为多个压缩的数据组。
步骤1318：参考至少固定的压缩率以从多个压缩的数据组识别压缩的数据组。
步骤1320：解压缩所选择的压缩的数据组，以生成解压缩的像素数据组。
应该注意到步骤1302-1312由照相机模块102执行，以及步骤1314-1320由图像信号处理器104_1-104_N中的一个执行。本领域的技术人员在读取了以上段落后可容易理解显示于图13中每个步骤的细节，为了简明此处省略进一步描述。
关于图1中的数据处理系统100，照相机模块102可采用前述随机存取能力增强技术中的一个，以使能外电路部件(例如，任何图像信号处理器104_1-104_N)以随机存取压缩的多媒体数据。然而，相同的随机存取能力增强技术可以由照相机模块采用，以使能内部电路部件(例如，输出接口)以随机存取压缩的多媒体数据。
图14是图示本发明实施例的另一数据处理系统的示意图。数据处理系统1400包含多个数据处理装置，例如，一个照相机模块1402和多个图像信号处理器(ISP)1404_1-1404_N。每个图像信号处理器1404_1-1404_N可以是应用处理器(AP)的部分。在本实施例中，图像信号处理器1404_1-1404_N的数目取决于照相机模块1402的实际照相机分辨率。照相机模块1402和图像信号处理器1404_1-1404_N可以实施于不同的芯片，以及照相机模块1402可与图像信号处理器1404_1-1404_N经由照相机接口1403通信。在本实施例中，照相机接口1403可以是由移动产业处理器接口(MIPI)标准化的照相机串行接口(CSI)。
为了减轻照相机接口1403的每个照相机端口的带宽要求，一个图片的不同的图像分区用于分别生成输出比特流BS1-BSN；以及输出比特流BS1-BSN从照相机模块1402分别经由照相机接口1403的多个照相机端口P1-PN发送到图像信号处理器1404_1-1404_N。因此，图像信号处理器1404_1-1404_N用于以并行方式处理一个图片的不同的图像分区。换句话说，每个图像信号处理器1404_1-1404_N负责用于仅仅处理由照相机模块102俘获的一个图片的部分，并因此不需要处理一个完整图片的所有多媒体数据。
为了实现通过照相机接口1403的压缩的数据的传送，照相机模块1402支持数据压缩，以及图像信号处理器1404_1-1404_N支持数据解压缩。因此，照相机模块1402具有包含于其中的前述压缩器114，且每个图像信号处理器1404_1-1404_N具有包含于其中的前述解压缩器124。
数据处理系统1400和100的一个差别是压缩器114输出压缩的多媒体数据到缓冲器1414，用于缓解实时处理要求。数据处理系统1400和100的另一差别是照相机模块1402从缓冲器1414读取压缩的多媒体数据，并输出通过照相机接口1403的多个照相机端口P1-PN从缓冲器1414读取的压缩的多媒体数据的不同的部分。
请参考图15，图15是根据本发明的实施例的显示于图14的照相机模块1402的示意图。照相机模块1402包含前述照相机控制器111、处理电路113和照相机传感器118，且还包含缓冲器装置1411和输出接口1412。缓冲器装置1411包含缓冲器控制器1413和缓冲器1414。例如，缓冲器1414可以是动态随机存取存储器(DRAM)，以及缓冲器控制器1413可以是存储器控制器。由于照相机控制器111、处理电路113和照相机传感器118的功能和操作详细描述于前，为了简洁，在此省略进一步的描述。在本实施例中，压缩器114将压缩的像素数据组D1’-DN’通过缓冲器控制器1413储存到缓冲器1414，以及输出接口1412从缓冲器1414通过缓冲器控制器1413读取压缩的像素数据组D1’-DN’。输出接口1412用于根据照相机接口103的传送协议打包/分组压缩的像素数据组D1’-DN’进输出比特流BS1-BSN，并经由照相机端口P1-PN发送输出比特流BS1-BSN到图像信号处理器1404_1-1404_N。因为输出接口1412需要识别从缓冲器1414读取的每个压缩的像素数据组D1’-DN’，照相机模块1402可采用提出的随机存取增强设计中的一个，以使压缩的像素数据组D1’-DN’由输出接口1412随机存取。例如，数据处理系统1400中的缓冲器控制器1413起的作用类似于数据处理系统100中的输出接口112起的作用，以及数据处理系统1400中的输出接口1412起的作用类似于数据处理系统100中的每个图像信号处理器104_1-104_N起的作用。
在具有增强的随机存取能力的一个示范性数据处理系统设计中，输出接口1412用于参考指示信息，以识别从缓冲器装置1414读取的压缩的像素数据组，打包/分组压缩的像素数据进输出比特流，并通过照相机端口的一个输出图像信号处理器的一个的输出比特流。例如，当显示于图4中的随机存取能力增强技术由照相机模块1402采用，照相机控制器111生成控制信号C1到压缩器114，以使能对应于相同图片IMG中不同的图像分区的两个压缩的像素数据组之间一个重同步标记CWresync的插入。在具有合适插入的重同步标记CWresync的压缩的像素数据组储存进缓冲器装置1411的缓冲器1414时，输出接口1412从缓冲器1414读取缓冲的数据，并检测重同步标记CWresync以知道检测的重同步标记CWresync的位置。基于检测的重同步标记CWresync的位置，输出接口1412知道缓冲器1414中压缩的数据的布置，并因此可识别从缓冲器1414读取的每个压缩的数据组D1’-DN’。在重同步标记的帮助下，从缓冲器1414读取的压缩的像素数据组可以由输出接口1412随机存取。
对于另一示例，当显示于图5中的随机存取能力增强技术由照相机模块1402采用时，照相机控制器111生成控制信号C2到缓冲器控制器1413，以使能对应于相同图片IMG中不同图像分区的两个压缩的像素数据组的边界位置信息的传送。因此，在具有由缓冲器控制器1413合适地创建的边界位置信息INF(S2)-INF(SN)的压缩的像素数据组D1’-DN’储存于缓冲器装置1411的缓冲器1414后，输出接口1412从缓冲器1414读取缓冲的数据以获得边界位置信息INF(S2)-INF(SN)。基于边界位置，输出接口1412知道缓冲器1414中压缩的数据的布置，并因此可识别从缓冲器1414读取的每个压缩的数据组D1’-DN’。在边界位置信息的帮助下，从缓冲器1414读取的压缩的像素数据组可由输出接口1412随机存取。
对于又一示例，当显示于图6中的随机存取能力增强技术由照相机模块1402采用时，照相机控制器111生成控制信号C2到缓冲器控制器1413，以使能对应于相同图片IMG中的不同的图像分区压缩的像素数据组的长度信息的传送。因此，在具有由缓冲器控制器1413合适地创建的长度信息INF(L1)-INF(LN)的压缩的像素数据组D1’-DN’储存进缓冲器1414时，输出接口1412从缓冲器1414读取缓冲的数据，以获得长度信息INF(L1)-INF(LN)。基于压缩的像素数据组的长度，输出接口1412知道缓冲于缓冲器1414的压缩的数据的布置，并因此可识别从缓冲器1414读取的每个压缩的数据组D1’-DN’。在长度位置信息的帮助下，从缓冲器1414读取的压缩的像素数据组可由输出接口1412随机存取。
在具有增强的随机存取能力的另一示范性数据处理系统设计中，指示信息指示两个连续的压缩的像素数据组之间的每个边界的至少一个边界可以不用储存进缓冲器1414而发送到输出接口1412。例如，当显示于图8中的随机存取能力增强技术由照相机模块1402采用时，压缩的像素数据组D1’-DN’储存于缓冲器1414，以及边界位置信息INF(S2)-INF(SN)不储存于缓冲器1414。例如，输出接口1412可从缓冲器1414通过带内路径读取压缩的像素数据组D1’-DN’，并通过带外路径接收由缓冲器控制器1413生成的边界位置信息INF(S2)-INF(SN)。对于另一示例，当显示于图9中的随机存取能力增强技术由照相机模块1402采用时，压缩的像素数据组D1’-DN’储存于缓冲器1414，以及长度信息INF(L1)-INF(LN)不储存于缓冲器1414。例如，输出接口1412可从缓冲器1414通过带内路径读取压缩的像素数据组D1’-DN’，并通过带外路径接收由缓冲器控制器1413生成的长度信息INF(L1)-INF(LN)。
在具有增强的随机存取能力的又一示范性数据处理系统设计中，输出接口1412用于根据固定的压缩率识别从缓冲器1414读取的压缩的像素数据组。例如，当显示于图11的随机存取能力增强技术由照相机模块1402采用时，照相机控制器111生成控制信号C3以命令率控制器115部分地使能比特控制，用于每个像素数据组的压缩。在由部分地使能的率控制生成的压缩的像素数据组D1’-DN’储存进缓冲器装置1411的缓冲器1414，输出接口1412可参考固定的压缩率CR和每个数据组的固定的大小以知道缓冲器1414中压缩的数据的布置，并因此可识别从缓冲器1414读取的每个压缩的数据组D1’-DN’。在率控制器115的帮助下，率控制器115对每个像素数据组的压缩执行部分地使能的率控制，以使部分像素数据组的压缩结果具有固定的压缩率，从缓冲器1414读取的压缩的像素数据组可由输出接口1412随机存取。
对于另一示例，当显示于图12中的随机存取能力增强技术由照相机模块1402采用时，照相机控制器111生成控制信号C3，以命令率控制器115以命令率控制器115完全地使能比特率控制，用于每个完整像素数据组的压缩。在由完全使能的率控制生成的压缩的像素数据组D1’-DN’储存进缓冲器1414后，输出接口1412可参考固定的压缩率CR以知道缓冲器1414中压缩的数据的布置，并因此可识别从缓冲器1414读取的每个压缩的数据组D1’-DN’。在率控制器115的帮助下，率控制器对每个像素数据组的压缩执行完全地使能的率控制，以使对应压缩的像素数据组具有固定的压缩率，从缓冲器1414读取的压缩的像素数据组可由输出接口1412随机存取。
请再次参考图14。每个图像信号处理器1404_1-1404_N仅仅负责处理图片IMG的一个图像分区。因此，输出接口1412输出图片IMG的部分压缩的数据到一个图像信号处理器，以及图像信号处理器生成对应于图片IMG的部分的解压缩的多媒体数据。例如，关于图片IMG中的相同行的压缩单元，照相机模块102根据属于不同的图像分区A1-AN的像素数据组D1-DN生成压缩的像素数据组D1’-DN’。当接收打包于输入比特流(即，从照相机模块1402生成的比特流BS1)的压缩的像素数据组D1’时，图像信号处理器1404_1生成并处理从解压缩压缩的像素数据组D1’派生的解压缩的像素数据组D1”。类似地，当接收打包于输入比特流(例如，从照相机模块1402生成的比特流BSN)的压缩的像素数据组DN’时，图像信号处理器1404_N生成并处理从解压缩压缩的像素数据组DN’派生的解压缩的像素数据组DN”。
如图14所示，每个图像信号处理器1404_1-1404_N经由照相机接口103与照相机模块1402通信，并可具有相同的电路配置。为了清楚和简明，仅在以下详细描述图像信号处理器1404_1-1404_N中的一个。请参考图16，图16是图示根据本发明的实施例的显示于图14的图像信号处理器1404_N的示意图。图像信号处理器1404_N耦合到照相机接口103，并支持压缩的数据接收。在本实施例中，图像信号处理器1404_N包含ISP控制器1421、输入接口1422和前述处理电路123。图像信号处理器104_N和1404_N之间的差别是输入接口1422接收压缩的像素数据组DN’而不是所有的压缩的像素数据组D1’-DN’。因此，ISP控制器1421不需要命令解压缩器124跳过/丢弃压缩的像素数据组D1’-DN-1’。本领域技术人员在读取了图像信号处理器104_N的以上段落后可容易理解图像信号处理器1404_N的功能和操作，为了简明在此处省略进一步描述。
本领域技术人员将容易观察到，在保留本发明的教导之下，可以对装置和方法进行许多修改和替换。因此，以上揭示应该解释为仅仅由所附的权利要求的精神和界限所限制。

Claims (34)

1.一种数据处理装置，包含：
压缩电路，用于通过基于图片的像素数据分组设定压缩所述图片的多个像素的像素数据，生成多个压缩的像素数据组，以及生成指示连续的压缩的像素数据组之间边界的至少一个边界的指示信息；以及
第一输出接口，用于将所述压缩的像素数据组打包进入至少一个输出比特流，并经由照相机接口输出所述至少一个输出比特流。
2.如权利要求1所述的数据处理装置，其特征在于，所述照相机接口是由移动产业处理器接口(MIPI)标准化的照相机串行接口(CSI)。
3.如权利要求1所述的数据处理装置，其特征在于，所述指示信息包含插入于连续的压缩的像素数据组之间的重同步标记。
4.如权利要求1所述的数据处理装置，其特征在于，所述指示信息包含每个所述至少一个边界的位置。
5.如权利要求1所述的数据处理装置，其特征在于，所述指示信息包含所述连续的压缩的像素数据组的至少一个的长度。
6.如权利要求1所述的数据处理装置，其特征在于，所述数据处理装置还包括：
控制器，用于检查经由所述照相机接口耦合到所述数据处理装置的另一数据处理装置的数目，并响应于检查结果确定所述图片的像素数据分组设定。
7.如权利要求1所述的数据处理装置，其特征在于，所述第一输出接口将所述压缩的像素数据组打包进输出比特流，记录所述输出比特流中的所述指示信息，并经由所述照相机接口输出具有所述指示信息的所述输出比特流。
8.如权利要求7所述的数据处理装置，其特征在于，所述指示信息记录于所述输出比特流的负载部分。
9.如权利要求7所述的数据处理装置，其特征在于，所述指示信息记录于所述输出比特流的头部分。
10.如权利要求1所述的数据处理装置，其特征在于，还包括：
第二输出接口，用于经由带外信道发送所述指示信息。
11.如权利要求11所述的数据处理装置，其特征在于，所述带外信道是由移动产业处理器接口(MIPI)标准化的照相机控制接口(CCI)。
12.如权利要求1所述的数据处理装置，其特征在于，还包括：
缓冲器装置，用于缓冲从所述压缩电路生成的所述压缩的像素数据组；
其中所述第一输出接口还用于参考所述指示信息以识别从所述缓冲器装置读取的压缩的像素数据组。
13.一种数据处理装置，包含：
压缩电路，用于通过基于图片的像素数据分组设定压缩所述图片的多个像素的像素数据，生成多个压缩的像素数据组；
率控制器，用于执行比特率控制；以及
输出接口，用于打包所述压缩的像素数据组进入输出比特流，并经由照相机接口输出所述输出比特流；
其中至少一个连续的压缩的像素数据组的至少部分由所述率控制器控制的固定的压缩率生成。
14.如权利要求13所述的数据处理装置，其特征在于，所述照相机接口是由移动产业处理器接口(MIPI)标准化的照相机串行接口(CSI)。
15.如权利要求13所述的数据处理装置，其特征在于，所述数据处理装置还包括：
控制器，用于检查经由所述照相机接口耦合到所述数据处理装置的另一数据处理装置的数目，并响应于检查结果确定所述图片的像素数据分组设定。
16.如权利要求13所述的数据处理装置，其特征在于，还包括：
缓冲器装置，用于缓冲从所述压缩电路生成的所述压缩的像素数据组；
其中所述第一输出接口还用于根据所述固定的压缩率识别从所述缓冲器装置读取的压缩的像素数据组。
17.一种数据处理装置，包含：
输入接口，用于从照相机接口接收输入比特流，解打包所述输入比特流为图片的多个压缩的像素数据组，并解析包含于所述输入比特流中的指示信息，其中所述指示信息指示打包于所述输入比特流流中的连续的压缩的像素数据组的每个边界的至少一个边界；以及
解压缩器，用于参考所述指示信息以从所述多个压缩的像素数据组选择压缩的像素数据组，并解压缩所述压缩的像素数据组以生成解压缩的像素数据组。
18.如权利要求17所述的数据处理装置，其特征在于，所述照相机接口是由移动产业处理器接口(MIPI)标准化的照相机串行接口(CSI)。
19.如权利要求17所述的数据处理装置，其特征在于，所述指示信息记录于所述输入比特流的负载部分。
20.如权利要求19所述的数据处理装置，其特征在于，所述指示信息包含插入于所述连续的压缩的像素数据组的唯一的重同步标记。
21.如权利要求17所述的数据处理装置，其特征在于，所述指示信息记录于所述输入比特流的头部分。
22.如权利要求21所述的数据处理装置，其特征在于，所述指示信息包含每个所述至少一个边界的位置。
23.如权利要求21所述的数据处理装置，其特征在于，所述指示信息包含至少一个所述连续的压缩的像素数据组的长度。
24.一种数据处理装置，包含：
第一输入接口，用于从照相机接口接收输入比特流，并解打包所述输入比特流为图片的多个压缩的像素数据组；
第二输入接口，用于从带外信道接收指示信息，其中所述指示信息指示打包于所述输入比特流中连续的压缩的像素数据组的每个边界的至少一个边界；以及
解压缩器，用于参考所述指示信息以从所述多个压缩的像素数据组选择压缩的像素数据组，并解压缩所述压缩的像素数据组以生成解压缩的像素数据组。
25.如权利要求24所述的数据处理装置，其特征在于，所述照相机接口是由移动产业处理器接口(MIPI)标准化的照相机串行接口(CSI)。
26.如权利要求24所述的数据处理装置，其特征在于，所述指示信息包含每个所述至少一个边界的位置。
27.如权利要求24所述的数据处理装置，其特征在于，所述指示信息包含至少一个所述连续的压缩的像素数据组的长度。
28.一种数据处理装置，包含：
输入接口，用于从照相机接口接收输入比特流，并解打包所述输入比特流为多个压缩的像素数据组，其中打包于所述输入比特流中的至少一个连续的压缩的像素数据组的至少部分是在固定的压缩率下生成的；以及
解压缩电路，用于根据至少所述固定的压缩率从所述多个压缩的像素数据组选择压缩的像素数据组，并解压缩所述压缩的像素数据组以生成解压缩的像素数据组。
29.如权利要求28所述的数据处理装置，其特征在于，所述照相机接口是由移动产业处理器接口(MIPI)标准化的照相机串行接口(CSI)。
30.一种数据处理方法，包含：
通过基于图片的像素数据分组设定压缩所述图片的多个像素的像素数据，生成多个压缩的像素数据组；
生成指示连续的压缩的像素数据组之间边界的至少一个边界的指示信息；以及
将所述压缩的像素数据组打包进入至少一个输出比特流，并经由照相机接口输出所述至少一个输出比特流。
31.一种数据处理方法，包含：
执行比特率控制；
通过基于图片的像素数据分组设定压缩所述图片的多个像素的像素数据，生成多个压缩的像素数据组；以及
打包所述压缩的像素数据组进入输出比特流，并经由照相机接口输出所述输出比特流；
其中至少一个连续的压缩的像素数据组的至少部分是在所述比特率控制所控制的固定的压缩率下生成。
32.一种数据处理方法，包含：
从照相机接口接收输入比特流，解打包所述输入比特流为图片的多个压缩的像素数据组，并解析包含于所述输入比特流中的指示信息，其中所述指示信息指示打包于所述输入比特流流中的连续的压缩的像素数据组的每个边界的至少一个边界；以及
参考所述指示信息以从所述多个压缩的像素数据组选择压缩的像素数据组，并解压缩所述压缩的像素数据组以生成解压缩的像素数据组。
33.一种数据处理方法，包含：
从照相机接口接收输入比特流，并解打包所述输入比特流为图片的多个压缩的像素数据组；
从带外信道接收指示信息，其中所述指示信息指示打包于所述输入比特流中连续的压缩的像素数据组的每个边界的至少一个边界；以及
参考所述指示信息以从所述多个压缩的像素数据组选择压缩的像素数据组，并解压缩所述压缩的像素数据组以生成解压缩的像素数据组。
34.一种数据处理方法，包含：
从照相机接口接收输入比特流，并解打包所述输入比特流为多个压缩的像素数据组，其中打包于所述输入比特流中的至少一个连续的压缩的像素数据组的至少部分是在固定的压缩率下生成的；以及
根据至少所述固定的压缩率从所述多个压缩的像素数据组选择压缩的像素数据组，并解压缩所述压缩的像素数据组以生成解压缩的像素数据组。
CN201480057138.3A 2013-10-17 2014-10-16 发送/接收随机存取压缩像素数据组的数据处理装置以及相关数据处理方法 Pending CN105637849A (zh)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
US201361892227P 2013-10-17 2013-10-17
US61/892,227 2013-10-17
PCT/CN2014/088756 WO2015055133A1 (en) 2013-10-17 2014-10-16 Data processing apparatus and method for compressed pixel data groups

Publications (1)

Publication Number Publication Date
CN105637849A true CN105637849A (zh) 2016-06-01

Family

ID=52827656

Family Applications (3)

Application Number Title Priority Date Filing Date
CN201480057209.XA Pending CN105659594A (zh) 2013-10-17 2014-10-10 发送/接收图片的压缩的像素数据组和像素数据分组设定的指示信息的数据处理装置以及相关数据处理方法
CN201480057207.0A Pending CN105659608A (zh) 2013-10-17 2014-10-15 经由照相机接口的多个照相机端口发送/接收压缩的像素数据组的数据处理装置以及相关数据处理方法
CN201480057138.3A Pending CN105637849A (zh) 2013-10-17 2014-10-16 发送/接收随机存取压缩像素数据组的数据处理装置以及相关数据处理方法

Family Applications Before (2)

Application Number Title Priority Date Filing Date
CN201480057209.XA Pending CN105659594A (zh) 2013-10-17 2014-10-10 发送/接收图片的压缩的像素数据组和像素数据分组设定的指示信息的数据处理装置以及相关数据处理方法
CN201480057207.0A Pending CN105659608A (zh) 2013-10-17 2014-10-15 经由照相机接口的多个照相机端口发送/接收压缩的像素数据组的数据处理装置以及相关数据处理方法

Country Status (4)

Country Link
US (3) US20160234514A1 (zh)
EP (3) EP3036905A4 (zh)
CN (3) CN105659594A (zh)
WO (3) WO2015055093A1 (zh)

Families Citing this family (15)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2015055093A1 (en) * 2013-10-17 2015-04-23 Mediatek Inc. Data processing apparatus for transmitting/receiving compressed pixel data groups of picture and indication information of pixel data grouping setting and related data processing method
US10417771B2 (en) * 2015-05-14 2019-09-17 Intel Corporation Fast MRF energy optimization for solving scene labeling problems
WO2017017800A1 (ja) * 2015-07-29 2017-02-02 株式会社ワコム 座標入力装置
US9911174B2 (en) 2015-08-26 2018-03-06 Apple Inc. Multi-rate processing for image data in an image processing pipeline
US10647266B2 (en) * 2016-05-17 2020-05-12 Magna Electronics Inc. Vehicle vision system with forward viewing camera
CN107918533B (zh) * 2016-10-10 2021-03-05 海信视像科技股份有限公司 一种打包模块和打包方法
JP6948810B2 (ja) * 2017-03-16 2021-10-13 キヤノン株式会社 画像処理システム
KR102412007B1 (ko) 2017-07-20 2022-06-22 삼성전자주식회사 전자 장치 및 전자 장치에서 하이 다이나믹 레인지 이미지 데이터를 압축하는 방법
KR102385365B1 (ko) * 2017-07-21 2022-04-12 삼성전자주식회사 전자 장치 및 전자 장치에서 이미지 데이터를 압축하는 방법
EP3442235B1 (en) * 2017-08-10 2022-03-16 Continental Automotive GmbH Device and method for raw image data compression
GB2569959B (en) * 2018-01-03 2022-12-21 Displaylink Uk Ltd Decoding image data at a display device
US11270412B2 (en) * 2019-10-31 2022-03-08 Apical Limited Image signal processor, method, and system for environmental mapping
CN111741259B (zh) * 2020-06-11 2022-05-06 北京三快在线科技有限公司 无人驾驶设备的控制方法及装置
US11513732B2 (en) 2020-08-13 2022-11-29 Raytheon Company Fast data compression for systems with large dynamic ranges or other systems
US20230239429A1 (en) * 2022-01-25 2023-07-27 Mediatek Inc. Communication system and method

Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20010043746A1 (en) * 1997-01-23 2001-11-22 Kenji Mori Apparatus and method of generating compressed data
CN1398116A (zh) * 2001-07-12 2003-02-19 三洋电机株式会社 图像编码设备与图像编码方法
US20040141068A1 (en) * 2003-01-15 2004-07-22 Fuji Photo Film Co., Ltd. Images combination processing system, images combination processing method, and images combination processing program
US20070076961A1 (en) * 2005-10-03 2007-04-05 Canon Kabushiki Kaisha Image compression data processing method, and image compression data processing apparatus
CN1984330A (zh) * 2005-06-25 2007-06-20 通用电气公司 利用应用元数据的图形用户接口的自适应视频压缩
CN101663894A (zh) * 2006-11-10 2010-03-03 爱立信股份有限公司 减少图像解压缩系统中的块伪像
CN102986219A (zh) * 2010-05-12 2013-03-20 Sk电信有限公司 图像滤波方法和设备以及使用其的视频编码/解码方法和设备

Family Cites Families (25)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP4151149B2 (ja) * 1999-03-12 2008-09-17 富士ゼロックス株式会社 画像形成装置
US6501397B1 (en) * 2000-05-25 2002-12-31 Koninklijke Philips Electronics N.V. Bit-plane dependent signal compression
US7050497B2 (en) * 2001-03-28 2006-05-23 Thomson Licensing Process and device for the video coding of high definition images
JP2002300581A (ja) * 2001-03-29 2002-10-11 Matsushita Electric Ind Co Ltd 映像符号化装置、及び映像符号化プログラム
JP4139633B2 (ja) * 2002-06-28 2008-08-27 株式会社リコー 画像処理装置
JP4403396B2 (ja) * 2004-07-13 2010-01-27 ソニー株式会社 撮像装置及び撮像素子の集積回路
JP2006074635A (ja) * 2004-09-06 2006-03-16 Hitachi Ltd 符号化映像信号変換方法及び装置
CN1750592A (zh) * 2004-09-15 2006-03-22 乐金电子（昆山）电脑有限公司 便携式信息处理终端的高清晰度图像处理装置及其方法
US7630565B2 (en) * 2004-11-30 2009-12-08 Lsi Corporation Parallel video encoder with whole picture deblocking and/or whole picture compressed as a single slice
US8515194B2 (en) * 2007-02-21 2013-08-20 Microsoft Corporation Signaling and uses of windowing information for images
US8649615B2 (en) * 2007-06-18 2014-02-11 Canon Kabushiki Kaisha Moving picture compression coding apparatus
JPWO2009063554A1 (ja) 2007-11-13 2011-03-31 富士通株式会社 符号化装置および復号装置
US8942490B2 (en) * 2008-07-08 2015-01-27 Yin-Chun Blue Lan Method of high performance image compression
CN101930282A (zh) * 2009-06-27 2010-12-29 英华达(上海)电子有限公司 移动终端、基于移动终端的输入方法
US8520958B2 (en) * 2009-12-21 2013-08-27 Stmicroelectronics International N.V. Parallelization of variable length decoding
US20120256957A1 (en) * 2011-04-10 2012-10-11 Sau-Kwo Chiu Image processing method of performing scaling operations upon respective data portions for multi-channel transmission and image processing apparatus thereof
US20120281748A1 (en) * 2011-05-02 2012-11-08 Futurewei Technologies, Inc. Rate Control for Cloud Transcoding
US8958642B2 (en) * 2011-10-19 2015-02-17 Electronics And Telecommunications Research Institute Method and device for image processing by image division
US20140092439A1 (en) * 2012-09-28 2014-04-03 Scott A. Krig Encoding images using a 3d mesh of polygons and corresponding textures
US20140362098A1 (en) * 2013-06-10 2014-12-11 Sharp Laboratories Of America, Inc. Display stream compression
WO2015011752A1 (ja) * 2013-07-22 2015-01-29 ルネサスエレクトロニクス株式会社 動画像符号化装置およびその動作方法
WO2015055093A1 (en) * 2013-10-17 2015-04-23 Mediatek Inc. Data processing apparatus for transmitting/receiving compressed pixel data groups of picture and indication information of pixel data grouping setting and related data processing method
US10063872B2 (en) * 2015-09-11 2018-08-28 Facebook, Inc. Segment based encoding of video
US10602153B2 (en) * 2015-09-11 2020-03-24 Facebook, Inc. Ultra-high video compression
US10341561B2 (en) * 2015-09-11 2019-07-02 Facebook, Inc. Distributed image stabilization

Patent Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20010043746A1 (en) * 1997-01-23 2001-11-22 Kenji Mori Apparatus and method of generating compressed data
CN1398116A (zh) * 2001-07-12 2003-02-19 三洋电机株式会社 图像编码设备与图像编码方法
US20040141068A1 (en) * 2003-01-15 2004-07-22 Fuji Photo Film Co., Ltd. Images combination processing system, images combination processing method, and images combination processing program
CN1984330A (zh) * 2005-06-25 2007-06-20 通用电气公司 利用应用元数据的图形用户接口的自适应视频压缩
US20070076961A1 (en) * 2005-10-03 2007-04-05 Canon Kabushiki Kaisha Image compression data processing method, and image compression data processing apparatus
CN101663894A (zh) * 2006-11-10 2010-03-03 爱立信股份有限公司 减少图像解压缩系统中的块伪像
CN102986219A (zh) * 2010-05-12 2013-03-20 Sk电信有限公司 图像滤波方法和设备以及使用其的视频编码/解码方法和设备

Also Published As

Publication number Publication date
EP3036905A1 (en) 2016-06-29
WO2015055121A1 (en) 2015-04-23
CN105659608A (zh) 2016-06-08
EP3036907A1 (en) 2016-06-29
CN105659594A (zh) 2016-06-08
US20160234456A1 (en) 2016-08-11
WO2015055133A1 (en) 2015-04-23
EP3031200A4 (en) 2016-10-12
WO2015055093A1 (en) 2015-04-23
US20160234513A1 (en) 2016-08-11
EP3036907A4 (en) 2017-05-10
EP3031200A1 (en) 2016-06-15
EP3036905A4 (en) 2017-03-08
US20160234514A1 (en) 2016-08-11

Similar Documents

Publication Publication Date Title
CN105637849A (zh) 发送/接收随机存取压缩像素数据组的数据处理装置以及相关数据处理方法
EP4266684A2 (en) Method and device for encoding/decoding an image unit comprising image data represented by a luminance channel and at least one chrominance channel
US9686493B2 (en) Image capture accelerator
CN104378614B (zh) 数据处理装置以及相关数据处理方法
CN111726634B (zh) 基于fpga的高分辨率视频图像压缩传输方法及系统
US8558909B2 (en) Method and apparatus for generating compressed file, camera module associated therewith, and terminal including the same
US11601664B2 (en) Decoding device and decoding method, and encoding device and encoding method
CN107277347A (zh) 数据处理装置与相关方法
US7292163B1 (en) Circuit for and method of encoding a data stream
EP1173005B1 (en) Method and apparatus for color image data processing and compression
KR100770835B1 (ko) 영상 데이터 처리 시스템 및 그 방법
KR100789221B1 (ko) 화상 처리 장치, 촬상 장치 및 화상 처리 시스템
JP4302661B2 (ja) 画像処理システム
KR100827680B1 (ko) 썸네일 데이터 전송 방법 및 장치
CN101753780A (zh) 一种基于基色提取分割压缩的彩色图像压缩方法
US6008853A (en) Sub-frame decoder with area dependent update rate for digital camcorder transmission standard
CN117750025B (zh) 一种图像数据处理方法、装置、芯片、设备及介质
CN110233985B (zh) 一种数据传输方法与网络视频监控装置
CN100367759C (zh) 图像压缩方法及其装置
KR100854724B1 (ko) 인코딩된 데이터 전달 방법 및 그 방법을 수행하는 촬상장치
US7486828B2 (en) Method and apparatus for processing an image data for output
CN115695700A (zh) 一种基于fpga实现多路pal制式图片显示的装置及方法
CN103546731A (zh) 一种将Bitmap转成YUV格式的文件的方法

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
WD01 Invention patent application deemed withdrawn after publication

Application publication date: 20160601

WD01 Invention patent application deemed withdrawn after publication