KR20080036680A - Method and device for controlling synchronizing signal - Google Patents
Method and device for controlling synchronizing signal Download PDFInfo
- Publication number
- KR20080036680A KR20080036680A KR1020060103198A KR20060103198A KR20080036680A KR 20080036680 A KR20080036680 A KR 20080036680A KR 1020060103198 A KR1020060103198 A KR 1020060103198A KR 20060103198 A KR20060103198 A KR 20060103198A KR 20080036680 A KR20080036680 A KR 20080036680A
- Authority
- KR
- South Korea
- Prior art keywords
- data
- output
- image
- added
- image data
- Prior art date
Links
Images
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N5/00—Details of television systems
- H04N5/04—Synchronising
Landscapes
- Engineering & Computer Science (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- Studio Devices (AREA)
Abstract
Description
도 1은 일반적인 촬상 장치의 구성을 간략하게 나타낸 도면.BRIEF DESCRIPTION OF THE DRAWINGS Fig. 1 is a diagram schematically showing a configuration of a general imaging device.
도 2는 일반적인 베이어(Bayer) 모자이크 필터 패턴을 나타낸 도면.2 is a diagram illustrating a typical Bayer mosaic filter pattern.
도 3은 본 발명의 바람직한 일 실시예에 따른 이미지 처리부의 내부 구성을 간략하게 나타낸 블록도.3 is a block diagram schematically illustrating an internal configuration of an image processing unit according to an exemplary embodiment of the present invention.
도 4는 종래 기술에 따란 이미지 시그널 프로세서로부터 출력되는 수평 방향 입력의 파형을 예시한 도면.4 illustrates a waveform of a horizontal input output from an image signal processor in accordance with the prior art.
도 5는 본 발명의 바람직한 일 실시예에 따른 이미지 시그널 프로세서로부터 출력되는 수평 방향 입력의 파형을 예시한 도면.FIG. 5 illustrates waveforms of a horizontal input output from an image signal processor in accordance with one preferred embodiment of the present invention. FIG.
도 6은 본 발명의 바람직한 일 실시예에 따른 이미지 처리부가 동기 신호를 제어하는 방법을 나타낸 순서도.6 is a flowchart illustrating a method of controlling a synchronization signal by an image processor according to an exemplary embodiment of the present invention.
도 7은 본 발명의 바람직한 다른 실시예에 따른 이미지 처리부의 내부 구성을 간략하게 나타낸 블록도.7 is a block diagram schematically illustrating an internal configuration of an image processing unit according to another exemplary embodiment of the present invention.
도 8은 본 발명의 다른 실시예에 따른 이미지 처리부가 동기 신호를 제어하는 방법을 나타낸 순서도.8 is a flowchart illustrating a method of controlling a synchronization signal by an image processing unit according to another embodiment of the present invention.
<도면의 주요 부분에 대한 부호의 설명> <Explanation of symbols for main parts of the drawings>
310 : 이미지 시그널 프로세서310: image signal processor
320 : 메모리320: memory
330 : 출력 컨트롤러330: output controller
본 발명은 화소 데이터 출력에 관한 것으로, 보다 상세하게는 화소 데이터의 정확한 처리를 위해 출력 동기 신호를 제어하는 방법 및 장치에 관한 것이다.The present invention relates to pixel data output, and more particularly, to a method and apparatus for controlling an output synchronization signal for accurate processing of pixel data.
최근, 소형 및 박형의 촬상 소자가 휴대 전화기나 PDA(Personal Digital Assistant) 등의 소형 및 박형의 휴대용 단말기에 탑재됨으로써, 휴대용 단말기가 촬상 장치로서 기능할 수 있다. 사용자는 휴대용 단말기를 이용하여 원격지로 음성 정보뿐만 아니라 화상 정보도 전송할 수 있다. 촬상 소자는 휴대 전화기나 PDA 뿐 아니라 MP3 플레이어 등의 휴대용 단말기에도 구비되어 다양한 장치에서 외부 영상을 전자적인 데이터로 보유할 수 있도록 구현된다.In recent years, small and thin image pickup devices are mounted in small and thin portable terminals such as mobile phones and PDAs (Personal Digital Assistants), whereby the portable terminals can function as image pickup devices. The user can transmit not only voice information but also image information to a remote location using the portable terminal. The imaging device is provided not only in a mobile phone or a PDA but also in a portable terminal such as an MP3 player so that various devices can hold external images as electronic data.
이러한 촬상 장치에는 일반적으로 CCD(Charge Coupled Device)형 이미지 센서나 CMOS(Complementary Metal-0xide Semiconductor)형 이미지 센서 등의 고체 촬상 소자가 사용되고 있다.Generally, solid-state imaging devices, such as a charge coupled device (CCD) type image sensor and a complementary metal-0xide semiconductor (CMOS) type image sensor, are used for such an imaging device.
도 1은 일반적인 촬상 장치의 구성을 간략하게 나타낸 도면이고, 도 2는 일반적인 베이어(Bayer) 모자이크 필터 패턴을 나타낸 도면이다.FIG. 1 is a diagram schematically illustrating a configuration of a general imaging device, and FIG. 2 is a diagram illustrating a general Bayer mosaic filter pattern.
도 1에 도시된 바와 같이, 외부 영상을 전기적인 데이터로 변환하여 표시부(150)에 디스플레이하는 촬상 장치는 이미지 센서(110), 이미지 시그널 프로세서(120, ISP(Image Signal Processor)), 백엔드 칩(130, Back-end chip), 베이스밴드 칩(140, Baseband Chip) 및 표시부(150)를 포함한다. 이외에, 촬상 장치는 변환된 전기적인 데이터를 저장하기 위한 메모리, 아날로그 신호를 디지털 신호로 변환하는 AD 변환기 등을 더 포함할 수 있다.As illustrated in FIG. 1, an image pickup device that converts an external image into electrical data and displays the same on the
이미지 센서(110)는 일반적으로 베이어 패턴(Bayer Pattern)을 가지는 센서로서, 단위 화소별로 렌즈를 통해 입력된 빛의 양에 상응하는 원시 데이터(raw data)를 출력한다. 이미지 센서(110)에 노출된 이미지의 색상을 검출하기 위해, 이미지 센서(110)의 화소(pixel)는 컬러 필터의 색상을 제외한 모든 색상의 광 파장(light wavelength)을 흡수하는 각각의 컬러 필터로 덮여(cover)진다. The
즉, 이미지 센서(110)로부터 컬러 정보를 획득하는 일반적인 방법은 이미지 센서(110)의 화소들 위에 컬러 필터 어레이(CFA, Color Filter Array)를 배치하는 것이다. 컬러 필터 어레이의 가장 일반적인 형태가 도 2에 도시된 베이어 모자이크(Bayer Mosaic) 필터이다. 베이어 모자이크 필터는 체커보드 형식(checkerboard like) 구조를 가지고, 교호하는 로우(row)의 적색(R), 녹색(G) 및 청색(B), 녹색(G) 필터로 구성된다. 적색과 녹색 필터는 2개의 녹색 필터가 인접 로우와 컬럼(column) 사이의 가장자리를 공유하지 못하도록 서로 오프셋(offset)되어 있다. 각 화소의 완전한 색상 정보를 얻기 위해서는 주변 화소의 색상 세기를 기반한 보간(interpolation)이 요구된다.That is, a general method of obtaining color information from the
이미지 시그널 프로세서(120)는 이미지 센서(110)로부터 입력된 전기 신호(raw data)를 YUV값으로 변환하고, 변환된 YUV 값을 백엔드 칩(130)으로 입력한다. YUV방식은 사람의 눈이 색상보다는 밝기에 민감하다는 사실에 착안한 방식으로, 색을 밝기(Luminance)인 Y성분과 색상(Chrominance)인 U와 V 성분으로 구분한다. Y성분은 오차에 민감하므로 색상 성분인 U와 V보다 많은 비트를 코딩한다. 전형적인 Y:U:V의 비율은 4:2:2이다. The
이미지 시그널 프로세서(120)는 변환한 YUV값을 FIFO에 순차적으로 저장시킴으로써 백엔드 칩(130)이 해당 정보를 입력받을 수 있도록 한다.The
백엔드 칩(130)은 입력된 YUV값을 미리 지정된 인코딩 방법에 의해 JPEG나 BMP로 변환하여 메모리(도시되지 않음)에 저장하거나, 메모리에 저장된 인코딩된 이미지를 디코딩하여 표시부(150)에 디스플레이한다. 백엔드 칩(130)은 이미지의 확대, 축소, 로테이션 등의 기능도 수행할 수 있다. 물론, 도 1에 도시된 바와 같이, 베이스밴드 칩(140)이 백엔드 칩(130)으로부터 디코딩된 데이터를 입력받아 표시부(150)에 디스플레이할 수도 있다. The
베이스밴드 칩(140)은 촬상 장치의 동작을 전반적으로 제어하는 기능을 수행한다. 예를 들어, 키 입력부(도시되지 않음)를 통해 사용자로부터 촬상 명령이 입력되면 베이스밴드 칩(140)은 백엔드 칩(130)으로 이미지 생성 명령을 전송함으로써 백엔드 칩(130)이 입력된 외부 영상에 상응하는 인코딩된 데이터를 생성하도록 할 수도 있다. The
표시부(150)는 백엔드 칩(130) 또는 베이스밴드 칩(140)의 제어에 의해 제공받은 디코딩된 데이터를 디스플레이한다.The
촬상 장치에서 이미지 시그널 프로세서(120)를 통해 출력되는 영상 데이터 신호와 동기 신호(즉, 클럭 신호)는 유효 화소 판단 여부와 관계가 있다. 즉, 이미지 시그널 프로세서(120)와 이미지 시그널 프로세서(120)로부터 입력된 영상 데이터를 처리하는 후처리 프로세서(예를 들어, 백엔드 칩(130))간에는 동기 신호(클럭 신호) 유효 기간 동안 입출력될 영상 데이터의 개수와 순서가 미리 정해져 있다. 따라서, 이미지 시그널 프로세서(120)로부터 출력되는 영상 데이터와 동기 신호의 관계가 깨지는 경우, 후처리 프로세서는 전혀 다른 신호를 처리하게 된다. The image data signal and the synchronization signal (ie, the clock signal) output through the
일반적으로 촬상 장치에서 이미지 시그널 프로세서(120)와 후처리 프로세서(예를 들어, 백엔드 칩(130) 등)간의 거리가 멀어짐으로 인해 동기 신호(즉, 클럭 신호)가 한 사이클(cycle) 지연되는 것처럼 느려지는 문제점이 발생하였다. 이로 인해, 이미지 시그널 프로세서(120)를 통해 출력된 영상 데이터를 후처리 프로세서가 제대로 입력받지 못하는 문제가 발생하였다. In general, as the synchronization signal (ie, the clock signal) is delayed by one cycle due to the distance between the
따라서, 상술한 문제점을 해결하기 위한 본 발명의 목적은 이미지 처리부에서 처리된 영상 데이터를 출력하는데 있어 여유 데이터를 부가함으로써 후처리 프로세서에서 입력받을 영상 데이터의 훼손을 억제할 수 있는 출력 동기 신호 제어 방법 및 장치를 제공하는 것이다.Accordingly, an object of the present invention for solving the above-described problem is an output synchronization signal control method capable of suppressing corruption of image data input by a post-processing processor by adding extra data in outputting image data processed by an image processing unit. And to provide an apparatus.
본 발명의 다른 목적은 이미지 처리부가 부가된 여유 데이터에 상응하는 클럭 신호의 출력 구간을 확장함으로써 후처리 프로세서의 변형없이 후처리 프로세서가 안정적으로 영상 데이터를 획득할 수 있도록 할 수 있는 출력 동기 신호 제어 방법 및 장치를 제공하는 것이다.Another object of the present invention is to extend the output section of the clock signal corresponding to the free data added to the image processing unit by controlling the output synchronization signal that can enable the post-processing processor to acquire the image data stably without modification of the post-processing processor It is to provide a method and apparatus.
이외의 본 발명의 목적들은 하기의 실시예에 대한 설명을 통해 쉽게 이해될 수 있을 것이다.Other objects of the present invention will be easily understood through the description of the following examples.
상술한 목적을 달성하기 위하여, 본 발명의 일 측면에 따르면, 영상 데이터에 여유 데이터를 부가하여 출력하고 여유 데이터가 부가된 화소 데이터에 상응하는 클럭 신호의 출력 구간을 지연하여 출력할 수 있는 이미지 프로세서 칩이 제공된다.In order to achieve the above object, according to an aspect of the present invention, an image processor capable of delaying the output period of the clock signal corresponding to the pixel data to which the extra data is added and outputted by adding the extra data to the image data; Chips are provided.
본 발명의 바람직한 일 실시예에 따르면, 이미지 센서로부터 원시 데이터를 입력받아 미리 정해진 형식에 상응하여 영상 데이터로 변환하는 이미지 시그널 프로세서; 상기 영상 데이터를 저장하는 메모리; 및 상기 영상 데이터에 여유 데이터를 부가하고, 여유 데이터가 부가된 화소 데이터에 상응하는 클럭 신호의 출력 구간을 지연하여 출력하는 출력 컨트롤러를 포함하는 이미지 프로세서 칩이 제공될 수 있다.According to an exemplary embodiment of the present invention, an image signal processor for receiving raw data from an image sensor and converting the raw data into image data corresponding to a predetermined format; A memory for storing the image data; And an output controller that adds margin data to the image data and delays an output section of a clock signal corresponding to the pixel data to which the margin data is added.
상기 출력 컨트롤러는 상기 부가된 여유 데이터의 개수에 상응하여 상기 화소 데이터에 상응하는 상기 클럭 신호가 지연되어 출력되도록 할 수 있다.The output controller may cause the clock signal corresponding to the pixel data to be delayed and output in correspondence to the number of the extra data.
상기 여유 데이터는 라인 단위로 상기 메모리로부터 독출된 영상 데이터의 최선 화소 데이터가 선행하여 중복 부가되고, 최후 화소 데이터가 후행하여 중복 부가된 데이터일 수 있다.The spare data may be data superimposed preliminarily by the best pixel data of the image data read from the memory on a line-by-line basis, and superimposed on the last pixel data by the following.
상기 출력 컨트롤러는 상기 메모리에 저장된 영상 데이터를 라인 단위로 추출하여 상기 라인의 k(임의의 자연수)개의 최선 데이터를 m(임의의 자연수)개만큼 선행하여 부가하고, 상기 라인의 n(임의의 자연수)개의 최후 데이터를 p(임의의 자연수)개만큼 후행하여 부가할 수 있다.The output controller extracts the image data stored in the memory in units of lines, adds k (random natural numbers) of the lines of leading data by m (random natural numbers), and adds n (random natural numbers) of the lines. ) Final data can be added after p by an arbitrary number of natural numbers.
본 발명의 바람직한 다른 실시예에 따르면, 이미지 센서로부터 원시 데이터를 입력받아 미리 정해진 형식에 상응하여 영상 데이터로 변환하는 이미지 시그널 프로세서; 상기 영상 데이터를 저장하는 메모리; 상기 영상 데이터를 독출하여 여유 데이터를 부가하여 상기 메모리에 기록하며, 상기 여유 데이터가 부가된 영상 데이터의 출력 명령을 출력하는 출력 컨트롤러; 및 상기 출력 명령에 상응하여 상기 여유 데이터가 부가된 영상 데이터를 상기 메모리로부터 독출하여 출력하는 데이터 출력부를 포함하되, 상기 출력 컨트롤러는 여유 데이터가 부가된 화소 데이터에 상응하는 클럭 신호의 출력 구간을 지연시켜 출력하는 것을 특징으로 하는 이미지 프로세서 칩이 제공될 수 있다.According to another preferred embodiment of the present invention, the image signal processor for receiving the raw data from the image sensor and converts the image data to a corresponding format; A memory for storing the image data; An output controller that reads the image data, adds spare data to write to the memory, and outputs an output command of the image data to which the spare data is added; And a data output unit configured to read and output image data to which the margin data is added in response to the output command from the memory, wherein the output controller delays an output period of a clock signal corresponding to the pixel data to which the margin data is added. The image processor chip may be provided to be output.
본 발명의 바람직한 또 다른 실시예에 따르면, 이미지 센서로부터 원시 데이터를 입력받아 미리 정해진 형식에 상응하여 영상 데이터로 변환하는 이미지 시그 널 프로세서; 상기 영상 데이터를 저장하는 메모리; 상기 영상 데이터 독출 명령을 출력하는 출력 컨트롤러; 및 상기 독출 명령에 상응하여 상기 메모리로부터 상기 영상 데이터를 독출하여 최선하는 화소 데이터를 여유 데이터로 출력한 후 영상 데이터를 출력하고 최후의 화소 데이터를 여유 데이터로 순차적으로 출력하는 데이터 출력부를 포함하되, 상기 출력 컨트롤러는 상기 여유 데이터가 부가된 화소 데이터에 상응하는 클럭 신호의 출력 구간을 지연시켜 출력하는 것을 특징으로 하는 이미지 프로세서 칩이 제공될 수 있다.According to another preferred embodiment of the present invention, the image signal processor for receiving the raw data from the image sensor and converts it into image data in a predetermined format; A memory for storing the image data; An output controller for outputting the image data read command; And a data output unit configured to read the image data from the memory in response to the read command, output the best pixel data as spare data, and output image data and sequentially output the last pixel data as spare data. The output controller may be provided with an image processor chip which delays an output period of a clock signal corresponding to pixel data to which the margin data is added.
상기 데이터 출력부는 상기 메모리에 저장된 영상 데이터를 라인 단위로 추출하여 상기 라인의 k(임의의 자연수)개의 최선하는 화소 데이터를 m(임의의 자연수)개만큼 후행하여 부가하고, 상기 라인의 n(임의의 자연수)개의 최후 화소 데이터를 p(임의의 자연수)개만큼 후행하여 부가할 수 있다.The data output unit extracts image data stored in the memory in units of lines, adds k (random natural numbers) of the best pixel data of the line by m (random natural numbers), and adds n (arbitrary) of the lines. Last pixel data may be added after p by an arbitrary natural number.
상기 부가될 여유 데이터 정보는 부가될 여유 데이터의 개수 정보이며, 상기 출력 컨트롤러는 상기 부가될 여유 데이터 정보에 상응하여 상기 클럭 신호의 출력 구간을 지연시켜 출력할 수 있다.The spare data information to be added is information on the number of spare data to be added, and the output controller may delay and output an output period of the clock signal in response to the spare data information to be added.
본 발명의 다른 측면에 따르면, 이미지 프로세서 칩에서 동기 신호를 제어하는 방법이 제공된다.According to another aspect of the present invention, a method of controlling a synchronization signal in an image processor chip is provided.
본 발명이 바람직한 일 실시예에 따르면, 이미지 프로세서 칩에서 동기 신호를 제어하는 방법에 있어서, 이미지 센서로부터 원시 데이터를 입력받아 미리 정해진 형식에 상응하여 영상 데이터로 변환하는 단계; 상기 영상 데이터에 여유 데이 터를 부가하는 단계; 및 상기 여유 데이터가 부가된 화소 데이터에 상응하는 클럭 신호의 출력 구간을 지연시켜 출력하는 단계를 포함하는 동기 신호 제어 방법이 제공될 수 있다.According to an embodiment of the present invention, a method of controlling a synchronization signal in an image processor chip, the method comprising: receiving raw data from an image sensor and converting the image data into a corresponding format; Adding spare data to the image data; And delaying the output period of the clock signal corresponding to the pixel data to which the margin data is added may be provided.
상기 영상 데이터에 여유 데이터를 부가하는 단계는, 상기 영상 데이터의 k(임의의 자연수)개의 최선하는 화소 데이터를 m(임의의 자연수)개만큼 선행하여 부가하고 상기 영상 데이터의 n(임의의 자연수)개의 최후 화소 데이터를 p(임의의 자연수)개만큼 후행하여 부가할 수 있다.In the adding of the spare data to the video data, k (arbitrary natural numbers) of the video data are added in advance by m (arbitrary natural numbers) and n (random natural numbers) of the video data. Last pixel data can be added after p by an arbitrary natural number.
상기 여유 데이터가 부가된 화소 데이터에 상응하는 클럭 신호의 출력 구간을 지연시켜 출력하는 단계는, 상기 부가된 화소 데이터의 개수에 상응하여 상기 영상 데이터에 상응하는 클럭 신호의 출력 구간을 지연시켜 출력할 수 있다.The delaying and outputting of the output period of the clock signal corresponding to the pixel data to which the spare data is added may include delaying and outputting the output period of the clock signal corresponding to the image data according to the number of the added pixel data. Can be.
본 발명의 바람직한 다른 실시예에 따르면, 이미지 프로세서 칩에서 동기 신호를 제어하는 방법에 있어서, 이미지 센서로부터 원시 데이터를 입력받아 미리 정해진 형식에 상응하는 영상 데이터로 변환하는 단계; 상기 영상 데이터에 여유 데이터를 부가하여 메모리에 기록하는 단계; 상기 여유 데이터가 부가된 화소 데이터에 상응하는 클럭 신호의 출력 구간을 지연시켜 출력하는 단계; 상기 여유 데이터가 부가된 영상 데이터의 출력을 지시하는 출력 명령을 전달하는 단계; 및 상기 출력 명령에 상응하여 상기 여유 데이터가 부가된 영상 데이터를 상기 메모리로부터 독출하여 출력하는 단계를 포함하되, 상기 클럭 신호는 상기 여유 데이터가 부가된 영상 데이터 중 상기 영상 데이터의 출력 구간에 부합하여 출력되도록 지연되는 것을 특징으로 하는 동기 신호 제어 방법이 제공될 수 있다.According to another preferred embodiment of the present invention, a method for controlling a synchronization signal in an image processor chip, the method comprising: receiving raw data from an image sensor and converting the raw data into image data corresponding to a predetermined format; Adding spare data to the video data and recording the same in a memory; Delaying and outputting an output period of a clock signal corresponding to the pixel data to which the margin data is added; Transmitting an output command indicating an output of the image data to which the redundant data is added; And reading and outputting image data to which the margin data is added in response to the output command from the memory, wherein the clock signal corresponds to an output section of the image data among the image data to which the margin data is added. A synchronization signal control method may be provided which is delayed to be output.
상기 여유 데이터가 부가된 화소 데이터에 상응하는 클럭 신호의 출력 구간을 지연시켜 출력하는 단계는, 상기 부가될 여유 데이터 정보에 상응하여 상기 클럭 신호의 출력 구간을 지연시켜 출력할 수 있다.The outputting of the clock signal corresponding to the pixel data to which the spare data is added may be delayed and output. The output period of the clock signal may be delayed and output according to the spare data information to be added.
상기 출력 명령에 상응하여 상기 여유 데이터가 부가된 영상 데이터를 상기 메모리로부터 독출하여 출력하는 단계는, 상기 메모리에 저장된 영상 데이터를 라인 단위로 추출하여 상기 라인의 k(임의의 자연수)개의 최선하는 화소 데이터를 m(임의의 자연수)개만큼 후행하여 부가하고, 상기 라인의 n(임의의 자연수)개의 최후 화소 데이터를 p(임의의 자연수)개만큼 후행하여 부가하여 출력할 수 있다.The step of reading and outputting image data to which the spare data is added in response to the output command from the memory includes extracting image data stored in the memory in units of lines and selecting k (random natural numbers) of the lines. The data can be added after m (random natural number), and the n (arbitrary natural number) last pixel data of the line can be added after p (random natural number) and output.
본 발명의 또 다른 측면에 따르면, 영상 데이터에 여유 데이터를 부가하여 출력하고 여유 데이터가 부가된 화소 데이터에 상응하는 클럭 신호의 출력 구간을 지연하여 출력할 수 있는 촬상 장치가 제공된다.According to still another aspect of the present invention, there is provided an image pickup apparatus capable of delaying and outputting an output section of a clock signal corresponding to pixel data to which extra data is added and outputting image data.
본 발명의 바람직한 일 실시예에 따르면, 외부 영상에 상응하는 원시 데이터를 출력하는 이미지 센서; 상기 원시 데이터를 입력받아 미리 정해진 형식에 상응하여 영상 데이터로 변환하는 이미지 시그널 프로세서; 상기 변환된 영상 데이터를 저장하는 메모리; 및 상기 영상 데이터에 여유 데이터를 부가하고, 여유 데이터가 부가된 화소 데이터에 상응하는 클럭 신호의 출력 구간을 지연시켜 출력하는 출력 컨트롤러를 포함하는 촬상 장치가 제공될 수 있다.According to a preferred embodiment of the present invention, the image sensor for outputting the raw data corresponding to the external image; An image signal processor for receiving the raw data and converting the raw data into image data in a predetermined format; A memory for storing the converted image data; And an output controller which adds margin data to the image data and delays an output section of a clock signal corresponding to the pixel data to which the margin data is added.
상기 출력 컨트롤러는 상기 부가된 여유 데이터의 개수에 상응하여 상기 화소 데이터에 상응하는 상기 클럭 신호가 지연되어 출력되도록 할 수 있다.The output controller may cause the clock signal corresponding to the pixel data to be delayed and output in correspondence to the number of the extra data.
상기 출력 컨트롤러는 상기 메모리에 저장된 영상 데이터를 라인 단위로 추출하여 상기 라인의 k(임의의 자연수)개의 최선하는 화소 데이터를 m(임의의 자연수)개만큼 후행하여 부가하고, 상기 라인의 n(임의의 자연수)개의 최후 화소 데이터를 p(임의의 자연수)개만큼 후행하여 부가하여 출력할 수 있다.The output controller extracts image data stored in the memory in units of lines, adds k (random natural numbers) of the best pixel data of the line by m (random natural numbers), and adds n Last pixel data can be added after and output by p (random natural number).
본 발명의 바람직한 다른 실시예에 따르면, 외부 영상에 상응하는 원시 데이터를 출력하는 이미지 센서; 상기 원시 데이터를 입력받아 미리 정해진 형식에 상응하여 영상 데이터로 변환하는 이미지 시그널 프로세서; 상기 변환된 영상 데이터를 저장하는 메모리; 상기 영상 데이터를 독출하여 여유 데이터를 부가하여 상기 메모리에 기록하며, 상기 여유 데이터가 부가된 영상 데이터의 출력 명령을 출력하는 출력 컨트롤러; 및 상기 출력 명령에 상응하여 상기 여유 데이터가 부가된 영상 데이터를 상기 메모리로부터 독출하여 출력하는 데이터 출력부를 포함하되, 상기 출력 컨트롤러는 여유 데이터가 부가된 화소 데이터에 상응하는 클럭 신호의 출력 구간을 지연시켜 출력하는 것을 특징으로 하는 촬상 장치가 제공될 수 있다.According to another preferred embodiment of the invention, the image sensor for outputting the raw data corresponding to the external image; An image signal processor for receiving the raw data and converting the raw data into image data in a predetermined format; A memory for storing the converted image data; An output controller that reads the image data, adds spare data to write to the memory, and outputs an output command of the image data to which the spare data is added; And a data output unit configured to read and output image data to which the margin data is added in response to the output command from the memory, wherein the output controller delays an output period of a clock signal corresponding to the pixel data to which the margin data is added. And an image pickup device can be provided.
본 발명은 다양한 변경을 가할 수 있고 여러 가지 실시예를 가질 수 있는 바, 특정 실시예들을 도면에 예시하고 상세한 설명에 상세하게 설명하고자 한다. 그러나, 이는 본 발명을 특정한 실시 형태에 대해 한정하려는 것이 아니며, 본 발명의 사상 및 기술 범위에 포함되는 모든 변경, 균등물 내지 대체물을 포함하는 것으로 이해되어야 한다. 각 도면을 설명하면서 유사한 참조부호를 유사한 구성요소에 대해 사용하였다. As the invention allows for various changes and numerous embodiments, particular embodiments will be illustrated in the drawings and described in detail in the written description. However, this is not intended to limit the present invention to specific embodiments, it should be understood to include all modifications, equivalents, and substitutes included in the spirit and scope of the present invention. In describing the drawings, similar reference numerals are used for similar elements.
이하, 첨부한 도면들을 참조하여, 본 발명의 바람직한 실시예를 보다 상세하게 설명하고자 한다. 이하, 도면상의 동일한 구성요소에 대해서는 동일한 참조부호를 사용하고 동일한 구성요소에 대해서 중복된 설명은 생략한다. 또한, 본 발명을 설명함에 있어서 관련된 공지 기술에 대한 구체적인 설명이 본 발명의 요지를 불필요하게 흐릴 수 있다고 판단되는 경우 그 상세한 설명을 생략한다.Hereinafter, with reference to the accompanying drawings, it will be described in detail a preferred embodiment of the present invention. Hereinafter, the same reference numerals are used for the same components in the drawings, and duplicate descriptions of the same components are omitted. In addition, in describing the present invention, when it is determined that the detailed description of the related known technology may unnecessarily obscure the gist of the present invention, the detailed description thereof will be omitted.
도 3은 본 발명의 바람직한 일 실시예에 따른 이미지 처리부의 내부 구성을 간략하게 나타낸 블록도이며, 도 4는 종래 기술에 따란 이미지 시그널 프로세서로부터 출력되는 수평 방향 입력의 파형을 예시한 도면이고, 도 5는 본 발명의 바람직한 일 실시예에 따른 이미지 시그널 프로세서로 입력되는 수평 방향 입력의 파형을 예시한 도면이다.3 is a block diagram schematically illustrating an internal configuration of an image processing unit according to an exemplary embodiment of the present invention. FIG. 4 is a diagram illustrating a waveform of a horizontal input output from an image signal processor according to the prior art. 5 is a diagram illustrating a waveform of a horizontal direction input to an image signal processor according to an exemplary embodiment of the present invention.
도 3을 참조하면 본 발명에 따른 이미지 처리부(310)는 이미지 시그널 프로세서(120), 메모리(320) 및 출력 컨트롤러(330)를 포함하여 구성된다. 여기서, 이미지 처리부(310)는 하나의 칩으로 형성될 수 있다.Referring to FIG. 3, the
이미지 시그널 프로세서(120)는 이미지 센서(110)로부터 입력된 원시 데이터(raw data)를 처리하고, 처리된 이미지 데이터를 메모리(320)에 저장한다. 이미지 시그널 프로세서(120)는 예를 들어, 이미지 센서(110)로부터 입력된 원시 데이터를 YUV 데이터로 변환하여 출력할 수 있다. 이하, 설명의 편의를 위해, 이미지 시그널 프로세서(120)가 이미지 센서(110)로부터 입력된 원시 데이터를 미리 정해진 방법에 의해 이미지 프로세싱(image processing)하여 생성된 데이터를 "영상 데 이터"라 칭하기로 한다.The
예를 들어, 이미지 시그널 프로세서(120)가 인코딩부(예를 들어, JPEG 인코더)를 더 포함하는 경우, 이미지 시그널 프로세서(120)는 JPEG 인코딩된 데이터를 메모리(320)에 저장할 수도 있다.For example, when the
메모리(320)는 이미지 시그널 프로세서(120)에 의해 처리된 영상 데이터를 저장한다. 메모리(320)는 n(임의의 자연수, 예를 들어, 1 내지 한 프레임의 라인 수 중 임의의 수)개의 라인 메모리(line memory)로 구성될 수 있다. The
예를 들어, 2개의 라인 메모리를 포함한다고 가정하면, 특정 프레임의 홀수 라인의 영상 데이터는 제1 라인 메모리에 순차적으로 저장될 수 있으며, 짝수 라인의 영상 데이터는 제2 라인 메모리에 순차적으로 저장될 수 있다. 그리고, 이후 이미지 시그널 프로세서(120)로부터 출력되는 영상 데이터는 기존 저장된 라인 메모리에 오버라이트(overwrite)되어 저장될 수 있다. 여기서, 기저장된 데이터는 새로 입력되는 영상 데이터에 의해 오버라이트되기 전에 출력 컨트롤러(330)의 제어에 의해 후처리 프로세서(미도시)로 출력될 수도 있다.For example, assuming that two line memories are included, image data of odd lines of a specific frame may be sequentially stored in the first line memory, and image data of even lines may be sequentially stored in the second line memory. Can be. Then, the image data output from the
출력 컨트롤러(330)는 메모리(320)에 기록된 영상 데이터를 각각의 라인 단위 또는 각 화소 단위로 독출하여 여유 데이터를 부가한 형태(이하 편의상 "출력 영상 데이터"라 칭하기로 함)로 후처리 프로세서(미도시, 예를 들어, 백엔드 칩 등)로 출력한다. The
예를 들어, 출력 컨트롤러(330)가 각 라인에 해당하는 영상 데이터를 후처리 프로세서로 출력함에 있어 가장 첫번째 화소 데이터를 레지스터(미도시)에 설정된 값에 상응하여 선행하여 중복 부가된 데이터를 여유 데이터라 칭하기로 한다. 여기서, 레지스터는 출력 컨트롤러(330)의 내부에 포함되어 있을 수 있다. 물론, 구현 방법에 따라 이미지 처리부(310)에 포함되어 있을 수도 있다. 또한, 가장 끝 화소 데이터를 후행하여 설정된 값에 상응하여 후행하여 중복한 데이터도 여유 데이터로 칭할 수 있다. 물론, 설계 방법에 따라서는, 영상 데이터를 후처리 프로세서로 출력함에 있어 복수의 화소 데이터가 여유 데이터로써 영상 데이터에 선행하여 또한 후행하여 각각 부가될 수도 있음은 자명하다. 이와 같이, 본 명세서에서는 선행 또는 후행하여 중복 부가된 데이터를 여유 데이터로 통칭하기로 한다.For example, when the
또한, 출력 컨트롤러(330)는 여유 데이터가 부가된 영상 데이터의 클럭 신호의 출력 구간을 지연하여 후처리 프로세서 출력할 수 있다. 출력 컨트롤러(330)는 영상 데이터에 부가될 여유 데이터개수에 상응하여 갱신되도록 설정된 하나 이상의 레지스터(미도시, 즉, 가장 첫번째 화소 데이터에 선행하여 부가될 여유 데이터 개수를 기록한 레지스터, 가장 끝 화소 데이터에 후행하여 부가될 여유 데이터 개수를 기록한 레지스터)를 포함할 수 있다. 따라서, 출력 컨트롤러(330)는 해당 레지스터에 설정된 값을 이용하여 여유 데이터가 부가된 영상 데이터의 클럭 신호의 출력 구간을 지연시켜 출력할 수 있다. In addition, the
도 4 및 도 5에 예시된 O_PCLK는 클럭 신호(Clock signal)를 나타내고, O_HREF는 유효 수평 라인 신호를 나타내며, DATA는 이미지 센서(110)로부터 출력되는 원시 데이터의 출력 상태를 나타낸다. O_PCLK의 한 사이클(즉, 한 주기)마다 하나의 화소에 대한 영상 데이터가 입력되며, O_HREF가 하이(high) 상태(물론, 구현 방법에 따라 로우(low) 상태일 수도 있음)인 동안 프레임의 한 라인(line)에 해당하는 화소 수의 영상 데이터들이 이미지 시그널 프로세서(120)를 통해 출력 컨트롤러(330)의 제어에 의해 출력될 수 있다. 이하, 본 명세서에서는 클럭 신호(O_PCLK)에 의해 새로운 영상 데이터가 입력될 것임을 라이징 에지(rising edge)에 의해 검출하는 것을 가정하여 설명하기로 한다. 물론, 구현 방법에 따라 폴링 에지(falling edge)에 의해 검출되도록 구현할 수도 있음은 당연하다.4 and 5, O_PCLK represents a clock signal, O_HREF represents a valid horizontal line signal, and DATA represents an output state of raw data output from the
예를 들어, 도 5를 참조하면, 출력 컨트롤러(330)는 각 라인에 해당하는 영상 데이터들을 후처리 프로세서로 출력함에 있어 가장 첫번째 데이터를 k(임의의 자연수)개 만큼 선행하여 부가하고, 가장 끝 데이터를 m(임의의 자연수)개 만큼 후행하여 부가하여 후처리 프로세서로 출력할 수 있다. 여기서, k와 m은 미리 설정되거나 사용자에 의해 지정된 동일하거나 상이한 값일 수 있다. 따라서, 출력 컨트롤러(330)는 해당 레지스터에 설정된 값(예를 들어, k, m)을 독출하여 영상 데이터에 여유 데이터를 부가할 수 있다. 예를 들어, 예를 들어, 레지스터에 설정된 k와 m에 상응하는 값이 1이라고 가정하고, 영상 데이터가 예를 들어, A, B, C, D, E, F라고 가정하면, 출력 컨트롤러(330)는 가장 첫번째 화소 데이터를 1회 선행하여 부가하며, 가장 끝 화소 데이터를 1회 후행하여 부가하여 결과적으로 도 5에 예시된 바와 같이 A, A, B, C, D, E, F, F와 같은 출력 영상 데이터를 순차적으로 후처리 프로세서로 출력할 수 있다. 본 명세서에서는 부가되는 여유 데이터의 유형이 각각 1인 것을 가정하여 설명하였으나 2이상(예를 들어, A, B, A, B, C, D, E, F, E, F 등)일 수도 있으며, 각각 상이할 수도 있음은 당연하며 이와 같은 경우에도 각각 여유 데이터를 부가하는 프로세서는 동일하므로 이에 대한 중복되는 설명은 생략하기로 한다.For example, referring to FIG. 5, in outputting the image data corresponding to each line to the post-processing processor, the
또한, 출력 컨트롤러(330)는 부가된 여유 데이터에 상응하는 클럭 신호의 출력 구간을 지연하여 출력할 수 있다. 즉, 도 5에서 예시된 바와 같이, 출력 컨트롤러(330)는 가장 첫번째 화소 데이터에 상응하는 클럭 신호의 출력 구간을 지연시키고(510 참조), 가장 끝 화소 데이터에 상응하는 클럭 신호의 출력 구간을 지연시켜(520 참조) 출력할 수 있다. In addition, the
예를 들어, 클럭 신호의 한 주기마다(즉, 라이징 에지가 되는 시점마다) 각각의 화소 데이터가 입력된다고 가정하고, 부가될 여유 데이터에 상응하여 레지스터에 설정된 값이 예를 들어, 1이라고 가정하자. 출력 컨트롤러(330)는 여유 데이터가 부가된 화소 데이터의 클럭 신호의 출력 구간을 한 주기만큼 지연시킬 수 있다. 이를 통해, 여유 데이터가 부가된 화소 데이터에 상응하는 클럭 신호의 출력 구간이 마치 지연된 것과 같은 효과를 얻을 수 있다. 만일, 여유 데이터가 각각 2개씩 부가되었다고 가정하면, 출력 컨트롤러(330)는 여유 데이터가 부가된 화소 데이터의 클럭 신호의 출력 구간을 2주기만큼 지연시켜 출력할 수 있다. For example, suppose that pixel data is input every one period of the clock signal (i.e., every time the rising edge is input), and assume that the value set in the register is 1, for example, corresponding to the spare data to be added. . The
도 5의 510과 520을 참조하면 각각의 여유 데이터가 부가된 화소 데이터의 출력 구간이 지연된 것을 알 수 있다. 이를 통해, 촬상 장치에서 이미지 시그널 프로세서(120)와 후처리 프로세서간의 거리가 멀어짐으로 인해 클럭 신호가 한 사이클 지연되는 듯한 상태에서도 후처리 프로세서는 영상 데이터의 깨짐 없이 안정적으로 영상 데이터를 입력받을 수 있는 이점이 있다. Referring to 510 and 520 of FIG. 5, it can be seen that the output section of the pixel data to which respective spare data is added is delayed. Through this, even after the clock signal is delayed by one cycle due to the distance between the
도 4를 참조하여 종래 방법에 대해 간략하게 설명하기로 하자. 도 4와 같은 경우 촬상 장치의 패스(path) 길이가 길어짐으로 인해 후처리 프로세서가 첫번째 출력 영상 데이터를 추출하기 위한 O_HREF의 로우(low)에서 하이(high)로 변하는 시점(구현 방법에 따라 하이(high)에서 로우(low)로 변하는 시점일 수도 있음)을 놓칠 수도 있다. 이와 같은 경우, 후처리 프로세서는 출력 영상 데이터를 한 사이클(한 주기) 지연되어 입력받게 된다. 결과적으로 출력 영상 데이터의 순서와 유효 데이터 수가 상이하게 되어 후처리 프로세서는 깨진 데이터를 입력받게 되는 문제점이 발생한다. A brief description will be given of the conventional method with reference to FIG. In the case of FIG. 4, when the path length of the imaging device becomes longer, the post-processing processor changes from low to high of O_HREF for extracting the first output image data (high according to the implementation method. may be missed). In such a case, the post-processing processor receives the output image data one cycle (one cycle) with delay. As a result, the order of the output image data and the number of valid data are different, resulting in a problem that the post-processing processor receives broken data.
따라서, 도 5에서 보여지는 바와 같이, 출력 컨트롤러(330)가 각 라인의 첫번째 데이터와 가장 끝 데이터를 레지스터에 설정된 값에 상응하여 각각 부가하여 출력하며, 여유 데이터가 부가된 화소 데이터에 상응하는 클럭 신호의 출력 구간을 지연시킴으로써 후처리 프로세서에서 데이터 깨짐 없이 안정적으로 입력받을 수 있도록 할 수 있다.Therefore, as shown in FIG. 5, the
도 6은 본 발명의 바람직한 일 실시예에 따른 이미지 처리부가 동기 신호를 제어하는 방법을 나타낸 순서도이다. 6 is a flowchart illustrating a method of controlling a synchronization signal by an image processor according to an exemplary embodiment of the present invention.
도 6을 참조하면, 단계 610에서 이미지 시그널 프로세서(120)는 이미지 센서(110)로부터 원시 영상 데이터를 입력받아 미리 정해진 형식에 상응하여 영상 데이터로 변환한다. 그리고 이미지 시그널 프로세서(120)는 변환된 영상 데이터를 메모리(320)에 저장한다(단계 615).Referring to FIG. 6, in operation 610, the
단계 620에서 출력 컨트롤러(330)는 메모리(320)로부터 영상 데이터를 독출하여 여유 데이터를 부가하여 출력한다. 예를 들어, 출력 컨트롤러(330)는 메모리(320)에 기록된 영상 데이터를 각 라인 단위로 독출할 수 있다. 그리고, 출력 컨트롤러(330)는 독출된 영상 데이터의 최선하는 k(임의의 자연수)개의 화소 데이터에 m(임의의 자연수)개만큼 여유 데이터를 선행하여 부가할 수 있다. 그리고, 출력 컨트롤러(330)는 독출된 영상 데이터의 최후의 n(임의의 자연수)개의 화소 데이터에 p(임의의 자연수)개만큼의 여유 데이터를 후행하여 부가할 수 있다. 여기서, 부가될 여유 데이터의 개수 정보는 레지스터에 설정되어 있을 수 있으며, 출력 컨트롤러(330)는 각 레지스터에 설정된 값에 상응하여 여유 데이터를 부가할 수 있다.In operation 620, the
예를 들어, 최선하는 두개의 화소 데이터와 최후의 두개의 화소 데이터를 각각 1회 중복하여 부가한다고 가정하면(편의상, 영상 데이터가 A, B, C, D, E, F라고 가정함), 출력 컨트롤러(330)는 최선하는 두개의 화소 데이터(즉, A, B)를 1회 중복하여 부가하고, 최후의 두개의 화소 데이터(즉, E, F)를 1회 중복하여 부가하여 출력할 수 있다. 결과적으로 출력 컨트롤러(330)는 A, B, A, B, C, D, E, F, E, F 형태의 출력 영상 데이터를 출력할 수 있다.For example, assuming that the best two pixel data and the last two pixel data are added in duplicate each time (for convenience, the image data is assumed to be A, B, C, D, E, F). The
단계 625에서 출력 컨트롤러(330)는 부가된 여유 데이터에 상응하는 클럭 신호의 출력 구간을 지연시켜 출력한다.In operation 625, the
즉, 출력 컨트롤러(330)는 선행하여 부가된 여유 데이터(즉, A, B)에 상응하는 클럭 신호의 출력 구간을 여유 데이터가 부가된 화소 데이터의 클럭 신호의 출력 구간까지 지연시키고, 후행하여 부가된 여유 데이터(즉, E, F)에 상응하는 클럭 신호의 출력 구간을 여유 데이터가 부가된 화소 데이터의 클럭 신호의 출력 구간까지 지연시켜 출력할 수 있다.That is, the
이를 통해, 여유 데이터가 부가된 영상 데이터를 입력받는 후처리 프로세서는 안정적으로 데이터를 입력받을 수 있다.Through this, the post-processing processor that receives the image data to which the spare data is added may stably receive the data.
도 7은 본 발명의 바람직한 다른 실시예에 따른 이미지 처리부의 내부 구성을 간략하게 나타낸 블록도이다. 7 is a block diagram briefly illustrating an internal configuration of an image processing unit according to another exemplary embodiment of the present invention.
도 7을 참조하면, 본 발명에 따른 이미지 처리부(710)는 이미지 시그널 프로세서(120), 메모리(320), 데이터 출력부(720) 및 출력 컨트롤러(730)를 포함하여 구성된다. 이하에서는 도 3에서 이미 설명되어진 구성 요소에 대한 중복되는 설명은 생략하기로 한다. 즉, 이미지 시그널 프로세서(120)와 메모리(320)에 대한 설명은 도 3에서 설명한 것과 동일하므로 이에 대한 설명은 생략한다.Referring to FIG. 7, the
출력 컨트롤러(730)는 레지스터에 미리 설정되어 있거나 사용자에 의해 지정된 부가될 여유 데이터 정보(예를 들어, 부가될 여유 데이터 개수 정보일 수 있음)를 데이터 출력부(720)로 전달할 수 있다. 여기서, 출력 컨트롤러(730)는 출력될 영상 데이터의 가장 첫번째 데이터와 가장 끝 데이터에 각각의 부가될 여유 데이터 정보를 데이터 출력부(720)로 전달할 수 있다. 그리고, 출력 컨트롤러(730)는 부가될 여유 데이터 정보에 상응하여 해당 클럭 신호의 출력 구간을 지연하여 후처리 프로세서(720)로 출력할 수 있다.The
예를 들어, 출력 컨트롤러(730)는 이미지 시그널 프로세서(120)가 메모 리(320)에 기록하는 프레임에 대한 정보를 알고 있으므로, 메모리(320)에 저장된 프레임 정보(예를 들어, 프레임의 크기 정보)를 분석하여 한 프레임이 모두 기록되었다고 판단되는 경우 해당 프레임 독출 명령을 데이터 출력부(720)로 출력할 수도 있다. For example, since the
데이터 출력부(720)는 출력 컨트롤러(730)의 제어에 의해 메모리(320)에 기록된 영상 데이터는 각 라인 단위 또는 각 화소 단위로 독출하여 출력 컨트롤러(730)로부터 입력된 부가될 여유 데이터 정보에 상응하여 여유 데이터를 부가하여 후처리 프로세서로 출력한다. 여기서, 여유 데이터가 부가된 데이터 출력 시점은 출력 컨트롤러(730)에 의해 제어될 수 있다.The
예를 들어, 영상 데이터의 가장 첫번째 데이터에 선행하여 부가될 여유 데이터 정보가 m(임의의 자연수)개이며, 가장 끝 데이터에 후행하여 부가될 여유 데이터 정보가 n(임의의 자연수)개라고 가정하면, 데이터 출력부(720)는 메모리(320)로부터 독출한 영상 데이터의 가장 첫번째 데이터는 m개만큼 여유 데이터를 선행하여 부가하고, 가장 큰 데이터는 n개만큼 여유 데이터를 후행하여 부가하여 출력할 수 있다. 물론, 출력 컨트롤러(730)는 데이터 출력부(720)에 의해 여유 데이터가 부가된 영상 데이터의 출력 시점에 대한 상태를 제어할 수 있다.For example, suppose that there are m (random natural numbers) of free data information to be added before the first data of the image data and n (random natural numbers) of free data information to be added after the last data. In addition, the
또 다른 예를 들어, 출력 컨트롤러(730)는 메모리(320)로부터 영상 데이터를 독출하여 레지스터에 설정된 값만큼 여유 데이터를 각각 부가하여 해당 출력 영상 데이터를 메모리(320)에 재기록할 수 있다. 그리고, 출력 컨트롤러(730)는 해당 여유 데이터가 부가된 데이터에 상응하는 클럭 신호의 출력 구간을 부가된 여유 데이 터에 상응하여 지연하여 출력할 수 있다. 그리고, 메모리(320)에 재기록된 출력 영상 데이터의 출력을 지시하는 명령을 데이터 출력부(720)로 전달할 수 있다. 이에 따라, 데이터 출력부(720)는 메모리(320)에 기록된 출력 영상 데이터를 독출하여 후처리 프로세서로 출력할 수 있다. As another example, the
도 8은 본 발명의 다른 실시예에 따른 이미지 처리부가 동기 신호를 제어하는 방법을 나타낸 순서도이다.8 is a flowchart illustrating a method of controlling a synchronization signal by an image processor according to another exemplary embodiment of the present invention.
도 8을 참조하면, 단계 810에서 이미지 시그널 프로세서(120)가 이미지 센서(110)로부터 원시 영상 데이터를 입력받아 미리 정해진 형식에 상응하여 영상 데이터로 변환하여 메모리(320)에 기록한다. Referring to FIG. 8, in operation 810, the
단계 815에서 출력 컨트롤러(730)는 메모리(320)로부터 영상 데이터를 독출하고 여유 데이터를 부가하여 메모리(320)에 다시 기록한다. 여기서 여유 데이터는 화소 데이터가 중복 부가된 데이터일 수 있다. In operation 815, the
예를 들어, 여유 데이터가 부가될 화소 데이터가 A, B, C, D, E, F라고 가정하자. 그리고, 부가될 여유 데이터 정보가 1이라고 가정하자. 그러면, 출력 컨트롤러(730)는 최선하는 화소 데이터(즉, A)를 1회 중복 부가하고, 최후의 화소 데이터(즉, F)를 1회 중복 부가하여 메모리(320)에 다시 기록한다.For example, assume that pixel data to which redundant data is to be added is A, B, C, D, E, F. And suppose that the spare data information to be added is one. Then, the
단계 820에서 출력 컨트롤러(730)는 메모리(320)에 재기록된 영상 데이터(즉, 여유 데이터가 부가된 영상 데이터, 편의상 "출력 영상 데이터"라 칭함) 출력 명령을 데이터 출력부(720)로 전달한다.In operation 820, the
단계 825에서 데이터 출력부(720)는 출력 명령에 상응하여 메모리(320)로부터 출력 영상 데이터를 독출하여 후처리 프로세서로 출력한다.In operation 825, the
단계 830에서 출력 컨트롤러(730)는 여유 데이터가 부가된 화소 데이터에 상응하는 클럭 신호의 출력 구간을 지연시켜 후처리 프로세서로 출력한다. 예를 들어, 출력 컨트롤러(730)는 부가된 여유 데이터의 개수에 상응하여 클럭 신호의 출력 구간을 지연시켜 출력할 수 있다. 만일, 각각의 화소 데이터에 상응하는 클럭 신호의 출력 구간이 한 주기(즉, 한 사이클)이라고 가정하고, 부가된 여유 데이터의 개수가 1이라면, 출력 컨트롤러(730)는 여유 데이터가 부가된 화소 데이터의 클럭 신호의 출력 구간을 한 주기 지연시킬 수 있다. 만일 부가된 여유 데이터의 개수가 2라면, 출력 컨트롤러(730)는 여유 데이터가 부가된 화소 데이터의 클럭 신호의 출력 구간을 2주기 지연시킬 수도 있다. In operation 830, the
예를 들어, 도 7에 기재된 바와 같이, 데이터 출력부(720)는 출력 컨트롤러(730)의 제어에 의해 메모리(320)에 기록된 영상 데이터는 각 라인 단위 또는 각 화소 단위로 독출하여 출력 컨트롤러(730)로부터 입력된 부가될 여유 데이터 정보에 상응하여 여유 데이터를 부가하여 후처리 프로세서로 출력할 수 있다. 여기서, 여유 데이터가 부가된 데이터 출력 시점은 출력 컨트롤러(730)에 의해 제어될 수 있다.For example, as illustrated in FIG. 7, the
또 다른 예를 들어, 데이터 출력부(720)는 출력 컨트롤러(730)의 제어에 의해 최선하는 화소 데이터를 여유 데이터로서 우선 출력한 후 영상 데이터를 출력하고 영상 데이터의 최후의 화소 데이터를 여유 데이터로서 출력할 수도 있다.For another example, the
상술한 바와 같이, 본 발명에 따른 출력 동기 신호 제어 방법 및 장치를 제공함으로써, 이미지 처리부에서 처리된 영상 데이터를 출력하는데 있어 여유 데이터를 부가함으로써 후처리 프로세서에서 입력받을 영상 데이터의 훼손을 억제할 수 있는 효과가 있다.As described above, by providing the output synchronization signal control method and apparatus according to the present invention, by adding the extra data in outputting the image data processed by the image processing unit, it is possible to suppress the damage of the image data to be input from the post-processing processor. It has an effect.
또한, 본 발명은 이미지 처리부가 부가된 여유 데이터에 상응하는 클럭 신호의 출력 구간을 확장함으로써 후처리 프로세서의 변형없이 후처리 프로세서가 안정적으로 영상 데이터를 획득할 수 있도록 할 수 있는 효과도 있다.In addition, the present invention has an effect that the post-processing processor can stably obtain image data without deformation of the post-processing processor by extending the output period of the clock signal corresponding to the extra data added to the image processing unit.
상기에서는 본 발명의 바람직한 실시예를 참조하여 설명하였지만, 해당 기술 분야에서 통상의 지식을 가진 자라면 하기의 특허 청구의 범위에 기재된 본 발명의 사상 및 영역으로부터 벗어나지 않는 범위 내에서 본 발명을 다양하게 수정 및 변경시킬 수 있음을 이해할 수 있을 것이다.Although the above has been described with reference to a preferred embodiment of the present invention, those skilled in the art to which the present invention pertains without departing from the spirit and scope of the present invention as set forth in the claims below It will be appreciated that modifications and variations can be made.
Claims (18)
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
KR1020060103198A KR100843631B1 (en) | 2006-10-24 | 2006-10-24 | Method and device for controlling synchronizing signal |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
KR1020060103198A KR100843631B1 (en) | 2006-10-24 | 2006-10-24 | Method and device for controlling synchronizing signal |
Publications (2)
Publication Number | Publication Date |
---|---|
KR20080036680A true KR20080036680A (en) | 2008-04-29 |
KR100843631B1 KR100843631B1 (en) | 2008-07-04 |
Family
ID=39574947
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
KR1020060103198A KR100843631B1 (en) | 2006-10-24 | 2006-10-24 | Method and device for controlling synchronizing signal |
Country Status (1)
Country | Link |
---|---|
KR (1) | KR100843631B1 (en) |
Family Cites Families (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP4260696B2 (en) * | 2004-06-29 | 2009-04-30 | 富士通マイクロエレクトロニクス株式会社 | Solid-state imaging device, image sensor, image processing device, and imaging method |
-
2006
- 2006-10-24 KR KR1020060103198A patent/KR100843631B1/en active IP Right Grant
Also Published As
Publication number | Publication date |
---|---|
KR100843631B1 (en) | 2008-07-04 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN101536491B (en) | Imaging device and imaging method | |
US9076233B2 (en) | Image processing device and electronic apparatus using the same | |
US9699384B2 (en) | Image signal processing apparatus and a control method thereof, and an image pickup apparatus and a control method thereof | |
KR102275711B1 (en) | Image sensor and method of outputting data in the image sensor | |
US9569160B2 (en) | Display processing device and imaging apparatus | |
US20060072027A1 (en) | Camera-equipped mobile terminal | |
JP2013143654A (en) | Solid state image pickup device | |
JP2004023279A (en) | Semiconductor device, portable terminal system and sensor module | |
JP2000069491A (en) | Image pickup element and image pickup device using the same | |
US20180270448A1 (en) | Image processing system | |
KR100745837B1 (en) | Method and apparatus for outputting pixel data with appended data | |
US9658815B2 (en) | Display processing device and imaging apparatus | |
KR20160015712A (en) | Apparatus and method for capturing images | |
KR20160008846A (en) | Image Device and method for operating the same | |
JP5410158B2 (en) | Imaging system and electronic information device | |
JP4051780B2 (en) | Image pickup device driving method and image pickup apparatus | |
KR100843631B1 (en) | Method and device for controlling synchronizing signal | |
US9544559B2 (en) | Device and method for processing images | |
JP5866826B2 (en) | Imaging device | |
JP2016134907A (en) | Solid-state imaging device | |
KR100905082B1 (en) | Method and device for processing image | |
US9979919B2 (en) | Solid-state imaging device and imaging system | |
US10313620B2 (en) | Image data output device for image signal processor | |
JP6091216B2 (en) | Image signal processing apparatus, control method therefor, and imaging apparatus | |
US6654052B1 (en) | Card type semiconductor memory device |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A201 | Request for examination | ||
E902 | Notification of reason for refusal | ||
E701 | Decision to grant or registration of patent right | ||
GRNT | Written decision to grant | ||
FPAY | Annual fee payment |
Payment date: 20130530 Year of fee payment: 6 |
|
FPAY | Annual fee payment |
Payment date: 20140528 Year of fee payment: 7 |
|
FPAY | Annual fee payment |
Payment date: 20150526 Year of fee payment: 8 |
|
FPAY | Annual fee payment |
Payment date: 20180528 Year of fee payment: 11 |
|
FPAY | Annual fee payment |
Payment date: 20190527 Year of fee payment: 12 |