KR20180102988A - Event detecting device - Google Patents

Event detecting device Download PDF

Info

Publication number
KR20180102988A
KR20180102988A KR1020170150602A KR20170150602A KR20180102988A KR 20180102988 A KR20180102988 A KR 20180102988A KR 1020170150602 A KR1020170150602 A KR 1020170150602A KR 20170150602 A KR20170150602 A KR 20170150602A KR 20180102988 A KR20180102988 A KR 20180102988A
Authority
KR
South Korea
Prior art keywords
data
event
pixels
signal
pixel
Prior art date
Application number
KR1020170150602A
Other languages
Korean (ko)
Other versions
KR102378086B1 (en
Inventor
정희재
김준석
류현석
서윤재
손봉기
남궁설
박근주
Original Assignee
삼성전자주식회사
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 삼성전자주식회사 filed Critical 삼성전자주식회사
Priority to US15/896,807 priority Critical patent/US10855927B2/en
Priority to CN201810189985.5A priority patent/CN108600659B/en
Publication of KR20180102988A publication Critical patent/KR20180102988A/en
Priority to US17/019,536 priority patent/US20200412930A1/en
Application granted granted Critical
Publication of KR102378086B1 publication Critical patent/KR102378086B1/en

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N25/00—Circuitry of solid-state image sensors [SSIS]; Control thereof
    • H04N25/60—Noise processing, e.g. detecting, correcting, reducing or removing noise
    • H04N5/357—
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/017—Gesture based interaction, e.g. based on a set of recognized hand gestures
    • H—ELECTRICITY
    • H01—ELECTRIC ELEMENTS
    • H01L—SEMICONDUCTOR DEVICES NOT COVERED BY CLASS H10
    • H01L27/00—Devices consisting of a plurality of semiconductor or other solid-state components formed in or on a common substrate
    • H01L27/14—Devices consisting of a plurality of semiconductor or other solid-state components formed in or on a common substrate including semiconductor components sensitive to infrared radiation, light, electromagnetic radiation of shorter wavelength or corpuscular radiation and specially adapted either for the conversion of the energy of such radiation into electrical energy or for the control of electrical energy by such radiation
    • H01L27/144—Devices controlled by radiation
    • H01L27/146—Imager structures
    • H04N5/3696—

Abstract

According to an embodiment of the present invention, an event detecting device comprises: an event signal generator for outputting an event signal having first data and second data having mutually complementary attributes and address data indicating a position of pixels outputting the first data and the second data; a data manager for storing event information and the address data in a buffer as first sub data only when either any one of the first data or the second data include the event information; and an output signal generator for generating an output signal using the first sub data and second sub data when the second sub data different from the first sub data are stored in the buffer. The event detecting device can improve the data processing speed, and can effectively compensate an error generated in the pixel due to an external noise or the like.

Description

이벤트 감지 장치{EVENT DETECTING DEVICE}EVENT DETECTION DEVICE

본 발명은 이벤트 감지 장치에 관한 것이다.The present invention relates to an event detection device.

이벤트 감지 장치는, 시각적인 변화를 감지하여 이벤트 발생 여부를 판단하는 장치로서, 자율 주행 차량, 인공 지능 등의 다양한 분야에 적용될 수 있다. 이벤트 감지 장치는 빛을 감지하여 의미있는 변화가 감지될 때 이를 전기적 신호로 변환하여 출력할 수 있다. 이벤트 감지 장치가 출력하는 신호는 변화가 감지된 시간 및 변화가 감지된 픽셀의 위치 정보 등을 포함할 수 있다. 이벤트 감지 센서가 적용될 수 있는 분야가 늘어남에 따라, 그 성능을 개선하기 위한 다양한 연구가 진행되고 있다.The event detection device is a device for detecting the occurrence of an event by detecting a visual change and can be applied to various fields such as an autonomous vehicle and an artificial intelligence. The event detection device senses light and converts it into an electrical signal when a meaningful change is detected. The signal output by the event detection device may include a time at which the change is sensed, position information of the pixel where the change is sensed, and the like. As the number of fields in which event detection sensors can be applied is increasing, various studies are being conducted to improve the performance.

본 발명의 기술적 사상이 이루고자 하는 과제 중 하나는, 데이터 처리 속도를 개선하고, 외부 노이즈 등에 의해 픽셀에서 발생하는 오류를 효과적으로 보상할 수 있는 이벤트 감지 장치를 제공하고자 하는 데에 있다.One of the objects of the technical idea of the present invention is to provide an event detection device capable of improving a data processing speed and effectively compensating errors generated in a pixel by external noise or the like.

본 발명의 일 실시 형태에 따른 이벤트 감지 장치는, 서로 상보적 속성을 갖는 제1 데이터와 제2 데이터, 및 상기 제1 데이터와 상기 제2 데이터를 출력한 픽셀들의 위치를 나타내는 주소 데이터를 갖는 이벤트 신호를 출력하는 이벤트 신호 생성부, 상기 제1 데이터와 상기 제2 데이터 중 어느 하나만이 이벤트 정보를 포함하면, 상기 이벤트 정보와 상기 주소 데이터를 제1 서브 데이터로서 버퍼에 저장하는 데이터 관리부, 및 상기 제1 서브 데이터와 다른 제2 서브 데이터가 상기 버퍼에 저장되면, 상기 제1 서브 데이터와 상기 제2 서브 데이터를 이용하여 출력 신호를 생성하는 출력 신호 생성부를 포함한다.An event detecting apparatus according to an embodiment of the present invention includes an event detecting unit for detecting an event having an address data indicating a position of pixels outputting the first data and the second data, A data management unit for storing the event information and the address data in a buffer as first sub data if any one of the first data and the second data includes event information; And an output signal generator for generating an output signal using the first sub data and the second sub data when the second sub data different from the first sub data is stored in the buffer.

본 발명의 일 실시 형태에 따른 이벤트 감지 장치는, 복수의 행과 복수의 열을 따라 배열되는 복수의 픽셀들을 포함하는 픽셀 어레이, 상기 복수의 픽셀들 중 서로 인접한 둘 이상의 픽셀들이 출력하는 픽셀 신호들을 하나의 그룹으로 묶어서 이벤트 신호를 생성하며, 상기 이벤트 신호는 상기 픽셀 신호들로부터 생성되며 서로 상보적 속성을 갖는 제1 데이터와 제2 데이터를 포함하는 이벤트 신호 생성부, 및 상기 제1 데이터와 상기 제2 데이터 중 어느 하나만이 이벤트 정보를 포함하면, 상기 이벤트 신호를 다른 이벤트 신호와 병합하여 하나의 출력 신호를 생성하는 출력 신호 생성부를 포함한다.An event sensing apparatus according to an embodiment of the present invention includes a pixel array including a plurality of pixels arranged in a plurality of rows and a plurality of columns, pixel signals output from two or more adjacent pixels among the plurality of pixels An event signal generating unit for generating an event signal by combining the first data and the second data, the event signal including first data and second data generated from the pixel signals and having complementary properties with each other, And an output signal generator for generating an output signal by merging the event signal with another event signal if any one of the second data includes event information.

본 발명의 일 실시 형태에 따른 이벤트 감지 장치는, 복수의 픽셀들을 포함하는 픽셀 어레이, 상기 복수의 픽셀들을 복수의 그룹들로 분류하며, 상기 복수의 그룹들 각각에 포함되는 상기 픽셀들의 위치 정보, 및 상기 복수의 그룹들 각각에 포함되는 상기 픽셀들이 출력하는 픽셀 신호의 극성(polarity)에 기초하여 이벤트 신호를 생성하는 이벤트 신호 생성부, 및 상기 이벤트 신호가 어느 하나의 극성을 갖는 상기 픽셀 신호에 의해 생성되면, 상기 이벤트 신호를 다른 이벤트 신호와 병합하여 하나의 출력 신호를 생성하는 출력 신호 생성부를 포함한다.According to an aspect of the present invention, there is provided an event sensing apparatus including a pixel array including a plurality of pixels, a plurality of pixels grouped into a plurality of groups, a position information of the pixels included in each of the plurality of groups, And an event signal generator for generating an event signal based on a polarity of a pixel signal output from the pixels included in each of the plurality of groups, And an output signal generator for generating an output signal by merging the event signal with another event signal.

본 발명의 실시예에 따른 이벤트 감지 장치는, 이벤트 신호에 포함되는 상보적 속성의 제1 데이터와 제2 데이터 중에서 어느 하나만이 이벤트 정보를 포함할 경우, 상기 이벤트 정보를 다른 이벤트 신호의 데이터와 병합하여 처리할 수 있다. 따라서, 데이터 처리 속도를 개선할 수 있다. The event detection apparatus according to an embodiment of the present invention may be configured such that when only one of the first data and the second data of the complementary attribute included in the event signal includes event information, . Therefore, the data processing speed can be improved.

본 발명의 다양하면서도 유익한 장점과 효과는 상술한 내용에 한정되지 않으며, 본 발명의 구체적인 실시 형태를 설명하는 과정에서 보다 쉽게 이해될 수 있을 것이다.The various and advantageous advantages and effects of the present invention are not limited to the above description, and can be more easily understood in the course of describing a specific embodiment of the present invention.

도 1은 본 발명의 일 실시예에 따른 이벤트 감지 장치를 간단하게 나타낸 도면이다.
도 2는 본 발명의 일 실시예에 따른 이벤트 감지 장치에 포함되는 픽셀 어레이를 나타낸 도면이다.
도 3은 본 발명의 일 실시예에 따른 이벤트 감지 장치에 포함되는 픽셀 회로를 나타낸 도면이다.
도 4 및 도 5는 본 발명의 일 실시예에 따른 이벤트 감지 장치에서 생성되는 이벤트 신호를 설명하기 위해 제공되는 도면들이다.
도 6은 본 발명의 일 실시예에 따른 이벤트 감지 장치를 간단하게 나타낸 도면이다.
도 7은 본 발명의 일 실시예에 따른 이벤트 감지 장치에서 생성되는 출력 신호를 설명하기 위해 제공되는 도면이다.
도 8은 본 발명의 일 실시예에 따른 이벤트 감지 장치의 동작을 설명하기 위해 제공되는 흐름도이다.
도 9는 본 발명의 일 실시예에 따른 이벤트 감지 장치를 포함하는 전자 기기를 간단하게 나타낸 도면이다FIG. 1 is a block diagram of an event detection apparatus according to an embodiment of the present invention. Referring to FIG.
2 is a diagram illustrating a pixel array included in an event sensing apparatus according to an exemplary embodiment of the present invention.
3 is a block diagram of a pixel circuit included in an event detection apparatus according to an exemplary embodiment of the present invention.
4 and 5 are diagrams for explaining event signals generated in the event detection apparatus according to an embodiment of the present invention.
FIG. 6 is a simplified diagram illustrating an event sensing apparatus according to an exemplary embodiment of the present invention. Referring to FIG.
FIG. 7 is a view for explaining an output signal generated by an event sensing apparatus according to an embodiment of the present invention. Referring to FIG.
8 is a flowchart illustrating an operation of the event detection apparatus according to an embodiment of the present invention.
9 is a view schematically showing an electronic device including an event detection device according to an embodiment of the present invention

이하, 첨부된 도면을 참조하여 본 발명의 바람직한 실시 형태들을 다음과 같이 설명한다.Hereinafter, preferred embodiments of the present invention will be described with reference to the accompanying drawings.

도 1은 본 발명의 일 실시예에 따른 이벤트 감지 장치를 간단하게 나타낸 도면이다.FIG. 1 is a block diagram of an event detection apparatus according to an embodiment of the present invention. Referring to FIG.

도 1을 참조하면, 본 발명의 일 실시예에 따른 이벤트 감지 장치(10)는 픽셀 어레이(20)와 프로세서(30)를 포함할 수 있다. 픽셀 어레이(20)는 빛의 증가 또는 감소를 감지하여 전기 신호를 생성할 수 있으며, 복수의 행과 열을 따라 배치되는 복수의 픽셀들을 포함할 수 있다. Referring to FIG. 1, an event sensing apparatus 10 according to an embodiment of the present invention may include a pixel array 20 and a processor 30. The pixel array 20 may include a plurality of pixels that are capable of sensing an increase or decrease in light to produce an electrical signal and disposed along a plurality of rows and columns.

프로세서(30)는 스캔 모듈(31)과 이벤트 모듈(32), 인터페이스부(33) 및 컨트롤 로직(34) 등을 포함할 수 있다. 스캔 모듈(31)은 복수의 행과 열 중 어느 하나의 방향으로 픽셀 어레이(20)에 포함된 픽셀들을 스캔할 수 있다. 일 실시예에서, 스캔 모듈(31)은 복수의 칼럼 라인들을 순차적으로 스캔할 수 있다. The processor 30 may include a scan module 31 and an event module 32, an interface 33, and control logic 34, and the like. The scan module 31 may scan pixels included in the pixel array 20 in any one of a plurality of rows and columns. In one embodiment, the scan module 31 may sequentially scan a plurality of column lines.

이벤트 모듈(32)은 스캔 모듈(31)이 스캔한 칼럼 라인에 연결된 픽셀들이 출력하는 전기 신호를 이용하여, 이벤트 감지 결과를 포함하는 출력 신호를 생성할 수 있다. 일 실시예에서, 이벤트 모듈(32)은 픽셀들이 출력하는 픽셀 신호를 이용하여, 빛의 증가 또는 감소에 따른 극성(polarity), 빛의 증가 또는 감소가 발생한 픽셀의 위치, 및 빛의 증가 또는 감소가 발생한 시간 등의 정보를 포함하는 이벤트 신호를 생성할 수 있다. The event module 32 may generate an output signal including an event detection result by using an electric signal output from the pixels connected to the column line scanned by the scan module 31. [ In one embodiment, the event module 32 uses the pixel signal output by the pixels to determine the polarity as the light increases or decreases, the position of the pixel where the light increase or decrease occurs, And the time at which the event occurred.

인터페이스부(33)는 외부의 다른 장치와 통신하기 위한 모듈일 수 있다. 일 실시예에서 인터페이스부(33)는 MIPI(Mobile Industry Processor Interface) 프로토콜에 따라 애플리케이션 프로세서 등과 데이터를 주고받을 수 있다. 컨트롤 로직(34)은 스캔 모듈(31)과 이벤트 모듈(32) 및 인터페이스부(33)의 동작을 제어할 수 있다.The interface unit 33 may be a module for communicating with other external devices. In one embodiment, the interface unit 33 can exchange data with an application processor or the like according to a Mobile Industry Processor Interface (MIPI) protocol. The control logic 34 may control operations of the scan module 31, the event module 32, and the interface unit 33.

상기 이벤트 신호는, 서로 상보적 속성을 가지며 각 픽셀들에서 발생한 이벤트의 극성을 나타내는 제1 데이터와 제2 데이터, 및 이벤트가 발생한 픽셀의 위치를 나타내는 주소 데이터 등을 포함할 수 있다. 본 발명의 일 실시예에서 프로세서(30)는, 제1 데이터와 제2 데이터가 모두 이벤트 정보를 포함하는 경우, 이벤트 신호를 그대로 인터페이스부(33)에 전달할 수 있다. 반면, 제1 데이터와 제2 데이터 중 어느 하나만이 이벤트 정보를 포함하는 경우, 프로세서(30)는 해당 이벤트 정보를 버퍼에 임시로 저장하고, 이후에 생성되는 이벤트 신호들에 포함된 이벤트 정보와 합쳐서 출력 신호를 생성할 수 있다. 즉, 이벤트 신호가 어느 하나의 극성을 갖는 픽셀 신호들에 의해 생성되면, 상기 이벤트 신호를, 이후에 생성되는 다른 이벤트 신호와 병합하여 하나의 출력 신호로 내보낼 수 있다. 따라서, 데이터 처리 속도를 높이고, 출력 신호의 전송량을 줄일 수 있다.The event signal may include first data and second data having complementary properties and indicating polarities of events occurring in the respective pixels, and address data indicating a position of a pixel where an event occurs. In one embodiment of the present invention, when both the first data and the second data include event information, the processor 30 may transmit the event signal to the interface unit 33 as it is. On the other hand, if only one of the first data and the second data includes event information, the processor 30 temporarily stores the corresponding event information in the buffer, and combines the event information included in the event signals generated thereafter An output signal can be generated. That is, if an event signal is generated by pixel signals having a certain polarity, the event signal may be merged with another event signal generated in the future and output as an output signal. Therefore, the data processing speed can be increased and the amount of output signal transmission can be reduced.

도 2는 본 발명의 일 실시예에 따른 이벤트 감지 장치에 포함되는 픽셀 어레이를 나타낸 도면이다.2 is a diagram illustrating a pixel array included in an event sensing apparatus according to an exemplary embodiment of the present invention.

도 2를 참조하면, 본 발명의 일 실시예에 따른 픽셀 어레이(20)는 복수의 로우 라인(row)과 칼럼 라인(col)을 따라 배치되는 복수의 픽셀들(PX)을 포함할 수 있다. 도 2에 도시한 일 실시예에서, 픽셀 어레이(20)는 N개의 로우 라인(row)과 M개의 칼럼 라인(col)을 포함할 수 있다. 따라서, 픽셀 어레이(20)에는 총 MxN개의 픽셀들(PX)이 포함될 수 있다.Referring to FIG. 2, the pixel array 20 according to an embodiment of the present invention may include a plurality of pixels PX arranged along a plurality of row lines and a column line col. In one embodiment shown in FIG. 2, the pixel array 20 may include N row lines and M column lines col. Thus, the pixel array 20 may include a total of MxN pixels PX.

픽셀 어레이(20)에 포함되는 복수의 픽셀들(PX)은 로우 라인(row) 또는 칼럼 라인(col) 단위로 스캔될 수 있다. 일 실시예에서, 복수의 칼럼 라인(col)을 순차적으로 스캔하면서, 픽셀들(PX)로부터 픽셀 신호를 검출하고, 픽셀 신호를 이용하여 이벤트 신호를 생성할 수 있다. 상기 이벤트 신호는, 빛의 증가 또는 감소에 대응하는 이벤트의 타입, 이벤트가 발생한 픽셀의 위치, 이벤트 발생 시간에 대응하는 타임스탬프(timestamp) 값 등의 정보를 포함할 수 있다.The plurality of pixels PX included in the pixel array 20 may be scanned in a row or column line col unit. In one embodiment, a pixel signal may be detected from the pixels PX while sequentially scanning a plurality of column lines col and an event signal may be generated using the pixel signal. The event signal may include information such as a type of an event corresponding to an increase or a decrease in light, a position of a pixel where an event occurs, and a timestamp value corresponding to an event occurrence time.

도 3 본 발명의 일 실시예에 따른 이벤트 감지 장치에 포함되는 픽셀 회로를 나타낸 도면이다.3 is a diagram illustrating a pixel circuit included in an event detection apparatus according to an exemplary embodiment of the present invention.

도 3을 참조하면, 본 발명의 일 실시예에 따른 이벤트 감지 장치의 픽셀 회로(100)는, 제1 회로(110)와 제2 회로(120)를 포함할 수 있다. 일 실시예에서, 제1 회로(110)는 픽셀들마다 마련된 포토 다이오드(PD)에서 생성된 전하를 제1 전압(VPR)으로 변환하여 출력할 수 있다. Referring to FIG. 3, the pixel circuit 100 of the event sensing apparatus according to an exemplary embodiment of the present invention may include a first circuit 110 and a second circuit 120. In one embodiment, the first circuit 110 may convert the charge generated in the photodiode PD provided for each pixel to a first voltage V PR and output it.

빛의 변화에 따라 포토 다이오드(PD)에서 전하가 생성되면, 제1 증폭기(AMP1)는 포토 다이오드(PD)의 전하에 따른 전압(VPD)을 증폭할 수 있다. 일례로, 제1 증폭기(AMP1)는 포토 다이오드(PD)의 전압(VPD)을 로그 스케일로 증폭할 수 있으며, 그에 따라 제1 전압(VPR)의 크기가 포토 다이오드(PD)에서 감지한 빛의 세기에 선형으로 비례할 수 있다.When charge is generated in the photodiode PD according to the change of light, the first amplifier AMP1 can amplify the voltage V PD according to the charge of the photodiode PD. For example, the first amplifier AMP1 may amplify the voltage V PD of the photodiode PD to a logarithmic scale, and accordingly the magnitude of the first voltage V PR may be amplified by the photodiode PD It can be linearly proportional to the intensity of light.

제2 회로(120)는 제1 전압(VPR)을 이용하여 빛의 변화량을 나타내는 픽셀 전압(VPX)을 생성할 수 있다. 제2 회로(120)는 제1 커패시터(C1), 제2 커패시터(C2), 스위치(SW) 및 제2 증폭기(AMP2)를 포함할 수 있다. The second circuit 120 may generate the pixel voltage V PX representing the amount of light change using the first voltage VPR. The second circuit 120 may include a first capacitor C1, a second capacitor C2, a switch SW and a second amplifier AMP2.

제1 커패시터(C1)는 제1 증폭기(AMP1)의 출력단과 제2 증폭기(AMP2)의 입력단 사이에 연결되며, 제1 전압(VPR)의 변화에 따라 전하를 충전할 수 있다. 제2 증폭기(AMP2)는, 제1 커패시터(C1)와 제2 커패시터(C2)의 커패시턴스 값의 비율에 따라서, 제1 커패시터(C1)의 전압을 증폭시켜 픽셀 전압(VPX)을 생성할 수 있다. 스위치(SW)는 제1 커패시터(C1)에 충전된 전하를 리셋할 수 있다.The first capacitor C1 is connected between the output terminal of the first amplifier AMP1 and the input terminal of the second amplifier AMP2 and charges the charge according to the change of the first voltage V PR . The second amplifier AMP2 can amplify the voltage of the first capacitor C1 to generate the pixel voltage V PX in accordance with the ratio of the capacitance value of the first capacitor C1 to the capacitance of the second capacitor C2 have. The switch SW can reset the charge charged in the first capacitor C1.

본 발명의 일 실시예에 따른 이벤트 감지 장치는, 픽셀 전압(VPX)을 이용하여 이벤트 신호를 생성할 수 있다. 일례로, 이벤트 신호는 빛의 증가 또는 감소에 대응하는 픽셀 전압(VPX)을 출력한 픽셀의 위치, 픽셀이 픽셀 전압(VPX)을 출력한 시간, 및 픽셀 전압(VPX)으로부터 추정한 빛의 증가 또는 감소에 대응하는 이벤트의 타입 등의 정보를 포함할 수 있다.The event detection apparatus according to an embodiment of the present invention may generate an event signal using the pixel voltage V PX . In one example, the event signal is estimated from the output of the pixel voltage (V PX) corresponding to the increase or decrease of the light pixel position, times one pixel outputs a pixel voltage (V PX), and a pixel voltage (V PX) The type of event corresponding to an increase or decrease in light, and the like.

이벤트 신호는 소정의 포맷으로 인코딩될 수 있는데, 일 실시예에서 이벤트 신호는 서로 상보적 속성을 갖는 제1 데이터와 제2 데이터를 포함할 수 있다. 일반적인 경우에는 제1 데이터와 제2 데이터 각각이 갖는 이벤트 정보에 상관없이 제1 데이터와 제2 데이터가 모두 포함된 상태로 이벤트 신호를 출력할 수 있다. 이 경우, 제1 데이터에만 이벤트 정보가 포함되는 경우에도 제1 데이터와 제2 데이터가 모두 출력됨으로써, 데이터 전송량이 불필요하게 증가하는 문제가 발생할 수 있다.The event signal may be encoded in a predetermined format, in one embodiment, the event signal may include first data and second data having complementary attributes to each other. The event signal can be output in a state where both the first data and the second data are included regardless of the event information of the first data and the second data. In this case, even when the event information is included only in the first data, both the first data and the second data are output, which may cause a problem of unnecessarily increasing the data transfer amount.

본 발명의 일 실시예에서는, 제1 데이터와 제2 데이터의 상보적 속성을 이용하여, 제1 데이터와 제2 데이터 중 어느 하나만이 이벤트 정보를 가질 때, 해당 이벤트 정보를 다른 이벤트 신호의 이벤트 정보와 합쳐서 출력할 수 있다. 따라서 출력 신호의 전송량을 줄이고 데이터 처리 속도를 높일 수 있다.In an embodiment of the present invention, when only one of the first data and the second data has event information by using the complementary attribute of the first data and the second data, Can be output. Therefore, it is possible to reduce the amount of output signal and increase data processing speed.

도 4 및 도 5는 본 발명의 일 실시예에 따른 이벤트 감지 장치에서 생성되는 이벤트 신호를 설명하기 위해 제공되는 도면들이다. 4 and 5 are diagrams for explaining event signals generated in the event detection apparatus according to an embodiment of the present invention.

일 실시예에서, 이벤트 감지 장치는 서로 인접한 2개 이상의 픽셀들을 하나의 픽셀 그룹으로 정의하고, 각 픽셀 그룹에 포함되는 픽셀들에서 생성된 데이터를 하나의 데이터 포맷으로 묶어서 출력할 수 있다. 이벤트 감지 장치의 픽셀 어레이가 M 개의 칼럼 라인들을 포함하고, N 개의 로우 라인들을 포함하는 경우, 이벤트 신호는 M 개의 칼럼 라인들이 스캔되는 순서에 따라 출력될 수 있다. 또한, M 개의 칼럼 라인들 각각에 연결된 N 개의 픽셀들 중 인접한 일부를 묶어서 픽셀 그룹을 정의할 수 있다. 픽셀 그룹들 각각에 포함되는 픽셀들의 개수는, N의 약수일 수 있다. 일례로, M 개의 칼럼 라인들 각각에 연결된 픽셀들의 개수가 480개인 경우, 픽셀 그룹은 동일한 칼럼 라인에 연결되며 서로 인접한 4개 또는 8개의 픽셀들을 포함할 수 있다.In one embodiment, the event detection device may define two or more pixels adjacent to each other as one group of pixels, and output the data generated in the pixels included in each group of pixels in a single data format. If the pixel array of the event detection device includes M column lines and includes N row lines, the event signal may be output in the order in which the M column lines are scanned. In addition, a group of pixels can be defined by grouping adjacent ones of the N pixels connected to each of the M column lines. The number of pixels included in each of the pixel groups may be a divisor of N. [ For example, if the number of pixels connected to each of the M column lines is 480, then the pixel groups may be connected to the same column line and include four or eight adjacent pixels.

한편, 일 실시예에서 이벤트 감지 장치가 생성하는 이벤트 신호는, M 개의 칼럼 라인들을 스캔하는 순서대로 출력될 수 있다. 도 4를 참조하면, 이벤트 신호는 칼럼 라인의 위치를 가리키는 칼럼 주소 데이터(Col Addr)와, 하나의 칼럼 라인들 각각에 연결된 픽셀들이 생성한 이벤트 데이터들을 포함할 수 있다. Meanwhile, in one embodiment, the event signal generated by the event detection device may be output in the order of scanning the M column lines. Referring to FIG. 4, an event signal may include column address data (Col Addr) indicating the position of a column line, and event data generated by pixels connected to each of the one column lines.

각각의 이벤트 데이터들은 서로 상보적 속성을 갖는 제1 데이터(Data1)와 제2 데이터(Data2)를 포함할 수 있다. 제1 데이터(Data1)와 제2 데이터(Data2)는 각각 복수의 비트들을 갖는데, 제1 데이터(Data1)와 제2 데이터(Data2)에 포함되는 비트들의 개수는, 하나의 픽셀 그룹에 포함되는 픽셀들의 개수와 같을 수 있다. 예를 들어, 픽셀 그룹이 하나의 칼럼 영역에 연결되며 서로 인접한 4개의 픽셀들을 포함하는 경우, 제1 데이터(Data1)와 제2 데이터(Data2) 각각은 4개의 비트들을 가질 수 있다. 한편 픽셀 그룹이 하나의 칼럼 영역에 연결되며 서로 인접한 8개의 픽셀들을 포함하는 경우, 제1 데이터(Data1)와 제2 데이터(Data2) 각각은 8개의 비트들을 가질 수 있다.Each event data may include first data Data1 and second data Data2 having mutually complementary attributes. The first data Data1 and the second data Data2 each have a plurality of bits and the number of bits included in the first data Data1 and the second data Data2 is the number of bits included in one pixel group Lt; / RTI > For example, when the pixel group is connected to one column region and includes four adjacent pixels, each of the first data Data1 and the second data Data2 may have four bits. On the other hand, when the pixel group is connected to one column region and includes eight adjacent pixels, each of the first data Data1 and the second data Data2 may have eight bits.

한편 이벤트 데이터들 각각은, 제1 데이터(Data1)와 제2 데이터(Data2)를 출력한 픽셀 그룹의 위치를 나타내는 그룹 주소 데이터(Group Addr)를 포함할 수 있다. 이벤트 신호에 포함된 칼럼 주소 데이터(Col Addr)와, 그룹 주소 데이터(Group Addr)를 이용하여, 각각의 제1 데이터(Data1)와 제2 데이터(Data2)가 픽셀 어레이의 어느 위치에서 생성된 것인지를 판별할 수 있다.Each of the event data may include group address data (Group Addr) indicating the position of the pixel group outputting the first data (Data1) and the second data (Data2). It is possible to determine at which position of the pixel array each of the first data Data 1 and the second data Data 2 is generated by using the column address data Col Addr included in the event signal and the group address data Group Addr Can be determined.

일례로, 픽셀 어레이가 640 x 480 어레이를 따라 배열되는 픽셀들을 포함하고, 하나의 픽셀 그룹이 칼럼 라인을 따라 서로 인접한 4개의 픽셀들을 포함하는 경우를 가정하자. 칼럼 주소 데이터(Col Addr)가 0이고 그룹 주소 데이터(Group Addr) 역시 0이면, 제1 데이터(Data1) 및 제2 데이터(Data2)에 포함되는 4개의 비트들은, (0,0), (0, 1), (0, 2) 및 (0,3)의 좌표들에 위치한 픽셀들로부터 생성된 것으로 판별될 수 있다.As an example, suppose that a pixel array includes pixels arranged along a 640 x 480 array, and one pixel group includes four pixels adjacent to each other along a column line. If the column address data (Col Addr) is 0 and the group address data (Group Addr) is also 0, the four bits included in the first data (Data1) and the second data (Data2) , 1), (0, 2) and (0, 3).

도 5에 도시한 일 실시예는, 하나의 칼럼 라인에 연결된 480개의 픽셀들로부터 생성한 이벤트 신호들을 나타낸 것일 수 있다. 도 5에 도시한 일 실시예에서 하나의 칼럼 라인에 480 개의 픽셀들은 120개의 픽셀 그룹들로 구분될 수 있다. 즉, 하나의 픽셀 그룹은 서로 인접한 4개의 픽셀들을 포함할 수 있다. The embodiment shown in FIG. 5 may be an event signal generated from 480 pixels connected to one column line. In the embodiment shown in FIG. 5, 480 pixels in one column line may be divided into 120 pixel groups. That is, one pixel group may include four pixels adjacent to each other.

제1 이벤트 신호(200)는 첫 번째 픽셀 그룹(Group(0))에 대응하며, 제1 데이터(201)와 제2 데이터(202), 및 그룹 주소 데이터(203)를 포함할 수 있다. 제1 데이터(201)와 제2 데이터(202)는 서로 상보적 속성을 가질 수 있으며, 480개의 픽셀들 중에서 첫번째부터 네번째 픽셀들 각각에서 생성된 데이터에 대응할 수 있다. 그룹 주소 데이터(203)는 제1 이벤트 신호(200)를 생성한 픽셀 그룹을 가리킬 수 있으며, 첫번째 픽셀 그룹(Group(0))을 가리키는 값을 가질 수 있다.The first event signal 200 corresponds to the first pixel group (Group (0)) and may include the first data 201 and the second data 202 and the group address data 203. The first data 201 and the second data 202 may have mutually complementary properties and may correspond to data generated from each of the first to fourth pixels among 480 pixels. The group address data 203 may indicate a pixel group that generated the first event signal 200, and may have a value indicating the first pixel group (Group (0)).

제2 이벤트 신호(210)와 제3 이벤트 신호(220) 내지 제120 이벤트 신호(230) 역시, 제1 이벤트 신호(200)와 동일한 방식으로 생성될 수 있다. 도 5에 도시한 일 실시예에서는 그룹 주소 데이터(203, 213, 223, 233)가 0부터 119까지의 값을 가질 수 있어야 하므로, 그룹 주소 데이터(203, 213, 223, 233)는 적어도 7개의 비트들을 포함할 수 있다.The second event signal 210 and the third event signal 220 to the 120th event signal 230 may also be generated in the same manner as the first event signal 200. 5, since the group address data 203, 213, 223, and 233 can have values ranging from 0 to 119, the group address data 203, 213, 223, and 233 includes at least seven Bits.

도 5를 참조하면, 제1 이벤트 신호(200)에 포함되는 제1 데이터(201)와 제2 데이터(202)는 모두 이벤트 정보를 포함할 수 있다. 반면, 제2 이벤트 신호(210와 제3 이벤트 신호(220)에서는 제2 데이터(212, 222)만이 이벤트 정보를 포함할 수 있으며, 제120 이벤트 신호(230)에서는 제1 데이터(231)만이 이벤트 정보를 포함할 수 있다. 따라서, 제2 이벤트 신호(210와 제3 이벤트 신호(220) 및 제120 이벤트 신호(230)를 그대로 애플리케이션 프로세서 등에 전송하는 경우, 데이터 전송량에 낭비가 발생하고 불필요하게 소모 전력이 증가할 수 있다.Referring to FIG. 5, both the first data 201 and the second data 202 included in the first event signal 200 may include event information. On the other hand, in the second event signal 210 and the third event signal 220, only the second data 212 and 222 may include event information. In the 120th event signal 230, When the second event signal 210, the third event signal 220, and the 120th event signal 230 are directly transmitted to the application processor or the like, waste of data transfer amount occurs and unnecessary consumption Power can be increased.

객체의 움직임이 많은 경우, 제1 데이터(201, 211, 221, 231)와 제2 데이터(202, 212, 222, 232) 중 어느 하나만이 이벤트 정보를 포함할 확률이 높을 수 있다. 본 발명의 일 실시예에서는, 이벤트 신호들(200, 210, 220, 230)을 분석하여 제1 데이터(201, 211, 221, 231)와 제2 데이터(202, 212, 222, 232) 중 어느 하나만이 이벤트 정보를 포함하는 경우, 해당 이벤트 정보를 다른 이벤트 정보와 결합하여 하나의 출력 신호로 출력할 수 있다. 예를 들어, 도 5에 도시한 일 실시예에서, 제2 이벤트 신호(210)와 제3 이벤트 신호(220)에 포함되는 이벤트 정보들은 하나의 출력 신호로 합성되어 애플리케이션 프로세서 등으로 전송될 수 있다. 이 경우, 출력 신호는 제2 이벤트 신호(210)의 제2 데이터(212)와 제3 이벤트 신호의 제2 데이터(222) 및 제2 이벤트 신호(210)와 제3 이벤트 신호(220) 각각의 그룹 주소 데이터들(213, 223)을 포함할 수 있다. 따라서, 데이터 전송량을 효율적으로 운영함과 동시에, 이벤트 감지 장치의 소모 전력을 절감할 수 있다.The probability that only one of the first data 201, 211, 221, and 231 and the second data 202, 212, 222, and 232 includes event information may be high. In one embodiment of the present invention, the event signals 200, 210, 220, and 230 are analyzed to determine which of the first data 201, 211, 221, and 231 and the second data 202, 212, 222, When only one event information is included, the event information may be combined with other event information and output as one output signal. 5, event information included in the second event signal 210 and the third event signal 220 may be combined into one output signal and transmitted to an application processor or the like . In this case, the output signal is the output of the second data 212 of the second event signal 210, the second data 222 of the third event signal, the second event signal 210 of the third event signal 220, And group address data 213, 223. Therefore, it is possible to efficiently operate the data transfer amount and reduce the power consumption of the event detection device.

도 6은 본 발명의 일 실시예에 따른 이벤트 감지 장치를 간단하게 나타낸 도면이다.FIG. 6 is a simplified diagram illustrating an event sensing apparatus according to an exemplary embodiment of the present invention. Referring to FIG.

도 6을 참조하면, 본 발명의 일 실시예에 따른 이벤트 감지 장치(300)는, 픽셀 어레이(310), 이벤트 신호 생성부(320), 데이터 관리부(330), 버퍼(340), 출력 신호 생성부(350), 및 인터페이스부(360) 등을 포함할 수 있다. 픽셀 어레이(310)는 복수의 로우 라인들과 칼럼 라인들을 따라 배열되는 복수의 픽셀들을 포함할 수 있으며, 각 픽셀들은 객체의 움직임에 따른 빛의 증가 또는 감소을 감지하여 픽셀 신호를 출력할 수 있다.6, an event sensing apparatus 300 according to an exemplary embodiment of the present invention includes a pixel array 310, an event signal generator 320, a data manager 330, a buffer 340, A unit 350, and an interface unit 360, and the like. The pixel array 310 may include a plurality of pixels arranged along a plurality of row lines and column lines, and each pixel may output a pixel signal by detecting an increase or decrease of light according to movement of the object.

이벤트 신호 생성부(320)는, 픽셀들이 출력하는 픽셀 신호를 이용하여 이벤트 신호를 생성할 수 있다. 이벤트 신호는 픽셀들이 감지한 빛의 증가에 대응하는 온-이벤트 신호 및 픽셀들이 감지한 빛의 감소에 대응하는 오프-이벤트 신호를 포함할 수 있다. 한편, 본 발명의 일 실시예에서는, 하나의 칼럼 라인에 연결되며 서로 인접한 둘 이상의 픽셀들을 하나의 픽셀 그룹으로 구분할 수 있으며, 이벤트 신호 생성부(320)는 하나의 픽셀 그룹에 대응하는 하나의 이벤트 신호를 생성할 수 있다. 따라서, 하나의 이벤트 신호는, 둘 이상의 픽셀들에서 생성된 데이터들을 포함할 수 있다.The event signal generator 320 may generate an event signal using a pixel signal output from the pixels. The event signal may include an on-event signal corresponding to an increase in light sensed by the pixels and an off-event signal corresponding to a decrease in light sensed by the pixels. Meanwhile, in an embodiment of the present invention, two or more pixels connected to one column line and adjacent to each other may be divided into one pixel group, and the event signal generation unit 320 generates one event group corresponding to one pixel group Signal can be generated. Thus, one event signal may include data generated at two or more pixels.

이벤트 신호는, 제1 데이터와 제2 데이터, 및 주소 데이터 등을 포함할 수 있다. 제1 데이터와 제2 데이터는 픽셀 그룹에 포함되는 복수의 픽셀들이 빛의 증가 또는 감소를 감지하여 생성한 데이터일 수 있으며, 서로 상보적 속성을 가질 수 있다. 주소 데이터는, 제1 데이터와 제2 데이터를 생성한 픽셀 그룹의 위치를 나타내는 데이터일 수 있다. 주소 데이터는, 픽셀 그룹이 속하는 칼럼 라인의 주소 정보와, 픽셀 그룹이 해당 칼럼 라인에서 몇 번째 그룹인지를 나타내는 정보를 포함할 수 있다.The event signal may include first data and second data, address data, and the like. The first data and the second data may be data generated by a plurality of pixels included in the pixel group sensing an increase or decrease in light, and may have mutually complementary properties. The address data may be data representing a position of the pixel group that generated the first data and the second data. The address data may include address information of a column line to which the pixel group belongs and information indicating which group the pixel group is in the corresponding column line.

데이터 관리부(330)는 제1 데이터와 제2 데이터 중 어느 하나만이 이벤트 정보를 포함하는지, 또는 제1 데이터와 제2 데이터가 모두 이벤트 정보를 포함하는지 여부를 판단할 수 있다. 제1 데이터와 제2 데이터가 모두 이벤트 정보를 포함하면, 데이터 관리부(330)는 이벤트 신호를 그대로 인터페이스부(360)에 전달할 수 있다. 인터페이스부(360)는 이벤트 신호를 출력 신호로서 외부의 애플리케이션 프로세서 등에 전송할 수 있다.The data management unit 330 may determine whether only one of the first data and the second data includes event information or whether both the first data and the second data include event information. If both the first data and the second data include event information, the data management unit 330 can transmit the event signal to the interface unit 360 as it is. The interface unit 360 may transmit an event signal as an output signal to an external application processor or the like.

일 실시예에서, 데이터 관리부(330)는 제1 데이터와 제2 데이터 중 어느 하나만이 이벤트 정보를 포함하는지 여부를 판단하기 위하여, AND 연산을 수행할 수 있다. 데이터 관리부(330)는 제1 데이터와 제2 데이터 중 어느 하나에 포함되는 n개(n은 2 이상의 자연수)의 비트들을 입력으로 이용하는 AND 연산을 수행하고, 그 출력을 참조하여 제1 데이터와 제2 데이터 중 어느 하나만이 이벤트 정보를 포함하는지를 판단할 수 있다.In one embodiment, the data management unit 330 may perform an AND operation to determine whether only one of the first data and the second data includes event information. The data management unit 330 performs an AND operation using n bits (n is a natural number of 2 or more) included in either the first data or the second data as an input, and outputs the first data and the second data 2 < / RTI > data includes event information.

일례로, 제1 데이터에 포함되는 n개의 비트들을 이용한 AND 연산의 결과가 1이면, 데이터 관리부(330)는 제1 데이터만이 이벤트 정보를 포함하는 것으로 판단할 수 있다. 반대의 경우, 즉 제2 데이터에 포함되는 n개의 비트들을 이용한 AND 연산의 결과가 1이면, 데이터 관리부(330)는 제2 데이터만이 이벤트 정보를 포함하는 것으로 판단할 수 있다.For example, if the result of the AND operation using n bits included in the first data is 1, the data management unit 330 can determine that only the first data includes event information. In other words, if the result of the AND operation using n bits included in the second data is 1, the data management unit 330 can determine that only the second data includes event information.

제1 데이터와 제2 데이터 중 어느 하나만이 이벤트 정보를 포함하면, 데이터 관리부(330)는 상기 이벤트 정보를 제1 서브 데이터로서 버퍼(340)에 저장할 수 있다. 버퍼(340)는 상기 이벤트 정보와 함께, 주소 데이터를 제1 서브 데이터로서 저장할 수 있다.If only one of the first data and the second data includes event information, the data management unit 330 may store the event information in the buffer 340 as first sub data. The buffer 340 may store the address data together with the event information as the first sub data.

이후 데이터 관리부(330)는 후속 이벤트 신호들을 수신할 수 있으며, 후속 이벤트 신호들 각각에서 제1 데이터와 제2 데이터 중 어느 하나만이 이벤트 정보를 포함하는지 여부를 판단할 수 있다. 후속 이벤트 신호들 중에서 제1 데이터와 제2 데이터 중 어느 하나만이 이벤트 정보를 포함하는 경우가 발생하면, 데이터 관리부(330)는 해당 이벤트 정보를 제2 서브 데이터로서 버퍼(340)에 저장할 수 있다.Thereafter, the data management unit 330 may receive subsequent event signals, and may determine whether only one of the first data and the second data includes event information in each of the subsequent event signals. When only one of the first data and the second data among the subsequent event signals includes event information, the data management unit 330 may store the corresponding event information in the buffer 340 as second sub data.

버퍼(340)에 제1 서브 데이터와 제2 서브 데이터가 저장되면, 출력 신호 생성부(350)는 버퍼(340)에 저장된 제1 서브 데이터와 제2 서브 데이터를 인출하여 출력 신호를 생성할 수 있다. 출력 신호 생성부(350)는 제1 서브 데이터와 제2 서브 데이터 각각에 포함된 이벤트 정보와 주소 데이터를 이용하여 출력 신호를 생성할 수 있다. 따라서, 출력 신호 생성부(350)가 생성한 출력 신호는, 이벤트 신호 생성부(320)가 출력하는 이벤트 신호보다 더 많은 정보를 포함할 수 있다. 인터페이스부(360)는 출력 신호 생성부(350)가 생성한 출력 신호를 외부의 애플리케이션 프로세서 등에 전송할 수 있다. 이하, 도 7을 참조하여 이벤트 감지 장치(300)가 출력 신호를 생성하는 방법을 더욱 자세히 설명하기로 한다.When the first sub data and the second sub data are stored in the buffer 340, the output signal generating unit 350 may generate the output signal by fetching the first sub data and the second sub data stored in the buffer 340 have. The output signal generator 350 may generate the output signal using the event information and the address data included in the first sub data and the second sub data. Therefore, the output signal generated by the output signal generating unit 350 may include more information than the event signal output by the event signal generating unit 320. The interface unit 360 can transmit the output signal generated by the output signal generation unit 350 to an external application processor or the like. Hereinafter, a method of generating an output signal by the event sensing apparatus 300 will be described in more detail with reference to FIG.

도 7은 본 발명의 일 실시예에 따른 이벤트 감지 장치에서 생성되는 출력 신호를 설명하기 위해 제공되는 도면이다. 도 7을 참조하면, 제1 이벤트 신호(200)는 픽셀 그룹에 포함되는 픽셀들에서 빛의 증가 또는 감소를 감지하여 생성한 이벤트 정보를 포함하는 제1 데이터(201)와 제2 데이터(202), 및 픽셀 그룹의 위치를 나타내는 그룹 주소 데이터(203)를 포함할 수 있다. 제1 데이터(201)와 제2 데이터(202)는 상보적 속성을 가질 수 있다.FIG. 7 is a view for explaining an output signal generated by an event sensing apparatus according to an embodiment of the present invention. Referring to FIG. Referring to FIG. 7, the first event signal 200 includes a first data 201 and a second data 202 including event information generated by sensing an increase or a decrease of light in pixels included in a pixel group, And group address data 203 indicating the position of the pixel group. The first data 201 and the second data 202 may have complementary attributes.

제1 이벤트 신호(200)에 포함되는 제1 데이터(201)와 제2 데이터(202)는 모두 이벤트 정보를 포함할 수 있다. 따라서, 데이터 관리부(330)는 제1 이벤트 신호(200)를 그대로 인터페이스부(360)에 전달할 수 있으며, 인터페이스부(360)는 제1 이벤트 신호(200)를 출력 신호로서 출력할 수 있다.The first data 201 and the second data 202 included in the first event signal 200 may include event information. Accordingly, the data management unit 330 can transmit the first event signal 200 directly to the interface unit 360, and the interface unit 360 can output the first event signal 200 as the output signal.

한편, 제2 이벤트 신호(210)와의 경우, 제1 이벤트 신호(200)와 달리 제2 데이터(212)만이 이벤트 정보를 포함하며, 제1 데이터(211)는 이벤트 정보를 포함하지 않을 수 있다. 데이터 관리부(330)는 제2 이벤트 신호(210)에서 이벤트 정보를 포함하는 제2 데이터(212)와, 제2 이벤트 신호(210)의 그룹 주소 데이터(213)를 추출하여 제1 서브 데이터로서 버퍼(340)에 저장할 수 있다.In the case of the second event signal 210, unlike the first event signal 200, only the second data 212 includes event information, and the first data 211 may not include event information. The data management unit 330 extracts the second data 212 including the event information and the group address data 213 of the second event signal 210 from the second event signal 210 and outputs the group address data 213 as the first sub- (340).

제2 이벤트 신호(210)에 이어서 이벤트 신호 생성부(320)가 출력하는 제3 이벤트 신호(220)에서는, 제2 데이터(222)만이 이벤트 정보를 포함할 수 있다. 데이터 관리부(330)는 제2 데이터(222)와, 제3 이벤트 신호(220)의 그룹 주소 데이터(223)를 제2 서브 데이터로서 버퍼(340)에 저장할 수 있다.Only the second data 222 may include event information in the third event signal 220 output by the event signal generator 320 following the second event signal 210. [ The data management unit 330 may store the second data 222 and the group address data 223 of the third event signal 220 in the buffer 340 as the second sub data.

버퍼(340)에 제1 서브 데이터와 제2 서브 데이터가 저장되면, 출력 신호 생성부(350)는 제1 서브 데이터와 제2 서브 데이터를 이용하여 출력 신호(210A)를 생성할 수 있다. 출력 신호(210A)는 제2 이벤트 신호(210)에 포함되는 제2 데이터(212)와 그룹 주소 데이터(213) 및 제3 이벤트 신호(220)에 포함되는 제2 데이터(222)와 그룹 주소 데이터(223)를 포함할 수 있다. 따라서, 출력 신호(210A)는 다른 이벤트 신호들(200, 210, 220, 230)보다 더 많은 정보를 포함할 수 있다. 한편, 일 실시예에서, 제1 이벤트 신호(200)가 그대로 출력되는 경우에도 출력 신호(210A)와 같은 데이터 길이를 가질 수 있도록, 제1 이벤트 신호(200)에 복수 개의 비트들을 갖는 널(Null) 데이터가 추가될 수 있다.When the first sub data and the second sub data are stored in the buffer 340, the output signal generator 350 may generate the output signal 210A using the first sub data and the second sub data. The output signal 210A includes the second data 212 included in the second event signal 210, the second data 222 included in the group address data 213 and the third event signal 220, (223). Thus, the output signal 210A may contain more information than the other event signals 200, 210, 220, 230. In one embodiment, even when the first event signal 200 is output as it is, the first event signal 200 may be null (Null) having a plurality of bits so that the first event signal 200 may have the same data length as the output signal 210A. ) Data may be added.

도 8은 본 발명의 일 실시예에 따른 이벤트 감지 장치의 동작을 설명하기 위해 제공되는 흐름도이다.8 is a flowchart illustrating an operation of the event detection apparatus according to an embodiment of the present invention.

도 8을 참조하면, 본 발명의 일 실시예에 따른 이벤트 감지 장치의 동작은, 픽셀 어레이에 포함되는 픽셀들 각각이 출력하는 픽셀 신호를 수신하는 것으로 시작될 수 있다(S10). 픽셀 신호는, 객체의 움직임에 의해 발생하는 빛의 밝기 증가 또는 감소에 응답하여, 픽셀들 각각에서 생성하는 전기 신호일 수 있다.Referring to FIG. 8, the operation of the event sensing apparatus according to an exemplary embodiment of the present invention may begin with receiving a pixel signal output from each of the pixels included in the pixel array (S10). The pixel signal may be an electrical signal that is generated in each of the pixels in response to an increase or decrease in brightness of light caused by movement of the object.

이벤트 감지 장치는, 픽셀 신호를 이용하여 이벤트 신호를 생성할 수 있다(S11). 이벤트 신호는, 픽셀들에서 감지한 빛의 밝기 증가 또는 감소에 대응하는 이벤트 정보를 갖는 제1 데이터 및 제2 데이터와, 픽셀 신호를 출력한 픽셀들의 위치를 나타내는 주소 데이터 등을 포함할 수 있다. 한편 일 실시예에서, 이벤트 신호는 픽셀들이 빛의 밝기 증가 또는 감소를 감지한 시간에 대응하는 타임스탬프 값들을 포함할 수도 있다. 제1 데이터와 제2 데이터는, 하나의 픽셀 그룹에 포함되는 픽셀들에서 감지한 빛의 밝기 증가 또는 감소에 대응하는 이벤트 정보를 가질 수 있다.The event detection apparatus can generate an event signal using the pixel signal (S11). The event signal may include first data and second data having event information corresponding to an increase or a decrease in brightness of light sensed by the pixels, address data indicating the position of pixels outputting the pixel signal, and the like. In one embodiment, the event signal may include timestamp values corresponding to the time when the pixels sensed an increase or decrease in brightness of light. The first data and the second data may have event information corresponding to an increase or a decrease in brightness of light sensed by the pixels included in one pixel group.

이벤트 감지 장치는, S11 단계에서 생성한 이벤트 신호를 분석하여, 제1 데이터와 제2 데이터가 모두 이벤트 정보를 포함하는지 여부를 판단할 수 있다(S12). S12 단계의 판단 결과, 제1 데이터와 제2 데이터가 모두 이벤트 정보를 포함하는 것으로 판단되면, 이벤트 감지 장치는 S11 단계에서 생성한 이벤트 신호를 출력 신호로서 외부의 프로세서 등에 전송할 수 있다(S15).The event detection device may analyze the event signal generated in step S11 to determine whether both the first data and the second data include event information (S12). If it is determined in step S12 that both the first data and the second data include event information, the event sensing apparatus may transmit the event signal generated in step S11 as an output signal to an external processor or the like (S15).

반면, S12 단계의 판단 결과 제1 데이터와 제2 데이터 중 어느 하나만이 이벤트 정보를 포함하는 것으로 판단되면, 이벤트 감지 장치는 이벤트 정보를 제1 서브 데이터로서 버퍼에 저장할 수 있다(S14). 이때, 제1 서브 데이터는 이벤트 정보 외에, 상기 이벤트 정보를 생성한 픽셀들의 위치를 나타내는 주소 데이터를 더 포함할 수도 있다.If it is determined in step S12 that only one of the first data and the second data includes the event information, the event detection apparatus may store the event information in the buffer as first sub data (S14). In this case, the first sub data may further include, in addition to the event information, address data indicating a location of the pixels generating the event information.

이후 버퍼에 제2 서브 데이터가 더 저장되면, 이벤트 감지 장치는 제1 서브 데이터와 제2 서브 데이터를 이용하여 출력 신호를 생성할 수 있다(S14). 제2 서브 데이터는, 제1 서브 데이터와 마찬가지로, 제1 데이터와 제2 데이터 중 어느 하나만이 이벤트 정보를 포함하는 이벤트 신호로부터 추출한 이벤트 정보 및 주소 데이터를 포함할 수 있다. 이벤트 감지 장치가 S14 단계에서 생성하는 출력 신호는, 서로 다른 픽셀 그룹들에서 생성되는 이벤트 정보와, 상기 서로 다른 픽셀 그룹들의 위치를 가리키는 주소 데이터 등을 포함할 수 있다. 이벤트 감지 장치는 S14 단계에서 생성한 출력 신호를, 외부의 프로세서 등에 전송할 수 있다(S15). Thereafter, when the second sub data is further stored in the buffer, the event sensing apparatus may generate the output signal using the first sub data and the second sub data (S14). The second sub data, like the first sub data, may include event information and address data extracted from an event signal in which only either the first data or the second data includes event information. The output signal generated by the event detection device in step S14 may include event information generated in different pixel groups, address data indicating the position of the different pixel groups, and the like. The event detection device can transmit the output signal generated in step S14 to an external processor or the like (S15).

도 9는 본 발명의 일 실시예에 따른 이벤트 감지 장치를 포함하는 전자 기기를 간단하게 나타낸 도면이다.FIG. 9 is a simplified view of an electronic device including an event sensing apparatus according to an embodiment of the present invention.

도 9에 도시한 실시예에 따른 전자 기기(1000)는 디스플레이(1010), 메모리(1020), 이벤트 감지 장치(1030), 포트(1040), 및 프로세서(1050) 등을 포함할 수 있다. 디스플레이(1010), 메모리(1020), 이벤트 감지 장치(1030), 포트(1040), 및 프로세서(1050) 등의 구성 요소들은 버스(1060)를 통해 서로 통신할 수 있다. 상기 도시한 구성 요소들 외에, 전자 기기(1000)는 유무선 통신 장치, 전원 장치 등을 더 포함할 수 있다. The electronic device 1000 according to the embodiment shown in FIG. 9 may include a display 1010, a memory 1020, an event sensing device 1030, a port 1040, and a processor 1050. Components such as the display 1010, the memory 1020, the event sensing device 1030, the port 1040, and the processor 1050 are capable of communicating with each other via the bus 1060. In addition to the above-described components, the electronic device 1000 may further include a wired / wireless communication device, a power supply device, and the like.

프로세서(1050)는 특정 연산이나 명령어 및 태스크 등을 수행할 수 있다. 프로세서(1050)는 중앙 처리 장치(CPU), 마이크로프로세서 유닛(MCU), 또는 애플리케이션 프로세서(AP) 등일 수 있으며, 버스(1060)를 통해 디스플레이(1010), 메모리(1020), 이벤트 감지 장치(1030), 포트(1040) 등의 다른 구성 요소들과 통신할 수 있다. Processor 1050 may perform particular operations, commands, tasks, and so on. The processor 1050 may be a central processing unit (CPU), a microprocessor unit (MCU), or an application processor (AP) or the like and may be coupled to the display 1010, the memory 1020, the event sensing device 1030 , Port 1040, and the like.

도 9에 도시한 전자 기기(1000)는 이벤트 감지 장치(1030)를 이용하여, 사용자의 제스처나 움직임 등에 따른 빛의 밝기 증가 또는 감소를 이벤트로서 감지할 수 있다. 이벤트 감지 장치(1030)는 앞서 도 1 내지 도 8 등을 참조하여 설명한 다양한 실시예들에 따를 수 있다.The electronic device 1000 shown in FIG. 9 can detect an increase or decrease in the brightness of light as an event using the event sensing device 1030 according to a user's gesture or motion. The event detection apparatus 1030 may follow the various embodiments described above with reference to FIGS. 1 to 8, and the like.

본 발명은 상술한 실시형태 및 첨부된 도면에 의해 한정되는 것이 아니며 첨부된 청구범위에 의해 한정하고자 한다. 따라서, 본 발명의 기본적인 기술적 사상을 벗어나지 않는 범위 내에서 당 기술분야의 통상의 지식을 가진 자에 의해 다양한 형태의 치환, 변형 및 변경이 가능할 것이며, 이 또한 본 발명의 범위에 속한다고 할 것이다.The present invention is not limited to the above-described embodiment and the accompanying drawings, but is intended to be limited by the appended claims. Accordingly, it is intended that the present invention cover the modifications and variations of this invention provided they come within the scope of the appended claims and their equivalents.

100: 픽셀 회로
200, 210, 220, 230: 이벤트 신호
300: 이벤트 감지 장치
310: 픽셀 어레이
320: 이벤트 신호 생성부
330: 데이터 관리부
340: 버퍼
350: 출력 신호 생성부
360: 인터페이스부100: pixel circuit
200, 210, 220, 230: event signal
300: Event detection device
310: Pixel array
320: Event signal generator
330: Data management unit
340: buffer
350: an output signal generating unit
360:

Claims (10)

서로 상보적 속성을 갖는 제1 데이터와 제2 데이터, 및 상기 제1 데이터와 상기 제2 데이터를 출력한 픽셀들의 위치를 나타내는 주소 데이터를 갖는 이벤트 신호를 출력하는 이벤트 신호 생성부;
상기 제1 데이터와 상기 제2 데이터 중 어느 하나만이 이벤트 정보를 포함하면, 상기 이벤트 정보와 상기 주소 데이터를 제1 서브 데이터로서 버퍼에 저장하는 데이터 관리부; 및
상기 제1 서브 데이터와 다른 제2 서브 데이터가 상기 버퍼에 저장되면, 상기 제1 서브 데이터와 상기 제2 서브 데이터를 이용하여 출력 신호를 생성하는 출력 신호 생성부; 를 포함하는 이벤트 감지 장치.
An event signal generator for outputting an event signal having first data and second data having mutually complementary attributes and address data indicating a position of pixels outputting the first data and the second data;
A data management unit for storing the event information and the address data in a buffer as first sub data if only one of the first data and the second data includes event information; And
An output signal generator for generating an output signal using the first sub data and the second sub data when the second sub data different from the first sub data is stored in the buffer; And an event detection unit.
제1항에 있어서,
상기 출력 신호 생성부는, 상기 제1 서브 데이터를 출력한 픽셀들의 위치를 나타내는 제1 주소 데이터와, 상기 제2 서브 데이터를 출력한 픽셀들의 위치를 나타내는 제2 주소 데이터를 포함하는 이벤트 감지 장치.
The method according to claim 1,
Wherein the output signal generation unit includes first address data indicating a position of pixels outputting the first sub data and second address data indicating a position of pixels outputting the second sub data.
제1항에 있어서,
상기 제1 데이터와 상기 제2 데이터 각각은 n개(n은 2 이상의 자연수)의 비트들을 포함하는 이벤트 감지 장치.
The method according to claim 1,
Wherein each of the first data and the second data includes n bits (n is a natural number of 2 or more).
제3항에 있어서,
상기 데이터 관리부는, 상기 제1 데이터에 포함되는 n개의 비트들이 모두 0이면, 상기 제2 데이터를 상기 제1 서브 데이터로서 상기 버퍼에 저장하는 이벤트 감지 장치.
The method of claim 3,
Wherein the data management unit stores the second data in the buffer as the first sub data if n bits included in the first data are all 0s.
제3항에 있어서,
상기 데이터 관리부는, 상기 제2 데이터에 포함되는 n개의 비트들이 모두 0이면, 상기 제1 데이터를 상기 제1 서브 데이터로서 상기 버퍼에 저장하는 이벤트 감지 장치.
The method of claim 3,
Wherein the data management unit stores the first data as the first sub data in the buffer if n bits included in the second data are all 0s.
제3항에 있어서,
상기 데이터 관리부는, 상기 제1 데이터 및 상기 제2 데이터 중 어느 하나에 포함되는 상기 n개의 비트들을 AND 연산하는 논리 연산 회로를 포함하는 이벤트 감지 장치.
The method of claim 3,
Wherein the data management unit includes a logical operation circuit for ANDing the n bits included in any one of the first data and the second data.
제3항에 있어서,
상기 제1 데이터와 상기 제2 데이터 각각에 포함되는 상기 n개의 비트들은, 상기 픽셀들 중에서 서로 인접하여 배치되는 n개의 픽셀들 각각에서 감지한 이벤트에 대응하는 이벤트 감지 장치.
The method of claim 3,
Wherein the n bits included in each of the first data and the second data corresponds to an event sensed by each of n pixels disposed adjacent to each other among the pixels.
제7항에 있어서,
상기 n개의 픽셀들은 픽셀 어레이에서 일 방향을 따라 배치되는 이벤트 감지 장치.
8. The method of claim 7,
Wherein the n pixels are arranged along one direction in a pixel array.
복수의 행과 복수의 열을 따라 배열되는 복수의 픽셀들을 포함하는 픽셀 어레이;
상기 복수의 픽셀들 중 서로 인접한 둘 이상의 픽셀들이 출력하는 픽셀 신호들을 하나의 그룹으로 묶어서 이벤트 신호를 생성하며, 상기 이벤트 신호는 상기 픽셀 신호들로부터 생성되며 서로 상보적 속성을 갖는 제1 데이터와 제2 데이터를 포함하는 이벤트 신호 생성부; 및
상기 제1 데이터와 상기 제2 데이터 중 어느 하나만이 이벤트 정보를 포함하면, 상기 이벤트 신호를 다른 이벤트 신호와 병합하여 하나의 출력 신호를 생성하는 출력 신호 생성부; 를 포함하는 이벤트 감지 장치.
A pixel array including a plurality of pixels arranged along a plurality of rows and a plurality of columns;
And generates an event signal by grouping the pixel signals output by two or more neighboring pixels among the plurality of pixels into a group, and the event signal is generated from the pixel signals and includes first data having a complementary property, An event signal generation unit including 2 data; And
An output signal generator for generating an output signal by merging the event signal with another event signal if only one of the first data and the second data includes event information; And an event detection unit.
복수의 픽셀들을 포함하는 픽셀 어레이;
상기 복수의 픽셀들을 복수의 그룹들로 분류하며, 상기 복수의 그룹들 각각에 포함되는 상기 픽셀들의 위치 정보, 및 상기 복수의 그룹들 각각에 포함되는 상기 픽셀들이 출력하는 픽셀 신호의 극성(polarity)에 기초하여 이벤트 신호를 생성하는 이벤트 신호 생성부; 및
상기 이벤트 신호가 어느 하나의 극성을 갖는 상기 픽셀 신호에 의해 생성되면, 상기 이벤트 신호를 다른 이벤트 신호와 병합하여 하나의 출력 신호를 생성하는 출력 신호 생성부; 를 포함하는 이벤트 감지 장치.
A pixel array including a plurality of pixels;
The method of claim 1, further comprising: dividing the plurality of pixels into a plurality of groups, determining position information of the pixels included in each of the plurality of groups, and polarity of a pixel signal output from each of the plurality of groups, An event signal generation unit for generating an event signal based on the event signal; And
An output signal generator for generating an output signal by combining the event signal with another event signal when the event signal is generated by the pixel signal having a polarity; And an event detection unit.
KR1020170150602A 2017-03-08 2017-11-13 Event detecting device KR102378086B1 (en)

Priority Applications (3)

Application Number Priority Date Filing Date Title
US15/896,807 US10855927B2 (en) 2017-03-08 2018-02-14 Event detecting device including an event signal generator and an output signal generator
CN201810189985.5A CN108600659B (en) 2017-03-08 2018-03-08 Event detection device
US17/019,536 US20200412930A1 (en) 2017-03-08 2020-09-14 Event detecting device including an event signal generator and an output signal generator

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
KR1020170029687 2017-03-08
KR20170029687 2017-03-08

Publications (2)

Publication Number Publication Date
KR20180102988A true KR20180102988A (en) 2018-09-18
KR102378086B1 KR102378086B1 (en) 2022-03-25

Family

ID=63718584

Family Applications (3)

Application Number Title Priority Date Filing Date
KR1020170080596A KR102282140B1 (en) 2017-03-08 2017-06-26 Pixel, pixel driving circuit and vision sensor including the same
KR1020170145538A KR102424382B1 (en) 2017-03-08 2017-11-02 Image processing device configured to regenerate timestamp and electronic device including the same
KR1020170150602A KR102378086B1 (en) 2017-03-08 2017-11-13 Event detecting device

Family Applications Before (2)

Application Number Title Priority Date Filing Date
KR1020170080596A KR102282140B1 (en) 2017-03-08 2017-06-26 Pixel, pixel driving circuit and vision sensor including the same
KR1020170145538A KR102424382B1 (en) 2017-03-08 2017-11-02 Image processing device configured to regenerate timestamp and electronic device including the same

Country Status (1)

Country Link
KR (3) KR102282140B1 (en)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN112153309A (en) * 2019-06-26 2020-12-29 三星电子株式会社 Vision sensor, image processing apparatus, and method of operating vision sensor

Families Citing this family (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN112740660B (en) 2018-09-28 2024-04-19 索尼半导体解决方案公司 Solid-state imaging element, control method of solid-state imaging element, and electronic apparatus
KR102280505B1 (en) * 2019-06-20 2021-07-21 김영관 System and method for providing authenticity and integrity of electronic document

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20160037740A (en) * 2014-09-29 2016-04-06 삼성전자주식회사 Electronic system and output method thereof
KR20160112219A (en) * 2015-03-18 2016-09-28 삼성전자주식회사 Event-based sensor and operating method of processor
US20170059399A1 (en) * 2015-09-01 2017-03-02 Samsung Electronics Co., Ltd. Event-based sensor and pixel of event-based sensor

Family Cites Families (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
EP2677500B1 (en) * 2012-06-19 2021-06-23 Samsung Electronics Co., Ltd. Event-based image processing apparatus and method
KR20140056986A (en) * 2012-11-02 2014-05-12 삼성전자주식회사 Motion sensor array device, depth sensing system and method using the same
KR102392473B1 (en) * 2014-07-14 2022-04-29 삼성전자주식회사 Interfacing apparatus and user input processing method
KR102298652B1 (en) * 2015-01-27 2021-09-06 삼성전자주식회사 Method and apparatus for determining disparty
KR102307055B1 (en) * 2015-04-28 2021-10-01 삼성전자주식회사 Method and apparatus for extracting static pattern based on output of event-based sensor
KR101653622B1 (en) * 2015-05-07 2016-09-05 고려대학교 산학협력단 Image sensor for extracting edge information

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20160037740A (en) * 2014-09-29 2016-04-06 삼성전자주식회사 Electronic system and output method thereof
KR20160112219A (en) * 2015-03-18 2016-09-28 삼성전자주식회사 Event-based sensor and operating method of processor
US20170059399A1 (en) * 2015-09-01 2017-03-02 Samsung Electronics Co., Ltd. Event-based sensor and pixel of event-based sensor

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN112153309A (en) * 2019-06-26 2020-12-29 三星电子株式会社 Vision sensor, image processing apparatus, and method of operating vision sensor

Also Published As

Publication number Publication date
KR20180102986A (en) 2018-09-18
KR20180102976A (en) 2018-09-18
KR102282140B1 (en) 2021-07-28
KR102424382B1 (en) 2022-07-26
KR102378086B1 (en) 2022-03-25

Similar Documents

Publication Publication Date Title
US20200412930A1 (en) Event detecting device including an event signal generator and an output signal generator
EP3139595B1 (en) Event-based sensor and pixel of event-based sensor
KR20140056986A (en) Motion sensor array device, depth sensing system and method using the same
CN110192387B (en) Data rate control for event-based vision sensors
CN110174974B (en) Touch circuit, touch device and touch method
KR102503543B1 (en) Dynamic vision sensor, electronic device and data transfer method thereof
KR102378086B1 (en) Event detecting device
CN1936811A (en) Touch sensitive display device and driving apparatus thereof, and method of detecting a touch
KR102644692B1 (en) Touch Sensing Device for Implementing High Resolution and Display Device Including That Touch Sensing Device
US8144134B2 (en) Sensing circuit, display device, and electronic apparatus
CN109002218B (en) Display panel, driving method thereof and display device
US20230217123A1 (en) Vision sensor, image processing device including the same, and operating method of the vision sensor
US11582410B2 (en) Dynamic vision sensor and image processing device including the same
US20220264035A1 (en) Dynamic Region of Interest (ROI) for Event-Based Vision Sensors
CN113325953A (en) Display device and method for positioning fixation point
CN109584278B (en) Target identification device and method
KR20220108608A (en) Vision sensor and image processing device including the same
US8305460B2 (en) Detection device and image capture system using the same
KR20220085619A (en) Vision sensor, and operating method thereof
EP4093021A1 (en) Vision sensor and operating method thereof
KR20160008439A (en) Interfacing apparatus and user input processing method
CN112135014B (en) Signal acquisition device
KR960009087B1 (en) Devices disposing image histogram
CN117294968A (en) Signal processing circuit and electronic device
CN101887326B (en) Image scanning system and control method thereof

Legal Events

Date Code Title Description
E902 Notification of reason for refusal
E701 Decision to grant or registration of patent right
GRNT Written decision to grant