RU2570348C1 - Computer system for panoramic colour image television surveillance - Google Patents

Computer system for panoramic colour image television surveillance

Info

Publication number
RU2570348C1
RU2570348C1 RU2014138256A RU2014138256A RU2570348C1 RU 2570348 C1 RU2570348 C1 RU 2570348C1 RU 2014138256 A RU2014138256 A RU 2014138256A RU 2014138256 A RU2014138256 A RU 2014138256A RU 2570348 C1 RU2570348 C1 RU 2570348C1
Authority
RU
Grant status
Grant
Patent type
Prior art keywords
output
photodetector
television
ring
connected
Prior art date
Application number
RU2014138256A
Other languages
Russian (ru)
Inventor
Вячеслав Михайлович Смелков
Original Assignee
Вячеслав Михайлович Смелков
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Grant date

Links

Images

Abstract

FIELD: physics.
SUBSTANCE: method is carried out by using, for a photodetector, a target crystal in the form of a circular ring, which is provided with a "circular" colour mosaic filter, and with organisation of "circular" image raster.
EFFECT: eliminating redundant channel bandwidth for communication of a television camera with a server.
3 cl, 7 dwg

Description

Изобретение является техническим решением по категории «устройство» и имеет отношение к панорамному телевизионному наблюдению, которое выполняется компьютерной системой при помощи цветной телевизионной камеры кругового обзора в области, близкой к полусфере, т.е. The invention is a technical decision in the "device" category relates to panoramic television observation, which is performed by a computer system using a color television camera circular scan in an area close to a hemisphere, i.e., в пространственном угле 360 градусов по азимуту и десятки градусов по углу места. a spatial angle of 360 degrees in azimuth and ten degrees in elevation.

Наиболее близким по технической сущности к заявляемому изобретению следует считать устройство компьютерной системы панорамного телевизионного наблюдения [1], содержащее последовательно соединенные телевизионную камеру и сервер, являющийся узлом локальной вычислительной сети, к которому подключены два или более персональных компьютеров, при этом телевизионная камера состоит из последовательно расположенных и оптически связанных панорамного объектива и датчика цифрового телевизионного сигнала, который содержит в своем составе твер The closest in technical essence to the claimed invention should be considered as a device of a computer system panoramic television observation [1], comprising series-connected television camera and the server, which host on the local area network to which are connected two or more personal computers, and the television camera comprises successively disposed and optically coupled panoramic lens and the sensor of a digital television signal which contains in its structure solid alloy дотельный фотоприемник с прямоугольной мишенью и блок фотоприемника, обеспечивающий прогрессивную прямоугольную развертку аналогового видеосигнала фотоприемника и формирование на выходе телевизионной камеры цифрового телевизионного сигнала, а в разъем расширения на материнской плате сервера установлена плата видео, согласованная по каналам ввода/вывода, управлению и питанию с шиной сервера, содержащая блок преобразования «кольцевого» кадра в «прямоугольные» кадры (БПКП), вход которого подключен к выходу блока оперативной памяти н dotelny photodetector with a rectangular target and block photodetector providing progressive rectangular scanning analog video signal of the photodetector and forming the output of the television camera of a digital television signal, and in an expansion slot on the system server motherboard has a video card, aligned on the I / O channels, control and supply to the bus server, comprising a frame conversion unit "ring" in the "rectangular" frames (BPKP) having an input connected to the output of memory block n кадр, а выход - к выходу «сеть», причем число «прямоугольных» кадров, соответствующих одному текущему «кольцевому» кадру, удовлетворяет соотношению: frame, and the output - to the output of a "network" with the number "rectangular" frames corresponding to one current "ring" frame satisfies the relation:

Figure 00000001

где γ г - горизонтальный угол поля зрения в градусах наблюдаемого оператором изображения, а само это преобразование выполняется программным путем. where γ r - a horizontal field angle in degrees of the observed image by the operator, and the transformation itself is performed by software.

Недостаток прототипа компьютерной системы панорамного наблюдения - избыточная полоса пропускания канала связи телевизионной камеры с сервером. The drawback of the prototype computer system panoramic observation - excess bandwidth communication channel with the server of the television camera.

Для датчика цифрового телевизионного сигнала прототипа ее важнейший компонент - фотоприемник, который является матрицей, выполненной по технологии приборов с зарядовой связью (матрицей ПЗС) [2]. For digital television signal sensor prototype its key component - the photodetector, which is a matrix formed by devices Technology Charge Coupled Device (CCD) [2]. Она имеет прямоугольную форму мишени и содержит на общем кристалле фотоприемную секцию, выходной горизонтальный регистр и преобразователь «заряд - напряжение» (БПЗН). It has a rectangular shape and comprises a target at a general photodetecting section of the crystal, a horizontal output register and the converter "charge - voltage" (BPZN). Такая схемотехническая организация матричного фотоприемника на ПЗС получила первоначальное название «межстрочный перенос» [2, с. This organization shemotehnicheskogo matrix photodetector on the CCD received the original name of "interline transfer" [2, p. 167]. 167]. В последнее время эту организацию матрицы ПЗС чаще упрощенно называют «строчный перенос» (см. например [3, с. 135]). Recently, this organization CCD often simplified as "transfer line" (see. E.g. [3, p. 135]).

Фотоприемная секция такого матричного сенсора обеспечивает накопление зарядовых пакетов в светочувствительных элементах, в качестве которых используются фотодиоды, организованные в линейки столбцов. The photodetector section such matrix sensor provides accumulation of charge packets in photosensitive elements which are used as the photodiodes arranged in the column line. В непосредственной близости от каждого столбца фотодиодов находится не чувствительный к свету вертикальный ПЗС-регистр сдвига, отделенный от фотодиодов фотозатвором. In the vicinity of each column of photodiodes is not sensitive to light, a vertical CCD shift register, separated from photodiodes photogate. В интервале прямого хода кадровой развертки, когда на фотозатвор подается низкий уровень напряжения, обеспечивающий потенциальный барьер между фотодиодами и вертикальным ПЗС-регистром, происходит накопление зарядовых пакетов. In the range of the forward stroke of vertical deflection when a photogate is fed a low voltage level, providing a potential barrier between the photo diodes and vertical CCD register, there is an accumulation of charge packets. По окончании накопления на фотозатвор кратковременно (в интервале обратного хода по кадру) подается высокий уровень напряжения, разрешающий перенос зарядовых пакетов из фотодиодов в потенциальные ямы, образованные в вертикальных ПЗС-регистрах. At the end of accumulation to briefly photogate (ranging retrace frame) is supplied a high voltage level, allowing the transfer of charge packets from the photodiodes in the potential wells formed in the vertical CCD registers. В последующем интервале прямого хода по кадру зарядовые пакеты из вертикальных ПЗС-регистров переносятся (в интервалах обратного хода строчной развертки) строка за строкой вниз по направлению к горизонтальному выходному регистру. In the subsequent interval the forward stroke of frame charge packets from vertical CCD registers are transferred (at intervals of the horizontal retrace interval) line by line down towards the horizontal output register. Каждая зарядовая строка изображения затем поэлементно считывается через БПЗН, образуя на выходе «видео» фотоприемника электрический видеосигнал. Each line of the image charge is then read out element by element through BPZN forming the output "video" photodetector electrical video signal.

Матрица ПЗС прототипа формирует видеосигнал цветного изображения, а поэтому снабжена встроенным цветным мозаичным фильтром, который накрывает ее фотоприемную секцию. Matrix CCD prototype produces a color video image, and therefore has a built color mosaic filter that covers it photodetecting section. Мозаичный фильтр разделяет свет на голубой, желтый, пурпурный и зеленый компоненты, см., например [3, с. A mosaic filter divides the light in blue, yellow, purple and green components. See, for example [3, p. 154-155]. 154-155]. Добавим, что со стороны объектива перед мозаичным фильтром прототипа располагается инфракрасный отсекающий фильтр (ИК-фильтр), который изменяет спектральную характеристику ПЗС-матрицы, обеспечивая ее согласование со спектральной чувствительностью человеческого глаза. Add that is located on the lens side infrared cut filter (infrared filter) before mosaic prototype filter that changes the spectral characteristics of the CCD, providing its matching with the spectral sensitivity of the human eye.

Недостаток матричного фотоприемника для телевизионной камеры панорамного наблюдения заключается в том, что его организация с выполнением прямоугольной формы мишени не является благоприятной (оптимальной) применительно к кольцевому оптическому изображению контролируемой сцены, которую формирует панорамный объектив. A disadvantage of the photodetector matrix for the television camera panoramic observation is that organization with its execution rectangular target is not favorable (optimum) with respect to the annular controllable optical image of the scene forms the panoramic lens.

Обоснованием этого утверждения служит необходимость иметь для фотоприемника высокое число элементов (пикселов) по горизонтали и вертикали, т.е. The rationale for this assertion is the need to have a high number of photodetector elements (pixels) horizontally and vertically, i.e. высокой информационной емкости видеосенсора. videosensor high information capacity. При этом значительная часть пикселов является бесполезной, т.к. A substantial portion of the pixels is useless because не несет информации о сюжете, но принудительно используется при формировании видеосигнала. It bears no information about the plot, but the force used during the formation of the video signal.

Датчик цифрового телевизионного сигнала прототипа выполнен на цветной матрице ПЗС с организацией «строчный перенос» и содержит в своем составе фотоприемник, состоящий из последовательно связанных зарядовой связью фотоприемной области, горизонтального регистра и БПЗН; The sensor prototype digital television signal is formed on a color CCD matrix organization "transfer line" and contains in its composition a photodetector, consisting of successively connected charge coupled photodetector region, the horizontal register and BPZN; генератор управляющих импульсов, состоящий из временного контроллера, первого преобразователя уровней (ПУ) и второго ПУ; control pulse generator, consisting of a temporary controller, the first level converter (PU) and a second UE; а также последовательно соединенных сигнального процессора и аналого-цифрового преобразователя (АЦП), причем управляющий вход фотоприемной области матрицы ПЗС подключен к выходу первого ПУ, управляющий вход горизонтального регистра матрицы ПЗС - к выходу второго ПУ, а выход БПЗН матрицы ПЗС - к информационному входу сигнального процессора, выход управления экспозицией 1 ( 1 Видеосигнал, формируемый в сигнальном процессоре по выходу управления экспозицией, обеспечивает управление чувствительностью телевизионной камеры за счет регулиров and a series-connected signal processing and analog-to-digital converter (ADC), wherein the control input of the photodetector area CCD is connected to the output of the first UE, the control input of the horizontal register of the CCD - the exit of the second PU and the output BPZN CCDs - a data input signal processor exposure control output 1 (one video signal generated in the signal processor according to the exposure control output, provides control of the television camera sensitivity due REGULATION ки времени накопления зарядов) которого подключен к управляющему входу временного контроллера, первый выход которого подключен к входу первого ПУ, второй выход - к входу второго ПУ, третий выход - к входу синхронизации сигнального процессора, а четвертый выход - к тактовому входу АЦП. ki charge storage time) of which is connected to the control input, the controller, a first output of which is connected to the input of the first UE, the second output - to the input of the second UE, a third output - to the input of the signal processor synchronization, and a fourth output - to the clock input of the ADC.

Задачей изобретения является оптимизация устройства компьютерной системы панорамного телевизионного наблюдения путем устранения избыточной полосы пропускания канала связи телевизионной камеры с сервером за счет использования для фотоприемника кристалла мишени в форме кругового кольца, снабженного «кольцевым» цветным мозаичным фильтром, и с организацией «кольцевого» растра изображения. The object of the invention is to optimize computer system device panoramic television observation by eliminating the excess bandwidth of the communication channel of the television camera to a server through the use of a photodetector target crystal in the form of a circular ring, provided with "annular" color mosaic filter, and organization "ring" of the image raster.

Поставленная задача в заявляемой компьютерной системе панорамного телевизионного наблюдения цветного изображения решается тем, что в устройство прототипа [1], содержащее последовательно соединенные телевизионную камеру и сервер, являющийся узлом локальной вычислительной сети, к которому подключены два или более персональных компьютеров, при этом телевизионная камера, обеспечивая развертку аналогового видеосигнала фотоприемника и формирование на выходе цифрового телевизионного сигнала, содержит последовательно расположенные и опт The objective in the inventive panoramic television observation color image computer system is achieved in that in the prototype device [1] comprising a series-connected television camera and the server, which host on the local area network to which are connected two or more personal computers, and the television camera, providing scan photodetector analog video and forming at the output of the digital television signal and comprises successive wholesale ически связанные объектив и фотоприемник на ПЗС, состоящий из последовательно связанных зарядовой связью фотоприемной области, горизонтального (выходного) регистра и БПЗН, причем на фотоприемной области линейки светочувствительных элементов чередуются с линейками экранированных от света элементов, а сама фотоприемная область накрыта мозаичным цветным фильтром, разделяющим свет на голубой, желтый, пурпурный и зеленый компоненты, в состав телевизионной камеры входит также генератор управляющих импульсов и последовательно соединенные nical associated lens and the photodetector of the CCD, consisting of serially connected charge coupled photodetector area horizontal (output) register and BPZN, wherein at photodetector field lines of light sensitive elements alternate with rulers shielded from light elements, and itself photodetector region covered by a mosaic color filter, separating light in blue, yellow, purple and green components of the television camera also includes a control pulse generator and a series-connected сигнальный процессор и АЦП, выход которого является выходом телевизионной камеры, причем первый выход генератора управляющих импульсов подключен соответственно к управляющим входам фотоприемной области, второй выход генератора управляющих импульсов - к управляющим входам выходного регистра фотоприемника, третий выход генератора управляющих импульсов - к входу синхронизации сигнального процессора, а четвертый выход генератора управляющих импульсов - к тактовому входу АЦП, выход БПЗН фотоприемника подключен к информационному входу с signal processor and the ADC, the output of which is the output of the television camera, said first generator output control pulses connected respectively to the control inputs of the photodetector region, a second generator output control pulses - to the control inputs of the output register of the photodetector, third output of the generator of control pulses - to the signal processor synchronization entry and fourth control pulses generator output - to the clock input of the ADC, the output of the photodetector BPZN connected to the data input of a игнального процессора, выход управления экспозицией которого подключен к управляющему входу генератора управляющих импульсов, в разъем расширения на материнской плате сервера установлена плата видео, согласованная по каналам ввода/ вывода, управлению и питанию с шиной сервера, содержащая БПКП, вход которого подключен к выходу блока оперативной памяти на кадр, а выход - к выходу «сеть», причем число «прямоугольных» кадров, соответствующих одному текущему «кольцевому» кадру, удовлетворяет соотношению (1), а само это преобразование выполня ignalnogo processor exposure control output of which is connected to the control input of the generator of control pulses into an expansion slot on the motherboard server installed board video, aligned on the I / O channels, control and power supply from the server bus comprising BPKP whose input is connected to the output of the operational unit of memory per frame, while the output - to the output of a "network" with the number "rectangular" frames corresponding to one current "ring" frame satisfies the relation (1), and the conversion process itself is ется программным путем, реализуются следующие изменения, а именно: фотоприемник телевизионной камеры имеет форму кругового кольца, у которого линейки светочувствительных и линейки экранированных от света элементов фотоприемной области расположены вдоль радиальных направлений от воображаемого центра кругового кольца к его внешней периферии, выходной регистр фотоприемника по форме является «кольцевым», причем число элементов в каждой «кольцевой» строке фотоприемной области равно числу элементов в его «кольцевом» регистре, мозаичный etsya programmatically implemented following changes, namely photodetector television camera has the shape of a circular ring, whose line of photosensitive ruler and shielded from light elements photodetecting area arranged along the radial directions of the circular ring imaginary center to its outer periphery, output register photodetector shape a "ring", and the number of elements in each "ring" line photodetecting region is equal to the number of elements in its "annular" register, tiled цветной фильтр, накрывающий фотоприемную область, является «кольцевым» по форме, а генератор управляющих импульсов телевизионной камеры является блоком «кольцевой» развертки видеосигнала, при этом телевизионная камера формирует не «прямоугольный», а «кольцевой» растр цветного изображения. a color filter covering the photodetecting region, a "circular" in shape, and the pulse generator control unit of the television camera is a "ring" scan video signal, the television camera generates not a "rectangular" and "ring" Raster color image.

Сопоставительный анализ с прототипом [1] показывает, что заявляемое устройство компьютерной системы панорамного телевизионного наблюдения отличается реализацией цветной телевизионной камеры, которая максимально приспособлена (оптимизирована) к оптическому изображению панорамного сюжета. Comparative analysis of the prototype [1] shows that the claimed device panoramic television monitoring computer system implementing different color television camera, which is maximally adapted (optimized) to an optical image of the panoramic scene.

По отношению к прототипу [1] заявляемая телевизионная камера отличается геометрической формой выполнения фотоприемника и его мозаичного цветного фильтра, обеспечивающего реализацию нового («кольцевого») растра цветного изображения при сохранении ПЗС-технологии изготовления сенсора и, что не менее важно, при сохранении требуемых для матрицы ПЗС (с такой информационной емкостью) сигналов управления. With respect to the prior art [1] The claimed television camera different geometrical embodiments of the photodetector and its mosaic color filter, ensuring the implementation of new ( "ring"), raster color image while maintaining producing a sensor CCD technology and, no less important, while maintaining required for CCD (with the information capacity) control signals.

Совокупность известных и новых признаков для этого устройства не известна из уровня техники, поэтому предлагаемое техническое решение соответствует критерию новизны. The set of known and new features for this device is not known from the prior art, therefore, the proposed technical solution meets the criterion of novelty.

В заявляемом решении от фотоприемника не требуется чрезмерно высокая информационная емкость, сокращается и избыточная полоса пропускания канала связи телевизионной камеры с сервером. In the disclosed solution of the photodetector does not require excessively high information capacity, is reduced and the excess bandwidth of the communication channel with the server of the television camera. Поэтому предлагаемое техническое решение соответствует критерию о наличии изобретательского уровня. Therefore, the proposed technical solution meets the criterion of the presence of inventive step.

На фиг. FIG. 1 приведена структурная схема заявляемого изобретения - компьютерной системы панорамного телевизионного наблюдения цветного изображения; 1 shows a block diagram of the claimed invention, - the computer system of panoramic surveillance television color image; на фиг. FIG. 2 приведена схемотехническая организации фотоприемника телевизионной камеры; 2 shows the circuit engineering organization photodetector television camera; на фиг. FIG. 3 показан фрагмент этого фотоприемника, иллюстрирующий подробности его конструкции; 3 shows a portion of the photodetector, illustrating details of its construction; на фиг 4, по данным [4], представлена фотография изображения, полученного при помощи отечественного панорамного зеркально-линзового объектива; Figure 4, according to [4], a photograph image obtained using the domestic panoramic catadioptric lens; на фиг. FIG. 5 приведена конструкция «кольцевого» регистра фотоприемника, у которого электроды переноса выполнены в виде части кругового кольца; 5 shows the construction of "annular" photodetector register, transfer electrodes which are formed as part of a circular ring; на фиг. FIG. 6 - предлагаемое оператору панорамное изображение текущего «кольцевого» кадра в виде последовательности из 6-ти «прямоугольных» кадров; 6 - proposed operator panoramic image current "ring" in a sequence of frames of the 6 "rectangular" frames; на фиг. FIG. 7 - возможная структурная схема для выполнения сетевого компьютерного решения с использованием заявляемого устройства. 7 - a possible block diagram for the implementation of computer network solutions using the claimed device.

Заявляемая компьютерная система панорамного телевизионного наблюдения цветного изображения, см. фиг. The inventive computer system of panoramic surveillance television color image. See FIG. 1, содержит последовательно соединенные телевизионную камеру 1 и сервер 2, являющийся узлом локальной вычислительной сети, к которому подключены два или более персональных компьютеров в позиции 3, причем телевизионная камера формирует «кольцевой» растр цветного изображения, при этом на материнской плате сервера 2 установлена плата видео, выполняющая программным путем запись «кольцевого» видеосигнала в оперативную память сервера и преобразование «кольцевых» кадров в «прямоугольные» кадры, причем число «прямоугольных» кадров, соответст 1 comprises a series-connected television camera 1 and the server 2, which is a host on the local area network to which are connected two or more personal computers in position 3, the television camera generates a "ring" Raster color image, the server motherboard 2 installed board video, executable program by recording "ring" in the video server RAM and transformation "ring" frames in "rectangular" frames, the number of "rectangular" frames Correspondingly вующих одному текущему «кольцевому» кадру, удовлетворяет соотношению (1), сама телевизионная камера 1 содержит последовательно расположенные и оптически связанные панорамный объектив 1-1 и фотоприемник 1-2, который имеет форму кругового кольца, см. фиг. vuyuschih one current "ring" frame satisfies the relation (1) itself comprises a TV camera 1 sequentially disposed and optically coupled panoramic lens 1-1 and 1-2 of the photodetector, which has a circular ring shape. See FIG. 2, у которого линейки светочувствительных и линейки экранированных от света элементов фотоприемной области 1-2-1 расположены вдоль радиальных направлений от воображаемого центра кругового кольца к его внешней периферии и расположенному там «кольцевому» регистру 1-2-2, оканчивающемуся БПЗН 1-2-3, причем число элементов в каждой «кольцевой» строке фотоприемной области равно числу элементов в «кольцевом» регистре, а фотоприемная область накрыта мозаичным цветным фильтром, являющимся «кольцевым» по форме, см. фиг. 2, in which the line light sensitive line and shielded from light photoreceiving elements 1-2-1 region are disposed along radial directions of the circular ring imaginary center to the outer periphery thereof and located there "annular" 1-2-2 register ending in BPZN 1-2 3, wherein the number of elements in each "ring" line photodetecting region is equal to the number of elements in the "annular" register and the photodetector region is covered with a mosaic color filter is "annular" shape. see FIG. 3, который разделяет световой поток, попадающий на светочувствительные элементы, соответственно на его голубой, желтый, пурпурный и зеленый компоненты; 3 which divides the light flux incident on the light-sensitive elements, respectively at its blue, yellow, purple and green components; выход БПЗН фотоприемника 1-2 подключен к информационному входу сигнального процессора 1-3, соединенному последовательно с АЦП 1-5; BPZN photodetector output 1-2 connected to the information input of the signal processor 1-3, connected in series with the ADC 1-5; выход управления экспозицией сигнального процессора 1-3 подключен к управляющему входу блока 1-4 «кольцевой» развертки видеосигнала, первый выход которого подключен к управляющим входам фотоприемной области фотоприемника 1-2, второй выход блока 1-4 - к управляющим входам «кольцевого» регистра фотоприемника 1-2, третий выход блока 1-4 - к входу синхронизации сигнального процессора 1-3, а четвертый выход блока 1-4 - к тактовому входу АЦП 1-5, выход которого является выходом телевизионной камеры. exposure control output signal processor 1-3 is connected to the control input of block 1-4 "ring" scan video signal, a first output of which is connected to the control inputs of the photodetector area photosensor 1-2, the second output unit 1-4 - to the control inputs of the "ring" of the register 1-2 photodetector, the third output of block 1-4 - to the input sync signal processor 1-3 and the fourth output block 1-4 - to the ADC clock input 1-5, whose output is the output of the television camera.

Фотоприемник 1-2, выполненный по технологии ПЗС, см. фиг. Photocell 1-2 formed by CCD technology. See FIG. 2-3, реализует «кольцевую» развертку зарядового изображения на фотоприемной области 1-2-1 с последующим поэлементным считыванием зарядов в «кольцевом» регистре 1-2-2 и формированием на выходе БПЗН 1-2-3 напряжения цветного видеосигнала в аналоговой форме. 2-3, realizes "annular" scan charge image on the photodetector area 1-2-1 followed elementwise charges read in the "annular" register 1-2-2 and forming the output BPZN 1-2-3 color video signal voltage in analog form . При этом в интервале прямого хода по кадру происходит процесс накопления зарядовых пакетов пропорционально освещенности панорамного сюжета в светочувствительных пикселах фотоприемной области 1-2-1. In this range the forward stroke of frame occurs the accumulation of charge packets proportional to the panoramic scene illuminance in the field of photosensitive pixels photodetector 1-2-1. В течение кратковременного промежутка последующего интервала обратного хода кадровой развертки открывается фотозатвор, и заряды всех «кольцевых» строк, участвовавших в накоплении, переносятся (за один шаг поворота) в экранированные от света пикселы, расположенные на той же области 1-2-1. During a short interval following interval inverse vertical deflection stroke photogate opens, and charges of "annular" rows involved in the accumulation, are transferred (for one rotation pitch) in the light shielded pixels are located at the same area 1-2-1.

Затем фотозатвор закрывается и в новом кадровом цикле на мишени выполняется накопление другой зарядовой «картины», а накопленные в предыдущем кадре зарядовые пакеты в радиальных направлениях переносятся на периферию кристалла фотоприемника, загружая в интервале обратного хода по строке новыми зарядами «кольцевой» регистр 1-2-2. Photogate then closes and a new frame cycle is performed on the target charge accumulation another "picture", and accumulated in the previous frame, charge packets are transported in radial directions to the periphery of the photodetector chip are loaded on a line retrace interval of the new charges "ring" register 1-2 -2.

Отметим, что, как и в прототипе, за объективом находится ИК-фильтр. Note that, as in the prior art, the lens is an IR filter.

Фотоприемник является единственным сенсором видеосигнала цветного изображения, в котором, благодаря применению цветного «кольцевого» фильтра, пикселы ПЗС становятся чувствительными к голубой (Cy), желтой (Ye), пурпурной (Mg) и зеленой (G) цветовым составляющим. Photocell sensor is the only color image video signal, wherein, through the use of color "ring" of the filter, CCD pixels are sensitive to blue (Cy), yellow (Ye), magenta (Mg) and green (G) color components. Конструкция этого фотоприемника представлена на фиг. The design of the photodetector shown in FIG. 3. 3.

Здесь используется известный принцип цветного телевидения, утверждающий, что для успешного восстановления цвета, помимо сигнала яркости (Y) достаточно всего двух дополнительных сигналов. This uses the known principle of color television, claims that to successfully color restoration, in addition to the luminance signal (Y) is sufficient only two additional signals. Имеются в виду сигнал цветовой разности красного (R - Υ) и сигнал цветовой разности синего (Β-Υ). This refers to the color difference signals of red (R - Υ) and the color difference signal of blue (Β-Υ).

Отметим, что именно этот принцип реализован в конструкции мозаичного фильтра для фотоприемника в широко распространенных цветных одноматричных телевизионных камерах, см., например, [3, с. Note that this principle is implemented in the design of the mosaic filter to a photodetector common television color-matrix cells. See, e.g., [3, p. 155]. 155].

В заявляемом решении для «кольцевого» ПЗС-фотоприемника используется режим накопления поля, т.е. In the disclosed solution for "annular" CCD photodetector field accumulation mode is used, i.e. длительность экспозиции для всех светочувствительных пикселов фотомишени 1-2-1 составляет 20 мс. exposure time for all pixels photosensitive fotomisheni 1-2-1 is 20 ms.

Аналогично режиму, применяемому в одноматричных цветных камерах, здесь перед считыванием в «кольцевом» регистре 1-2-2 зарядовые пакеты соседних (в радиальном направлении) пикселов фотомишени объединяются попарно, причем по-разному для последовательно считываемых нечетных и четных «кольцевых» строк формируемого изображения, как показано на фиг. Similarly regime employed in-matrix color cameras here before reading in the "annular" register 1-2-2 charge packets adjacent (radially) pixels fotomisheni combined pairwise, being different for successively read odd and even "annular" rows formed image as shown in FIG. 3. 3.

Отметим, что поскольку размер светочувствительного элемента в режиме накопления поля равен размеру двух пикселов матрицы по вертикали, это приводит к снижению вертикальной разрешающей способности цветного изображения, что вполне допустимо. Note that because the resolution of the photosensitive member in the field accumulation mode equals the size of two vertical pixels of the matrix, this reduces the vertical resolution of the color image, which is quite acceptable.

Первая строка содержит попарные отсчеты: (M g +C y ), (G+Y e ), (M g +C y ), (G+Y e ) и так далее. The first line contains the pairwise samples: (M g + C y) , (G + Y e), (M g + C y), (G + Y e) and so on.

Вторая строка: попарные отсчеты: (C y +G), (Y e +M g ), (C y +G), (Y e +M g ) и так далее. The second line: the pairwise samples: (C y + G), (Y e + M g), (C y + G), (Y e + M g) and so forth.

Очевидно, что третья и другие последующие нечетные строки будут содержать такие же попарные отсчеты, как и первая строка, а четвертая и другие последующие четные строки - такие же попарные отсчеты, как и вторая строка. It is obvious that the third and any subsequent odd-numbered lines will contain the same pairwise counts as the first line, and the fourth and any subsequent even lines - such as the pairwise counts as the second line.

Для получения яркостного сигнала для нечетных строк производится операция по аналогичному в [3, с. For the luminance signal for the odd rows is performed in the same operation [3, p. 155] алгоритму, который заключается в том, что выполняется задержка по времени на элемент разложения «кольцевого» поворота и суммирование попарных отсчетов: 155] The algorithm that is executed that the time delay element decomposition "annular" rotation and pairwise summation of samples:

Figure 00000002

Коэффициент Ѕ в формуле (2) возвращает «должок», приобретенный за счет суммирования зарядов в попарных отсчетах. ½ coefficient in the formula (2) returns "favor" acquired by summing the charges in paired samples.

Очевидно, что выражение (2) можно представить так: It is obvious that the expression (2) can be represented as follows:

Figure 00000003

Применив аналогичный алгоритм для четных строк, получим следующее выражение для яркостного сигнала: By applying the same algorithm to even rows, we obtain the following expression for the luminance signal:

Figure 00000004

Аналогично представим выражение (4) в основных цветах: Similarly represent the expression (4) in the basic colors:

Figure 00000005

Выражения (3) и (5) показывают, что яркостной сигнал для нечетных и четных строк одинаков. Expressions (3) and (5) show that the luminance signal for the odd and even lines of the same.

Для получения цветоразностного сигнала синего (BY) выполняется операция по другому алгоритму, который заключается в том, что для нечетных строк выполняется задержка по времени на элемент разложения и вычитание попарных отсчетов: To obtain the blue color difference signal (BY) operation is performed on another algorithm which is such that for odd rows is performed by time delay element decomposition and pairwise subtraction of samples:

BY=[(G+Y e )-(M g +C y )]=[(G+G+R)-(R+B+G+B)]=-[2B-G]. BY = [(G + Y e ) - (M g + C y)] = [(G + G + R) - (R + B + G + B)] = - [2B-G].

Для получения цветоразностного сигнала красного (RY) выполняется операция по алгоритму, аналогичному при получении цветоразностного сигнала синего, но применительно для четных строк: RY=[(M g +Y e )-(G+C y )]=[(R+B+G+R)-(G+G+B)]=2R-G. For the color-difference signal of red (RY) operation is performed by an algorithm similar to the preparation of chrominance blue signal, but applied to even rows: RY = [(M g + Y e) - (G + C y)] = [(R + B + G + R) - (G + G + B)] = 2R-G.

Эти два цветоразностных сигнала совместно с сигналом яркости замешиваются в сигнал CVBS в системе PAL точно так же, как это выполняется в одноматричных цветных телевизионных камерах с мозаичным фильтром. These two color difference signals are mixed together in the CVBS signal into a PAL system luminance signal in the same way as it is performed in-matrix of color television cameras with a mosaic filter. Поясним, что CVBS - аббревиатура от английских слов: «composite video bar signal», т.е. We explain that CVBS - an abbreviation of the English words: «composite video bar signal», ie полный видеосигнал. a composite video signal.

Необходимо отметить, что для «кольцевого» фотоприемника телевизионной камеры электроды переноса в фотоприемной области 1-2-1 и в «кольцевом» регистре 1-2-2, а также световые «окна» для «кольцевого» мозаичного фильтра могут быть выполнены с геометрической формой не в виде прямоугольника, а в виде части кругового кольца. It should be noted that there may be performed with the geometric for the "ring" of the television camera photodetector transfer electrodes in the photodetector area 1-2-1 and "annular" register 1-2-2 and light "window" for the "ring" mosaic filter do not form a rectangle, and a circular ring portion.

В качестве примера на фиг. As an example, FIG. 5 показана конструкция «кольцевого» регистра 1-2-2 фотоприемника с такими электродами переноса. 5 shows the structure of "annular" register 1-2-2 photodetector such transfer electrodes.

Панорамный объектив 1-1 телевизионной камеры, как и в прототипе, предназначен для формирования оптического изображения кругового обзора (кольцевого изображения). Panoramic 1-1 lens of the television camera as in the prior art for forming an optical image Omnidirection (ring images). В качестве технического решения для панорамного объектива 1-1, совпадающим с аналогичным решением для прототипа, может быть предложен панорамный зеркально-линзовый объектив, конструкция которого запатентована в России отечественными специалистами из Московского государственного университета геодезии и картографии [4]. The technical solutions for panoramic lens 1-1, which coincides with a similar solution for the prototype can be proposed panoramic catadioptric lens, the structure of which was patented in Russia domestic experts of the Moscow State University of Surveying and Mapping [4].

Фотография кольцевого изображения, формируемого панорамным объективом, представлена на фиг. Photo annular image formed panoramic lens shown in FIG. 4. Угловое поле в пространстве предметов для этого объектива составляет 360 градусов по азимуту и может достигать (75-80) градусов по углу места. 4. Angular field in the object space of this lens is 360 degrees in azimuth and can reach (75-80) degrees elevation.

Наличие пассивной (неинформативной) области в центре оптического кадра панорамного объектива подтверждает целесообразность выбора формы фотоприемников в пользу кругового кольца. The presence of passive (uninformative) area in the center of the optical lens frame panoramic confirm whether to choose the shape of photodetectors in favor of a circular ring.

Компьютерная система панорамного телевизионного наблюдения цветного изображения (см. фиг. 1) работает следующим образом. The computer system of panoramic surveillance television color image (see. FIG. 1) works as follows. Телевизионная камера 1 устанавливается в фиксированное положение, например при помощи фотоштатива (на фиг. 1 он не показан). Television camera 1 is installed in a fixed position, for example by means of a tripod (FIG. 1 is not shown).

Панорамный объектив 1-1 формирует «кольцевое» оптическое изображение наблюдаемой сцены, проецируя его на мишень 1-2-1 фотоприемника. Panoramic Lens 1-1 forms a "ring" optical image of the observed scene, projecting it onto the target 1-2-1 photodetector.

В результате фотоэлектрического и последующего аналого-цифрового преобразования видеосигнала на выходе телевизионной камеры 1 формируется цифровой телевизионный сигнал цветного изображения. As a result, photoelectric and subsequent analog-to-digital conversion of the video signal at the output of the television camera 1 is formed by a digital television color image signal.

Предположим, что текущий угол поля зрения (γ г ) предъявляемого панорамного изображения составляет 60 градусов по горизонтали, тогда «кольцевой» кадр записи включает 6 (шесть) условных областей. Assume that the current field angle (γ r) of the charge of the panoramic image is 60 degrees horizontally, then the "ring" recording frame includes six (6) conditioned areas.

Тогда оперативная память сервера 2, куда записывается панорамное цветное изображение, содержит 6-ть областей входного видеосигнала текущего «кольцевого» кадра. Then the server RAM 2 where the panoramic color image is recorded, contains 6-Th domains video input current "ring" frame.

Далее, как и в прототипе, в сервере 2 при помощи элемента БПКП, реализующего возложенные на него функции программным путем, осуществляется операция считывания видеосигнала, а в результате - конвертирование «кольцевого» кадра в обычные «прямоугольные» кадры и возможность предоставления этой информации на выходе «сеть» сервера 2. Further, as in the prior art, in the server 2 by an element BPKP implementing the functions assigned to it by software is carried out video signal read operation, and as a result - converting "ring" of the frame in the usual "rectangular" frames and the possibility of this data at the output "network" server 2.

Поэтому цифровой видеосигнал записи для каждого «кольцевого» кадра изображения преобразуется в 6 «прямоугольных» кадров, которые могут быть предложены в виде выбранной последовательности (см. фиг. 6) операторам локальной вычислительной сети. Therefore the digital video recording for each "ring" of the image frame is converted into 6 "rectangular" frames, which can be provided as a selected sequence (see. FIG. 6), the operators of the local area network.

Будем считать, что в качестве персональных компьютеров 3, образующих эту сеть, использованы ноутбуки, содержащие в своем составе материнскую плату с установленными на ней процессором и оперативной памятью, а также жесткий диск, дисплей, клавиатуру и тачпад. We assume that as a personal computer 3, forming the network, used laptops, containing in its composition the motherboard with it installed processor and memory, and hard drive, display, keyboard, and touchpad.

Заметим, что тачпад может быть использован как единственное указательное устройство, используемое вместо манипулятора «мышь», или дополнительно к этому прибору. Note that the touchpad can be used as a single pointing device is used instead of the manipulator "mouse", or in addition to this device.

Оператор каждого ноутбука 3 может осуществить селекцию предлагаемого сервером 2 изображения и его вывод на экран дисплея. each laptop operator 3 can perform the selection of the proposed image server 2, and display it on the display screen.

Дополнительным результатом заявляемого решения компьютерной системы панорамного телевизионного наблюдения цветного изображения можно считать и возможность создания на ее основе сложных компьютерных систем за счет успешного вписывания, как в локальную вычислительную сеть, так и в глобальную сеть Интернет. An additional result of the claimed solution of the computer system of television observation panoramic color image can be read and the ability to create on its basis of sophisticated computer systems through successful fitting in as a local area network, and the global Internet.

Пример структурной схемы по организации такой системы представлен на фиг. EXAMPLE block diagram of the organization of such a system is shown in FIG. 7. Стрелки на линиях связи этой схемы иллюстрируют передачу сигнала изображения. 7. Arrows on communication lines illustrate the transmission scheme of the image signal.

Здесь компьютер 4 оператора дополнительно выполняет функции сервера. Here, the computer 4 operator further performs server functions. Благодаря использованию в данной системе маршрутизатора 5, информация, хранящаяся на сервере, становится доступной любому другому пользователю компьютера в локальной сети, например компьютеру 7. Through the use of this system, the router 5, the information stored on the server, it becomes available to any other user of the computer on the local network, such as a computer 7.

Модем 6 позволяет предоставить видеоинформацию и по сети Интернет, т.е. Modem 6 allows us to provide video and the Internet, ie, она может поступить на компьютер удаленного пользователя, например на компьютер 8. it can enter the remote user's computer, such as a computer 8.

В настоящее время все элементы структурной схемы компьютерной системы панорамного телевизионного наблюдения цветного изображения освоены или могут быть освоены отечественной промышленностью. Currently, all elements of the block diagram of the computer system of panoramic surveillance television color image can be utilized or utilized domestic industry.

Поэтому следует считать предлагаемое изобретение соответствующим требованию о промышленной применимости. Therefore, the invention should be considered as relevant requirement of industrial applicability.

ИСТОЧНИКИ ИНФОРМАЦИИ INFORMATION SOURCES

1. Патент РФ №2371880. 1. RF Patent №2371880. МПК H04N 7/00. IPC H04N 7/00. Способ панорамного телевизионного наблюдения и устройство для его осуществления. A method of panoramic television monitoring and device for its implementation. / В.М. / VM Смелков // Б.И. Smelkov // BI - 2009. - №30. - 2009. - №30.

2. Секен К., Томпсет М. Приборы с переносом заряда. 2. Seken K., M. Tompset devices with charge transfer. Перевод с англ. Translated from English. - М.: «Мир», 1985. - M .: "Mir" 1985.

3. Владо Дамьяновски. 3. Vlado Damjanovski. СТУ. STU. Библия видеонаблюдения, Цифровые и сетевые технологии. Bible video, digital and network technologies. / Перевод с англ. / Translated from English. М.: ООО «Ай-Эс-Эс Пресс», 2006. M .: OOO "Hay Es-Es-Press", 2006.

4. Патент РФ №2185645. 4. RF patent №2185645. МПК G02B 13/06, G02B 17/08. IPC G02B 13/06, G02B 17/08. Панорамный зеркально-линзовый объектив. Panoramic catadioptric lens. / А.В. / AV Куртов, В.А. Kurts, VA Соломатин // Б.И. Solomatin // BI - 2002. - №20. - 2002. - №20.

Claims (3)

  1. 1. Компьютерная система панорамного телевизионного наблюдения цветного изображения, содержащая последовательно соединенные телевизионную камеру и сервер, являющийся узлом локальной вычислительной сети, к которому подключены два или более персональных компьютеров, при этом телевизионная камера, обеспечивая развертку аналогового видеосигнала фотоприемника и формирование на выходе цифрового телевизионного сигнала, содержит последовательно расположенные и оптически связанные объектив и фотоприемник, выполненный на основе технологи 1. The computer system of panoramic surveillance television color image, comprising connected in series a television camera and the server being a node of the local area network to which are connected two or more personal computers, and the television camera providing a video signal of the photodetector analog scan and forming the output digital television signal It comprises sequentially disposed and optically coupled with the lens and the photodetector, formed on the basis of technology приборов с зарядовой связью (ПЗС), и состоящий из последовательно связанных зарядовой связью фотоприемной области, горизонтального (выходного) регистра и преобразователя «заряд -напряжение» (БПЗН), причем на фотоприемной области линейки светочувствительных элементов чередуются с линейками экранированных от света элементов, а сама фотоприемная область накрыта мозаичным цветным фильтром, разделяющим свет на голубой, желтый, пурпурный и зеленый компоненты, в состав телевизионной камеры входит также генератор управляющих импульсов и пос charge-coupled devices (CCD), and consisting of a series connected charge coupled photodetector area horizontal (output) register and transmitter "charge -voltage" (BPZN), the photodetector on the field lines of light sensitive elements alternate with rulers shielded from light elements, and The photodetector region itself is covered by a mosaic color filter separating light in blue, yellow, purple and green components of the television camera also includes a generator of control pulses and pos ледовательно соединенные сигнальный процессор и аналого-цифровой преобразователь (АЦП), выход которого является выходом телевизионной камеры, причем первый выход генератора управляющих импульсов подключен соответственно к управляющим входам фотоприемной области, второй выход генератора управляющих импульсов - к управляющим входам выходного регистра фотоприемника, третий выход генератора управляющих импульсов - к входу синхронизации сигнального процессора, четвертый выход генератора управляющих импульсов - к тактовому входу АЦП, ин been consistent connected to a signal processor and analog-to-digital converter (ADC), whose output is the output of the television camera, said first generator output control pulses connected respectively to the control inputs of the photodetector region, a second generator output control pulses - to the control inputs of the output register of the photodetector, the third output of the generator control pulses - to the input synchronization signal processor, a fourth generator control pulses output - to the clock input of the ADC, yn формационный вход сигнального процессора подключен к выходу БПЗН фотоприемника, а выход управления экспозицией сигнального процессора - к управляющему входу генератора управляющих импульсов, в разъем расширения на материнской плате сервера установлена плата видео, согласованная по каналам ввода/вывода, управлению и питанию с шиной сервера, содержащая блок преобразования «кольцевого» кадра в «прямоугольные» кадры (БПКП), вход которого подключен к выходу блока оперативной памяти на кадр, а выход - к выходу «сеть», причем число «прямоугол formational input signal processor connected to the output BPZN photodetector, and the output of the exposure signal processor control - to the control input of the generator of control pulses in an expansion slot on the server motherboard installed video board, aligned on the I / O channels, control and power supply from the server bus, comprising: a frame conversion unit "ring" in the "rectangular" frames (BPKP) having an input connected to the output of memory block per frame, while the output - to the output of a "network" with the number "rectangular ьных» кадров, соответствующих одному текущему «кольцевому» кадру, удовлетворяет соотношению: nyh "frames corresponding to one current" ring "frame, satisfies the relationship:
    Figure 00000006

    где γ г - горизонтальный угол поля зрения в градусах наблюдаемого оператором изображения, а само это преобразование выполняется программным путем, отличающаяся тем, что телевизионная камера формирует «кольцевой» растр цветного изображения, при этом фотоприемник телевизионной камеры имеет форму кругового кольца, у которого линейки светочувствительных и линейки экранированных от света элементов фотоприемной области расположены вдоль радиальных направлений от воображаемого центра кругового кольца к его внешней периферии, выходной рег where γ r - a horizontal field angle in degrees of the observed image by the operator, and this very conversion is performed by software, characterized in that the television camera generates a "ring" Raster color image, the photodetector television camera has the shape of a circular ring, whose light-sensitive line line and shielded from light photodetector area elements are arranged along radial directions from an imaginary center of the circular ring to the outer periphery thereof, the output reg истр фотоприемника по форме является «кольцевым», причем число элементов в каждой «кольцевой» строке фотоприемной области равно числу элементов в его «кольцевом» регистре, мозаичный цветной фильтр, накрывающий фотоприемную область, является «кольцевым» по форме, а генератор управляющих импульсов телевизионной камеры является блоком «кольцевой» развертки видеосигнала. ISTR photodetector in the form a "ring", and the number of elements in each "ring" line photodetecting region is equal to the number of elements in its "annular" register, a mosaic color filter, covering the photodetecting region, a "circular" in shape, and control pulses generator television the camera unit is "annular" scan video signal.
  2. 2. Компьютерная система панорамного телевизионного наблюдения по п. 1, отличающаяся тем, что электроды переноса фотоприемной области и «кольцевого» регистра, а также световые «окна» у «кольцевого» мозаичного фильтра для фотоприемника телевизионной камеры выполнены с геометрической формой в виде части кругового кольца. 2. The computer system of panoramic surveillance television according to Claim. 1, characterized in that the transfer electrodes photodetecting region and "ring" of the register, and the light "window" at the "annular" mosaic filter for a television camera of the photodetector formed with a geometric shape in the form of a circular portion rings.
  3. 3. Компьютерная система панорамного телевизионного наблюдения по п. 1, отличающаяся тем, что компьютер оператора является сервером для компьютера местного пользователя в локальной сети и для компьютера удаленного пользователя в сети Интернет. 3. The computer system of television observation panorama of claim. 1, wherein the computer is a server operator for the local user's computer in a local network and the remote user's computer over the Internet.
RU2014138256A 2014-09-22 2014-09-22 Computer system for panoramic colour image television surveillance RU2570348C1 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
RU2014138256A RU2570348C1 (en) 2014-09-22 2014-09-22 Computer system for panoramic colour image television surveillance

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
RU2014138256A RU2570348C1 (en) 2014-09-22 2014-09-22 Computer system for panoramic colour image television surveillance

Publications (1)

Publication Number Publication Date
RU2570348C1 true RU2570348C1 (en) 2015-12-10

Family

ID=54846560

Family Applications (1)

Application Number Title Priority Date Filing Date
RU2014138256A RU2570348C1 (en) 2014-09-22 2014-09-22 Computer system for panoramic colour image television surveillance

Country Status (1)

Country Link
RU (1) RU2570348C1 (en)

Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US5920337A (en) * 1994-12-27 1999-07-06 Siemens Corporate Research, Inc. Omnidirectional visual image detector and processor
US6304285B1 (en) * 1998-06-16 2001-10-16 Zheng Jason Geng Method and apparatus for omnidirectional imaging
US7301557B2 (en) * 2002-02-28 2007-11-27 Sharp Kabushiki Kaisha Composite camera system, zoom camera image display control method, zoom camera control method, control program, and computer readable recording medium
US7336299B2 (en) * 2003-07-03 2008-02-26 Physical Optics Corporation Panoramic video system with real-time distortion-free imaging
RU2371880C1 (en) * 2008-04-04 2009-10-27 Вячеслав Михайлович Смелков Panoramic video surveillance method and device for implementing thereof
RU2490715C1 (en) * 2010-12-03 2013-08-20 Кэнон Кабусики Кайся Image capturing device

Patent Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US5920337A (en) * 1994-12-27 1999-07-06 Siemens Corporate Research, Inc. Omnidirectional visual image detector and processor
US6304285B1 (en) * 1998-06-16 2001-10-16 Zheng Jason Geng Method and apparatus for omnidirectional imaging
US7301557B2 (en) * 2002-02-28 2007-11-27 Sharp Kabushiki Kaisha Composite camera system, zoom camera image display control method, zoom camera control method, control program, and computer readable recording medium
US7336299B2 (en) * 2003-07-03 2008-02-26 Physical Optics Corporation Panoramic video system with real-time distortion-free imaging
RU2371880C1 (en) * 2008-04-04 2009-10-27 Вячеслав Михайлович Смелков Panoramic video surveillance method and device for implementing thereof
RU2490715C1 (en) * 2010-12-03 2013-08-20 Кэнон Кабусики Кайся Image capturing device

Similar Documents

Publication Publication Date Title
Yadid-Pecht et al. Wide intrascene dynamic range CMOS APS using dual sampling
US20050151866A1 (en) Wide dynamic range operations for imaging
US6133953A (en) Color camera having a single imaging element and capable of restricting unwanted false color signal
US20090195681A1 (en) Sampling and Readout of an Image Sensor Having a Sparse Color Filter Array Pattern
US20090046189A1 (en) Method and apparatus providing shared pixel straight gate architecture
US20050128509A1 (en) Image creating method and imaging device
US20100309351A1 (en) Image sensors and color filter arrays for charge summing and interlaced readout modes
JP2010268264A (en) Imaging element and imaging apparatus
US20100128137A1 (en) Extended depth of field for image sensor
US20120189293A1 (en) Imaging devices having arrays of image sensors and lenses with multiple aperture sizes
US20060017829A1 (en) Rod and cone response sensor
WO2012057621A1 (en) System and method for imaging using multi aperture camera
US20130135486A1 (en) High dynamic range imaging with multi-storage pixels
US20080239111A1 (en) Method and appratus for dark current compensation of imaging sensors
US20080129834A1 (en) Simultaneous global shutter and correlated double sampling read out in multiple photosensor pixels
US20130070109A1 (en) Imaging system with foveated imaging capabilites
US7469059B1 (en) Reorganization of raw image data for processing
JP2001069519A (en) Solid-state image pickup device
US20080012953A1 (en) Image Sensors
US20140263951A1 (en) Image sensor with flexible pixel summing
US7218260B2 (en) Column analog-to-digital converter of a CMOS image sensor for preventing a sun black effect
US20080259180A1 (en) Methods, systems and apparatuses for high-quality green imbalance compensation in images
US20140078368A1 (en) Triple conversion gain image sensor pixels
US20100066849A1 (en) Adaptive binning method and apparatus
JP2006157600A (en) Digital camera