RU2656377C1 - Method for forming a video signal in "ring" photodetector and server for panoramic surveillance computer system in conditions of complex illumination and/or complex brightness of objects - Google Patents

Method for forming a video signal in "ring" photodetector and server for panoramic surveillance computer system in conditions of complex illumination and/or complex brightness of objects Download PDF

Info

Publication number
RU2656377C1
RU2656377C1 RU2017130794A RU2017130794A RU2656377C1 RU 2656377 C1 RU2656377 C1 RU 2656377C1 RU 2017130794 A RU2017130794 A RU 2017130794A RU 2017130794 A RU2017130794 A RU 2017130794A RU 2656377 C1 RU2656377 C1 RU 2656377C1
Authority
RU
Russia
Prior art keywords
ring
frame
rectangular
photodetector
server
Prior art date
Application number
RU2017130794A
Other languages
Russian (ru)
Inventor
Вячеслав Михайлович Смелков
Original Assignee
Вячеслав Михайлович Смелков
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Вячеслав Михайлович Смелков filed Critical Вячеслав Михайлович Смелков
Priority to RU2017130794A priority Critical patent/RU2656377C1/en
Application granted granted Critical
Publication of RU2656377C1 publication Critical patent/RU2656377C1/en

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00Television systems

Abstract

FIELD: optoelectronic surveillance system.
SUBSTANCE: invention relates to television and computer technology and is oriented to the use in panoramic surveillance television cameras, which are based on "ring" television sensors using charge-coupled device (CCD) technology and are designed to work in conditions, when objects of control differ significantly from each other in terms of illumination and/or brightness. Result is achieved by the fact that the cameras provide simultaneously a surround-view of the situation in a region close to the hemisphere, i.e. in a spatial angle of 360 degrees in azimuth and tens of degrees in the elevation angle, in the television camera, the control voltage value for automatic regulation of accumulation time and arrester drive motor is sampled in the current "ring" frame, within one of the n areas of the "ring" target of the photodetector, wherein the area of this region coincides with a section on the target occupied by the corresponding "rectangular" frame, sampling control voltage for n "ring" frames of the analog video signal sequentially (one by one) in a cyclic mode, wherein the current digital "ring" image frames in the server are recorded separately in the first, second, … (n-1)th and nth operational memory of the server, from which one qualitative record of the "rectangular" frame is read, namely: from the first memory – first "rectangular" frame, from the second memory – second "rectangular" frame, … from the (n-1)th memory of the (n-1)th "rectangular" frame, and from the nth memory – nth "rectangular" frame.
EFFECT: technical result is automatic increase in the sensitivity of these separate "rectangular" frames recorded at low illumination (brightness) of the corresponding fragments of the panoramic image, by increasing the accumulation time of the photodetector and television camera video path gain factor for them.
1 cl, 7 dwg, 1 tbl

Description

Предлагаемое изобретение на способ относится к телевизионно-компьютерной технике и ориентировано на использование в телевизионных камерах панорамного наблюдения, которые выполнены на базе «кольцевых» телевизионных сенсоров по технологии приборов с зарядовой связью (ПЗС) и предназначены для работы в условиях, когда объекты контроля существенно различаются друг от друга по освещенности и/или яркости. Эти камеры осуществляют одновременно круговой обзор обстановки в области, близкой к полусфере, т.е. в пространственном угле 360 градусов по азимуту и десятки градусов по углу места.The present invention relates to a method for television and computer technology and is focused on the use of panoramic cameras in television cameras, which are made on the basis of "ring" television sensors using charge-coupled device (CCD) technology and are designed to operate in conditions where the objects of control differ significantly from each other in terms of illumination and / or brightness. These cameras simultaneously perform a circular overview of the situation in the region close to the hemisphere, i.e. in a spatial angle of 360 degrees in azimuth and tens of degrees in elevation.

Наиболее близким по технической сущности к заявляемому изобретению следует считать способ формирования видеосигнала в «кольцевом» фотоприемнике и сервере для компьютерной системы панорамного наблюдения [1], заключающийся в том, что устанавливают телевизионную камеру в фиксированное положение, осуществляют захват оптического изображения в телевизионной камере с угловым полем в пространстве предметов 360° по азимуту, в «кольцевом» фотоприемнике телевизионной камеры, выполненном по технологии приборов с зарядовой связью (ПЗС), который имеет кристалл в виде кругового кольца и содержит в его пределах «кольцевую» фотоприемную область (мишень), «кольцевой» регистр сдвига, заканчивающийся блоком преобразования «заряд - напряжение» (БПЗН), при этом на фотоприемной области линейки светочувствительных элементов, чередующиеся с линейками экранированных от света элементов, расположены вдоль радиальных направлений от воображаемого центра кругового кольца к его внешней периферии и расположенному там «кольцевому» регистру сдвига, а число элементов в каждой «кольцевой» строке фотоприемной области равно числу элементов в «кольцевом» регистре сдвига, причем площадь светочувствительных и экранированных элементов на фотоприемной области одинакова по величине в каждой «кольцевой» строке и от строки к строке по мере движения к внешней периферии фотоприемника, накапливают зарядовое изображение информационного кадра на светочувствительных элементах мишени в соответствии с управляющим напряжением для автоматической регулировки времени накопления (АРВН) фотоприемника, причем отсчет величины управляющего напряжения выполняют в пределах всей мишени, осуществляют «кольцевую» развертку зарядового изображения на мишени с последующим поэлементным считыванием зарядовых пакетов в «кольцевом» регистре сдвига и формированием на выходе БПЗН напряжения аналогового сигнала изображения наблюдаемого пространства, регулируют коэффициент усиления видеотракта для аналогового видеосигнала в соответствии с управляющим напряжением автоматической регулировки усиления (АРУ), используя тот же отсчет величины управляющего напряжения, что и для АРВН, преобразуют аналоговый видеосигнал в цифровой видеосигнал, передают видеосигнал «кольцевого» кадра телевизионной камеры по интерфейсу в сервер, при этом в сервере «кольцевое» телевизионное изображение преобразуют в обычное («прямоугольное») изображение, причем один текущий «кольцевой» кадр считывают из памяти сервера при помощи n «прямоугольных» кадров, число которых удовлетворяет соотношению:The closest in technical essence to the claimed invention should be considered a method of generating a video signal in a "ring" photodetector and server for a panoramic panoramic computer system [1], which consists in installing the television camera in a fixed position, capturing an optical image in a television camera with an angular field in the space of objects 360 ° in azimuth, in the "ring" photodetector of a television camera made by the technology of charge-coupled devices (CCD), which it has a crystal in the form of a circular ring and contains within it a “ring” photodetector region (target), a “ring” shift register ending in a charge-voltage conversion unit (BPS), while on the photodetector region of a line of photosensitive elements, alternating with rulers elements shielded from light are located along radial directions from the imaginary center of the circular ring to its outer periphery and the “ring” shift register located there, and the number of elements in each “ring” line is f the receiving region is equal to the number of elements in the “ring” shift register, and the area of the photosensitive and shielded elements on the photodetector region is the same in size in each “ring” line and from line to line as they move to the outer periphery of the photodetector, the charge image of the information frame is accumulated on the photosensitive elements of the target in accordance with the control voltage for automatic adjustment of the accumulation time (ARVN) of the photodetector, and the counting value of the control voltage The signals are performed within the entire target, a “ring” sweep of the charge image on the target is carried out, followed by element-wise reading of the charge packets in the “ring” shift register and the formation of the voltage of the analog image signal of the observed space at the output of the SPS, adjust the video path gain for the analog video signal in accordance with the control voltage of the automatic gain control (AGC), using the same reference value of the control voltage as for the ARVN, convert they feed the analog video signal into a digital video signal, transmit the video signal of the “ring” frame of the television camera via the interface to the server, while in the server the “ring” television image is converted into a regular (“rectangular”) image, and one current “ring” frame is read from the server’s memory using n "rectangular" frames, the number of which satisfies the ratio:

Figure 00000001
Figure 00000001

где γг - горизонтальный угол поля зрения в градусах наблюдаемого оператором изображения.where γ g is the horizontal angle of the field of view in degrees observed by the operator of the image.

Недостаток способа формирования видеосигнала в прототипе - ограниченная чувствительность отдельных «прямоугольных» кадров, регистрируемых при низкой освещенности (яркости) соответствующих фрагментов панорамного изображения.The disadvantage of the method of generating a video signal in the prototype is the limited sensitivity of individual "rectangular" frames recorded at low light (brightness) of the corresponding fragments of the panoramic image.

Задачей изобретения является организация в автоматическом режиме повышения чувствительности этих отдельных «прямоугольных кадров, регистрируемых при низкой освещенности (яркости) соответствующих фрагментов панорамного изображения, путем увеличения для них времени накопления фотоприемника и коэффициента усиления видеотракта телевизионной камеры.The objective of the invention is the organization in the automatic mode of increasing the sensitivity of these individual "rectangular frames recorded at low light (brightness) of the corresponding fragments of the panoramic image by increasing the accumulation time of the photodetector and the gain of the video path of the television camera.

Поставленная задача в заявляемом способе формирования видеосигнала в «кольцевом» фотоприемнике и сервере для компьютерной системы панорамного наблюдения решается тем, что устанавливают телевизионную камеру в фиксированное положение, осуществляют захват оптического изображения в телевизионной камере с угловым полем в пространстве предметов 360° по азимуту, в «кольцевом» фотоприемнике телевизионной камеры, выполненном по технологии ПЗС, который имеет кристалл в виде кругового кольца и содержит в его пределах «кольцевую» мишень, «кольцевой» регистр сдвига, заканчивающийся БПЗН, при этом на мишени линейки светочувствительных элементов, чередующиеся с линейками экранированных от света элементов, расположены вдоль радиальных направлений от воображаемого центра кругового кольца к его внешней периферии и расположенному там «кольцевому» регистру сдвига, а число элементов в каждой «кольцевой» строке мишени равно числу элементов в «кольцевом» регистре сдвига, причем площадь светочувствительных и экранированных элементов на мишени одинакова по величине в каждой «кольцевой» строке и от строки к строке по мере движения к внешней периферии фотоприемника, накапливают зарядовое изображение информационного кадра на светочувствительных элементах мишени в соответствии с управляющим напряжением для АРВН фотоприемника, осуществляют «кольцевую» развертку зарядового изображения на мишени с последующим поэлементным считыванием зарядовых пакетов в «кольцевом» регистре сдвига и формированием на выходе БПЗН напряжения аналогового сигнала изображения наблюдаемого пространства, регулируют коэффициент усиления видеотракта для аналогового видеосигнала в соответствии с управляющим напряжением АРУ, используя тот же отсчет величины управляющего напряжения, что и для АРВН, преобразуют аналоговый видеосигнал в цифровой видеосигнал, передают видеосигнал «кольцевого» кадра телевизионной камеры по интерфейсу в сервер, при этом в сервере «кольцевое» телевизионное изображение преобразуют в обычное изображение, причем один текущий «кольцевой» кадр считывают из памяти сервера при помощи n «прямоугольных» кадров, число которых удовлетворяет соотношению (1), отличающийся тем, что в телевизионной камере отсчет величины управляющего напряжения для АРВН и АРУ выполняют в текущем «кольцевом» кадре, в пределах одной из n областей «кольцевой» мишени фотоприемника, причем площадь этой области совпадает с участком на мишени, занимаемым соответствующим «прямоугольным» кадром, осуществляя отсчеты управляющего напряжения для n «кольцевых» кадров аналогового видеосигнала последовательно (один за одним) в циклическом режиме, при этом запись текущих цифровых «кольцевых» кадров изображения в сервере выполняют раздельно в первую, вторую, … (n- 1)-ю и n-ю оперативные памяти сервера, из которых считывают по одной качественной записи «прямоугольного» кадра, а именно: из первой памяти - первого «прямоугольного» кадра, из второй памяти - второго «прямоугольного» кадра, … из (n- 1)-й памяти - (n- 1)-го «прямоугольного» кадра, а из n-й памяти - n-го «прямоугольного» кадра.The problem in the inventive method of generating a video signal in a “ring” photodetector and server for a panoramic panoramic computer system is solved by installing a television camera in a fixed position, capturing an optical image in a television camera with an angular field in the space of objects 360 ° in azimuth, in ring "photodetector of a television camera made by CCD technology, which has a crystal in the form of a circular ring and contains within it a" ring "target," ring “shift” register, ending with OVL, with the lines of photosensitive elements alternating with the lines of light-shielded elements on the target located along radial directions from the imaginary center of the circular ring to its outer periphery and the “ring” shift register located there, and the number of elements in each “ring” line of the target is equal to the number of elements in the “ring” shift register, and the area of photosensitive and shielded elements on the target is the same in size in each “ring howling ”to the line and from line to line as it moves to the outer periphery of the photodetector, accumulate the charge image of the information frame on the photosensitive elements of the target in accordance with the control voltage for the ARVN of the photodetector, carry out a“ ring ”scan of the charge image on the target, followed by element-wise reading of the charge packets into The “circular” shift register and the formation of the voltage of the analog image signal of the observed space at the output of the SPSZ regulate the gain I video path for an analog video signal in accordance with the control voltage of the AGC, using the same control voltage reading as for the ARVN, convert the analog video signal to a digital video signal, transmit the video signal of the "ring" frame of the television camera via the interface to the server, while in the server a ring "television image is converted into a conventional image, and one current" ring "frame is read from the server's memory using n" rectangular "frames, the number of which satisfies the ratio (1), characterized in that in the television camera, the control voltage for the ARVN and AGC is counted in the current "ring" frame, within one of the n regions of the "ring" target of the photodetector, and the area of this region coincides with the area on the target, occupied by the corresponding "rectangular" frame, performing control voltage samples for n "ring" frames of the analog video signal sequentially (one by one) in a cyclic mode, while recording the current digital "ring" image frames in gray Here are executed separately in the first, second, ... (n-1) and n-th random-access memory of the server, from which one high-quality record of a "rectangular" frame is read, namely: from the first memory - the first "rectangular" frame, from the second memory - the second "rectangular" frame, ... from the (n-1) -th memory - the (n-1) -th "rectangular" frame, and from the n-th memory - the n-th "rectangular" frame.

Совокупность известных и новых признаков для заявляемого способа не известна из уровня техники, следовательно, предлагаемое техническое решение соответствует критерию новизны.The combination of known and new features for the proposed method is not known from the prior art, therefore, the proposed technical solution meets the criterion of novelty.

Согласно заявляемому способу повышение чувствительности отдельных «прямоугольных» кадров видеосигнала выполняется применительно к «кольцевому» фотоприемнику, а реализуется в полностью автоматическом режиме.According to the claimed method, increasing the sensitivity of individual "rectangular" frames of the video signal is performed in relation to the "ring" photodetector, and is implemented in a fully automatic mode.

Поэтому данное техническое решение соответствует критерию о наличии изобретательского уровня.Therefore, this technical solution meets the criterion of the presence of an inventive step.

На фиг. 1 приведена структурная схема компьютерной системы панорамного телевизионного наблюдения, реализующей заявляемый способ формирования видеосигнала в «кольцевом» фотоприемнике; на фиг. 2 - схемотехническая организация «кольцевого» фотоприемника на ПЗС; на фиг. 3 - структурная этой телевизионной камеры из состава компьютерной системы панорамного телевизионного наблюдения; на фиг. 4, по данным [2], представлена фотография изображения, полученного при помощи отечественного панорамного зеркально-линзового объектива; на фиг. 5 показано положение областей фотометрирования зарядового рельефа для шести формируемых «прямоугольных» кадров (n = 6) на мишени «кольцевого» фотоприемника в условиях ее сложной освещенности и/или яркости; на фиг. 6б-6ж относительно временного положения гасящего импульса строк, показанного на фиг. 6а, приведены эпюры управляющих сигналов для получения необходимых «окон» фотометрирования; на фиг. 7 - функциональная схема, поясняющая организацию в телевизионной камере этого процесса фотометрирования для АРВН.In FIG. 1 shows a structural diagram of a computer system for panoramic television surveillance that implements the inventive method of generating a video signal in a "ring" photodetector; in FIG. 2 - circuitry organization of the "ring" photodetector at the CCD; in FIG. 3 - structural of this television camera from the computer system of panoramic television surveillance; in FIG. 4, according to [2], a photograph of an image obtained using a domestic panoramic mirror-lens lens is presented; in FIG. 5 shows the position of the regions of photometry of the charge relief for six formed "rectangular" frames (n = 6) on the target of the "ring" photodetector under conditions of its complex illumination and / or brightness; in FIG. 6b-6g with respect to the temporary position of the blanking pulse of the rows shown in FIG. 6a shows diagrams of control signals for obtaining the necessary “windows” of photometrics; in FIG. 7 is a functional diagram explaining the organization in a television camera of this photometric process for ARVN.

Устройство на фиг. 1 содержит телевизионную камеру 1, сервер 2, а также два и более персональных компьютеров пользователя в позиции 3.The device of FIG. 1 contains a television camera 1, server 2, as well as two or more personal computers of the user in position 3.

Телевизионная камера 1 (см. фиг. 3), как и для прототипа [1], состоит из последовательно расположенных и оптически связанных панорамного объектива 1-1 твердотельного фотоприемника 1-2 и блока 1-3 «кольцевой» развертки фотоприемника и формирования цифрового телевизионного сигнала.The television camera 1 (see Fig. 3), as for the prototype [1], consists of sequentially located and optically coupled panoramic lens 1-1 of the solid state photodetector 1-2 and block 1-3 of the “ring” scan of the photodetector and the formation of a digital television signal.

Блок 1-3 телевизионной камеры содержит временной контроллер 1-3-1, сигнальный процессор 1-3-2, первый преобразователь уровней (ПУ) 1-3-3, второй ПУ 1-3-4, а также аналого-цифровой преобразователь (АЦП) 1-3-5, выход которого является выходом телевизионной камеры (выходом ЦТС), и счетчик 1-3-6 на n.Unit 1-3 of the television camera contains a time controller 1-3-1, a signal processor 1-3-2, a first level converter (PU) 1-3-3, a second PU 1-3-4, as well as an analog-to-digital converter ( ADC) 1-3-5, the output of which is the output of the television camera (the output of the DSP), and the counter 1-3-6 to n.

На временной контроллер 1-3-1 от счетчика 1-3-6 подается код команды управления. Этот код определяет выбранную область фотометрирования мишени «кольцевого» сенсора 1-2 - «окно», в пределах которого выполняется оценка зарядового рельефа при помощи АРВН. и АРУ применительно к формируемым в сервере 2 «прямоугольным» кадрам. Допустим, что число этих «прямоугольных» кадров, запрограммированное в сервере 2, равно шести, т.е. n = 6. Тогда двоичный код команды управления должен иметь три разряда. Счетчик 1-3-6 на шесть может быть выполнен по схеме синхронного трехразрядного счетчика [см, например, 3, с. 168-170], а определяемые им режимы представлены в табл., которые дополнительно иллюстрируются фиг. 5-6.A control command code is supplied to the temporary controller 1-3-1 from the counter 1-3-6. This code defines the selected photometric region of the target of the “ring” sensor 1-2 - the “window”, within which the charge relief is estimated using the ARVN. and AGC as applied to 2 “rectangular” frames formed in the server. Suppose that the number of these "rectangular" frames programmed in server 2 is six, i.e. n = 6. Then the binary code of the control command must have three digits. The counter 1-3-6 for six can be performed according to the scheme of a synchronous three-digit counter [see, for example, 3, p. 168-170], and the modes determined by him are presented in the table, which are additionally illustrated in FIG. 5-6.

Figure 00000002
Figure 00000002

Как и в работе [3], схема трехразрядного счетчика 1-3-6 может быть спроектирована на базе трех JK-триггерах: первый триггер является разрядом единиц, второй триггер - разрядом двоек, а третий триггер - разрядом четверок. Но модуль счетчика 1-3-6 составляет не восемь, а шесть.As in [3], the three-digit counter circuit 1-3-6 can be designed on the basis of three JK-triggers: the first trigger is a discharge of units, the second trigger is a discharge of twos, and the third trigger is a discharge of fours. But the counter module 1-3-6 is not eight, but six.

Период тактовых импульсов, подаваемых на вход счетчика 1-3-6, равен 1/6 периода строчных импульсов.The period of clock pulses supplied to the input of the counter 1-3-6 is 1/6 of the period of horizontal pulses.

Выход разряда единиц обозначен как выход «А» счетчика, выход разряда двоек - как выход «В» счетчика, а выход разряда четверок - как выход «С» счетчика.The output of the discharge of units is designated as the output "A" of the counter, the output of the discharge of twos - as the output "B" of the counter, and the output of the discharge of fours - as the output "C" of the counter.

С использованием сигналов «А», «В» и «С» во временном контроллере 1-3-1 будут сформированы управляющие сигналы, необходимые для получения в телевизионной камере необходимых «окон» фотометрирования, см. фиг. 6б-6ж, создаваемых по алгоритму: одно новое «окно» в текущем «кольцевом» кадре фотоприемника.Using the signals “A”, “B” and “C” in the temporary controller 1-3-1, the control signals necessary to obtain the necessary “windows” of photometry in the television camera will be generated, see FIG. 6b-6zh, created by the algorithm: one new “window” in the current “ring” frame of the photodetector.

Организация фотоприемника 1-2 (см. фиг. 2) с мишенью в виде кругового кольца, как и в прототипе [1], реализована по технологии ПЗС.The organization of the photodetector 1-2 (see Fig. 2) with the target in the form of a circular ring, as in the prototype [1], is implemented using CCD technology.

Она содержит на общем кристалле фотоприемную область 1-2-1, в которой чередуются радиально расположенные (от воображаемого геометрического центра кольца) линейки светочувствительных элементов и линейки элементов, экранированных от света (здесь они не показаны), а также «кольцевой» регистр сдвига 1-2-2 и БПЗН 1-2-3, причем число элементов в каждой «кольцевой» строке фотоприемной области 1-2-1 равно числу элементов в «кольцевом» регистре сдвига 1-2-2.It contains a photodetector region 1-2-1 on a common crystal, in which lines of photosensitive elements and lines of elements shielded from light (not shown here) are radially located (from the imaginary geometric center of the ring), as well as a “ring” shift register 1 -2-2 and BPZN 1-2-3, and the number of elements in each "ring" line of the photodetector region 1-2-1 is equal to the number of elements in the "ring" shift register 1-2-2.

Панорамный объектив 1-1 телевизионной камеры, как и в прототипе [1], предназначен для формирования оптического изображения кругового обзора («кольцевого» изображения). В качестве технического решения для панорамного объектива 1-1 может быть предложен панорамный зеркально-линзовый объектив, конструкция которого запатентована в России отечественными специалистами из Московского государственного университета геодезии и картографии [2].The panoramic lens 1-1 of the television camera, as in the prototype [1], is intended to form an optical image of a circular view ("ring" image). As a technical solution for panoramic lens 1-1, a panoramic mirror-lens lens can be proposed, the design of which has been patented in Russia by Russian specialists from Moscow State University of Geodesy and Cartography [2].

Фотография кольцевого изображения, формируемого панорамным объективом, представлена на фиг.6. Угловое поле в пространстве предметов для этого объектива составляет 360 градусов по азимуту и может достигать (75-80) градусов по углу места.A photograph of the annular image formed by the panoramic lens is shown in Fig.6. The angular field in the space of objects for this lens is 360 degrees in azimuth and can reach (75-80) degrees in elevation.

Рассмотрим реализацию заявляемого способа формирования видеосигнала в телевизионной камере 1 (см. фиг. 1…3).Consider the implementation of the proposed method for generating a video signal in a television camera 1 (see Fig. 1 ... 3).

Как и в прототипе [1], предполагается, что телевизионная камера 1 установлена в фиксированное положение, например при помощи фотоштатива (здесь он не показан).As in the prototype [1], it is assumed that the television camera 1 is installed in a fixed position, for example using a photographic tripod (here it is not shown).

Оптическое изображение наблюдаемой сцены проецируется с выхода панорамного объектива 1-2 на мишень 1-2-1 «кольцевого» фотоприемника.The optical image of the observed scene is projected from the output of the panoramic lens 1-2 to the target 1-2-1 of the "ring" photodetector.

Фотоприемник 1-2 телевизионной камеры (см. фиг. 2) реализует «кольцевую» развертку зарядового изображения на фотоприемной области 1-2-1 с последующим поэлементным считыванием зарядовых пакетов в «кольцевом» регистре сдвига 1-2-2 и формированием на выходе БПЗН 1-2-3 напряжения видеосигнала в аналоговой форме. При этом в интервале прямого хода по кадру происходит процесс накопления зарядовых пакетов пропорционально освещенности панорамного сюжета, в светочувствительных пикселах фотоприемной области 1-2-1. В течение кратковременного промежутка последующего интервала обратного хода кадровой развертки открывается фотозатвор, и заряды всех «кольцевых» строк, участвовавших в накоплении, переносятся (за один шаг поворота) в экранированные от света пикселы, расположенные на той же области 1-2-1. Затем фотозатвор закрывается и в новом кадровом цикле на мишени выполняется накопление другой зарядовой «картины», а накопленные в предыдущем кадре зарядовые пакеты в радиальных направлениях переносятся на периферию кристалла фотоприемника, загружая в интервале обратного хода строчной развертки новыми зарядами «кольцевой» регистр 1-2-2.The photodetector 1-2 of the television camera (see Fig. 2) implements a “ring” scan of the charge image on the photodetector region 1-2-1, followed by element-by-element reading of the charge packets in the “ring” shift register 1-2-2 and the formation of an OTZN output 1-2-3 voltage of the video signal in analog form. At the same time, in the interval of the forward course of the frame, the process of accumulation of charge packets occurs in proportion to the illumination of the panoramic plot, in the photosensitive pixels of the photodetector region 1-2-1. During a short period of the subsequent interval of the reverse rotation of the frame scan, a photo shutter opens, and the charges of all the "ring" lines involved in the accumulation are transferred (in one rotation step) to the screened from light pixels located in the same region 1-2-1. Then the photo shutter closes and, in a new personnel cycle, another charge “picture” is accumulated on the target, and the charge packets accumulated in the previous frame are transferred in radial directions to the periphery of the photodetector crystal, loading the “ring” register 1-2 in the reverse scan interval -2.

Аналоговый видеосигнал фотоприемника на выходе телевизионной камеры 1 преобразуется в цифровой телевизионный сигнал (ЦТС), а далее поступает на сервер 2. В сервере 2, как и в прототипе [1], осуществляется запись цифрового видеосигнала в оперативную память на кадр с последующим его считыванием, а в результате - конвертирование «кольцевого» кадра в обычные «прямоугольные» кадры с общим числом n, а также возможность предоставления видеоинформации пользователям на выходе «Сеть» сервера 2.The analog video signal of the photodetector at the output of the television camera 1 is converted into a digital television signal (DTS), and then goes to server 2. In server 2, as in the prototype [1], the digital video signal is recorded into RAM on a frame, followed by its reading, and as a result, the conversion of the “ring” frame into ordinary “rectangular” frames with a total number n, as well as the ability to provide video information to users at the “Network” output of server 2.

Следует сразу отметить, что в заявляемом решении, по сравнению с прототипом [1], организация оперативной памяти в сервере 2 имеет некоторые особенности, которые будут изложены ниже.It should be immediately noted that in the claimed solution, in comparison with the prototype [1], the organization of RAM in server 2 has some features, which will be described below.

Но вернемся к телевизионной камере 1. Отметим, что по умолчанию на входах «А», «В» и «С» временного контроллера 1-3-1 присутствует команда управления «000», означающая, что областью фотометрирования для АРВН и АРУ является «Окно 1» - область «кольцевой» мишени сенсора, отводимая для «прямоугольного» кадра 1.But back to the television camera 1. Note that by default, the inputs “A”, “B” and “C” of the temporary controller 1-3-1 have a “000” control command, which means that the photometric area for ARVN and AGC is “ Window 1 "- the area of the" ring "target of the sensor, reserved for the" rectangular "frame 1.

Поэтому на выходе «D» временного контроллера 1-3-1, см. фиг. 7, формируется импульсный сигнал, представленный на фиг. 6б.Therefore, the output "D" of the temporary controller 1-3-1, see Fig. 7, the pulse signal shown in FIG. 6b.

На время высокого уровня в сигнале «Окна» 1» коммутатор замкнут, а за этот промежуток на входе «Е» временного контроллера 1-3-1 получаем отсчет уровня выходного напряжения амплитудного детектора видеосигнала по пиковому или среднему значению, измеряемому по площади этого окна на мишени фотоприемника.At a high level in the “Window” 1 signal, the switch is closed, and during this period at the input “E” of the temporary controller 1-3-1 we get a reference of the output voltage level of the amplitude detector of the video signal from the peak or average value, measured by the area of this window on target photodetector.

Отметим, что данное напряжение от амплитудного детектора через аналогичный коммутатор с «окном» подается и на вход сигнального процессора 1-3-2 для управления работой АРУ.Note that this voltage from the amplitude detector through a similar switch with a "window" is supplied to the input of the signal processor 1-3-2 to control the operation of the AGC.

Пусть в нашем примере, где число n = 6, показанном на фиг. 5, в условиях высокой освещенности наблюдаемого сюжета оказывается область, которую занимает «Окно 1 (кадр 1); в условиях слабо пониженной освещенности - «Окно 2» (кадр 2) и «Окно 5» (кадр 5); в условиях средне пониженной освещенности - «Окно 3 (кадр 3) и «Окно 6» (кадр 6), а в условиях существенно пониженной освещенности - «Окно 4» (кадр 4).Let in our example, where the number n = 6 shown in FIG. 5, in the conditions of high illumination of the observed plot, the area occupied by “Window 1 (frame 1); in low light conditions - “Window 2” (frame 2) and “Window 5” (frame 5); in conditions of medium low light - “Window 3 (frame 3) and“ Window 6 ”(frame 6), and in conditions of significantly reduced illumination -“ Window 4 ”(frame 4).

При входной команде «ООО» параметры, определяющие чувствительность изображения: длительность накопления фотоприемника Тн и коэффициент усиления видеотракта Ку - фиксируются при оценке зарядового рельефа кадра 1, а распространяются на всю «кольцевую» мишень первого «кольцевого» кадра. При этом эти параметры, являющиеся оптимальными показателями для аналогового видеосигнала будущего «прямоугольного» кадра 1, не являются таковыми для кадров 2-6, т.к. для них они оказываются ниже оптимальных показателей. Далее в телевизионной камере 1 ЦТС этого «кольцевого» кадра поступает в первую оперативную память сервера 2, где выполняется его запись.With the input command "LLC" the parameters that determine the sensitivity of the image: the duration of the accumulation of the photodetectorn and the gain of the video path Kat - are fixed when assessing the charge relief of frame 1, and apply to the entire "ring" target of the first "ring" frame. Moreover, these parameters, which are optimal indicators for the analog video signal of the future “rectangular” frame 1, are not such for frames 2-6, because for them, they are below the optimal indicators. Then, in the television camera 1, the DSP of this "ring" frame enters the first random access memory of server 2, where it is recorded.

Когда счетчик 1-3-6 формирует следующую команду «100», телевизионная камера 1 переходит к формированию второго «кольцевого» кадра, в котором будут автоматически установлены другие оптимальные параметры по длительности накопления фотоприемника Тн и коэффициенту усиления видеотракта К для аналогового видеосигнала будущего «прямоугольного» кадра 2. Отметим, что в нашем примере, по сравнению с предыдущим отсчетом, эти показатели будут повышены. В составе второго «кольцевого» кадра его запись произойдет во вторую оперативную память сервера 2.When the counter 1-3-6 generates the next command "100", the television camera 1 proceeds to the formation of the second "ring" frame, which will automatically set other optimal parameters for the duration of the accumulation of the photodetector T n and the gain of the video path K for the analogue video signal of the future " rectangular "frame 2. Note that in our example, compared with the previous count, these indicators will be increased. As part of the second “ring” frame, its recording will occur in the second random access memory of server 2.

Совершенно аналогичные операции будут выполняться и при последующих командах счетчика 1-3-6, работающего в циклическом режиме.Quite the same operations will be performed on subsequent counter commands 1-3-6, operating in a cyclic mode.

В результате шесть «кольцевых» кадров в полностью автоматическом режиме будут записаны раздельно в первую, вторую, третью, четвертую, пятую и шестую оперативные памяти сервера 2.As a result, six “ring” frames in fully automatic mode will be recorded separately in the first, second, third, fourth, fifth and sixth random access memory of server 2.

Это означает, что в условиях сложной освещенности и/или сложной яркости объектов, сопутствующих панорамному телевизионному наблюдению, в каждой из этих цифровых записей «кольцевого» видеосигнала будут содержаться соответственно по одной качественной (оптимальной) записи для первого, второго, третьего, четвертого, пятого и шестого «прямоугольных» кадров.This means that in conditions of complex illumination and / or complex brightness of objects accompanying panoramic television surveillance, each of these digital recordings of the “ring” video signal will contain, respectively, one high-quality (optimal) recording for the first, second, third, fourth, fifth and the sixth “rectangular” frames.

И только для этих «прямоугольных» кадров, и в данном порядке необходимо и достаточно произвести считывание видеоинформации из каждой из записей, чтобы ее можно было с успехом предложить операторам-пользователям персональных компьютеров 3.And only for these "rectangular" frames, and in this order, it is necessary and sufficient to read the video information from each of the records so that it can be successfully offered to the user operators of personal computers 3.

Технический результат заявляемого решения обеспечивается, что в телевизионной камере 1 при помощи АРВН и АРУ, будут получены необходимые показатели для параметров Тн и Ку.The technical result of the proposed solution is provided that in the television camera 1 using ARVN and AGC, the necessary indicators for the parameters T n and K y will be obtained.

Следовательно, будет достигнуто повышенное отношение сигнал/шум (ψ) формируемого видеосигнала и соответственно увеличение чувствительности наблюдаемых фрагментов изображения, по сравнению с прототипом, в аналогичных условиях контролируемого сюжета.Therefore, an increased signal-to-noise ratio (ψ) of the generated video signal and, accordingly, an increase in the sensitivity of the observed image fragments, as compared with the prototype, under similar conditions of the controlled plot will be achieved.

В настоящее время все блоки структурной схемы компьютерной системы панорамного телевизионного наблюдения, реализующей предлагаемый способ формирования видеосигнала, освоены или могут быть освоены отечественной промышленностью.Currently, all the blocks of the structural diagram of a computer system for panoramic television monitoring that implements the proposed method for generating a video signal, mastered or can be mastered by domestic industry.

Поэтому следует считать предлагаемое изобретение на способ формирования видеосигнала в «кольцевом» фотоприемнике и сервере для компьютерной системы панорамного наблюдения в условиях сложной освещенности и/или сложной яркости объектов соответствующим требованию о промышленной применимости.Therefore, the present invention should be considered as a method for generating a video signal in a “ring” photodetector and server for a panoramic panoramic computer system in conditions of complex illumination and / or complex brightness of objects corresponding to the requirement for industrial applicability.

ИСТОЧНИКИ ИНФОРМАЦИИINFORMATION SOURCES

1. Патент РФ №2545519. МПК H04N 7/00. Устройство компьютерной системы панорамного телевизионного наблюдения и организация фотоприемника для его реализации / В.М. Смелков // Б.И. - 2015. - №10.1. Patent of the Russian Federation No. 2545519. IPC H04N 7/00. The device of a computer system for panoramic television surveillance and the organization of a photodetector for its implementation / V.M. Smelkov // B.I. - 2015. - No. 10.

2. Патент РФ №2185645. МПК G02B 13/06, G02B 17/08. Панорамный зеркально-линзовый объектив. / А.В. Куртов, В.А. Соломатин // Б.И. - 2002. - №20.2. RF patent No. 2185645. IPC G02B 13/06, G02B 17/08. Panoramic mirror lens. / A.V. Kurtov, V.A. Solomatin // B.I. - 2002. - No. 20.

3. Токхейм Р. Основы цифровой электроники. Перевод с английского. - М.: «Мир», 1988.3. Tokheim R. Fundamentals of Digital Electronics. Translation from English. - M.: “World”, 1988.

Claims (4)

Способ формирования видеосигнала в «кольцевом» фотоприемнике и сервере для компьютерной системы панорамного наблюдения, в условиях сложной освещенности и/или сложной яркости объектов, когда высокой освещенности (яркости) на одних участках поля зрения сопутствует низкая освещенность (яркость) на других его участках, заключающийся в том, что устанавливают телевизионную камеру в фиксированное положение, осуществляют захват оптического изображения в телевизионной камере с угловым полем в пространстве предметов 360° по азимуту, в «кольцевом» фотоприемнике телевизионной камеры, изготовленном по технологии приборов с зарядовой связью (ПЗС), который имеет кристалл в виде кругового кольца и содержит в его пределах «кольцевую» фотоприемную область (мишень), «кольцевой» регистр сдвига, заканчивающийся блоком преобразования «заряд - напряжение» (БПЗН), при этом на фотоприемной области линейки светочувствительных элементов, чередующиеся с линейками экранированных от света элементов, расположены вдоль радиальных направлений от воображаемого центра кругового кольца к его внешней периферии и расположенному там «кольцевому» регистру сдвига, а число элементов в каждой «кольцевой» строке фотоприемной области равно числу элементов в «кольцевом» регистре сдвига, причем площадь светочувствительных и экранированных элементов на фотоприемной области одинакова по величине в каждой «кольцевой» строке и от строки к строке по мере движения к внешней периферии фотоприемника, накапливают зарядовое изображение информационного кадра на светочувствительных элементах мишени в соответствии с управляющим напряжением для автоматической регулировки времени накопления (АРВН) фотоприемника, осуществляют «кольцевую» развертку зарядового изображения на мишени с последующим поэлементным считыванием зарядовых пакетов в «кольцевом» регистре сдвига и формированием на выходе БПЗН напряжения аналогового сигнала изображения наблюдаемого пространства, регулируют коэффициент усиления видеотракта для аналогового видеосигнала в соответствии с управляющим напряжением автоматической регулировки усиления (АРУ), используя тот же отсчет величины управляющего напряжения, что и для АРВН, преобразуют аналоговый видеосигнал в цифровой видеосигнал, передают видеосигнал «кольцевого» кадра телевизионной камеры по интерфейсу в сервер, при этом в сервере «кольцевое» телевизионное изображение преобразуют в обычное («прямоугольное») изображение, причем один текущий «кольцевой» кадр считывают из памяти сервера при помощи n «прямоугольных» кадров, число которых удовлетворяет соотношению:A method of generating a video signal in a "ring" photodetector and server for a panoramic panoramic computer system, in conditions of complex illumination and / or complex brightness of objects, when high illumination (brightness) in some parts of the field of view is accompanied by low illumination (brightness) in its other parts, which consists in in that the television camera is mounted in a fixed position, the optical image is captured in a television camera with an angular field in the space of objects 360 ° in azimuth, in the "rings m "a photodetector of a television camera made by the technology of charge-coupled devices (CCD), which has a crystal in the form of a circular ring and contains within it a" ring "photodetector region (target), a" ring "shift register, ending with a charge - voltage ”(BPS), while on the photodetector region the lines of photosensitive elements, alternating with the lines of elements shielded from light, are located along radial directions from the imaginary center of the circular ring to its outer the periphery and the “ring” shift register located there, and the number of elements in each “ring” line of the photodetector region is equal to the number of elements in the “ring” shift register, and the area of photosensitive and shielded elements on the photodetector region is the same in size in each “ring” line and from row to row as they move to the outer periphery of the photodetector, the charge image of the information frame is accumulated on the photosensitive elements of the target in accordance with the control voltage for a automatic adjustment of the accumulation time (ARVN) of the photodetector, carry out a “ring” scan of the charge image on the target, followed by element-wise reading of the charge packets in the “ring” shift register and generating the voltage of the analog image signal of the observed space at the output of the SPS, adjust the gain of the video path for the analog video signal in according to the control voltage of automatic gain control (AGC), using the same reference value of the control voltage As for the ARVN, they convert the analog video signal into a digital video signal, transmit the video signal of the “ring” frame of the television camera via the interface to the server, while in the server the “ring” television image is converted into a normal (“rectangular”) image, with one current ring "frame is read from the server memory using n" rectangular "frames, the number of which satisfies the ratio:
Figure 00000003
Figure 00000003
где γг - горизонтальный угол поля зрения в градусах наблюдаемого оператором изображения,where γ g is the horizontal angle of the field of view in degrees observed by the operator of the image, отличающийся тем, что в телевизионной камере отсчет величины управляющего напряжения для АРВН и АРУ выполняют в текущем «кольцевом» кадре, в пределах одной из n областей «кольцевой» мишени фотоприемника, причем площадь этой области совпадает с участком на мишени, занимаемым соответствующим «прямоугольным» кадром, осуществляя отсчеты управляющего напряжения для n «кольцевых» кадров аналогового видеосигнала последовательно (один за одним) в циклическом режиме, при этом запись текущих цифровых «кольцевых» кадров изображения в сервере выполняют раздельно в первую, вторую, … (n-1)-ю и n-ю оперативные памяти сервера, из которых считывают по одной качественной записи «прямоугольного» кадра, а именно: из первой памяти - первого «прямоугольного» кадра, из второй памяти - второго «прямоугольного» кадра, … из (n-1)-й памяти - (n-1)-го «прямоугольного» кадра, а из n-й памяти - n-го «прямоугольного» кадра.characterized in that in the television camera the control voltage for the ARVN and AGC is counted in the current "ring" frame, within one of the n regions of the "ring" target of the photodetector, and the area of this region coincides with the area on the target occupied by the corresponding "rectangular" frame, performing control voltage samples for n "ring" frames of the analog video signal sequentially (one after one) in a cyclic mode, while recording the current digital "ring" image frames in the server you separately fill in the first, second, ... (n-1) and n-th random-access memory of the server, from which one high-quality record of a "rectangular" frame is read, namely: from the first memory - the first "rectangular" frame, from the second memory - of the second "rectangular" frame, ... from the (n-1) th memory - the (n-1) th "rectangular" frame, and from the n-th memory - the n-th "rectangular" frame.
RU2017130794A 2017-08-30 2017-08-30 Method for forming a video signal in "ring" photodetector and server for panoramic surveillance computer system in conditions of complex illumination and/or complex brightness of objects RU2656377C1 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
RU2017130794A RU2656377C1 (en) 2017-08-30 2017-08-30 Method for forming a video signal in "ring" photodetector and server for panoramic surveillance computer system in conditions of complex illumination and/or complex brightness of objects

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
RU2017130794A RU2656377C1 (en) 2017-08-30 2017-08-30 Method for forming a video signal in "ring" photodetector and server for panoramic surveillance computer system in conditions of complex illumination and/or complex brightness of objects

Publications (1)

Publication Number Publication Date
RU2656377C1 true RU2656377C1 (en) 2018-06-05

Family

ID=62560739

Family Applications (1)

Application Number Title Priority Date Filing Date
RU2017130794A RU2656377C1 (en) 2017-08-30 2017-08-30 Method for forming a video signal in "ring" photodetector and server for panoramic surveillance computer system in conditions of complex illumination and/or complex brightness of objects

Country Status (1)

Country Link
RU (1) RU2656377C1 (en)

Citations (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US4554585A (en) * 1983-08-12 1985-11-19 Rca Corporation Spatial prefilter for variable-resolution sampled imaging systems
US5040057A (en) * 1990-08-13 1991-08-13 Picker International, Inc. Multi-mode TDI/raster-scan television camera system
US5442396A (en) * 1993-08-26 1995-08-15 Nec Corporation Solid-state image pickup device wherein plural power feeding wires serve as a light-shield film
US6563101B1 (en) * 2000-01-19 2003-05-13 Barclay J. Tullis Non-rectilinear sensor arrays for tracking an image
US20070103543A1 (en) * 2005-08-08 2007-05-10 Polar Industries, Inc. Network panoramic camera system
US20110074962A1 (en) * 2006-06-23 2011-03-31 Canon Kabushiki Kaisha Network camera apparatus and distributing method of video frames
US20140092289A1 (en) * 2012-09-28 2014-04-03 Fujitsu Limited Method and device for processing captured-image signals
US20140118588A1 (en) * 2012-10-31 2014-05-01 Pixon Imaging, Inc. Device and method for extending dynamic range in an image sensor
RU2545519C1 (en) * 2014-06-09 2015-04-10 Вячеслав Михайлович Смелков Apparatus for computer-based panoramic television surveillance system and photodetector setup therefor

Patent Citations (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US4554585A (en) * 1983-08-12 1985-11-19 Rca Corporation Spatial prefilter for variable-resolution sampled imaging systems
US5040057A (en) * 1990-08-13 1991-08-13 Picker International, Inc. Multi-mode TDI/raster-scan television camera system
US5442396A (en) * 1993-08-26 1995-08-15 Nec Corporation Solid-state image pickup device wherein plural power feeding wires serve as a light-shield film
US6563101B1 (en) * 2000-01-19 2003-05-13 Barclay J. Tullis Non-rectilinear sensor arrays for tracking an image
US20070103543A1 (en) * 2005-08-08 2007-05-10 Polar Industries, Inc. Network panoramic camera system
US20110074962A1 (en) * 2006-06-23 2011-03-31 Canon Kabushiki Kaisha Network camera apparatus and distributing method of video frames
US20140092289A1 (en) * 2012-09-28 2014-04-03 Fujitsu Limited Method and device for processing captured-image signals
US20140118588A1 (en) * 2012-10-31 2014-05-01 Pixon Imaging, Inc. Device and method for extending dynamic range in an image sensor
RU2545519C1 (en) * 2014-06-09 2015-04-10 Вячеслав Михайлович Смелков Apparatus for computer-based panoramic television surveillance system and photodetector setup therefor

Similar Documents

Publication Publication Date Title
EP2352279B1 (en) Multi-step exposure method using electronic shutter and photography apparatus using the same
RU2545519C1 (en) Apparatus for computer-based panoramic television surveillance system and photodetector setup therefor
RU2371880C1 (en) Panoramic video surveillance method and device for implementing thereof
CN109314742B9 (en) Method, apparatus, device and storage medium for iris simulation
RU2552101C1 (en) Configuration of tv panoramic observation computer system and organisation of photo receiver to this end
KR102436954B1 (en) Image photographing apparatus and method of controlling thereof
EP3040754B1 (en) Imaging device, method, and program
US9875423B2 (en) Image pickup apparatus that calculates light amount change characteristic, electronic apparatus, and method of calculating light amount change characteristic
RU2625163C1 (en) Television camera and its "ring" photodetector for computer system of panoramic surveillance
RU2611421C1 (en) Television camera and its "ring" photodetector for computer system of panoramic surveillance
US9667878B2 (en) Image capturing apparatus and control method for image capturing apparatus
RU2665695C1 (en) Computer system device for panoramic television surveillance
US10469731B2 (en) Image sensor and imaging device including the same
RU2633758C1 (en) Hypersensitive television camera for panoramic computer vision system
RU2656377C1 (en) Method for forming a video signal in "ring" photodetector and server for panoramic surveillance computer system in conditions of complex illumination and/or complex brightness of objects
RU2640756C1 (en) Computer system device for television circular review of internal surface of large diameter pipes and pipelines
RU2657455C1 (en) Method of forming a video signal in a “ring”; photosensor and server for computer system of panoramic observation in conditions of complex lighting and / or complex brightness of objects
RU2657449C1 (en) Method for forming a video signal in "ring" photodetector and server for panoramic surveillance computer system in conditions of complex illumination and/or complex brightness of objects
RU2657454C1 (en) Method for forming video signal in “ring” photosensor and server for computer system of panoramic observation in conditions of complex lighting and / or complex brightness of objects
RU2657453C1 (en) Method for forming video signal in a “ring” photodetector for computer system of panoramic television surveillance in conditions of complex illumination and/or complex brightness of objects
RU2657459C1 (en) Method of forming a video signal in a “ring”; photosensor for computer system of panoramic television observation under conditions of complex lighting and / or complex brightness of objects
RU2530879C1 (en) Device for panoramic television surveillance "day-night"
RU2657458C1 (en) Method of forming a video signal in a “ring”; photosensor for computer system of panoramic television observation under conditions of complex lighting and / or complex brightness of objects
RU2592855C1 (en) Device for panoramic television-computer monitoring
RU2611424C1 (en) Method of forming videosignal in "ring" photodetector for computer system of panoramic television surveillance