WO2016175225A1 - 機能拡張装置、機能拡張装置の脱着構造、及び機能拡張システム - Google Patents

機能拡張装置、機能拡張装置の脱着構造、及び機能拡張システム Download PDF

Info

Publication number
WO2016175225A1
WO2016175225A1 PCT/JP2016/063140 JP2016063140W WO2016175225A1 WO 2016175225 A1 WO2016175225 A1 WO 2016175225A1 JP 2016063140 W JP2016063140 W JP 2016063140W WO 2016175225 A1 WO2016175225 A1 WO 2016175225A1
Authority
WO
WIPO (PCT)
Prior art keywords
function expansion
function
expansion device
image
imaging device
Prior art date
Application number
PCT/JP2016/063140
Other languages
English (en)
French (fr)
Inventor
洋介 村木
高橋 宏明
長武 浅野
雅夫 渡部
Original Assignee
株式会社ジェイエイアイコーポレーション
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 株式会社ジェイエイアイコーポレーション filed Critical 株式会社ジェイエイアイコーポレーション
Priority to KR1020177025957A priority Critical patent/KR20170140168A/ko
Priority to US15/563,231 priority patent/US10268108B2/en
Priority to EP16786501.3A priority patent/EP3291530A4/en
Priority to JP2017515565A priority patent/JPWO2016175225A1/ja
Priority to CN201680012993.1A priority patent/CN107409170A/zh
Publication of WO2016175225A1 publication Critical patent/WO2016175225A1/ja

Links

Images

Classifications

    • GPHYSICS
    • G03PHOTOGRAPHY; CINEMATOGRAPHY; ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ELECTROGRAPHY; HOLOGRAPHY
    • G03BAPPARATUS OR ARRANGEMENTS FOR TAKING PHOTOGRAPHS OR FOR PROJECTING OR VIEWING THEM; APPARATUS OR ARRANGEMENTS EMPLOYING ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ACCESSORIES THEREFOR
    • G03B17/00Details of cameras or camera bodies; Accessories therefor
    • G03B17/56Accessories
    • G03B17/566Accessory clips, holders, shoes to attach accessories to camera
    • GPHYSICS
    • G03PHOTOGRAPHY; CINEMATOGRAPHY; ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ELECTROGRAPHY; HOLOGRAPHY
    • G03BAPPARATUS OR ARRANGEMENTS FOR TAKING PHOTOGRAPHS OR FOR PROJECTING OR VIEWING THEM; APPARATUS OR ARRANGEMENTS EMPLOYING ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ACCESSORIES THEREFOR
    • G03B17/00Details of cameras or camera bodies; Accessories therefor
    • G03B17/56Accessories
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/50Constructional details
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/50Constructional details
    • H04N23/51Housings
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/57Mechanical or electrical details of cameras or camera modules specially adapted for being embedded in other devices
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60Control of cameras or camera modules
    • H04N23/66Remote control of cameras or camera parts, e.g. by remote control devices
    • H04N23/663Remote control of cameras or camera parts, e.g. by remote control devices for controlling interchangeable camera parts based on electronic image sensor signals
    • HELECTRICITY
    • H05ELECTRIC TECHNIQUES NOT OTHERWISE PROVIDED FOR
    • H05KPRINTED CIRCUITS; CASINGS OR CONSTRUCTIONAL DETAILS OF ELECTRIC APPARATUS; MANUFACTURE OF ASSEMBLAGES OF ELECTRICAL COMPONENTS
    • H05K5/00Casings, cabinets or drawers for electric apparatus
    • H05K5/0026Casings, cabinets or drawers for electric apparatus provided with connectors and printed circuit boards [PCB], e.g. automotive electronic control units
    • H05K5/0069Casings, cabinets or drawers for electric apparatus provided with connectors and printed circuit boards [PCB], e.g. automotive electronic control units having connector relating features for connecting the connector pins with the PCB or for mounting the connector body with the housing
    • HELECTRICITY
    • H05ELECTRIC TECHNIQUES NOT OTHERWISE PROVIDED FOR
    • H05KPRINTED CIRCUITS; CASINGS OR CONSTRUCTIONAL DETAILS OF ELECTRIC APPARATUS; MANUFACTURE OF ASSEMBLAGES OF ELECTRICAL COMPONENTS
    • H05K5/00Casings, cabinets or drawers for electric apparatus
    • H05K5/02Details
    • HELECTRICITY
    • H05ELECTRIC TECHNIQUES NOT OTHERWISE PROVIDED FOR
    • H05KPRINTED CIRCUITS; CASINGS OR CONSTRUCTIONAL DETAILS OF ELECTRIC APPARATUS; MANUFACTURE OF ASSEMBLAGES OF ELECTRICAL COMPONENTS
    • H05K5/00Casings, cabinets or drawers for electric apparatus
    • H05K5/02Details
    • H05K5/0204Mounting supporting structures on the outside of casings
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00Indexing scheme for image analysis or image enhancement
    • G06T2207/10Image acquisition modality
    • G06T2207/10004Still image; Photographic image

Definitions

  • the present disclosure relates to a function expansion device, a function expansion device detachment structure, and a function expansion system. More specifically, the present invention relates to a function expansion device configured to expand the function of an imaging device, a function expansion device detachment structure, and a function expansion system.
  • CMOS Complementary Metal Oxide Semiconductor
  • CCD Charge Coupled Device
  • this type of video camera includes a camera housing with a built-in CCD and a camera mounting surface, a screw hole that is attached to the front end of the camera housing and opens in the optical axis direction (front-rear direction), and a screw.
  • a front panel having a lens barrel mounting surface exposed at the opening periphery of the hole and a lens barrel having an opening end face screwed into a screw hole of the front panel and in contact with the lens barrel mounting surface are employed. Yes.
  • Patent Document 1 includes a camera housing having a substrate on which a CCD as an image sensor is mounted and a substrate on which an external connection connector is mounted, and includes an image pickup unit (image pickup device) and an interface unit (external).
  • image pickup unit image pickup device
  • interface unit external
  • the present disclosure solves such a problem, and its purpose is to select what function the user wants to expand, and to freely incorporate it as needed, a function expansion apparatus detachment structure, and It is to provide a function expansion system.
  • the inventor of the present application has conducted extensive research to solve the above-described object, and as a result, paid attention to interposing a function expansion device between the imaging device and the interface device, and has completed the present invention.
  • an imaging device that captures an image of a subject to acquire image data and an interface device that performs data communication with an external device are detachably interposed, and the functions of the imaging device are provided.
  • a function expansion device configured to expand.
  • a function expansion device interposed between the imaging device and the interface device and configured to expand the function of the imaging device,
  • a connector plug is provided on one side, and a connector receptacle capable of inserting and removing the connector plug is provided on the other side.
  • a function expansion device detachable structure in which the function expansion device is configured to be detachable from at least one of the imaging device and the interface device by inserting or removing the connector plug from the connector receptacle.
  • an image capturing apparatus that captures an image of a subject to acquire image data and an interface apparatus that performs data communication with an external apparatus are configured to extend the functions of the image capturing apparatus.
  • One of the plurality of function expansion devices provides a function expansion device attachment / detachment structure having a connector plug or a connector receptacle that enables insertion or removal from the other.
  • An imaging device for imaging a subject and acquiring image data An interface device for data communication with an external device;
  • a function expansion system is provided that includes a function expansion device that is detachably interposed between the image capture device and the interface device and is configured to expand the function of the image capture device.
  • FIG. 1 is an external perspective view of a function expansion system 10 according to an embodiment of the present disclosure.
  • 2 is an external perspective view of the imaging device 1 on the front side.
  • FIG. 3 is an external perspective view of the front side of the interface device 2.
  • FIG. 2 is an external perspective view of the back side of the interface device 2.
  • FIG. 3 is an external perspective view of the function expansion device 3 on the front side.
  • FIG. 3 is an external perspective view of the function expansion device 3 on the back side.
  • It is a front view of the printed circuit board 17 provided with the connector plug 5-B.
  • 3 is a side view of the printed circuit board 17.
  • FIG. It is a front view of the printed circuit board 25 provided with the connector receptacle 5-A in which the connector plug 5-B can be inserted and removed.
  • FIG. 3 is a side view of the printed circuit board 25.
  • FIG. FIG. 4 is an explanatory diagram illustrating an example of a signal transfer path between devices according to an embodiment of the present disclosure. 4 is an explanatory diagram illustrating an example of a format and content of a packet delivered between devices according to an embodiment of the present disclosure.
  • FIG. It is an appearance perspective view of a function expansion system concerning a modification of this indication. It is an appearance perspective view of a function expansion system concerning another modification of this indication. It is a front view of an interface device concerning another modification of this indication. It is an appearance perspective view of a function expansion system concerning another modification of this indication.
  • FIG. 3 is a block diagram illustrating protocol conversion according to an embodiment of the present disclosure.
  • a function expansion device, a function expansion device detachment structure, and a function expansion system according to an embodiment of the present disclosure will be described.
  • FIG. 1 is an external perspective view of a function expansion system 10 according to an embodiment of the present disclosure.
  • the function expansion system 10 according to the present disclosure is interposed between the imaging device 1, the interface device 2, and these devices, is detachable, and has a predetermined function having a predetermined function. It is composed of a number N of function expansion devices 3 (in this embodiment, it is assumed that it is “1” for simplicity). Hereinafter, each device will be described in detail.
  • FIG. 2 is an external perspective view of the front side of the imaging apparatus 1.
  • the imaging device 1 captures a subject and acquires image data.
  • the imaging apparatus 1 includes a lens, an imaging element, an A / D converter, and the like.
  • the imaging apparatus 1 includes a main body 11 that has a substantially rectangular parallelepiped appearance as a whole, and a lens barrel 12 that is detachably provided on the front surface of the main body 11 and has a plurality of lenses.
  • the main body 11 includes a housing 13 having upper, lower, left and right wall plates facing each other and opening in the front-rear direction, a front plate 14 attached to the front opening of the housing 13 and opening in the optical axis direction, and a housing.
  • the rear plate 15 is mounted on the rear opening of the body 13 and has a through-hole for external connection that opens on both the front and back surfaces.
  • the housing 13 incorporates a printed circuit board that is connected to the image sensor and the like.
  • the image pickup device picks up an image of the subject by the subject light flux that has passed through the lens.
  • the imaging element include solid-state imaging elements such as a known CMOS sensor and a known CCD sensor.
  • the imaging element has a plurality of photoelectric conversion elements that receive the subject light flux, and outputs an analog signal corresponding to the amount of accumulated charge generated by each of the plurality of photoelectric conversion elements to the A / D converter.
  • the A / D converter converts an analog signal into a digital signal and outputs it to the function expansion device 3 as image data.
  • a temperature sensor that is provided in the vicinity of the image sensor and can detect the temperature of the image sensor, a known dehumidifying element for maintaining the interior of the housing 13 at a preferable humidity, A known heater for maintaining the internal temperature of the body 13 at a preferable temperature may be provided.
  • the imaging device 1 may, for example, correct a pixel sensitivity non-uniformity PRNU (PhotPResponse Non Uniformity), correct a pixel dark current non-uniformity DSNU (Dark Signal Non Uniformity), An image processing circuit for correcting the black level may be included.
  • a pixel sensitivity non-uniformity PRNU PhotPResponse Non Uniformity
  • a pixel dark current non-uniformity DSNU Dark Signal Non Uniformity
  • An image processing circuit for correcting the black level may be included.
  • the imaging device 1 has a mechanical structure that can be directly fitted to one end of the function expansion device 3.
  • the mechanical structure of the imaging device 1 is not particularly limited as long as the effects of the present disclosure are not impaired, and may have a mechanical structure that can be directly fitted to one end of the interface device 2.
  • the imaging device 1 includes a connector plug 4-A (see FIG. 7) that is used for connection of an electrical signal or an optical signal with the function expansion device 3.
  • the connector plug 4-A is provided on the rear plate 15.
  • FIG. 3A is an external perspective view of the front side of the interface device 2
  • FIG. 3B is an external perspective view of the back side of the interface device 2.
  • the interface device 2 performs data communication with an external device such as a personal computer.
  • the interface device 2 can perform communication by a method according to standards such as USB (Universal Serial Bus), GbE (Gigabit Ethernet), FIBER (TBD), and CXP (CoaXPress).
  • USB Universal Serial Bus
  • GbE Gigabit Ethernet
  • FIBER FIBER
  • CXP CoaXPress
  • the interface device 2 includes a main body 16 that has a box-like appearance that opens forward, and a printed circuit board 17 that is attached to the front opening of the main body 16. As shown in FIG. 3B, a connector 18, a pin 19, and the like that are used for connection of an electrical signal or an optical signal with an external device (not shown) are disposed on the back side of the main body 16. In the interface device 2 of the present embodiment, four pins 19 complying with the CXP4 standard are arranged in parallel.
  • the interface device 2 has a mechanical structure that can be directly fitted to the other end of the function expansion device 3.
  • the mechanical structure of the interface device 2 is not particularly limited as long as the effects of the present disclosure are not impaired, and may have a mechanical structure that can be directly fitted to one end of the imaging device 1.
  • [Function expansion device 3] 4A is an external perspective view of the front surface side of the function expansion device 3
  • FIG. 4B is an external perspective view of the back surface side of the function expansion device 3.
  • the function expansion device 3 is detachably interposed between the imaging device 1 and the interface device 2 and has a configuration for expanding the function of the imaging device 1.
  • “expansion” includes both a case where a function originally provided in the imaging apparatus 1 is extended and a case where a function originally provided in the imaging apparatus 1 is changed.
  • the function expansion device 3 includes various microprocessors such as CPU (Central Processing Unit), GPU (Graphics Processing Unit), and DSP (Digital Signal Processor), various IC memories such as ASIC (Application Specific Integrated Circuit), RAM, and ROM.
  • CPU Central Processing Unit
  • GPU Graphics Processing Unit
  • DSP Digital Signal Processor
  • IC memories such as ASIC (Application Specific Integrated Circuit), RAM, and ROM.
  • the function expansion device 3 includes a housing 20 that has a cylindrical appearance as a whole.
  • the housing 20 has an upper wall plate 21, a lower wall plate 22, a left wall plate 23, and a right wall plate 24, which are opposed to each other, and have through holes that open in the front-rear direction.
  • the function expansion device 3 may include a known fan in the housing 20 that can cool the imaging device 1 through the through hole.
  • the function expansion device 3 has a mechanical structure that can be directly fitted to one end of the imaging device 1 and one end of the interface device 2.
  • the function expansion device 3 includes a connector receptacle 4-B (see FIG. 7) used for connection of an electrical signal or an optical signal with the imaging device 1.
  • the connector receptacle 4-B is disposed on the lower wall plate 22, for example. The connector receptacle 4-B can be inserted into and removed from the connector plug 4-A provided in the imaging apparatus 1.
  • FIG. 5A is a front view of the printed circuit board 17 provided with the connector plug 5-B.
  • FIG. 5B is a side view of the printed circuit board 17.
  • FIG. 6A is a front view of the printed circuit board 25 provided with the connector receptacle 5-A in which the connector plug 5-B can be inserted and removed.
  • FIG. 6B is a side view of the printed circuit board 25.
  • the interface device 2 is provided with a connector plug 5-B used for connection of an electrical signal or an optical signal with the function expansion device 3.
  • the connector plug 5-B is provided on the printed circuit board 17 as shown in FIGS.
  • the function expansion device 3 is provided with a connector receptacle 5-A used for connection of an electrical signal or an optical signal with the interface device 2.
  • the connector receptacle 5-A is provided on the printed circuit board 25 as shown in FIGS. 6 (A) and 6 (B).
  • the function expansion device 3 is configured to be detachable from the interface device 2 by inserting or removing the connector plug 5-B from the connector receptacle 5-A.
  • the function expansion device 3 is configured to be detachable from the imaging device 1 by inserting and removing the connector plug 4-A from the connector receptacle 4-B.
  • the function expansion device 3 is provided with a pair of hooks 26 that are formed at positions facing each other on the back surface of the housing 20 (see FIG. 4B).
  • Each hook 26 is arranged at a position that can be held by the thumb and index finger, so that it is easy to use and a stable and good operation feeling can be obtained.
  • a pair of hook receiving portions 30 fitted to each hook 26 is provided on the main body 16 of the interface device 2 (see FIG. 3A).
  • the function expansion device 3 is connected to the interface device 2 by fitting each hook 26 and each hook receiving portion 30 with the connector receptacle 5-A being inserted into the connector plug 5-B. Attached to and fixed.
  • Each hook 26 and each hook receiving portion 30 are provided for confirming through sound or visual observation whether or not the function expansion device 3 has been securely attached to the interface device 2.
  • the function expansion device 3 is provided with a pair of guide pins 27 that are formed at positions facing each other on the back surface of the housing 20 and extend in the insertion / removal direction of the connector plug 5-B (FIG. 4B). reference).
  • Each guide groove 31 fitted to each guide pin 27 is provided in the main body 16 of the interface device 2 (see FIG. 3A).
  • Each guide groove 31 preferably has an elongated hole shape in order to absorb variation in dimensions. This long hole is preferably formed longer in the vertical direction than in the left-right direction in order to prevent the occurrence of a shift in the left-right direction.
  • the function expansion device 3 is attached to the interface device 2 by the guide pin 27 and the guide groove 31 engaging with each other. Guided.
  • FIG. 7 is an explanatory diagram illustrating an example of a signal transfer path between apparatuses according to an embodiment of the present disclosure.
  • connectors 4 and 5 are interposed in each bus used for signal transfer among the imaging device 1, the interface device 2, and the function expansion device 3.
  • the connectors 4 and 5 are preferably of a floating type that can absorb component accuracy.
  • a connector 4 is interposed between the imaging device 1 and the function expansion device 3.
  • the connector 4 includes the connector plug 4-A and the connector receptacle 4-B.
  • a connector 5 is interposed between the function expansion device 3 and the interface device 2.
  • the connector 5 includes the connector receptacle 5-A and the connector plug 5-B.
  • FIG. 8 is an explanatory diagram illustrating an example of a format and content of a packet delivered between the apparatuses 1 to 3 according to an embodiment of the present disclosure.
  • the packet shown in FIG. 8 includes four identification fields # 1, a destination field # 2, a control field # 3, and a data field # 4.
  • the identification field # 1 the type of data stored in the data field # 4 is stored.
  • the identification information of the device to which the data arranged in the data field # 4 is to be delivered is arranged.
  • the control field # 3 a form of processing to be performed on the data arranged in the data field # 4 is arranged.
  • data to be processed is stored in the data field # 4.
  • data arranged in the data field # 4 and transmitted between the devices may be collectively referred to as “transmission data”.
  • the functions of the imaging device 1 expanded by the function expansion device 3 are (1) an image processing function, (2) an operation environment maintenance function, (3) a transmission method change function, and (4) a subject recognition function. At least one can be selected.
  • the image processing function means a function for processing image data, and includes the following functions (1-1) to (1-7).
  • the imaging device 1 delivers image data obtained by imaging a subject to the function expansion device 3 via the connector 4. Image data is arranged in data field # 4 shown in FIG.
  • the identification information “3” of the function expansion device 3 to which the image data is delivered is arranged in the destination field # 2 shown in FIG.
  • the function expansion device 3 performs image correction processing such as defective pixel correction on the image data captured through the connector 4.
  • the correction information necessary for the correction process is stored in the control field # 3 shown in FIG.
  • (1-2) Resolution Change Function With this function, the function expansion device 3 performs resolution change processing on the transmission data.
  • information necessary for changing the resolution such as the target resolution is stored in the control field # 3 shown in FIG. 8, and the image resolution is changed from 2k to 4k, for example.
  • Others are the same as (1-1) above.
  • the function expansion device 3 performs digital zoom processing on the transmission data. Specifically, the function expansion device 3 interpolates between pixels by a known interpolation method or the like when enlarging an image, or thins out pixels when reducing an image. In this function, information necessary for digital zoom processing such as zoom magnification is stored in the control field # 3 shown in FIG. Others are the same as (1-1) above.
  • (1-4) Image Compression Function the function expansion device 3 performs image compression processing on transmission data.
  • information necessary for the compression process such as the target compression ratio is stored in the control field # 3 shown in FIG. 8, and the image data is in a predetermined compression format (for example, JPEG, MPEG, H.264). Compression processing is performed.
  • Others are the same as (1-1) above.
  • (1-6) Low-pass filter function the function expansion device 3 performs a filtering process using a low-pass filter on the transmission data.
  • information necessary for the filtering process such as a cutoff frequency is stored in the control field # 3 shown in FIG. 8, and the low frequency component is separated from the image data.
  • Others are the same as (1-1) above.
  • (1-7) Spectral processing function the function expansion device 3 performs spectral processing by performing component analysis of observation light to be imaged based on transmission data.
  • information necessary for the component analysis is stored in the control field # 3 shown in FIG. Others are the same as (1-1) above.
  • the operation environment maintenance function means a function for maintaining the operation environment of the imaging apparatus, and includes the following functions (2-1) to (2-3).
  • the imaging device 1 delivers a signal detected by the temperature sensor to the function expansion device 3 via the connector 4 as temperature data of the imaging device.
  • the temperature data is arranged in data field # 4 shown in FIG.
  • the identification information “3” of the function expansion device 3 to which the temperature data is delivered is arranged in the destination field # 2 shown in FIG.
  • the function expansion device 3 drives the fan based on the temperature data captured via the connector 4 so that the image sensor of the image capture device 1 can be cooled.
  • a null code “NUL” is arranged in the control field # 3. Note that heat dissipation or heat absorption performed by the fan may be realized by temperature control using a Peltier element provided instead of the fan.
  • the transmission method changing function means a function for changing the transmission method of image data, and includes the following functions (3-1) and (3-2).
  • the imaging device 1 delivers the transmission data to the function expansion device 3.
  • the function expansion device 3 stores the transmission data in the buffer memory. Then, the function expansion device 3 delivers the transmission data stored in the buffer memory to the interface device 2 via the connector 5 by a known interlace method.
  • the identification information “2” of the interface device 2 to which the transmission data is delivered is arranged in the destination field # 2 shown in FIG.
  • the content of the transmission method (interlace method) is stored in control field # 3 shown in FIG.
  • (3-2) Streaming Function the imaging device 1 delivers the transmission data to the interface device 2 by a known streaming method.
  • the content of the transmission method (streaming method) is stored in the control field # 3 shown in FIG. Others are the same as (3-1) above.
  • the subject recognition function means a function for recognizing a subject from image data, and includes the following functions (4-1) to (4-4).
  • the imaging device 1 installed on the highway passes image data obtained by imaging a subject to the function expansion device 3 via the connector 4.
  • the function expansion device 3 extracts and registers the feature data of the subject based on the image data captured via the connector 4, and then already registers the feature data in the image data captured by the imaging device 1.
  • the subject is tracked by collating with the feature data.
  • the feature data extracted from the subject is stored in the control field # 3 shown in FIG. Others are the same as (1-1) above.
  • the imaging device 1 delivers image data obtained by imaging the person of interest to the function expansion device 3 via the connector 4.
  • the function expansion device 3 detects the parameters (change values of the position, orientation, etc.) of the imaging device 1 at that time, and transmits those parameters to other imaging devices, thereby synchronizing the positions and orientations of all the imaging devices. While tracking the subject, follow the target person and take an image.
  • each parameter of the imaging device 1 is stored in the control field # 3 shown in FIG. Others are the same as (1-1) above.
  • (4-4) Function for transmitting moving images and still images
  • a moving image and a still image of a vehicle or the like are stored and stored in response to an external trigger such as a sensor laid on a road.
  • Software capable of transmitting a moving image and a still image to a server according to a determination condition such as speed violation is installed in the function expansion device 3.
  • the imaging device 1 delivers image data obtained by imaging a vehicle or the like to the function expansion device 3 via the connector 4.
  • the function expansion device 3 stores the image data captured via the connector 4 as a moving image or a still image.
  • the function expansion device 3 delivers the stored moving image or still image to the interface device 2 via the connector 5 according to the determination condition.
  • the transferred moving image or still image is transmitted to the server via the interface device 2.
  • the identification information “2” of the interface device 2 to which a moving image or a still image is delivered is arranged in the destination field # 2 shown in FIG.
  • the determination condition is arranged in the control field # 3 shown in FIG.
  • a moving image and a still image are stored in the data field # 4 shown in FIG.
  • the function expansion device 3 is configured to be detachable from the interface device 2 by inserting or removing the connector plug 5-B from the connector receptacle 5-A. Similarly, the function expansion device 3 is configured to be detachable from the imaging device 1 by inserting and removing the connector plug 4-A from the connector receptacle 4-B. For this reason, it is not necessary to secure an extra length of the flexible cable as in the case where the connectors are connected with a conventional flexible cable.
  • the connector receptacle and the connector plug are directly connected, even if the mechanical dimensions of the imaging device 1 and the interface device 2 are small, the operator's finger is inserted when connecting the devices. The problem such as no problem is solved, and the workability of the connection work is not impaired.
  • the function expansion device 3 is interfaced by fitting each hook 26 and each hook receiving portion 30 with the connector receptacle 5-A being inserted into the connector plug 5-B.
  • the apparatus 2 is configured to be mounted and fixed. Therefore, the function expansion device 3 can be locked so as not to be detached from the interface device 2 after the hooks and the hook receiving portions are fitted.
  • the connector plug 5-B when the connector plug 5-B is inserted into the connector receptacle 5-A, the function expansion device 3 is connected to the interface device by the guide pin 27 and the guide groove 31 engaging with each other. 2 to be guided. Therefore, the connector receptacle and the connector plug can be smoothly guided to a position where the connector receptacle and the connector plug face each other so that they can be fitted to each other.
  • the connector 5 itself including the connector receptacle 5-A and the connector plug 5-B also plays a role of guiding the function expansion device 3 to the interface device 2.
  • a function expansion device configured to be detachably interposed between an imaging device that captures an image of a subject and obtains image data and an interface device that performs data communication with an external device and expands the functions of the imaging device.
  • the function of the imaging device to be expanded is An image processing function for processing the image data, an operating environment maintaining function for maintaining an operating environment of the imaging device, a transmission method changing function for changing the transmission method of the image data, and a subject recognition function for recognizing the subject from the image data
  • the function expansion device according to (1) selected from at least one of the following.
  • a function expansion device interposed between the imaging device and the interface device and configured to expand the function of the imaging device,
  • a connector plug is provided on one side, and a connector receptacle capable of inserting and removing the connector plug is provided on the other side.
  • a function expansion device detachment structure in which the function expansion device is configured to be detachable from at least one of the imaging device and the interface device by inserting or removing the connector plug from the connector receptacle.
  • At least one of the imaging device and the interface device, and the function expansion device are provided with a hook on one side and a hook receiving part that fits the hook on the other side, The function expansion device is attached and fixed to at least one of the imaging device and the interface device by fitting the hook and the hook receiving portion with the connector receptacle inserted into the connector plug.
  • At least one of the imaging device and the interface device and the function expansion device are provided with a guide pin extending in the insertion / removal direction of the connector plug on one side, and a guide fitted to the guide pin on the other side.
  • a groove is provided, and when the connector plug is inserted into the connector receptacle, the function expansion device is engaged with at least one of the imaging device and the interface device by engaging the guide pin with the guide groove.
  • the attachment / detachment structure of the function expansion device according to (3) or (4) configured to be guided to one side.
  • a plurality of function expansion devices that are interposed between an imaging device that captures an image of a subject and obtains image data and an interface device that performs data communication with an external device and that expands the functions of the imaging device.
  • a function expansion device attachment / detachment structure having a connector plug or a connector receptacle in which one of the plurality of function expansion devices can be inserted into or removed from the other.
  • An imaging device for imaging a subject and acquiring image data An interface device for data communication with an external device;
  • a function expansion system comprising: a function expansion device that is detachably interposed between the image capture device and the interface device and is configured to expand a function of the image capture device.
  • one function expansion device 3 is detachably interposed between the imaging device 1 and the interface device 2, but 2 between the imaging device 1 and the interface device 2.
  • Two or more function expansion devices 3 may be detachably interposed.
  • FIG. 9 shows a function expansion system configured by interposing two function expansion devices 3 between the imaging device 1 and the interface device 2.
  • the imaging device 1 and the function expansion device 3 are electrically connected using the connector 4 and the function expansion device 3 and the interface device 2 are electrically connected using the connector 5 is described.
  • the imaging device 1 and the function expansion device 3 or the function expansion device 3 and the interface device 2 may be electrically connected by a flexible cable.
  • the number of connectors (here, “3”) is increased as shown in FIGS. 10 (A) and 10 (B).
  • the transmission capacity may be allocated to each of the connectors # 1 to # 3.
  • the transmission capacity may be allocated to the connectors # 1 to # 3 in increments of 20 Gbps. As a result, a transmission capacity of 60 Gbps is ensured across the connectors # 1 to # 3.
  • the outputs of a plurality of imaging devices 1 with a small number of pixels are synthesized by the function expansion device 3 at the subsequent stage and delivered to the interface device 2. May be.
  • FIG. 12 is a block diagram illustrating protocol conversion according to an embodiment of the present disclosure.
  • the protocol conversion in the interface unit (I / F unit) 2 will be described with reference to FIG.
  • the function expansion device 3 attached to the interface unit 2 transmits a data and command to the FPGA (Field-Programmable Gate Array) 1201 that is a programmable integrated circuit and the interface unit 2.
  • FPGA Field-Programmable Gate Array
  • CXP standard I / F 1202 that is a machine (TX).
  • the interface unit 2 includes an FPGA 1211 and a CXP standard I / F 1212 that is a receiver (RX) that receives data and commands from the function expansion device 3.
  • the interface unit 2 receives a command (CMD) conversion unit 1213 that converts a command received from the function expansion device 3, a frame buffer 1214 that temporarily stores data, and the function expansion device 3 via the frame buffer 1214.
  • a data conversion unit 1215 that performs packetization of the received data.
  • an I / F 1216 of a media access control layer (MAC layer) in a data link layer in an OSI reference model and a physical layer (PHY: Physical layer) 1217 are provided.
  • MAC layer media access control layer
  • PHY Physical layer
  • the I / F 1202 of the function expansion device 3 transmits data to the interface unit 2.
  • the I / F 1212 of the interface unit 2 receives data from the function expansion device 3, transmits a command to the CDM conversion unit 1213, and transmits data to the data conversion unit 1215 via the frame buffer 1214.
  • the CDM conversion unit 1213 executes mutual conversion of commands between CXP and Gig E (GE), USB or Camera Link (CL) by converting the XML file.
  • the data conversion unit 1215 performs data packetization from CXP to GE, USB, CL, or the like.
  • the conversion command and the packetized data are input to the MAC layer I / F 1216.
  • the MAC layer I / F 1216 transmits the input conversion command and packetized data to the PHY 1217.
  • the PHY 1217 transmits the received conversion command and packetized data to the PC 1220.
  • the function expansion device 3 As described above, by performing protocol conversion using the function expansion device 3 according to the present embodiment, even if the protocol to be used differs depending on the type of I / F (USB, GbE, etc.) on the user side, Since the communication method can be unified with the CXP standard in the function expansion system 10, the development cost can be suppressed. Further, by using the function expansion device 3, various types of I / F other than the CXP standard can be directly connected to the function expansion system 10, so that convenience for the user can be improved. In the present embodiment, an example in which the CXP standard is unified is shown. However, the present technology is not limited thereto, and GE, USB, CL, or the like is performed by performing protocol conversion using the function expansion device according to the present technology. It can be unified to other standards.
  • (1-8) Mirroring Function In this function, for example, two or more function expansion devices 3 are interposed between the imaging device 1 and the interface device 2, and image information obtained by imaging by the imaging device 1 is obtained. Stored in the function expansion device 3 and each of the function expansion devices 3 performs separate image processing, or when any failure occurs in one of the function expansion devices 3, it is stored in one of the function expansion devices 3. The image information may be used.
  • Time Stamp Function for example, time information at which recording, updating, and generation of image information recorded in the function expansion device 3 is managed. For example, when continuous shooting is performed in which a plurality of still images (frames) are continuously captured in the imaging apparatus 1, whether or not each frame is captured at a predetermined capturing time interval based on the time information. Can be managed.
  • Pattern Matching Function for example, when continuous shooting for continuously shooting a plurality of still images (frames) is performed in the imaging apparatus 1, a reference is obtained by a known cross-correlation method. Comparing the template image and the subject image, and extracting only the moving subject (for example, the moving vehicle, the driver's face, etc.) from the still image (frame) based on the similarity. Is possible.
  • the function expansion device 3 can replace, for example, hyperspectral information acquired by area scan with spectral information of a specific band based on theoretical calculation.
  • the function expansion device 3 can process a polarization image.
  • the following application functions (A) to (R) can be installed in the function expansion device 3. With this mounting, the performance of the imaging device 1 can be further improved.
  • (A) Edge (contour) enhancement function In this function, for example, the function expansion device 3 multiplies the edge signal extracted from the image information obtained by the imaging of the imaging device 1 by the edge enhancement coefficient, and uses this result as the original. By adding to the image information, an edge (contour) component in the image information can be emphasized.
  • the function expansion device 3 performs image processing using a median filter (Median Filter) on image information obtained by imaging of the imaging device 1,
  • Median Filter Median Filter
  • the density values in the n ⁇ n local area are arranged in ascending order, and the density value in the middle is processed as the output density of the pixel in the center of the area. This makes it possible to remove sesame salt-like noise.
  • the function expansion device 3 uses a color matrix corresponding to the brightness of the pixel for the pixel of the image information obtained by the imaging of the imaging device 1. Process.
  • the function expansion device 3 transmits an iris control signal for instructing the position of the iris (aperture opening / closing degree) to the imaging device 1.
  • the aperture position is set to the aperture opening / closing degree designated by the iris control signal.
  • (E) Water Mark (Digital Watermark) Function In this function, for example, in order to make it possible to find illegal copies on the network in the image information obtained by the imaging of the imaging device 1, It is possible to embed information such as letters and numbers to be specified.
  • the function expansion device 3 reduces the resolution of a specific portion (for example, a face image of a highly confidential person) of the image information obtained by the imaging of the imaging device 1. It is possible to perform a process of covering the specific part with a mask by applying a mosaic to the specific part.
  • a specific portion for example, a face image of a highly confidential person
  • the function expansion device 3 combines a plurality of pieces of image information with different exposure amounts obtained by imaging by the imaging device 1 into one piece of image information. Thus, it is possible to generate an image with an expanded dynamic range.
  • the function expansion device 3 specifies or extracts a character string included in image information (such as a human face image) obtained by imaging by the imaging device 1. It is possible. Accordingly, the function expansion device 3 can manage personal information of the person in association with the face image.
  • image information such as a human face image
  • the function expansion device 3 specifies or extracts a geometric pattern included in image information (such as a human face image) obtained by imaging by the imaging device 1. Is possible. As a result, like the OCR function described in (H) above, the function expansion device 3 can manage personal information of the person associated with the face image.
  • (J) Color matching function In this function, first, the imaging device 1 captures a subject image (original), and then the function expansion device 3 uses a device such as a printer to change the color of the captured subject image (original). In order to faithfully reproduce, it is possible to perform color conversion processing on the captured image.
  • the function expansion device 3 performs image recognition processing on a barcode or two-dimensional code (for example, QR code) that is an object of image recognition, and these barcode or two-dimensional It is possible to extract predetermined information associated with the code.
  • a barcode or two-dimensional code for example, QR code
  • (L) Camera Shake Correction Function With this function, when a shake occurs in the image pickup apparatus 1, this is detected, and the movement of the subject image formed on the image pickup surface of the image pickup device accompanying the shake of the image pickup apparatus 1 is canceled out. In addition, the camera shake correction optical system is driven. Thus, camera shake correction is realized.
  • (M) Auto-tracking function In this function, the function expansion device 3 analyzes frames obtained sequentially by moving image shooting by the imaging device 1 in real time, monitors the movement (change in position) of a specific subject, and specifies It is possible to track the subject.
  • the function expansion device 3 performs, for example, 3D by a light cutting method in which a measurement object is irradiated with a linear laser light source and the reflected light is received to measure a three-dimensional shape. An image can be formed. Further, the function expansion device 3 can form a stereo 3D image by capturing image information from the two imaging devices 1. Furthermore, the function expansion device 3 can also perform an analyzer (TOF: Time-of-Flight) type process that measures the target mass by measuring the time of flight of the accelerated charged particles (ions or electrons). .
  • TOF Time-of-Flight
  • the function expansion device 3 can calculate the body length of the ecosystem using, for example, an image recognition technique.
  • the function expansion device 3 can be equipped with, for example, a GPS terminal to acquire accurate current position information.
  • the function expansion device 3 can, for example, stitch a plurality of images captured by the plurality of imaging devices 1 into one image.
  • the function expansion device 3 can recognize a vehicle in ITS.
  • the function expansion device 3 can recognize a vehicle by a license plate recognition function that collates a license plate of a vehicle imaged by the imaging device 1 with a license plate registered in advance.

Abstract

ユーザがどういう機能を拡張したいかを選択して、必要に応じて自由に組み込み可能な技術を提供する。 本技術では、被写体を撮像して画像データを取得する撮像装置1と、外部装置との間でデータ通信を行うインターフェース装置2との間に脱着自在に介在され、撮像装置1の機能を拡張する構成の機能拡張装置3を提供する。拡張される撮像装置1の機能は、画像データを処理する画像処理機能、撮像装置1の動作環境を維持する動作環境維持機能、画像データの伝送方式を変更する伝送方式変更機能、画像データから被写体を認識する被写体認識機能の少なくとも一つから選択できる。

Description

機能拡張装置、機能拡張装置の脱着構造、及び機能拡張システム
 本開示は、機能拡張装置、機能拡張装置の脱着構造、及び機能拡張システムに関する。より詳しくは、撮像装置の機能を拡張する構成の機能拡張装置、機能拡張装置の脱着構造、及び機能拡張システムに関する。
 一般的なビデオカメラには、撮像素子として、公知のCMOS(Complementary Metal Oxide Semiconductor)センサ、公知のCCD(Charge Coupled Device)センサ等の固体撮像素子を備えたものが多用されている。
 従来、この種のビデオカメラには、CCDを内蔵しカメラ取付面を有するカメラ筐体と、このカメラ筐体の前方端部に装着され光軸方向(前後方向)に開口するねじ孔、及びねじ孔の開口周縁に露呈するレンズ筒取付面を有するフロントパネルと、このフロントパネルのねじ孔内に螺合されレンズ筒取付面に対接する開口端面を有するレンズ筒とを備えたものが採用されている。
 例えば特許文献1には、撮像素子としてのCCDを実装してなる基板と、外部接続用のコネクタを実装してなる基板とをカメラ筐体内に備え、撮像部(撮像素子)とインターフェース部(外部接続用のコネクタ)とを一体化したビデオカメラが開示されている。
特開平7-264450号公報
 上記特許文献1に開示された技術では、ビデオカメラの色々な機能を拡張しようとすると、機能ごとに別の種類の機能拡張装置を選択して使わなければならなかった。
 本開示はかかる問題点を解決するもので、その目的は、ユーザがどういう機能を拡張したいかを選択して、必要に応じて自由に組み込み可能な機能拡張装置、機能拡張装置の脱着構造、及び機能拡張システムを提供することである。
 本願発明者は、前記の目的を解決するために鋭意研究を行った結果、撮像装置とインターフェース装置との間に機能拡張装置を介在させることに着目し、本発明を完成させるに至った。
 即ち、本開示では、まず、被写体を撮像して画像データを取得する撮像装置と、外部装置との間でデータ通信を行うインターフェース装置との間に脱着自在に介在され、前記撮像装置の機能を拡張する構成の機能拡張装置を提供する。
 本開示では、次に、被写体を撮像して画像データを取得する撮像装置と、外部装置との間でデータ通信を行うインターフェース装置の少なくともいずれか一方と、
前記撮像装置と前記インターフェース装置との間に介在され、前記撮像装置の機能を拡張する構成の機能拡張装置とは、
一方にコネクタプラグが設けられているとともに、他方に当該コネクタプラグの挿入及び抜去が可能なコネクタレセプタクルが設けられており、
 前記コネクタレセプタクルに対する前記コネクタプラグの挿入または抜去によって、前記機能拡張装置が前記撮像装置と前記インターフェース装置の少なくともいずれか一方に脱着自在に構成されている機能拡張装置の脱着構造を提供する。
 本開示では、次に、被写体を撮像して画像データを取得する撮像装置と、外部装置との間でデータ通信を行うインターフェース装置との間に介在され、前記撮像装置の機能を拡張する構成の複数の機能拡張装置を備え、
前記複数の機能拡張装置の一方は、他方との挿入または抜去を可能にするコネクタプラグ又はコネクタレセプタクルを有する機能拡張装置の脱着構造を提供する。
 本開示では、次に、
被写体を撮像して画像データを取得する撮像装置と、
外部装置との間でデータ通信を行うインターフェース装置と、
前記撮像装置と前記インターフェース装置との間に脱着自在に介在され、前記撮像装置の機能を拡張する構成の機能拡張装置と、を備える機能拡張システムを提供する。
 本開示によれば、ユーザがどういう機能を拡張したいかを選択して、必要に応じて自由に組み込み可能な機能拡張装置を提供できる。なお、ここに記載された効果は、必ずしも限定されるものではなく、本開示中に記載されたいずれかの効果であってもよい。
本開示の一実施形態に係る機能拡張システム10の外観斜視図である。 撮像装置1の正面側の外観斜視図である。 インターフェース装置2の正面側の外観斜視図である。 インターフェース装置2の背面側の外観斜視図である。 機能拡張装置3の正面側の外観斜視図である。 機能拡張装置3の背面側の外観斜視図である。 コネクタプラグ5-Bが設けられたプリント基板17の正面視図である。 当該プリント基板17の側面視図である。 コネクタプラグ5-Bの挿入及び抜去が可能なコネクタレセプタクル5-Aが設けられたプリント基板25の正面視図である。 当該プリント基板25の側面視図である。 本開示の一実施形態に係る各装置間における信号の引き渡し経路の一例を示す説明図である。 本開示の一実施形態に係る各装置間で引き渡されるパケットの形式及び内容の一例を示す説明図である。 本開示の変形例に係る機能拡張システムの外観斜視図である。 本開示の別の変形例に係る機能拡張システムの外観斜視図である。 本開示の別の変形例に係るインターフェース装置の正面図である。 本開示の別の変形例に係る機能拡張システムの外観斜視図である。 本開示の一実施形態に係るプロトコル変換を示すブロック図である。
 以下、本開示を実施するための好適な形態について、図面を参照しながら説明する。以下に説明する実施形態は、本開示の代表的な実施形態の一例を示したものであり、これにより本開示の範囲が狭く解釈されることはない。なお、説明は以下の順序で行う。
 本開示の一実施形態に係る機能拡張装置、機能拡張装置の脱着構造、及び機能拡張システムについて説明する。
[全体構成]
 図1は、本開示の一実施形態に係る機能拡張システム10の外観斜視図である。本開示に係る機能拡張システム10は、以下に列記するように、撮像装置1、インターフェース装置2、と、これらの装置の間に介挿され、且つ脱着可能であるとともに、既定の機能を有する所定数N(本実施形態では、簡単のため「1」であると仮定する。)の機能拡張装置3から構成される。以下、各装置について詳細に説明する。
[撮像装置1]
 図2は、撮像装置1の正面側の外観斜視図である。撮像装置1では、被写体を撮像して画像データが取得される。撮像装置1は、レンズ、撮像素子及びA/D変換器などを有する
 撮像装置1は、全体が略直方体の外観を呈する本体11と、この本体11の前面部に着脱自在に設けられ複数のレンズを有するレンズ筒12とによって構成されている。この本体11は、各々が互いに対向する上下左右の壁板を有し前後方向に開口する筐体13と、筐体13の前方開口部に装着され光軸方向に開口する前面板14と、筐体13の後方開口部に装着され表裏両面に開口する外部接続用の貫通口を有する後面板15とからなる。この筐体13には、上記撮像素子等に接続されるプリント基板が内蔵されている。
 上記撮像素子は、上記レンズを通過した被写体光束により被写体を撮像する。撮像素子としては、公知のCMOSセンサ、公知のCCDセンサ等の固体撮像素子を例示することができる。撮像素子は、被写体光束を受光する複数の光電変換素子を有しており、複数の光電変換素子でそれぞれ生じた蓄積電荷量に応じたアナログ信号を上記A/D変換器へ出力する。A/D変換器は、アナログ信号をデジタル信号に変換し、画像データとして機能拡張装置3に出力する。
 なお、筐体13の内部には、撮像素子の近傍に設けられ、撮像素子の温度を検知可能な温度センサや、筐体13の内部を好ましい湿度で維持するための公知の除湿素子や、筐体13の内部温度を好ましい温度に維持するための公知の加熱ヒータを設けてもよい。
 なお、撮像装置1は、例えば、画素の感度不均一性PRNU(Phot Response Non Uniformity)を補正する処理や、画素の暗電流不均一性DSNU(Dark Signal Non Uniformity)を補正する処理や、輝度の黒レベルを補正する画像処理回路を有していてもよい。
 撮像装置1は、機能拡張装置3の一端に直接嵌合可能な機械的構造を有する。撮像装置1の機械的構造は、本開示の効果を損なわない限り特に限定されず、インターフェース装置2の一端に直接嵌合可能な機械的構造を有していてもよい。撮像装置1は、機能拡張装置3との間で電気信号又は光信号の接続に供されるコネクタプラグ4-A(図7参照)を有する。このコネクタプラグ4-Aは、上記後面板15に設けられる。
[インターフェース装置2]
図3(A)は、インターフェース装置2の前面側の外観斜視図であり、図3(B)は、インターフェース装置2の背面側の外観斜視図である。インターフェース装置2では、例えばパソコン等の外部装置との間でデータ通信が行われる。インターフェース装置2は、例えば、USB(Universal Serial Bus)、GbE(Gigabit Ethernet)、FIBER(TBD)、CXP(CoaXPress)等の規格に従った方式で通信を行うことができる。
 インターフェース装置2は、前方向に開口した箱状の外観を呈する本体16と、この本体16の前方開口部に取り付けられたプリント基板17とからなる。図3(B)に示すように、本体16背面側には、不図示の外部装置との間で電気信号又は光信号の接続に供されるコネクタ18やピン19等が配置される。本実施形態のインターフェース装置2では、CXP4の規格に従った4本のピン19が並設されている。
インターフェース装置2は、機能拡張装置3の他端に直接嵌合可能な機械的構造を有する。インターフェース装置2の機械的構造は、本開示の効果を損なわない限り特に限定されず、撮像装置1の一端に直接嵌合可能な機械的構造を有していてもよい。
[機能拡張装置3]
図4(A)は、機能拡張装置3の前面側の外観斜視図であり、図4(B)は、機能拡張装置3の背面側の外観斜視図である。機能拡張装置3は、撮像装置1とインターフェース装置2との間に脱着自在に介在され、撮像装置1の機能を拡張する構成を有する。ここでの「拡張」には、撮像装置1に元々ある機能を拡張する場合と、撮像装置1に元々ある機能を変更する場合の両方が含まれる。
機能拡張装置3は、例えば、CPU(Central Processing Unit)やGPU(Graphics Processing Unit)、DSP(Digital Signal Processor)などの各種マイクロプロセッサ、ASIC(Application Specific Integrated Circuit)、RAM、ROM等の各種ICメモリを有する。
機能拡張装置3は、全体が筒状の外観を呈する筐体20を有する。この筐体20は、各々が互いに対向する上壁板21、下壁板22、左壁板23、及び右壁板24を有し、前後方向に開口する貫通口を有している。下壁板22には、上記の各種マイクロプロセッサや各種ICメモリが実装されたプリント基板25が配置される。なお、機能拡張装置3は、上記貫通口を介して撮像装置1を冷却可能な公知のファンを筐体20内に備えていてもよい。
機能拡張装置3は、撮像装置1の一端、及び、インターフェース装置2の一端に直接嵌合可能な機械的構造を有する。機能拡張装置3は、撮像装置1との間における電気信号又は光信号の接続に供されるコネクタレセプタクル4-B(図7参照)を有する。このコネクタレセプタクル4-Bは、例えば、上記下壁板22に配置される。コネクタレセプタクル4-Bは、撮像装置1に設けたコネクタプラグ4-Aの挿入及び抜去が可能である。
[機能拡張装置3の脱着構造]
 図5(A)は、コネクタプラグ5-Bが設けられたプリント基板17の正面視図である。図5(B)当該プリント基板17の側面視図である。図6(A)は、コネクタプラグ5-Bの挿入及び抜去が可能なコネクタレセプタクル5-Aが設けられたプリント基板25の正面視図である。図6(B)は、当該プリント基板25の側面視図である。
 本実施形態において、インターフェース装置2には、機能拡張装置3との間で電気信号又は光信号の接続に供されるコネクタプラグ5-Bが設けられている。このコネクタプラグ5-Bは、図5(A),(B)に示すように、上記プリント基板17に設けられる。一方、機能拡張装置3には、インターフェース装置2との間における電気信号又は光信号の接続に供されるコネクタレセプタクル5-Aが設けられている。このコネクタレセプタクル5-Aは、図6(A),(B)に示すように、上記プリント基板25に設けられている。本実施形態では、上記コネクタレセプタクル5-Aに対する上記コネクタプラグ5-Bの挿入または抜去によって、機能拡張装置3がインターフェース装置2に脱着自在に構成される。同様に、本実施形態では、上記コネクタレセプタクル4-Bに対する上記コネクタプラグ4-Aの挿入及び抜去によって、機能拡張装置3が撮像装置1に脱着自在に構成される。
 また、機能拡張装置3には、筐体20の背面部において各々が互いに対向する位置に形成された一対のフック26が設けられる(図4(B)参照)。なお、各フック26は丁度、親指と人差し指で持つことのできる位置に配置されるので使い易く、安定かつ良好な操作感を得ることができる。
各フック26と嵌合する一対のフック受け部30は、インターフェース装置2の本体16に設けられる(図3(A)参照)。本実施形態では、上記コネクタレセプタクル5-Aが上記コネクタプラグ5-Bに挿入された状態で、各フック26と各フック受け部30とが嵌合することによって、機能拡張装置3がインターフェース装置2に装着固定される。また、各フック26と各フック受け部30は、機能拡張装置3のインターフェース装置2への装着が確実に完了しているか否かを音や目視を通じて確認するために設けられている。
さらに、機能拡張装置3には、筐体20の背面部において各々が互いに対向する位置に形成され、コネクタプラグ5-Bの挿抜方向に延びる一対のガイドピン27が設けられる(図4(B)参照)。各ガイドピン27と嵌合する各ガイド溝31は、インターフェース装置2の本体16に設けられる(図3(A)参照)。各ガイド溝31は、寸法のバラツキを吸収するために、長穴形状を有することが好ましい。この長穴は、左右方向のずれの発生を防止するために、左右方向よりも上下方向に長く形成されることが好ましい。
本実施形態では、上記コネクタレセプタクル5-Aに対する上記コネクタプラグ5-Bの挿入の際に、上記ガイドピン27と上記ガイド溝31とが係合することによって、機能拡張装置3がインターフェース装置2に案内される。
[各装置間における信号の引き渡し経路]
図7は、本開示の一実施形態に係る各装置間における信号の引き渡し経路の一例を示す説明図である。図7に示すように、撮像装置1、インターフェース装置2、及び機能拡張装置3の間において信号の引き渡しに供される各バスにはコネクタ4、5が介在している。なお、コネクタ4、5は、部品精度を吸収可能なフローティングタイプを用いることが好ましい。
撮像装置1と機能拡張装置3との間には、コネクタ4が介在している。コネクタ4は、上記コネクタプラグ4-Aと、上記コネクタレセプタクル4-Bとからなる。一方、機能拡張装置3とインターフェース装置2との間には、コネクタ5が介在している。コネクタ5は、上記コネクタレセプタクル5-Aと、上記コネクタプラグ5-Bとからなる。
[各装置間で引き渡されるパケットの形式及び内容]
 図8は、本開示の一実施形態に係る各装置1~3間で引き渡されるパケットの形式及び内容の一例を示す説明図である。図8に示すパケットは、4つの識別フィールド♯1、宛先フィールド#2、制御フィールド#3、データフィールド♯4から構成される。
識別フィールド#1には、データフィールド♯4に格納されるデータの種類が格納される。また、宛先フィールド#2には、データフィールド♯4に配置されるデータが引き渡されるべき装置の識別情報が配置される。さらに、制御フィールド#3には、データフィールド♯4に配置されるデータに施されるべき処理の形態が配置される。最後に、データフィールド#4には、処理対象になるデータが格納される。なお以下では、データフィールド#4に配置されて各装置間を伝送されるデータを総称して、「伝送データ」ということがある。
[拡張対象とされる撮像装置1の機能]
本開示において、機能拡張装置3によって拡張される撮像装置1の機能は、(1)画像処理機能、(2)動作環境維持機能、(3)伝送方式変更機能、及び(4)被写体認識機能の少なくとも一つから選択することができる。
(1)画像処理機能
 画像処理機能は、画像データを処理する機能を意味し、以下に示す各機能(1-1)~(1-7)を含む。
(1-1)画像補正機能
 撮像装置1は、被写体の撮像によって得られた画像データを、コネクタ4を介して機能拡張装置3に引き渡す。なお、画像データは図8に示すデータフィールド♯4に配置される。画像データが引き渡される機能拡張装置3の識別情報「3」は図8に示す宛先フィールド#2に配置される。機能拡張装置3は、コネクタ4を介して取り込んだ画像データに対して欠陥画素補正などの画像補正処理を施す。補正処理に必要な補正情報は図8に示す制御フィールド#3に格納される。
(1-2)解像度変更機能
この機能では、機能拡張装置3は、伝送データに解像度変更処理を施す。この機能では、例えば目標解像度など、解像度変更に必要な情報が図8に示す制御フィールド#3に格納され、例えば画像解像度が2kから4kに変更される。その他は上記(1-1)と同じである。
(1-3)デジタルズーム(Digital Zoom)機能
 この機能では、機能拡張装置3は、伝送データにデジタルズーム処理を施す。具体的に、機能拡張装置3は、画像の拡大時にピクセル間を公知の内挿法などで補間したり、画像の縮小時にピクセルを間引いたりする。この機能では、例えばズーム倍率など、デジタルズーム処理に必要な情報が図8に示す制御フィールド#3に格納される。その他は上記(1-1)と同じである。
(1-4)画像圧縮機能
この機能では、機能拡張装置3は、伝送データに画像圧縮処理を施す。この機能では、例えば目標圧縮比など、圧縮処理に必要な情報が図8に示す制御フィールド#3に格納され、画像データに対して所定の圧縮形式(例えば、JPEG、MPEG、H.264)の圧縮処理が施される。その他は上記(1-1)と同じである。
(1-5)階調補正機能
この機能では、機能拡張装置3は、伝送データに階調補正処理を施す。この機能では、例えば目標階調値など、階調補正処理に必要な情報が図8に示す制御フィールド#3に格納される。その他は上記(1-1)と同じである。
(1-6)ローパスフィルタ機能
この機能では、機能拡張装置3は、伝送データに対して、ローパスフィルタによるフィルタリング処理を施す。この機能では、例えば遮断周波数など、フィルタリング処理に必要な情報が図8に示す制御フィールド#3に格納され、画像データから低周波成分が分離される。その他は上記(1-1)と同じである。
(1-7)スペクトル処理機能
この機能では、機能拡張装置3は、伝送データに基づいて撮像対象の観測光の成分分析などを行ってスペクトル処理を実行する。この機能では、上記成分分析に必要な情報が図8に示す制御フィールド#3に格納される。その他は上記(1-1)と同じである。
(2)動作環境維持機能
 動作環境維持機能は、撮像装置の動作環境を維持する機能を意味し、以下に示す各機能(2-1)~(2-3)を含む。
(2-1)ファンによる冷却機能
撮像装置1は、温度センサによって検知された信号を、撮像素子の温度データとして、コネクタ4を介して機能拡張装置3に引き渡す。なお、温度データは図8に示すデータフィールド♯4に配置される。温度データが引き渡される機能拡張装置3の識別情報「3」は図8に示す宛先フィールド#2に配置される。機能拡張装置3は、コネクタ4を介して取り込んだ温度データに基づいて、撮像装置1の撮像素子を冷却可能なようにファンを駆動する。この機能では、上記温度データに施されるべき特異な処理が無いので、制御フィールド#3にヌルコード「NUL」が配置される。なお、ファンによって行われる放熱もしくは吸熱は、ファンに代えて備えられたペルチェ素子による温度制御によって実現されてもよい。
(2-2)ヒータによる加熱機能
 この機能では、機能拡張装置3は、伝送データに基づいて、加熱ヒータを駆動制御する。この機能では、撮像装置1の撮像素子は、加熱ヒータからの熱を受けて加熱される。その他は上記(2-1)と同じである。
(2-3)除湿素子による除湿機能
 この機能では、機能拡張装置3は、伝送データに基づいて、除湿素子を駆動制御する。これにより、撮像装置1の撮像素子が除湿される。その他は上記(2-1)と同じである。
(3)伝送方式変更機能
伝送方式変更機能は、画像データの伝送方式を変更する機能を意味し、以下に示す各機能(3-1)及び(3-2)を含む。
(3-1)フレームバッファ機能
 撮像装置1は、伝送データを機能拡張装置3に引き渡す。機能拡張装置3は伝送データをバッファメモリに格納する。そして、機能拡張装置3は、バッファメモリに記憶されている伝送データを公知のインターレース方式でコネクタ5を介してインターフェース装置2に引き渡す。なお、伝送データが引き渡されるインターフェース装置2の識別情報「2」は図8に示す宛先フィールド#2に配置される。伝送方式の内容(インターレース方式)が図8に示す制御フィールド#3に格納される。
(3-2)ストリーミング機能
 この機能では、撮像装置1は伝送データを公知のストリーミング方式でインターフェース装置2に引き渡す。この機能では、伝送方式の内容(ストリーミング方式)が図8に示す制御フィールド#3に格納される。その他は上記(3-1)と同じである。
(4)被写体認識機能
被写体認識機能は、画像データから被写体を認識する機能を意味し、以下に示す各機能(4-1)~(4-4)を含む。
(4-1)高度道路交通システムITS(Intelligent Transport System)
 この機能では、高速道路に設置された撮像装置1が、被写体の撮像によって得られた画像データを、コネクタ4を介して機能拡張装置3に引き渡す。機能拡張装置3は、コネクタ4を介して取り込んだ画像データを基に被写体の特徴データを抽出して登録しておき、その後に撮像装置1で撮像された画像データ中の特徴データを、既に登録された特徴データに照合することで被写体を追跡する。なお、被写体から抽出された特徴データは図8に示す制御フィールド#3に格納される。その他は上記(1-1)と同じである。
(4-2)Suveillance(人物追跡)
この機能では、撮像装置1が、注目人物の撮像によって得られた画像データを、コネクタ4を介して機能拡張装置3に引き渡す。機能拡張装置3は、その時の撮像装置1のパラメータ(位置・姿勢等の変化値)を検出し、それらのパラメータを他の撮像装置に伝えることによって、全ての撮像装置の位置・姿勢を同期的に動かしながら、注目人物を追従し撮像する。この機能では、撮像装置1の各パラメータが図8に示す制御フィールド#3に格納される。その他は上記(1-1)と同じである。
(4-3)自動ナンバープレート等認識機能
 この機能では、雨天などの悪天候状態でも車両を認識可能なソフトウェアや、当該車両のナンバープレート又は運転手などを認識可能なソフトウェアが機能拡張装置3に実装される。撮像装置1は、車両の撮像によって得られた画像データを、コネクタ4を介して機能拡張装置3に引き渡す。機能拡張装置3は、コネクタ4を介して取り込んだ画像データを基に車両のナンバープレートや運転手などを認識する。この機能では、ナンバープレートや運転手などを認識するための認識情報が図8に示す制御フィールド#3に格納される。その他は上記(1-1)と同じである。
(4-4)動画像および静止画像を伝送する機能
 この機能では、例えば道路に敷かれているセンサなど、外部からのトリガーに反応して車両などの動画像および静止画像を記憶し、記憶した動画像および静止画像をスピード違反などの判定条件に応じてサーバに伝送可能なソフトウェアが機能拡張装置3に実装される。撮像装置1は、車両などの撮像によって得られた画像データを、コネクタ4を介して機能拡張装置3に引き渡す。機能拡張装置3は、コネクタ4を介して取り込んだ画像データを動画像や静止画像として記憶する。そして、機能拡張装置3は、記憶した動画像や静止画像を上記判定条件に応じて、コネクタ5を介してインターフェース装置2に引き渡す。引き渡された動画像や静止画像はインターフェース装置2を介してサーバに伝送される。なお、動画像や静止画像が引き渡されるインターフェース装置2の識別情報「2」は図8に示す宛先フィールド#2に配置される。上記判定条件は図8に示す制御フィールド#3に配置される。動画像や静止画像は図8に示すデータフィールド#4に格納される。
本実施形態では、ユーザがどういう機能を拡張したいかを選択して、必要に応じて自由に組み込み可能な機能拡張システム10を提供できる。また、本実施形態の機能拡張システム10では、ユーザが自分でプログラムできる領域の解放、およびアップデートが可能である。
また、本実施形態では、上記コネクタレセプタクル5-Aに対する上記コネクタプラグ5-Bの挿入または抜去によって、機能拡張装置3がインターフェース装置2に脱着自在に構成される。同様に上記コネクタレセプタクル4-Bに対する上記コネクタプラグ4-Aの挿入及び抜去によって、機能拡張装置3が撮像装置1に脱着自在に構成される。そのため、従来のようなフレキシブルケーブルでコネクタ同士を接続する場合のようにフレキシブルケーブルの長さを余分に確保する必要がない。
また、本実施形態では、コネクタレセプタクルとコネクタプラグとが直結されるので、仮に撮像装置1やインターフェース装置2などの機械的寸法が小さくても、各装置間の接続作業時に作業者の指が入らない等の問題が解消され、接続作業の作業性が損なわれることはない。
また、本実施形態では、上記コネクタレセプタクル5-Aが上記コネクタプラグ5-Bに挿入された状態で、各フック26と各フック受け部30とが嵌合することによって、機能拡張装置3がインターフェース装置2に装着固定されるように構成される。そのため、各フックと各フック受け部との嵌合後において、機能拡張装置3がインターフェース装置2から外れないように繋ぎ止めることができる。
 また、本実施形態では、上記コネクタレセプタクル5-Aに対する上記コネクタプラグ5-Bの挿入の際に、上記ガイドピン27と上記ガイド溝31とが係合することによって、機能拡張装置3がインターフェース装置2に案内されるように構成される。そのため、コネクタレセプタクルとコネクタプラグとが互いに嵌合可能に対向する位置まで、コネクタレセプタクルとコネクタプラグをスムーズに案内できる。また、本実施形態では、上記コネクタレセプタクル5-Aと、上記コネクタプラグ5-Bとからなるコネクタ5自体も、機能拡張装置3をインターフェース装置2へガイドする役割を果たしている。
 また、本開示は、以下のような構成をとることもできる。
(1)
被写体を撮像して画像データを取得する撮像装置と、外部装置との間でデータ通信を行うインターフェース装置との間に脱着自在に介在され、前記撮像装置の機能を拡張する構成の機能拡張装置。
(2)
拡張される前記撮像装置の機能は、
前記画像データを処理する画像処理機能、前記撮像装置の動作環境を維持する動作環境維持機能、前記画像データの伝送方式を変更する伝送方式変更機能、前記画像データから前記被写体を認識する被写体認識機能の少なくとも一つから選択される(1)に記載の機能拡張装置。
(3)
被写体を撮像して画像データを取得する撮像装置と、外部装置との間でデータ通信を行うインターフェース装置の少なくともいずれか一方と、
前記撮像装置と前記インターフェース装置との間に介在され、前記撮像装置の機能を拡張する構成の機能拡張装置とは、
一方にコネクタプラグが設けられているとともに、他方に当該コネクタプラグの挿入及び抜去が可能なコネクタレセプタクルが設けられており、
前記コネクタレセプタクルに対する前記コネクタプラグの挿入または抜去によって、前記機能拡張装置が前記撮像装置と前記インターフェース装置の少なくともいずれか一方に脱着自在に構成されている機能拡張装置の脱着構造。
(4)
前記撮像装置と前記インターフェース装置との少なくともいずれか一方と、前記機能拡張装置とは、一方にフックが設けられているとともに、他方に前記フックと嵌合するフック受け部が設けられており、前記コネクタレセプタクルが前記コネクタプラグに挿入された状態で、前記フックと前記フック受け部とが嵌合することによって、前記機能拡張装置が前記撮像装置と前記インターフェース装置の少なくともいずれか一方に装着固定されるように構成されている(3)に記載の機能拡張装置の脱着構造。
(5)
前記撮像装置と前記インターフェース装置との少なくともいずれか一方と、前記機能拡張装置とは、一方に前記コネクタプラグの挿抜方向に延びるガイドピンが設けられているとともに、他方に前記ガイドピンと嵌合するガイド溝が設けられており、前記コネクタレセプタクルに対する前記コネクタプラグの挿入の際に、前記ガイドピンと前記ガイド溝とが係合することによって、前記機能拡張装置が前記撮像装置と前記インターフェース装置の少なくともいずれか一方に案内されるように構成されている(3)又は(4)に記載の機能拡張装置の脱着構造。
(6)
被写体を撮像して画像データを取得する撮像装置と、外部装置との間でデータ通信を行うインターフェース装置との間に介在され、前記撮像装置の機能を拡張する構成の複数の機能拡張装置を備え、
前記複数の機能拡張装置の一方は、他方との挿入または抜去を可能にするコネクタプラグ又はコネクタレセプタクルを有する機能拡張装置の脱着構造。
(7)
 前記複数の機能拡張装置の一方と他方は、前記コネクタプラグと前記コネクタレセプタクルとが嵌合した状態で、相互に係合するフックとフック受け部をそれぞれ有する(6)に記載の機能拡張装置の脱着構造。
(8)
前記複数の機能拡張装置の一方と他方は、前記コネクタプラグと前記コネクタレセプタクルとが嵌合した状態で、相互に係合するガイドピンとガイド溝をそれぞれ有する(6)又は(7)に記載の機能拡張装置の脱着構造。
(9)
被写体を撮像して画像データを取得する撮像装置と、
外部装置との間でデータ通信を行うインターフェース装置と、
前記撮像装置と前記インターフェース装置との間に脱着自在に介在され、前記撮像装置の機能を拡張する構成の機能拡張装置と、を備える機能拡張システム。
なお、本実施形態の機能拡張システムでは、撮像装置1とインターフェース装置2との間に、1つの機能拡張装置3を脱着自在に介在させたが、撮像装置1とインターフェース装置2との間に2つ以上の機能拡張装置3を脱着自在に介在させてもよい。例えば、図9は、撮像装置1とインターフェース装置2との間に2つの機能拡張装置3を介在させて構成した機能拡張システムを示す。
なお、本実施形態の機能拡張システムでは、撮像装置1と機能拡張装置3とをコネクタ4を用いて電気接続し、機能拡張装置3とインターフェース装置2とをコネクタ5を用いて電気接続する例について述べたが、撮像装置1と機能拡張装置3との間や、機能拡張装置3とインターフェース装置2との間をフレキシブルケーブルで電気的に接続してもよい。
なお、本実施形態の機能拡張システムでは、画像信号のバンド幅が不足する場合には、図10(A)、(B)に示すようにコネクタの数(ここでは「3」とする)を増やし、且つ、それぞれのコネクタ#1~#3に伝送容量を配分してもよい。例えば、伝送容量がコネクタ#1~#3に20Gbps刻みで配分されてもよい。これにより、コネクタ#1~#3全体で、60Gbpsの伝送容量が確保される。
 なお、本実施形態の機能拡張システムでは、図11に示すような形態で、例えば画素数の少ない複数の撮像装置1の出力を、後段にある機能拡張装置3で合成し、インターフェース装置2に引き渡してもよい。
 図12は、本開示の一実施形態に係るプロトコル変換を示すブロック図である。図12を用いて、インターフェース部(I/F部)2におけるプロトコル変換について説明する。
 図12に示すように、インターフェース部2に装着された機能拡張装置3は、プログラミングが可能な集積回路であるFPGA(Field-Programmable Gate Array)1201と、インターフェース部2にデータ及びコマンドを送信する送信機(TX)であるCXP規格のI/F1202と、を備えている。
 インターフェース部2は、FPGA1211と、機能拡張装置3からデータ及びコマンドを受信する受信機(RX)であるCXP規格のI/F1212と、を備えている。また、インターフェース部2は、機能拡張装置3から受信したコマンドを変換するコマンド(CMD)変換部1213と、データを一時的に保存するフレームバッファ1214と、フレームバッファ1214を介して機能拡張装置3から受信したデータのパケット化を実行するデータ変換部1215と、を備えている。さらに、一例として、OSI参照モデルにおけるデータリンク層内のメディアアクセス制御層(MAC層)のI/F1216と、物理層(PHY:Physical layer)1217と、を備えている。
 本実施形態では、機能拡張装置3のI/F1202が、データをインターフェース部2に送信する。インターフェース部2のI/F1212は、機能拡張装置3からデータを受信し、CDM変換部1213にコマンドを送信し、フレームバッファ1214を介してデータ変換部1215にデータを送信する。
 CDM変換部1213は、XMLファイルの変換により、CXPと Gig E(GE)、USB又は Camera Link(CL)とのコマンドの相互変換を実行する。データ変換部1215は、例えば、CXPからGE、USB又はCLなどへデータパケット化を実行する。変換コマンド及びパケット化データは、MAC層のI/F1216に入力される。MAC層のI/F1216は、入力された変換コマンド及びパケット化データをPHY1217へ送信する。PHY1217は、受信した変換コマンド及びパケット化データをPC1220へ送信する。
 上述の通り、本実施形態に係る機能拡張装置3を用いてプロトコル変換を行うことにより、ユーザ側のI/Fの種類(USBやGbE等)によって使用するプロトコルが異なっていても、カメラ等の機能拡張システム10内部では通信方式をCXP規格に統一することができるため、開発コストを抑えることが可能となる。また、機能拡張装置3を用いることにより、CXP規格以外の様々な種類のI/Fを機能拡張システム10に直接接続することができるため、ユーザの利便性を向上させることもできる。また、本実施形態では、CXP規格に統一する例を示しているが、本技術はこれに限らず、本技術に係る機能拡張装置を用いてプロトコル変換を行うことにより、GE、USB又はCLなどの他の規格に統一することもできる。
 なお、本実施形態の機能拡張システムでは、上記(1)画像処理機能に、上記機能(1-1)~(1-7)が含まれる例について述べたが、これら機能以外にも、以下の機能(1-8)~(1-12)が含まれていてもよい。
(1-8)ミラーリング機能
 この機能では、例えば、撮像装置1とインターフェース装置2との間に2つ以上の機能拡張装置3を介在させて、撮像装置1の撮像により得られた画像情報を各々の機能拡張装置3に格納しておき、各々の機能拡張装置3で別々の画像処理を行ったり、一方の機能拡張装置3に何らかの障害が発生した場合に、片方の機能拡張装置3に格納されている画像情報を使用したりしてもよい。
(1-9)タイムスタンプ機能
 この機能では、例えば、機能拡張装置3に記録された画像情報について、その記録・更新・生成が行われた時刻情報が管理される。例えば、撮像装置1において複数枚の静止画像(コマ)を連続して撮影する連写撮影が行われる場合に、当該時刻情報に基づけば、各コマが所定の撮影時間間隔で撮影されたか否かの管理が可能である。
(1-10)パターンマッチング機能
 この機能では、例えば、撮像装置1において複数枚の静止画像(コマ)を連続して撮影する連写撮影が行われる場合に、公知の相互相関法により基準となるテンプレート画像と被写体画像とを比較して、その類似度に基づいて、動いている被写体(例えば、走行中の車両や、車両の運転手の顔など)のみを静止画像(コマ)から抽出することが可能である。
(1-11)ハイパースペクトル処理機能
 この機能では、機能拡張装置3は、例えば、エリアスキャンで取得したハイパースペクトル情報を理論計算に基づいて、特定の帯域のスペクトル情報に置き換えることが可能である。
(1-12)偏光処理機能
 この機能では、例えば、機能拡張装置3は、偏光画像を処理することが可能である。
 なお、本実施形態の機能拡張装置では、以下のアプリケーション機能(A)~(R)を機能拡張装置3に搭載可能である。この搭載により、撮像装置1の性能をより向上させることができる。
(A)エッジ(輪郭)強調機能
この機能では、例えば、機能拡張装置3は、撮像装置1の撮像により得られた画像情報から抽出したエッジ信号にエッジ強調係数を乗じ、この結果をもとの画像情報に加算することによって、画像情報におけるエッジ(輪郭)成分を強調することが可能である。
(B)メディアンフィルタ(ゴマ塩雑音除去)機能
この機能では、例えば、機能拡張装置3は、撮像装置1の撮像により得られた画像情報にメディアンフィルタ(Median Filter)を用いた画像処理を施し、n×nの局所領域における濃度値を小さい順に並べて、 真ん中にくる濃度値を領域中央の画素の出力濃度とする処理を行う。 これによりゴマ塩状の雑音除去が可能になる。
(C)カラーマトリックス機能
この機能では、例えば、機能拡張装置3は、撮像装置1の撮像により得られた画像情報の画素に対して、当該画素の明るさに応じたカラーマトリックスを用いてカラーマトリックス処理を行う。
(D)アイリス(レンズ絞り)コントロール機能
この機能では、例えば、機能拡張装置3が、絞りの位置(絞り開閉度)を指示するためのアイリスコントロール信号を撮像装置1に送信する。そして、撮像装置1では、当該アイリスコントロール信号により指定された絞り開閉度に絞りの位置が設定される。
(E)Water Mark(電子透かし)機能
この機能では、例えば、撮像装置1の撮像により得られた画像情報中に、ネットワーク上の違法複製物を発見することを可能にするため、著作者等を特定する文字や数字等の情報を埋め込んでおくことが可能である。
(F)マスキング機能
 この機能では、例えば、機能拡張装置3が、撮像装置1の撮像により得られた画像情報のうち、特定部分(例えば守秘性の高い人物の顔画像など)の解像度を落としたり、当該特定部分にモザイクをかけたりして、当該特定部分をマスクで覆う処理が可能である。
(G)HDR(High Dynamic Range)機能
 この機能では、例えば、機能拡張装置3が、撮像装置1の撮像により得られた露光量の異なる複数枚の画像情報を1枚の画像情報に合成することで、ダイナミックレンジを拡大させた画像を生成する処理が可能である。
(H)OCR(Optical Character Recognition)機能
 この機能では、例えば、機能拡張装置3は、撮像装置1の撮像により得られた画像情報(人物の顔画像など)に含まれる文字列を特定又は抽出することが可能である。これにより、機能拡張装置3は、当該人物の個人情報等を顔画像に紐付けて管理可能である。
(I)幾何学パターン認識機能
 この機能では、例えば、機能拡張装置3は、撮像装置1の撮像により得られた画像情報(人物の顔画像など)に含まれる幾何学パターンを特定又は抽出することが可能である。これにより、上記(H)で述べたOCR機能と同様に、機能拡張装置3は、当該人物の個人情報等を顔画像に紐付けて管理可能である。
(J)カラーマッチング機能
 この機能では、まず、撮像装置1が被写体画像(オリジナル)を撮像し、次に、機能拡張装置3は、撮像された被写体画像(オリジナル)の色をプリンタ等のデバイスで忠実に再現するために、撮像画像に対して色変換処理を施すことが可能である。
(K)Code Reader機能
 この機能では、機能拡張装置3が、画像認識の対象であるバーコードや2次元コード(例えばQR code)に対して画像認識処理を施して、これらのバーコードや2次元コードに対応付けられた所定の情報を抽出することが可能である。
(L)手ぶれ補正機能
 この機能では、撮像装置1に振れが発生したときにこれが検知され、撮像装置1の振れに伴う撮像素子の撮像面上に結像される被写体像の移動が打ち消されるように、手ぶれ補正光学系が駆動される。これによって手ぶれ補正が実現される。
(M)オートトラッキング機能
 この機能では、機能拡張装置3は、撮像装置1による動画撮影によって逐次に得られるフレームをリアルタイムで解析して、特定の被写体の動き(位置の変化)を監視し、特定の被写体を追跡することが可能である。
(N)3Dカメラ機能
 この機能では、機能拡張装置3は、例えば、直線状のレーザ光源を測定対象物に照射し、その反射光を受光して3次元形状を計測する光切断法により、3D画像を形成することが可能である。また、機能拡張装置3は、2つの撮像装置1からの画像情報を取り込むことにより、ステレオ3D画像を形成することが可能である。さらに、機能拡張装置3は、加速させた荷電粒子(イオンまたは電子)の飛行時間を計測することにより対象の質量を測定する分析計(TOF:Time-of-Flight)型の処理も可能である。
(O)面積計算機能
 この機能では、機能拡張装置3は、例えば、画像認識技術により生態系の体長計算をすることが可能である。
(P)GPS(Global Positioning System)機能
 この機能では、機能拡張装置3は、例えば、GPS端末を搭載して、正確な現在位置情報を取得することが可能である。
(Q)スティッチング(stitching)機能
 この機能では、機能拡張装置3は、例えば、複数の撮像装置1で撮像した複数の画像を1つの画像にスティッチングすることが可能である。
(R)VRS(Vehicle Recognition System)機能
 この機能では、機能拡張装置3は、ITSにおける車両の認識をすることが可能である。具体例として、機能拡張装置3は、撮像装置1で撮像した車両のナンバープレートと事前に登録されているナンバープレートとを照合するナンバープレート認識機能によって、車両の認識をすることが可能である。
1 撮像装置
2 インターフェース装置
3 機能拡張装置
4、5、18 コネクタ
4-A、5-B コネクタプラグ
4-B、5-A コネクタレセプタクル
10 機能拡張システム
11、16 本体
12 レンズ筒
13、20 筐体
14 前面板
15 後面板
17、25 プリント基板
19 ピン
21 上壁板
22 下壁板
23 左壁板
24 右壁板
26 フック
27 ガイドピン
30 フック受け部
31 ガイド溝
1201、1211 FPGA
1202、1212、1216 インターフェース(I/F)
1213 CDM変換部
1214 フレームバッファ
1215 データ変換部
1217 物理層(PHY)
1220 PC

Claims (9)

  1.  被写体を撮像して画像データを取得する撮像装置と、外部装置との間でデータ通信を行うインターフェース装置との間に脱着自在に介在され、前記撮像装置の機能を拡張する構成の機能拡張装置。
  2.  拡張される前記撮像装置の機能は、
    前記画像データを処理する画像処理機能、前記撮像装置の動作環境を維持する動作環境維持機能、前記画像データの伝送方式を変更する伝送方式変更機能、前記画像データから前記被写体を認識する被写体認識機能の少なくとも一つから選択される請求項1に記載の機能拡張装置。
  3.  被写体を撮像して画像データを取得する撮像装置と、外部装置との間でデータ通信を行うインターフェース装置の少なくともいずれか一方と、
    前記撮像装置と前記インターフェース装置との間に介在され、前記撮像装置の機能を拡張する構成の機能拡張装置とは、
    一方にコネクタプラグが設けられているとともに、他方に当該コネクタプラグの挿入及び抜去が可能なコネクタレセプタクルが設けられており、
     前記コネクタレセプタクルに対する前記コネクタプラグの挿入または抜去によって、前記機能拡張装置が前記撮像装置と前記インターフェース装置の少なくともいずれか一方に脱着自在に構成されている機能拡張装置の脱着構造。
  4.  前記撮像装置と前記インターフェース装置との少なくともいずれか一方と、前記機能拡張装置とは、一方にフックが設けられているとともに、他方に前記フックと嵌合するフック受け部が設けられており、前記コネクタレセプタクルが前記コネクタプラグに挿入された状態で、前記フックと前記フック受け部とが嵌合することによって、前記機能拡張装置が前記撮像装置と前記インターフェース装置の少なくともいずれか一方に装着固定されるように構成されている請求項3に記載の機能拡張装置の脱着構造。
  5. 前記撮像装置と前記インターフェース装置との少なくともいずれか一方と、前記機能拡張装置とは、一方に前記コネクタプラグの挿抜方向に延びるガイドピンが設けられているとともに、他方に前記ガイドピンと嵌合するガイド溝が設けられており、前記コネクタレセプタクルに対する前記コネクタプラグの挿入の際に、前記ガイドピンと前記ガイド溝とが係合することによって、前記機能拡張装置が前記撮像装置と前記インターフェース装置の少なくともいずれか一方に案内されるように構成されている請求項3又は4に記載の機能拡張装置の脱着構造。
  6.  被写体を撮像して画像データを取得する撮像装置と、外部装置との間でデータ通信を行うインターフェース装置との間に介在され、前記撮像装置の機能を拡張する構成の複数の機能拡張装置を備え、
    前記複数の機能拡張装置の一方は、他方との挿入または抜去を可能にするコネクタプラグ又はコネクタレセプタクルを有する機能拡張装置の脱着構造。
  7.  前記複数の機能拡張装置の一方と他方は、前記コネクタプラグと前記コネクタレセプタクルとが嵌合した状態で、相互に係合するフックとフック受け部をそれぞれ有する請求項6に記載の機能拡張装置の脱着構造。
  8.  前記複数の機能拡張装置の一方と他方は、前記コネクタプラグと前記コネクタレセプタクルとが嵌合した状態で、相互に係合するガイドピンとガイド溝をそれぞれ有する請求項6又は7に記載の機能拡張装置の脱着構造。
  9.  被写体を撮像して画像データを取得する撮像装置と、
    外部装置との間でデータ通信を行うインターフェース装置と、
    前記撮像装置と前記インターフェース装置との間に脱着自在に介在され、前記撮像装置の機能を拡張する構成の機能拡張装置と、を備える機能拡張システム。
PCT/JP2016/063140 2015-04-28 2016-04-27 機能拡張装置、機能拡張装置の脱着構造、及び機能拡張システム WO2016175225A1 (ja)

Priority Applications (5)

Application Number Priority Date Filing Date Title
KR1020177025957A KR20170140168A (ko) 2015-04-28 2016-04-27 기능 확장 장치, 기능 확장 장치의 탈착 구조, 및 기능 확장 시스템
US15/563,231 US10268108B2 (en) 2015-04-28 2016-04-27 Function enhancement device, attaching/detaching structure for function enhancement device, and function enhancement system
EP16786501.3A EP3291530A4 (en) 2015-04-28 2016-04-27 Function expansion device, attaching and detaching structure of function expansion device, and function expansion system
JP2017515565A JPWO2016175225A1 (ja) 2015-04-28 2016-04-27 機能拡張装置、機能拡張装置の脱着構造、及び機能拡張システム
CN201680012993.1A CN107409170A (zh) 2015-04-28 2016-04-27 功能扩展装置、功能扩展装置的拆装结构以及功能扩展系统

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
JP2015091756 2015-04-28
JP2015-091756 2015-04-28

Publications (1)

Publication Number Publication Date
WO2016175225A1 true WO2016175225A1 (ja) 2016-11-03

Family

ID=57199108

Family Applications (1)

Application Number Title Priority Date Filing Date
PCT/JP2016/063140 WO2016175225A1 (ja) 2015-04-28 2016-04-27 機能拡張装置、機能拡張装置の脱着構造、及び機能拡張システム

Country Status (7)

Country Link
US (1) US10268108B2 (ja)
EP (1) EP3291530A4 (ja)
JP (1) JPWO2016175225A1 (ja)
KR (1) KR20170140168A (ja)
CN (1) CN107409170A (ja)
TW (1) TW201703503A (ja)
WO (1) WO2016175225A1 (ja)

Cited By (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2020043558A (ja) * 2018-09-05 2020-03-19 キヤノン株式会社 撮像装置、撮像システム
CN112543257A (zh) * 2019-09-20 2021-03-23 佳能株式会社 图像捕获装置、设备、控制方法和计算机可读存储介质
JP7423322B2 (ja) 2020-01-22 2024-01-29 キヤノン株式会社 筐体
JP7441016B2 (ja) 2019-09-20 2024-02-29 キヤノン株式会社 撮像装置、情報処理装置、制御方法及びプログラム

Families Citing this family (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2020178318A (ja) * 2019-04-22 2020-10-29 株式会社ジェイエイアイコーポレーション 撮像装置
JP7355408B2 (ja) * 2019-12-27 2023-10-03 株式会社ジェイエイアイコーポレーション 撮像装置
US20240010209A1 (en) * 2022-07-06 2024-01-11 Gm Cruise Holdings Llc Environmental and electromagnetic seal for autonomous vehicle control systems

Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2012514391A (ja) * 2008-12-29 2012-06-21 レッド.コム,インコーポレイテッド モジュール式のデジタルカメラ
JP2013114457A (ja) * 2011-11-29 2013-06-10 Fuji Mach Mfg Co Ltd 画像処理装置のシステム構築装置

Family Cites Families (14)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US1199251A (en) * 1915-12-22 1916-09-26 Florence Emily Eaton Plastic composition.
JPH07264450A (ja) 1994-03-18 1995-10-13 Sony Corp ビデオカメラの放熱構造
JPH1140960A (ja) * 1997-07-17 1999-02-12 Sanyo Electric Co Ltd 電子機器ユニット
JPH11146245A (ja) * 1997-11-13 1999-05-28 Nikon Corp 組合わせ可能カメラ
CA2299572C (en) * 1999-11-18 2004-05-04 Xybernaut Corporation Personal communicator
DE102006043010A1 (de) * 2006-09-13 2008-03-27 Robert Bosch Gmbh Modulares Kamerasystem
KR101131594B1 (ko) * 2007-05-02 2012-04-02 가부시키 가이샤 타케우치 기쥬쯔 켄큐쇼 커넥터용 소켓 및 헤더와 이들의 삽입 성형방법
US8199251B2 (en) * 2008-07-07 2012-06-12 Woodman Labs, Inc. Camera housing with integrated expansion module
US8525925B2 (en) 2008-12-29 2013-09-03 Red.Com, Inc. Modular digital camera
CN101877774A (zh) * 2010-04-06 2010-11-03 李岩 安全岛网络视频、对讲报警实现方法及安全岛网络视频报警对讲系统
CN102419506A (zh) * 2010-09-27 2012-04-18 李中和 照相机除湿盖
US20130286226A1 (en) * 2012-04-27 2013-10-31 Exo Labs, Inc. Modular peripheral digital camera system connectable to portable computing devices
US9681028B2 (en) * 2013-03-15 2017-06-13 Red.Com, Inc. Digital camera with wireless connectivity
CN104407488A (zh) * 2014-12-19 2015-03-11 咸洋 一种激光辅助车辆信息摄取装置及摄取方法

Patent Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2012514391A (ja) * 2008-12-29 2012-06-21 レッド.コム,インコーポレイテッド モジュール式のデジタルカメラ
JP2013114457A (ja) * 2011-11-29 2013-06-10 Fuji Mach Mfg Co Ltd 画像処理装置のシステム構築装置

Non-Patent Citations (1)

* Cited by examiner, † Cited by third party
Title
See also references of EP3291530A4 *

Cited By (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2020043558A (ja) * 2018-09-05 2020-03-19 キヤノン株式会社 撮像装置、撮像システム
JP7263170B2 (ja) 2018-09-05 2023-04-24 キヤノン株式会社 撮像装置、撮像システム
CN112543257A (zh) * 2019-09-20 2021-03-23 佳能株式会社 图像捕获装置、设备、控制方法和计算机可读存储介质
US11483464B2 (en) 2019-09-20 2022-10-25 Canon Kabushiki Kaisha Image capturing apparatus, device, control method, and computer-readable storage medium
JP7441016B2 (ja) 2019-09-20 2024-02-29 キヤノン株式会社 撮像装置、情報処理装置、制御方法及びプログラム
US11956567B2 (en) 2019-09-20 2024-04-09 Canon Kabushiki Kaisha Image capturing apparatus, control method, and computer-readable storage medium
JP7423322B2 (ja) 2020-01-22 2024-01-29 キヤノン株式会社 筐体

Also Published As

Publication number Publication date
US10268108B2 (en) 2019-04-23
KR20170140168A (ko) 2017-12-20
US20180088446A1 (en) 2018-03-29
EP3291530A1 (en) 2018-03-07
EP3291530A4 (en) 2018-12-19
CN107409170A (zh) 2017-11-28
TW201703503A (zh) 2017-01-16
JPWO2016175225A1 (ja) 2018-02-15

Similar Documents

Publication Publication Date Title
WO2016175225A1 (ja) 機能拡張装置、機能拡張装置の脱着構造、及び機能拡張システム
EP2589226B1 (en) Image capture using luminance and chrominance sensors
US9866748B2 (en) System and method for controlling a camera based on processing an image captured by other camera
TWI584634B (zh) 適於產生深度圖的電子裝置與方法
JP5882455B2 (ja) 高解像度マルチスペクトル画像キャプチャ
JP4769079B2 (ja) カメラ情報解析装置
CN108737734A (zh) 图像补偿方法和装置、计算机可读存储介质和电子设备
US20140071330A1 (en) System and method for enhanced monoimaging
JP6891873B2 (ja) 画像処理装置および方法
CN108055452A (zh) 图像处理方法、装置及设备
CN102227746A (zh) 立体图像处理装置、方法、记录介质和立体成像设备
JP7074052B2 (ja) 画像処理装置および方法
US11412150B2 (en) Entropy maximization based auto-exposure
WO2020116844A1 (en) Electronic device and method for acquiring depth information by using at least one of cameras or depth sensor
JP2011176710A (ja) 撮像装置
JP2000112019A (ja) 電子3眼カメラ装置
CN107094230A (zh) 一种利用多空域数据融合技术获取图像和视频的方法
EP3958055A1 (en) Interchangeable lens, information processing device, information processing method, and program
JPWO2006043315A1 (ja) 撮像装置および撮像装置を備えた携帯機器
JP2016099322A (ja) 撮像装置、撮像装置の制御方法およびプログラム
WO2021124940A1 (ja) 情報処理装置および方法、撮像装置および方法、プログラム、並びに、交換レンズ
WO2019138925A1 (ja) 情報処理装置、情報処理方法、及び、プログラム、並びに、交換レンズ
CN108111778A (zh) 一种摄像装置及电子设备
JP2003153062A (ja) デジタルカメラ

Legal Events

Date Code Title Description
121 Ep: the epo has been informed by wipo that ep was designated in this application

Ref document number: 16786501

Country of ref document: EP

Kind code of ref document: A1

ENP Entry into the national phase

Ref document number: 2017515565

Country of ref document: JP

Kind code of ref document: A

REEP Request for entry into the european phase

Ref document number: 2016786501

Country of ref document: EP

ENP Entry into the national phase

Ref document number: 20177025957

Country of ref document: KR

Kind code of ref document: A

WWE Wipo information: entry into national phase

Ref document number: 15563231

Country of ref document: US

NENP Non-entry into the national phase

Ref country code: DE