WO2021039978A1 - 画像合成システムおよび画像合成方法 - Google Patents

画像合成システムおよび画像合成方法 Download PDF

Info

Publication number
WO2021039978A1
WO2021039978A1 PCT/JP2020/032651 JP2020032651W WO2021039978A1 WO 2021039978 A1 WO2021039978 A1 WO 2021039978A1 JP 2020032651 W JP2020032651 W JP 2020032651W WO 2021039978 A1 WO2021039978 A1 WO 2021039978A1
Authority
WO
WIPO (PCT)
Prior art keywords
image
images
captured
captured images
server
Prior art date
Application number
PCT/JP2020/032651
Other languages
English (en)
French (fr)
Inventor
隆恵 小口
Original Assignee
パナソニックｉ－ＰＲＯセンシングソリューションズ株式会社
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by パナソニックｉ－ＰＲＯセンシングソリューションズ株式会社 filed Critical パナソニックｉ－ＰＲＯセンシングソリューションズ株式会社
Publication of WO2021039978A1 publication Critical patent/WO2021039978A1/ja

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00—Details of television systems
    • H04N5/76—Television signal recording
    • H04N5/765—Interface circuits between an apparatus for recording and another apparatus
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00—Television systems
    • H04N7/18—Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast

Definitions

  • the present disclosure relates to an image composition system and an image composition method.
  • Patent Document 1 describes a plurality of surveillance cameras, a video conversion coupling unit that combines a plurality of images captured by the plurality of surveillance cameras into a single combined video, an encoder that encodes the combined video, and transmission from the encoder.
  • a video surveillance system including a decoder that decodes a combined video transmitted via a road and a display device that displays a video captured by a plurality of surveillance cameras on a display screen of the decoded combined video is disclosed. ..
  • Patent Document 1 when displaying the images captured by the plurality of surveillance cameras on the display screen on the display device, any one of the plurality of images used to generate the combined image is selected. Displayed above. For this reason, Patent Document 1 provides technical disclosure of combining a plurality of images to generate a combined image in order to efficiently send a large number of images at one time when transmitting to a display device. It was not possible to display a wide range of images at the point where multiple images were combined and shot. For this reason, for example, when a notable point such as a site where an incident or an accident has occurred is photographed by a plurality of cameras, it is not possible to obtain an image of a wide range of sites by combining the plurality of captured images.
  • the present disclosure has been devised in view of the conventional circumstances described above, and is an image composition system and image composition that obtains a wide range of images of a point of interest and effectively supports observation and grasp of the situation around the point.
  • the purpose is to provide a method.
  • the present disclosure is an image synthesis system including a plurality of cameras and a server communicably connected to each of the plurality of cameras, and each of the plurality of cameras is a point of interest regarding an incident or the like.
  • the individual captured images captured in the above are sent to the server, and the server extracts meta information having characteristic elements of a specific object reflected in the individual captured images sent from each of the plurality of cameras, and the meta is extracted.
  • the information and the corresponding captured image are recorded in association with each other, and a composite image is generated by synthesizing a plurality of captured images in which the feature elements of the specific object match, based on the meta information corresponding to the individual captured image.
  • the present disclosure is an image composition method executed by an image composition system including a plurality of cameras and a server communicably connected to each of the plurality of cameras, and attention to an incident or the like.
  • Individual captured images of points are sent to the server, meta information having characteristic elements of a specific object reflected in the individual captured images sent from each of the plurality of cameras is extracted, and the meta information corresponds to the meta information.
  • a viewer device generates a composite image in which a plurality of captured images in which the feature elements of the specific object match are combined based on the meta information corresponding to the individual captured images. Provides an image compositing method to be sent to.
  • the present disclosure is an image synthesis system including a camera and a server communicably connected between the cameras, and the camera captures an image of a point of interest related to an incident or the like, before and after the time.
  • the plurality of captured images are sent to the server, and the server extracts meta information having characteristic elements of a specific object reflected in each of the plurality of captured images sent from the camera and corresponds to the meta information.
  • the image is recorded in association with the captured image, and based on the meta information corresponding to each of the plurality of captured images, a spatial image obtained by synthesizing a plurality of captured images in which the feature elements of the specific object match is generated and viewed.
  • the present disclosure is an image composition method executed by an image composition system including a camera and a server communicably connected between the cameras, and the time at which a point of interest regarding an incident or the like is imaged.
  • a plurality of captured images before and after the target are sent to the server, meta information having characteristic elements of a specific object reflected in each of the plurality of captured images sent from the camera is extracted, and imaging corresponding to the meta information is performed.
  • a viewer device that records images in association with each other and generates a spatial image obtained by synthesizing a plurality of captured images in which the feature elements of the specific object match, based on the meta information corresponding to each of the plurality of captured images. Provides an image compositing method to be sent to.
  • FIG. 1 Schematic explanatory view showing a system configuration example of the wearable camera system according to the first embodiment
  • Block diagram showing a hardware configuration example of a wearable camera
  • Block diagram showing a hardware configuration example of an in-vehicle PC
  • a sequence diagram showing an example of the operation procedure of the wearable camera system according to the first embodiment in chronological order.
  • the figure which shows an example of the spatial image and the imaging area including the imaging image with the same case number.
  • a sequence diagram showing an example of the operation procedure of the wearable camera system according to the second embodiment in chronological order.
  • FIG. 1 is a schematic explanatory view showing a system configuration example of the wearable camera system 1 according to the first embodiment.
  • the wearable camera system 1 as an example of an image composition system includes, for example, a wearable camera 10 worn by a police officer as an example of a user arriving at a field (Field), and various types arranged in a police station. It is composed of equipment and various equipment mounted in a police vehicle VC1 (Police Vehicle) such as a police car that has arrived at the scene.
  • the wearable camera 10 may be used inside the police station or outside the police station (for example, inside the police vehicle VC1 or at the scene).
  • the wearable camera 10 is sometimes referred to as a BWC (Body Worn Camera).
  • An example of a point of interest regarding an incident or the like is, for example, the point where the incident occurred, or the point where the criminal exists or stands up.
  • Various devices arranged in the police station include, for example, a back-end streaming server 60 (BSS: Back end Streaming Server), a back-end server 70 (BES: Back End Server), and a back-end client 80 (BEC: Back End Client). ), But not limited to, at least one or more wireless LAN (Local Area Network) access points, and a gang charger 90 as an example of a charging device capable of collectively charging a plurality of wearable cameras 10.
  • the wireless LAN access point mediates communication between the in-vehicle camera system 50 and a server (for example, a back-end server 70) in the police station.
  • Various devices installed in the police vehicle VC1 include, for example, an in-vehicle camera system 50 (ICV: In-Car Video system), a common trigger box 54 (CTB: Common Trigger Box) as an example of a trigger device, and a charging device (charging device).
  • PD A charging stand 55 and a rotation warning light PL1 as an example of (Pailing Dock) are included, but are not limited thereto.
  • a smartphone carried by a police officer to contact the police station may also be included.
  • the common trigger box 54 may be included in the in-vehicle camera system 50.
  • a wearable camera 10 as an example of a camera is attached to a police officer's uniform, images the situation in front of the police officer as a subject, records (that is, records) the captured image for a certain period of time, and wires the captured image (for example, a USB cable). ) Or wirelessly (for example, the common trigger box 54) to the in-vehicle camera system 50.
  • the wearable camera 10 detects that wireless communication is possible with the wireless LAN access point in the police station, the wearable camera 10 may send the captured image to the back-end server 70 connected via the wireless LAN access point. Good.
  • the wearable camera 10 may be charged when it is manually detected by the police officer that it is placed on the charging surface of the gang charger 90.
  • the subjects to be imaged by the wearable camera 10 and the in-vehicle camera 51 described later are not only people, but also the scene of the scene of the incident, the crowd (so-called rubbernecking) crowded near the scene, and the surroundings of the imaging position.
  • the atmosphere may be included.
  • the in-vehicle camera system 50 has one or more in-vehicle cameras 51, an in-vehicle PC 52, and an in-vehicle recorder 53.
  • the in-vehicle camera 51 captures the situation at the site where the police vehicle VC1 arrives, and an image obtained by the imaging (hereinafter, "" The “captured image”) is recorded (that is, recorded) on the vehicle-mounted recorder 53.
  • the in-vehicle camera 51, the in-vehicle PC 52, and the in-vehicle recorder 53 are connected by wire so that data or information can be transmitted and received, respectively, but they may be connected wirelessly.
  • the in-vehicle camera system 50 (for example, the in-vehicle PC 52) and the wearable camera 10 may be connected by a wire (for example, a USB cable compatible with USB (Universal Social Bus)) so that data or information can be transmitted and received.
  • a wire for example, a USB cable compatible with USB (Universal Social Bus)
  • the in-vehicle camera 51 captures, for example, a front camera attached so as to be able to image the front of the police vehicle VC1, a side camera attached so as to be able to image the side direction of the police vehicle VC1, and the rear of the police vehicle VC1. It may be at least one of the mountable rear cameras.
  • the vehicle-mounted camera 51 sends the captured image to the vehicle-mounted recorder 53, and the captured image is recorded on the vehicle-mounted recorder 53.
  • the in-vehicle PC 52 controls the operations of the in-vehicle camera 51 and the in-vehicle recorder 53 in response to the operation of the police officer. Further, as will be described in detail later, the in-vehicle PC 52 as an example of the viewer device is imaged by one or more wearable cameras 10 and one or more in-vehicle cameras 51 in the same time zone by the operation of a police officer while riding in the police vehicle VC1. The captured image may be read from the vehicle-mounted recorder 53, displayed, and reproduced.
  • the in-vehicle PC 52 may supply power to the wearable camera 10 to charge the wearable camera 10.
  • the vehicle-mounted recorder 53 records captured images captured by each of the wearable camera 10 and the vehicle-mounted camera 51.
  • the in-vehicle PC 52 reads and acquires the captured image captured by the wearable camera 10 from the in-vehicle recorder 53 by the operation of the police officer, or independently obtains the captured image of the wearable camera 10 in the default application installed in the in-vehicle PC 52. It may be reproduced or attribute information of the captured image may be added in the application.
  • the vehicle-mounted PC 52 reads and acquires the captured image captured by the vehicle-mounted camera 51 from the vehicle-mounted recorder 53 by the operation of the police officer, or the captured image of the vehicle-mounted camera 51 in the default application installed in the vehicle-mounted PC 52. May be reproduced independently, or attribute information of the captured image may be added in the application.
  • the in-vehicle camera system 50 is connected to the common trigger box 54 by wire (for example, a LAN cable) and operates in response to a command from the common trigger box 54.
  • the operations in response to the command from the common trigger box 54 include, for example, starting or stopping the recording (that is, recording) of the captured image of the in-vehicle camera 51, and starting or stopping the recording (that is, recording) of the captured image of the wearable camera 10. included.
  • the in-vehicle camera system 50 may be connected to the wearable camera 10 via the common trigger box 54 so that data or information can be wirelessly communicated with each other.
  • the in-vehicle camera system 50 streams the captured images of the wearable camera 10 and the in-vehicle camera 51 (for example, real-time live images being captured) to the back-end streaming server 60 via the common trigger box 54 and the network NW1.
  • the network NW1 is, for example, a mobile communication network or an internet network.
  • the in-vehicle camera system 50 detects that wireless communication is possible with a wireless LAN access point in the police station (for example, the police vehicle VC1 parks in the parking lot on the premises of the police station). Time), the captured images (for example, recorded past captured images) of the wearable camera 10 and the vehicle-mounted camera 51 may be sent to the back-end server 70 via the wireless LAN access point.
  • the common trigger box 54 is wired (for example, GPIO (physical cable) or LAN cable) between the rotation warning light PL1, the acceleration sensor (not shown), the siren (not shown), the in-vehicle camera system 50, and the charging stand 55, respectively.
  • each device is wirelessly connected in response to IoT (Internet Of Things).
  • the common trigger box 54 can also be connected to the wearable camera 10 via the charging stand 55 when the wearable camera 10 is placed on the charging stand 55.
  • the vehicle-mounted camera system 50 When the common trigger box 54 is connected to the vehicle-mounted camera system 50 by wire (for example, a LAN cable), the vehicle-mounted camera system 50 is notified of an alarm (for example, recording start or recording stop) when a predetermined event is detected. Control signal) is sent. As a result, the vehicle-mounted camera system 50 starts recording (recording) the captured image captured by the vehicle-mounted camera 51 on the vehicle-mounted recorder 53 as an operation in response to the control signal from the common trigger box 54, or records the recording. (Recording) can be stopped.
  • an alarm for example, recording start or recording stop
  • the common trigger box 54 When the common trigger box 54 acquires an operation start signal from a police vehicle-mounted device such as a rotation warning light PL1 or a siren, the common trigger box 54 detects the start of use of the police vehicle-mounted device and is a wearable camera connected to the common trigger box 54. A recording start or recording stop control signal may be sent to at least one of the 10 and the vehicle-mounted camera system 50. As a result, at least one of the wearable camera 10 and the in-vehicle camera system 50 operates in response to the control signal from the common trigger box 54, for example, with the start of rotation of the rotation warning light PL1 or the audio output of the siren. You can start and stop recording.
  • a police vehicle-mounted device such as a rotation warning light PL1 or a siren
  • the charging stand 55 is located, for example, at a predetermined position of the police vehicle VC1 (for example, near the center console) and is wired to and from the common trigger box 54 (for example, PoE (Power over Ethernet®) using a LAN cable). Connected by.
  • the charging stand 55 has an accommodating portion (not shown) for mounting the wearable camera 10. When the charging stand 55 detects that the wearable camera 10 is mounted on the accommodating portion (not shown), the charging stand 55 can charge the battery of the wearable camera 10 based on the current supplied from the common trigger box 54.
  • a smartphone possessed by a police officer has a telephone function and a wireless communication function (for example, communication with an in-vehicle camera system 50), and is used, for example, for emergency contact from a police station or emergency contact to a police station. ..
  • the smartphone displays and reproduces the captured image of the wearable camera 10 or the in-vehicle camera 51, and edits the captured image by adding attribute information (also called meta information) called meta information.
  • the attribute information may be, for example, an incident type that directly or indirectly suggests the content of the captured image.
  • the smartphone has a tethering function, and by using this tethering function, the captured images of the wearable camera 10 and the vehicle-mounted camera 51 from the vehicle-mounted camera system 50 are captured by the back-end streaming server 60 in the police station via the network NW1. You may relay to.
  • a wireless LAN such as BLE (Bluetooth (registered trademark) Low Energy) or Wifi (registered trademark) is used between the in-vehicle camera system 50 and the smartphone.
  • the back-end streaming server 60 as an example of the server is configured to have a high-performance server computer and storage, and is an captured image (for example, a live image) streamed from the in-vehicle camera system 50 via the common trigger box 54 and the network NW1. ) Is received and transferred to the back-end server 70.
  • the back-end server 70 as an example of the server is configured to have a high-performance server computer and storage, and manages evidence images of the incident.
  • the back-end server 70 composes, for example, the captured images of the wearable camera 10 and the in-vehicle camera 51 in accordance with the request according to the operation of the user (for example, an analysis specialist in the police station) who uses the back-end client 80. It has a video analysis function that includes various image processing such as detection, recognition, and matching of the inside face.
  • the back-end client 80 as an example of the viewer device is configured by a computer such as a PC (Personal Computer), and accesses a suspicious person database (not shown) by the operation of a user (for example, an analysis specialist in a police station). It has a browser or a dedicated application that can search for information on cases such as criminals and display the search results on a display device.
  • the display device is composed of, for example, an LCD (Liquid Crystal Display) or an organic EL (Electroluminescence) provided on the back-end client 80.
  • the suspicious person database for example, a person who is wanted or a criminal in the past is registered in advance in association with information for identifying a case (for example, a case number).
  • the back-end client 80 as an example of the viewer device backs up the captured images captured by the wearable camera 10 and the in-vehicle camera 51 at the same time zone by the operation of the user (for example, an analysis specialist in the police station). It is read from the end server 70, displayed, and reproduced.
  • the user of the back-end client 80 can easily view the captured images of the site captured by the wearable camera 10 and the in-vehicle camera 51 at the same time zone, so that the situation of the site and the like can be confirmed over a wide area at that time. You can improve your own work efficiency, such as clearly identifying the situation.
  • the wireless LAN access point wirelessly connects to the in-vehicle camera system 50 by wireless LAN, and relays the captured image sent from the in-vehicle camera system 50 and transfers it to the back-end server 70, for example.
  • the gang charger 90 can mount a wearable camera 10 worn by each of a plurality of police officers on a predetermined charging surface, and charges a battery built in each mounted wearable camera 10.
  • FIG. 2 is a block diagram showing a hardware configuration example of the wearable camera 10.
  • the wearable camera 10 includes an imaging unit 11, a GPIO 12 (General Purpose Input / Output), a RAM 13 (Random Access Memory), a ROM 14 (Read Only Memory), and a storage unit 15.
  • the wearable camera 10 includes an EEPROM 16 (Electrically Erasable Project ROM), an RTC 17 (Real Time Clock), and a GNSS (Global Navigation Satellite System) receiving unit 18.
  • the wearable camera 10 includes an MCU 19 (Micro Controller Unit), a BLE communication unit 21A, a WLAN communication unit 21B, a USB interface 22, a contact terminal 23, a power supply unit 24, and a battery 25.
  • the interface is abbreviated as "I / F".
  • the wearable camera 10 includes a recording switch SW1, a snapshot switch SW2, a communication mode switch SW3, an attribute information imparting switch SW4, and a wireless registration switch SW5.
  • the wearable camera 10 includes three LEDs 26a, 26b, 26c (Light Mission Diode), a vibrator 27, an audio output unit 28, a microphone 29A, a speaker 29B, and an earphone terminal 29C.
  • the image pickup unit 11 includes an image pickup lens (not shown) and a solid-state image sensor using a CCD (Charge Coupled Device) type image sensor or a CMOS (Complementary Metal Oxide Semiconductor) type image sensor.
  • the imaging unit 11 outputs the data of the captured image of the subject obtained by imaging to the MCU 19.
  • the detection terminal 23T of the contact terminal 23 is a terminal in which a voltage change occurs when the wearable camera 10 is placed on the charging stand 55 or the gang charger 90, or when the wearable camera 10 is removed from the charging stand 55 or the gang charger 90.
  • the detection terminal 23T of the contact terminal 23 is connected to the AD converter CV.
  • the signal indicating the voltage change of the detection terminal 23T is converted into a digital signal by the AD converter CV, and the digital signal is input to the MCU 19 via the I2C20.
  • GPIO12 is a parallel interface.
  • GPIO12 includes recording switch SW1, snapshot switch SW2, communication mode switch SW3, attribute information assignment switch SW4, wireless registration switch SW5, LED26a, 26b, 26c, vibrator 27, audio output unit 28, microphone 29A, speaker 29B and earphones.
  • Each of the terminals 29C is connected.
  • the GPIO 12 inputs and outputs signals between these various electronic components and the MCU 19.
  • the microphone 29A picks up the sound around the wearable camera 10 and outputs the sound data of the picked up sound to the MCU 19 via the GPIO12.
  • the microphone 29A may be a built-in microphone housed in the housing of the wearable camera 10 or a wireless microphone wirelessly connected to the wearable camera 10. In the case of a wireless microphone, a police officer can attach it to any location to improve sound collection.
  • the audio output unit 28 outputs an audio signal related to the operation of the wearable camera 10 under the instruction of the MCU 19.
  • the voice output unit 28 reads the voice data having the voice of the default message stored in the ROM 14 or the like in advance, and outputs the voice signal based on the voice data from the speaker 29B.
  • the earphone terminal 29C outputs an audio signal output from the audio output unit 28 to the earphones connected to the earphone terminal 29C.
  • the speaker 29B inputs an audio signal output from the audio output unit 28 and outputs the audio signal.
  • the AD converter CV is connected to the MCU 19 via a communication interface such as I2C20 (Inter-Integrated Circuit).
  • I2C20 Inter-Integrated Circuit
  • the RAM 13 is, for example, a work memory used in the operation of the MCU 19.
  • the ROM 14 stores, for example, a program and data for controlling the execution of the operation (process) of the MCU 19 in advance.
  • the storage unit 15 is composed of a storage medium such as a memory card, and the captured image captured by the image pickup unit 11 based on, for example, an instruction to start recording based on the operation of a police officer or an instruction to start recording from the in-vehicle camera system 50.
  • Data recording (that is, recording) is started.
  • the storage unit 15 constantly pre-buffers and holds the data of the captured image for a predetermined time (for example, 30 seconds) captured by the imaging unit 11, and holds the captured image of the captured image up to a predetermined time (for example, 30 seconds) before the current time. Always keep accumulating data.
  • the storage unit 15 starts recording the data of the captured image and continues recording the data of the captured image until the instruction to stop recording is received.
  • the storage unit 15 is composed of a memory card, it is freely inserted and removed from the housing of the wearable camera 10.
  • the EEPROM 16 stores, for example, identification information for identifying the wearable camera 10 (for example, a serial number as a camera ID) and various setting information.
  • the RTC 17 counts the current time information and outputs it to the MCU 19.
  • the GNSS receiving unit 18 receives satellite signals including their own signal transmission times and position coordinates transmitted from a plurality of (for example, four) navigation satellites and outputs them to the MCU 19.
  • the MCU 19 uses a plurality of satellite signals to calculate the current position coordinates of the wearable camera 10 and the reception time of the satellite signals. Note that this calculation may be performed by the GNSS receiving unit 18 instead of the MCU 19.
  • This reception time information may also be used to correct the system time of the wearable camera 10 (that is, the output of the RTC 17).
  • the system time is used for recording the imaging time of captured images (including still images and moving images).
  • the MCU 19 has a function as a control unit of the wearable camera 10, for example, a control process for overall controlling the operation of each part of the wearable camera 10, a data input / output process with each part of the wearable camera 10. Performs data calculation processing and data storage processing.
  • the MCU 19 operates according to various programs and data stored in the ROM 14.
  • the MCU 19 uses the RAM 13 during operation to obtain the current time information from the RTC 17, and obtains the current position information from the GNSS receiving unit 18 or calculates the current position information using the output from the GNSS receiving unit 18. To do.
  • the BLE communication unit 21A uses BLE (Bluetooth (registered trademark) Low Energy) communication, which is a communication standard for short-range wireless communication, to perform wireless communication with a smartphone, a common trigger box 54, or the like.
  • BLE is the name for version 4.0 of Bluetooth®. In BLE, communication is possible with low power consumption, but the communication speed is as low as about 100 kbps.
  • the WLAN communication unit 21B is connected to a smartphone as a wireless LAN access point using the tethering function, a wireless LAN access point provided in the police station, etc. by wireless LAN (that is, WLAN), and performs wireless communication with the connection destination. ..
  • wireless LAN is capable of high-speed communication with a communication speed of several tens to several hundreds of Mbps, but since it is always connected to a wireless LAN access point, power consumption is high.
  • the WLAN communication unit 21B communicates with the common trigger box 54 mounted in the police vehicle VC1 by wireless LAN communication, and the data of the captured image obtained by the imaging unit 11 is transferred to the common trigger box 54. send.
  • the captured video data is sent to the back-end streaming server 60 in the police station via the common trigger box 54 and the network NW1.
  • the captured video data is stored in the back-end server 70 in the police station via the common trigger box 54 and the wireless LAN access point. May be sent to.
  • the wearable camera 10 is used for short-range wireless communication such as NFC (Near Field Communication) or wireless communication using a mobile line network (for example, LTE: Long Term Evolution) in addition to BLE communication or WLAN communication.
  • NFC Near Field Communication
  • LTE Long Term Evolution
  • Each unit may have a configuration (not shown).
  • the USB interface 22 is a serial bus, and enables connection with, for example, an in-vehicle PC 52 or a back-end client 80 in a police station.
  • the contact terminal 23 is a terminal for electrically connecting to the charging stand 55, and is connected to the MCU 19 via the USB interface 22 and also to the power supply unit 24.
  • the power supply unit 24 charges the battery 25 in response to the detection of the connection with the charging stand 55 at the contact terminal 23.
  • the contact terminal 23 can communicate the video data read from the storage unit 15 by the MCU 19 to an external device (for example, the common trigger box 54) connected via the charging stand 55 according to the connection with the charging stand 55. is there.
  • the contact terminal 23 is provided with, for example, "charging terminal V +" (not shown), “detection terminal 23T", "data terminals D-, D +" (not shown) and “ground terminal” (not shown).
  • the detection terminal 23T is a terminal for detecting a voltage and a voltage change.
  • the data terminals D- and D + are terminals for transferring video data captured by the wearable camera 10 to the in-vehicle PC 52, for example, via a USB connector terminal.
  • the detection terminal 23T of the contact terminal 23 is connected to a communication interface such as I2C20 via the AD converter CV, and the detection voltage value of the contact terminal 23 is input to the MCU 19.
  • the power supply unit 24 is supplied from an external power source (for example, a common trigger box 54, a cigar charger in the police vehicle VC1 (not shown), an accessory in the police vehicle VC1) connected to the charging stand 55 via, for example, the contact terminal 23.
  • the battery 25 is charged by supplying the charging current to the battery 25.
  • the battery 25 is composed of, for example, a rechargeable secondary battery, and supplies power to each part of the wearable camera 10.
  • the recording switch SW1 is a push button switch for inputting an operation instruction for starting / stopping recording (imaging of a moving image) by pressing a police officer, for example. Further, the MCU 19 may start recording (capturing a moving image) when the recording switch SW1 is pressed for a short time, and end recording when the recording switch SW1 is pressed for a long time. Further, the MCU 19 may start recording (capturing a moving image) when the recording switch SW1 is pressed an odd number of times, and end recording when the recording switch SW1 is pressed an even number of times.
  • the snapshot switch SW2 is a push button switch for inputting an operation instruction for capturing a still image by, for example, a police officer's pressing operation. Whenever the snapshot switch SW2 is pressed, for example, the MCU 19 executes an image of a still image when the snapshot switch SW2 is pressed.
  • the communication mode switch SW3 is, for example, a slide switch for inputting an operation instruction for setting a communication mode between the wearable camera 10 and an external device.
  • the communication mode includes, for example, an access point mode, a station mode, and an OFF mode.
  • the access point mode is a mode in which the wearable camera 10 operates as an access point for a wireless LAN, for example, wirelessly connects to a smartphone owned by a police officer and communicates between the wearable camera 10 and the smartphone.
  • the smartphone can display the current live image by the wearable camera 10, reproduce the recorded image, display the captured still image, and the like by connecting to the wearable camera 10.
  • the station mode is a mode in which an external device is used as an access point for communication when connecting to an external device using a wireless LAN.
  • the tethering function of the smartphone may be used to set the smartphone as an external device.
  • the wearable camera 10 can perform various settings, transfer (upload) of the recorded image held by the wearable camera 10, and the like to the in-vehicle camera system 50.
  • the OFF mode is a mode in which the communication operation of the wireless LAN is turned off and the wireless LAN is not used.
  • the attribute information addition switch SW4 is a push button switch operated to add attribute information to video data.
  • the attribute information indicates the content of the image captured by the wearable camera 10 (for example, the type of incident, murder, robbery, disaster, etc.).
  • the wireless registration switch SW5 registers and sets an external device (for example, a smartphone, common trigger box 54) of the other party with which the wearable camera 10 wirelessly communicates (for example, wireless communication using BLE or wireless LAN) as a communication partner (hereinafter, "" It is a push button switch that is operated when (sometimes referred to as "communication setting processing").
  • BLE wireless communication using BLE
  • the process of registering and setting a device to be a communication partner may be referred to as "pairing”.
  • the LED 26a is, for example, a display unit that indicates the power-on state (on / off state) of the wearable camera 10 and the state of the battery 25.
  • the LED 26b is, for example, a display unit that indicates the state (recording state) of the imaging operation of the wearable camera 10.
  • the LED 26c is, for example, a display unit indicating the state of the communication mode of the wearable camera 10. Further, when the wearable camera 10 receives the notification data from the vehicle-mounted camera system 50 (for example, the vehicle-mounted PC 52), the three LEDs 26a to 26c blink according to the instruction from the MCU 19. At this time, the MCU 19 changes the blinking pattern of the LEDs 26a to 26c according to the information about the sound source included in the notification data.
  • the MCU 19 detects the input of each switch of the recording switch SW1, the snapshot switch SW2, the communication mode switch SW3, the attribute information imparting switch SW4, and the wireless registration switch SW5, and processes the switch input that has been operated.
  • the MCU 19 When the MCU 19 detects the operation input of the recording switch SW1, it controls the start or stop of the imaging operation in the imaging unit 11, and stores the image obtained from the imaging unit 11 in the storage unit 15 as a moving image.
  • the MCU 19 When the MCU 19 detects the operation input of the snapshot switch SW2, the MCU 19 stores the image taken by the imaging unit 11 when the snapshot switch SW2 is operated in the storage unit 15 as a still image.
  • the MCU 19 detects the state of the communication mode switch SW3 and operates the BLE communication unit 21A and the WLAN communication unit 21B according to the communication mode according to the setting of the communication mode switch SW3.
  • the MCU 19 assigns the attribute information corresponding to the data of the image captured by the imaging unit 11 in association with the image.
  • the MCU 19 is a default process to be performed in the communication setting process (for example, pairing) for a peripheral external device (for example, the common trigger box 54) that can be a communication partner of the wearable camera 10.
  • the default process for example, the generation of registration request information as a communication partner of wireless communication, the output to the BLE communication unit 21A, and the generation of connection information for specifying the communication partner to be connected to.
  • the default process related to the wireless LAN communication setting is the same as the default process when the above-mentioned pairing is illustrated.
  • FIG. 3 is a block diagram showing a hardware configuration example of the in-vehicle PC 52.
  • the vehicle-mounted PC 52 has a configuration including a CPU 201, an I / O (Output / Output) control unit 202, a communication unit 203, a memory 204, an input unit 205, a display unit 206, a speaker 207, and an HDD 208. ..
  • the in-vehicle PC 52 can communicate with each of the wearable camera 10 and the in-vehicle recorder 53, and also communicates with various servers (for example, back-end streaming server 60 and back-end server 70) in the police station via the common trigger box 54. It is possible.
  • the CPU 201 is, for example, a control process for overall control of the operation of each part of the vehicle-mounted PC 52, an input / output process of data with each other part via the I / O control unit 202, and a data calculation (calculation). Performs processing and data storage processing.
  • the CPU 201 authenticates whether or not the police officer can log in to the in-vehicle camera system 50 by, for example, an input operation of the police officer on the login screen for the in-vehicle camera system 50 displayed on the display unit 206.
  • the policeman's input operation is, for example, an operation of inputting an Officer ID and a password.
  • Various information about the police officer who is allowed to log in is stored in advance in the memory 204, for example, and the CPU 201 uses the information of the police officer who is allowed to log in in advance in the memory 204 to use the information of the police officer's in-vehicle camera system. Determine whether or not to log in to 50.
  • the login may be a login to the vehicle-mounted camera system 50 via the vehicle-mounted PC 52, or a login to a default application installed on the vehicle-mounted PC 52.
  • the I / O control unit 202 controls data input / output between the CPU 201 and each unit of the vehicle-mounted PC 52 (for example, the communication unit 203, the input unit 205, the display unit 206, and the speaker 207), and controls the data from the CPU 201 and the CPU 201. Relay data to.
  • the I / O control unit 202 may be integrally configured with the CPU 201.
  • the communication unit 203 performs wired or wireless communication with, for example, the in-vehicle camera 51 or the in-vehicle recorder 53, or with the wearable camera 10 that can be worn by police officers.
  • the memory 204 is configured by using, for example, a RAM, a ROM, or a non-volatile or volatile semiconductor memory, functions as a work memory during the operation of the CPU 201, and stores a predetermined program and data for operating the CPU 201. ..
  • the memory 204 stores, for example, login information about a police officer who is allowed to log in to the vehicle-mounted camera system 50.
  • the input unit 205 is a UI (User Interface) for receiving an input operation of a police officer and notifying the CPU 201 via the I / O control unit 202, and is a pointing device such as a mouse or a keyboard.
  • the input unit 205 may be arranged using, for example, a touch panel or a touch pad that is arranged corresponding to the screen of the display unit 206 and can be operated by a policeman's finger or a stylus pen.
  • the input unit 205 inputs, for example, login information for logging in to the in-vehicle camera system 50.
  • the display unit 206 is configured by using, for example, an LCD or an organic EL, and displays various information. Further, the display unit 206 displays the data of the image portion included in the captured images captured by the wearable camera 10 and the in-vehicle camera 51 on the same screen under the instruction of the CPU 201, for example, in response to the input operation of the police officer. indicate.
  • the speaker 207 outputs the data of the audio portion included in the captured image captured by each of the wearable camera 10 and the in-vehicle camera 51 under the instruction of the CPU 201, for example, in response to an input operation of a police officer.
  • the display unit 206 and the speaker 207 may be configured separately from the in-vehicle PC 52.
  • HDD 208 stores, for example, various data and software (software programs). Specifically, the HDD 208 stores, for example, software for controlling and setting the in-vehicle camera 51 and the in-vehicle recorder 53, and software for controlling and setting the wearable camera 10. Further, the HDD 208 may store, for example, the data of the captured image captured by the wearable camera 10 and the data of the captured image captured by the in-vehicle camera 51.
  • the back-end server 70 combines the images captured by the wearable cameras 10 worn by the two police officers OA and OB (see FIG. 4) and displays them as spatial images on the back-end client 80. ..
  • the wearable camera 10 worn by the police officer OA is referred to as "BWC1" for convenience, and the wearable camera 10 worn by the police officer OB is conveniently referred to. It is referred to as "BWC2".
  • BWC1 and BWC2 are wearable cameras 10 having the same hardware configuration (see FIG. 2).
  • FIG. 4 is a sequence diagram showing an example of the operation procedure of the wearable camera system 1 according to the first embodiment in chronological order. It is assumed that police officers OA and OB are present at the scene of an incident or accident (hereinafter, also simply referred to as "incident scene").
  • the BWC1 when the scene of the incident is imaged by the BWC1 worn by the police officer OA, the BWC1 periodically uploads the recorded evidence video to the backend server 70 (T1). For example, suppose a scene where the criminal is staying at home. When police officer OA patrols this house, the recorded evidence video by BWC1 is transmitted to the backend server 70, for example, every 30 seconds, 1 minute, and 5 minutes. Needless to say, the timing (cycle) of transmitting the recorded evidence video is not limited to 30 seconds, 1 minute, and 5 minutes. At this time, the BWC1 transmits the recorded evidence video including the time information and the current position information as meta information of the recorded evidence video.
  • the recorded evidence video obtained by the BWC1 is back-ended via the back-end streaming server 60 or its back-end streaming server 60, for example, via the common trigger box 54 and the network NW1 connected to the BWC 1 by wireless LAN. It is transmitted to the server 70.
  • the recorded evidence video by the BWC1 is stored in the in-vehicle recorder 53, and then the common trigger box 54 and the wireless LAN access point in the police station are communicably connected and then back-ended via the common trigger box 54. It may be sent directly to the server 70.
  • the BWC2 when the scene of the incident is imaged by the police officer OB, the BWC2 periodically uploads the recorded evidence video to the backend server 70 (T2). At this time, the BWC2 transmits the recorded evidence video including the time information and the current position information as meta information of the recorded evidence video.
  • the transmission route of the recorded evidence video from the BWC 2 to the back-end server 70 may be the same as or different from the transmission route of the recorded evidence video from the BWC 2 to the back-end server 70 described above.
  • the in-vehicle camera 51 captures the scene of the incident where the police vehicle VC1 arrived.
  • the vehicle-mounted camera system 50 (ICV) periodically transmits the recorded evidence image obtained by the vehicle-mounted camera 51 to the back-end server 70 (T3).
  • the in-vehicle PC 52 transmits the time information and the current position information together with the recorded evidence video as meta information of the recorded evidence video.
  • the recorded evidence image obtained by the vehicle-mounted camera 51 is, for example, from the vehicle-mounted PC 52 connected to the vehicle-mounted camera 51 via the common trigger box and the network NW1 via the back-end streaming server 60 or the back-end streaming server 60 thereof. It is transmitted to the backend server 70.
  • the recorded evidence image by the vehicle-mounted camera 51 is stored in the vehicle-mounted recorder 53, and then the common trigger box 54 and the wireless LAN access point in the police station are communicably connected to each other via the common trigger box 54. It may be sent directly to the backend server 70.
  • the back-end server 70 receives and records (accumulates) the recording evidence video including the meta information from each of the BWC1, BWC2, and the in-vehicle camera 51.
  • the back-end server 70 uses the case number (as an example of the same case management number) for the recorded evidence video in the same time zone and the same area (point) based on the meta information corresponding to the accumulated recorded evidence video. Case number) is given (T4).
  • the same time zone is a time when it is judged that the image shows the situation of the same incident, accident, etc., and is arbitrarily set. For example, when a police officer asks a suspicious person a job question, the same time zone is set to 10 minutes.
  • the same area is a predetermined range based on the current position information obtained by the GNSS receiving unit 18 mounted on the wearable camera 10.
  • the current position information a case where GPS position information obtained by using GPS (Global Positioning System), which is one of GNSS, is used is shown.
  • GPS Global Positioning System
  • the current position information is not limited to the position information obtained by the GNSS receiving unit, and may be substituted by the position information of the wireless base station that transmits and receives radio signals to and from the wearable camera.
  • the back-end server 70 extracts the feature element of the specific object recorded in the documentary video as meta information and records the time (from the time zone). Also accumulates with detailed time) and GPS location information (T5).
  • a specific object is an object that serves as a mark (base point) at the scene of an incident, accident, etc. (in other words, a point of interest regarding the incident, etc.), and is, for example, an inanimate object such as a house or a tree that does not move easily. ..
  • a movable vehicle may be adopted as a specific object.
  • the back-end server 70 searches for objects having matching feature elements in a plurality of recorded evidence videos to which the same case number is assigned (T6).
  • objects with matching feature elements may be searched for in the recorded evidence video captured by the same camera (for example, a wearable camera worn by the same policeman), or different cameras (worn by different policemen). You may search for objects with matching feature elements in the recorded evidence video captured by the wearable camera.
  • the different cameras may be a combination of a wearable camera worn by a police officer and an in-vehicle camera of a police vehicle. Further, the number of cameras is not limited to two, and may be three or more.
  • the back-end server 70 uses the object with matching feature elements as the base point (reference point), and selects each object from two or more different evidence recording images.
  • the images to be included are extracted, and the two or more extracted images are combined so as to maintain the same appearance and shape of the entire object or a common part to generate a composite image (T7).
  • the two or more extracted images are images captured at the same timing by two wearable cameras 10 (BWC1, BWC2).
  • the two or more images to be extracted may be images captured at different timings.
  • the composite image is simply a combination of two or more extracted images to the extent that the appearance and shape of the entire or common part of the common object are maintained in each recorded evidence video even if they are combined. It is a still image generated by the above, and includes, for example, a region where two or more images overlap. Further, in the composite image, the portion where two or more images are close to each other and does not appear in any of the images is not interpolated by image processing or the like in order to ensure the evidence of the composite image (in other words, imaging). It becomes a blank area (without creating an image that is not interpolated). As a result, the composite image is a genuine image without falsehood (in other words, an image in which the reliability of evidence is guaranteed).
  • the back-end server 70 adds (connects) each of a plurality of frames before and after each of the two or more images used for generating the composite image in the time direction, and generates a larger spatial image. (T8).
  • This spatial image is a still image in which a composite image including two or more images based on an object having matching feature elements and one or more front and rear frame images in the two or more images included in the composite image are combined into one. It is an image. Therefore, the spatial image is from the image of the frame after the composite image (the image after the predetermined number of frames) from the image before the composite image (the image before the predetermined number of frames) including the two or more images whose base points are the objects having the same feature elements. The image) is obtained in a stacked state.
  • the front and rear frames may be only the rear frame of the image as the base point, or may be only the front frame. Further, the number of frames before and after each image as a base point may be different for each case number, for example.
  • the spatial image When displaying a spatial image, the spatial image may be continuously displayed in frame units like a slide show from the image of the front frame to the image of the rear frame of the composite image. That is, the spatial image may be displayed as a moving image so as to continuously reproduce the still image.
  • the back-end server 70 streams the spatial image data combined with one video to the back-end client 80 (T9).
  • the streaming distribution is performed to the back-end client 80 connected to the back-end server 70 by a wired LAN or the like.
  • the streaming distribution may be performed to the in-vehicle PC 52 or another viewer device (smartphone, tablet terminal) or the like via the wireless LAN, the network NW1 and the common trigger box 54.
  • the back-end client 80 receives the spatial image data transmitted from the back-end server 70 (T10).
  • the back-end client 80 displays the spatial image SG (see FIG. 6) based on the received spatial image data so that the analysis specialist of the police station can view it (T11).
  • the process of extracting the feature elements of the object as meta information is performed by the back-end server 70, but instead of being performed by the back-end server 70, the BWC1, BWC2, the vehicle-mounted camera 51, or the vehicle-mounted PC 52 is used. It may be done.
  • the vehicle-mounted PC 52 may extract meta information based on the recorded evidence image recorded on the vehicle-mounted recorder 53.
  • FIG. 5 is a diagram showing an example of a spatial image and an imaging area including an imaging image assigned the same case number.
  • the five captured images G11, G12, G13, G14, and G15 shown by the dotted line frames were continuously imaged by police officer OA at time t1, t2, t3, t4, t5, respectively, in the same case. It is a numbered image.
  • the four captured images G22, G23, G24, and G25 shown by the dotted line frames were continuously imaged by the police officer OB at time t2, t3, t4, and t5, respectively, and were given the same case number. It is an image.
  • the captured image G12 by the police officer OA and the captured image G22 by the police officer OB have the same characteristic elements (windshield, left and right side mirrors, etc.) of the object (for example, the same vehicle).
  • the captured image G12 and the captured image G22 are images captured at the same time t2, but may be images captured at different times. This also applies to the captured image G13 and the captured image G23, and the captured image G14 and the captured image G24.
  • the five captured images G11, G12, G13, G14, G15, and the four captured images G22, G23, G24, and G25 are frame images captured consecutively in time series, respectively. ..
  • FIG. 6 is a diagram illustrating an operation example of generating a spatial image using a plurality of captured images assigned the same case number.
  • the back-end server 70 combines each of the captured image G12 and the captured image G22, which match the characteristic elements of the objects included in the meta information, as a combination reference image to generate a composite image MG. Further, the back-end server 70 is assigned the same case number as the captured images G12 and G22, and each image of a plurality of frames before and after the above-mentioned coupling reference image in the time direction (for example, imaging after one frame). The image G13 and the captured image G23) are combined to generate a composite image MG1 after one frame.
  • the back-end server 70 combines the captured image G14 and the captured image G24 two frames later in the time direction with respect to the above-mentioned coupling reference image to generate the composite image MG2 two frames later. Similarly, the back-end server 70 combines the captured image G15 and the captured image G25 after 3 frames in the time direction with respect to the above-mentioned coupling reference image to generate the composite image MG3 after 3 frames.
  • the back-end server 70 If the captured image G21 one frame before the captured image G22, which is the coupling reference image captured by the BWC2, exists temporarily (the captured image G21 does not exist in FIG. 6), the back-end server 70 , The captured image G11 and the captured image G21 may be combined to generate a composite image one frame before. In the example of FIG. 6, since the composite image one frame before is not generated, only the captured image G11 one frame before is used.
  • the back-end server 70 connects the composite image MG, one or more front and rear composite images (for example, one frame after composite image MG1, two frame after composite image MG2, and three frame after composite image MG3) and one frame before captured image G11. Generates a spatial image SG.
  • the spatial image SG is an image obtained by combining one or more front-back composite images (for example, one-frame post-composite image MG1, two-frame post-composite image MG2, and three-frame post-composite image MG3) with the composite image MG.
  • This is an image having a wider imaging area as compared with the image MG and the images of one or more front and rear frames. Therefore, the analysis specialist of the police station can confirm the situation of the scene such as an incident or an accident with a wide range of images. Further, the spatial image SG does not include the composite image MG and the image in a range exceeding the images of one or more front and rear frames.
  • the spatial image SG is a genuine image without falsehood (for example, not including an image generated by image interpolation) obtained based on the composite image MG and the images of one or more front and rear frames. Therefore, the spatial image can guarantee the value as an evidence documentary image.
  • the image used for generating the composite image may be a plurality of (two or more) images captured at an arbitrary timing among the plurality of captured images assigned the same case number. That is, the base points of the objects having the same feature elements are not limited to the same timing, but may be included in the frame images at different timings in the time zone treated as the same case number. Further, the spatial image may be generated by simply combining the images of each frame with the composite image without generating one or more front and rear composite images with respect to the composite image and connecting them.
  • the wearable camera system 1 is a back-end server 70 that is communicably connected between the plurality of wearable cameras 10 and each of the plurality of wearable cameras 10. And, including.
  • Each of the plurality of wearable cameras 10 sends individual captured images of the scene of the incident to the back-end server 70.
  • the back-end server 70 extracts meta information having characteristic elements of a specific object reflected in individual captured images sent from each of the plurality of wearable cameras 10, and records the meta information in association with the corresponding captured images. To do.
  • the back-end server 70 generates a composite image obtained by synthesizing a plurality of captured images in which the feature elements of a specific object match, based on the meta information corresponding to each captured image, and sends the composite image to the back-end client 80.
  • the analysis specialist of the police station can widely view the images of the scenes (points of interest) such as incidents and accidents captured by the multiple wearable cameras 10 displayed on the back-end client 80. it can. Therefore, the wearable camera system 1 can obtain a wide range of images of notable points such as an incident or an accident, and can effectively support the observation and grasp of the situation around the site such as an incident or an accident by a police officer.
  • the back-end server 70 uses images of one or more front and rear frames (front and back captured images) that are temporally back and forth with respect to the respective imaging times of the plurality of captured images used to generate the composite image, and is specific.
  • One or more composite images (for example, composite image after 1 frame MG1, composite image after 2 frames MG2, composite image after 3 frames MG3) are generated by synthesizing a plurality of front and rear captured images in which the feature elements of the objects match, and the composite image is generated.
  • a spatial image in which the MG and one or more composite images are connected is generated and sent to the back-end client 80.
  • the wearable camera system 1 can display images of the scene such as an incident or an accident that are continuous in time, and can more effectively support the observation and grasp of the situation around the scene such as an incident or an accident.
  • each of the plurality of (for example, two) wearable cameras 10 can acquire the position information by the GNSS receiving unit 18.
  • Each wearable camera 10 sends the position information of the scene such as an incident or an accident and the imaging time to the back-end server 70 in association with the captured image.
  • the back-end server 70 assigns the same case number to the individual captured images. Record.
  • the back-end server 70 can search only the captured images related to the same incident, accident, etc., and display them on the back-end client 80. Therefore, the analysis specialist of the police station can quickly view the captured images related to the incident or accident.
  • the back-end server 70 extracts meta information having a characteristic element of a specific object by using individual captured images assigned the same case number. As a result, the back-end server 70 can associate the individual captured images with the same case number with the meta information. For example, the back-end server 70 can combine two captured images having matching feature elements of an object to generate a composite image.
  • the back-end server 70 can obtain images captured in a wide range of sites by the two wearable cameras 10.
  • a wearable camera 10 worn by each of one or more police officers and an in-vehicle camera 51 provided on the police vehicle VC1 on which the police officer rides are used.
  • the back-end server 70 can obtain images captured in a wide range of sites by one or more wearable cameras 10 and an in-vehicle camera 51.
  • the spatial image SG combines the composite image MG and one or more front and rear composite images (for example, the composite image MG1 after 1 frame, the composite image MG2 after 2 frames, and the composite image MG3 after 3 frames), and the composite image MG and 1 or more. It is an image captured by two BWC1 and BWC2 having a wider imaging area than each of the front and rear composite images. As a result, the spatial image SG becomes an image having a wider imaging area than the composite image MG and the images of one or more front and rear frames. Therefore, the analysis specialist of the police station can confirm the situation of the scene such as an incident or an accident with a wide range of images.
  • the spatial image SG is a genuine image without falsehood (for example, not including an image generated by image interpolation) obtained based on the composite image MG and the images of one or more front and rear frames. Therefore, the spatial image can guarantee the value as an evidence documentary image.
  • the back-end server generates a spatial image by combining a plurality of captured images with the same case number, but the police officer's identification number is transmitted to the back-end server as meta information.
  • Images captured by wearable cameras worn by different police officers may be combined to generate a spatial image based on the identification numbers of police officers heading to the same scene of the incident.
  • the wearable camera system of the second embodiment has almost the same configuration as that of the first embodiment.
  • the same components as those in the first embodiment are used with the same reference numerals, and the description thereof will be omitted.
  • FIG. 7 is a sequence diagram showing an example of the operation procedure of the wearable camera system 1 according to the second embodiment in chronological order.
  • one wearable camera 10 is a BWC2 worn by one police officer OB is shown, but it may be a BWC1 worn by a police officer OA.
  • the BWC2 when the scene of an incident, accident, etc. is imaged by the police officer OB, the BWC2 periodically uploads the recorded evidence video to the back-end server 70 (T31). At this time, the BWC 2 transmits the recorded evidence video including the time information and the current position information as meta information of the recorded evidence video.
  • the in-vehicle camera 51 captures the situation of the site where the police vehicle VC1 arrives, and similarly, the back-end server 70 periodically outputs a recording evidence image including meta information such as time information and current position information. May be sent to.
  • the back-end server 70 takes out the feature elements of the objects recorded in each evidence recorded video as meta information and stores them together with the recording time and GPS position information (T32).
  • the back-end server 70 searches a plurality of recorded evidence videos for objects having matching feature elements (T33). In the search for this object, objects with matching feature elements are searched for in the recorded evidence video captured by the same camera (for example, a wearable camera worn by the same police officer).
  • the backend server 70 uses the object with matching feature elements as the base point (reference point) (T34).
  • the back-end server 70 adds (connects) one or more images of the front and rear frames to one image including the base point, and generates a large spatial image SG2 (see FIG. 8) (T35).
  • the spatial image SG2 is a still image obtained by combining images of one or more front and rear frames with respect to an image whose base point is an object having matching feature elements.
  • the front and rear frames may be only the rear frame of the image as the base point, or may be only the front frame. Further, the number of front and rear frames for each image as a base point may differ depending on GPS position information, recording time, and the like.
  • the back-end server 70 streams the spatial image data combined with one video to the back-end client 80 (T36).
  • the back-end client 80 receives the spatial image data transmitted from the back-end server 70 (T37).
  • the back-end client 80 displays the spatial image SG2 based on the received spatial image data so that the analysis specialist of the police station can view it (T38).
  • FIG. 8 is a diagram illustrating an operation example of generating a spatial image using a plurality of images captured by one wearable camera.
  • the four captured images G22, G23, G24, and G25 shown by the dotted line frames are images continuously captured by the police officer OB at time t2, t3, t4, and t5, respectively.
  • the captured image G22 and the captured image G23 have the same characteristic elements (headlights, side mirrors, etc.) of the object (same vehicle).
  • the back-end server 70 uses the captured image G22 as the original image, and combines the images of the frames before and after the captured image G22 (captured images G23, G24, G25) with the captured image G22 to generate the spatial image SG2.
  • the back-end server 70 shows the case where the captured images G23, G24, and G25 of the rear frame are combined with the captured image G22 which is the original image, but the image of the front frame may be combined. Therefore, the spatial image SG2 is an image in which one or more images of the front and rear frames are combined with the captured image G22, and is an image having a wider imaging area than the captured image G22 and one or more images of the front and rear frames.
  • the spatial image SG2 does not include the captured image G22 and images in a range exceeding the captured images G23, G24, and G25 of one or more front and rear frames, and is genuine without falsehood (for example, does not include the image generated by image interpolation). It is an image. Therefore, the spatial image can guarantee the value as an evidence documentary image.
  • the spatial image When displaying a spatial image, the spatial image may be continuously displayed like a slide show from the image in the front frame to the image in the rear frame of the original image. In this case, the spatial image is displayed as a moving image that continuously reproduces the still image.
  • the wearable camera system includes a back-end server 70 that is communicably connected between one wearable camera 10 and each of the plurality of wearable cameras 10. including.
  • the wearable camera 10 sends captured images of a plurality of frames, which are images of the scene of the incident, back and forth in time to the back-end server 70.
  • the back-end server 70 extracts meta information having characteristic elements of specific objects displayed in each of a plurality of frames, and records the meta information in association with the corresponding captured image.
  • the back-end server 70 generates a composite image obtained by synthesizing a plurality of captured images that match the feature elements of a specific object based on the meta information corresponding to each of the captured images of a plurality of frames, and sends the composite image to the back-end client 80. ..
  • the analysis specialist of the police station can view a wide range of images of the scene such as incidents and accidents captured by one wearable camera 10 displayed on the back-end client 80. Therefore, the wearable camera system 1 can effectively support the observation and grasp of the situation around the site such as an incident or accident by an analysis specialist of a police station.
  • This disclosure is useful as an image composition system and an image composition method that obtains a wide range of images of a point of interest and effectively supports observation and grasp of the situation around the point.
  • Wearable camera system 10 Wearable camera 50 In-vehicle camera system 51 In-vehicle camera 52 In-vehicle PC 53 In-vehicle recorder 54 Common trigger box 60 Back-end streaming server 70 Back-end server 80 Back-end client NW1 network

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Closed-Circuit Television Systems (AREA)
  • Alarm Systems (AREA)

Abstract

画像合成システムは、複数のカメラと、複数のカメラのそれぞれとの間で通信可能に接続されるサーバと、を含む。複数のカメラのそれぞれは、事件等に関する注目地点を撮像した個々の撮像画像をサーバに送る。サーバは、個々の撮像画像に映る特定のオブジェクトの特徴要素を有するメタ情報を抽出し、メタ情報と対応する撮像画像とを対応付けて記録し、個々の撮像画像に対応するメタ情報に基づいて、特定のオブジェクトの特徴要素が一致する複数の撮像画像を合成した合成画像を生成してビューア装置に送る。

Description

画像合成システムおよび画像合成方法
　本開示は、画像合成システムおよび画像合成方法に関する。
　特許文献１には、複数の監視カメラと、複数の監視カメラで撮影した複数の映像を結合して１つの結合映像とする映像変換結合部と、結合映像を符号化するエンコーダと、エンコーダから伝送路を介して伝送された結合映像を復号するデコーダと、復号された結合映像を複数の監視カメラで撮影した映像を表示画面に表示する表示装置と、を備えた映像監視システムが開示されている。
国際公開第２０１６／１７４９４６号
　しかしながら、特許文献１の構成では、複数の監視カメラで撮影した映像を表示装置において表示画面に表示する際、結合映像を生成するために使用された複数の映像のうちいずれか一つが選択された上で表示される。このため、特許文献１では、表示装置に伝送する際に一度に多くの映像を効率的に送るために複数の映像を結合して結合映像を生成することの技術的開示はあるが、これらの複数の映像を結合して撮影された地点の広範囲な映像を表示することはできなかった。このため、例えば事件あるいは事故が発生した現場等の注目するべき地点を複数のカメラにより撮影した際に、撮影された複数の映像を結合して広範囲の現場の映像を得ることはできない。
　本開示は、上述した従来の状況に鑑みて案出され、注目するべき地点の広範囲の映像を得て、その地点の周囲の状況の観察および把握を効果的に支援する画像合成システムおよび画像合成方法を提供することを目的とする。
　本開示は、複数のカメラと、前記複数のカメラのそれぞれとの間で通信可能に接続されるサーバと、を含む画像合成システムであって、前記複数のカメラのそれぞれは、事件等に関する注目地点を撮像した個々の撮像画像を前記サーバに送り、前記サーバは、前記複数のカメラのそれぞれから送られた前記個々の撮像画像に映る特定のオブジェクトの特徴要素を有するメタ情報を抽出し、前記メタ情報と対応する撮像画像とを対応付けて記録し、前記個々の撮像画像に対応するメタ情報に基づいて、前記特定のオブジェクトの特徴要素が一致する複数の撮像画像を合成した合成画像を生成してビューア装置に送る、画像合成システムを提供する。
　また、本開示は、複数のカメラと、前記複数のカメラのそれぞれとの間で通信可能に接続されるサーバと、を含む画像合成システムにより実行される画像合成方法であって、事件等に関する注目地点を撮像した個々の撮像画像を前記サーバに送り、前記複数のカメラのそれぞれから送られた前記個々の撮像画像に映る特定のオブジェクトの特徴要素を有するメタ情報を抽出し、前記メタ情報と対応する撮像画像とを対応付けて記録し、前記個々の撮像画像に対応するメタ情報に基づいて、前記特定のオブジェクトの特徴要素が一致する複数の撮像画像を合成した合成画像を生成してビューア装置に送る、画像合成方法を提供する。
　また、本開示は、カメラと、前記カメラとの間で通信可能に接続されるサーバと、を含む画像合成システムであって、前記カメラは、事件等に関する注目地点を撮像した、時間的に前後する複数の撮像画像を前記サーバに送り、前記サーバは、前記カメラから送られた前記複数の撮像画像のそれぞれに映る特定のオブジェクトの特徴要素を有するメタ情報を抽出し、前記メタ情報と対応する撮像画像とを対応付けて記録し、前記複数の撮像画像のそれぞれに対応するメタ情報に基づいて、前記特定のオブジェクトの特徴要素が一致する複数の撮像画像を合成した空間画像を生成してビューア装置に送る、画像合成システムを提供する。
　また、本開示は、カメラと、前記カメラとの間で通信可能に接続されるサーバと、を含む画像合成システムにより実行される画像合成方法であって、事件等に関する注目地点を撮像した、時間的に前後する複数の撮像画像を前記サーバに送り、前記カメラから送られた前記複数の撮像画像のそれぞれに映る特定のオブジェクトの特徴要素を有するメタ情報を抽出し、前記メタ情報と対応する撮像画像とを対応付けて記録し、前記複数の撮像画像のそれぞれに対応するメタ情報に基づいて、前記特定のオブジェクトの特徴要素が一致する複数の撮像画像を合成した空間画像を生成してビューア装置に送る、画像合成方法を提供する。
　本開示によれば、注目するべき地点の広範囲の映像を得て、その地点の周囲の状況の観察および把握を効果的に支援することができる。
実施の形態１に係るウェアラブルカメラシステムのシステム構成例を示す概要説明図 ウェアラブルカメラのハードウェア構成例を示すブロック図 車載ＰＣのハードウェア構成例を示すブロック図 実施の形態１に係るウェアラブルカメラシステムの動作手順例を時系列に示すシーケンス図 同一の事件番号が付与された撮像画像を含む空間画像および撮像エリアの一例を示す図 同一の事件番号が付与された複数枚の撮像画像を用いて空間画像を生成する動作例を説明する図 実施の形態２に係るウェアラブルカメラシステムの動作手順例を時系列に示すシーケンス図 １台のウェアラブルカメラで撮像された複数枚の画像を用いて空間画像を生成する動作例を説明する図
　以下、適宜図面を参照しながら、本開示に係る画像合成システムおよび画像合成方法を具体的に開示した実施の形態を詳細に説明する。但し、必要以上に詳細な説明は省略する場合がある。例えば、既によく知られた事項の詳細説明や実質的に同一の構成に対する重複説明を省略する場合がある。これは、以下の説明が不必要に冗長になるのを避け、当業者の理解を容易にするためである。なお、添付図面および以下の説明は、当業者が本開示を十分に理解するために提供されるのであって、これらにより特許請求の範囲に記載の主題を限定することは意図されていない。
（実施の形態１）
　図１は、実施の形態１に係るウェアラブルカメラシステム１のシステム構成例を示す概要説明図である。画像合成システムの一例としてのウェアラブルカメラシステム１は、例えば現場（Ｆｉｅｌｄ）に到着したユーザの一例としての警官が装着しているウェアラブルカメラ１０と、警察署（Ｐｏｌｉｃｅ　Ｓｔａｔｉｏｎ）内に配置される各種の機器と、現場に到着したパトロールカー等の警察車両ＶＣ１（Ｐｏｌｉｃｅ　Ｖｅｈｉｃｌｅ）内に搭載される各種の機器とにより構成される。ウェアラブルカメラ１０は、警察署内で使用されてもよいし、警察署外（例えば警察車両ＶＣ１内あるいは現場）で使用されてもよい。ウェアラブルカメラ１０は、ＢＷＣ（Ｂｏｄｙ　Ｗｏｒｎ　Ｃａｍｅｒａ）と称されることがある。事件等に関する注目地点の一例としての現場は、例えば事件が発生した地点、あるいは犯人が存在するあるいは立てこもっている地点である。
　警察署内に配置される各種の機器は、例えば、バックエンドストリーミングサーバ６０（ＢＳＳ：Ｂａｃｋ　ｅｎｄ　Ｓｔｒｅａｍｉｎｇ　Ｓｅｒｖｅｒ）、バックエンドサーバ７０（ＢＥＳ：Ｂａｃｋ　Ｅｎｄ　Ｓｅｒｖｅｒ）、バックエンドクライアント８０（ＢＥＣ：Ｂａｃｋ　Ｅｎｄ　Ｃｌｉｅｎｔ）、１以上の無線ＬＡＮ（Ｌｏｃａｌ　Ａｒｅａ　Ｎｅｔｗｏｒｋ）アクセスポイント、複数のウェアラブルカメラ１０を一括して充電可能な充電装置の一例としてのギャングチャージャ９０を少なくとも含むが、これらに限定されない。なお、無線ＬＡＮアクセスポイントは、車載カメラシステム５０と警察署内のサーバ（例えばバックエンドサーバ７０）との間の通信を仲介する。
　警察車両ＶＣ１内に搭載される各種の機器は、例えば、車載カメラシステム５０（ＩＣＶ：Ｉｎ－Ｃａｒ　Ｖｉｄｅｏ　ｓｙｓｔｅｍ）、トリガー装置の一例としてのコモントリガーボックス５４（ＣＴＢ：Ｃｏｍｍｏｎ　Ｔｒｉｇｇｅｒ　Ｂｏｘ）、充電装置（ＰＤ：Ｐａｉｒｉｎｇ　Ｄｏｃｋ）の一例としての充電台５５、回転警告灯ＰＬ１を少なくとも含むが、これらに限定されない。例えば、警察署との連絡を行うために警官が所持するスマートフォンも含まれてもよい。なお、コモントリガーボックス５４は車載カメラシステム５０に含まれてもよい。
　カメラの一例としてのウェアラブルカメラ１０は、警官の制服に装着され、警官の前方の状況を被写体として撮像して一定時間分の撮像映像を記録（つまり録画）し、撮像映像を有線（例えばＵＳＢケーブル）あるいは無線（例えばコモントリガーボックス５４）を介して車載カメラシステム５０に送る。ウェアラブルカメラ１０は、警察署内の無線ＬＡＮアクセスポイントと無線通信が可能に接続されたことを検知した際に、無線ＬＡＮアクセスポイントを介して接続されたバックエンドサーバ７０に撮像映像を送ってもよい。ウェアラブルカメラ１０は、警官の手動でギャングチャージャ９０の充電面に載置されたことを検知した際に、充電を行ってよい。
　なお、ウェアラブルカメラ１０、および後述する車載カメラ５１の撮像対象となる被写体は、単に人物だけではなく、事件の現場の情景、現場の近くに群がる群衆（いわゆる野次馬）、更に、撮像位置の周囲の雰囲気を含んでよい。
　車載カメラシステム５０は、１以上の車載カメラ５１と車載ＰＣ５２と車載レコーダ５３とを有し、警察車両ＶＣ１が到着した現場の状況を車載カメラ５１により撮像し、撮像により得られた映像（以下「撮像映像」という）を車載レコーダ５３に記録（つまり録画）する。車載カメラ５１と車載ＰＣ５２と車載レコーダ５３とは、それぞれデータあるいは情報の送受信が可能に有線で接続されるが、無線で接続されても構わない。また、車載カメラシステム５０（例えば車載ＰＣ５２）とウェアラブルカメラ１０とは、データあるいは情報の送受信が可能に有線（例えばＵＳＢ（Ｕｎｉｖｅｒｓａｌ　Ｓｅｒｉａｌ　Ｂｕｓ）対応のＵＳＢケーブル）で接続されてよい。
　カメラの一例としての車載カメラ５１は、例えば警察車両ＶＣ１の前方を撮像可能に取り付けられた前方カメラ、警察車両ＶＣ１の側面方向を撮像可能に取り付けられた側方カメラ、警察車両ＶＣ１の後方を撮像可能に取り付けられた後方カメラ、のうち少なくとも１つであってよい。車載カメラ５１は撮像映像を車載レコーダ５３に送り、この撮像映像は車載レコーダ５３に記録される。
　車載ＰＣ５２は、警官の操作に応じて、車載カメラ５１および車載レコーダ５３のそれぞれの動作を制御する。また、詳細は後述するが、ビューア装置の一例としての車載ＰＣ５２は、警察車両ＶＣ１に乗車中の警官の操作により、同一時間帯に１以上のウェアラブルカメラ１０，車載カメラ５１のそれぞれにより撮像された撮像映像を車載レコーダ５３から読み出して表示して再生してよい。これにより、車載ＰＣ５２を使用する警官は、同一時間帯にウェアラブルカメラ１０および車載カメラ５１のそれぞれで撮像された現場の撮像映像を簡易に視聴でき、広域に現場等の状況を確認できて当時の状況を鮮明に思い出す等、自身の業務効率を向上できる。なお、車載ＰＣ５２は、ＵＳＢケーブルを介してウェアラブルカメラ１０と接続されたことを検知すると、ウェアラブルカメラ１０に給電してウェアラブルカメラ１０を充電してよい。
　車載レコーダ５３は、ウェアラブルカメラ１０および車載カメラ５１のそれぞれにより撮像された撮像映像を記録する。車載ＰＣ５２は、警官の操作により、ウェアラブルカメラ１０により撮像された撮像映像を車載レコーダ５３から読み出して取得したり、車載ＰＣ５２内にインストールされている既定のアプリケーションにおいてウェアラブルカメラ１０の撮像映像を単独で再生したり、そのアプリケーションにおいて撮像映像の属性情報を付与したりしてもよい。同様に、車載ＰＣ５２は、警官の操作により、車載カメラ５１により撮像された撮像映像を車載レコーダ５３から読み出して取得したり、車載ＰＣ５２内にインストールされている既定のアプリケーションにおいて車載カメラ５１の撮像映像を単独で再生したり、そのアプリケーションにおいて撮像映像の属性情報を付与したりしてもよい。
　車載カメラシステム５０は、コモントリガーボックス５４と有線（例えばＬＡＮケーブル）で接続され、コモントリガーボックス５４からの指令に応じた動作を行う。コモントリガーボックス５４からの指令に応じた動作は、例えば、車載カメラ５１の撮像映像の記録（つまり録画）の開始あるいは停止、ウェアラブルカメラ１０の撮像映像の記録（つまり録画）の開始あるいは停止、が含まれる。なお、車載カメラシステム５０は、コモントリガーボックス５４を介してウェアラブルカメラ１０との間でデータあるいは情報の無線通信が可能に接続されてもよい。
　車載カメラシステム５０は、コモントリガーボックス５４およびネットワークＮＷ１を介して、ウェアラブルカメラ１０および車載カメラ５１のそれぞれの撮像映像（例えば撮像されているリアルタイムのライブ映像）を、バックエンドストリーミングサーバ６０にストリーミングしてよい。ネットワークＮＷ１は、例えばモバイル通信ネットワーク網またはインターネット網である。車載カメラシステム５０（例えば車載ＰＣ５２）は、警察署内の無線ＬＡＮアクセスポイントと無線通信が可能に接続されたことを検知した際（例えば警察車両ＶＣ１が警察署の敷地内の駐車場に駐車した時）、無線ＬＡＮアクセスポイントを介して、ウェアラブルカメラ１０および車載カメラ５１のそれぞれの撮像映像（例えば録画された過去の撮像映像）を、バックエンドサーバ７０に送ってよい。
　コモントリガーボックス５４は、回転警告灯ＰＬ１、加速度センサ（図示略）、サイレン（図示略）、車載カメラシステム５０、充電台５５との間でそれぞれ有線（例えばＧＰＩＯ（物理ケーブル）あるいはＬＡＮケーブル）、あるいは各機器がＩｏＴ（Ｉｎｔｅｒｎｅｔ　Ｏｆ　Ｔｈｉｎｇｓ）化することに対応して無線によって接続される。コモントリガーボックス５４は、ウェアラブルカメラ１０が充電台５５に載置された時には充電台５５を介してウェアラブルカメラ１０とも接続可能である。
　コモントリガーボックス５４は、例えば車載カメラシステム５０との間が有線（例えばＬＡＮケーブル）で接続される場合に、所定の事象を検知した時に車載カメラシステム５０に、アラーム通知（例えば録画開始または録画停止の制御信号）を送る。これにより、車載カメラシステム５０は、コモントリガーボックス５４からの制御信号に応じた動作として、例えば車載カメラ５１で撮像された撮像映像の車載レコーダ５３への記録（録画）を開始したり、その記録（録画）を停止したりできる。コモントリガーボックス５４は、例えば回転警告灯ＰＬ１あるいはサイレン等の警察車両搭載機器からの動作開始信号を取得すると、その警察車両搭載機器の使用開始を検知し、コモントリガーボックス５４に接続されたウェアラブルカメラ１０および車載カメラシステム５０の少なくとも一方に、録画開始あるいは録画停止の制御信号を送ってもよい。これにより、ウェアラブルカメラ１０および車載カメラシステム５０の少なくとも一方は、コモントリガーボックス５４からの制御信号に応じた動作として、例えば回転警告灯ＰＬ１の回転開始あるいはサイレンの音声出力に伴って、撮像映像の録画を開始したり停止したりできる。
　充電台５５は、例えば警察車両ＶＣ１の既定位置（例えばセンターコンソールの付近）に配置され、コモントリガーボックス５４との間で有線（例えばＬＡＮケーブルを使ったＰｏＥ（Ｐｏｗｅｒ　ｏｖｅｒ　Ｅｔｈｅｒｎｅｔ（登録商標）））によって接続される。充電台５５は、ウェアラブルカメラ１０が載置されるための収容部（図示略）を有する。充電台５５は、収容部（図示略）にウェアラブルカメラ１０が載置されたことを検知すると、コモントリガーボックス５４からの供給電流に基づいてウェアラブルカメラ１０のバッテリを充電可能である。
　警官により所持されるスマートフォン（上述参照）は、電話機能および無線通信機能（例えば車載カメラシステム５０との通信）を有し、例えば警察署からの緊急連絡あるいは警察署への緊急連絡時に使用される。スマートフォンは、警官の操作に従って、ウェアラブルカメラ１０あるいは車載カメラ５１の撮像映像を表示して再生したり、その撮像映像にメタ情報と言われる属性情報（メタ情報ともいう）を付与する等の編集をしたりする。属性情報は、例えば、撮像映像の内容を直接的あるいは間接的に示唆する事件種別であってよい。
　スマートフォンは、テザリング機能を有し、このテザリング機能を用いて、車載カメラシステム５０からのウェアラブルカメラ１０および車載カメラ５１のそれぞれの撮像映像を、ネットワークＮＷ１を介して警察署内のバックエンドストリーミングサーバ６０に中継してもよい。ここで、車載カメラシステム５０とスマートフォンとの間には、例えばＢＬＥ（Ｂｌｕｅｔｏｏｔｈ（登録商標）　Ｌｏｗ　Ｅｎｅｒｇｙ）またはＷｉｆｉ（登録商標）等の無線ＬＡＮが用いられる。
　サーバの一例としてのバックエンドストリーミングサーバ６０は、高性能なサーバコンピュータおよびストレージを有して構成され、車載カメラシステム５０からコモントリガーボックス５４およびネットワークＮＷ１を介してストリーミングされた撮像映像（例えばライブ映像）を受信してバックエンドサーバ７０に転送する。
　サーバの一例としてのバックエンドサーバ７０は、高性能なサーバコンピュータおよびストレージを有して構成され、事件の証拠映像を管理する。バックエンドサーバ７０は、バックエンドクライアント８０を使用するユーザ（例えば警察署内の解析専門官）の操作に応じた要求に従い、例えばウェアラブルカメラ１０および車載カメラ５１のそれぞれの撮像映像を構成する画像フレーム中の顔の検知、認識、照合等の各種の画像処理を含む映像解析機能を有する。
　ビューア装置の一例としてのバックエンドクライアント８０は、例えばＰＣ（Ｐｅｒｓｏｎａｌ　Ｃｏｍｐｕｔｅｒ）等のコンピュータにより構成され、ユーザ（例えば警察署内の解析専門官）の操作により、不審人物データベース（図示略）にアクセスして犯罪者等の事件に関する情報を検索してその検索結果をディスプレイデバイス上に表示可能なブラウザあるいは専用アプリケーションを有する。ディスプレイデバイスは、例えばバックエンドクライアント８０に設けられたＬＣＤ（Ｌｉｑｕｉｄ　Ｃｒｙｓｔａｌ　Ｄｉｓｐｌａｙ）あるいは有機ＥＬ（Ｅｌｅｃｔｒｏｌｕｍｉｎｅｓｃｅｎｃｅ）により構成される。不審人物データベースには、例えば指名手配中の人物あるいは過去の犯罪者等が事件を識別する情報（例えば事件番号）に対応付けて予め登録されている。また、ビューア装置の一例としてのバックエンドクライアント８０は、ユーザ（例えば警察署内の解析専門官）の操作により、同一時間帯にウェアラブルカメラ１０，車載カメラ５１のそれぞれにより撮像された撮像映像をバックエンドサーバ７０から読み出して表示して再生する。これにより、バックエンドクライアント８０のユーザは、同一時間帯にウェアラブルカメラ１０および車載カメラ５１のそれぞれで撮像された現場の撮像映像を簡易に視聴できるので、広域に現場等の状況を確認できて当時の状況を鮮明に特定する等、自身の業務効率を向上できる。
　無線ＬＡＮアクセスポイントは、車載カメラシステム５０と無線ＬＡＮによって無線接続し、例えば車載カメラシステム５０から送られた撮像映像を中継してバックエンドサーバ７０に転送する。
　ギャングチャージャ９０は、複数の警官のそれぞれが装着するウェアラブルカメラ１０を所定の充電面上に載置可能であり、載置された個々のウェアラブルカメラ１０に内蔵されるバッテリを充電する。
　図２は、ウェアラブルカメラ１０のハードウェア構成例を示すブロック図である。ウェアラブルカメラ１０は、撮像部１１と、ＧＰＩＯ１２（Ｇｅｎｅｒａｌ　ＰｕｒｐｏｓｅＩｎｐｕｔ／Ｏｕｔｐｕｔ）と、ＲＡＭ１３（Ｒａｎｄｏｍ　Ａｃｃｅｓｓ　Ｍｅｍｏｒｙ）と、ＲＯＭ１４（Ｒｅａｄ　Ｏｎｌｙ　Ｍｅｍｏｒｙ）と、記憶部１５とを含む。ウェアラブルカメラ１０は、ＥＥＰＲＯＭ１６（Ｅｌｅｃｔｒｉｃａｌｌｙ　Ｅｒａｓａｂｌｅ　Ｐｒｏｇｒａｍｍａｂｌｅ　ＲＯＭ）と、ＲＴＣ１７（Ｒｅａｌ　Ｔｉｍｅ　Ｃｌｏｃｋ）と、ＧＮＳＳ（Ｇｌｏｂａｌ　Ｎａｖｉｇａｔｉｏｎ　Ｓａｔｅｌｌｉｔｅ　Ｓｙｓｔｅｍ）受信部１８とを含む。ウェアラブルカメラ１０は、ＭＣＵ１９（Ｍｉｃｒｏ　Ｃｏｎｔｏｌｌｅｒ　Ｕｎｉｔ）と、ＢＬＥ通信部２１Ａと、ＷＬＡＮ通信部２１Ｂと、ＵＳＢインターフェース２２と、コンタクトターミナル２３と、電源部２４と、バッテリ２５とを含む。なお、添付図面においてインターフェースを「Ｉ／Ｆ」と略記している。
　ウェアラブルカメラ１０は、録画スイッチＳＷ１と、スナップショットスイッチＳＷ２と、通信モードスイッチＳＷ３と、属性情報付与スイッチＳＷ４と、無線登録スイッチＳＷ５とを含む。
　ウェアラブルカメラ１０は、３個のＬＥＤ２６ａ，２６ｂ，２６ｃ（Ｌｉｇｈｔ　Ｅｍｉｓｓｉｏｎ　Ｄｉｏｄｅ）と、バイブレータ２７と、音声出力部２８と、マイク２９Ａと、スピーカ２９Ｂと、イヤホン端子２９Ｃとを含む。
　撮像部１１は、撮像レンズ（不図示）と、ＣＣＤ（Ｃｈａｒｇｅ　Ｃｏｕｐｌｅｄ　Ｄｅｖｉｃｅ）型イメージセンサあるいはＣＭＯＳ（Ｃｏｍｐｌｅｍｅｎｔａｒｙ　Ｍｅｔａｌ　Ｏｘｉｄｅ　Ｓｅｍｉｃｏｎｄｕｃｔｏｒ）型イメージセンサによる固体撮像素子とを有する。撮像部１１は、撮像により得られた被写体の撮像映像のデータをＭＣＵ１９に出力する。
　コンタクトターミナル２３の検知端子２３Ｔは、ウェアラブルカメラ１０が充電台５５あるいはギャングチャージャ９０に載置された場合、あるいは充電台５５あるいはギャングチャージャ９０から取り外された場合に電圧変化が生じる端子である。コンタクトターミナル２３の検知端子２３Ｔは、ＡＤコンバータＣＶに接続される。検知端子２３Ｔの電圧変化を示す信号は、ＡＤコンバータＣＶにおいてデジタル信号に変換され、そのデジタル信号がＩ２Ｃ２０を介してＭＣＵ１９に入力される。
　ＧＰＩＯ１２は、パラレルインターフェースである。ＧＰＩＯ１２には、録画スイッチＳＷ１、スナップショットスイッチＳＷ２、通信モードスイッチＳＷ３、属性情報付与スイッチＳＷ４、無線登録スイッチＳＷ５、ＬＥＤ２６ａ，２６ｂ，２６ｃ、バイブレータ２７、音声出力部２８、マイク２９Ａ、スピーカ２９Ｂおよびイヤホン端子２９Ｃのそれぞれが接続される。ＧＰＩＯ１２は、これらの各種電子部品とＭＣＵ１９との間で信号を入出力する。
　マイク２９Ａは、ウェアラブルカメラ１０の周囲の音声を収音し、収音された音声の音声データを、ＧＰＩＯ１２を介してＭＣＵ１９に出力する。なお、マイク２９Ａは、ウェアラブルカメラ１０の筐体に収容された内蔵マイクであってもよいし、ウェアラブルカメラ１０と無線接続されたワイヤレスマイクであってもよい。ワイヤレスマイクの場合、警官が任意の箇所に取り付けることで、収音性を高めることができる。
　音声出力部２８は、ＭＣＵ１９の指示の下で、ウェアラブルカメラ１０の動作に関する音声信号を出力する。音声出力部２８は、予めＲＯＭ１４などに記憶された既定のメッセージの音声を有する音声データを読み出し、この音声データに基づく音声信号をスピーカ２９Ｂから音声出力する。イヤホン端子２９Ｃは、イヤホン端子２９Ｃに接続されたイヤホンに対し、音声出力部２８より出力される音声信号を出力する。スピーカ２９Ｂは、音声出力部２８より出力される音声信号を入力して音声出力する。
　また、ＡＤコンバータＣＶは、Ｉ２Ｃ２０（Ｉｎｔｅｒ－Ｉｎｔｅｇｒａｔｅｄ　Ｃｉｒｃｕｉｔ）などの通信インターフェースを介してＭＣＵ１９に接続される。なお、コンタクトターミナル２３の検知端子２３Ｔを、ＡＤコンバータＣＶを介さずにＧＰＩＯ１２へ接続することでも類似の効果を得ることが可能である。
　ＲＡＭ１３は、例えばＭＣＵ１９の動作において使用されるワークメモリである。ＲＯＭ１４は、例えばＭＣＵ１９の動作（処理）の実行を制御するためのプログラムおよびデータを予め記憶する。
　記憶部１５は、例えばメモリカード等の記憶媒体により構成され、例えば警官の操作に基づく録画開始の指示、あるいは車載カメラシステム５０からの録画開始の指示に基づき、撮像部１１で撮像された撮像映像のデータ記録（つまり録画）を開始する。記憶部１５は、撮像部１１で撮像された所定時間（例えば３０秒）の撮像映像のデータを常時プリバッファリングして保持し、現在時刻より所定時間（例えば３０秒）前までの撮像映像のデータを常に蓄積し続ける。記憶部１５は、録画開始の指示を受けると、撮像映像のデータの記録を開始し、録画停止の指示を受けるまでの撮像映像のデータの記録を継続する。また、記憶部１５がメモリカードで構成される場合、ウェアラブルカメラ１０の筐体に挿抜自在に装着される。
　ＥＥＰＲＯＭ１６は、例えばウェアラブルカメラ１０を識別する識別情報（例えばカメラＩＤとしてのシリアル番号）、および各種設定情報を記憶する。ＲＴＣ１７は、現在の時刻情報をカウントしてＭＣＵ１９に出力する。
　ＧＮＳＳ受信部１８は、複数（例えば４機）の航法衛星から送信される、各自の信号送信時刻および位置座標を含む衛星信号を受信してＭＣＵ１９に出力する。ＭＣＵ１９は、複数の衛星信号を用いて、現在のウェアラブルカメラ１０の位置座標および衛星信号の受信時刻を算出する。なお、この算出は、ＭＣＵ１９ではなくＧＮＳＳ受信部１８により実行されてもよい。この受信時刻の情報は、ウェアラブルカメラ１０のシステム時刻（つまり、ＲＴＣ１７の出力）の補正のためにも使用されてもよい。システム時刻は、撮像された画像（静止画、動画を含む）の撮像時刻の記録等に利用される。
　ＭＣＵ１９は、ウェアラブルカメラ１０の制御部としての機能を有し、例えばウェアラブルカメラ１０の各部の動作を全体的に統括するための制御処理、ウェアラブルカメラ１０の各部との間のデータの入出力処理、データの演算（計算）処理およびデータの記憶処理を行う。ＭＣＵ１９は、ＲＯＭ１４に記憶された各種のプログラムおよびデータに従って動作する。ＭＣＵ１９は、動作時、ＲＡＭ１３を使用し、ＲＴＣ１７より現在の時刻情報を得るとともに、ＧＮＳＳ受信部１８から現在の位置情報を得るかあるいはＧＮＳＳ受信部１８からの出力を用いて現在の位置情報を算出する。
　ＢＬＥ通信部２１Ａは、近距離無線通信の通信規格であるＢＬＥ（Ｂｌｕｅｔｏｏｔｈ（登録商標）　Ｌｏｗ　Ｅｎｅｒｇｙ）通信を用いて、スマートフォンあるいはコモントリガーボックス５４等との間で無線通信を行う。ＢＬＥは、Ｂｌｕｅｔｏｏｔｈ（登録商標）のバージョン４．０の呼称である。ＢＬＥでは、低消費電力で通信可能あるが、その通信速度は１００ｋｂｐｓ程度と低速である。
　ＷＬＡＮ通信部２１Ｂは、テザリング機能を用いた無線ＬＡＮアクセスポイントとしてのスマートフォン、あるいは警察署内に設けられた無線ＬＡＮアクセスポイント等と無線ＬＡＮ（つまりＷＬＡＮ）で接続され、接続先と無線通信を行う。無線ＬＡＮは、ＢＬＥと比べ、通信速度が数十～数百Ｍｂｐｓと高速通信可能であるが、無線ＬＡＮアクセスポイントと常時接続されるので、消費電力が多くなる。また、ＷＬＡＮ通信部２１Ｂは、無線ＬＡＮ通信により、警察車両ＶＣ１内に搭載されたコモントリガーボックス５４との間で通信を行い、撮像部１１により得られた撮像映像のデータをコモントリガーボックス５４に送る。この撮像映像のデータは、コモントリガーボックス５４およびネットワークＮＷ１を介して警察署内のバックエンドストリーミングサーバ６０に送られる。また、警察車両ＶＣ１が警察署内の無線ＬＡＮアクセスポイントの通信圏内に位置する場合には、撮像映像のデータは、コモントリガーボックス５４および無線ＬＡＮアクセスポイントを介して警察署内のバックエンドサーバ７０に送られてよい。
　なお、ウェアラブルカメラ１０は、ＢＬＥ通信あるいはＷＬＡＮ通信の他、ＮＦＣ（Ｎｅａｒ　Ｆｉｅｌｄ　Ｃｏｍｍｕｎｉｃａｔｉｏｎ）等の近距離無線通信、もしくは携帯回線網（例えばＬＴＥ：Ｌｏｎｇ　Ｔｅｒｍ　Ｅｖｏｌｕｔｉｏｎ）を用いた無線通信を行うための通信部の構成（図示略）をそれぞれ有してもよい。
　ＵＳＢインターフェース２２は、シリアルバスであり、例えば車載ＰＣ５２あるいは警察署内のバックエンドクライアント８０との接続を可能とする。
　コンタクトターミナル２３は、充電台５５と電気的に接続するための端子であり、ＵＳＢインターフェース２２を介してＭＣＵ１９に接続されるとともに、電源部２４と接続される。電源部２４は、コンタクトターミナル２３における充電台５５との接続検知に応じて、バッテリ２５を充電する。コンタクトターミナル２３は、充電台５５との接続に応じて、ＭＣＵ１９が記憶部１５から読み出した映像のデータを、充電台５５を介して接続された外部機器（例えばコモントリガーボックス５４）に通信可能である。
　コンタクトターミナル２３には、例えば「充電端子Ｖ＋」（図示略）、「検知端子２３Ｔ」、「データ端子Ｄ－，Ｄ＋」（図示略）および「グランド端子」（図示略）が設けられる。検知端子２３Ｔは、電圧および電圧変化を検出するための端子である。データ端子Ｄ－，Ｄ＋は、例えばＵＳＢコネクタ端子を介して、車載ＰＣ５２に対してウェアラブルカメラ１０で撮像した映像のデータを転送するための端子である。コンタクトターミナル２３の検知端子２３Ｔは、ＡＤコンバータＣＶを介してＩ２Ｃ２０等の通信インターフェースに接続され、コンタクトターミナル２３の検知電圧値がＭＣＵ１９に入力される。
　コンタクトターミナル２３と、充電台５５のコネクタとが接続されることにより、ウェアラブルカメラ１０と外部機器（例えばコモントリガーボックス５４）との間でデータ通信が可能となる。
　電源部２４は、例えばコンタクトターミナル２３を介して、充電台５５に接続される外部電源（例えばコモントリガーボックス５４、警察車両ＶＣ１内のシガーチャージャ（図示略）、警察車両ＶＣ１内のアクセサリ）より供給される充電電流をバッテリ２５に給電することで、バッテリ２５を充電する。
　バッテリ２５は、例えば充電可能な２次電池により構成され、ウェアラブルカメラ１０の各部に電源電力を供給する。
　録画スイッチＳＷ１は、例えば警官の押下操作による録画（動画の撮像）の開始／停止の操作指示を入力する押しボタンスイッチである。また、ＭＣＵ１９は、例えば録画スイッチＳＷ１が短押しされたことで録画（動画の撮像）を開始し、録画スイッチＳＷ１が長押しされたことで録画を終了してもよい。また、ＭＣＵ１９は、例えば録画スイッチＳＷ１が奇数回押下されることで録画（動画の撮像）を開始し、録画スイッチＳＷ１が偶数回押下されることで録画を終了してもよい。
　スナップショットスイッチＳＷ２は、例えば警官の押下操作による静止画の撮像の操作指示を入力する押しボタンスイッチである。スナップショットスイッチＳＷ２は、例えば押下される度に、ＭＣＵ１９によって押下時の静止画の撮像が実行される。
　通信モードスイッチＳＷ３は、例えばウェアラブルカメラ１０と外部機器との間の通信モードを設定するための操作指示を入力するスライドスイッチである。通信モードは、例えばアクセスポイントモード、ステーションモード、ＯＦＦモードを含む。
　アクセスポイントモードは、ウェアラブルカメラ１０が無線ＬＡＮのアクセスポイントとして動作し、例えば警官が所持するスマートフォンと無線接続して、ウェアラブルカメラ１０とスマートフォンとの間で通信を行うモードである。アクセスポイントモードにおいて、スマートフォンは、ウェアラブルカメラ１０と接続することにより、ウェアラブルカメラ１０による現在のライブ画像の表示、録画された画像の再生、撮像された静止画の表示等を行うことができる。
　ステーションモードは、無線ＬＡＮを用いて外部機器と接続する場合に、外部機器をアクセスポイントとして通信するモードである。例えばスマートフォンのテザリング機能を利用し、外部機器としてスマートフォンを設定してもよい。ステーションモードにおいて、ウェアラブルカメラ１０は、各種設定、ウェアラブルカメラ１０が保持する録画された画像の転送（アップロード）等を車載カメラシステム５０に行うことができる。
　ＯＦＦモードは、無線ＬＡＮの通信動作をオフし、無線ＬＡＮを未使用とするモードである。
　属性情報付与スイッチＳＷ４は、映像データに属性情報を付与するために操作される押しボタンスイッチである。属性情報は、ウェアラブルカメラ１０により撮像された映像の内容（例えば事件の種別、殺人、強盗、災害等）を示す。
　無線登録スイッチＳＷ５は、ウェアラブルカメラ１０が無線通信（例えばＢＬＥまたは無線ＬＡＮを用いた無線通信）する相手の外部機器（例えばスマートフォン、コモントリガーボックス５４）を通信相手として登録して設定する（以下「通信設定処理」とも称する場合がある）際に操作される押しボタンスイッチである。以下、例えばＢＬＥを用いた無線通信において、通信相手となる機器を登録して設定する処理を「ペアリング」と称する場合がある。
　ＬＥＤ２６ａは、例えばウェアラブルカメラ１０の電源投入状態（オンオフ状態）およびバッテリ２５の状態を示す表示部である。
　ＬＥＤ２６ｂは、例えばウェアラブルカメラ１０の撮像動作の状態（録画状態）を示す表示部である。
　ＬＥＤ２６ｃは、例えばウェアラブルカメラ１０の通信モードの状態を示す表示部である。また、３個のＬＥＤ２６ａ～２６ｃは、ウェアラブルカメラ１０が車載カメラシステム５０（例えば車載ＰＣ５２）から通知データを受信すると、ＭＣＵ１９からの指示に従い、点滅動作を行う。この時、ＭＣＵ１９は、通知データに含まれる、音源に関する情報に応じて、ＭＣＵ１９は、ＬＥＤ２６ａ～２６ｃの点滅パターンを可変させる。
　ＭＣＵ１９は、録画スイッチＳＷ１、スナップショットスイッチＳＷ２、通信モードスイッチＳＷ３、属性情報付与スイッチＳＷ４および無線登録スイッチＳＷ５の各スイッチの入力検出を行い、操作があったスイッチ入力に対する処理を行う。
　ＭＣＵ１９は、録画スイッチＳＷ１の操作入力を検出した場合、撮像部１１における撮像動作の開始または停止を制御し、撮像部１１から得られた画像を、動画像として記憶部１５に保存する。
　ＭＣＵ１９は、スナップショットスイッチＳＷ２の操作入力を検出した場合、スナップショットスイッチＳＷ２が操作されたときの撮像部１１による画像を、静止画像として記憶部１５に保存する。
　ＭＣＵ１９は、通信モードスイッチＳＷ３の状態を検出し、通信モードスイッチＳＷ３の設定に応じた通信モードによってＢＬＥ通信部２１Ａと、ＷＬＡＮ通信部２１Ｂとを動作させる。
　ＭＣＵ１９は、属性情報付与スイッチＳＷ４が押下された場合、撮像部１１によって撮像された映像のデータに対応する属性情報を、その映像に対応付けて付与する。
　ＭＣＵ１９は、無線登録スイッチＳＷ５が押下された場合、ウェアラブルカメラ１０の通信相手となり得る周囲の外部機器（例えばコモントリガーボックス５４）に対し、通信設定処理（例えばペアリング）において行われるべき既定の処理を実行する。ここで、既定の処理は、ペアリングを例示すると、無線通信の通信相手としての登録要求情報の生成並びにＢＬＥ通信部２１Ａへの出力、接続先である通信相手を特定するための接続情報の生成ならびにＢＬＥ通信部２１Ａへの出力、通信相手から送信された接続情報の記憶部１５への保存である。但し、無線ＬＡＮの通信設定に関する既定の処理は、上述したペアリングを例示した時の既定の処理と同様であることは言うまでもない。
　図３は、車載ＰＣ５２のハードウェア構成例を示すブロック図である。車載ＰＣ５２は、ＣＰＵ２０１と、Ｉ／Ｏ（Ｉｎｐｕｔ／Ｏｕｔｐｕｔ）制御部２０２と、通信部２０３と、メモリ２０４と、入力部２０５と、表示部２０６と、スピーカ２０７と、ＨＤＤ２０８とを含む構成である。車載ＰＣ５２は、ウェアラブルカメラ１０および車載レコーダ５３のそれぞれとの間で通信可能であり、コモントリガーボックス５４を介して警察署内の各種サーバ（例えばバックエンドストリーミングサーバ６０、バックエンドサーバ７０）とも通信可能である。
　ＣＰＵ２０１は、例えば、車載ＰＣ５２の各部の動作を全体的に統括するための制御処理、他の各部との間のデータのＩ／Ｏ制御部２０２を介した入出力処理、データの演算（計算）処理およびデータの記憶処理を行う。
　ＣＰＵ２０１は、例えば、表示部２０６に表示された車載カメラシステム５０へのログイン画面に対する警官の入力操作により、警官の車載カメラシステム５０へのログインの可否を認証する。警官の入力操作は、例えば、Ｏｆｆｉｃｅｒ　ＩＤとパスワード等を入力する操作である。ログインが許可される対象となる警官に関する各種情報は、例えばメモリ２０４に予め保存されており、ＣＰＵ２０１は、メモリ２０４に予め保存されているログインの許可対象の情報を用いて、警官の車載カメラシステム５０へのログインの可否を判定する。なお、このログインは、車載ＰＣ５２を介した車載カメラシステム５０へのログインでもよいし、車載ＰＣ５２にインストールされた既定のアプリケーションへのログインでもよい。
　Ｉ／Ｏ制御部２０２は、ＣＰＵ２０１と車載ＰＣ５２の各部（例えば通信部２０３、入力部２０５、表示部２０６、スピーカ２０７）との間でデータの入出力に関する制御を行い、ＣＰＵ２０１からのデータおよびＣＰＵ２０１へのデータの中継を行う。なお、Ｉ／Ｏ制御部２０２は、ＣＰＵ２０１と一体的に構成されてもよい。
　通信部２０３は、例えば、車載カメラ５１あるいは車載レコーダ５３との間または警官が装着可能なウェアラブルカメラ１０との間で、有線または無線による通信を行う。
　メモリ２０４は、例えばＲＡＭ、ＲＯＭ、不揮発性あるいは揮発性の半導体メモリを用いて構成され、ＣＰＵ２０１の動作時のワークメモリとして機能し、ＣＰＵ２０１を動作させるための所定のプログラムおよびデータを保存している。メモリ２０４は、例えば、車載カメラシステム５０へのログインが許可される警官に関するログイン情報を保存する。
　入力部２０５は、警官の入力操作を受け付け、Ｉ／Ｏ制御部２０２を介してＣＰＵ２０１に通知するためのＵＩ（Ｕｓｅｒ　Ｉｎｔｅｒｆａｃｅ）であり、例えばマウス、キーボード等のポインティングデバイスである。入力部２０５は、例えば表示部２０６の画面に対応して配置され、警官の指あるいはスタイラスペンによって操作が可能なタッチパネルもしくはタッチパッドを用いて構成されても良い。入力部２０５は、例えば、車載カメラシステム５０へログインするためのログイン情報を入力する。
　表示部２０６は、例えばＬＣＤあるいは有機ＥＬを用いて構成され、各種情報を表示する。また、表示部２０６は、例えば警官の入力操作に応じて、ウェアラブルカメラ１０および車載カメラ５１のそれぞれにより撮像された撮像映像に含まれる映像部分のデータを、ＣＰＵ２０１の指示の下で同一画面上に表示する。
　スピーカ２０７は、例えば警官の入力操作に応じて、ウェアラブルカメラ１０および車載カメラ５１のそれぞれにより撮像された撮像映像に含まれる音声部分のデータを、ＣＰＵ２０１の指示の下で出力する。なお、表示部２０６およびスピーカ２０７は、車載ＰＣ５２とは別々の構成としてもよい。
　ＨＤＤ２０８は、例えば、各種データ、ソフトウェア（ソフトウェアプログラム）を記憶する。具体的には、ＨＤＤ２０８は、例えば、車載カメラ５１および車載レコーダ５３のそれぞれの制御および設定を行うためのソフトウェア、ウェアラブルカメラ１０の制御や設定を行うためのソフトウェア、を保存する。また、ＨＤＤ２０８は、例えば、ウェアラブルカメラ１０により撮像された撮像映像のデータ、車載カメラ５１により撮像された撮像映像のデータを保存してよい。
　次に、実施の形態１に係るウェアラブルカメラシステム１の動作手順を説明する。
　ここでは、２人の警官ＯＡ，ＯＢ（図４参照）がそれぞれ装着するウェアラブルカメラ１０によって撮像される画像をバックエンドサーバ７０が結合し、空間画像としてバックエンドクライアント８０に表示する例を説明する。２人の警官ＯＡ，ＯＢが装着するウェアラブルカメラ１０を区別するために、ここでは、警官ＯＡが装着するウェアラブルカメラ１０を便宜的に「ＢＷＣ１」と称し、警官ＯＢが装着するウェアラブルカメラ１０を便宜的に「ＢＷＣ２」と称する。なお、ＢＷＣ１，ＢＷＣ２は、ともに同一のハードウェア構成を有するウェアラブルカメラ１０である（図２参照）。
　図４は、実施の形態１に係るウェアラブルカメラシステム１の動作手順例を時系列に示すシーケンス図である。事件あるいは事故等の現場（以下、単に「事件現場」ともいう）に警官ＯＡ，ＯＢがいる状況を想定する。
　図４において、警官ＯＡが装着するＢＷＣ１によって事件現場が撮像されると、ＢＷＣ１は、記録証拠映像を定期的にバックエンドサーバ７０にアップロードする（Ｔ１）。例えば、犯人が家に立てこもっているシーンを想定する。警官ＯＡがこの家を巡回する場合、ＢＷＣ１による記録証拠映像は、例えば３０秒、１分、５分毎にバックエンドサーバ７０に送信される。なお、記録証拠映像が送信されるタイミング（周期）は、３０秒、１分、５分に限定されないことは言うまでもない。このとき、ＢＷＣ１は、記録証拠映像に時刻情報および現在位置情報を記録証拠映像のメタ情報として含めて送信する。
　ＢＷＣ１により得られた記録証拠映像は、例えばＢＷＣ１と無線ＬＡＮにより接続されているコモントリガーボックス５４およびネットワークＮＷ１を介して、バックエンドストリーミングサーバ６０あるいは、そのバックエンドストリーミングサーバ６０を更に介してバックエンドサーバ７０に送信される。なお、ＢＷＣ１による記録証拠映像は、車載レコーダ５３に蓄積された後、コモントリガーボックス５４と警察署内の無線ＬＡＮアクセスポイントとが通信可能に接続された上でコモントリガーボックス５４を介してバックエンドサーバ７０に直接に送信されてもよい。
　同様に、警官ＯＢによって事件現場が撮像されると、ＢＷＣ２は、記録証拠映像を定期的にバックエンドサーバ７０にアップロードする（Ｔ２）。このとき、ＢＷＣ２は、記録証拠映像に時刻情報および現在位置情報を記録証拠映像のメタ情報として含めて送信する。なお、ＢＷＣ２からバックエンドサーバ７０までの記録証拠映像の送信ルートは、上述したＢＷＣ２からバックエンドサーバ７０までの記録証拠映像の送信ルートと同じでよいし異なっていてもよい。
　同様に、車載カメラ５１は、警察車両ＶＣ１が到着した事件現場を撮像する。車載カメラシステム５０（ＩＣＶ）は、車載カメラ５１により得られた記録証拠映像を定期的にバックエンドサーバ７０に送信する（Ｔ３）。このとき、車載ＰＣ５２は、記録証拠映像に時刻情報および現在位置情報を記録証拠映像のメタ情報として併せて送信する。
　車載カメラ５１により得られた記録証拠映像は、例えば車載カメラ５１と接続される車載ＰＣ５２からコモントリガーボックスおよびネットワークＮＷ１を介して、バックエンドストリーミングサーバ６０あるいは、そのバックエンドストリーミングサーバ６０を更に介してバックエンドサーバ７０に送信される。なお、車載カメラ５１による記録証拠映像は、車載レコーダ５３に蓄積された後、コモントリガーボックス５４と警察署内の無線ＬＡＮアクセスポイントとが通信可能に接続された上でコモントリガーボックス５４を介してバックエンドサーバ７０に直接に送信されてもよい。
　バックエンドサーバ７０は、ＢＷＣ１，ＢＷＣ２および車載カメラ５１のそれぞれからメタ情報を含む記録証拠映像を受信して記録（蓄積）する。バックエンドサーバ７０は、蓄積した記録証拠映像に対応するメタ情報に基づいて、同一の時間帯および同一のエリア（地点）の記録証拠映像に対し、同一の事件管理番号の一例としての事件番号（ケースナンバー）を付与する（Ｔ４）。同一の時間帯は、同じ事件、事故等の状況を表す映像であると判断される時間であり、任意に設定される。例えば、警官が不審者に対し職務質問を行う場合、同一の時間帯は、１０分に設定される。同一のエリアは、ウェアラブルカメラ１０が搭載するＧＮＳＳ受信部１８によって得られる現在位置情報に基づく所定の範囲である。ここでは、現在位置情報として、ＧＮＳＳの１つであるＧＰＳ（Ｇｌｏｂａｌ　Ｐｏｓｉｔｉｏｎｉｎｇ　Ｓｙｓｔｅｍ）を用いて得られるＧＰＳ位置情報を用いる場合を示す。なお、現在位置情報は、ＧＮＳＳ受信部によって得られる位置情報に限られず、ウェアラブルカメラと無線信号を送受信する無線基地局の位置情報で代用されてもよい。
　バックエンドサーバ７０は、同一の事件番号が付与された記録証拠映像が少なくとも１つ存在する場合、証拠記録映像に記録された特定のオブジェクトの特徴要素をメタ情報として取り出し、記録時刻（時間帯よりも詳細な時刻）およびＧＰＳ位置情報とともに蓄積する（Ｔ５）。ここで、特定のオブジェクトは、事件、事故等の現場（言い換えると、事件等に関する注目地点）にある目印（基点）となる対象であり、例えば簡単に移動しない家、木等の不動物体である。なお、ＢＷＣ１，ＢＷＣ２および車載カメラ５１により短時間の間に得られた記録証拠映像を用いる場合には、特定のオブジェクトとして移動可能な車両を採用してもよい。
　バックエンドサーバ７０は、同じ事件番号が付与された複数の記録証拠映像に対し、特徴要素が一致するオブジェクトを検索する（Ｔ６）。このオブジェクトの検索では、同じカメラ（例えば同じ警官が装着するウェアラブルカメラ）で撮像された記録証拠映像において、特徴要素が一致するオブジェクトを検索してもよいし、異なるカメラ（別々の警官がそれぞれ装着するウェアラブルカメラ）で撮像された記録証拠映像において、特徴要素が一致するオブジェクトを検索してもよい。なお、異なるカメラは、警官が装着するウェアラブルカメラと警察車両の車載カメラの組み合わせであってもよい。また、カメラの台数は、２台に限らず３台以上であってもよい。
　検索の結果、特徴要素が一致するオブジェクトが見つかった場合、バックエンドサーバ７０は、特徴要素が一致したオブジェクトを基点（基準となる点）とし、異なる２以上の証拠記録映像の中からそれぞれオブジェクトを含む画像を抽出し、抽出した２以上の画像をオブジェクトの全体あるいは共通する一部分の外観形状の同一性が保持されるように結合し、合成画像を生成する（Ｔ７）。例えば、抽出される２以上の画像は、２つのウェアラブルカメラ１０（ＢＷＣ１，ＢＷＣ２）によって同一のタイミングで撮像された画像である。なお、抽出される２以上の画像は、異なるタイミングにおいて撮像された画像であってもよい。
　合成画像は、仮に結合された場合でもそれぞれの記録証拠映像中に共通するオブジェクトの全体あるいは共通する一部分の外観形状の同一性が保持される程度に、抽出された２以上の画像を単に足し合わせることで生成される静止画像であり、例えば２以上の画像が重なっている領域を含む。また、合成画像において、２以上の画像が近接する、いずれの画像にも現れない部分は、合成画像の証拠性を担保するために、画像処理等によって補間処理されることなく（言い換えると、撮像されていない画像を作成することなく）空白の領域となる。これにより、合成画像は、虚偽の無い、真正な画像（言い換えると、証拠性の信頼度が担保された画像）である。
　バックエンドサーバ７０は、合成画像の生成に用いられた、２以上の画像に対し、それぞれ時間方向に対して前後する複数のフレームの画像のそれぞれを継ぎ足し（繋ぎ）、より大きな空間画像を生成する（Ｔ８）。この空間画像は、特徴要素が一致したオブジェクトを基点とする２以上の画像を含む合成画像、およびこの合成画像に含まれる２以上の画像における１以上の前後フレームの画像を１つに結合した静止画像である。したがって、空間画像は、特徴要素が一致したオブジェクトを基点とする２以上の画像を含む合成画像の前フレーム（所定フレーム数前の画像）から、合成画像の後フレームの画像（所定フレーム数後の画像）まで、重ねた状態で得られる。なお、前後フレームは、基点とする画像の後フレームだけであってもよいし、前フレームだけであってもよい。また、基点とする画像ごとに前後フレームの数は、例えば事件番号ごとに異なってもよい。
　なお、空間画像を表示する場合、空間画像は、合成画像の前フレームから後フレームの画像までスライドショーのようにフレーム単位で連続的に表示されてもよい。つまり、空間画像は、静止画像を連続的に再生するように、動画像として表示されてもよい。
　バックエンドサーバ７０は、１つの映像に結合された空間画像のデータを、バックエンドクライアント８０にストリーミング配信を行う（Ｔ９）。ここでは、ストリーミング配信は、バックエンドサーバ７０に有線ＬＡＮ等で接続されたバックエンドクライアント８０に対して行われる。なお、ストリーミング配信は、無線ＬＡＮ、ネットワークＮＷ１およびコモントリガーボックス５４を介して車載ＰＣ５２あるいは他のビューア装置（スマートフォン、タブレット端末）等に対して行われてもよい。
　一方、バックエンドクライアント８０は、バックエンドサーバ７０から送信される空間画像のデータを受信する（Ｔ１０）。バックエンドクライアント８０は、受信した空間画像のデータを基に、警察署の解析専門官が閲覧可能なように空間画像ＳＧ（図６参照）を表示する（Ｔ１１）。
　なお、本実施形態では、オブジェクトの特徴要素をメタ情報として取り出す処理は、バックエンドサーバ７０によって行われたが、バックエンドサーバ７０が行う代わりに、ＢＷＣ１，ＢＷＣ２，車載カメラ５１、あるいは車載ＰＣ５２によって行われてもよい。例えば、車載ＰＣ５２は、車載レコーダ５３に記録された、上記記録証拠映像を基に、メタ情報を取り出してよい。
　図５は、同一の事件番号が付与された撮像画像を含む空間画像および撮像エリアの一例を示す図である。図中、点線枠で示される５枚の撮像画像Ｇ１１，Ｇ１２，Ｇ１３，Ｇ１４，Ｇ１５は、警官ＯＡによって、それぞれ時刻ｔ１，ｔ２，ｔ３，ｔ４，ｔ５で連続的に撮像された、同一の事件番号が付与された画像である。同様に、点線枠で示される４枚の撮像画像Ｇ２２，Ｇ２３，Ｇ２４，Ｇ２５は、警官ＯＢによってそれぞれ時刻ｔ２，ｔ３，ｔ４，ｔ５で連続的に撮像された、同一の事件番号が付与された画像である。これらの撮像画像のうち、例えば、警官ＯＡによる撮像画像Ｇ１２と、警官ＯＢによる撮像画像Ｇ２２とでは、オブジェクト（例えば同一の車両）の特徴要素（フロントガラス、左右のサイドミラー等）が一致する。ここでは、撮像画像Ｇ１２と撮像画像Ｇ２２は、同じ時刻ｔ２に撮像された画像であるが、異なる時刻に撮像された画像であってもよい。このことは、撮像画像Ｇ１３と撮像画像Ｇ２３、および撮像画像Ｇ１４と撮像画像Ｇ２４においても同様である。ただし、５枚の撮像画像Ｇ１１，Ｇ１２，Ｇ１３，Ｇ１４，Ｇ１５、および４枚の撮像画像Ｇ２２，Ｇ２３，Ｇ２４，Ｇ２５は、それぞれ時系列に連続して撮像されたフレームの画像であることが望ましい。
　図６は、同一の事件番号が付与された複数枚の撮像画像を用いて空間画像を生成する動作例を説明する図である。バックエンドサーバ７０は、メタ情報に含まれるオブジェクトの特徴要素が一致する撮像画像Ｇ１２と撮像画像Ｇ２２とのそれぞれを結合基準画像として結合し、合成画像ＭＧを生成する。さらに、バックエンドサーバ７０は、撮像画像Ｇ１２，Ｇ２２と同一の事件番号が付与され、かつ上述した結合基準画像に対して時間方向に前後する複数のフレームのそれぞれの画像（例えば１フレーム後の撮像画像Ｇ１３と撮像画像Ｇ２３）を結合し、１フレーム後合成画像ＭＧ１を生成する。また同様にして、バックエンドサーバ７０は、上述した結合基準画像に対して時間方向に２フレーム後の撮像画像Ｇ１４と撮像画像Ｇ２４とを結合し、２フレーム後合成画像ＭＧ２を生成する。また同様にして、バックエンドサーバ７０は、上述した結合基準画像に対して時間方向に３フレーム後の撮像画像Ｇ１５と撮像画像Ｇ２５とを結合し、３フレーム後合成画像ＭＧ３を生成する。
　なお、ＢＷＣ２によって撮像される、結合基準画像である撮像画像Ｇ２２より時間的に１フレーム前の撮像画像Ｇ２１が仮に存在する場合（図６では撮像画像Ｇ２１が存在せず）、バックエンドサーバ７０は、その撮像画像Ｇ１１と撮像画像Ｇ２１とを結合し、１フレーム前合成画像を生成してもよい。図６の例では、１フレーム前合成画像が生成されないので、１フレーム前の撮像画像Ｇ１１だけが用いられる。バックエンドサーバ７０は、合成画像ＭＧと１以上の前後合成画像（例えば１フレーム後合成画像ＭＧ１、２フレーム後合成画像ＭＧ２、３フレーム後合成画像ＭＧ３）と１フレーム前の撮像画像Ｇ１１とを繋げた空間画像ＳＧを生成する。
　このように、空間画像ＳＧは、合成画像ＭＧに１以上の前後合成画像（例えば１フレーム後合成画像ＭＧ１、２フレーム後合成画像ＭＧ２、３フレーム後合成画像ＭＧ３）を結合した画像であり、合成画像ＭＧおよび１以上の前後フレームの画像のそれぞれと比べ、撮像エリアの広い画像である。したがって、警察署の解析専門官は、事件、事故等の現場の状況を広範囲な画像で確認できる。また、空間画像ＳＧは、合成画像ＭＧおよび１以上の前後フレームの画像を超える範囲の画像を含まない。つまり、空間画像ＳＧは、合成画像ＭＧおよび１以上の前後フレームの画像を基に得られる、虚偽の無い（例えば画像補間によって生成される画像を含まない）真正な画像である。したがって、空間画像は、証拠記録映像としての価値を担保できる。
　なお、合成画像の生成に用いられる画像としては、同一の事件番号が付与された複数枚の撮像画像のうち、任意のタイミングで撮像された複数枚（２枚以上の）画像であってよい。つまり、特徴要素が一致するオブジェクトの基点は、同一のタイミングに限らず、同一の事件番号と扱われる時間帯において異なるタイミングのフレーム画像に含まれてもよい。また、空間画像は、合成画像に対し１以上の前後合成画像を生成して繋げることなく、各フレームの画像を単に合成画像に結合することで、生成されてもよい。
　このように、実施の形態１に係るウェアラブルカメラシステム１では、ウェアラブルカメラシステム１は、複数のウェアラブルカメラ１０と、複数のウェアラブルカメラ１０のそれぞれとの間で通信可能に接続されるバックエンドサーバ７０と、を含む。複数のウェアラブルカメラ１０のそれぞれは、事件現場を撮像した個々の撮像画像をバックエンドサーバ７０に送る。バックエンドサーバ７０は、複数のウェアラブルカメラ１０のそれぞれから送られた個々の撮像画像に映る特定のオブジェクトの特徴要素を有するメタ情報を抽出し、メタ情報と対応する撮像画像とを対応付けて記録する。バックエンドサーバ７０は、個々の撮像画像に対応するメタ情報に基づいて、特定のオブジェクトの特徴要素が一致する複数の撮像画像を合成した合成画像を生成してバックエンドクライアント８０に送る。
　これにより、警察署の解析専門官は、バックエンドクライアント８０に表示される、複数台のウェアラブルカメラ１０を用いて撮像された事件、事故等の現場（注目するべき地点）の映像を広範囲に閲覧できる。したがって、ウェアラブルカメラシステム１は、事件あるいは事故等の注目するべき地点の広範囲の映像を得ることができ、警官による事件、事故等の現場の周囲の状況の観察および把握を効果的に支援できる。
　また、バックエンドサーバ７０は、合成画像の生成に用いた複数の撮像画像のそれぞれの撮像時刻に対して時間的に前後する１以上の前後フレームの画像（前後撮像画像）を用いて、特定のオブジェクトの特徴要素が一致する複数の前後撮像画像を合成した１以上の前後合成画像（例えば１フレーム後合成画像ＭＧ１、２フレーム後合成画像ＭＧ２、３フレーム後合成画像ＭＧ３）を生成し、合成画像ＭＧと１以上の前後合成画像とを繋げた空間画像を生成してバックエンドクライアント８０に送る。これにより、ウェアラブルカメラシステム１は、時間的に連続した事件、事故等の現場の映像を表示でき、事件、事故等の現場の周囲の状況の観察および把握をより効果的に支援できる。
　また、複数（例えば２台）のウェアラブルカメラ１０のそれぞれは、ＧＮＳＳ受信部１８により位置情報を取得可能である。各ウェアラブルカメラ１０は、事件、事故等の現場の位置情報と撮像時刻とを撮像画像に対応付けてバックエンドサーバ７０に送る。バックエンドサーバ７０は、２台のウェアラブルカメラ１０のそれぞれから送られた個々の撮像画像に対応する位置情報および撮像時刻が同一である場合に、個々の撮像画像に同一の事件番号を付与して記録する。これにより、バックエンドサーバ７０は、同じ事件、事故等に係る撮像画像だけを検索し、かつバックエンドクライアント８０に表示させることができる。したがって、警察署の解析専門官は、事件、事故に係る撮像画像を速やかに閲覧できる。
　また、バックエンドサーバ７０は、同一の事件番号が付与された個々の撮像画像を用いて、特定のオブジェクトの特徴要素を有するメタ情報を抽出する。これにより、バックエンドサーバ７０は、メタ情報を用いて、同一の事件番号が付与された個々の撮像画像を対応付けることができる。例えば、バックエンドサーバ７０は、オブジェクトの特徴要素が一致する２枚の撮像画像を結合し、合成画像を生成できる。
　また、複数のカメラとして、複数（例えば２名）の警官ＯＡ，ＯＢのそれぞれにより装着される２台のウェアラブルカメラ１０が用いられる。これにより、バックエンドサーバ７０は、２台のウェアラブルカメラ１０による、広範囲な現場の撮像画像を得ることができる。
　また、複数のカメラとして、１人以上の警官のそれぞれにより装着されるウェアラブルカメラ１０と、警官が乗車する警察車両ＶＣ１に設けられる車載カメラ５１が用いられる。これにより、バックエンドサーバ７０は、１台以上のウェアラブルカメラ１０と車載カメラ５１による、広範囲な現場の撮像画像を得ることができる。
　また、空間画像ＳＧは、合成画像ＭＧおよび１以上の前後合成画像（例えば１フレーム後合成画像ＭＧ１、２フレーム後合成画像ＭＧ２、３フレーム後合成画像ＭＧ３）を結合し、合成画像ＭＧおよび１以上の前後合成画像のそれぞれと比べて撮像エリアの広い、２台のＢＷＣ１，ＢＷＣ２によって撮像される画像である。これにより、空間画像ＳＧは、合成画像ＭＧおよび１以上の前後フレームの画像のそれぞれと比べ、撮像エリアの広い画像となる。したがって、警察署の解析専門官は、事件、事故等の現場の状況を広範囲な画像で確認できる。また、空間画像ＳＧは、合成画像ＭＧおよび１以上の前後フレームの画像を基に得られる、虚偽の無い（例えば画像補間によって生成される画像を含まない）真正な画像である。したがって、空間画像は、証拠記録映像としての価値を担保できる。
　なお、ここでは、バックエンドサーバは、同一の事件番号が付与された複数枚の撮像画像を結合して空間画像を生成したが、メタ情報として警官の識別番号がバックエンドサーバに送信される場合、同一の事件現場に向かった警官の識別番号を基に、異なる警官が装着するウェアラブルカメラによる撮像画像を結合し、空間画像を生成してもよい。
（実施の形態２）
　実施の形態１では、複数（２人以上）の警官が装着する各ウェアラブルカメラで撮像される画像を結合して合成画像とし、この合成画像と１以上の前後フレームの画像を結合して空間画像を生成する場合を示した。実施の形態２では、１人の警官が装着する１台のウェアラブルカメラで撮像される、１以上の前後フレームの画像を結合して空間画像を生成する例を説明する。なお、１台のウェアラブルカメラの代わりに、警察車両に搭載された車載カメラが用いられてもよい。
　また、実施の形態２のウェアラブルカメラシステムは実施の形態１とほぼ同一の構成を有する。実施の形態１と同一の構成要素については同一の符号を用いることで、その説明を省略する。
　図７は、実施の形態２に係るウェアラブルカメラシステム１の動作手順例を時系列に示すシーケンス図である。ここでは、１台のウェアラブルカメラ１０は、１人の警官ＯＢによって装着されるＢＷＣ２である場合を示すが、警官ＯＡによって装着されるＢＷＣ１であってもよい。
　図７において、警官ＯＢによって事件、事故等の現場が撮像されると、ＢＷＣ２は、記録証拠映像を定期的にバックエンドサーバ７０にアップロードする（Ｔ３１）。このとき、ＢＷＣ２は、記録証拠映像に時刻情報および現在位置情報を記録証拠映像のメタ情報として含めて送信する。なお、ＢＷＣ２の代わりに、車載カメラ５１が、警察車両ＶＣ１が到着した現場の状況を撮像し、同様に時刻情報および現在位置情報等のメタ情報を含む記録証拠映像を定期的にバックエンドサーバ７０に送信してもよい。
　バックエンドサーバ７０は、記録証拠映像が少なくとも１つ存在する場合、それぞれの証拠記録映像に記録されたオブジェクトの特徴要素をメタ情報として取り出し、記録時刻およびＧＰＳ位置情報とともに蓄積する（Ｔ３２）。
　バックエンドサーバ７０は、複数の記録証拠映像に対し、特徴要素が一致するオブジェクトを検索する（Ｔ３３）。このオブジェクトの検索では、同じカメラ（例えば同じ警官が装着するウェアラブルカメラ）で撮像された記録証拠映像において、特徴要素が一致するオブジェクトが検索される。
　検索の結果、特徴要素が一致するオブジェクトが見つかった場合、バックエンドサーバ７０は、特徴要素が一致したオブジェクトを基点（基準となる点）とする（Ｔ３４）。バックエンドサーバ７０は、基点を含む１枚の画像に対し、１以上の前後フレームの画像を継ぎ足し（繋ぎ）、大きな空間画像ＳＧ２（図８参照）を生成する（Ｔ３５）。この空間画像ＳＧ２は、特徴要素が一致したオブジェクトを基点とする画像に対し、１以上の前後フレームの画像を結合した静止画像である。なお、前後フレームは、基点とする画像の後フレームだけであってもよいし、前フレームだけであってもよい。また、基点とする画像ごとに前後フレームの数は、ＧＰＳ位置情報、記録時刻等によって異なってもよい。
　バックエンドサーバ７０は、１つの映像に結合された空間画像のデータを、バックエンドクライアント８０にストリーミング配信を行う（Ｔ３６）。
　一方、バックエンドクライアント８０は、バックエンドサーバ７０から送信される空間画像のデータを受信する（Ｔ３７）。バックエンドクライアント８０は、受信した空間画像のデータを基に、警察署の解析専門官が閲覧可能なように空間画像ＳＧ２を表示する（Ｔ３８）。
　図８は、１台のウェアラブルカメラで撮像された複数枚の画像を用いて空間画像を生成する動作例を説明する図である。図中、点線枠で示される４枚の撮像画像Ｇ２２，Ｇ２３，Ｇ２４，Ｇ２５は、警官ＯＢによってそれぞれ時刻ｔ２，ｔ３，ｔ４，ｔ５と連続的に撮像された画像である。例えば、撮像画像Ｇ２２と撮像画像Ｇ２３とでは、オブジェクト（同一車両）の特徴要素（ヘッドライト、サイドミラー等）が一致する。
　バックエンドサーバ７０は、撮像画像Ｇ２２を元画像とし、撮像画像Ｇ２２の前後フレームの画像（撮像画像Ｇ２３，Ｇ２４，Ｇ２５）を撮像画像Ｇ２２に結合し、空間画像ＳＧ２を生成する。ここでは、バックエンドサーバ７０は、元画像である撮像画像Ｇ２２に対し、後フレームの撮像画像Ｇ２３，Ｇ２４，Ｇ２５を結合する場合を示したが、前フレームの画像を結合してもよい。したがって、空間画像ＳＧ２は、撮像画像Ｇ２２に１以上の前後フレームの画像を結合した画像であり、撮像画像Ｇ２２および１以上の前後フレームの画像のそれぞれと比べ、撮像エリアの広い画像である。また、空間画像ＳＧ２は、撮像画像Ｇ２２および１以上の前後フレームの撮像画像Ｇ２３，Ｇ２４，Ｇ２５を超える範囲の画像を含まない、虚偽の無い（例えば画像補間によって生成される画像を含まない）真正な画像である。したがって、空間画像は、証拠記録映像としての価値を担保できる。
　なお、空間画像を表示する場合、空間画像は、元画像の前フレームから後フレームの画像までスライドショーのように連続的に表示されてもよい。この場合、空間画像は、静止画像を連続的に再生する、動画像として表示される。
　このように、実施の形態２におけるウェアラブルカメラシステムでは、ウェアラブルカメラシステムは、１台のウェアラブルカメラ１０と、複数のウェアラブルカメラ１０のそれぞれとの間で通信可能に接続されるバックエンドサーバ７０と、を含む。ウェアラブルカメラ１０は、事件現場を撮像した、時間的に前後する複数枚のフレームの撮像画像をバックエンドサーバ７０に送る。バックエンドサーバ７０は、複数フレームのそれぞれに映る特定のオブジェクトの特徴要素を有するメタ情報を抽出し、メタ情報と対応する撮像画像とを対応付けて記録する。バックエンドサーバ７０は、複数フレームの撮像画像のそれぞれに対応するメタ情報に基づいて、特定のオブジェクトの特徴要素が一致する複数の撮像画像を合成した合成画像を生成してバックエンドクライアント８０に送る。
　これにより、警察署の解析専門官は、バックエンドクライアント８０に表示される、１台のウェアラブルカメラ１０を用いて撮像された事件、事故等の現場の映像を広範囲に閲覧できる。したがって、ウェアラブルカメラシステム１は、警察署の解析専門官による事件、事故等の現場の周囲の状況の観察および把握を効果的に支援できる。
　以上、図面を参照しながら各種の実施の形態について説明したが、本開示はかかる例に限定されないことはいうまでもない。当業者であれば、特許請求の範囲に記載された範疇内において、各種の変更例、修正例、置換例、付加例、削除例、均等例に想到し得ることは明らかであり、それらについても当然に本開示の技術的範囲に属するものと了解される。また、発明の趣旨を逸脱しない範囲において、上述した各種の実施の形態における各構成要素を任意に組み合わせてもよい。
　なお、本出願は、２０１９年８月３０日出願の日本特許出願（特願２０１９－１５９１００）に基づくものであり、その内容は本出願の中に参照として援用される。
　本開示は、注目するべき地点の広範囲の映像を得て、その地点の周囲の状況の観察および把握を効果的に支援する画像合成システムおよび画像合成方法として有用である。
１　ウェアラブルカメラシステム
１０　ウェアラブルカメラ
５０　車載カメラシステム
５１　車載カメラ
５２　車載ＰＣ
５３　車載レコーダ
５４　コモントリガーボックス
６０　バックエンドストリーミングサーバ
７０　バックエンドサーバ
８０　バックエンドクライアント
ＮＷ１　ネットワーク

Claims (10)

  1. 　複数のカメラと、前記複数のカメラのそれぞれとの間で通信可能に接続されるサーバと、を含む画像合成システムであって、
    　前記複数のカメラのそれぞれは、
    　事件等に関する注目地点を撮像した個々の撮像画像を前記サーバに送り、
    　前記サーバは、
    　前記複数のカメラのそれぞれから送られた前記個々の撮像画像に映る特定のオブジェクトの特徴要素を有するメタ情報を抽出し、前記メタ情報と対応する撮像画像とを対応付けて記録し、
    　前記個々の撮像画像に対応するメタ情報に基づいて、前記特定のオブジェクトの特徴要素が一致する複数の撮像画像を合成した合成画像を生成してビューア装置に送る、
    　画像合成システム。
  2. 　前記サーバは、
    　前記合成画像の生成に用いた前記複数の撮像画像のそれぞれの撮像時刻に対して時間的に前後する前後撮像画像を用いて、前記特定のオブジェクトの特徴要素が一致する複数の前後撮像画像を合成した１以上の前後合成画像を生成し、前記合成画像と前記１以上の前後合成画像とを繋げた空間画像を生成して前記ビューア装置に送る、
    　請求項１に記載の画像合成システム。
  3. 　前記複数のカメラのそれぞれは、
    　位置情報を取得可能であり、前記注目地点の位置情報と撮像時刻とを撮像画像に対応付けて前記サーバに送り、
    　前記サーバは、
    　前記複数のカメラのそれぞれから送られた前記個々の撮像画像に対応する位置情報および撮像時刻が同一である場合に、前記個々の撮像画像に同一の事件管理番号を付与して記録する、
    　請求項１に記載の画像合成システム。
  4. 　前記サーバは、
    　前記同一の事件管理番号が付与された前記個々の撮像画像を用いて、前記特定のオブジェクトの特徴要素を有するメタ情報を抽出する、
    　請求項３に記載の画像合成システム。
  5. 　前記複数のカメラは、
    　複数の警官のそれぞれにより装着されるウェアラブルカメラである、
    　請求項１～４のうちいずれか一項に記載の画像合成システム。
  6. 　前記複数のカメラは、
    　１人以上の警官のそれぞれにより装着されるウェアラブルカメラと、前記警官が乗車する警察車両に設けられる車載カメラである、
    　請求項１～４のうちいずれか一項に記載の画像合成システム。
  7. 　前記空間画像は、
    　前記合成画像と１以上の前記前後合成画像とが結合され、前記合成画像および１以上の前記前後合成画像のそれぞれに映る撮像エリアと比べて広い撮像エリアが前記カメラによって撮像された画像を構成する、
    　請求項２に記載の画像合成システム。
  8. 　複数のカメラと、前記複数のカメラのそれぞれとの間で通信可能に接続されるサーバと、を含む画像合成システムにより実行される画像合成方法であって、
    　事件等に関する注目地点を撮像した個々の撮像画像を前記サーバに送り、
    　前記複数のカメラのそれぞれから送られた前記個々の撮像画像に映る特定のオブジェクトの特徴要素を有するメタ情報を抽出し、前記メタ情報と対応する撮像画像とを対応付けて記録し、
    　前記個々の撮像画像に対応するメタ情報に基づいて、前記特定のオブジェクトの特徴要素が一致する複数の撮像画像を合成した合成画像を生成してビューア装置に送る、
    　画像合成方法。
  9. 　カメラと、前記カメラとの間で通信可能に接続されるサーバと、を含む画像合成システムであって、
    　前記カメラは、
    　事件等に関する注目地点を撮像した、時間的に前後する複数の撮像画像を前記サーバに送り、
    　前記サーバは、
    　前記カメラから送られた前記複数の撮像画像のそれぞれに映る特定のオブジェクトの特徴要素を有するメタ情報を抽出し、前記メタ情報と対応する撮像画像とを対応付けて記録し、
    　前記複数の撮像画像のそれぞれに対応するメタ情報に基づいて、前記特定のオブジェクトの特徴要素が一致する複数の撮像画像を合成した空間画像を生成してビューア装置に送る、
    　画像合成システム。
  10. 　カメラと、前記カメラとの間で通信可能に接続されるサーバと、を含む画像合成システムにより実行される画像合成方法であって、
    　事件等に関する注目地点を撮像した、時間的に前後する複数の撮像画像を前記サーバに送り、
    　前記カメラから送られた前記複数の撮像画像のそれぞれに映る特定のオブジェクトの特徴要素を有するメタ情報を抽出し、前記メタ情報と対応する撮像画像とを対応付けて記録し、
    　前記複数の撮像画像のそれぞれに対応するメタ情報に基づいて、前記特定のオブジェクトの特徴要素が一致する複数の撮像画像を合成した空間画像を生成してビューア装置に送る、
    　画像合成方法。
PCT/JP2020/032651 2019-08-30 2020-08-28 画像合成システムおよび画像合成方法 WO2021039978A1 (ja)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
JP2019-159100 2019-08-30
JP2019159100A JP7327792B2 (ja) 2019-08-30 2019-08-30 画像合成システムおよび画像合成方法

Publications (1)

Publication Number Publication Date
WO2021039978A1 true WO2021039978A1 (ja) 2021-03-04

Family

ID=74685156

Family Applications (1)

Application Number Title Priority Date Filing Date
PCT/JP2020/032651 WO2021039978A1 (ja) 2019-08-30 2020-08-28 画像合成システムおよび画像合成方法

Country Status (2)

Country Link
JP (1) JP7327792B2 (ja)
WO (1) WO2021039978A1 (ja)

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2015002423A (ja) * 2013-06-14 2015-01-05 ソニー株式会社 画像処理装置、サーバ及び記憶媒体
JP2017060158A (ja) * 2015-09-14 2017-03-23 パナソニックＩｐマネジメント株式会社 ウェアラブルカメラシステム及び人物報知方法
JP2018061214A (ja) * 2016-10-07 2018-04-12 パナソニックＩｐマネジメント株式会社 監視映像解析システム及び監視映像解析方法

Family Cites Families (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2015002553A (ja) * 2013-06-18 2015-01-05 キヤノン株式会社 情報処理システムおよびその制御方法
JP2019040368A (ja) * 2017-08-24 2019-03-14 パナソニックＩｐマネジメント株式会社 画像検索支援装置及び画像検索支援方法

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2015002423A (ja) * 2013-06-14 2015-01-05 ソニー株式会社 画像処理装置、サーバ及び記憶媒体
JP2017060158A (ja) * 2015-09-14 2017-03-23 パナソニックＩｐマネジメント株式会社 ウェアラブルカメラシステム及び人物報知方法
JP2018061214A (ja) * 2016-10-07 2018-04-12 パナソニックＩｐマネジメント株式会社 監視映像解析システム及び監視映像解析方法

Also Published As

Publication number Publication date
JP2021040200A (ja) 2021-03-11
JP7327792B2 (ja) 2023-08-16

Similar Documents

Publication Publication Date Title
JP6738692B2 (ja) ウェアラブルカメラシステム及び人物報知方法
US11588966B2 (en) Wearable camera, in-vehicle communication device, charging device, and communication system
WO2016103610A1 (ja) ウェアラブルカメラ
JP2017060029A (ja) ウェアラブルカメラシステム及び録画制御方法
JP6799779B2 (ja) 監視映像解析システム及び監視映像解析方法
JP7327783B2 (ja) ウェアラブルカメラ
US20160119663A1 (en) Authentication device, authentication method, and authentication system
JP6115874B2 (ja) ウェアラブルカメラシステム及び録画制御方法
JP5861073B1 (ja) ウェアラブルカメラ
US11323692B2 (en) Asset management system and asset management method
KR102628410B1 (ko) 영상획득장치 및 그의 구동 방법
WO2021039978A1 (ja) 画像合成システムおよび画像合成方法
JP2018037964A (ja) ウェアラブルカメラシステム及び通信制御方法
JP5849195B1 (ja) ウェアラブルカメラシステム及び撮像方法
CN104424672A (zh) 行车记录装置及其记录方法
JP2021027408A (ja) ウェアラブルカメラシステムおよび映像記録方法
JP2018037963A (ja) ウェアラブルカメラシステム及び録画制御方法
JP6115873B2 (ja) ウェアラブルカメラシステムおよび映像データ同期再生方法
CN110166732A (zh) 一种执法记录仪
CN106454210B (zh) 一种行车记录图像处理方法及系统
WO2016132679A1 (ja) ウェアラブルカメラシステム及び映像データ転送方法
JP6793516B2 (ja) 車両動画送信システムおよび車両動画送信方法
JP5861075B1 (ja) ウェアラブルカメラ
JP2018037965A (ja) ウェアラブルカメラシステム及び通信制御方法
JP7420375B2 (ja) ユーザ認証システムおよびユーザ認証方法

Legal Events

Date Code Title Description
121 Ep: the epo has been informed by wipo that ep was designated in this application

Ref document number: 20856479

Country of ref document: EP

Kind code of ref document: A1

NENP Non-entry into the national phase

Ref country code: DE

122 Ep: pct application non-entry in european phase

Ref document number: 20856479

Country of ref document: EP

Kind code of ref document: A1