WO2017026154A1 - 情報処理装置、情報処理方法及びプログラム - Google Patents

情報処理装置、情報処理方法及びプログラム Download PDF

Info

Publication number
WO2017026154A1
WO2017026154A1 PCT/JP2016/064637 JP2016064637W WO2017026154A1 WO 2017026154 A1 WO2017026154 A1 WO 2017026154A1 JP 2016064637 W JP2016064637 W JP 2016064637W WO 2017026154 A1 WO2017026154 A1 WO 2017026154A1
Authority
WO
WIPO (PCT)
Prior art keywords
radio wave
captured image
search
information processing
information
Prior art date
Application number
PCT/JP2016/064637
Other languages
English (en)
French (fr)
Inventor
井原　圭吾
敦 塩野崎
敦 宮島
Original Assignee
ソニー株式会社
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by ソニー株式会社 filed Critical ソニー株式会社
Priority to CN201680045581.8A priority Critical patent/CN107851129B/zh
Priority to JP2017534115A priority patent/JP6724919B2/ja
Priority to US15/738,899 priority patent/US10719543B2/en
Publication of WO2017026154A1 publication Critical patent/WO2017026154A1/ja

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/40—Information retrieval; Database structures therefor; File system structures therefor of multimedia data, e.g. slideshows comprising image and additional audio data
    • G06F16/43—Querying
    • G06F16/432—Query formulation
    • G06F16/434—Query formulation using image data, e.g. images, photos, pictures taken by a user
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00—Television systems
    • H04N7/18—Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast
    • H04N7/181—Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast for receiving images from a plurality of remote sources
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/40—Information retrieval; Database structures therefor; File system structures therefor of multimedia data, e.g. slideshows comprising image and additional audio data
    • G06F16/48—Retrieval characterised by using metadata, e.g. metadata not derived from the content or metadata generated manually
    • G06F16/489—Retrieval characterised by using metadata, e.g. metadata not derived from the content or metadata generated manually using time information
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/70—Information retrieval; Database structures therefor; File system structures therefor of video data
    • G06F16/78—Retrieval characterised by using metadata, e.g. metadata not derived from the content or metadata generated manually
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/70—Information retrieval; Database structures therefor; File system structures therefor of video data
    • G06F16/78—Retrieval characterised by using metadata, e.g. metadata not derived from the content or metadata generated manually
    • G06F16/783—Retrieval characterised by using metadata, e.g. metadata not derived from the content or metadata generated manually using metadata automatically derived from the content
    • G06F16/7837—Retrieval characterised by using metadata, e.g. metadata not derived from the content or metadata generated manually using metadata automatically derived from the content using objects detected or recognised in the video content
    • G06F16/784—Retrieval characterised by using metadata, e.g. metadata not derived from the content or metadata generated manually using metadata automatically derived from the content using objects detected or recognised in the video content the detected or recognised objects being people
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00—Television systems
    • H04N7/18—Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast

Definitions

  • the present disclosure relates to an information processing apparatus, an information processing method, and a program.
  • Patent Document 1 is effective because an electronic tag is issued in advance to a person (that is, a visitor) who may be photographed. For example, in a situation where an image of an arbitrary person (for example, a suspicious person) is searched from among a large number of recorded images captured by an imaging device such as a surveillance camera, the above-mentioned patent document 1 discloses. It is not possible to use the technology that is used.
  • an information processing apparatus and an information processing device that can easily retrieve a captured image in which a captured object once captured in the captured image is reflected again from a plurality of captured images. Propose methods and programs.
  • radio wave information relating to radio waves detected by the communication device which is transmitted from a communication device that is preliminarily associated with the captured image, and a captured image generated by an imaging device installed in a predetermined location, Each of which is recorded in association with a time stamp, and at least one of the detected intensity and number of the radio waves is used as a search condition, and among the plurality of captured images recorded in the storage unit
  • a search unit that searches for the captured image according to the search condition
  • a display control unit that performs display control for displaying the captured image searched by the search unit on a display screen
  • Each of the information is recorded in association with a time stamp, and at least one of the detected intensity and number of radio waves is used as a search condition, and the search condition is selected from a plurality of recorded images.
  • the display control for displaying the searched captured image on a display screen, and the radio wave is located within the field of view of the imaging device.
  • the communication device detected by the communication device transmitted from the captured image generated by the imaging device installed at a predetermined location and the communication device previously associated with the imaging device is detected in the computer.
  • Each of the radio wave information related to radio waves is recorded in association with a time stamp, and at least one of the detected intensity and number of radio waves is used as a search condition.
  • a search function for searching for the captured image according to the search condition, and a display control function for performing display control for displaying the captured image searched by the search function on a display screen, the radio wave is Provided is a program including radio waves transmitted from an electronic device or communication device possessed or built in an object to be imaged positioned within the field of view of the imaging device. .
  • Each of the captured image and radio wave information related to the radio wave detected by the communication device transmitted from the communication device previously associated with the imaging device is recorded in association with the time stamp, and the detected radio wave intensity.
  • at least one of the number of images as a search condition a captured image is retrieved from a plurality of recorded captured images according to the search condition, and display control for displaying the retrieved captured image on a display screen Is done.
  • FIG. 4 is an explanatory diagram for describing an information processing apparatus according to a first embodiment of the present disclosure.
  • FIG. It is explanatory drawing for demonstrating the information processing apparatus which concerns on the embodiment. It is the block diagram which showed an example of the structure of the information processing apparatus which concerns on the embodiment. It is explanatory drawing which showed an example of the data structure of the data stored in the memory
  • FIG. 3 is a block diagram illustrating an example of a hardware configuration of an information processing apparatus according to an embodiment of the present disclosure.
  • the information processing apparatus 10 stores a picked-up image picked up by the monitoring camera 1 provided at an arbitrary point and a radio wave monitor associated with the monitoring camera. It is a device that stores radio wave information transmitted from the node 3.
  • the radio wave information transmitted from the radio wave monitor node 3 includes various radio communications such as wireless LAN communications such as Wi-Fi and Bluetooth (registered trademark) observed by the radio wave monitor node 3.
  • wireless LAN communications such as Wi-Fi and Bluetooth (registered trademark) observed by the radio wave monitor node 3.
  • the information processing apparatus 10 reproduces an arbitrary stored captured image in accordance with a user operation, and also captures a captured image that matches a search condition from among the plurality of stored captured images. It has a function to search.
  • the information processing apparatus 10 having the functions as described above includes surveillance cameras 1A installed at arbitrary points (for example, point A, point B, and point C in FIG. 1). Image data relating to each captured image generated by 1B and 1C is acquired, and the acquired image data is stored in various storage devices provided in the information processing apparatus 10 or outside the information processing apparatus 10. .
  • the information processing apparatus 10 acquires radio wave information related to radio waves observed at the radio wave monitoring nodes 3A, 3B, and 3C installed at the points A, B, and C, and uses the acquired radio wave information as the information processing apparatus. 10 or in various storage devices provided outside the information processing apparatus 10.
  • the number of the monitoring cameras 1 and the radio wave monitoring nodes 3 that can communicate with the information processing apparatus 10 is three each, the communication with the information processing apparatus 10 is possible. Needless to say, the number of monitoring cameras 1 and radio wave monitoring nodes 3 may be one or two, or four or more.
  • the monitoring camera 1 provided at an arbitrary point is an example of an imaging device that images various imaging objects located within the imaging field of view. It is a device that can generate still images and moving images related to the body.
  • the surveillance camera 1 is not particularly limited, and various imaging devices can be used as appropriate.
  • the radio wave monitor node 3 provided at an arbitrary point is a device that observes various radio waves existing around the radio wave monitor node 3 and generates radio wave information related to the observed radio waves.
  • the radio wave monitor node 3 is not particularly limited, and various radio wave observation apparatuses that can acquire unique identification information such as a wireless LAN monitor node can be appropriately used.
  • the monitoring camera 1 and the radio wave monitoring node 3 provided at a certain point are associated with each other in advance, and which radio wave monitoring node 3 is associated with the monitoring camera 1 existing at which point. Is stored in the information processing apparatus 10 in advance. In addition, it is assumed that the monitoring camera 1 and the radio wave monitoring node 3 provided at a certain point are set in advance so that the times are synchronized with each other.
  • the surveillance camera 1 captures an imaged object located in the imaging field of view and generates a captured image composed of a still image or a moving image
  • the image data of the captured image (captured image data) and the generation time of the captured image data Is output to the information processing apparatus 10 as needed.
  • the radio wave monitoring node 3 detects a radio wave existing around the radio wave monitoring node 3
  • the radio wave monitoring node 3 observes various feature quantities characterizing the radio wave (for example, identification information unique to the radio wave, electric field strength, etc.).
  • the radio wave information data (radio wave information data) and a time stamp indicating the generation time of the radio wave information are output to the information processing apparatus 10 as needed.
  • an object for example, a person who possesses the above-mentioned device is on board
  • a device such as a mobile phone, a smartphone, a portable game machine, a tablet terminal, a wearable terminal, or a car navigation system.
  • moving means such as cars on which the above-described devices are mounted. Therefore, the radio wave observed by the radio wave monitor node 3 has or incorporates an electronic device or a communication device having the wireless communication function as described above, and is received from an object to be imaged captured by the monitoring camera 1. It can be said that there is an extremely high possibility that radio waves are included.
  • the information processing apparatus 10 records the captured image data transmitted from the monitoring camera 1 in each location in association with the time stamp transmitted together with the radio wave transmitted from the radio monitoring node 3 in each location.
  • the information data is recorded in association with the time stamp transmitted together.
  • the monitoring camera 1 and the radio wave monitoring node 3 are associated with each other in advance and are set so as to be synchronized with each other.
  • captured image data captured by the monitoring camera 1 and radio wave information generated by the radio wave monitor node 3 can be associated with each other.
  • FIG. 3 is a block diagram illustrating an example of the configuration of the information processing apparatus according to the present embodiment.
  • 4 to 7 are explanatory diagrams illustrating an example of a data configuration of data stored in the storage unit of the information processing apparatus according to the present embodiment.
  • the information processing apparatus 10 includes a data acquisition unit 101, a data recording unit 103, a storage unit 105, a captured image reproduction unit 107, an image search unit 109, a display And a control unit 111.
  • the information processing apparatus 10 has a storage device that stores captured image data and radio wave information data
  • a storage device for storing radio wave information data may be provided outside the information processing apparatus 10.
  • the data acquisition unit 101, the data recording unit 103, the storage unit 105, the captured image reproduction unit 107, the image search unit 109, and the display control unit 111, which will be described in detail below, are various types such as the Internet.
  • the functions of the information processing apparatus 10 according to the present embodiment may be realized by being distributed to a plurality of information processing apparatuses existing on the network and by the plurality of information processing apparatuses cooperating with each other. .
  • the data acquisition unit 101 is realized by, for example, a CPU (Central Processing Unit), a ROM (Read Only Memory), a RAM (Random Access Memory), a communication device, and the like.
  • the data acquisition unit 101 acquires captured image data and time stamps transmitted from the respective monitoring cameras 1, and acquires radio wave information data and time stamps transmitted from the respective radio wave monitoring nodes 3. That is, the data acquisition unit 101 functions as a communication unit that realizes communication between the monitoring camera 1 and the information processing apparatus 10 and communication between the radio wave monitoring node 3 and the information processing apparatus 10.
  • the acquired captured image data and time stamp, radio wave information data and time stamp are transmitted to the data recording unit 103 described later.
  • the data recording unit 103 is realized by, for example, a CPU, a ROM, a RAM, and the like.
  • the data recording unit 103 associates the captured image data and the time stamp transmitted from the data acquisition unit 101 with each other, and stores them in a predetermined location in the storage unit 105 described later. Further, the data recording unit 103 associates the radio wave information data and the time stamp transmitted from the data acquisition unit 101 with each other, and stores them in a predetermined location of the storage unit 105 described later. Thereby, captured image data output from each monitoring camera 1 and radio wave information data output from each radio wave monitor node 3 as needed are accumulated in the storage unit 105 to be described later.
  • the data recording unit 103 further associates the ID information unique to the monitoring camera 1 and the radio wave monitoring node 3 with the data.
  • the storage unit 105 is realized by, for example, a RAM or a storage device included in the information processing apparatus 10 according to the present embodiment.
  • the information processing apparatus 10 stores various parameters, progress of processing, or various databases and programs that need to be saved when performing some processing as appropriate. To be recorded.
  • the storage unit 105 includes a database that indicates a correspondence relationship between one or a plurality of monitoring cameras 1 from which the information processing apparatus 10 acquires captured image data and the radio wave monitoring node 3 associated with the monitoring camera 1. Is recorded.
  • An example of the data configuration of a database indicating such correspondence (hereinafter also simply referred to as “correspondence database (DB)”) is schematically shown in FIG.
  • the association DB includes ID information unique to the monitoring camera 1 and ID information unique to the radio wave monitoring node 3 associated with the monitoring camera 1. Attached and recorded.
  • Each processing unit of the information processing apparatus 10 (particularly, the image search unit 109 described later) refers to the association DB to determine which monitoring camera 1 and which radio wave monitoring node 3 are associated with each other. It can be easily grasped.
  • ID information recorded in the association DB as described above and the method of describing the ID information are not particularly limited, and any known one can be used as appropriate.
  • the captured image data generated by each monitoring camera 1 and the radio wave information data generated by each radio wave monitor node 3 by the data recording unit 103 are associated with time stamps, respectively. Are recorded.
  • An example of the data structure of a database related to captured image data (hereinafter also simply referred to as “captured image database (DB)”) is schematically shown in FIG. 5, and a database related to radio wave information data (hereinafter simply referred to as “radio wave information database”).
  • the captured image DB As schematically shown in FIG. 5, in the captured image DB, captured image data captured by a certain monitoring camera 1 (or information indicating a storage location of the captured image data) is generated. Recorded in association with a time stamp indicating the recorded date and time. Moreover, it is preferable that ID information of the monitoring camera that has generated the captured image data is further associated with the captured image DB. Further, as schematically shown in FIG. 6, the radio wave information DB includes radio wave information data (or information indicating a storage location of the radio wave information data) generated by a certain radio wave monitor node 3. It is recorded in association with a time stamp indicating the date and time when the data was generated. Further, it is preferable that the radio wave information DB is further associated with the ID information of the radio wave monitor node that generated the radio wave information data.
  • the information recorded in the captured image DB shown in FIG. 5 or the radio wave information DB shown in FIG. 6 is not limited to that shown in FIG. 5 or FIG. It is possible to add arbitrary information regarding to these DBs. Further, the description method of the time stamp shown in FIG. 5 and FIG. 6 is not particularly limited, and the time stamp may be expressed by using an arbitrary description method as appropriate.
  • the radio wave information data stored in the storage unit 105 has an arbitrary data configuration as long as the feature quantity characterizing the observed radio wave is described, such as ID information unique to the observed radio wave or electric field strength. You may have.
  • An example of the data configuration of such radio wave information data is schematically shown in FIG.
  • the radio wave information generated by the radio wave monitor node 3 and stored in the storage unit 105 includes identification information such as a MAC address which is information unique to each observed radio wave, as schematically shown in FIG. And the electric field strength of radio waves.
  • identification information such as a MAC address which is information unique to each observed radio wave, as schematically shown in FIG.
  • the electric field strength of radio waves In addition to these feature amounts, any feature amount that characterizes the observed radio wave may be described.
  • the radio wave information records the above information for each observed radio wave.
  • the storage unit 105 in which such various types of information are stored includes a data acquisition unit 101, a data recording unit 103, a captured image reproduction unit 107, an image search unit 109, a display control unit 111, and the like. Can be performed freely.
  • the captured image reproduction unit 107 is realized by, for example, a CPU, a ROM, a RAM, and the like.
  • the captured image reproduction unit 107 performs processing for reproducing a captured image specified by the user from among a plurality of captured images recorded in the storage unit 105 in response to a user operation performed on the information processing apparatus 10.
  • Selection of the captured image to be reproduced by the user is performed by the captured image reproduction unit 107 performing appropriate display on the display screen of the information processing apparatus 10 in cooperation with the display control unit 111 described later. Further, the captured image reproduced by the captured image reproduction unit 107 is displayed at any time in an appropriate area on the display screen under the control of the display control unit 111 described later. Thereby, the user can browse a desired captured image on the display screen of the information processing apparatus 10.
  • the image search unit 109 is realized by, for example, a CPU, a ROM, a RAM, and the like.
  • the image search unit 109 reads various data such as radio wave information recorded in the storage unit 105, sets the captured image specified by the user operation as the captured image of the search source, and includes the captured image in the specified search source. With respect to the captured image object, the other captured images in which the imaged object is reflected are searched from a plurality of captured images recorded in the storage unit 105. At this time, the image search unit 109 does not search for an object to be imaged in the captured image of the search source by so-called image analysis processing, but uses radio wave information generated together with the captured image of the search source. The desired captured image is searched using.
  • the imaging target being focused on is an electronic device or a communication device that transmits various radio waves such as radio waves used for wireless communication. It is highly likely that they are possessed or built in. Therefore, the image search unit 109 according to the present embodiment pays attention to the radio wave information generated together with the captured image of the search source, and generates a search condition using information included in the radio wave information. In addition, the image search unit 109 according to the present embodiment extracts radio wave information that matches a search condition regarding radio waves, and specifies a captured image corresponding to the extracted radio wave information.
  • the information processing apparatus 10 By performing the image search processing as described above, the information processing apparatus 10 according to the present embodiment captures a plurality of captured images in which a captured object that is once reflected in the captured image is reflected again. It is possible to easily search from the image.
  • the image search process performed by the image search unit 109 will be described in detail later.
  • the display control unit 111 is realized by, for example, a CPU, a ROM, a RAM, an output device, a communication device, and the like.
  • the display control unit 111 outputs the captured image reproduced by the captured image reproduction unit 107 or the captured image retrieved by the image search unit 109 to an output device such as a display included in the information processing apparatus 10 or the outside of the information processing apparatus 10. Display control when displaying on an output device or the like provided in Further, the display control unit 111 displays control when displaying a display screen used when the user specifies a captured image to be browsed or a display screen used when searching for a captured image on a predetermined output device or the like. Will also be implemented. Thereby, the user of the information processing apparatus 10 can browse a desired captured image on the spot.
  • each component described above may be configured using a general-purpose member or circuit, or may be configured by hardware specialized for the function of each component.
  • the CPU or the like may perform all functions of each component. Therefore, it is possible to appropriately change the configuration to be used according to the technical level at the time of carrying out the present embodiment.
  • a computer program for realizing each function of the information processing apparatus according to the present embodiment as described above can be produced and installed in a personal computer or the like.
  • a computer-readable recording medium storing such a computer program can be provided.
  • the recording medium is, for example, a magnetic disk, an optical disk, a magneto-optical disk, a flash memory, or the like.
  • the above computer program may be distributed via a network, for example, without using a recording medium.
  • FIG. 8 is an explanatory diagram for explaining an image search process performed by the information processing apparatus according to the present embodiment.
  • 9 to 15 are explanatory diagrams schematically showing an example of a display screen of the information processing apparatus according to the present embodiment.
  • the image search unit 109 of the information processing apparatus 10 searches for a desired captured image using radio wave information instead of so-called image analysis processing.
  • the image search unit 109 identifies a time stamp associated with a captured image that is a search target image by a user operation with reference to a captured image DB recorded in the storage unit 105 or the like. To do. As described above, the monitoring camera 1 that generates a captured image and the radio wave monitor node 3 that generates radio wave information are set so that their times are synchronized with each other. Therefore, as shown in the upper part of FIG. 8, the image search unit 109 searches the radio wave information DB recorded in the storage unit 105 or the like using the time stamp of the identified captured image, and the time stamp of the same time It is possible to specify radio wave information having
  • the image search unit 109 uses the radio wave pattern indicated by the specified radio wave information (which schematically shows the magnitude of the electric field strength of each radio wave included in the radio wave information), and the radio wave corresponding to the search target image. Search for radio wave patterns that exhibit similar behavior to the pattern.
  • the radio wave pattern search is performed by referring to the radio wave information DB recorded in the storage unit 105 or the like and performing pattern matching between the radio wave pattern indicated by the recorded radio wave information and the radio wave pattern corresponding to the search target image. This can be done.
  • the degree of similarity used for pattern matching is not particularly limited, and a known degree of similarity such as a cross-correlation coefficient can be used.
  • the image search unit 109 responds by using radio wave information including the searched radio wave pattern.
  • the ID of the monitoring camera 1 and the time stamp are specified. That is, the image search unit 109 refers to the radio wave information DB recorded in the storage unit 105 or the like, and identifies the ID of the radio wave monitor node 3 that generated the focused radio wave information and the time stamp. Thereafter, the image search unit 109 identifies the ID of the monitoring camera 1 associated with the identified radio wave monitor node 3 with reference to the association DB recorded in the storage unit 105 or the like.
  • the image search unit 109 searches the captured image DB recorded in the storage unit 105 or the like based on the obtained ID of the monitoring camera 1 and the time stamp, thereby imaging corresponding to the searched radio wave information. Images can be extracted.
  • the electronic device or communication device possessed or built in the object to be imaged does not necessarily transmit a radio signal at a constant interval, so there is a time difference between the generated radio wave information and the captured image. Can also occur. Therefore, in addition to the captured image corresponding to the identified time stamp, the image search unit 109 selects captured images captured in a predetermined period (for example, about several seconds to several tens of seconds before and after) the identified captured image. It is preferable to do. As a result, the desired object to be imaged is reflected even when there is a time difference between the generated radio wave information and the captured image due to the fact that radio signals are not transmitted at regular intervals. It is possible to extract the captured image.
  • a predetermined period for example, about several seconds to several tens of seconds before and after
  • the image search unit 109 may present the captured image of the search result to the user in the order of the time stamps associated with the captured image, or according to the degree of similarity with the radio wave pattern used for the search,
  • the display order of search results may be controlled.
  • the image search unit 109 may apply a known image analysis process such as a still image analysis process or a moving image analysis process to the search result based on the radio wave information as described above. At this time, the image search unit 109 highlights the corresponding captured image when the captured image of the search result does not include the motion of the captured object or when a person is not captured as the captured object. Search result presentation processing that alerts the user or preferentially displays search results that should be prioritized may be performed, such as reducing the priority of the display order.
  • a known image analysis process such as a still image analysis process or a moving image analysis process
  • the image search unit 109 displays the captured image specified as described above on the display screen of the information processing apparatus 10 in cooperation with the display control unit 111. Thereby, the user of the information processing apparatus 10 can select a captured image corresponding to the obtained search result via the user interface displayed on the display screen, and can confirm the content.
  • FIG. 9 the user interface of the captured image search process performed in the information processing apparatus 10 according to the present embodiment will be specifically described with reference to FIGS. 9 to 15.
  • the captured image reproduction unit 107 and the display control unit 111 cooperate with each other to perform captured image reproduction processing, as schematically illustrated in FIG.
  • a display screen 500 is displayed on an output device such as a display.
  • the display control unit 111 displays a captured image display area 501 in which a captured image specified by a user operation is displayed, and an imaging specified by a user operation.
  • a reproduction state designation object 503 for designating the reproduction state of the image is provided. The user can reproduce a desired captured image in the captured image display area 501 by operating a playback state designation object 503 by operating a pointing object (not shown).
  • the display screen 500 is provided with a search processing start object 505 and a search condition setting area 507 for causing the display control unit 111 to function as a captured image search mode.
  • the search condition setting area 507 includes radio wave information corresponding to the captured image displayed in the captured image display area 501 when the search process start object 505 is operated. It is displayed in the setting area 507.
  • the search condition setting area 507 displays an object for designating at least one of the intensity and number of radio waves, in addition to the radio wave information corresponding to the captured image displayed in the captured image display area 501.
  • a search condition for a captured image search process is set.
  • the display control unit 111 displays the display screen 500 as shown in FIG. 10 based on the acquired information related to the search result.
  • a search result display area 509 is provided on the display screen 500, and information relating to one or more searched captured images (for example, thumbnail images of the searched captured images) is displayed in the search result display area 509. Is displayed.
  • the captured image selected by the pointing object 513 is displayed in the search result detail display area 511 provided on the display screen 500.
  • FIG. 10 illustrates a case where the search result by the image search unit 109 is displayed in a list display using thumbnail images, but the display method of the search result is limited to the example illustrated in FIG. It is not something.
  • the captured image of the search result may be displayed in a timeline using a time stamp associated with the captured image of the search result.
  • the display control unit 111 may display a radio wave detection point instruction object 515 representing a temporal position where the radio wave is detected on the thumbnail image displayed as the search result.
  • a radio wave detection point instruction object 515 representing a temporal position where the radio wave is detected on the thumbnail image displayed as the search result.
  • the display control unit 111 selects a reproduction position indicating object that represents a reproduction position for a captured image that is selected by a user operation and is reproduced in the search result detail display area 511. 517 may be displayed together. Thus, the user can easily grasp which position on the time axis the captured image currently being viewed corresponds to.
  • the image search unit 109 cooperates with the display control unit 111 and, as shown in FIG. 12, the radio wave pattern that is an object indicating the radio wave intensity pattern (electric field strength pattern) in the search condition setting area 507.
  • a display object 519 is displayed.
  • the radio wave information corresponding to the search target image includes information on seven radio waves A to G, and the electric fields B, D, and F are relatively strong. The case of having strength is shown.
  • the image search unit 109 uses, for example, a number specification object 521 that specifies the number of radio waves used for the search as a search condition setting area. 507 may be displayed.
  • the image search unit 109 determines whether the radio wave patterns corresponding to the search target image match the specified number or more. As a search condition, the corresponding radio wave information is searched from a plurality of radio wave information.
  • the image search unit 109 selects from a plurality of radio wave information based on a radio wave pattern in which an electric field strength equal to or greater than a predetermined threshold is observed. Search for the corresponding radio wave information.
  • the image search unit 109 extracts a search result that has a similar radio wave pattern shape and the electric field strength of each radio wave is equal to or greater than a predetermined threshold.
  • the image search unit 109 may display the obtained search result by a timeline display as shown in FIG. 11 or a list display as shown in FIG. When displaying a search result by list display, it is preferable that the image search unit 109 displays thumbnail images corresponding to the search result in descending order of the number of matched radio wave patterns, for example.
  • a single person often owns a plurality of electronic devices or communication devices having a wireless communication function.
  • a captured image in which such a person is reflected is designated as a search target image, as shown schematically in FIG. 13, even if a single person is reflected, it has a strong electric field strength. Multiple radio waves may be observed.
  • the image search unit 109 may display the radio wave pattern display object 519 and the number designation object 521 as shown in FIG. 12 in the search condition setting area 507. It may be displayed.
  • the image search unit 109 displays the combination designation object 523 in combination with the radio wave pattern display object 519 in cooperation with the display control unit 111, and combines the radio waves used for the search.
  • a condition may be specified.
  • a button-like object for designating and / or is shown as the combination designation object 523, but the combination designation object 523 is not limited to that shown in FIG. It goes without saying that other objects can be used.
  • the image search unit 109 and the display control unit 111 may display a combination of radio waves having the strongest electric field strength as a default display format.
  • the image search unit 109 searches for radio wave information that matches with a degree of similarity equal to or greater than a predetermined threshold from a plurality of radio wave information based on radio wave patterns of radio waves for which a combination is designated. To do. At this time, it is preferable that the image search unit 109 extracts, as search results, those in which the shapes of the combined radio wave patterns are similar and the electric field strength of each radio wave is equal to or greater than a predetermined threshold.
  • the image search unit 109 may display the obtained search result by the timeline display as shown in FIG. 11 or the list display as shown in FIG. May be displayed.
  • the relative strength of the radio waves can be used as a search condition. That is, the smaller the separation distance between the radio wave monitoring node 3 and the electronic device or communication device possessed by a person, the stronger the electric field intensity detected by the radio wave monitoring node 3, and the larger the separation distance, The electric field strength detected by the monitor node 3 becomes weak. In this case, it is considered that the display size of the imaging target in the captured image increases as the separation distance decreases, and the display size of the imaging target in the captured image decreases as the separation distance increases.
  • a relative threshold value regarding the electric field strength (in other words, a relative distance threshold value with respect to the radio wave monitor node 3 and a relative display size threshold value of the imaging target in the captured image) is designated. By doing so, it becomes possible to select a desired radio wave from a plurality of radio waves observed.
  • the image search unit 109 may display the threshold specification object 525 for specifying the relative threshold as described above in the search condition setting area 507 in cooperation with the display control unit 111.
  • a specific example of the threshold designation object 525 is not particularly limited, and may be a slider-like object as shown in FIG. 14 or another object that exhibits the same effect.
  • the image search unit 109 When the threshold value specifying object 525 is located in the center of the selectable range of the threshold value specifying object 525, the image search unit 109 has an electric field strength comparable to the radio wave pattern corresponding to the search target image. Search for things.
  • the image search unit 109 displays the radio wave pattern corresponding to the search target image. The radio wave information may be searched by focusing on a stronger electric field strength.
  • the image search unit 109 detects the radio wave corresponding to the search target image. Focusing on the electric field strength weaker than the pattern, the radio wave information may be searched.
  • a threshold value specification object 525 for example, a plurality of captured images can be captured only when a search target that appears in the search target image exists near the radio wave monitoring node 3 or the monitoring camera 1. It is possible to easily extract from the image.
  • the image search unit 109 may display the obtained search result by a timeline display as shown in FIG. 11 or a list display as shown in FIG. 10. May be displayed.
  • the image search unit 109 cooperates with the display control unit 111 to display a radio wave pattern display object 519, a combination / threshold designation object 527, for the search condition setting area 507, for example, as shown in FIG. , May be displayed.
  • the combination / threshold designation object 527 is an object having both the function of the combination designation object 523 shown in FIG. 13 and the function of the threshold designation object 525 shown in FIG.
  • the image search unit 109 when the maximum intensity (the position corresponding to “0” in FIG. 15) is selected, the image search unit 109 does not depend on the designated radio wave intensity.
  • the search may be performed according to the presence or absence of radio waves to be transmitted.
  • the image search unit 109 when the lowest intensity (position corresponding to “ ⁇ 100” in FIG. 15) is selected in the combination / threshold designation object 527, the image search unit 109 does not use the designated radio wave for the search. In addition, a search may be performed. Further, when a position between the maximum intensity and the minimum intensity is selected in the combination / threshold designation object 527, the intensity threshold value of each radio wave may be considered in the same manner as the threshold designation object 525.
  • a combination / threshold designation object 527 for example, a plurality of captured images only when the search object reflected in the search target image exists in the vicinity of the radio wave monitor node 3 or the monitoring camera 1 can be obtained. It is possible to easily extract from the captured images.
  • the image search unit 109 may display the obtained search result by the timeline display as shown in FIG. 11 or the list display as shown in FIG. May be displayed.
  • the user interface of the captured image search process performed in the information processing apparatus 10 according to the present embodiment has been specifically described above with reference to FIGS. 9 to 15.
  • FIG. 16 is a flowchart illustrating an example of the flow of the information processing method according to the present embodiment.
  • the captured image and the radio wave information are transmitted to the information processing apparatus 10 according to the present embodiment from the monitoring camera 1 and the radio wave monitor node 3 that are associated with each other as needed.
  • the data acquisition unit 101 of the information processing apparatus 10 outputs the acquired data to the data recording unit 103.
  • the data recording unit 103 stores the acquired captured image data in the storage unit 105 in association with the time stamp, and stores the acquired radio wave information data in the storage unit 105 in association with the time stamp (step). S101).
  • the information processing apparatus 10 determines whether an image search operation has been performed by the user (step S103). If the image search operation has not been performed, the information processing apparatus 10 returns to step S103 and waits for the image search operation.
  • the image search unit 109 of the information processing apparatus 10 specifies radio wave information corresponding to the designated captured image using a time stamp (step S105).
  • the search condition is set based on the specified radio wave information and user operation (step S107).
  • the image search unit 109 extracts the radio wave information that matches the set search condition from the plurality of stored radio wave information (step S109).
  • the image search unit 109 specifies a captured image corresponding to the extracted radio wave information using a time stamp (step S111).
  • the display control unit 111 of the information processing apparatus 10 displays the specified captured image on the display screen (step S113).
  • the user can easily extract a captured image that matches the search condition set based on the specified captured image from the plurality of captured images.
  • FIG. 17 is a block diagram for describing a hardware configuration of the information processing apparatus 10 according to the embodiment of the present disclosure.
  • the information processing apparatus 10 mainly includes a CPU 901, a ROM 903, and a RAM 905.
  • the information processing apparatus 10 further includes a host bus 907, a bridge 909, an external bus 911, an interface 913, an input device 915, an output device 917, a storage device 919, a drive 921, and a connection port 923. And a communication device 925.
  • the CPU 901 functions as an arithmetic processing unit and a control unit, and controls all or a part of the operation in the information processing apparatus 10 according to various programs recorded in the ROM 903, the RAM 905, the storage device 919, or the removable recording medium 927.
  • the ROM 903 stores programs used by the CPU 901, calculation parameters, and the like.
  • the RAM 905 primarily stores programs used by the CPU 901, parameters that change as appropriate during execution of the programs, and the like. These are connected to each other by a host bus 907 constituted by an internal bus such as a CPU bus.
  • the host bus 907 is connected to an external bus 911 such as a PCI (Peripheral Component Interconnect / Interface) bus via a bridge 909.
  • PCI Peripheral Component Interconnect / Interface
  • the storage device 919 is a data storage device configured as an example of a storage unit of the information processing device 10.
  • the storage device 919 includes, for example, a magnetic storage device such as an HDD (Hard Disk Drive), a semiconductor storage device, an optical storage device, or a magneto-optical storage device.
  • the storage device 919 stores programs executed by the CPU 901, various data, various data acquired from the outside, and the like.
  • the drive 921 is a reader / writer for the recording medium, and is built in or externally attached to the information processing apparatus 10.
  • the drive 921 reads information recorded on a removable recording medium 927 such as a mounted magnetic disk, optical disk, magneto-optical disk, or semiconductor memory, and outputs the information to the RAM 905.
  • the drive 921 can also write a record to a removable recording medium 927 such as a magnetic disk, an optical disk, a magneto-optical disk, or a semiconductor memory that is mounted.
  • the removable recording medium 927 is, for example, a DVD medium, an HD-DVD medium, a Blu-ray (registered trademark) medium, or the like.
  • the removable recording medium 927 may be a CompactFlash (registered trademark) (CompactFlash: CF), a flash memory, an SD memory card (Secure Digital memory card), or the like. Further, the removable recording medium 927 may be, for example, an IC card (Integrated Circuit card) on which a non-contact IC chip is mounted, an electronic device, or the like.
  • CompactFlash registered trademark
  • SD memory card Secure Digital memory card
  • the connection port 923 is a port for directly connecting a device to the information processing apparatus 10.
  • Examples of the connection port 923 include a USB (Universal Serial Bus) port, an IEEE 1394 port, a SCSI (Small Computer System Interface) port, and the like.
  • As another example of the connection port 923 there are an RS-232C port, an optical audio terminal, an HDMI (registered trademark) (High-Definition Multimedia Interface) port, and the like.
  • the communication device 925 is a communication interface configured with, for example, a communication device for connecting to the communication network 931.
  • the communication device 925 is, for example, a communication card for wired or wireless LAN (Local Area Network), Bluetooth (registered trademark), or WUSB (Wireless USB).
  • the communication device 925 may be a router for optical communication, a router for ADSL (Asymmetric Digital Subscriber Line), or a modem for various communication.
  • the communication device 925 can transmit and receive signals and the like according to a predetermined protocol such as TCP / IP, for example, with the Internet or other communication devices.
  • the communication network 931 connected to the communication device 925 is configured by a wired or wireless network, and may be, for example, the Internet, a home LAN, infrared communication, radio wave communication, satellite communication, or the like. .
  • each component described above may be configured using a general-purpose member, or may be configured by hardware specialized for the function of each component. Therefore, it is possible to change the hardware configuration to be used as appropriate according to the technical level at the time of carrying out this embodiment.
  • the image search unit described above corresponds to the reading unit and the search unit in the following description.
  • a readout unit that reads out the radio wave information from a recording unit that records radio wave information about radio waves, a captured image, and a time at which the captured image was captured;
  • a search unit that searches for a captured image satisfying a search condition from the plurality of captured images recorded in the recording unit based on at least one of the number of radio waves included in the read radio wave information or the intensity of the radio wave;
  • An information processing apparatus comprising: (2) The search unit For the captured image that is an arbitrary search source, the radio wave information detected when the captured image of the search source is generated is specified based on the captured image and a time stamp associated with the radio wave information, Set the search condition from a combination of the intensity and number of radio waves included in the specified radio wave information, identify the radio wave information that matches the search condition,
  • the information processing apparatus according to (1), wherein the captured image corresponding to the corresponding time stamp is specified using
  • the search unit selects, in addition to the captured image specified based on the search condition, the captured image captured in a predetermined period before and after the identified captured image from the plurality of captured images.
  • the search unit changes a display order of search results according to the degree of similarity of the radio wave when there are a plurality of the captured images that match the search condition, and any one of (1) to (3)
  • a display control unit that performs display control for displaying the captured image searched by the search unit on a display screen;
  • the display control unit includes at least a captured image display area for displaying the captured image and a search condition setting area for designating the search condition on the display screen, and is displayed in the captured image display area.
  • a display object representing the intensity and number of the radio waves included in the radio wave information corresponding to the captured image designated by the user is selected as the search condition.
  • Display in the setting area The information processing apparatus according to any one of (1) to (4), wherein the search unit sets the search condition in response to a user operation performed by a user on the search condition setting area.
  • the display control unit A search result display area for displaying the captured image that matches the search condition as a search result on the display screen, and a search for displaying the captured image specified by the user in detail among the captured images that match the search condition.
  • a result detail display area The information processing apparatus according to (5), wherein captured images that match the search condition are displayed in a list or timeline on the search result display area. (7) The information processing apparatus according to (6), wherein the display control unit arranges at least thumbnail images of captured images that meet the search condition in the search result display area. (8) The display control unit designates, as the display object, an object indicating the intensity pattern of the radio wave included in the radio wave information corresponding to the captured image designated by the user, and the number of radio waves used for the search. Display a number-specified object, The information processing apparatus according to (6) or (7), wherein the search unit searches for the captured image that matches the radio wave information equal to or more than the number, using the number specified by the number specification object as the search condition. .
  • the display control unit displays, as the display object, an intensity designation object that designates the relative intensity of radio waves, or a separation distance designation object that designates a relative separation distance from the imaging target in the captured image
  • the search unit is obtained by weighting the strength of the radio wave included in the radio wave information corresponding to the captured image designated by the user by a weighting coefficient corresponding to the strength designation object or the separation distance designation object.
  • the information processing apparatus according to (6) or (7), wherein the captured image corresponding to the radio wave information having an intensity equal to or greater than a weighted intensity or less than a weighted intensity is retrieved.
  • the display control unit includes, as the display object, an object that indicates the intensity pattern of the radio wave included in the radio wave information corresponding to the captured image specified by the user, and a combination designation object that designates a combination of the radio waves.
  • Display a strength specification object that specifies the relative strength of the radio wave
  • the search unit is designated by a value obtained by weighting the intensity of the radio wave included in the radio wave information corresponding to the captured image designated by the user by a weighting coefficient corresponding to the intensity designation object, and the combination designation object.
  • the captured image corresponding to the radio wave information having an intensity that is greater than or equal to weighted intensity or less than or equal to weighted intensity, and in which a specified combination of radio waves is detected
  • the information processing apparatus according to (6) or (7).
  • a readout function for reading out the radio wave information from a recording unit that records radio wave information relating to radio waves, a captured image, and a time when the captured image was captured, respectively;
  • a search function for searching for a captured image satisfying a search condition from a plurality of the captured images recorded in the recording unit based on at least one of the number of radio waves included in the read radio wave information or the intensity of the radio waves;

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Multimedia (AREA)
  • Physics & Mathematics (AREA)
  • Library & Information Science (AREA)
  • Data Mining & Analysis (AREA)
  • Databases & Information Systems (AREA)
  • General Engineering & Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Signal Processing (AREA)
  • Mathematical Physics (AREA)
  • Information Retrieval, Db Structures And Fs Structures Therefor (AREA)
  • Closed-Circuit Television Systems (AREA)

Abstract

【課題】撮像画像中に一度写り込んでいる被撮像体が再度写り込んでいる撮像画像を、複数の撮像画像の中から簡便に検索すること。 【解決手段】本開示に係る情報処理装置は、電波に関する電波情報と、撮像画像と、前記撮像画像が撮像された時間と、をそれぞれ関連付けて記録する記録部から、前記電波情報を読み出す読み出し部と、読み出した前記電波情報に含まれる電波の個数、又は、電波の強度の少なくとも何れかに基づいて、前記記録部に記録された複数の前記撮像画像から検索条件を満たす撮像画像を検索する検索部と、を備える。

Description

情報処理装置、情報処理方法及びプログラム
　本開示は、情報処理装置、情報処理方法及びプログラムに関する。
　例えば娯楽施設における記念写真の撮影サービス等のように、施設の入場者が写っている記念写真を撮影して、入場者に提供するサービスがある。このようなサービスにおいて、多数の入場者と撮像された多数の記念写真との対応付けを容易なものとするために、入場者に予め電子タグを発行しておき、電子タグを利用して生成される写真との対応付けを行う技術が提案されている（例えば、以下の特許文献１を参照。）。
特開２００２－４１７０３号公報
　しかしながら、上記特許文献１に開示されている技術は、写真に写る可能性のある人物（すなわち、入場者）に対して予め電子タグを発行しているからこそ有効な技術である。例えば、監視カメラ等の撮像装置によって撮像された膨大な撮像画像の記録の中から、任意の人物（例えば、不審者など）が写っている画像を探し出すような状況では、上記特許文献１に開示されているような技術を用いることはできない。
　そのため、監視カメラ等の撮像装置によって生成された膨大な撮像画像の記録のうち、ある撮像画像中に一度写りこんでいる１又は複数の人物を検索ターゲットとし、再度同じ人物が写っている撮像画像を探し出すためには、膨大な労力が必要となる。
　上記のような撮像画像の検索を実施する際に、検索ターゲットとなる人物の画像を利用して、画像解析処理により、求める撮像画像を検索することが考えられる。しかしながら、画像解析処理を用いた場合であっても、利用する画像によっては解析率が低下してしまい、求める画像を的確に抽出することができないことがある。
　そのため、撮像画像中に一度写り込んでいる人物が再度写り込んでいる撮像画像を、複数の撮像画像の中から簡便に検索することが可能な技術が希求されている。
　そこで、本開示では、撮像画像中に一度写り込んでいる被撮像体が再度写り込んでいる撮像画像を、複数の撮像画像の中から簡便に検索することが可能な、情報処理装置、情報処理方法及びプログラムを提案する。
　本開示によれば、所定箇所に設置された撮像装置により生成された撮像画像、及び、前記撮像装置と予め対応付けられた通信機器から発信された、当該通信機器が検出した電波に関する電波情報、のそれぞれが、タイムスタンプと関連付けられて記録される記憶部と、検出された前記電波の強度及び個数の少なくとも何れかを検索条件とし、前記記憶部に記録されている複数の前記撮像画像の中から前記検索条件に応じて前記撮像画像を検索する検索部と、検索部により検索された前記撮像画像を表示画面に表示させるための表示制御を行う表示制御部と、を備え、前記電波は、前記撮像装置の視野内に位置した被撮像体が所持又は内蔵している電子機器もしくは通信機器から発信される電波を含む情報処理装置が提供される。
　また、本開示によれば、所定箇所に設置された撮像装置により生成された撮像画像、及び、前記撮像装置と予め対応付けられた通信機器から発信された、当該通信機器が検出した電波に関する電波情報、のそれぞれを、タイムスタンプと関連付けて記録することと、検出された前記電波の強度及び個数の少なくとも何れかを検索条件とし、記録されている複数の前記撮像画像の中から前記検索条件に応じて前記撮像画像を検索することと、検索された前記撮像画像を表示画面に表示させるための表示制御を行うことと、を含み、前記電波は、前記撮像装置の視野内に位置した被撮像体が所持又は内蔵している電子機器もしくは通信機器から発信される電波を含む情報処理方法が提供される。
　また、本開示によれば、コンピュータに、所定箇所に設置された撮像装置により生成された撮像画像、及び、前記撮像装置と予め対応付けられた通信機器から発信された、当該通信機器が検出した電波に関する電波情報、のそれぞれを、タイムスタンプと関連付けて記録する記憶機能と、検出された前記電波の強度及び個数の少なくとも何れかを検索条件とし、記録されている複数の前記撮像画像の中から前記検索条件に応じて前記撮像画像を検索する検索機能と、検索機能により検索された前記撮像画像を表示画面に表示させるための表示制御を行う表示制御機能と、を実現させ、前記電波は、前記撮像装置の視野内に位置した被撮像体が所持又は内蔵している電子機器もしくは通信機器から発信される電波を含むプログラムが提供される。
　本開示によれば、撮像装置の視野内に位置した被撮像体が所持又は内蔵している電子機器もしくは通信機器から発信される電波に着目し、所定箇所に設置された撮像装置により生成された撮像画像、及び、撮像装置と予め対応付けられた通信機器から発信された、当該通信機器が検出した電波に関する電波情報、のそれぞれが、タイムスタンプと関連付けられて記録され、検出された電波の強度及び個数の少なくとも何れかが検索条件とされて、記録されている複数の撮像画像の中から検索条件に応じて撮像画像が検索され、検索された撮像画像を表示画面に表示させるための表示制御が行われる。
　以上説明したように本開示によれば、撮像画像中に一度写り込んでいる被撮像体が再度写り込んでいる撮像画像を、複数の撮像画像の中から簡便に検索することが可能となる。
　なお、上記の効果は必ずしも限定的なものではなく、上記の効果とともに、又は、上記の効果に代えて、本明細書に示されたいずれかの効果、又は、本明細書から把握され得る他の効果が奏されてもよい。
本開示の第１の実施形態に係る情報処理装置を説明するための説明図である。 同実施形態に係る情報処理装置を説明するための説明図である。 同実施形態に係る情報処理装置の構成の一例を示したブロック図である。 同実施形態に係る情報処理装置の記憶部に格納されるデータのデータ構成の一例を示した説明図である。 同実施形態に係る情報処理装置の記憶部に格納されるデータのデータ構成の一例を示した説明図である。 同実施形態に係る情報処理装置の記憶部に格納されるデータのデータ構成の一例を示した説明図である。 同実施形態に係る情報処理装置の記憶部に格納されるデータのデータ構成の一例を示した説明図である。 同実施形態に係る情報処理装置で実施される画像検索処理を説明するための説明図である。 同実施形態に係る情報処理装置の表示画面の一例を模式的に示した説明図である。 同実施形態に係る情報処理装置の表示画面の一例を模式的に示した説明図である。 同実施形態に係る情報処理装置の表示画面の一例を模式的に示した説明図である。 同実施形態に係る情報処理装置の表示画面の一例を模式的に示した説明図である。 同実施形態に係る情報処理装置の表示画面の一例を模式的に示した説明図である。 同実施形態に係る情報処理装置の表示画面の一例を模式的に示した説明図である。 同実施形態に係る情報処理装置の表示画面の一例を模式的に示した説明図である。 同実施形態に係る情報処理方法の流れの一例を示した流れ図である。 本開示の実施形態に係る情報処理装置のハードウェア構成の一例を示したブロック図である。
　以下に添付図面を参照しながら、本開示の好適な実施の形態について詳細に説明する。なお、本明細書及び図面において、実質的に同一の機能構成を有する構成要素については、同一の符号を付することにより重複説明を省略する。
　なお、説明は以下の順序で行うものとする。
１．第１の実施形態
　１．１．情報処理装置について
　　１．１．１．情報処理装置と他の機器との関係について
　　１．１．２．情報処理装置の構成について
　　１．１．３．撮像画像の検索処理の詳細と表示画面の例について
　１．２．情報処理方法について
２．ハードウェア構成について
（第１の実施形態）
＜情報処理装置について＞
[情報処理装置の他の機器との関係について]
　まず、図１及び図２を参照しながら、本開示の第１の実施形態に係る情報処理装置について、他の機器との関係を中心に詳細に説明する。図１及び図２は、本実施形態に係る情報処理装置を説明するための説明図である。
　本実施形態に係る情報処理装置１０は、以下で詳述するように、任意の地点に設けられた監視カメラ１により撮像された撮像画像を格納するとともに、かかる監視カメラに対応付けられた電波モニタノード３から送信された電波情報を格納する装置である。ここで、電波モニタノード３から送信される電波情報は、電波モニタノード３が観測した、様々な電波（例えば、Ｗｉ－ＦｉやＢｌｕｅｔｏｏｔｈ（登録商標）等といった無線ＬＡＮ通信などの、各種の無線通信に用いられる電波）に関する各種の情報を含む。また、本実施形態に係る情報処理装置１０は、格納されている任意の撮像画像をユーザ操作に応じて再生するとともに、格納されている複数の撮像画像の中から、検索条件に合致する撮像画像を検索する機能を有している。
　以上のような機能を有する情報処理装置１０は、図１に模式的に示したように、任意の地点（例えば図１では、地点Ａ、地点Ｂ及び地点Ｃ）に設置された監視カメラ１Ａ，１Ｂ，１Ｃによって生成されたそれぞれの撮像画像に関する画像データを取得して、取得した画像データを、情報処理装置１０内、又は、情報処理装置１０の外部に設けられた各種の記憶装置に格納する。また、情報処理装置１０は、地点Ａ、地点Ｂ、地点Ｃに設置された電波モニタノード３Ａ，３Ｂ，３Ｃで観測された電波に関する電波情報を取得して、取得した電波情報を、情報処理装置１０内、又は、情報処理装置１０の外部に設けられた各種の記憶装置に格納する。
　なお、図１では、情報処理装置１０と相互に通信可能な監視カメラ１及び電波モニタノード３の個数が各３台である場合を図示しているが、情報処理装置１０と相互に通信可能な監視カメラ１及び電波モニタノード３の台数は、各１台又は各２台であってもよいし、各４台以上であってもよいことは言うまでもない。
　ここで、図２に模式的に示したように、任意の地点に設けられる監視カメラ１は、撮像視野内に位置している様々な被撮像体を撮像する撮像装置の一例であり、被撮像体に関する静止画像や動画像を生成することができる機器である。かかる監視カメラ１については、特に限定されるものではなく、各種の撮像装置を適宜利用することが可能である。また、任意の地点に設けられる電波モニタノード３は、電波モニタノード３の周囲に存在している各種の電波を観測して、観測した電波に関する電波情報を生成する装置である。この電波モニタノード３についても、特に限定されるものではなく、無線ＬＡＮモニタノードなどの固有な識別情報を取得できる各種の電波観測装置を適宜利用することが可能である。
　ここで、ある地点に設けられている監視カメラ１と電波モニタノード３とは、予め互いに対応付けられており、どの地点に存在している監視カメラ１がどの電波モニタノード３と対応しているかという情報は、情報処理装置１０に予め格納されているものとする。また、ある地点に設けられている監視カメラ１及び電波モニタノード３は、予め時間が互いに同期するように設定されているものとする。
　監視カメラ１は、撮像視野内に位置する被撮像体を撮像して、静止画又は動画からなる撮像画像を生成すると、かかる撮像画像の画像データ（撮像画像データ）と、撮像画像データの生成時間を表わすタイムスタンプと、を、情報処理装置１０へと随時出力する。また、電波モニタノード３は、電波モニタノード３の周囲に存在する電波を検出すると、かかる電波を特徴づける各種の特徴量（例えば、電波に固有な識別情報や、電界強度等）を観測して電波情報とし、かかる電波情報のデータ（電波情報データ）と、電波情報の生成時間を表わすタイムスタンプと、を、情報処理装置１０へと随時出力する。
　なお、監視カメラ１により生成される撮像画像データには、撮像画像データを生成した監視カメラ１に固有の識別情報（ＩＤ情報）が関連付けられていることが好ましく、電波モニタノード３により生成される電波情報データには、電波情報データを生成した電波モニタノード３に固有の識別情報（ＩＤ情報）が関連付けられていることが好ましい。これにより、これらのデータを取得した情報処理装置１０は、取得したデータが、どの地点に設けられた監視カメラ１や電波モニタノード３から送信されたものであるのかを、容易に把握することが可能となる。
　近年の情報通信技術の発達に伴い、人は、携帯電話、スマートフォン、携帯用ゲーム機、タブレット端末、ウェアラブル端末等といった、無線通信機能を有する電子機器や通信機器を所持していることが多い。また、携帯電話、スマートフォン、携帯用ゲーム機、タブレット端末、ウェアラブル端末、カーナビゲーションシステム等といった機器を内蔵／内包している物体（例えば、上記のような機器を所持している人が乗っている、又は、上記のような機器が搭載されている、車などの各種移動手段）も多く存在する。そのため、電波モニタノード３によって観測される電波の中には、上記のような無線通信機能を有する電子機器や通信機器を所持又は内蔵しており、監視カメラ１によって撮像された被撮像体からの電波も含まれている可能性が極めて高いと言える。
　本実施形態に係る情報処理装置１０は、各地の監視カメラ１から送信された撮像画像データを、あわせて送信されたタイムスタンプと関連付けて記録するとともに、各地の電波モニタノード３から送信された電波情報データを、あわせて送信されたタイムスタンプと関連付けて記録する。ここで、先述のように、監視カメラ１と電波モニタノード３とは、予め互いに対応付けられており、かつ、時間が同期するように設定されているため、情報処理装置１０は、タイムスタンプを仲介として、監視カメラ１により撮像された撮像画像データと、電波モニタノード３により生成された電波情報と、を互いに対応付けることが可能となる。
　以上、図１及び図２を参照しながら、本実施形態に係る情報処理装置１０と他の機器との関係について、詳細に説明した。
［情報処理装置の構成について］
　次に、図３～図７を参照しながら、上記のような機能を有する情報処理装置１０の構成の一例について、詳細に説明する。図３は、本実施形態に係る情報処理装置の構成の一例を示したブロック図である。図４～図７は、本実施形態に係る情報処理装置の記憶部に格納されるデータのデータ構成の一例を示した説明図である。
　本実施形態に係る情報処理装置１０は、図３に示したように、データ取得部１０１と、データ記録部１０３と、記憶部１０５と、撮像画像再生部１０７と、画像検索部１０９と、表示制御部１１１と、を主に備える。
　なお、以下では、本実施形態に係る情報処理装置１０が、撮像画像データや電波情報データを格納する記憶装置を内部に有している場合を例に挙げて説明を行うが、撮像画像データや電波情報データを格納する記憶装置が情報処理装置１０の外部に設けられていてもよいことは言うまでもない。また、以下で詳細に説明するデータ取得部１０１と、データ記録部１０３と、記憶部１０５と、撮像画像再生部１０７と、画像検索部１０９と、表示制御部１１１と、は、インターネット等の各種ネットワーク上に存在している複数の情報処理装置に分散して設けられており、複数の情報処理装置が互いに連携することで、本実施形態に係る情報処理装置１０の機能を実現してもよい。
　データ取得部１０１は、例えば、ＣＰＵ（Ｃｅｎｔｒａｌ　Ｐｒｏｃｅｓｓｉｎｇ　Ｕｎｉｔ）、ＲＯＭ（Ｒｅａｄ　Ｏｎｌｙ　Ｍｅｍｏｒｙ）、ＲＡＭ（Ｒａｎｄｏｍ　Ａｃｃｅｓｓ　Ｍｅｍｏｒｙ）、通信装置等により実現される。データ取得部１０１は、それぞれの監視カメラ１から送信された撮像画像データ及びタイムスタンプを取得するとともに、それぞれの電波モニタノード３から送信された電波情報データ及びタイムスタンプを取得する。すなわち、データ取得部１０１は、監視カメラ１と情報処理装置１０との間の通信、及び、電波モニタノード３と情報処理装置１０との間の通信をそれぞれ実現する通信部として機能する。取得した撮像画像データ及びタイムスタンプ、並びに、電波情報データ及びタイムスタンプは、後述するデータ記録部１０３に伝送される。
　データ記録部１０３は、例えば、ＣＰＵ、ＲＯＭ、ＲＡＭ等により実現される。データ記録部１０３は、データ取得部１０１から伝送された撮像画像データ及びタイムスタンプを互いに関連付けた上で、後述する記憶部１０５の所定の場所に格納する。また、データ記録部１０３は、データ取得部１０１から伝送された電波情報データ及びタイムスタンプを互いに関連付けた上で、後述する記憶部１０５の所定の場所に格納する。これにより、後述する記憶部１０５には、それぞれの監視カメラ１から随時出力された撮像画像データと、それぞれの電波モニタノード３から随時出力された電波情報データと、が、蓄積されていく。ここで、情報処理装置１０に対して複数の監視カメラ１及び電波モニタノード３から各種データが送信される場合には、どのデータがどの地点に設けられた機器から送信されたものかを容易に判別可能とするために、データ記録部１０３は、上記データに対して、監視カメラ１や電波モニタノード３に固有のＩＤ情報を更に関連付けることが好ましい。
　記憶部１０５は、例えば本実施形態に係る情報処理装置１０が備えるＲＡＭやストレージ装置等により実現される。記憶部１０５には、本実施形態に係る情報処理装置１０が、何らかの処理を行う際に保存する必要が生じた様々なパラメータや処理の途中経過等、又は、各種のデータベースやプログラム等が、適宜記録される。
　例えば、この記憶部１０５には、情報処理装置１０が撮像画像データを取得する１又は複数の監視カメラ１と、かかる監視カメラ１に対応付けられた電波モニタノード３と、の対応関係を示すデータベースが記録されている。かかる対応関係を示すデータベース（以下、単に「対応付けデータベース（ＤＢ）」ともいう。）のデータ構成の一例を、図４に模式的に示した。図４に模式的に示したように、対応付けＤＢには、監視カメラ１に固有のＩＤ情報と、この監視カメラ１に対応付けられている電波モニタノード３に固有のＩＤ情報と、が関係づけられて記録されている。情報処理装置１０の各処理部（特に、後述する画像検索部１０９）は、この対応付けＤＢを参照することで、どの監視カメラ１とどの電波モニタノード３とが対応付けられているのかを、容易に把握することができる。
　なお、上記のような対応付けＤＢに記録されるＩＤ情報の種類や、ＩＤ情報の記載方法については、特に限定されるものではなく、公知の任意のものを適宜利用することが可能である。
　また、かかる記憶部１０５には、データ記録部１０３によって、各監視カメラ１により生成された撮像画像データと、各電波モニタノード３により生成された電波情報データと、が、それぞれタイムスタンプと関連付けられて記録されている。撮像画像データに関するデータベース（以下、単に、「撮像画像データベース（ＤＢ）」ともいう。）のデータ構成の一例を図５に模式的に示し、電波情報データに関するデータベース（以下、単に、「電波情報データベース（ＤＢ）」ともいう。）のデータ構成の一例を図６に示した。
　図５に模式的に示したように、撮像画像ＤＢには、ある監視カメラ１により撮像された撮像画像データ（又は、かかる撮像画像データの保存場所を示す情報）が、かかる撮像画像データの生成された日時を示すタイムスタンプと互いに関連付けられて、記録されている。また、かかる撮像画像ＤＢには、撮像画像データを生成した監視カメラのＩＤ情報が更に関連付けられていることが好ましい。また、図６に模式的に示したように、電波情報ＤＢには、ある電波モニタノード３により生成された電波情報データ（又は、かかる電波情報データの保存場所を示す情報）が、かかる電波情報データの生成された日時を示すタイムスタンプと互いに関連付けられて、記録されている。また、かかる電波情報ＤＢには、電波情報データを生成した電波モニタノードのＩＤ情報が更に関連付けられていることが好ましい。
　なお、図５に示した撮像画像ＤＢや図６に示した電波情報ＤＢに記録される情報は、図５や図６に示したものに限定されるものではなく、撮像画像データや電波情報データに関する任意の情報を、これらのＤＢに追記することが可能である。また、図５や図６に示したタイムスタンプの記載方法についても特に限定されるものではなく、任意の記載方法を適宜利用してタイムスタンプを表記すればよい。
　なお、記憶部１０５に格納される電波情報データは、観測された電波に固有のＩＤ情報や電界強度等といった、観測された電波を特徴づける特徴量が記載されていれば、任意のデータ構成を有していてもよい。かかる電波情報データのデータ構成の一例を、図７に模式的に示した。電波モニタノード３によって生成され、記憶部１０５に格納される電波情報には、図７に模式的に示したように、観測される個々の電波に固有の情報であるＭＡＣアドレスのような識別情報や、電波の電界強度等が記載されている。また、これらの特徴量以外にも、観測された電波を特徴づける任意の特徴量が記載されていてもよい。また、ある電波モニタノード３において、一度に複数の電波が観測された場合には、電波情報には、観測されたそれぞれの電波について上記のような情報が記録されている。
　このような各種の情報が格納されている記憶部１０５は、データ取得部１０１、データ記録部１０３、撮像画像再生部１０７、画像検索部１０９、表示制御部１１１等が、データのリード／ライト処理を自由に行うことが可能である。
　撮像画像再生部１０７は、例えば、ＣＰＵ、ＲＯＭ、ＲＡＭ等により実現される。撮像画像再生部１０７は、情報処理装置１０に対して実施されたユーザ操作に応じて、記憶部１０５に記録されている複数の撮像画像の中から、ユーザによって指定された撮像画像を再生する処理を実施する。再生する撮像画像のユーザによる選択は、撮像画像再生部１０７が後述する表示制御部１１１と互いに連携して、情報処理装置１０の表示画面に適切な表示を行うことで実施される。また、撮像画像再生部１０７によって再生される撮像画像は、後述する表示制御部１１１による制御のもとで、表示画面における適切な領域に随時表示される。これにより、ユーザは、所望の撮像画像を情報処理装置１０の表示画面で閲覧することが可能となる。
　画像検索部１０９は、例えば、ＣＰＵ、ＲＯＭ、ＲＡＭ等により実現される。画像検索部１０９は、記憶部１０５に記録されている電波情報等の各種データを読み出すとともに、ユーザ操作により指定された撮像画像を検索元の撮像画像とし、指定された検索元の撮像画像中に写り込んでいる被撮像体について、かかる被撮像体が写り込んでいるその他の撮像画像を、記憶部１０５に記録されている複数の撮像画像の中から検索する。この際に、画像検索部１０９は、検索元の撮像画像に写り込んでいる被撮像体を、いわゆる画像解析処理により検索するのではなく、検索元の撮像画像とあわせて生成された電波情報を利用して、求める撮像画像を検索する。
　すなわち、先だって図２を参照しながら説明したように、昨今では、着目している被撮像体は、例えば無線通信に用いられる電波等といった各種の電波を発信している電子機器や通信機器を、所持又は内蔵している可能性が高い。そこで、本実施形態に係る画像検索部１０９は、検索元の撮像画像とあわせて生成された電波情報に着目し、かかる電波情報に含まれる情報を利用して検索条件を生成する。その上で、本実施形態に係る画像検索部１０９は、電波に関する検索条件に合致する電波情報を抽出して、抽出した電波情報に対応する撮像画像を特定する。
　以上のような画像検索処理が実施されることで、本実施形態に係る情報処理装置１０では、撮像画像中に一度写り込んでいる被撮像体が再度写り込んでいる撮像画像を、複数の撮像画像の中から簡便に検索することが可能となる。
　なお、画像検索部１０９で実施される画像検索処理については、以下で改めて詳細に説明する。
　表示制御部１１１は、例えば、ＣＰＵ、ＲＯＭ、ＲＡＭ、出力装置、通信装置等により実現される。表示制御部１１１は、撮像画像再生部１０７によって再生されている撮像画像や、画像検索部１０９によって検索された撮像画像を、情報処理装置１０が備えるディスプレイ等の出力装置や情報処理装置１０の外部に設けられた出力装置等に表示する際の表示制御を行う。また、表示制御部１１１は、ユーザが閲覧する撮像画像を指定する際に用いられる表示画面や、撮像画像を検索する際に用いられる表示画面を、所定の出力装置等に表示する際の表示制御についても実施する。これにより、情報処理装置１０のユーザは、所望の撮像画像をその場で閲覧することが可能となる。
　なお、表示制御部１１１により実施される表示画面の表示制御処理についても、以下で具体例を挙げながら詳細に説明する。
　以上、本実施形態に係る情報処理装置１０の機能の一例を示した。上記の各構成要素は、汎用的な部材や回路を用いて構成されていてもよいし、各構成要素の機能に特化したハードウェアにより構成されていてもよい。また、各構成要素の機能を、ＣＰＵ等が全て行ってもよい。従って、本実施形態を実施する時々の技術レベルに応じて、適宜、利用する構成を変更することが可能である。
　なお、上述のような本実施形態に係る情報処理装置の各機能を実現するためのコンピュータプログラムを作製し、パーソナルコンピュータ等に実装することが可能である。また、このようなコンピュータプログラムが格納された、コンピュータで読み取り可能な記録媒体も提供することができる。記録媒体は、例えば、磁気ディスク、光ディスク、光磁気ディスク、フラッシュメモリなどである。また、上記のコンピュータプログラムは、記録媒体を用いずに、例えばネットワークを介して配信してもよい。
［撮像画像の検索処理の詳細と表示画面の例について］
　次に、図８～図１５を参照しながら、本実施形態に係る情報処理装置１０で実施される撮像画像の検索処理及び表示画面の表示制御処理について、具体的に説明する。図８は、本実施形態に係る情報処理装置で実施される画像検索処理を説明するための説明図である。図９～図１５は、本実施形態に係る情報処理装置の表示画面の一例を模式的に示した説明図である。
○撮像画像検索処理の大まかな流れ
　まず、図８を参照しながら、本実施形態に係る情報処理装置１０の画像検索部１０９で実施される撮像画像検索処理の大まかな流れを説明する。
　本実施形態に係る画像検索部１０９は、ユーザ操作によって、ある撮像画像が検索対象画像として指定された場合、いわゆる画像解析処理ではなく、電波情報を利用して所望の撮像画像を検索する。
　より詳細には、画像検索部１０９は、ユーザ操作によって検索対象画像となった撮像画像について、記憶部１０５等に記録されている撮像画像ＤＢを参照して、対応付けられているタイムスタンプを特定する。先だって説明したように、撮像画像が生成される監視カメラ１と、電波情報が生成される電波モニタノード３とは、時刻が互いに同期するように設定されている。そのため、画像検索部１０９は、図８上段に示したように、特定した撮像画像のタイムスタンプを利用して、記憶部１０５等に記録されている電波情報ＤＢを検索し、同じ時刻のタイムスタンプを有する電波情報を特定することができる。
　その後、画像検索部１０９は、特定した電波情報が示す電波パターン（電波情報に含まれる各電波の電界強度の大きさを模式的に示したもの）を利用して、検索対象画像に対応する電波パターンと類似する挙動を示す電波パターンを検索する。かかる電波パターンの検索は、記憶部１０５等に記録されている電波情報ＤＢを参照して、記録されている電波情報が示す電波パターンと、検索対象画像に対応する電波パターンとのパターンマッチングを行うことで、実施することができる。ここで、パターンマッチングに利用される類似度合いについては、特に限定されるものではなく、例えば相互相関係数などのような公知の類似度合いを利用することが可能である。
　検索対象画像に対応する電波パターンと、所定の閾値以上の類似度合いで類似する電波パターンが検出された場合、画像検索部１０９は、検索された電波パターンを含む電波情報を利用して、対応する監視カメラ１のＩＤと、タイムスタンプとを特定する。すなわち、画像検索部１０９は、記憶部１０５等に記録されている電波情報ＤＢを参照して、着目している電波情報を生成した電波モニタノード３のＩＤと、タイムスタンプと、を特定する。その後、画像検索部１０９は、記憶部１０５等に記録されている対応付けＤＢを参照して、特定した電波モニタノード３に対応付けられている監視カメラ１のＩＤを特定する。
　続いて、画像検索部１０９は、得られた監視カメラ１のＩＤとタイムスタンプとに基づき、記憶部１０５等に記録されている撮像画像ＤＢを検索することで、検索した電波情報に対応する撮像画像を抽出することができる。
　ここで、被撮像体が所持又は内蔵している電子機器もしくは通信機器は、必ずしも一定間隔で電波信号を発信しているわけではないため、生成される電波情報と撮像画像との間で、時間差が生じることも考えうる。そのため、画像検索部１０９は、特定したタイムスタンプに対応する撮像画像に加えて、この特定した撮像画像の前後の所定期間（例えば、前後数秒～数十秒程度）に撮像された撮像画像を選択することが好ましい。これにより、生成される電波情報と撮像画像との間に、一定間隔で電波信号が発信されないことに起因する時間差が生じている場合であっても、所望の被撮像体が写り込んでいる他の撮像画像を抽出することが可能となる。
　また、所望の被撮像体が写り込んでいる他の撮像画像を検索した結果、複数の撮像画像が検出される場合も考えうる。この際、画像検索部１０９は、撮像画像に対応付けられているタイムスタンプ順に、検索結果の撮像画像をユーザに提示してもよいし、検索に利用した電波パターンとの類似度合いに応じて、検索結果の表示順序を制御してもよい。類似度合いに応じて検索結果の表示順序を制御する場合には、例えば、類似度合いの高いものから順に、検索結果を表示することが好ましい。これにより、ユーザの利便性を更に向上させることが可能となる。
　また、画像検索部１０９は、例えば静止画解析処理や動画解析処理等のような公知の画像解析処理を、上記のような電波情報に基づく検索結果に対して適用してもよい。この際に、画像検索部１０９は、検索結果の撮像画像に被撮像体の動きが含まれない場合や、被撮像体として人物が写り込んでいない場合などに、該当する撮像画像をハイライト表示したり、表示順序の優先度を下げたりするなど、ユーザに注意を喚起したり、より優先すべき検索結果を優先的に表示したりするような検索結果の提示処理を行っても良い。
　画像検索部１０９は、以上のようにして特定した撮像画像を、表示制御部１１１と互いに連携しながら情報処理装置１０の表示画面に表示させる。これにより、情報処理装置１０のユーザは、得られた検索結果に対応する撮像画像を表示画面に表示されたユーザインタフェースを介して選択し、内容を確認することが可能となる。
○ユーザインタフェースの具体例
　次に、図９～図１５を参照しながら、本実施形態に係る情報処理装置１０において実施される撮像画像検索処理のユーザインタフェースを具体的に説明する。
　本実施形態に係る情報処理装置１０において、撮像画像再生部１０７及び表示制御部１１１が互いに連携して、撮像画像の再生処理が実施されている際には、図９に模式的に示したような表示画面５００が、ディスプレイ等の出力装置に表示される。
　この表示画面５００には、表示制御部１１１によって、図９に模式的に示したように、ユーザ操作によって指定された撮像画像が表示される撮像画像表示領域５０１と、ユーザ操作によって指定された撮像画像の再生状態を指定する再生状態指定オブジェクト５０３と、が設けられる。ユーザは、未図示のポインティングオブジェクトを操作して、再生状態指定オブジェクト５０３を操作することで、撮像画像表示領域５０１で所望の撮像画像を再生させることができる。
　また、表示画面５００には、表示制御部１１１によって、撮像画像の検索モードを機能させるための検索処理開始オブジェクト５０５と、検索条件設定領域５０７と、が設けられている。ユーザ操作によって検索処理開始オブジェクト５０５が操作されると、検索条件設定領域５０７には、検索処理開始オブジェクト５０５操作時に撮像画像表示領域５０１に表示されている撮像画像に対応する電波情報が、検索条件設定領域５０７に表示される。また、この検索条件設定領域５０７には、撮像画像表示領域５０１に表示されている撮像画像に対応する電波情報に加えて、電波の強度及び個数の少なくとも何れかを指定するためのオブジェクトが表示される。この検索条件設定領域５０７に対するユーザ操作に応じて、撮像画像の検索処理のための検索条件が設定される。
　検索条件設定領域５０７に対するユーザ操作によって検索条件が設定され、画像検索部１０９によって上記のような検索処理が実施されると、画像検索部１０９から検索結果に関する情報が表示制御部１１１へと出力される。表示制御部１１１は、取得した検索結果に関する情報に基づいて、図１０に示したような表示画面５００を表示させる。
　この場合、表示画面５００には、検索結果表示領域５０９が設けられ、この検索結果表示領域５０９に、検索された１又は複数の撮像画像に関する情報（例えば、検索された撮像画像のサムネイル画像など）が表示される。検索結果表示領域５０９に表示されている検索結果の１つがユーザ操作によって選択されると、表示画面５００に設けられた検索結果詳細表示領域５１１に、ポインティングオブジェクト５１３によって選択された撮像画像が表示される。この際、先だって言及したように、検索に利用した電波パターンとの類似度合いに応じて、類似度合いの高いものから順に検索結果を表示することが好ましい。
　なお、図１０では、画像検索部１０９による検索結果が、サムネイル画像を利用した一覧表示により表示される場合を図示しているが、検索結果の表示方法は、図１０に示した例に限定されるものではない。例えば、図１１に模式的に示したように、検索結果の撮像画像に対応付けられているタイムスタンプを利用して、検索結果の撮像画像をタイムライン表示してもよい。
　この際に、表示制御部１１１は、検索結果として表示されるサムネイル画像に対して、電波の検出された時間的な位置を表わす電波検出ポイント指示オブジェクト５１５をあわせて表示させてもよい。この電波検出ポイント指示オブジェクト５１５を表示させることで、ユーザは、検索結果の撮像画像に対応する電波情報が時間軸上のどのタイミングで観測されたのかを、容易に把握することが可能となる。
　また、図１１に示したようなタイムライン表示において、表示制御部１１１は、ユーザ操作により選択され、検索結果詳細表示領域５１１にて再生されている撮像画像について、再生位置を表わす再生位置指示オブジェクト５１７をあわせて表示させてもよい。これにより、ユーザは、現在閲覧している撮像画像が時間軸上のどの位置に対応しているのかを、容易に把握することが可能となる。
　次に、図１２～図１５を参照しながら、検索条件設定領域５０７に表示される内容について、具体的に説明する。
　図１２に模式的に示したように、例えば複数の人物が写り込んでいる撮像画像が検索対象画像として指定された場合などには、それぞれの人物から個別の電波が発信されている可能性が高い。そのため、検索対象画像に対応する電波情報には、複数の強い電波が観測されている可能性がある。そこで、画像検索部１０９は、表示制御部１１１と互いに連携しながら、図１２に示したように、検索条件設定領域５０７に、電波の強度パターン（電界強度パターン）を示したオブジェクトである電波パターン表示オブジェクト５１９を表示させる。図１２に示した例では、検索対象画像に対応する電波情報には、電波Ａ～電波Ｇの７つの電波に関する情報が含まれており、電波Ｂ、電波Ｄ、電波Ｆが相対的に強い電界強度を有している場合が示されている。
　このように、電波情報に複数の強い電波に関する情報が含まれている場合には、画像検索部１０９は、例えば、検索に利用する前記電波の個数を指定する個数指定オブジェクト５２１を検索条件設定領域５０７に表示させてもよい。ユーザ操作によって個数指定オブジェクト５２１に検索に利用する電波の個数が入力されると、画像検索部１０９は、検索対象画像に対応する電波パターンのうち、指定された数以上の電波パターンがマッチングするかを検索条件として、複数の電波情報の中から該当する電波情報を検索していく。また、画像検索部１０９は、ユーザ操作によって個数指定オブジェクト５２１に個数の入力が行われなかった場合、所定の閾値以上の電界強度が観測された電波パターンに基づいて、複数の電波情報の中から該当する電波情報を検索する。
　なお、検索結果として抽出される電波情報の中には、電波パターンの形状（図１２の場合、７つの電波の電界強度を示すバーにより形作られる形状）は類似していても、電界強度が相対的に小さいものも含まれうる。そこで、画像検索部１０９は、電波パターンの形状が類似しており、かつ、各々の電波の電界強度が所定の閾値以上であるものを、検索結果として抽出することが好ましい。
　画像検索部１０９は、得られた検索結果を、図１１に示したようなタイムライン表示により表示させてもよいし、図１０に示したような一覧表示により表示させてもよい。一覧表示により検索結果を表示させる場合、画像検索部１０９は、例えば合致した電波パターンの個数が多いものから順に、検索結果に対応するサムネイル画像を表示させることが好ましい。
　近年、一人の人物が、無線通信機能を有する複数の電子機器又は通信機器を所有している場合も多い。このような人物が写り込んだ撮像画像が検索対象画像として指定された場合、図１３に模式的に示したように、一人の人物が写り込んでいる場合であっても、強い電界強度を有する複数の電波が観測されることも考えうる。この際に、画像検索部１０９は、検索条件設定領域５０７に、図１２に示したような電波パターン表示オブジェクト５１９及び個数指定オブジェクト５２１を表示させてもよいが、以下で説明するようなオブジェクトを表示させてもよい。
　すなわち、図１３に示したように、画像検索部１０９は、表示制御部１１１と連携しながら、電波パターン表示オブジェクト５１９とあわせて、組み合わせ指定オブジェクト５２３を表示させて、検索に利用する電波の組み合わせ条件を指定させてもよい。図１３では、組み合わせ指定オブジェクト５２３として、ａｎｄ／ｏｒを指定するボタン状のオブジェクトが示されているが、組み合わせ指定オブジェクト５２３は図１３に示したものに限定されるものではなく、同様の効果を奏する他のオブジェクトを利用可能であることは言うまでもない。ここで、画像検索部１０９及び表示制御部１１１は、デフォルトの表示形式として、最も電界強度の強い電波の組み合わせを表示させるようにしてもよい。
　画像検索部１０９は、図１２に示した場合と同様に、組み合わせを指定された電波の電波パターンに基づき、複数の電波情報の中から、所定の閾値以上の類似度合いで合致する電波情報を検索する。この際、画像検索部１０９は、組み合わせの電波パターンの形状が類似しており、かつ、各々の電波の電界強度が所定の閾値以上であるものを、検索結果として抽出することが好ましい。
　図１３に示した場合でも同様に、画像検索部１０９は、得られた検索結果を、図１１に示したようなタイムライン表示により表示させてもよいし、図１０に示したような一覧表示により表示させてもよい。
　また、例えば図１４に示したように、複数の人物が写り込んでいるなどして、複数の電波が観測された場合に、電波の相対的な強度を検索条件とすることも可能である。すなわち、電波モニタノード３と、人物が所持している電子機器又は通信機器と、の間の離隔距離が小さいほど、電波モニタノード３が検出する電界強度は強くなり、離隔距離が大きいほど、電波モニタノード３が検出する電界強度は弱くなる。この場合に、離隔距離が小さいほど撮像画像における被撮像体の表示サイズは大きくなり、離隔距離が大きいほど撮像画像における被撮像体の表示サイズは小さくなると考えられる。そのため、電界強度に関する相対的な閾値（換言すれば、電波モニタノード３との相対的な離隔距離の閾値でもあり、撮像画像における被撮像体の相対的な表示サイズの閾値でもある。）を指定することで、複数観測された電波の中から所望の電波を選択することが可能となる。
　そこで、画像検索部１０９は、表示制御部１１１と互いに連携しながら、検索条件設定領域５０７に、上記のような相対的な閾値を指定するための閾値指定オブジェクト５２５を表示させてもよい。閾値指定オブジェクト５２５の具体例については、特に限定されるものではなく、図１４に示したようなスライダー状のオブジェクトであってもよいし、同様の効果を奏する他のオブジェクトであってもよい。
　画像検索部１０９は、閾値指定オブジェクト５２５が、この閾値指定オブジェクト５２５の選択可能な範囲のうち中央に位置している場合には、検索対象画像に対応する電波パターンと同程度の電界強度を有するものを検索していくようにすればよい。また、閾値指定オブジェクト５２５が、選択可能な範囲の中央よりも左側（すなわち、「近く」側の部分）に位置している場合には、画像検索部１０９は、検索対象画像に対応する電波パターンより強い電界強度に絞って、電波情報の検索を行えばよい。同様に、閾値指定オブジェクト５２５が、選択可能な範囲の中央よりも右側（すなわち、「遠く」側の部分）に位置している場合には、画像検索部１０９は、検索対象画像に対応する電波パターンより弱い電界強度にも着目して、電波情報の検索を行えばよい。
　このような閾値指定オブジェクト５２５を利用することで、例えば、検索対象画像に写り込んだ検索対象物が、電波モニタノード３や監視カメラ１の近くに存在した場合のみの撮像画像を、複数の撮像画像の中から容易に抽出することが可能となる。
　図１４に示した場合でも同様に、画像検索部１０９は、得られた検索結果を、図１１に示したようなタイムライン表示により表示させてもよいし、図１０に示したような一覧表示により表示させてもよい。
　また、画像検索部１０９は、表示制御部１１１と互いに連携しながら、例えば図１５に示したように、検索条件設定領域５０７に対して、電波パターン表示オブジェクト５１９と、組み合わせ・閾値指定オブジェクト５２７と、を表示させてもよい。組み合わせ・閾値指定オブジェクト５２７は、図１３に示した組み合わせ指定オブジェクト５２３の機能と、図１４に示した閾値指定オブジェクト５２５の機能と、を兼ね備えたオブジェクトである。例えば、組み合わせ・閾値指定オブジェクト５２７において、最高強度（図１５において「０」に対応する位置）が選択された場合には、画像検索部１０９は、指定された電波の強度とは関係なく、対応する電波の有無により検索を実施すればよい。また、組み合わせ・閾値指定オブジェクト５２７において、最低強度（図１５において「－１００」に対応する位置）が選択された場合には、画像検索部１０９は、指定された電波を検索には利用せずに、検索を実施すればよい。また、組み合わせ・閾値指定オブジェクト５２７において、最高強度と最低強度との間の位置が選択された場合には、閾値指定オブジェクト５２５と同様にして、各電波の強度閾値を考慮すればよい。
　このような組み合わせ・閾値指定オブジェクト５２７を利用することで、例えば、検索対象画像に写り込んだ検索対象物が、電波モニタノード３や監視カメラ１の近くに存在した場合のみの撮像画像を、複数の撮像画像の中から容易に抽出することが可能となる。
　図１５に示した場合でも同様に、画像検索部１０９は、得られた検索結果を、図１１に示したようなタイムライン表示により表示させてもよいし、図１０に示したような一覧表示により表示させてもよい。
　以上、図９～図１５を参照しながら、本実施形態に係る情報処理装置１０において実施される撮像画像検索処理のユーザインタフェースを具体的に説明した。
＜情報処理方法について＞
　次に、図１６を参照しながら、本実施形態に係る情報処理装置１０で実施される情報処理方法の流れの一例について、簡単に説明する。図１６は、本実施形態に係る情報処理方法の流れの一例を示した流れ図である。
　本実施形態に係る情報処理装置１０には、互いに対応付けられている監視カメラ１及び電波モニタノード３から、それぞれ撮像画像及び電波情報が随時送信されている。情報処理装置１０のデータ取得部１０１は、送信された撮像画像及び電波情報を取得すると、取得したこれらのデータをデータ記録部１０３へと出力する。データ記録部１０３は、取得した撮像画像のデータを、タイムスタンプと対応付けて記憶部１０５に格納するとともに、取得した電波情報のデータを、タイムスタンプと対応付けて記憶部１０５に格納する（ステップＳ１０１）。
　その後、情報処理装置１０は、ユーザにより画像検索操作がなされたか否かを判断する（ステップＳ１０３）。画像検索操作が行われていない場合には、情報処理装置１０は、ステップＳ１０３に戻って、画像検索操作を待ち受ける。
　一方、ユーザによる画像検索操作が行われた場合には、情報処理装置１０の画像検索部１０９は、指定された撮像画像に対応する電波情報を、タイムスタンプを利用して特定し（ステップＳ１０５）、特定した電波情報とユーザ操作とに基づき、検索条件を設定する（ステップＳ１０７）。その後、画像検索部１０９は、設定した検索条件に合致する電波情報を、格納されている複数の電波情報の中から抽出する（ステップＳ１０９）。検索条件に合致する電波情報が抽出されると、画像検索部１０９は、タイムスタンプを利用して、抽出された電波情報に対応する撮像画像を特定する（ステップＳ１１１）。
　その後、情報処理装置１０の表示制御部１１１は、特定された撮像画像を表示画面に表示させる（ステップＳ１１３）。
　これにより、ユーザは、指定した撮像画像に基づき設定された検索条件に合致する撮像画像を、複数の撮像画像の中から容易に抽出することが可能となる。
　以上、図１６を参照しながら、本実施形態に係る情報処理装置１０で実施される情報処理方法の流れの一例について、簡単に説明した。
（ハードウェア構成について）
　次に、図１７を参照しながら、本開示の実施形態に係る情報処理装置１０のハードウェア構成について、詳細に説明する。図１７は、本開示の実施形態に係る情報処理装置１０のハードウェア構成を説明するためのブロック図である。
　情報処理装置１０は、主に、ＣＰＵ９０１と、ＲＯＭ９０３と、ＲＡＭ９０５と、を備える。また、情報処理装置１０は、更に、ホストバス９０７と、ブリッジ９０９と、外部バス９１１と、インターフェース９１３と、入力装置９１５と、出力装置９１７と、ストレージ装置９１９と、ドライブ９２１と、接続ポート９２３と、通信装置９２５とを備える。
　ＣＰＵ９０１は、演算処理装置及び制御装置として機能し、ＲＯＭ９０３、ＲＡＭ９０５、ストレージ装置９１９、又はリムーバブル記録媒体９２７に記録された各種プログラムに従って、情報処理装置１０内の動作全般又はその一部を制御する。ＲＯＭ９０３は、ＣＰＵ９０１が使用するプログラムや演算パラメータ等を記憶する。ＲＡＭ９０５は、ＣＰＵ９０１が使用するプログラムや、プログラムの実行において適宜変化するパラメータ等を一次記憶する。これらはＣＰＵバス等の内部バスにより構成されるホストバス９０７により相互に接続されている。
　ホストバス９０７は、ブリッジ９０９を介して、ＰＣＩ（Ｐｅｒｉｐｈｅｒａｌ　Ｃｏｍｐｏｎｅｎｔ　Ｉｎｔｅｒｃｏｎｎｅｃｔ／Ｉｎｔｅｒｆａｃｅ）バスなどの外部バス９１１に接続されている。
　入力装置９１５は、例えば、マウス、キーボード、タッチパネル、ボタン、スイッチ及びレバーなどユーザが操作する操作手段である。また、入力装置９１５は、例えば、赤外線やその他の電波を利用したリモートコントロール手段（いわゆる、リモコン）であってもよいし、情報処理装置１０の操作に対応した携帯電話やＰＤＡ等の外部接続機器９２９であってもよい。さらに、入力装置９１５は、例えば、上記の操作手段を用いてユーザにより入力された情報に基づいて入力信号を生成し、ＣＰＵ９０１に出力する入力制御回路などから構成されている。情報処理装置１０のユーザは、この入力装置９１５を操作することにより、情報処理装置１０に対して各種のデータを入力したり処理動作を指示したりすることができる。
　出力装置９１７は、取得した情報をユーザに対して視覚的又は聴覚的に通知することが可能な装置で構成される。このような装置として、ＣＲＴディスプレイ装置、液晶ディスプレイ装置、プラズマディスプレイ装置、ＥＬディスプレイ装置及びランプなどの表示装置や、スピーカ及びヘッドホンなどの音声出力装置や、プリンタ装置、携帯電話、ファクシミリなどがある。出力装置９１７は、例えば、情報処理装置１０が行った各種処理により得られた結果を出力する。具体的には、表示装置は、情報処理装置１０が行った各種処理により得られた結果を、テキスト又はイメージで表示する。他方、音声出力装置は、再生された音声データや音響データ等からなるオーディオ信号をアナログ信号に変換して出力する。
　ストレージ装置９１９は、情報処理装置１０の記憶部の一例として構成されたデータ格納用の装置である。ストレージ装置９１９は、例えば、ＨＤＤ（Ｈａｒｄ　Ｄｉｓｋ　Ｄｒｉｖｅ）等の磁気記憶部デバイス、半導体記憶デバイス、光記憶デバイス、又は光磁気記憶デバイス等により構成される。このストレージ装置９１９は、ＣＰＵ９０１が実行するプログラムや各種データ、及び外部から取得した各種データなどを格納する。
　ドライブ９２１は、記録媒体用リーダライタであり、情報処理装置１０に内蔵、あるいは外付けされる。ドライブ９２１は、装着されている磁気ディスク、光ディスク、光磁気ディスク、又は半導体メモリ等のリムーバブル記録媒体９２７に記録されている情報を読み出して、ＲＡＭ９０５に出力する。また、ドライブ９２１は、装着されている磁気ディスク、光ディスク、光磁気ディスク、又は半導体メモリ等のリムーバブル記録媒体９２７に記録を書き込むことも可能である。リムーバブル記録媒体９２７は、例えば、ＤＶＤメディア、ＨＤ－ＤＶＤメディア、Ｂｌｕ－ｒａｙ（登録商標）メディア等である。また、リムーバブル記録媒体９２７は、コンパクトフラッシュ（登録商標）（ＣｏｍｐａｃｔＦｌａｓｈ：ＣＦ）、フラッシュメモリ、又は、ＳＤメモリカード（Ｓｅｃｕｒｅ　Ｄｉｇｉｔａｌ　ｍｅｍｏｒｙ　ｃａｒｄ）等であってもよい。また、リムーバブル記録媒体９２７は、例えば、非接触型ＩＣチップを搭載したＩＣカード（Ｉｎｔｅｇｒａｔｅｄ　Ｃｉｒｃｕｉｔ　ｃａｒｄ）又は電子機器等であってもよい。
　接続ポート９２３は、機器を情報処理装置１０に直接接続するためのポートである。接続ポート９２３の一例として、ＵＳＢ（Ｕｎｉｖｅｒｓａｌ　Ｓｅｒｉａｌ　Ｂｕｓ）ポート、ＩＥＥＥ１３９４ポート、ＳＣＳＩ（Ｓｍａｌｌ　Ｃｏｍｐｕｔｅｒ　Ｓｙｓｔｅｍ　Ｉｎｔｅｒｆａｃｅ）ポート等がある。接続ポート９２３の別の例として、ＲＳ－２３２Ｃポート、光オーディオ端子、ＨＤＭＩ（登録商標）（Ｈｉｇｈ－Ｄｅｆｉｎｉｔｉｏｎ　Ｍｕｌｔｉｍｅｄｉａ　Ｉｎｔｅｒｆａｃｅ）ポート等がある。この接続ポート９２３に外部接続機器９２９を接続することで、情報処理装置１０は、外部接続機器９２９から直接各種データを取得したり、外部接続機器９２９に各種データを提供したりする。
　通信装置９２５は、例えば、通信網９３１に接続するための通信デバイス等で構成された通信インターフェースである。通信装置９２５は、例えば、有線又は無線ＬＡＮ（Ｌｏｃａｌ　Ａｒｅａ　Ｎｅｔｗｏｒｋ）、Ｂｌｕｅｔｏｏｔｈ（登録商標）、又はＷＵＳＢ（Ｗｉｒｅｌｅｓｓ　ＵＳＢ）用の通信カード等である。また、通信装置９２５は、光通信用のルータ、ＡＤＳＬ（Ａｓｙｍｍｅｔｒｉｃ　Ｄｉｇｉｔａｌ　Ｓｕｂｓｃｒｉｂｅｒ　Ｌｉｎｅ）用のルータ、又は、各種通信用のモデム等であってもよい。この通信装置９２５は、例えば、インターネットや他の通信機器との間で、例えばＴＣＰ／ＩＰ等の所定のプロトコルに則して信号等を送受信することができる。また、通信装置９２５に接続される通信網９３１は、有線又は無線によって接続されたネットワーク等により構成され、例えば、インターネット、家庭内ＬＡＮ、赤外線通信、ラジオ波通信又は衛星通信等であってもよい。
　以上、本開示の実施形態に係る情報処理装置１０の機能を実現可能なハードウェア構成の一例を示した。上記の各構成要素は、汎用的な部材を用いて構成されていてもよいし、各構成要素の機能に特化したハードウェアにより構成されていてもよい。従って、本実施形態を実施する時々の技術レベルに応じて、適宜、利用するハードウェア構成を変更することが可能である。
　以上、添付図面を参照しながら本開示の好適な実施形態について詳細に説明したが、本開示の技術的範囲はかかる例に限定されない。本開示の技術分野における通常の知識を有する者であれば、特許請求の範囲に記載された技術的思想の範疇内において、各種の変更例または修正例に想到し得ることは明らかであり、これらについても、当然に本開示の技術的範囲に属するものと了解される。
　また、本明細書に記載された効果は、あくまで説明的又は例示的なものであって限定的ではない。つまり、本開示に係る技術は、上記の効果とともに、又は、上記の効果に代えて、本明細書の記載から当業者には明らかな他の効果を奏しうる。
　なお、以下のような構成も本開示の技術的範囲に属する。ここで、先だって説明した画像検索部が、以下の記載における読み出し部及び検索部に対応している。
（１）
　電波に関する電波情報と、撮像画像と、前記撮像画像が撮像された時間と、をそれぞれ関連付けて記録する記録部から、前記電波情報を読み出す読み出し部と、
　読み出した前記電波情報に含まれる電波の個数、又は、電波の強度の少なくとも何れかに基づいて、前記記録部に記録された複数の前記撮像画像から検索条件を満たす撮像画像を検索する検索部と、
を備える、情報処理装置。
（２）
　前記検索部は、
　任意の検索元となる前記撮像画像について、検索元の撮像画像が生成された際に検出された前記電波情報を、前記撮像画像及び前記電波情報に関連付けられているタイムスタンプに基づいて特定し、
　特定した前記電波情報に含まれる前記電波の強度及び個数の組み合わせから前記検索条件を設定して、当該検索条件に適合する前記電波情報を特定し、
　特定した前記電波情報に関連付けられたタイムスタンプを利用して、該当するタイムスタンプに対応する前記撮像画像を特定する、（１）に記載の情報処理装置。
（３）
　前記検索部は、前記検索条件に基づき特定された前記撮像画像に加えて、前記複数の撮像画像の中から、前記特定された撮像画像の前後の所定期間に撮像された前記撮像画像を選択する、（２）に記載の情報処理装置。
（４）
　前記検索部は、前記検索条件に適合する前記撮像画像が複数存在する場合、前記電波の類似度合いに応じて、検索結果の表示順序を変更する、（１）～（３）の何れか１つに記載の情報処理装置。
（５）
　前記検索部により検索された前記撮像画像を表示画面に表示させるための表示制御を行う表示制御部を更に備え、
　前記表示制御部は、前記表示画面に、前記撮像画像を表示させる撮像画像表示領域と、前記検索条件を指定するための検索条件設定領域と、を少なくとも設け、前記撮像画像表示領域に表示された任意の前記撮像画像のうち、ユーザに指定された前記撮像画像について、当該ユーザに指定された撮像画像に対応する前記電波情報に含まれる前記電波の強度及び個数を表わす表示オブジェクトを、前記検索条件設定領域に表示させ、
　前記検索部は、前記検索条件設定領域に対してユーザが実施したユーザ操作に応じて、前記検索条件を設定する、（１）～（４）の何れか１つに記載の情報処理装置。
（６）
　前記表示制御部は、
　前記表示画面に、前記検索条件に適合する前記撮像画像を検索結果として表示させる検索結果表示領域と、前記検索条件に適合する撮像画像のうち、ユーザに指定された前記撮像画像を詳細表示させる検索結果詳細表示領域と、を設け、
　前記検索結果表示領域に対し、前記検索条件に適合する撮像画像を、一覧表示又はタイムライン表示させる、（５）に記載の情報処理装置。
（７）
　前記表示制御部は、前記検索結果表示領域に対して、前記検索条件に適合する撮像画像のサムネイル画像を少なくとも配置する、（６）に記載の情報処理装置。
（８）
　前記表示制御部は、前記表示オブジェクトとして、前記ユーザに指定された撮像画像に対応する前記電波情報に含まれる前記電波の強度パターンを示したオブジェクトと、検索に利用する前記電波の個数を指定する個数指定オブジェクトと、を表示させ、
　前記検索部は、前記個数指定オブジェクトで指定された個数を前記検索条件として、当該個数以上の前記電波情報が適合する前記撮像画像を検索する、（６）又は（７）に記載の情報処理装置。
（９）
　前記表示制御部は、前記表示オブジェクトとして、前記ユーザに指定された撮像画像に対応する前記電波情報に含まれる前記電波の強度パターンを示したオブジェクトと、当該電波の組み合わせを指定する組み合わせ指定オブジェクトと、を表示させ、
　前記検索部は、前記組み合わせ指定オブジェクトで指定された前記電波の組み合わせを前記検索条件として、指定された組み合わせの電波が検出された前記電波情報に対応する前記撮像画像を検索する、（６）又は（７）に記載の情報処理装置。
（１０）
　前記表示制御部は、前記表示オブジェクトとして、電波の相対的な強度を指定する強度指定オブジェクト、又は、撮像画像における被撮像体との相対的な離隔距離を指定する離隔距離指定オブジェクトを表示させ、
　前記検索部は、前記ユーザに指定された撮像画像に対応する前記電波情報に含まれる前記電波の強度を前記強度指定オブジェクト又は前記離隔距離指定オブジェクトに対応する重み付け係数により重み付けしたものを前記検索条件として、重み付け後の強度以上又は重み付け後の強度以下の強度を有している前記電波情報に対応する前記撮像画像を検索する、（６）又は（７）に記載の情報処理装置。
（１１）
　前記表示制御部は、前記表示オブジェクトとして、前記ユーザに指定された撮像画像に対応する前記電波情報に含まれる前記電波の強度パターンを示したオブジェクトと、当該電波の組み合わせを指定する組み合わせ指定オブジェクトと、電波の相対的な強度を指定する強度指定オブジェクトと、を表示させ、
　前記検索部は、前記ユーザに指定された撮像画像に対応する前記電波情報に含まれる前記電波の強度を前記強度指定オブジェクトに対応する重み付け係数により重み付けした値と、前記組み合わせ指定オブジェクトで指定された前記電波の組み合わせと、を前記検索条件として、重み付け後の強度以上又は重み付け後の強度以下の強度を有し、かつ、指定された組み合わせの電波が検出された前記電波情報に対応する前記撮像画像を検索する、（６）又は（７）に記載の情報処理装置。
（１２）
　前記電波は、無線通信に利用される電波である、（１）～（１１）の何れか１つに記載の情報処理装置。
（１３）
　電波に関する電波情報と、撮像画像と、前記撮像画像が撮像された時間と、をそれぞれ関連付けて記録する記録部から、前記電波情報を読み出すことと、
　読み出した前記電波情報に含まれる電波の個数、又は、電波の強度の少なくとも何れかに基づいて、前記記録部に記録された複数の前記撮像画像から検索条件を満たす撮像画像を検索することと、
を含む、情報処理方法。
（１４）
　コンピュータに、
　電波に関する電波情報と、撮像画像と、前記撮像画像が撮像された時間と、をそれぞれ関連付けて記録する記録部から、前記電波情報を読み出す読み出し機能と、
　読み出した前記電波情報に含まれる電波の個数、又は、電波の強度の少なくとも何れかに基づいて、前記記録部に記録された複数の前記撮像画像から検索条件を満たす撮像画像を検索する検索機能と、
を実現させるためのプログラム。
　　　１　　監視カメラ（撮像装置）
　　　３　　電波モニタノード
　　１０　　情報処理装置
　１０１　　データ取得部
　１０３　　データ記録部
　１０５　　記憶部
　１０７　　撮像画像再生部
　１０９　　画像検索部
　１１１　　表示制御部
　５００　　表示画面
　５０１　　撮像画像表示領域
　５０３　　再生状態指定オブジェクト
　５０５　　検索処理開始オブジェクト
　５０７　　検索条件設定領域
　５０９　　検索結果表示領域
　５１１　　検索結果詳細表示領域
　５１３　　ポインティングオブジェクト
　５１５　　電波検出ポイント指示オブジェクト
　５１７　　再生位置指示オブジェクト
　５１９　　電波パターン表示オブジェクト
　５２１　　個数指定オブジェクト
　５２３　　組み合わせ指定オブジェクト
　５２５　　閾値指定オブジェクト
　５２７　　組み合わせ・閾値指定オブジェクト

Claims (14)

  1. 　電波に関する電波情報と、撮像画像と、前記撮像画像が撮像された時間と、をそれぞれ関連付けて記録する記録部から、前記電波情報を読み出す読み出し部と、
    　読み出した前記電波情報に含まれる電波の個数、又は、電波の強度の少なくとも何れかに基づいて、前記記録部に記録された複数の前記撮像画像から検索条件を満たす撮像画像を検索する検索部と、
    を備える、情報処理装置。
  2. 　前記検索部は、
    　任意の検索元となる前記撮像画像について、検索元の撮像画像が生成された際に検出された前記電波情報を、前記撮像画像及び前記電波情報に関連付けられているタイムスタンプに基づいて特定し、
    　特定した前記電波情報に含まれる前記電波の強度及び個数の組み合わせから前記検索条件を設定して、当該検索条件に適合する前記電波情報を特定し、
    　特定した前記電波情報に関連付けられたタイムスタンプを利用して、該当するタイムスタンプに対応する前記撮像画像を特定する、請求項１に記載の情報処理装置。
  3. 　前記検索部は、前記検索条件に基づき特定された前記撮像画像に加えて、前記複数の撮像画像の中から、前記特定された撮像画像の前後の所定期間に撮像された前記撮像画像を選択する、請求項２に記載の情報処理装置。
  4. 　前記検索部は、前記検索条件に適合する前記撮像画像が複数存在する場合、前記電波の類似度合いに応じて、検索結果の表示順序を変更する、請求項１に記載の情報処理装置。
  5. 　前記検索部により検索された前記撮像画像を表示画面に表示させるための表示制御を行う表示制御部を更に備え、
    　前記表示制御部は、前記表示画面に、前記撮像画像を表示させる撮像画像表示領域と、前記検索条件を指定するための検索条件設定領域と、を少なくとも設け、前記撮像画像表示領域に表示された任意の前記撮像画像のうち、ユーザに指定された前記撮像画像について、当該ユーザに指定された撮像画像に対応する前記電波情報に含まれる前記電波の強度及び個数を表わす表示オブジェクトを、前記検索条件設定領域に表示させ、
    　前記検索部は、前記検索条件設定領域に対してユーザが実施したユーザ操作に応じて、前記検索条件を設定する、請求項１に記載の情報処理装置。
  6. 　前記表示制御部は、
    　前記表示画面に、前記検索条件に適合する前記撮像画像を検索結果として表示させる検索結果表示領域と、前記検索条件に適合する撮像画像のうち、ユーザに指定された前記撮像画像を詳細表示させる検索結果詳細表示領域と、を設け、
    　前記検索結果表示領域に対し、前記検索条件に適合する撮像画像を、一覧表示又はタイムライン表示させる、請求項５に記載の情報処理装置。
  7. 　前記表示制御部は、前記検索結果表示領域に対して、前記検索条件に適合する撮像画像のサムネイル画像を少なくとも配置する、請求項６に記載の情報処理装置。
  8. 　前記表示制御部は、前記表示オブジェクトとして、前記ユーザに指定された撮像画像に対応する前記電波情報に含まれる前記電波の強度パターンを示したオブジェクトと、検索に利用する前記電波の個数を指定する個数指定オブジェクトと、を表示させ、
    　前記検索部は、前記個数指定オブジェクトで指定された個数を前記検索条件として、当該個数以上の前記電波情報が適合する前記撮像画像を検索する、請求項６に記載の情報処理装置。
  9. 　前記表示制御部は、前記表示オブジェクトとして、前記ユーザに指定された撮像画像に対応する前記電波情報に含まれる前記電波の強度パターンを示したオブジェクトと、当該電波の組み合わせを指定する組み合わせ指定オブジェクトと、を表示させ、
    　前記検索部は、前記組み合わせ指定オブジェクトで指定された前記電波の組み合わせを前記検索条件として、指定された組み合わせの電波が検出された前記電波情報に対応する前記撮像画像を検索する、請求項６に記載の情報処理装置。
  10. 　前記表示制御部は、前記表示オブジェクトとして、電波の相対的な強度を指定する強度指定オブジェクト、又は、撮像画像における被撮像体との相対的な離隔距離を指定する離隔距離指定オブジェクトを表示させ、
    　前記検索部は、前記ユーザに指定された撮像画像に対応する前記電波情報に含まれる前記電波の強度を前記強度指定オブジェクト又は前記離隔距離指定オブジェクトに対応する重み付け係数により重み付けしたものを前記検索条件として、重み付け後の強度以上又は重み付け後の強度以下の強度を有している前記電波情報に対応する前記撮像画像を検索する、請求項６に記載の情報処理装置。
  11. 　前記表示制御部は、前記表示オブジェクトとして、前記ユーザに指定された撮像画像に対応する前記電波情報に含まれる前記電波の強度パターンを示したオブジェクトと、当該電波の組み合わせを指定する組み合わせ指定オブジェクトと、電波の相対的な強度を指定する強度指定オブジェクトと、を表示させ、
    　前記検索部は、前記ユーザに指定された撮像画像に対応する前記電波情報に含まれる前記電波の強度を前記強度指定オブジェクトに対応する重み付け係数により重み付けした値と、前記組み合わせ指定オブジェクトで指定された前記電波の組み合わせと、を前記検索条件として、重み付け後の強度以上又は重み付け後の強度以下の強度を有し、かつ、指定された組み合わせの電波が検出された前記電波情報に対応する前記撮像画像を検索する、請求項６に記載の情報処理装置。
  12. 　前記電波は、無線通信に利用される電波である、請求項１に記載の情報処理装置。
  13. 　電波に関する電波情報と、撮像画像と、前記撮像画像が撮像された時間と、をそれぞれ関連付けて記録する記録部から、前記電波情報を読み出すことと、
    　読み出した前記電波情報に含まれる電波の個数、又は、電波の強度の少なくとも何れかに基づいて、前記記録部に記録された複数の前記撮像画像から検索条件を満たす撮像画像を検索することと、
    を含む、情報処理方法。
  14. 　コンピュータに、
    　電波に関する電波情報と、撮像画像と、前記撮像画像が撮像された時間と、をそれぞれ関連付けて記録する記録部から、前記電波情報を読み出す読み出し機能と、
    　読み出した前記電波情報に含まれる電波の個数、又は、電波の強度の少なくとも何れかに基づいて、前記記録部に記録された複数の前記撮像画像から検索条件を満たす撮像画像を検索する検索機能と、
    を実現させるためのプログラム。
PCT/JP2016/064637 2015-08-11 2016-05-17 情報処理装置、情報処理方法及びプログラム WO2017026154A1 (ja)

Priority Applications (3)

Application Number Priority Date Filing Date Title
CN201680045581.8A CN107851129B (zh) 2015-08-11 2016-05-17 信息处理装置、信息处理方法和程序
JP2017534115A JP6724919B2 (ja) 2015-08-11 2016-05-17 情報処理装置、情報処理方法及びプログラム
US15/738,899 US10719543B2 (en) 2015-08-11 2016-05-17 Information processing apparatus, information processing method, and program

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
JP2015-158707 2015-08-11
JP2015158707 2015-08-11

Publications (1)

Publication Number Publication Date
WO2017026154A1 true WO2017026154A1 (ja) 2017-02-16

Family

ID=57984198

Family Applications (1)

Application Number Title Priority Date Filing Date
PCT/JP2016/064637 WO2017026154A1 (ja) 2015-08-11 2016-05-17 情報処理装置、情報処理方法及びプログラム

Country Status (4)

Country Link
US (1) US10719543B2 (ja)
JP (1) JP6724919B2 (ja)
CN (1) CN107851129B (ja)
WO (1) WO2017026154A1 (ja)

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2019531516A (ja) * 2017-07-24 2019-10-31 マイセレブス カンパニーリミテッド 関心分野別趣向検索案内システム
CN112054859A (zh) * 2019-11-25 2020-12-08 黄永芹 天线强度失配分析系统及方法

Families Citing this family (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US11558679B1 (en) * 2018-03-01 2023-01-17 Amazon Technologies, Inc. Systems and methods for submitting video evidence
KR102619271B1 (ko) * 2018-11-01 2023-12-28 한화비전 주식회사 복수의 카메라들을 포함하는 영상 촬영 장치 및 영상 촬영 시스템

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2006217336A (ja) * 2005-02-04 2006-08-17 Dainippon Printing Co Ltd 撮影情報検索システム
JP2007052646A (ja) * 2005-08-18 2007-03-01 Fujifilm Holdings Corp 画像検索装置、画像プリント装置、プリント注文システム、店頭プリント端末装置、撮像装置、画像検索プログラム及び方法
JP2011523126A (ja) * 2008-05-22 2011-08-04 ユー‐ブロックス、アクチエンゲゼルシャフト ファイル作成方法およびシステム

Family Cites Families (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP4659184B2 (ja) 2000-07-25 2011-03-30 株式会社日立製作所 娯楽施設のサービスシステム
WO2006064881A1 (ja) 2004-12-17 2006-06-22 Dai Nippon Printing Co., Ltd. 撮影情報管理システム及びその方法、並びに撮影情報検索システム
JP2006277233A (ja) * 2005-03-29 2006-10-12 Fujitsu Ltd タグ試験装置、タグ試験方法およびタグ試験プログラム
US8022987B2 (en) * 2005-06-30 2011-09-20 Sandia Corporation Information-based self-organization of sensor nodes of a sensor network
US20070276540A1 (en) * 2006-05-16 2007-11-29 Akinobu Okuda Robot, radio detection system, radio detection method and recording medium storing radio detection processing program
JP4973406B2 (ja) * 2007-09-10 2012-07-11 ソニー株式会社 情報処理システム
JP4579316B2 (ja) * 2008-06-30 2010-11-10 任天堂株式会社 撮像装置、撮像システムおよびゲーム装置
JP5729398B2 (ja) * 2013-01-22 2015-06-03 株式会社デンソー 車載物標検出装置

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2006217336A (ja) * 2005-02-04 2006-08-17 Dainippon Printing Co Ltd 撮影情報検索システム
JP2007052646A (ja) * 2005-08-18 2007-03-01 Fujifilm Holdings Corp 画像検索装置、画像プリント装置、プリント注文システム、店頭プリント端末装置、撮像装置、画像検索プログラム及び方法
JP2011523126A (ja) * 2008-05-22 2011-08-04 ユー‐ブロックス、アクチエンゲゼルシャフト ファイル作成方法およびシステム

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2019531516A (ja) * 2017-07-24 2019-10-31 マイセレブス カンパニーリミテッド 関心分野別趣向検索案内システム
CN112054859A (zh) * 2019-11-25 2020-12-08 黄永芹 天线强度失配分析系统及方法
CN112054859B (zh) * 2019-11-25 2023-12-29 陕西智航信科技有限公司 天线强度失配分析系统及方法

Also Published As

Publication number Publication date
CN107851129A (zh) 2018-03-27
JP6724919B2 (ja) 2020-07-15
CN107851129B (zh) 2022-04-26
JPWO2017026154A1 (ja) 2018-05-24
US20180173704A1 (en) 2018-06-21
US10719543B2 (en) 2020-07-21

Similar Documents

Publication Publication Date Title
JP6773037B2 (ja) 情報処理装置、情報処理方法及びプログラム
JP5791605B2 (ja) メタデータのタグ付けシステム、イメージ検索方法、デバイス及びそれに適用されるジェスチャーのタグ付け方法
WO2018198373A1 (ja) 映像監視システム
WO2017026154A1 (ja) 情報処理装置、情報処理方法及びプログラム
KR20160127737A (ko) 정보 처리 장치, 정보 처리 방법 및 프로그램
JP2009199322A (ja) 監視システム、人物検索方法
WO2016026446A1 (zh) 智能摄像系统的实现方法、智能摄像系统和网络摄像头
EP2860968A1 (en) Information processing device, information processing method, and program
US20110096994A1 (en) Similar image retrieval system and similar image retrieval method
JP2018137575A (ja) 制御装置及び方法
EP3070681A1 (en) Display control device, display control method and program
WO2016136104A1 (ja) 情報処理装置、情報処理方法及びプログラム
JP2013171373A (ja) 情報処理装置、システムおよび情報処理方法
JP2009033351A (ja) 記録再生装置及び方法
WO2018154902A1 (ja) 情報処理装置、情報処理方法、及びプログラム
US10373465B2 (en) Information processing device and information processing method
JP2013171599A (ja) 表示制御装置および表示制御方法
JP6214762B2 (ja) 画像検索システム、検索画面表示方法
CN108540760A (zh) 视频监控识别方法、装置和系统
US20180232384A1 (en) Methods and apparatus for information capture and presentation
JP2012242878A (ja) 類似画像検索システム
US20130182919A1 (en) Image capture apparatus, control method of image capture apparatus, and recording medium
JP2007108989A (ja) 情報処理システム、及び情報処理方法
JP5147737B2 (ja) 撮像装置
JP6394463B2 (ja) 楽曲検索システム、および楽曲検索プログラム

Legal Events

Date Code Title Description
121 Ep: the epo has been informed by wipo that ep was designated in this application

Ref document number: 16834851

Country of ref document: EP

Kind code of ref document: A1

ENP Entry into the national phase

Ref document number: 2017534115

Country of ref document: JP

Kind code of ref document: A

WWE Wipo information: entry into national phase

Ref document number: 15738899

Country of ref document: US

NENP Non-entry into the national phase

Ref country code: DE

122 Ep: pct application non-entry in european phase

Ref document number: 16834851

Country of ref document: EP

Kind code of ref document: A1