WO2017208352A1 - 録画画像共有システム、方法及びプログラム - Google Patents

録画画像共有システム、方法及びプログラム Download PDF

Info

Publication number
WO2017208352A1
WO2017208352A1 PCT/JP2016/066038 JP2016066038W WO2017208352A1 WO 2017208352 A1 WO2017208352 A1 WO 2017208352A1 JP 2016066038 W JP2016066038 W JP 2016066038W WO 2017208352 A1 WO2017208352 A1 WO 2017208352A1
Authority
WO
WIPO (PCT)
Prior art keywords
recorded image
recorded
recording
trigger
sharing system
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Ceased
Application number
PCT/JP2016/066038
Other languages
English (en)
French (fr)
Inventor
俊二 菅谷
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Optim Corp
Original Assignee
Optim Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Optim Corp filed Critical Optim Corp
Priority to PCT/JP2016/066038 priority Critical patent/WO2017208352A1/ja
Priority to JP2018520252A priority patent/JP6457156B2/ja
Publication of WO2017208352A1 publication Critical patent/WO2017208352A1/ja
Priority to US16/057,986 priority patent/US10397468B2/en
Anticipated expiration legal-status Critical
Ceased legal-status Critical Current

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60—Control of cameras or camera modules
    • H04N23/61—Control of cameras or camera modules based on recognised objects
    • H04N23/611—Control of cameras or camera modules based on recognised objects where the recognised objects include parts of the human body
    • G—PHYSICS
    • G10—MUSICAL INSTRUMENTS; ACOUSTICS
    • G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
    • G10L15/00—Speech recognition
    • G10L15/22—Procedures used during a speech recognition process, e.g. man-machine dialogue
    • G—PHYSICS
    • G11—INFORMATION STORAGE
    • G11B—INFORMATION STORAGE BASED ON RELATIVE MOVEMENT BETWEEN RECORD CARRIER AND TRANSDUCER
    • G11B27/00—Editing; Indexing; Addressing; Timing or synchronising; Monitoring; Measuring tape travel
    • G11B27/10—Indexing; Addressing; Timing or synchronising; Measuring tape travel
    • G11B27/102—Programmed access in sequence to addressed parts of tracks of operating record carriers
    • G11B27/105—Programmed access in sequence to addressed parts of tracks of operating record carriers of operating discs
    • G—PHYSICS
    • G11—INFORMATION STORAGE
    • G11B—INFORMATION STORAGE BASED ON RELATIVE MOVEMENT BETWEEN RECORD CARRIER AND TRANSDUCER
    • G11B27/00—Editing; Indexing; Addressing; Timing or synchronising; Monitoring; Measuring tape travel
    • G11B27/10—Indexing; Addressing; Timing or synchronising; Measuring tape travel
    • G11B27/11—Indexing; Addressing; Timing or synchronising; Measuring tape travel by using information not detectable on the record carrier
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60—Control of cameras or camera modules
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60—Control of cameras or camera modules
    • H04N23/63—Control of cameras or camera modules by using electronic viewfinders
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00—Details of television systems
    • H04N5/76—Television signal recording
    • H04N5/765—Interface circuits between an apparatus for recording and another apparatus
    • H04N5/77—Interface circuits between an apparatus for recording and another apparatus between a recording apparatus and a television camera
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00—Television systems
    • H04N7/18—Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast
    • H04N7/188—Capturing isolated or intermittent images triggered by the occurrence of a predetermined event, e.g. an object reaching a predetermined position
    • G—PHYSICS
    • G10—MUSICAL INSTRUMENTS; ACOUSTICS
    • G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
    • G10L15/00—Speech recognition
    • G—PHYSICS
    • G10—MUSICAL INSTRUMENTS; ACOUSTICS
    • G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
    • G10L15/00—Speech recognition
    • G10L15/22—Procedures used during a speech recognition process, e.g. man-machine dialogue
    • G10L2015/223—Execution procedure of a spoken command
    • G—PHYSICS
    • G10—MUSICAL INSTRUMENTS; ACOUSTICS
    • G10L—SPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
    • G10L25/00—Speech or voice analysis techniques not restricted to a single one of groups G10L15/00 - G10L21/00
    • G10L25/48—Speech or voice analysis techniques not restricted to a single one of groups G10L15/00 - G10L21/00 specially adapted for particular use
    • G10L25/51—Speech or voice analysis techniques not restricted to a single one of groups G10L15/00 - G10L21/00 specially adapted for particular use for comparison or discrimination

Definitions

  • the present invention relates to a recorded image sharing system for sharing a recorded image of a captured image captured by a wearable terminal with a connected operator terminal.
  • CCD camera means to be worn on the body as such a wearable terminal, comprising an imaging lens directed forward of the body, and a button-operated laser light generating means disposed in the vicinity of the imaging lens, and Encoding server means stored in a pouch means attached to the body, which encodes a video signal from a CCD camera means and a date / time information signal from a built-in clock means, and superimposes date / time information converted into character information
  • a wearable surveillance camera system including an encoding server means that can superimpose and record a video imaged via a camera, and a battery means for supplying power (see Patent Document 1).
  • Patent Document 1 continuously records video, when it is desired to view a desired recording location from continuously recorded images, the recorded images are sequentially reproduced. However, there was no choice but to look for the desired recording location by visual inspection.
  • the present invention detects a predetermined trigger, and records a recorded image for a predetermined time including a detected predetermined trigger among recorded recorded images on a display unit of an operator terminal. It is an object to provide a system, method and program.
  • the present invention provides the following solutions.
  • the invention according to the first feature is A recorded image sharing system for sharing a recorded image of a captured image captured by a wearable terminal with a connected operator terminal, Recording means for recording a captured image captured by the wearable terminal; Detection means for detecting a predetermined trigger; Display control means for displaying a recorded image for a predetermined time including the detected predetermined trigger among the recorded video images, on a display means of the operator terminal; A recorded image sharing system is provided.
  • a recorded image sharing system for sharing a recorded image of a captured image captured by a wearable terminal with a connected operator terminal includes a recording unit, a detecting unit, a display control unit, .
  • the recording means records a captured image captured by the wearable terminal.
  • the detection means detects a predetermined trigger.
  • the display control means displays on the display means of the operator terminal a recorded image of a predetermined time including a detected predetermined trigger among the recorded images.
  • the invention according to the first feature is a category of the system, but the method and the program exhibit the same operations and effects.
  • the invention according to the second feature is in addition to the invention according to the first feature,
  • the detection means provides a recorded image sharing system that detects an operation of a user of the wearable terminal as a predetermined trigger.
  • the user's operation of the wearable terminal is detected, and the recorded image of the predetermined time including the time when the user's operation is recorded is displayed on the operator terminal.
  • a recorded image sharing system to be displayed on the means can be provided.
  • the invention according to the third feature is in addition to the invention according to the first feature, Comprising recording means for recording the sound collected by the wearable terminal;
  • the detection means provides a recorded image sharing system that detects a voice of a user of the wearable terminal as the predetermined trigger.
  • the user's voice of the wearable terminal is detected, and the recorded image of a predetermined time including the time when the user's voice is generated is recorded among the recorded images.
  • a recorded image sharing system to be displayed on the display means can be provided.
  • the user wearing the wearable terminal utters a start cue or the name of a recording object, for example, a predetermined trigger is uttered and the start cue or the name of the recording object is uttered.
  • the recorded image of a predetermined time including the time when the voice is uttered can be displayed on the display means of the operator terminal.
  • the invention according to the fourth feature is in addition to the invention according to the first feature, Comprising recording means for recording the sound collected by the wearable terminal;
  • the detection means provides a recorded image sharing system that detects a combination of a user's operation and voice of the wearable terminal as the predetermined trigger.
  • a combination of the user's operation and voice of the wearable terminal is detected, and the user's operation is performed among the recorded images recorded, and the time when the voice is generated is determined.
  • a recorded image sharing system that displays a recorded image of a predetermined time including on a display unit of an operator terminal.
  • the invention according to the fifth feature includes the invention according to the first feature,
  • the detection means provides a recorded image sharing system that detects a predetermined environmental sound as the predetermined trigger.
  • a predetermined environmental sound is detected, and a recorded image of a predetermined time including a time when the environmental sound is generated is displayed on the display unit of the operator terminal among the recorded images.
  • a recorded image sharing system For example, when a user wearing a wearable terminal encounters an accident, for example, by setting a predetermined trigger as an impact sound or a sudden brake sound, recording of a predetermined time including the time when the accident occurred is recorded.
  • the image can be displayed on the display means of the operator terminal.
  • the invention according to the sixth feature is in addition to the invention according to the first feature, There is provided a recorded image sharing system comprising time changing means for changing the predetermined time in accordance with an object detected by the detecting means or a recorded image.
  • the sixth aspect of the invention it is possible to provide a recorded image sharing system that can change the time of a recorded image displayed on the display means of the operator terminal according to a predetermined trigger or a recorded image.
  • a predetermined trigger according to the required recording time to be recorded, it is possible to extract recorded images without excess or deficiency and display them on the display means of the operator terminal.
  • the invention according to the seventh feature includes the invention according to the first feature, A recorded image sharing system is provided, wherein a recorded image of a predetermined time including the detected predetermined trigger is displayed on a display unit of the wearable terminal.
  • a predetermined trigger is detected, and a recorded image of a predetermined time including the detected predetermined trigger is recorded together with the display means of the operator terminal among the recorded images. It is possible to provide a recorded image sharing system that can also be displayed on the display unit. Thereby, for example, a user wearing a wearable terminal can check a recorded image even when the operator terminal cannot be visually recognized.
  • a recorded image sharing system a method, and a method for detecting a predetermined trigger and displaying a recorded image for a predetermined time including a detected predetermined trigger among recorded video images on a display unit of an operator terminal, and A program can be provided.
  • FIG. 1 is a diagram for explaining an outline of a recorded image sharing system 1 which is a preferred embodiment of the present invention.
  • FIG. 2 is an overall configuration diagram of the recorded image sharing system 1.
  • FIG. 3 is a diagram illustrating the functional blocks of the wearable terminal 10 in the recorded image sharing system 1 and the relationship between the functions.
  • FIG. 4 is a diagram showing the functional block of the operator terminal 20 in the recorded image sharing system 1 and the relationship between the functions.
  • FIG. 5 is a flowchart of the recorded image sharing process executed by the operator terminal 20.
  • FIG. 6 is a diagram illustrating the trigger data 210 stored in the storage unit 22 of the operator terminal 20.
  • FIG. 7 is a diagram for explaining an example of a recorded image sharing process executed by the operator terminal 20.
  • FIG. 1 is a diagram for explaining an outline of a recorded image sharing system 1 which is a preferred embodiment of the present invention.
  • the outline of the recorded image sharing system 1 will be described with reference to FIG.
  • the recorded image sharing system 1 includes a wearable terminal 10 and an operator terminal 20.
  • the recorded image sharing system 1 shares the recorded image of the captured image captured by the wearable terminal 10 attached to the user with the connected operator terminal 20.
  • the recorded image sharing system 1 transmits the captured image captured by the wearable terminal 10 and the collected sound to the operator terminal 20 connected by, for example, a wireless LAN (Local Area Network), and the operator terminal 20 is transmitted. Record and record recorded images and audio.
  • the operator terminal 20 detects a predetermined trigger, the operator terminal 20 displays a recorded image for a predetermined time including the detected predetermined trigger from the recorded / recorded recorded images.
  • the “predetermined trigger” is a predetermined operation (for example, pointing operation) by the user of the wearable terminal 10 or a voice of the user (for example, a voice that utters a start cue or the name of a recording target object). Etc.), combinations thereof, and predetermined environmental sounds (for example, impact sounds, sudden braking sounds, etc.).
  • the wearable terminal 10 captures the pointing operation, collects the utterance, and transmits the captured image and collected voice data to the operator terminal 20.
  • the operator terminal 20 includes, in the received data, a voice that utters a captured image of a pointing operation or a name of a recording target (“Mt. Fuji” in the example shown in FIG. 1) as a predetermined trigger set in advance.
  • a voice that utters a captured image of a pointing operation or a name of a recording target (“Mt. Fuji” in the example shown in FIG. 1) as a predetermined trigger set in advance.
  • an index associated with the predetermined trigger is added to the position on the time axis of the captured image and recorded.
  • the operator terminal 20 reproduces the recorded data based on the user's operation.
  • the operator terminal 20 has received data from the wearable terminal 10 that is a predetermined trigger, such as a picked-up captured image and a name of the recording target object ("Mt. Fuji" in the example shown in FIG. 1). In this case, this predetermined trigger is detected.
  • the operator terminal 20 searches the recorded / recorded recorded image for an index associated with the detected predetermined trigger, and for a predetermined time including a position on the time axis to which the index is added. Display the recorded image.
  • FIG. 2 is an overall configuration diagram of the recorded image sharing system 1.
  • the recorded image sharing system 1 includes a wearable terminal 10 and an operator terminal 20 connected to the wearable terminal 10 by, for example, a wireless LAN.
  • the wearable terminal 10 and the operator terminal 20 are not limited to wireless, and may be connected by wire.
  • the wearable terminal 10 is, for example, a glasses type, and includes a control unit 11, a storage unit 12, a communication unit 13, an imaging unit (for example, a CCD camera) 14, and a sound collecting unit (for example, a microphone) in a frame of glasses. ) 15 and a display unit (for example, a transmissive liquid crystal display device) 16 is provided on the lens of the glasses.
  • Wearable terminal 10 can be worn by a user who operates operator terminal 20, can capture an image, can collect sound, and can transmit captured image data and collected sound data to operator terminal 20.
  • it can be set as arbitrary structures, such as a small-sized video camera.
  • the operator terminal 20 may be a general information terminal, and is an information device having functions to be described later.
  • a smartphone a notebook PC, a netbook terminal, a slate terminal, an electronic book terminal
  • It may be a portable terminal such as an electronic dictionary terminal, a portable music player, or a portable content playback / recording player.
  • FIG. 3 is a diagram illustrating the functional blocks of the wearable terminal 10 in the recorded image sharing system 1 and the relationship between the functions.
  • FIG. 4 is a diagram showing the functional block of the operator terminal 20 in the recorded image sharing system 1 and the relationship between the functions.
  • the wearable terminal 10 includes a central processing unit (CPU), a random access memory (RAM), a read only memory (ROM), and the like as the control unit 11, and a hard disk or semiconductor memory as the storage unit 12.
  • the communication unit 13 includes, for example, a WiFi (Wireless Fidelity) compatible device (which may be wired) that conforms to IEEE 802.11.
  • the storage unit 12 stores the control program 100 and other data necessary for controlling the wearable terminal 10.
  • the wearable terminal 10 includes a CCD camera or the like as the imaging unit 14, a microphone or the like as the sound collection unit 15, and a transmissive liquid crystal display device or the like as the display unit 16.
  • the control unit 11 when the control unit 11 reads the control program 100, the imaging module 101 is realized in cooperation with the storage unit 12, the communication unit 13, and the imaging unit 14. In the wearable terminal 10, the control unit 11 reads the control program 100, thereby realizing the sound collection module 102 in cooperation with the storage unit 12, the communication unit 13, and the sound collection unit 15. Also, in the wearable terminal 10, the control unit 11 reads the control program 100, thereby realizing the display module 103 in cooperation with the storage unit 12, the communication unit 13, and the display unit 16.
  • the operator terminal 20 includes a CPU, a RAM, a ROM, and the like as the control unit 21, a data storage unit as the storage unit 22, and a communication unit 23 as the wearable terminal 10.
  • the device includes a WiFi-compliant device compliant with IEEE 802.11, a wireless device compliant with international telecommunication standards such as third-generation and fourth-generation mobile communication systems
  • the storage unit 22 includes a recorded image sharing program 200, The trigger data 210, the recording / recording data 220, and other data necessary for controlling the operator terminal 20 are stored.
  • the operator terminal 20 includes a liquid crystal display device or the like as the display unit 24.
  • the trigger data 210 is a trigger reference image data for detecting a predetermined operation by the user, which is a predetermined trigger, trigger reference audio data for detecting a user's voice, and a predetermined environmental sound. Trigger reference environmental sound data etc. are included.
  • the recording / recording data 220 is data obtained by recording / recording captured image data and collected voice data transmitted from the wearable terminal 10.
  • the control unit 21 reads the recorded image sharing program 200, so that the recording module 201, the recording module 202, the index module 203, the detection module 204, and the time change in cooperation with the storage unit 22 and the communication unit 23.
  • the module 205 is realized.
  • the control unit 21 reads the recorded image sharing program 200, thereby realizing the display control module 206 in cooperation with the storage unit 22, the communication unit 23, and the display unit 24.
  • FIG. 5 is a flowchart of the recorded image sharing process executed by the operator terminal 20. The recorded image sharing process performed by the various modules of the operator terminal 20 described above will be described.
  • step S ⁇ b> 1 the recording module 201 and the recording module 202 receive captured image data and collected sound data from the wearable terminal 10, record / record them, generate recording / recorded data 220, and store them in the storage unit 22. To do.
  • step S2 when the index module 203 detects that the captured image or the collected audio data received from the wearable terminal 10 includes the predetermined trigger defined in the trigger data 210, An index associated with the predetermined trigger is added to a position on the time axis of the captured image in the recording / recording data 220.
  • FIG. 6 is a diagram for explaining the trigger data 210 stored in the storage unit 22 of the operator terminal 20.
  • the trigger data 210 includes reference data for detecting a predetermined trigger in a trigger ID that is information indicating a pointing operation that is a predetermined trigger, and a recording that includes the predetermined trigger when the predetermined trigger is detected.
  • a predetermined time which is a time for displaying an image, is associated.
  • the reference data is trigger reference image data generated from images obtained by capturing the predetermined operation from various angles and situations if the predetermined trigger is a predetermined operation (for example, a pointing operation). If is a predetermined user's voice or a predetermined environmental sound, it is trigger reference audio data generated in advance from the waveform data of the voice or the environmental sound.
  • predetermined time is set to be different for each predetermined trigger, but is not limited to this, and may be changed according to the recorded image.
  • FIG. 7 is a diagram for explaining an example of a recorded image sharing process executed by the operator terminal 20.
  • the index module 203 compares the captured image received from the wearable terminal 10 with the reference data of the trigger data 210 (see FIG. 6), and detects an approximate captured image.
  • the trigger ID In the example illustrated in FIG. 7, an index that associates “01”) that is associated with a pointing operation that is a predetermined trigger is added.
  • a criterion for detecting a predetermined user's voice for example, a voice uttering a start signal or a name of a recording target (for example, “Mt. Fuji”)
  • the index module 203 receives voice data (for example, waveform data) received from the wearable terminal 10 and reference data (such as trigger reference voice data 01) of the trigger data 210 (see FIG. 6).
  • voice data for example, waveform data
  • reference data such as trigger reference voice data 01
  • an index that associates the trigger ID of the reference data is added to the position on the time axis where the waveform is detected in the recording / recording data 220.
  • the index module 203 is used as a wearable terminal. 10 is compared with voice data (for example, waveform data) received from 10 and reference data (such as trigger reference voice data 10) of the trigger data 210 (see FIG. 6), and when an approximate waveform is detected, An index corresponding to the trigger ID of the reference data is added to the position on the time axis where the waveform is detected in the recording / recording data 220.
  • voice data for example, waveform data
  • reference data such as trigger reference voice data
  • the index module 203 detects a plurality of types of predetermined triggers (for example, a pointing operation and a voice of a user who utters “Mt. Fuji”) at the same time or close in time, An index associated with a combination of trigger IDs of predetermined triggers is added.
  • a plurality of types of predetermined triggers for example, a pointing operation and a voice of a user who utters “Mt. Fuji”.
  • step S ⁇ b> 3 the recording module 201 and the recording module 202 end the recording / recording of the captured image and the collected voice data from the wearable terminal 10.
  • step S4 when the detection module 204 detects that the captured image or the collected audio data received from the wearable terminal 10 includes the predetermined trigger defined in the trigger data 210, An index associated with a trigger ID indicating a detected predetermined trigger is extracted from the indexes added to the recording / recording data 220.
  • the time change module 205 refers to the trigger data 210 (see FIG. 6) and records the predetermined time of the trigger ID of the index extracted by the detection module 204 in step S4, including the detected predetermined trigger. Set as a predetermined time to display the image.
  • Such a time change module 205 functions as a time change unit that changes a predetermined time according to an object detected by the detection unit.
  • step S6 the display control module 206 displays a recorded image including the index extracted by the detection module 204 in step S4 from the recording / recording data 220 recorded / recorded by the recording module 201 and the recording module 202 in step S1.
  • step S5 the predetermined time set by the time change module 205 is displayed. That is, the display control module 206 functions as a display control unit that displays a recorded image of a predetermined time including a detected predetermined trigger among recorded video images on the display unit of the operator terminal 20. In this step, the display control module 206 may display the recorded image on the display unit 16 of the wearable terminal 10.
  • the detection module 204 compares the captured image received from the wearable terminal 10 with the reference data of the trigger data 210 (see FIG. 6), and detects an approximate captured image. In this case (in the example shown in FIG. 7, a captured image approximate to the trigger reference image data 01 is detected), from among the indexes added to the recording / recording data 220 stored in the storage unit 22. Then, the index associated with the detected trigger ID of the predetermined trigger (in the example shown in FIG. 7, “01” associated with the pointing operation as the predetermined trigger) is extracted.
  • a criterion for detecting a predetermined user's voice for example, a voice uttering a start signal or a name of a recording target (for example, “Mt. Fuji”)
  • the detection module 204 receives voice data (for example, waveform data) received from the wearable terminal 10 and reference data (such as trigger reference voice data 01) of the trigger data 210 (see FIG. 6).
  • voice data for example, waveform data
  • reference data such as trigger reference voice data 01
  • the trigger ID of the detected predetermined trigger is associated with the index added to the recording / recording data 220 stored in the storage unit 22. Extract the index.
  • the detection module 204 is a wearable terminal. 10 is compared with voice data (for example, waveform data) received from 10 and reference data (such as trigger reference voice data 10) of the trigger data 210 (see FIG. 6), and when an approximate waveform is detected, From the index added to the recording / recording data 220 stored in the storage unit 22, the index associated with the detected trigger ID of the predetermined trigger is extracted.
  • voice data for example, waveform data
  • reference data such as trigger reference voice data
  • the display control module 206 records the recorded image including the index extracted by the detection module 204 in the recording / recording data 220 (in the example illustrated in FIG. 7, a predetermined time including the pointing operation and the image of Mt. Fuji).
  • the recorded image is displayed on the display unit 24 or the display unit 16 of the wearable terminal 10 for a predetermined time set by the time change module 205 (in the example shown in FIG. 6, 15 seconds when the trigger ID is “01”).
  • the time change module 205 sets a longer predetermined time in the trigger data 210 (see FIG. 6) when the detection module 204 associates and associates a plurality of types of trigger IDs with a certain index. May be.
  • the time change module 205 sets the predetermined time as 30 when the detection module 204 associates a certain index with a combination of trigger IDs “01” and “10”. Set seconds.
  • the means and functions described above are realized by a computer (including a CPU, an information processing device, and various terminals) reading and executing a predetermined program.
  • the program is provided in a form recorded on a computer-readable recording medium such as a flexible disk, CD (CD-ROM, etc.), DVD (DVD-ROM, DVD-RAM, etc.), for example.
  • the computer reads the program from the recording medium, transfers it to the internal storage device or the external storage device, stores it, and executes it.
  • the program may be recorded in advance in a storage device (recording medium) such as a magnetic disk, an optical disk, or a magneto-optical disk, and provided from the storage device to the computer.

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Human Computer Interaction (AREA)
  • Health & Medical Sciences (AREA)
  • Audiology, Speech & Language Pathology (AREA)
  • Computational Linguistics (AREA)
  • Physics & Mathematics (AREA)
  • Acoustics & Sound (AREA)
  • Closed-Circuit Television Systems (AREA)
  • User Interface Of Digital Computer (AREA)
  • Television Signal Processing For Recording (AREA)
  • Studio Devices (AREA)

Abstract

【課題】所定のトリガーを検知して、録画された録画画像のうち検知された所定のトリガーを含む所定時間の録画画像をオペレータ端末の表示手段に表示する録画画像共有システムを提供する。 【解決手段】録画画像共有システム１は、ウェアラブル端末１０で撮像された撮像画像の録画画像を、接続されたオペレータ端末２０と共有し、ウェアラブル端末１０で撮像された撮像画像を録画する録画モジュール２０１と、所定のトリガーを検知する検知モジュール２０４と、録画された録画画像のうち、検知された所定のトリガーを含む所定時間の録画画像を、オペレータ端末２０の表示部２４に表示する表示制御モジュール２０６と、を備える。

Description

録画画像共有システム、方法及びプログラム
　本発明は、ウェアラブル端末で撮像された撮像画像の録画画像を、接続されたオペレータ端末と共有する録画画像共有システムに関する。
　従来、ハンズフリーで連続的に撮像および録画することができるウェアラブル端末が知られている。
　このようなウェアラブル端末として、身体に装着するＣＣＤカメラ手段であって、身体前方に指向する撮像レンズと、この撮像レンズの近傍に配置したボタン動作のレーザ光発生手段とを有するＣＣＤカメラ手段と、体に装着するポーチ手段に収納するエンコードサーバー手段であって、ＣＣＤカメラ手段からの映像信号及び内蔵のクロック手段からの日時情報信号をエンコードし、また文字情報に変換した日時情報をスーパーインポーズ手段を介して撮像した映像にスーパーインポーズして記録可能なエンコードサーバー手段と、給電するバッテリ手段とを具えたウェアラブル監視カメラシステムが提案されている（特許文献１参照）。特許文献１のウェアラブル監視カメラシステムによれば、身体に装着するＣＣＤカメラ手段により身体前方の映像を撮像するため、ＣＣＤカメラ手段の装着者が身体部分を向けることができる全方位にわたる映像を連続的にハンズフリーで撮像し、エンコードサーバー手段でエンコードされ、かつ日時情報を刻印した状態で録画することができる。
特開２００６－１４８８４２号公報
　しかしながら、特許文献１のウェアラブル監視カメラシステムは、連続的に映像を録画するものの、連続的に録画された録画画像の中から、所望する録画箇所を見たい場合には、この録画画像を順次再生し、目視により、所望する録画箇所を探すしかなかった。
　本発明は、これらの課題に鑑み、所定のトリガーを検知して、録画された録画画像のうち検知された所定のトリガーを含む所定時間の録画画像をオペレータ端末の表示手段に表示する録画画像共有システム、方法及びプログラムを提供することを目的とする。
　本発明では、以下のような解決手段を提供する。
　第１の特徴に係る発明は、
　ウェアラブル端末で撮像された撮像画像の録画画像を、接続されたオペレータ端末と共有する録画画像共有システムであって、
　前記ウェアラブル端末で撮像された撮像画像を録画する録画手段と、
　所定のトリガーを検知する検知手段と、
　前記録画された録画画像のうち、前記検知された所定のトリガーを含む所定時間の録画画像を、前記オペレータ端末の表示手段に表示する表示制御手段と、
　を備えることを特徴とする録画画像共有システムを提供する。
　第１の特徴に係る発明によれば、ウェアラブル端末で撮像された撮像画像の録画画像を、接続されたオペレータ端末と共有する録画画像共有システムは、録画手段と、検知手段と、表示制御手段と、を備える。録画手段は、ウェアラブル端末で撮像された撮像画像を録画する。検知手段は、所定のトリガーを検知する。表示制御手段は、録画された録画画像のうち、検知された所定のトリガーを含む所定時間の録画画像を、オペレータ端末の表示手段に表示する。
　第１の特徴に係る発明は、システムのカテゴリであるが、方法及びプログラムであっても同様の作用、効果を奏する。
　したがって、所定のトリガーを検知して、録画された録画画像のうち検知された所定のトリガーを含む所定時間の録画画像をオペレータ端末の表示手段に表示する録画画像共有システム、方法及びプログラムを提供できる。
　第２の特徴に係る発明は、第１の特徴に係る発明に加え、
　前記検知手段は、所定のトリガーとして、前記ウェアラブル端末のユーザの動作を検知することを特徴とする録画画像共有システムを提供する。
　第２の特徴に係る発明によれば、ウェアラブル端末のユーザの動作を検知して、録画された録画画像のうち、このユーザの動作がされた時間を含む所定時間の録画画像をオペレータ端末の表示手段に表示する録画画像共有システムを提供できる。これにより、例えば、ウェアラブル端末を装着しているユーザが、例えば、安全確認や録画対象物の特定を指さし動作で行っている場合、所定のトリガーを、この指さし動作とすることで、指さし動作により安全確認を行った時間や録画対象物が録画された時間を含む所定時間の録画画像を、オペレータ端末の表示手段に表示できる。
　第３の特徴に係る発明は、第１の特徴に係る発明に加え、
　前記ウェアラブル端末で集音された音声を録音する録音手段を備え、
　前記検知手段は、前記所定のトリガーとして、前記ウェアラブル端末のユーザの声を検知することを特徴とする録画画像共有システムを提供する。
　第３の特徴に係る発明によれば、ウェアラブル端末のユーザの声を検知して、録画された録画画像のうち、このユーザの声が発生された時間を含む所定時間の録画画像をオペレータ端末の表示手段に表示する録画画像共有システムを提供できる。これにより、例えば、ウェアラブル端末を装着しているユーザが、例えば、開始の合図や録画対象物の名称を発声している場合、所定のトリガーを、この開始の合図や録画対象物の名称を発声した声とすることで、これらの声を発した時間を含む所定時間の録画画像を、オペレータ端末の表示手段に表示できる。
　第４の特徴に係る発明は、第１の特徴に係る発明に加え、
　前記ウェアラブル端末で集音された音声を録音する録音手段を備え、
　前記検知手段は、前記所定のトリガーとして、前記ウェアラブル端末のユーザの動作と声の組み合わせを検知することを特徴とする録画画像共有システムを提供する。
　第４の特徴に係る発明によれば、ウェアラブル端末のユーザの動作と声の組み合わせを検知して、録画された録画画像のうち、このユーザの動作が行われ、この声が発生された時間を含む所定時間の録画画像をオペレータ端末の表示手段に表示する録画画像共有システムを提供できる。これにより、例えば、ウェアラブル端末を装着しているユーザが、例えば、指さし動作とともに、録画対象物の名称を発声している場合、所定のトリガーを、これらの指さし動作と録画対象物の名称を発声した声とすることで、指さし動作とともに録画対象物の名称を発声した時間を含む所定時間の録画画像を、オペレータ端末の表示手段に表示できる。
　第５の特徴に係る発明は、第１の特徴に係る発明に加え、
　前記検知手段は、前記所定のトリガーとして、所定の環境音を検知することを特徴とする録画画像共有システムを提供する。
　第５の特徴に係る発明によれば、所定の環境音を検知して、録画された録画画像のうち、この環境音が発生した時間を含む所定時間の録画画像をオペレータ端末の表示手段に表示する録画画像共有システムを提供できる。これにより、例えば、ウェアラブル端末を装着しているユーザが、例えば、事故に遭遇した場合、所定のトリガーを、衝撃音や急ブレーキ音とすることで、事故が発生した時間を含む所定時間の録画画像を、オペレータ端末の表示手段に表示できる。
　第６の特徴に係る発明は、第１の特徴に係る発明に加え、
　前記所定時間を前記検知手段が検知した対象又は録画された画像に応じて変更する時間変更手段を備えることを特徴とする録画画像共有システムを提供する。
　第６の特徴に係る発明によれば、オペレータ端末の表示手段に表示する録画画像の時間を、所定のトリガーや録画された画像に応じて変更できる録画画像共有システムを提供できる。これにより、録画する対象の所要録画時間に応じて、所定のトリガーを異ならせておくことで、過不足無く録画画像を抜き出して、オペレータ端末の表示手段に表示できる。
　第７の特徴に係る発明は、第１の特徴に係る発明に加え、
　前記ウェアラブル端末の表示部に、前記検知された所定のトリガーを含む所定時間の録画画像を表示することを特徴とする録画画像共有システムを提供する。
　第７の特徴に係る発明によれば、所定のトリガーを検知して、録画された録画画像のうち検知された所定のトリガーを含む所定時間の録画画像を、オペレータ端末の表示手段とともに、ウェアラブル端末の表示部にも表示できる録画画像共有システムを提供できる。これにより、例えば、ウェアラブル端末を装着したユーザは、オペレータ端末を視認できない場合でも、録画画像を確認できる。
　本発明によれば、所定のトリガーを検知して、録画された録画画像のうち検知された所定のトリガーを含む所定時間の録画画像をオペレータ端末の表示手段に表示する録画画像共有システム、方法及びプログラムを提供することが可能となる。
図１は、本発明の好適な実施形態である録画画像共有システム１の概要を説明するための図である。 図２は、録画画像共有システム１の全体構成図である。 図３は、録画画像共有システム１におけるウェアラブル端末１０の機能ブロックと各機能の関係を示す図である。 図４は、録画画像共有システム１におけるオペレータ端末２０の機能ブロックと各機能の関係を示す図である。 図５は、オペレータ端末２０が実行する録画画像共有処理のフローチャートである。 図６は、オペレータ端末２０の記憶部２２に記憶されたトリガーデータ２１０を説明する図である。 図７は、オペレータ端末２０が実行する録画画像共有処理の一例を説明する図である。
　以下、本発明を実施するための最良の形態について図を参照しながら説明する。なお、これはあくまでも一例であって、本発明の技術的範囲はこれに限られるものではない。
　［録画画像共有システムの概要］
　図１は、本発明の好適な実施形態である録画画像共有システム１の概要を説明するための図である。この図１に基づいて、録画画像共有システム１の概要を説明する。録画画像共有システム１は、ウェアラブル端末１０と、オペレータ端末２０と、を備える。
　録画画像共有システム１は、ユーザに装着されたウェアラブル端末１０で撮像された撮像画像の録画画像を、接続されたオペレータ端末２０と共有する。
　録画画像共有システム１は、ウェアラブル端末１０で撮像された撮像画像や集音された音声を、例えば、無線ＬＡＮ（Ｌｏｃａｌ　Ａｒｅａ　Ｎｅｔｗｏｒｋ）で接続されたオペレータ端末２０に送信し、オペレータ端末２０が送信された撮像画像や音声を録画・録音する。そして、オペレータ端末２０は、所定のトリガーを検知すると、録画・録音した録画画像の中から、検知された所定のトリガーを含む所定時間の録画画像を表示する。
　本実施形態において、「所定のトリガー」は、ウェアラブル端末１０のユーザによる所定の動作（例えば、指さし動作等）や、当該ユーザの声（例えば、開始の合図や録画対象物の名称を発声した声等）や、これらを組み合わせたものや、所定の環境音（例えば、衝撃音や急ブレーキ音等）が含まれる。
　図１に示す例では、ユーザは、ウェアラブル端末１０で富士山を撮像しているときに、ユーザが指さし動作を行うとともに、「富士山」と発声する。そして、録画画像共有システム１において、ウェアラブル端末１０は、この指さし動作を撮像し、この発声を集音し、オペレータ端末２０にこれら撮像画像や集音した音声のデータを送信する。
　オペレータ端末２０は、この受信したデータに、予め設定された所定のトリガーとして、指さし動作の撮像画像や録画対象物の名称（図１に示す例では「富士山」）を発声した声が含まれていることを検出した場合には、撮像画像の時間軸上の位置に、当該所定のトリガーと対応付けたインデックスを付加して録画・録音する。
　次に、オペレータ端末２０は、ユーザの操作に基づき、録画・録音したデータを再生する。このとき、オペレータ端末２０は、ウェアラブル端末１０から、所定のトリガーである、指さし動作の撮像画像や録画対象物の名称（図１に示す例では「富士山」）を発声した音声のデータを受信した場合には、この所定のトリガーを検知する。
　そして、オペレータ端末２０は、録画・録音された録画画像の中から、検知された所定のトリガーが対応付けられたインデックスを検索し、当該インデックスが付加された時間軸上の位置を含む所定時間の録画画像を、表示する。
　これにより、連続的に録画された録画画像のうち、所望する録画箇所を速やかに再生することができる。
　［録画画像共有システムのシステム構成］
　図２は、録画画像共有システム１の全体構成図である。録画画像共有システム１は、ウェアラブル端末１０と、ウェアラブル端末１０に、例えば、無線ＬＡＮで接続されたオペレータ端末２０と、を備える。なお、録画画像共有システム１において、ウェアラブル端末１０とオペレータ端末２０とは、無線に限らず、有線により接続されていてもよい。
　本実施形態において、ウェアラブル端末１０は、例えば、メガネ型であり、メガネのフレームに制御部１１、記憶部１２、通信部１３、撮像部（例えば、ＣＣＤカメラ）１４及び集音部（例えば、マイク）１５が設けられ、メガネのレンズに表示部（例えば、透過型液晶表示装置）１６が設けられている。なお、ウェアラブル端末１０は、オペレータ端末２０を操作するユーザに装着でき、画像が撮像可能であり、音声を集音可能であり、撮像した画像データや集音した音声データをオペレータ端末２０に送信できれば、例えば、小型のビデオカメラ等の任意の構成とすることができる。
　また、本実施形態において、オペレータ端末２０は、一般的な情報端末であってよく、後述する機能を備える情報機器であり、例えば、スマートフォン、ノート型ＰＣ、ネットブック端末、スレート端末、電子書籍端末、電子辞書端末、携帯型音楽プレーヤ、携帯型コンテンツ再生・録画プレーヤといった携帯型端末であってもよい。
　［各機能の説明］
　図３は、録画画像共有システム１におけるウェアラブル端末１０の機能ブロックと各機能の関係を示す図である。図４は、録画画像共有システム１におけるオペレータ端末２０の機能ブロックと各機能の関係を示す図である。
　図３に示すように、ウェアラブル端末１０は、制御部１１として、ＣＰＵ（Ｃｅｎｔｒａｌ　Ｐｒｏｃｅｓｓｉｎｇ　Ｕｎｉｔ），ＲＡＭ（Ｒａｎｄｏｍ　Ａｃｃｅｓｓ　Ｍｅｍｏｒｙ），ＲＯＭ（Ｒｅａｄ　Ｏｎｌｙ　Ｍｅｍｏｒｙ）等を備え、記憶部１２として、ハードディスクや半導体メモリによる、データのストレージ部を備え、通信部１３として、例えば、ＩＥＥＥ８０２．１１に準拠したＷｉＦｉ（Ｗｉｒｅｌｅｓｓ　Ｆｉｄｅｌｉｔｙ）対応デバイス（有線であってもよい）等を備える。記憶部１２は、制御プログラム１００、その他、ウェアラブル端末１０の制御に必要なデータを記憶する。また、ウェアラブル端末１０は、撮像部１４として、ＣＣＤカメラ等を備え、集音部１５として、マイク等を備え、表示部１６として、透過型液晶表示装置等を備える。
　ウェアラブル端末１０において、制御部１１が制御プログラム１００を読み込むことで、記憶部１２、通信部１３及び撮像部１４と協働して、撮像モジュール１０１を実現する。また、ウェアラブル端末１０において、制御部１１が制御プログラム１００を読み込むことで、記憶部１２、通信部１３及び集音部１５と協働して、集音モジュール１０２を実現する。また、ウェアラブル端末１０において、制御部１１が制御プログラム１００を読み込むことで、記憶部１２、通信部１３及び表示部１６と協働して、表示モジュール１０３を実現する。
　図４に示すように、オペレータ端末２０は、ウェアラブル端末１０と同様に、制御部２１として、ＣＰＵ，ＲＡＭ，ＲＯＭ等を備え、記憶部２２として、データのストレージ部を備え、通信部２３として、例えば、ＩＥＥＥ８０２．１１に準拠したＷｉＦｉ対応デバイス、第３世代、第４世代移動通信システム等の国際電気通信連合の規格に準拠した無線デバイス等を備え、記憶部２２は、録画画像共有プログラム２００、トリガーデータ２１０、録音・録画データ２２０、その他、オペレータ端末２０の制御に必要なデータを記憶する。また、オペレータ端末２０は、表示部２４として、液晶表示装置等を備える。
　トリガーデータ２１０は、所定のトリガーとなる、ユーザによる所定の動作を検知するためのトリガー基準画像データや、ユーザの声を検知するためのトリガー基準音声データや、所定の環境音を検知するためのトリガー基準環境音データ等が含まれる。また、録音・録画データ２２０は、ウェアラブル端末１０から送信された撮像画像や集音された音声のデータを録画・録音したデータである。
　オペレータ端末２０において、制御部２１が録画画像共有プログラム２００を読み込むことで、記憶部２２及び通信部２３と協働して、録画モジュール２０１、録音モジュール２０２、インデックスモジュール２０３、検知モジュール２０４及び時間変更モジュール２０５を実現する。また、オペレータ端末２０において、制御部２１が録画画像共有プログラム２００を読み込むことで、記憶部２２、通信部２３及び表示部２４と協働して、表示制御モジュール２０６を実現する。
　［録画画像共有処理］
　図５は、オペレータ端末２０が実行する録画画像共有処理のフローチャートである。上述したオペレータ端末２０の各種モジュールが行う録画画像共有処理について説明する。
　ステップＳ１において、録画モジュール２０１及び録音モジュール２０２は、ウェアラブル端末１０から撮像画像や集音された音声のデータを受信し、録画・録音し、録音・録画データ２２０を生成し、記憶部２２に記憶する。
　ステップＳ２において、インデックスモジュール２０３は、ウェアラブル端末１０から受信した撮像画像や集音された音声のデータに、トリガーデータ２１０に規定された所定のトリガーが含まれていることを検出した場合には、録音・録画データ２２０における撮像画像の時間軸上の位置に、当該所定のトリガーと対応付けたインデックスを付加する。
　図６は、オペレータ端末２０の記憶部２２に記憶されたトリガーデータ２１０を説明する図である。トリガーデータ２１０は、所定のトリガーである指さし動作を示す情報であるトリガーＩＤに、所定のトリガーを検知するための基準データと、当該所定のトリガーを検知した場合に、当該所定のトリガーを含む録画画像を表示する時間である所定時間が対応付けられている。
　基準データは、所定のトリガーが所定の動作（例えば、指さし動作等）であれば、当該所定の動作を多様な角度や状況から撮像した画像から生成されたトリガー基準画像データであり、所定のトリガーが所定のユーザの声や所定の環境音であれば、予め当該声や当該環境音の波形データから生成されたトリガー基準音声データである。
　なお、所定時間は、所定のトリガー毎に異なる時間を設定しているが、これに限らず、録画された画像に応じて変更してもよい。
　図７は、オペレータ端末２０が実行する録画画像共有処理の一例を説明する図である。具体的には、図７に示すように、インデックスモジュール２０３は、ウェアラブル端末１０から受信した撮像画像と、トリガーデータ２１０（図６参照）の基準データと、を対比し、近似した撮像画像を検出した場合（図７に示す例では、トリガー基準画像データ０１と近似した撮像画像を検出している。）には、録音・録画データ２２０における当該撮像画像の時間軸上の位置に、トリガーＩＤ（図７に示す例では、所定のトリガーである指さし動作が対応付けられている「０１」）を対応付けたインデックスを付加する。
　また、例えば、トリガーデータ２１０（図６参照）に、所定のユーザの声（例えば、開始の合図や録画対象物の名称（例えば、「富士山」）を発声した声等）を検知するための基準データが規定されていた場合、インデックスモジュール２０３は、ウェアラブル端末１０から受信した音声のデータ（例えば、波形データ）と、トリガーデータ２１０（図６参照）の基準データ（トリガー基準音声データ０１等）と、を対比し、近似した波形を検出した場合には、録音・録画データ２２０における当該波形を検出した時間軸上の位置に、当該基準データのトリガーＩＤを対応付けたインデックスを付加する。
　また、例えば、トリガーデータ２１０（図６参照）に、所定の環境音（例えば、衝撃音や急ブレーキ音等）を検知するための基準データが規定されていた場合、インデックスモジュール２０３は、ウェアラブル端末１０から受信した音声のデータ（例えば、波形データ）と、トリガーデータ２１０（図６参照）の基準データ（トリガー基準音声データ１０等）と、を対比し、近似した波形を検出した場合には、録音・録画データ２２０における当該波形を検出した時間軸上の位置に、当該基準データのトリガーＩＤを対応付けたインデックスを付加する。
　また、インデックスモジュール２０３は、複数種類の所定のトリガーを（例えば、指さし動作と「富士山」と発声したユーザの声）、同時又は時間的に近いタイミングで検出した場合には、検出した複数種類の所定のトリガーのトリガーＩＤを組み合わせて対応付けたインデックスを付加する。
　図５に戻って、ステップＳ３において、録画モジュール２０１及び録音モジュール２０２は、ウェアラブル端末１０から撮像画像や集音された音声のデータの録画・録音を終了する。
　ステップＳ４において、検知モジュール２０４は、ウェアラブル端末１０から受信した撮像画像や集音された音声のデータに、トリガーデータ２１０に規定された所定のトリガーが含まれていることを検知した場合には、録音・録画データ２２０に付加されたインデックスの中から、検知した所定のトリガーを示すトリガーＩＤが対応付けられているインデックスを抽出する。
　ステップＳ５において、時間変更モジュール２０５は、トリガーデータ２１０（図６参照）を参照して、ステップＳ４で検知モジュール２０４が抽出したインデックスのトリガーＩＤの所定時間を、検知された所定のトリガーを含む録画画像を表示する所定時間としてセットする。このような時間変更モジュール２０５は、所定時間を検知手段が検知した対象に応じて変更する時間変更手段として機能する。
　ステップＳ６において、表示制御モジュール２０６は、ステップＳ１で録画モジュール２０１及び録音モジュール２０２により録画・録音された録音・録画データ２２０のうち、ステップＳ４で検知モジュール２０４により抽出されたインデックスを含む録画画像を、ステップＳ５で時間変更モジュール２０５がセットした所定時間表示する。即ち、表示制御モジュール２０６は、録画された録画画像のうち、検知された所定のトリガーを含む所定時間の録画画像を、オペレータ端末２０の表示手段に表示する表示制御手段として機能する。また、本ステップにおいて、表示制御モジュール２０６は、当該録画画像を、ウェアラブル端末１０の表示部１６に表示してもよい。
　具体的には、図７に示すように、検知モジュール２０４は、ウェアラブル端末１０から受信した撮像画像と、トリガーデータ２１０（図６参照）の基準データと、を対比し、近似した撮像画像を検出した場合（図７に示す例では、トリガー基準画像データ０１と近似した撮像画像を検出している。）には、記憶部２２に記憶された録音・録画データ２２０に付加されたインデックスの中から、検知した所定のトリガーのトリガーＩＤ（図７に示す例では、所定のトリガーである指さし動作が対応付けられている「０１」）が対応付けられているインデックスを抽出する。
　また、例えば、トリガーデータ２１０（図６参照）に、所定のユーザの声（例えば、開始の合図や録画対象物の名称（例えば、「富士山」）を発声した声等）を検知するための基準データが規定されていた場合、検知モジュール２０４は、ウェアラブル端末１０から受信した音声のデータ（例えば、波形データ）と、トリガーデータ２１０（図６参照）の基準データ（トリガー基準音声データ０１等）と、を対比し、近似した波形を検出した場合には、記憶部２２に記憶された録音・録画データ２２０に付加されたインデックスの中から、検知した所定のトリガーのトリガーＩＤが対応付けられているインデックスを抽出する。
　また、例えば、トリガーデータ２１０（図６参照）に、所定の環境音（例えば、衝撃音や急ブレーキ音等）を検知するための基準データが規定されていた場合、検知モジュール２０４は、ウェアラブル端末１０から受信した音声のデータ（例えば、波形データ）と、トリガーデータ２１０（図６参照）の基準データ（トリガー基準音声データ１０等）と、を対比し、近似した波形を検出した場合には、記憶部２２に記憶された録音・録画データ２２０に付加されたインデックスの中から、検知した所定のトリガーのトリガーＩＤが対応付けられているインデックスを抽出する。
　そして、表示制御モジュール２０６は、録音・録画データ２２０のうち、検知モジュール２０４により抽出されたインデックスを含む録画画像（図７に示す例では、指さし動作と富士山が撮像された画像を含む所定時間の録画画像）を、時間変更モジュール２０５がセットした所定時間（図６に示す例において、トリガーＩＤが「０１」の場合、１５秒）、表示部２４やウェアラブル端末１０の表示部１６に表示する。なお、時間変更モジュール２０５は、検知モジュール２０４が、あるインデックスに複数種類のトリガーＩＤを組み合わせて対応付けていた場合には、トリガーデータ２１０（図６参照）においてより長い方の所定時間をセットしてもよい。具体的には、図６に示す例では、時間変更モジュール２０５は、検知モジュール２０４が、あるインデックスにトリガーＩＤ「０１」と「１０」を組み合わせて対応付けていた場合には、所定時間として３０秒をセットする。
　上述した手段、機能は、コンピュータ（ＣＰＵ，情報処理装置，各種端末を含む）が、所定のプログラムを読み込んで、実行することによって実現される。プログラムは、例えば、フレキシブルディスク、ＣＤ（ＣＤ－ＲＯＭ等）、ＤＶＤ（ＤＶＤ－ＲＯＭ、ＤＶＤ－ＲＡＭ等）等のコンピュータ読取可能な記録媒体に記録された形態で提供される。この場合、コンピュータはその記録媒体からプログラムを読み取って内部記憶装置又は外部記憶装置に転送し記憶して実行する。また、そのプログラムを、例えば、磁気ディスク、光ディスク、光磁気ディスク等の記憶装置（記録媒体）に予め記録しておき、その記憶装置からコンピュータに提供するようにしてもよい。
　以上、本発明の実施形態について説明したが、本発明は上述したこれらの実施形態に限るものではない。また、本発明の実施形態に記載された効果は、本発明から生じる最も好適な効果を列挙したに過ぎず、本発明による効果は、本発明の実施形態に記載されたものに限定されるものではない。
　１　録画画像共有システム、１０　ウェアラブル端末、２０　オペレータ端末、２４　表示部、２０１　録画モジュール、２０４　検知モジュール、２０６　表示制御モジュール

Claims (9)

  1. 　ウェアラブル端末で撮像された撮像画像の録画画像を、接続されたオペレータ端末と共有する録画画像共有システムであって、
    　前記ウェアラブル端末で撮像された撮像画像を録画する録画手段と、
    　所定のトリガーを検知する検知手段と、
    　前記録画された録画画像のうち、前記検知された所定のトリガーを含む所定時間の録画画像を、前記オペレータ端末の表示手段に表示する表示制御手段と、
    　を備えることを特徴とする録画画像共有システム。
  2. 　前記検知手段は、所定のトリガーとして、前記ウェアラブル端末のユーザの動作を検知する
    ことを特徴とする請求項１に記載の録画画像共有システム。
  3. 　前記ウェアラブル端末で集音された音声を録音する録音手段を備え、
    　前記検知手段は、前記所定のトリガーとして、前記ウェアラブル端末のユーザの声を検知することを特徴とする請求項１に記載の録画画像共有システム。
  4. 　前記ウェアラブル端末で集音された音声を録音する録音手段を備え、
    　前記検知手段は、前記所定のトリガーとして、前記ウェアラブル端末のユーザの動作と声の組み合わせを検知することを特徴とする請求項１に記載の録画画像共有システム。
  5. 　前記検知手段は、前記所定のトリガーとして、所定の環境音を検知することを特徴とする請求項１に記載の録画画像共有システム。
  6. 　前記所定時間を前記検知手段が検知した対象又は録画された画像に応じて変更する時間変更手段を備えることを特徴とする請求項１に記載の録画画像共有システム。
  7. 　前記ウェアラブル端末の表示部に、前記検知された所定のトリガーを含む所定時間の録画画像を表示することを特徴とする請求項１に記載の録画画像共有システム。
  8. 　ウェアラブル端末で撮像された撮像画像の録画画像を、接続されたオペレータ端末と共有する録画画像共有システムが実行する方法であって、
    　前記ウェアラブル端末で撮像された撮像画像を録画する録画ステップと、
    　所定のトリガーを検知する検知ステップと、
    　前記録画された録画画像のうち、前記検知された所定のトリガーを含む所定時間の録画画像を、前記オペレータ端末の表示手段に表示する表示制御ステップと、
    　を含む方法。
  9. 　ウェアラブル端末で撮像された撮像画像の録画画像を、接続されたオペレータ端末と共有する録画画像共有システムを制御するコンピュータを、
    　前記ウェアラブル端末で撮像された撮像画像を録画する録画手段、
    　所定のトリガーを検知する検知手段、
    　前記録画された録画画像のうち、前記検知された所定のトリガーを含む所定時間の録画画像を、前記オペレータ端末の表示手段に表示する表示制御手段、
    　として機能させるためのプログラム。
PCT/JP2016/066038 2016-05-31 2016-05-31 録画画像共有システム、方法及びプログラム Ceased WO2017208352A1 (ja)

Priority Applications (3)

Application Number Priority Date Filing Date Title
PCT/JP2016/066038 WO2017208352A1 (ja) 2016-05-31 2016-05-31 録画画像共有システム、方法及びプログラム
JP2018520252A JP6457156B2 (ja) 2016-05-31 2016-05-31 録画画像共有システム、方法及びプログラム
US16/057,986 US10397468B2 (en) 2016-05-31 2018-08-08 Recorded image sharing system, method, and program

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
PCT/JP2016/066038 WO2017208352A1 (ja) 2016-05-31 2016-05-31 録画画像共有システム、方法及びプログラム

Related Child Applications (1)

Application Number Title Priority Date Filing Date
US16/057,986 Continuation-In-Part US10397468B2 (en) 2016-05-31 2018-08-08 Recorded image sharing system, method, and program

Publications (1)

Publication Number Publication Date
WO2017208352A1 true WO2017208352A1 (ja) 2017-12-07

Family

ID=60478219

Family Applications (1)

Application Number Title Priority Date Filing Date
PCT/JP2016/066038 Ceased WO2017208352A1 (ja) 2016-05-31 2016-05-31 録画画像共有システム、方法及びプログラム

Country Status (3)

Country Link
US (1) US10397468B2 (ja)
JP (1) JP6457156B2 (ja)
WO (1) WO2017208352A1 (ja)

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2003153165A (ja) * 2001-11-19 2003-05-23 Mitsubishi Electric Corp 映像監視システム
JP2007221328A (ja) * 2006-02-15 2007-08-30 Sony Corp 指令システム、撮像装置、指令装置、撮像処理方法、指令処理方法、プログラム
JP2015233188A (ja) * 2014-06-09 2015-12-24 ソニー株式会社 情報処理装置、情報処理方法およびプログラム

Family Cites Families (12)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2006148842A (ja) 2004-10-20 2006-06-08 Daimei Kk ウェアラブル監視カメラシステム
US7525568B2 (en) * 2004-11-09 2009-04-28 International Business Machines Corporation Personal multi-information recorder
US20080144906A1 (en) * 2006-10-09 2008-06-19 General Electric Company System and method for video capture for fluoroscopy and navigation
US8675066B2 (en) * 2009-10-02 2014-03-18 Alarm.Com Incorporated Image surveillance and reporting technology
KR20120080376A (ko) * 2011-01-07 2012-07-17 삼성전자주식회사 디지털 영상 촬영 장치 및 이의 제어 방법
US20140347479A1 (en) * 2011-11-13 2014-11-27 Dor Givon Methods, Systems, Apparatuses, Circuits and Associated Computer Executable Code for Video Based Subject Characterization, Categorization, Identification, Tracking, Monitoring and/or Presence Response
US9256803B2 (en) * 2012-09-14 2016-02-09 Palo Alto Research Center Incorporated Automatic detection of persistent changes in naturally varying scenes
JP6171374B2 (ja) * 2013-02-06 2017-08-02 ソニー株式会社 情報処理装置、情報処理方法、プログラム、及び情報処理システム
KR102067057B1 (ko) * 2013-07-24 2020-01-16 엘지전자 주식회사 디지털 디바이스 및 제어 방법
US9626580B2 (en) * 2014-07-22 2017-04-18 Verizon Patent And Licensing Inc. Defining region for motion detection
JP6451133B2 (ja) * 2014-08-01 2019-01-16 株式会社リコー 異常検知装置、異常検知方法、異常検知システム、及びプログラム
US10231006B2 (en) * 2014-10-23 2019-03-12 Hoyt Mac Layson, JR. Law enforcement real time digital information chain of custody assurance system and method

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2003153165A (ja) * 2001-11-19 2003-05-23 Mitsubishi Electric Corp 映像監視システム
JP2007221328A (ja) * 2006-02-15 2007-08-30 Sony Corp 指令システム、撮像装置、指令装置、撮像処理方法、指令処理方法、プログラム
JP2015233188A (ja) * 2014-06-09 2015-12-24 ソニー株式会社 情報処理装置、情報処理方法およびプログラム

Also Published As

Publication number Publication date
JPWO2017208352A1 (ja) 2018-09-13
US20180352149A1 (en) 2018-12-06
US10397468B2 (en) 2019-08-27
JP6457156B2 (ja) 2019-01-23

Similar Documents

Publication Publication Date Title
US10674056B2 (en) Wearable apparatus and method for capturing image data using multiple image sensors
US8773589B2 (en) Audio/video methods and systems
JP2014090386A (ja) 情報処理システム、情報処理装置、およびプログラム
JP2014115457A (ja) 情報処理装置および記録媒体
JP7100824B2 (ja) データ処理装置、データ処理方法及びプログラム
CN102708120A (zh) 生活流式传输
US20210350823A1 (en) Systems and methods for processing audio and video using a voice print
JP2015092646A (ja) 情報処理装置、制御方法、およびプログラム
US10855913B1 (en) Wearable camera, video playback system, and video playback method
JP4866396B2 (ja) タグ情報付加装置、タグ情報付加方法及びコンピュータプログラム
CN114371824B (zh) 一种音频处理方法、系统及相关装置
JP2019040005A (ja) 読み上げシステム及び読み上げ方法
JP2015138534A (ja) 電子機器
JP2006238220A (ja) 撮像装置、撮像方法、及びプログラム
JP6457156B2 (ja) 録画画像共有システム、方法及びプログラム
US11127435B2 (en) Wearable camera
US20220374069A1 (en) Wearable systems and methods for locating an object
JP6532600B2 (ja) ドライブレコーダ撮像画像送信システム、ドライブレコーダ撮像画像送信方法及びプログラム
JP2015233188A (ja) 情報処理装置、情報処理方法およびプログラム
US12395789B2 (en) Image pickup apparatus capable of efficiently retrieving subject generating specific sound from image, control method for image pickup apparatus, and storage medium
JP2013239988A (ja) 携帯端末、記録装置及びこれらを備えたライフレコーダ
HK40056844A (en) Data processing system, method and device, electronic equipment and wearable equipment
JP2021124526A (ja) 記録装置、記録システム、ファイル生成方法およびプログラム
JP2015138017A (ja) 電子機器
JP2006314019A (ja) ディジタルビデオカメラ

Legal Events

Date Code Title Description
ENP Entry into the national phase

Ref document number: 2018520252

Country of ref document: JP

Kind code of ref document: A

NENP Non-entry into the national phase

Ref country code: DE

121 Ep: the epo has been informed by wipo that ep was designated in this application

Ref document number: 16903980

Country of ref document: EP

Kind code of ref document: A1

32PN Ep: public notification in the ep bulletin as address of the adressee cannot be established

Free format text: NOTING OF LOSS OF RIGHTS PURSUANT TO RULE 112(1) EPC (EPO FORM 1205A DATED 06/03/2019)

122 Ep: pct application non-entry in european phase

Ref document number: 16903980

Country of ref document: EP

Kind code of ref document: A1