WO2003071802A1 - Systeme support memoire - Google Patents

Systeme support memoire Download PDF

Info

Publication number
WO2003071802A1
WO2003071802A1 PCT/JP2003/001842 JP0301842W WO03071802A1 WO 2003071802 A1 WO2003071802 A1 WO 2003071802A1 JP 0301842 W JP0301842 W JP 0301842W WO 03071802 A1 WO03071802 A1 WO 03071802A1
Authority
WO
WIPO (PCT)
Prior art keywords
information
storage server
audiovisual
time
user
Prior art date
Application number
PCT/JP2003/001842
Other languages
English (en)
French (fr)
Inventor
Junichi Matsuda
Original Assignee
Matsushita Electric Industrial Co., Ltd.
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Matsushita Electric Industrial Co., Ltd. filed Critical Matsushita Electric Industrial Co., Ltd.
Priority to EP03706979A priority Critical patent/EP1475967A1/en
Priority to AU2003211339A priority patent/AU2003211339A1/en
Priority to US10/479,623 priority patent/US20040155112A1/en
Publication of WO2003071802A1 publication Critical patent/WO2003071802A1/ja

Links

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/231Content storage operation, e.g. caching movies for short term storage, replicating data over plural servers, prioritizing data for deletion
    • GPHYSICS
    • G08SIGNALLING
    • G08BSIGNALLING OR CALLING SYSTEMS; ORDER TELEGRAPHS; ALARM SYSTEMS
    • G08B13/00Burglar, theft or intruder alarms
    • G08B13/18Actuation by interference with heat, light, or radiation of shorter wavelength; Actuation by intruding sources of heat, light, or radiation of shorter wavelength
    • G08B13/189Actuation by interference with heat, light, or radiation of shorter wavelength; Actuation by intruding sources of heat, light, or radiation of shorter wavelength using passive radiation detection systems
    • G08B13/194Actuation by interference with heat, light, or radiation of shorter wavelength; Actuation by intruding sources of heat, light, or radiation of shorter wavelength using passive radiation detection systems using image scanning and comparing systems
    • G08B13/196Actuation by interference with heat, light, or radiation of shorter wavelength; Actuation by intruding sources of heat, light, or radiation of shorter wavelength using passive radiation detection systems using image scanning and comparing systems using television cameras
    • G08B13/19617Surveillance camera constructional details
    • G08B13/19621Portable camera
    • GPHYSICS
    • G08SIGNALLING
    • G08BSIGNALLING OR CALLING SYSTEMS; ORDER TELEGRAPHS; ALARM SYSTEMS
    • G08B13/00Burglar, theft or intruder alarms
    • G08B13/18Actuation by interference with heat, light, or radiation of shorter wavelength; Actuation by intruding sources of heat, light, or radiation of shorter wavelength
    • G08B13/189Actuation by interference with heat, light, or radiation of shorter wavelength; Actuation by intruding sources of heat, light, or radiation of shorter wavelength using passive radiation detection systems
    • G08B13/194Actuation by interference with heat, light, or radiation of shorter wavelength; Actuation by intruding sources of heat, light, or radiation of shorter wavelength using passive radiation detection systems using image scanning and comparing systems
    • G08B13/196Actuation by interference with heat, light, or radiation of shorter wavelength; Actuation by intruding sources of heat, light, or radiation of shorter wavelength using passive radiation detection systems using image scanning and comparing systems using television cameras
    • G08B13/19654Details concerning communication with a camera
    • G08B13/19656Network used to communicate with a camera, e.g. WAN, LAN, Internet
    • GPHYSICS
    • G08SIGNALLING
    • G08BSIGNALLING OR CALLING SYSTEMS; ORDER TELEGRAPHS; ALARM SYSTEMS
    • G08B13/00Burglar, theft or intruder alarms
    • G08B13/18Actuation by interference with heat, light, or radiation of shorter wavelength; Actuation by intruding sources of heat, light, or radiation of shorter wavelength
    • G08B13/189Actuation by interference with heat, light, or radiation of shorter wavelength; Actuation by intruding sources of heat, light, or radiation of shorter wavelength using passive radiation detection systems
    • G08B13/194Actuation by interference with heat, light, or radiation of shorter wavelength; Actuation by intruding sources of heat, light, or radiation of shorter wavelength using passive radiation detection systems using image scanning and comparing systems
    • G08B13/196Actuation by interference with heat, light, or radiation of shorter wavelength; Actuation by intruding sources of heat, light, or radiation of shorter wavelength using passive radiation detection systems using image scanning and comparing systems using television cameras
    • G08B13/19665Details related to the storage of video surveillance data
    • G08B13/19669Event triggers storage or change of storage policy
    • GPHYSICS
    • G08SIGNALLING
    • G08BSIGNALLING OR CALLING SYSTEMS; ORDER TELEGRAPHS; ALARM SYSTEMS
    • G08B13/00Burglar, theft or intruder alarms
    • G08B13/18Actuation by interference with heat, light, or radiation of shorter wavelength; Actuation by intruding sources of heat, light, or radiation of shorter wavelength
    • G08B13/189Actuation by interference with heat, light, or radiation of shorter wavelength; Actuation by intruding sources of heat, light, or radiation of shorter wavelength using passive radiation detection systems
    • G08B13/194Actuation by interference with heat, light, or radiation of shorter wavelength; Actuation by intruding sources of heat, light, or radiation of shorter wavelength using passive radiation detection systems using image scanning and comparing systems
    • G08B13/196Actuation by interference with heat, light, or radiation of shorter wavelength; Actuation by intruding sources of heat, light, or radiation of shorter wavelength using passive radiation detection systems using image scanning and comparing systems using television cameras
    • G08B13/19665Details related to the storage of video surveillance data
    • G08B13/19671Addition of non-video data, i.e. metadata, to video stream
    • G08B13/19673Addition of time stamp, i.e. time metadata, to video stream
    • GPHYSICS
    • G08SIGNALLING
    • G08BSIGNALLING OR CALLING SYSTEMS; ORDER TELEGRAPHS; ALARM SYSTEMS
    • G08B13/00Burglar, theft or intruder alarms
    • G08B13/18Actuation by interference with heat, light, or radiation of shorter wavelength; Actuation by intruding sources of heat, light, or radiation of shorter wavelength
    • G08B13/189Actuation by interference with heat, light, or radiation of shorter wavelength; Actuation by intruding sources of heat, light, or radiation of shorter wavelength using passive radiation detection systems
    • G08B13/194Actuation by interference with heat, light, or radiation of shorter wavelength; Actuation by intruding sources of heat, light, or radiation of shorter wavelength using passive radiation detection systems using image scanning and comparing systems
    • G08B13/196Actuation by interference with heat, light, or radiation of shorter wavelength; Actuation by intruding sources of heat, light, or radiation of shorter wavelength using passive radiation detection systems using image scanning and comparing systems using television cameras
    • G08B13/19678User interface
    • G08B13/19684Portable terminal, e.g. mobile phone, used for viewing video remotely
    • GPHYSICS
    • G08SIGNALLING
    • G08BSIGNALLING OR CALLING SYSTEMS; ORDER TELEGRAPHS; ALARM SYSTEMS
    • G08B13/00Burglar, theft or intruder alarms
    • G08B13/18Actuation by interference with heat, light, or radiation of shorter wavelength; Actuation by intruding sources of heat, light, or radiation of shorter wavelength
    • G08B13/189Actuation by interference with heat, light, or radiation of shorter wavelength; Actuation by intruding sources of heat, light, or radiation of shorter wavelength using passive radiation detection systems
    • G08B13/194Actuation by interference with heat, light, or radiation of shorter wavelength; Actuation by intruding sources of heat, light, or radiation of shorter wavelength using passive radiation detection systems using image scanning and comparing systems
    • G08B13/196Actuation by interference with heat, light, or radiation of shorter wavelength; Actuation by intruding sources of heat, light, or radiation of shorter wavelength using passive radiation detection systems using image scanning and comparing systems using television cameras
    • G08B13/19695Arrangements wherein non-video detectors start video recording or forwarding but do not generate an alarm themselves
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/41Structure of client; Structure of client peripherals
    • H04N21/414Specialised client platforms, e.g. receiver in car or embedded in a mobile appliance
    • H04N21/41407Specialised client platforms, e.g. receiver in car or embedded in a mobile appliance embedded in a portable device, e.g. video client on a mobile phone, PDA, laptop
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/41Structure of client; Structure of client peripherals
    • H04N21/422Input-only peripherals, i.e. input devices connected to specially adapted client devices, e.g. global positioning system [GPS]
    • H04N21/42202Input-only peripherals, i.e. input devices connected to specially adapted client devices, e.g. global positioning system [GPS] environmental sensors, e.g. for detecting temperature, luminosity, pressure, earthquakes
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/41Structure of client; Structure of client peripherals
    • H04N21/422Input-only peripherals, i.e. input devices connected to specially adapted client devices, e.g. global positioning system [GPS]
    • H04N21/42203Input-only peripherals, i.e. input devices connected to specially adapted client devices, e.g. global positioning system [GPS] sound input device, e.g. microphone
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/41Structure of client; Structure of client peripherals
    • H04N21/422Input-only peripherals, i.e. input devices connected to specially adapted client devices, e.g. global positioning system [GPS]
    • H04N21/4223Cameras
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/80Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
    • H04N21/85Assembly of content; Generation of multimedia applications
    • H04N21/854Content authoring
    • H04N21/8547Content authoring involving timestamps for synchronizing content
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00Television systems
    • H04N7/18Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast
    • H04N7/183Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast for receiving images from a single remote source
    • H04N7/185Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast for receiving images from a single remote source from a mobile camera, e.g. for remote control

Definitions

  • the present invention records audiovisual information obtained by the user on a network recording medium along with a time code, and also allows the user to refer to any audiovisual information recorded in the past. It relates to a support system. Background art
  • a storage support system for recording audiovisual information selects and outputs one of video and audio information of a plurality of devices based on operation input means for inputting control information to the devices and the control information and the like.
  • this type of storage support system is an imaging means for imaging the entire intersection having a traffic light and outputting a video signal, and video time information and traffic light information are superimposed on image data of the video signal from the imaging means.
  • a first recording and storage means for recording and storing the composite image data, and a second recording and storage means for taking the composite image data of a predetermined time zone from the recording and storage means and recording the composite image data on a removable recording medium In the accident monitoring device at the intersection, the audiovisual information and the photographing time information collected at the fixed monitoring point of the intersection are recorded in the fixed recording medium (first recording and storage means), When referring to a predetermined time zone of the accumulated audiovisual information, it is taken out from the first recording and storage means and removed. Recording was made on a possible recording medium (second recording and storage means) (Japanese Patent Application Laid-Open No. 6-230320).
  • audiovisual information is not continuously and directly recorded in daily life, but instead, information obtained in daily life is integrated and integrated at a higher level, and such information is collected. Indirectly storing and referring to characters and languages, daily information processing was performed. For example, notebooks and personal information devices
  • the recording person's judgment determines the timing to start recording due to the restriction on the recording medium capacity of the recording apparatus and the restriction on portability and the like. Most cases. Therefore, there was a problem that direct recording of audiovisual information about sudden events using these devices was difficult. Disclosure of the invention
  • audiovisual information perceived by a user in daily life and time information at the time of perceiving this audiovisual information can be constantly recorded by overcoming limitations imposed by the size of recording media and displacement of monitoring points. It is possible, and the user knows in the past It provides a memory support system capable of referring to any audiovisual information that has been awakened.
  • the portable terminal creates audiovisual information including video information and audio information from the video and audio collected at an arbitrarily displaced position, and transmits the audiovisual information to the communication network.
  • the storage server transmits time information to the audiovisual information transmitted from the portable terminal and stores it as storage information, and stores the information via the communication network in response to a reference request including the time information. It was made to transmit.
  • FIG. 1 is a block diagram showing a storage support system (during recording) according to the first embodiment of this invention.
  • FIG. 2 is a block diagram showing a storage support system (at the time of reference) according to the first embodiment of this invention.
  • FIG. 3 is a block diagram showing a storage support system according to a second embodiment of this invention.
  • FIG. 4 is a block diagram showing a storage support system according to a third embodiment of this invention.
  • FIG. 5 is a block diagram showing a storage support system according to a fourth embodiment of this invention.
  • FIG. 6 is a block diagram showing a storage support system according to a fifth embodiment of this invention.
  • FIG. 10 is a block diagram showing a storage support system according to a sixth embodiment of this invention.
  • FIG. 8 is a block diagram showing a storage support system according to a seventh embodiment of this invention.
  • FIG. 9 is a block diagram showing a storage support system according to an eighth embodiment of the present invention. It is. BEST MODE FOR CARRYING OUT THE INVENTION
  • the storage support system comprises: a camera 101 for capturing a situation of a monitoring position which is arbitrarily displaced and outputting a video signal; The sound of the monitoring position to be displaced is collected and the sound signal is output.
  • the microphone has a wireless communication function, and the video signal and the sound signal from the camera 101 and the microphone 103 are input.
  • a wireless base station 10 transmits a request to the accumulation server 1 0 6 via the Internet 1 0 0 6 and further transmits the accumulated information including the audiovisual information from the accumulation server 1 0 6 to the portable information terminal 1 0 4 by radio.
  • the network 5 is connected to the network 5 and stores information including the audiovisual information and the time information transmitted from the radio base station 105,
  • a storage server 1 0 6 is provided which transmits storage information including the audiovisual information and the time information according to a reference request transmitted via 0.
  • Fig. 1 shows the connection state for recording various information
  • Fig. 2 shows the connection state for referring to the various information recorded.
  • Processing such as encryption shall be applied to all communications related to the exchange of information, and this processing shall prevent unauthorized operations due to data tampering or spoofing.
  • the portable information terminal 104 held by the user is a camera 101, a sensor 102, a microphone 1 0 3 provided at a monitoring position (eg, the user's body) to be moved arbitrarily. It also has wireless communication functions, and exchanges wireless signals with wireless base stations 105.
  • the camera 101 is attached to the user's body, photographs the situation around the user, and outputs a video signal to the portable information terminal 104.
  • the microphone 103 is, for example, worn on the user's body to collect sound around the user and output an acoustic signal to the portable information terminal 104.
  • the sensor 102 detects a state of attachment of the camera 101 and the microphone 103 to the body of the user, and outputs a detection signal to the portable information terminal 104.
  • the portable information terminal 104 is provided with switching means (such as an operation display unit) for switching the on / off state of the constant recording by the camera 101, the sensor 102, and the microphone 1003. That is, whether the audiovisual information and the like obtained when the camera 101, sensor 102, and microphone 103 are always on by the switching means is continuously stored in the storage server 106 or not. It is a switch.
  • the wireless base station 105 is connected to the Internet 100, and is connected to the storage server 106 via the network 100, and also to wireless communication with the portable information terminal 104. It is possible.
  • the storage server 106 is connected to the gateway 1000 and connected to the wireless base station 105 via the gateway 1000.
  • the storage server 106 is provided with a determination means (personal authentication means) for determining whether the access to the storage server 106 is correct or not, and only access by a user registered in advance is permitted. .
  • the user's portable information terminal 1 0 4 is an audiovisual system from a camera 1 0 1 or a microphone 1 0 3
  • the video information and audio information are transmitted to the wireless base station 105 by wireless communication.
  • Information on the mounting state of the camera 101 and the microphone 103 by the sensor 102 is also transmitted to the wireless base station 105 by wireless communication.
  • the wireless base station 105 adds a code (time code) representing time information to the video information and the audio information transmitted from the portable information terminal 104 to the storage server 106.
  • the storage server 106 stores the video information and the audio information sent from the wireless base station 105 at any time.
  • the storage server 106 includes the video information, the audio information, the information indicating the mounting state, and the like, and the time information such as the time when these are acquired by the wireless base station 105 simultaneously accumulate.
  • the monitor 107 is directly connected to the portable information terminal 104, and the display of the monitor is controlled by the portable information terminal 104.
  • the computer 1 10 is connected to the Internet 1 0 0 0 and connected to the storage server 1 0 0 6 via this Internet 1 0 0.
  • the monitor 1 0 9 is directly connected to the preview 1 1 0 and controlled by the computer 1 1 0.
  • a request signal for referring to stored information is transmitted from the portable information terminal 104 possessed by the user to the storage server 106 via the wireless base station 105 or via the Internet 100
  • the storage server 1 0 6 is the personal authentication means described above. Determines whether the access is legitimate or not.
  • the storage server 106 responds to the reference request to the above-mentioned video and sound, camera 101 and microphone 1 0 3 on the Internet 100. Transmits a signal indicating accumulated information such as mounting condition.
  • the signal sent on the Internet 100 Is transmitted to the portable information terminal 104 via the wireless base station 105 via the Internet 100, or via a computer via the Internet 100. It is sent to the server and is played back by the portable information terminal or computer. After the reproduction processing is performed in this way, the stored information is displayed on the monitor 107 or monitor 109.
  • time information such as the time when the accumulated information was acquired by the radio base station 105 is displayed on the monitors 107 and 19 together with the accumulated information.
  • the memory support system comprises: a camera 101 for photographing a situation of a monitoring position to be arbitrarily displaced and outputting a video signal; It has a microphone 103 that picks up sound and outputs an audio signal, has a wireless communication function, and receives video and audio signals from the camera 101 and the microphone 103, and this video signal and audio signal Wirelessly transmits audiovisual information including video information and audio information created by the wireless base station to the wireless base station 105, and a reference request for the storage server 106 on which the information including the audiovisual information is stored is wireless base station 10 5, a portable information terminal 104 for reproducing stored information including the audiovisual information transmitted from the wireless base station 105 and transmitted from the wireless base station 105, and has a wireless communication function and is connected to an Internet network 100 And mobile information The time-of-day information is added to the audiovisual information wirelessly transmitted from the terminal 104, and transmitted to the storage server 106 via the Internet network 100, and a reference request for the storage server 106
  • a wireless base station that transmits to the storage server 106 via the Internet 1000, and further wirelessly transmits the stored information including the audiovisual information from the storage server 106 to the portable information terminal 104.
  • the network which is connected to the network 105 and is connected to the network 500, stores the information including the audiovisual information and the time information transmitted from the wireless base station 105, and also an Internet 1
  • the storage server 106 for transmitting the stored information including the audiovisual information and the time information to the wireless base station 1 0 5 according to the reference request transmitted via 0 0 is provided. View obtained by the captured camera 1 0 1 and the microphone 1 0 3 By always recording the auditory information, the user of this audiovisual information is freed from the judgment of the situation to start the recording and the trouble of operating the equipment.
  • the storage server 106 records audiovisual information, and time information such as the time when this is recorded is recorded, the management of the audiovisual information accumulated in the storage server 106 etc.
  • the memory support system of the first embodiment of the present invention Since the computer 1 10 is provided which is connected to the Internet 1 00 and reproduces the accumulated information including the audiovisual information and the time information transmitted from the accumulation server 16 by the reference request. Audiovisual information of the user can also be monitored via the network 1 0 0 1 except for the user wearing the 1 0 1 and the microphone 1 0 3.
  • the present invention relates to the storage server In addition to the authentication means provided in 105, a personal authentication that performs personal authentication to determine whether the user wearing the camera 101, the microphone 103 and the sensor 102 is valid. The same effect can be obtained by using means or personal authentication means provided to maintain security at the time of storage server 106 registration.
  • the present invention relates to tactile information, taste information, olfactory information, physical information (for example, heart rate information, etc.) in addition to the wearing state to the body.
  • tactile information for example, taste information, olfactory information, physical information (for example, heart rate information, etc.)
  • olfactory information for example, taste information, etc.
  • physical information for example, heart rate information, etc.
  • the code indicating the acquisition time of the audiovisual information is added to the radio base station 105
  • the audiovisual information in the portable information terminal 104 is also added. Acquisition time (here, the camera
  • time information such as the time when the audiovisual information (video information and audio information) was accumulated, the time when the audiovisual information was acquired by the portable information terminal 104, etc. was also accumulated at the same time.
  • time information such as the time when the audiovisual information is stored and the time when the information is obtained by the portable information terminal 104 is displayed.
  • audiovisual information including video information and audio information is created from the video constantly captured at the monitoring position which is arbitrarily displaced and the audio constantly collected, time information is added to the audiovisual information, and wireless communication is performed.
  • a storage server 106 for transmitting the stored information via the communication network according to a request for referring to stored information including the audiovisual information and time information while being stored is provided, the user can use this configuration.
  • FIG. 3 shows a principal block diagram of the second embodiment of the present invention.
  • the camera 101 and the microphone 103 are attached to the human body to be protected, and the accumulated information accumulated in the accumulation server 206 is used as security information.
  • the point used is different.
  • the audiovisual information at the user position in daily life is constantly recorded and stored on the storage server 206, the user can use this audiovisual information as security information.
  • the effect is also obtained.
  • the audiovisual information is recorded on the storage server 206 along with the time when the user perceives it, and the audiovisual information is collectively managed on the storage server 206. The effect is also obtained that it is easy to prevent falsification of the audiovisual information.
  • a camera 1 0 1 and a microphone 1 0 3 attached to the user's body are connected to a portable information terminal 2 0 4 possessed by the user, and the camera 1 0 1 and the microphone 1 0 A sensor 102 for detecting the mounting state of 3 is connected.
  • the portable information terminal 204 is provided with switching means (such as an operation display unit) for switching the on / off state of the constant recording by the camera 101, the sensor 102, and the microphone 103. That is, whether or not the audiovisual information and the like obtained by keeping the camera 101, the sensor 102, and the microphone 103 constantly on by the switching means is continuously stored in the storage server 206 or not.
  • a monitor 1 0 7 is directly connected to the portable information terminal 2 0 4.
  • the portable information terminal 204 has a wireless communication function, and exchanges wireless signals with the wireless base station 105.
  • the wireless base station 105 is connected to the Internet 100, connected to the storage server 206 via the Internet network 100, and can wirelessly communicate with the portable information terminal 104. It is a thing.
  • the storage server 2 06 is connected to the Internet 1 0 0 0 and connected to the radio base station 1 0 0 5 via the Internet 1 0 0.
  • the storage server 206 is provided with a determination means (personal authentication means) for determining whether the access to the storage server 206 is correct or not, and only access by a user registered in advance is permitted.
  • a monitor 1 0 9 is directly connected to the computer 2 0 9.
  • the computer 2 0 9 is connected to the computer 1 0 0 0 and connected to the storage server 2 0 6 via this Internet 1 0 0.
  • the audiovisual information obtained by the camera 1 0 1 and the microphone 1 0 3 mounted on the user's body is input to the portable information terminal 2 0 4 as security information and then transmitted to the wireless base station 1 0 5 by radio Be done.
  • the audiovisual information transmitted from the portable information terminal 204 includes the information on the mounting state from the sensor 102 in order to prevent frauds such as replacement of the camera 101 and the microphone 103.
  • the wireless base station 105 adds a code (time code) representing the time when the wireless base station 105 has acquired this audiovisual information to the transmitted audiovisual information to add an indicator 1 0 0 It will be sent to the storage server 2 06 as security information.
  • the storage server 206 records the transmitted security information.
  • a reference request signal for stored information is transmitted from portable information terminal 204 to storage server 206 via wireless base station 105, or via Internet 100, or Alternatively, when the reference request signal of the stored information is transmitted from the computer 1 10 to the storage server 2 0 6 via the connection 1 0 0 0, the storage server 2 0 6 is the personal authentication means described above. Determines whether the access is legitimate or not.
  • audiovisual information such as the above-mentioned audiovisual information and time information are displayed on the storage server 2 0 0 0 on the Internet 1 0 0 A signal is sent as security information.
  • the signal transmitted on the Internet network 1000 is transmitted to the portable information terminal 204 via the wireless base station 105 via the Internet 100, or
  • the audio data is sent to the computer 2 0 9 via the network 1 0 0 0 and played back by the portable information terminal 2 0 4 or the computer 2 0 9 c
  • the audiovisual information concerned is 7 or 10 0 It will be displayed on the screen.
  • time information such as the time when the audio visual information was acquired in the portable information terminal 204 is displayed on the monitors 107 and 199 together with the audio visual information.
  • the user can always record audiovisual information in daily life. Therefore, since the audiovisual information when a certain event occurs to the user is also stored on the storage server 206, the user can use the audiovisual information as security records or evidence of an event. . Note that the audiovisual information is recorded on the storage server 2 06 along with the time when the user perceives it, and the audiovisual information is stored collectively on the storage server 2 0 6 Therefore, it is easy to prevent falsification of the audiovisual information.
  • This feature of the system configuration makes it possible to secure the reliability as the evidence of the audiovisual information recorded on the storage server 206, and to use the recorded audiovisual information as evidence in the trial.
  • a user since it is possible to treat the audiovisual information as evidence, a user can The audiovisual information can also be used in cases where the user witnesses as a witness, etc. Also, depending on the employer's wishes, it is possible to cooperate with police investigation of cases and insurance investigations.
  • the present invention In addition to the personal authentication means provided in the storage server 206, the personal authentication is performed to determine whether the user wearing the camera 101, the microphone 103 and the sensor 102 is valid. The same effect can be obtained using personal authentication means to be performed or personal authentication means provided to maintain security at the time of registration of the storage server.
  • the sensor 102 attached to the body of the user the sensor having a function of detecting the attachment state to the body is used.
  • the present invention is not limited to the attachment to the body. The same effect can be obtained by using one that has functions to detect tactile information, taste information, olfactory information, physical information (for example, heart rate, physical inclination etc.) in addition to the condition. is there.
  • the audiovisual information in the portable information terminal 204 is additionally described.
  • a configuration in which a code representing the acquisition time of the camera here, the input time from the camera 101, the sensor 102, the microphone 130
  • the acquisition time of the audiovisual information in the storage server 206 here, The same effect can be obtained by using a configuration in which a code representing the storage time of the stored information is added.
  • the storage server 2 06 is the time when the audiovisual information (video information and audio information) and the like is stored, and the audiovisual information is acquired by the portable information terminal 2 0 4
  • the time information such as the time is also stored at the same time, and the monitor 107, 1 0 9 displays the time when the audiovisual information is stored, the time when the information is acquired by the portable information terminal 2, etc.
  • the Rukoto when recording the above-mentioned sound information, using not only monaural recording but also stereo method using a stereo microphone or surround method such as binaural recording using a microphone installed in both ears can be higher. It becomes possible to record realistic sound information. In addition, it becomes possible to determine the position of the sound image that was heard at the time of reference to recording. Furthermore, by recording the visual information in a stereo format, it is possible to easily realize an embodiment in which distance information can be added to the visual information of the user.
  • FIG. 4 shows a principal block diagram of the third embodiment of the present invention.
  • the camera 101 and the microphone 103 are attached to a vehicle or a human body in the vehicle, and the state of the vehicle brake, the traveling speed and the acceleration are calculated.
  • a sensor 202 for detecting a vehicle state is provided, and the accumulated information accumulated in the accumulation server 36 is different in that the information of the vehicle state is included. According to this configuration, it is also possible to support the driving of the user's vehicle or motorcycle and to contribute to the traffic safety of the user and other people.
  • the portable information terminal 304 attached to the user or vehicle is connected to the camera attached to the user or the vehicle and the microphone 103, and the state of the vehicle A sensor 202 for detecting (condition of the brake, traveling speed and acceleration etc.) is connected. Further, the portable information terminal 304 is provided with switching means (such as an operation display unit) for switching the on / off state of the constant recording by the camera 101, the sensor 202 and the microphone 103. That is, whether the audiovisual information and the like obtained by constantly switching the camera 101, the sensor 202, and the microphone 103 by the switching means are continuously stored in the storage server 306 or not. To change the Also, a monitor 1 0 7 is directly connected to the portable information terminal 3 0 4.
  • switching means such as an operation display unit
  • the portable information terminal 304 has a wireless communication function, and exchanges wireless signals with the wireless base station 105. It is The wireless base station 105 is connected to the Internet 100, and is connected to the storage server 306 via the Internet 100, and is connected to the portable information terminal 3 Wireless communication is possible.
  • the storage server 3 06 is connected to the network 1 0 0 0 and connected to the radio base station 1 0 0 5 via the Internet 1 0 0.
  • the storage server 306 is provided with a determination means (personal authentication means) for determining whether the access to the storage server 306 is correct or not, and only access by a user registered in advance is permitted. .
  • a monitor 1 0 9 is directly connected to the computer 3 0 9.
  • the computer 3 0 9 is connected to the Internet 1 0 0 0 and connected to the storage server 3 0 0 6 via the Internet 1 0 0.
  • Audiovisual information (including video information and audio information) obtained by the camera or camera installed in the user or vehicle is included in the portable information terminal 304 as driving information.
  • the wireless base station 105 is wirelessly transmitted.
  • the audiovisual information transmitted from the portable information terminal 304 includes numerical information indicating the vehicle state (such as the state of the brake and the speed and acceleration of the vehicle) from the sensor 102.
  • the wireless base station 105 adds a code (time code) representing the time when the audiovisual information was acquired to the transmitted audiovisual information and stores it as driving information via the Internet net 100.
  • the storage server 306 records the transmitted operation information.
  • a reference request signal for stored information is further transmitted from the portable information terminal 304 to the storage server 306 via the wireless base station 105, or via the Internet 100, or the computer 1 1
  • the storage server 306 is authenticated by the above-mentioned personal identification means. Determine if there is.
  • the access request is responded to.
  • the audiovisual information including numerical information indicating the vehicle state
  • a signal indicating time information such as the time are transmitted as driving information from the storage server 306 on the Internet 100.
  • the signal sent out on the Internet 1 0 0 0 is sent to the portable information terminal 3 0 0 4 via the radio base station 1 0 5 via this Internet 1 0 0, or
  • the data is transmitted to the computer 3 0 9 via the Internet 1 0 0 0, and playback processing is performed in the portable information terminal 3 0 4 or on the configuration screen 3 0 9.
  • the audiovisual information is displayed on the monitor 107 or the monitor 109.
  • time information such as a code (time code) representing a time at which the audiovisual information is acquired at the wireless base station 105 along with the audiovisual information
  • a numerical value information indicating the vehicle state is displayed.
  • the present embodiment it is possible to support the driving of the vehicle or the two-wheeled vehicle by the user and to contribute to the traffic safety of the user and other people.
  • the user since the user can refer to the public audiovisual information of another person while driving, it is possible to simulate driving to the destination in advance.
  • driving the user records all audiovisual information that he / she perceives. Since all audiovisual information while driving is recorded, the user can refer to the driving scenery after driving. In this way, it is necessary to confirm the location of the store that you saw along the way, check the intersection where you missed the turn, check other vehicles that have run dangerous, bikes and bicycles, pedestrians who have run dangerous crossings, etc. after driving.
  • the present invention enables the user to manage driving records using not only driving diaries but also audiovisual information.
  • the present system has a feature that recorded audiovisual information can be used as evidence as in the case of the security system in the above embodiment, and this feature is effective in preventing illegal traffic control by a police officer.
  • this effect is recorded by using the sensor 202 for detecting the state of the vehicle as evidence. It will be more reliable.
  • the portable information terminal 304, the camera 101, and the microphone 103 can be installed inside the vehicle to be used as a crime prevention device of the vehicle.
  • the insurance company can refer to the records regarding the accident and this can be evidence, which makes it easy to ensure the credibility of the testimony regarding the accident. This helps insurers to reduce the effort involved in car insurance research.
  • the personal authentication means provided in the storage server 306 is used as a means for maintaining the security when referring to the storage server 306, the present invention
  • the personal authentication is performed to determine whether the user or vehicle wearing the camera 101, the microphone 103 and the sensor 202 is valid. The same effect can be obtained even by using a personal authentication means for performing authentication or a personal authentication means provided to maintain security at the time of registration of the storage server.
  • the senor 202 mounted on the body of the user or the like has a function of detecting the mounting state on the body.
  • the same effect can be obtained by using one that has a function to detect tactile information, taste information, olfactory information, physical information (for example, heart rate, physical inclination etc.) in addition to the condition. is there.
  • the present invention also relates to the audio-visual information in the portable information terminal 304.
  • a configuration in which a code representing an acquisition time of the camera here, camera 1 0 1, sensor 2 0 2, input time from the microphone 1 0 3) is added, acquisition time of the audiovisual information in the accumulation server 3 0 6 (here, The same effect can be obtained by using a configuration in which a code representing the storage time of the stored information is added.
  • time information such as the time when the audiovisual information (video information and audio information) is stored, the time when the audiovisual information is acquired in the portable information terminal 304, etc. is also stored simultaneously.
  • time information such as the time when the audiovisual information is stored and the time when the information is obtained by the portable information terminal 304 is displayed.
  • FIG. 5 shows a principal block diagram of the fourth embodiment of the present invention.
  • the camera 101 and the microphone 103 are further attached to the human body at the time of business, and the audiovisual system obtained by the camera 101 and the microphone 103 is used.
  • a processing unit (included in the portable information terminal 40 4 or the storage server 4 0 6) for processing business information including information business behavior, conversation and trading partners, and the processing described above is performed on the storage information including the audiovisual information
  • the difference is that the business information processed in the department is included. According to this configuration, the user can record his / her own behavior during work and refer to his / her past history necessary for business, which has the effect of helping to streamline work.
  • a camera 1 0 1 and a microphone 1 0 3 attached to the user's body are connected to a portable information terminal 4 0 4 possessed by the user, and the camera 1 0 1 and the microphone 1 0 A sensor 102 for detecting the mounting state of 3 is connected.
  • the portable information terminal 4 0 4 has a camera 1 0 1, switching means (such as an operation display unit) for switching the on / off state of continuous recording by the sensor 102 and the microphone 103 are provided. That is, the switching means switches whether or not audiovisual information and the like obtained by keeping the camera 101, the sensor 102, and the microphone 130 constantly in the ON state are continuously stored in the storage server 406. It is a thing.
  • a monitor 1 0 7 is directly connected to the portable information terminal 4 0 4. Furthermore, the portable information terminal 404 has a wireless communication function, and exchanges wireless signals with the wireless base station 105.
  • the wireless base station 105 is connected to the Internet network 100, and is connected to the storage server 406 via the Internet network 100, and at the same time, the mobile information terminal 400 and the wireless It can be communicated.
  • the storage server 4 0 6 is connected to the Internet 1 0 0 0 and connected to the radio base station 1 0 5 via the Internet 1 0 0. Further, the storage server 406 is provided with a determination means (personal authentication means) for determining whether the access to the storage server 406 is correct or not, and only access by a user registered in advance is permitted.
  • a monitor 1 0 9 is directly connected to the computer 4 0 9.
  • the computer 4 0 9 is connected to the computer 1 0 0 0 and connected to the storage server 4 0 6 via the network 1 0 0.
  • Audiovisual information (including video information and audio information) obtained by the camera 1 0 1 and the microphone 1 0 3 mounted on the user's body is input to the portable information terminal 4 0 4 as business information.
  • the wireless base station 105 is wirelessly transmitted.
  • the audiovisual information transmitted from the portable information terminal 400 is attached with the information on the mounting state of the sensor 102 in order to prevent the camera 101 and the microphone 103 from being tampered with. included.
  • the wireless base station 105 adds a code (time code) representing the time when this audiovisual information was acquired at the wireless base station 105 to the transmitted audiovisual information via the Internet 100.
  • This storage server 4 0 6 sends Record business information that has been
  • a request signal for referring to stored information is further transmitted from portable information terminal 400 to storage server 406 via wireless base station 105, or via network 101, or
  • the storage server 4 0 6 Determine if it is a legitimate access.
  • the storage server 4 06 responds to the reference request from the storage server 4 0 6 to the Internet 100 0 such as audiovisual information Signals containing time information) and time information are sent out as business information. In this way, the signal sent on the network will be transmitted to the portable information terminal 400 via the wireless base station 105 via this network.
  • the audiovisual information is displayed on the monitor 107 or the monitor 109.
  • time information such as the time when the audio-visual information was acquired by the radio base station 105 is displayed on the monitors 107 and 199 together with the audio-visual information including the information on the wearing state.
  • the user can record his / her behavior during work and can refer to his / her past history necessary for business.
  • the memory support system of the present embodiment allows the user to check the face and name of the other person who has met only once as many times as necessary. For example, the user wearing the camera 101 looks at this business card immediately after exchanging the business card, and when referring to the audiovisual information later, both the other party's face and the business card It can be confirmed. This further enhances the effect of the memory support on the business partner by the memory support system of the present embodiment.
  • the superior it is possible for the superior to confirm the business history of his / her subordinate with reference to the audiovisual information. Furthermore, by using a combination of the camera 101 and the sensor 130 for detecting the mounting state of the microphone 103, the reliability of the recorded audiovisual information is improved, and a simple contract can be made with a record of oral appointments. It is possible to do.
  • the personal authentication means provided in the accumulation server 4 is used as means for maintaining the security when referring to the accumulation server 46
  • the present invention the personal authentication is performed to determine whether the user or vehicle wearing the camera 101, microphone 103 and sensor 102 is valid. The same effect can be obtained even by using a personal authentication means for performing authentication, or a personal authentication means provided to maintain security at the time of registration of the storage server 406 or the like.
  • the senor 102 attached to the body of the user the sensor having a function of detecting the attachment state to the body is used.
  • the present invention is not limited to the attachment to the body. The same effect can be obtained by using one that has a function to detect tactile information, taste information, olfactory information, physical information (for example, heart rate, physical inclination etc.) in addition to the condition. is there.
  • the radio base station 105 adds the code representing the acquisition time of the audiovisual information.
  • the present invention also relates to the audiovisual information in the portable information terminal 400.
  • a configuration in which a code representing the acquisition time of the camera (here, the input time from the camera 101, the sensor 102, and the microphone 130) is added, the acquisition time of the audiovisual information in the storage server 406 (here, The same effect can be obtained by using a configuration in which a code representing the storage time of the stored information is added.
  • the storage server 4106 stores the audiovisual information (video information and sound information) and the like.
  • time information such as the time when the audiovisual information was acquired by the portable information terminal 404 is also accumulated, and in the monitors 107 and 10 9, the time when the audiovisual information is accumulated, the information is the portable information Time information such as the time obtained at the terminal 304 is displayed.
  • FIG. 6 is a front view of an essential part of the fifth embodiment of the present invention.
  • the camera 101 and the microphone 103 are attached to the human body at the time of learning, and the audiovisual information obtained by the camera 101 and the microphone 103 is A processing unit (included in the portable information terminal 504 or the storage server 506) for processing learning information including the state of learning is provided, and the storage information including the audiovisual information includes the learning processed by the processing unit. The difference is that the information is included. According to this configuration, the user can be freed from the trouble of memory, and the effect that only the intellectual activity of using the memory contents can be concentrated can be obtained.
  • the camera 1 0 1 and the microphone 1 0 3 mounted on the user's body are connected to the portable information terminal 5 0 4 possessed by the user, and the camera 1 0 1 and the microphone 1 0 3 A sensor 102 for detecting the mounting state of 3 is connected.
  • the portable information terminal 504 is provided with switching means (such as an operation display unit) for switching the on / off state of the constant recording by the camera 101, the sensor 102, and the microphone 130. That is, the switching means Thus, it is switched whether or not audiovisual information and the like obtained by keeping the camera 101, the sensor 102, and the microphone 103 constantly on can be continuously stored in the storage server 506 or not. Also, a monitor 1 0 7 is directly connected to the mobile information terminal 5 0 4.
  • the portable information terminal 504 has a wireless communication function, and exchanges wireless signals with the wireless base station 105.
  • the wireless base station 105 is connected to the Internet network 100 and connected to the storage server 506 via the Internet 100, and can wirelessly communicate with the portable information terminal 500. It is a thing.
  • the storage server 506 is connected to the Internet 100 and connected to the wireless base station 105 via the Internet 100.
  • the storage server 506 is provided with a determination means (such as a personal identification means) for determining whether the access to the storage server 506 is correct or not, and only access by a user registered in advance is permitted. It is a thing.
  • a monitor 1 0 9 is directly connected to the computer 5 0 9.
  • the computer 5 0 9 is connected to the database 1 0 0 0 and connected to the storage server 5 0 6 0 via this interface 1 0 0.
  • the audiovisual information obtained by the camera 1 0 1 and the microphone 1 0 3 mounted on the user's body is input as learning information to the portable information terminal 5 0 4 and then transmitted wirelessly to the wireless base station 1 0 5 Be done.
  • the viewing sensation information transmitted from the portable information terminal 504 includes information on the mounting state from the sensor 102.
  • the wireless base station 105 adds a code indicating the reception time (time code) to the transmitted audiovisual intelligence, and then stores it as learning information via the Internet network 100. — Send to the server.
  • the storage server 56 records the transmitted learning information.
  • a reference request signal for stored information is transmitted from portable information terminal 504 to storage server 506 via wireless base station 105 or via network 101, or Alternatively, when the reference request signal of the stored information is transmitted from the computer 5 0 9 to the storage server 5 0 6 via the network 1 0 0 0, the storage server 5 0 6 is the above-mentioned individual. Whether the access is legitimate or not is judged by the authentication means.
  • the storage server 5 0 6 responds to the reference request from the storage server 5 0 6 to the Internet 1 0 0 such as audiovisual information (Including the information of (1)) and a signal indicating time information are transmitted as learning information.
  • the signal sent on the Internet 1 0 0 0 is sent to the portable information terminal 5 0 4 via the wireless base station 1 0 5 via this Internet 1 0 0 0, or It is transmitted to the computer 5 0 9 via the Internet 1 0 0 0, and reproduction processing is performed on the portable information terminal 5 0 4 or the computer 5 0 9. After the reproduction process is performed in this way, the information is output to the monitor 107 or the monitor 109.
  • Monitors 107 and 109 the time when the information is stored in storage server 506, the time when the information is acquired in portable information terminal 504, etc. Time information is output.
  • the audiovisual information (learning information) accumulated in the accumulation server 506 is organized by the operation of the computer 5.09.
  • the user can record viewing sensation information at the time of learning. For example, it is possible for users to record and refer to the contents of all lessons at school. Therefore, it is possible for the user to be freed from the trouble of the board and to concentrate on understanding the contents of learning, since the need for the board during class is eliminated.
  • the memory support system when reading a book or a document, it is possible for the user to read back the book once read many times.
  • the user can record his / her learning contents by recording and referring to the audiovisual information at the time of the work of arranging the learning contents by the memory support system.
  • time code is added to the audiovisual information recorded in the storage server 506, batch management of audiovisual information related to learning is possible, and an application program for efficiently referring to learning contents is provided.
  • the combination allows the user to refer immediately to the contents learned in the past.
  • the user can refer to his / her learned contents at any time and any place by referring to the audio-visual information on the learning on the monitor 107 connected to the portable information terminal 504.
  • the user is relieved of all simple memorization tasks.
  • the memory support system can replace all of the memory tasks at the time of user learning. .
  • the task required for the user in learning is the efficient use of the audiovisual information obtained by the camera 101 and the microphone 103, the search for a method therefor, and the learning contents It is about understanding. That is, with the memory support system, the user can be freed from the trouble of memory work and can be dedicated to the intellectual activity of using memory contents. This can also be interpreted as the use of an external recording medium (here, including the portable information terminal 504 and the storage server 506) as a state in which the user's own storage capacity is increased.
  • an external recording medium here, including the portable information terminal 504 and the storage server 506
  • the personal authentication means provided in the accumulation server 4 is used as means for maintaining the security when referring to the accumulation server 46
  • the present invention In addition to the personal authentication means provided in the server 400, the personal authentication is performed to determine whether the user or vehicle wearing the camera 101, microphone 103 and sensor 102 is valid. The same effect can be obtained even by using a personal authentication means for performing authentication, or a personal authentication means provided to maintain security at the time of registration of the storage server 406 or the like.
  • the senor 102 mounted on the body of the user or the like has a function of detecting the mounting state on the body.
  • the present invention has been described with reference to the wearing condition with respect to the body, the present invention also has a function of detecting tactile information, taste information, olfactory information, physical information (for example, heart rate, body inclination etc.) The same effect can be obtained even if it is used.
  • the radio base station 105 adds the code representing the acquisition time of the audiovisual information.
  • the present invention also relates to the audiovisual information in the portable information terminal 400.
  • a configuration in which a code representing the acquisition time of the camera here, the input time from the camera 101, the sensor 102, and the microphone 130
  • the acquisition time of the audiovisual information in the storage server 406 here, The same effect can be obtained by using a configuration in which a code representing the storage time of the stored information is added.
  • the storage server 406 the time at which the audiovisual information (video information and audio information) and the like are stored, and the audiovisual information is acquired at the portable information terminal 400.
  • the time information such as the time is also stored at the same time, and the monitor 107, 1 0 9 displays the time when the audiovisual information is stored, the time when the information is acquired by the portable information terminal 3, etc.
  • the Rukoto is also stored at the same time, and the monitor 107, 1 0 9 displays the time when the audiovisual information is stored, the time when the
  • FIG. 7 shows a principal block diagram of the sixth embodiment of the present invention.
  • the camera 1 0 1 and the microphone 1 0 3 are further attached to a temporary temporary human body, and the camera 1 0 1 and the microphone 1 0 3 Processing unit (included in portable information terminal 604, storage server 606, etc.) for processing the legal information including the state of legal experience in the acquired audiovisual information, and including the long visual information
  • the stored information is different in that it includes the legal information processed by the processing unit. According to this configuration, it is also possible to obtain an effect that the user can easily record audiovisual information at leisure time.
  • the portable information terminal 604 in the portable information terminal 604 possessed by the user, there are a camera 101 and microphone microphones 103 attached to the body of the user or installed near the user. It is connected. Further, the portable information terminal 604 is provided with switching means (such as an operation display unit) for switching the on / off state of the constant recording by the camera 101 and the microphone 103. That is, it is switched by the switching means whether or not audiovisual information and the like obtained by keeping the camera 101 and the microphone 103 constantly in the ON state are continuously stored in the storage server 606. Further, a monitor 1 0 7 is directly connected to the portable information terminal 6 0 4. Furthermore, the portable information terminal 604 has a wireless communication function, and exchanges wireless signals with the wireless base station 105.
  • switching means such as an operation display unit
  • the wireless base station 105 is connected to the Internet 1000, and is connected to the storage server 606 via the Internet 101, and to wireless communication with the portable information terminal 604. It is possible.
  • the storage server 606 is connected to the Internet 1000 and connected to the radio base station 105 via the Internet 100.
  • the storage server 606 is provided with a determination means (such as a personal identification means) for determining whether the access to the storage server 606 is correct or not, and only the access registered by the user is permitted. It is.
  • Monitor 1 0 9 is directly connected to computer 6 0 9.
  • the computer 6 0 9 is connected to the Internet 1 0 0 0 and connected to the storage server 6 0 6 0 via this Internet 1 0 0.
  • the view obtained by the camera 1 0 1 and the microphone 1 0 3 mounted on the user's body Hearing information is input to the portable information terminal 204 as registration information, and then transmitted to the wireless base station 105 wirelessly.
  • the video recording state is turned on by the operation of the portable information terminal 604
  • transmission of audiovisual information from the portable information terminal 604 to the wireless base station 105 is started, and the video recording is performed.
  • the transmission of audiovisual information from the portable information terminal 604 to the radio base station 105 is stopped.
  • the wireless base station 105 adds a code (time code) representing the time when the wireless base station 105 acquires this audiovisual information to the transmitted audiovisual information, and then the Internet 10 0.
  • a code time code representing the time when the wireless base station 105 acquires this audiovisual information to the transmitted audiovisual information
  • the Internet 10 Send to storage server 606 as leisure information via 0.
  • the leisure information sent is recorded.
  • time information for a still image is stored on the storage server 606 by the same communication as described above.
  • a reference request signal of stored information is further transmitted from portable information terminal 604 to storage server 606 via wireless base station 105, and further via Internet 1000, or
  • the storage server 6 0 6 is authenticated by the personal authentication means described above. It is judged whether or not the access is correct.
  • audiovisual information such as the audiovisual information and time information are displayed on the Internet from the storage server 606.
  • a signal is sent as leisure information.
  • the audiovisual information is displayed on the video and audio monitor 107 or monitor 109. Where the monasteries 1 0 7, 1 0 9
  • time information such as the time when the audiovisual information was acquired at the radio base station 105 is displayed.
  • the still image time information is first referred to, and then this time information and the time information added to the audiovisual information are referred to .
  • the image information of the matching time is transmitted to the portable information terminal 604 or the computer 600 as described above.
  • This memory support system allows the user to easily record audiovisual information at leisure time. Since the recording of the audiovisual information is always performed while the user is enjoying leisure, the user is free from carrying a special device such as a video camera and a still camera, and from the trouble of recording as needed. In addition, the user can easily record a still image by operating the portable information terminal 604. Which function allows the user to have a feeling of use similar to that of a still camera.
  • a time code is uniquely added to the audiovisual information, so that it is possible to expect improvement in editing convenience for the user. Also, since the camera 101 can be detached from the user's body, it is possible to take pictures of the user himself, such as a memorial picture.
  • the personal authentication means provided in the storage server 606 is used as a means for maintaining security when referring to the storage server 606, the present invention Personal authentication means for performing personal authentication in order to determine whether the user wearing the camera 101 and microphone 103 is valid, in addition to the personal authentication means provided in the server 600 Alternatively, the same effect can be obtained by using an individual authentication means provided to maintain security at the time of storage server registration.
  • the camera 101 has a function to detect the mounting state of the camera 101 or the microphone 103 with respect to the user's body or the like. Similar effects can be obtained using sensors that have the function of detecting sensors, tactile sensations, taste information, olfactory information, and physical information (for example, heart rate and body inclination).
  • the audiovisual information in the portable information terminal 604 is additionally described.
  • a code representing an acquisition time here, the input time from the camera 1 0 1, the microphone 1 0 3
  • an acquisition time of the audiovisual information in the accumulation server 6 0 6 here, the accumulation of the accumulated information
  • the same effect can be obtained by using a configuration in which a code representing time is added.
  • the storage server 6 the time when the audiovisual information (video information and sound information) is stored, the time when the audiovisual information is acquired by the portable information terminal 6, etc.
  • Time information is also stored at the same time, and on monitors 107 and 100, time information such as the time when the audiovisual information is stored and the time when the information is acquired by portable information terminal 64 is displayed. It becomes.
  • FIG. 8 shows a principal block diagram of the seventh embodiment of the present invention.
  • the camera 101 and the microphone 103 are further mounted on a human body, and a sensor 302 for detecting the health condition of the human body is provided.
  • the accumulated information accumulated in the server 706 is different in that the information on the health condition is included.
  • health conditions such as blood pressure, pulse, body temperature, and blood sugar level obtained by the sensor 302 are constantly recorded, so the management of the user's past health status and the current health status are monitored. The effect of being able to
  • a camera 1 0 1 and a microphone 1 0 3 attached to the user's body are connected to a portable information terminal 7 0 4 possessed by the user, and the camera 1 0 1 and the microphone 1 0 3
  • a sensor for detecting the wearing condition of the user, tactile information of the user, taste information, olfactory information, physical information (for example, blood pressure, pulse, body temperature, blood sugar level, inclination of the body, etc.) 3 0 2 is connected.
  • the portable information terminal 74 includes a processing unit that processes the physical information to process and create desired information (for example, the one related to the meal and defecation described later).
  • the portable information terminal 704 has a wireless communication function, and exchanges wireless signals with the wireless base station 105.
  • the portable information terminal 74 is provided with switching means (such as an operation display unit) for switching the on / off state of continuous recording by the camera 101, sensor 302, and microphone 103. That is, whether the audiovisual information and the like obtained when the camera 101, the sensor 302, and the microphone 103 are always on by the switching means is continuously stored in the storage server 06 or not. It is a switch.
  • the wireless base station 105 is connected to the Ethernet network 100 and connected to the storage server 76 via the Ethernet network 100 and the portable information terminal 70 It can communicate wirelessly with # 4.
  • the storage server 706 is connected to the Internet 110, and connected to the radio base station 105 via the Internet 100.
  • the storage server 706 is provided with a determination means (such as a personal identification means) for determining whether the access to the storage server 706 is correct or not, and only the access by the user registered in advance is permitted. It is.
  • a monitor 1 0 9 is directly connected to the computer 7 0 9. Also, the computer 7 0 9 is connected to the Internet 1 0 0 0, and the storage server 7 0 0 through this network 1 0 0 It is connected to 6.
  • Audiovisual information (including image information and sound information) obtained by the camera 1 0 1 and the microphone 1 0 3 mounted on the user's body, and information on the user's body obtained by the sensor 3 0 2 (The blood pressure, the pulse, the body temperature, the blood sugar level, etc.) are wirelessly transmitted to the wireless base station 105 after being input to the portable information terminal 704 as the health information of the user.
  • the visual sense information and the like transmitted from the portable information terminal 704 includes information on the mounting state from the sensor 302.
  • the radio base station 105 adds a code (time code) representing the time when the audiovisual information was acquired at the radio base station 105 to the audiovisual information such as the transmitted video and audio. After that, it will be sent to the storage server 700 as health information via the Internet 100.
  • the storage server 706 records the transmitted health information.
  • a reference request signal for stored information is sent via 0, or a reference request signal for stored information is sent via interface 1 0 0 to the storage server 7 0 6 from the communication 7 0 9
  • the storage server 706 determines whether or not the access is legitimate by the above-mentioned personal authentication means.
  • the information on the physical condition of the user, the time information, and the information on the physical condition of the user on the Internet from the storage server 706 according to the reference request.
  • a signal indicating audiovisual information such as information on wearing condition, video and sound is transmitted as health information.
  • the signal sent out on the Ethernet network 100 is sent to the computer 7 0 9 via the internet network 1 0 0, where it is reproduced.
  • the health information is output to the monitor 1009.
  • the monitor 1 0 9 At the same time, time information such as the time when the video and sound included in the health information are acquired at the radio base station 105 is output.
  • This memory support system constantly records the user's health status by blood pressure, pulse, body temperature, blood sugar level, etc. Therefore, it is necessary to monitor the current health status of the user's past health status. It is possible. In addition, it is possible to keep a record of meals and bowel movements from the accumulated viewing and listening information. For example, by referring to the audiovisual information of the meal, the time at which the meal was given can be obtained from the time information added to the audiovisual information, and the contents of the food can be obtained from the video information of the audiovisual information. Can analyze the user's diet.
  • the time of defecation can be obtained from the time information added to the audiovisual information, and the content of the stool can be obtained from the video information of the audiovisual information. This allows analysis of the user's defecation. Furthermore, since the contents of meals can be referred to as images, nutritional analysis can be performed using this.
  • the case where the camera 101, the sensor 302, and the microphone 103 are used as the various information acquisition means of the portable information terminal 74 has been described. Similar effects can be obtained using the Global Positioning System (GPS). Furthermore, having a positioning function that specifies the monitoring position (the position of the user) by the global positioning system can lead to a dangerous state, for example, when the user has a seizure or encounters an accident. In this case, the ambulance can be dispatched to the user immediately by referring to the user's location information.
  • GPS Global Positioning System
  • the personal authentication means provided in the storage server 706 is used as a means for maintaining the security when referring to the storage server 706 has been described.
  • the camera 1 0 1, sensor 3 0 2, microphone 1 0 3 using a personal authentication means for performing personal authentication to determine whether the user wearing the personal computer 3 is valid or a personal authentication means provided for maintaining security at the time of registration of the storage server The same effect can be obtained.
  • the case where the code representing the acquisition time of the audiovisual information is added to the radio base station 105 has been described, but in the present invention, the audiovisual information in the portable information terminal 74 is also added.
  • the storage server 706 the time when the audiovisual information (video information and audio information) and the like is stored, and the audiovisual information is acquired in the portable information terminal 604.
  • the time information such as the time is also stored at the same time, and the monitor 107, 1 0 9 displays the time when the audiovisual information is stored, the time when the information is obtained by the portable information terminal 6, etc.
  • the Rukoto is also stored at the same time, and the monitor 107, 1 0 9 displays the time when the audiovisual information is stored, the time when the information is obtained by the portable information terminal 6, etc.
  • FIG. 9 shows a principal block diagram of the eighth embodiment of the present invention.
  • the Global Positioning System GPS
  • the portable information terminal 804 the Global Positioning System
  • the global positioning system is used to store information stored in the storage server 800.
  • the difference is that the position information of the monitoring position acquired by the system is included. According to this configuration, it is also possible to efficiently carry out missing investigations and sudden accident processing when the incident becomes unknown due to some sort of incident occurring in the user.
  • a camera 1 0 1 and a microphone 1 0 3 attached to the user's body are connected to a portable information terminal 8 0 4 possessed by the user, and the camera 1 0 1 and the microphone 1 0 A sensor 102 for detecting the mounting state of 3 is connected.
  • the portable information terminal 800 has a global positioning system (hereinafter referred to as GPS) function and a wireless communication function, and exchanges wireless signals with the wireless base station 105.
  • the portable information terminal 804 is provided with switching means (such as an operation display unit) for switching the on / off state of the constant recording by the camera 101, the sensor 102, and the microphone 103. That is, whether the audiovisual information etc.
  • the wireless base station 105 is connected to the Internet network 100, and connected to the storage server 800 via the Internet network 100, and wireless communication with the portable information terminal 800. It is possible.
  • the accumulation server 800 is connected to the Internet 100, and connected to the wireless base station 105 via the Internet 100.
  • the storage server 806 is provided with a determination means (such as a personal identification means) for determining whether the access to the storage server 806 is correct or not, and only access by a pre-registered user is permitted. It is The monitor 1 0 9 is directly connected to the conference 1 0 9.
  • the computer 8 0 9 is connected to the computer 1 0 0 0 and is connected to the storage server 8 0 6 via the computer 1 0 0 0.
  • the view obtained by the camera 1 0 1 and the microphone 1 0 3 mounted on the user's body Hearing information is input to the portable information terminal 800 as the life recorder information of the user, and then transmitted to the wireless base station 105 wirelessly.
  • the audiovisual information transmitted from the portable information terminal 804 is added with the position information obtained by the GPS function and the information on the mounting state from the sensor 102.
  • the wireless base station 105 adds a code (time code) representing the time at which the audiovisual information was acquired at the wireless base station 105 to the transmitted audiovisual information, and then the Internet. It is transmitted to storage server 800 as life recorder information via 100 0.
  • the storage server 86 records the transmitted life recorder information.
  • the storage server 800 determines whether or not the access is legitimate by the above-mentioned personal identification means.
  • the storage server 8 0 6 responds to the reference request to position information, time information, and mounting by the GPS function on the Internet 1 0 0
  • a signal indicating audiovisual information such as state information, video and sound is transmitted as life recorder information.
  • the signal sent out on the Internet 100 is sent to the computer 8 0 9 via this line 1 0 0, where it is reproduced.
  • the life recorder information is output to the monitor 1009.
  • time information such as the time at which the viewing information and the like included in the life recorder information are acquired at the radio base station 105 is output to the monitor 109.
  • This memory support system like the aircraft's flight recorder, can record all of the audiovisual information representing the user's remarks. Wanawa The audiovisual information by the camera 101, microphone 103, the information on the mounting state by the sensor 102, the position information by the global positioning system, and the time information related to these information are recorded in the storage server 800 As a result, if the user experiences an accident and the message becomes unknown, the above-mentioned audiovisual information, location information, and time information can be used for investigation into a missing investigation or a sudden accident. Furthermore, by using the memory support system, for example, a life insurance company can clearly understand the situation at the time of the accident of the user, efficiently conduct investigations regarding the accident etc., and shorten the time taken for the accident processing. .
  • the personal authentication means provided in storage server 800 is used as a means for maintaining security when storage server 86 is referenced, the present invention
  • the personal authentication is performed to determine whether the user or vehicle wearing the camera 101, microphone 103 and sensor 102 is valid. The same effect can be obtained even by using a personal authentication means for performing authentication, or a personal authentication means provided to maintain security at the time of registration of the storage server.
  • the senor 102 attached to the body of the user the sensor having a function of detecting the attachment state to the body is used.
  • the present invention is not limited to the attachment to the body. The same effect can be obtained by using one that has a function to detect tactile information, taste information, olfactory information, physical information (for example, heart rate, physical inclination etc.) in addition to the condition. is there.
  • the audiovisual information in the portable information terminal 804 is additionally described.
  • the storage server 800 the time when the audiovisual information (video information and audio information) and the like is stored, and the audiovisual information is acquired in the portable information terminal 800.
  • the time information such as the time is also stored at the same time, and the monitor 107, 1 0 9 displays the time when the audiovisual information is stored, the time when the information is acquired by the portable information terminal 8, etc.
  • the Rukoto is also stored at the same time, and the monitor 107, 1 0 9 displays the time when the audiovisual information is stored, the time when the information is acquired by the portable information terminal 8, etc.
  • the time information is added to the video constantly captured at the monitoring position which is arbitrarily displaced and the audiovisual information obtained by the constantly collected sound, and the storage server is added via the communication network.
  • a portable information terminal to be transmitted, audiovisual information and time information transmitted from the portable information terminal are stored, and the storage information reference request including the audiovisual information and time information is transmitted via the communication network.

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Library & Information Science (AREA)
  • Biodiversity & Conservation Biology (AREA)
  • Environmental & Geological Engineering (AREA)
  • Business, Economics & Management (AREA)
  • Life Sciences & Earth Sciences (AREA)
  • Computer Security & Cryptography (AREA)
  • Ecology (AREA)
  • Emergency Management (AREA)
  • Human Computer Interaction (AREA)
  • Environmental Sciences (AREA)
  • Remote Sensing (AREA)
  • General Engineering & Computer Science (AREA)
  • Television Signal Processing For Recording (AREA)
  • Studio Devices (AREA)
  • Closed-Circuit Television Systems (AREA)
  • Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)
  • Mobile Radio Communication Systems (AREA)

Description

明 細 書 記憶支援システム 技術分野
本発明は、 使用者が日常で得た視聴覚情報すベてをタイムコ一ドとともに ネットワーク上の記録媒体に記録し、 また、 過去に記録された任意の視聴覚 情報を使用者に参照させるための記憶支援システムに関するものである。 背景技術
従来、 視聴覚情報を記録する記憶支援システムは、 機器に対する制御情報 を入力する操作入力手段と、 前記制御情報などにより、 複数の機器について の映像および音声の情報から、 いずれかを選択して出力する選択出力手段と、 この選択出力手段からの映像および音声の情報を時間情報とともに記録、 蓄 積する記録蓄積手段とを備え、 工場での機械の監視装置において、 固定され た監視点で収集された視聴覚情報および時刻情報を固設された記録媒体 (記 録蓄積手段) に記録し、 蓄積された視聴覚情報を参照する場合には特に入力 操作を要するものであった (特開平 9 - 2 4 4 7 3 9号公報) 。
また、 この種の記憶支援システムは、 信号機を有する交差点全域を撮影し て映像信号を出力する撮影手段と、 この撮影手段からの映像信号による画像 データに撮影時刻情報および信号機情報を映像的に重畳した合成画像データ を記録して蓄積する第 1の記録蓄積手段と、 この記録蓄積手段から所定の時 間帯の合成画像データを取込み、 取り外し可能な記録媒体に記録する第 2の 記録蓄積手段とを備え、 交差点での事故監視装置において、 交差点の固定さ れた監視点で収集された視聴覚情報および撮影時間情報を固設された記録媒 体 (第 1の記録蓄積手段) に記録し、 こうして蓄積された視聴覚情報の所定 の時間帯分を参照する場合には、 第 1の記録蓄積手段から取出して取り外し 可能な記録媒体 (第 2の記録蓄積手段) に記録するものであった (特開平 6 - 2 0 3 2 9 0号公報) 。
これに対し、 個人については、 日常生活のなかで視聴覚情報を直接かつ随 時記録し続けることはなく、 代わりに、 日常生活で得られた情報を高次に集 約、 統合し、 これらの情報を文字や言語によって間接的に記憶し、 また参照 することで日常の情報処理を行っていた。 例えば、 手帳や個人用情報機器
(商品名: P D A ) や学習ノートなどの使用がこれに相当する。 そして、 画 像情報、 映像情報、 音情報などの視聴覚情報をより忠実に、 また正確に、 個 人用に記録参照するためには、 特別な機械を用いての記録と再生を行う必要 があった。 例えば、 ボイスメモ (商品名) ゃスチルカメラ (商品名) やビデ ォカメラやオーディオレコーダの使用がこれに相当する。
しかし、 このような従来の記憶支援システムでは、 監視点が固定であるこ と、 また、 これに伴い、 記録媒体も固定式の携行が困難なものが使用される こと、 さらに、 蓄積された聴視覚情報の参照は特別の場合にしか行われず、 特殊な装置とその操作を必要とすることなどの条件を有するために、 このよ うな従来の記憶支援システムを民生用に転用して個人の日常生活を記録する ために用いることは困難であるという問題があつた。
また、 前述のような従来の個人用の記録装置では、 この記録装置のもつ記 録媒体の容量の制約や、 携行性などの制約のために、 記録者の判断によって 記録を始めるタイミングが決定される場合がほとんどである。 よって、 これ らの装置を用いた、 突発的な出来事についての視聴覚情報の直接記録は困難 であるという問題があつた。 発明の開示
本発明は、 記録媒体の大小および監視点の変位による制限を克服して、 使 用者が日常生活において知覚する視聴覚情報と、 この視聴覚情報を知覚した 際の時刻情報とを常時記録することが可能であり、 また、 使用者が過去に知 覚した任意の視聴覚情報を参照することが可能な記憶支援システムを提供す るものである。
本発明の記憶支援システムでは、 携帯端末が、 任意に変位される位置で撮 影された映像および収集された音響により映像情報および音響情報を含む視 聴覚情報を作成し、 この視聴覚情報を通信網を介して伝送し、 蓄積サーバが、 携帯端末から伝送された視聴覚情報に時刻情報を付随させて蓄積情報として 蓄積するとともに、 時刻情報を含む参照要求に応じて蓄積情報を通信網を介 して伝送するようにした。 図面の簡単な説明
図 1は、 本発明の第 1の実施の形態の記憶支援システム (記録時) を示す ブロック図である。
図 2は、 本発明の第 1の実施の形態の記憶支援システム (参照時) を示す ブロヅク図である。
図 3は、 本発明の第 2の実施の形態の記憶支援システムを示すブロック図 である。
図 4は、 本発明の第 3の実施の形態の記憶支援システムを示すプロック図 である。
図 5は、 本発明の第 4の実施の形態の記憶支援システムを示すプロック図 である。
図 6は、 本発明の第 5の実施の形態の記憶支援システムを示すプロック図 である。
図 Ίは、 本発明の第 6の実施の形態の記憶支援システムを示すプロック図 である。
図 8は、 本発明の第 7の実施の形態の記憶支援システムを示すブロック図 である。
図 9は、 本発明の第 8の実施の形態の記憶支援システムを示すプロック図 である。 発明を実施するための最良の形態
以下、 本発明の実施の形態について図面を参照して詳細に説明する。 (第 1の実施の形態)
図 1、 図 2に示すように、 本発明の第 1の実施の形態の記憶支援システム は、 任意に変位される監視位置の状況を撮影して映像信号を出力するカメラ 1 0 1と、 任意に変位される監視位置の音響を集音して音響信号を出力する マイクロホン 1 0 3と、 無線通信機能を有し、 カメラ 1 0 1およびマイクロ ホン 1 0 3からの映像信号および音響信号を入力し、 この映像信号および音 声信号により作成した映像情報および音響情報を含む視聴覚情報を無線基地 局 1 0 5に無線送信するとともに、 前記視聴覚情報を含む情報が蓄積された 蓄積サーバ 1 0 6に対する参照要求を無線基地局 1 0 5に送信し、 無線基地 局 1 0 5から送信された前記視聴覚情報を含む蓄積情報を再生する携帯情報 端末 1 0 4と、 無線通信機能を有するとともにインタ一ネット 1 0 0に接続 され、 携帯情報端末 1 0 4から無線送信された前記視聴覚情報に時刻情報を 付加し、 イン夕ーネット 1 0 0を介して蓄積サーバ 1 0 6に送信するととも に、 蓄積サーバ 1 0 6に対する参照要求をインターネット 1 0 0を介して蓄 積サーバ 1 0 6に送信し、 さらに蓄積サーバ 1 0 6からの前記視聴覚情報を 含む蓄積情報を携帯情報端末 1 0 4に無線送信する無線基地局 1 0 5と、 ィ ン夕一ネヅト 1 0 0に接続されており、 無線基地局 1 0 5から送信された前 記視聴覚情報および前記時刻情報を含む情報を蓄積するとともに、 ィン夕ー ネット 1 0 0を介して送信された参照要求により、 前記視聴覚情報および前 記時刻情報を含む蓄積情報を無線基地局 1 0 5に送信する蓄積サーバ 1 0 6 とを設けたものである。
なお、 図 1は各種情報を記録するための接続状態を示し、 図 2は記録され た各種情報を参照するための接続状態を示す。 また、 以下の説明では、 情報 の遣り取りに関する全ての通信について暗号化などの処理が施され、 この処 理によってデータの改竄や成りすましによる不正な操作が防止されるものと する。
図 1において、 使用者の持つ携帯情報端末 1 0 4は、 任意に移動される監 視位置 (例えば、 使用者の身体) に設けられたカメラ 1 0 1、 センサ 1 0 2、 マイクロホン 1 0 3と接続されるとともに、 無線通信機能を有し、 無線基地 局 1 0 5と無線信号を遣り取りするものである。 また、 カメラ 1 0 1は、 例 えば、 使用者の身体に装着されて使用者の周囲の状況を撮影し、 携帯情報端 末 1 0 4に対して映像信号を出力するものである。 また、 マイクロホン 1 0 3は、 例えば、 使用者の身体に装着されて使用者の周囲の音響を集音し、 携 帯情報端末 1 0 4に対して音響信号を出力するものである。 また、 センサ 1 0 2は、 カメラ 1 0 1およびマイクロホン 1 0 3の使用者の身体に対する装 着状態を検知し、 携帯情報端末 1 0 4に対して検知信号を出力するものであ る。 また、 携帯情報端末 1 0 4には、 カメラ 1 0 1、 センサ 1 0 2、 マイク 口ホン 1 0 3による常時記録のオンオフ状態を切替える切替手段 (操作表示 部など) を備えている。 すなわち、 前記切替手段により、 カメラ 1 0 1、 セ ンサ 1 0 2、 マイクロホン 1 0 3を常時オン状態にして得られた視聴覚情報 などを連続して蓄積サーバ 1 0 6に蓄積するか否かを切替えるものである。 無線基地局 1 0 5は、 インターネット 1 0 0に接続され、 このィン夕一ネヅ ト 1 0 0を介して蓄積サーバ 1 0 6と接続されるとともに、 携帯情報端末 1 0 4と無線通信可能なものである。 蓄積サーバ 1 0 6は、 イン夕一ネヅト 1 0 0に接続され、 イン夕一ネヅト 1 0 0を介して無線基地局 1 0 5と接続さ れるものである。 また、 蓄積サーバ 1 0 6には、 この蓄積サーバ 1 0 6に対 するアクセスの正否を判断する判断手段 (個人認証手段) を備え、 予め登録 された使用者によるアクセスのみを許可するものである。
次に、 本実施の形態の記憶支援システムの記録動作を説明する。 使用者の 持つ携帯情報端末 1 0 4がカメラ 1 0 1やマイクロホン 1 0 3からの視聴覚 情報 (映像情報や音響情報を含む) を受け取ると、 この映像情報や音響情報 を無線通信によって無線基地局 1 0 5に送信する。 なお、 センサ 1 0 2によ るカメラ 1 0 1およびマイクロホン 1 0 3の装着状態の情報も無線通信によ つて無線基地局 1 0 5に送信される。 次いで、 無線基地局 1 0 5は、 携帯情 報端末 1 0 4から送信された前記映像情報や前記音響情報に時刻情報を表す 符号 (夕ィムコード) を付加して蓄積サーバ 1 0 6に対し、 インターネット 1 0 0を介して送信する。 次いで、 蓄積サーバ 1 0 6では、 無線基地局 1 0 5から送られてきた前記映像情報や前記音響情報を随時蓄積する。 また、 蓄 積サーバ 1 0 6では、 前記映像情報、 前記音響情報、 前記装着状態を示す情 報などが含まれるとともに、 これらが無線基地局 1 0 5で取得された時刻な どの時刻情報も同時に蓄積する。
図 2において、 モニタ 1 0 7は、 携帯情報端末 1 0 4に直接接続され、 こ の携帯情報端末 1 0 4によって表示制御されるものである。 コンピュータ 1 1 0は、 イン夕一ネット 1 0 0に接続され、 このイン夕一ネット 1 0 0を介 して蓄積サーバ 1 0 6に接続されるものである。 モニタ 1 0 9は、 コンビュ —夕 1 1 0に直接接続され、 このコンピュータ 1 1 0によって表示制御され るものである。
次に、 本実施の形態の記憶支援システムの参照動作を説明する。 使用者が 持つ携帯情報端末 1 0 4から蓄積サーバ 1 0 6に対し、 無線基地局 1 0 5を 経由し、 さらにインターネット 1 0 0を介して蓄積情報の参照要求信号が送 信されるか、 あるいはコンピュータ 1 1 0から蓄積サーバ 1 0 6に対し、 ィ ン夕一ネット 1 0 0を介して蓄積情報の参照要求信号が送信された場合に、 蓄積サーバ 1 0 6は、 前述の個人認証手段によって正当なアクセスであるか 否かを判断する。 ここで、 正当なアクセスであると判断された場合に、 蓄積 サーバ 1 0 6は、 前記参照要求に応じてインターネット 1 0 0上に前述の映 像と音響やカメラ 1 0 1およびマイクロホン 1 0 3装着状態などの蓄積情報 を示す信号を送信する。 こうしてインターネット 1 0 0上に送信された信号 は、 このイン夕一ネット 1 0 0を介し、 無線基地局 1 0 5を経由して携帯情 報端末 1 0 4に送信されるか、 あるいはイン夕一ネヅト 1 0 0を介してコン ピュー夕 1 1 0に送信され、 携帯情報端末 1 0 4あるいはコンピュータ 1 1 0で再生処理がなされる。 こうして再生処理がなされた後、 当該蓄積情報は モニタ 1 0 7あるいはモニタ 1 0 9に表示される。 ここで、 モニタ 1 0 7、 1 0 9には、 当該蓄積情報とともに、 当該蓄積情報が無線基地局 1 0 5で取 得された時刻などの時刻情報が表示される。
以上のように、 本発明の第 1の実施の形態の記憶支援システムは、 任意に 変位される監視位置の状況を撮影して映像信号を出力するカメラ 1 0 1と、 変位される監視位置の音響を集音して音響信号を出力するマイクロホン 1 0 3と、 無線通信機能を有し、 カメラ 1 0 1およびマイクロホン 1 0 3からの 映像信号および音響信号を入力し、 この映像信号および音声信号により作成 した映像情報および音響情報を含む視聴覚情報を無線基地局 1 0 5に無線送 信するとともに、 前記視聴覚情報を含む情報が蓄積された蓄積サーバ 1 0 6 に対する参照要求を無線基地局 1 0 5に送信し、 無線基地局 1 0 5から送信 された前記視聴覚情報を含む蓄積情報を再生する携帯情報端末 1 0 4と、 無 線通信機能を有するとともにィン夕一ネット 1 0 0に接続され、 携帯情報端 末 1 0 4から無線送信された前記視聴覚情報に時刻情報を付加し、 ィン夕一 ネット 1 0 0を介して蓄積サーバ 1 0 6に送信するとともに、 蓄積サーバ 1 0 6に対する参照要求をィン夕一ネヅト 1 0 0を介して蓄積サーバ 1 0 6に 送信し、 さらに蓄積サーバ 1 0 6からの前記視聴覚情報を含む蓄積情報を携 帯情報端末 1 0 4に無線送信する無線基地局 1 0 5と、 ィン夕ーネット 1 0 0に接続されており、 無線基地局 1 0 5から送信された前記視聴覚情報およ び前記時刻情報を含む情報を蓄積するとともに、 イン夕一ネット 1 0 0を介 して送信された参照要求により、 前記視聴覚情報および前記時刻情報を含む 蓄積情報を無線基地局 1 0 5に送信する蓄積サーバ 1 0 6とを設けているの で、 人体に装着したカメラ 1 0 1とマイクロホン 1 0 3によって得られた視 聴覚情報を常に記録することにより、 この視聴覚情報の使用者は、 記録を始 めるための状況の判断と機材の操作の手間から開放される。 さらに、 使用者 にとつて不測の事態が起こつた場合であっても、 そのときの視聴覚情報は全 て記録される。 また、 視聴覚情報の記録媒体 (蓄積サーバ 1 0 6に含まれ る) をネットワーク上におくことで、 携行する記録媒体 (携帯情報端末 1 0 4に含まれる) の容量による記録可能な情報量の制限から開放されるととも に、 記録媒体の破損等による情報消失の危険性からも開放される。 さらに、 蓄積サーバ 1 0 6において視聴覚情報の記録とともに、 これが記録された時 刻などの時刻情報が記録されるため、 蓄積サーバ 1 0 6などに蓄積された視 聴覚情報の管理について、 記録時刻などの時刻情報を用いた管理の一元化が 可能となる。 これにより、 使用者が必要な視聴覚情報を見つけ出せなくなり、 結果として視聴覚情報を紛失したのと同じ状況に陥るなどの事態を回避でき さらに、 本発明の第 1の実施の形態の記憶支援システムは、 イン夕一ネッ ト 1 0 0に接続され、 前記参照要求により蓄積サーバ 1 0 6から送信された 前記視聴覚情報および前記時刻情報を含む蓄積情報を再生するコンピュータ 1 1 0を設けているので、 カメラ 1 0 1およびマイクロホン 1 0 3を装着し た使用者以外が、 ィン夕一ネット 1 0 0を介して前記使用者の視聴覚情報を 監視することもできる。
なお、 上記実施の形態では蓄積サーバ 1 0 6参照時のセキュリティを維持 するための手段として、 蓄積サーバ 1 0 6に設けられた前記認証手段を用い た場合について説明したが、 本発明は蓄積サーバ 1 0 5に設けられた前記認 証手段のほかに、 カメラ 1 0 1、 マイクロホン 1 0 3およびセンサ 1 0 2を 装着する使用者が正当か否かを判断するために個人認証を行う個人認証手段、 あるいは蓄積サーバ 1 0 6登録時のセキュリティを維持するために設けられ た個人認証手段などを用いても同様の効果が得られるものである。
また、 上記実施の形態では使用者の身体などに装着されたセンサ 1 0 2と して身体に対する装着状態を検知する機能を有するものを用いた場合につい て説明したが、 本発明は身体に対する装着状態のほかに、 触覚情報、 味覚情 報、 嗅覚情報、 身体情報 (例えば、 心拍数や身体の傾き具合など) を検知す る機能を有するものなどを用いても同様の効果が得られるものである。
また、 上記実施の形態では無線基地局 1 0 5において前記視聴覚情報の取 得時刻を表す符号を付加する場合について説明したが、 本発明はこのほかに、 携帯情報端末 1 0 4において前記視聴覚情報の取得時刻 (ここでは、 カメラ
1 0 1、 センサ 1 0 2、 マイクロホン 1 0 3からの入力時刻) を表す符号を 付加する構成、 蓄積サーバ 1 0 6において前記視聴覚情報の取得時刻 (ここ では、 前記蓄積情報の蓄積時刻) を表す符号を付加する構成などを用いても 同様の効果が得られるものである。 このような構成を用いた場合に、 蓄積サ
—バ 1 0 6では、 当該視聴覚情報 (映像情報や音響情報) などが蓄積された 時刻、 当該視聴覚情報が携帯情報端末 1 0 4において取得された時刻などの 時刻情報も同時に蓄積され、 モニタ 1 0 7、 1 0 9では、 当該視聴覚情報が 蓄積された時刻、 当該情報が携帯情報端末 1 0 4において取得された時刻な どの時刻情報が表示されることとなる。
ここで、 任意に変位される監視位置で常時撮影された映像および常時収集 された音響により、 映像情報および音響情報を含む視聴覚情報を作成して、 この視聴覚情報に時刻情報を付加し、 無線通信網ゃィン夕ーネット 1 0 0な どの通信網を介して伝送する携帯情報端末 1 0 4と、 この携帯情報端末 1 0 4から前記通信網を介して伝送された前記視聴覚情報および時刻情報を蓄積 するとともに、 前記視聴覚情報および時刻情報を含む蓄積情報の参照要求に より、 前記通信網を介して前記蓄積情報を伝送する蓄積サーバ 1 0 6とを設 けた構成では、 この構成により、 使用者が日常生活において知覚する視聴覚 情報を常時記録および蓄積するとともに、 前記視聴覚情報を知覚した際の時 刻などの時刻情報を利用して使用者が過去に知覚した任意の視聴覚情報を参 照することができる。 なお、 前述の音響情報を記録する場合に、 モノラル方式の録音だけでなく、 ステレオマイクによるステレオ方式や、 両耳介の中に設置したマイクによる バイノーラル録音などのサラウンド方式などを用いると、 より高い臨場感を もった音響情報の記録が可能となる。 また、 録音記録の参照時に受聴された 音像の位置などを判定することが可能となる。 さらに、 視覚情報の記録をス テレオ化することで、 使用者の視覚情報に距離情報を加えたかたちでの記録 を可能とする実施の形態も容易に実現できる。
(第 2の実施の形態)
図 3は本発明の第 2の実施の形態の要部ブロック図を示す。 これは第 1の 実施の形態とは、 さらにカメラ 1 0 1およびマイクロホン 1 0 3は、 防御対 象の人体に装着されており、 蓄積サーバ 2 0 6に蓄積された蓄積情報はセキ ユリティ情報として用いられる点が相違している。 この構成によれば、 日常 生活中の使用者位置での視聴覚情報が常時記録され、 蓄積サーバ 2 0 6上に 保存されているために、 使用者はこの視聴覚情報をセキュリティ情報として 用いることができるという効果も得られる。 また、 前記視聴覚情報は、 使用 者がこれを知覚した時刻とともに蓄積サーバ 2 0 6上に記録されており、 ま た、 前記視聴覚情報は蓄積サーバ 2 0 6上で一括管理されているために、 前 記視聴覚情報の改竄を防止し易いという効果も得られる。
図 3において、 使用者の持つ携帯情報端末 2 0 4には、 前記使用者の身体 に装着されたカメラ 1 0 1およびマイクロホン 1 0 3が接続されるとともに、 このカメラ 1 0 1およびマイクロホン 1 0 3の装着状態を検出するためのセ ンサ 1 0 2が接続されている。 また、 携帯倩報端末 2 0 4には、 カメラ 1 0 1、 センサ 1 0 2、 マイクロホン 1 0 3による常時記録のオンオフ状態を切 替える切替手段 (操作表示部など) を備えている。 すなわち、 前記切替手段 により、 カメラ 1 0 1、 センサ 1 0 2、 マイクロホン 1 0 3を常時オン状態 にして得られた視聴覚情報などを連続して蓄積サーバ 2 0 6に蓄積するか否 かを切替えるものである。 また、 携帯情報端末 2 0 4にはモニタ 1 0 7が直 接接続されている。 さらに、 携帯情報端末 2 0 4は無線通信機能を有し、 無 線基地局 1 0 5との間で無線信号を遣り取りするものである。 無線基地局 1 0 5は、 インターネット 1 0 0に接続され、 このイン夕一ネット 1 0◦を介 して蓄積サーバ 2 0 6と接続されるとともに、 携帯情報端末 1 0 4と無線通 信可能なものである。 蓄積サーバ 2 0 6は、 インタ一ネヅ ト 1 0 0に接続さ れ、 イン夕一ネット 1 0 0を介して無線基地局 1 0 5と接続されるものであ る。 また、 蓄積サーバ 2 0 6には、 この蓄積サーバ 2 0 6に対するアクセス の正否を判断する判断手段 (個人認証手段) を備え、 予め登録された使用者 によるアクセスのみを許可するものである。 コンピュータ 2 0 9には、 モニ 夕 1 0 9が直接接続されている。 また、 コンピュータ 2 0 9は、 イン夕一ネ ヅ ト 1 0 0に接続され、 このインタ一ネット 1 0 0を介して蓄積サーバ 2 0 6に接続されるものである。
次に、 本実施の形態の記憶支援システムの記録動作を説明する。 使用者の 身体に装着されたカメラ 1 0 1およびマイクロホン 1 0 3により得られた視 聴覚情報は、 携帯情報端末 2 0 4にセキュリティ情報として入力された後、 無線基地局 1 0 5に無線送信される。 なお、 カメラ 1 0 1とマイクロホン 1 0 3の付け替えなどの不正を防く、ために、 携帯情報端末 2 0 4より送信され る視聴覚情報にはセンサ 1 0 2からの装着状態の情報が含まれる。 次いで、 無線基地局 1 0 5は、 送信されてきた視聴覚情報に、 この視聴覚情報を無線 基地局 1 0 5が取得した時刻を表す符号 (タイムコード) を付加してイン夕 ーネヅト 1 0 0を介し、 セキュリティ情報として蓄積サーバ 2 0 6に送信す る。 この蓄積サーバ 2 0 6では、 送信されてきたセキュリティ情報を記録す る。
次に、 本実施の形態の記憶支援システムの参照動作を説明する。 携帯情報 端末 2 0 4から蓄積サーバ 2 0 6に対し、 無線基地局 1 0 5を経由し、 さら にイン夕一ネット 1 0 0を介して蓄積情報の参照要求信号が送信されるか、 あるいはコンピュータ 1 1 0から蓄積サーバ 2 0 6に対し、 ィン夕一ネヅト 1 0 0を介して蓄積情報の参照要求信号が送信された場合に、 蓄積サーバ 2 0 6は、 前述の個人認証手段によって正当なアクセスであるか否かを判断す る。 ここで、 正当なアクセスであると判断された場合に、 この参照要求に応 じて蓄積サーバ 2 0 6からイン夕一ネヅト 1 0 0上に前記映像音響などの視 聴覚情報および時刻情報を示す信号がセキュリティ情報として送信される。 こうしてィン夕ーネット 1 0 0上に送出された信号は、 このインターネット 1 0 0を介し、 無線基地局 1 0 5を経由して携帯情報端末 2 0 4に送信され るか、 あるいはィン夕一ネヅト 1 0 0を介してコンピュータ 2 0 9に送信さ れ、 携帯情報端末 2 0 4あるいはコンピュータ 2 0 9で再生処理がなされる c こうして再生処理がなされた後、 当該視聴覚情報はモニタ 1 0 7あるいはモ 二夕 1 0 9に表示される。 ここで、 モニタ 1 0 7、 1 0 9には、 当該視聴覚 情報とともに、 当該視聴覚情報が携帯情報端末 2 0 4において取得された時 刻などの時刻情報が表示される。
ここで、 本実施の形態の記憶支援システムを使用した場合の効果について 述べる。 本実施の形態の記憶支援システムを使用する場合に、 使用者は日常 生活中において視聴覚情報の常時記録を行うことができる。 よって、 使用者 になんらかの事件が発生した時の視聴覚情報も蓄積サーバ 2 0 6上に保存さ れているために、 使用者は前記視聴覚情報をセキュリティ上の記録あるいは 事件の証拠として用いることができる。 なお、 前記視聴覚情報は、 使用者が これを知覚した時刻とともに蓄積サーバ 2 0 6上に記録されており、 また、 前記視聴覚情報の蓄積は蓄積サーバ 2 0 6上で一括して行なわれているため に、 前記視聴覚情報の改竄を防止することが容易である。
このシステム構成上の特徴により、 蓄積サーバ 2 0 6上に記録されている 視聴覚情報の証拠としての信頼性を確保でき、 記録されている視聴覚情報を 裁判における証拠として使用することが可能となる。 また、 前記視聴覚情報 を証拠として扱うことが可能であるために、 使用者が裁判における原告や被 告である場合、 使用者が証人として証言を行う場合などについても、 前記視 聴覚情報を使用できる。 また、 使用者の希望次第で、 警察による事件の捜査 や保険の調査に協力することも可能である。
なお、 上記実施の形態では蓄積サーバ 2 0 6参照時のセキュリティを維持 するための手段として、 蓄積サーバ 2 .0 6に設けられた前記個人認証手段を 用いた場合について説明したが、 本発明は蓄積サーバ 2 0 6に設けられた前 記個人認証手段のほかに、 カメラ 1 0 1、 マイクロホン 1 0 3およびセンサ 1 0 2を装着する使用者が正当か否かを判断するために個人認証を行う個人 認証手段、 あるいは蓄積サーバ 2 0 6登録時のセキュリティを維持するため に設けられた個人認証手段などを用いても同様の効果が得られるものである。 また、 上記実施の形態では使用者の身体などに装着されたセンサ 1 0 2と して身体に対する装着状態を検知する機能を有するものを用いた場合につい て説明したが、 本発明は身体に対する装着状態のほかに、 触覚情報、 味覚倩 報、 嗅覚情報、 身体情報 (例えば、 心拍数や身体の傾き具合など) を検知す る機能を有するものなどを用いても同様の効果が得られるものである。
また、 上記実施の形態では無線基地局 1 0 5において前記視聴覚情報の取 得時刻を表す符号を付加する場合について説明したが、 本発明はこのほかに、 携帯情報端末 2 0 4において前記視聴覚情報の取得時刻 (ここでは、 カメラ 1 0 1、 センサ 1 0 2、 マイクロホン 1 0 3からの入力時刻) を表す符号を 付加する構成、 蓄積サーバ 2 0 6において前記視聴覚情報の取得時刻 (ここ では、 前記蓄積情報の蓄積時刻) を表す符号を付加する構成などを用いても 同様の効果が得られるものである。 このような構成を用いた場合に、 蓄積サ —バ 2 0 6では、 当該視聴覚情報 (映像情報や音響情報) などが蓄積された 時刻、 当該視聴覚情報が携帯情報端末 2 0 4において取得された時刻などの 時刻情報も同時に蓄積され、 モニタ 1 0 7、 1 0 9では、 当該視聴覚情報が 蓄積された時刻、 当該情報が携帯情報端末 2 0 4において取得された時刻な どの時刻情報が表示されることとなる。 なお、 前述の音響情報を記録する場合に、 モノラル方式の録音だけでなく、 ステレオマイクによるステレオ方式や、 両耳介の中に設置したマイクによる バイノーラル録音などのサラウンド方式などを用いると、 より高い臨場感を もった音響情報の記録が可能となる。 また、 録音記録の参照時に受聴された 音像の位置などを判定することが可能となる。 さらに、 視覚情報の記録をス テレオ化することで、 使用者の視覚情報に距離情報を加えたかたちでの記録 を可能とする実施の形態も容易に実現できる。
(第 3の実施の形態)
図 4は本発明の第 3の実施の形態の要部ブロック図を示す。 これは第 1の 実施の形態とは、 さらにカメラ 1 0 1およびマイクロホン 1 0 3は、 車両ま たはこの車両内の人体に装着されており、 前記車両のブレーキの状態、 走行 速度および加速度を含む車両状態を検知するセンサ 2 0 2を設け、 蓄積サー ノ 3 0 6に蓄積された蓄積情報には前記車両状態の情報が含まれる点が相違 している。 この構成によれば、 使用者の車両やバイクの運転を支援し、 使用 者とその他の人々の交通安全に寄与するという効果も得られる。
図 4において、 使用者または車両に装着された携帯情報端末 3 0 4には、 前記使用者または前記車両に装着されたカメラ 1 0 1およびマイクロホン 1 0 3が接続されるとともに、 前記車両の状態 (ブレーキの状態、 走行速度お よび加速度など) を検知するセンサ 2 0 2が接続されている。 また、 携帯情 報端末 3 0 4には、 カメラ 1 0 1、 センサ 2 0 2、 マイクロホン 1 0 3によ る常時記録のオンオフ状態を切替える切替手段 (操作表示部など) を備えて いる。 すなわち、 前記切替手段により、 カメラ 1 0 1、 センサ 2 0 2、 マイ クロホン 1 0 3を常時オン状態にして得られた視聴覚情報などを連続して蓄 積サーバ 3 0 6に蓄獱するか否かを切替えるものである。 また、 携帯情報端 末 3 0 4にはモニタ 1 0 7が直接接続されている。 さらに、 携帯情報端末 3 0 4は無線通信機能を有し、 無線基地局 1 0 5との間で無線信号を遣り取り するものである。 無線基地局 1 0 5は、 イン夕一ネヅト 1 0 0に接続され、 このイン夕一ネヅ ト 1 0 0を介して蓄積サーバ 3 0 6と接続されるとともに、 携帯情報端末 3 0 4と無線通信可能なものである。 蓄積サーバ 3 0 6は、 ィ ン夕一ネット 1 0 0に接続され、 イン夕一ネット 1 0 0を介して無線基地局 1 0 5と接続されるものである。 また、 蓄積サーバ 3 0 6には、 この蓄積サ —バ 3 0 6に対するアクセスの正否を判断する判断手段 (個人認証手段) を 備え、 予め登録された使用者によるアクセスのみを許可するものである。 コンピュータ 3 0 9には、 モニタ 1 0 9が直接接続されている。 また、 コン ピュ一夕 3 0 9は、 イン夕一ネット 1 0 0に接続され、 このイン夕一ネット 1 0 0を介して蓄積サーバ 3 0 6に接続されるものである。
次に、 本実施の形態の記憶支援システムの記録動作を説明する。 使用者ま たは車両に装着されたカメラ 1 0 1およびマイクロホン 1 0 3により得られ た視聴覚情報 (映像情報や音響情報を含む) は、 携帯情報端末 3 0 4に運転 情報として入力された後、 無線基地局 1 0 5に無線送信される。 ここで、 携 帯情報端末 3 0 4より送信される視聴覚情報には、 センサ 1 0 2からの車両 状態 (ブレーキの状態や車両の速度および加速度など) を示す数値の情報が 含まれる。 次いで、 無線基地局 1 0 5は、 送信されてきた視聴覚情報にこの 視聴覚情報が取得された時刻を表す符号 (タイムコード) を付加してイン夕 一ネット 1 0 0を介し、 運転情報として蓄積サーバ 3 0 6に送信する。 この 蓄積サーバ 3 0 6では、 送信されてきた運転情報を記録する。
次に、 本実施の形態の記憶支援システムの参照動作を説明する。 携帯情報 端末 3 0 4から蓄積サーバ 3 0 6に対し、 無線基地局 1 0 5を経由し、 さら にインターネット 1 0 0を介して蓄積情報の参照要求信号が送信されるか、 あるいはコンピュータ 1 1 0から蓄積サーバ 3 0 6に対し、 イン夕一ネット 1 0 0を介して蓄積情報の参照要求信号が送信された場合に、 蓄積サーバ 3 0 6は、 前述の個人認証手段によって正当なアクセスであるか否かを判断す る。 ここで、 正当なアクセスであると判断された場合に、 前記参照要求に応 じて蓄積サーバ 3 0 6からインターネット 1 0 0上に前記視聴覚情報 (前記 車両状態を示す数値の情報を含む) および前記時刻などの時刻情報を示す信 号が運転情報として送出される。 こうしてイン夕一ネット 1 0 0上に送出さ れた信号は、 このインタ一ネット 1 0 0を介し、 無線基地局 1 0 5を経由し て携帯情報端末 3 0 4に送信されるか、 あるいはイン夕一ネット 1 0 0を介 してコンピュータ 3 0 9に送信され、 携帯情報端末 3 0 4あるいはコンビュ 一夕 3 0 9で再生処理がなされる。 こうして再生処理がなされた後、 当該視 聴覚情報はモニタ 1 0 7あるいはモニタ 1 0 9に表示される。 ここで、 モニ 夕 1 0 7、 1 0 9には、 当該視聴覚情報とともに、 当該視聴覚情報が無線基 地局 1 0 5において取得された時刻を表わす符号 (タイムコード) などの時 刻情報、 およぴ前記車両状態を示す数値の情報が表示される。
ここで、 本実施の形態の記憶支援システムを使用した場合の効果について 説明する。 本実施の形態によれば、 使用者による自動車や自動 2輪車などの 運転を支援し、 使用者とその他の人々の交通安全に寄与することができる。 まず、 使用者は公開されている他人の運転中の視聴覚情報を参照することが できるため、 運転の事前に目的地までの運転を擬似的に体験することができ る。 つぎに使用者は運転を行う際に、 知覚する視聴覚情報の全てについて記 録をおこなう。 運転をしている際の視聴覚情報が全て記録されているため、 使用者は運転後に運転中の風景を参照することができる。 これにより、 道中 に見かけた店の場所の確認や曲がり損ねた交差点の確認、 危険な運転をおこ なった他の車両やバイクや自転車、 危険な横断を行った歩行者等を運転後に 確認することが可能となる。 本発明により使用者は運転記録の管理を、 運転 日誌だけでなく、 視聴覚情報も用いて行うことが可能となる。 本システムは、 上記実施の形態にあるセキュリティ一システムと同様、 記録された視聴覚情 報を証拠として使用できるという特徴をもち、 この特徴により警官による不 正な交通取締りを防止する効果がある。 また、 この効果は車両の状態を検知 するセンサ 2 0 2の併用によって車両の状態を証拠として記録することで、 より確実なものとなる。 また、 使用者が車両を離れる際に、 携帯情報端末 3 0 4とカメラ 1 0 1とマイクロホン 1 0 3を車両の内部に設置することで、 車両の防犯装置として用いることも可能である。 保険会社が本実施形態の記 憶支援システムを使用することで、 事故に関する記録の参照が可能となりこ れが証拠となりうることから、 事故に関する証言の信憑性を確保することが 容易になる。 これにより、 保険会社は自動車保険の調査に関する手間を軽減 することができる。
なお、 上記実施の形態では蓄積サーバ 3 0 6参照時のセキュリティを維持 するための手段として、 蓄積サーバ 3 0 6に設けられた前記個人認証手段を 用いた場合について説明したが、 本発明は蓄積サーバ 3 0 6に設けられた前 記個人認証手段のほかに、 カメラ 1 0 1、 マイクロホン 1 0 3およびセンサ 2 0 2を装着する使用者または車両が正当か否かを判断するために個人認証 を行う個人認証手段、 あるいは蓄積サーバ 3 0 6登録時のセキュリティを維 持するために設けられた個人認証手段などを用いても同様の効果が得られる ものである。
また、 上記実施の形態では使用者の身体などに装着されたセンサ 2 0 2と して身体に対する装着状態を検知する機能を有するものを用いた場合につい て説明したが、 本発明は身体に対する装着状態のほかに、 触覚情報、 味覚情 報、 嗅覚情報、 身体情報 (例えば、 心拍数や身体の傾き具合など) を検知す る機能を有するものなどを用いても同様の効果が得られるものである。
また、 上記実施の形態では無線基地局 1 0 5において前記視聴覚情報の取 得時刻を表す符号を付加する場合について説明したが、 本発明はこのほかに、 携帯情報端末 3 0 4において前記視聴覚情報の取得時刻 (ここでは、 カメラ 1 0 1、 センサ 2 0 2、 マイクロホン 1 0 3からの入力時刻) を表す符号を 付加する構成、 蓄積サーバ 3 0 6において前記視聴覚情報の取得時刻 (ここ では、 前記蓄積情報の蓄積時刻) を表す符号を付加する構成などを用いても 同様の効果が得られるものである。' このような構成を用いた場合に、 蓄積サ ーバ 3 0 6では、 当該視聴覚情報 (映像情報や音響情報) などが蓄積された 時刻、 当該視聴覚情報が携帯情報端末 3 0 4において取得された時刻などの 時刻情報も同時に蓄積され、 モニタ 1 0 7、 1 0 9では、 当該視聴覚情報が 蓄積された時刻、 当該情報が携帯情報端末 3 0 4において取得された時刻な どの時刻情報が表示されることとなる。
なお、 前述の音響情報を記録する場合に、 モノラル方式の録音だけでなく、 ステレオマイクによるステレオ方式や、 両耳介の中に設置したマイクによる バイノーラル録音などのサラウンド方式などを用いると、 より高い臨場感を もった音響情報の記録が可能となる。 また、 録音記録の参照時に受聴された 音像の位置などを判定することが可能となる。 さらに、 視覚情報の記録をス テレオ化することで、 使用者の視覚情報に距離情報を加えたかたちでの記録 を可能とする実施の形態も容易に実現できる。
(第 4の実施の形態)
図 5は本発明の第 4の実施の形態の要部ブロック図を示す。 これは第 1の 実施の形態とは、 さらにカメラ 1 0 1およびマイクロホン 1 0 3は、 ビジネ ス時の人体に装着されており、 カメラ 1 0 1およびマイクロホン 1 0 3によ り得られた視聴覚情報のビジネス行動、 会話および取引相手を含むビジネス 情報を処理する処理部 (携帯情報端末 4 0 4または蓄積サーバ 4 0 6に含ま れる) を設け、 前記視聴覚情報を含む蓄積情報には、 前記処理部で処理され たビジネス情報が含まれる点が相違している。 この構成によれば、 使用者は 業務中の自分の行動を記録し、 ビジネスに必要な過去の自分の履歴を参照で きるので、 業務の効率化に役立つという効果も得られる。
図 5において、 使用者の持つ携帯情報端末 4 0 4には、 前記使用者の身体 に装着されたカメラ 1 0 1およびマイクロホン 1 0 3が接続されるとともに、 このカメラ 1 0 1およびマイクロホン 1 0 3の装着状態を検出するためのセ ンサ 1 0 2が接続されている。 また、 携帯情報端末 4 0 4には、 カメラ 1 0 1、 センサ 1 0 2、 マイクロホン 1 0 3による常時記録のオンオフ状態を切 替える切替手段 (操作表示部など) を備えている。 すなわち、 前記切替手段 により、 カメラ 1 0 1、 センサ 1 0 2、 マイクロホン 1 0 3を常時オン状態 にして得られた視聴覚情報などを連続して蓄積サーバ 4 0 6に蓄積するか否 かを切替えるものである。 また、 携帯情報端末 4 0 4にはモニタ 1 0 7が直 接接続されている。 さらに、 携帯情報端末 4 0 4は無線通信機能を有し、 無 線基地局 1 0 5との間で無線信号を遣り取りするものである。 無線基地局 1 0 5は、 イン夕一ネット 1 0 0に接続され、 このイン夕一ネット 1 0 0を介 して蓄積サーバ 4 0 6と接続されるとともに、 携帯情報端末 4 0 4と無線通 信可能なものである。 蓄積サーバ 4 0 6は、 イン夕一ネヅト 1 0 0に接続さ れ、 イン夕一ネット 1 0 0を介して無線基地局 1 0 5と接続されるものであ る。 また、 蓄積サーバ 4 0 6には、 この蓄積サーバ 4 0 6に対するアクセス の正否を判断する判断手段 (個人認証手段) を備え、 予め登録された使用者 によるアクセスのみを許可するものである。 コンピュータ 4 0 9には、 モニ 夕 1 0 9が直接接続されている。 また、 コンピュータ 4 0 9は、 イン夕一ネ ヅト 1 0 0に接続され、 このィン夕一ネット 1 0 0を介して蓄積サーバ 4 0 6に接続されるものである。
次に、 本実施の形態の記憶支援システムの記録動作を説明する。 使用者の 身体に装着されたカメラ 1 0 1およびマイクロホン 1 0 3により得られた視 聴覚情報 (映像情報および音響情報を含む) は、 携帯情報端末 4 0 4にビジ ネス情報として入力された後、 無線基地局 1 0 5に無線送信される。 なお、 カメラ 1 0 1とマイクロホン 1 0 3の付け替えなどの不正を防く、ために、 携 帯情報端末 4 0 4より送信される視聴覚情報にはセンサ 1 0 2からの装着状 態の情報が含まれる。 次いで、 無線基地局 1 0 5は、 送信されてきた視聴覚 情報に、 この視聴覚情報が無線基地局 1 0 5において取得された時刻を表す 符号 (タイムコード) を付加してインターネヅト 1 0 0を介し、 ビジネス情 報として蓄積サーバ 4 0 6に送信する。 この蓄積サーバ 4 0 6では、 送信さ れてきたビジネス情報を記録する。
次に、 本実施の形態の記憶支援システムの参照動作を説明する。 携帯情報 端末 4 0 4から蓄積サーバ 4 0 6に対し、 無線基地局 1 0 5を経由し、 さら にィン夕ーネット 1 0 0を介して蓄積情報の参照要求信号が送信されるか、 あるいはコンピュータ 1 1 0から蓄積サ一バ 4 0 6に対し、 イン夕一ネット 1 0◦を介して蓄積情報の参照要求信号が送信された場合に、 蓄積サーバ 4 0 6は、 前述の認証手段によって正当なアクセスであるか否かを判断する。 ここで、 正当なアクセスであると判断された場合に、 蓄積サーバ 4 0 6は、 前記参照要求に応じて蓄積サーバ 4 0 6からインターネット 1 0 0上に映像 および音響などの視聴覚情報 (装着状態の情報を含む) および時刻情報を示 す信号がビジネス情報として送出される。 こうしてィン夕ーネッ卜 1 0 0上 に送出された信号は、 このィン夕ーネット 1 0◦を介し、 無線基地局 1 0 5 を経由して携帯情報端末 4 0 4に送信されるか、 あるいはイン夕一ネット 1 0 0を介してコンピュータ 4 0 9に送信され、 携帯情報端末 4 0 4あるいは コンビュ一夕 4 0 9で再生処理がなされる。 こうして再生処理がなされた後、 当該視聴覚情報はモニタ 1 0 7あるいはモニタ 1 0 9に表示される。 ここで、 モニタ 1 0 7、 1 0 9には、 装着状態の情報を含む当該視聴覚情報とともに、 当該視聴覚情報が無線基地局 1 0 5で取得された時刻などの時刻情報が表示 される。
ここで、 本実施の形態の記憶支援システムを使用した場合の効果について 説明する。 本実施の形態によれば、 使用者は業務中の自分の行動を記録し、 さらにビジネスに必要な過去の自分の履歴を参照することができる。 一般に、 ビジネスにおいては名刺交換の習慣などにみられるように、 取引相手の顔を 覚えることが重要である。 本実施の形態の記憶支援システムにより、 使用者 は 1度しか会っていない相手の顔や名前を必要に応じて何度でも確認できる。 例えば、 カメラ 1 0 1を装着した使用者が、 名刺を交換した直後にこの名刺 を見ることで、 後に前記視聴覚情報の参照を行う際に相手の顔と名刺を両方 確認することができる。 これにより、 本実施の形態の記憶支援システムによ るビジネス相手に関する記憶支援の効果がさらに高まる。 また例えば、 上司 が部下のビジネスの履歴を、 前記視聴覚情報を参照して確認することも可能 である。 さらに、 カメラ 1 0 1とマイクロホン 1 0 3の装着状態を検出する センサ 1 0 2の併用によって、 記録された視聴覚情報の信頼性を向上させる ことにより、 口約束の記録をもつて簡易な契約を行うことが可能である。 なお、 上記実施の形態では蓄積サーバ 4 0 6参照時のセキュリティを維持 するための手段として、 蓄積サーバ 4 0 6に設けられた前記個人認証手段を 用いた場合について説明したが、 本発明は蓄積サーバ 4 0 6に設けられた前 記個人認証手段のほかに、 カメラ 1 0 1、 マイクロホン 1 0 3およびセンサ 1 0 2を装着する使用者または車両が正当か否かを判断するために個人認証 を行う個人認証手段、 あるいは蓄積サーバ 4 0 6登録時のセキュリティを維 持するために設けられた個人認証手段などを用いても同様の効果が得られる ものである。
また、 上記実施の形態では使用者の身体などに装着されたセンサ 1 0 2と して身体に対する装着状態を検知する機能を有するものを用いた場合につい て説明したが、 本発明は身体に対する装着状態のほかに、 触覚情報、 味覚情 報、 嗅覚情報、 身体情報 (例えば、 心拍数や身体の傾き具合など) を検知す る機能を有するものなどを用いても同様の効果が得られるものである。
また、 上記実施の形態では無線基地局 1 0 5において前記視聴覚情報の取 得時刻を表す符号を付加する場合について説明したが、 本発明はこのほかに、 携帯情報端末 4 0 4において前記視聴覚情報の取得時刻 (ここでは、 カメラ 1 0 1、 センサ 1 0 2、 マイクロホン 1 0 3からの入力時刻) を表す符号を 付加する構成、 蓄積サーバ 4 0 6において前記視聴覚情報の取得時刻 (ここ では、 前記蓄積情報の蓄積時刻) を表す符号を付加する構成などを用いても 同様の効果が得られるものである。 このような構成を用いた場合に、 蓄積サ —バ 4 0 6では、 当該視聴覚情報 (映像情報や音響情報) などが蓄積された 時刻、 当該視聴覚情報が携帯情報端末 4 0 4において取得された時刻などの 時刻情報も同時に蓄積され、 モニタ 1 0 7、 1 0 9では、 当該視聴覚情報が 蓄積された時刻、 当該情報が携帯情報端末 3 0 4において取得された時刻な どの時刻情報が表示されることとなる。
なお、 前述の音響情報を記録する場合に、 モノラル方式の録音だけでなく、 ステレオマイクによるステレオ方式や、 両耳介の中に設置したマイクによる バイノーラル録音な.どのサラウンド方式などを用いると、 より高い臨場感を もった音響情報の記録が可能となる。 また、 録音記録の参照時に受聴された 音像の位置などを判定することが可能となる。 さらに、 視覚情報の記録をス テレオ化することで、 使用者の視覚情報に距離情報を加えたかたちでの記録 を可能とする実施の形態も容易に実現できる。
(第 5の実施の形態)
図 6は本発明の第 5の実施の形態の要部正面図を示す。 これは第 1の実施 の形態とは、 さらにカメラ 1 0 1およびマイクロホン 1 0 3は、 学習時の人 体に装着されており、 カメラ 1 0 1およびマイクロホン 1 0 3により得られ た視聴覚情報の学習の様子を含む学習情報を処理する処理部 (携帯情報端末 5 0 4または蓄積サーバ 5 0 6に含まれる) を設け、 前記視聴覚情報を含む 蓄積情報には、 前記処理部で処理された学習情報が含まれる点が相違してい る。 この構成によれば、 使用者は記憶の手間から開放され、 記憶内容の使用 という知的活動のみに専念できるという効果も得られる。
図 6において、 使用者の持つ携帯情報端末 5 0 4には、 前記使用者の身体 に装着されたカメラ 1 0 1およびマイクロホン 1 0 3が接続されるとともに、 このカメラ 1 0 1およびマイクロホン 1 0 3の装着状態を検出するためのセ ンサ 1 0 2が接続されている。 また、 携帯情報端末 5 0 4には、 カメラ 1 0 1、 センサ 1 0 2、 マイクロホン 1 0 3による常時記録のオンオフ状態を切 替える切替手段 (操作表示部など) を備えている。 すなわち、 前記切替手段 により、 カメラ 1 0 1、 センサ 1 0 2、 マイクロホン 1 0 3を常時オン状態 にして得られた視聴覚情報などを連続して蓄積サーバ 5 0 6に蓄積するか否 かを切替えるものである。 また、 携帯倩報端末 5 0 4にはモニタ 1 0 7が直 接接続されている。 さらに、 携帯情報端末 5 0 4は無線通信機能を有し、 無 線基地局 1 0 5との間で無線信号を遣り取りするものである。 無線基地局 1 0 5は、 イン夕一ネット 1 0 0に接続され、 このインターネット 1 0 0を介 して蓄積サーバ 5 0 6と接続されるとともに、 携帯情報端末 5 0 4と無線通 信可能なものである。 蓄積サーバ 5 0 6は、 インターネヅ ト 1 0 0に接続さ れ、 イン夕一ネット 1 0 0を介して無線基地局 1 0 5と接続されるものであ る。 また、 蓄積サーバ 5 0 6には、 この,蓄積サーバ 5 0 6に対するアクセス の正否を判断するための判断手段 (個人認証手段など) を備え、 予め登録さ れた使用者によるアクセスのみを許可するものである。 コンピュータ 5 0 9 には、 モニタ 1 0 9が直接接続されている。 また、 コンピュータ 5 0 9は、 ィン夕一ネヅ ト 1 0 0に接続され、 このィン夕一ネヅ ト 1 0 0を介して蓄積 サーバ 5 0 6に接続されるものである。
次に、 本実施の形態の記憶支援システムの記録動作を説明する。 使用者の 身体に装着されたカメラ 1 0 1およびマイクロホン 1 0 3により得られた視 聴覚情報は、 携帯情報端末 5 0 4に学習情報として入力された後、 無線基地 局 1 0 5に無線送信される。 なお、 携帯情報端末 5 0 4より送信される視聴 覚情報にはセンサ 1 0 2からの装着状態の情報が含まれる。 次いで、 無線基 地局 1 0 5は、 送信されてきた視聴覚倩報に受信時刻を示す符号 (夕ィムコ ード) を付加した後、 イン夕一ネット 1 0 0を介し、 学習情報として蓄積サ —バ 5 0 6に送信する。 この蓄積サーバ 5 0 6では、 送信されてきた学習情 報を記録する。
次に、 本実施の形態の記憶支援システムの参照動作を説明する。 携帯情報 端末 5 0 4から蓄積サーバ 5 0 6に対し、 無線基地局 1 0 5を経由し、 さら にィン夕ーネット 1 0 0を介して蓄積情報の参照要求信号が送信されるか、 あるいはコンピュータ 5 0 9から蓄積サーバ 5 0 6に対し、 ィン夕一ネヅ卜 1 0 0を介して蓄積情報の参照要求信号が送信された場合に、 蓄積サーバ 5 0 6は、 前述の個人認証手段によって正当なアクセスであるか否かを判断す る。 ここで、 正当なアクセスであると判断された場合に、 蓄積サーバ 5 0 6 は、 前記参照要求に応じて蓄積サーバ 5 0 6からインターネット 1 0 0上に 前記映像音響などの視聴覚情報 (装着状態の情報を含む) および時刻情報を 示す信号が学習情報として送信される。 こうしてイン夕一ネヅト 1 0 0上に 送出された信号は、 このイン夕一ネット 1 0 0を介し、 無線基地局 1 0 5を 経由して携帯情報端末 5 0 4に送信されるか、 あるいはイン夕一ネット 1 0 0を介してコンピュータ 5 0 9に送信され、 携帯情報端末 5 0 4あるいはコ ンピュー夕 5 0 9で再生処理がなされる。 こうして再生処理がなされた後、 当該情報はモニタ 1 0 7あるいはモニタ 1 0 9に出力される。 ここで、 モニ 夕 1 0 7、 1 0 9には、 当該倩報とともに、 当該情報が蓄積サーバ 5 0 6に 蓄積された時刻、 当該情報が携帯情報端末 5 0 4において取得された時刻な どの時刻情報が出力される。 なお、 学習内容を科目、 学期 (期間) などでま とめる場合には、 コンピュータ 5 .0 9の操作により、 蓄積サーバ 5 0 6に蓄 積された視聴覚情報 (学習情報) を整理する。
ここで、 本実施の形態の記憶支援システムを使用した場合の効果について 説明する。 この本記憶支援システムによれば、 使用者は学習時における視聴 覚情報を記録することが可能となる。 例えば、 使用者が学校での授業の内容 を全て記録して参照することが可能である。 したがって、 授業中における板 書の必要がなくなるために、 使用者は板書の手間から開放され、 学習内容の 理解に意識を集中することができる。 また、 本や書類を読むときに前記記憶 支援システムを使用することで、 使用者が一度読んだ本を何度でも読み返す ことが可能である。 さらに、 ノートや図表などを用いて学習内容をまとめる 場合に、 この学習内容をまとめる作業の際の視聴覚情報を前記記憶支援シス テムによって記録して参照することで、 使用者は、 自分の学習内容に関する 理解の度合いと学習時の時刻情報とを学習後に確認することが可能である。 さらに、 蓄積サーバ 5 0 6に記録された視聴覚情報にはタイムコードが付加 されているために、 学習に関する視聴覚情報の一括管理が可能であり、 学習 内容を効率的に参照するためのアプリケーションプログラムの併用によって、 使用者は過去に学習した内容を即座に参照することが可能である。 使用者は、 携帯情報端末 5 0 4に接続されたモニタ 1 0 7で前記学習に関する視聴覚情 報を参照することによって、 自分の学習した内容を任意の時刻に任意の場所 で参照できる。 このために、 使用者は全ての単純な暗記作業から開放される 以上の説明からもわかるように、 前記記憶支援システムは、 使用者の学習時 における記憶作業の全てを代替することが可能である。 このとき、 使用者に とって学習の際に必要な作業は、 カメラ 1 0 1およびマイクロホン 1 0 3に より得られた視聴覚情報の効率的な使用と、 そのための方法の模索と、 学習 内容の理解とに関するものである。 つまり、 前記記憶支援システムにより、 使用者は記憶作業の手間から開放され、 記憶内容の使用という知的活動に専 念できる。 またこれは、 外部記録媒体 (ここでは、 携帯情報端末 5 0 4、 蓄 積サーバ 5 0 6を含む) の使用により、 使用者自体の記憶容量が増した状態 と解釈することもできる。
なお、 上記実施の形態では蓄積サーバ 4 0 6参照時のセキュリティを維持 するための手段として、 蓄積サーバ 4 0 6に設けられた前記個人認証手段を 用いた場合について説明したが、 本発明は蓄積サーバ 4 0 6に設けられた前 記個人認証手段のほかに、 カメラ 1 0 1、 マイクロホン 1 0 3およびセンサ 1 0 2を装着する使用者または車両が正当か否かを判断するために個人認証 を行う個人認証手段、 あるいは蓄積サーバ 4 0 6登録時のセキュリティを維 持するために設けられた個人認証手段などを用いても同様の効果が得られる ものである。
また、 上記実施の形態では使用者の身体などに装着されたセンサ 1 0 2と して身体に対する装着状態を検知する機能を有するものを用いた場合につい て説明したが、 本発明は身体に対する装着状態のほかに、 触覚情報、 味覚情 報、 嗅覚情報、 身体情報 (例えば、 心拍数や身体の傾き具合など) を検知す る機能を有するものなどを用いても同様の効果が得られるものである。
また、 上記実施の形態では無線基地局 1 0 5において前記視聴覚情報の取 得時刻を表す符号を付加する場合について説明したが、 本発明はこのほかに、 携帯情報端末 4 0 4において前記視聴覚情報の取得時刻 (ここでは、 カメラ 1 0 1、 センサ 1 0 2、 マイクロホン 1 0 3からの入力時刻) を表す符号を 付加する構成、 蓄積サーバ 4 0 6において前記視聴覚情報の取得時刻 (ここ では、 前記蓄積情報の蓄積時刻) を表す符号を付加する構成などを用いても 同様の効果が得られるものである。 このような構成を用いた場合に、 蓄積サ ーバ 4 0 6では、 当該視聴覚情報 (映像情報や音響情報) などが蓄積された 時刻、 当該視聴覚情報が携帯情報端末 4 0 4において取得された時刻などの 時刻情報も同時に蓄積され、 モニタ 1 0 7、 1 0 9では、 当該視聴覚情報が 蓄積された時刻、 当該情報が携帯情報端末 3 0 4において取得された時刻な どの時刻情報が表示されることとなる。
なお、 前述の音響情報を記録する場合に、 モノラル方式の録音だけでなく、 ステレオマイクによるステレオ方式や、 両耳介の中に設置したマイクによる バイノーラル録音などのサラゥンド方式などを用いると、 より高い臨場感を もった音響情報の記録が可能となる。 また、 録音記録の参照時に受聴された 音像の位置などを判定することが可能となる。 さらに、 視覚情報の記録をス テレオ化することで、 使用者の視覚情報に距離情報を加えたかたちでの記録 を可能とする実施の形態も容易に実現できる。
(第 6の実施の形態)
図 7は本発明の第 6の実施の形態の要部ブロック図を示す。 これは第 1の 実施の形態とは、 さらにカメラ 1 0 1およびマイクロホン 1 0 3は、 レジャ 一時の人体に装着されており、 カメラ 1 0 1およびマイクロホン 1 0 3によ り得られた視聴覚情報におけるレジャ一体験の様子を含むレジャ一情報を処 理する処理部 (携帯情報端末 6 0 4、 蓄積サーバ 6 0 6などに含まれる) を 設け、 前記長視覚情報を含む蓄積情報には、 前記処理部で処理されたレジャ —情報が含まれる点が相違している。 この構成によれば、 使用者はレジャー 時に視聴覚情報を手軽に記録することができるという効果も得られる。
図 7において、 使用者の持つ携帯情報端末 6 0 4には、 前記使用者の身体 に装着されるか、 あるいは使用者の近傍に設置されたカメラ 1 0 1およびマ イク口ホン 1 0 3が接続されている。 また、 携帯情報端末 6 0 4には、 カメ ラ 1 0 1、 マイクロホン 1 0 3による常時記録のオンオフ状態を切替える切 替手段 (操作表示部など) を備えている。 すなわち、 前記切替手段により、 カメラ 1 0 1、 マイクロホン 1 0 3を常時オン状態にして得られた視聴覚情 報などを連続して蓄積サーバ 6 0 6に蓄積するか否かを切替えるものである。 また、 携帯情報端末 6 0 4にはモニタ 1 0 7が直接接続されている。 さらに、 携帯情報端末 6 0 4は無線通信機能を有し、 無線基地局 1 0 5との間で無線 信号を遣り取りするものである。 無線基地局 1 0 5は、 イン夕一ネット 1 0 0に接続され、 このィン夕ーネット 1 0 0を介して蓄積サーバ 6 0 6と接続 されるとともに、 携帯情報端末 6 0 4と無線通信可能なものである。 蓄積サ ーバ 6 0 6は、 イン夕一ネット 1 0 0に接続され、 イン夕一ネヅ ト 1 0 0を 介して無線基地局 1 0 5と接続されるものである。 また、 蓄積サーバ 6 0 6 には、 この蓄積サーバ 6 0 6に対するアクセスの正否を判断するための判断 手段 (個人認証手段など) を備え、 予め登録された使用者によるアクセスの みを許可するものである。 コンピュータ 6 0 9には、 モニタ 1 0 9が直接接 続されている。 また、 コンピュータ 6 0 9は、 イン夕一ネット 1 0 0に接続 され、 このインターネヅト 1 0 0を介して蓄積サーバ 6 0 6に接続されるも のである。
次に、 本実施の形態の記憶支援システムの記録動作を説明する。 使用者の 身体に装着されたカメラ 1 0 1およびマイクロホン 1 0 3により得られた視 聴覚情報 (映像情報および音響情報を含む) は、 携帯情報端末 2 0 4にレジ ャ一情報として入力された後、 無線基地局 1 0 5に無線送信される。 ここで は、 携帯情報端末 6 0 4の操作により、 映像記録の状態がオンになると、 携 帯情報端末 6 0 4から無線基地局 1 0 5に対する視聴覚情報の送信が開始さ れ、 映像記録の状態がオフになると、 携帯情報端末 6 0 4から無線基地局 1 0 5に対する視聴覚情報の送信は停止される。 次いで、 無線基地局 1 0 5は、 送信されてきた視聴覚情報にこの視聴覚情報を無線基地局 1 0 5において取 得した時刻を表す符号 (タイムコード) を付加した後に、 イン夕一ネット 1 0 0を介し、 レジャー情報として蓄積サーバ 6 0 6に送信する。 この蓄積サ —バ 6 0 6では、 送信されてきたレジャー情報を記録する。 ここで、 携帯情 報端末 6 0 4の操作が行われると、 前述と同様の通信によって静止画像用の 時刻情報が蓄積サーバ 6 0 6上に保存されることになる。
次に、 本実施の形態の記憶支援システムの参照動作を説明する。 携帯情報 端末 6 0 4から蓄積サーバ 6 0 6に対し、 無線基地局 1 0 5を経由し、 さら にイン夕一ネット 1 0 0を介して蓄積情報の参照要求信号が送信されるか、 あるいはコンピュータ 6 0 9から蓄積サーバ 6 0 6に対し、 ィン夕ーネヅト 1 0 0を介して蓄積情報の参照要求信号が送信された場合に、 蓄積サーバ 6 0 6は、 前述の個人認証手段によって正当なアクセスであるか否かを判断す る。 ここで、 正当なアクセスであると判断された場合に、 前記参照要求に応 じて蓄積サーバ 6 0 6からイン夕一ネット 1 0 0上に前記映像音響などの視 聴覚情報および時刻情報を示す信号がレジャー情報として送信される。 こう してィン夕一ネット 1 0 0上に送出された信号は、 このィンターネット 1 0 0を介し、 無線基地局 1 0 5を経由して携帯情報端末 6 0 4に送信されるか、 あるいはィン夕ーネヅト 1 0 0を介してコンビユーダ 6 0 9に送信され、 携 帯情報端末 6 0 4あるいはコンピュータ 6 0 9で再生処理がなされる。 こう して再生処理がなされた後、 当該視聴覚情報は映像と音声のモニタ 1 0 7あ るいはモニタ 1 0 9に表示される。 ここで、 モニ夕 1 0 7、 1 0 9には、 当 該視聴覚情報とともに、 当該視聴覚情報が無線基地局 1 0 5において取得さ れた時刻などの時刻情報が表示される。 なお、 使用者が静止画の参照を行う 場合には、 まず前記静止画像用の時刻情報の参照が行われ、 次に、 この時刻 情報と視聴覚情報に付加された時刻情報との参照が行われる。 ここで合致し た時刻の画像情報が前述のように携帯情報端末 6 0 4あるいはコンピュータ 6 0 9に送信される。
ここで、 本実施の形態の記憶支援システムを使用した場合の効果について 説明する。 この記憶支援システムにより、 使用者はレジャー時に視聴覚情報 を手軽に記録することができる。 使用者がレジャーを楽しんでいる間、 前記 視聴覚情報の記録が常時行われるので、 使用者はビデオカメラやスチルカメ ラなど特殊な装置の携帯とこれによる随時記録の手間から開放される。 また、 使用者は携帯情報端末 6 0 4の操作により、 手軽に静止画を記録することが できる。 どの機能によって、 使用者はスチルカメラと同様の使用感を得るこ とが可能となる。 使用者がレジャーを楽しんだ後に前記視聴覚情報を整理す る際、 前記視聴覚情報にはタイムコードが一意に付加されているので、 使用 者にとっての編集の利便性向上が期待できる。 また、 カメラ 1 0 1は使用者 の身体から脱着可能なので、 記念撮影など使用者自身の撮影をすることも可 能である。
なお、 上記実施の形態では蓄積サーバ 6 0 6参照時のセキュリティを維持 するための手段として、 蓄積サーバ 6 0 6に設けられた前記個人認証手段を 用いた場合について説明したが、 本発明は蓄積サーバ 6 0 6に設けられた前 記個人認証手段のほかに、 カメラ 1 0 1、 マイクロホン 1 0 3を装着する使 用者が正当か否かを判断するために個人認証を行う個人認証手段、 あるいは 蓄積サーバ 6 0 6登録時のセキュリティを維持するために設けられた個人認 証手段などを用いても同様の効果が得られるものである。
また、 上記実施の形態では特に用いていないが、 使用者の身体などに対す るカメラ 1 0 1やマイクロホン 1 0 3の装着状態を検知する機能を有するセ ンサ、 触覚倩報、 味覚情報、 嗅覚情報、 身体情報 (例えば、 心拍数や身体の 傾き具合など) を検知する機能を有するセンサなどを用いても同様の効果が 得られるものである。
また、 上記実施の形態では無線基地局 1 0 5において前記視聴覚情報の取 得時刻を表す符号を付加する場合について説明したが、 本発明はこのほかに、 携帯情報端末 6 0 4において前記視聴覚情報の取得時刻 (ここでは、 カメラ 1 0 1、 マイクロホン 1 0 3からの入力時刻) を表す符号を付加する構成、 蓄積サーバ 6 0 6において前記視聴覚情報の取得時刻 (ここでは、 前記蓄積 情報の蓄積時刻) を表す符号を付加する構成などを用いても同様の効果が得 られるものである。 このような構成を用いた場合に、 蓄積サーバ 6 0 6では、 当該視聴覚情報 (映像情報や音響情報) などが蓄積された時刻、 当該視聴覚 情報が携帯情報端末 6 0 4において取得された時刻などの時刻情報も同時に 蓄積され、 モニタ 1 0 7、 1 0 9では、 当該視聴覚情報が蓄積された時刻、 当該情報が携帯情報端末 6 0 4において取得された時刻などの時刻情報が表 示されることとなる。
なお、 前述の音響情報を記録する場合に、 モノラル方式の録音だけでなく、 ステレオマイクによるステレオ方式や、 両耳介の中に設置したマイクによる バイノーラル録音などのサラウンド方式などを用いると、 より高い臨場感を もった音響情報の記録が可能となる。 また、 録音記録の参照時に受聴された 音像の位置などを判定することが可能となる。 さらに、 視覚情報の記録をス テレオ化することで、 使用者の視覚情報に距離情報を加えたかたちでの記録 を可能とする実施の形態も容易に実現できる。
(第 7の実施の形態)
図 8は本発明の第 7の実施の形態の要部ブロック図を示す。 これは第 1の 実施の形態とは、 さらにカメラ 1 0 1およびマイクロホン 1 0 3は、 人体に 装着されており、 前記人体の健康状態を検知するセンサ 3 0 2を設け、 蓄積 サーバ 7 0 6に蓄積された蓄積情報には前記健康状態の情報が含まれる点が 相違している。 この構成によれば、 センサ 3 0 2により得られた血圧、 脈拍、 体温、 血糖値などの健康状態が常に記録されるので、 使用者の過去の健康状 態の管理や現在の健康状態を監視できるという効果も得られる。
図 8において、 使用者の持つ携帯情報端末 7 0 4には、 前記使用者の身体 に装着されたカメラ 1 0 1およびマイクロホン 1 0 3が接続されるとともに、 このカメラ 1 0 1およびマイクロホン 1 0 3の装着状態を検出し、 また、 使 用者の触覚情報、 味覚情報、 嗅覚情報、 身体情報 (例えば、 血圧や脈拍、 体 温、 血糖値、 身体の傾き具合など) を検出するためのセンサ 3 0 2が接続さ れている。 また、 携帯情報端末 7 0 4には、 前記身体情報を処理して所望の 情報 (例えば、 後述する食事、 排便に関するもの) を加工、 作成する処理部 を備えている。 また、 携帯情報端末 7 0 4は無線通信機能を有し、 無線基地 局 1 0 5との間で無線信号を遣り取りするものである。 また、 携帯情報端末 7 0 4には、 カメラ 1 0 1、 センサ 3 0 2、 マイクロホン 1 0 3による常時 記録のオンオフ状態を切替える切替手段 (操作表示部など) を備えている。 すなわち、 前記切替手段により、 カメラ 1 0 1、 センサ 3 0 2、 マイクロホ ン 1 0 3を常時オン状態にして得られた視聴覚情報などを連続して蓄積サー ノ 0 6に蓄積するか否かを切替えるものである。 無線基地局 1 0 5は、 ィ ン夕一ネヅト 1 0 0に接続され、 このィン夕一ネット 1 0 0を介して蓄積サ ーバ 7 0 6と接続されるとともに、 携帯情報端末 7 0 4と無線通信可能なも のである。 蓄積サーバ 7 0 6は、 イン夕一ネット 1 0 0に接続され、 イン夕 ーネット 1 0 0を介して無線基地局 1 0 5と接続されるものである。 また、 蓄積サーバ 7 0 6には、 この蓄積サーバ 7 0 6に対するアクセスの正否を判 断するための判断手段 (個人認証手段など) を備え、 予め登録された使用者 によるアクセスのみを許可するものである。 コンピュータ 7 0 9には、 モニ 夕 1 0 9が直接接続されている。 また、 コンピュータ 7 0 9は、 インタ一ネ ヅ ト 1 0 0に接続され、 このィン夕一ネヅト 1 0 0を介じて蓄積サーバ 7 0 6に接続されるものである。
次に、 本実施の形態の記憶支援システムの記録動作を説明する。 使用者の 身体に装着されたカメラ 1 0 1およびマイクロホン 1 0 3により得られた視 聴覚情報 (映像情報および音響情報を含む) と、 センサ 3 0 2により得られ た前記使用者の身体に関する情報 (血圧、 脈拍、 体温、 血糖値など) とは、 携帯情報端末 7 0 4に前記使用者の健康情報として入力された後、 無線基地 局 1 0 5に無線送信される。 なお、 携帯情報端末 7 0 4より送信される視聴 覚情報などにはセンサ 3 0 2からの装着状態の情報が含まれる。 次いで、 無 線基地局 1 0 5は、 送信されてきた映像や音響などの視聴覚情報に、 この視 聴覚情報が無線基地局 1 0 5において取得された時刻を表す符号 (タイムコ —ド) を付加した後、 インタ一ネット 1 0 0を介し、 健康情報として蓄積サ —バ 7 0 6に送信する。 この蓄積サーバ 7 0 6では、 送信されてきた健康倩 報を記録する。
次に、 本実施の形態の記憶支援システムの参照動作を説明する。 使用者本 人あるいは使用者の健康を管理する業者によって、 携帯情報端末 7 0 4から 蓄積サーバ 7 0 6に対し、 無線基地局 1 0 5を経由し、 さらにィン夕一ネヅ ト 1 0 0を介して蓄積情報の参照要求信号が送信されるか、 あるいはコンビ ユー夕 7 0 9から蓄積サーバ 7 0 6に対し、 イン夕一ネヅト 1 0 0を介して 蓄積情報の参照要求信号が送信された場合に、 蓄積サーバ 7 0 6は、 前述の 個人認証手段によって正当なアクセスであるか否かを判断する。 ここで、 正 当なアクセスであると判断された場合に、 前記参照要求に応じて蓄積サーバ 7 0 6からイン夕一ネット 1 0 0上に前記使用者の身体の状態に関する情報、 時刻情報および装着状態の情報、 映像や音響などの視聴覚情報を示す信号が 健康情報として送信される。 こうしてィン夕ーネット 1 0 0上に送出された 信号は、 このイン夕一ネット 1 0 0を介してコンピュータ 7 0 9に送信され、 ここで再生処理がなされる。 こうして再生処理がなされた後、 当該健康情報 はモニタ 1 0 9に出力される。 ここで、 モニタ 1 0 9には、 当該健康情報と ともに、 当該健康情報に含まれる映像や音響が無線基地局 1 0 5において取 得された時刻などの時刻情報が出力される。
ここで、 本実施の形態の記憶支援システムを使用した場合の効果について 説明する。 この記憶支援システムにより、 血圧、 脈拍、 体温、 血糖値などに よる使用者の健康状態が常に記録されるので、 使用者の過去の健康状態の管 理ゃ現在の健康状態の監視を行うことが可能である。 また、 蓄積された視聴 覚情報から食事や排便についての記録をとることが可能である。 例えば、 食 事の視聴覚情報を参照することで、 この視聴覚情報に付加された時刻情報か ら食事を行った時刻が得られ、 前記視聴覚情報の映像情報から食べたものの 内容が得られるので、 これにより使用者の食事について分析できる。 また、 使用者がトイレに入つた際の視聴覚情報を参照することで、 この視聴覚情報 に付加された時刻情報から排便の時刻が得られ、 前記視聴覚情報の映像情報 から便の内容が得られるので、 これにより使用者の排便について分析できる。 さらに、 食事内容が映像として参照できるので、 これによる栄養学的な分析 が可能である。
なお、 上記実施の形態では携帯情報端末 7 0 4の各種情報取得手段として カメラ 1 0 1、 センサ 3 0 2、 マイクロホン 1 0 3を用いた場合について説 明したが、 本発明はこのほかに、 全地球測位システム (G P S ) などを用い ても同様の効果が得られるものである。 さらに、 全地球測位システムにより 監視位置 (使用者の位置) を特定する位置特定機能を有することで、 例えば、 使用者が発作を起こした場合や、 事故に遭遇した場合など、 危険な状態に陥 つた場合に使用者の位置情報を参照し、 早急に使用者の元へ救急車を派遣す ることもできる。
また、 上記実施の形態では蓄積サーバ 7 0 6参照時のセキュリティを維持 するための手段として、 蓄積サーバ 7 0 6に設けられた前記個人認証手段を 用いた場合について説明したが、 本発明は蓄積サーバ 7 0 6に設けられた前 記個人認証手段のほかに、 カメラ 1 0 1、 センサ 3 0 2、 マイクロホン 1 0 3を装着する使用者が正当か否かを判断するために個人認証を行う個人認証 手段、 あるいは蓄積サーバ 7 0 6登録時のセキュリティを維持するために設 けられた個人認証手段などを用いても同様の効果が得られるものである。 また、 上記実施の形態では無線基地局 1 0 5において前記視聴覚情報の取 得時刻を表す符号を付加する場合について説明したが、 本発明はこのほかに、 携帯情報端末 7 0 4において前記視聴覚情報の取得時刻 (ここでは、 カメラ 1 0 1、 センサ 3 0 2、 マイクロホン 1 0 3からの入力時刻) を表す符号を 付加する構成、 蓄積サーバ 7 0 6において前記視聴覚情報の取得時刻 (ここ では、 前記蓄積情報の蓄積時刻) を表す符号を付加する構成などを用いても 同様の効果が得られるものである。 このような構成を用いた場合に、 蓄積サ ーバ 7 0 6では、 当該視聴覚情報 (映像情報や音響情報) などが蓄積された 時刻、 当該視聴覚情報が携帯情報端末 6 0 4において取得された時刻などの 時刻情報も同時に蓄積され、 モニタ 1 0 7、 1 0 9では、 当該視聴覚情報が 蓄積された時刻、 当該情報が携帯情報端末 6 0 4において取得された時刻な どの時刻情報が表示されることとなる。
なお、 前述の音響情報を記録する場合に、 モノラル方式の録音だけでなく、 ステレオマイクによるステレオ方式や、 両耳介の中に設置したマイクによる バイノーラル録音などのサラウンド方式などを用いると、 より高い臨場感を もった音響情報の記録が可能となる。 また、 録音記録の参照時に受聴された 音像の位置などを判定することが可能となる。 さらに、 視覚情報の記録をス テレオ化することで、 使用者の視覚情報に距離情報を加えたかたちでの記録 を可能とする実施の形態も容易に実現できる。
(第 8の実施の形態)
図 9は本発明の第 8の実施の形態の要部ブロック図を示す。 これは第 1の 実施の形態とは、 さらに携帯情報端末 8 0 4に全地球測位システム (G P S ) を設け、 蓄積サーバ 8 0 6に蓄積された蓄積情報には全地球測位システ ムにより取得された監視位置の位置情報が含まれる点が相違している。 この 構成によれば、 使用者に何らかの事件が発生して消息が不明になった場合に、 行方不明の捜査や突発的な事故処理を効率的に行うことができるという効果 も得られる。
図 9において、 使用者の持つ携帯情報端末 8 0 4には、 前記使用者の身体 に装着されたカメラ 1 0 1およびマイクロホン 1 0 3が接続されるとともに、 このカメラ 1 0 1およびマイクロホン 1 0 3の装着状態を検出するためのセ ンサ 1 0 2が接続されている。 また、 携帯情報端末 8 0 4は全地球測位シス テム (以下、 G P Sという) 機能および無線通信機能を有し、 無線基地局 1 0 5との間で無線信号を遣り取りするものである。 また、 携帯情報端末 8 0 4には、 カメラ 1 0 1、 センサ 1 0 2、 マイクロホン 1 0 3による常時記録 のオンオフ状態を切替える切替手段 (操作表示部など) を備えている。 すな わち、 前記切替手段により、 カメラ 1 0 1、 センサ 1 0 2、 マイクロホン 1 0 3を常時オン状態にして得られた視聴覚情報などを連続して蓄積サーバ 8 0 6に蓄積するか否かを切替えるものである。 無線基地局 1 0 5は、 イン夕 —ネット 1 0 0に接続され、 このイン夕一ネット 1 0 0を介して蓄積サーバ 8 0 6と接続されるとともに、 携帯情報端末 8 0 4と無線通信可能なもので ある。 蓄積サーバ 8 0 6は、 インターネット 1 0 0に接続され、 インターネ ット 1 0 0を介して無線基地局 1 0 5と接続されるものである。 また、 蓄積 サーバ 8 0 6には、 この蓄積サーバ 8 0 6に対するアクセスの正否を判断す るための判断手段 (個人認証手段など) を備え、 予め登録された使用者によ るアクセスのみを許可するものである。 コンビュ一夕 8 0 9には、 モニタ 1 0 9が直接接続されている。 また、 コンピュータ 8 0 9は、 イン夕一ネヅ ト 1 0 0に接続され、 このイン夕一ネヅ ト 1 0 0を介して蓄積サーバ 8 0 6に 接続されるものである。
次に、 本実施の形態の記憶支援システムの記録動作を説明する。 使用者の 身体に装着されたカメラ 1 0 1およびマイクロホン 1 0 3により得られた視 聴覚情報 (映像情報および音響情報を含む) は、 携帯情報端末 8 0 4に前記 使用者のライフレコーダ情報として入力された後、 無線基地局 1 0 5に無線 送信される。 なお、 携帯情報端末 8 0 4より送信される視聴覚情報には、 前 記 G P S機能によって得られた位置情報と、 センサ 1 0 2からの装着状態の 情報とが付加されている。 次いで、 無線基地局 1 0 5は、 送信されてきた視 聴覚情報に、 この視聴覚情報が無線基地局 1 0 5において取得された時刻を 表す符号 (タイムコード) を付加した後、 イン夕一ネット 1 0 0を介し、 ラ ィフレコーダ情報として蓄積サーバ 8 0 6に送信する。 この蓄積サーバ 8 0 6では、 送信されてきたライフレコーダ情報を記録する。
次に、 本実施の形態の記憶支援システムの参照動作を説明する。 使用者に 事故が発生して消息を把握する必要がある場合などに、 コンビユー夕 8 0 9 から蓄積サーバ 8 0 6に対し、 イン夕一ネヅト 1 0 0を介して蓄積情報の参 照要求信号が送信された場合に、 蓄積サーバ 8 0 6は、 前述の個人認証手段 によって正当なアクセスであるか否かを判断する。 ここで、 正当な使用者の アクセスであると判断された場合に、 前記参照要求に応じて蓄積サーバ 8 0 6からイン夕一ネット 1 0 0上に前記 G P S機能による位置情報、 時刻情報 および装着状態の情報、 映像や音響などの視聴覚情報を示す信号がライフレ コーダ情報として送信される。 こうしてインターネヅト 1 0 0上に送出され た信号は、 このィン夕一ネヅ ト 1 0 0を介してコンピュータ 8 0 9に送信さ れ、 ここで再生処理がなされる。 こうして再生処理がなされた後、 当該ライ フレコーダ情報はモニタ 1 0 9に出力される。 ここで、 モニタ 1 0 9には、 当該ライフレコーダ情報とともに、 当該ライフレコーダ情報に含まれる視聴 覚情報などが無線基地局 1 0 5において取得された時刻などの時刻情報が出 力される。
ここで、 本実施の形態の記憶支援システムを使用した場合の効果について 説明する。 この記憶支援システムにより、 航空機のフライ トレコーダと同様 に、 使用者の消息を表す視聴覚情報の全てを記録することができる。 すなわ ち、 カメラ 1 0 1、 マイクロホン 1 0 3による視聴覚情報、 センサ 1 0 2に よる装着状態の情報と全地球測位システムによる位置情報、 そしてこれらの 情報に関する時刻情報が蓄積サーバ 8 0 6に記録されているので、 使用者に 何らかの事故が発生して消息が不明になった場合に、 行方不明の捜査や突発 的な事故時の調査に前述の視聴覚情報、 位置情報および時刻情報を使用でき る。 さらに、 前記記憶支援システムを使用することで、 例えば生命保険会社 は使用者の事故当時の状況を克明に知ることができ、 事故などに関する調査 を効率的に行い、 事故処理にかかる時間を短縮できる。
なお、 上記実施の形態では蓄積サーバ 8 0 6参照時のセキュリティを維持 するための手段として、 蓄積サーバ 8 0 6に設けられた前記個人認証手段を 用いた場合について説明したが、 本発明は蓄積サーバ 8 0 6に設けられた前 記個人認証手段のほかに、 カメラ 1 0 1、 マイクロホン 1 0 3およびセンサ 1 0 2を装着する使用者または車両が正当か否かを判断するために個人認証 を行う個人認証手段、 あるいは蓄積サーバ 8 0 6登録時のセキュリティを維 持するために設けられた個人認証手段などを用いても同様の効果が得られる ものである。
また、 上記実施の形態では使用者の身体などに装着されたセンサ 1 0 2と して身体に対する装着状態を検知する機能を有するものを用いた場合につい て説明したが、 本発明は身体に対する装着状態のほかに、 触覚情報、 味覚情 報、 嗅覚情報、 身体情報 (例えば、 心拍数や身体の傾き具合など) を検知す る機能を有するものなどを用いても同様の効果が得られるものである。
また、 上記実施の形態では無線基地局 1 0 5において前記視聴覚情報の取 得時刻を表す符号を付加する場合について説明したが、 本発明はこのほかに、 携帯情報端末 8 0 4において前記視聴覚情報の取得時刻 (ここでは、 カメラ 1 0 1、 センサ 1 0 2、 マイクロホン 1 0 3からの入力時刻) を表す符号を 付加する構成、 蓄積サーバ 8 0 6において前記視聴覚情報の取得時刻 (ここ では、 前記蓄積情報の蓄積時刻) を表す符号を付加する構成などを用いても 同様の効果が得られるものである。 このような構成を用いた場合に、 蓄積サ ーバ 8 0 6では、 当該視聴覚情報 (映像情報や音響情報) などが蓄積された 時刻、 当該視聴覚情報が携帯情報端末 8 0 4において取得された時刻などの 時刻情報も同時に蓄積され、 モニタ 1 0 7、 1 0 9では、 当該視聴覚情報が 蓄積された時刻、 当該情報が携帯情報端末 8 0 4において取得された時刻な どの時刻情報が表示されることとなる。
なお、 前述の音響情報を記録する場合に、 モノラル方式の録音だけでなく、 ステレオマイクによるステレオ方式や、 両耳介の中に設置したマイクによる バイノーラル録音などのサラウンド方式などを用いると、 より高い臨場感を もった音響情報の記録が可能となる。 また、 録音記録の参照時に受聴された 音像の位置などを判定することが可能となる。 さらに、 視覚情報の記録をス テレオ化することで、 使用者の視覚情報に距離情報を加えたかたちでの記録 を可能とする実施の形態も容易に実現できる。 以上説明したように、 本発明は任意に変位される監視位置で常時撮影され た映像および常時収集された音響により得られた視聴覚情報に時刻情報を付 加し、 通信網を介して蓄積サーバに伝送する携帯情報端末と、 この携帯情報 端末から伝送された視聴覚情報および時刻情報を蓄積するとともに、 前記視 聴覚情報および時刻情報を含む蓄積情報の参照要求により、 前記通信網を介 して前記蓄積情報を伝送する蓄積サーバとを設けることにより、 記録媒体の 大小および監視点の変位による制限を克服して、 使用者が日常生活において 知覚する視聴覚情報と、 この視聴覚情報を知覚した際の時刻情報とを常時記 録することが可能であり、 また、 使用者が過去に知覚した任意の視聴覚情報 を参照できるという優れた効果を有する記憶支援システムを提供することが できるものである。
本明細書は、 2 0 0 2年 2月 2 0日出願の特願 2 0 0 2— 0 4 3 4 4 3に 基づくものである。 この内容はすべてここに含めておく。

Claims

請求の範囲
1 . 任意に変位される位置で撮影された映像および収集された音響により映 像情報および音響情報を含む視聴覚情報を作成し、 この視聴覚情報を通信網 を介して伝送する携帯端末と、
この携帯端末から伝送された前記視聴覚情報に時刻情報を付随させて蓄積 情報として蓄積するとともに、 時刻情報を含む参照要求に応じて前記蓄積情 報を前記通信網を介して伝送する蓄積サーバと、
を具備する記憶支援システム。
2 . 前記携帯端末は、 作成した前記視聴覚情報に時刻情報を付加して伝送す る、
請求項 1記載の記憶支援システム。
3 . 前記携帯端末と無線通信を行うとともに、 前記蓄積サーバとイン夕一ネ ットを介して接続される基地局、 をさらに具備し、
前記基地局は、 前記携帯端末から伝送された前記視聴覚情報に時刻情報を 付加して、 前記インターネットを介して前記蓄積サーバに伝送する、
請求項 1記載の記憶支援システム。
4 . 前記蓄積サーバとイン夕一ネットを介して接続されるコンピュータ装置、 をさらに具備し、
前記コンピュータ装置は、 前記インターネットを介して前記蓄積サーバに 対して前記参照要求を行い、 前記参照要求に応じて前記蓄積サーバから伝送 された前記蓄積情報を再生する、
請求項 1記載の記憶支援システム。
5 . 前記携帯端末は、 前記視聴覚情報を前記蓄積サーバに常時記録するか否かを切り替える. 請求項 1記載の記憶支援システム。
6 . 前記携帯端末は、
任意に変位される位置の状況を撮影して映像信号を出力する撮影手段と、 任意に変位される位置の音響を収集して音響信号を出力する集音手段と、 前記撮影手段および前記集音手段の装着状態を検知する検知手段と、 を具 備し、
検知された装着状態の情報を前記視聴覚情報とともに前記通信網を介して 送する、 - 請求項 1記載の記憶支援システム。
7 . 前記蓄積サーバは、 前記携帯端末から伝送された装着状態の情報を前記 蓄積情報に含めて蓄積する、
請求項 6記載の記憶支援システム。
8 . 前記携帯端末は、 自端末の位置を示す情報を前記視聴覚情報とともに前 記通信網を介して伝送する、
請求項 1記載の記憶支援システム。
9 . 前記蓄積サーバは、 前記携帯端末の位置を示す情報を前記蓄積情報に含 めて蓄積する、
請求項 8記載の記憶支援システム。
PCT/JP2003/001842 2002-02-20 2003-02-20 Systeme support memoire WO2003071802A1 (fr)

Priority Applications (3)

Application Number Priority Date Filing Date Title
EP03706979A EP1475967A1 (en) 2002-02-20 2003-02-20 Memory support system
AU2003211339A AU2003211339A1 (en) 2002-02-20 2003-02-20 Memory support system
US10/479,623 US20040155112A1 (en) 2002-02-20 2003-02-20 Memory support system

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
JP2002-43443 2002-02-20
JP2002043443A JP2003244691A (ja) 2002-02-20 2002-02-20 記憶支援システム

Publications (1)

Publication Number Publication Date
WO2003071802A1 true WO2003071802A1 (fr) 2003-08-28

Family

ID=27750525

Family Applications (1)

Application Number Title Priority Date Filing Date
PCT/JP2003/001842 WO2003071802A1 (fr) 2002-02-20 2003-02-20 Systeme support memoire

Country Status (6)

Country Link
US (1) US20040155112A1 (ja)
EP (1) EP1475967A1 (ja)
JP (1) JP2003244691A (ja)
CN (1) CN1533672A (ja)
AU (1) AU2003211339A1 (ja)
WO (1) WO2003071802A1 (ja)

Families Citing this family (27)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2007509388A (ja) * 2003-09-30 2007-04-12 コーニンクレッカ フィリップス エレクトロニクス エヌ ヴィ ポータブル情報システムの情報を自動的に取り出すシステム及び方法
KR100891544B1 (ko) * 2004-11-19 2009-04-03 닛뽕빅터 가부시키가이샤 영상 음성 기록 장치 및 방법과, 영상 음성 재생 장치 및방법
JP4474529B2 (ja) * 2004-11-29 2010-06-09 独立行政法人産業技術総合研究所 作業状況記録装置、その記録方法及び記録プログラム
EP1895745B1 (de) * 2006-08-31 2015-04-22 Swisscom AG Verfahren und Kommunikationssystem zum kontinuierlichen Aufnehmen von Umgebungsdaten
JP5245257B2 (ja) 2006-11-22 2013-07-24 ソニー株式会社 画像表示システム、表示装置、表示方法
JP5176311B2 (ja) 2006-12-07 2013-04-03 ソニー株式会社 画像表示システム、表示装置、表示方法
JP5005389B2 (ja) * 2007-03-02 2012-08-22 三菱電機株式会社 リモート撮像システム
US9164995B2 (en) 2008-01-03 2015-10-20 International Business Machines Corporation Establishing usage policies for recorded events in digital life recording
US9270950B2 (en) 2008-01-03 2016-02-23 International Business Machines Corporation Identifying a locale for controlling capture of data by a digital life recorder based on location
US8005272B2 (en) 2008-01-03 2011-08-23 International Business Machines Corporation Digital life recorder implementing enhanced facial recognition subsystem for acquiring face glossary data
US7894639B2 (en) 2008-01-03 2011-02-22 International Business Machines Corporation Digital life recorder implementing enhanced facial recognition subsystem for acquiring a face glossary data
US9105298B2 (en) 2008-01-03 2015-08-11 International Business Machines Corporation Digital life recorder with selective playback of digital video
US8014573B2 (en) * 2008-01-03 2011-09-06 International Business Machines Corporation Digital life recording and playback
US9253560B2 (en) * 2008-09-16 2016-02-02 Personics Holdings, Llc Sound library and method
US20110058048A1 (en) * 2009-02-27 2011-03-10 Picosmos IL, Ltd. Apparatus, method and system for collecting and utilizing digital evidence
JP2013239988A (ja) * 2012-05-17 2013-11-28 Software Factory:Kk 携帯端末、記録装置及びこれらを備えたライフレコーダ
US8929709B2 (en) * 2012-06-11 2015-01-06 Alpinereplay, Inc. Automatic digital curation and tagging of action videos
JP5888172B2 (ja) * 2012-08-02 2016-03-16 ソニー株式会社 データ記憶装置およびプログラム
US10008237B2 (en) 2012-09-12 2018-06-26 Alpinereplay, Inc Systems and methods for creating and enhancing videos
CN103258127A (zh) * 2013-05-07 2013-08-21 候万春 一种记忆辅助装置
JP6381018B2 (ja) * 2014-03-28 2018-08-29 Necプラットフォームズ株式会社 通信装置捜索システム、サーバ装置、情報通信方法及びプログラム
CN105992140A (zh) * 2015-02-04 2016-10-05 沈扬 关于通过手机照相定位技术对环境污染情况进行监控和曝光技术
WO2016134031A1 (en) 2015-02-17 2016-08-25 Alpinereplay, Inc Systems and methods to control camera operations
TWI636432B (zh) * 2015-04-16 2018-09-21 鴻海精密工業股份有限公司 防盜裝置、防盜系統及方法
CN106157500B (zh) * 2015-04-20 2019-09-13 富泰华工业(深圳)有限公司 防盗装置、防盗系统及方法
US10321208B2 (en) 2015-10-26 2019-06-11 Alpinereplay, Inc. System and method for enhanced video image recognition using motion sensors
US11641555B2 (en) * 2021-06-28 2023-05-02 Moshe OFER Methods and systems for auditory nerve signal conversion

Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH1198489A (ja) * 1997-07-25 1999-04-09 Aisin Aw Co Ltd 映像収集配信装置、映像送信装置及び映像収集配信方式
JP2002007552A (ja) * 2000-06-22 2002-01-11 Toshiba Corp データ送信サービスシステムおよび方法
JP2002044506A (ja) * 2000-07-27 2002-02-08 Minolta Co Ltd デジタルカメラ及び画像通信システム
JP2002073638A (ja) * 2000-08-29 2002-03-12 Nippon Telegr & Teleph Corp <Ntt> 情報流通装置、情報発信端末装置、情報要求端末装置および情報流通システム
JP2002152704A (ja) * 2000-11-14 2002-05-24 Konica Corp 画像サービスシステム及び画像記憶システム
JP2003101984A (ja) * 2001-09-21 2003-04-04 Mitsubishi Heavy Ind Ltd 画像配信システムおよび画像配信方法
JP2003116081A (ja) * 2001-10-04 2003-04-18 Nippon Telegr & Teleph Corp <Ntt> データ保存方法及び装置

Family Cites Families (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP3893480B2 (ja) * 1994-09-28 2007-03-14 株式会社リコー デジタル電子カメラ
EP0814611B1 (de) * 1996-06-17 2002-08-28 Siemens Aktiengesellschaft Kommunikationssystem und Verfahren zur Aufnahme und Verwaltung digitaler Bilder

Patent Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH1198489A (ja) * 1997-07-25 1999-04-09 Aisin Aw Co Ltd 映像収集配信装置、映像送信装置及び映像収集配信方式
JP2002007552A (ja) * 2000-06-22 2002-01-11 Toshiba Corp データ送信サービスシステムおよび方法
JP2002044506A (ja) * 2000-07-27 2002-02-08 Minolta Co Ltd デジタルカメラ及び画像通信システム
JP2002073638A (ja) * 2000-08-29 2002-03-12 Nippon Telegr & Teleph Corp <Ntt> 情報流通装置、情報発信端末装置、情報要求端末装置および情報流通システム
JP2002152704A (ja) * 2000-11-14 2002-05-24 Konica Corp 画像サービスシステム及び画像記憶システム
JP2003101984A (ja) * 2001-09-21 2003-04-04 Mitsubishi Heavy Ind Ltd 画像配信システムおよび画像配信方法
JP2003116081A (ja) * 2001-10-04 2003-04-18 Nippon Telegr & Teleph Corp <Ntt> データ保存方法及び装置

Also Published As

Publication number Publication date
EP1475967A1 (en) 2004-11-10
JP2003244691A (ja) 2003-08-29
US20040155112A1 (en) 2004-08-12
CN1533672A (zh) 2004-09-29
AU2003211339A1 (en) 2003-09-09

Similar Documents

Publication Publication Date Title
WO2003071802A1 (fr) Systeme support memoire
JP5187617B2 (ja) 画像記録装置、画像記録方法
US20060171539A1 (en) Wireless event authentication system
JPWO2007080921A1 (ja) 情報記録システム、情報記録装置、情報記録方法及び情報収集プログラム
CN101179711A (zh) 成像设备和成像方法
WO2008120971A1 (en) Method of and apparatus for providing tracking information together with environmental information using a personal mobile device
US20150105035A1 (en) Web-Connected Safety Helmet
US11769383B2 (en) Remote video triggering and tagging
WO2008016083A1 (fr) Dispositif et système de présentation d&#39;informations en superposition
JP6600596B2 (ja) 音声ガイド支援システム及びそのプログラム
WO2009052618A1 (en) System, method and computer program for capturing, sharing, and annotating content
JP4553272B2 (ja) 車載画像記録装置
US8542981B2 (en) Manual voice annotations for CCTV reporting and investigation
JP2003304486A (ja) 記憶システムとそれを用いたサービスの販売方法
JP2010204867A (ja) 車載画像記録装置
US20140176329A1 (en) System for emergency rescue
KR100926580B1 (ko) 어린이 방범 시스템 및 그 운용방법
JP2020184678A (ja) ウェアラブルカメラおよび信号付与方法
JP2010056894A (ja) 映像情報管理システム
WO2012025644A1 (es) Sistema multi-servicios personalizado para máquinas vending
JP5478462B2 (ja) 画像音声記録再生装置
JPH11177969A (ja) 画像監視装置
JP2016133963A (ja) 通信型ドライブレコーダ及び緊急通報システム
JP6559096B2 (ja) 情報出力システム及び情報出力方法
JP6793516B2 (ja) 車両動画送信システムおよび車両動画送信方法

Legal Events

Date Code Title Description
AK Designated states

Kind code of ref document: A1

Designated state(s): AE AG AL AM AT AU AZ BA BB BG BR BY BZ CA CH CN CO CR CU CZ DE DK DM DZ EC EE ES FI GB GD GE GH GM HR HU ID IL IN IS KE KG KP KR KZ LC LK LR LS LT LU LV MA MD MG MK MN MW MX MZ NO NZ OM PH PL PT RO RU SC SD SE SG SK SL TJ TM TN TR TT TZ UA UG US UZ VC VN YU ZA ZM ZW

AL Designated countries for regional patents

Kind code of ref document: A1

Designated state(s): GH GM KE LS MW MZ SD SL SZ TZ UG ZM ZW AM AZ BY KG KZ MD RU TJ TM AT BE BG CH CY CZ DE DK EE ES FI FR GB GR HU IE IT LU MC NL PT SE SI SK TR BF BJ CF CG CI CM GA GN GQ GW ML MR NE SN TD TG

121 Ep: the epo has been informed by wipo that ep was designated in this application
WWE Wipo information: entry into national phase

Ref document number: 10479623

Country of ref document: US

WWE Wipo information: entry into national phase

Ref document number: 2003706979

Country of ref document: EP

WWE Wipo information: entry into national phase

Ref document number: 20038006642

Country of ref document: CN

WWP Wipo information: published in national office

Ref document number: 2003706979

Country of ref document: EP

WWW Wipo information: withdrawn in national office

Ref document number: 2003706979

Country of ref document: EP