WO2005020177A1 - 監視システム - Google Patents

監視システム Download PDF

Info

Publication number
WO2005020177A1
WO2005020177A1 PCT/JP2003/010580 JP0310580W WO2005020177A1 WO 2005020177 A1 WO2005020177 A1 WO 2005020177A1 JP 0310580 W JP0310580 W JP 0310580W WO 2005020177 A1 WO2005020177 A1 WO 2005020177A1
Authority
WO
WIPO (PCT)
Prior art keywords
robot
signal
abnormal
abnormal signal
remote control
Prior art date
Application number
PCT/JP2003/010580
Other languages
English (en)
French (fr)
Inventor
Shin Furukawa
Shigeaki Ino
Yoichi Takamoto
Original Assignee
Tmsuk Co., Ltd.
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Tmsuk Co., Ltd. filed Critical Tmsuk Co., Ltd.
Priority to PCT/JP2003/010580 priority Critical patent/WO2005020177A1/ja
Publication of WO2005020177A1 publication Critical patent/WO2005020177A1/ja

Links

Classifications

    • GPHYSICS
    • G08SIGNALLING
    • G08BSIGNALLING OR CALLING SYSTEMS; ORDER TELEGRAPHS; ALARM SYSTEMS
    • G08B25/00Alarm systems in which the location of the alarm condition is signalled to a central station, e.g. fire or police telegraphic systems
    • G08B25/01Alarm systems in which the location of the alarm condition is signalled to a central station, e.g. fire or police telegraphic systems characterised by the transmission medium
    • G08B25/08Alarm systems in which the location of the alarm condition is signalled to a central station, e.g. fire or police telegraphic systems characterised by the transmission medium using communication transmission lines
    • GPHYSICS
    • G08SIGNALLING
    • G08BSIGNALLING OR CALLING SYSTEMS; ORDER TELEGRAPHS; ALARM SYSTEMS
    • G08B25/00Alarm systems in which the location of the alarm condition is signalled to a central station, e.g. fire or police telegraphic systems
    • G08B25/01Alarm systems in which the location of the alarm condition is signalled to a central station, e.g. fire or police telegraphic systems characterised by the transmission medium
    • G08B25/10Alarm systems in which the location of the alarm condition is signalled to a central station, e.g. fire or police telegraphic systems characterised by the transmission medium using wireless transmission systems

Definitions

  • the present invention can monitor indoors and outdoors of homes and offices, and inside and outside of premises such as factories, warehouses, research laboratories, and tank yards, and can take measures against abnormal conditions inside and outside and on premises It relates to a monitoring system.
  • Background art
  • the present invention is capable of monitoring indoors or outdoors such as homes from outside and responding to the monitoring result, and is capable of detecting an abnormal state indoors or outdoors such as homes while away from home. It is an object of the present invention to provide a monitoring system that can deal with detected abnormal conditions and detect and deal with abnormal conditions inside and outside a company building or on a site such as a factory at a remote place such as a monitoring site. Disclosure of the invention
  • a monitoring system includes a robot device that can move indoors or outdoors on a floor or a site, and wirelessly transmits an abnormal signal from the robot device.
  • a monitoring system comprising: an information processing device that receives an information signal; and a robot remote control device that receives an abnormal signal from the robot device via a telephone line between the information processing device and the remote control device.
  • a command signal is transmitted to the robot device via a telephone line with the robot device, and the robot device is configured to perform an operation based on the command signal.
  • a surveillance system is a robot system capable of moving indoors or outdoors on a floor or a premises, and an information processing for wirelessly receiving an abnormal signal from the robot system.
  • a remote control device for receiving an abnormal signal from the robot device via a telephone line between the information processing device and the remote control device. When a signal is received, a command signal is transmitted to the robot device via a telephone line with the robot device, and the robot device performs an operation based on the command signal.
  • a command signal can be transmitted to the robot device via a telephone line with the robot device. Therefore, a camera or the like is attached to the robot device, and the image signal is transmitted to the robot remote control device. If it is possible to transmit via a telephone line, it is possible to monitor indoors and outdoors (for example, gardens, premises) such as homes and office buildings (hereafter referred to as homes) from outside (monitoring sites, the same applies hereinafter). It is possible to operate the robot device via a telephone line, so that it is possible to respond to the monitoring result.In addition, the mouth robot device can send an abnormal signal to the robot remote control device via the information processing device.
  • the monitoring system according to claim 2 is a monitoring system according to claim 1.
  • the robot remote control device transmits a command signal for transmitting image data and voice data to the robot device via a telephone line with the robot device, and the robot device controls the robot remote control device.
  • the camera and microphone transmit image data and audio data to the robot remote control device via the telephone line between the two.
  • the robot remote control device receives, from the robot device, image data obtained by imaging indoors / outdoors or on the premises and audio data obtained by collecting sounds indoors / outdoors or on the premises.
  • image data obtained by imaging indoors / outdoors or on the premises
  • audio data obtained by collecting sounds indoors / outdoors or on the premises.
  • the monitoring system according to claim 3 is the monitoring system according to claim 1 or 2, wherein the robot remote control device instructs the robot device to turn left / right or move back and forth. A signal is transmitted, and the robot apparatus receives the command signal and moves left and right or moves back and forth.
  • the monitoring system according to claim 4 is the monitoring system according to any one of claims 1 to 3, wherein the robot remote control device turns the head left and right to the robot device.
  • a command signal for raising and lowering is transmitted, and the robot apparatus receives the above command signal and turns the head left and right or moves up and down. With this configuration, the robot device can be operated more appropriately.
  • the robot device can accurately detect the abnormal state and notify the robot remote control device via the information processing device. It has the effect of being able to accurately know the abnormal state inside or outside the house or inside the premises, and to be able to cope with the abnormal state by appropriately operating the robot device via the telephone line.
  • the monitoring system according to claim 6 is the monitoring system according to any one of claims 1 to 5, wherein a plurality of indoor or outdoor locations such as a home are installed.
  • the monitoring system according to claim 8 is the monitoring system according to any one of claims 1 to 7, wherein the telephone line is a mobile communication device such as a PHS telephone device or a mobile telephone device. It is a telephone line through the device.
  • the telephone line is a mobile communication device such as a PHS telephone device or a mobile telephone device. It is a telephone line through the device.
  • FIG. 4 is a block diagram showing the robot remote control device of FIG.
  • FIG. 7 is a side view showing the robot device.
  • FIG. 8 is a functional block diagram showing a means for realizing the function of the CPU of the robot device.
  • FIG. 9 is a functional block diagram showing a function realizing means of the CPU of the robot device.
  • FIG. 10 is a flowchart showing the operation of the CPU of the robot device.
  • FIG. 16 is a flowchart showing a communication operation with the information processing device and the robot device.
  • FIG. 1 is a block diagram showing a monitoring system according to a first embodiment of the present invention.
  • A is a room at home
  • 1 is a robot device movable on an indoor or outdoor floor or site.
  • reference numerals 1a and 1b denote antennas similar to those in FIG. 1, 101 denotes a mobile communication device for performing mobile communication, and 102 and 109 denote CPUs (central control units) for controlling the whole.
  • Processing device 103 is a CCD camera that captures an image of a subject and outputs an image signal, 104 is a microphone that outputs input sound as an audio signal, 105 is an amplifier, and 106 is a speaker.
  • Reference numeral 107 denotes a voice recognition board (for example, SPD-51 ED manufactured by Sanyo Electric Co.) for recognizing voice from an input voice signal and outputting a command message, and reference numeral 108 denotes a wireless device for performing wireless communication.
  • voice recognition board for example, SPD-51 ED manufactured by Sanyo Electric Co.
  • ⁇ , 113 is a DC for turning the head left and right or up and down.
  • Head Driving Driving Motor Driving Driving Driving Driving Driving Driving Robot Driving Robot Device 1 Mo Evening Dryno ⁇ 1 17 is a pulse counter that counts pulses from the traveling encoder 1 18 that detects the rotation angle, 1 19 is an A / D converter that performs A / D conversion, and 1 20 is A sensor block with multiple sensors, 1 2 1 is a human sensor that detects human movement and outputs an abnormal signal, and 1 2 2 is a photo that detects the presence of an object within a set range and outputs an abnormal signal.
  • FIG. 5 is a block diagram showing the sensor device 4 of FIG.
  • reference numeral 4a denotes the same antenna as in FIG. 1, 41 denotes a radio device for transmitting a radio signal, 42 denotes an A / D converter for performing A / D conversion, and 43 denotes a plurality of sensors.
  • Sensor block 4 4 is a human sensor that detects human motion and outputs an abnormal signal
  • 4 5 is a photo sensor that detects the presence of an object within the set range and outputs an abnormal signal
  • 4 6 is when touched A sensor that outputs an abnormal signal to the sensor
  • 47 is a flame / smoke sensor that detects flame and smoke and outputs an abnormal signal
  • 48 is a temperature sensor that outputs an abnormal signal when the indoor temperature is higher than a predetermined temperature.
  • Reference numeral 49 denotes an infrared sensor that detects an object emitting infrared light and outputs an abnormal signal.
  • reference numerals 101 to 111, 113 to 118, and 122 to 126 are the same as those in FIG. Is omitted.
  • Reference numeral 128 denotes a battery for supplying power to each section
  • reference numeral 128 denotes two wheels for driving the robot device 1
  • reference numeral 130 denotes a casing for stabilizing the robot device 1.
  • FIG. 8 is a functional block diagram showing the function realizing means of the CPU 102 of the robot device 1
  • FIG. 9 is a functional block diagram showing the function realizing means of the CPU 109 of the robot device 1.
  • FIG. 10 is a flowchart showing the operation of the CPU 102 of the robot device 1
  • FIG. 11 is a flowchart showing the operation of the CPU 109 of the robot device 1.
  • the command determination means 1091 determines whether or not a command (voice recognition command) obtained by voice recognition by the voice recognition board 107 is input.
  • the execution unit 1092 executes the input command (S 12).
  • the abnormality determining means 1093 determines the presence or absence of an abnormal signal from the sensor (S13), and if it determines that there is an abnormal signal, the transmitting means 10994 sends the information to the information processing device 2.
  • the abnormal signal is transmitted as a wireless signal (S14). If it is determined in step S11 that no voice recognition command has been input, the process proceeds to step S13, and if it is determined in step S13 that there is no abnormal signal from the sensor, the process returns to step S11. .
  • FIG. 12 is a functional block diagram showing a function realizing means of the CPU 21 of the information processing apparatus 2.
  • reference numeral 211 denotes an abnormality determining means for determining the presence or absence of an abnormality
  • reference numeral 212 denotes an analyzing means for analyzing an abnormal signal
  • reference numeral 2 13 denotes a line connecting means for connecting a telephone line
  • reference numeral 2 4 Is transmission means for transmitting data
  • 2 15 is storage means for storing data in the memory 24
  • 2 16 is line disconnection means for disconnecting the line
  • 2 17 is incoming determination means for determining whether there is an incoming call.
  • Reference numeral 218 denotes execution means for performing an operation according to the content of the incoming call. The operation of the CPU 21 of the information processing device 2 configured as described above will be described with reference to FIGS. 13 and 14.
  • FIG. 13 is a flowchart showing the processing operation of the abnormal signal
  • FIG. 14 is a flowchart showing the incoming operation from the robot remote controller 3.
  • the abnormality determining means 211 determines whether or not an abnormal signal has been received from the sensor of the robot device 1 or the sensor of the sensor device 4 (S 21).
  • the analysis means 2 12 analyzes the abnormal signal (S 2 2).
  • the line connection means 2 13 connects the information processing device 2 and the robot remote control device 3 with a telephone line (S 23), and the transmission means 2 14 checks the analysis result in step S 22.
  • the indicated analysis result signal is transmitted to the robot remote controller 3 (S24).
  • the storage means 215 stores the abnormal signal and the analysis result signal in the memory 24 (S25). If it is determined in step S21 that no abnormal signal has been received, the line disconnecting means 2 16 disconnects the telephone line (S26).
  • the incoming call judging means 2 17 judges whether there is an incoming call from the robot remote controller 3 (S 31), and if it judges that there is an incoming call, the line connecting means 2 17 13 connects the robot remote controller 3 via a telephone line (S32), and the execution means 218 performs an operation according to the content of the incoming call (for example, transmission of image data with a fixed date and time from the robot remote controller 3). (Sending operation according to the request) (S33), and return to step S31. If it is determined in step S31 that there is no incoming call, the line disconnecting means 2 16 disconnects the telephone line (S34).
  • FIG. 15 is a functional block diagram showing a function realizing means of the CPU 33 of the robot remote control device 3.
  • reference numeral 331 denotes an incoming call judging means for judging the presence or absence of an incoming call; 332, a line connecting means for connecting a telephone line; 333, an image is displayed on the display device 35 and sound is output from the speaker 36.
  • Display means, 334 is a command transmission determination means for determining the presence or absence of a command to be transmitted, 335 is a transmission means for transmitting data, 336 is a line disconnection determination means for determining whether or not to disconnect the line, 337 is a line disconnection Line disconnecting means 338 is a receiving means for receiving.
  • step S44 the command transmission determining means 334 determines whether or not there is a command to be transmitted, and if so, the line connecting means 332 connects the robot device 1 via a telephone line (S45), and the transmitting means 335 Transmits a command to the robot device 1 (S46), and returns to step S41. If it is determined in step S44 that there is no command to be transmitted, then the line disconnection determining means 336 determines whether to disconnect the line (S47). This determination is made based on the input data of the operator. If it is determined that the line is to be disconnected, the line disconnecting means 337 disconnects the telephone line (S48). In FIG.
  • the line connection means 3332 connects the robot device 1 and the robot remote control device 3 with a telephone line (S51), and the transmission means 3335 requests image data or the like.
  • This command is transmitted (S52), and the receiving means 338 receives the image data and audio data from the robot device 1 (S53).
  • the display means 33 33 displays the received image data as an image on the display device 35, and outputs the received audio data as sound from the speed 36 (S54).
  • the command transmission determining means 3 3 4 determines whether or not there is a command to be transmitted (S55), and if there is, returns to step S51. If not, the line disconnecting means 3 3 7 Disconnects the telephone line (S56) o
  • the robot device 1, the information processing device 2, and the sensor device 3 are arranged indoors. However, they can be arranged and used in a corridor, a garden, a site, or the like. It is applicable both outdoors. Further, although the robot device 1 travels on the indoor floor surface, the present invention is not limited to this, and the robot device 1 may travel on the premises. That is, the robot apparatus 1 has a structure that travels on the floor or premises indoors or outdoors by wheels including driving wheels powered by a motor, etc. The structure may be such that it walks on the floor or in the premises, or the structure may be such that it travels indoors or outdoors on the floor or in the premises using a crawler structure. Further, the information processing device 2 and the sensor device 3 may be arranged indoors or may be arranged outdoors.
  • robot remote control device 3 when receiving an abnormal signal from robot device 1, robot remote control device 3 transmits a command signal via the telephone line to robot device 1.
  • the robot device 1 can transmit the command signal to the robot device 1 via the telephone line with the robot device 1.
  • a camera 103 or the like is attached to the robot device 1 and its image signal can be transmitted to the robot remote control device 3 via a telephone line, it can be used indoors such as at home, It is possible to monitor the outdoors and operate the robot device 1 via a telephone line, so that the result of the monitoring can be dealt with. Further, the robot device 1 can remotely control the robot via the information processing device 2.
  • the normal state can be detected by the robot unit 1, and the operator can know the detected abnormal state while away from home.
  • the abnormal state can be dealt with by operating the robot unit 1 via the telephone line. can do.
  • the robot remote control device 3 transmits a command signal for transmitting image data and audio data to the mouth robot device 1 via the telephone line with the robot device 1, and the robot device 1
  • the robot remote controller 3 By transmitting image data and audio data from the camera 103 and the microphone 104 to the robot remote controller 3 via the telephone line to the robot remote controller 3, the robot remote controller 3
  • the image data obtained by capturing an image of an indoor or outdoor room and the audio data obtained by collecting sound indoors or outdoors are received from the robot unit 1, displayed on the display unit 35, and displayed on the display unit 3, and the speaker 3 6 allows the operator to know the abnormal state of indoors or outdoors, such as at home, by image and audio, so that the robot device can be heard on the go. 1 It can cope with the abnormal state by positively operated.
  • the robot remote control device 3 sends a command signal for turning left and right or moving back and forth to the robot device 1, and the robot device 1 turns left and right or moves back and forth, thereby operating the robot device 1. Can be performed properly.
  • the robot remote control device 3 sends a command signal to the robot device 1 to turn the head left and right or up and down, and the robot device 1 turns the head left and right or moves up and down to control the robot device 1. Can be performed more appropriately.
  • the robot apparatus 1 has a robot sensor group having a plurality of sensors that output an abnormal signal when an abnormal state is detected, and transmits the abnormal signal to the information processing apparatus 2 by wireless, thereby making the robot apparatus 1 1 can accurately detect abnormal conditions and notify the robot remote control device 3 via the information processing device 2, so that the operator can accurately detect abnormal conditions indoors or outdoors such as at home.
  • the robot device 1 can be properly operated via the telephone line to deal with an abnormal state.
  • a sensor device 4 having a plurality of sensors installed at various places indoors or outdoors, such as at home, is provided. The sensor device 4 detects an abnormal state of any of the plurality of sensors and outputs an abnormal signal.
  • an abnormal signal is wirelessly transmitted to the information processing device 2 to detect an abnormal state at various places indoors or outdoors, such as at home. Can detect the abnormal condition and notify the robot remote control device 3 of the detected abnormal condition via the information processing device 2, so that the operator on the go can check the abnormal condition indoors or outdoors such as at home. It is possible to know accurately, and it is possible to appropriately operate the robot device 1 via the telephone line to deal with an abnormal state.
  • the sensors are human sensors 44, 121, which detect movement of a person and output an abnormal signal, and photosensors 45, 12 which detect the presence of an object within a set range and output an abnormal signal.
  • Flame Smoke sensor that detects smoke and outputs an abnormal signal 4 7 1 2 4
  • Temperature sensor that outputs an abnormal signal when the indoor or outdoor temperature is above a predetermined temperature
  • the telephone line is a telephone line via a mobile communication device such as a PHS telephone device
  • communication between the robot device and the robot remote control device and communication between the information processing device and the robot remote control device are performed.
  • the robot device 1 can be driven on the floor or on the premises by wheels 1229 including driving wheels powered by motors 116, etc.
  • the mouth bot device 1 can move right and left and back and forth without fail. It is possible to move freely with multiple feet even on indoor or outdoor floors or premises with moving obstacles such as mochi. Industrial applicability
  • a robot device that can move indoors or outdoors on a floor surface or a site, and an abnormal signal from the robot device are transmitted.
  • An information processing device that receives wirelessly, and an abnormal signal from a robot device
  • a remote control device that receives a signal from the mouth pot device when the robot remote control device receives an abnormal signal from the mouth pot device.
  • the robot transmits a command signal to the robot via the telephone line between the robot and the robot device, and performs an operation based on the command signal, thereby robotically transmitting the command signal via the telephone line to the robot.
  • the device Since it can be transmitted to the device, if a camera or the like is attached to the robot device and its image signal can be transmitted to the robot remote control device via a telephone line, it can be used indoors or outdoors, such as at home from outside. Monitoring can be performed, and the robotic device can be operated via a telephone line, so that the monitoring result can be dealt with. Since an abnormal signal can be transmitted to the robot remote control device via the device, the abnormal condition inside or outside the house or the like can be detected by the robot device, and the abnormal condition detected by the operator while going out can be detected. Since the state can be known, an advantageous effect that an abnormal state can be dealt with by operating the robot apparatus via the telephone line is obtained.
  • the robot remote control device transmits an image to the robot device via a telephone line with the robot device.
  • a command signal for transmitting data and voice data is transmitted, and the robot device transfers image data and voice data from the camera and microphone via the telephone line to the robot remote control device.
  • the robot remote control device receives from the robot device the image data obtained by imaging the indoor or outdoor and the audio data obtained by collecting sound indoors or outdoors.
  • the display can be displayed on the display device and the sound can be heard on the speaker, so that the operator on the go can check the abnormal condition indoors or outdoors, such as at home, with image data and audio data. Data, it is possible to obtain an advantageous effect that the robot device can be properly operated via a telephone line to deal with an abnormal state.
  • the robot remote control device causes the robot device to turn left and right or move back and forth.
  • the robot device receives the command signal and turns left and right or moves back and forth to optimize the operation of the robot device.
  • the robot apparatus detects an abnormal state when detecting an abnormal state.
  • a robot sensor group having a plurality of sensors that output signals.
  • the robot device transmits an abnormal signal to the information processing device wirelessly, whereby the robot device accurately detects the abnormal state and performs the robot control via the information processing device. Since the remote control device can be notified, the operator can know the abnormal condition indoors or outdoors such as at home, etc. on the go, and properly operate the robot device via the telephone line to detect the abnormal condition. Has the advantageous effect of being able to deal with
  • a plurality of indoor or outdoor locations such as homes are provided.
  • a sensor device having a sensor.
  • the sensor device wirelessly transmits the abnormal signal to the information processing device, thereby enabling the home device to be operated.
  • the sensor can accurately detect abnormal conditions at various places indoors or outdoors, and can notify the robot remote control device of the detected abnormal conditions via an information processing device.
  • the advantageous effect of being able to accurately know the abnormal state indoors or outdoors, such as at home, and being able to properly handle the abnormal state by operating the robot device via the telephone line is advantageous. can get.
  • the sensor is a motion sensor that detects a motion of a person and outputs an abnormal signal.
  • a photo sensor that detects the presence of an object within the set range and outputs an abnormal signal
  • a flame sensor that detects flame and smoke and outputs an abnormal signal
  • a smoke sensor when the indoor or outdoor temperature is higher than a predetermined temperature
  • Temperature sensor that outputs abnormal signal, emits infrared light If one or more infrared sensors that detect abnormal objects and output an abnormal signal, there is an abnormal state in which there is a person intruding while away from home or an object that should not be present (for example, a glass piece on the floor). Is detected), abnormal conditions such as fire or smoke, abnormal conditions where indoors or outdoors are hot, or abnormal conditions such as the presence of infrared-emitting objects such as dogs or cats. This has the advantageous effect of being able to do so.
  • the telephone line is a mobile phone such as a PHS telephone device or a mobile telephone device.
  • a mobile communication device By using a telephone line via a mobile communication device, it is possible to reliably perform communication between the robot device and the robot remote control device and between the information processing device and the robot remote control device via the telephone line. Advantageous effects can be obtained.
  • the robot apparatus includes a driving wheel powered by a motor or the like.
  • the robot device moves left and right and back and forth by traveling on the floor or site with multiple wheels, walking on the floor or site with multiple feet, or traveling on the floor or site using a crawler structure.
  • a driving wheel powered by a motor or the like moves left and right and back and forth by traveling on the floor or site with multiple wheels, walking on the floor or site with multiple feet, or traveling on the floor or site using a crawler structure.

Landscapes

  • Business, Economics & Management (AREA)
  • Emergency Management (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Engineering & Computer Science (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Manipulator (AREA)
  • Telephonic Communication Services (AREA)

Abstract

外出先から自宅等の屋内または屋外を監視することができると共に監視結果に対処することができ、また、外出先で自宅等の屋内または屋外の異常状態を検知することができると共に検知した異常状態に対処することができる監視システムを提供することを目的とする。屋内または屋外の床面または地面を移動可能なロボット装置(1)と、ロボット装置からの異常信号を無線で受信する情報処理装置(2)と、ロボット装置からの異常信号を情報処理装置との間の電話回線で受信するロボット遠隔操作装置3とを有する監視システムであって、ロボット遠隔操作装置は、ロボット装置からの異常信号を受信したとき、ロボット装置との間の電話回線を介して指令信号をロボット装置へ送信し、ロボット装置は指令信号に基づく動作を行う。

Description

監視システム 技術分野
本発明は、 自宅や社屋の屋内外や工場や倉庫、 研究所、 タンクヤード等の敷地 内外を監視することができ、 また屋内外や敷地内の異常状態に対して処置を施す ことが可能な監視システムに関するものである。 背景技術
従来から、 外出先から風呂を沸かしたり、 留守番電話に記録された音声を外出 先で聞くシステムはあったが、 外出先から自宅や社屋の室内を監視し、 監視結果 に応じて処置を行ったり、 外出先で自宅の屋内外の異常状態を検知し、 その異常 状態に対して処理を施すようなシステムは存在しなかった。 また、 離れた場所か ら社屋の内外や工場、 倉庫、 研究所の敷地内の屋外を移動しながら監視し異常状 態を検知し通報処理するシステムも存在しなかった。
このように、 外出先から屋内外を監視し、 監視結果に応じて処置を行ったり、 外出先で異常状態を検知し、 その異常状態に対して処理を施すようなシステムは 存在せず、 そのようなシステムの実現が要望されていた。 また、 社屋の屋内外や 工場等の敷地内の異常状態を検知し対応するそのようなシステムも要望されてい た。
本発明は、 外出先から自宅等の屋内または屋外を監視することができると共に 監視結果に対処することができ、 また、 外出先で自宅等の屋内または屋外の異常 状態を検知することができると共に検知した異常状態に対処することができると ともに、 社屋の内外や工場等の敷地内の異常状態を監視場等の離れた場所で検知 し対処できる監視システムを提供することを目的とする。 発明の開示
上記課題を解決するために本発明の監視システムは、 屋内または屋外の床面ま たは敷地内を移動可能なロボッ ト装置と、 ロボッ ト装置からの異常信号を無線で 受信する情報処理装置と、 ロボッ ト装置からの異常信号を情報処理装置との間の 電話回線で受信するロボッ ト遠隔操作装置とを有する監視システムであって、 口 ボッ ト遠隔操作装置は、 ロボッ ト装置からの異常信号を受信したとき、 ロボッ ト 装置との間の電話回線を介して指令信号をロボッ ト装置へ送信し、 ロボッ ト装置 は指令信号に基づく動作を行う構成を備えている。
これにより、 外出先から自宅等の屋内または屋外を監視することができると共 に監視結果に対処することができ、 また、 外出先で自宅等の屋内または屋外の異 常状態を検知することができると共に検知した異常状態に対処することができる とともに、 社屋の内外や敷地内の異常状態を監視場等の離れたところで検知し対 処できる監視システムが得られる。
本発明の請求の範囲第 1項に記載の監視システムは、 屋内または屋外の床面ま たは敷地内を移動可能なロボッ ト装置と、 ロボッ ト装置からの異常信号を無線で 受信する情報処理装置と、 ロボッ ト装置からの異常信号を情報処理装置との間の 電話回線で受信するロボッ ト遠隔操作装置とを有する監視システムであって、 口 ボッ ト遠隔操作装置は、 ロボット装置からの異常信号を受信したとき、 ロボッ ト 装置との間の電話回線を介して指令信号をロボッ ト装置へ送信し、 ロボッ ト装置 は指令信号に基づく動作を行うこととしたものである。
この構成により、 ロボッ ト装置との間の電話回線を介して指令信号をロボッ ト 装置へ送信することができるので、 ロボット装置にカメラ等を取り付けておき、 その画像信号を口ボッ ト遠隔操作装置に電話回線を介して送信できるようにして おけば、 外出先 (監視場、 以下同じ) から自宅や社屋 (以下自宅等という) 等の 屋内や屋外 (たとえば庭、 敷地内) を監視することができ、 また電話回線を介し てロボッ ト装置を操作できるので、 監視結果に対処することができ、 さらに、 口 ボッ ト装置は情報処理装置を介してロボット遠隔操作装置に異常信号を送信する ことができるので、 自宅や社屋等の屋内または屋外 (敷地内) の異常状態をロボ ット装置により検知することができると共に、 外出先で操作者は検知した異常状 態を知ることができるので、 電話回線を介してロボット装置を操作することによ り異常状態に対処することができるという作用を有する。
請求の範囲第 2項に記載の監視システムは、 請求の範囲第 1項に記載の監視シ ステムにおいて、 ロボッ ト遠隔操作装置はロボッ ト装置との間の電話回線を介し てロボッ ト装置へ画像データおよび音声データを送信させるための指令信号を送 信し、 ロボット装置はロボッ ト遠隔操作装置との間の電話回線を介してカメラお よびマイクによる画像データおよび音声デー夕をロボッ ト遠隔操作装置へ送信す ることとしたものである。
この構成により、 ロボッ ト遠隔操作装置は、 屋内外又は敷地内を撮像して得ら れた画像データおよび屋内外又は敷地内で集音して得られた音声デ一夕をロボッ ト装置から受信して、 表示装置で表示、 およびスビ一力で聴音することができる ので、 外出先で操作者は、 自宅等の屋内外又は敷地内の異常状態を画像データお よび音声デ一夕で知ることができるので、 電話回線を介してロボッ ト装置を適正 に操作して異常状態に対処することができるという作用を有する。
請求の範囲第 3項に記載の監視システムは、 請求の範囲第 1項または第 2項に 記載の監視システムにおいて、 ロボッ ト遠隔操作装置はロボッ ト装置へ左右旋回 または前後へ移動させるための指令信号を送信し、 ロボット装置は前記指令信号 を受信し左右旋回または前後へ移動することとしたものである。
この構成により、 ロボッ ト装置の操作を適正に行うことができるという作用を 有する。
請求の範囲第 4項に記載の監視システムは、 請求の範囲第 1項乃至第 3項のい ずれか 1に記載の監視システムにおいて、 ロボッ ト遠隔操作装置はロボッ ト装置 へ頭部を左右旋回または上下させるための指令信号を送信し、 ロボット装置は前 記指令信号を受信し頭部を左右旋回または上下することとしたものである。 この構成により、 ロボッ ト装置の操作を更に適正に行うことができるという作 用を有する。
請求の範囲第 5項に記載の監視システムは、 請求の範囲第 1項乃至第 4項のい ずれか 1に記載の監視システムにおいて、 ロボッ ト装置は、 異常状態を検知した ときに異常信号を出力する複数のセンサを有するロボッ トセンサ群を有し、 異常 信号を情報処理装置へ無線で送信することとしたものである。
この構成により、 ロボッ ト装置は異常状態を正確に検知して情報処理装置を介 してロボッ ト遠隔操作装置に通知することができるので、 外出先で操作者は、 自 宅等の屋内外又は敷地内の異常状態を正確に知ることができ、 電話回線を介して ロボット装置を適正に操作して異常状態に対処することができるという作用を有 する。
請求の範囲第 6項に記載の監視システムは、 請求の範囲第 1項乃至第 5項のい ずれか 1に記載の監視システムにおいて、 自宅等の屋内または屋外の各所に取り 付けられた複数のセンサを有するセンサ装置を備え、 センサ装置は、 複数のセン ザのいずれかのセンサが異常状態を検知して異常信号を出力したとき、 異常信号 を情報処理装置へ無線で送信することとしたものである。
この構成により、 自宅等の屋内または屋外の各所の異常状態をセンサ装置によ り正確に検知し、 検知した異常状態を情報処理装置を介してロボッ ト遠隔操作装 置に通知することができるので、 外出先で操作者は、 自宅等の屋内または屋外の 異常状態を正確に知ることができ、 電話回線を介してロボッ ト装置を適正に操作 して異常状態に対処することができるという作用を有する。
請求の範囲第 7項に記載の監視システムは、 請求の範囲第 5項または第 6項に 記載の監視システムにおいて、 センサは、 人の動きを検知して異常信号を出力す る人感センサ、 設定範囲内の物体の存在を検知して異常信号を出力するフォトセ ンサ、 炎,煙を検知して異常信号を出力する炎 ·煙センサ、 屋内または屋外の温 度が所定温度以上のときに異常信号を出力する温度センサ、 赤外線を発する物体 を検知して異常信号を出力する赤外線センサの内いずれか 1であることとしたも のである。
この構成により、 留守中に侵入している人が居るという異常状態や、 あるべき でない物体がある (例えば床にガラス片が落ちている) という異常状態、 炎 -煙 が出ているという異常状態、 屋内または屋外が高温であるという異常状態、 赤外 線を発する物体たとえば犬や猫などの動物が居るという異常状態を検知すること ができるという作用を有する。
請求の範囲第 8項に記載の監視システムは、 請求の範囲第 1項乃至第 7項のい ずれか 1に記載の監視システムにおいて、 電話回線は P H S電話装置、 携帯電話 装置等の移動体通信装置を介する電話回線であることとしたものである。
この構成により、 ロボッ ト装置 · ロボット遠隔操作装置間の通信および情報処 理装置 · ロボッ ト遠隔操作装置間の通信を電話回線を介して確実に行うことがで きるという作用を有する。
請求の範囲第 9項に記載の監視システムは、 請求の範囲第 1項乃至第 8項のい ずれか 1に記載の監視システムにおいて、 ロボッ ト装置は、 モー夕等を動力とす る駆動輪を含む車輪により床面または敷地内を走行、 または複数の足により床面 または敷地内を歩行、 あるいはクロ一ラ構造により床面または敷地内を走行する こととしたものである。
この構成により、 ロボッ ト装置は左右移動、 前後移動を確実に行うことができ ると共に、 本 ·おもちゃ等の移動障害物のある屋内または屋外の床面または敷地 内でも複数の足で自由に移動することができるという作用を有する。 図面の簡単な説明
第 1図は本発明の実施の形態 1による監視システムを示すプロック図である。 第 2図は第 1図のロボッ ト装置を示すプロック図である。
第 3図は第 1図の情報処理装置を示すプロック図である。
第 4図は第 1図のロボッ ト遠隔操作装置を示すプロック図である。
第 5図は第 1図のセンサ装置を示すプロック図である。
第 6図はロボット装置を示す正面図である。
第 7図はロボット装置を示す側面図である。
第 8図はロボット装置の C P Uの機能実現手段を示す機能プロック図である。 第 9図はロボット装置の C P Uの機能実現手段を示す機能プロック図である。 第 1 0図はロボッ ト装置の C P Uの動作を示すフローチャートである。
第 1 1図はロボッ ト装置の C P Uの動作を示すフローチャートである。
第 1 2図は情報処理装置の C P Uの機能実現手段を示す機能プロック図である 第 1 3図は異常信号の処理動作を示すフローチャートである。
第 1 4図はロボッ ト遠隔操作装置からの着信動作を示すフローチャートである 第 1 5図はロボッ ト遠隔操作装置の C P Uの機能実現手段を示す機能ブロック 図である。
第 1 6図は情報処理装置やロボット装置との通信動作を示すフローチャートで ある。
第 1 7図はロボッ ト装置に画像データ等の送信要求を行う際の送受信動作を示 すフローチヤ一トである。 発明を実施するための最良の形態
(実施の形態 1 )
以下、 本発明の実施の形態について、 第 1図〜第 1 7図を用いて説明する。 説明を分かり易くするため、 外出先から自宅の屋内外を監視する監視システム について説明する。 社屋の屋内外や、 工場、 タンクヤード等の敷地内の監視は離 れた場所にある監視所で行うので監視システムも同様の構成になるためである。 第 1図は、 本発明の実施の形態 1による監視システムを示すプロック図である 第 1図において、 Aは自宅の室内、 1は屋内または屋外の床面または敷地内を 移動可能なロボッ ト装置、 1 aは無線信号を送信するアンテナ、 l bは移動体通 信を行うためのアンテナ、 2はロボッ ト装置 1からの異常信号を無線アンテナ 2 aで受信する情報処理装置、 2 bは移動体通信を行うためのアンテナ、 3はロボ ッ ト装置 1からの異常信号を情報処理装置 2との間の電話回線で受信するロボッ ト遠隔操作装置、 3 a、 3 bは移動体通信のためのアンテナ、 4は室内に 1以上. 配設された複数のセンサを有するセンサ装置、 4 aは無線信号を送信するアンテ ナ、 5は移動体通信装置の基地局である。
このように構成された監視システムにおいて、 屋内または屋外の床面または敷 地内を移動可能なロボツ ト装置 1は複数のセンサを有し、 これらのセンサは異常 状態が生じた場合に異常信号を出力し、 ロボッ ト装置 1はアンテナ 1 aを介して 異常信号を情報処理装置 2へ送信する。 情報処理装置 2はロボッ ト装置 1からの 異常信号を受信し、 受信した異常信号を解析し、 解析結果を示す解析結果信号を アンテナ 2 bと基地局 5すなわち電話回線を介してロボッ ト遠隔操作装置 3へ送 信する。 情報処理装置 2を介して情報処理装置 2からの解析結果信号をアンテナ 3 bで受信したロボッ ト遠隔操作装置 3では、 操作者が解析結果を見て、 どのよ うな指令をロボッ ト装置 1に与えるか判断する。 指令を示す指令信号は、 アンテ ナ 3 aと基地局すなわち電話回線を介してロボッ ト装置 1へ送信される。 指令信 号をアンテナ 1 bで受信したロボッ ト装置 1は指令に応じた動作を行う。 指令と しては、 ロボッ ト装置 1の左右旋回、 前進、 後退、 ロボッ ト装置 1の頭部の上下 (傾斜角変更) 、 左右旋回、 画像データや音声データの要求、 ロボット装置 1の 眼球発光などがある。 指令信号は、 ロボット遠隔操作装置 3のマイク (後述) か らの音声による指令すなわち音声信号であり、 この音声信号はロボット装置 1で 音声認識され、 ロボッ ト装置 1に対するコマンドデ一夕となる。
第 2図は、 第 1図のロボット装置 1を示すブロック図である。
第 2図において、 1 a、 1 bは第 1図と同様のアンテナ、 1 0 1は移動体通信 を行うための移動体通信装置、 1 0 2、 1 0 9は全体を制御する C P U (中央処 理装置) 、 1 0 3は被写体を撮像して画像信号を出力する C C Dカメラ、 1 0 4 は入力音声を音声信号として出力するマイク、 1 0 5は増幅器 (アンプ) 、 1 0 6はスピーカ、 1 0 7は入力音声信号から音声を認識し、 コマンドデ一夕を出力 する音声認識ボード (例えば三洋電機社製 S P D— 5 1 E D ) 、 1 0 8は無線通 信を行うための無線装置、 1 1 0はメモリ、 1 1 1は D /A変換を行う D /Aコ ンバ一夕、 1 1 2はモータ ドライ ノ、'、 1 1 3は頭部を左右旋回または上下させる ための D Cモー夕 1 1 5を駆動する頭部モー夕ドライノ^ 1 1 4はロボッ ト装置 1を左右旋回、 前進または後退させるための D Cモ一夕 1 1 6を駆動する走行モ —夕 ドライノ^ 1 1 7は回転角度を検出する走行用エンコーダ 1 1 8からのパル スをカウン卜するパルスカウン夕、 1 1 9は A/D変換を行う A/Dコンバータ 、 1 2 0は複数のセンサを有するセンサブロック、 1 2 1は人の動きを検知して 異常信号を出力する人感センサ、 1 2 2は設定範囲内の物体の存在を検知して異 常信号を出力するフォトセンサ、 1 2 3はロボッ ト装置 1に触れたときに異常信 号を出力する夕ツチセンサ、 1 2 4は炎 ·煙を検知して異常信号を出力する炎 · 煙センサ、 1 2 5はロボッ ト装置 1の現在位置を検出する G P S、 1 2 6は室内 の温度が所定温度以上のときに異常信号を出力する温度センサ、 1 2 7は赤外線 を発する物体を検知して異常信号を出力する赤外線センサである。 このように構成されたロボット装置 1においては、 CCDカメラ 103による 画像信号とマイク 104による音声信号は、 CPU 102、 移動体通信装置 1 0
1を介し、 画像データと音声データとして電話回線を介してロボッ ト遠隔操作装 置 3へ送信される。 電話回線と移動体通信装置 10 1を介して受信されたロボッ 卜遠隔操作装置 3からの指令信号 (音声信号) は音声認識ボードで認識され、 コ マンドデータとして CPU 102、 CPU 109に入力される。 音声信号はまた アンプ 105を介してスピーカ 106から音声として送出される。 コマンドデ一 夕を入力した CPU 102は画像データ等の送信要求か否かを判定し、 送信要求 なら画像データ等を移動体通信装置 10 1を介して送信し、 そうでなければ特に 動作は行わない。 コマンドデータを入力した CPU 109は、 コマンドデ一夕が ロボッ ト装置 1の頭部の動き制御または走行制御の場合には、 D/Aコンバータ
1 1 1を介して DCモータ 1 15または 1 1 6を駆動する。 また、 センサブロッ ク 1 20のいずれかのセンサが異常状態を示す異常信号を出力した場合には、 そ の異常信号を無線装置 108を介して情報処理装置 2へ送信する。
第 3図は、 第 1図の情報処理装置 2を示すプロック図である。
第 3図において、 2 a、 2 bは第 1図と同様のアンテナ、 2 1は全体を制御す る CPU、 22は移動体通信を行うための移動体通信装置、 23は受信動作を行 う無線装置、 24はメモリ、 25は表示装置である。
このように構成された情報処理装置 2において、 ロボッ ト装置 1からの無線信 号またはセンサ装置 4からの無線信号はアンテナ 2 a、 無線装置 23を介して受 信され、 異常信号等のデータは、 メモリ 24に記憶されると共に、 移動体通信装 置 22、 アンテナ 2 bを介して解析結果信号としてロボット遠隔操作装置 3へ送 される。
第 4図は、 第 1図のロボット遠隔操作装置 3を示すブロック図である。
第 4図において、 3 a、 3 bは第 1図と同様のアンテナ、 3 1、 32は移動体 通信のための移動体通信装置、 33は全体を制御する CP U、 34はマイク、 3
5は表示装置、 36はスピーカである。
このように構成されたロボッ ト遠隔操作装置 3において、 情報処理装置 2から の解析結果信号はアンテナ 3 a、 3 bのいずれかで受信され、 解析結果が表示装 置 3 5に表示される。 この表示に基づいて操作者は、 ロボッ ト装置 1に対する指 令を判断する。 ロボッ ト装置 1への指令信号は、 マイク 3 4から音声で入力され 、 マイク 3 4からの音声信号は、 C P U 3 3を介して、 移動体通信装置 3 1、 3 2のいずれか及びアンテナ 3 a、 3 bのいずれかを介してロボッ ト装置 1へ送信 される。 同様に、 ロボッ ト装置 1からの画像デ一夕、 音声データは、 アンテナ 3 a、 3 bのいずれか及び移動体通信装置 3 1、 3 2のいずれかを介して C P U 3 3に入力され、 C P U 3 3は画像データおよび音声データから画像信号および音 声信号を生成し、 表示装置 3 5は入力した画像信号を画像として表示し、 スピー 力 3 6は入力した音声信号を音声として送出する。
第 5図は、 第 1図のセンサ装置 4を示すブロック図である。
第 5図において、 4 aは第 1図と同様のアンテナ、 4 1は無線信号を送信する 無線装置、 4 2は A/D変換を行う A/Dコンバータ、 4 3は複数のセンサを有 するセンサブロック、 4 4は人の動きを検知して異常信号を出力する人感センサ 、 4 5は設定範囲内の物体の存在を検知して異常信号を出力するフォトセンサ、 4 6は触れたときに異常信号を出力する夕ツチセンサ、 4 7は炎 ·煙を検知して 異常信号を出力する炎 ·煙センサ、 4 8は室内の温度が所定温度以上のときに異 常信号を出力する温度センサ、 4 9は赤外線を発する物体を検知して異常信号を 出力する赤外線センサである。
このように構成されたセンサ装置 4において、 いずれかのセンサから異常を示 す異常信号が出力されたとき、 無線装置 4 1は A/Dコンバータ 4 2を介して異 常信号を入力し、 異常信号に基づく変調信号を生成して、 アンテナ 4 aから情報 処理装置 2へ送信する。
第 6図はロボッ ト装置 1を示す正面図であり、 第 7図はロボッ ト装置 1を示す 側面図である。
第 6図、 第 7図において、 符号 1 0 1〜 1 1 1、 1 1 3〜 1 1 8、 1 2 1〜 1 2 6は第 2図と同様のものなので、 同一符号を付し、 説明は省略する。 1 2 8は 各部に電源を供給する電池、 1 2 9はロボッ ト装置 1を走行させる 2つの車輪、 1 3 0はロボッ ト装置 1を安定させるためのキャス夕である。
このように構成されたロボヅト装置 1において、 2つの車輪 1 2 9はそれぞれ 独立に DCモー夕 1 16により駆動され、 左右旋回および前進、 後退の移動動作 を行う。 例えば、 左旋回は、 左側の車輪 (第 6図で、 正面から見て右側の車輪) を停止させ、 右側の車輪を前進方向に回転させることにより行う。
なお、 本実施の形態では、 ロボッ ト装置 1は車輪で走行させるとしたが、 本発 明はこれに限らず、 例えば複数の足により室内の床面を歩行するようにしてもよ く、 またクローラ構造により室内の床面を走行するようにしてもよい。
次に、 ロボッ ト装置 1、 情報処理装置 2、 ロボッ ト遠隔操作装置 3について、 その詳細動作を各 CPUを中心に説明する。
第 8図はロボッ ト装置 1の CPU 102の機能実現手段を示す機能ブロック図 であり、 第 9図はロボッ ト装置 1の CPU109の機能実現手段を示す機能プロ ック図である。
第 8図、 第 9図において、 1021、 1091は受信したコマンドの種類を判 定するコマンド判定手段、 1022、 1094は信号ゃデ一夕を送信させるため の送信手段、 1023は回線を切断する回線切断手段、 1092はコマンドを実 行する実行手段、 1093はセンサからの異常信号の有無を判定する異常判定手 段である。
このように構成されたロボッ ト装置 1の C PU 102、 109について、 その 動作を第 10図、 第 1 1図を用いて説明する。 第 10図はロボッ ト装置 1の CP U 102の動作を示すフローチャートであり、 第 1 1図はロボッ ト装置 1の CP U 109の動作を示すフローチャートである。
第 10図において、 まず、 コマンド判定手段 1021は、 画像送信コマンドを ロボッ ト遠隔操作装置 3から受信したか否かを判定し (S 1) 、 受信したと判定 した場合には送信手段 1022は、 CCDカメラ 103から得られた画像データ やマイク 104から得られた音声デ一夕をロボッ ト遠隔操作装置 3へ送信する ( S 2) 。 画像送信コマンドを受信しなかった場合、 または受信したコマンドが画 像送信コマンドでなかった場合には、 回線切断手段 1023は回線を切断して処 理を終了する (S3) 。
第 11図において、 まず、 コマンド判定手段 1091は、 音声認識ボード 10 7で音声認識して得られたコマンド (音声認識コマンド) が入力されたか否かを 判定し (S I 1 ) 、 音声認識コマンドが入力されたと判定した場合、 実行手段 1 0 9 2は入力コマンドを実行する (S 1 2 ) 。 次に、 異常判定手段 1 0 9 3は、 センサからの異常信号の有無を判定し (S 1 3 ) 、 異常信号が有ると判定した場 合は送信手段 1 0 9 4は情報処理装置 2へ異常信号を無線信号として送信する ( S 1 4 ) 。 ステップ S 1 1で音声認識コマンドが入力されなかったと判定した場 合はステップ S 1 3へ移行し、 ステップ S 1 3でセンサからの異常信号が無かつ たと判定した場合はステップ S 1 1へ戻る。
第 1 2図は、 情報処理装置 2の C P U 2 1の機能実現手段を示す機能プロック 図である。
第 1 2図において、 2 1 1は異常の有無を判定する異常判定手段、 2 1 2は異 常信号の解析を行う解析手段、 2 1 3は電話回線を接続させる回線接続手段、 2 1 4はデータを送信させる送信手段、 2 1 5はデ一夕をメモリ 2 4に記憶させる 記憶手段、 2 1 6は回線を切断させる回線切断手段、 2 1 7は着信の有無を判定 する着信判定手段、 2 1 8は着信の内容に応じた動作を行う実行手段である。 このように構成された情報処理装置 2の C P U 2 1について、 その動作を第 1 3図、 第 1 4図を用いて説明する。 第 1 3図は異常信号の処理動作を示すフロー チャートであり、 第 1 4図はロボット遠隔操作装置 3からの着信動作を示すフロ 一チヤ一トである。
第 1 3図において、 まず、 異常判定手段 2 1 1は、 ロボッ ト装置 1のセンサや センサ装置 4のセンサからの異常信号を受信したか否かを判定し (S 2 1 ) 、 異 常信号を受信したと判定した場合、 解析手段 2 1 2は異常信号の解析を行う (S 2 2 ) 。 次に、 回線接続手段 2 1 3は情報処理装置 2とロボッ ト遠隔操作装置 3 とを電話回線で接続し (S 2 3 ) 、 送信手段 2 1 4はステップ S 2 2での解析結 果を示す解析結果信号をロボッ ト遠隔操作装置 3へ送信する (S 2 4 ) 。 次に、 記憶手段 2 1 5は異常信号と解析結果信号とをメモリ 2 4に記憶する (S 2 5 ) 。 ステップ S 2 1で異常信号を受信しなかったと判定したときは回線切断手段 2 1 6は電話回線を切断する (S 2 6 ) 。
第 1 4図において、 まず、 着信判定手段 2 1 7はロボッ ト遠隔操作装置 3から の着信の有無を判定し (S 3 1 ) 、 着信が有ると判定した場合、 回線接続手段 2 13はロボッ ト遠隔操作装置 3を電話回線で接続し (S 32) 、 実行手段 2 1 8 は着信内容に応じた動作 (例えばロボッ ト遠隔操作装置 3からの日時を定めた画 像データの送信要求に応じた送信動作) を行い (S 33) 、 ステップ S 3 1へ戻 る。 ステップ S 3 1で着信無しと判定した場合、 回線切断手段 2 1 6は電話回線 を切断する (S 34) 。
第 15図は、 ロボッ ト遠隔操作装置 3の CPU 33の機能実現手段を示す機能 ブロック図である。
第 15図において、 33 1は着信の有無を判定する着信判定手段、 332は電 話回線を接続させる回線接続手段、 333は表示装置 35に画像を表示させたり 音声をスピーカ 36から出力させたりする表示手段、 334は送信するコマンド の有無を判定するコマンド送信判定手段、 335はデータを送信させる送信手段 、 336は回線を切断するか否かを判定する回線切断判定手段、 337は回線を 切断させる回線切断手段、 338は受信のための受信手段である。
このように構成されたロボヅト遠隔操作装置 3の CPU 33について、 その動 作を第 1 6図、 第 1 7図を用いて説明する。 第 1 6図は情報処理装置 2やロボッ ト装置 1との通信動作を示すフローチャートであり、 第 17図はロボッ ト装置 1 に画像データ等の送信要求を行う際の送受信動作を示すフローチャートである。 第 16図において、 まず、 着信判定手段 33 1は情報処理装置 2からの着信の 有無を判定し (S 4 1 ) 、 着信有りと判定した場合は回線接続手段 332は情報 処理装置 2を電話回線で接続し (S 42) 、 表示手段 333は着信内容を表示装 置 35に表示する (S 43) 。 ステップ S4 1で着信無しと判定した場合はステ ップ S 44へ移行する。 ステップ S 44において、 コマンド送信判定手段 334 は送信するコマンドがあるか否かを判定し、 ある場合には回線接続手段 332は ロボッ ト装置 1を電話回線で接続し (S 45)、 送信手段 335はロボッ ト装置 1にコマンドを送信し (S 46) 、 ステップ S 4 1へ戻る。 ステップ S 44で送 信するコマンドは無いと判定した場合、 次に、 回線切断判定手段 336は回線を 切断するか否かを判定する (S 47) 。 この判定は、 操作者の入力データにもと づいて行う。 回線を切断すると判定した場合、 回線切断手段 337は電話回線を 切断する (S 48) 。 第 1 7図において、 まず、 回線接続手段 3 3 2はロボッ ト装置 1とロボッ ト遠 隔操作装置 3とを電話回線で接続し (S 5 1 ) 、 送信手段 3 3 5は画像データ等 要求のコマンドを送信し (S 5 2 ) 、 受信手段 3 3 8はロボヅ ト装置 1からの画 像データや音声データを受信する (S 5 3 ) 。 次に、 表示手段 3 3 3は、 受信し た画像データを表示装置 3 5に画像として表示し、 また受信した音声デ一夕をス ピ一力 3 6から音声として出力する (S 5 4 ) 。 次に、 コマンド送信判定手段 3 3 4は送信するコマンドがあるか否かを判定し (S 5 5 ) 、 ある場合にはステツ プ S 5 1へ戻り、 ない場合には回線切断手段 3 3 7は電話回線を切断する (S 5 6 ) o
なお、 本実施の形態では、 ロボット装置 1、 情報処理装置 2、 センサ装置 3は 室内に配置するとしたが、 これらは廊下や庭や敷地内などに配置して使用するこ とも可能であり、 屋内、 屋外共に適用可能なものである。 また、 ロボッ ト装置 1 は室内の床面を走行するとしたが、 本発明はこれに限らず、 敷地内を走行するよ うにしてもよい。 すなわち、 ロボット装置 1は、 モ一夕等を動力とする駆動輪を 含む車輪により屋内または屋外の床面または敷地内を走行するような構造である のみならず、 複数の足により屋内または屋外の床面または敷地内を歩行するよう な構造としてもよく、 クローラ構造により屋内または屋外の床面または敷地内を 走行するような構造としてもよい。 また、 情報処理装置 2、 センサ装置 3は、 屋 内に配置してもよく、 また屋外に配置してもよい。
以上のように本実施の形態によれば、 ロボッ ト遠隔操作装置 3は、 ロボッ ト装 置 1からの異常信号を受信したとき、 ロボッ ト装置 1との間の電話回線を介して 指令信号をロボット装置 1へ送信し、 ロボッ ト装置 1は指令信号に基づく動作を 行うことにより、 ロボッ ト装置 1との間の電話回線を介して指令信号をロボッ ト 装置 1へ送信することができるので、 ロボッ卜装置 1にカメラ 1 0 3等を取り付 けておき、 その画像信号をロボッ ト遠隔操作装置 3に電話回線を介して送信でき るようにしておけば、 外出先から自宅等の屋内または屋外を監視することができ 、 また電話回線を介してロボッ ト装置 1を操作できるので、 監視結果に対処する ことができ、 さらに、 ロボッ ト装置 1は情報処理装置 2を介してロボッ ト遠隔操 作装置 3に異常信号を送信することができるので、 自宅等の屋内または屋外の異 常状態をロボッ ト装置 1により検知することができると共に、 外出先で操作者は 検知した異常状態を知ることができるので、 電話回線を介してロボッ 卜装置 1を 操作することにより異常状態に対処することができる。
また、 ロボッ ト遠隔操作装置 3はロボット装置 1との間の電話回線を介して口 ボッ ト装置 1へ画像デ一夕および音声データを送信させるための指令信号を送信 し、 ロボッ 卜装置 1はロボット遠隔操作装置 3との間の電話回線を介してカメラ 1 0 3およびマイク 1 0 4による画像データおよび音声データをロボッ ト遠隔操 作装置 3へ送信することにより、 ロボッ ト遠隔操作装置 3は、 屋内または屋外を 撮像して得られた画像デ一夕および屋内または屋外で集音して得られた音声デー 夕をロボッ ト装置 1から受信して、 表示装置 3 5で表示、 およびスピーカ 3 6で 聴音することができるので、 外出先で操作者は、 自宅等の屋内または屋外の異常 状態を画像デ一夕および音声デ一夕で知ることができるので、 電話回線を介して ロボッ ト装置 1を適正に操作して異常状態に対処することができる。
さらに、 ロボッ ト遠隔操作装置 3はロボッ 卜装置 1へ左右旋回または前後へ移 動させるための指令信号を送信し、 ロボット装置 1は左右旋回または前後へ移動 することにより、 ロボッ ト装置 1の操作を適正に行うことができる。
さらに、 ロボッ ト遠隔操作装置 3はロボッ ト装置 1へ頭部を左右旋回または上 下させるための指令信号を送信し、 ロボット装置 1は頭部を左右旋回または上下 することにより、 ロボッ ト装置 1の操作を更に適正に行うことができる。
さらに、 ロボッ ト装置 1は、 異常状態を検知したときに異常信号を出力する複 数のセンサを有するロボッ トセンサ群を有し、 異常信号を情報処理装置 2へ無線 で送信することにより、 ロボット装置 1は異常状態を正確に検知して情報処理装 置 2を介してロボッ ト遠隔操作装置 3に通知することができるので、 外出先で操 作者は、 自宅等の屋内または屋外の異常状態を正確に知ることができ、 電話回線 を介してロボッ ト装置 1を適正に操作して異常状態に対処することができる。 さらに、 自宅等の屋内または屋外の各所に取り付けられた複数のセンサを有す るセンサ装置 4を備え、 センサ装置 4は、 複数のセンサのいずれかのセンサが異 常状態を検知して異常信号を出力したとき、 異常信号を情報処理装置 2へ無線で 送信することにより、 自宅等の屋内または屋外の各所の異常状態をセンサ装置 4 により正確に検知し、 検知した異常状態を情報処理装置 2を介してロボッ ト遠隔 操作装置 3に通知することができるので、 外出先で操作者は、 自宅等の屋内また は屋外の異常状態を正確に知ることができ、 電話回線を介してロボッ ト装置 1を 適正に操作して異常状態に対処することができる。
さらに、 センサは、 人の動きを検知して異常信号を出力する人感センサ 4 4、 1 2 1、 設定範囲内の物体の存在を検知して異常信号を出力するフォトセンサ 4 5、 1 2 2、 炎 '煙を検知して異常信号を出力する炎 '煙センサ 4 7、 1 2 4、 屋内または屋外の温度が所定温度以上のときに異常信号を出力する温度センサ 4
8、 1 2 6、 赤外線を発する物体を検知して異常信号を出力する赤外線センサ 4
9、 1 2 7であることにより、 留守中に侵入している人が居るという異常状態や 、 あるべきでない物体がある (例えば床にガラス片が落ちている) という異常状 態、 炎 ·煙が出ているという異常状態、 屋内または屋外が高温であるという異常 状態、 赤外線を発する物体たとえば犬や猫などの動物が居るという異常状態を検 知することができる。
さらに、 電話回線は P H S電話装置等の移動体通信装置を介する電話回線であ ることにより、 ロボッ ト装置, ロボッ ト遠隔操作装置間の通信および情報処理装 置 · ロボッ ト遠隔操作装置間の通信を電話回線を介して確実に行うことができる さらに、 ロボッ ト装置 1は、 モー夕 1 1 6等を動力とする駆動輪を含む車輪 1 2 9により床面または敷地内を走行、 または複数の足により床面または敷地内を 歩行、 あるいはクロ一ラ構造により床面または敷地内を走行することにより、 口 ボッ ト装置 1は左右移動、 前後移動を確実に行うことができると共に、 本 'おも ちゃ等の移動障害物のある屋内または屋外の床面または敷地内でも複数の足で自 由に移動することができる。 産業上の利用可能性
以上説明したように本発明の請求の範囲第 1項に記載の監視システムによれば 、 屋内または屋外の床面または敷地内を移動可能なロボッ ト装置と、 ロボッ ト装 置からの異常信号を無線で受信する情報処理装置と、 ロボッ ト装置からの異常信 号を情報処理装置との間の電話回線で受信するロボッ ト遠隔操作装置とを有する 監視システムであって、 ロボット遠隔操作装置は、 口ポット装置からの異常信号 を受信したとき、 ロボッ ト装置との間の電話回線を介して指令信号をロボッ ト装 置へ送信し、 ロボッ ト装置は指令信号に基づく動作を行うことにより、 ロボッ ト 装置との間の電話回線を介して指令信号をロボッ ト装置へ送信することができる ので、 ロボット装置にカメラ等を取り付けておき、 その画像信号をロボット遠隔 操作装置に電話回線を介して送信できるようにしておけば、 外出先から自宅等の 屋内または屋外を監視することができ、 また電話回線を介してロボット装置を操 作できるので、 監視結果に対処することができ、 さらに、 ロボット装置は情報処 理装置を介してロボッ ト遠隔操作装置に異常信号を送信することができるので、 自宅等の屋内または屋外の異常状態をロボッ ト装置により検知することができる と共に、 外出先で操作者は検知した異常状態を知ることができるので、 電話回線 を介してロボット装置を操作することにより異常状態に対処することができると いう有利な効果が得られる。
請求の範囲第 2項に記載の監視システムによれば、 請求の範囲第 1項に記載の 監視システムにおいて、 ロボット遠隔操作装置はロボッ ト装置との間の電話回線 を介してロボッ ト装置へ画像データおよび音声デ一夕を送信させるための指令信 号を送信し、 ロボッ 卜装置はロボッ 卜遠隔操作装置との間の電話回線を介して力 メラおよびマイクによる画像デ一夕および音声データをロボット遠隔操作装置へ 送信することにより、 ロボッ ト遠隔操作装置は、 屋内または屋外を撮像して得ら れた画像データおよび屋内または屋外で集音して得られた音声データをロボッ ト 装置から受信して、 表示装置で表示、 およびスピーカで聴音することができるの で、 外出先で操作者は、 自宅等の屋内または屋外の異常状態を画像データおよび 音声データで知ることができるので、 電話回線を介してロボッ 卜装置を適正に操 作して異常状態に対処することができるという有利な効果が得られる。
請求の範囲第 3項に記載の監視システムによれば、 請求の範囲第 1項または第 2項に記載の監視システムにおいて、 ロボッ ト遠隔操作装置はロボット装置へ左 右旋回または前後へ移動させるための指令信号を送信し、 ロボッ 卜装置は指令信 号を受信し左右旋回または前後へ移動することにより、 ロボッ 卜装置の操作を適 正に行うことができるという有利な効果が得られる。
請求の範囲第 4項に記載の監視システムによれば、 請求の範囲第 1項乃至第 3 項のいずれか 1に記載の監視システムにおいて、 ロボッ ト遠隔操作装置はロボヅ ト装置へ頭部を左右旋回または上下させるための指令信号を送信し、 ロボット装 置は指令信号を受信し頭部を左右旋回または上下することにより、 ロボッ 卜装置 の操作を更に適正に行うことができるという有利な効果が得られる。
請求の範囲第 5項に記載の監視システムによれば、 請求の範囲第 1項乃至第 4 項のいずれか 1に記載の監視システムにおいて、 ロボッ ト装置は、 異常状態を検 知したときに異常信号を出力する複数のセンサを有するロボッ トセンサ群を有し 、 異常信号を情報処理装置へ無線で送信することにより、 ロボット装置は異常状 態を正確に検知して情報処理装置を介してロボッ ト遠隔操作装置に通知すること ができるので、 外出先で操作者は、 自宅等の屋内または屋外の異常状態を正確に 知ることができ、 電話回線を介してロボット装置を適正に操作して異常状態に対 処することができるという有利な効果が得られる。
請求の範囲第 6項に記載の監視システムによれば、 請求の範囲第 1項乃至第 5 項のいずれか 1に記載の監視システムにおいて、 自宅等の屋内または屋外の各所 に取り付けられた複数のセンサを有するセンサ装置を備え、 センサ装置は、 複数 のセンサのいずれかのセンサが異常状態を検知して異常信号を出力したとき、 異 常信号を情報処理装置へ無線で送信することにより、 自宅等の屋内または屋外の 各所の異常状態をセンサ装置により正確に検知し、 検知した異常状態を情報処理 装置を介してロボッ ト遠隔操作装置に通知することができるので、 外出先で操作 者は、 自宅等の屋内または屋外の異常状態を正確に知ることができ、 電話回線を 介してロボット装置を適正に操作して異常状態に対処することができるという有 利な効果が得られる。
請求の範囲第 7項に記載の監視システムによれば、 請求の範囲第 5項または第 6項に記載の監視システムにおいて、 センサは、 人の動きを検知して異常信号を 出力する人感センサ、 設定範囲内の物体の存在を検知して異常信号を出力するフ オトセンサ、 炎 ·煙を検知して異常信号を出力する炎 '煙センサ、 屋内または屋 外の温度が所定温度以上のときに異常信号を出力する温度センサ、 赤外線を発す る物体を検知して異常信号を出力する赤外線センサのいずれか 1以上であること により、 留守中に侵入している人が居るという異常状態や、 あるべきでない物体 がある (例えば床にガラス片が落ちている) という異常状態、 炎 ·煙が出ている という異常状態、 屋内または屋外が高温であるという異常状態、 赤外線を発する 物体たとえば犬や猫などの動物が居るという異常状態を検知することができると いう有利な効果が得られる。
請求の範囲第 8項に記載の監視システムによれば、 請求の範囲第 1項乃至第 7 項の内いずれか 1に記載の監視システムにおいて、 電話回線は P H S電話装置、 携帯電話装置等の移動体通信装置を介する電話回線であることにより、 ロボッ ト 装置 · ロボット遠隔操作装置間の通信および情報処理装置 · ロボッ ト遠隔操作装 置間の通信を電話回線を介して確実に行うことができるという有利な効果が得ら れる。
請求の範囲第 9項に記載の監視システムによれば、 請求の範囲第 1項乃至第 8 項の内いずれか 1に記載の監視システムにおいて、 ロボット装置は、 モー夕等を 動力とする駆動輪を含む車輪により床面または敷地内を走行、 または複数の足に より床面または敷地内を歩行、 あるいはクローラ構造により床面または敷地内を 走行することにより、 ロボッ ト装置は左右移動、 前後移動を確実に行うことがで きると共に、 本 ·おもちゃ等の移動障害物のある屋内または屋外の床面または敷 地内でも複数の足で自由に移動することができるという有利な効果が得られる。

Claims

請求の範囲
1 . 屋内または屋外の床面または敷地内を移動可能なロボット装置と、 前記ロボ ット装置からの異常信号を無線で受信する情報処理装置と、 前記ロボッ 卜装置か らの異常信号を前記情報処理装置との間の電話回線で受信するロボット遠隔操作 装置とを有する監視システムであって、
前記ロボット遠隔操作装置は、 前記ロボッ ト装置からの異常信号を受信したと き、 前記ロボッ ト装置との間の電話回線を介して指令信号を前記ロボッ ト装置へ 送信し、
前記ロボット装置は前記指令信号に基づく動作を行うことを特徴とする監視シ ステム。
2 . 前記ロボッ ト遠隔操作装置は前記ロボッ ト装置との間の電話回線を介して前 記ロボッ ト装置へ画像データおよび音声デ一夕を送信させるための指令信号を送 信し、 前記ロボッ ト装置は前記ロボッ ト遠隔操作装置との間の電話回線を介して カメラおよびマイクによる画像データおよび音声データを前記ロボット遠隔操作 装置へ送信することを特徴とする請求の範囲第 1項に記載の監視システム。
3 . 前記ロボッ ト遠隔操作装置は前記ロボッ ト装置へ左右旋回または前後へ移動 させるための指令信号を送信し、 前記ロボッ ト装置は前記指令信号を受信し左右 旋回または前後へ移動することを特徴とする請求の範囲第 1項または第 2項に記 載の監視システム。
4 . 前記ロボッ ト遠隔操作装置は前記ロボッ ト装置へ頭部を左右旋回または上下 させるための指令信号を送信し、 前記ロボッ ト装置は前記指令信号を受信し頭部 を左右旋回または上下することを特徴とする請求の範囲第 1項乃至第 3項のいず れか 1に記載の監視システム。
5 . 前記ロボッ ト装置は、 異常状態を検知したときに異常信号を出力する複数の センサを有するロボッ トセンサ群を有し、 前記異常信号を前記情報処理装置へ無 線で送信することを特徴とする請求の範囲第 1項乃至第 4項のいずれか 1に記載 の監視システム。
6 . 自宅等の屋内または屋外の各所に取り付けられた複数のセンサを有するセン サ装置を備え、 前記センサ装置は、 前記複数のセンサのいずれかのセンサが異常 状態を検知して異常信号を出力したとき、 前記異常信号を前記情報処理装置へ無 線で送信することを特徴とする請求の範囲第 1項乃至第 5項のいずれか 1に記載 の監視システム。
7 . 前記センサは、 人の動きを検知して異常信号を出力する人感センサ、 設定範 囲内の物体の存在を検知して異常信号を出力するフォトセンサ、 炎 ·煙を検知し て異常信号を出力する炎 ·煙センサ、 屋内または屋外の温度が所定温度以上のと きに異常信号を出力する温度センサ、 赤外線を発する物体を検知して異常信号を 出力する赤外線センサのいずれか 1以上であることを特徴とする請求の範囲第 5 項または第 6項に記載の監視システム。
8 . 前記電話回線は P H S電話装置、 携帯電話装置等の移動体通信装置を介する 電話回線であることを特徴とする請求の範囲第 1項乃至第 7項の内いずれか 1に 記載の監視システム。
9 . 前記ロボッ ト装置は、 モー夕等を動力とする駆動輪を含む車輪により床面ま たは敷地内を走行、 または複数の足により床面または敷地内を歩行、 あるいはク ローラ構造により床面または敷地内を走行することを特徴とする請求の範囲第 1 項乃至第 8項の内いずれか 1に記載の監視システム。
PCT/JP2003/010580 2003-08-21 2003-08-21 監視システム WO2005020177A1 (ja)

Priority Applications (1)

Application Number Priority Date Filing Date Title
PCT/JP2003/010580 WO2005020177A1 (ja) 2003-08-21 2003-08-21 監視システム

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
PCT/JP2003/010580 WO2005020177A1 (ja) 2003-08-21 2003-08-21 監視システム

Publications (1)

Publication Number Publication Date
WO2005020177A1 true WO2005020177A1 (ja) 2005-03-03

Family

ID=34204204

Family Applications (1)

Application Number Title Priority Date Filing Date
PCT/JP2003/010580 WO2005020177A1 (ja) 2003-08-21 2003-08-21 監視システム

Country Status (1)

Country Link
WO (1) WO2005020177A1 (ja)

Citations (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH05300950A (ja) * 1991-07-10 1993-11-16 Samsung Electron Co Ltd 移動監視装置
JPH07164374A (ja) * 1993-11-08 1995-06-27 Toshio Muraoka セキュリティロボットシステム
JPH07286870A (ja) * 1994-04-15 1995-10-31 Toshiba Eng Co Ltd 階間移動監視装置
JP2002092761A (ja) * 2000-09-12 2002-03-29 Toshiba Tec Corp 移動監視システム
JP2002307337A (ja) * 2001-04-18 2002-10-23 Toyo High Mech Kk 遠隔操作ロボット装置
JP2002321180A (ja) * 2001-04-24 2002-11-05 Matsushita Electric Ind Co Ltd ロボット制御システム
JP2002370183A (ja) * 2001-06-15 2002-12-24 Yamaha Motor Co Ltd 監視装置及び監視システム
JP2003280729A (ja) * 2002-03-24 2003-10-02 Tmsuk Co Ltd 監視システム

Patent Citations (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH05300950A (ja) * 1991-07-10 1993-11-16 Samsung Electron Co Ltd 移動監視装置
JPH07164374A (ja) * 1993-11-08 1995-06-27 Toshio Muraoka セキュリティロボットシステム
JPH07286870A (ja) * 1994-04-15 1995-10-31 Toshiba Eng Co Ltd 階間移動監視装置
JP2002092761A (ja) * 2000-09-12 2002-03-29 Toshiba Tec Corp 移動監視システム
JP2002307337A (ja) * 2001-04-18 2002-10-23 Toyo High Mech Kk 遠隔操作ロボット装置
JP2002321180A (ja) * 2001-04-24 2002-11-05 Matsushita Electric Ind Co Ltd ロボット制御システム
JP2002370183A (ja) * 2001-06-15 2002-12-24 Yamaha Motor Co Ltd 監視装置及び監視システム
JP2003280729A (ja) * 2002-03-24 2003-10-02 Tmsuk Co Ltd 監視システム

Similar Documents

Publication Publication Date Title
US9498886B2 (en) Mobile human interface robot
EP1640934B1 (en) Fire alarm system and method
US10486303B2 (en) Elevated robotic assistive device system and method
JP6158517B2 (ja) 警報システム
KR102104896B1 (ko) 로봇청소기 및 이를 이용한 휴먼 케어방법
US20070021867A1 (en) Home networking system using self-moving robot
US20050237188A1 (en) Self-propelled cleaner
EP2369436B1 (en) Robot apparatus, information providing method carried out by the robot apparatus and computer storage media
US20070061041A1 (en) Mobile robot with wireless location sensing apparatus
KR100645848B1 (ko) 이동로봇 시스템 및 이동로봇 원격제어방법
JP2006123158A (ja) ロボット制御システム及びロボット制御方法
JP2018190391A (ja) 携帯型移動ロボット及びその操作方法
KR20170061968A (ko) 로봇을 이용한 감시 및 보안 시스템
JP2007152470A (ja) 自己診断機能付きロボット
KR101009721B1 (ko) 모바일 영상 로봇 단말기
JP2003280729A (ja) 監視システム
KR101708301B1 (ko) 로봇 청소기 및 원격 제어 시스템
WO2005020177A1 (ja) 監視システム
JP4784381B2 (ja) 自律移動型ロボット
US20210125470A1 (en) Antitheft system of mobile robot
KR102081358B1 (ko) 로봇 청소기, 이동 단말기 및 그 동작방법
JP2007152444A (ja) 自走式ロボットおよび情報管理システム
KR20000067377A (ko) 퍼스널 로봇 및 그 제어 방법
KR20080100735A (ko) 무선 네트워크 기반의 이동로봇을 이용한 메시지 전달시스템
JP2019101627A (ja) 駆動ロボット及びその駆動ロボットの充電ステーションドッキング方法

Legal Events

Date Code Title Description
AK Designated states

Kind code of ref document: A1

Designated state(s): CN US

AL Designated countries for regional patents

Kind code of ref document: A1

Designated state(s): AT BE BG CH CY CZ DE DK EE ES FI FR GB GR HU IE IT LU MC NL PT RO SE SI SK TR

DFPE Request for preliminary examination filed prior to expiration of 19th month from priority date (pct application filed before 20040101)
121 Ep: the epo has been informed by wipo that ep was designated in this application
122 Ep: pct application non-entry in european phase