WO2021152858A1 - 情報表示システム及び情報表示方法 - Google Patents

情報表示システム及び情報表示方法 Download PDF

Info

Publication number
WO2021152858A1
WO2021152858A1 PCT/JP2020/003819 JP2020003819W WO2021152858A1 WO 2021152858 A1 WO2021152858 A1 WO 2021152858A1 JP 2020003819 W JP2020003819 W JP 2020003819W WO 2021152858 A1 WO2021152858 A1 WO 2021152858A1
Authority
WO
WIPO (PCT)
Prior art keywords
screen
information display
display
wearer
display system
Prior art date
Application number
PCT/JP2020/003819
Other languages
English (en)
French (fr)
Inventor
政利 福川
Original Assignee
日本電気株式会社
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 日本電気株式会社 filed Critical 日本電気株式会社
Priority to JP2021574428A priority Critical patent/JPWO2021152858A1/ja
Priority to PCT/JP2020/003819 priority patent/WO2021152858A1/ja
Priority to US17/794,384 priority patent/US11842117B2/en
Publication of WO2021152858A1 publication Critical patent/WO2021152858A1/ja
Priority to US18/381,386 priority patent/US20240045635A1/en

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/14Digital output to display device ; Cooperation and interconnection of the display device with other functional units
    • GPHYSICS
    • G02OPTICS
    • G02BOPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B27/00Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
    • G02B27/01Head-up displays
    • G02B27/017Head mounted
    • G02B27/0172Head mounted characterised by optical features
    • AHUMAN NECESSITIES
    • A62LIFE-SAVING; FIRE-FIGHTING
    • A62BDEVICES, APPARATUS OR METHODS FOR LIFE-SAVING
    • A62B18/00Breathing masks or helmets, e.g. affording protection against chemical agents or for use at high altitudes or incorporating a pump or compressor for reducing the inhalation effort
    • A62B18/08Component parts for gas-masks or gas-helmets, e.g. windows, straps, speech transmitters, signal-devices
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/017Gesture based interaction, e.g. based on a set of recognized hand gestures
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/02Input arrangements using manually operated switches, e.g. using keyboards or dials
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/14Digital output to display device ; Cooperation and interconnection of the display device with other functional units
    • G06F3/147Digital output to display device ; Cooperation and interconnection of the display device with other functional units using display panels
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00Television systems
    • H04N7/18Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast
    • H04N7/183Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast for receiving images from a single remote source
    • GPHYSICS
    • G02OPTICS
    • G02BOPTICAL ELEMENTS, SYSTEMS OR APPARATUS
    • G02B27/00Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
    • G02B27/01Head-up displays
    • G02B27/0101Head-up displays characterised by optical features
    • G02B2027/0141Head-up displays characterised by optical features characterised by the informative content of the display
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/16Sound input; Sound output
    • G06F3/167Audio in a user interface, e.g. using voice commands for navigating, audio feedback
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00Television systems
    • H04N7/18Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast
    • H04N7/181Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast for receiving images from a plurality of remote sources

Definitions

  • This disclosure relates to an information display system and an information display method.
  • Patent Document 1 describes an information display system arranged in front of the face of a firefighter and configured to form information visually recognized by the firefighter.
  • An object of the present disclosure is to provide an information display system and an information display method capable of displaying a screen visually recognized by a wearer wearing a face piece at an appropriate timing in view of the above-mentioned problems.
  • the information display system includes display means for displaying a screen attached to a facet and visually recognized by a wearer wearing the facet, and display control means for switching the display mode of the screen. Be prepared.
  • the information display method includes a step of displaying a screen visually recognized by a wearer wearing a facet and a step of switching the display mode of the screen.
  • FIG. 1 is a schematic configuration diagram of the information display system 1.
  • the information display system 1 is a display means 70 that is attached to a face body 9 and displays a screen that is visually recognized by a wearer wearing the face body 9, and a display control means 60 that switches the display mode of the screen. And.
  • the screen visually recognized by the firefighters wearing the face piece 9 can be displayed at an appropriate timing. This is because the display control means 60 for switching the display mode of the screen is provided.
  • FIG. 2 is a detailed configuration diagram of the information display system 1.
  • the transparent cover 10a (combiner 10a1) is used as the display means 70, and the display control unit 11a1 is used as the display control means 60.
  • the information display system 1 includes a smart mask 10, a control BOX 11, a gas sensor 40, a temperature sensor 50, a captain terminal 20, and a server 30.
  • FIG. 3 is an example (front view) of the smart mask 10.
  • the smart mask 10 includes a face body 9 worn by a firefighter (an example of a wearer of the present invention) who is active at a fire site, a transparent cover 10a, an infrared camera 10b, a visible camera 10c, and the like. It includes a switch 10d and a microphone 10e (omitted in FIG. 3).
  • the transparent cover 10a, the infrared camera 10b, the visible camera 10c, the switch 10d, and the microphone 10e are attached to the face piece 9.
  • the transparent cover 10a is arranged in front of the face of the firefighter with the face 9 attached to the firefighter.
  • the transparent cover 10a includes a reflective and translucent member (for example, a combiner 10a1).
  • various screens generated by the control BOX 11 or the like for example, the first screen DP1 and the second screen described later
  • the various projected images are reflected (further enlarged) by the combiner 10a1 and reach the eyes of the firefighters wearing the face piece 9.
  • the firefighters wearing the face 9 visually recognize various screens (for example, the first screen DP1 and the second screen described later) as virtual images that are enlarged and emerge in front (for example, 1.5 m forward).
  • the transparent cover 10a (combiner 10a1), the control BOX 11 (for example, the display control unit 11a1) that generates various screens projected on the combiner 10a1, and the optical system that projects the generated various screens are collectively referred to as a head-up display. (Or head-mounted display).
  • any device or system capable of displaying a screen visually recognized by a wearer wearing a facet can be called a head-up display (or head-mounted display).
  • 4 and 5 are examples of the first screen DP1 that is visually recognized as a virtual image by a firefighter wearing the face piece 9.
  • the first screen DP1 includes an environmental information display area (air cylinder remaining amount (residual pressure) display area a3, inrush elapsed time display area a4, detection target gas concentration display area a5).
  • environmental information display area air cylinder remaining amount (residual pressure) display area a3, inrush elapsed time display area a4, detection target gas concentration display area a5).
  • the remaining amount (residual pressure) display area a3 the remaining amount (residual pressure) of the air cylinder worn by the firefighters is displayed.
  • the detection target gas concentration display area a5 various gas concentrations that are the detection results of the gas sensor 40 are displayed.
  • the first screen DP1 has a highly urgent message M1, for example, a message "Caution: Flashover occurs” indicating that sudden combustion may occur in an environment where firefighters are active. Other messages may be displayed. Rapid combustion that can occur in an environment where firefighters are active is, for example, flashover or backdraft.
  • FIG. 6 is an example of the second screen DP2 that is visually recognized as a virtual image by a firefighter wearing the face piece 9.
  • the second screen DP2 has a camera image in addition to the environmental information display area (air cylinder remaining amount (residual pressure) display area a3, inrush elapsed time display area a4, detection target gas concentration display area a5).
  • the display area a2 is included.
  • an image (moving image or still image) captured by the infrared camera 10b or the visible camera 10c is displayed.
  • the infrared camera 10b is an imaging device that images the environment in which firefighters are active, and is used, for example, when the environment in which firefighters are active is dark.
  • the visible camera 10c is an imaging device that images the environment in which firefighters are active, and is used, for example, when the environment in which firefighters are active is bright.
  • the switch 10d is a switch operated by a firefighter, for example, a push button type switch.
  • the switch 10d is used to switch the display mode of the screen visually recognized by the firefighters wearing the face piece 9.
  • the microphone 10e is a microphone for inputting the voice emitted by the firefighters.
  • the microphone 10e is used to input voice for voice recognition.
  • the gas sensor 40 and the temperature sensor 50 are attached to a fitting (for example, fireproof clothing) worn by firefighters.
  • the gas sensor 40 detects the gas concentration in the environment in which firefighters are active.
  • the gas sensor 40 includes, for example, an oxygen sensor that detects an oxygen concentration, a carbon monoxide sensor that detects a carbon monoxide concentration, a hydrogen sulfide sensor that detects a hydrogen sulfide concentration, a sulfur dioxide sensor that detects a sulfur dioxide concentration, and a flammable gas concentration. It is a flammable gas sensor that detects.
  • the temperature sensor 50 detects the temperature of the environment in which firefighters are active.
  • An infrared camera 10b, a visible camera 10c, a gas sensor 40, and a temperature sensor 50 are examples of the sensors of the present invention.
  • control BOX 11 includes a control unit 11a, a RAM 11b (Random Access Memory), a ROM 11c (Read Only Memory), and a communication unit 11d.
  • control unit 11a includes a processor.
  • the processor is, for example, a CPU (Central Processing Unit). There may be one processor or multiple processors.
  • the processor functions as a display control unit 11a1 and a voice recognition unit 11a2 by executing a predetermined program read into the RAM 11b from a non-volatile memory such as the ROM 11c. Some or all of these may be implemented in hardware.
  • the display control unit 11a1 displays (forms, etc.) an image projected on the combiner 10a1 and visually recognized as a virtual image, for example, the first screen DP1 (see FIGS. 4 and 5) and the second screen DP2 (see FIG. 6).
  • the voice recognition unit 11a2 recognizes the voice of the firefighter input via the microphone 10e.
  • the communication unit 11d is a communication device that wirelessly communicates with the captain terminal 20 and the server 30 via a communication line NW (for example, the Internet).
  • NW for example, the Internet
  • the captain terminal 20 is, for example, a tablet-type information processing terminal, and includes a control unit 21, a touch panel 22, a display 23, and a communication unit 24, as shown in FIG.
  • control unit 21 includes a processor.
  • the processor is, for example, a CPU. There may be one processor or multiple processors.
  • the processor controls the display 23 and the like by executing a predetermined program read from a non-volatile memory such as a ROM (not shown) into a RAM (not shown).
  • the touch panel 22 is an input device operated by the fire brigade commander, and is arranged so as to cover the display surface of the display 23.
  • the display 23 is, for example, a display with a touch panel 22.
  • a display with a touch panel is also called a touch screen display.
  • FIG. 7 is an example of the screen G2 displayed on the display 23 of the captain terminal 20.
  • the screen G2 includes a camera image display area b, a drawing or photo information display area c, and a message transmission area d.
  • the same image as the image (video or still image) visually recognized by the firefighter wearing the face piece 9 is displayed.
  • the display 23 displays all the information (name, blood type, etc.) of the firefighters (s). It is also possible to select an arbitrary firefighter via the touch panel 22 and record a video (for reviewing the situation at a later date) (zoom is also possible).
  • drawings and photographic information of a disaster site are displayed in the drawing and photographic information display area c.
  • a message to be transmitted to a firefighter for example, messages M1 and M2 with high urgency described later
  • a message to be transmitted to a firefighter for example, messages M1 and M2 with high urgency described later
  • a message to be transmitted to a firefighter for example, messages M1 and M2 with high urgency described later
  • the captain terminal 20 can grasp and manage the activity information of firefighters from a remote location.
  • the communication unit 24 is a communication device that wirelessly communicates with the control BOX 11 and the server 30 via a communication line NW (for example, the Internet).
  • NW for example, the Internet
  • the server 30 is installed in a place remote from the fire site. As shown in FIG. 2, the server 30 includes a control unit 31, a storage device 32, and a communication unit 33.
  • control unit 31 includes a processor.
  • the processor is, for example, a CPU. There may be one processor or multiple processors.
  • the processor functions as a determination unit 31a and a learning unit 31b by executing a predetermined program read from a non-volatile memory such as a ROM (not shown) into a RAM (not shown).
  • the determination unit 31a determines (predicts) the possibility of sudden combustion in an environment in which firefighters are active, based on the detection results of various sensors received from the control BOX 11 and the condition data 32a stored in the storage device 32. ..
  • the learning unit 31b learns the conditions under which rapid combustion occurs based on the detection results of various sensors received from the control BOX 11.
  • the learning unit 31b may learn the conditions under which rapid combustion occurs based on a case where rapid combustion has occurred in the past.
  • the storage device 32 stores condition data 32a representing a condition (one or a plurality of conditions) at which rapid combustion occurs.
  • the condition under which rapid combustion occurs is, for example, a numerical value or a numerical range representing the gas concentration at which rapid combustion occurs. This number or range of numbers can be calculated, for example, from experiments or past cases.
  • condition under which rapid combustion occurs is, for example, data representing the characteristics of the flame reflected in the image (for example, moving image) captured by the imaging device.
  • the data representing the characteristics of the flame is, for example, data representing the movement, color, size, etc. of the flame.
  • the data representing the characteristics of this flame can be calculated, for example, by image processing an image captured in an experiment or a past case.
  • the communication unit 33 is a communication device that wirelessly communicates with the control BOX 11 and the captain terminal 20 via a communication line NW (for example, the Internet).
  • NW for example, the Internet
  • FIG. 8 is a flowchart of the operation of the information display system 1 (display switching process 1).
  • the process of FIG. 8 is mainly realized by the control unit 11a (processor) of the control BOX 11 executing a predetermined program read into the RAM 11b from a non-volatile memory such as the ROM 11c.
  • control unit 11a processor
  • the control BOX 11 executing a predetermined program read into the RAM 11b from a non-volatile memory such as the ROM 11c.
  • various sensors detect environmental information of the environment in which firefighters are active.
  • step S40 start the control BOX 11 (step S40). At this point, nothing is projected onto the combiner 10a1.
  • control unit 11a determines whether or not the button of the switch 10d is pressed down once (step S41).
  • step S41: YES When it is determined that the button of the switch 10d is pressed down once (step S41: YES), the display control unit 11a1 displays the environmental information display area (air cylinder remaining amount (residual pressure) display area a3, rush elapsed time display area a4). , The detection target gas concentration display area a5) forms the first screen DP1 (virtual image) arranged in the display pattern shown in FIG. 4 (step S42).
  • the environmental information display area air cylinder remaining amount (residual pressure) display area a3, rush elapsed time display area a4
  • the detection target gas concentration display area a5 forms the first screen DP1 (virtual image) arranged in the display pattern shown in FIG. 4 (step S42).
  • step S41 when it is determined that the button of the switch 10d is pressed down twice (step S41: NO, step S43: YES), the display control unit 11a1 displays the environmental information display area (air cylinder remaining amount (residual pressure) display area a3).
  • the image display area a2 forms the second screen DP2 (virtual image) arranged in the display pattern shown in FIG. 6 (step S44).
  • step S41 when it is determined that the button of the switch 10d is pressed down three times (step S41: NO, step S43: NO, step S45: YES), the display control unit 11a1 does not include information on the screen (information is displayed). Switch to no screen (step S46).
  • the no-screen may not contain any information at all, or may include information to the extent that firefighters do not feel annoyed.
  • step S41 NO, step S43: NO, step S45: NO, step S47: YES
  • the control BOX 11 sends an emergency message to the captain. It is transmitted to the terminal 20 or the like (step S48).
  • the emergency message is, for example, a message notifying the abnormality of a firefighter.
  • the number of times the button of the switch 10d determined in each of steps S41, S43, and S45 is pressed is not limited to the above number. That is, the number of times the button of the switch 10d determined in each of steps S41, S43, and S45 is pressed may be different from each other.
  • FIG. 9 is a flowchart of the operation of the information display system 1 (display switching process 2).
  • the process of FIG. 9 is mainly realized by the control unit 11a (processor) of the control BOX 11 executing a predetermined program read into the RAM 11b from a non-volatile memory such as the ROM 11c.
  • control unit 11a processor
  • the control BOX 11 executing a predetermined program read into the RAM 11b from a non-volatile memory such as the ROM 11c.
  • various sensors detect environmental information of the environment in which firefighters are active.
  • step S50 start the control BOX 11 (step S50). At this point, nothing is projected onto the combiner 10a1.
  • control unit 11a determines whether or not the voice recognition unit 11a2 has recognized the voice "ON” emitted by the firefighters (step S51).
  • the display control unit 11a1 displays the environmental information display area (air cylinder remaining amount (residual pressure) display area a3, rush elapsed time).
  • the display area a4 and the detection target gas concentration display area a5) form the first screen DP1 (virtual image) arranged in the display pattern shown in FIG. 4 (step S52).
  • step S51 NO, step S53: YES
  • the display control unit 11a1 is in the environmental information display area (air cylinder remaining amount (residual pressure)).
  • the image display area a2 forms a second screen DP2 (virtual image) arranged in the display pattern shown in FIG. 6 (step S54). ..
  • step S51: NO, step S53: NO, step S55: YES when it is determined that the voice recognition unit 11a2 has recognized the voice "OFF" (step S51: NO, step S53: NO, step S55: YES), the display control unit 11a1 does not include information on the screen (step S51: NO, step S53: NO, step S55: YES). Switch to no screen (no information is displayed) (step S56).
  • step S51 NO, step S53: NO, step S55: NO, step S57: YES
  • the control BOX 11 (communication unit 11d) sends an emergency message to the captain. It is transmitted to the terminal 20 or the like (step S58).
  • the emergency message is, for example, a message notifying the abnormality of a firefighter.
  • the voice recognized in each of steps S51, S53, and S55 is not limited to the above. That is, the voices recognized in each of steps S51, S53, and S55 may be voices that are different from each other.
  • FIG. 10 is a sequence diagram of the operation of the information display system 1 (message display process 1).
  • various sensors detect environmental information of the environment in which firefighters are active (step S10).
  • the infrared camera 10b images the environment in which firefighters are active.
  • the gas sensor 40 detects the gas concentration in the environment in which the firefighters are active.
  • the temperature sensor 50 detects the temperature of the environment in which the firefighters are active.
  • control BOX 11 (communication unit 11d) transmits the environmental information (detection results of various sensors) detected in step S10 to the server 30 via the communication line NW (step S11).
  • the server 30 receives the environment information transmitted from the control BOX 11 (step S12).
  • the server 30 determineation unit 31a fires the fire based on the environmental information (detection results of various sensors) received from the control BOX 11 and the condition data 32a stored in the storage device 32 indicating the conditions under which rapid combustion occurs. Judgment (prediction) of the possibility of sudden combustion in the environment in which the members are active (step S13).
  • the server 30 determines whether the environmental information (detection results of various sensors) received from the control BOX 11 is the detection result of the gas sensor 40 (and the detection result of the temperature sensor 50).
  • the server 30 determines whether the gas sensor 40 (detection result).
  • the detection result of the temperature sensor 50) matches (or is similar to) the condition in which the rapid combustion occurs represented by the condition data 32a stored in the storage device 32, there is a possibility that the rapid combustion may occur in the environment where the firefighters are active. Judge that there is. Otherwise, it is determined that there is no possibility of sudden combustion in the environment where firefighters are active.
  • the server 30 performs image processing on the image. Data representing the characteristics of the flame reflected in the image is extracted. Then, when the server 30 (determination unit 31a) matches (or resembles) the condition in which the rapid combustion occurs, which is represented by the condition data 32a stored in the storage device 32, the data representing the characteristics of the extracted flame is matched (or similar) to the firefighters. Judge that rapid combustion may occur in the environment in which is active. Otherwise, it is determined that there is no possibility of sudden combustion in the environment where firefighters are active.
  • the server 30 (communication unit 33) transmits the determination result determined in step S13 to the control BOX 11 via the communication line NW (step S14).
  • control BOX 11 receives the determination result transmitted from the server 30 (step S15).
  • step S16 when the determination result received from the server 30 may cause abrupt combustion (step S16: YES), as shown in FIG. 5, the control BOX 11 (display control unit 11a1) is displayed on the first screen DP1.
  • a highly urgent message M1 for example, a message "Caution: Flashover occurrence" indicating that sudden combustion may occur in an environment where firefighters are active is displayed (superimposed display) (step S17).
  • the message M1 is preferably displayed (superimposed) in the center of the first screen DP1 for the purpose of alerting the firefighters.
  • the control BOX 11 display control unit 11a1
  • High message M1 for example, a message "Caution: Flashover occurred" indicating that sudden combustion may occur in an environment where firefighters are active is displayed (superimposed display).
  • the message M1 is preferably displayed (superimposed) in the center of the second screen DP2 for the purpose of alerting the firefighters.
  • the message M1 when there is a possibility of sudden combustion, the message M1 is forcibly displayed regardless of the operation of the firefighters (for example, button operation, switching operation). Can be done. As a result, the highly urgent message M1 can be directly and immediately alerted to the firefighters.
  • FIG. 11 is a sequence diagram of the operation of the information display system 1 (message display process 2).
  • the flowchart shown in FIG. 11 corresponds to the one in which the processes of steps S15 to S17 in the flowchart shown in FIG. 10 are omitted and the processes of steps S20 to S24 are added.
  • the differences from FIG. 10 will be mainly described.
  • the captain terminal 20 receives the determination result transmitted from the server 30 (step S20).
  • the captain terminal 20 controls the display 23 and determines as a result, for example, a message on the screen G2 indicating that sudden combustion may occur in an environment where firefighters are active (for example, "Caution”. : Flashover occurred ”) is displayed.
  • control BOX 11 (communication unit 11d) sends a highly urgent message M1 sent from the captain terminal 20, for example, a message "Caution" to the effect that sudden combustion may occur in an environment where firefighters are active. : Flashover occurred ”is received (step S23).
  • control BOX 11 displays the highly urgent message M1 received in step S23 on the first screen DP1, for example, sudden combustion in an environment where firefighters are active.
  • a message "Caution: Flashover has occurred" indicating that it may occur is displayed (superimposed display) (step S24).
  • the message M1 is preferably displayed (superimposed) in the center of the first screen DP1 for the purpose of alerting the firefighters.
  • the control BOX 11 display control unit 11a1
  • the control BOX 11 is connected to the second screen DP2 in step S23 as shown in FIG.
  • the received message M1 with high urgency for example, the message "Caution: Flashover occurrence" indicating that sudden combustion may occur in an environment where firefighters are active is displayed (superimposed display).
  • the message M1 is preferably displayed (superimposed) in the center of the second screen DP2 for the purpose of alerting the firefighters.
  • the message M1 when there is a possibility of sudden combustion, the message M1 is forcibly displayed regardless of the operation of the firefighters (for example, button operation, switching operation). Can be done. As a result, the highly urgent message M1 can be directly and immediately alerted to the fire brigade captain and fire brigade members.
  • FIG. 12 is a flowchart of the operation of the information display system 1 (message display process 3).
  • FIG. 13 is an example of the message M2 indicating that the environmental information exceeds the threshold value.
  • various sensors detect environmental information of the environment in which firefighters are active (step S60).
  • the gas sensor 40 detects the gas concentration in the environment in which firefighters are active.
  • the temperature sensor 50 detects the temperature of the environment in which the firefighters are active.
  • control BOX 11 determines whether or not the environmental information detected in step S60 exceeds the threshold value (step S61).
  • the threshold value for example, one stored in advance in ROM 11c or the like is used.
  • step S61 When it is determined that the environmental information detected in step S60 exceeds the threshold value (step S61: YES), the control BOX 11 (display control unit 11a1) is a message M2 indicating that the environmental information exceeds the threshold value (for example, FIG. (See 13) is displayed (for example, superimposed display) on the first screen DP1 (or the second screen DP2) (step S62).
  • the control BOX 11 display control unit 11a1
  • FIG. See 13
  • the message M2 when the environmental information exceeds the threshold value, the message M2 can be forcibly displayed regardless of the operation of the firefighters (for example, button operation or switching operation). .. As a result, the highly urgent message M2 can be directly and immediately alerted to the firefighters.
  • the screen (for example, the first screen DP1 and the second screen DP2) visually recognized by the firefighter wearing the face 9 is set at an appropriate timing (for example, the firefighter is at the fire site). It can be displayed at the timing of rushing into. This is because the display control unit 11a1 for switching the display mode of the screen is provided.
  • the screens for example, the first screen DP1 and the second screen DP2 visually recognized by the firefighters wearing the face piece 9 are not always displayed. , It is suppressed to give trouble to firefighters who are working in the field.
  • the highly urgent messages M1 and M2 are displayed (superimposed) in the center of the screen (for example, the first screen DP1 and the second screen DP2), so that the highly urgent message M1 is displayed. , M2 can be alerted directly and immediately to firefighters.
  • the present invention is not limited to this.
  • a part of the gas sensor 40 and the temperature sensor 50 may be omitted, or another sensor may be added.
  • an oxygen sensor, a carbon monoxide sensor, a hydrogen sulfide sensor, a sulfur dioxide sensor, and a flammable gas sensor are used as the gas sensor 40
  • the present invention is not limited to this.
  • some of the oxygen sensor, carbon monoxide sensor, hydrogen sulfide sensor, sulfur dioxide sensor, and flammable gas sensor may be omitted, or other sensors may be added.
  • the specific incident is a sudden combustion (for example, flashover or backdraft) that may occur in an environment in which firefighters are active
  • the specific incident may be the detection of sarin, anthrax, radiation and the like. That is, a specific incident is an event that is generally considered desirable from the viewpoint of protecting human life to be alerted before it actually occurs, and is an event due to a natural phenomenon (for example, flashover or backdraft). It doesn't matter if it's a draft) or an artificial event (eg, sarin spraying).
  • the specific incident may be "occurrence of heat stroke".
  • the following can be used to call attention.
  • biometric information collected from a sensor that detects biometric information eg, blood pressure, sweating amount, body temperature
  • condition data representing the conditions under which heat stroke occurs (for example, for heat stroke).
  • the person wearing the smart mask 10 (and the respiratory organ) is a firefighter has been described, but the present invention is not limited to this.
  • the person wearing the smart mask 10 (and the respiratory organs) may be a person who works in a dangerous environment contaminated with air, such as a police officer, a Self-Defense Forces member, or a nuclear worker.
  • highly useful information can be provided at an appropriate timing even to a person who works in such a harsh environment.
  • the switch 10d and the voice recognition unit 11a2 are used as the switching means 60
  • the present invention is not limited to this.
  • a motion gesture detection unit for detecting a motion gesture of a firefighter (for example, waving, nodding, or shaking the neck in front of the eyes) is provided, and when a specific motion gesture is detected, the screen is displayed.
  • the display mode may be switched.
  • the screen visually recognized by the firefighters wearing the face piece 9 is a screen visually recognized as a virtual image that emerges forward by the combiner 10a1, but the present invention is not limited to this.
  • the screen visually recognized by the firefighters wearing the face piece 9 may be a screen visually recognized as a real image.
  • the screen may be displayed by a small display device (for example, an organic EL display).
  • the small display device is attached to the face piece 9, for example.
  • the small display device is arranged in front of the face of the firefighter (between the transparent cover 10a) with the face 9 attached to the firefighter. Even in this way, the firefighters can visually recognize various screens (real images) displayed on the small display device with almost no movement of the line of sight.
  • the infrared camera 10b and the visible camera 10c are attached to the smart mask 10 (facet 9) worn by firefighters
  • the present invention is limited to this. do not have.
  • the infrared camera 10b and the visible camera 10c may be attached to any attachment that is worn by firefighters.
  • it may be attached to fireproof clothing worn by firefighters.
  • Non-temporary computer-readable media include various types of tangible storage media.
  • Examples of non-temporary computer-readable media include magnetic recording media (eg, flexible disks, magnetic tapes, hard disk drives), magneto-optical recording media (eg, magneto-optical disks), CD-ROMs (Read Only Memory), CD-Rs, It includes a CD-R / W and a semiconductor memory (for example, a mask ROM, a PROM (Programmable ROM), an EPROM (Erasable PROM), a flash ROM, and a RAM (RandomAccessMemory)).
  • a semiconductor memory for example, a mask ROM, a PROM (Programmable ROM), an EPROM (Erasable PROM), a flash ROM, and a RAM (RandomAccessMemory)
  • the program may also be supplied to the computer by various types of temporary computer readable medium.
  • temporary computer-readable media include electrical, optical, and electromagnetic waves.
  • the temporary computer-readable medium can supply the program to the computer via a wired communication path such as an electric wire and an optical fiber, or a wireless communication path.
  • a display means that is attached to the face and displays a screen that is visible to the wearer wearing the face.
  • An information display system including a display control means for switching the display mode of the screen.
  • Appendix 2 The display control means is described in Appendix 1 for switching to one of a first screen including an environment information display area, a second screen including a video display area in addition to the environment information display area, and a non-screen containing no information. Information display system.
  • Appendix 3 The information display system according to Appendix 2, wherein environmental information detected by at least one sensor attached to the wearer worn by the wearer is displayed in the environmental information display area.
  • Appendix 4 The information display system according to Appendix 2 or 3, wherein an image captured by an imaging device attached to a wearer worn by the wearer is displayed in the image display area.
  • Appendix 7 The information display system according to Appendix 5 or 6, which is displayed in the center of the screen.
  • the display means is attached to the face body, is arranged in front of the face of the wearer in a state where the face body is attached to the wearer, and is visually recognized as a virtual image that emerges forward by the wearer.
  • Appendix 13 The information display system according to any one of Appendix 1 to 10, wherein the screen is a screen visually recognized as a real image by the wearer.
  • Appendix 14 The information display system according to Appendix 13, wherein the display means is a display attached to the face piece and displaying the screen.
  • An information display method comprising a step of switching a display mode of the screen.

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Engineering & Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Human Computer Interaction (AREA)
  • Health & Medical Sciences (AREA)
  • Emergency Management (AREA)
  • Business, Economics & Management (AREA)
  • General Health & Medical Sciences (AREA)
  • Pulmonology (AREA)
  • Optics & Photonics (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Alarm Systems (AREA)
  • Controls And Circuits For Display Device (AREA)
  • User Interface Of Digital Computer (AREA)

Abstract

本開示にかかる情報表示システム(1)は、面体(9)に設けられ、面体(9)を装着した装着者により視認される画面を表示する表示手段(70)と、前記画面の表示態様を切り換える表示制御手段(60)と、を備える。

Description

情報表示システム及び情報表示方法
 本開示は、情報表示システム及び情報表示方法に関する。
 消防隊員の顔面の前方に配置され、かつ、当該消防隊員により視認される情報を形成するように構成された情報表示システムが例えば特許文献1に記載されている。
特開2019-36888号公報
 しかしながら、特許文献1に記載のシステムにおいては、面体を装着した装着者により視認される画面を、どのようなタイミングで表示するかについては全く提案されていない。
 本開示の目的は、上述した課題を鑑み、面体を装着した装着者により視認される画面を適切なタイミングで表示することができる情報表示システム及び情報表示方法を提供することにある。
 本開示の第1の態様にかかる情報表示システムは、面体に取り付けられ、面体を装着した装着者により視認される画面を表示する表示手段と、前記画面の表示態様を切り換える表示制御手段と、を備える。
 本開示の第2の態様にかかる情報表示方法は、面体を装着した装着者により視認される画面を表示するステップと、前記画面の表示態様を切り換えるステップと、を備える。
 本発明により、面体を装着した装着者により視認される画面を適切なタイミングで表示することができる情報表示システム及び情報表示方法を提供することができる。
情報表示システム1の概略構成図である。 情報表示システム1の詳細構成図である。 スマートマスク10の一例(正面図)である。 面体9を装着した消防隊員により虚像として視認される第1画面DP1の一例である。 面体9を装着した消防隊員により虚像として視認される第1画面DP1の一例である。 面体9を装着した消防隊員により虚像として視認される第2画面DP2の一例である。 隊長端末20のディスプレイ23に表示される画面G2の一例である。 情報表示システム1の動作(表示切換処理1)のフローチャートである。 情報表示システム1の動作(表示切換処理2)のフローチャートである。 情報表示システム1の動作(メッセージ表示処理1)のシーケンス図である。 情報表示システム1の動作(メッセージ表示処理2)のシーケンス図である。 情報表示システム1の動作(メッセージ表示処理3)のフローチャートである。 環境情報が閾値を超えたことを表すメッセージM2の一例である。
 (実施形態1)
 以下、本発明の実施形態1である情報表示システム1について添付図面を参照しながら説明する。各図において対応する構成要素には同一の符号が付され、重複する説明は省略される。
 まず、図1を用いて、情報表示システム1の構成について説明する。
 図1は、情報表示システム1の概略構成図である。
 図1に示すように、情報表示システム1は、面体9に取り付けられ、面体9を装着した装着者により視認される画面を表示する表示手段70と、前記画面の表示態様を切り換える表示制御手段60と、を備える。
 実施形態1によれば、面体9を装着した消防隊員により視認される画面を適切なタイミングで表示することができる。これは、画面の表示態様を切り換える表示制御手段60を備えていることによるものである。
 (実施形態2)
 以下、本発明の実施形態2として、情報表示システム1についてさらに詳細に説明する。以下、面体9を装着する者が消防隊員で、特定インシデントが、消防隊員が活動する環境で起こる可能性がある急激な燃焼(例えば、フラッシュオーバー又はバックドラフト)である例について説明する。
 図2は、情報表示システム1の詳細構成図である。
 図2に示すように、実施形態2では、表示手段70として、透明カバー10a(コンバイナー10a1)を用い、表示制御手段60として、表示制御部11a1を用いる。
 図2に示すように、情報表示システム1は、スマートマスク10と、制御BOX11と、ガスセンサ40と、温度センサ50と、隊長端末20と、サーバ30と、を備えている。
 まず、スマートマスク10の構成について説明する。図3は、スマートマスク10の一例(正面図)である。
 図3に示すように、スマートマスク10は、火災現場で活動する消防隊員(本発明の装着者の一例)が装着する面体9と、透明カバー10aと、赤外線カメラ10bと、可視カメラ10cと、スイッチ10dと、マイク10e(図3中省略)と、を備えている。
 透明カバー10a、赤外線カメラ10b、可視カメラ10c、スイッチ10d及びマイク10eは、面体9に取り付けられている。
 透明カバー10aは、面体9が消防隊員に装着された状態で当該消防隊員の顔面の前方に配置される。透明カバー10aは、反射透光部材(例えば、コンバイナー10a1)を含んでいる。コンバイナー10a1には、例えば、制御BOX11等で生成された各種画面(例えば、後述の第1画面DP1、第2画面)が周知の光学系により投影される。この投影された各種画像は、コンバイナー10a1で反射(さらに拡大)されて、面体9を装着した消防隊員の目へ到達する。これにより、面体9を装着した消防隊員は、各種画面(例えば、後述の第1画面DP1、第2画面)を、拡大され前方(例えば、1.5m前方)に浮かび上がる虚像として視認する。各種画面(虚像)は面体9を装着した消防隊員の視界と重なるため、消防隊員はほとんど視線を動かすこと無く、各種画面(虚像)を視認することができる。なお、各種画面を投影する光学系については周知のものを用いることができるため、説明を省略する。なお、透明カバー10a(コンバイナー10a1)、コンバイナー10a1に投影される各種画面を生成する制御BOX11(例えば、表示制御部11a1)及びこの生成された各種画面を投影する光学系を総称してヘッドアップディスプレイ(又はヘッドマウントディスプレイ)と呼ぶことができる。
 すなわち、面体を装着した装着者により視認される画面を表示することができる装置又はシステムであれば、ヘッドアップディスプレイ(又はヘッドマウントディスプレイ)と呼ぶことができる。
 図4及び図5は、面体9を装着した消防隊員により虚像として視認される第1画面DP1の一例である。
 図4に示すように、第1画面DP1は、環境情報表示領域(空気ボンベ残量(残圧)表示領域a3、突入経過時間表示領域a4、検知対象ガス濃度表示領域a5)を含んでいる。
 空気ボンベ残量(残圧)表示領域a3には、消防隊員が装着した空気ボンベの残量(残圧)が表示される。
 突入経過時間表示領域a4には、火災現場に突入してからの経過時間が表示される。
 検知対象ガス濃度表示領域a5には、ガスセンサ40の検出結果である各種ガス濃度が表示される。
 図5に示すように、第1画面DP1には、緊急性の高いメッセージM1、例えば、消防隊員が活動する環境で急激な燃焼が起こる可能性がある旨のメッセージ「注意:フラッシュオーバー発生」やその他のメッセージが表示される場合がある。消防隊員が活動する環境で起こる可能性がある急激な燃焼は、例えば、フラッシュオーバー又はバックドラフトである。
 図6は、面体9を装着した消防隊員により虚像として視認される第2画面DP2の一例である。
 図6に示すように、第2画面DP2は、環境情報表示領域(空気ボンベ残量(残圧)表示領域a3、突入経過時間表示領域a4、検知対象ガス濃度表示領域a5)に加えてカメラ映像表示領域a2を含んでいる。
 カメラ映像表示領域a2には、赤外線カメラ10b又は可視カメラ10cにより撮像された映像(動画又は静止画)が表示される。
 図6に示すように、第2画面DP2には、緊急性の高いメッセージM1、例えば、消防隊員が活動する環境で急激な燃焼が起こる可能性がある旨のメッセージ「注意:フラッシュオーバー発生」やその他のメッセージが表示される場合がある。
 赤外線カメラ10bは、消防隊員が活動する環境を撮像する撮像装置で、例えば、消防隊員が活動する環境が暗闇の場合に用いられる。可視カメラ10cは、消防隊員が活動する環境を撮像する撮像装置で、例えば、消防隊員が活動する環境が明るい場合に用いられる。
 スイッチ10dは、消防隊員が操作するスイッチで、例えば、押しボタン式のスイッチである。スイッチ10dは、面体9を装着した消防隊員が視認する画面の表示態様を切り換えるために用いられる。
 マイク10eは、消防隊員が発する音声を入力するためのマイクである。マイク10eは、音声認識用の音声を入力するために用いられる。
 ガスセンサ40及び温度センサ50は、消防隊員が装着する装着具(例えば、防火服)に取り付けられている。
 ガスセンサ40は、消防隊員が活動する環境のガス濃度を検出する。ガスセンサ40は、例えば、酸素濃度を検出する酸素センサ、一酸化炭素濃度を検出する一酸化炭素センサ、硫化水素濃度を検出する硫化水素センサ、二酸化硫黄濃度を検出する二酸化硫黄センサ、可燃性ガス濃度を検出する可燃性ガスセンサである。
 温度センサ50は、消防隊員が活動する環境の温度を検出する。
 赤外線カメラ10b、可視カメラ10c、ガスセンサ40及び温度センサ50が本発明のセンサの一例である。
 次に、制御BOX11の構成について説明する。
 図2に示すように、制御BOX11は、制御部11aと、RAM11b(Random Access Memory)と、ROM11c(Read Only Memory)と、通信部11dと、を備えている。
 制御部11aは、図示しないが、プロセッサを備えている。プロセッサは、例えば、CPU(Central Processing Unit)である。プロセッサは、1つの場合もあるし、複数の場合もある。プロセッサは、ROM11c等の不揮発性メモリからRAM11bに読み込まれた所定プログラムを実行することで、表示制御部11a1、音声認識部11a2として機能する。これらの一部又は全部は、ハードウェアで実現してもよい。
 表示制御部11a1は、コンバイナー10a1に投影され虚像として視認される画像、例えば、第1画面DP1(図4、図5参照)や第2画面DP2(図6参照)を表示(形成等)する。
 音声認識部11a2は、マイク10eを介して入力された消防隊員の音声を認識する。
 通信部11dは、隊長端末20及びサーバ30との間で通信回線NW(例えば、インターネット)を介して無線通信する通信装置である。
 次に、隊長端末20の構成について説明する。
 隊長端末20は、例えば、タブレット型の情報処理端末で、図2に示すように、制御部21と、タッチパネル22と、ディスプレイ23と、通信部24と、を備えている。
 制御部21は、図示しないが、プロセッサを備えている。プロセッサは、例えば、CPUである。プロセッサは、1つの場合もあるし、複数の場合もある。プロセッサは、ROM(図示せず)等の不揮発性メモリからRAM(図示せず)に読み込まれた所定プログラムを実行することで、ディスプレイ23等を制御する。
 タッチパネル22は、消防隊長が操作する入力装置で、ディスプレイ23の表示面を覆った状態で配置されている。ディスプレイ23は、例えば、タッチパネル22付きディスプレイである。タッチパネル付きディスプレイは、タッチスクリーンディスプレイとも呼ばれる。
 図7は、隊長端末20のディスプレイ23に表示される画面G2の一例である。
 図7に示すように、画面G2は、カメラ映像表示領域b、図面や写真情報表示領域c及びメッセージ送信領域dを含んでいる。
 カメラ映像表示領域bには、面体9を装着した消防隊員が視認する映像(動画又は静止画)と同じ映像が表示される。また、ディスプレイ23には、消防隊員(1又は複数)の全ての情報(氏名、血液型等)が表示される。また、タッチパネル22を介して任意の消防隊員を選択して映像録画(後日、状況振り返りのため)を実施することもできる(ズームも可能)。
 図面や写真情報表示領域cには、例えば、災害現場の図面や写真情報が表示される。
 メッセージ送信領域dには、例えば、消防隊員に送信するメッセージ(例えば、後述の緊急性の高いメッセージM1、M2)が表示される。また、タッチパネル22を介してメッセージ送信を実施することもできる。
 このように、隊長端末20においては、離れた場所から消防隊員の活動情報を把握、管理することができるようになっている。
 通信部24は、制御BOX11及びサーバ30との間で通信回線NW(例えば、インターネット)を介して無線通信する通信装置である。
 次に、サーバ30の構成について説明する。
 サーバ30は、火災現場から遠隔の地に設置されている。図2に示すように、サーバ30は、制御部31と、記憶装置32と、通信部33と、を備えている。
 制御部31は、図示しないが、プロセッサを備えている。プロセッサは、例えば、CPUである。プロセッサは、1つの場合もあるし、複数の場合もある。プロセッサは、ROM(図示せず)等の不揮発性メモリからRAM(図示せず)に読み込まれた所定プログラムを実行することで、判定部31a、学習部31bとして機能する。
 判定部31aは、制御BOX11から受信した各種センサの検出結果及び記憶装置32に記憶された条件データ32aに基づいて、消防隊員が活動する環境で急激な燃焼が起こる可能性を判定(予測)する。
 学習部31bは、制御BOX11から受信した各種センサの検出結果に基づいて、急激な燃焼が起こる条件を学習する。学習部31bは、過去に急激な燃焼が起こった事例等に基づいて、急激な燃焼が起こる条件を学習する場合もある。
 記憶装置32には、急激な燃焼が起こる条件(1又は複数の条件)を表す条件データ32aが記憶されている。急激な燃焼が起こる条件は、例えば、急激な燃焼が起こるガス濃度を表す数値又は数値範囲である。この数値又は数値範囲は、例えば、実験又は過去の事例から算出することができる。
 また、急激な燃焼が起こる条件は、例えば、撮像装置により撮像された映像(例えば、動画)に映り込んだ炎の特徴を表すデータである。炎の特徴を表すデータは、例えば、炎の動き、色、大きさ等を表すデータである。この炎の特徴を表すデータは、例えば、実験又は過去の事例で撮像された映像を画像処理することで算出することができる。
 通信部33は、制御BOX11及び隊長端末20との間で通信回線NW(例えば、インターネット)を介して無線通信する通信装置である。
 次に、上記構成の情報表示システム1の動作の一例として、消防隊員が火災現場に突入する際にスイッチ10dを操作することにより、画面の表示態様を切り換える表示切換処理1について説明する。
 図8は、情報表示システム1の動作(表示切換処理1)のフローチャートである。図8の処理は、主に、制御BOX11の制御部11a(プロセッサ)がROM11c等の不揮発性メモリからRAM11bに読み込まれた所定プログラムを実行することで実現される。以下の説明においては、各種センサが、消防隊員が活動する環境の環境情報を検出しているものとする。
 まず、制御BOX11を起動する(ステップS40)。この時点では、コンバイナー10a1には、何も投影されない。
 次に、制御部11aは、スイッチ10dのボタンが1回押し下げられたか否かを判定する(ステップS41)。
 スイッチ10dのボタンが1回押し下げられたと判定された場合(ステップS41:YES)、表示制御部11a1は、環境情報表示領域(空気ボンベ残量(残圧)表示領域a3、突入経過時間表示領域a4、検知対象ガス濃度表示領域a5)が図4に示す表示パターンで配置された第1画面DP1(虚像)を形成する(ステップS42)。
 一方、スイッチ10dのボタンが2回押し下げられたと判定された場合(ステップS41:NO、ステップS43:YES)、表示制御部11a1は、環境情報表示領域(空気ボンベ残量(残圧)表示領域a3、突入経過時間表示領域a4、検知対象ガス濃度表示領域a5)に加えて映像表示領域a2が図6に示す表示パターンで配置された第2画面DP2(虚像)を形成する(ステップS44)。
 一方、スイッチ10dのボタンが3回押し下げられたと判定された場合(ステップS41:NO、ステップS43:NO、ステップS45:YES)、表示制御部11a1は、画面を、情報を含まない(情報が表示されない)無画面に切り換える(ステップS46)。なお、無画面は、情報を全く含まない場合もあるし、消防隊員が煩わしく感じない程度の情報を含む場合もある。
 一方、スイッチ10dのボタンが長押しされたと判定された場合(ステップS41:NO、ステップS43:NO、ステップS45:NO、ステップS47:YES)、制御BOX11(通信部11d)は、緊急メッセージを隊長端末20等に送信する(ステップS48)。緊急メッセージは、例えば、消防隊員の異常を知らせる旨のメッセージである。
 以後、ステップS41からステップS48の処理が繰り返し実行される。
 なお、ステップS41、S43、S45それぞれで判定されるスイッチ10dのボタンの押し下げ回数は、上記回数に限定されない。すなわち、ステップS41、S43、S45それぞれで判定されるスイッチ10dのボタンの押し下げ回数は、相互に異なる回数であればよい。
 次に、上記構成の情報表示システム1の動作の一例として、消防隊員が音声を発することにより、画面の表示態様を切り換える表示切換処理2について説明する。
 図9は、情報表示システム1の動作(表示切換処理2)のフローチャートである。図9の処理は、主に、制御BOX11の制御部11a(プロセッサ)がROM11c等の不揮発性メモリからRAM11bに読み込まれた所定プログラムを実行することで実現される。以下の説明においては、各種センサが、消防隊員が活動する環境の環境情報を検出しているものとする。
 まず、制御BOX11を起動する(ステップS50)。この時点では、コンバイナー10a1には、何も投影されない。
 次に、制御部11aは、音声認識部11a2が、消防隊員が発した音声「ON」を認識したか否かを判定する(ステップS51)。
 音声認識部11a2が音声「ON」を認識したと判定された場合(ステップS51:YES)、表示制御部11a1は、環境情報表示領域(空気ボンベ残量(残圧)表示領域a3、突入経過時間表示領域a4、検知対象ガス濃度表示領域a5)が図4に示す表示パターンで配置された第1画面DP1(虚像)を形成する(ステップS52)。
 一方、音声認識部11a2が音声「画像」を認識したと判定された場合(ステップS51:NO、ステップS53:YES)、表示制御部11a1は、環境情報表示領域(空気ボンベ残量(残圧)表示領域a3、突入経過時間表示領域a4、検知対象ガス濃度表示領域a5)に加えて映像表示領域a2が図6に示す表示パターンで配置された第2画面DP2(虚像)を形成(ステップS54)。
 一方、音声認識部11a2が音声「OFF」を認識したと判定された場合(ステップS51:NO、ステップS53:NO、ステップS55:YES)、表示制御部11a1は、画面を、情報を含まない(情報が表示されない)無画面に切り換える(ステップS56)。
 一方、スイッチ10dのボタンが長押しされたと判定された場合(ステップS51:NO、ステップS53:NO、ステップS55:NO、ステップS57:YES)、制御BOX11(通信部11d)は、緊急メッセージを隊長端末20等に送信する(ステップS58)。緊急メッセージは、例えば、消防隊員の異常を知らせる旨のメッセージである。
 以後、ステップS51からステップS58の処理が繰り返し実行される。
 なお、ステップS51、S53、S55それぞれで認識される音声は、上記に限定されない。すなわち、ステップS51、S53、S55それぞれで認識される音声は、相互に異なる音声であればよい。
 次に、上記構成の情報表示システム1の動作の一例として、メッセージ表示処理1について説明する。
 図10は、情報表示システム1の動作(メッセージ表示処理1)のシーケンス図である。
 以下の説明においては、図4に示す第1画面DP1(虚像)が形成されているものとする。
 まず、各種センサが、消防隊員が活動する環境の環境情報を検出する(ステップS10)。例えば、赤外線カメラ10bが、消防隊員が活動する環境を撮像する。また、ガスセンサ40が、消防隊員が活動する環境のガス濃度を検出する。さらに、温度センサ50が、消防隊員が活動する環境の温度を検出する。
 次に、制御BOX11(通信部11d)が、ステップS10で検出された環境情報(各種センサの検出結果)を、通信回線NWを介してサーバ30に送信する(ステップS11)。
 次に、サーバ30(通信部33)が、制御BOX11から送信される環境情報を受信する(ステップS12)。
 次に、サーバ30(判定部31a)が、制御BOX11から受信した環境情報(各種センサの検出結果)及び記憶装置32に記憶された急激な燃焼が起こる条件を表す条件データ32aに基づいて、消防隊員が活動する環境で急激な燃焼が起こる可能性を判定(予測)する(ステップS13)。
 例えば、制御BOX11から受信した環境情報(各種センサの検出結果)がガスセンサ40の検出結果(及び温度センサ50の検出結果)である場合、サーバ30(判定部31a)は、ガスセンサ40の検出結果(及び温度センサ50の検出結果)が記憶装置32に記憶された条件データ32aが表す急激な燃焼が起こる条件に一致(又は類似)すると、消防隊員が活動する環境で急激な燃焼が起こる可能性があると判定する。それ以外の場合、消防隊員が活動する環境で急激な燃焼が起こる可能性がないと判定する。
 一方、制御BOX11から受信した環境情報(各種センサの検出結果)が、赤外線カメラ10bが撮像した映像(又は可視カメラ10cが撮像した映像)の場合、サーバ30は、映像を画像処理することで、当該映像に映り込んだ炎の特徴を表すデータを抽出する。そして、サーバ30(判定部31a)は、この抽出された炎の特徴を表すデータが記憶装置32に記憶された条件データ32aが表す急激な燃焼が起こる条件に一致(又は類似)すると、消防隊員が活動する環境で急激な燃焼が起こる可能性があると判定する。それ以外の場合、消防隊員が活動する環境で急激な燃焼が起こる可能性がないと判定する。
 次に、サーバ30(通信部33)が、ステップS13で判定された判定結果を、通信回線NWを介して制御BOX11に送信する(ステップS14)。
 次に、制御BOX11(通信部11d)が、サーバ30から送信される判定結果を受信する(ステップS15)。
 そして、サーバ30から受信した判定結果が急激な燃焼が起こる可能性がある場合(ステップS16:YES)、図5に示すように、制御BOX11(表示制御部11a1)は、第1画面DP1に、緊急性の高いメッセージM1、例えば、消防隊員が活動する環境で急激な燃焼が起こる可能性がある旨のメッセージ「注意:フラッシュオーバー発生」を表示(重畳表示)する(ステップS17)。その際、メッセージM1は、消防隊員への注意喚起を目的とするため、第1画面DP1の中央に表示(重畳表示)するのが望ましい。
 なお、上記第1画面DP1に代えて第2画面DP2(虚像)が形成されている場合、図6に示すように、制御BOX11(表示制御部11a1)は、第2画面DP2に、緊急性の高いメッセージM1、例えば、消防隊員が活動する環境で急激な燃焼が起こる可能性がある旨のメッセージ「注意:フラッシュオーバー発生」を表示(重畳表示)する。その際、メッセージM1は、消防隊員への注意喚起を目的とするため、第2画面DP2の中央に表示(重畳表示)するのが望ましい。
 以上のように、メッセージ表示処理1によれば、急激な燃焼が起こる可能性がある場合、消防隊員の操作(例えば、ボタン操作、切り換え操作)にかかわらず、強制的にメッセージM1を表示することができる。これにより、緊急性の高いメッセージM1を消防隊員に直接かつ即座に注意喚起することができる。
 次に、上記構成の情報表示システム1の動作の一例として、メッセージ表示処理2について説明する。
 図11は、情報表示システム1の動作(メッセージ表示処理2)のシーケンス図である。
 図11に示すフローチャートは、図10に示すフローチャート中のステップS15~S17の処理を省略し、ステップS20~S24の処理を追加したものに相当する。以下、図10との相違点を中心に説明する。
 以下の説明においては、図4に示す第1画面DP1(虚像)が形成されているものとする。
 隊長端末20(通信部24)が、サーバ30から送信される判定結果を受信する(ステップS20)。次に、隊長端末20(制御部21)は、ディスプレイ23を制御して判定結果、例えば画面G2に消防隊員が活動する環境で急激な燃焼が起こる可能性がある旨のメッセージ(例えば、「注意:フラッシュオーバー発生」)を表示する。
 そして、当該表示を見た消防隊長が例えばディスプレイ23に表示される送信ボタン(図示せず)を、タッチパネル22を介してタップした場合(ステップS21:YES)、隊長端末20(通信部24)が、緊急性の高いメッセージM1、例えば、消防隊員が活動する環境で急激な燃焼が起こる可能性がある旨のメッセージ「注意:フラッシュオーバー発生」を、通信回線NWを介して制御BOX11に送信する(ステップS22)。
 次に、制御BOX11(通信部11d)が、隊長端末20から送信される、緊急性の高いメッセージM1、例えば、消防隊員が活動する環境で急激な燃焼が起こる可能性がある旨のメッセージ「注意:フラッシュオーバー発生」を受信する(ステップS23)。
 そして、図5に示すように、制御BOX11(表示制御部11a1)は、第1画面DP1に、ステップS23で受信した緊急性の高いメッセージM1、例えば、消防隊員が活動する環境で急激な燃焼が起こる可能性がある旨のメッセージ「注意:フラッシュオーバー発生」を表示(重畳表示)する(ステップS24)。その際、メッセージM1は、消防隊員への注意喚起を目的とするため、第1画面DP1の中央に表示(重畳表示)するのが望ましい。
 なお、上記第1画面DP1に代えて第2画面DP2(虚像)が形成されている場合、図6に示すように、制御BOX11(表示制御部11a1)は、第2画面DP2に、ステップS23で受信した緊急性の高いメッセージM1、例えば、消防隊員が活動する環境で急激な燃焼が起こる可能性がある旨のメッセージ「注意:フラッシュオーバー発生」を表示(重畳表示)する。その際、メッセージM1は、消防隊員への注意喚起を目的とするため、第2画面DP2の中央に表示(重畳表示)するのが望ましい。
 以上のように、メッセージ表示処理2によれば、急激な燃焼が起こる可能性がある場合、消防隊員の操作(例えば、ボタン操作、切り換え操作)にかかわらず、強制的にメッセージM1を表示することができる。これにより、緊急性の高いメッセージM1を消防隊長及び消防隊員に直接かつ即座に注意喚起することができる。
 次に、上記構成の情報表示システム1の動作の一例として、メッセージ表示処理3について説明する。
 図12は、情報表示システム1の動作(メッセージ表示処理3)のフローチャートである。図13は、環境情報が閾値を超えたことを表すメッセージM2の一例である。
 まず、各種センサが、消防隊員が活動する環境の環境情報を検出する(ステップS60)。例えば、ガスセンサ40が、消防隊員が活動する環境のガス濃度を検出する。さらに、温度センサ50が、消防隊員が活動する環境の温度を検出する。
 次に、制御BOX11(制御部11a)が、ステップS60で検出された環境情報が閾値を超えたか否かを判定する(ステップS61)。閾値は、例えば、ROM11c等に予め記憶されているものを用いる。
 ステップS60で検出された環境情報が閾値を超えたと判定された場合(ステップS61:YES)、制御BOX11(表示制御部11a1)は、環境情報が閾値を超えたことを表すメッセージM2(例えば、図13参照)を第1画面DP1(又は第2画面DP2)に表示(例えば、重畳表示)する(ステップS62)。
 以上のように、メッセージ表示処理3によれば、環境情報が閾値を超えた場合、消防隊員の操作(例えば、ボタン操作、切り換え操作)にかかわらず、強制的にメッセージM2を表示することができる。これにより、緊急性の高いメッセージM2を消防隊員に直接かつ即座に注意喚起することができる。
 以上説明したように、実施形態2によれば、面体9を装着した消防隊員により視認される画面(例えば、第1画面DP1、第2画面DP2)を適切なタイミング(例えば、消防士が火災現場に突入するタイミング)で表示することができる。これは、画面の表示態様を切り換える表示制御部11a1を備えていることによるものである。
 このように消防隊員に情報表示の選択権を与えることで、面体9を装着した消防隊員により視認される画面(例えば、第1画面DP1、第2画面DP2)が常時表示されることがなくなるため、現場作業中の消防隊員に煩わしさを与えることが抑制される。
 また、実施形態2によれば、緊急性の高いメッセージM1、M2が画面(例えば、第1画面DP1、第2画面DP2)の中央に表示(重畳表示)されるため、緊急性の高いメッセージM1、M2を消防隊員に直接かつ即座に注意喚起することができる。
 次に、変形例について説明する。
 また、上記実施形態2では、ガスセンサ40及び温度センサ50を用いた例について説明したが、これに限らない。例えば、ガスセンサ40及び温度センサ50のうち一部を省略してもよいし、他のセンサを追加してもよい。
 また、上記実施形態2では、ガスセンサ40として、酸素センサ、一酸化炭素センサ、硫化水素センサ、二酸化硫黄センサ、可燃性ガスセンサを用いた例について説明したが、これに限らない。例えば、酸素センサ、一酸化炭素センサ、硫化水素センサ、二酸化硫黄センサ、可燃性ガスセンサのうち一部を省略してもよいし、他のセンサを追加してもよい。
 また、上記実施形態2では、特定インシデントが、消防隊員が活動する環境で起こる可能性がある急激な燃焼(例えば、フラッシュオーバー又はバックドラフト)である例について説明したが、これに限らない。例えば、特定インシデントは、サリン、炭そ菌、放射線等の検出であってもよい。すなわち、特定インシデントとは、それが実際に発生するより前に注意喚起した方が人命保護の観点から望ましいと一般的に考えられるイベントのことであり、自然現象によるイベント(例えば、フラッシュオーバー又はバックドラフト)であるか、人為的行為によるイベント(例えば、サリン散布)であるかは問わない。
 例えば、特定インシデントは、「熱中症の発生」であってもよい。この場合、例えば、次のようにして、注意喚起することができる。
 例えば、消防隊員が装着した当該消防隊員の生体情報(例えば、血圧、発汗量、体温)を検出するセンサから収集した生体情報と、熱中症が発生する条件を表す条件データ(例えば、熱中症になる際の発生事例)と比較し、熱中症が発生する可能性を判定し、熱中症が発生する可能性があると判定された場合、熱中症が発生する可能性がある旨を実施形態2と同様に消防隊員等に注意喚起する。
 以上のように、特定インシデントとして様々なイベントを採用することができる。実施形態1、実施形態2及び変形例によれば、特定インシデントが実際に発生するより前に、特定インシデントが発生する可能性がある旨を注意喚起することができるため、より多くの人命保護を実現することができる。
 また、上記実施形態2では、スマートマスク10(及び呼吸器)を装着する者が消防隊員である例について説明したが、これに限られない。例えば、スマートマスク10(及び呼吸器)を装着する者は、例えば、警察官、自衛隊員、原子力作業員等、空気汚染された危険な環境下で作業する者であってもよい。本発明によれば、このような過酷な環境で作業する者に対しても、有用性の高い情報を、適切なタイミングで提供することができる。
 また、上記実施形態2では、切換手段60として、スイッチ10d、音声認識部11a2を用いた例について説明したが、これに限らない。例えば、切換手段60として、消防隊員のモーションジェスチャー(例えば、目の前で手をふる、うなずく、首をふる)を検出するモーションジェスチャー検出部を設け、特定のモーションジェスチャーを検出した場合、画面の表示態様を切り換えるようにしてもよい。
 また、上記実施形態2では、面体9を装着した消防隊員により視認される画面が、コンバイナー10a1により前方に浮かび上がる虚像として視認される画面である例について説明したが、これに限らない。例えば、図示しないが、面体9を装着した消防隊員により視認される画面は、実像として視認される画面であってもよい。例えば、小型の表示装置(例えば、有機ELディスプレイ)により表示される画面であってもよい。小型の表示装置は、例えば、面体9に取り付けられる。小型の表示装置は、面体9が消防隊員に装着された状態で、消防隊員の顔面の前方(透明カバー10aとの間)に配置される。このようにしても、消防隊員はほとんど視線を動かすこと無く、小型の表示装置に表示される各種画面(実像)を視認することができる。
 また、上記実施形態2では、赤外線カメラ10b及び可視カメラ10c(本発明の撮像装置の一例)を、消防隊員が装着するスマートマスク10(面体9)に取り付けた例について説明したが、これに限らない。例えば、赤外線カメラ10b及び可視カメラ10cは、消防隊員が装着する装着具であればどこに取り付けてもよい。例えば、消防隊員が装着する防火服に取り付けてもよい。
 上記実施形態1、2において、プログラムは、様々なタイプの非一時的なコンピュータ可読媒体(non-transitory computer readable medium)を用いて格納され、コンピュータに供給することができる。非一時的なコンピュータ可読媒体は、様々なタイプの実体のある記録媒体(tangible storage medium)を含む。非一時的なコンピュータ可読媒体の例は、磁気記録媒体(例えばフレキシブルディスク、磁気テープ、ハードディスクドライブ)、光磁気記録媒体(例えば光磁気ディスク)、CD-ROM(Read Only Memory)、CD-R、CD-R/W、半導体メモリ(例えば、マスクROM、PROM(Programmable ROM)、EPROM(Erasable PROM)、フラッシュROM、RAM(Random Access Memory))を含む。また、プログラムは、様々なタイプの一時的なコンピュータ可読媒体(transitory computer readable medium)によってコンピュータに供給されてもよい。一時的なコンピュータ可読媒体の例は、電気信号、光信号、及び電磁波を含む。一時的なコンピュータ可読媒体は、電線及び光ファイバ等の有線通信路、又は無線通信路を介して、プログラムをコンピュータに供給できる。
 上記実施形態で示した数値は全て例示であり、これと異なる適宜の数値を用いることができるのは無論である。
 上記実施形態はあらゆる点で単なる例示にすぎない。上記実施形態の記載によって本発明は限定的に解釈されるものではない。本発明はその精神または主要な特徴から逸脱することなく他の様々な形で実施することができる。
 上記の実施形態の一部又は全部は、以下の付記のようにも記載されうるが、以下には限られない。
 (付記1)
 面体に取り付けられ、面体を装着した装着者により視認される画面を表示する表示手段と、
 前記画面の表示態様を切り換える表示制御手段と、を備える情報表示システム。
 (付記2)
 前記表示制御手段は、環境情報表示領域を含む第1画面、前記環境情報表示領域に加えて映像表示領域を含む第2画面及び情報を含まない無画面のうちのいずれかに切り換える付記1に記載の情報表示システム。
 (付記3)
 前記環境情報表示領域には、前記装着者が装着する装着具に取り付けられた少なくとも1つのセンサにより検出された環境情報が表示される付記2に記載の情報表示システム。
 (付記4)
 前記映像表示領域には、前記装着者が装着する装着具に取り付けられた撮像装置により撮像された映像が表示される付記2又は3に記載の情報表示システム。
 (付記5)
 所定タイミングで、前記第1画面又は前記第2画面には、特定インシデントが起こる可能性があることを表すメッセージが表示される付記2から4のいずれか1項に記載の情報表示システム。
 (付記6)
 前記少なくとも1つのセンサにより検出された環境情報が閾値を超えた場合、前記第1画面又は前記第2画面には、当該環境情報が閾値を超えたことを表すメッセージが表示される付記2から5のいずれか1項に記載の情報表示システム。
 (付記7)
 前記メッセージは、前記画面の中央に表示される付記5又は6に記載の情報表示システム。
 (付記8)
 前記装着者が操作するスイッチをさらに備え、
 前記表示制御手段は、前記装着者が前記スイッチに対して特定の操作を行った場合、前記画面の表示態様を切り換える付記1から7のいずれか1項に記載の情報表示システム。
 (付記9)
 前記装着者が発する音声を認識する音声認識手段をさらに備え、
 前記表示制御手段は、前記音声認識手段により特定の音声が認識された場合、前記画面の表示態様を切り換える付記1から8のいずれか1項に記載の情報表示システム。
 (付記10)
 前記装着者のモーションジェスチャーを検出するモーションジェスチャー検出手段をさらに備え、
 前記表示制御手段は、前記モーションジェスチャー検出手段により特定のモーションジェスチャーが検出された場合、前記画面の表示態様を切り換える付記1から8のいずれか1項に記載の情報表示システム。
 (付記11)
 前記画面は、前記装着者により前方に浮かび上がる虚像として視認される画面である付記1から10のいずれか1項に記載の情報表示システム。
 (付記12)
 前記表示手段は、前記面体に取り付けられ、前記面体が前記装着者に装着された状態で前記装着者の顔面の前方に配置され、かつ、前記装着者により前方に浮かび上がる虚像として視認される画面が投影される領域を含む透明カバーである付記11に記載の情報表示システム。
 (付記13)
 前記画面は、前記装着者により実像として視認される画面である付記1から10のいずれか1項に記載の情報表示システム。
 (付記14)
 前記表示手段は、前記面体に取り付けられ、前記画面を表示するディスプレイである付記13に記載の情報表示システム。
 (付記15)
 面体を装着した装着者により視認される画面を表示するステップと、
 前記画面の表示態様を切り換えるステップと、を備える情報表示方法。
 (付記16)
 前記画面の表示態様を切り換えるステップは、環境情報表示領域を含む第1画面、前記環境情報表示領域に加えて映像表示領域を含む第2画面及び情報を含まない無画面のうちのいずれかに切り換える付記15に記載の情報表示方法。
 1 情報表示システム
 9 面体
 10 スマートマスク
 10a 透明カバー
 10a1 コンバイナー
 10b 赤外線カメラ
 10c 可視カメラ
 10d スイッチ
 10e マイク
 11 制御BOX
 11a 制御部
 11a1 表示制御部
 11a2 音声認識部
 11b RAM
 11c ROM
 11d 通信部
 20 隊長端末
 21 制御部
 22 タッチパネル
 23 ディスプレイ
 24 通信部
 30 サーバ
 31 制御部
 31a 判定部
 31b 学習部
 32 記憶装置
 32a 条件データ
 33 通信部
 40 ガスセンサ
 50 温度センサ
 60 表示制御手段
 DP1 第1画面
 DP2 第2画面
 a2 カメラ映像表示領域
 a3 空気ボンベ残量(残圧)表示領域
 a4 突入経過時間表示領域
 a5 検知対象ガス濃度表示領域
 NW 通信回線

Claims (16)

  1.  面体に取り付けられ、面体を装着した装着者により視認される画面を表示する表示手段と、
     前記画面の表示態様を切り換える表示制御手段と、を備える情報表示システム。
  2.  前記表示制御手段は、環境情報表示領域を含む第1画面、前記環境情報表示領域に加えて映像表示領域を含む第2画面及び情報を含まない無画面のうちのいずれかに切り換える請求項1に記載の情報表示システム。
  3.  前記環境情報表示領域には、前記装着者が装着する装着具に取り付けられた少なくとも1つのセンサにより検出された環境情報が表示される請求項2に記載の情報表示システム。
  4.  前記映像表示領域には、前記装着者が装着する装着具に取り付けられた撮像装置により撮像された映像が表示される請求項2又は3に記載の情報表示システム。
  5.  所定タイミングで、前記第1画面又は前記第2画面には、特定インシデントが起こる可能性があることを表すメッセージが表示される請求項2から4のいずれか1項に記載の情報表示システム。
  6.  前記少なくとも1つのセンサにより検出された環境情報が閾値を超えた場合、前記第1画面又は前記第2画面には、当該環境情報が閾値を超えたことを表すメッセージが表示される請求項2から5のいずれか1項に記載の情報表示システム。
  7.  前記メッセージは、前記画面の中央に表示される請求項5又は6に記載の情報表示システム。
  8.  前記装着者が操作するスイッチをさらに備え、
     前記表示制御手段は、前記装着者が前記スイッチに対して特定の操作を行った場合、前記画面の表示態様を切り換える請求項1から7のいずれか1項に記載の情報表示システム。
  9.  前記装着者が発する音声を認識する音声認識手段をさらに備え、
     前記表示制御手段は、前記音声認識手段により特定の音声が認識された場合、前記画面の表示態様を切り換える請求項1から8のいずれか1項に記載の情報表示システム。
  10.  前記装着者のモーションジェスチャーを検出するモーションジェスチャー検出手段をさらに備え、
     前記表示制御手段は、前記モーションジェスチャー検出手段により特定のモーションジェスチャーが検出された場合、前記画面の表示態様を切り換える請求項1から8のいずれか1項に記載の情報表示システム。
  11.  前記画面は、前記装着者により前方に浮かび上がる虚像として視認される画面である請求項1から10のいずれか1項に記載の情報表示システム。
  12.  前記表示手段は、前記面体に取り付けられ、前記面体が前記装着者に装着された状態で前記装着者の顔面の前方に配置され、かつ、前記装着者により前方に浮かび上がる虚像として視認される画面が投影される領域を含む透明カバーである請求項11に記載の情報表示システム。
  13.  前記画面は、前記装着者により実像として視認される画面である請求項1から10のいずれか1項に記載の情報表示システム。
  14.  前記表示手段は、前記面体に取り付けられ、前記画面を表示するディスプレイである請求項13に記載の情報表示システム。
  15.  面体を装着した装着者により視認される画面を表示するステップと、
     前記画面の表示態様を切り換えるステップと、を備える情報表示方法。
  16.  前記画面の表示態様を切り換えるステップは、環境情報表示領域を含む第1画面、前記環境情報表示領域に加えて映像表示領域を含む第2画面及び情報を含まない無画面のうちのいずれかに切り換える請求項15に記載の情報表示方法。
PCT/JP2020/003819 2020-01-31 2020-01-31 情報表示システム及び情報表示方法 WO2021152858A1 (ja)

Priority Applications (4)

Application Number Priority Date Filing Date Title
JP2021574428A JPWO2021152858A1 (ja) 2020-01-31 2020-01-31
PCT/JP2020/003819 WO2021152858A1 (ja) 2020-01-31 2020-01-31 情報表示システム及び情報表示方法
US17/794,384 US11842117B2 (en) 2020-01-31 2020-01-31 Information display system and information display method
US18/381,386 US20240045635A1 (en) 2020-01-31 2023-10-18 Information display system and information display method

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
PCT/JP2020/003819 WO2021152858A1 (ja) 2020-01-31 2020-01-31 情報表示システム及び情報表示方法

Related Child Applications (2)

Application Number Title Priority Date Filing Date
US17/794,384 A-371-Of-International US11842117B2 (en) 2020-01-31 2020-01-31 Information display system and information display method
US18/381,386 Continuation US20240045635A1 (en) 2020-01-31 2023-10-18 Information display system and information display method

Publications (1)

Publication Number Publication Date
WO2021152858A1 true WO2021152858A1 (ja) 2021-08-05

Family

ID=77079809

Family Applications (1)

Application Number Title Priority Date Filing Date
PCT/JP2020/003819 WO2021152858A1 (ja) 2020-01-31 2020-01-31 情報表示システム及び情報表示方法

Country Status (3)

Country Link
US (2) US11842117B2 (ja)
JP (1) JPWO2021152858A1 (ja)
WO (1) WO2021152858A1 (ja)

Families Citing this family (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US11928945B2 (en) * 2021-04-06 2024-03-12 George Bacon Brown Techniques for active shooter response capability (ASRC)—community law enforcement

Citations (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH0640917U (ja) * 1992-10-30 1994-05-31 株式会社島津製作所 ヘッドマウントディスプレイ
JPH0854282A (ja) * 1994-07-07 1996-02-27 Gec Marconi Ltd 頭部装着ディスプレイ装置
JP2001021366A (ja) * 1999-07-05 2001-01-26 Nippon Telegr & Teleph Corp <Ntt> 移動体追尾装置
JP2005067367A (ja) * 2003-08-22 2005-03-17 Semiconductor Energy Lab Co Ltd 発光装置および運転支援システムおよびヘルメット
JP2008065593A (ja) * 2006-09-07 2008-03-21 Kawasaki Heavy Ind Ltd 情報開示装置
JP2013210319A (ja) * 2012-03-30 2013-10-10 Honda Motor Co Ltd 集配支援システム
US9247779B1 (en) * 2012-11-08 2016-02-02 Peter Aloumanis Enhanced global positioning system (GPS) based functionality for helmets
JP2019502332A (ja) * 2015-10-07 2019-01-24 スコット テクノロジーズ インコーポレイテッドScott Technologies, Inc. マスク内フィードバックシステム
EP3434334A1 (en) * 2017-07-26 2019-01-30 Honeywell International Inc. Enhanced vision for firefighter using heads up display and gesture sensing

Family Cites Families (27)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US4786966A (en) * 1986-07-10 1988-11-22 Varo, Inc. Head mounted video display and remote camera system
US6456261B1 (en) * 1998-11-23 2002-09-24 Evan Y. W. Zhang Head/helmet mounted passive and active infrared imaging system with/without parallax
US6476391B1 (en) 1998-11-23 2002-11-05 Evan Y. W. Zhang Infrared imaging system for advanced rescue vision system
JP2003535226A (ja) * 1999-12-09 2003-11-25 アクティブ・フォトニクス・アーゲー・ビズアリジールングス−ウント・コムニカツィオンスジュステーメ カメラにより記録されているイメージの表示のための装置
US20020196202A1 (en) * 2000-08-09 2002-12-26 Bastian Mark Stanley Method for displaying emergency first responder command, control, and safety information using augmented reality
US7038639B1 (en) 2003-06-09 2006-05-02 The United States Of America As Represented By The Secretary Of The Navy Display system for full face masks
SE524890C2 (sv) * 2003-08-19 2004-10-19 Saab Ab Andningsmask med presentationsanordning
US7460304B1 (en) * 2007-03-12 2008-12-02 Epstein Jay F Thermal vision mask
JP2009065593A (ja) 2007-09-10 2009-03-26 Withus Co Ltd カスケード型発振除去中継器
US20130088413A1 (en) * 2011-10-05 2013-04-11 Google Inc. Method to Autofocus on Near-Eye Display
US9744384B2 (en) * 2011-11-05 2017-08-29 Rivada Research, Llc Enhanced display for breathing apparatus masks
US9047873B2 (en) * 2012-12-21 2015-06-02 Draeger Safety, Inc. Self contained breathing and communication apparatus
US10042164B2 (en) * 2013-03-15 2018-08-07 Hudstar Systems, Inc. Self contained breathing apparatus (SCBA) electronics system
US9753285B2 (en) * 2013-03-29 2017-09-05 Sony Corporation Information processing device, notification state control method, and program
US11100327B2 (en) * 2014-05-15 2021-08-24 Fenwal, Inc. Recording a state of a medical device
US9508248B2 (en) * 2014-12-12 2016-11-29 Motorola Solutions, Inc. Method and system for information management for an incident response
US10921592B2 (en) * 2015-10-07 2021-02-16 Smoke-I Corporation Self-contained breathing apparatus face piece lens vision system
KR102478783B1 (ko) * 2015-12-02 2022-12-20 삼성전자주식회사 탐색 정보 제공 방법 및 장치
US10426980B2 (en) * 2017-02-27 2019-10-01 Daniel D. Dorneanu Smart spray foam respirator mask
US10902536B2 (en) * 2017-06-14 2021-01-26 International Business Machines Corporation Cognitive emergency task coordination
JP2019036888A (ja) 2017-08-18 2019-03-07 セイコーエプソン株式会社 頭部装着型画像表示装置及び面体ユニット
DK180186B1 (en) * 2018-05-08 2020-07-23 Maersk Drilling As Augmented reality apparatus
US10634914B1 (en) * 2018-10-22 2020-04-28 Dell Products L.P. Information handling system head-mounted display critical situation context through tactile modalities
US10417497B1 (en) * 2018-11-09 2019-09-17 Qwake Technologies Cognitive load reducing platform for first responders
US10896492B2 (en) * 2018-11-09 2021-01-19 Qwake Technologies, Llc Cognitive load reducing platform having image edge enhancement
US11346938B2 (en) * 2019-03-15 2022-05-31 Msa Technology, Llc Safety device for providing output to an individual associated with a hazardous environment
US11204649B2 (en) * 2020-01-30 2021-12-21 SA Photonics, Inc. Head-mounted display with user-operated control

Patent Citations (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH0640917U (ja) * 1992-10-30 1994-05-31 株式会社島津製作所 ヘッドマウントディスプレイ
JPH0854282A (ja) * 1994-07-07 1996-02-27 Gec Marconi Ltd 頭部装着ディスプレイ装置
JP2001021366A (ja) * 1999-07-05 2001-01-26 Nippon Telegr & Teleph Corp <Ntt> 移動体追尾装置
JP2005067367A (ja) * 2003-08-22 2005-03-17 Semiconductor Energy Lab Co Ltd 発光装置および運転支援システムおよびヘルメット
JP2008065593A (ja) * 2006-09-07 2008-03-21 Kawasaki Heavy Ind Ltd 情報開示装置
JP2013210319A (ja) * 2012-03-30 2013-10-10 Honda Motor Co Ltd 集配支援システム
US9247779B1 (en) * 2012-11-08 2016-02-02 Peter Aloumanis Enhanced global positioning system (GPS) based functionality for helmets
JP2019502332A (ja) * 2015-10-07 2019-01-24 スコット テクノロジーズ インコーポレイテッドScott Technologies, Inc. マスク内フィードバックシステム
EP3434334A1 (en) * 2017-07-26 2019-01-30 Honeywell International Inc. Enhanced vision for firefighter using heads up display and gesture sensing

Also Published As

Publication number Publication date
JPWO2021152858A1 (ja) 2021-08-05
US20240045635A1 (en) 2024-02-08
US11842117B2 (en) 2023-12-12
US20230048748A1 (en) 2023-02-16

Similar Documents

Publication Publication Date Title
JP6929309B2 (ja) モニタリング、アラート生成、及び予測的安全イベント回避を統合した解析エンジンを有する個人用保護具システム
CN106471419B (zh) 管理信息显示
US10345103B2 (en) Cellular phone and personal protective equipment usage monitoring system
CN112119396A (zh) 用于安全事件检测和可视化的具有增强现实的个人防护设备系统
WO2014208575A1 (ja) 映像監視システム、映像処理装置、映像処理方法および映像処理プログラム
JP2019526187A (ja) 管制システムおよび方法
US10983589B2 (en) Systems and methods for collision avoidance in virtual environments
JPH0854282A (ja) 頭部装着ディスプレイ装置
US20240045635A1 (en) Information display system and information display method
US20180248819A1 (en) Information processing system and information processing method
KR20160070503A (ko) 무선 통신을 이용한 협업 소방관의 위치 제공 방법 및 그 시스템과, 협업 소방관의 위치 표시 방법 및 이를 수행하기 위한 소방 헬멧
KR101513896B1 (ko) 위급 상황 판별 장치 및 그 관리 시스템
GB2535728A (en) Information system and method
JP7367780B2 (ja) 注意喚起システム及び注意喚起方法
JP2021100231A (ja) 眼鏡内のaiアシスタント、画像認識機能の記憶補助装置。
WO2021192099A1 (ja) 映像表示システム及び映像表示方法
KR102482725B1 (ko) 객체 감시장치
WO2021149209A1 (ja) データ収集装置、データ収集システム、データ収集方法及びコンピュータ読取可能な記録媒体
JP7158909B2 (ja) 表示システム、ウェアラブル装置及び監視制御装置
JP7057716B2 (ja) 警報システム、情報処理装置、情報処理方法、および、情報処理プログラム
WO2016135447A1 (en) Information system and method
EP3062220A1 (en) Information system and method
WO2024003789A1 (en) Prioritization system for alarms and notifications in first responder equipment
TR201706630A2 (tr) İşi̇tme engelli̇ler i̇çi̇n ortam sesi̇ i̇zleme ve görselleşti̇rme si̇stemi̇
KR102667514B1 (ko) 열화상 연기투시랜턴

Legal Events

Date Code Title Description
121 Ep: the epo has been informed by wipo that ep was designated in this application

Ref document number: 20917107

Country of ref document: EP

Kind code of ref document: A1

ENP Entry into the national phase

Ref document number: 2021574428

Country of ref document: JP

Kind code of ref document: A

NENP Non-entry into the national phase

Ref country code: DE

122 Ep: pct application non-entry in european phase

Ref document number: 20917107

Country of ref document: EP

Kind code of ref document: A1