WO2016129085A1 - 空気調和システム - Google Patents

空気調和システム Download PDF

Info

Publication number
WO2016129085A1
WO2016129085A1 PCT/JP2015/053854 JP2015053854W WO2016129085A1 WO 2016129085 A1 WO2016129085 A1 WO 2016129085A1 JP 2015053854 W JP2015053854 W JP 2015053854W WO 2016129085 A1 WO2016129085 A1 WO 2016129085A1
Authority
WO
WIPO (PCT)
Prior art keywords
air conditioner
communication terminal
information
unit
image
Prior art date
Application number
PCT/JP2015/053854
Other languages
English (en)
French (fr)
Inventor
泰公 渡邉
Original Assignee
三菱電機株式会社
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 三菱電機株式会社 filed Critical 三菱電機株式会社
Priority to JP2016574582A priority Critical patent/JP6239164B2/ja
Priority to PCT/JP2015/053854 priority patent/WO2016129085A1/ja
Publication of WO2016129085A1 publication Critical patent/WO2016129085A1/ja

Links

Images

Classifications

    • F—MECHANICAL ENGINEERING; LIGHTING; HEATING; WEAPONS; BLASTING
    • F24—HEATING; RANGES; VENTILATING
    • F24F—AIR-CONDITIONING; AIR-HUMIDIFICATION; VENTILATION; USE OF AIR CURRENTS FOR SCREENING
    • F24F11/00—Control or safety arrangements
    • F24F11/89—Arrangement or mounting of control or safety devices

Definitions

  • the present invention relates to an air conditioning system that performs air conditioning.
  • Patent Document 1 A conventional invention for air conditioning is described in Patent Document 1.
  • the air conditioner is superimposed on the image captured by the camera installed on the upper surface of the wall in the space and displayed on the monitor of the mobile communication terminal. It is possible to check the space around the air conditioner and the operating condition of the air conditioner at the same time. According to the present invention, it is possible to reduce the load on the initial setting work of the air conditioner and the load on the maintenance work.
  • the camera is provided on the upper part of the wall surface.
  • the video displayed on the monitor is very different from the viewpoint of the worker who performs the initial setting work or the maintenance work, and it is difficult for the worker to intuitively grasp the arrangement and operation state of the air conditioner. there were.
  • the image displayed on the monitor is for confirming the installation position of the air conditioner and the operating condition of the air conditioner.
  • the monitor for confirming the installation position and the operation state is different from the device for changing the operation state of the air conditioner, and it becomes a work load when they are installed at remote locations.
  • This invention is made in view of the above, Comprising: Obtaining the air conditioning system which can improve workability
  • the air conditioning system includes an air conditioner and a portable communication terminal.
  • the air conditioner transmits operating state information indicating the operating state of the own device and indoor environment information indicating the indoor environment of the target space for air conditioning by the own device to the mobile communication terminal.
  • An image representing the operating condition of the air conditioner and the indoor environment of the air conditioning target space is superimposed on an image obtained by capturing a range including the air conditioner and at least a part of the air conditioning target space, and is displayed on the display unit. .
  • the air conditioning system according to the present invention has an effect of improving workability during initial setting work and maintenance work.
  • FIG. 3 illustrates an example of a mobile communication terminal according to the first embodiment.
  • FIG. 3 illustrates an example of a mobile communication terminal according to the first embodiment.
  • FIG. 6 is a diagram illustrating an example of an image captured by the camera of the mobile communication terminal according to the first embodiment.
  • the figure which shows an example of the content displayed on the display part of the portable communication terminal of Embodiment 1 The figure which shows an example of the relative position information of Embodiment 1
  • a flowchart showing an operation procedure of the relative position calculation unit according to the first embodiment A flowchart showing an operation procedure of the relative position calculation unit according to the first embodiment.
  • FIG. The figure which shows the structural example of the air conditioner and portable communication terminal of Embodiment 2.
  • FIG. 1 is a diagram illustrating an example of a room to which the air conditioning system according to the first embodiment of the present invention is applied.
  • the air conditioning system includes an air conditioner 1 and a portable communication terminal 2 that can display the operating state and indoor environment of the air conditioner 1.
  • the air conditioner 1 is installed on the wall surface, but the installation location is not limited to the wall surface. It may be installed on the ceiling or floor.
  • the air conditioner 1 includes a sensor unit 11. This sensor unit 11 can detect the temperature of at least the wall surface 5, the floor surface 6, the ceiling, people, and objects in the room, which is the air conditioning target space.
  • the sensor unit 11 includes a plurality of infrared sensors arranged vertically.
  • the detection range of the sensor unit 11 is not particularly defined. In the present embodiment, it is assumed that the sensor unit 11 performs reciprocating rotational movement in the horizontal direction and scans up, down, left, and right in the front direction of the air conditioner 1. At this time, the sensor unit 11 detects the temperature a plurality of times during the rotational movement.
  • FIG. 2 shows an example of a detectable range of the sensor unit 11 as an overhead view of the room.
  • the fan-shaped region shown on the floor surface 6 is a detection region 61 of the sensor unit 11.
  • the detection area 61 can be divided into a plurality of small areas 62.
  • the detection area 61 is composed of a plurality of lattice-shaped small areas 62.
  • the sensor unit 11 can detect the temperature in each of the plurality of small regions 62. You may make it detect the person who exists in the detection area
  • FIG. Although the detection area 61 of the floor surface 6 is shown in FIG. 2, the sensor unit 11 can detect the temperature of the wall surface 5 and the ceiling in the same manner.
  • the air conditioner 1 includes a humidity sensor, a room temperature sensor, and the like in addition to the sensor unit 11.
  • the humidity sensor 12 and the room temperature sensor 13 are provided.
  • the air conditioner 1 is assumed to have an AR (Augmented Reality) marker 14 attached to the surface of the housing.
  • the AR marker 14 may be printed on the surface of the housing. The AR marker 14 is used when the mobile communication terminal 2 calculates a relative positional relationship with the air conditioner 1.
  • FIG. 3 is a diagram illustrating an example of the mobile communication terminal 2.
  • the mobile communication terminal 2 includes a display unit 21.
  • the surface on which the display unit 21 exists is the front of the mobile communication terminal 2.
  • FIG. 4 is a diagram illustrating an example of the back surface of the mobile communication terminal 2.
  • the mobile communication terminal 2 includes a camera 22 on the back surface.
  • the mobile communication terminal 2 can dynamically display an image captured by the camera 22 on the display unit 21.
  • FIG. 5 is a diagram illustrating an example of an image captured by the camera 22 of the mobile communication terminal 2.
  • the mobile communication terminal 2 includes an acceleration sensor that is not shown in FIGS. 3 and 4, and can calculate the amount of change in the absolute position of the mobile communication terminal 2 from the output value of the acceleration sensor.
  • the mobile communication terminal 2 includes a geomagnetic sensor and can calculate the amount of change in the direction of the mobile communication terminal 2.
  • the air conditioner 1 is assumed to have a wireless communication function for communicating with external devices.
  • the air conditioner 1 detects detection information (detection information of the humidity sensor 12) indicating the detection result by the humidity sensor 12 and detection information (room temperature) indicating the detection result by the room temperature sensor 13 with respect to the mobile communication terminal 2.
  • Detection information of the sensor 13), detection information indicating the detection result by the sensor unit 11 (detection information of the sensor unit 11), and operation state information indicating the operation state of the air conditioner 1 are transmitted by the wireless communication function.
  • the driving state information is information including airflow direction information, wind speed information, and the like.
  • the detection information of the humidity sensor 12, the detection information of the room temperature sensor 13, and the detection information of the sensor unit 11 are collectively described as room environment information.
  • the indoor environment information is information indicating the indoor environment of the room where the air conditioner 1 is installed.
  • FIG. 6 is a diagram illustrating an example of contents displayed on the display unit 21 of the mobile communication terminal 2. More specifically, the content displayed on the display unit 21 by the mobile communication terminal 2 based on various information acquired from the air conditioner 1 is shown. In FIG. 6, an example in which an image showing the contents of various information acquired from the air conditioner 1 by the mobile communication terminal 2 is superimposed on an image captured by the camera 22 and displayed on the display unit 21 is shown.
  • the mobile communication terminal 2 displays information on the display unit 21 as an image using the information acquired from the air conditioner 1 as follows. That is, using the detection information of the humidity sensor 12 and the detection information of the room temperature sensor 13, an image showing the current room temperature and humidity in the room is generated and displayed as the room temperature & humidity display 54 of FIG.
  • the sensor unit 11 can acquire temperature information for each small region 62 of the floor surface 6. Therefore, the mobile communication terminal 2 displays the floor surface temperature displays 51 and 52 in FIG. 6 on the display unit 21 using the temperature information for each small region 62.
  • the floor surface temperature displays 51 and 52 may represent the temperature numerically based on the detection information of the sensor unit 11 or may be represented by a character expression such as “high” or “low”. Further, a difference in temperature may be expressed by a difference in display contents such as a color displayed on the display unit 21 and a display size.
  • the mobile communication terminal 2 displays the wind direction & wind speed display 53 of FIG. 6 on the display unit 21 using the air flow direction information and the wind speed information acquired from the air conditioner 1.
  • the wind direction & wind speed display 53 represents the airflow discharged from the air conditioner 1 as an image.
  • the wind direction is expressed as the direction of the arrow of the wind direction & wind speed display 53
  • the wind speed is expressed by the size of the arrow and the description of numerical values.
  • the operating state information displayed on the display unit 21 is not limited to the above-described information, and for example, the power consumption of the air conditioner 1, the continuous operation time, the time until filter cleaning is required, and the like may be displayed.
  • the above-mentioned room temperature & humidity display 54, floor surface temperature display 51 and 52, and wind direction & wind speed display 53 calculate the display location and display shape to be superimposed on the image captured by the camera 22.
  • the mobile communication terminal 2 obtains the relative position using the AR marker 14 shown in FIGS.
  • the AR marker 14 is a pattern affixed or printed on the housing surface of the air conditioner 1.
  • the mobile communication terminal 2 images the AR marker 14 with the camera 22 and recognizes the feature, size, shape, and tilt of the pattern of the AR marker 14 as an image, so that the mobile communication terminal 2 and the air conditioner 1 Information indicating the relative positional relationship with the above is calculated.
  • information calculated based on an image obtained by capturing the AR marker 14 is handled as relative position information having the configuration shown in FIG.
  • the relative position information includes at least a relative distance, a pitch angle, a roll angle, and a yaw angle.
  • the relative distance is a value representing an interval between the air conditioner 1 and the mobile communication terminal 2.
  • the pitch angle, the roll angle, and the yaw angle represent the rotation angles around the respective axes of the three-dimensional orthogonal coordinates with the mobile communication terminal 2 shown in FIG. 3 as the origin.
  • the pitch angle, the roll angle, and the yaw angle are values representing how much the air conditioner 1 is tilted in the captured image of the camera 22.
  • the rotation angle around the x axis is the pitch angle
  • the rotation angle around the y axis is the roll angle
  • the rotation angle around the z axis is the yaw angle.
  • the derivation of the relative positional relationship is performed at least once when the mobile communication terminal 2 starts displaying the contents shown in FIG.
  • the amount of change in the absolute position of the mobile communication terminal 2 is grasped at any time by using an acceleration sensor and a geomagnetic sensor mounted on the mobile communication terminal 2, and the determined value of the relative positional relationship is stored in the mobile communication.
  • the change amount of the absolute position of the terminal 2 is a correction value, the relative positional relationship between the air conditioner 1 and the portable communication terminal 2 is updated to the latest state.
  • the AR marker 14 is used to calculate the relative positional relationship between the air conditioner 1 and the mobile communication terminal 2, but the method for obtaining the relative positional relationship is not limited to this.
  • the shape of the air conditioner 1 is captured by the camera 22 and the relative positional relationship between the air conditioner 1 and the portable communication terminal 2 is calculated from the feature amount such as the size and inclination. It is done.
  • the position information that can be acquired using GPS (Global Positioning System) or the like is used to acquire the position information of the air conditioner 1 and the portable communication terminal 2, and the relative position relationship is obtained from the position information. It may be.
  • FIG. 8 is a diagram illustrating a configuration example of the air conditioner 1 and the mobile communication terminal 2 constituting the air conditioning system 100.
  • the air conditioner 1 controls the sensor unit 11, the humidity sensor 12, and the room temperature sensor 13, and sensor information that collects sensor values that are detection values by the sensors by controlling the sensor unit 11, the humidity sensor 12, and the room temperature sensor 13.
  • the communication unit 16 that transmits and receives data between the collection unit 15 and other devices such as the mobile communication terminal 2 and the operation control of the air conditioner 1, specifically, air such as cooling, heating, dehumidification, and air blowing
  • an operation control unit 17 that adjusts a harmony function, a wind direction, a wind speed, and the like.
  • the mobile communication terminal 2 acquires sensor values from the display unit 21 and camera 22 described above, the communication unit 23 that transmits and receives data to and from other devices such as the air conditioner 1, and the acceleration sensor 24A and the geomagnetic sensor 24B.
  • An image processing unit 27 that generates an image to be displayed on the display unit 21 and a display unit 21 that displays an image generated by the image processing unit 27 are provided.
  • the sensor information processing unit 24 estimates the amount of change in the absolute position of the mobile communication terminal 2 based on the sensor values acquired from the acceleration sensor 24A and the geomagnetic sensor 24B. For example, if the mobile communication terminal 2 is stationary in the room, the acceleration sensor 24A of the mobile communication terminal 2 detects only the gravitational acceleration of the earth. When the acceleration sensor 24A detects an acceleration other than gravitational acceleration, the sensor information processing unit 24 estimates that the absolute position of the mobile communication terminal 2 has changed.
  • the imaging unit 25 receives and holds image data acquired by the imaging element of the camera 22.
  • the relative position calculation unit 26 analyzes the image captured by the camera 22 and calculates relative position information indicating the relative position between the air conditioner 1 and the own apparatus (mobile communication terminal 2).
  • the relative position calculation unit 26 calculates the moving speed and the moving amount of the mobile communication terminal 2 from the relationship between the acceleration detected by the acceleration sensor 24A and the time when detecting that the absolute position of the mobile communication terminal 2 has changed. To do. Furthermore, the relative position calculation unit 26 reflects the calculated movement amount in the relative position relationship with the air conditioner 1 and estimates the relative position relationship after the absolute position of the mobile communication terminal 2 has changed.
  • the image processing unit 27 performs a process of superimposing the operation state information and the indoor environment information of the air conditioner 1 on the image captured by the camera 22 to generate an image to be displayed on the display unit 21. At this time, the operating state information and the indoor environment information are superimposed on the image by performing image processing based on the relative positional relationship between the air conditioner 1 and the portable communication terminal 2. Information on the relative positions of the air conditioner 1 and the portable communication terminal 2 is acquired from the relative position calculation unit 26. By considering the relative position of the air conditioner 1 and the portable communication terminal 2, the operating state information of the air conditioner 1, for example, the display position of the wind direction & wind speed display 53 is arranged in the vicinity of the display position of the air conditioner 1. Is possible.
  • FIGS. FIG. 9 and FIG. 10 are flowcharts illustrating the operation procedure of the relative position calculation unit 26 of the mobile communication terminal 2 according to the first embodiment.
  • FIG. 11 is a flowchart of an operation procedure of the image processing unit 27 of the mobile communication terminal 2 according to the first embodiment.
  • FIG. 12 is a flowchart of an operation procedure of the communication unit 16 of the air conditioner 1 according to the first embodiment.
  • the relative position calculation unit 26 of the mobile communication terminal 2 obtains relative position information indicating the relative positions of the air conditioner 1 and the mobile communication terminal 2
  • the camera 22 images the AR marker 14 of the air conditioner 1.
  • the relative position calculation unit 26 obtains initial values of the relative position information of the air conditioner 1 and the mobile communication terminal 2.
  • the relative position calculator 26 updates the relative position information by correcting the relative position information based on the detected value by the acceleration sensor 24A and the detected value by the geomagnetic sensor 24B.
  • the AR marker 14 is imaged, for example, by performing an operation determined by the operator.
  • FIG. 9 shows a processing flow when the relative position calculation unit 26 obtains initial values of the relative position information of the air conditioner 1 and the portable communication terminal 2 using the AR marker 14.
  • the relative position calculation unit 26 first obtains image data of an image captured by the camera 22 from the imaging unit 25 (step S11). Next, the relative position calculation unit 26 analyzes the acquired image data to check whether or not there is an AR marker in the image (step S12). If there is no AR marker (step S12: No), the process ends. On the other hand, if there is an AR marker (step S12: Yes), the relative position information of the air conditioner 1 and the portable communication terminal 2 is estimated based on the size, shape and inclination of the AR marker in the image.
  • An initial value is generated (step S13). That is, the relative position of the mobile communication terminal 2 is estimated based on the air conditioner 1 to which the AR marker 14 is attached by obtaining the relative position with the AR marker in the image.
  • a method for analyzing the AR marker image and estimating the relative position of the AR marker is not particularly defined. Any existing technique may be used for estimation.
  • the relative position calculation unit 26 of the mobile communication terminal 2 obtains the initial value of the relative information between the air conditioner 1 and the mobile communication terminal 2 based on the image obtained by the camera 22 capturing the AR marker 14, and then illustrated in FIG. 10. Correct the relative position information in the procedure.
  • the relative position calculation unit 26 periodically repeats the procedure shown in FIG.
  • the relative position calculation unit 26 first acquires sensor information that is the detection value of the acceleration sensor 24A and the detection value of the geomagnetic sensor 24B from the sensor information processing unit 24 (step S21).
  • the relative position calculator 26 confirms the sensor information and confirms whether or not the sensor information has changed (step S22). Specifically, the detection value of the acceleration sensor 24A acquired last time and the detection value of the acceleration sensor 24A acquired this time are compared, and the detection value of the geomagnetic sensor 24B acquired last time and the detection value of the geomagnetic sensor 24B acquired this time are compared.
  • step S22: No the relative position calculation unit 26 ends the process.
  • the relative position calculation unit 26 has changed at least one of the absolute position and the posture of the mobile communication terminal 2. Therefore, based on the sensor information, that is, the detection value of the acceleration sensor 24A and the detection value of the geomagnetic sensor 24B, the position change amount and the posture change amount of the mobile communication terminal 2 are calculated. The amount of change in position is calculated based on the detection value of the acceleration sensor 24A, and the amount of change in posture is calculated based on the detection value of the geomagnetic sensor 24B (step S23). Next, the relative position calculation unit 26 corrects the relative position information by using the position change amount and the posture change amount obtained in step S22 (step S24).
  • the image processing unit 27 creates an image to be output to the display unit 21 for each update cycle. Specifically, first, the image processing unit 27 acquires the relative position information of the air conditioner 1 and the mobile communication terminal 2 from the relative position calculation unit 26 (step S31). Next, the image processing unit 27 acquires operating state information and indoor environment information of the air conditioner 1 from the air conditioner 1 (step S32).
  • the timing at which the image processing unit 27 acquires the driving state information and the indoor environment information is not defined. It is good also as a system which the air conditioner 1 transmits to the portable communication terminal 2 periodically, and the system which the air conditioner 1 transmits to the portable communication terminal 2 when the driving
  • a transmission request may be made from the image processing unit 27 of the mobile communication terminal 2 to the air conditioner 1, and the air conditioner 1 that has received this request may transmit operating state information and room environment information.
  • the image processing unit 27 uses the relative position information acquired in step S31 to calculate display positions and shapes of various images indicating the driving state and the indoor environment output to the display unit 21 (step S33). .
  • the image processing unit 27 obtains the sizes of various images indicating the driving state and the indoor environment based on the value of the relative distance included in the relative position information. Moreover, based on the pitch angle, the roll angle, and the yaw angle included in the relative position information, display locations and display shapes of various images indicating the driving state and the indoor environment are obtained.
  • the image processing unit 27 performs image composition processing for superimposing various images indicating the driving state and the indoor environment calculated in step S33 on the image captured by the camera 22, and creates an image to be displayed on the display unit 21. (Step S34).
  • the image processing unit 27 executes the above steps S31 to S34 for each update cycle. When the image processing unit 27 finishes creating the image, the image processing unit 27 outputs the created image to the display unit 21, and the display unit 21 displays the image created by the image processing unit 27.
  • the communication unit 16 first acquires room environment information from the sensor information collection unit 15 (step S41). Next, the communication part 16 acquires the operation state information of the air conditioner 1 from the operation control part 17 (step S42). The communication unit 16 transmits the indoor environment information and the driving state information to the mobile communication terminal 2 (step S43). As described above, the timing for transmitting the information may be transmitted at a constant cycle, or may be transmitted when at least one of the indoor environment information and the driving state information changes. You may transmit when there exists a request
  • the air conditioner 1 transmits the operating state information and the indoor environment information to the mobile communication terminal 2, and the mobile communication terminal 2 receives the air conditioner 1. Based on the information, an image indicating the content of the received information is generated, and the generated image is superimposed on an image captured by the camera 22 and displayed on the display unit 21.
  • the operator 3 who has the mobile communication terminal 2 can set the operating condition of the air conditioner 1 and the indoor environment information, specifically, the air conditioner during installation and maintenance of the air conditioner 1. It is possible to easily know invisible information such as the wind direction, wind speed, temperature, and floor temperature of the discharged airflow.
  • Embodiment 2 The air conditioning system of Embodiment 2 is demonstrated.
  • the mobile communication terminal 2 superimposes an image indicating the operating state of the air conditioner 1 and the indoor environment information on the image captured by the camera and displays the image on the display unit.
  • the operating state of the air conditioner 1 and the indoor environment can be easily grasped.
  • the air conditioning system of the second embodiment is obtained by further adding the following configuration to the air conditioning system of the first embodiment.
  • the air conditioning system 100a of the present embodiment is configured by the air conditioner 1 and the portable communication terminal 2a described in the first embodiment. It is assumed that the mobile communication terminal 2a can transmit an operation state change command such as a wind direction, a wind speed, a target set temperature, and a target set humidity to the air conditioner 1.
  • the air conditioner 1 that has received the operation state change command from the mobile communication terminal 2a reflects the received operation state change command in the control of the operation state.
  • FIG. 13 is a diagram showing an outline of the air conditioning system 100a of the second embodiment.
  • the same reference numerals are given to the parts common to FIG. 6 used in the description of the first embodiment.
  • the portions denoted by the same reference numerals as those in FIG. 6 are the same as those in the first embodiment, and thus the description thereof is omitted.
  • the display unit 21 of the mobile communication terminal 2a is configured with a touch panel that can sense that the display surface has been touched, and the mobile communication terminal 2a When the surface of 21 is touched, it can be detected.
  • the position where the floor temperature display 51 is displayed is touched with two fingers and moved so as to reduce the interval between the two fingers.
  • a state change command is input to the mobile communication terminal 2a.
  • the position where the floor surface temperature display 51 is displayed is touched with two fingers so as to widen the interval between the two fingers.
  • the operation state change command is input to the mobile communication terminal 2a.
  • the air conditioner 1 that has received the information on the operation state change command reflects the content indicated by the received information in the control of the operation state. That is, the air conditioner 1 adjusts the temperature, the wind direction, and the wind speed of the discharged air flow so as to change the temperature of the portion corresponding to the floor surface temperature display 51. It is assumed that the operation state change command includes position information of a location to be changed.
  • the air conditioner 1 changes the operation state in accordance with the operation state change command, the air conditioner 1 transmits the changed operation state information to the mobile communication terminal 2a.
  • the mobile communication terminal 2 a that has received the driving state information updates the display of the driving state displayed on the display unit 21.
  • FIG. 14 is a diagram illustrating a configuration example of the air conditioner 1 and the portable communication terminal 2a constituting the air conditioning system 100a.
  • the mobile communication terminal 2a is obtained by adding an operation unit 31 and an operation management unit 32 to the mobile communication terminal 2 of the first embodiment shown in FIG. Since parts other than the operation unit 31 and the operation management unit 32 are the same as those in the first embodiment, description thereof is omitted.
  • the operation unit 31 is a functional module that controls the user interface of the mobile communication terminal 2a.
  • the operation unit 31 detects an operation performed on the mobile communication terminal 2a by the operator touching the display unit 21, and generates operation information indicating the content of the detected operation.
  • the operation unit 31 passes the generated operation information to the image processing unit 27 via the operation management unit 32.
  • the operation management unit 32 is a functional module that manages the operation state of the air conditioner 1.
  • the operation management unit 32 acquires operation state information of the air conditioner 1 through the communication unit 23.
  • the operation management unit 32 receives the operation information from the operation unit 31, the operation management unit 32 passes the operation information to the image processing unit 27.
  • the operation management unit 32 confirms the operation information to be passed to the image processing unit 27, and when the operation information indicates an operation to change the driving state or the indoor environment, the operation management unit 32 passes the communication unit 23 to the air conditioner 1. An operating state change command is transmitted, and an instruction to change the operating state or the indoor environment is given.
  • FIG. 15 is a flowchart of an operation procedure of the image processing unit 27 of the mobile communication terminal 2a according to the second embodiment.
  • FIG. 16 is a flowchart illustrating an operation procedure when the mobile communication terminal 2 a according to the second embodiment transmits an operation state change command to the air conditioner 1.
  • the operation of generating a moving image to be displayed on the display unit 21 by the image processing unit 27 of the mobile communication terminal 2a will be described with reference to FIG.
  • the operation of generating a moving image to be displayed on the display unit 21 by the image processing unit 27 of the present embodiment is the same as the operation described in the first embodiment, that is, the operation shown in FIG. It is a thing. Specifically, the process of step S51 is executed between the process of step S32 and the process of step S33. Detailed description of portions common to the first embodiment is omitted.
  • the image processing unit 27 acquires relative position information from the relative position calculation unit 26 (step S31), and further acquires operating state information and room environment information from the air conditioner 1 (step S32). Next, the image processing unit 27 acquires operation information indicating the content of the operation performed by the worker from the operation unit 31 (step S51). In addition, when the operation by the operator is not performed, the acquired operation information is content indicating that the operator's operation is not performed.
  • the image processing unit 27 executes step S33. That is, as in the first embodiment, the image processing unit 27 calculates the display location and shape of various images indicating the driving state and indoor environment output to the display unit 21 based on the relative position information (step S33). At this time, when the operation information acquired in step S51 is a content indicating a change command of the driving state or the indoor environment, the image processing unit 27 reflects the content of the change command in the calculation of the display location and the display shape. In other words, the contents of the change command are reflected in the driving state information and the indoor environment information to update the information, and various images indicating the driving state and the indoor environment are displayed based on the updated driving state information and the indoor environment information. Calculate location and display shape. Next, the image processing unit 27 performs an image composition process for superimposing various images indicating the driving state and the indoor environment calculated in step S33 on the image captured by the camera 22 (step S34).
  • step S51 is executed after step S32, step S51 may be executed before or after step S31.
  • the mobile communication terminal 2a When the mobile communication terminal 2a notifies the air conditioner 1 of the change in the operating state or the indoor environment, the notification is made according to the procedure shown in FIG.
  • the driving management unit 32 of the mobile communication terminal 2a When the operation information received from the operation unit 31 indicates an operation for changing the driving state or the indoor environment, the driving management unit 32 of the mobile communication terminal 2a outputs a command for changing the driving state or the indoor environment to the communication unit 23. .
  • the communication unit 23 that has acquired the operation state or indoor environment change command from the operation management unit 32 transmits the operation state or indoor environment change command to the air conditioner 1 (steps S61 and S62).
  • the communication unit 16 receives the change command transmitted in step S62, and notifies the operation control unit 17 of the received change command (step S63).
  • the operation control unit 17 changes the operation state of the air conditioner 1 according to the content of the received change command (step S64).
  • the air conditioner 1 transmits the operating state information and the indoor environment information to the mobile communication terminal 2a, and the mobile communication terminal 2a receives the air conditioner 1 from the air conditioner 1. Based on the information, an image indicating the content of the received information is generated, and the generated image is superimposed on an image captured by the camera 22 and displayed on the display unit 21 disposed on the opposite surface of the camera 22.
  • the mobile communication terminal 2a detects the operation of the operator via the display unit 21, reflects the detected operation content on the display content on the display unit 21, and sends a change command corresponding to the operation content to the air conditioner. 1 is transmitted.
  • the operator can input the operation state change command from the same display unit 21 while confirming the operation state of the air conditioner 1 displayed on the display unit 21 of the mobile communication terminal 2a.
  • the actual operating state of the air conditioner 1 is confirmed by looking at the display on the remote control device, or the housing state of the air conditioner 1 is directly checked.
  • the operating state of the air conditioner 1 can be confirmed in a form that can be easily grasped intuitively by display on the display unit 21 of the mobile communication terminal 2a.
  • the processor 201 the RAM ( It can be realized by a memory 202 configured by Random Access Memory (ROM), ROM (Read Only Memory), and the like, a communication device 203, and a display 204.
  • the processor 201, the memory 202, the communication device 203, and the display 204 are connected to the bus 200 and are configured to be able to exchange data, control information, and the like via the bus 200.
  • the sensor information collection unit 15 and the operation control unit 17 of the air conditioner 1 are realized by storing a program for the air conditioner in the memory 202 and executing the program by the processor 201.
  • the sensor information processing unit 24, the imaging unit 25, the image processing unit 27, the operation unit 31, and the operation management unit 32 of the mobile communication terminals 2 and 2a store a program for the mobile communication terminal in the memory 202. This is realized by the processor 201 executing the program.
  • the communication unit 16 of the air conditioner 1 and the communication unit 23 of the mobile communication terminals 2 and 2a are realized by the communication device 203.
  • the display unit 21 of the mobile communication terminals 2 and 2a is realized by the display 204.
  • the configuration described in the above embodiment shows an example of the contents of the present invention, and can be combined with another known technique, and can be combined with other configurations without departing from the gist of the present invention. It is also possible to omit or change the part.
  • SYMBOLS 1 Air conditioner 2, 2a Mobile communication terminal, 3 worker, 4 person, 5 wall surface, 6 floor surface, 11 sensor part, 12 humidity sensor, 13 room temperature sensor, 14 AR marker, 15 sensor information collection part, 16, 23 communication unit, 17 operation control unit, 21 display unit, 22 camera, 24 sensor information processing unit, 24A acceleration sensor, 24B geomagnetic sensor, 25 imaging unit, 26 relative position calculation unit, 27 image processing unit, 31 operation unit, 32 Operation management unit, 100, 100a air conditioning system, 200 bus, 201 processor, 202 memory, 203 communication device, 204 display.

Abstract

　空気調和システム１００は、空気調和機１と、携帯通信端末２と、を備える。空気調和機１の通信部１６は、自装置の運転状態を示す運転状態情報と、自装置による空気調和の対象空間の室内環境を示す室内環境情報とを携帯通信端末２へ送信し、携帯通信端末２の画像処理部２７は、カメラ２２が空気調和機１と空気調和の対象空間の少なくとも一部とを含む範囲を撮像した画像に対し、空気調和機１の運転状態および空気調和の対象空間の室内環境を表す画像を重畳させ、表示部２１に表示させる。

Description

空気調和システム
　本発明は、空気調和を行う空気調和システムに関する。
　空気調和を行う従来の発明が特許文献１に記載されている。特許文献１に記載された発明では、空間内の壁面上部に据え付けられたカメラが捉えた映像に対し空気調和機の動作状態を重畳し、携帯通信端末のモニタに表示させることにより、空気調和機の周囲の空間と空気調和機の動作状態とを同時に確認できるようにしている。この発明によれば、空気調和機の初期設定作業にかかる負荷およびメンテナンス作業にかかる負荷を低減させることができる。
特開２０１２－４２１９７号公報
　上記従来の発明においては、カメラが壁面上部に設けられている。そのため、モニタに表示された映像は、初期設定作業またはメンテナンス作業を行う作業者の視点とは大きく異なり、作業者が空気調和機の配置および動作状態を直感的に把握するのが難しいという問題があった。また、モニタに表示された映像は空気調和機の据え付け位置および空気調和機の動作状態を確認するためのものであり、空気調和機の動作状態を変更する場合には、空気調和機に対応した遠隔操作機を使用して行う、または、空気調和機本体が備えている操作パネルなどから直接操作を行う必要があった。つまり、据え付け位置や動作状態の確認を行うモニタと、空気調和機の動作状態を変更する機器は別であり、それらが離れた場所に設置されている場合作業負荷となる。
　本発明は、上記に鑑みてなされたものであって、作業者が空気調和機の配置および動作状態を直感的に把握できるようにして作業性を向上させることが可能な空気調和システムを得ることを目的とする。
　上述した課題を解決し、目的を達成するために、空気調和システムは、空気調和機と、携帯通信端末と、を備える。空気調和機は、自装置の運転状態を示す運転状態情報と、自装置による空気調和の対象空間の室内環境を示す室内環境情報とを携帯通信端末へ送信し、携帯通信端末は、カメラが空気調和機と空気調和の対象空間の少なくとも一部とを含む範囲を撮像した画像に対し、空気調和機の運転状態および空気調和の対象空間の室内環境を表す画像を重畳させ、表示部に表示する。
　本発明に係る空気調和システムは、初期設定作業時およびメンテナンス作業時の作業性を向上させることができる、という効果を奏する。
実施の形態１にかかる空気調和システムを適用した部屋の一例を示す図 実施の形態１のセンサ部の検出可能な範囲の一例を示す図 実施の形態１の携帯通信端末の一例を示す図 実施の形態１の携帯通信端末の一例を示す図 実施の形態１の携帯通信端末のカメラで撮像した画像の一例を示す図 実施の形態１の携帯通信端末の表示部に表示する内容の一例を示す図 実施の形態１の相対位置情報の一例を示す図 実施の形態１の空気調和機および携帯通信端末の構成例を示す図 実施の形態１の相対位置演算部の動作手順を示すフローチャート 実施の形態１の相対位置演算部の動作手順を示すフローチャート 実施の形態１の画像処理部の動作手順を示すフローチャート 実施の形態１の空気調和機の通信部の動作手順を示すフローチャート 実施の形態２の空気調和システムの概要を示す図 実施の形態２の空気調和機および携帯通信端末の構成例を示す図 実施の形態２の画像処理部の動作手順を示すフローチャート 実施の形態２の携帯通信端末が空気調和機に対して運転状態変更指令を送信する場合の動作手順を示すフローチャート 実施の形態１，２の空気調和システムを実現するためのハードウェア構成例を示す図
　以下に、本発明の実施の形態に係る空気調和システムを図面に基づいて詳細に説明する。なお、この実施の形態によりこの発明が限定されるものではない。
実施の形態１．
　図１は、本発明の実施の形態１にかかる空気調和システムを適用した部屋の一例を示す図である。空気調和システムは、空気調和機１と、空気調和機１の動作状態および室内環境を表示可能な携帯通信端末２とを含んで構成されている。図１の例では、空気調和機１が壁面に設置されているが、設置場所を壁面に限定するものではない。天井または床面に設置しても構わない。空気調和機１はセンサ部１１を備えている。このセンサ部１１は、空気調和対象の空間である室内の少なくとも壁面５、床面６、天井、人、物の温度を検出可能とする。センサ部１１は例えば赤外線センサを垂直に複数個配置したものとする。センサ部１１の検出範囲については特に規定しない。本実施の形態においては、センサ部１１が、水平方向に往復回転運動して空気調和機１の正面方向の上下左右を走査するものとする。このときセンサ部１１は回転運動中に複数回温度の検出を行う。図２はセンサ部１１の検出可能な範囲の例を部屋の俯瞰図として示したものである。図２において、床面６上に示した扇状の領域はセンサ部１１の検知領域６１である。本実施の形態では、センサ部１１は垂直に配置された複数の赤外線センサで構成されるため、検知領域６１は複数の小領域６２に分けることができる。図２では、検知領域６１が格子状の複数の小領域６２により構成されていることを示している。センサ部１１は複数の小領域６２の各々における温度を検知可能である。検知領域６１内に存在する人の検知を行うようにしてもよい。図２では床面６の検知領域６１を示したが、センサ部１１は壁面５や天井も同様にして温度検知可能である。
　空気調和機１は、センサ部１１以外に、湿度センサ、室温センサなどを備えるのが望ましい。本実施の形態では、湿度センサ１２および室温センサ１３を備えるものとする。また、空気調和機１は、筺体表面にＡＲ（Augmented　Reality）マーカー１４が貼付されているものとする。なお、ＡＲマーカー１４は筺体表面に印刷されていてもよい。ＡＲマーカー１４は携帯通信端末２が空気調和機１との相対位置関係を算出する際に利用される。
　図１に示した部屋において、作業者３は携帯通信端末２を持ち、空気調和機１の近傍にいるものとする。携帯通信端末２について図３および図４を用いて説明する。図３は、携帯通信端末２の一例を示す図である。図示したように、携帯通信端末２は表示部２１を備えている。表示部２１が存在する面を携帯通信端末２の正面とする。図４は、携帯通信端末２の裏面の一例を示す図である。携帯通信端末２は、図４に示したように、裏面にカメラ２２を備える。携帯通信端末２はカメラ２２で撮像した画像を動的に表示部２１に表示可能である。図５は、携帯通信端末２のカメラ２２で撮像した画像の一例を示す図である。図５は、図１に示した部屋の中で撮像した画像の例を示しており、表示部２１に空気調和機１および人４が表示されている。携帯通信端末２は、図３および図４では記載を省略している加速度センサを備え、加速度センサの出力値から携帯通信端末２の絶対位置の変化量を演算可能なものとする。また、携帯通信端末２は地磁気センサを備え、携帯通信端末２の向きの変化量を演算可能とする。
　空気調和機１は外部の機器と通信するための無線通信機能を備えるものとする。本実施の形態では、空気調和機１は携帯通信端末２に対して、湿度センサ１２による検出結果を示す検出情報（湿度センサ１２の検出情報）、室温センサ１３による検出結果を示す検出情報（室温センサ１３の検出情報）、センサ部１１による検出結果を示す検出情報（センサ部１１の検出情報）、空気調和機１の運転状態を示す運転状態情報を無線通信機能により送信するものとする。運転状態情報は、気流の吹き出し方向情報、風速情報などを含んだ情報である。なお、これ以降の説明では、湿度センサ１２の検出情報、室温センサ１３の検出情報、およびセンサ部１１の検出情報をまとめて室内環境情報と記述する。室内環境情報は空気調和機１が設置されている部屋の室内環境を示す情報である。
　図６は、携帯通信端末２の表示部２１に表示する内容の一例を示す図である。より詳細には、携帯通信端末２が、空気調和機１から取得した各種情報に基づいて表示部２１に表示する内容を示している。図６では、携帯通信端末２が空気調和機１から取得した各種情報の内容を示す画像をカメラ２２で撮像した画像に対して重畳し、表示部２１に表示した場合の例を示している。
　携帯通信端末２は、空気調和機１から取得した情報を用いて、以下の通り表示部２１に画像として表示する。すなわち、湿度センサ１２の検出情報および室温センサ１３の検出情報を用いて、室内の現在の室温および湿度を示す画像を生成し、図６の室温＆湿度表示５４として表示する。
　センサ部１１は図２を用いて説明した通り、床面６の小領域６２毎の温度情報を取得可能である。そのため、携帯通信端末２は、小領域６２毎の温度情報を用いて、図６の床面温度表示５１および５２を表示部２１に表示する。床面温度表示５１および５２はセンサ部１１の検出情報を元に、温度を数値で表してもよいし、「高」、「低」などの文字表現で表してもよい。また、表示部２１に表示するときの色、表示の大きさなど、表示内容の違いで温度の違いを表現してもよい。
　また、携帯通信端末２は、空気調和機１から取得した気流の吹き出し方向情報および風速情報を用いて、図６の風向＆風速表示５３を表示部２１に表示する。風向＆風速表示５３は、空気調和機１から吐出される気流を画像で表現したものである。本実施の形態では図６に示したように、風向を風向＆風速表示５３の矢印の向きとして表し、風速を矢印の大きさおよび数値の記載により表現している。
　表示部２１に表示する運転状態情報は上記のものに限らず、例えば空気調和機１の消費電力、連続稼働時間、フィルター清掃が必要となるまでの時間などを表示してもよい。
　上記の室温＆湿度表示５４、床面温度表示５１および５２、風向＆風速表示５３は、カメラ２２で撮像した画像へ重畳表示するための表示箇所、表示形状を演算する。これを実現するためには、空気調和機１と携帯通信端末２の相対位置が予め判明していることが必要である。そのため、本実施の形態の空気調和システムにおいては、携帯通信端末２が、図１、図６などに示したＡＲマーカー１４を用いて相対位置を求める。ＡＲマーカー１４は空気調和機１の筺体表面に貼付または印刷された紋様である。携帯通信端末２は、カメラ２２でＡＲマーカー１４を撮像し、ＡＲマーカー１４の紋様の特徴、大きさ、形状および傾きを画像認識することで、自装置（携帯通信端末２）と空気調和機１との相対位置関係を示す情報を算出する。本実施の形態では、ＡＲマーカー１４を撮像した画像に基づいて算出した情報を図７に示した構成の相対位置情報として扱う。相対位置情報は少なくとも、相対距離、ピッチ角度、ロール角度およびヨー角度から構成される。相対距離は、空気調和機１と携帯通信端末２との間隔を表す値である。ピッチ角度、ロール角度およびヨー角度は、図３に示した携帯通信端末２を原点とする３次元直交座標の、各軸まわりの回転角度を表す。ピッチ角度、ロール角度およびヨー角度はカメラ２２の撮像画像の中で空気調和機１がどの程度傾いているかを表す値である。本実施の形態では、ｘ軸まわりの回転角度をピッチ角度、ｙ軸まわりの回転角度をロール角度、ｚ軸まわりの回転角度をヨー角度とする。
　上記の相対位置関係の導出は、携帯通信端末２が図６に示した内容の表示を開始する際に少なくとも１回実施する。相対位置関係が確定した後は、携帯通信端末２に搭載された加速度センサおよび地磁気センサを用いることで携帯通信端末２の絶対位置の変化量を随時把握し、相対位置関係の確定値に携帯通信端末２の絶対位置の変化量を補正値として与えることで、空気調和機１と携帯通信端末２の相対位置関係を最新の状態に更新する。
　なお、本実施の形態ではＡＲマーカー１４を用いて空気調和機１と携帯通信端末２の相対位置関係を算出することとしたが、相対位置関係を求める方法をこれに限定するものではない。他の方法としては、空気調和機１の形状をカメラ２２で撮像し、その大きさや傾き具合などの特徴量から、空気調和機１と携帯通信端末２との相対位置関係を演算する方法が考えられる。また、ＧＰＳ（Global　Positioning　System）などを利用して取得可能な位置特定情報を使用して空気調和機１と携帯通信端末２のそれぞれの位置情報を取得し、位置情報から相対位置関係を求めるようにしてもよい。
　次に、図８を用いて本実施の形態にかかる空気調和システムの内部構成について説明する。図８は空気調和システム１００を構成している空気調和機１および携帯通信端末２の構成例を示す図である。
　まず、空気調和機１の構成について説明する。空気調和機１は、上述したセンサ部１１、湿度センサ１２および室温センサ１３と、センサ部１１、湿度センサ１２および室温センサ１３を制御して各センサによる検出値であるセンサ値を収集するセンサ情報収集部１５と、携帯通信端末２などの他の機器との間でデータを送受信する通信部１６と、空気調和機１の運転制御、具体的には、冷房、暖房、除湿、送風等の空気調和機能、風向、風速などを調整する運転制御部１７と、を備える。
　次に、携帯通信端末２の構成について説明する。携帯通信端末２は、上述した表示部２１およびカメラ２２と、空気調和機１などの他の機器と間でデータを送受信する通信部２３と、加速度センサ２４Ａおよび地磁気センサ２４Ｂからセンサ値を取得するセンサ情報処理部２４と、カメラ２２を制御して画像データを取得する撮像部２５と、空気調和機１と自装置（携帯通信端末２）の相対位置関係を算出する相対位置演算部２６と、表示部２１に表示させる画像を生成する画像処理部２７と、画像処理部２７で生成された画像を表示する表示部２１と、を備える。
　携帯通信端末２において、センサ情報処理部２４は、加速度センサ２４Ａおよび地磁気センサ２４Ｂから取得したセンサ値に基づいて携帯通信端末２の絶対位置の変化量を推定する。例えば、携帯通信端末２が室内で静止した状態であれば、携帯通信端末２の加速度センサ２４Ａは地球の重力加速度のみを検出する。センサ情報処理部２４は、加速度センサ２４Ａが重力加速度以外の加速度を検出した場合、携帯通信端末２の絶対位置が変化したものと推定する。撮像部２５は、カメラ２２の撮像素子が取得した画像データを受け取って保持する。相対位置演算部２６は、カメラ２２で撮像された画像を解析して空気調和機１と自装置（携帯通信端末２）の相対位置を示す相対位置情報を算出する。また、相対位置演算部２６は、携帯通信端末２の絶対位置が変化したことを検知した場合に加速度センサ２４Ａが検出した加速度と時間の関係から、携帯通信端末２の移動速度および移動量を算出する。さらに、相対位置演算部２６は、算出した移動量を空気調和機１との相対位置関係に反映させ、携帯通信端末２の絶対位置が変化した後の相対位置関係を推定する。
　画像処理部２７は、カメラ２２で撮像した画像に対して、空気調和機１の運転状態情報および室内環境情報を重畳させる処理を行い、表示部２１に表示させる画像を生成する。このとき、運転状態情報および室内環境情報は、空気調和機１と携帯通信端末２の相対位置関係に基づいた画像処理を行って画像に重畳させる。空気調和機１と携帯通信端末２の相対位置の情報は相対位置演算部２６より取得する。空気調和機１と携帯通信端末２の相対位置を考慮することで、空気調和機１の運転状態情報、例えば風向＆風速表示５３の表示位置を空気調和機１の表示位置の近傍に配置することが可能となる。
　次に、図９～図１２を用いて本実施の形態の空気調和システムの動作を説明する。図９および図１０は、実施の形態１にかかる携帯通信端末２の相対位置演算部２６の動作手順を示すフローチャートである。図１１は、実施の形態１にかかる携帯通信端末２の画像処理部２７の動作手順を示すフローチャートである。図１２は、実施の形態１にかかる空気調和機１の通信部１６の動作手順を示すフローチャートである。
　まず、図９および図１０を用いて、携帯通信端末２の相対位置演算部２６が空気調和機１と携帯通信端末２の相対位置を示す相対位置情報を求める動作について説明する。本実施の形態にかかる携帯通信端末２においては、まず、カメラ２２が空気調和機１のＡＲマーカー１４を撮像する。そして、撮像により得られた画像データに基づいて、相対位置演算部２６が空気調和機１と携帯通信端末２の相対位置情報の初期値を求める。相対位置演算部２６は、初期値を求めた後、加速度センサ２４Ａによる検出値および地磁気センサ２４Ｂによる検出値に基づいて相対位置情報を補正することにより、相対位置情報を更新する。ＡＲマーカー１４の撮像は、例えば、作業者が決められた操作を行うことにより、実施する。
　図９は、相対位置演算部２６が、ＡＲマーカー１４を使用して空気調和機１と携帯通信端末２の相対位置情報の初期値を求める際の処理フローを示している。相対位置演算部２６は、相対位置情報の初期値を求める場合、まず、カメラ２２で撮像した画像の画像データを撮像部２５から取得する（ステップＳ１１）。相対位置演算部２６は、次に、取得した画像データを解析して画像の中にＡＲマーカーがあるか否かを確認する（ステップＳ１２）。ＡＲマーカーが無い場合（ステップＳ１２：Ｎｏ）、処理を終了する。一方、ＡＲマーカーがある場合（ステップＳ１２：Ｙｅｓ）、画像中のＡＲマーカーの大きさ、形状および傾きに基づいて、空気調和機１と携帯通信端末２の相対位置を推定し、相対位置情報の初期値を生成する（ステップＳ１３）。すなわち、画像中のＡＲマーカーとの相対位置を求めることにより、ＡＲマーカー１４が貼付されている空気調和機１とに基づいて携帯通信端末２の相対位置を推定する。ＡＲマーカーの画像を解析してＡＲマーカーの相対位置を推定する方法については特に規定しない。既存のどのような技術を使用して推定してもよい。
　携帯通信端末２の相対位置演算部２６は、カメラ２２がＡＲマーカー１４を撮像した画像に基づいて空気調和機１と携帯通信端末２の相対情報の初期値を求めた後、図１０に示した手順で相対位置情報を補正する。相対位置演算部２６は、図１０に示した手順を定期的に繰り返し実行する。
　相対位置情報を補正する動作において、相対位置演算部２６は、まず、加速度センサ２４Ａの検出値および地磁気センサ２４Ｂの検出値であるセンサ情報をセンサ情報処理部２４から取得する（ステップＳ２１）。相対位置演算部２６は、次に、センサ情報を確認し、センサ情報に変化があったか否かを確認する（ステップＳ２２）。具体的には、前回取得した加速度センサ２４Ａの検出値と今回取得した加速度センサ２４Ａの検出値とを比較するとともに、前回取得した地磁気センサ２４Ｂの検出値と今回取得した地磁気センサ２４Ｂの検出値とを比較する。加速度センサ２４Ａの検出値および地磁気センサ２４Ｂの検出値の少なくとも一方が変化している場合はセンサ情報に変化があったと判断する。検出値が変化しているか否かの判断は、前回の検出値と今回の検出値の差を変化検出用のしきい値と比較することにより行う。検出値の差がしきい値に達していれば変化あり、検出値の差がしきい値未満であれば変化なしと判断する。相対位置演算部２６は、センサ情報に変化がない場合（ステップＳ２２：Ｎｏ）、処理を終了する。
　相対位置演算部２６は、センサ情報に変化がある場合（ステップＳ２２：Ｙｅｓ）、携帯通信端末２の絶対位置および姿勢の少なくとも一方が変化している。そのため、センサ情報、すなわち、加速度センサ２４Ａの検出値および地磁気センサ２４Ｂの検出値に基づいて、携帯通信端末２の位置の変化量および姿勢の変化量を算出する。加速度センサ２４Ａの検出値に基づいて位置の変化量を算出し、地磁気センサ２４Ｂの検出値に基づいて姿勢の変化量を算出する（ステップＳ２３）。相対位置演算部２６は、次に、ステップＳ２２で求めた位置の変化量および姿勢の変化量を用いて、相対位置情報を補正する（ステップＳ２４）。
　次に、図１１を用いて、携帯通信端末２の画像処理部２７が表示部２１へ表示する画像を生成する動作を説明する。ここでは、携帯通信端末２が表示部２１へ動画像を表示するものとして説明を行う。
　カメラ２２で撮像した画像を動画像として表示部２１へ出力するためには、定期的に表示部２１へ出力する画像を更新する必要がある。画像を更新する周期は特に規定しないが、作業者３が表示部２１に出力された画像が動的に変化する様子を見て不自然に感じない程度の更新周期が必要である。このことから、画像処理部２７は、更新周期毎に表示部２１へ出力する画像を作成する。具体的には、まず、画像処理部２７は、相対位置演算部２６から空気調和機１と携帯通信端末２の相対位置情報を取得する（ステップＳ３１）。画像処理部２７は、次に、空気調和機１から、空気調和機１の運転状態情報および室内環境情報を取得する（ステップＳ３２）。画像処理部２７が運転状態情報および室内環境情報を取得するタイミングについては規定しない。空気調和機１が周期的に携帯通信端末２へ送信する方式としてもよいし、空気調和機１の運転状態情報または室内環境情報が変化した時に空気調和機１が携帯通信端末２へ送信する方式としてもよい。携帯通信端末２の画像処理部２７から空気調和機１へ送信要求を行い、この要求を受けた空気調和機１が運転状態情報および室内環境情報を送信する方式としてもよい。画像処理部２７は、次に、上記ステップＳ３１で取得した相対位置情報を使用して、表示部２１へ出力する運転状態および室内環境を示す各種画像の表示箇所および形状を演算する（ステップＳ３３）。具体的には、画像処理部２７は、相対位置情報に含まれている相対距離の値に基づいて、運転状態および室内環境を示す各種画像の大きさを求める。また、相対位置情報に含まれているピッチ角度、ロール角度およびヨー角度に基づいて、運転状態および室内環境を示す各種画像の表示箇所および表示形状を求める。画像処理部２７は、次に、カメラ２２が撮像した画像に対してステップＳ３３で演算した運転状態および室内環境を示す各種画像を重畳させる画像合成処理を行い、表示部２１へ表示させる画像を作成する（ステップＳ３４）。画像処理部２７は、以上のステップＳ３１～Ｓ３４を更新周期ごとに実行する。画像処理部２７は、画像の作成が終了すると、作成した画像を表示部２１へ出力し、表示部２１は画像処理部２７で作成された画像を表示する。
　次に、図１２を用いて、空気調和機１の通信部１６が運転状態情報および室内環境情報を送信する動作を説明する。
　通信部１６は、まず、センサ情報収集部１５から室内環境情報を取得する（ステップＳ４１）。通信部１６は、次に、運転制御部１７から空気調和機１の運転状態情報を取得する（ステップＳ４２）。通信部１６は、室内環境情報および運転状態情報を携帯通信端末２へ送信する（ステップＳ４３）。情報を送信するタイミングは、上述したように、一定周期で送信してもよいし、室内環境情報および運転状態情報の少なくとも一方が変化した場合に送信してもよい。携帯通信端末２から要求があった場合に送信してもよい。
　以上のように、本実施の形態の空気調和システムにおいて、空気調和機１は、運転状態情報および室内環境情報を携帯通信端末２へ送信し、携帯通信端末２は、空気調和機１から受け取った情報に基づいて、受け取った情報の内容を示す画像を生成し、生成した画像をカメラ２２で撮像した画像に重畳し、表示部２１へ表示させる。これにより、携帯通信端末２を所持している作業者３は、空気調和機１の据え付けやメンテナンスの際に、空気調和機１の動作状態および室内の環境情報、具体的には、空気調和機１の吐出気流の風向や風速、温度、床面の温度などの不可視の情報を容易に知ることができる。更に、これらの情報は携帯通信端末２の表示部２１上に、カメラ２２で撮影した映像と重畳させて表示されるため、作業者３自身に近い視点での情報取得が可能となり、空気調和機１の据え付け作業時およびメンテナンス作業時における作業効率の向上に寄与することができる。
実施の形態２．
　実施の形態２の空調システムについて説明する。実施の形態１の空調システムでは、携帯通信端末２が、カメラで撮像した画像に対して空気調和機１の動作状態および室内の環境情報を示す画像を重畳させて表示部に表示することにより、空気調和機１の動作状態、室内環境を容易に把握できるようにしたものである。これに対して、実施の形態２の空気調和システムは、実施の形態１の空気調和システムに対して以下の構成をさらに追加したものである。
　本実施の形態の空気調和システム１００ａは、実施の形態１で説明した空気調和機１および携帯通信端末２ａにより構成される。携帯通信端末２ａは、空気調和機１に対して、風向、風速、目標設定温度、目標設定湿度等の運転状態変更指令を送信可能であるとする。携帯通信端末２ａからの運転状態変更指令を受け取った空気調和機１は、受け取った運転状態変更指令を運転状態の制御に反映する。
　図１３は、実施の形態２の空気調和システム１００ａの概要を示す図である。図１３において、実施の形態１の説明で使用した図６と共通の部分には同じ符号を付している。図６と同じ符号が付された部分は実施の形態１と同様であるため、説明を省略する。
　実施の形態２の空気調和システム１００ａにおいて、携帯通信端末２ａの表示部２１は、表示面が触れられたことを感知可能なタッチパネルで構成されており、携帯通信端末２ａは、作業者が表示部２１の表面に触れた場合にそれを検知できる。作業者が携帯通信端末２ａへ運転状態変更指令を入力する場合、図１３に示したように、表示部２１に表示された状態表示、すなわち、室温＆湿度表示５４、床面温度表示５１および５２、風向＆風速表示５３の各表示箇所に触れることで行う（図１３の操作５７）。例えば、床面温度表示５１に対応する床面の温度を下げたい場合、床面温度表示５１が表示された位置を２本の指で触れ、２本の指の間隔を狭めるように動かして運転状態変更指令を携帯通信端末２ａへ入力する。逆に、床面温度表示５１に対応する床面の温度を上げたい場合には、床面温度表示５１が表示された位置を２本の指で触れ、２本の指の間隔を広げるように動かして運転状態変更指令を携帯通信端末２ａへ入力する。このようにして床面温度表示５１に対応する床面の温度の変更を運転状態変更指令として入力した場合、その情報は携帯通信端末２ａから空気調和機１へと送信される。運転状態変更指令の情報を受信した空気調和機１は、受信した情報が示す内容を運転状態の制御に反映させる。すなわち、空気調和機１は、床面温度表示５１に対応する箇所の温度を変えるように吐出気流の温度、風向および風速を調整する。運転状態変更指令には、変更を行う箇所の位置情報が含まれているものとする。空気調和機１は、運転状態変更指令に従って運転状態を変更した場合、変更後の運転状態情報を携帯通信端末２ａへ送信する。この運転状態情報を受信した携帯通信端末２ａは、表示部２１に表示している運転状態の表示を更新する。
　次に、図１４を用いて本実施の形態にかかる空気調和システムの内部構成について説明する。図１４は空気調和システム１００ａを構成している空気調和機１および携帯通信端末２ａの構成例を示す図である。
　空気調和機１は実施の形態１と同様であるため説明を省略する。携帯通信端末２ａは、図８に示した実施の形態１の携帯通信端末２に対して操作部３１および運転管理部３２を追加したものである。操作部３１および運転管理部３２以外の部分は実施の形態１と共通であるため説明を省略する。
　操作部３１は、携帯通信端末２ａのユーザインタフェースを制御する機能モジュールである。操作部３１は、作業者が表示部２１に触れることにより携帯通信端末２ａに対して行った操作を検出し、検出した操作の内容を示す操作情報を生成する。操作部３１は、操作情報を生成すると、生成した操作情報を運転管理部３２経由で画像処理部２７へ渡す。運転管理部３２は、空気調和機１の運転状態を管理する機能モジュールである。運転管理部３２は、通信部２３を介して空気調和機１の運転状態情報を取得する。また、運転管理部３２は、操作部３１から操作情報を受け取ると、操作情報を画像処理部２７へ渡す。このとき運転管理部３２は、画像処理部２７へ渡す操作情報を確認し、操作情報が運転状態または室内環境を変更する操作を示している場合、通信部２３を介して、空気調和機１へ運転状態変更指令を送信し、運転状態または室内環境の変更を指示する。
　次に、図１５および図１６を用いて本実施の形態の空気調和システムの動作を説明する。図１５は、実施の形態２にかかる携帯通信端末２ａの画像処理部２７の動作手順を示すフローチャートである。図１６は、実施の形態２にかかる携帯通信端末２ａが空気調和機１に対して運転状態変更指令を送信する場合の動作手順を示すフローチャートである。
　図１５を用いて、携帯通信端末２ａの画像処理部２７が表示部２１へ表示させる動画像を生成する動作を説明する。本実施の形態の画像処理部２７が表示部２１へ表示させる動画像を生成する動作は、実施の形態１で説明した動作、すなわち、図１１に示した動作に対してステップＳ５１の処理を追加したものである。具体的には、ステップＳ３２の処理とステップＳ３３の処理の間にステップＳ５１の処理を実行するようにしたものである。実施の形態１と共通の部分については詳細説明を省略する。
　画像処理部２７は、相対位置演算部２６から相対位置情報を取得し（ステップＳ３１）、さらに、空気調和機１から運転状態情報および室内環境情報を取得する（ステップＳ３２）。画像処理部２７は、次に、操作部３１から作業者が行った操作の内容を示す操作情報を取得する（ステップＳ５１）。なお、作業者による操作が行われていない場合、取得した操作情報は作業者の操作が行われていないことを示す内容となる。
　画像処理部２７は、次に、ステップＳ３３を実行する。すなわち、画像処理部２７は、実施の形態１と同様に、相対位置情報に基づき、表示部２１へ出力する運転状態および室内環境を示す各種画像の表示箇所および形状を演算する（ステップＳ３３）。このとき、ステップＳ５１で取得した操作情報が運転状態または室内環境の変更指令を示す内容の場合、画像処理部２７は、表示箇所および表示形状の演算に変更指令の内容を反映させる。すなわち、変更指令の内容を運転状態情報および室内環境情報に反映させてこれらの情報を更新し、更新後の運転状態情報および室内環境情報に基づいて、運転状態および室内環境を示す各種画像の表示箇所および表示形状を演算する。画像処理部２７は、次に、カメラ２２が撮像した画像に対してステップＳ３３で演算した運転状態および室内環境を示す各種画像を重畳させる画像合成処理を行う（ステップＳ３４）。
　なお、ステップＳ３２の次にステップＳ５１を実行することとしたが、ステップＳ３１の前または後にステップＳ５１を実行するようにしてもよい。
　携帯通信端末２ａが空気調和機１に対して運転状態または室内環境の変更内容を通知する場合、図１６に示した手順で通知する。
　携帯通信端末２ａの運転管理部３２は、操作部３１から受け取った操作情報が運転状態または室内環境を変更する操作を示している場合、運転状態または室内環境の変更指令を通信部２３へ出力する。運転状態または室内環境の変更指令を運転管理部３２から取得した通信部２３は、運転状態または室内環境の変更指令を空気調和機１に対して送信する（ステップＳ６１，Ｓ６２）。空気調和機１では、ステップＳ６２で送信された変更指令を通信部１６が受信し、受信した変更指令を運転制御部１７へ通知する（ステップＳ６３）。運転制御部１７は、通信部１６から変更指令を受け取ると、受け取った変更指令の内容に従い空気調和機１の運転状態を変更する（ステップＳ６４）。
　以上のように、本実施の形態の空気調和システムにおいて、空気調和機１は、運転状態情報および室内環境情報を携帯通信端末２ａへ送信し、携帯通信端末２ａは、空気調和機１から受け取った情報に基づいて、受け取った情報の内容を示す画像を生成し、生成した画像をカメラ２２で撮像した画像に重畳し、カメラ２２の反対の面に配置されている表示部２１へ表示させる。また、携帯通信端末２ａは、表示部２１を介して作業者の操作を検知し、検知した操作内容を表示部２１への表示内容に反映させるとともに、操作内容に対応する変更指令を空気調和機１に対して送信する。これにより、作業者は携帯通信端末２ａの表示部２１に表示された空気調和機１の運転状態を確認しながら、同じ表示部２１から運転状態変更指令を入力することができ、空気調和機１の据え付け作業時およびメンテナンス作業時において、運転状態を確認する作業の手間を大幅に削減することが可能となる。よって、作業効率の向上に寄与することができる。また、消費者が空気調和機を日常的に使用する際、従来では空気調和機１の実際の運転状態を遠隔操作装置の表示を見て確認するか、空気調和機１の筺体の状態を直接見て確認するしかなかったが、空気調和機１の運転状態を携帯通信端末２ａの表示部２１への表示にて直感的に把握し易い形態で確認することができる。
　実施の形態１，２で説明した空気調和機１、携帯通信端末２，２ａが備えている一部の機能は図１７に示した構成のハードウェア、具体的には、プロセッサ２０１と、ＲＡＭ（Random　Access　Memory）、ＲＯＭ（Read　Only　Memory）などで構成されるメモリ２０２と、通信装置２０３と、ディスプレイ２０４とにより実現することができる。プロセッサ２０１、メモリ２０２、通信装置２０３およびディスプレイ２０４はバス２００に接続され、バス２００を介してデータ、制御情報などの受け渡しを相互に行うことが可能な構成となっている。
　空気調和機１のセンサ情報収集部１５および運転制御部１７は空気調和機用のプログラムをメモリ２０２に格納しておき、このプログラムをプロセッサ２０１が実行することにより実現される。また、携帯通信端末２，２ａのセンサ情報処理部２４、撮像部２５、画像処理部２７、操作部３１および運転管理部３２は、携帯通信端末用のプログラムをメモリ２０２に格納しておき、このプログラムをプロセッサ２０１が実行することにより実現される。空気調和機１の通信部１６および携帯通信端末２，２ａの通信部２３は通信装置２０３により実現される。携帯通信端末２，２ａの表示部２１はディスプレイ２０４により実現される。
　なお、複数のプロセッサおよび複数のメモリが連携して空気調和機１、携帯通信端末２，２ａが備えている上記機能を実現するようにしてもよい。
　以上の実施の形態に示した構成は、本発明の内容の一例を示すものであり、別の公知の技術と組み合わせることも可能であるし、本発明の要旨を逸脱しない範囲で、構成の一部を省略、変更することも可能である。
　１　空気調和機、２，２ａ　携帯通信端末、３　作業者、４　人、５　壁面、６　床面、１１　センサ部、１２　湿度センサ、１３　室温センサ、１４　ＡＲマーカー、１５　センサ情報収集部、１６，２３　通信部、１７　運転制御部、２１　表示部、２２　カメラ、２４　センサ情報処理部、２４Ａ　加速度センサ、２４Ｂ　地磁気センサ、２５　撮像部、２６　相対位置演算部、２７　画像処理部、３１　操作部、３２　運転管理部、１００，１００ａ　空気調和システム、２００　バス、２０１　プロセッサ、２０２　メモリ、２０３　通信装置、２０４　ディスプレイ。

Claims (2)

  1. 　空気調和機と、
    　前記空気調和機と無線通信が可能な携帯通信端末と、
    　を備え、
    　前記空気調和機は、
    　自装置の運転状態を示す運転状態情報と、自装置による空気調和の対象空間の室内環境を示す室内環境情報とを前記携帯通信端末へ送信する通信部、
    　を備え、
    　前記携帯通信端末は、
    　カメラと、
    　表示部と、
    　前記空気調和機から前記運転状態情報および前記室内環境情報を受信する通信部と、
    　前記カメラで撮像された画像に基づいて、自装置と前記空気調和機との相対位置を示す相対位置情報を算出する相対位置演算部と、
    　前記カメラが前記空気調和機と前記空気調和の対象空間の少なくとも一部とを含む範囲を撮像した画像である第１の画像を取得するとともに、前記運転状態情報、前記室内環境情報および前記相対位置情報に基づいて、前記空気調和機の運転状態および前記空気調和の対象空間の室内環境を表す画像である第２の画像を生成し、前記第１の画像に前記第２の画像を重畳させた画像を前記表示部に表示させる画像処理部と、
    　を備えることを特徴とする空気調和システム。
  2. 　前記表示部は表示面が触れられたことを感知可能に構成され、
    　前記携帯通信端末は、
    　前記表示部が前記第２の画像を表示している状態において、前記空気調和機の利用者が前記表示面に触れることにより行った前記空気調和機に対する操作を検出して検出結果を示す操作情報を生成する操作部と、
    　前記操作部で生成された操作情報を前記空気調和機へ送信して当該操作情報に従った運転を行うよう前記空気調和機に指示する運転管理部と、
    　をさらに備えることを特徴とする請求項１に記載の空気調和システム。
PCT/JP2015/053854 2015-02-12 2015-02-12 空気調和システム WO2016129085A1 (ja)

Priority Applications (2)

Application Number Priority Date Filing Date Title
JP2016574582A JP6239164B2 (ja) 2015-02-12 2015-02-12 空気調和システム
PCT/JP2015/053854 WO2016129085A1 (ja) 2015-02-12 2015-02-12 空気調和システム

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
PCT/JP2015/053854 WO2016129085A1 (ja) 2015-02-12 2015-02-12 空気調和システム

Publications (1)

Publication Number Publication Date
WO2016129085A1 true WO2016129085A1 (ja) 2016-08-18

Family

ID=56614296

Family Applications (1)

Application Number Title Priority Date Filing Date
PCT/JP2015/053854 WO2016129085A1 (ja) 2015-02-12 2015-02-12 空気調和システム

Country Status (2)

Country Link
JP (1) JP6239164B2 (ja)
WO (1) WO2016129085A1 (ja)

Cited By (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2019009291A1 (ja) * 2017-07-07 2019-01-10 三菱重工サーマルシステムズ株式会社 空調制御装置、空調システム、空調制御方法、及びプログラム
JPWO2018179731A1 (ja) * 2017-03-29 2019-11-07 パナソニックＩｐマネジメント株式会社 環境推定装置、及び、環境推定方法
JP6730536B1 (ja) * 2019-06-25 2020-07-29 日立ジョンソンコントロールズ空調株式会社 空気調和装置、運転制御方法およびプログラム
WO2020183651A1 (ja) * 2019-03-13 2020-09-17 三菱電機株式会社 空気調和システム
JP2021055969A (ja) * 2019-09-30 2021-04-08 三機工業株式会社 空気調和設備の中央監視装置および空気調和設備の状況の表示方法
CN113474641A (zh) * 2019-02-27 2021-10-01 大金工业株式会社 信息提供系统
JP2022179638A (ja) * 2018-10-30 2022-12-02 三菱電機株式会社 遠隔操作端末および空調システム

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2011016225A1 (ja) * 2009-08-06 2011-02-10 パナソニック株式会社 空気調和機
JP2014206291A (ja) * 2013-04-10 2014-10-30 ダイキン工業株式会社 端末装置および空調ユニット
JP2014214935A (ja) * 2013-04-24 2014-11-17 ダイキン工業株式会社 端末装置および空調ユニット

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2011016225A1 (ja) * 2009-08-06 2011-02-10 パナソニック株式会社 空気調和機
JP2014206291A (ja) * 2013-04-10 2014-10-30 ダイキン工業株式会社 端末装置および空調ユニット
JP2014214935A (ja) * 2013-04-24 2014-11-17 ダイキン工業株式会社 端末装置および空調ユニット

Cited By (13)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPWO2018179731A1 (ja) * 2017-03-29 2019-11-07 パナソニックＩｐマネジメント株式会社 環境推定装置、及び、環境推定方法
US11333383B2 (en) 2017-03-29 2022-05-17 Panasonic Intellectual Property Management Co., Ltd. Environment estimation device and environment estimation method
WO2019009291A1 (ja) * 2017-07-07 2019-01-10 三菱重工サーマルシステムズ株式会社 空調制御装置、空調システム、空調制御方法、及びプログラム
JP7341306B2 (ja) 2018-10-30 2023-09-08 三菱電機株式会社 遠隔操作端末および空調システム
JP2022179638A (ja) * 2018-10-30 2022-12-02 三菱電機株式会社 遠隔操作端末および空調システム
CN113474641A (zh) * 2019-02-27 2021-10-01 大金工业株式会社 信息提供系统
JPWO2020183651A1 (ja) * 2019-03-13 2021-10-14 三菱電機株式会社 空気調和システム
WO2020183651A1 (ja) * 2019-03-13 2020-09-17 三菱電機株式会社 空気調和システム
CN113728205A (zh) * 2019-06-25 2021-11-30 日立江森自控空调有限公司 空调装置、运转控制方法以及程序
WO2020261360A1 (ja) * 2019-06-25 2020-12-30 日立ジョンソンコントロールズ空調株式会社 空気調和装置、運転制御方法およびプログラム
JP6730536B1 (ja) * 2019-06-25 2020-07-29 日立ジョンソンコントロールズ空調株式会社 空気調和装置、運転制御方法およびプログラム
JP2021055969A (ja) * 2019-09-30 2021-04-08 三機工業株式会社 空気調和設備の中央監視装置および空気調和設備の状況の表示方法
JP7394574B2 (ja) 2019-09-30 2023-12-08 三機工業株式会社 空気調和設備の中央監視装置および空気調和設備の状況の表示方法

Also Published As

Publication number Publication date
JPWO2016129085A1 (ja) 2017-06-08
JP6239164B2 (ja) 2017-11-29

Similar Documents

Publication Publication Date Title
JP6239164B2 (ja) 空気調和システム
CN108972568B (zh) 显示用于机器人的示教的信息的机器人系统
US20080056561A1 (en) Image processing device
CN102448681A (zh) 动作空间提示装置、动作空间提示方法以及程序
JP6282926B2 (ja) 制御方法及び通信装置
JP2019041261A (ja) 画像処理システムおよび画像処理システムの設定方法
JP5326794B2 (ja) 遠隔操作システム及び遠隔操作方法
WO2020089996A1 (ja) 遠隔操作端末および空調システム
US20170264827A1 (en) Motion-sensor based remote control
JP2010266169A (ja) 空調制御装置
WO2020157955A1 (ja) 仮想オブジェクト表示装置及び仮想オブジェクト表示方法
WO2017065126A1 (ja) 画像処理装置、画像処理方法およびプログラム
US20150229827A1 (en) Mobile receiver unit, method for operating the mobile receiver unit and computer program
JP2016017707A (ja) 空気調和システム
JP2018151079A (ja) 空調機システム
WO2018211592A1 (ja) 空気調和システム
GB2581248A (en) Augmented reality tools for lighting design
JP2015132443A (ja) 機器制御システム、制御装置、機器制御方法及びプログラム
WO2022209579A1 (ja) ロボット制御システム、および制御装置
KR101591057B1 (ko) 동기화를 위한 원격제어 방법 및 그 시스템
CN106970729B (zh) 用于投影触控式设备的投影控制装置、方法及设备
WO2023058083A1 (ja) 送風制御装置
JP7341306B2 (ja) 遠隔操作端末および空調システム
JP7390910B2 (ja) 地図生成装置およびその方法
WO2021210168A1 (ja) 空調制御システム、空調システム、空調制御方法及び空調制御プログラム

Legal Events

Date Code Title Description
121 Ep: the epo has been informed by wipo that ep was designated in this application

Ref document number: 15881960

Country of ref document: EP

Kind code of ref document: A1

ENP Entry into the national phase

Ref document number: 2016574582

Country of ref document: JP

Kind code of ref document: A

NENP Non-entry into the national phase

Ref country code: DE

122 Ep: pct application non-entry in european phase

Ref document number: 15881960

Country of ref document: EP

Kind code of ref document: A1