KR20180138463A - Cloud server and method for controlling cooling system of target building based on artificial intelligence, and apparatus for controlling cooling system - Google Patents

Cloud server and method for controlling cooling system of target building based on artificial intelligence, and apparatus for controlling cooling system Download PDF

Info

Publication number
KR20180138463A
KR20180138463A KR1020170078709A KR20170078709A KR20180138463A KR 20180138463 A KR20180138463 A KR 20180138463A KR 1020170078709 A KR1020170078709 A KR 1020170078709A KR 20170078709 A KR20170078709 A KR 20170078709A KR 20180138463 A KR20180138463 A KR 20180138463A
Authority
KR
South Korea
Prior art keywords
control signal
cooling
cooling system
energy consumption
signal sets
Prior art date
Application number
KR1020170078709A
Other languages
Korean (ko)
Other versions
KR102272333B1 (en
Inventor
유승호
김선미
김종헌
한자경
Original Assignee
주식회사 케이티
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 주식회사 케이티 filed Critical 주식회사 케이티
Priority to KR1020170078709A priority Critical patent/KR102272333B1/en
Publication of KR20180138463A publication Critical patent/KR20180138463A/en
Application granted granted Critical
Publication of KR102272333B1 publication Critical patent/KR102272333B1/en

Links

Images

Classifications

    • FMECHANICAL ENGINEERING; LIGHTING; HEATING; WEAPONS; BLASTING
    • F24HEATING; RANGES; VENTILATING
    • F24FAIR-CONDITIONING; AIR-HUMIDIFICATION; VENTILATION; USE OF AIR CURRENTS FOR SCREENING
    • F24F11/00Control or safety arrangements
    • F24F11/30Control or safety arrangements for purposes related to the operation of the system, e.g. for safety or monitoring
    • FMECHANICAL ENGINEERING; LIGHTING; HEATING; WEAPONS; BLASTING
    • F24HEATING; RANGES; VENTILATING
    • F24FAIR-CONDITIONING; AIR-HUMIDIFICATION; VENTILATION; USE OF AIR CURRENTS FOR SCREENING
    • F24F11/00Control or safety arrangements
    • F24F11/30Control or safety arrangements for purposes related to the operation of the system, e.g. for safety or monitoring
    • F24F11/46Improving electric energy efficiency or saving
    • FMECHANICAL ENGINEERING; LIGHTING; HEATING; WEAPONS; BLASTING
    • F24HEATING; RANGES; VENTILATING
    • F24FAIR-CONDITIONING; AIR-HUMIDIFICATION; VENTILATION; USE OF AIR CURRENTS FOR SCREENING
    • F24F11/00Control or safety arrangements
    • F24F11/50Control or safety arrangements characterised by user interfaces or communication
    • F24F11/56Remote control
    • F24F11/58Remote control using Internet communication
    • FMECHANICAL ENGINEERING; LIGHTING; HEATING; WEAPONS; BLASTING
    • F24HEATING; RANGES; VENTILATING
    • F24FAIR-CONDITIONING; AIR-HUMIDIFICATION; VENTILATION; USE OF AIR CURRENTS FOR SCREENING
    • F24F11/00Control or safety arrangements
    • F24F11/62Control or safety arrangements characterised by the type of control or by internal processing, e.g. using fuzzy logic, adaptive control or estimation of values
    • FMECHANICAL ENGINEERING; LIGHTING; HEATING; WEAPONS; BLASTING
    • F24HEATING; RANGES; VENTILATING
    • F24FAIR-CONDITIONING; AIR-HUMIDIFICATION; VENTILATION; USE OF AIR CURRENTS FOR SCREENING
    • F24F11/00Control or safety arrangements
    • F24F11/62Control or safety arrangements characterised by the type of control or by internal processing, e.g. using fuzzy logic, adaptive control or estimation of values
    • F24F11/63Electronic processing
    • FMECHANICAL ENGINEERING; LIGHTING; HEATING; WEAPONS; BLASTING
    • F24HEATING; RANGES; VENTILATING
    • F24FAIR-CONDITIONING; AIR-HUMIDIFICATION; VENTILATION; USE OF AIR CURRENTS FOR SCREENING
    • F24F3/00Air-conditioning systems in which conditioned primary air is supplied from one or more central stations to distributing units in the rooms or spaces where it may receive secondary treatment; Apparatus specially designed for such systems
    • F24F3/06Air-conditioning systems in which conditioned primary air is supplied from one or more central stations to distributing units in the rooms or spaces where it may receive secondary treatment; Apparatus specially designed for such systems characterised by the arrangements for the supply of heat-exchange fluid for the subsequent treatment of primary air in the room units
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F17/00Digital computing or data processing equipment or methods, specially adapted for specific functions
    • G06F17/10Complex mathematical operations
    • G06F17/11Complex mathematical operations for solving equations, e.g. nonlinear equations, general mathematical optimization problems
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06NCOMPUTING ARRANGEMENTS BASED ON SPECIFIC COMPUTATIONAL MODELS
    • G06N3/00Computing arrangements based on biological models
    • FMECHANICAL ENGINEERING; LIGHTING; HEATING; WEAPONS; BLASTING
    • F24HEATING; RANGES; VENTILATING
    • F24FAIR-CONDITIONING; AIR-HUMIDIFICATION; VENTILATION; USE OF AIR CURRENTS FOR SCREENING
    • F24F2110/00Control inputs relating to air properties
    • F24F2110/10Temperature
    • FMECHANICAL ENGINEERING; LIGHTING; HEATING; WEAPONS; BLASTING
    • F24HEATING; RANGES; VENTILATING
    • F24FAIR-CONDITIONING; AIR-HUMIDIFICATION; VENTILATION; USE OF AIR CURRENTS FOR SCREENING
    • F24F2140/00Control inputs relating to system states
    • F24F2140/20Heat-exchange fluid temperature

Landscapes

  • Engineering & Computer Science (AREA)
  • General Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • Combustion & Propulsion (AREA)
  • Mechanical Engineering (AREA)
  • Chemical & Material Sciences (AREA)
  • Mathematical Physics (AREA)
  • Theoretical Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Data Mining & Analysis (AREA)
  • Signal Processing (AREA)
  • Fuzzy Systems (AREA)
  • Software Systems (AREA)
  • Pure & Applied Mathematics (AREA)
  • Mathematical Optimization (AREA)
  • Mathematical Analysis (AREA)
  • Computational Mathematics (AREA)
  • Evolutionary Computation (AREA)
  • Life Sciences & Earth Sciences (AREA)
  • Molecular Biology (AREA)
  • Computing Systems (AREA)
  • Health & Medical Sciences (AREA)
  • Artificial Intelligence (AREA)
  • Human Computer Interaction (AREA)
  • General Health & Medical Sciences (AREA)
  • Computational Linguistics (AREA)
  • Biophysics (AREA)
  • Operations Research (AREA)
  • Biomedical Technology (AREA)
  • Algebra (AREA)
  • Databases & Information Systems (AREA)
  • Air Conditioning Control Device (AREA)

Abstract

A cloud server for controlling a cooling system of a target building includes: a receiving unit for receiving actual situation data on a plurality of cooling equipment included in the cooling system from a cooling system control unit installed in the target building; a derivation unit for generating a plurality of control signal sets for controlling the cooling system, performing a rewarding operation on each of the plurality of control signal sets based on the actual situation data based on reinforcement learning, and deriving one of the plurality of control signal sets based on the rewarding operation; and a transmitting unit for transmitting the derived control signal set to the cooling system control unit. The derivation unit provides rewards to each of the plurality of control signal sets based on the reference energy consumption amount corresponding to the actual situation data and the total energy consumption amount corresponding to each of the plurality of control signal sets, and the cooling system is operated to control the plurality of cooling equipment based on the transmitted control signal set.

Description

AI 기반으로 대상 건물의 냉방 시스템을 최적 제어하는 클라우드 서버 및 방법, 냉방 시스템 제어 장치{CLOUD SERVER AND METHOD FOR CONTROLLING COOLING SYSTEM OF TARGET BUILDING BASED ON ARTIFICIAL INTELLIGENCE, AND APPARATUS FOR CONTROLLING COOLING SYSTEM}Technical Field [0001] The present invention relates to a cloud server and method for optimally controlling a cooling system of a target building on the basis of AI, a cooling system control device, and a cooling system control device.

본 발명은 AI(Artificial Intelligence) 기반으로 대상 건물의 냉방 시스템을 최적 제어하는 클라우드 서버 및 방법, 냉방 시스템 제어 장치에 관한 것이다. The present invention relates to a cloud server and method for optimally controlling a cooling system of an object building based on AI (Artificial Intelligence), and a cooling system control device.

건물 에너지 관리 시스템이란 건설 기술과 ICT, 에너지 기술을 융합하여 건물 내 에너지 정보를 수집하고, 데이터를 분석하여 에너지 효율을 높이는 통합 시스템으로, 건물이 언제나 최적의 가동 상태가 유지되도록 하는 시스템이다. The building energy management system is an integrated system that integrates construction technology, ICT, and energy technology to collect energy information in buildings and analyze data to improve energy efficiency.

최근의 건물들은 기술 발달에 의해 건축물에 요구되는 설비가 날로 세분화 및 복잡화되어가고 있다. 이로 인해, 각각의 설비를 개별로 제어하게 되고, 이 과정에서 관리가 누락되는 경우가 발생하기도 하며, 중복으로 관리되어 비효율적으로 관리되는 경우가 발생하기도 한다. Recent buildings are becoming more fragmented and complicated due to technological developments. As a result, the individual facilities are controlled individually, and management is sometimes omitted in this process. In some cases, management is performed in duplicate and ineffective management is performed.

또한, 기존의 건물 에너지 관리 시스템은 오프라인에 최적으로 운영됨으로써, 실시간으로 설비의 제어가 어려웠다. In addition, the existing building energy management system operates optimally in off-line, making it difficult to control facilities in real time.

한국공개특허공보 제2014-0141923호 (2014.12.11 공개)Korean Patent Laid-Open Publication No. 2014-0141923 (published Dec. 11, 2014)

본 발명은 전술한 종래 기술의 문제점을 해결하기 위한 것으로서, 냉동기, 냉각탑, 순환펌프 등 개별로 제어되던 시스템을 냉방 시스템 전체를 고려하여 최적으로 제어하는 대상 건물의 냉방 시스템을 제어하는 클라우드 서버 및 방법, 냉방 시스템 제어 장치를 제공하고자 한다. BAS(Building Automation System) 위주의 오프라인의 운영이 아닌, 클라우드 기반의 실시간 온라인으로 최적 운영하는 대상 건물의 냉방 시스템을 제어하는 클라우드 서버 및 방법, 냉방 시스템 제어 장치를 제공하고자 한다. 건물 에너지 시뮬레이션 기술 기반의 가상 데이터를 활용하여 모델 및 알고리즘 설계를 위한 학습데이터를 확보함으로써, 신축 공간에 대해서도 적용가능한 대상 건물의 냉방 시스템을 제어하는 클라우드 서버 및 방법, 냉방 시스템 제어 장치를 제공하고자 한다. 다만, 본 실시예가 이루고자 하는 기술적 과제는 상기된 바와 같은 기술적 과제들로 한정되지 않으며, 또 다른 기술적 과제들이 존재할 수 있다.SUMMARY OF THE INVENTION The present invention has been made to solve the above problems of the prior art, and it is an object of the present invention to provide a cloud server and method for controlling a cooling system of a target building that optimally controls a cooling system, a cooling tower, , And a cooling system control device. The present invention is to provide a cloud server and method for controlling an air-conditioning system of an object to be optimally operated in real-time online based on a cloud, rather than offline operation based on a building automation system (BAS). A cloud server and method for controlling a cooling system of a target building applicable to a new space, and a cooling system control device by providing learning data for model and algorithm design using virtual data based on building energy simulation technology . It is to be understood, however, that the technical scope of the present invention is not limited to the above-described technical problems, and other technical problems may exist.

상술한 기술적 과제를 달성하기 위한 기술적 수단으로서, 본 발명의 일 실시예에 따른 대상 건물의 냉방 시스템을 제어하는 클라우드 서버는, 대상 건물에 설치된 냉방 시스템 제어 장치로부터 상기 냉방 시스템에 포함된 복수의 냉방 장비에 대한 실제 상황 데이터를 수신하는 수신부, 상기 냉방 시스템을 제어하기 위한 복수의 제어 신호 세트를 생성하고, 강화 학습을 기반으로 상기 실제 상황 데이터에 기초하여 상기 복수의 제어 신호 세트 각각에 대해 리워딩 작업을 수행하고, 상기 리워딩 작업에 기초하여 상기 복수의 제어 신호 세트 중 하나를 도출하는 도출부 및 상기 도출된 제어 신호 세트를 상기 냉방 시스템 제어 장치로 전송하는 전송부를 포함하고, 상기 도출부는 상기 실제 상황 데이터와 대응하는 기준 에너지 소비량과 상기 복수의 제어 신호 세트 각각에 대응하는 전체 에너지 소비량에 기초하여 상기 복수의 제어 신호 세트 각각에 리워드를 부여하고, 상기 냉방 시스템은 상기 전송된 제어 신호 세트에 기초하여 상기 복수의 냉방 장비가 제어됨으로써 동작되는 것인 클라우드 서버를 제공할 수 있다.According to an aspect of the present invention, there is provided a cloud server for controlling a cooling system of a target building, the system comprising: a plurality of cooling units included in the cooling system, A control unit for generating a plurality of control signal sets for controlling the cooling system based on the actual situation data and for each of the plurality of control signal sets based on the reinforcement learning, A deriving unit for deriving one of the plurality of control signal sets based on the rewarding operation and a transmitting unit for transmitting the derived control signal set to the cooling system control apparatus, The reference energy consumption amount corresponding to the actual situation data and the plurality of controls Wherein each of the plurality of cooling systems is operated by controlling the plurality of cooling systems based on the transmitted control signal set, wherein the cooling systems are each operative to reward each of the plurality of control signal sets based on the total energy consumption corresponding to each of the signal sets, A cloud server can be provided.

본 발명의 다른 실시예는, 냉방 시스템에 포함된 복수의 냉방 장비에 대한 실제 상황 데이터 정보를 수집하는 수집부, 상기 실제 상황 데이터를 상기 클라우드 서버로 전송하는 전송부, 상기 클라우드 서버에 의해 생성된 복수의 제어 신호 세트 중 상기 실제 상황 데이터에 기초하여 도출된 제어 신호 세트를 수신하는 수신부 및 상기 수신한 제어 신호 세트에 기초하여 상기 복수의 냉방 장치를 제어하는 제어부를 포함하고, 상기 제어 신호 세트는 강화 학습을 기반으로 상기 실제 상황 데이터에 기초하여 리워딩 작업이 수행된 상기 복수의 제어 신호 세트로부터 도출되고, 상기 복수의 제어 신호 세트는 상기 실제 상황 데이터와 대응하는 기준 에너지 소비량과 상기 복수의 제어 신호 세트 각각에 대응하는 전체 에너지 소비량에 기초하여 상기 클라우드 서버로부터 리워드를 부여받는 것인 냉방 시스템 제어 장치를 제공할 수 있다. Another embodiment of the present invention is directed to a cooling system comprising a collection unit for collecting actual situation data information for a plurality of cooling equipment included in a cooling system, a transmission unit for transmitting the actual situation data to the cloud server, Comprising: a receiver for receiving a set of control signals derived from the plurality of control signal sets based on the actual situation data; and a controller for controlling the plurality of air conditioners based on the received control signal set, Wherein the plurality of control signal sets are derived from the plurality of control signal sets on which a rewarding operation has been performed based on the actual situation data based on reinforcement learning, and the plurality of control signal sets include a reference energy consumption amount corresponding to the actual situation data, Based on the total energy consumption corresponding to each of the signal sets, And a reward is given from the server to the cooling system control device.

본 발명의 또 다른 실시예는, 대상 건물에 설치된 냉방 시스템 제어 장치로부터 냉방 시스템에 포함된 복수의 냉방 장비에 대한 실제 상황 데이터를 수신하는 단계, 상기 냉방 시스템을 제어하기 위한 복수의 제어 신호 세트를 생성하는 단계, 강화 학습을 기반으로 상기 실제 상황 데이터 및 상기 복수의 제어 신호 세트 각각에 대응하는 전체 에너지 소비량에 기초하여 상기 복수의 제어 신호 세트 각각에 대해 리워딩 작업을 수행하는 단계, 상기 리워딩 작업에 기초하여 상기 복수의 제어 신호 세트 중 하나를 도출하는 단계 및 상기 도출된 제어 신호 세트를 상기 냉방 시스템 제어 장치로 전송하는 단계를 포함하는 냉방 시스템 제어 방법을 제공할 수 있다. Yet another embodiment of the present invention is a method for controlling a cooling system comprising the steps of receiving actual situation data from a cooling system control device installed in a target building for a plurality of cooling equipment included in the cooling system, Performing a rewarding operation on each of the plurality of control signal sets based on the actual situation data and the total energy consumption amount corresponding to each of the plurality of control signal sets based on reinforcement learning, Deriving one of the plurality of control signal sets based on the operation, and transmitting the derived control signal set to the cooling system control device.

상술한 과제 해결 수단은 단지 예시적인 것으로서, 본 발명을 제한하려는 의도로 해석되지 않아야 한다. 상술한 예시적인 실시예 외에도, 도면 및 발명의 상세한 설명에 기재된 추가적인 실시예가 존재할 수 있다.The above-described task solution is merely exemplary and should not be construed as limiting the present invention. In addition to the exemplary embodiments described above, there may be additional embodiments described in the drawings and the detailed description of the invention.

전술한 본 발명의 과제 해결 수단 중 어느 하나에 의하면, 냉동기, 냉각탑, 순환펌프 등 개별로 제어되던 시스템을 냉방 시스템 전체를 고려하여 최적으로 제어하는 대상 건물의 냉방 시스템을 제어하는 클라우드 서버 및 방법, 냉방 시스템 제어 장치를 제공할 수 있다. BAS(Building Automation System) 위주의 오프라인의 운영이 아닌, 클라우드 기반의 실시간 온라인으로 최적 운영하는 대상 건물의 냉방 시스템을 제어하는 클라우드 서버 및 방법, 냉방 시스템 제어 장치를 제공할 수 있다. 건물 에너지 시뮬레이션 기술 기반의 가상 데이터를 활용하여 모델 및 알고리즘 설계를 위한 학습데이터를 확보함으로써, 신축 공간에 대해서도 적용가능한 대상 건물의 냉방 시스템을 제어하는 클라우드 서버 및 방법, 냉방 시스템 제어 장치를 제공할 수 있다.According to any one of the above-described objects of the present invention, a cloud server and method for controlling a cooling system of a target building that optimally controls a system that has been individually controlled, such as a refrigerator, a cooling tower, A cooling system control device can be provided. It is possible to provide a cloud server and method for controlling an air-conditioning system of an object to be optimally operated in real-time online based on a cloud, rather than an off-line operation focused on a building automation system (BAS). A cloud server and method for controlling a cooling system of a target building applicable to a new space, and a cooling system control device can be provided by acquiring learning data for designing models and algorithms by utilizing virtual data based on building energy simulation technology have.

도 1은 본 발명의 일 실시예에 따른 냉방 제어 시스템의 구성도이다.
도 2는 본 발명의 일 실시예에 따른 냉방 시스템 제어 장치의 구성도이다.
도 3은 본 발명의 일 실시예에 따른 냉방 시스템 제어 장치에서 클라우드 서버와 연동하여 대상 건물의 냉방 시스템을 제어하는 방법의 순서도이다.
도 4는 본 발명의 일 실시예에 따른 클라우드 서버의 구성도이다.
도 5a 및 도 5b는 본 발명의 일 실시예에 따른 각 냉방 장치의 에너지 소비량에 대한 이율 배반 관계를 도시한 예시적인 도면이다.
도 6a 및 도 6b는 본 발명의 일 실시예에 따른 복수의 제어 신호 세트 중 하나를 도출하는 과정을 도시한 예시적인 도면이다.
도 7은 본 발명의 일 실시예에 따른 클라우드 서버에서 대상 건물의 냉방 시스템을 제어하는 방법의 순서도이다.
도 8은 본 발명의 일 실시예에 따른 냉방 제어 시스템에서 대상 건물의 냉방 시스템을 제어하는 과정을 도시한 동작 흐름도이다.
1 is a configuration diagram of a cooling control system according to an embodiment of the present invention.
2 is a configuration diagram of a cooling system control apparatus according to an embodiment of the present invention.
3 is a flowchart of a method for controlling a cooling system of a target building in cooperation with a cloud server in a cooling system control device according to an embodiment of the present invention.
4 is a configuration diagram of a cloud server according to an embodiment of the present invention.
FIGS. 5A and 5B are exemplary diagrams showing an interest rate betting relation with respect to energy consumption of each cooling apparatus according to an embodiment of the present invention. FIG.
6A and 6B are exemplary diagrams illustrating a process of deriving one of a plurality of control signal sets in accordance with an embodiment of the present invention.
7 is a flowchart illustrating a method of controlling a cooling system of a target building in a cloud server according to an exemplary embodiment of the present invention.
8 is a flowchart illustrating a process of controlling a cooling system of a target building in a cooling control system according to an embodiment of the present invention.

아래에서는 첨부한 도면을 참조하여 본 발명이 속하는 기술 분야에서 통상의 지식을 가진 자가 용이하게 실시할 수 있도록 본 발명의 실시예를 상세히 설명한다. 그러나 본 발명은 여러 가지 상이한 형태로 구현될 수 있으며 여기에서 설명하는 실시예에 한정되지 않는다. 그리고 도면에서 본 발명을 명확하게 설명하기 위해서 설명과 관계없는 부분은 생략하였으며, 명세서 전체를 통하여 유사한 부분에 대해서는 유사한 도면 부호를 붙였다.Hereinafter, embodiments of the present invention will be described in detail with reference to the accompanying drawings, which will be readily apparent to those skilled in the art. The present invention may, however, be embodied in many different forms and should not be construed as limited to the embodiments set forth herein. In order to clearly illustrate the present invention, parts not related to the description are omitted, and similar parts are denoted by like reference characters throughout the specification.

명세서 전체에서, 어떤 부분이 다른 부분과 "연결"되어 있다고 할 때, 이는 "직접적으로 연결"되어 있는 경우뿐 아니라, 그 중간에 다른 소자를 사이에 두고 "전기적으로 연결"되어 있는 경우도 포함한다. 또한 어떤 부분이 어떤 구성요소를 "포함"한다고 할 때, 이는 특별히 반대되는 기재가 없는 한 다른 구성요소를 제외하는 것이 아니라 다른 구성요소를 더 포함할 수 있는 것을 의미한다.Throughout the specification, when a part is referred to as being "connected" to another part, it includes not only "directly connected" but also "electrically connected" with another part in between . Also, when an element is referred to as "comprising ", it means that it can include other elements as well, without departing from the other elements unless specifically stated otherwise.

본 명세서에 있어서 '부(部)'란, 하드웨어에 의해 실현되는 유닛(unit), 소프트웨어에 의해 실현되는 유닛, 양방을 이용하여 실현되는 유닛을 포함한다. 또한, 1 개의 유닛이 2 개 이상의 하드웨어를 이용하여 실현되어도 되고, 2 개 이상의 유닛이 1 개의 하드웨어에 의해 실현되어도 된다. 한편, '~부'는 소프트웨어 또는 하드웨어에 한정되는 의미는 아니며, '~부'는 어드레싱 할 수 있는 저장 매체에 있도록 구성될 수도 있고 하나 또는 그 이상의 프로세서들을 재생시키도록 구성될 수도 있다. 따라서, 일 예로서 '~부'는 소프트웨어 구성요소들, 객체지향 소프트웨어 구성요소들, 클래스 구성요소들 및 태스크 구성요소들과 같은 구성요소들과, 프로세스들, 함수들, 속성들, 프로시저들, 서브루틴들, 프로그램 코드의 세그먼트들, 드라이버들, 펌웨어, 마이크로코드, 회로, 데이터, 데이터베이스, 데이터 구조들, 테이블들, 어레이들 및 변수들을 포함한다. 구성요소들과 '~부'들 안에서 제공되는 기능은 더 작은 수의 구성요소들 및 '~부'들로 결합되거나 추가적인 구성요소들과 '~부'들로 더 분리될 수 있다. 뿐만 아니라, 구성요소들 및 '~부'들은 디바이스 또는 보안 멀티미디어카드 내의 하나 또는 그 이상의 CPU들을 재생시키도록 구현될 수도 있다.In this specification, the term " part " includes a unit realized by hardware, a unit realized by software, and a unit realized by using both. Further, one unit may be implemented using two or more hardware, or two or more units may be implemented by one hardware. On the other hand, 'to' is not limited to software or hardware, 'to' may be configured to be an addressable storage medium, and may be configured to play one or more processors. Thus, by way of example, 'parts' may refer to components such as software components, object-oriented software components, class components and task components, and processes, functions, , Subroutines, segments of program code, drivers, firmware, microcode, circuitry, data, databases, data structures, tables, arrays, and variables. The functions provided in the components and components may be further combined with a smaller number of components and components or further components and components. In addition, the components and components may be implemented to play back one or more CPUs in a device or a secure multimedia card.

도 1은 본 발명의 일 실시예에 따른 냉방 제어 시스템의 구성도이다. 도 1을 참조하면, 냉방 제어 시스템(1)은 냉방 시스템 제어 장치(110), 클라우드 서버(120) 및 냉방 시스템(130)을 포함할 수 있다. 냉방 시스템 제어 장치(110), 클라우드 서버(120) 및 냉방 시스템(130)은 냉방 제어 시스템(1)에 의하여 제어될 수 있는 구성요소들을 예시적으로 도시한 것이다. 1 is a configuration diagram of a cooling control system according to an embodiment of the present invention. 1, the cooling control system 1 may include a cooling system control device 110, a cloud server 120, and a cooling system 130. The cooling system control device 110, the cloud server 120, and the cooling system 130 illustratively show the components that can be controlled by the cooling control system 1. [

도 1의 냉방 제어 시스템(1)의 각 구성요소들은 일반적으로 네트워크(network)를 통해 연결된다. 예를 들어, 도 1에 도시된 바와 같이, 냉방 시스템 제어 장치(110)는 클라우드 서버(120) 또는 냉방 시스템(130)과 동시에 또는 시간 간격을 두고 연결될 수 있다. Each component of the cooling control system 1 of Fig. 1 is generally connected via a network. For example, as shown in FIG. 1, the cooling system control apparatus 110 may be connected to the cloud server 120 or the cooling system 130 at the same time or at intervals.

네트워크는 단말들 및 서버들과 같은 각각의 노드 상호 간에 정보 교환이 가능한 연결 구조를 의미하는 것으로, 근거리 통신망(LAN: Local Area Network), 광역 통신망(WAN: Wide Area Network), 인터넷 (WWW: World Wide Web), 유무선 데이터 통신망, 전화망, 유무선 텔레비전 통신망 등을 포함한다. 무선 데이터 통신망의 일례에는 3G, 4G, 5G, 3GPP(3rd Generation Partnership Project), LTE(Long Term Evolution), WIMAX(World Interoperability for Microwave Access), 와이파이(Wi-Fi), 블루투스 통신, 적외선 통신, 초음파 통신, 가시광 통신(VLC: Visible Light Communication), 라이파이(LiFi) 등이 포함되나 이에 한정되지는 않는다. The network refers to a connection structure in which information can be exchanged between each node such as terminals and servers. The network includes a local area network (LAN), a wide area network (WAN), a wide area network (WWW) Wide Web, wired / wireless data communication network, telephone network, wired / wireless television communication network, and the like. Examples of wireless data communication networks include 3G, 4G, 5G, 3GPP, LTE, WIMAX, Wi-Fi, Bluetooth, infrared, Communications, Visible Light Communication (VLC), LiFi, and the like.

냉방 시스템 제어 장치(110)는 클라우드 서버(120)와 연동하여 대상 건물(100)에 설치된 냉방 시스템(130)을 제어할 수 있다. 구체적으로, 냉방 시스템 제어 장치(110)는 냉방 시스템(130)에 포함된 복수의 냉방 장비에 대한 실제 상황 데이터 정보를 수집하고, 수집된 실제 상황 데이터를 클라우드 서버(120)로 전송할 수 있다. The cooling system control unit 110 may control the cooling system 130 installed in the target building 100 in cooperation with the cloud server 120. Specifically, the cooling system control device 110 may collect actual situation data for a plurality of cooling devices included in the cooling system 130, and may transmit the collected actual situation data to the cloud server 120.

냉방 시스템 제어 장치(110)는 클라우드 서버(120)에 의해 생성된 복수의 제어 신호 세트 중 실제 상황 데이터에 기초하여 도출된 제어 신호 세트를 수신하고, 수신한 제어 신호 세트에 기초하여 복수의 냉방 장비를 제어할 수 있다. 이 때, 냉방 시스템 제어 장치(110)는 제어 신호 세트에 따라 대상 건물(100)에 대해 기설정된 목표 예상 불만족도에 대한 온열 쾌적감을 비교하여 복수의 냉방 장비를 제어할 수도 있다. The cooling system control device 110 receives a set of control signals derived based on actual situation data among a plurality of control signal sets generated by the cloud server 120, Can be controlled. At this time, the cooling system control device 110 may control the plurality of cooling equipments by comparing the warm comfort feeling of the target building 100 with the target expected dissatisfaction degree according to the control signal set.

예를 들어, 복수의 냉방 장비가 냉각탑(131) 및 냉동기(132)를 포함하는 경우, 냉방 시스템 제어 장치(110)는 제어 신호 세트에 따라 냉각탑(131)으로부터 냉동기(132)로 들어가는 냉각수의 입수 온도와 관련하여 발생되는 냉각탑(131)의 에너지 소비량 및 냉동기(132)의 에너지 소비량 간의 이율 배반 관계를 고려하여 냉각탑(131) 및 냉동기(132)를 제어할 수 있다. 다른 예를 들어, 복수의 냉방 장비가 냉수 펌프(133) 및 공조기(134)를 포함하는 경우, 냉방 시스템 제어 장치(110)는 제어 신호 세트에 따라 냉수 펌프(133)를 통해 제공하는 냉수 출수 유량에 따른 공조기(134)에서 제공하는 급기 온도와 관련하여 발생되는 냉수 펌프(133)의 에너지 소비량 및 공조기(134)를 에너지 소비량 간의 이율 배반 관계를 고려하여 냉수 펌프(133) 및 공조기(134)를 제어할 수 있다. For example, when a plurality of cooling equipments includes the cooling tower 131 and the refrigerator 132, the cooling system control device 110 acquires the cooling water from the cooling tower 131 to the refrigerator 132 according to the control signal set It is possible to control the cooling tower 131 and the freezer 132 in consideration of the interest rate betal relationship between the energy consumption amount of the cooling tower 131 and the energy consumption amount of the freezer 132 generated in relation to the temperature. For example, when a plurality of cooling equipments include the cold water pump 133 and the air conditioner 134, the cooling system control device 110 sets the cold water outflow rate The cold water pump 133 and the air conditioner 134 are controlled in consideration of the energy consumption amount of the cold water pump 133 generated in relation to the supply air temperature provided by the air conditioner 134 according to the air conditioner 134 and the rate- Can be controlled.

냉방 시스템 제어 장치(110)는 클라우드 서버(120)로부터 수신한 제어 신호 세트에 기초하여 제어된 복수의 냉방 장비로부터 새롭게 생성된 실제 상황 데이터를 수집하고, 새롭게 생성된 실제 상황 데이터를 클라우드 서버(120)로 전송할 수 있다. The cooling system control device 110 collects the actual situation data newly generated from the plurality of cooling devices controlled based on the control signal set received from the cloud server 120 and transmits the newly generated actual situation data to the cloud server 120 ).

클라우드 서버(120)는 냉방 시스템 제어 장치(110)와 연동하여 대상 건물(100)에 설치된 냉방 시스템(130)에 대해 최적화된 제어 조합을 도출할 수 있다. 구체적으로, 클라우드 서버(120)는 대상 건물(100)에 설치된 냉방 시스템 제어 장치(110)로부터 냉방 시스템(130)에 포함된 복수의 냉방 장비에 대한 실제 상황 데이터를 수신할 수 있다. The cloud server 120 can derive an optimized control combination for the cooling system 130 installed in the target building 100 in conjunction with the cooling system control device 110. [ Specifically, the cloud server 120 may receive actual situation data for a plurality of cooling devices included in the cooling system 130 from the cooling system control device 110 installed in the target building 100.

클라우드 서버(120)는 냉방 시스템(130)을 제어하기 위한 복수의 제어 신호 세트를 생성하고, 강화 학습을 기반으로 실제 상황 데이터에 기초하여 복수의 제어 신호 세트 각각에 대해 리워딩 작업을 수행하고, 리워딩 작업에 기초하여 복수의 제어 신호 세트 중 하나를 도출할 수 있다. 제어 신호 세트는 각 냉방 장비의 온/오프 제어값, 각 냉방 장비에 대한 제어를 통해 제공하려는 냉수 출수 온도, 냉수 출수 유량, 급기 온도, 급기 풍량 등을 포함하며, 복수의 냉방 장비 각각에 대한 제어값의 조합으로 구성되는 것일 수 있다. 이 때, 클라우드 서버(120)는 실제 상황 데이터와 대응하는 기준 에너지 소비량과 복수의 제어 신호 세트 각각에 대응하는 전체 에너지 소비량에 기초하여 복수의 제어 신호 세트 각각에 리워드를 부여할 수 있다. The cloud server 120 generates a plurality of sets of control signals for controlling the cooling system 130 and performs a rewarding operation on each of the plurality of control signal sets based on the actual situation data based on the reinforcement learning, One of a plurality of control signal sets can be derived based on the rewound operation. The control signal set includes an on / off control value of each cooling equipment, a cold water outflow temperature to be provided through control for each cooling equipment, a cold water outflow rate, an air supply temperature, an air supply air volume, Values. ≪ / RTI > At this time, the cloud server 120 can reward each of the plurality of control signal sets based on the reference energy consumption amount corresponding to the actual situation data and the total energy consumption amount corresponding to each of the plurality of control signal sets.

구체적으로, 클라우드 서버(120)는 기준 에너지 소비량이 제어 신호 세트에 의해 제어되는 복수의 냉방 장비가 소비하는 전체 에너지 소비량을 초과하는 정도에 따라 복수의 제어 신호 세트 각각에 리워드를 부여하고, 리워드가 부여된 복수의 제어 신호 세트 중 리워드가 높은 하나를 도출할 수 있다. 이 때, 클라우드 서버(120)는 각 냉방 장비의 에너지 소비량에 대한 이율 배반(trade-off) 관계를 고려하여 복수의 제어 신호 세트 각각에 리워드를 부여할 수 있다. Specifically, the cloud server 120 assigns a reward to each of a plurality of control signal sets according to the degree that the reference energy consumption amount exceeds the total energy consumption consumed by the plurality of cooling equipment controlled by the control signal set, It is possible to derive one of a plurality of control signal sets to which a high reward is given. At this time, the cloud server 120 may award a reward to each of the plurality of control signal sets in consideration of a trade-off relationship with respect to the energy consumption amount of each cooling equipment.

예를 들어, 복수의 냉방 장비가 냉각탑(131) 및 냉동기(132)를 포함하는 경우, 클라우드 서버(120)는냉각탑(131)으로부터 냉동기(132)로 들어가는 냉각수의 입수 온도와 관련하여 발생하는 냉각탑(131)의 에너지 소비량 및 냉동기(132)의 에너지 소비량 간의 이율 배반 관계를 고려할 수 있다. For example, when a plurality of cooling equipments include the cooling tower 131 and the refrigerator 132, the cloud server 120 may control the temperature of the cooling tower 131, which is generated in relation to the temperature of the cooling water entering the refrigerator 132 from the cooling tower 131, The relationship between the energy consumption of the refrigerator 131 and the energy consumption of the refrigerator 132 can be considered.

다른 예를 들어, 복수의 냉방 장비가 냉수 펌프(133) 및 공조기(134)를 포함하는 경우, 클라우드 서버(120)는 냉수 펌프(133)를 통해 제공하는 냉수 출수 유량에 따른 공조기에서 제공하는 급기 온도와 관련하여 발생하는 냉수 펌프(133)의 에너지 소비량 및 공조기(134)의 에너지 소비량 간의 이율 배반 관계를 고려할 수 있다. For example, in a case where a plurality of cooling equipments include the cold water pump 133 and the air conditioner 134, the cloud server 120 may control the supply of air supplied by the air conditioner according to the flow rate of cold water supplied through the cold water pump 133 The relationship between the energy consumption of the cold water pump 133 and the energy consumption of the air conditioner 134 can be considered.

클라우드 서버(120)는 실제 상황 데이터에 기초하여 도출된 예상 평균온열감을 기반으로 예상 불만족도를 도출하고, 도출된 예상 불만족도를 이용하여 대상 건물(100) 내의 재실자에 대한 온열 쾌적감을 도출하고, 온열 쾌적감을 더 고려하여 복수의 제어 신호 세트 각각에 리워드를 부여할 수 있다. 이 때, 클라우드 서버(120)는 대상 건물(100)에 대해 기설정된 목표 예상 불만족도와 온열 쾌적감을 비교하여 복수의 제어 신호 세트 각각에 리워드를 부여할 수 있다. The cloud server 120 derives the expected dissatisfaction degree based on the estimated average warmth sensation derived based on the actual situation data and derives the warmth sensation for the occupant in the target building 100 using the derived expected dissatisfaction degree, It is possible to give a reward to each of a plurality of control signal sets in consideration of warm comfort. At this time, the cloud server 120 compares the target anticipated dissatisfaction with the warm feeling of comfort to the target building 100, and gives rewards to each of the plurality of control signal sets.

클라우드 서버(120)는 냉방 시스템(130)에 대한 시뮬레이션 모델을 통해 가상 데이터를 수집할 수 있다. 클라우드 서버(120)는 가상 데이터를 이용하여 실제 상황 데이터를 보완하고, 보완된 실제 상황 데이터에 기초하여 복수의 제어 신호 세트 각각에 대한 리워딩 작업을 수행할 수 있다. The cloud server 120 may collect virtual data through a simulation model for the cooling system 130. [ The cloud server 120 may supplement the actual situation data using virtual data and perform a rewinding operation on each of the plurality of control signal sets based on the supplemented actual situation data.

클라우드 서버(120)는 도출된 제어 신호 세트를 냉방 시스템 제어 장치(110)로 전송할 수 있다. 또한, 클라우드 서버(120)는 냉방 시스템 제어 장치(110)로부터 전송된 제어 신호 세트에 기초하여 제어된 복수의 냉방 장비로부터 새롭게 생성된 실제 상황 데이터를 수신할 수 있다. The cloud server 120 may send the derived control signal set to the cooling system control device 110. In addition, the cloud server 120 can receive the newly created actual situation data from a plurality of cooling devices controlled based on the control signal set transmitted from the cooling system control device 110. [

냉방 시스템(130)은 대상 건물(100)에 설치되어 대상 건물(100) 내의 냉방 상태를 제공하기 위한 시스템일 수 있다. 구체적으로, 냉방 시스템(130)은 냉방 시스템(130)에 포함됨 복수의 냉방 장비에 대한 실제 상황 데이터 정보를 냉방 시스템 제어 장치(110)로 전송할 수 있다. 이러한 냉방 시스템(130)에 포함된 복수의 냉방 장비는 냉동기(132)의 냉수 생산에 필요한 냉각수를 공급하는 냉각탑(131), 냉수를 생산하는 냉동기(132), 냉수의 순환을 위한 냉수 펌프(133), 생산된 냉수를 이용하여 저온의 공기를 실내로 공급하는 공조기(134), 냉각수의 순환을 위한 냉각수 펌프(135) 등을 포함할 수 있다. The cooling system 130 may be a system installed in the target building 100 to provide a cooling state in the target building 100. Specifically, the cooling system 130 may transmit actual situation data information for a plurality of cooling devices included in the cooling system 130 to the cooling system control device 110. The plurality of cooling equipments included in the cooling system 130 includes a cooling tower 131 for supplying cooling water required for producing cold water of the freezer 132, a freezer 132 for producing cold water, a cold water pump 133 for circulating the cold water An air conditioner 134 for supplying low temperature air to the room using the produced cold water, a cooling water pump 135 for circulating the cooling water, and the like.

냉방 시스템(130)은 실제 상황 데이터 정보에 기초하여 도출된 제어 신호 세트에 따라 냉방 시스템 제어 장치(110)에 의해 제어될 수 있다. 예를 들어, 냉방 시스템(130)에 포함된 복수의 냉방 장비는 도출된 제어 신호 세트에 따라 각각 제어될 수 있다. The cooling system 130 may be controlled by the cooling system control device 110 according to a set of control signals derived based on actual situation data information. For example, a plurality of cooling equipment contained in the cooling system 130 may be controlled according to the derived control signal set, respectively.

냉방 시스템(130)은 냉방 시스템 제어 장치(110)에 의해 제어 신호 세트에 따라 제어되는 경우, 새롭게 생성된 실제 상황 데이터를 냉방 시스템 제어 장치(110)로 전송할 수 있다. When the cooling system 130 is controlled according to the control signal set by the cooling system control device 110, it may transmit the newly generated actual situation data to the cooling system control device 110.

도 2는 본 발명의 일 실시예에 따른 냉방 시스템 제어 장치의 구성도이다. 도 2를 참조하면, 냉방 시스템 제어 장치(110)는 수집부(210), 전송부(220), 수신부(230) 및 제어부(240)를 포함할 수 있다. 2 is a configuration diagram of a cooling system control apparatus according to an embodiment of the present invention. 2, the cooling system control apparatus 110 may include a collecting unit 210, a transmitting unit 220, a receiving unit 230, and a control unit 240.

수집부(210)는 냉방 시스템(130)에 포함된 복수의 냉방 장비에 대한 실제 상황 데이터 정보를 수집할 수 있다. 또한, 수집부(210)는 수신한 제어 신호 세트에 기초하여 복수의 냉방 장치로부터 새롭게 생성된 실제 상황 데이터를 수집할 수도 있다. The collection unit 210 may collect actual situation data for a plurality of cooling devices included in the cooling system 130. Also, the collecting unit 210 may collect actual situation data newly generated from a plurality of cooling apparatuses based on the received control signal set.

전송부(220)는 실제 상황 데이터를 클라우드 서버(120)로 전송할 수 있다. 또한, 전송부(220)는 수집부(210)에서 새롭게 생성된 실제 상황 데이터를 수집한 경우, 새롭게 생성된 실제 상황 데이터를 클라우드 서버(120)로 전송할 수 있다. The transmitting unit 220 may transmit the actual situation data to the cloud server 120. In addition, when the collecting unit 210 collects the actual situation data newly generated, the transmitting unit 220 may transmit the newly generated actual situation data to the cloud server 120. [

수신부(230)는 클라우드 서버(120)에 의해 생성된 복수의 제어 신호 세트 중 실제 상황 데이터에 기초하여 도출된 제어 신호 세트를 수신할 수 있다. 여기서, 제어 신호 세트는 강화 학습을 기반으로 실제 상황 데이터에 기초하여 리워딩 작업이 수행된 복수의 제어 신호 세트로부터 도출된 것일 수 있다. The receiving unit 230 may receive the control signal set derived based on the actual situation data among the plurality of sets of control signals generated by the cloud server 120. [ Here, the control signal set may be derived from a plurality of control signal sets on which a rewarding operation is performed based on actual situation data based on reinforcement learning.

제어부(240)는 수신한 제어 신호 세트에 기초하여 복수의 냉방 장비를 제어할 수 있다. The control unit 240 can control a plurality of cooling equipments based on the received control signal set.

예를 들어, 복수의 냉방 장비가 냉각탑(131) 및 냉동기(132)를 포함하는 경우, 제어부(240)는 제어 신호 세트에 따라 냉각탑(131)으로부터 냉동기(132)로 들어가는 냉각수의 입수 온도와 관련하여 발생되는 냉각탑(131)의 에너지 소비량 및 냉동기(132)의 에너지 소비랑 간의 이율 배반 관계를 고려하여 냉각탑(131) 및 냉동기(132)를 제어할 수 있다. For example, when a plurality of cooling equipments include the cooling tower 131 and the freezer 132, the control unit 240 may control the temperature of the cooling water entering the freezer 132 from the cooling tower 131 The cooling tower 131 and the freezer 132 can be controlled in consideration of the energy consumption amount of the cooling tower 131 generated by the cooling tower 131 and the energy consumption rate of the freezer 132. [

다른 예를 들어, 복수의 냉방 장비가 냉수 펌프(133) 및 공조기(134)를 포함하는 경우, 제어부(240)는 제어 신호 세트에 따라 냉수 펌프(133)를 통해 제공하는 냉수 출수 유량에 따른 공조기(134)에서 제공하는 급기 온도와 관련하여 발생되는 냉수 펌프(133)의 에너지 소비량 및 공조기(134)의 에너지 소비량 간의 이율 배반 관계를 고려하여 냉수 펌프(133) 및 공조기(134)를 제어할 수 있다. For example, when a plurality of cooling equipments include the cold water pump 133 and the air conditioner 134, the control unit 240 controls the air conditioner 134 according to the set cold water flow rate through the cold water pump 133, It is possible to control the cold water pump 133 and the air conditioner 134 in consideration of the rate-of-return relationship between the energy consumption amount of the cold water pump 133 and the energy consumption amount of the air conditioner 134, have.

제어부(240)는 제어 신호 세트에 따라 대상 건물(100)에 대해 기설정된 목표 예상 불만족도에 대한 온열 쾌적감을 비교하여 복수의 냉방 장비를 제어할 수 있다. 제어 신호 세트는 대상 건물(100) 내의 재실자에 대한 온열 쾌적감이 더 고려되어 각각 리워드를 부여받은 복수의 제어 신호 세트로부터 도출된 것이며, 온열 쾌적감은 실제 상황 데이터에 기초하여 도출된 예상 평균온열감을 기반으로 도출된 예상 불만족도를 이용하여 도출된 것일 수 있다. The control unit 240 can control a plurality of cooling equipments by comparing the warm feeling of comfort with the target building 100 according to a predetermined target dissatisfaction degree according to the control signal set. The control signal set is derived from a plurality of control signal sets that are respectively given rewards in consideration of the warm comfort to occupants in the target building 100. The warm comfort sense is obtained by calculating the estimated average warming sensation derived based on the actual situation data Based on the expected dissatisfaction level.

도 3은 본 발명의 일 실시예에 따른 냉방 시스템 제어 장치에서 클라우드 서버와 연동하여 대상 건물의 냉방 시스템을 제어하는 방법의 순서도이다. 도 3에 도시된 냉방 제어 시스템(1)에 의하여 수행되는 클라우드 서버(120)와 연동하여 대상 건물(100)의 냉방 시스템(130)을 제어하는 방법은 도 1 및 도 2에 도시된 실시예에 따라 시계열적으로 처리되는 단계들을 포함한다. 따라서, 이하 생략된 내용이라고 하더라도 도 1 및 도 2에 도시된 실시예에 따른 냉방 시스템 제어 장치(110)에 의해 수행되는 클라우드 서버(120)와 연동하여 대상 건물(100)의 냉방 시스템(130)을 제어하는 방법에도 적용된다. 3 is a flowchart of a method for controlling a cooling system of a target building in cooperation with a cloud server in a cooling system control device according to an embodiment of the present invention. The method of controlling the cooling system 130 of the target building 100 in conjunction with the cloud server 120 performed by the cooling control system 1 shown in FIG. 3 is the same as that of the embodiment shown in FIGS. 1 and 2 And then processes it in a time-series manner. 1 and 2, the air conditioning system 130 of the target building 100 is interlocked with the cloud server 120 performed by the cooling system control apparatus 110 according to the embodiment shown in FIGS. 1 and 2, Is also applied.

단계 S310에서 냉방 시스템 제어 장치(110)는 냉방 시스템(130)에 포함된 복수의 냉방 장비에 대한 실제 상황 데이터 정보를 수집할 수 있다. In step S310, the cooling system control apparatus 110 may collect actual situation data information for a plurality of cooling apparatuses included in the cooling system 130. [

단계 S320에서 냉방 시스템 제어 장치(110)는 실제 상황 데이터를 클라우드 서버(120)로 전송할 수 있다. In step S320, the cooling system control device 110 may transmit the actual situation data to the cloud server 120. [

단계 S330에서 냉방 시스템 제어 장치(110)는 클라우드 서버(120)에 의해 생성된 복수의 제어 신호 세트 중 실제 상황 데이터에 기초하여 도출된 제어 신호 세트를 수신할 수 있다. In step S330, the cooling system control device 110 can receive the control signal set derived based on the actual situation data among the plurality of control signal sets generated by the cloud server 120. [

단계 S340에서 냉방 시스템 제어 장치(110)는 수신한 제어 신호 세트에 기초하여 복수의 냉방 장치를 제어할 수 있다. In step S340, the cooling system control device 110 can control a plurality of cooling devices based on the received control signal set.

상술한 설명에서, 단계 S310 내지 S340은 본 발명의 구현예에 따라서, 추가적인 단계들로 더 분할되거나, 더 적은 단계들로 조합될 수 있다. 또한, 일부 단계는 필요에 따라 생략될 수도 있고, 단계 간의 순서가 전환될 수도 있다.In the above description, steps S310 to S340 may be further divided into further steps or combined into fewer steps, according to an embodiment of the present invention. In addition, some of the steps may be omitted as necessary, and the order between the steps may be switched.

도 4는 본 발명의 일 실시예에 따른 클라우드 서버의 구성도이다. 도 4를 참조하면, 클라우드 서버(120)는 수신부(410), 도출부(420), 전송부(430) 및 시뮬레이션부(440)를 포함할 수 있다. 4 is a configuration diagram of a cloud server according to an embodiment of the present invention. 4, the cloud server 120 may include a receiving unit 410, an output unit 420, a transmitting unit 430, and a simulation unit 440.

수신부(410)는 대상 건물(100)에 설치된 냉방 시스템 제어 장치(110)로부터 냉방 시스템에 포함된 복수의 냉방 장비에 대한 실제 상황 데이터를 수신할 수 있다. 또한, 수신부(410)는 냉방 시스템 제어 장치로부터 전송된 제어 신호 세트에 기초하여 제어된 복수의 냉방 장치로부터 새롭게 생성된 실제 상황 데이터를 수신할 수 있다. 복수의 냉방 장비는 예를 들어, 냉동기, 냉각탑, 냉수 펌프, 냉각수 펌프 및 공조기 등을 포함할 수 있다. The receiving unit 410 can receive actual situation data for a plurality of cooling equipment included in the cooling system from the cooling system control unit 110 installed in the target building 100. [ The receiving unit 410 can also receive newly generated actual situation data from a plurality of cooling devices controlled based on the control signal set transmitted from the cooling system control device. The plurality of cooling equipments may include, for example, a refrigerator, a cooling tower, a cold water pump, a cooling water pump, an air conditioner, and the like.

도출부(420)는 냉방 시스템(130)에 포함된 복수의 냉방 장비들의 이율배반(trade-off) 관계를 종합적으로 고려하여 최적의 냉방 시스템 제어 조합을 도출할 수 있다. 예를 들어, 도출부(420)는 대상 공간의 냉방부하(Qcool)를 만족하고 전체 냉방 시스템의 에너지 소비(Etotal)를 최소화 하는 냉방 시스템 내 개별 장비들의 제어 조합을 도출할 수 있다.The derivation unit 420 may derive an optimal cooling system control combination by comprehensively considering the trade-off relationship among a plurality of cooling equipment included in the cooling system 130. [ For example, the derivation unit 420 may derive a control combination of individual devices in the cooling system that satisfies the cooling load (Qcool) of the target space and minimizes the energy consumption (Etotal) of the entire cooling system.

예를 들어, 도출부(420)는 냉방 시스템(130)을 제어하기 위한 복수의 제어 신호 세트를 생성하고, 강화 학습을 기반으로 실제 상황 데이터에 기초하여 복수의 제어 신호 세트 각각에 대해 리워딩 작업을 수행할 수 있다. For example, the derivation unit 420 may generate a plurality of control signal sets for controlling the cooling system 130, and may perform a rewarding operation on each of the plurality of control signal sets based on real- Can be performed.

예를 들어, 도출부(420)는 냉방 부하 예측 기반으로 하는 냉동기 전체 COP(Coefficient of Performance)를 최대화하는 부하 배분 알고리즘/냉동기 대수 최적 제어 알고리즘, 냉방 부하 예측 기반으로 냉동기 전체 에너지 소비를 최소화하는 냉수 출구 온도 최적 제어 알고리즘, 외기의 습구온도 예측을 기반으로 냉각탑 전체 에너지 소비를 최소화하는 냉각탑 팬 운전 최적 제어 알고리즘, 외기 습구온도 및 냉방부하를 기반으로 냉방 시스템 전체 에너지 소비를 최소화하는 냉방 시스템 최적 제어 알고리즘을 이용한 강화학습 알고리즘 기반의 리워딩 작업을 수행할 수 있다. For example, the derivation unit 420 may include a load allocation algorithm / chiller logarithmic optimal control algorithm that maximizes the COP (Coefficient of Performance) of the refrigerator based on the cooling load prediction, Optimum control algorithm for outlet temperature, Cooling tower fan operation optimal cooling algorithm to minimize total energy consumption of cooling tower based on predicted wetting temperature of outside air, Cooling system based on outside air temperature and cooling load, Cooling system optimal control algorithm to minimize total energy consumption Based re-learning operation using the reinforcement learning algorithm.

냉방 부하(Qcool)는 다음의 수학식 1로 나타내어 질 수 있다. The cooling load ( Qcool ) can be expressed by the following equation (1).

Figure pat00001
Figure pat00001

여기서, Qcool은 냉방부하(W)이고, Trchw는 냉동기로 들어오는 냉수의 온도인 냉수 환수 온도(℃), Tschw는 냉동기에서 나가는 냉수의 온도인 냉수 출수 온도(℃),Vschw는 냉동기에서 나가고 들어오는 냉수의 양인 냉수 유량(kg/s), Cp는 물의 비열(J/kg℃)을 나타낸다. Here, Q cool the cooling load (W) and, T rchw is a cold water return temperature (℃) the temperature of the cold water entering the freezer, T schw is (℃) temperature of cold water outlet temperature of the water leaving the chiller, V schw the refrigerator (Kg / s), and C p is the specific heat of water (J / kg ° C).

전체 냉방 시스템의 에너지 소비는 다음의 수학식 2로 나타내어 질 수 있다. The energy consumption of the entire cooling system can be expressed by the following equation (2).

Figure pat00002
Figure pat00002

여기서, Etotal은 전체 냉방 시스템의 에너지 소비량(kWh)이고, Echiller는 전체 냉동기의 에너지 소비량(kWh)이고, Etower는 전체 냉각탑의 에너지 소비량(kWh)이고, Epumpchw는 전체 냉수 순환 펌프의 에너지 소비량(kWh)이고, Epumpcw는 전체 냉각수 순환 펌프의 에너지 소비량(kWh)이고, Eahu는 전체 공조기의 에너지 소비량(kWh)을 나타낸다. Where E total is the energy consumption of the entire cooling system (kWh), E chiller is the energy consumption of the entire refrigerator (kWh), E tower is the energy consumption of the entire cooling tower (kWh), and E pumpchw is the total cooling water circulation pump (KWh), E pumpcw is the energy consumption of the entire cooling water circulation pump (kWh), and E ahu is the energy consumption of the entire air conditioner (kWh).

제어 신호 세트는 각 냉방 장치의 온/오프 제어값, 각 냉방 장치에 대한 제어를 통해 제공하려는 냉수 출수 온도, 냉수 출수 유량, 급기 온도, 급기 풍량 등을 포함하며, 복수의 냉방 장비 각각에 대한 제어값으로 조합될 수 있다. 제어 신호 세트는 예를 들어, 전체 에너지 소비량이 전체 기준소비량보다 낮으면 +1, 낮으면 -1, 대상 공간의 예상불만족도가 10%를 넘지 않으면 +1, 넘으면 -1로 리워드가 부여될 수 있다. The control signal set includes an on / off control value of each cooling device, a cold water outflow temperature to be provided through control for each cooling device, a cold water outflow rate, an air supply temperature, an air supply air volume, . ≪ / RTI > A set of control signals can be given, for example, +1 if the total energy consumption is below the total reference consumption, -1 if it is lower, +1 if the expected dissatisfaction of the target space does not exceed 10% have.

구체적으로, 전체 냉방 시스템의 제어 신호 세트는 다음의 수학식 3으로 나타내어 질 수 있다. Specifically, the control signal set of the entire cooling system can be expressed by the following equation (3).

Figure pat00003
Figure pat00003

여기서, Ctotal은 전체 냉방 시스템의 제어 신호 세트이고, Pchiller는 냉동기의 개별 온(on)/오프(off) 제어값이고, Ptower는 냉각탑의 온(on)/오프(off) 제어값이고, Tsetchw는 냉수 출수 설정온도 제어값(℃)이고, Vsetchw는 냉수 출수 설정유량 제어값(kg/s)이고, Tsetsa는 공조기 급기 설정온도 제어값(℃)이고, Vsetsa는 공조기 급기 설정풍량 제어값(kg/s)을 나타낸다. Where C total is the control signal set for the entire cooling system, P chiller is the individual on / off control value of the refrigerator, P tower is the on / off control value of the cooling tower , , T setchw is cold heading set point control value (℃), V setchw the cold water outflow pipe set flow rate control value (kg / s) and, T setsa air conditioner and the air supply set point control value (℃), V setsa air conditioner supply air Indicates the set air flow control value (kg / s).

도출부(420)는 가상 데이터를 이용하여 실제 상황 데이터를 보완하고, 보완된 실제 상황 데이터에 기초하여 복수의 제어 신호 세트 각각에 대한 리워딩 작업을 수행할 수 있다. The derivation unit 420 may supplement the actual situation data using the virtual data and perform a rewinding operation on each of the plurality of control signal sets based on the supplemented actual situation data.

도출부(420)는 실제 상황 데이터와 대응하는 기준 에너지 소비량과 복수의 제어 신호 세트 각각에 대응하는 전체 에너지 소비량에 기초하여 복수의 제어 신호 세트 각각에 리워드를 부여할 수 있다. 이 때, 도출부(420)는 각 냉방 장치의 에너지 소비량에 대한 이율 배반(trade-off) 관계를 고려하여 복수의 제어 신호 세트 각각에 리워드를 부여할 수 있다. 이러한 각 냉방 장비의 에너지 소비량에 대한 이율 배반 관계를 고려하는 과정에 대해서는 도 5a 및 도 5b를 통해 상세히 설명하도록 한다. The derivation unit 420 may reward each of the plurality of control signal sets based on the reference energy consumption amount corresponding to the actual situation data and the total energy consumption amount corresponding to each of the plurality of control signal sets. At this time, the derivation unit 420 may give a reward to each of the plurality of control signal sets in consideration of a trade-off relationship with respect to the energy consumption amount of each cooling apparatus. The process of considering the interest rate betting relation to the energy consumption amount of each cooling equipment will be described in detail with reference to FIGS. 5A and 5B.

도 5a 및 도 5b는 본 발명의 일 실시예에 따른 각 냉방 장치의 에너지 소비량에 대한 이율 배반 관계를 도시한 예시적인 도면이다. FIGS. 5A and 5B are exemplary diagrams showing an interest rate betting relation with respect to energy consumption of each cooling apparatus according to an embodiment of the present invention. FIG.

도 5a는 본 발명의 일 실시예에 따른 냉각탑의 에너지 소비량과 냉동기의 에너지 소비량 간의 이율 배반 관계를 도시한 예시적인 도면이다. 복수의 냉방 장치가 냉각탑(131) 및 냉동기(132)를 포함하는 경우, 도출부(420)는 냉각탑(131)으로부터 냉동기(132)로 들어가는 냉각수의 입수 온도(510)와 관련하여 발생하는 냉각탑(131) 및 냉동기(132)의 에너지 소비량(520) 간의 이율 배반 관계를 고려할 수 있다. FIG. 5A is an exemplary diagram illustrating the relationship between the energy consumption of the cooling tower and the energy consumption of the freezer according to an embodiment of the present invention. FIG. When the plurality of cooling devices include the cooling tower 131 and the refrigerator 132, the derivation unit 420 calculates the temperature of the cooling tower 131, which is generated in relation to the temperature of the cooling water 510 entering the refrigerator 132 from the cooling tower 131 131 and the energy consumption 520 of the refrigerator 132 can be considered.

도 5a를 참조하면, 냉각수의 온도가 내려가면, 냉각탑의 에너지 소비량(530)이 증가하고, 냉동기의 에너지 소비량(540)이 저감되는 것을 알 수 있다. Referring to FIG. 5A, it can be seen that as the temperature of the cooling water decreases, the energy consumption 530 of the cooling tower increases and the energy consumption 540 of the refrigerator decreases.

도 5b는 본 발명의 일 실시예에 따른 냉수 펌프의 에너지 소비량과 공조기의 에너지 소비량 간의 이율 배반 관계를 도시한 예시적인 도면이다. 복수의 냉방 장치가 냉수 펌프(133) 및 공조기(134)를 포함하는 경우, 도출부(420)는 냉수 펌프(133)를 통해 제공하는 냉수 출수 유량(550)에 따른 공조기(134)에서 제공하는 급기 온도와 관련하여 발생하는 냉수 펌프(133) 및 공조기(134)의 에너지 소비량(560) 간의 이율 배반 관계를 고려할 수 있다. FIG. 5B is an exemplary diagram illustrating the relationship between the energy consumption of the cold water pump and the energy consumption of the air conditioner according to an embodiment of the present invention. When the plurality of cooling apparatuses include the cold water pump 133 and the air conditioner 134, the lead-out portion 420 may be provided by the air conditioner 134 according to the cold water outflow rate 550 provided through the cold water pump 133 It is possible to consider the interest rate betting relationship between the cold water pump 133 and the energy consumption amount 560 of the air conditioner 134 that occurs in relation to the air supply temperature.

도 5b를 참조하면, 냉수 출수 유량이 늘어나면, 냉수 펌프의 에너지 소비량(570)이 증가하나, 공조기의 에너지 소비량(580)이 저감되는 것을 알 수 있다.Referring to FIG. 5B, it can be seen that as the flow rate of the cold water increases, the energy consumption 570 of the cold water pump increases but the energy consumption 580 of the air conditioner decreases.

다시 도4로 돌아와서, 도출부(420)는 실제 상황 데이터에 기초하여 도출된 예상 평균온열감을 기반으로 예상 불만족도를 도출하고, 도출된 예상 불만족도를 이용하여 대상 건물(100) 내의 재실자에 대한 온열 쾌적감을 도출하고, 온열 쾌적감을 더 고려하여 복수의 제어 신호 세트 각각에 리워드를 부여할 수 있다. Referring again to FIG. 4, the derivation unit 420 derives the expected dissatisfaction degree based on the estimated average warming sensation derived based on the actual situation data, and calculates the expected dissatisfaction degree using the derived expected dissatisfaction degree, It is possible to derive a warm and pleasant feeling and to give a reward to each of a plurality of control signal sets with further consideration of warm comfort.

평균온열감(PMV, Predicted Meqn Vote)은 동일 환경에 노출된 많은 사람들의 온열감 척도에 대한 의사 표시(vote)의 평균치를 예측하는 것을 의미한다. 예를 들어, 온열감 척도는 무더움(hot, +3), 더움(warm, +2), 약간 더움(slightly warm, +1), 알맞음(neutral, 0), 약간 서늘함(slightly cool, -1), 서늘함(cool, -2), 추움(cold, -3)과 같이 7단계로 구성될 수 있다. Predicted Meqn Vote (PMV) means predicting the mean value of the vote for the warmth measure of many people exposed to the same environment. For example, the thermal sensation scale is hot, +3, warm (+2), slightly warm (+1), neutral (0), slightly cool (-1) , Cool (-2), cold (-3), and so on.

평균온열감의 지표는 활동량(metabolic rate), 착의량(thermal resistance), 온도(air temperature), 평균 복사온도(mean radiant temperature), 상대 기류 속도(relative air velocity), 수증기 분압(partial water vapour pressure)에 기초하여 도출되는 것으로, 열평형 유지를 위해 자동적으로 피부 온도를 조절하고 땀을 분비하게 되는 인체 열조절 시스템의 생리적 반응과 많은 사람으로부터 수집된 온열감 의사 표시를 통계학적으로 연관시킨 것일 수 있다. The average thermal sensation indexes are metabolic rate, thermal resistance, air temperature, mean radiant temperature, relative air velocity, partial water vapor pressure, , Which may be statistically related to the physiological response of the human body heat control system, which automatically adjusts the skin temperature and releases the sweat to maintain the thermal equilibrium, and the warming sensation signals collected from many people.

예상 불만족도(PPD, Predicted Percentage of Dissatisfied)는 많은 사람들 중 열적으로 불쾌적하게 느끼는 사람들의 비율을 예측하는 것으로, 예를 들어, 7단계의 온열감 척도 중 무더움(hot, +3), 더움(warm, +2), 서늘함(cool, -2), 추움(cold, -3)에 의사 표시를 하는 사람들의 비율을 예측하는 것일 수 있다.Predicted Percentage of Dissatisfied (PPD) predicts the percentage of people who feel thermally uncomfortable among many people. For example, among the seven levels of warmth, hot, +3, warm , Cold (-2), cold (-2), cold (-3), and so on.

예상 불만족도의 지표를 통해 많은 사람들 중 열적으로 불쾌적한 사람들의 숫자를 예측하여, 많은 사람들 중 열적으로 불쾌적한 것으로 예측된 사람들을 제외한 사람들의 경우, 열적으로 알맞음(neutral), 약간 더움(slightly warm), 약간 서늘(slightly cool)하다고 느끼고 있다고 판단할 수 있다. For those who predicted the number of people who were thermally insecure among many people through an indicator of expected dissatisfaction and who excluded those who were predicted to be thermally unpleasant among many people, they were found to be thermally neutral, slightly bland warm, and slightly cool.

온열 쾌적감(Acceptable thermal environments for comfort)은 열환경에 대해 만족을 표현하는 심리상태로 정의되며, 예를 들어, 온열 쾌적감은 예상 불만족도를 기설정된 정책에 따라 지표화/수치화한 것에 해당할 수 있다.Acceptable thermal environments for comfort is defined as a psychological state that expresses satisfaction with a thermal environment, for example, a warm comfort sense may correspond to indexing / quantifying the expected dissatisfaction according to a predetermined policy .

도출부(420)는 대상 건물(100)에 대해 기설정된 목표 예상 불만족도와 온열 쾌적감을 비교하여 복수의 제어 신호 세트 각각에 리워드를 부여할 수 있다. 예를 들어, 에너지 소비량이 전체 기준소비량보다 낮으면 +1, 높으면 -1, 대상 공간 예상 불만족도가 10%를 넘지 않으면 +1, 넘으면 -1로 부여할 수 있다. The derivation unit 420 may compare the target expected dissatisfaction with the warmth feeling of comfort to the target building 100 and give a reward to each of the plurality of control signal sets. For example, +1 if the energy consumption is lower than the total reference consumption amount, -1 if the energy consumption amount is lower than -1, 1 if the energy consumption amount does not exceed 10%, and -1 if the energy consumption amount is lower than the total reference consumption amount.

예상 불만족도는 대상 공간 별로 목표 예상 불만족율이 에너지 소비 저감과 온열 쾌적감 만족 간의 가중치 조정에 의해 변경될 수 있다. 예를 들어, 강화 학습의 리워드 산정 시, 대상 공간의 운영 목적, 상황 등에 따라, 예상 불만족도가 10% 이내 시 리워드를 +1로, 10% 초과 시 리워드를 -1로 설정된 조건을 20% 이내 시 리워드를 +1로, 20% 초과 시 리워드를 -1로 변경하여 온열 쾌적감 만족에 대한 가중치를 조정할 수 있다. The expected dissatisfaction rate can be changed by adjusting the weight between the energy consumption reduction and the thermal comfort sense. For example, depending on the purpose of operation of the reinforcement learning, the purpose of operation of the space, etc., the reward is less than 10% and the reward is set to -1 when the expected dissatisfaction is less than 10% The weight of the heat comfort sense can be adjusted by changing the reward to +1 when the reward is over 20% and the reward to -1.

도출부(420)는 리워딩 작업에 기초하여 복수의 제어 신호 세트 중 하나를 도출할 수 있다. 예를 들어, 도출부(420)는 기준 에너지 소비량이 제어 신호 세트에 의해 제어되는 복수의 냉방 장비가 소비하는 전체 에너지 소비량을 초과하는 정도에 따라 복수의 제어 신호 세트 각각에 리워드를 부여하고, 리워드가 부여된 복수의 제어 신호 세트 중 리워드가 높은 하나를 도출할 수 있다. 리워딩 작업에 기초하여 복수의 제어 신호 세트 중 하나를 도출하는 과정에 대해서는 도 6a 및 도 6b를 통해 상세히 설명하도록 한다. The derivation unit 420 may derive one of a plurality of control signal sets based on the rewound operation. For example, the derivation unit 420 may assign a reward to each of a plurality of control signal sets according to the degree that the reference energy consumption amount exceeds the total energy consumption consumed by a plurality of cooling equipment controlled by the control signal set, It is possible to derive one of the plurality of sets of control signals to which a high reward is given. A process of deriving one of a plurality of control signal sets based on the rewound operation will be described in detail with reference to FIGS. 6A and 6B.

도 6a 및 도 6b는 본 발명의 일 실시예에 따른 복수의 제어 신호 세트 중 하나를 도출하는 과정을 도시한 예시적인 도면이다. 6A and 6B are exemplary diagrams illustrating a process of deriving one of a plurality of control signal sets in accordance with an embodiment of the present invention.

도 6a는 본 발명의 일 실시예에 따른 복수의 제어 신호 세트를 도시한 예시적인 도면이다. 도 6a를 참조하면, 복수의 제어 신호 세트(600)는 각 냉방 장비에 대한 에너지 소비량(610)에 따라 가중치를 부가하여 리워드가 부여되고, 리워드가 부여된 복수의 제어 신호 세트(600) 중 리워드가 가장 높은 하나를 도출할 수 있다. 6A is an exemplary diagram illustrating a plurality of control signal sets in accordance with one embodiment of the present invention. Referring to FIG. 6A, a plurality of control signal sets 600 are weighted according to the energy consumption 610 for each cooling equipment, and are rewarded. The highest one can be derived.

예를 들어, 복수의 제어 신호 세트(600) 중 각 냉방 장비 간의 이율 배반 관계를 복합적으로 고려하여 전체 냉방 시스템의 에너지 소비를 최소화하는 제어 조합으로 '제어 신호 세트 B'(620)가 도출될 수 있다. For example, a 'control signal set B' 620 may be derived with a control combination that minimizes the energy consumption of the entire cooling system by taking into account the rate betting relationship between each cooling equipment among the plurality of control signal sets 600 have.

도 6b는 본 발명의 일 실시예에 따른 에너지 소비를 최소화하기 위해 도출된 제어 신호 세트의 제어 조합을 도시한 예시적인 도면이다. 도 6b를 참조하면, '제어 신호 세트 B'(620)는 '냉동기 1: 온(on), 냉동기 2: 오프(off), 냉각탑 1: 온(on), 냉각탑 2: 온(on), 냉수 출수 설정 온도: 7℃, 냉수 출수 설정 유량: 70kg/s, 공조기 급기 설정 온도: 16℃, 공조기 급기 설정 풍량: 1,000kg/s'로 조합된 것일 수 있다. 6B is an exemplary diagram illustrating a control combination of control signal sets derived to minimize energy consumption in accordance with an embodiment of the present invention. 6B, the 'control signal set B' 620 includes' refrigerator 1: on, refrigerator 2: off, cooling tower 1: on, cooling tower 2: on, A set temperature for outgoing water: 7 캜, a set flow rate for cold water outflow: 70 kg / s, an air conditioner supply set temperature: 16 캜, and an air conditioner set air flow rate: 1,000 kg / s.

다시 도 4로 돌아와서, 전송부(430)는 도출된 제어 신호 세트를 냉방 시스템 제어 장치(110)로 전송할 수 있다. 4, the transmission unit 430 may transmit the derived control signal set to the cooling system control unit 110. [

시뮬레이션부(440)는 냉방 시스템(130)에 대한 시뮬레이션 모델을 통해 가상 데이터를 수집할 수 있다. 즉, 본원 발명은 시뮬레이션부(440)를 통해 수집되는 가상 데이터를 이용하여 실제 상황 데이터를 보완하고, 보완된 실제 상황 데이터에 기초하여 복수의 제어 신호 세트 각각에 대한 리워딩 작업을 수행할 수 있다. The simulation unit 440 may collect virtual data through the simulation model for the cooling system 130. [ That is, the present invention can complement the actual situation data using the virtual data collected through the simulation unit 440, and perform the rewinding operation on each of the plurality of control signal sets based on the actual situation data supplemented .

본 발명에서는 강화 학습 알고리즘을 기반으로 한 리워딩 작업을 통해 대상 건물(100)의 환경 변화(대상 공간의 사용 용도 변경, 운영 스케줄 변경 등) 등에 효과적으로 적응하여 최적 제어가 가능하도록 할 수 있다. 또한, 타 기계 학습 알고리즘과 비교하여 상대적으로 특정 건물을 대상으로 개발된 알고리즘을 타 건물에 적용하여 운용하기 효과적이라는 장점을 갖는다. In the present invention, optimum control can be enabled by effectively adapting to a change in the environment of the target building 100 (change of use purpose of the target space, change of operation schedule, etc.) through a rewarding operation based on the reinforcement learning algorithm. In addition, it has an advantage that it is effective to apply the algorithm developed for a specific building relative to other machine learning algorithms to another building and operate it.

도 7은 본 발명의 일 실시예에 따른 냉방 제어 시스템에서 대상 건물의 냉방 시스템을 제어하는 방법의 순서도이다. 도 7에 도시된 클라우드 서버(120)에 의해 수행되는 대상 건물(100)의 냉방 시스템(130)을 제어하는 방법은 도 1 내지 도 6b에 도시된 실시예에 따라 시계열적으로 처리되는 단계들을 포함한다. 따라서, 이하 생략된 내용이라고 하더라도 도 1 내지 도 6b에 도시된 실시예에 따른 클라우드 서버(120)에 의해 수행되는 대상 건물(100)의 냉방 시스템(130)을 제어하는 방법에도 적용된다. 7 is a flowchart of a method of controlling a cooling system of a target building in a cooling control system according to an embodiment of the present invention. The method of controlling the cooling system 130 of the target building 100 performed by the cloud server 120 shown in Fig. 7 includes steps that are processed in a time-series manner according to the embodiment shown in Figs. 1 to 6B do. Accordingly, the present invention is also applicable to a method of controlling the cooling system 130 of the target building 100 performed by the cloud server 120 according to the embodiment shown in FIGS.

단계 S710에서 클라우드 서버(120)는 대상 건물(100)에 설치된 냉방 시스템 제어 장치(110)로부터 냉방 시스템에 포함된 복수의 냉방 장비에 대한 실제 상황 데이터를 수신할 수 있다. In step S710, the cloud server 120 may receive actual situation data for a plurality of cooling devices included in the cooling system from the cooling system control device 110 installed in the target building 100. [

단계 S720에서 클라우드 서버(120)는 냉방 시스템(130)을 제어하기 위한 복수의 제어 신호 세트를 생성할 수 있다. In step S720, the cloud server 120 may generate a plurality of control signal sets for controlling the cooling system 130. [

단계 S730에서 클라우드 서버(120)는 강화 학습을 기반으로 실제 상황 데이터 및 복수의 제어 신호 세트 각각에 대응하는 전체 에너지 소비량에 기초하여 복수의 제어 신호 세트 각각에 대해 리워딩 작업을 수행할 수 있다. In step S730, the cloud server 120 may perform a rewarding operation on each of the plurality of control signal sets based on the actual situation data and the total energy consumption amount corresponding to each of the plurality of control signal sets, based on the reinforcement learning.

단계 S740에서 클라우드 서버(120)는 리워딩 작업에 기초하여 복수의 제어 신호 세트 중 하나를 도출할 수 있다. In step S740, the cloud server 120 may derive one of the plurality of control signal sets based on the rewarding operation.

단계 S750에서 클라우드 서버(120)는 도출된 제어 신호 세트를 냉방 시스템 제어 장치(110)로 전송할 수 있다. In step S750, the cloud server 120 may transmit the derived control signal set to the cooling system control device 110. [

상술한 설명에서, 단계 S710 내지 S750은 본 발명의 구현예에 따라서, 추가적인 단계들로 더 분할되거나, 더 적은 단계들로 조합될 수 있다. 또한, 일부 단계는 필요에 따라 생략될 수도 있고, 단계 간의 순서가 전환될 수도 있다.In the above description, steps S710 to S750 may be further divided into further steps, or combined in fewer steps, according to an embodiment of the present invention. In addition, some of the steps may be omitted as necessary, and the order between the steps may be switched.

도 8은 본 발명의 일 실시예에 따른 냉방 제어 시스템에서 대상 건물의 냉방 시스템을 제어하는 과정을 도시한 동작 흐름도이다. 도 8을 참조하면, 냉방 제어 시스템(1)은 냉방 시스템 제어 장치(110), 클라우드 서버(120) 및 냉방 시스템(130)을 포함할 수 있다. 8 is a flowchart illustrating a process of controlling a cooling system of a target building in a cooling control system according to an embodiment of the present invention. Referring to FIG. 8, the cooling control system 1 may include a cooling system control device 110, a cloud server 120, and a cooling system 130.

냉방 시스템(130)은 각각의 냉방 장비에 대한 실제 상황 데이터 정보를 냉방 시스템 제어 장치(110)로 전송할 수 있다(S801). The cooling system 130 may transmit actual situation data information for each cooling apparatus to the cooling system control apparatus 110 (S801).

냉방 시스템 제어 장치(110)는 복수의 냉방 장비에 대한 실제 상황 데이터를 수집하고(S802), 수집된 실제 상황 데이터를 클라우드 서버(120)로 전송할 수 있다(S803). The cooling system control device 110 collects actual situation data for a plurality of cooling equipments (S802), and transmits the collected actual condition data to the cloud server 120 (S803).

클라우드 서버(120)는 냉방 시스템을 제어하기 위한 복수의 제어 신호 세트를 생성하고(S804), 강화 학습을 기반으로 실제 상황 데이터에 기초하여 복수의 제어 신호 세트 각각에 대해 리워딩 작업을 수행할 수 있다(S805). The cloud server 120 may generate a plurality of sets of control signals for controlling the cooling system (S804) and perform a rewarding operation on each of the plurality of control signal sets based on the actual situation data on the basis of the reinforcement learning (S805).

클라우드 서버(120)는 리워딩 작업에 기초하여 복수의 제어 신호 세트 중 하나를 도출하고(S806), 도출된 제어 신호 세트를 냉방 시스템 제어 장치(110)로 전송할 수 있다(S807). The cloud server 120 derives one of a plurality of sets of control signals based on the rewarding operation (S806) and transmits the derived control signal set to the cooling system control device 110 (S807).

냉방 시스템 제어 장치(110)는 제어 신호 세트를 저장하고(S808), 제어 신호 세트에 기초하여 냉방 시스템(130)에 포함된 복수의 냉방 장치를 제어할 수 있다(S809). The cooling system control device 110 stores a control signal set (S808), and can control a plurality of cooling devices included in the cooling system 130 based on the control signal set (S809).

상술한 설명에서, 단계 S801 내지 S809는 본 발명의 구현예에 따라서, 추가적인 단계들로 더 분할되거나, 더 적은 단계들로 조합될 수 있다. 또한, 일부 단계는 필요에 따라 생략될 수도 있고, 단계 간의 순서가 전환될 수도 있다.In the above description, steps S801 to S809 may be further divided into further steps or combined into fewer steps, according to an embodiment of the present invention. In addition, some of the steps may be omitted as necessary, and the order between the steps may be switched.

본 발명의 일 실시예는 컴퓨터에 의해 실행되는 프로그램 모듈과 같은 컴퓨터에 의해 실행가능한 명령어를 포함하는 기록 매체의 형태로도 구현될 수 있다. 컴퓨터 판독 가능 매체는 컴퓨터에 의해 액세스될 수 있는 임의의 가용 매체일 수 있고, 휘발성 및 비휘발성 매체, 분리형 및 비분리형 매체를 모두 포함한다. 또한, 컴퓨터 판독가능 매체는 컴퓨터 저장 매체를 모두 포함할 수 있다. 컴퓨터 저장 매체는 컴퓨터 판독가능 명령어, 데이터 구조, 프로그램 모듈 또는 기타 데이터와 같은 정보의 저장을 위한 임의의 방법 또는 기술로 구현된 휘발성 및 비휘발성, 분리형 및 비분리형 매체를 모두 포함한다. One embodiment of the present invention may also be embodied in the form of a recording medium including instructions executable by a computer, such as program modules, being executed by a computer. Computer readable media can be any available media that can be accessed by a computer and includes both volatile and nonvolatile media, removable and non-removable media. In addition, the computer readable medium may include both computer storage media. Computer storage media includes both volatile and nonvolatile, removable and non-removable media implemented in any method or technology for storage of information such as computer readable instructions, data structures, program modules or other data.

본 발명의 방법 및 시스템은 특정 실시예와 관련하여 설명되었지만, 그것들의 구성 요소 또는 동작의 일부 또는 전부는 범용 하드웨어 아키텍쳐를 갖는 컴퓨터 시스템을 사용하여 구현될 수 있다.While the methods and systems of the present invention have been described in connection with specific embodiments, some or all of those elements or operations may be implemented using a computer system having a general purpose hardware architecture.

전술한 본 발명의 설명은 예시를 위한 것이며, 본 발명이 속하는 기술분야의 통상의 지식을 가진 자는 본 발명의 기술적 사상이나 필수적인 특징을 변경하지 않고서 다른 구체적인 형태로 쉽게 변형이 가능하다는 것을 이해할 수 있을 것이다. 그러므로 이상에서 기술한 실시예들은 모든 면에서 예시적인 것이며 한정적이 아닌 것으로 이해해야만 한다. 예를 들어, 단일형으로 설명되어 있는 각 구성 요소는 분산되어 실시될 수도 있으며, 마찬가지로 분산된 것으로 설명되어 있는 구성 요소들도 결합된 형태로 실시될 수 있다.It will be understood by those skilled in the art that the foregoing description of the present invention is for illustrative purposes only and that those of ordinary skill in the art can readily understand that various changes and modifications may be made without departing from the spirit or essential characteristics of the present invention. will be. It is therefore to be understood that the above-described embodiments are illustrative in all aspects and not restrictive. For example, each component described as a single entity may be distributed and implemented, and components described as being distributed may also be implemented in a combined form.

본 발명의 범위는 상기 상세한 설명보다는 후술하는 특허청구범위에 의하여 나타내어지며, 특허청구범위의 의미 및 범위 그리고 그 균등 개념으로부터 도출되는 모든 변경 또는 변형된 형태가 본 발명의 범위에 포함되는 것으로 해석되어야 한다.The scope of the present invention is defined by the appended claims rather than the detailed description and all changes or modifications derived from the meaning and scope of the claims and their equivalents are to be construed as being included within the scope of the present invention do.

100: 대상 건물
110: 냉방 시스템 제어 장치
120: 클라우드 서버
130: 냉방 시스템
131: 냉각탑
132: 냉동기
133: 냉수 펌프
134: 공조기
135: 냉각수 펌프
210: 수집부
220: 전송부
230: 수신부
240: 제어부
410: 수신부
420: 도출부
430: 전송부
440: 시뮬레이션부
100: Target building
110: cooling system control device
120: Cloud server
130: Cooling system
131: Cooling tower
132: refrigerator
133: cold water pump
134: air conditioner
135: Coolant pump
210:
220:
230: Receiver
240:
410:
420:
430:
440: Simulation section

Claims (19)

대상 건물의 냉방 시스템을 제어하는 클라우드 서버에 있어서,
상기 대상 건물에 설치된 냉방 시스템 제어 장치로부터 상기 냉방 시스템에 포함된 복수의 냉방 장비에 대한 실제 상황 데이터를 수신하는 수신부;
상기 냉방 시스템을 제어하기 위한 복수의 제어 신호 세트를 생성하고, 강화 학습을 기반으로 상기 실제 상황 데이터에 기초하여 상기 복수의 제어 신호 세트 각각에 대해 리워딩 작업을 수행하고, 상기 리워딩 작업에 기초하여 상기 복수의 제어 신호 세트 중 하나를 도출하는 도출부; 및
상기 도출된 제어 신호 세트를 상기 냉방 시스템 제어 장치로 전송하는 전송부를 포함하고,
상기 도출부는 상기 실제 상황 데이터와 대응하는 기준 에너지 소비량과 상기 복수의 제어 신호 세트 각각에 대응하는 전체 에너지 소비량에 기초하여 상기 복수의 제어 신호 세트 각각에 리워드를 부여하고,
상기 냉방 시스템은 상기 전송된 제어 신호 세트에 기초하여 상기 복수의 냉방 장비가 제어됨으로써 동작되는 것인, 클라우드 서버.
A cloud server for controlling a cooling system of a target building,
A receiving unit for receiving actual situation data on a plurality of cooling equipment included in the cooling system from a cooling system control unit installed in the target building;
Generating a plurality of control signal sets for controlling the cooling system, performing a rewarding operation on each of the plurality of control signal sets based on the actual situation data on the basis of reinforcement learning, A derivation unit for deriving one of the plurality of control signal sets; And
And a transmission unit for transmitting the derived control signal set to the cooling system control device,
Wherein the derivation unit applies a reward to each of the plurality of control signal sets based on the reference energy consumption amount corresponding to the actual situation data and the total energy consumption amount corresponding to each of the plurality of control signal sets,
Wherein the cooling system is operated by controlling the plurality of cooling equipment based on the transmitted control signal set.
제 1 항에 있어서,
상기 냉방 시스템에 대한 시뮬레이션 모델을 통해 가상 데이터를 수집하는 시뮬레이션부를 더 포함하고,
상기 도출부는 상기 가상 데이터를 이용하여 상기 실제 상황 데이터를 보완하고, 상기 보완된 실제 상황 데이터에 기초하여 상기 복수의 제어 신호 세트 각각에 대한 리워딩 작업을 수행하는 것인, 클라우드 서버.
The method according to claim 1,
Further comprising a simulation unit for collecting virtual data through a simulation model for the cooling system,
Wherein the derivation unit complements the actual situation data using the virtual data and performs a rewiring operation on each of the plurality of control signal sets based on the actual condition data supplemented.
제 1 항에 있어서,
상기 도출부는 상기 기준 에너지 소비량이 상기 제어 신호 세트에 의해 제어되는 복수의 냉방 장치가 소비하는 전체 에너지 소비량을 초과하는 정도에 따라 상기 복수의 제어 신호 세트 각각에 리워드를 부여하고, 상기 리워드가 부여된 복수의 제어 신호 세트 중 리워드가 높은 하나를 도출하는 것인, 클라우드 서버.
The method according to claim 1,
Wherein the derivation unit applies a reward to each of the plurality of control signal sets in accordance with the degree that the reference energy consumption amount exceeds the total energy consumption consumed by a plurality of cooling apparatuses controlled by the control signal set, Wherein one of the plurality of control signal sets derives a higher one of the rewards.
제 3 항에 있어서,
상기 도출부는 상기 각 냉방 장치의 에너지 소비량에 대한 이율 배반(trade-off) 관계를 고려하여 상기 복수의 제어 신호 세트 각각에 리워드를 부여하는 것인, 클라우드 서버.
The method of claim 3,
Wherein the derivation unit gives a reward to each of the plurality of control signal sets in consideration of a trade-off relationship between energy consumption of the respective cooling apparatuses.
제 4 항에 있어서,
상기 복수의 냉방 장치는 냉각탑 및 냉동기를 포함하고,
상기 도출부는 상기 냉각탑으로부터 상기 냉동기로 들어가는 냉각수의 입수 온도와 관련하여 발생하는 상기 냉각탑의 에너지 소비량 및 상기 냉동기의 에너지 소비량 간의 이율 배반 관계를 고려하는 것인, 클라우드 서버.
5. The method of claim 4,
Wherein the plurality of cooling devices include a cooling tower and a refrigerator,
Wherein the derivation unit considers an interest rate betting relationship between an energy consumption amount of the cooling tower and an energy consumption amount of the refrigerator, which occurs in relation to an input temperature of cooling water entering the refrigerator from the cooling tower.
제 4 항에 있어서,
상기 복수의 냉방 장치는 냉수 펌프 및 공조기를 포함하고,
상기 도출부는 상기 냉수 펌프를 통해 제공하는 냉수 출수 유량에 따른 상기 공조기에서 제공하는 급기 온도와 관련하여 발생하는 상기 냉수 펌프의 에너지 소비량 및 상기 공조기의 에너지 소비량 간의 이율 배반 관계를 고려하는 것인, 클라우드 서버.
5. The method of claim 4,
Wherein the plurality of cooling devices include a cold water pump and an air conditioner,
Wherein the derivation unit considers an interest rate betting relationship between an energy consumption amount of the cold water pump and an energy consumption amount of the air conditioner generated in relation to an air supply temperature provided by the air conditioner according to a cold water outflow rate provided through the cold water pump, server.
제 4 항에 있어서,
상기 도출부는 상기 실제 상황 데이터에 기초하여 도출된 예상 평균온열감을 기반으로 예상 불만족도를 도출하고, 상기 도출된 예상 불만족도를 이용하여 상기 대상 건물 내의 재실자에 대한 온열 쾌적감을 도출하고, 상기 온열 쾌적감을 더 고려하여 상기 복수의 제어 신호 세트 각각에 리워드를 부여하는 것인, 클라우드 서버.
5. The method of claim 4,
Wherein the derivation unit derives a predicted degree of unsatisfactory degree based on the predicted average feeling of warmth derived based on the actual situation data, derives a warmth sense of comfort for the occupant in the target building using the derived expected degree of dissatisfaction, Wherein each of the plurality of control signal sets gives a reward to each of the plurality of control signal sets.
제 7 항에 있어서,
상기 도출부는 상기 대상 건물에 대해 기설정된 목표 예상 불만족도와 상기 온열 쾌적감을 비교하여 상기 복수의 제어 신호 세트 각각에 리워드를 부여하는 것인, 클라우드 서버.
8. The method of claim 7,
Wherein the derivation unit compares the target expected dissatisfaction set for the target building with the warm comfort sense to give a reward to each of the plurality of control signal sets.
제 1 항에 있어서,
상기 제어 신호 세트는 상기 복수의 냉방 장비 각각에 대한 제어값의 조합으로 구성되는 것인, 클라우드 서버.
The method according to claim 1,
Wherein the set of control signals comprises a combination of control values for each of the plurality of cooling devices.
제 9 항에 있어서,
상기 복수의 냉방 장비는 냉동기, 냉각탑, 냉수 펌프, 냉각수 펌프 및 공조기를 포함하고,
상기 제어 신호 세트는 상기 각 냉방 장치의 온/오프 제어값, 상기 각 냉방 장치에 대한 제어를 통해 제공하려는 냉수 출수 온도, 냉수 출수 유량, 급기 온도 및 급기 풍량 중 적어도 하나를 포함하는 것인, 클라우드 서버.
10. The method of claim 9,
Wherein the plurality of cooling equipments includes a refrigerator, a cooling tower, a cold water pump, a cooling water pump, and an air conditioner,
Wherein the control signal set includes at least one of an on / off control value of each of the cooling devices, a cold water outflow temperature to be provided through control for each cooling device, a cold water outflow rate, an air supply temperature and an air supply airflow, server.
제 1 항에 있어서,
상기 수신부는 상기 냉방 시스템 제어 장치로부터 상기 전송된 제어 신호 세트에 기초하여 제어된 상기 복수의 냉방 장치로부터 새롭게 생성된 실제 상황 데이터를 수신하는 것인, 클라우드 서버.
The method according to claim 1,
Wherein the receiving unit receives newly generated actual situation data from the plurality of cooling devices controlled based on the transmitted control signal set from the cooling system control device.
클라우드 서버와 연동하여 대상 건물의 냉방 시스템을 제어하는 장치에 있어서,
상기 냉방 시스템에 포함된 복수의 냉방 장비에 대한 실제 상황 데이터 정보를 수집하는 수집부;
상기 실제 상황 데이터를 상기 클라우드 서버로 전송하는 전송부;
상기 클라우드 서버에 의해 생성된 복수의 제어 신호 세트 중 상기 실제 상황 데이터에 기초하여 도출된 제어 신호 세트를 수신하는 수신부; 및
상기 수신한 제어 신호 세트에 기초하여 상기 복수의 냉방 장치를 제어하는 제어부
를 포함하고,
상기 제어 신호 세트는 강화 학습을 기반으로 상기 실제 상황 데이터에 기초하여 리워딩 작업이 수행된 상기 복수의 제어 신호 세트로부터 도출되고, 상기 복수의 제어 신호 세트는 상기 실제 상황 데이터와 대응하는 기준 에너지 소비량과 상기 복수의 제어 신호 세트 각각에 대응하는 전체 에너지 소비량에 기초하여 상기 클라우드 서버로부터 리워드를 부여받는 것인, 냉방 시스템 제어 장치.
An apparatus for controlling a cooling system of a target building in cooperation with a cloud server,
A collection unit for collecting actual situation data information on a plurality of cooling equipment included in the cooling system;
A transmitting unit for transmitting the actual situation data to the cloud server;
A receiver for receiving a control signal set derived from the actual situation data among a plurality of control signal sets generated by the cloud server; And
And a control unit for controlling the plurality of cooling devices based on the received control signal set
Lt; / RTI >
Wherein the control signal set is derived from the plurality of control signal sets on which a rewarding operation has been performed based on the actual situation data based on reinforcement learning and wherein the plurality of control signal sets includes a reference energy consumption amount And a reward is given from the cloud server based on the total energy consumption amount corresponding to each of the plurality of control signal sets.
제 12 항에 있어서,
상기 복수의 제어 신호 세트는 상기 각 냉방 장치의 에너지 소비량에 대한 이율 배반(trade-off) 관계가 고려되어 리워드를 부여받는 것인, 냉방 시스템 제어 장치.
13. The method of claim 12,
Wherein the plurality of control signal sets are rewarded in consideration of a trade-off relationship with energy consumption of each of the cooling devices.
제 13 항에 있어서,
상기 복수의 냉방 장치는 냉각탑 및 냉동기를 포함하고,
상기 제어부는 상기 제어 신호 세트에 따라 상기 냉각탑으로부터 상기 냉동기로 들어가는 냉각수의 입수 온도와 관련하여 발생되는 상기 냉각탑의 에너지 소비량 및 상기 냉동기의 에너지 소비량 간의 이율 배반 관계를 고려하여 상기 냉각탑 및 상기 냉동기를 제어하는 것인, 냉방 시스템 제어 장치.
14. The method of claim 13,
Wherein the plurality of cooling devices include a cooling tower and a refrigerator,
The control unit controls the cooling tower and the refrigerator in consideration of an interest rate betal relationship between the energy consumption amount of the cooling tower and the energy consumption amount of the refrigerator, which is generated in relation to the temperature of the cooling water entering from the cooling tower to the refrigerator, To the cooling system control device.
제 13 항에 있어서,
상기 복수의 냉방 장치는 냉수 펌프 및 공조기를 포함하고,
상기 제어부는 상기 제어 신호 세트에 따라 상기 냉수 펌프를 통해 제공하는 냉수 출수 유량에 따른 상기 공조기에서 제공하는 급기 온도와 관련하여 발생되는 상기 냉수 펌프의 에너지 소비량 및 상기 공조기의 에너지 소비량 간의 이율 배반 관계를 고려하여 상기 냉수 펌프 및 상기 공조기를 제어하는 것인, 냉방 시스템 제어 장치.
14. The method of claim 13,
Wherein the plurality of cooling devices include a cold water pump and an air conditioner,
Wherein the control unit sets the rate-of-return relation between the energy consumption amount of the cold water pump and the energy consumption amount of the air conditioner generated in relation to the supply air temperature provided by the air conditioner according to the cold water outflow rate provided through the cold water pump And controls the cold water pump and the air conditioner.
제 13 항에 있어서,
상기 복수의 제어 신호 세트는 상기 대상 건물 내의 재실자에 대한 온열 쾌적감이 더 고려되어 각각 리워드를 부여받고,
상기 온열 쾌적감은 상기 실제 상황 데이터에 기초하여 도출된 예상 평균온열감을 기반으로 도출된 예상 불만족도를 이용하여 도출되는 것인, 냉방 시스템 제어 장치.
14. The method of claim 13,
Wherein the plurality of control signal sets are respectively given rewards in consideration of a warmth sense of comfort for occupants in the target building,
Wherein the warm comfort sense is derived using an expected dissatisfaction degree derived based on the estimated average warm feeling derived based on the actual situation data.
제 16 항에 있어서,
상기 제어부는 상기 제어 신호 세트에 따라 상기 대상 건물에 대해 기설정된 목표 예상 불만족도에 대한 상기 온열 쾌적감을 비교하여 상기 복수의 냉방 장치를 제어하는 것인, 냉방 시스템 제어 장치.
17. The method of claim 16,
Wherein the control unit controls the plurality of cooling apparatuses by comparing the warm comfort sense with a predetermined target dissatisfaction degree with respect to the target building according to the control signal set.
제 12 항에 있어서,
상기 수집부는 상기 수신한 제어 신호 세트에 기초하여 제어된 상기 복수의 냉방 장치로부터 새롭게 생성된 실제 상황 데이터를 수집하고,
상기 전송부는 상기 새롭게 생성된 실제 상황 데이터를 상기 클라우드 서버로 전송하는 것인, 냉방 시스템 제어 장치.
13. The method of claim 12,
Wherein the collecting unit collects newly generated actual situation data from the plurality of cooling devices controlled based on the received control signal set,
Wherein the transmitting unit transmits the newly created actual situation data to the cloud server.
대상 건물의 냉방 시스템을 제어하는 방법에 있어서,
상기 대상 건물에 설치된 냉방 시스템 제어 장치로부터 상기 냉방 시스템에 포함된 복수의 냉방 장비에 대한 실제 상황 데이터를 수신하는 단계;
상기 냉방 시스템을 제어하기 위한 복수의 제어 신호 세트를 생성하는 단계;
강화 학습을 기반으로 상기 실제 상황 데이터 및 상기 복수의 제어 신호 세트 각각에 대응하는 전체 에너지 소비량에 기초하여 상기 복수의 제어 신호 세트 각각에 대해 리워딩 작업을 수행하는 단계;
상기 리워딩 작업에 기초하여 상기 복수의 제어 신호 세트 중 하나를 도출하는 단계; 및
상기 도출된 제어 신호 세트를 상기 제어 장치로 전송하는 단계
를 포함하는 것인, 냉방 시스템 제어 방법.
A method for controlling a cooling system of a target building,
Receiving actual situation data for a plurality of cooling devices included in the cooling system from a cooling system control device installed in the target building;
Generating a plurality of control signal sets for controlling the cooling system;
Performing a rewarding operation on each of the plurality of control signal sets based on the actual situation data and the total energy consumption amount corresponding to each of the plurality of control signal sets based on reinforcement learning;
Deriving one of the plurality of control signal sets based on the reordering operation; And
Transmitting the derived control signal set to the control device
Wherein the cooling system control method comprises the steps of:
KR1020170078709A 2017-06-21 2017-06-21 Cloud server and method for controlling cooling system of target building based on artificial intelligence, and apparatus for controlling cooling system KR102272333B1 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
KR1020170078709A KR102272333B1 (en) 2017-06-21 2017-06-21 Cloud server and method for controlling cooling system of target building based on artificial intelligence, and apparatus for controlling cooling system

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020170078709A KR102272333B1 (en) 2017-06-21 2017-06-21 Cloud server and method for controlling cooling system of target building based on artificial intelligence, and apparatus for controlling cooling system

Publications (2)

Publication Number Publication Date
KR20180138463A true KR20180138463A (en) 2018-12-31
KR102272333B1 KR102272333B1 (en) 2021-07-02

Family

ID=64959797

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020170078709A KR102272333B1 (en) 2017-06-21 2017-06-21 Cloud server and method for controlling cooling system of target building based on artificial intelligence, and apparatus for controlling cooling system

Country Status (1)

Country Link
KR (1) KR102272333B1 (en)

Cited By (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR102035818B1 (en) * 2019-01-07 2019-10-24 주식회사 나라컨트롤 Control methods for architectural heating and cooling system using cloud database
WO2020145463A1 (en) * 2019-01-09 2020-07-16 Samsung Electronics Co., Ltd. Electronic device and control method thereof
WO2021006406A1 (en) * 2019-07-11 2021-01-14 엘지전자 주식회사 Artificial intelligence-based air conditioner
CN113671856A (en) * 2021-08-23 2021-11-19 江苏亨诺科技有限公司 Intelligent comprehensive service system based on cloud service building
KR102474975B1 (en) * 2021-10-01 2022-12-06 엘지전자 주식회사 Method of sunykatubg heat exchanger and space and controlling heat exchanger and device implementing thereof
KR20230003674A (en) * 2021-06-29 2023-01-06 디엘이앤씨 주식회사 System for Controlling Facilities using Module Wireless Communication
KR102554902B1 (en) * 2022-12-29 2023-07-12 가천대학교 산학협력단 The Method that Estimate Energy Consumption of Group Households based on Federated Learning, and The System and Computer-readable Medium for Performing The Same
KR102678444B1 (en) * 2024-04-15 2024-06-26 한국이미지시스템(주) Method for controlling bems using predicted sa state and converted sa state and bems

Families Citing this family (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20240077513A (en) 2022-11-22 2024-06-03 한국전자기술연구원 Building energy management method, device and system using reinforcement learning

Citations (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2005226845A (en) * 2004-02-10 2005-08-25 Fuji Electric Systems Co Ltd Air conditioning load forecasting method, device and program, and recording medium
KR20110098625A (en) * 2010-02-26 2011-09-01 가부시끼가이샤 도시바 Air conditioning control system
KR20110100895A (en) * 2010-03-05 2011-09-15 삼성물산 주식회사 The building mutual assistance control method which uses an optimization energy management system
KR20110137464A (en) * 2010-06-17 2011-12-23 삼성물산 주식회사 System and method of optimum operation of refrigerator using building energy management system
JP2012149839A (en) * 2011-01-20 2012-08-09 Nippon Telegr & Teleph Corp <Ntt> Air conditioner linkage control system, air conditioner linkage control method, and air conditioner linkage control program
KR20140141923A (en) 2013-06-03 2014-12-11 지에스건설 주식회사 Optimal building energy system design method with complex constraints
WO2016138107A1 (en) * 2015-02-24 2016-09-01 Siemens Industry, Inc. Variable air volume modeling for an hvac system
WO2017013740A1 (en) * 2015-07-21 2017-01-26 三菱電機株式会社 Rule generation device, rule generation method, and program

Patent Citations (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2005226845A (en) * 2004-02-10 2005-08-25 Fuji Electric Systems Co Ltd Air conditioning load forecasting method, device and program, and recording medium
KR20110098625A (en) * 2010-02-26 2011-09-01 가부시끼가이샤 도시바 Air conditioning control system
KR20110100895A (en) * 2010-03-05 2011-09-15 삼성물산 주식회사 The building mutual assistance control method which uses an optimization energy management system
KR20110137464A (en) * 2010-06-17 2011-12-23 삼성물산 주식회사 System and method of optimum operation of refrigerator using building energy management system
JP2012149839A (en) * 2011-01-20 2012-08-09 Nippon Telegr & Teleph Corp <Ntt> Air conditioner linkage control system, air conditioner linkage control method, and air conditioner linkage control program
KR20140141923A (en) 2013-06-03 2014-12-11 지에스건설 주식회사 Optimal building energy system design method with complex constraints
WO2016138107A1 (en) * 2015-02-24 2016-09-01 Siemens Industry, Inc. Variable air volume modeling for an hvac system
WO2017013740A1 (en) * 2015-07-21 2017-01-26 三菱電機株式会社 Rule generation device, rule generation method, and program

Cited By (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR102035818B1 (en) * 2019-01-07 2019-10-24 주식회사 나라컨트롤 Control methods for architectural heating and cooling system using cloud database
WO2020145463A1 (en) * 2019-01-09 2020-07-16 Samsung Electronics Co., Ltd. Electronic device and control method thereof
CN113272595A (en) * 2019-01-09 2021-08-17 三星电子株式会社 Electronic device and control method thereof
WO2021006406A1 (en) * 2019-07-11 2021-01-14 엘지전자 주식회사 Artificial intelligence-based air conditioner
KR20230003674A (en) * 2021-06-29 2023-01-06 디엘이앤씨 주식회사 System for Controlling Facilities using Module Wireless Communication
CN113671856A (en) * 2021-08-23 2021-11-19 江苏亨诺科技有限公司 Intelligent comprehensive service system based on cloud service building
KR102474975B1 (en) * 2021-10-01 2022-12-06 엘지전자 주식회사 Method of sunykatubg heat exchanger and space and controlling heat exchanger and device implementing thereof
KR102554902B1 (en) * 2022-12-29 2023-07-12 가천대학교 산학협력단 The Method that Estimate Energy Consumption of Group Households based on Federated Learning, and The System and Computer-readable Medium for Performing The Same
KR102678444B1 (en) * 2024-04-15 2024-06-26 한국이미지시스템(주) Method for controlling bems using predicted sa state and converted sa state and bems

Also Published As

Publication number Publication date
KR102272333B1 (en) 2021-07-02

Similar Documents

Publication Publication Date Title
KR20180138463A (en) Cloud server and method for controlling cooling system of target building based on artificial intelligence, and apparatus for controlling cooling system
JP6976976B2 (en) Multilevel model predictive control system and method
JP6807556B2 (en) Air conditioning control method, air conditioning control device and air conditioning control program
KR102212663B1 (en) An apparatus for hvac system input power control based on target temperature and method thereof
US11374409B2 (en) Power system load flexibility forecasting
US10037013B2 (en) Method and apparatus for managing energy by analyzing energy usage pattern of electric device
KR102481809B1 (en) Apparatus and method for controling plural air conditioner indoor devices
US20190011146A1 (en) Automatic temperature controlling method and device
JP6419497B2 (en) Air conditioning control device, air conditioning control method, and program
JP2011179722A (en) Air conditioning control system
US20200209820A1 (en) System and method for improving the energy management of hvac equipment
CN114838470A (en) Control method and system for heating, ventilating and air conditioning
CN110726209A (en) Air conditioner control method and device, storage medium and processor
Cheng et al. Energy efficient thermal comfort control for cyber-physical home system
CN104006502A (en) air conditioner operation method and device
US9841201B2 (en) Method and system for limiting consumption
Alizadeh et al. Least laxity first scheduling of thermostatically controlled loads for regulation services
CN115388520A (en) Air conditioner control method, air conditioner control device, air conditioner and storage medium
JP7215069B2 (en) Control program, control method and control device
CN115289637A (en) Temperature adjustment method, system, device, storage medium, and program product
JP2020067207A (en) Control program, control method and control device
KR102240390B1 (en) Smart Integrated Control System for Integrated Control of Complex Valve and Fan Coil Unit and Its Operation
CN109213243B (en) Intelligent home temperature and humidity wireless automatic control system
CN114322245B (en) Method and device for controlling air conditioner and air conditioner
Zhao et al. Fairo: Fairness-aware adaptation in sequential-decision making for human-in-the-loop systems

Legal Events

Date Code Title Description
A201 Request for examination
E902 Notification of reason for refusal
E701 Decision to grant or registration of patent right
GRNT Written decision to grant