KR102119076B1 - Dishwasher with function control based on artificial intelligence - Google Patents

Dishwasher with function control based on artificial intelligence Download PDF

Info

Publication number
KR102119076B1
KR102119076B1 KR1020190127313A KR20190127313A KR102119076B1 KR 102119076 B1 KR102119076 B1 KR 102119076B1 KR 1020190127313 A KR1020190127313 A KR 1020190127313A KR 20190127313 A KR20190127313 A KR 20190127313A KR 102119076 B1 KR102119076 B1 KR 102119076B1
Authority
KR
South Korea
Prior art keywords
washing
unit
data
server
analysis
Prior art date
Application number
KR1020190127313A
Other languages
Korean (ko)
Inventor
송용섭
Original Assignee
주식회사 탑소닉
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 주식회사 탑소닉 filed Critical 주식회사 탑소닉
Priority to KR1020190127313A priority Critical patent/KR102119076B1/en
Application granted granted Critical
Publication of KR102119076B1 publication Critical patent/KR102119076B1/en

Links

Images

Classifications

    • AHUMAN NECESSITIES
    • A47FURNITURE; DOMESTIC ARTICLES OR APPLIANCES; COFFEE MILLS; SPICE MILLS; SUCTION CLEANERS IN GENERAL
    • A47LDOMESTIC WASHING OR CLEANING; SUCTION CLEANERS IN GENERAL
    • A47L15/00Washing or rinsing machines for crockery or tableware
    • A47L15/0018Controlling processes, i.e. processes to control the operation of the machine characterised by the purpose or target of the control
    • AHUMAN NECESSITIES
    • A47FURNITURE; DOMESTIC ARTICLES OR APPLIANCES; COFFEE MILLS; SPICE MILLS; SUCTION CLEANERS IN GENERAL
    • A47LDOMESTIC WASHING OR CLEANING; SUCTION CLEANERS IN GENERAL
    • A47L15/00Washing or rinsing machines for crockery or tableware
    • A47L15/0018Controlling processes, i.e. processes to control the operation of the machine characterised by the purpose or target of the control
    • A47L15/0049Detection or prevention of malfunction, including accident prevention
    • AHUMAN NECESSITIES
    • A47FURNITURE; DOMESTIC ARTICLES OR APPLIANCES; COFFEE MILLS; SPICE MILLS; SUCTION CLEANERS IN GENERAL
    • A47LDOMESTIC WASHING OR CLEANING; SUCTION CLEANERS IN GENERAL
    • A47L15/00Washing or rinsing machines for crockery or tableware
    • A47L15/0018Controlling processes, i.e. processes to control the operation of the machine characterised by the purpose or target of the control
    • A47L15/006Controlling processes, i.e. processes to control the operation of the machine characterised by the purpose or target of the control using wireless communication between internal components of the machine
    • AHUMAN NECESSITIES
    • A47FURNITURE; DOMESTIC ARTICLES OR APPLIANCES; COFFEE MILLS; SPICE MILLS; SUCTION CLEANERS IN GENERAL
    • A47LDOMESTIC WASHING OR CLEANING; SUCTION CLEANERS IN GENERAL
    • A47L15/00Washing or rinsing machines for crockery or tableware
    • A47L15/0018Controlling processes, i.e. processes to control the operation of the machine characterised by the purpose or target of the control
    • A47L15/0063Controlling processes, i.e. processes to control the operation of the machine characterised by the purpose or target of the control using remote monitoring or controlling of the dishwasher operation, e.g. networking systems
    • AHUMAN NECESSITIES
    • A47FURNITURE; DOMESTIC ARTICLES OR APPLIANCES; COFFEE MILLS; SPICE MILLS; SUCTION CLEANERS IN GENERAL
    • A47LDOMESTIC WASHING OR CLEANING; SUCTION CLEANERS IN GENERAL
    • A47L2401/00Automatic detection in controlling methods of washing or rinsing machines for crockery or tableware, e.g. information provided by sensors entered into controlling devices
    • A47L2401/03Operation mode, e.g. delicate washing, economy washing, reduced time, sterilizing, water softener regenerating, odor eliminating or service
    • AHUMAN NECESSITIES
    • A47FURNITURE; DOMESTIC ARTICLES OR APPLIANCES; COFFEE MILLS; SPICE MILLS; SUCTION CLEANERS IN GENERAL
    • A47LDOMESTIC WASHING OR CLEANING; SUCTION CLEANERS IN GENERAL
    • A47L2401/00Automatic detection in controlling methods of washing or rinsing machines for crockery or tableware, e.g. information provided by sensors entered into controlling devices
    • A47L2401/04Crockery or tableware details, e.g. material, quantity, condition
    • AHUMAN NECESSITIES
    • A47FURNITURE; DOMESTIC ARTICLES OR APPLIANCES; COFFEE MILLS; SPICE MILLS; SUCTION CLEANERS IN GENERAL
    • A47LDOMESTIC WASHING OR CLEANING; SUCTION CLEANERS IN GENERAL
    • A47L2401/00Automatic detection in controlling methods of washing or rinsing machines for crockery or tableware, e.g. information provided by sensors entered into controlling devices
    • A47L2401/10Water cloudiness or dirtiness, e.g. turbidity, foaming or level of bacteria
    • AHUMAN NECESSITIES
    • A47FURNITURE; DOMESTIC ARTICLES OR APPLIANCES; COFFEE MILLS; SPICE MILLS; SUCTION CLEANERS IN GENERAL
    • A47LDOMESTIC WASHING OR CLEANING; SUCTION CLEANERS IN GENERAL
    • A47L2401/00Automatic detection in controlling methods of washing or rinsing machines for crockery or tableware, e.g. information provided by sensors entered into controlling devices
    • A47L2401/12Water temperature

Abstract

According to an embodiment of the present invention, the present invention relates to a dishwasher, which can communicate with a server and a user device. The dishwasher of the present invention comprises: a sensor unit for sensing a state of an object to be washed and a driving state of a washing function; an input unit for receiving a driving command from a user; a communication unit for performing wireless communication with a server and a user device, and receiving an AI analysis result from the server; a control unit for selecting AI analysis data required for AI calculation from data acquired by the sensor unit and the input unit, and controlling the selected AI analysis data to be transmitted to the server under a condition requiring the AI calculation; a washing module for driving a washing operation under the control of the control unit; and a display unit for displaying the AI analysis result under the control of the control unit. According to the present invention, a failure cause is more accurately analyzed based on artificial intelligence, and the failure cause can be simply solved.

Description

인공지능에 기반하여 기능 제어를 수행하는 식기 세척기{Dishwasher with function control based on artificial intelligence}Dishwasher with function control based on artificial intelligence}

본 발명은 인공지능에 기반하여 기능 제어를 수행하는 식기 세척기에 관한 것이다. 구체적으로 본 발명은 인공지능을 통한 분석 결과에 대응하여 세척 동작, 고장 진단 동작 등을 수행하는 식기 세척기에 관한 것이다. The present invention relates to a dishwasher that performs function control based on artificial intelligence. Specifically, the present invention relates to a dishwasher that performs a washing operation, a malfunction diagnosis operation, etc. in response to an analysis result through artificial intelligence.

식기 세척기는 식기 세척을 수행하는 장치이다. 일반적으로 식기 세척기는 세척물에 세척수를 분사하는 방식 또는 세척수에 세척물을 담근 후 세척수에 초음파를 발생시키는 방식을 주요 세척 방식으로 채택하고 있다. The dishwasher is a device that performs dishwashing. In general, the dishwasher adopts a method of spraying washing water into washing water or a method of generating ultrasonic waves in washing water after dipping the washing water into washing water as a main washing method.

종래의 기술에서는 식기 세척기를 이용하여 세척물을 세척하기 위해 세척물의 오염도, 세척물의 수량을 사용자가 직접 확인하고, 그에 대응하여 적절한 세척 모드를 직접 선택하거나, 또는 세척물의 특성과 관계없이 천편일률적으로 동일한 세척동작을 수행해 왔다. In the prior art, the user directly checks the degree of contamination and the amount of the washing to wash the washing using a dishwasher, and selects an appropriate washing mode correspondingly, or uniformly regardless of the characteristics of the washing. The same washing operation has been performed.

이에 따라 종래의 식기 세척기는 세척물의 특성에 대응하는 맞춤화된 세척 동작을 제공할 수 없었으며, 세척물의 오염도에 따라 세척 강도 및 횟수를 가변하지 못하므로, 자원의 낭비가 야기되는 문제가 있었다.Accordingly, the conventional dishwasher was unable to provide a customized washing operation corresponding to the characteristics of the washing product, and the washing strength and the number of times were not variable according to the degree of contamination of the washing product, thereby causing a waste of resources.

본 발명은 상기 언급된 문제를 해결하기 위해 안출된 것으로, 식기 세척기를 이용하여 세척하고자 하는 세척물의 상태 정보를 획득하고, 그에 대응하여 적합한 세척 동작에 대한 설정값을 도출하기 위한 목적이 있다. The present invention has been made to solve the above-mentioned problems, and has an object to obtain condition information of a washing object to be washed using a dishwasher, and to derive a set value for an appropriate washing operation correspondingly.

특히 본 발명은 이 과정에서 인공지능을 이용하여, 세척물의 수량, 세척물의 종류, 세척물의 오염도 등의 다양한 변수를 복합적으로 고려한 세척모드를 손쉽게 산출하기 위한 목적이 있다. In particular, the present invention has an object to easily calculate a washing mode in which various variables such as the number of washings, the kinds of washings, and the degree of contamination of washings are complexly considered using artificial intelligence in this process.

본 발명의 실시 예에 따른 식기 세척기는 서버 및 사용자 기기와 통신할 수 있으며, 세척물의 상태 및 세척 기능의 구동 상태를 센싱하는 센서부, 사용자로부터 구동 명령을 입력받는 입력부, 상기 서버 및 사용자 기기와 무선 통신을 수행하며, 상기 서버로부터 AI 분석 결과를 수신하는 통신부, AI 연산이 요구되는 조건 상황 하에서, 상기 센서부 및 상기 입력부에 의해 획득된 데이터 중 AI 연산에 필요한 AI 분석용 데이터를 선별하고, 선별된 AI 분석용 데이터를 상기 서버에 전송하도록 제어하는 제어부, 상기 제어부의 제어 하에 세척 동작을 구동하는 세척 모듈 및 상기 제어부의 제어 하에 AI 분석 결과를 표시하는 표시부를 포함하여 구성될 수 있다. Dishwasher according to an embodiment of the present invention can communicate with the server and the user device, the sensor unit for sensing the state of the washing water and the driving state of the washing function, an input unit for receiving a driving command from the user, the server and the user device A communication unit that performs wireless communication and receives AI analysis results from the server, and selects AI analysis data necessary for AI calculation from among data acquired by the sensor unit and the input unit under a condition that requires AI calculation, It may be configured to include a control unit for controlling to transmit the selected AI analysis data to the server, a washing module for driving a washing operation under the control of the control unit and a display unit for displaying AI analysis results under the control of the control unit.

본 발명의 다양한 실시 예는 인공지능에 기반하여 보다 정확한 고장 원인을 분석하고, 그에 대응하는 식기 세척기의 해결 방안을 제시할 수 있다. 이에 따라, 간단히 해결될 수 있는 고장 상황의 경우 수리 요청 및 진단에 소요되는 시간을 절약하고, 간편하게 고장의 원인을 해결할 수 있다. Various embodiments of the present invention may analyze a more accurate cause of failure based on artificial intelligence, and present a solution of a dishwasher corresponding thereto. Accordingly, in the case of a failure situation that can be easily solved, time required for repair request and diagnosis can be saved, and the cause of the failure can be easily solved.

본 발명의 다양한 실시 예는 세척물의 이미지, 세척수의 오염도 등의 현재 세척 상황에 대응하는 가장 적합한 세척 모드를 산출할 수 있다. 그에 따라 본 발명은 세척물의 오염도 및 세척물의 수량 대비 과도한 세척 동작에 의한 세척수 낭비 및 전력 낭비를 방지할 수 있다. Various embodiments of the present invention can calculate the most suitable washing mode corresponding to the current washing situation, such as the image of the washing water, the degree of contamination of the washing water. Accordingly, the present invention can prevent waste of washing water and waste of power due to excessive washing operation compared to the degree of contamination and the amount of washing.

그리고 본 발명은 세척 동작이 수행되는 중에 추가의 세척물이 세척조에 투하되는 경우, 실시간으로 해당 상황에 대응하는 적정 세척 모드를 인공지능 분석에 의해 산출할 수 있으므로, 추가 투입된 세척물이라 하더라도 충분히 세척될 수 있다. And, according to the present invention, when additional washing water is dropped into the washing tank while the washing operation is being performed, an appropriate washing mode corresponding to the corresponding situation can be calculated by AI analysis in real time. Can be.

도 1은 본 발명의 실시 예에 따른 식기세척기의 외관 예시를 도시한 도면이다.
도 2는 본 발명의 실시 예에 따른 식기 세척기의 네트워크 구조에 관하여 도시한 도면이다.
도 3은 본 발명의 실시 예에 따른 식기 세척기의 구성을 도시한 도면이다.
도 4는 본 발명의 실시 예에 따른 서버의 구성을 도시한 도면이다.
도 5는 본 발명의 실시 예에 따른 AI 모델의 개념 예시를 도시한 도면이다.
1 is a view showing an example of the appearance of a dishwasher according to an embodiment of the present invention.
2 is a diagram illustrating a network structure of a dishwasher according to an embodiment of the present invention.
3 is a view showing the configuration of a dishwasher according to an embodiment of the present invention.
4 is a diagram showing the configuration of a server according to an embodiment of the present invention.
5 is a diagram illustrating a conceptual illustration of an AI model according to an embodiment of the present invention.

본 발명의 이점 및 특징, 그리고 그것들을 달성하는 방법은 첨부되는 도면과 함께 상세하게 후술되어 있는 실시예들을 참조하면 명확해질 것이다. 그러나, 본 발명은 이하에서 개시되는 실시예들에 제한되는 것이 아니라 서로 다른 다양한 형태로 구현될 수 있으며, 단지 본 실시예들은 본 발명의 개시가 완전하도록 하고, 본 발명이 속하는 기술 분야의 통상의 기술자에게 본 발명의 범주를 완전하게 알려주기 위해 제공되는 것이며, 본 발명은 청구항의 범주에 의해 정의될 뿐이다. Advantages and features of the present invention, and methods for achieving them will be clarified with reference to embodiments described below in detail together with the accompanying drawings. However, the present invention is not limited to the embodiments disclosed below, but may be implemented in various different forms, and only the present embodiments allow the disclosure of the present invention to be complete, and are common in the technical field to which the present invention pertains. It is provided to fully inform the skilled person of the scope of the present invention, and the present invention is only defined by the scope of the claims.

본 명세서에서 사용된 용어는 실시예들을 설명하기 위한 것이며 본 발명을 제한하고자 하는 것은 아니다. 본 명세서에서, 단수형은 문구에서 특별히 언급하지 않는 한 복수형도 포함한다. 명세서에서 사용되는 "포함한다(comprises)" 및/또는 "포함하는(comprising)"은 언급된 구성요소 외에 하나 이상의 다른 구성요소의 존재 또는 추가를 배제하지 않는다. 명세서 전체에 걸쳐 동일한 도면 부호는 동일한 구성 요소를 지칭하며, "및/또는"은 언급된 구성요소들의 각각 및 하나 이상의 모든 조합을 포함한다. 비록 "제1", "제2" 등이 다양한 구성요소들을 서술하기 위해서 사용되나, 이들 구성요소들은 이들 용어에 의해 제한되지 않음은 물론이다. 이들 용어들은 단지 하나의 구성요소를 다른 구성요소와 구별하기 위하여 사용하는 것이다. 따라서, 이하에서 언급되는 제1 구성요소는 본 발명의 기술적 사상 내에서 제2 구성요소일 수도 있음은 물론이다.The terminology used herein is for describing the embodiments and is not intended to limit the present invention. In the present specification, the singular form also includes the plural form unless otherwise specified in the phrase. As used herein, “comprises” and/or “comprising” does not exclude the presence or addition of one or more other components other than the components mentioned. Throughout the specification, the same reference numerals refer to the same components, and “and/or” includes each and every combination of one or more of the components mentioned. Although "first", "second", etc. are used to describe various components, it goes without saying that these components are not limited by these terms. These terms are only used to distinguish one component from another component. Therefore, it goes without saying that the first component mentioned below may be the second component within the technical spirit of the present invention.

다른 정의가 없다면, 본 명세서에서 사용되는 모든 용어(기술 및 과학적 용어를 포함)는 본 발명이 속하는 기술분야의 통상의 기술자에게 공통적으로 이해될 수 있는 의미로 사용될 수 있을 것이다. 또한, 일반적으로 사용되는 사전에 정의되어 있는 용어들은 명백하게 특별히 정의되어 있지 않는 한 이상적으로 또는 과도하게 해석되지 않는다.Unless otherwise defined, all terms (including technical and scientific terms) used in the present specification may be used as meanings commonly understood by those skilled in the art to which the present invention pertains. In addition, terms defined in the commonly used dictionary are not ideally or excessively interpreted unless explicitly defined.

명세서에서 사용되는 "부" 또는 “모듈”이라는 용어는 소프트웨어, FPGA 또는 ASIC과 같은 하드웨어 구성요소를 의미하며, "부" 또는 “모듈”은 어떤 역할들을 수행한다. 그렇지만 "부" 또는 “모듈”은 소프트웨어 또는 하드웨어에 한정되는 의미는 아니다. "부" 또는 “모듈”은 어드레싱할 수 있는 저장 매체에 있도록 구성될 수도 있고 하나 또는 그 이상의 프로세서들을 재생시키도록 구성될 수도 있다. 따라서, 일 예로서 "부" 또는 “모듈”은 소프트웨어 구성요소들, 객체지향 소프트웨어 구성요소들, 클래스 구성요소들 및 태스크 구성요소들과 같은 구성요소들과, 프로세스들, 함수들, 속성들, 프로시저들, 서브루틴들, 프로그램 코드의 세그먼트들, 드라이버들, 펌웨어, 마이크로 코드, 회로, 데이터, 데이터베이스, 데이터 구조들, 테이블들, 어레이들 및 변수들을 포함한다. 구성요소들과 "부" 또는 “모듈”들 안에서 제공되는 기능은 더 작은 수의 구성요소들 및 "부" 또는 “모듈”들로 결합되거나 추가적인 구성요소들과 "부" 또는 “모듈”들로 더 분리될 수 있다.The term "part" or "module" as used in the specification refers to a hardware component such as software, FPGA, or ASIC, and "part" or "module" performs certain roles. However, "part" or "module" is not meant to be limited to software or hardware. The "unit" or "module" may be configured to be in an addressable storage medium or may be configured to reproduce one or more processors. Thus, as an example, "part" or "module" means components, processes, functions, attributes, such as software components, object-oriented software components, class components and task components. Includes procedures, subroutines, segments of program code, drivers, firmware, microcode, circuitry, data, database, data structures, tables, arrays and variables. The functionality provided within components and "parts" or "modules" can be combined into a smaller number of components and "parts" or "modules" or into additional components and "parts" or "modules" Can be further separated.

공간적으로 상대적인 용어인 "아래(below)", "아래(beneath)", "하부(lower)", "위(above)", "상부(upper)" 등은 도면에 도시되어 있는 바와 같이 하나의 구성요소와 다른 구성요소들과의 상관관계를 용이하게 기술하기 위해 사용될 수 있다. 공간적으로 상대적인 용어는 도면에 도시되어 있는 방향에 더하여 사용시 또는 동작시 구성요소들의 서로 다른 방향을 포함하는 용어로 이해되어야 한다. 예를 들어, 도면에 도시되어 있는 구성요소를 뒤집을 경우, 다른 구성요소의 "아래(below)"또는 "아래(beneath)"로 기술된 구성요소는 다른 구성요소의 "위(above)"에 놓여질 수 있다. 따라서, 예시적인 용어인 "아래"는 아래와 위의 방향을 모두 포함할 수 있다. 구성요소는 다른 방향으로도 배향될 수 있으며, 이에 따라 공간적으로 상대적인 용어들은 배향에 따라 해석될 수 있다.The spatially relative terms “below”, “beneath”, “lower”, “above”, “upper”, etc., are as shown in the figure. It can be used to easily describe a correlation between a component and other components. Spatially relative terms should be understood as terms including different directions of components in use or operation in addition to the directions shown in the drawings. For example, if a component shown in the drawing is turned over, a component described as "below" or "beneath" of another component will be placed "above" the other component. Can be. Accordingly, the exemplary term “below” can include both the directions below and above. The component can also be oriented in other directions, so that spatially relative terms can be interpreted according to the orientation.

본 명세서에서, 컴퓨터는 적어도 하나의 프로세서를 포함하는 모든 종류의 하드웨어 장치를 의미하는 것이고, 실시 예에 따라 해당 하드웨어 장치에서 동작하는 소프트웨어적 구성도 포괄하는 의미로서 이해될 수 있다. 예를 들어, 컴퓨터는 스마트폰, 태블릿 PC, 데스크톱, 노트북 및 각 장치에서 구동되는 사용자 클라이언트 및 애플리케이션을 모두 포함하는 의미로서 이해될 수 있으며, 또한 이에 제한되는 것은 아니다.In the present specification, the computer means all kinds of hardware devices including at least one processor, and may be understood as a meaning encompassing software configurations operating in the corresponding hardware device according to embodiments. For example, a computer may be understood as meaning including, but not limited to, a smart phone, a tablet PC, a desktop, a laptop, and a user client and application running on each device.

이하, 첨부된 도면을 참조하여 본 발명의 실시 예를 상세하게 설명한다. Hereinafter, embodiments of the present invention will be described in detail with reference to the accompanying drawings.

도 1은 본 발명의 실시 예에 따른 식기세척기의 외관 예시를 도시한 도면이다. 1 is a view showing an example of the appearance of a dishwasher according to an embodiment of the present invention.

본 발명의 실시 예에 따른 식기 세척기 100는 도 1에서 도시되는 바와 같은 하우징 10을 포함하여 구성될 수 있다. 상기 하우징 10은 예컨대, 싱크대와 유사한 형태일 수 있으며, 수조와 수조를 지지하는 다리 등을 포함하는 형태일 수 있다.Dishwasher 100 according to an embodiment of the present invention may be configured to include a housing 10 as shown in FIG. The housing 10 may have a shape similar to a sink, for example, and may include a shape of a water tank and a leg supporting the water tank.

또한, 상기 식기 세척기 100는 일 면에 식기 세척기의 동작 상태 및 사용자의 입력 정보 등을 표시하는 표시부 140를 구비할 수 있다. 또한 상기 식기 세척기 100는 일 면에 사용자 입력을 수신하는 적어도 하나의 키를 포함하는 입력부 130를 구비할 수 있다. 상기 입력부 130의 키는 식기 세척기를 제어하기 위해 요구되는 사용자 입력을 수신할 수 있다.In addition, the dishwasher 100 may include a display unit 140 that displays an operation state of the dishwasher and user input information on one surface. In addition, the dishwasher 100 may include an input unit 130 including at least one key for receiving user input on one surface. The key of the input unit 130 may receive a user input required to control the dishwasher.

도 2는 본 발명의 실시 예에 따른 식기 세척기의 네트워크 구조에 관하여 도시한 도면이다. 2 is a diagram illustrating a network structure of a dishwasher according to an embodiment of the present invention.

본 발명의 실시 예에 따른 식기 세척기 100는 인공지능 기반의 동작 제어를 수행하기 위해, 도 2에서 도시되는 바와 같이 사용자 기기 200 및 서버 300와의 통신을 수행할 수 있다. The dishwasher 100 according to an embodiment of the present invention may perform communication with the user device 200 and the server 300 as illustrated in FIG. 2 to perform artificial intelligence-based operation control.

일 실시 예에 따라 상기 식기 세척기 100는 인공지능 기반의 분석동작을 수행하기 위해 요구되는 정보인 AI 분석용 데이터를 수집하고, 이를 서버 300로 전송할 수 있다. 예를 들어, 상기 식기 세척기 100는 이미지 센서를 통해 획득된 세척물의 이미지 정보, 탁도 센서를 통해 획득된 세척수의 오염도 등의 상황 데이터를 서버 300로 전송할 수 있다. 또한 상기 식기 세척기 100는 식기 세척기의 세척 동작 시 소요된 시간 정보, 선택된 세척 모드 등과 관련된 구동 데이터를 획득하고 이를 서버 300로 전송할 수 있다. According to an embodiment, the dishwasher 100 may collect AI analysis data, which is information required to perform an AI-based analysis operation, and transmit it to the server 300. For example, the dishwasher 100 may transmit situation data such as image information of the washing water obtained through the image sensor and the degree of contamination of the washing water obtained through the turbidity sensor to the server 300. In addition, the dishwasher 100 may acquire driving data related to time information required during the washing operation of the dishwasher, a selected washing mode, and the like, and transmit it to the server 300.

상기 서버 300는 식기 세척기 100로부터 획득된 AI 분석용 데이터를 기반으로 AI 연산을 수행할 수 있다. 상기 식기 세척기 100는 서버 300로부터 AI 연산 결과를 획득하고, 결과값을 적용한 세척 동작을 수행할 수 있다. 예컨대, 상기 식기 세척기 100는 서버 300로부터 AI 연산의 결과로, 현재 세척 상황(세척물의 종류, 세척물의 오염도 등)에 대응하는 가장 적합한 세척 모드를 산출할 수 있으며, 그에 대응하여 상기 식기 세척기 100는 산출된 세척 모드로 동작할 수 있다. The server 300 may perform AI calculation based on AI analysis data obtained from the dishwasher 100. The dishwasher 100 may obtain an AI calculation result from the server 300 and perform a washing operation applying the result value. For example, the dishwasher 100 may calculate the most suitable washing mode corresponding to the current washing situation (type of washing, contamination level of washing, etc.) as a result of AI calculation from the server 300, and correspondingly, the dish washing machine 100 may It can operate in the calculated washing mode.

이 밖에도 상기 식기 세척기 100는 AI 연산 결과인 부품 교체 시기, 고장 진단 등에 관한 정보를 상기 서버 300로부터 수신할 수 있고, 해당 정보를 표시부에 표시하도록 제어할 수 있다. In addition, the dishwasher 100 may receive information on the parts replacement timing, failure diagnosis, and the like, which are the result of AI calculation, from the server 300, and control the information to be displayed on the display unit.

또한 상기 서버 300는 AI 연산의 결과값을 상기 식기 세척기 100와 연결된 사용자 기기 200에 제공하여, 사용자 기기 200에서 결과값을 확인할 수 있도록 지원할 수 있다. In addition, the server 300 may provide the result of the AI operation to the user device 200 connected to the dishwasher 100, so that the user device 200 can check the result value.

상기 사용자 기기 200에는 식기 세척기 100의 동작 제어를 위한 어플리케이션이 설치될 수 있다. 상기 어플리케이션은 식기 세척기 100의 세척 동작의 원격 제어, AI 분석결과 표시 등을 지원할 수 있다. 상기 사용자 기기 200 또한 상기 어플리케이션을 통해 서버 300와 통신할 수 있으며, 사용자가 상기 어플리케이션을 통해 설정한 구동 데이터(예, 세척 예약 시간, 설정한 세척 모드 종류 등)를 서버 300로 제공할 수 있다. An application for controlling the operation of the dishwasher 100 may be installed on the user device 200. The application may support remote control of the washing operation of the dishwasher 100, AI analysis result display, and the like. The user device 200 may also communicate with the server 300 through the application, and may provide driving data set by the user through the application (eg, washing reservation time, set washing mode type, etc.) to the server 300.

다양한 실시 예에 따라, 상기 어플리케이션은 AI 에 의한 고장 진단 결과, 수리가 요구되는 경우 자동으로 서비스 센터에 수리 요청을 접수할 수 있다. 또는 상기 어플리케이션은 이 뿐 아니라 이에 상응하는 AI 진단에 대한 후속 동작을 수행할 수 있다.According to various embodiments, the application may automatically receive a repair request to a service center when a repair is required as a result of a failure diagnosis by AI. Alternatively, the application may perform a subsequent operation for AI diagnosis corresponding to this as well.

다음은 상기 서버 300가 수행하는 분석 동작의 기반이 되는, 인공 지능(artificial intelligence, AI)에 대하여 간략히 설명한다.The following will briefly describe artificial intelligence (AI), which is the basis of the analysis operation performed by the server 300.

인공 지능(artificial intelligence, AI)은 인간의 지능으로 할 수 있는 사고, 학습, 자기계발 등을 컴퓨터가 할 수 있도록 하는 방법을 연구하는 컴퓨터 공학 및 정보기술의 한 분야로, 컴퓨터가 인간의 지능적인 행동을 모방할 수 있도록 하는 것을 의미한다.Artificial intelligence (AI) is a field of computer science and information technology that studies how computers can do thinking, learning, and self-development that human intelligence can do. It means being able to imitate behavior.

또한, 인공지능은 그 자체로 존재하는 것이 아니라, 컴퓨터 과학의 다른 분야와 직간접으로 많은 관련을 맺고 있다. 특히 현대에는 정보기술의 여러 분야에서 인공지능적 요소를 도입하여, 그 분야의 문제 풀이에 활용하려는 시도가 매우 활발하게 이루어지고 있다.In addition, artificial intelligence does not exist by itself, but has many connections directly or indirectly with other fields of computer science. In particular, in recent years, attempts have been made to actively utilize artificial intelligence elements in various fields of information technology to solve problems in those fields.

머신 러닝(machine learning)은 인공지능의 한 분야로, 컴퓨터에 명시적인 프로그램 없이 배울 수 있는 능력을 부여하는 연구 분야이다. 구체적으로 머신 러닝은, 경험적 데이터를 기반으로 학습을 하고 예측을 수행하고 스스로의 성능을 향상시키는 시스템과 이를 위한 알고리즘을 연구하고 구축하는 기술이라 할 수 있다. 머신 러닝의 알고리즘들은 엄격하게 정해진 정적인 프로그램 명령들을 수행하는 것이라기보다, 입력 데이터를 기반으로 예측이나 결정을 이끌어내기 위해 특정한 모델을 구축하는 방식을 취한다.Machine learning is a field of artificial intelligence that is a research field that gives computers the ability to learn without explicit programming. Specifically, machine learning can be said to be a technology that studies and builds systems and algorithms for learning and performing predictions based on empirical data and improving one's own performance. Rather than performing strictly defined static program instructions, machine learning algorithms take the form of building a specific model to make predictions or decisions based on input data.

용어 ‘머신 러닝’은 용어 ‘기계 학습’과 혼용되어 사용될 수 있다. 기계 학습에서 데이터를 어떻게 분류할 것인가를 놓고, 많은 기계 학습 알고리즘이 개발되었다. 의사결정나무(Decision Tree)나 베이지안 망(Bayesian network), 서포트벡터머신(SVM: support vector machine), 그리고 인공 신경망(ANN: Artificial Neural Network) 등이 대표적이다.The term'machine learning' can be used interchangeably with the term'machine learning'. On how to classify data in machine learning, many machine learning algorithms have been developed. Decision trees, Bayesian networks, support vector machines (SVMs), and artificial neural networks (ANNs) are typical examples.

의사결정나무는 의사결정규칙(Decision Rule)을 나무구조로 도표화하여 분류와 예측을 수행하는 분석방법이다. 베이지안 망은 다수의 변수들 사이의 확률적 관계(조건부독립성: conditional independence)를 그래프 구조로 표현하는 모델이다. 베이지안 망은 비지도 학습(unsupervised learning)을 통한 데이터마이닝(data mining)에 적합하다. 서포트벡터머신은 패턴인식과 자료분석을 위한 지도 학습(supervised learning)의 모델이며, 주로 분류와 회귀 분석을 위해 사용한다.Decision trees are an analysis method that performs classification and prediction by charting decision rules in a tree structure. The Bayesian network is a model that expresses the probabilistic relationship (conditional independence) between multiple variables in a graph structure. Bayesian networks are suitable for data mining through unsupervised learning. The support vector machine is a model of supervised learning for pattern recognition and data analysis, and is mainly used for classification and regression analysis.

인공신경망은 생물학적 뉴런의 동작원리와 뉴런간의 연결 관계를 모델링한 것으로 노드(node) 또는 처리 요소(processing element)라고 하는 다수의 뉴런들이 레이어(layer) 구조의 형태로 연결된 정보처리 시스템이다.Artificial neural networks are models of biological neurons' operation principles and connections between neurons, and are information processing systems in which a number of neurons, called nodes or processing elements, are connected in the form of a layer structure.

인공 신경망은 기계 학습에서 사용되는 모델로써, 기계학습과 인지과학에서 생물학의 신경망(동물의 중추신경계 중 특히 뇌)에서 영감을 얻은 통계학적 학습 알고리즘이다. 구체적으로 인공신경망은 시냅스(synapse)의 결합으로 네트워크를 형성한 인공 뉴런(노드)이 학습을 통해 시냅스의 결합 세기를 변화시켜, 문제 해결 능력을 가지는 모델 전반을 의미할 수 있다. 용어 인공신경망은 용어 뉴럴 네트워크(Neural Network)와 혼용되어 사용될 수 있다.Artificial neural networks are models used in machine learning and are statistical learning algorithms inspired by the neural networks of biology (especially the brain of the animal's central nervous system) in machine learning and cognitive science. Specifically, the artificial neural network may refer to an overall model having a problem solving ability by changing the strength of synaptic binding through learning of artificial neurons (nodes) that have formed a network through the combination of synapses. The term artificial neural network may be used interchangeably with the term neural network.

인공신경망은 복수의 레이어(layer)를 포함할 수 있고, 레이어들 각각은 복수의 뉴런(neuron)을 포함할 수 있다. 또한 인공신경망은 뉴런과 뉴런을 연결하는 시냅스를 포함할 수 있다. 인공 신경망은 일반적으로 다음의 세가지 인자, 즉 (1) 다른 레이어의 뉴런들 사이의 연결 패턴 (2) 연결의 가중치를 갱신하는 학습 과정 (3) 이전 레이어로부터 수신되는 입력에 대하여 가중 합을 취하여 출력값을 생성하는 활성화 함수에 의해 정의될 수 있다.The artificial neural network may include a plurality of layers, and each of the layers may include a plurality of neurons. Also, the artificial neural network may include neurons and synapses connecting neurons. Artificial neural networks generally have the following three factors: (1) the connection pattern between neurons in different layers (2) the learning process of updating the weight of the connection (3) the weighted sum of the inputs received from the previous layer and the output value It can be defined by an activation function that generates.

인공 신경망은, DNN(Deep Neural Network), RNN(Recurrent Neural Network), BRDNN(Bidirectional Recurrent Deep Neural Network), MLP(Multilayer Perceptron), CNN(Convolutional Neural Network)와 같은 방식의 네트워크 모델들을 포함할 수 있으나, 이에 한정되지 않는다.The artificial neural network may include network models such as Deep Neural Network (DNN), Recurrent Neural Network (RNN), Bidirectional Recurrent Deep Neural Network (BRDNN), Multilayer Perceptron (MLP), and Convolutional Neural Network (CNN). , But is not limited to this.

용어 ‘레이어’는 용어 ‘계층’과 혼용되어 사용될 수 있다.The term'layer' can be used interchangeably with the term'layer'.

인공신경망은 계층 수에 따라 단층 신경망(Single-Layer Neural Networks)과 다층 신경망(Multi-Layer Neural Networks)으로 구분된다.Artificial neural networks are divided into single-layer neural networks and multi-layer neural networks according to the number of layers.

일반적인 단층 신경망은, 입력층과 출력층으로 구성된다.A typical single layer neural network is composed of an input layer and an output layer.

또한 일반적인 다층 신경망은 입력층(Input Layer)과 은닉층(Hidden Layer), 출력층(Output Layer)으로 구성된다.In addition, the general multi-layer neural network is composed of an input layer, a hidden layer, and an output layer.

입력층은 외부의 자료들을 받아들이는 층으로서, 입력층의 뉴런 수는 입력되는 변수의 수와 동일하며, 은닉층은 입력층과 출력층 사이에 위치하며 입력층으로부터 신호를 받아 특성을 추출하여 출력층으로 전달한다. 출력층은 은닉층으로부터 신호를 받아 외부로 출력한다. 뉴런간의 입력신호는 0에서 1 사이의 값을 갖는 각각의 연결강도와 곱해진 후 합산되며 이 합이 뉴런의 임계치보다 크면 뉴런이 활성화되어 활성화 함수를 통하여 출력값으로 구현된다.The input layer is a layer that accepts external data, the number of neurons in the input layer is the same as the number of input variables, and the hidden layer is located between the input layer and the output layer, receives signals from the input layer, extracts characteristics, and delivers it to the output layer do. The output layer receives a signal from the hidden layer and outputs it to the outside. The input signal between neurons is multiplied and multiplied by each connection strength having a value between 0 and 1, and when this sum is greater than the threshold value of the neuron, the neuron is activated and implemented as an output value through an activation function.

한편 입력층과 출력 층 사이에 복수의 은닉층을 포함하는 심층 신경망은, 기계 학습 기술의 한 종류인 딥 러닝을 구현하는 대표적인 인공 신경망일 수 있다.Meanwhile, the deep neural network including a plurality of hidden layers between the input layer and the output layer may be a representative artificial neural network that implements deep learning, which is a kind of machine learning technology.

한편 용어 ‘딥 러닝’은 용어 ‘심층 학습’과 혼용되어 사용될 수 있다. 인공 신경망은 훈련 데이터(training data)를 이용하여 학습(training)될 수 있다. 여기서 학습이란, 입력 데이터를 분류(classification)하거나 회귀분석(regression)하거나 군집화(clustering)하는 등의 목적을 달성하기 위하여, 학습 데이터를 이용하여 인공 신경망의 파라미터(parameter)를 결정하는 과정을 의미할 수 있다. 인공신경망의 파라미터의 대표적인 예시로써, 시냅스에 부여되는 가중치(weight)나 뉴런에 적용되는 편향(bias)을 들 수 있다.Meanwhile, the term “deep learning” may be used interchangeably with the term “deep learning”. The artificial neural network can be trained using training data. Here, learning refers to a process of determining parameters of an artificial neural network using learning data in order to achieve the purpose of classifying, regressing, or clustering input data. Can be. Representative examples of the parameters of the artificial neural network include a weight applied to a synapse or a bias applied to a neuron.

훈련 데이터에 의하여 학습된 인공 신경망은, 입력 데이터를 입력 데이터가 가지는 패턴에 따라 분류하거나 군집화 할 수 있다.The artificial neural network learned by the training data may classify or cluster the input data according to a pattern of the input data.

이하에서는, 상기 식기 세척기의 각 구성 요소에 대하여 보다 구체적으로 기술하기로 한다. Hereinafter, each component of the dishwasher will be described in more detail.

도 3은 본 발명의 실시 예에 따른 식기 세척기의 구성을 도시한 도면이다. 3 is a view showing the configuration of a dishwasher according to an embodiment of the present invention.

도 3에서 도시되는 바와 같이, 본 발명의 실시 예에 따른 식기 세척기 100는 통신부 110, 저장부 120, 입력부 130, 표시부 140, 센서부 150, 세척 모듈 160 및 제어부 170를 포함하여 구성될 수 있다. 그리고 상기 제어부 170는 세척 제어부 171, AI 지원부 172를 포함하여 구성될 수 있다. As shown in FIG. 3, the dishwasher 100 according to an embodiment of the present invention may include a communication unit 110, a storage unit 120, an input unit 130, a display unit 140, a sensor unit 150, a washing module 160, and a control unit 170. In addition, the control unit 170 may include a washing control unit 171 and an AI support unit 172.

상기 통신부 110는 유선 또는 무선 통신을 수행하기 위한 통신 회로를 포함하고, 서버 100와 유선 또는 무선 통신할 수 있다. 나아가 상기 통신부 110는 사용자 기기 200와 통신할 수 있다.The communication unit 110 includes a communication circuit for performing wired or wireless communication, and may perform wired or wireless communication with the server 100. Furthermore, the communication unit 110 may communicate with the user device 200.

상기 저장부 120는 식기 세척기의 다양한 기능을 지원하는 데이터를 저장할 수 있다. 예를 들어, 상기 저장부 120는 식기 세척기가 지원하는 각각의 세척모드에 관련된 정보를 저장할 수 있다. 각 세척 모드는 다수개의 세척 설정값(예, 세척 강도, 세척 시간, 세척 횟수 등에 대한 설정값)으로 구성될 수 있다. The storage unit 120 may store data supporting various functions of the dishwasher. For example, the storage unit 120 may store information related to each washing mode supported by the dishwasher. Each washing mode may be configured with a plurality of washing settings (eg, washing intensity, washing time, washing frequency, etc.).

상기 입력부 130는 사용자로부터 정보를 입력 받기 위한 것으로서, 사용자 측으로부터 정보가 입력되면 그에 대응하는 명령을 제어부 170로 전달할 수 있다. 상기 입력부 130는 기계식 입력수단(키, 돔 스위치 등) 또는 터치식 입력수단을 포함할 수 있다. 상기 터치식 입력수단은 소프트웨어적인 처리를 통해 터치스크린에 표시되는 가상 키, 소프트 키로 이루어지거나, 상기 터치스크린 이외의 부분에 배치되는 터치 키로 이루어질 수 있다. The input unit 130 is for receiving information from a user, and when information is input from the user, a command corresponding thereto may be transmitted to the control unit 170. The input unit 130 may include mechanical input means (keys, dome switches, etc.) or touch input means. The touch-type input means may be made of virtual keys or soft keys displayed on the touch screen through software processing, or may be made of touch keys disposed on parts other than the touch screen.

상기 표시부 140는 식기 세척기 100에서 처리되는 정보를 표시할 수 있다. 예를 들어, 상기 표시부 140는 식기 세척기에서 구동되는 응용 프로그램의 실행화면 정보, 또는 이러한 실행화면 정보에 따른 UI, GUI 정보를 표시할 수 있다. The display unit 140 may display information processed by the dishwasher 100. For example, the display unit 140 may display execution screen information of an application program driven by the dishwasher, or UI and GUI information according to the execution screen information.

본 발명의 실시 예에 따라 상기 표시부 140는 AI 연산에 기반하여 산출된 결과 정보를 표시할 수 있다. AI 연산에 의해 산출되는 정보는 예컨대, 현재 세척 상황에 대응하는 최적의 세척 모드 정보, 고장 진단 정보 등이 포함될 수 있다. According to an embodiment of the present invention, the display unit 140 may display result information calculated based on AI calculation. Information calculated by the AI operation may include, for example, optimal washing mode information corresponding to the current washing situation, failure diagnosis information, and the like.

상기 센서부 150는 이미지 센서, 온도 센서, 탁도 센서, 잔량 감지 센서, 개폐 센서, 전압 센서, 전류 센서, 유량 센서 및 압력 센서 중 적어도 하나를 포함할 수 있다. The sensor unit 150 may include at least one of an image sensor, a temperature sensor, a turbidity sensor, a residual amount detection sensor, an open/close sensor, a voltage sensor, a current sensor, a flow sensor, and a pressure sensor.

상기 이미지 센서는 세척물의 수량, 세척물의 종류(식기, 식재료) 및 세척물의 오염도를 판단하기 위해 세척조에 투입되는 세척물의 이미지 정보를 센싱할 수 있다. 또한 상기 이미지 센서는 세척조에 담긴 세척수의 오염도를 평가하기 위한 세척조 내 세척수 이미지를 센싱할 수 있다. 또한 상기 이미지 센서는 세척 동작의 완료 여부를 판단하기 위해, 세척물의 이미지 정보를 센싱할 수 있다. The image sensor may sense image information of the washing water input to the washing tank to determine the quantity of the washing water, the type of the washing water (tableware, food materials) and the degree of contamination of the washing water. In addition, the image sensor may sense an image of the washing water in the washing tank for evaluating the degree of contamination of the washing water in the washing tank. In addition, the image sensor may sense image information of the washing object to determine whether the washing operation is completed.

상기 온도 센서, 탁도 센서는 세척수의 상태(온도, 탁도)를 평가하기 위한 센싱 동작을 수행할 수 있다. 상기 잔량 감지 센서는 세제의 잔량을 감지할 수 있다. 그리고 상기 개폐 센서, 유량 센서는 세척수의 급배수 상태를 판단하기 위한 센싱 동작을 수행할 수 있다. 그리고 상기 전압 센서, 전류 센서, 압력 센서는 세척 동작의 특성(세척 강도, 출력 주파수 등)을 판단하기 위한 센싱 동작을 수행할 수 있다. The temperature sensor and the turbidity sensor may perform a sensing operation to evaluate the state (temperature, turbidity) of the washing water. The remaining amount detection sensor may detect the remaining amount of detergent. In addition, the opening/closing sensor and the flow sensor may perform a sensing operation to determine the supply/reception status of the washing water. In addition, the voltage sensor, the current sensor, and the pressure sensor may perform a sensing operation to determine characteristics of the washing operation (wash strength, output frequency, etc.).

상기 세척 모듈 160은 실질적인 세척 동작인 분사 동작, 초음파 발생 동작, 세제 투입 동작, 버블 발생 동작 등을 제어부의 제어 하에 수행할 수 있다.The washing module 160 may perform an actual washing operation, an injection operation, an ultrasonic generation operation, a detergent input operation, and a bubble generation operation, under the control of the control unit.

도면에 도시되지 않았지만, 상기 식기 세척기에는 상기 세척 모듈 160 외에도 제어부의 제어 하에 구동되는 구동 모듈이 더 포함될 수 있다. 예컨대, 상기 식기 세척기는 건조 기능을 수행하는 건조 모듈, 급배수 동작을 수행하는 급배수 모듈을 더 포함할 수 있다. Although not shown in the drawing, the dishwasher may further include a driving module driven under the control of a control unit in addition to the washing module 160. For example, the dishwasher may further include a drying module that performs a drying function, and a supply and drainage module that performs a water supply and drainage operation.

상기 제어부 170는 세척 제어부 171, AI 지원부 172를 포함하여 구성될 수 있다. The control unit 170 may include a washing control unit 171 and an AI support unit 172.

상기 제어부 170의 세척 제어부 171는 식기 세척기의 전반적인 동작을 제어할 수 있다. 구체적으로, 상기 세척 제어부 171는 센서부로부터 수신된 센싱 정보, 입력부로부터 수신된 입력 정보 등을 획득할 수 있다. 나아가 세척 제어부 171는 실제 구동 동작과 관련된 정보(예, 급수가 시작됨, 온수 급수 동작이 시작됨 등)를 획득할 수 있다. 그리고 상기 세척 제어부 171는 센싱 정보 또는 사용자로부터 수신된 입력 정보에 기반하여 제어 명령을 생성하고, 제어 명령을 세척 모듈 160에 전달할 수 있다. The washing control unit 171 of the control unit 170 may control the overall operation of the dishwasher. Specifically, the washing control unit 171 may acquire sensing information received from the sensor unit, input information received from the input unit, and the like. Furthermore, the washing control unit 171 may acquire information related to an actual driving operation (eg, water supply is started, hot water supply is started, etc.). In addition, the washing control unit 171 may generate a control command based on sensing information or input information received from the user, and transmit the control command to the washing module 160.

또한 상기 세척 제어부 171는 다양한 종류의 세척 모드에 기반하여 세척 동작을 명령할 수 있다. 상기 세척 모드는 세척 강도, 세척 시간, 세척 횟수 중 적어도 하나에 대한 설정값을 지정해 놓은 것일 수 있다. 예컨대, 제 1 세척모드는 1단계의 세척 강도, 2단계의 세척 시간, 3단계의 세척 횟수로 설정된 모드이고, 제 2 세척모드는 2단계의 세척 강도, 2단계의 세척 시간, 3단계의 세척 횟수로 설정된 모드일 수 있다. In addition, the washing control unit 171 may command a washing operation based on various kinds of washing modes. The washing mode may be a setting value for at least one of washing strength, washing time, and washing frequency. For example, the first washing mode is a mode set with a washing strength of 1 stage, a washing time of 2 stages, a washing frequency of 3 stages, and a second washing mode is a washing strength of 2 stages, a washing time of 2 stages, a washing of 3 stages It may be a mode set by the number of times.

각 세척 모드는 세척물의 종류 또는 사용자의 선호도 등에 따라 선택될 수 있다. 그리고 각 세척모드는 사용자의 선택에 의해 선택될 수도 있으나, AI 연산 결과에 따라 자동 선택될 수도 있다. Each washing mode may be selected according to the type of washing material or the user's preference. In addition, each washing mode may be selected by a user's selection, or may be automatically selected according to AI calculation results.

상기 AI 지원부 172는 AI 분석용 데이터(식기 세척기 100에서 획득되어 서버 300로 보내지는 데이터)의 획득 및 추출 조건을 확인하고, 조건 상황 하에서 AI 분석용 데이터를 서버 300로 송신할 수 있다. The AI support unit 172 may check the acquisition and extraction conditions of AI analysis data (data acquired from the dishwasher 100 and sent to the server 300), and transmit AI analysis data to the server 300 under condition conditions.

본 발명의 실시 예에 따른 상기 AI 지원부 172는 적합 세척 모드 설정을 지원하는 적합 세척 모드 설정 지원부와 식기 세척기의 고장 진단을 수행하기 위해 AI 연산 기능을 이용하는 고장 진단 지원부를 포함하도록 구성될 수 있다.The AI support unit 172 according to an embodiment of the present invention may be configured to include a suitable washing mode setting support unit for supporting a suitable washing mode setting and a failure diagnosis support unit using an AI operation function to perform a failure diagnosis of the dishwasher.

상기 적합 세척모드 설정 지원부와, 고장 진단 지원부는 각각 AI의 개입 없이 분석 가능한 항목과 AI의 개입이 요구되는 분석 항목을 분류할 수 있다. 그리고 상기 적합 세척모드 설정 지원부와 고장 진단 지원부는 각각 AI 개입 없이 분석 가능한 항목에 대하여 자체 분석 동작을 수행하도록 세척 제어부 171에 요청할 수 있다. The suitable washing mode setting support unit and the failure diagnosis support unit may classify items that can be analyzed without AI intervention and analysis items that require AI intervention, respectively. In addition, the appropriate washing mode setting support unit and the failure diagnosis support unit may request the washing control unit 171 to perform an analysis operation on items that can be analyzed without AI intervention.

그에 따라, 상기 세척 제어부 171는 자체 분석 동작을 적합 세척모드 설정 분야와, 고장 진단 분야 각각에 대하여 수행할 수 있다. Accordingly, the washing control unit 171 may perform a self-analysis operation for each of a suitable washing mode setting field and a fault diagnosis field.

먼저, 세척 제어부 171는 적합 세척 모드 설정 분야에 있어서, 자체 분석 동작을 다음과 같이 수행할 수 있다. First, in the field of setting a suitable washing mode, the washing control unit 171 may perform a self-analysis operation as follows.

상기 세척 제어부 171는 저장부 120에 기 저장된 테이블 형식의 정보에 기반하여, 인풋 데이터(예, 센싱 데이터, 입력 데이터)와 1:1로 매칭되는 아웃풋 데이터(예, 구동 데이터)를 산출할 수 있다. 예를 들어, 상기 식기 세척기는 세척조에 담긴 세척물의 무게가 기 설정된 값에 도달하였을 때, 세척 동작을 개시하도록 설정되어 있을 수 있다. 이와 같은 경우, 상기 세척 제어부 171는 세척물의 무게(인풋 데이터)에 대응하는 세척 동작의 개시 여부(아웃풋 데이터)를 산출할 수 있다. The washing control unit 171 may calculate output data (eg, driving data) matching 1:1 with input data (eg, sensing data, input data) based on information in a table format previously stored in the storage unit 120. . For example, the dishwasher may be set to start a washing operation when the weight of the washing water contained in the washing tank reaches a preset value. In this case, the washing control unit 171 may calculate whether to start a washing operation (output data) corresponding to the weight of the washing object (input data).

또한, 상기 세척 제어부 171는 고장 진단 분야에 있어서, 자체 분석 동작을 다음과 같이 수행할 수 있다. In addition, in the field of failure diagnosis, the washing control unit 171 may perform a self-analysis operation as follows.

상기 세척 제어부 171는 고장 진단에 대한 자체 분석 시, 저장부에 기 저장된 테이블 정보에 따라 현 상황에 대응하는 고장 종류를 판단할 수 있다. 이 때 상기 테이블 정보는 식기 세척기의 증상과 해당 증상에 대응하는 고장의 명칭 내지 에러코드를 1:1로 매칭하여 리스트화 한 자료를 의미할 수 있다. When the self-analysis of the fault diagnosis, the washing control unit 171 may determine the type of fault corresponding to the current situation according to table information pre-stored in the storage unit. In this case, the table information may refer to data listing the dishwasher symptom and the name of the failure corresponding to the symptom or the error code 1:1.

즉, 상기 세척 제어부 171는 구동 명령에 대응하여 해당 기능이 동작하지 않는 경우, 해당 기능에 대한 고장 여부를 판단하고, 해당 고장의 종류를 의미하는 코드명을 산출하는 자체 분석 동작을 수행할 수 있다. That is, when the corresponding function does not operate in response to the driving command, the washing control unit 171 may perform a self-analysis operation for determining whether the function has failed and calculating a code name indicating the type of the corresponding failure. .

한편, AI 개입이 요구되는 분석 항목의 경우, AI 지원부 172(적합 세척모드 설정부, 고장 진단 지원부)가 AI 분석용 데이터를 수집하여 서버 300에 전송하고, 서버 300에 AI 분석 동작을 요청할 수 있다. On the other hand, in the case of an analysis item requiring AI intervention, AI support unit 172 (suitable washing mode setting unit, failure diagnosis support unit) collects data for AI analysis and transmits it to server 300, and may request AI analysis operation from server 300. .

상기 AI 지원부 172는 AI 연산이 요청되는 조건 상황을 판단하여, 조건 상황 하에서 AI 분석용 데이터를 선택적으로 획득할 수 있다. 이후 상기 AI 지원부 172는 획득된 AI 분석용 데이터를 서버 300에 전송하고, 서버 300의 AI 연산의 결과값을 수신할 수 있다. 서버 300로부터 식기 세척기 100측으로 수신된 AI 연산의 결과값은 세척 제어부 171에 의해 적용되고, 해당 결과값에 대응하는 세척 동작 내지 고장 해결 동작이 수행될 수 있다. The AI support unit 172 may determine a condition situation in which an AI operation is requested, and selectively obtain AI analysis data under the condition condition. Thereafter, the AI support unit 172 may transmit the acquired AI analysis data to the server 300 and receive the result of the AI operation of the server 300. The result value of the AI operation received from the server 300 to the dishwasher 100 side is applied by the washing control unit 171, and a washing operation or a trouble shooting operation corresponding to the result value may be performed.

그리고 이 때, 상기 AI 지원부 172(적합 세척 모드 설정 지원부, 고장 진단 지원부)는 공통적으로, AI 분석용 데이터를 획득할 만한 조건 상황(AI 분석 요청 상황)인지 여부를 판단할 수 있는데, 상기 조건 상황은 자체 분석 결과에 기반할 수 있다. 예를 들면, 상기 식기 세척기에서 자체 분석에 의해 판단 가능한 에러 코드의 종류가 a, b, c, d 총 4가지라고 한다면, 상기 AI 지원부 172(고장 진단 지원부)는 그 중 특정 1가지 에러 코드 a에 한하여 AI 분석 요청 상황으로 판단할 수 있다. 그리고 서버 300는 AI 기반의 분석 동작을 통해 상기 에러 코드 a에 대한 구체화(예, a1, a2, a3)를 수행할 수 있다. 이하에서는, 자체 분석에 의해 산출된 오류 코드를 1차 오류코드로 명명하고, AI 분석에 기반하여 산출되는 오류 코드를 2차 오류코드로 명명하기로 한다. In addition, at this time, the AI support unit 172 (suitable washing mode setting support unit, failure diagnosis support unit) can commonly determine whether it is a condition situation (AI analysis request situation) capable of acquiring AI analysis data. Can be based on the results of its own analysis. For example, if the dishwasher has four types of error codes that can be determined by self-analysis, a, b, c, and d, the AI support unit 172 (fault diagnosis support unit) has one specific error code a Only the AI analysis request situation can be judged. In addition, the server 300 may perform specification (eg, a1, a2, a3) of the error code a through an AI-based analysis operation. Hereinafter, an error code calculated by self-analysis will be referred to as a primary error code, and an error code calculated based on AI analysis will be referred to as a secondary error code.

AI 지원부 172가 AI 연산을 서버 300에 요청하는 동작은 구체적으로 다음과 같다. The operation of the AI support unit 172 requesting the AI operation to the server 300 is specifically as follows.

먼저, 상기 AI 지원부 172 중 적합 세척 모드 설정 지원부는 적합 세척 모드 설정을 위해, 조건 상황 하(예, 세척 동작 중 세척물 추가 투입 상황, 세척물의 오염도 및 수량이 기준치 이상인 경우 등)에서 AI 분석용 데이터를 획득하고 이를 서버 300에 전송할 수 있다. 상기 서버 300는 AI 연산을 수행함에 따라, 세척 상황(세척물의 종류, 세척물의 수량, 세척물의 오염도 등)에 대응하는 최적의 세척 모드를 산출할 수 있다. 그리고 그에 따라 상기 적합 세척 모드 설정 지원부는 서버 300에서 산출된 AI 연산 결과값을 수신하고, 수신된 AI 연산 결과값(적합 세척 모드)에 대응하는 신호를 세척 제어부 171에 전송할 수 있다. 이에 따라, 상기 세척 제어부 171는 AI 연산 결과로 산출된 적합 세척 모드를 적용하고, 해당 세척 모드에 대응하는 기능을 수행할 수 있다. First, among the AI support units 172, a suitable washing mode setting support unit is used for AI analysis under condition conditions (for example, when a washing material is added during washing operation, the degree of contamination and quantity of washing water is greater than or equal to a reference value) Data can be acquired and transmitted to the server 300. As the server 300 performs AI calculation, it is possible to calculate an optimal washing mode corresponding to the washing situation (type of washing, amount of washing, contamination of the washing, etc.). And accordingly, the suitable washing mode setting support unit may receive the AI calculation result value calculated by the server 300, and transmit a signal corresponding to the received AI calculation result value (suitable washing mode) to the washing control unit 171. Accordingly, the washing control unit 171 may apply a suitable washing mode calculated as a result of AI calculation, and perform a function corresponding to the washing mode.

또한 상기 AI 지원부 172의 고장 진단 지원부는 식기 세척기에 발생한 고장 증상을 해결하기 위해 A 서버 300에 AI 연산 및 AI 연산의 결과값을 요청할 수 있다. In addition, the failure diagnosis support unit of the AI support unit 172 may request the AI server 300 and the result values of the AI calculation to solve the failure symptoms occurring in the dishwasher.

마찬가지로 상기 고장 진단 지원부 또한 AI 분석 요청 상황 여부를 판단하여, AI 분석 요청 상황(조건 상황)에 해당하는 것으로 판단되는 경우, AI 분석용 데이터를 획득 및 서버 300로 전송할 수 있다. Likewise, the failure diagnosis support unit may also determine whether an AI analysis request situation exists, and if it is determined to correspond to an AI analysis request situation (conditional situation), AI analysis data may be acquired and transmitted to the server 300.

상기 서버 300는 인공지능 알고리즘에 기반하여 현재 증상 정보를 투입하고, 이를 기반으로 결과값(예, 고장에 대한 해결책, 예방책)을 산출하여 표시부에 표시하거나 사용자 기기 200에 전달할 수 있다. The server 300 may input current symptom information based on an artificial intelligence algorithm, and calculate a result value (eg, a solution to a failure, a preventive measure) based on this, and display the result on the display unit or transmit it to the user device 200.

다양한 실시 예에 따라, 상기 서버 300의 AI 분석 결과, 해당 고장이 사용자에 의해 해결될 수 없는 고장인 것으로 판단되는 경우, 상기 고장 진단 지원부는 사용자 기기 200를 통해 서비스 센터에 수리 요청하도록 지원할 수 있다. 더욱 다양한 실시 예에 따라 상기 서버 300는 기 등록된 수리 기사와 사용자 기기 200를 매칭하여 원격 통신을 지원할 수도 있다. According to various embodiments of the present disclosure, when it is determined that a corresponding failure is a failure that cannot be solved by a user as a result of AI analysis of the server 300, the failure diagnosis support unit may assist the service center to request a repair through the user device 200. . According to various embodiments of the present disclosure, the server 300 may support remote communication by matching a pre-registered repair technician with a user device 200.

이하에서는, 서버의 구성요소 및 그 동작에 관하여 설명하기로 한다. Hereinafter, the components of the server and their operation will be described.

도 4는 본 발명의 실시 예에 따른 서버의 구성을 도시한 도면이다. 4 is a diagram showing the configuration of a server according to an embodiment of the present invention.

도 4에서 도시되는 바와 같이, 본 발명의 실시 예에 따른 서버 300는 데이터 분류부 301, AI 연산부 302를 포함하여 구성될 수 있다. 도면에 도시되지는 않았으나, 상기 서버 300가 식기 세척기 및 사용자 기기 200와 통신할 수 있는 통신모듈을 포함하여 구성될 수 있음은 물론이다. 그리고 그 밖에도, 도면상에서는 생략되었으나, 상기 서버 300는 AI 알고리즘 모델과, 식기 세척기 100 및 사용자 기기 200로부터 수신된 AI 분석용 데이터를 저장하는 저장부를 더 포함할 수 있다. As illustrated in FIG. 4, the server 300 according to an embodiment of the present invention may include a data classification unit 301 and an AI operation unit 302. Although not shown in the drawings, the server 300 may be configured to include a dishwasher and a communication module that can communicate with the user device 200. In addition, although omitted in the drawings, the server 300 may further include an AI algorithm model and a storage unit for storing AI analysis data received from the dishwasher 100 and the user device 200.

본 발명의 실시 예에 따라, 상기 서버 300는 식기 세척기 100와 사용자 기기 200로부터 AI 분석용 데이터를 획득하고, 획득된 AI 분석용 데이터를 분류하며 이후 AI 분석 동작을 수행할 수 있다. 획득된 AI 분석용 데이터를 카테고리에 따라 분류하는 동작은 서버 300의 데이터 분류부 301에 의해 수행될 수 있고, AI 분석 동작은 AI 연산부 302에 의해 수행될 수 있다.According to an embodiment of the present invention, the server 300 may obtain AI analysis data from the dishwasher 100 and the user device 200, classify the acquired AI analysis data, and then perform an AI analysis operation. The operation of classifying the acquired AI analysis data according to the category may be performed by the data classification unit 301 of the server 300, and the AI analysis operation may be performed by the AI operation unit 302.

먼저, 상기 데이터 분류부 301는 적합 세척 모드의 설정에 관한 카테고리와, 고장 진단에 관련된 카테고리로 데이터를 분류하는 1차 분류 동작을 수행할 수 있다. First, the data classification unit 301 may perform a primary classification operation to classify data into categories related to setting a suitable washing mode and categories related to failure diagnosis.

먼저, 상기 데이터 분류부 301는 고장이 의심되는 상황에서 수신된 AI 분석용 데이터는 AI 기반의 고장 진단 카테고리로 분류할 수 있다. 일 실시 예에 따라, 고장이 의심되는 상황에서의 AI 분석용 데이터는 별도의 코드(예, 자체 분석 결과 산출된 1차 오류 코드)를 포함할 수 있으며, 그에 따라, 상기 데이터 분류부 301는 코드명에 기반한 카테고리 분류를 수행할 수 있다. 상기 데이터 분류부 301는 수신된 AI 분석용 데이터가 1차 오류코드를 포함하지 않거나, 상기 1차 오류 코드와는 다른 종류의 코드를 포함하는 경우, 이를 적합 세척 모드 설정용 카테고리로 분류할 수 있다. First, the data classification unit 301 may classify AI data received in a situation where a failure is suspected into an AI-based failure diagnosis category. According to an embodiment, the data for AI analysis in a situation in which a failure is suspected may include a separate code (eg, a primary error code calculated as a result of self-analysis), and accordingly, the data classification unit 301 is a code You can perform category classification based on people. When the received AI analysis data does not include a primary error code or a different type of code from the primary error code, the data classification unit 301 may classify it as a category for setting a suitable washing mode. .

나아가, 상기 데이터 분류부 301는 1차 분류 동작 이후, 각 카테고리에 포함된 데이터 항목들 중 AI 연산 모델에 투입할 개별 인풋 데이터를 추출하는 2차 분류 동작을 수행할 수 있다. 예를 들어 상기 데이터 분류부 301는 적합 세척 모드를 산출하고자 할 시, 세척물의 종류(세척물 이미지로 판단될 수 있음), 세척물의 수량(무게 데이터, 세척조 에 투하된 세척물 이미지에 의해 판단될 수 있음), 세척수의 오염도(탁도 센서에 의해 감지된 세척수 탁도, 세척수의 이미지로 판단될 수 있음)를 추출하는 2차 분류 동작을 수행할 수 있다. 참고로, 상기 데이터 분류부 301는 2차 분류 동작 또는 1차 분류 동작 이전에, 세척물 이미지로부터 세척물의 종류 정보를 판단하거나, 탁도 센서의 센싱값을 기반으로 세척수의 오염도를 산출하는 전처리 동작을 추가적으로 수행할 수 있다. Furthermore, after the primary classification operation, the data classification unit 301 may perform a secondary classification operation for extracting individual input data to be input to an AI computation model among data items included in each category. For example, when the data classification unit 301 intends to calculate a suitable washing mode, it is determined by the type of washing material (which may be determined as a washing image) and the number of washing substances (weight data, the washing image dropped on the washing tank). May be performed), and a second classification operation for extracting the degree of contamination of the washing water (the turbidity of the washing water detected by the turbidity sensor and the image of the washing water) may be performed. For reference, the data classification unit 301 performs a pre-processing operation for determining the type information of the washing water from the washing image before the second sorting operation or the first sorting operation, or calculating the degree of contamination of the washing water based on the sensing value of the turbidity sensor. It can be done additionally.

또한 상기 데이터 분류부 301는 고장 진단을 위한 2차 분류 동작을 수행할 수 있다. 1차 분류동작에 의해 고장 진단용 카테고리로 분류된 데이터들도 각각 AI 연산 모델에 투입할 개별 인풋 데이터로써 추출될 수 있는데, 예를 들어, 세척 동작 시 구동 주파수, 급배수 설정값, 센싱부의 센싱 정보들(세척조 상황 정보, 세척수 오염도 변화정보) 등을 포함할 수 있다. In addition, the data classification unit 301 may perform a second classification operation for diagnosing a failure. Data classified into a fault diagnosis category by the first sorting operation may also be extracted as individual input data to be input to the AI calculation model, for example, the driving frequency, the setting value of the sudden multiple, and sensing information of the sensing unit during the washing operation. Field (washing tank situation information, washing water pollution level change information), and the like.

상기 데이터 분류부 301는 상기 2자 분류 동작에 의해 추출된 데이터 항목들을 AI 연산부 302로 제공할 수 있다. The data classification unit 301 may provide data items extracted by the two-character classification operation to the AI operation unit 302.

이하에서는 AI 연산부 302에 대하여 설명하기로 한다. Hereinafter, the AI operation unit 302 will be described.

상기 AI 연산부 302는 획득한 데이터 항목들을 AI 모델에 인풋 데이터로 투입하여 AI 학습 및 아웃풋 데이터 산출 동작을 수행할 수 있다.The AI operation unit 302 may input the acquired data items as input data to the AI model to perform AI learning and output data calculation operations.

상기 AI 연산부 302가 활용하는 AI 모델은, 감독 또는 감독되지 않은 학습, 데이터 마이닝, 예측 분석 또는 타 머신에서 사용되기 위한 데이터의 출력을 위해 데이터베이스에 저장되는 정보일 수 있다. The AI model utilized by the AI operation unit 302 may be information stored in a database for supervised or unsupervised learning, data mining, predictive analysis, or output of data for use in other machines.

상기 AI 연산부 302는 다양한 유형의 데이터 분석 알고리즘 및 기계 학습 알고리즘 중 임의의 것을 사용할 수 있다. The AI operation unit 302 may use any of various types of data analysis algorithms and machine learning algorithms.

이러한 알고리즘의 예로는, k-최근 인접 시스템, 퍼지 논리 (예: 가능성 이론), 신경 회로망, 볼츠만 기계, 벡터 양자화, 펄스 신경망, 지원 벡터 기계, 최대 마진 분류기, 힐 클라이밍, 유도 논리 시스템 베이지안 네트워크, 페리트넷 (예: 유한 상태 머신, 밀리 머신, 무어 유한 상태 머신), 분류기 트리 (예: 퍼셉트론 트리, 지원 벡터 트리, 마코프 트리, 의사 결정 트리 포리스트, 임의의 포리스트), 판돈 모델 및 시스템, 인공 융합, 센서 융합, 이미지 융합, 보강 학습, 증강 현실, 패턴 인식, 자동화 된 계획 등이 포함될 수 있다. Examples of such algorithms include k-recent neighbor systems, fuzzy logic (e.g., probability theory), neural networks, Boltzmann machines, vector quantization, pulse neural networks, support vector machines, maximum margin classifier, hill climbing, inductive logic system Bayesian network, Peritnet (e.g. finite state machine, milli machine, Moore finite state machine), classifier tree (e.g. perceptron tree, support vector tree, Markov tree, decision tree forest, random forest), stake models and systems, artificial fusion , Sensor fusion, image fusion, reinforcement learning, augmented reality, pattern recognition, automated planning, and more.

상기 AI 연산부 302는 지능적 에뮬레이션(즉, 지식 기반 시스템, 추론 시스템 및 지식 획득 시스템)을 구현하는 다양한 기능을 수행 할 수 있다. 이는 적응 시스템, 기계 학습 시스템, 인공 신경망 등을 포함하는, 다양한 유형의 시스템(예컨대, 퍼지 논리 시스템)에 적용될 수 있다.The AI operation unit 302 may perform various functions for implementing intelligent emulation (ie, a knowledge-based system, a reasoning system, and a knowledge acquisition system). It can be applied to various types of systems (eg, fuzzy logic systems), including adaptive systems, machine learning systems, artificial neural networks, and the like.

상기 AI 연산부 302는 또한 I/O 처리 모듈, 환경 조건 모듈, 음성 - 텍스트 (STT) 처리 모듈, 자연어 처리 모듈, 작업 흐름 처리 모듈 및 서비스 처리 모듈과 같이, 음성 및 자연 언어 음성 처리를 수반하는 연산을 가능하게 하는 서브 모듈을 포함할 수 있다.The AI operation unit 302 may also perform operations involving speech and natural language speech processing, such as an I/O processing module, an environmental condition module, a speech-text (STT) processing module, a natural language processing module, a work flow processing module, and a service processing module. It may include a sub-module to enable.

이들 서브 모듈들 각각은, 서버에서의 하나 이상의 시스템 또는 데이터 및 모델, 또는 이들의 서브셋 또는 수퍼셋에 대한 액세스를 가질 수 있다. 또한, 이들 서브 모듈들 각각은, 어휘 색인, 사용자 데이터, 작업 흐름 모델, 서비스 모델 및 자동 음성 인식 (ASR) 시스템을 비롯한 다양한 기능을 제공할 수 있다.Each of these sub-modules can have access to one or more systems or data and models at the server, or a subset or superset thereof. In addition, each of these sub-modules can provide various functions, including vocabulary index, user data, work flow model, service model, and automatic speech recognition (ASR) system.

본 발명의 실시 예에 따른 상기 AI 연산부 302는 적합 세척모드 설정용 AI 모델을 기반으로 적합 세척모드 산출용 AI 연산을, 그리고 고장 진단용 AI 모델을 기반으로 고장 진단용 AI 연산을 수행할 수 있다. AI 모델에 관하여는 도 5를 통해 개략적으로 도시하고 있다. The AI operation unit 302 according to an embodiment of the present invention may perform an AI operation for calculating a suitable washing mode based on an AI model for setting a suitable washing mode, and an AI operation for diagnosing a failure based on the AI model for diagnosing a failure. The AI model is schematically illustrated through FIG. 5.

일 실시 예에 따른 상기 AI 연산부 302는 적합 세척모드 산출용 AI 모델 입력층(도 5의 입력층 참고)에 인풋 데이터(2차 분류 동작에 의해 추출된 데이터 항목)를 투입하여 인공지능 연산을 수행할 수 있다. 그 AI 연산 결과, 도 5에서 도시되는 바와 같이, 입력층에 투입된 데이터는 은닉층을 거쳐 출력층을 통해 산출될 수 있다. 즉, AI 연산부 302는 인풋 데이터인 세척물 종류, 세척물 수량, 세척물의 오염도 등을 기반으로 최적의 세척모드에 관한 정보를 출력할 수 있다. The AI operation unit 302 according to an embodiment performs artificial intelligence calculation by inputting input data (data items extracted by a secondary classification operation) into the AI model input layer (see the input layer in FIG. 5) for calculating the suitable washing mode. can do. As a result of the AI operation, as shown in FIG. 5, data input to the input layer may be calculated through the output layer through the hidden layer. That is, the AI operation unit 302 may output information regarding an optimal washing mode based on input data, such as the type of washing, the amount of washing, and the degree of contamination of the washing.

그리고 상기 AI 연산부 302는 역전파 동작을 통해 AI 학습을 누적하여 수행할 수 있다. 초기 AI 모델은 기 설정된 데이터 셋에 기반하여 입력층의 인풋 데이터(세척물 종류, 세척물 수량, 세척수의 오염도 등)와 그에 대응하는 출력층의 아웃풋 데이터(적합 세척모드)를 지정하여 학습된 결과물일 수 있다. In addition, the AI operation unit 302 may accumulate and perform AI learning through a backpropagation operation. The initial AI model is the result of learning by designating the input layer input data (wash type, amount of wash water, pollution level of wash water, etc.) and the corresponding output layer data (suitable washing mode) based on the preset data set. You can.

상기 AI 연산부 302는 획득된 데이터들을 통해 AI 모델에 대한 추가 학습을 수행할 수 있다. 상기 AI 연산부 302는 입력층에 투입된 데이터로부터 출력층에 설정된 데이터를 출력하기 위해 요구되는 매개변수 값을 산출하고, 산출된 매개변수 값으로 AI 모델을 업데이트할 수 있다. 이 때 AI 모델에 적용되는 활성화 함수는 시그모이드, ReLU 등을 포함할 수 있으며 그 밖의 다른 종류로 구현될 수도 있다.The AI operation unit 302 may perform additional learning on the AI model through the acquired data. The AI calculator 302 may calculate a parameter value required to output data set in the output layer from data input to the input layer, and update the AI model with the calculated parameter value. At this time, the activation function applied to the AI model may include sigmoid, ReLU, etc., and may be implemented in other types.

다른 실시 예에 따라, 상기 AI 연산부 302는 마찬가지로, AI 연산을 통해 고장 진단을 수행할 수 있다. 고장 진단용 AI 모델의 입력층에는 세척 동작 시 구동 주파수, 급배수 설정값, 센싱부의 센싱 정보들(세척조 상황 정보, 세척수 오염도 변화정보) 중 적어도 하나를 포함한 인풋 데이터가 투입될 수 있다. 이 때, 상기 적합 세척 모드 설정을 산출하기 위한 AI 모델과 상기 고장 진단을 위한 AI 모델은 다른 종류의 모델임이 자명하며, 각 AI 모델은 활성화 함수, 데이터의 투입 항목 개수, 학습 속도 등의 구성 요소가 다르게 설정될 수 있다. 상기 AI 연산부 302는 고장 진단용 AI 모델의 입력층에 인풋 데이터를 투입한 후, AI 연산하여 고장의 종류 및 원인에 대한 정보를 출력할 수 있다. According to another embodiment, the AI operation unit 302 may similarly perform a fault diagnosis through AI operation. Input data including at least one of a driving frequency, a sudden drainage set value, and sensing information of a sensing unit (washing bath condition information, washing water pollution level change information) may be input to the input layer of the AI model for fault diagnosis. At this time, it is obvious that the AI model for calculating the suitable washing mode setting and the AI model for diagnosing the failure are different types of models, and each AI model includes components such as an activation function, the number of input items of data, and learning speed. Can be set differently. The AI calculator 302 may input input data to the input layer of the AI model for fault diagnosis, and then perform AI calculation to output information on the type and cause of the fault.

또한, 상기 AI 연산부 302는 적합 세척모드 산출용 AI 모델과 마찬가지로, 상기 고장 진단용 AI 모델을 추가 학습시킬 수 있다. 이 학습 과정에서 상기 AI 연산부 302는 입력층에 투입된 데이터로부터 출력층에 설정된 데이터로의 산출이 되기 위해 요구되는 매개변수 값을 산출 및 업데이트할 수 있다. 이 때 AI 모델에 적용되는 활성화 함수는 시그모이드, ReLU 등을 포함할 수 있으며 그 밖의 다른 종류로 구현될 수도 있다. In addition, the AI operation unit 302 may additionally train the AI model for fault diagnosis, similar to the AI model for calculating the suitable washing mode. In this learning process, the AI operation unit 302 may calculate and update parameter values required to be calculated from data input to the input layer to data set in the output layer. At this time, the activation function applied to the AI model may include sigmoid, ReLU, etc., and may be implemented in other types.

상술한 예를 참조하여 본 발명을 상세하게 설명하였지만, 당업자라면 본 발명의 범위를 벗어나지 않으면서도 본 예들에 대한 개조, 변경 및 변형을 가할 수 있다. 요컨대 본 발명이 의도하는 효과를 달성하기 위해 도면에 도시된 모든 기능 블록을 별도로 포함하거나 도면에 도시된 모든 순서를 도시된 순서 그대로 따라야만 하는 것은 아니며, 그렇지 않더라도 얼마든지 청구항에 기재된 본 발명의 기술적 범위에 속할 수 있음에 주의한다.Although the present invention has been described in detail with reference to the above-mentioned examples, those skilled in the art can make modifications, alterations and modifications to the examples without departing from the scope of the present invention. In short, in order to achieve the intended effect of the present invention, it is not necessary to separately include all the functional blocks shown in the drawings or to follow all the order shown in the drawings in the order shown, and even if not, any number of technical aspects of the present invention described in the claims Note that it can fall within the scope.

100 : 식기 세척기
110 : 통신부
120 : 저장부
130 : 입력부
140 : 표시부
150 : 센서부
160 : 세척모듈
170 : 제어부
171 : 세척 제어부
172 : AI 지원부
200 : 사용자 기기
300 : 서버
301 : 데이터 분류부
302 : AI 연산부
100: dishwasher
110: communication unit
120: storage unit
130: input unit
140: display unit
150: sensor unit
160: cleaning module
170: control unit
171: washing control
172: AI support department
200: user device
300: server
301: data classification unit
302: AI operation unit

Claims (8)

서버 및 사용자 기기와 통신하는 식기 세척기에 있어서,
세척물의 상태 및 세척 기능의 구동 상태를 센싱하는 센서부;
사용자로부터 구동 명령을 입력받는 입력부;
상기 서버 및 사용자 기기와 무선 통신을 수행하며, 상기 서버로부터 AI 분석 결과를 수신하는 통신부;
AI 연산이 요구되는 조건 상황 하에서, 상기 센서부 및 상기 입력부에 의해 획득된 데이터 중 AI 연산에 필요한 AI 분석용 데이터를 선별하고, 선별된 AI 분석용 데이터를 상기 서버에 전송하도록 제어하는 제어부;
상기 제어부의 제어 하에 세척 동작을 구동하는 세척 모듈; 및
상기 제어부의 제어 하에 AI 분석 결과를 표시하는 표시부;를 포함하고,
상기 서버는
식기 세척기로부터 수신한 AI 분석용 데이터를 적합 세척모드 설정용 카테고리와 고장 진단용 카테고리로 분류하는 1차 분류 동작, 각 카테고리에 포함된 데이터 항목들 중 AI 연산 모델에 투입할 개별 인풋 데이터를 추출하는 2차 분류 동작을 수행하는 데이터 분류부; 및
상기 데이터 분류부의 상기 2차 분류 동작에 의해 추출된 데이터 항목들을 AI 모델에 인풋 데이터로 투입하여 아웃풋 데이터를 산출하는 AI 연산부;를 포함하는 것을 특징으로 하는 식기 세척기.
In the dishwasher communicating with the server and user equipment,
Sensor unit for sensing the state of the washing water and the driving state of the washing function;
An input unit that receives a driving command from a user;
A communication unit that performs wireless communication with the server and user equipment and receives AI analysis results from the server;
A control unit for selecting AI analysis data necessary for AI calculation among data acquired by the sensor unit and the input unit, and controlling the selected AI analysis data to be transmitted to the server under a condition in which AI calculation is required;
A washing module that drives a washing operation under the control of the control unit; And
Includes; display unit for displaying the AI analysis results under the control of the control unit,
The server
1st classification operation to classify the AI analysis data received from the dishwasher into the category for setting the suitable washing mode and the category for diagnosing failure, and 2 to extract the individual input data to be input to the AI calculation model among the data items included in each category. A data classification unit performing a difference classification operation; And
And an AI operation unit that inputs data items extracted by the second classification operation of the data classification unit as input data to an AI model and calculates output data.
제 1항에 있어서,
상기 제어부는
센싱 정보 및 사용자로부터 수신된 입력 정보에 기반하여 제어 명령을 생성하고, 상기 제어 명령을 상기 세척 모듈에 전달하며, 상기 서버로부터 AI 분석 결과가 수신되면, 수신된 AI 분석 결과를 적용하여 세척 동작을 수행하도록 제어하는 세척 제어부;를 포함하며,
상기 세척 제어부는
다수 종류의 세척 모드에 기반하여 세척 동작을 명령하며,
상기 세척 모드는 세척 강도, 세척 시간, 세척 횟수 중 적어도 하나의 설정값을 지정한 것임을 특징으로 하는 식기 세척기.
According to claim 1,
The control unit
Based on the sensing information and input information received from the user, a control command is generated, the control command is transmitted to the washing module, and when an AI analysis result is received from the server, a washing operation is performed by applying the received AI analysis result. Includes a washing control unit to control to perform;
The washing control unit
The washing operation is commanded based on a number of kinds of washing modes.
The washing mode is a dishwasher, characterized in that at least one set value of the washing intensity, washing time, washing frequency is specified.
제 2항에 있어서,
상기 제어부는
AI의 개입이 요구되는 분석 항목을 분류하며, AI 개입이 요구되지 않는 분석 항목은 상기 세척 제어부에서 분석하도록 명령하는 AI 지원부;를 포함하고,
상기 세척 제어부는
상기 AI 지원부에 의해 AI개입 없이 분석 가능한 항목에 대한 자체 분석 동작을 수행하며,
상기 자체 분석 동작은 기 저장된 테이블에 기반하여 인풋 데이터와 1:1로 매칭되는 아웃풋 데이터를 산출하는 동작인 것을 특징으로 하는 식기 세척기.
According to claim 2,
The control unit
Includes an AI support unit that classifies analysis items requiring AI intervention, and analyzes items that do not require AI intervention to be analyzed by the washing control unit.
The washing control unit
Performs self-analysis operation on items that can be analyzed without AI intervention by the AI support unit,
The self-analysis operation is an operation for calculating output data matching 1:1 with input data based on a pre-stored table.
제3항에 있어서,
상기 AI 지원부는
AI 개입이 요구되는 분석 항목을 판단하고, 상기 AI 개입이 요구되는 분석 항목에 대한 AI 분석용 데이터를 상기 서버로 전송하는 것을 특징으로 하는 식기 세척기.
According to claim 3,
The AI support department
Dishwasher, characterized in that for determining the analysis items requiring AI intervention, and transmitting AI analysis data for the analysis items requiring AI intervention to the server.
제 4항에 있어서,
상기 AI 지원부는
식기 세척기의 세척 상황에 대응하여 가장 적합한 세척 모드를 산출하기 위해 서버에 AI 연산 및 AI 연산의 결과값을 요청하는 적합 세척모드 설정 지원부; 및
식기 세척기에 발생한 고장 증상을 진단하고 해결하기 위해 서버에 AI 연산 및 AI 연산의 결과값을 요청하는 고장 진단 지원부;를 포함하는 것을 특징으로 하는 식기 세척기.
The method of claim 4,
The AI support department
A suitable washing mode setting support unit for requesting AI calculation and AI calculation result values to the server to calculate the most suitable washing mode in response to the washing situation of the dishwasher; And
And a fault diagnosis support unit for requesting a result of AI calculation and AI calculation from a server in order to diagnose and solve a malfunction symptom occurring in the dishwasher.
제 1항에 있어서,
상기 센서부는
세척물의 수량, 세척물의 종류 및 세척물의 오염도를 판단하기 위해, 세척조에 투입되는 세척물의 이미지 정보를 센싱하는 이미지 센서와, 세척수의 온도를 평가하기 위한 온도센서 및 세척수의 탁도를 평가하기 위한 탁도 센서를 포함하는 것을 특징으로 하는 식기 세척기
According to claim 1,
The sensor unit
In order to determine the quantity of washing water, the type of washing water and the degree of contamination of the washing water, an image sensor for sensing image information of the washing water input to the washing tank, a temperature sensor for evaluating the temperature of the washing water, and a turbidity sensor for evaluating the turbidity of the washing water Dishwasher characterized in that it comprises a
삭제delete 제 1항에 있어서
상기 데이터 분류부는
상기 2차 분류 동작 이전에, 세척물 이미지로부터 세척물의 종류 정보를 산출하고, 세척물의 무게 데이터 및 세척조에 투하된 세척물 이미지로부터 세척물의 수량 정보를 산출하며, 탁도 센서에 의해 센싱된 세척수의 탁도 및 세척수 이미지로부터 세척수의 오염도를 산출하는 전처리 동작을 수행하는 것을 특징으로 하는 식기 세척기.

According to claim 1
The data classification unit
Prior to the second sorting operation, the type information of the washing water is calculated from the washing water image, the weight data of the washing water and the quantity of washing water information is calculated from the washing water image dropped on the washing tank, and the turbidity of the washing water sensed by the turbidity sensor is calculated. And a pre-processing operation for calculating the degree of contamination of the washing water from the washing water image.

KR1020190127313A 2019-10-14 2019-10-14 Dishwasher with function control based on artificial intelligence KR102119076B1 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
KR1020190127313A KR102119076B1 (en) 2019-10-14 2019-10-14 Dishwasher with function control based on artificial intelligence

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020190127313A KR102119076B1 (en) 2019-10-14 2019-10-14 Dishwasher with function control based on artificial intelligence

Related Child Applications (1)

Application Number Title Priority Date Filing Date
KR1020200051552A Division KR20210044148A (en) 2020-04-28 2020-04-28 Dishwasher for automatic determination of pollution level based on artificial intelligence

Publications (1)

Publication Number Publication Date
KR102119076B1 true KR102119076B1 (en) 2020-06-04

Family

ID=71081000

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020190127313A KR102119076B1 (en) 2019-10-14 2019-10-14 Dishwasher with function control based on artificial intelligence

Country Status (1)

Country Link
KR (1) KR102119076B1 (en)

Cited By (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN113040677A (en) * 2021-03-15 2021-06-29 上海明略人工智能(集团)有限公司 Method, device and system for cleaning tableware
US20220095879A1 (en) * 2020-09-25 2022-03-31 Ecolab Usa Inc. Machine learning classification or scoring of cleaning outcomes in cleaning machines
WO2023038175A1 (en) * 2021-09-13 2023-03-16 엘지전자 주식회사 Mobile terminal and system
WO2023074989A1 (en) * 2021-10-26 2023-05-04 김종석 One-stop automatic washing and storage apparatus
US11849901B2 (en) 2021-09-01 2023-12-26 Haier Us Appliance Solutions, Inc. Dishwashing appliance and methods for improved calibration using image recognition

Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20190099151A (en) * 2019-02-01 2019-08-26 엘지전자 주식회사 Sever communicating with dish whaher
KR20190107620A (en) * 2019-09-02 2019-09-20 엘지전자 주식회사 Artificial dish washer and method for controlling the same

Patent Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20190099151A (en) * 2019-02-01 2019-08-26 엘지전자 주식회사 Sever communicating with dish whaher
KR20190107620A (en) * 2019-09-02 2019-09-20 엘지전자 주식회사 Artificial dish washer and method for controlling the same

Cited By (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20220095879A1 (en) * 2020-09-25 2022-03-31 Ecolab Usa Inc. Machine learning classification or scoring of cleaning outcomes in cleaning machines
CN113040677A (en) * 2021-03-15 2021-06-29 上海明略人工智能(集团)有限公司 Method, device and system for cleaning tableware
CN113040677B (en) * 2021-03-15 2024-01-19 上海明略人工智能(集团)有限公司 Method, device and system for cleaning tableware
US11849901B2 (en) 2021-09-01 2023-12-26 Haier Us Appliance Solutions, Inc. Dishwashing appliance and methods for improved calibration using image recognition
WO2023038175A1 (en) * 2021-09-13 2023-03-16 엘지전자 주식회사 Mobile terminal and system
WO2023074989A1 (en) * 2021-10-26 2023-05-04 김종석 One-stop automatic washing and storage apparatus

Similar Documents

Publication Publication Date Title
KR102119076B1 (en) Dishwasher with function control based on artificial intelligence
US11684241B2 (en) Autonomous and continuously self-improving learning system
Watts A decade of Kasabov's evolving connectionist systems: a review
Bajic et al. Machine learning techniques for smart manufacturing: Applications and challenges in industry 4.0
US11663445B2 (en) Server communicating with dishwasher
US11634849B2 (en) Home appliance and method for controlling home appliance
Jain et al. Hybrid intelligent engineering systems
CN112106121B (en) Electronic device and control method thereof
US20200193075A1 (en) System and method for constructing a mathematical model of a system in an artificial intelligence environment
US20210207306A1 (en) Artificial intelligence washing machine and operation method thereof
US20210150341A1 (en) Architecture for an explainable neural network
US11657270B2 (en) Self-assessing deep representational units
EP4062330A1 (en) Architecture for an explainable neural network
US11902043B2 (en) Self-learning home system and framework for autonomous home operation
Souza et al. Evolving fuzzy neural hydrocarbon networks: A model based on organic compounds
Zheng A novel attention-based convolution neural network for human activity recognition
KR20190099153A (en) Electronic device
KR20230023704A (en) Electronic device and control method thereof
US11539546B2 (en) Home appliances and method for controlling home appliances
KR20210044148A (en) Dishwasher for automatic determination of pollution level based on artificial intelligence
KR20230069010A (en) Apparatus and method for performing statistical-based regularization of deep neural network training
Gopalakrishna et al. Runtime evaluation of cognitive systems for non-deterministic multiple output classification problems
Rajasekaran et al. Conceptual methodology on machine learning and types of learning algorithms
Datt An evolutionary approach: analysis of artificial neural networks
KR102636461B1 (en) Automated labeling method, device, and system for learning artificial intelligence models

Legal Events

Date Code Title Description
A107 Divisional application of patent
GRNT Written decision to grant