KR102067817B1 - Method of controlling an electric product - Google Patents

Method of controlling an electric product Download PDF

Info

Publication number
KR102067817B1
KR102067817B1 KR1020120108660A KR20120108660A KR102067817B1 KR 102067817 B1 KR102067817 B1 KR 102067817B1 KR 1020120108660 A KR1020120108660 A KR 1020120108660A KR 20120108660 A KR20120108660 A KR 20120108660A KR 102067817 B1 KR102067817 B1 KR 102067817B1
Authority
KR
South Korea
Prior art keywords
recognition
recognition target
article
information
displayed
Prior art date
Application number
KR1020120108660A
Other languages
Korean (ko)
Other versions
KR20140042216A (en
Inventor
김양환
김무승
Original Assignee
엘지전자 주식회사
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 엘지전자 주식회사 filed Critical 엘지전자 주식회사
Priority to KR1020120108660A priority Critical patent/KR102067817B1/en
Priority to US14/040,176 priority patent/US9639823B2/en
Priority to CN201310450253.4A priority patent/CN103712410B/en
Publication of KR20140042216A publication Critical patent/KR20140042216A/en
Application granted granted Critical
Publication of KR102067817B1 publication Critical patent/KR102067817B1/en

Links

Images

Classifications

    • FMECHANICAL ENGINEERING; LIGHTING; HEATING; WEAPONS; BLASTING
    • F25REFRIGERATION OR COOLING; COMBINED HEATING AND REFRIGERATION SYSTEMS; HEAT PUMP SYSTEMS; MANUFACTURE OR STORAGE OF ICE; LIQUEFACTION SOLIDIFICATION OF GASES
    • F25DREFRIGERATORS; COLD ROOMS; ICE-BOXES; COOLING OR FREEZING APPARATUS NOT OTHERWISE PROVIDED FOR
    • F25D2400/00General features of, or devices for refrigerators, cold rooms, ice-boxes, or for cooling or freezing apparatus not covered by any other subclass
    • F25D2400/36Visual displays
    • F25D2400/361Interactive visual displays
    • FMECHANICAL ENGINEERING; LIGHTING; HEATING; WEAPONS; BLASTING
    • F25REFRIGERATION OR COOLING; COMBINED HEATING AND REFRIGERATION SYSTEMS; HEAT PUMP SYSTEMS; MANUFACTURE OR STORAGE OF ICE; LIQUEFACTION SOLIDIFICATION OF GASES
    • F25DREFRIGERATORS; COLD ROOMS; ICE-BOXES; COOLING OR FREEZING APPARATUS NOT OTHERWISE PROVIDED FOR
    • F25D2500/00Problems to be solved
    • F25D2500/06Stock management

Abstract

본 발명은 전기 제품의 제어방법에 관한 것이다. 일 측면에 따른 전기 제품의 제어방법은, 인식 장치에서 인식 대상의 이미지를 획득하는 단계; 획득한 이미지에서 인식 대상 영역을 추출하여 인식 대상 영역을 디스플레이부에 표시하는 단계; 표시된 인식 대상 영역 중에서 인식을 수행할 인식 대상 영역을 결정하는 단계; 및 결정된 인식 대상 영역 내에 포함된 정보를 인식하고, 인식 결과를 표시하는 단계를 포함한다. The present invention relates to a control method of an electric product. According to an aspect, a control method of an electrical product includes: acquiring an image of a recognition object in a recognition device; Extracting the recognition target region from the acquired image and displaying the recognition target region on the display unit; Determining a recognition target region to perform recognition from among the displayed recognition target regions; And recognizing information included in the determined recognition target region and displaying a recognition result.

Description

전기 제품의 제어방법{Method of controlling an electric product}Method of controlling an electric product

본 발명은 전기 제품의 제어방법에 관한 것이다. The present invention relates to a control method of an electric product.

일반적으로 전기 제품은 전기를 동력원으로 하여 특정 대상물을 관리 또는 처리하기 위한 장치로서 이해될 수 있다. In general, an electrical product can be understood as a device for managing or treating a specific object using electricity as a power source.

종래의 전기 제품이 냉장고일 경우, 상기 냉장고는 저장실을 형성하는 본체와, 상기 본체를 선택적으로 차폐하는 도어를 포함한다. 상기 도어에는 냉장고의 작동상태를 디스플레이 하는 디스플레이 장치가 구비된다. When the conventional electrical appliance is a refrigerator, the refrigerator includes a main body that forms a storage compartment and a door that selectively shields the main body. The door is provided with a display device for displaying the operating state of the refrigerator.

상기 디스플레이 장치에는, 상기 저장실의 설정온도를 디스플레이 하는 표시부와, 상기 설정온도를 조절할 수 있는 입력부가 구비된다. 그러나, 상기 디스플레이 장치에는, 상기 저장실에 저장되는 물품 정보 또는 물품의 관리(처리)정보등은 디스플레이 되지 않는다. 즉, 종래의 냉장고는 식품을 저장하는 수단으로서만 이용될 뿐, 상기 식품에 관한 관리 또는 처리 정보를 인식하지 않는다.The display device includes a display unit for displaying the set temperature of the storage compartment and an input unit for adjusting the set temperature. However, in the display apparatus, article information stored in the storage compartment, management (processing) information of the article, and the like are not displayed. That is, the conventional refrigerator is used only as a means for storing food, and does not recognize management or processing information about the food.

정리하면, 종래의 전기 제품의 경우, 전기 제품이 관리 또는 처리하고자 하는 특정 대상물의 관리정보 또는 처리정보등을 인식하지 않으므로, 사용자가 이를 일일이 기억하거나 검색하여야 하는 불편함이 있었다.In summary, in the case of a conventional electric product, since the electric product does not recognize management information or processing information of a specific object to be managed or processed, there is an inconvenience that a user must remember or search it.

상세히, 전기 제품이 냉장고일 경우, 사용자가 냉장고에 저장되는 식품의 관리정보(보관량 또는 유통기한 정보등)를 기억하여야만 유통기한이 얼마남지 않은 식품을 소비하거나 보관량이 얼마남지 않은 식품에 대한 구매계획을 세울 수 있다는 불편함이 있었다.In detail, if the electrical appliance is a refrigerator, the user must remember the management information (such as storage quantity or expiration date information) of the food stored in the refrigerator, and then purchase a plan for the consumption of foods with a short shelf life or for foods with a low storage amount There was an inconvenience that can stand.

전기 제품이 세탁기일 경우, 사용자가 세탁물을 작동시키기 전에 세탁물의 재질 또는 세탁 방법등을 일일이 확인하여 세탁기를 작동해야 하는 불편함이 있었다.In the case where the electric product is a washing machine, the user had to check the material of the laundry or the washing method before operating the laundry, and there was an inconvenience of operating the washing machine.

전기 제품이 조리기기일 경우, 사용자가 조리물을 조리하기 전에 음식물의 조리방법을 일일이 확인하여 조리기기를 작동해야 하는 불편함이 있었다.When the electrical appliance is a cooking appliance, there is an inconvenience in that the user must check the cooking method of the food before the cooking of the food and operate the cooking appliance.

본 발명의 목적은 전기 제품의 처리 대상물에 관한 정보를 전기 제품이 인식할 수 있는 전기 제품의 제어 방법을 제공하는 것에 있다.An object of the present invention is to provide a control method of an electric product that enables the electric product to recognize information about a processing object of the electric product.

일 측면에 따른 전기 제품의 제어방법은, 인식 장치에서 인식 대상의 이미지를 획득하는 단계; 획득한 이미지에서 인식 대상 영역을 추출하여 인식 대상 영역을 디스플레이부에 표시하는 단계; 표시된 인식 대상 영역 중에서 인식을 수행할 인식 대상 영역을 결정하는 단계; 및 결정된 인식 대상 영역 내에 포함된 정보를 인식하고, 인식 결과를 표시하는 단계를 포함한다. According to an aspect, a control method of an electrical product includes: acquiring an image of a recognition object in a recognition device; Extracting the recognition target region from the acquired image and displaying the recognition target region on the display unit; Determining a recognition target region to perform recognition from among the displayed recognition target regions; And recognizing information included in the determined recognition target region and displaying a recognition result.

본 실시 예에 의하면, 획득한 이미지 전체의 정보를 인식하지 않고 인식 대상 영역을 추출하고, 인식 대상 영역이 결정되면, 결정된 인식 대상 영역 내에 포함된 정보를 인식하므로, 인식 시간이 줄어드는 장점이 있다. According to the present embodiment, the recognition target region is extracted without recognizing the information of the entire acquired image, and when the recognition target region is determined, the information included in the determined recognition target region is recognized, thereby reducing the recognition time.

또한, 추출된 인식 대상 영역이 디스플레이부에 표시되므로, 사용자가 비관리 대상 물품을 선택할 수 있는 장점이 있고, 비관리 대상 물품이 선택되는 경우에는 비관리 대상 물품에 해당하는 인식 대상 영역의 정보는 인식하지 않으므로, 상기 제어부의 인식 시간이 한층 더 줄어들 수 있다. In addition, since the extracted recognition target area is displayed on the display unit, there is an advantage that the user can select an unmanaged object, and when an unmanaged object is selected, information of the recognition target area corresponding to the unmanaged object is Since it is not recognized, the recognition time of the controller can be further reduced.

도 1은 본 발명의 일 실시예에 따른 네트워크 시스템의 구성을 보여주는 도면.
도 2는 상기 네트워크 시스템을 구성하는 냉장고의 블럭도.
도 3은 본 발명의 일 실시 예에 따른 인식 장치의 작동 방법을 보여주는 흐름도.
도 4 내지 도 8은 상기 냉장고의 디스플레이부에서 표시되는 화면을 보여주는 도면.
도 9는 본 발명의 다른 실시 예에 따른 디스플레이부에서 표시되는 화면을 보여주는 도면.
1 is a diagram showing the configuration of a network system according to an embodiment of the present invention.
2 is a block diagram of a refrigerator constituting the network system.
3 is a flowchart illustrating a method of operating a recognition device according to an exemplary embodiment.
4 to 8 are views showing a screen displayed on the display unit of the refrigerator.
9 is a view showing a screen displayed on the display unit according to another embodiment of the present invention.

이하에서는 도면을 참조하여 본 발명의 실시 예 들에 대해서 구체적으로 설명하기로 한다. Hereinafter, exemplary embodiments of the present invention will be described in detail with reference to the accompanying drawings.

도 1은 본 발명의 일 실시예에 따른 네트워크 시스템의 구성을 보여주는 도면이고, 도 2는 상기 네트워크 시스템을 구성하는 냉장고의 블럭도이다. 1 is a view showing the configuration of a network system according to an embodiment of the present invention, Figure 2 is a block diagram of a refrigerator constituting the network system.

도 1 및 도 2를 참조하면, 본 발명의 일 실시예에 따른 네트워크 시스템은, 전기 제품의 일 예로서 냉기가 발생되며 대상물(물품)을 저장하는 냉장고(10)와, 상기 냉장고(10)에 통신 가능하게 연결되는 단말기(80) 및 상기 냉장고(10) 및 단말기(80)와 통신 가능하게 연결되며 소정 데이터를 저장하는 서버(70)를 포함할 수 있다. 1 and 2, a network system according to an embodiment of the present invention includes a refrigerator 10, in which cold air is generated and stores an object (article) as an example of an electric product, and in the refrigerator 10. The terminal 80 may be communicatively connected, and the server 70 may be communicatively connected to the refrigerator 10 and the terminal 80 and may store predetermined data.

상기 단말기(80)는, 소정의 정보가 표시되는 디스플레이부(82)를 포함한다. 상기 디스플레이부(82)에서는 상기 냉장고에 저장된 물품 정보 또는 상기 냉장고의 작동 상태 정보 등이 표시될 수 있다. 즉, 상기 단말기(80)는 상기 냉장고(10)의 상태를 모니터링할 수 있다. 또한, 상기 단말기(80)를 이용하여 상기 냉장고(10)의 작동을 제어할 수 있다. 또한, 상기 단말기(80)에서 인식한 정보를 상기 냉장고(10)로 전송할 수 있다. The terminal 80 includes a display unit 82 on which predetermined information is displayed. The display unit 82 may display item information stored in the refrigerator or operation state information of the refrigerator. That is, the terminal 80 may monitor the state of the refrigerator 10. In addition, the operation of the refrigerator 10 may be controlled using the terminal 80. In addition, the information recognized by the terminal 80 may be transmitted to the refrigerator 10.

상기 단말기(80)는 일 예로 휴대 가능한 휴대폰 또는 스마트 폰일 수 있으나, 이에 제한되지는 않는다. The terminal 80 may be, for example, a portable mobile phone or a smart phone, but is not limited thereto.

상기 네트워크 시스템은, 상기 단말기(80)와 서버(70)의 통신을 위한 제 1 인터페이스(310)와, 상기 서버(70)와 냉장고(10)의 통신을 위한 제 2 인터페이스(320) 및 상기 단말기(80)와 냉장고(10) 사이의 통신을 위한 제 3 인터페이스(330)를 포함할 수 있다. The network system includes a first interface 310 for communication between the terminal 80 and a server 70, a second interface 320 for communication between the server 70 and a refrigerator 10, and the terminal. And a third interface 330 for communication between the 80 and the refrigerator 10.

상기 제 1 내지 제 3 인터페이스(310, 320, 330)는, 정보를 전달하기 위한 통신 방식으로서 와이파이(wifi), 지그비(Zig-bee), 블루투스(Bluetooth) 및 인터넷(internet) 중 적어도 하나의 통신 방식이 적용될 수 있으며, 통신 방식에는 제한이 없음을 밝혀둔다. The first to third interfaces 310, 320, and 330 may communicate with each other by at least one of Wi-Fi, Zig-bee, Bluetooth, and the Internet. The method may be applied, and there is no limit to the communication method.

상기 냉장고(10)는, 정보를 디스플레이할 수 있는 디스플레이부(20)와, 정보를 인식하기 위한 인식 장치(30)와, 물품과 관련한 정보가 저장되는 메모리부(40)와, 상기 서버(70) 또는 상기 단말기(80)와 통신을 위한 통신부를 포함할 수 있다. The refrigerator 10 includes a display unit 20 capable of displaying information, a recognition device 30 for recognizing information, a memory unit 40 storing information related to an article, and the server 70. Or a communication unit for communication with the terminal 80.

상기 인식 장치(30)는, 촬영장치, RFID 리더, QR 코드 리더, 바코드 리더 중 하나 이상을 포함할 수 있다. 이하에서는 상기 인식 장치(30)가 일 예로 촬영장치인 것에 대해서 설명하기로 한다. The recognition device 30 may include at least one of a photographing apparatus, an RFID reader, a QR code reader, and a barcode reader. Hereinafter, the recognition device 30 will be described as an example of a photographing device.

상기 인식 장치(30)는, 인식 대상(400)의 이미지를 획득할 수 있다. 상기 인식 대상(400)은 일 예로 물품의 구매 영수증일 수 있다. 상기 물품은 관리 대상 물품과 비관리 대상 물품으로 구분될 수 있다. 상기 관리 대상 물품은 상기 냉장고에서 관리될 수 있는 물품으로서, 일 예로 식품일 수 있다. 이하에서는 관리 대상 물품이 식품인 것을 가정하여 설명하기로 한다. The recognition device 30 may acquire an image of the recognition object 400. The recognition object 400 may be, for example, a purchase receipt of an article. The article may be classified into an article to be managed and an article to be managed. The article to be managed is an article that can be managed in the refrigerator and may be, for example, food. Hereinafter, it will be described assuming that the article to be managed is food.

상기 물품과 관련한 정보는, 물품 자체정보 또는 물품 관리정보가 포함될 수 있다. 상기 물품 자체정보에는 물품명, 물품량 또는 물품개수 등이 포함되며, 물품 관리정보에는 냉장고 내에 저장되는 물품의 보관위치, 보관기간, 보관량 또는 보관방법 등이 포함될 수 있다. The information related to the article may include article itself information or article management information. The article itself information includes the name of the article, the quantity of the article or the number of articles, etc. The article management information may include the storage location, storage period, storage amount or storage method of the article stored in the refrigerator.

그리고, 상기 물품과 관련한 정보 중 일부는 상기 인식 장치(30)에서 획득한 이미지로부터 획득될 수 있다. In addition, some of the information related to the article may be obtained from an image obtained by the recognition device 30.

상기 메모리부(40)에는 상기 물품과 관련한 정보가 저장될 수 있다. 상기 메모리부(40)에 저장된 정보 중 일부 또는 전부는 상기 서버(70) 또는 상기 단말기(80)에 저장되거나 상기 서버(70) 또는 상기 단말기(80)에서 로딩할 수 있다. The memory unit 40 may store information related to the article. Some or all of the information stored in the memory unit 40 may be stored in the server 70 or the terminal 80 or loaded from the server 70 or the terminal 80.

도 3은 본 발명의 일 실시 예에 따른 인식 장치의 작동 방법을 보여주는 흐름도이고, 도 4 내지 도 8은 상기 냉장고의 디스플레이부에서 표시되는 화면을 보여주는 도면이다. 3 is a flowchart illustrating a method of operating a recognition device according to an embodiment of the present invention, and FIGS. 4 to 8 are views illustrating screens displayed on the display unit of the refrigerator.

도 3 내지 도 8를 참조하면, 상기 인식 장치(30)가 인식 대상을 인식하기 위하여 상기 인식 장치(30)의 작동을 준비한다(S11). 즉, 상기 인식 장치(30)를 활성화시킨다. 상기 인식 장치(30)가 활성화되면, 상기 디스플레이부(20)에는 도 4에 도시된 바와 같이 상기 디스플레이부(20) 상에서의 인식 대상(400)의 위치를 가이드하기 위한 가이드 프레임(210)이 표시된다. 또한, 상기 디스플레이부(20)에서는 인식 대상의 위치를 가이드 프레임(210)에 위치시키기 위한 안내 정보(220)가 표시될 수 있다. 3 to 8, the recognition device 30 prepares the operation of the recognition device 30 in order to recognize the recognition object (S11). That is, the recognition device 30 is activated. When the recognition device 30 is activated, the guide frame 210 for guiding the position of the recognition target 400 on the display unit 20 is displayed on the display unit 20 as shown in FIG. 4. do. In addition, the display unit 20 may display guide information 220 for positioning the position of the recognition target on the guide frame 210.

또한, 상기 디스플레이부(20)에서는 상기 인식 대상(400)의 이미지를 획득하기 위한 촬영 버튼(222)이 표시될 수 있다. 따라서, 상기 촬영 버튼(222)를 선택하면, 상기 가이드 프레임(210) 내에 위치한 인식 대상(400)의 이미지가 획득된다(S12). In addition, the display unit 20 may display a photographing button 222 for acquiring an image of the recognition target 400. Accordingly, when the photographing button 222 is selected, an image of the recognition object 400 located in the guide frame 210 is obtained (S12).

다른 예로서, 상기 촬영 버튼(222)를 선택하지 않고, 상기 가이드 프레임(210)에 인식 대상(400)에 위치된 상태에서 일정 시간이 경과하면, 자동으로 상기 가이드 프레임(210) 내에 위치한 인식 대상(400)의 이미지가 획득될 수 있다. As another example, when a predetermined time elapses in a state in which the photographing button 222 is positioned on the recognition target 400 in the guide frame 210, the recognition target is automatically located in the guide frame 210. An image of 400 may be obtained.

상기 인식 대상(400)의 이미지가 획득된 후에는 획득된 이미지에서 인식 대상 영역이 추출된다(S13). 이 때, 상기 인식 대상 영역이 추출되는 과정에서는 도 5에 도시된 바와 같이 인식 대상 영역을 추출 중임을 알리기 위한 정보(230)가 표시될 수 있다. After the image of the recognition target 400 is obtained, the recognition target region is extracted from the acquired image (S13). At this time, in the process of extracting the recognition target region, as shown in FIG. 5, information 230 for notifying that the recognition target region is being extracted may be displayed.

그리고, 상기 디스플레이부(20)에서는 인식 대상 영역의 추출을 취소하기 위한 취소 버튼(231)이 표시될 수 있다. 따라서, 상기 취소 버튼(231)을 선택한 경우에는, 상기 인식 대상 영역의 추출이 취소되고, 도 5의 화면에서 도 4의 화면으로 복귀하게 된다. In addition, the display unit 20 may display a cancel button 231 for canceling extraction of the recognition target region. Therefore, when the cancel button 231 is selected, the extraction of the recognition target region is canceled, and the screen of FIG. 5 is returned to the screen of FIG. 4.

획득한 이미지에서 인식 대상 영역이 추출되면, 상기 디스플레이부(20)에서는 도 6에 도시된 바와 같이 인식 대상 영역(240)이 표시된다. 이 때, 인식 대상 영역(240)과 비인식 대상 영역은 구분되어 표시될 수 있다. 예시적으로, 선에 의해서 인식 대상 영역(240)과 비인식 대상 영역이 구분될 수 있다. When the recognition target region is extracted from the acquired image, the recognition target region 240 is displayed on the display unit 20 as shown in FIG. 6. In this case, the recognition target region 240 and the non-recognition target region may be displayed separately. For example, the recognition target area 240 and the non-recognition target area may be divided by lines.

본 실시 예에서 인식 대상 영역(240)은 획득한 이미지 전체에서 물품을 인식하기 위한 필요한 영역이다. 획득한 이미지에 다수의 물품에 대한 정보가 존재하는 경우에는 상기 디스플레이부(20)에서는 다수의 인식 대상 영역(240)이 표시된다. 다수의 인식 대상 영역(240)는 상하 또는 좌우 방향으로 정렬되어 표시될 수 있다. 또한, 다수의 인식 대상 영역(240)은 서로 구분되어 표시될 수 있다. In the present embodiment, the recognition target area 240 is a necessary area for recognizing an article in the entire acquired image. When information about a plurality of items exists in the acquired image, the display unit 20 displays a plurality of recognition target areas 240. The plurality of recognition target areas 240 may be displayed to be aligned vertically or horizontally. In addition, the plurality of recognition target areas 240 may be displayed separately from each other.

상기 인식 대상 영역(240)의 추출 방법에 대해서 설명한다. The extraction method of the recognition target region 240 will be described.

상기 인식 장치(30)가 인식 대상(400)의 이미지를 획득하면, 상기 제어부(50)는 획득된 이미지를 다수의 픽셀로 구분한다. 각 픽셀은 고유의 좌표 값을 가진다. 그 다음 상기 제어부(50)는 각 픽셀의 그레이 값을 판단하여 상기 각 픽셀에 고유값을 부여한다. 일 예로 픽셀의 그레이 값이 기준 값을 초과하는 경우에는 1을 부여하고, 그레이 값이 기준 값 이하인 경우에는 0을 부여한다. When the recognition device 30 acquires an image of the recognition object 400, the controller 50 divides the obtained image into a plurality of pixels. Each pixel has its own coordinate value. Then, the controller 50 determines the gray value of each pixel and gives a unique value to each pixel. For example, if the gray value of the pixel exceeds the reference value, 1 is assigned, and if the gray value is less than or equal to the reference value, 0 is assigned.

그 다음, 상기 제어부(50)는 각 픽셀의 고유값을 기초로 인식 대상 영역을 추출한다. 일 예로 도 6에 도시된 바와 같이, 획득한 이미지는 구입한 물품의 순번(001, 002)과, 물품명(243), 물품 코드(244), 가격, 수량, 등을 포함한다. 이 때, 상기 제어부(50)는 물품의 순번, 물품명(243), 및 물품 코드(244) 중 하나 이상을 판단 기준으로 하여 인식 대상 영역을 추출한다. Next, the controller 50 extracts the recognition target region based on the unique value of each pixel. For example, as shown in FIG. 6, the acquired image includes the order number 001 and 002 of the purchased item, the item name 243, the item code 244, the price, the quantity, and the like. At this time, the controller 50 extracts the recognition target region based on one or more of the order of the article, the article name 243, and the article code 244.

상기 판단 기준이 물품의 순번인 경우, 특정 좌표 범위 내에서 1을 부여받은 픽셀 들이 이루는 형태가 0 또는 1인 경우, 이를 기초로 일정 범위를 인식 대상 영역으로 추출하게 된다. When the determination criterion is the order of the article, when the shape of the pixels given with 1 within a specific coordinate range is 0 or 1, a predetermined range is extracted as the recognition target region based on this.

본 실시 예에서 인식 대상 영역을 추출하는 것은 이미지에서 물품의 정보를 추출하는 것이 아니고, 단지 이미지 상에서 인식에 필요한 영역을 추출하는 것이다. 인식에 필요한 영역을 추출하는 이유는 이미지 상에서 물품 정보를 인식하기 위하여 필요한 인식 시간을 줄이기 위함이다. 즉, 이미지 상의 정보 중에서 불필요한 정보를 인식하지 않는 경우 인식 시간은 줄어들 수 있다. In the present embodiment, extracting the recognition target region does not extract the information of the article from the image, but merely extracts the region necessary for the recognition on the image. The reason for extracting the area required for recognition is to reduce the recognition time required for recognizing the item information on the image. In other words, when unnecessary information is not recognized among the information on the image, the recognition time may be reduced.

추출된 인식 대상 영역(240) 내에는 물품명(243) 및 물품 코드(244) 중 하나 이상이 포함될 수 있다. 다만, 인식 대상 영역(240)에 포함되는 정보는 이에 한정되지 않고, 필요에 따라 수량, 가격, 구입 날짜 등이 포함되는 것도 가능하다. The extracted recognition target region 240 may include one or more of an article name 243 and an article code 244. However, the information included in the recognition target area 240 is not limited thereto and may include a quantity, a price, a purchase date, and the like, as necessary.

상기 디스플레이부(20)에는 추출된 인식 대상 영역(240)을 선택하기 위한 선택부(241)가 더 표시될 수 있다. 상기 선택부(241)는 관리 대상 물품과 비관리 대상 물품을 선택하기 위하여 사용된다. 이와 달리 상기 선택부(241)가 구비되지 않고, 인식 대상 영역(240)을 터치하는 것에 의해서 인식을 수행할 인식 대상 영역을 결정할 수 있다. 이 경우, 인식을 수행할 인식 대상 영역과 인식을 비수행할 인식 대상 영역은 구분되어 표시될 수 있다. The display unit 20 may further display a selection unit 241 for selecting the extracted recognition target region 240. The selection unit 241 is used to select a managed object and an unmanaged object. In contrast, the selection unit 241 is not provided, and the recognition target region to be recognized may be determined by touching the recognition target region 240. In this case, the recognition target area to perform the recognition and the recognition target area to not perform the recognition may be displayed separately.

사용자는 상기 디스플레이부(20) 상에 표시된 인식 대상 영역 내의 물품명을 확인하여 관리 대상 물품과 비관리 대상 물품을 판단할 수 있다. 그리고, 사용자는 관리 대상 물품에 대응하는 선택부(241)를 선택할 수 있다. 즉, 인식을 수행할 인식 대상 영역을 선택할 수 있다. 이 때, 미선택되는 물품이 실제적인 비관리 대상 물품이 된다. The user may determine the item to be managed and the item to be managed by checking the item name in the recognition target area displayed on the display unit 20. In addition, the user may select the selection unit 241 corresponding to the object to be managed. That is, the recognition target area to perform the recognition can be selected. At this time, the unselected article becomes an actual uncontrolled article.

본 실시 예에서는 사용자가 관리 대상 물품을 선택부(241)를 이용하여 선택하는 것으로 설명하였으나, 이와 달리 비관리 대상 물품(인식을 미수행할 인식 대상 영역임)을 선택부(241)를 이용하여 선택할 수 있다. 즉, 인식 대상 영역이 추출된 후에는 기본적으로 모든 물품이 관리 대상 물품인 것으로 판단된다. 그리고, 사용자는 선택부(241)를 이용하여 표시된 관리 대상 물품 중에서 비관리 대상 물품(인식을 미수행할 인식 대상 영역)을 선택할 수 있다. 예를 들어 각 선택부(241)에 "V"와 같은 형태가 표시되고, 사용자가 해당 선택부(241)를 선택하면, "V"와 같은 형태가 제거될 수 있다. In the present exemplary embodiment, the user selects the item to be managed using the selector 241. However, the user uses the selector 241 to select a non-managed item (the recognition target area to be unrecognized). You can choose. That is, after the recognition target region is extracted, it is basically determined that all the articles are the management target articles. In addition, the user may select an unmanaged object (a recognition subject area not to be recognized) among the displayed managed objects using the selection unit 241. For example, a form such as "V" is displayed on each selector 241, and when the user selects the selector 241, a form such as "V" may be removed.

즉, 사용자의 관리 대상 물품 선택 또는 비관리 대상 물품의 선택에 의해서, 최종적으로 인식을 수행할 인식 대상 영역(240)이 결정된다(S15). 다만, 식품이 관리 대상 물품일 수 있으나, 사용자의 선택에 의해서 비관리 대상 물품으로 분류될 수 있다. That is, the recognition target area 240 to finally perform recognition is determined by the user's selection of the management target article or the non-management target article (S15). However, the food may be a controlled item, but may be classified as an unmanaged item by a user's selection.

도 6에서, 상기 디스플레이부(20)에는 인식 대상 영역(240)에 대응하는 정보를 인식하기 위하여 선택하는 완료 버튼(251) 또는 인식을 취소하기 위한 취소 버튼(252)이 표시될 수 있다. In FIG. 6, the display unit 20 may display a completion button 251 for selecting to recognize information corresponding to the recognition target area 240 or a cancel button 252 for canceling the recognition.

상기 완료 버튼(251)이 선택되면, 상기 제어부(50)는 상기 인식 대상 영역(240)에 대응하는 정보, 즉, 인식 대상 영역(240) 내에 포함된 정보를 인식하게 된다(S16). 반면, 상기 취소 버튼(252)이 선택되면, 도 4의 화면으로 복귀하게 된다. When the completion button 251 is selected, the controller 50 recognizes information corresponding to the recognition target region 240, that is, information included in the recognition target region 240 (S16). On the other hand, when the cancel button 252 is selected, it returns to the screen of FIG.

상기 인식 대상 영역(240)이 다수의 종류의 정보를 포함하는 경우에는, 다수의 종류 간에 인식 순위가 정해져 있을 수 있다. When the recognition target area 240 includes a plurality of types of information, a recognition rank may be determined among the plurality of types.

일 예로 상기 다수의 종류가 물품 코드와 물품명을 포함하는 경우에는, 상기 제어부(50)는 물품 코드를 먼저 인식한 후에 상기 메모리부(40)에 저장된 정보와 비교한다. 상기 메모리부(40)에는 물품 코드와 이에 해당하는 물품명 및 물품명이 속하는 물품 카테고리(인식된 정보가 속하는 물품 카테고리임)가 저장된다. 따라서, 상기 제어부(50)는 인식한 물품 코드가 상기 메모리부(40)에 저장된 물품 코드와 일치하는지 여부를 판단한다. 만약, 인식한 물품 코드가 상기 메모리부(40)에 저장된 물품 코드와 일치하는 경우에는 인식한 물품 코드에 대응하는 물품 카테고리 또는 물품명이 상기 메모리부(40)에 저장되고, 상기 디스플레이부(20)에서는 인식 결과가 표시된다(S17). For example, when the plurality of types include an article code and a product name, the controller 50 first recognizes the article code and then compares the information with the information stored in the memory unit 40. The memory unit 40 stores an article code, a corresponding article name, and an article category (that is, an article category to which the recognized information belongs). Therefore, the controller 50 determines whether the recognized article code matches the article code stored in the memory unit 40. If the recognized article code matches the article code stored in the memory unit 40, the article category or article name corresponding to the recognized article code is stored in the memory unit 40, and the display unit 20 is displayed. In step S17, the recognition result is displayed.

이 때, 인식한 물품 코드가 상기 메모리부(40)에 저장된 물품 코드와 일치하는 경우에는 상기 제어부(50)는 인식 대상 영역 내의 물품명을 인식하지 않는다. 이는 상기 제어부(50)의 인식 시간을 줄이기 위함이다. At this time, if the recognized article code matches the article code stored in the memory unit 40, the controller 50 does not recognize the article name in the recognition target area. This is to reduce the recognition time of the controller 50.

이 때, 상기 메모리부(40)에는 인식된 물품 코드의 비교를 위한 물품 코드가 저장되는 제1메모리와, 관리를 위하여 물품 카테고리 또는 물품명이 저장되는 제2메모리를 포함할 수 있다. 이 때, 상기 제1메모리와 제2메모리는 별도의 구성이거나 메모리부(40) 내에서 구분된 저장 공간일 수 있다. In this case, the memory unit 40 may include a first memory in which an article code for comparison of recognized item codes is stored, and a second memory in which an article category or article name is stored for management. In this case, the first memory and the second memory may be separate components or storage spaces divided in the memory unit 40.

반면, 인식한 물품 코드와 상기 메모리부(40)에 저장된 물품 코드가 일치하지 않는 경우에는 상기 제어부(50)는 인식 대상 영역 내의 물품명을 인식하여 상기 메모리부(40)에 저장된 정보와 비교한다. 상기 메모리부(40)에는 인식된 물품명과 비교를 위한 물품명이 저장될 수 있다. On the other hand, when the recognized article code and the article code stored in the memory unit 40 does not match, the controller 50 recognizes the article name in the recognition target area and compares it with the information stored in the memory unit 40. The memory unit 40 may store a product name for comparison with the recognized product name.

만약, 인식한 물품명이 상기 메모리부(40)에 저장된 물품명과 일치하는 경우에는 인식한 물품명 또는 인식한 물품명이 속하는 물품 카테고리가 상기 메모리부(40)에 저장되고, 상기 디스플레이부(20)에서는 인식 결과가 표시된다(S17). If the recognized article name matches the article name stored in the memory unit 40, the recognized article name or the article category to which the recognized article name belongs is stored in the memory unit 40, and the display unit 20 recognizes the article name. The result is displayed (S17).

본 실시 예에서는 물품 코드를 먼저 인식하고, 메모리부의 정보와 비교한 후에 물품명을 인식하는 것을 설명하였으나, 이와 달리 상기 물품 코드와 물품명을 인식한 후에 물품 코드를 먼저 상기 메모리부(40)에 저장된 정보와 비교하는 것도 가능하다. 이 경우, 인식한 물품 코드와 상기 메모리부에 저장된 물품 코드가 일치하는 경우에는 물품명과 상기 메모리부에 저장된 물품명의 비교를 수행하지 않으므로, 상기 제어부(50)의 인식 시간이 줄어들 수 있다. In the present embodiment, the article code is first recognized and the article name is recognized after comparison with the information of the memory unit. However, the article code is first stored in the memory unit 40 after the article code and the article name are recognized. It is also possible to compare with. In this case, when the recognized article code and the article code stored in the memory unit coincide, the product name and the article name stored in the memory unit are not compared, so that the recognition time of the controller 50 can be reduced.

도 6에서 사용자가 완료 버튼(251)을 선택한 경우에는, 도 7에 도시된 바와 같이 상기 디스플레이부(20)에서 인식 대상 영역의 정보를 인식 중임을 알리기 위한 정보(260)가 표시될 수 있다. 또한, 상기 디스플레이부(20)에서는 인식 대상 영역의 정보 인식을 취소하기 위한 취소 버튼(261)이 표시될 수 있다. 따라서, 상기 취소 버튼(261)을 선택한 경우에는, 상기 인식 대상 영역의 정보 인식이 취소되고, 도 7의 화면에서 도 4의 화면으로 복귀하게 된다. When the user selects the completion button 251 in FIG. 6, as shown in FIG. 7, information 260 for notifying that the display unit 20 is recognizing information of the recognition target region may be displayed. In addition, the display unit 20 may display a cancel button 261 for canceling the recognition of information of the recognition target area. Therefore, when the cancel button 261 is selected, the recognition of the information in the recognition target region is canceled, and the screen of FIG. 7 is returned to the screen of FIG. 4.

인식 대상 영역 내에 포함된 정보의 인식이 완료되면, 상기 디스플레이부(20)에는 인식한 물품 코드 또는 물품명에 대응하는 카테고리 정보(273)가 표시될 수 있다. 또한, 상기 디스플레이부(20)에는 카테고리 정보(273)에 대응하는 아이콘 정보(272)가 표시될 수 있다. 물론, 카테고리 정보(273)와 아이콘 정보(272) 중 어느 하나가 미표시되는 것도 가능하다. When the recognition of the information included in the recognition target area is completed, the display unit 20 may display category information 273 corresponding to the recognized item code or product name. In addition, the display unit 20 may display icon information 272 corresponding to the category information 273. Of course, any one of the category information 273 and the icon information 272 may not be displayed.

또한, 상기 디스플레이부(20)에는 최종적으로 관리 대상을 위한 물품을 선택하기 위한 선택부(271)가 표시될 수 있다. 상기 선택부(271)의 기능은 도 6의 선택부(241)의 기능과 동일하므로, 자세한 설명은 생략하기로 한다. In addition, the display unit 20 may finally display a selection unit 271 for selecting an article for management. Since the function of the selector 271 is the same as that of the selector 241 of FIG. 6, a detailed description thereof will be omitted.

상기 디스플레이부(20)에는 관리의 대상으로 추가될 물품(카테고리)의 총 개수 정보가 더 표시될 수 있다. The display unit 20 may further display information on the total number of articles (categories) to be added as an object of management.

또한, 상기 디스플레이부(20)에는 표시된 물품의 관리를 시작하기 위하여 선택하는 완료 버튼(275)과, 표시된 물품의 관리를 취소하기 위한 취소 버튼(276)이 표시될 수 있다. In addition, the display unit 20 may display a completion button 275 for selecting to start the management of the displayed goods and a cancel button 276 for canceling the management of the displayed goods.

한편, 인식한 물품 코드 및 물품명과 상기 메모리부(40)에 저장된 물품 코드와 물품명이 일치하지 않는 경우에는 상기 디스플레이부(20)에서는 인식한 정보 자체, 즉 인식한 물품명 자체가 표시될 수 있다. 이 경우, 사용자는 물품명을 수정할 수 있고, 수정된 물품명이 메모리부에 저장된 물품명과 일치하는 경우에는 물품명과 대응되는 물품 카테고리가 표시될 수 있다. On the other hand, when the recognized article code and article name and the article code and the article name stored in the memory unit 40 does not match, the display unit 20 may display the recognized information itself, that is, the recognized article name itself. In this case, the user may modify the article name, and if the modified article name matches the article name stored in the memory unit, an article category corresponding to the article name may be displayed.

또한, 상기 제어부(50)가 획득한 이미지에서 인식 대상 영역을 추출하고자 하였으나, 추출할 인식 대상 영역이 존재하지 않는 경우에는 상기 디스플레이부(20)에서는 이미지 재획득 요청을 위한 정보가 표시될 수 있다. In addition, when the controller 50 attempts to extract the recognition target region from the acquired image, but there is no recognition target region to be extracted, the display unit 20 may display information for requesting the image reacquisition. .

본 실시 예에 의하면, 상기 제어부가 획득한 이미지 전체의 정보를 인식하지 않고 인식 대상 영역을 추출하고, 인식 대상 영역이 결정되면, 결정된 인식 대상 영역 내에 포함된 정보를 인식하므로, 상기 제어부의 인식 시간이 줄어드는 장점이 있다. According to the present embodiment, the recognition region is extracted without recognizing the information of the entire image acquired by the controller, and when the recognition target region is determined, information included in the determined recognition target region is recognized, so that the recognition time of the controller is recognized. This has the advantage of shrinking.

또한, 추출된 인식 대상 영역이 디스플레이부에 표시되므로, 사용자가 비관리 대상 물품을 선택할 수 있는 장점이 있고, 비관리 대상 물품이 선택되는 경우에는 비관리 대상 물품에 해당하는 인식 대상 영역의 정보는 인식하지 않으므로, 상기 제어부의 인식 시간이 한층 더 줄어들 수 있다. In addition, since the extracted recognition target area is displayed on the display unit, there is an advantage that the user can select an unmanaged object, and when an unmanaged object is selected, information of the recognition target area corresponding to the unmanaged object is Since it is not recognized, the recognition time of the controller can be further reduced.

도 9는 본 발명의 다른 실시 예에 따른 디스플레이부에서 표시되는 화면을 보여주는 도면이다. 9 is a diagram illustrating a screen displayed on the display unit according to another exemplary embodiment.

도 9를 참조하면, 이전 실시 예에서 인식 대상 영역 내의 정보의 인식이 완료된 후에는 상기 디스플레이부(20)에는 카테고리 정보(274)가 표시될 수 있다. 이 때, 상기 카테고리 정보(274)는 개수 정보를 포함할 수 있다. 다른 예로서, 상기 카테고리 정보(274)와 별도로 해당 카테고리의 개수 정보가 표시될 수 있다.
Referring to FIG. 9, in the previous embodiment, after the recognition of the information in the recognition target area is completed, category information 274 may be displayed on the display unit 20. In this case, the category information 274 may include count information. As another example, the number information of the corresponding category may be displayed separately from the category information 274.

본 발명에서는 전기 제품의 일 예로 냉장고에 대해서 설명하였으나, 물품 정보를 인식하기 위한 내용은 냉장고 외의 다른 전기 제품에도 동일하게 적용될 수 있음을 밝혀둔다. Although the present invention has been described with respect to the refrigerator as an example of the electric product, it is noted that the contents for recognizing the product information can be equally applied to other electric products other than the refrigerator.

또한, 본 발명에서 설명되는 인식 장치의 작동 방법은 단말기에서도 동일하게 적용될 수 있음을 밝혀두며, 본 발명에서 단말기도 전기 제품에 포함될 수 있음을 밝혀둔다. 이 경우, 단말기에서 최종적으로 관리 대상 물품으로 선택된 물품의 정보가 상기 냉장고로 전송될 수 있다. In addition, it will be appreciated that the method of operating the recognition device described in the present invention may be equally applicable to a terminal, and the terminal may also be included in an electric product in the present invention. In this case, information of the article finally selected as the object to be managed by the terminal may be transmitted to the refrigerator.

또한, 본 발명에서 디스플레이부에 표시되는 버튼 들은 디스플레이부와 별도로 구비되는 입력부로 대체될 수 있다. 즉, 입력부를 이용하여 완료 버튼의 선택시 발생하는 완료 명령 또는 취소 버튼의 선택시 발생하는 취소 명령을 입력할 수 있다.
In addition, the buttons displayed on the display unit in the present invention may be replaced by an input unit provided separately from the display unit. That is, the input unit may input a cancel command generated when the completion command or a cancel button occurs when the completion button is selected.

20: 디스플레이부 30: 인식장치
40: 메모리부
20: display unit 30: recognition device
40: memory

Claims (14)

인식 장치에서 물품의 구매 영수증의 이미지를 획득하는 단계;
획득한 이미지에서 인식 대상 영역을 추출하여 인식 대상 영역과, 비인식 대상 영역을 구분하여 디스플레이부에 표시하는 단계;
표시된 인식 대상 영역 중에서 인식을 수행할 인식 대상 영역을 선택하는 단계, 여기서 상기 디스플레이부에는 추출된 인식 대상 영역을 선택하기 위한 선택부가 표시되며; 및
선택된 인식 대상 영역 내에 포함된 정보를 인식하고, 인식 결과를 표시하는 단계를 포함하고,
상기 표시된 인식 대상 영역 내에 포함되는 정보는 물품명 또는 물품 코드를 포함하고,
상기 선택된 인식 대상 영역 내에 포함된 정보를 인식하고, 인식 결과를 표시하는 단계는,
인식한 물품 코드가 메모리에 저장된 물품 코드와 일치하는지 여부를 판단하는 단계;
인식한 물품 코드가 메모리에 저장된 물품 코드와 일치하는 경우, 인식한 물품 코드에 대응하는 물품 카테고리 또는 물품명이 메모리에 저장되고, 상기 디스플레이부에 인식 결과가 표시되는 단계; 및
인식한 물품 코드가 메모리에 저장된 물품 코드와 일치하지 않는 경우, 상기 표시된 인식 대상 영역 내에 포함되는 물품명을 인식하여 메모리에 저장된 정보와 비교하는 전기 제품의 제어방법.
Acquiring an image of a purchase receipt of the article in the recognition device;
Extracting the recognition target region from the obtained image and displaying the recognition target region and the non-recognition target region on the display unit;
Selecting a recognition target region to perform recognition from among the displayed recognition target regions, wherein the display unit displays a selection unit for selecting an extracted recognition target region; And
Recognizing information included in the selected recognition target area and displaying a recognition result;
The information included in the displayed recognition subject area includes an article name or an article code,
Recognizing the information included in the selected recognition target area, and displaying the recognition result,
Determining whether the recognized article code matches the article code stored in the memory;
If the recognized item code matches the item code stored in the memory, storing the item category or item name corresponding to the recognized item code in the memory and displaying the recognition result on the display unit; And
And if the recognized article code does not match the article code stored in the memory, recognizing the article name included in the displayed recognition target area and comparing it with the information stored in the memory.
삭제delete 제 1 항에 있어서,
다수의 인식 대상 영역이 추출된 경우에는, 상기 디스플레이부에서는 다수의 인식 대상 영역이 구분되어 표시되는 전기 제품의 제어방법.
The method of claim 1,
And when the plurality of recognition target regions are extracted, the display unit displays the plurality of recognition target regions separately.
제 3 항에 있어서,
상기 인식 대상 영역을 결정하는 단계에서는, 다수의 인식 대상 영역 각각의 인식 수행 여부가 개별적으로 결정되는 전기 제품의 제어방법.
The method of claim 3, wherein
In the determining of the recognition target region, whether to perform recognition of each of the plurality of recognition target regions is individually determined.
제 3 항에 있어서,
다수의 인식 대상 영역 중 인식을 수행할 영역을 선택할 수 있는 전기 제품의 제어방법.
The method of claim 3, wherein
A control method of an electrical product that can select an area to perform recognition from among a plurality of recognition target areas.
제 3 항에 있어서,
다수의 인식 대상 영역 중에서 인식을 미수행할 영역을 선택할 수 있는 전기 제품의 제어방법.
The method of claim 3, wherein
A control method of an electrical product that can select a region that is not performing recognition among a plurality of recognition target areas.
삭제delete 제 1 항에 있어서,
표시된 인식 대상 영역 내에 포함되는 정보는 수량, 가격, 구입날짜 중 하나 이상을 더 포함하는 전기제품의 제어방법.
The method of claim 1,
The information included in the displayed recognition target area further includes at least one of quantity, price, and purchase date.
제 1 항에 있어서,
획득한 이미지에서 인식 대상 영역이 미추출되는 경우에는 이미지 재획득 요청을 위한 정보가 표시되는 전기제품의 제어방법.
The method of claim 1,
If the recognition target region is not extracted from the acquired image, information for requesting image reacquisition is displayed.
제 1 항에 있어서,
상기 인식된 결과를 표시하는 단계에서는, 인식한 정보가 속하는 카테고리가 표시되는 전기제품의 제어방법.
The method of claim 1,
In the displaying of the recognized result, the category of the electric product control method is displayed.
제 1 항에 있어서,
상기 인식된 결과를 표시하는 단계에서는, 인식한 정보 자체가 표시되는 전기제품의 제어방법.
The method of claim 1,
In the displaying of the recognized result, the recognized information itself is displayed.
제 10 항 또는 제 11 항에 있어서,
상기 인식된 결과를 표시하는 단계에서는, 인식한 정보의 개수가 표시되는 전기제품의 제어방법.
The method of claim 10 or 11,
In the displaying of the recognized result, the number of the recognized information is displayed.
삭제delete 제 1 항에 있어서,
획득한 이미지 내의 물품의 순번, 물품명 또는 물품 코드 중 어느 하나를 기준으로 상기 인식 대상 영역이 추출되는 전기제품의 제어방법.
The method of claim 1,
And the recognition target region is extracted based on one of a sequence number, an article name, and an article code of an article in an acquired image.
KR1020120108660A 2012-09-28 2012-09-28 Method of controlling an electric product KR102067817B1 (en)

Priority Applications (3)

Application Number Priority Date Filing Date Title
KR1020120108660A KR102067817B1 (en) 2012-09-28 2012-09-28 Method of controlling an electric product
US14/040,176 US9639823B2 (en) 2012-09-28 2013-09-27 Electric product
CN201310450253.4A CN103712410B (en) 2012-09-28 2013-09-27 Electric product

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020120108660A KR102067817B1 (en) 2012-09-28 2012-09-28 Method of controlling an electric product

Publications (2)

Publication Number Publication Date
KR20140042216A KR20140042216A (en) 2014-04-07
KR102067817B1 true KR102067817B1 (en) 2020-01-17

Family

ID=50651450

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020120108660A KR102067817B1 (en) 2012-09-28 2012-09-28 Method of controlling an electric product

Country Status (1)

Country Link
KR (1) KR102067817B1 (en)

Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR101139801B1 (en) * 2010-03-12 2012-04-30 에스케이마케팅앤컴퍼니 주식회사 Automatic data gathering system using by reading receipt and method thereof

Family Cites Families (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20120105119A (en) * 2011-03-15 2012-09-25 이상만 Refrigerator management system using food purchase information

Patent Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR101139801B1 (en) * 2010-03-12 2012-04-30 에스케이마케팅앤컴퍼니 주식회사 Automatic data gathering system using by reading receipt and method thereof

Also Published As

Publication number Publication date
KR20140042216A (en) 2014-04-07

Similar Documents

Publication Publication Date Title
US9043033B2 (en) Network system and control method thereof
KR101821818B1 (en) A control method of electric device
US9224123B2 (en) Electric product and method of controlling the same
US9639823B2 (en) Electric product
KR101863894B1 (en) Continuous display shelf edge label device
US10032126B2 (en) Customer controlled home delivery
US20200193404A1 (en) An automatic in-store registration system
CN207302200U (en) A kind of consumption rights automatic identification and the vending machine of control
US20190337549A1 (en) Systems and methods for transactions at a shopping cart
KR20120118376A (en) Controlling method of a refrigerator
KR102009933B1 (en) Refrigerator
KR102067817B1 (en) Method of controlling an electric product
KR102046502B1 (en) Method of controlling an electric product
KR102046507B1 (en) Mehtod of controlling an electric product
US20150248612A1 (en) Information processing system for identifying used commodities in domestic electrical appliances, and security system
CN111222899A (en) Commodity information and replenishment processing method, equipment and storage medium
US20170285884A1 (en) Systems, devices, and methods for distributed processing for preauthorized payment
US11447905B2 (en) Clothing management apparatus and method for controlling thereof
TWI601083B (en) Pruchasing system based on online to offline commerce
KR20150061045A (en) System for food inventory managing and recipe searching
JP2019207482A5 (en)
KR20120117344A (en) Information recognizing method for an electric appliance
KR20120117345A (en) Information recognizing method for an electric appliance
KR20130012624A (en) Controlling method of component
CN117006799A (en) Auxiliary method, device and equipment for refrigerator storage and storage medium

Legal Events

Date Code Title Description
A201 Request for examination
E902 Notification of reason for refusal
AMND Amendment
E601 Decision to refuse application
X091 Application refused [patent]
AMND Amendment
X701 Decision to grant (after re-examination)
GRNT Written decision to grant