KR102067817B1 - Method of controlling an electric product - Google Patents
Method of controlling an electric product Download PDFInfo
- Publication number
- KR102067817B1 KR102067817B1 KR1020120108660A KR20120108660A KR102067817B1 KR 102067817 B1 KR102067817 B1 KR 102067817B1 KR 1020120108660 A KR1020120108660 A KR 1020120108660A KR 20120108660 A KR20120108660 A KR 20120108660A KR 102067817 B1 KR102067817 B1 KR 102067817B1
- Authority
- KR
- South Korea
- Prior art keywords
- recognition
- recognition target
- article
- information
- displayed
- Prior art date
Links
Images
Classifications
-
- F—MECHANICAL ENGINEERING; LIGHTING; HEATING; WEAPONS; BLASTING
- F25—REFRIGERATION OR COOLING; COMBINED HEATING AND REFRIGERATION SYSTEMS; HEAT PUMP SYSTEMS; MANUFACTURE OR STORAGE OF ICE; LIQUEFACTION SOLIDIFICATION OF GASES
- F25D—REFRIGERATORS; COLD ROOMS; ICE-BOXES; COOLING OR FREEZING APPARATUS NOT OTHERWISE PROVIDED FOR
- F25D2400/00—General features of, or devices for refrigerators, cold rooms, ice-boxes, or for cooling or freezing apparatus not covered by any other subclass
- F25D2400/36—Visual displays
- F25D2400/361—Interactive visual displays
-
- F—MECHANICAL ENGINEERING; LIGHTING; HEATING; WEAPONS; BLASTING
- F25—REFRIGERATION OR COOLING; COMBINED HEATING AND REFRIGERATION SYSTEMS; HEAT PUMP SYSTEMS; MANUFACTURE OR STORAGE OF ICE; LIQUEFACTION SOLIDIFICATION OF GASES
- F25D—REFRIGERATORS; COLD ROOMS; ICE-BOXES; COOLING OR FREEZING APPARATUS NOT OTHERWISE PROVIDED FOR
- F25D2500/00—Problems to be solved
- F25D2500/06—Stock management
Abstract
본 발명은 전기 제품의 제어방법에 관한 것이다. 일 측면에 따른 전기 제품의 제어방법은, 인식 장치에서 인식 대상의 이미지를 획득하는 단계; 획득한 이미지에서 인식 대상 영역을 추출하여 인식 대상 영역을 디스플레이부에 표시하는 단계; 표시된 인식 대상 영역 중에서 인식을 수행할 인식 대상 영역을 결정하는 단계; 및 결정된 인식 대상 영역 내에 포함된 정보를 인식하고, 인식 결과를 표시하는 단계를 포함한다. The present invention relates to a control method of an electric product. According to an aspect, a control method of an electrical product includes: acquiring an image of a recognition object in a recognition device; Extracting the recognition target region from the acquired image and displaying the recognition target region on the display unit; Determining a recognition target region to perform recognition from among the displayed recognition target regions; And recognizing information included in the determined recognition target region and displaying a recognition result.
Description
본 발명은 전기 제품의 제어방법에 관한 것이다. The present invention relates to a control method of an electric product.
일반적으로 전기 제품은 전기를 동력원으로 하여 특정 대상물을 관리 또는 처리하기 위한 장치로서 이해될 수 있다. In general, an electrical product can be understood as a device for managing or treating a specific object using electricity as a power source.
종래의 전기 제품이 냉장고일 경우, 상기 냉장고는 저장실을 형성하는 본체와, 상기 본체를 선택적으로 차폐하는 도어를 포함한다. 상기 도어에는 냉장고의 작동상태를 디스플레이 하는 디스플레이 장치가 구비된다. When the conventional electrical appliance is a refrigerator, the refrigerator includes a main body that forms a storage compartment and a door that selectively shields the main body. The door is provided with a display device for displaying the operating state of the refrigerator.
상기 디스플레이 장치에는, 상기 저장실의 설정온도를 디스플레이 하는 표시부와, 상기 설정온도를 조절할 수 있는 입력부가 구비된다. 그러나, 상기 디스플레이 장치에는, 상기 저장실에 저장되는 물품 정보 또는 물품의 관리(처리)정보등은 디스플레이 되지 않는다. 즉, 종래의 냉장고는 식품을 저장하는 수단으로서만 이용될 뿐, 상기 식품에 관한 관리 또는 처리 정보를 인식하지 않는다.The display device includes a display unit for displaying the set temperature of the storage compartment and an input unit for adjusting the set temperature. However, in the display apparatus, article information stored in the storage compartment, management (processing) information of the article, and the like are not displayed. That is, the conventional refrigerator is used only as a means for storing food, and does not recognize management or processing information about the food.
정리하면, 종래의 전기 제품의 경우, 전기 제품이 관리 또는 처리하고자 하는 특정 대상물의 관리정보 또는 처리정보등을 인식하지 않으므로, 사용자가 이를 일일이 기억하거나 검색하여야 하는 불편함이 있었다.In summary, in the case of a conventional electric product, since the electric product does not recognize management information or processing information of a specific object to be managed or processed, there is an inconvenience that a user must remember or search it.
상세히, 전기 제품이 냉장고일 경우, 사용자가 냉장고에 저장되는 식품의 관리정보(보관량 또는 유통기한 정보등)를 기억하여야만 유통기한이 얼마남지 않은 식품을 소비하거나 보관량이 얼마남지 않은 식품에 대한 구매계획을 세울 수 있다는 불편함이 있었다.In detail, if the electrical appliance is a refrigerator, the user must remember the management information (such as storage quantity or expiration date information) of the food stored in the refrigerator, and then purchase a plan for the consumption of foods with a short shelf life or for foods with a low storage amount There was an inconvenience that can stand.
전기 제품이 세탁기일 경우, 사용자가 세탁물을 작동시키기 전에 세탁물의 재질 또는 세탁 방법등을 일일이 확인하여 세탁기를 작동해야 하는 불편함이 있었다.In the case where the electric product is a washing machine, the user had to check the material of the laundry or the washing method before operating the laundry, and there was an inconvenience of operating the washing machine.
전기 제품이 조리기기일 경우, 사용자가 조리물을 조리하기 전에 음식물의 조리방법을 일일이 확인하여 조리기기를 작동해야 하는 불편함이 있었다.When the electrical appliance is a cooking appliance, there is an inconvenience in that the user must check the cooking method of the food before the cooking of the food and operate the cooking appliance.
본 발명의 목적은 전기 제품의 처리 대상물에 관한 정보를 전기 제품이 인식할 수 있는 전기 제품의 제어 방법을 제공하는 것에 있다.An object of the present invention is to provide a control method of an electric product that enables the electric product to recognize information about a processing object of the electric product.
일 측면에 따른 전기 제품의 제어방법은, 인식 장치에서 인식 대상의 이미지를 획득하는 단계; 획득한 이미지에서 인식 대상 영역을 추출하여 인식 대상 영역을 디스플레이부에 표시하는 단계; 표시된 인식 대상 영역 중에서 인식을 수행할 인식 대상 영역을 결정하는 단계; 및 결정된 인식 대상 영역 내에 포함된 정보를 인식하고, 인식 결과를 표시하는 단계를 포함한다. According to an aspect, a control method of an electrical product includes: acquiring an image of a recognition object in a recognition device; Extracting the recognition target region from the acquired image and displaying the recognition target region on the display unit; Determining a recognition target region to perform recognition from among the displayed recognition target regions; And recognizing information included in the determined recognition target region and displaying a recognition result.
본 실시 예에 의하면, 획득한 이미지 전체의 정보를 인식하지 않고 인식 대상 영역을 추출하고, 인식 대상 영역이 결정되면, 결정된 인식 대상 영역 내에 포함된 정보를 인식하므로, 인식 시간이 줄어드는 장점이 있다. According to the present embodiment, the recognition target region is extracted without recognizing the information of the entire acquired image, and when the recognition target region is determined, the information included in the determined recognition target region is recognized, thereby reducing the recognition time.
또한, 추출된 인식 대상 영역이 디스플레이부에 표시되므로, 사용자가 비관리 대상 물품을 선택할 수 있는 장점이 있고, 비관리 대상 물품이 선택되는 경우에는 비관리 대상 물품에 해당하는 인식 대상 영역의 정보는 인식하지 않으므로, 상기 제어부의 인식 시간이 한층 더 줄어들 수 있다. In addition, since the extracted recognition target area is displayed on the display unit, there is an advantage that the user can select an unmanaged object, and when an unmanaged object is selected, information of the recognition target area corresponding to the unmanaged object is Since it is not recognized, the recognition time of the controller can be further reduced.
도 1은 본 발명의 일 실시예에 따른 네트워크 시스템의 구성을 보여주는 도면.
도 2는 상기 네트워크 시스템을 구성하는 냉장고의 블럭도.
도 3은 본 발명의 일 실시 예에 따른 인식 장치의 작동 방법을 보여주는 흐름도.
도 4 내지 도 8은 상기 냉장고의 디스플레이부에서 표시되는 화면을 보여주는 도면.
도 9는 본 발명의 다른 실시 예에 따른 디스플레이부에서 표시되는 화면을 보여주는 도면. 1 is a diagram showing the configuration of a network system according to an embodiment of the present invention.
2 is a block diagram of a refrigerator constituting the network system.
3 is a flowchart illustrating a method of operating a recognition device according to an exemplary embodiment.
4 to 8 are views showing a screen displayed on the display unit of the refrigerator.
9 is a view showing a screen displayed on the display unit according to another embodiment of the present invention.
이하에서는 도면을 참조하여 본 발명의 실시 예 들에 대해서 구체적으로 설명하기로 한다. Hereinafter, exemplary embodiments of the present invention will be described in detail with reference to the accompanying drawings.
도 1은 본 발명의 일 실시예에 따른 네트워크 시스템의 구성을 보여주는 도면이고, 도 2는 상기 네트워크 시스템을 구성하는 냉장고의 블럭도이다. 1 is a view showing the configuration of a network system according to an embodiment of the present invention, Figure 2 is a block diagram of a refrigerator constituting the network system.
도 1 및 도 2를 참조하면, 본 발명의 일 실시예에 따른 네트워크 시스템은, 전기 제품의 일 예로서 냉기가 발생되며 대상물(물품)을 저장하는 냉장고(10)와, 상기 냉장고(10)에 통신 가능하게 연결되는 단말기(80) 및 상기 냉장고(10) 및 단말기(80)와 통신 가능하게 연결되며 소정 데이터를 저장하는 서버(70)를 포함할 수 있다. 1 and 2, a network system according to an embodiment of the present invention includes a
상기 단말기(80)는, 소정의 정보가 표시되는 디스플레이부(82)를 포함한다. 상기 디스플레이부(82)에서는 상기 냉장고에 저장된 물품 정보 또는 상기 냉장고의 작동 상태 정보 등이 표시될 수 있다. 즉, 상기 단말기(80)는 상기 냉장고(10)의 상태를 모니터링할 수 있다. 또한, 상기 단말기(80)를 이용하여 상기 냉장고(10)의 작동을 제어할 수 있다. 또한, 상기 단말기(80)에서 인식한 정보를 상기 냉장고(10)로 전송할 수 있다. The
상기 단말기(80)는 일 예로 휴대 가능한 휴대폰 또는 스마트 폰일 수 있으나, 이에 제한되지는 않는다. The
상기 네트워크 시스템은, 상기 단말기(80)와 서버(70)의 통신을 위한 제 1 인터페이스(310)와, 상기 서버(70)와 냉장고(10)의 통신을 위한 제 2 인터페이스(320) 및 상기 단말기(80)와 냉장고(10) 사이의 통신을 위한 제 3 인터페이스(330)를 포함할 수 있다. The network system includes a
상기 제 1 내지 제 3 인터페이스(310, 320, 330)는, 정보를 전달하기 위한 통신 방식으로서 와이파이(wifi), 지그비(Zig-bee), 블루투스(Bluetooth) 및 인터넷(internet) 중 적어도 하나의 통신 방식이 적용될 수 있으며, 통신 방식에는 제한이 없음을 밝혀둔다. The first to
상기 냉장고(10)는, 정보를 디스플레이할 수 있는 디스플레이부(20)와, 정보를 인식하기 위한 인식 장치(30)와, 물품과 관련한 정보가 저장되는 메모리부(40)와, 상기 서버(70) 또는 상기 단말기(80)와 통신을 위한 통신부를 포함할 수 있다. The
상기 인식 장치(30)는, 촬영장치, RFID 리더, QR 코드 리더, 바코드 리더 중 하나 이상을 포함할 수 있다. 이하에서는 상기 인식 장치(30)가 일 예로 촬영장치인 것에 대해서 설명하기로 한다. The
상기 인식 장치(30)는, 인식 대상(400)의 이미지를 획득할 수 있다. 상기 인식 대상(400)은 일 예로 물품의 구매 영수증일 수 있다. 상기 물품은 관리 대상 물품과 비관리 대상 물품으로 구분될 수 있다. 상기 관리 대상 물품은 상기 냉장고에서 관리될 수 있는 물품으로서, 일 예로 식품일 수 있다. 이하에서는 관리 대상 물품이 식품인 것을 가정하여 설명하기로 한다. The
상기 물품과 관련한 정보는, 물품 자체정보 또는 물품 관리정보가 포함될 수 있다. 상기 물품 자체정보에는 물품명, 물품량 또는 물품개수 등이 포함되며, 물품 관리정보에는 냉장고 내에 저장되는 물품의 보관위치, 보관기간, 보관량 또는 보관방법 등이 포함될 수 있다. The information related to the article may include article itself information or article management information. The article itself information includes the name of the article, the quantity of the article or the number of articles, etc. The article management information may include the storage location, storage period, storage amount or storage method of the article stored in the refrigerator.
그리고, 상기 물품과 관련한 정보 중 일부는 상기 인식 장치(30)에서 획득한 이미지로부터 획득될 수 있다. In addition, some of the information related to the article may be obtained from an image obtained by the
상기 메모리부(40)에는 상기 물품과 관련한 정보가 저장될 수 있다. 상기 메모리부(40)에 저장된 정보 중 일부 또는 전부는 상기 서버(70) 또는 상기 단말기(80)에 저장되거나 상기 서버(70) 또는 상기 단말기(80)에서 로딩할 수 있다. The
도 3은 본 발명의 일 실시 예에 따른 인식 장치의 작동 방법을 보여주는 흐름도이고, 도 4 내지 도 8은 상기 냉장고의 디스플레이부에서 표시되는 화면을 보여주는 도면이다. 3 is a flowchart illustrating a method of operating a recognition device according to an embodiment of the present invention, and FIGS. 4 to 8 are views illustrating screens displayed on the display unit of the refrigerator.
도 3 내지 도 8를 참조하면, 상기 인식 장치(30)가 인식 대상을 인식하기 위하여 상기 인식 장치(30)의 작동을 준비한다(S11). 즉, 상기 인식 장치(30)를 활성화시킨다. 상기 인식 장치(30)가 활성화되면, 상기 디스플레이부(20)에는 도 4에 도시된 바와 같이 상기 디스플레이부(20) 상에서의 인식 대상(400)의 위치를 가이드하기 위한 가이드 프레임(210)이 표시된다. 또한, 상기 디스플레이부(20)에서는 인식 대상의 위치를 가이드 프레임(210)에 위치시키기 위한 안내 정보(220)가 표시될 수 있다. 3 to 8, the
또한, 상기 디스플레이부(20)에서는 상기 인식 대상(400)의 이미지를 획득하기 위한 촬영 버튼(222)이 표시될 수 있다. 따라서, 상기 촬영 버튼(222)를 선택하면, 상기 가이드 프레임(210) 내에 위치한 인식 대상(400)의 이미지가 획득된다(S12). In addition, the
다른 예로서, 상기 촬영 버튼(222)를 선택하지 않고, 상기 가이드 프레임(210)에 인식 대상(400)에 위치된 상태에서 일정 시간이 경과하면, 자동으로 상기 가이드 프레임(210) 내에 위치한 인식 대상(400)의 이미지가 획득될 수 있다. As another example, when a predetermined time elapses in a state in which the
상기 인식 대상(400)의 이미지가 획득된 후에는 획득된 이미지에서 인식 대상 영역이 추출된다(S13). 이 때, 상기 인식 대상 영역이 추출되는 과정에서는 도 5에 도시된 바와 같이 인식 대상 영역을 추출 중임을 알리기 위한 정보(230)가 표시될 수 있다. After the image of the
그리고, 상기 디스플레이부(20)에서는 인식 대상 영역의 추출을 취소하기 위한 취소 버튼(231)이 표시될 수 있다. 따라서, 상기 취소 버튼(231)을 선택한 경우에는, 상기 인식 대상 영역의 추출이 취소되고, 도 5의 화면에서 도 4의 화면으로 복귀하게 된다. In addition, the
획득한 이미지에서 인식 대상 영역이 추출되면, 상기 디스플레이부(20)에서는 도 6에 도시된 바와 같이 인식 대상 영역(240)이 표시된다. 이 때, 인식 대상 영역(240)과 비인식 대상 영역은 구분되어 표시될 수 있다. 예시적으로, 선에 의해서 인식 대상 영역(240)과 비인식 대상 영역이 구분될 수 있다. When the recognition target region is extracted from the acquired image, the
본 실시 예에서 인식 대상 영역(240)은 획득한 이미지 전체에서 물품을 인식하기 위한 필요한 영역이다. 획득한 이미지에 다수의 물품에 대한 정보가 존재하는 경우에는 상기 디스플레이부(20)에서는 다수의 인식 대상 영역(240)이 표시된다. 다수의 인식 대상 영역(240)는 상하 또는 좌우 방향으로 정렬되어 표시될 수 있다. 또한, 다수의 인식 대상 영역(240)은 서로 구분되어 표시될 수 있다. In the present embodiment, the
상기 인식 대상 영역(240)의 추출 방법에 대해서 설명한다. The extraction method of the
상기 인식 장치(30)가 인식 대상(400)의 이미지를 획득하면, 상기 제어부(50)는 획득된 이미지를 다수의 픽셀로 구분한다. 각 픽셀은 고유의 좌표 값을 가진다. 그 다음 상기 제어부(50)는 각 픽셀의 그레이 값을 판단하여 상기 각 픽셀에 고유값을 부여한다. 일 예로 픽셀의 그레이 값이 기준 값을 초과하는 경우에는 1을 부여하고, 그레이 값이 기준 값 이하인 경우에는 0을 부여한다. When the
그 다음, 상기 제어부(50)는 각 픽셀의 고유값을 기초로 인식 대상 영역을 추출한다. 일 예로 도 6에 도시된 바와 같이, 획득한 이미지는 구입한 물품의 순번(001, 002)과, 물품명(243), 물품 코드(244), 가격, 수량, 등을 포함한다. 이 때, 상기 제어부(50)는 물품의 순번, 물품명(243), 및 물품 코드(244) 중 하나 이상을 판단 기준으로 하여 인식 대상 영역을 추출한다. Next, the
상기 판단 기준이 물품의 순번인 경우, 특정 좌표 범위 내에서 1을 부여받은 픽셀 들이 이루는 형태가 0 또는 1인 경우, 이를 기초로 일정 범위를 인식 대상 영역으로 추출하게 된다. When the determination criterion is the order of the article, when the shape of the pixels given with 1 within a specific coordinate range is 0 or 1, a predetermined range is extracted as the recognition target region based on this.
본 실시 예에서 인식 대상 영역을 추출하는 것은 이미지에서 물품의 정보를 추출하는 것이 아니고, 단지 이미지 상에서 인식에 필요한 영역을 추출하는 것이다. 인식에 필요한 영역을 추출하는 이유는 이미지 상에서 물품 정보를 인식하기 위하여 필요한 인식 시간을 줄이기 위함이다. 즉, 이미지 상의 정보 중에서 불필요한 정보를 인식하지 않는 경우 인식 시간은 줄어들 수 있다. In the present embodiment, extracting the recognition target region does not extract the information of the article from the image, but merely extracts the region necessary for the recognition on the image. The reason for extracting the area required for recognition is to reduce the recognition time required for recognizing the item information on the image. In other words, when unnecessary information is not recognized among the information on the image, the recognition time may be reduced.
추출된 인식 대상 영역(240) 내에는 물품명(243) 및 물품 코드(244) 중 하나 이상이 포함될 수 있다. 다만, 인식 대상 영역(240)에 포함되는 정보는 이에 한정되지 않고, 필요에 따라 수량, 가격, 구입 날짜 등이 포함되는 것도 가능하다. The extracted
상기 디스플레이부(20)에는 추출된 인식 대상 영역(240)을 선택하기 위한 선택부(241)가 더 표시될 수 있다. 상기 선택부(241)는 관리 대상 물품과 비관리 대상 물품을 선택하기 위하여 사용된다. 이와 달리 상기 선택부(241)가 구비되지 않고, 인식 대상 영역(240)을 터치하는 것에 의해서 인식을 수행할 인식 대상 영역을 결정할 수 있다. 이 경우, 인식을 수행할 인식 대상 영역과 인식을 비수행할 인식 대상 영역은 구분되어 표시될 수 있다. The
사용자는 상기 디스플레이부(20) 상에 표시된 인식 대상 영역 내의 물품명을 확인하여 관리 대상 물품과 비관리 대상 물품을 판단할 수 있다. 그리고, 사용자는 관리 대상 물품에 대응하는 선택부(241)를 선택할 수 있다. 즉, 인식을 수행할 인식 대상 영역을 선택할 수 있다. 이 때, 미선택되는 물품이 실제적인 비관리 대상 물품이 된다. The user may determine the item to be managed and the item to be managed by checking the item name in the recognition target area displayed on the
본 실시 예에서는 사용자가 관리 대상 물품을 선택부(241)를 이용하여 선택하는 것으로 설명하였으나, 이와 달리 비관리 대상 물품(인식을 미수행할 인식 대상 영역임)을 선택부(241)를 이용하여 선택할 수 있다. 즉, 인식 대상 영역이 추출된 후에는 기본적으로 모든 물품이 관리 대상 물품인 것으로 판단된다. 그리고, 사용자는 선택부(241)를 이용하여 표시된 관리 대상 물품 중에서 비관리 대상 물품(인식을 미수행할 인식 대상 영역)을 선택할 수 있다. 예를 들어 각 선택부(241)에 "V"와 같은 형태가 표시되고, 사용자가 해당 선택부(241)를 선택하면, "V"와 같은 형태가 제거될 수 있다. In the present exemplary embodiment, the user selects the item to be managed using the
즉, 사용자의 관리 대상 물품 선택 또는 비관리 대상 물품의 선택에 의해서, 최종적으로 인식을 수행할 인식 대상 영역(240)이 결정된다(S15). 다만, 식품이 관리 대상 물품일 수 있으나, 사용자의 선택에 의해서 비관리 대상 물품으로 분류될 수 있다. That is, the
도 6에서, 상기 디스플레이부(20)에는 인식 대상 영역(240)에 대응하는 정보를 인식하기 위하여 선택하는 완료 버튼(251) 또는 인식을 취소하기 위한 취소 버튼(252)이 표시될 수 있다. In FIG. 6, the
상기 완료 버튼(251)이 선택되면, 상기 제어부(50)는 상기 인식 대상 영역(240)에 대응하는 정보, 즉, 인식 대상 영역(240) 내에 포함된 정보를 인식하게 된다(S16). 반면, 상기 취소 버튼(252)이 선택되면, 도 4의 화면으로 복귀하게 된다. When the
상기 인식 대상 영역(240)이 다수의 종류의 정보를 포함하는 경우에는, 다수의 종류 간에 인식 순위가 정해져 있을 수 있다. When the
일 예로 상기 다수의 종류가 물품 코드와 물품명을 포함하는 경우에는, 상기 제어부(50)는 물품 코드를 먼저 인식한 후에 상기 메모리부(40)에 저장된 정보와 비교한다. 상기 메모리부(40)에는 물품 코드와 이에 해당하는 물품명 및 물품명이 속하는 물품 카테고리(인식된 정보가 속하는 물품 카테고리임)가 저장된다. 따라서, 상기 제어부(50)는 인식한 물품 코드가 상기 메모리부(40)에 저장된 물품 코드와 일치하는지 여부를 판단한다. 만약, 인식한 물품 코드가 상기 메모리부(40)에 저장된 물품 코드와 일치하는 경우에는 인식한 물품 코드에 대응하는 물품 카테고리 또는 물품명이 상기 메모리부(40)에 저장되고, 상기 디스플레이부(20)에서는 인식 결과가 표시된다(S17). For example, when the plurality of types include an article code and a product name, the
이 때, 인식한 물품 코드가 상기 메모리부(40)에 저장된 물품 코드와 일치하는 경우에는 상기 제어부(50)는 인식 대상 영역 내의 물품명을 인식하지 않는다. 이는 상기 제어부(50)의 인식 시간을 줄이기 위함이다. At this time, if the recognized article code matches the article code stored in the
이 때, 상기 메모리부(40)에는 인식된 물품 코드의 비교를 위한 물품 코드가 저장되는 제1메모리와, 관리를 위하여 물품 카테고리 또는 물품명이 저장되는 제2메모리를 포함할 수 있다. 이 때, 상기 제1메모리와 제2메모리는 별도의 구성이거나 메모리부(40) 내에서 구분된 저장 공간일 수 있다. In this case, the
반면, 인식한 물품 코드와 상기 메모리부(40)에 저장된 물품 코드가 일치하지 않는 경우에는 상기 제어부(50)는 인식 대상 영역 내의 물품명을 인식하여 상기 메모리부(40)에 저장된 정보와 비교한다. 상기 메모리부(40)에는 인식된 물품명과 비교를 위한 물품명이 저장될 수 있다. On the other hand, when the recognized article code and the article code stored in the
만약, 인식한 물품명이 상기 메모리부(40)에 저장된 물품명과 일치하는 경우에는 인식한 물품명 또는 인식한 물품명이 속하는 물품 카테고리가 상기 메모리부(40)에 저장되고, 상기 디스플레이부(20)에서는 인식 결과가 표시된다(S17). If the recognized article name matches the article name stored in the
본 실시 예에서는 물품 코드를 먼저 인식하고, 메모리부의 정보와 비교한 후에 물품명을 인식하는 것을 설명하였으나, 이와 달리 상기 물품 코드와 물품명을 인식한 후에 물품 코드를 먼저 상기 메모리부(40)에 저장된 정보와 비교하는 것도 가능하다. 이 경우, 인식한 물품 코드와 상기 메모리부에 저장된 물품 코드가 일치하는 경우에는 물품명과 상기 메모리부에 저장된 물품명의 비교를 수행하지 않으므로, 상기 제어부(50)의 인식 시간이 줄어들 수 있다. In the present embodiment, the article code is first recognized and the article name is recognized after comparison with the information of the memory unit. However, the article code is first stored in the
도 6에서 사용자가 완료 버튼(251)을 선택한 경우에는, 도 7에 도시된 바와 같이 상기 디스플레이부(20)에서 인식 대상 영역의 정보를 인식 중임을 알리기 위한 정보(260)가 표시될 수 있다. 또한, 상기 디스플레이부(20)에서는 인식 대상 영역의 정보 인식을 취소하기 위한 취소 버튼(261)이 표시될 수 있다. 따라서, 상기 취소 버튼(261)을 선택한 경우에는, 상기 인식 대상 영역의 정보 인식이 취소되고, 도 7의 화면에서 도 4의 화면으로 복귀하게 된다. When the user selects the
인식 대상 영역 내에 포함된 정보의 인식이 완료되면, 상기 디스플레이부(20)에는 인식한 물품 코드 또는 물품명에 대응하는 카테고리 정보(273)가 표시될 수 있다. 또한, 상기 디스플레이부(20)에는 카테고리 정보(273)에 대응하는 아이콘 정보(272)가 표시될 수 있다. 물론, 카테고리 정보(273)와 아이콘 정보(272) 중 어느 하나가 미표시되는 것도 가능하다. When the recognition of the information included in the recognition target area is completed, the
또한, 상기 디스플레이부(20)에는 최종적으로 관리 대상을 위한 물품을 선택하기 위한 선택부(271)가 표시될 수 있다. 상기 선택부(271)의 기능은 도 6의 선택부(241)의 기능과 동일하므로, 자세한 설명은 생략하기로 한다. In addition, the
상기 디스플레이부(20)에는 관리의 대상으로 추가될 물품(카테고리)의 총 개수 정보가 더 표시될 수 있다. The
또한, 상기 디스플레이부(20)에는 표시된 물품의 관리를 시작하기 위하여 선택하는 완료 버튼(275)과, 표시된 물품의 관리를 취소하기 위한 취소 버튼(276)이 표시될 수 있다. In addition, the
한편, 인식한 물품 코드 및 물품명과 상기 메모리부(40)에 저장된 물품 코드와 물품명이 일치하지 않는 경우에는 상기 디스플레이부(20)에서는 인식한 정보 자체, 즉 인식한 물품명 자체가 표시될 수 있다. 이 경우, 사용자는 물품명을 수정할 수 있고, 수정된 물품명이 메모리부에 저장된 물품명과 일치하는 경우에는 물품명과 대응되는 물품 카테고리가 표시될 수 있다. On the other hand, when the recognized article code and article name and the article code and the article name stored in the
또한, 상기 제어부(50)가 획득한 이미지에서 인식 대상 영역을 추출하고자 하였으나, 추출할 인식 대상 영역이 존재하지 않는 경우에는 상기 디스플레이부(20)에서는 이미지 재획득 요청을 위한 정보가 표시될 수 있다. In addition, when the
본 실시 예에 의하면, 상기 제어부가 획득한 이미지 전체의 정보를 인식하지 않고 인식 대상 영역을 추출하고, 인식 대상 영역이 결정되면, 결정된 인식 대상 영역 내에 포함된 정보를 인식하므로, 상기 제어부의 인식 시간이 줄어드는 장점이 있다. According to the present embodiment, the recognition region is extracted without recognizing the information of the entire image acquired by the controller, and when the recognition target region is determined, information included in the determined recognition target region is recognized, so that the recognition time of the controller is recognized. This has the advantage of shrinking.
또한, 추출된 인식 대상 영역이 디스플레이부에 표시되므로, 사용자가 비관리 대상 물품을 선택할 수 있는 장점이 있고, 비관리 대상 물품이 선택되는 경우에는 비관리 대상 물품에 해당하는 인식 대상 영역의 정보는 인식하지 않으므로, 상기 제어부의 인식 시간이 한층 더 줄어들 수 있다. In addition, since the extracted recognition target area is displayed on the display unit, there is an advantage that the user can select an unmanaged object, and when an unmanaged object is selected, information of the recognition target area corresponding to the unmanaged object is Since it is not recognized, the recognition time of the controller can be further reduced.
도 9는 본 발명의 다른 실시 예에 따른 디스플레이부에서 표시되는 화면을 보여주는 도면이다. 9 is a diagram illustrating a screen displayed on the display unit according to another exemplary embodiment.
도 9를 참조하면, 이전 실시 예에서 인식 대상 영역 내의 정보의 인식이 완료된 후에는 상기 디스플레이부(20)에는 카테고리 정보(274)가 표시될 수 있다. 이 때, 상기 카테고리 정보(274)는 개수 정보를 포함할 수 있다. 다른 예로서, 상기 카테고리 정보(274)와 별도로 해당 카테고리의 개수 정보가 표시될 수 있다.
Referring to FIG. 9, in the previous embodiment, after the recognition of the information in the recognition target area is completed,
본 발명에서는 전기 제품의 일 예로 냉장고에 대해서 설명하였으나, 물품 정보를 인식하기 위한 내용은 냉장고 외의 다른 전기 제품에도 동일하게 적용될 수 있음을 밝혀둔다. Although the present invention has been described with respect to the refrigerator as an example of the electric product, it is noted that the contents for recognizing the product information can be equally applied to other electric products other than the refrigerator.
또한, 본 발명에서 설명되는 인식 장치의 작동 방법은 단말기에서도 동일하게 적용될 수 있음을 밝혀두며, 본 발명에서 단말기도 전기 제품에 포함될 수 있음을 밝혀둔다. 이 경우, 단말기에서 최종적으로 관리 대상 물품으로 선택된 물품의 정보가 상기 냉장고로 전송될 수 있다. In addition, it will be appreciated that the method of operating the recognition device described in the present invention may be equally applicable to a terminal, and the terminal may also be included in an electric product in the present invention. In this case, information of the article finally selected as the object to be managed by the terminal may be transmitted to the refrigerator.
또한, 본 발명에서 디스플레이부에 표시되는 버튼 들은 디스플레이부와 별도로 구비되는 입력부로 대체될 수 있다. 즉, 입력부를 이용하여 완료 버튼의 선택시 발생하는 완료 명령 또는 취소 버튼의 선택시 발생하는 취소 명령을 입력할 수 있다.
In addition, the buttons displayed on the display unit in the present invention may be replaced by an input unit provided separately from the display unit. That is, the input unit may input a cancel command generated when the completion command or a cancel button occurs when the completion button is selected.
20: 디스플레이부 30: 인식장치
40: 메모리부20: display unit 30: recognition device
40: memory
Claims (14)
획득한 이미지에서 인식 대상 영역을 추출하여 인식 대상 영역과, 비인식 대상 영역을 구분하여 디스플레이부에 표시하는 단계;
표시된 인식 대상 영역 중에서 인식을 수행할 인식 대상 영역을 선택하는 단계, 여기서 상기 디스플레이부에는 추출된 인식 대상 영역을 선택하기 위한 선택부가 표시되며; 및
선택된 인식 대상 영역 내에 포함된 정보를 인식하고, 인식 결과를 표시하는 단계를 포함하고,
상기 표시된 인식 대상 영역 내에 포함되는 정보는 물품명 또는 물품 코드를 포함하고,
상기 선택된 인식 대상 영역 내에 포함된 정보를 인식하고, 인식 결과를 표시하는 단계는,
인식한 물품 코드가 메모리에 저장된 물품 코드와 일치하는지 여부를 판단하는 단계;
인식한 물품 코드가 메모리에 저장된 물품 코드와 일치하는 경우, 인식한 물품 코드에 대응하는 물품 카테고리 또는 물품명이 메모리에 저장되고, 상기 디스플레이부에 인식 결과가 표시되는 단계; 및
인식한 물품 코드가 메모리에 저장된 물품 코드와 일치하지 않는 경우, 상기 표시된 인식 대상 영역 내에 포함되는 물품명을 인식하여 메모리에 저장된 정보와 비교하는 전기 제품의 제어방법. Acquiring an image of a purchase receipt of the article in the recognition device;
Extracting the recognition target region from the obtained image and displaying the recognition target region and the non-recognition target region on the display unit;
Selecting a recognition target region to perform recognition from among the displayed recognition target regions, wherein the display unit displays a selection unit for selecting an extracted recognition target region; And
Recognizing information included in the selected recognition target area and displaying a recognition result;
The information included in the displayed recognition subject area includes an article name or an article code,
Recognizing the information included in the selected recognition target area, and displaying the recognition result,
Determining whether the recognized article code matches the article code stored in the memory;
If the recognized item code matches the item code stored in the memory, storing the item category or item name corresponding to the recognized item code in the memory and displaying the recognition result on the display unit; And
And if the recognized article code does not match the article code stored in the memory, recognizing the article name included in the displayed recognition target area and comparing it with the information stored in the memory.
다수의 인식 대상 영역이 추출된 경우에는, 상기 디스플레이부에서는 다수의 인식 대상 영역이 구분되어 표시되는 전기 제품의 제어방법. The method of claim 1,
And when the plurality of recognition target regions are extracted, the display unit displays the plurality of recognition target regions separately.
상기 인식 대상 영역을 결정하는 단계에서는, 다수의 인식 대상 영역 각각의 인식 수행 여부가 개별적으로 결정되는 전기 제품의 제어방법. The method of claim 3, wherein
In the determining of the recognition target region, whether to perform recognition of each of the plurality of recognition target regions is individually determined.
다수의 인식 대상 영역 중 인식을 수행할 영역을 선택할 수 있는 전기 제품의 제어방법. The method of claim 3, wherein
A control method of an electrical product that can select an area to perform recognition from among a plurality of recognition target areas.
다수의 인식 대상 영역 중에서 인식을 미수행할 영역을 선택할 수 있는 전기 제품의 제어방법. The method of claim 3, wherein
A control method of an electrical product that can select a region that is not performing recognition among a plurality of recognition target areas.
표시된 인식 대상 영역 내에 포함되는 정보는 수량, 가격, 구입날짜 중 하나 이상을 더 포함하는 전기제품의 제어방법. The method of claim 1,
The information included in the displayed recognition target area further includes at least one of quantity, price, and purchase date.
획득한 이미지에서 인식 대상 영역이 미추출되는 경우에는 이미지 재획득 요청을 위한 정보가 표시되는 전기제품의 제어방법. The method of claim 1,
If the recognition target region is not extracted from the acquired image, information for requesting image reacquisition is displayed.
상기 인식된 결과를 표시하는 단계에서는, 인식한 정보가 속하는 카테고리가 표시되는 전기제품의 제어방법. The method of claim 1,
In the displaying of the recognized result, the category of the electric product control method is displayed.
상기 인식된 결과를 표시하는 단계에서는, 인식한 정보 자체가 표시되는 전기제품의 제어방법. The method of claim 1,
In the displaying of the recognized result, the recognized information itself is displayed.
상기 인식된 결과를 표시하는 단계에서는, 인식한 정보의 개수가 표시되는 전기제품의 제어방법. The method of claim 10 or 11,
In the displaying of the recognized result, the number of the recognized information is displayed.
획득한 이미지 내의 물품의 순번, 물품명 또는 물품 코드 중 어느 하나를 기준으로 상기 인식 대상 영역이 추출되는 전기제품의 제어방법. The method of claim 1,
And the recognition target region is extracted based on one of a sequence number, an article name, and an article code of an article in an acquired image.
Priority Applications (3)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
KR1020120108660A KR102067817B1 (en) | 2012-09-28 | 2012-09-28 | Method of controlling an electric product |
US14/040,176 US9639823B2 (en) | 2012-09-28 | 2013-09-27 | Electric product |
CN201310450253.4A CN103712410B (en) | 2012-09-28 | 2013-09-27 | Electric product |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
KR1020120108660A KR102067817B1 (en) | 2012-09-28 | 2012-09-28 | Method of controlling an electric product |
Publications (2)
Publication Number | Publication Date |
---|---|
KR20140042216A KR20140042216A (en) | 2014-04-07 |
KR102067817B1 true KR102067817B1 (en) | 2020-01-17 |
Family
ID=50651450
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
KR1020120108660A KR102067817B1 (en) | 2012-09-28 | 2012-09-28 | Method of controlling an electric product |
Country Status (1)
Country | Link |
---|---|
KR (1) | KR102067817B1 (en) |
Citations (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
KR101139801B1 (en) * | 2010-03-12 | 2012-04-30 | 에스케이마케팅앤컴퍼니 주식회사 | Automatic data gathering system using by reading receipt and method thereof |
Family Cites Families (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
KR20120105119A (en) * | 2011-03-15 | 2012-09-25 | 이상만 | Refrigerator management system using food purchase information |
-
2012
- 2012-09-28 KR KR1020120108660A patent/KR102067817B1/en active IP Right Grant
Patent Citations (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
KR101139801B1 (en) * | 2010-03-12 | 2012-04-30 | 에스케이마케팅앤컴퍼니 주식회사 | Automatic data gathering system using by reading receipt and method thereof |
Also Published As
Publication number | Publication date |
---|---|
KR20140042216A (en) | 2014-04-07 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US9043033B2 (en) | Network system and control method thereof | |
KR101821818B1 (en) | A control method of electric device | |
US9224123B2 (en) | Electric product and method of controlling the same | |
US9639823B2 (en) | Electric product | |
KR101863894B1 (en) | Continuous display shelf edge label device | |
US10032126B2 (en) | Customer controlled home delivery | |
US20200193404A1 (en) | An automatic in-store registration system | |
CN207302200U (en) | A kind of consumption rights automatic identification and the vending machine of control | |
US20190337549A1 (en) | Systems and methods for transactions at a shopping cart | |
KR20120118376A (en) | Controlling method of a refrigerator | |
KR102009933B1 (en) | Refrigerator | |
KR102067817B1 (en) | Method of controlling an electric product | |
KR102046502B1 (en) | Method of controlling an electric product | |
KR102046507B1 (en) | Mehtod of controlling an electric product | |
US20150248612A1 (en) | Information processing system for identifying used commodities in domestic electrical appliances, and security system | |
CN111222899A (en) | Commodity information and replenishment processing method, equipment and storage medium | |
US20170285884A1 (en) | Systems, devices, and methods for distributed processing for preauthorized payment | |
US11447905B2 (en) | Clothing management apparatus and method for controlling thereof | |
TWI601083B (en) | Pruchasing system based on online to offline commerce | |
KR20150061045A (en) | System for food inventory managing and recipe searching | |
JP2019207482A5 (en) | ||
KR20120117344A (en) | Information recognizing method for an electric appliance | |
KR20120117345A (en) | Information recognizing method for an electric appliance | |
KR20130012624A (en) | Controlling method of component | |
CN117006799A (en) | Auxiliary method, device and equipment for refrigerator storage and storage medium |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A201 | Request for examination | ||
E902 | Notification of reason for refusal | ||
AMND | Amendment | ||
E601 | Decision to refuse application | ||
X091 | Application refused [patent] | ||
AMND | Amendment | ||
X701 | Decision to grant (after re-examination) | ||
GRNT | Written decision to grant |