KR102009933B1 - 냉장고 - Google Patents

냉장고 Download PDF

Info

Publication number
KR102009933B1
KR102009933B1 KR1020130000086A KR20130000086A KR102009933B1 KR 102009933 B1 KR102009933 B1 KR 102009933B1 KR 1020130000086 A KR1020130000086 A KR 1020130000086A KR 20130000086 A KR20130000086 A KR 20130000086A KR 102009933 B1 KR102009933 B1 KR 102009933B1
Authority
KR
South Korea
Prior art keywords
food
information
screen
displayed
added
Prior art date
Application number
KR1020130000086A
Other languages
English (en)
Other versions
KR20140088325A (ko
Inventor
박형준
최종미
Original Assignee
엘지전자 주식회사
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 엘지전자 주식회사 filed Critical 엘지전자 주식회사
Priority to KR1020130000086A priority Critical patent/KR102009933B1/ko
Priority to CN201310450253.4A priority patent/CN103712410B/zh
Priority to US14/040,176 priority patent/US9639823B2/en
Publication of KR20140088325A publication Critical patent/KR20140088325A/ko
Application granted granted Critical
Publication of KR102009933B1 publication Critical patent/KR102009933B1/ko

Links

Images

Classifications

    • F—MECHANICAL ENGINEERING; LIGHTING; HEATING; WEAPONS; BLASTING
    • F25—REFRIGERATION OR COOLING; COMBINED HEATING AND REFRIGERATION SYSTEMS; HEAT PUMP SYSTEMS; MANUFACTURE OR STORAGE OF ICE; LIQUEFACTION SOLIDIFICATION OF GASES
    • F25D—REFRIGERATORS; COLD ROOMS; ICE-BOXES; COOLING OR FREEZING APPARATUS NOT OTHERWISE PROVIDED FOR
    • F25D29/00—Arrangement or mounting of control or safety devices
    • F25D29/005—Mounting of control devices
    • F—MECHANICAL ENGINEERING; LIGHTING; HEATING; WEAPONS; BLASTING
    • F25—REFRIGERATION OR COOLING; COMBINED HEATING AND REFRIGERATION SYSTEMS; HEAT PUMP SYSTEMS; MANUFACTURE OR STORAGE OF ICE; LIQUEFACTION SOLIDIFICATION OF GASES
    • F25D—REFRIGERATORS; COLD ROOMS; ICE-BOXES; COOLING OR FREEZING APPARATUS NOT OTHERWISE PROVIDED FOR
    • F25D29/00—Arrangement or mounting of control or safety devices
    • F25D29/008—Alarm devices
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q10/00—Administration; Management
    • G06Q10/08—Logistics, e.g. warehousing, loading or distribution; Inventory or stock management
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T1/00—General purpose image data processing
    • G06T1/0007—Image acquisition
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L12/00—Data switching networks
    • H04L12/28—Data switching networks characterised by path configuration, e.g. LAN [Local Area Networks] or WAN [Wide Area Networks]
    • H04L12/2803—Home automation networks
    • H04L12/2823—Reporting information sensed by appliance or service execution status of appliance services in a home automation network
    • H04L12/2825—Reporting to a device located outside the home and the home network
    • F—MECHANICAL ENGINEERING; LIGHTING; HEATING; WEAPONS; BLASTING
    • F25—REFRIGERATION OR COOLING; COMBINED HEATING AND REFRIGERATION SYSTEMS; HEAT PUMP SYSTEMS; MANUFACTURE OR STORAGE OF ICE; LIQUEFACTION SOLIDIFICATION OF GASES
    • F25D—REFRIGERATORS; COLD ROOMS; ICE-BOXES; COOLING OR FREEZING APPARATUS NOT OTHERWISE PROVIDED FOR
    • F25D23/00—General constructional features
    • F25D23/02—Doors; Covers
    • F25D23/04—Doors; Covers with special compartments, e.g. butter conditioners
    • F—MECHANICAL ENGINEERING; LIGHTING; HEATING; WEAPONS; BLASTING
    • F25—REFRIGERATION OR COOLING; COMBINED HEATING AND REFRIGERATION SYSTEMS; HEAT PUMP SYSTEMS; MANUFACTURE OR STORAGE OF ICE; LIQUEFACTION SOLIDIFICATION OF GASES
    • F25D—REFRIGERATORS; COLD ROOMS; ICE-BOXES; COOLING OR FREEZING APPARATUS NOT OTHERWISE PROVIDED FOR
    • F25D2400/00—General features of, or devices for refrigerators, cold rooms, ice-boxes, or for cooling or freezing apparatus not covered by any other subclass
    • F25D2400/36—Visual displays
    • F25D2400/361—Interactive visual displays
    • F—MECHANICAL ENGINEERING; LIGHTING; HEATING; WEAPONS; BLASTING
    • F25—REFRIGERATION OR COOLING; COMBINED HEATING AND REFRIGERATION SYSTEMS; HEAT PUMP SYSTEMS; MANUFACTURE OR STORAGE OF ICE; LIQUEFACTION SOLIDIFICATION OF GASES
    • F25D—REFRIGERATORS; COLD ROOMS; ICE-BOXES; COOLING OR FREEZING APPARATUS NOT OTHERWISE PROVIDED FOR
    • F25D2500/00—Problems to be solved
    • F25D2500/06—Stock management

Abstract

본 발명은 냉장고에 관한 것이다. 일 측면에 따른 냉장고는, 저장실에 추가할 식품과 관련한 정보를 획득할 수 있는 인식 장치; 상기 저장실에 보관된 식품과 관련한 정보를 표시할 수 있는 표시부; 상기 저장실에 보관된 식품과 관련한 정보를 저장하는 메모리부; 상기 표시부를 제어하는 제어부를 포함하고, 상기 인식 장치에서 추가할 식품과 관련한 정보를 획득하면, 상기 메모리부에 상기 추가할 식품과 관련한 정보가 저장되고, 상기 표시부에서는 상기 메모리부에 추가된 식품과 관련한 정보가 표시되는 것을 특징으로 한다.

Description

냉장고{Refrigerator}
본 발명은 냉장고에 관한 것이다.
일반적으로 냉장고는 식품을 저온의 상태로 보관하기 위한 장치이다. 상기 냉장고는 냉동실과 냉장실 중 어느 하나를 포함할 수 있다.
종래의 냉장고의 경우, 단순히 식품을 저온의 상태로 보관하기 위한 기능 만을 수행할 수 있었다. 그러나, 근래에 들어서는 식품 보관 기능외에 추가적인 기능의 필요성이 증가되고 있다.
한국공개특허공보 제2009-0020173호에는 식품 관리를 수행할 수 있도록 하는 냉장고가 개시된다.
상기 냉장고의 경우, 개개 식품의 식품명을 사용자가 음성 등으로 입력하여야 한다. 따라서, 사용자가 개개 식품의 식품명을 입력하여야 하므로, 사용자가 번거로운 문제가 있다.
본 발명의 목적은, 사용자의 편의성이 향상되는 냉장고를 제공하는 것에 있다.
일 측면에 따른 냉장고는, 저장실에 추가할 식품과 관련한 정보를 획득할 수 있는 인식 장치; 상기 저장실에 보관된 식품과 관련한 정보를 표시할 수 있는 표시부; 상기 저장실에 보관된 식품과 관련한 정보를 저장하는 메모리부; 상기 표시부를 제어하는 제어부를 포함하고, 상기 인식 장치에서 추가할 식품과 관련한 정보를 획득하면, 상기 메모리부에 상기 추가할 식품과 관련한 정보가 저장되고, 상기 표시부에서는 상기 메모리부에 추가된 식품과 관련한 정보가 표시되는 것을 특징으로 한다.
본 발명에 의하면, 사용자가 식품명, 보관 위치 등의 정보(이하 "식품명 등의 정보"라 함를 직접 입력하지 않고, 인식 장치를 이용하여 인식 대상을 인식하는 것에 의해서 자동으로 식품명 등의 정보가 저장되고, 표시부에서 표시되므로, 사용자의 편의성이 향상되는 장점이 있다.
도 1은 본 발명의 일 실시예에 따른 네트워크 시스템의 구성을 보여주는 도면.
도 2는 상기 네트워크 시스템을 구성하는 냉장고의 블럭도.
도 3은 본 발명의 냉장고의 표시부에서 표시되는 화면을 보여주는 도면.
도 4는 도 3의 화면에서 식품 관리 선택부가 선택되었을 때 표시되는 화면의 일 례를 보여주는 도면.
도 5는 식품리스트 정보화면에서 사용자 정의가 선택되었을 때 표시되는 화면의 일 예를 보여주는 도면.
도 6은 도 5의 화면에서 추가 선택부가 선택되었을 때 표시되는 화면의 일 례를 보여주는 도면.
도 7은 도 6의 화면에서 추가부가 선택되었을 때 표시되는 화면의 일 예를 보여주는 도면.
도 8은 도 7의 화면에서, 유통기한 입력이 완료되었을 때 표시되는 화면의 일 예를 보여주는 도면.
도 9는 도 5 또는 도 8의 화면에서 음성 입력 선택부가 선택되었을 때 표시되는 화면의 일 예를 보여주는 도면.
도 10은 도 9의 화면에서 음성 입력이 완료되었을 때 표시되는 화면의 일 예를 보여주는 도면.
도 11은 식품리스트 정보화면에 표시된 특정 식품을 식품위치 정보화면으로 이동시키는 방법을 보여주는 도면.
도 12는 식품위치 정보화면의 특정 저장실에 저장된 식품 정보를 확인하는 방법의 일 예를 보여주는 도면.
도 13은 식품위치 정보화면의 특정 저장실에 저장된 식품 정보를 확인하는 방법의 다른 예를 보여주는 도면.
도 14는 식품위치 정보화면에서 표시되는 특정 보관식품 정보가 선택되었을 때 표시되는 화면의 일 예를 보여주는 도면.
도 15는 도 14의 화면에서 유통기한 재설정 선택부가 선택되었을 때 표시되는 화면의 일 례를 보여주는 도면.
도 16은 식품위치 정보화면에 표시된 보관식품 정보를 삭제하는 방법을 설명하기 위한 도면.
도 17은 본 발명의 일 실시 예에 따른 인식 장치의 작동 방법을 보여주는 흐름도.
도 18 내지 도 22는 냉장고의 표시부에서 표시되는 화면을 보여주는 도면.
도 23은 본 발명의 인식 장치에서 인식 대상이 인식된 후에 표시부에서 표시되는 화면을 보여주는 도면.
이하에서는 도면을 참조하여 본 발명의 실시 예 들에 대해서 구체적으로 설명하기로 한다.
도 1은 본 발명의 일 실시예에 따른 네트워크 시스템의 구성을 보여주는 도면이고, 도 2는 상기 네트워크 시스템을 구성하는 냉장고의 블럭도이다.
도 1 및 도 2를 참조하면, 본 발명의 일 실시예에 따른 네트워크 시스템은, 전기 제품의 일 예로서 냉기가 발생되며 대상물(물품)을 저장하는 냉장고(10)와, 상기 냉장고(10)에 통신 가능하게 연결되는 단말기(80) 및 상기 냉장고(10) 및 단말기(80)와 통신 가능하게 연결되며 소정 데이터를 저장하는 서버(70)를 포함할 수 있다.
상기 단말기(80)는, 소정의 정보가 표시되는 표시부(82)를 포함한다. 상기 표시부(82)에서는 상기 냉장고(10)에 저장된 물품 정보 또는 상기 냉장고(10)의 작동 상태 정보 등이 표시될 수 있다. 즉, 상기 단말기(80)는 상기 냉장고(10)의 상태를 모니터링할 수 있다. 또한, 상기 단말기(80)를 이용하여 상기 냉장고(10)의 작동을 제어할 수 있다. 또한, 상기 단말기(80)에서 인식한 정보를 상기 냉장고(10)로 전송할 수 있다.
상기 단말기(80)는 일 예로 휴대 가능한 휴대폰 또는 스마트 폰일 수 있으나, 이에 제한되지는 않는다.
상기 네트워크 시스템은, 상기 단말기(80)와 서버(70)의 통신을 위한 제 1 인터페이스(91)와, 상기 서버(70)와 냉장고(10)의 통신을 위한 제 2 인터페이스(92) 및 상기 단말기(80)와 냉장고(10) 사이의 통신을 위한 제 3 인터페이스(93)를 포함할 수 있다.
상기 제 1 내지 제 3 인터페이스(91, 92, 92)는, 정보를 전달하기 위한 통신 방식으로서 와이파이(wifi), 지그비(Zig-bee), 블루투스(Bluetooth) 및 인터넷(internet) 중 적어도 하나의 통신 방식이 적용될 수 있으며, 통신 방식에는 제한이 없음을 밝혀둔다.
상기 냉장고(10)는, 정보를 디스플레이할 수 있는 표시부(20)와, 정보를 인식하기 위한 인식 장치(30)와, 물품과 관련한 정보가 저장되는 메모리부(40)와, 상기 서버(70) 또는 상기 단말기(80)와 통신을 위한 통신부(60)를 포함할 수 있다.
상기 인식 장치(30)는, 촬영장치, RFID 리더, QR 코드 리더, 바코드 리더 중 하나 이상을 포함할 수 있다. 이하에서는 상기 인식 장치(30)가 일 예로 촬영장치인 것에 대해서 설명하기로 한다.
상기 인식 장치(30)는, 인식 대상(500)의 이미지를 획득할 수 있다. 상기 인식 대상(500)은 일 예로 물품의 구매 영수증일 수 있다.
그리고, 상기 인식 대상(500)에 포함된 물품과 관련한 정보는 상기 인식 장치(30)에서 획득한 이미지로부터 추출될 수 있다. 상기 인식 장치(30)에서 물품과 관련한 정보를 인식하는 기술은 도면을 참조하여 후술하기로 한다.
상기 메모리부(40)에는 상기 물품과 관련한 정보가 저장될 수 있다. 상기 메모리부(40)에 저장된 정보 중 일부 또는 전부는 상기 서버(70) 또는 상기 단말기(80)에 저장되거나 상기 서버(70) 또는 상기 단말기(80)에서 로딩할 수 있다.
도 3은 본 발명의 냉장고의 표시부에서 표시되는 화면을 보여주는 도면이다.
도 2 및 도 3을 참조하면, 상기 표시부(20)에서 표시되는 화면은, 제1화면(100)과 제2화면(200)을 포함할 수 있다. 일 례로, 냉장고가 온되면, 도 3과 같은 화면이 표시될 수 있다. 도 3의 화면은 상기 표시부(20)의 초기화면일 수 있다. 상기 제1화면(100)과 제2화면(200)은 일 례로 상하로 배치될 수 있으나, 좌우로 배치되는 것도 가능하다. 상기 제1화면(100)과 제2화면(200)는 독립적인 화면이거나, 표시되는 내용으로 구분된 화면일 수 있다.
상기 제1화면(100)에는 날짜 정보(101)와, 시간 정보(102)와, 스마트 그리드(smart grid) 기능 온/오프 정보(103)가 표시될 수 있다. 스마트 그리드 기능 온/오프 정보는 온일 때와 오프일 때가 다를 수 있다. 일 례로, 표시되는 스마트 그리드 기능 정보의 색상, 명도, 채도 등이 온일 때와 오프일 때가 서로 다를 수 있다.
본 발명에서 스마트 그리드 기능이 온된 경우, 상기 냉장고가 에너지 정보에 기초하여 작동할 수 있다. 상기 냉장고가 에너지 정보에 기초하여 작동하는 것은 상기 냉장고가 상기 에너지 정보에 기초하여 코스를 수행하거나 상기 냉장고가 상기 에너지 정보를 표시할 수 있는 것을 의미한다. 물론, 상기 냉장고는 에너지 정보 외의 부가 정보에 기초하여 작동할 수 있다. 상기 에너지 정보 및 에너지 정보 외의 부가 정보는 외부로부터 수신할 수 있다.
한편, 상기 제2화면(200)에서는, 스마트 그리드 선택부(411), 식품 관리 선택부(412), 스마트 진단 선택부(413) 중 하나 이상이 표시될 수 있다. 도 3에는 일 례로 스마트 그리드 선택부(411), 식품 관리 선택부(412), 스마트 진단 선택부(413)가 표시되는 것이 도시된다. 상기 스마트 그리드 선택부(411)를 선택한 경우, 일 례로 에너지 정보를 확인할 수 있다. 상기 식품 관리 선택부(412)를 선택한 경우, 보관된 식품의 정보 등을 확인할 수 있다. 상기 스마트 진단 선택부(413)를 선택한 경우, 일 례로 상기 냉장고의 진단을 수행할 수 있다.
또한, 상기 제2화면(200)에서는 보관된 식품과 관련한 정보(415)와, 설정 선택부(414)가 더 표시될 수 있다. 보관된 식품과 관련한 정보는, 일 례로 보관된 식품의 유통 기한 정보일 수 있다. 상기 보관된 각 식품의 정보는 슬라이딩 텍스트 방식으로 표시될 수 있다. 예를 들어, 상기 냉장고(1)에 보관된 식품 들의 유통 기한 정보(415)가 좌우 방향 또는 상하 방향으로 이동될 수 있다. 이 때, 보관된 식품 들의 유통 기한 정보는 특정 영역 내에서 표시될 수 있다. 다른 예로서, 보관된 식품과 관련한 정보(415)는 정지된 텍스트일 수 있다. 예를 들어, 보관된 식품의 유통 기한 정보가 표시될 수 있으며, 이 경우, 보관된 식품 중에서 유통기한이 적은 순서의 일부 식품 또는 유통 기한이 지난 일부 식품에 대한 정보가 표시될 수 있다.
본 발명에 의하면, 냉장고 외부에서 별도의 조작을 하지 않고도 식품의 유통 기한 정보를 확인할 수 있는 장점이 있다.
도 4는 도 3의 화면에서 식품 관리 선택부가 선택되었을 때 표시되는 화면의 일 례를 보여주는 도면이다.
도 4를 참조하면, 도 3의 화면에서 식품 관리 선택부(412)가 선택되면, 상기 제2화면(200)에는 보관된 식품의 위치를 표시하기 위한 보관된 식품 위치 정보화면(260: 이하에서는 "식품위치 정보화면"이라 함)과, 상기 식품위치 정보화면(260)에 추가될 식품의 표시정보를 포함하는 식품리스트 정보화면(300)이 표시될 수 있다.
상기 식품위치 정보화면(260)과 상기 식품리스트 정보화면(300)은 좌우 방향으로 배치되거나 상하 방향으로 배치될 수 있다. 상기 식품위치 정보화면(260)은 냉장고 형태로 표시될 수 있다. 즉, 상기 식품위치 정보화면(260)에는 냉장실(261)과, 냉장실 도어(262, 263), 냉동실(264) 및 절환실(265)(또는 특냉실)이 구분되어 표시될 수 있다. 상기 냉장실(261)과, 냉장실 도어(262, 263), 냉동실(264) 및 절환실(265)에는 식품이 저장되는 하나 이상의 저장공간(266)이 표시될 수 있다. 상기 냉장실(261)과, 냉장실 도어(261, 262), 냉동실(264) 및 절환실(265) 각각의 저장공간(266)에는 보관된 식품을 표시하는 하나 이상의 보관식품 정보(270)가 표시될 수 있다.
상기 식품리스트 정보화면(300)에는 식품 카테고리(301)와, 식품 카테고리(301)에 해당하는 하나 이상의 식품 표시정보(310)가 표시될 수 있다.
본 발명에서 보관된 식품을 표시하는 정보를 보관식품 정보(270)라 하고, 상기 식품리스트 정보화면(260)에서 표시되는 정보를 식품 표시정보(310)라 할 수 있다. 상기 보관식품 정보(270) 및 식품 표시정보(310)는 일 예로 식품 자체의 형상을 가지는 아이콘(icon)일 수 있다. 상기 식품위치 정보화면(260)에 표시된 각각의 보관식품 정보(270)는 유통기한 정보를 포함할 수 있다. 다수의 보관식품 정보(270)의 색상은 유통기한에 따라서 다를 수 있다. 예를 들어, 유통기한이 도래한 보관식품 정보(270)의 색상은 빨간색이고, 유통기한이 3일 남은 보관식품 정보(270)의 색상은 주황색이고, 유통기한이 5일 이상 남은 보관식품 정보(270)의 색상은 파란색일 수 있다.
상기 식품리스트 정보화면(300)에서 다수의 식품 카테고리를 표시하는 경우에는 식품 카테고리 이동을 위한 이동선택부(302, 303)를 더 포함할 수 있다. 다수의 식품 카테고리는, 고빈도 식품, 육류, 생선, 야채, 과일, 낙농제품, 가공식품, 사용자 정의 중 일부 또는 전부를 포함할 수 있다. 사용자는 식품 카테고리를 추가하거나 식품 카테고리의 이름을 변경할 수 있다. 본 발명에서 식품 카테고리 이름 및 개수에는 제한이 없음을 밝혀둔다.
상기 자주 보관된 식품과 사용자 정의를 제외한 식품 카테고리의 경우, 해당 식품 카테고리에 하나 이상의 식품 표시정보(310)가 미리 정의되어 있을 수 있다. 예를 들어, 육류에는 돼지고기, 소고기, 닭고기, 소세지 등이 미리 정의되어 있을 수 있다. 특정 식품 카테고리에 다수의 식품 표시정보(310)가 정의된 경우, 다수의 식품 표시정보(310)는 좌우 또는 상하 방향으로 배열될 수 있다.
상기 제2화면(200)에서는 상기 식품위치 정보화면(260)에서 표시된 보관식품 정보(270)를 상기 식품위치 정보화면(260)에서 제거하기 위한 휴지통(267)과, 음성 입력을 위한 음성 입력 선택부(268)가 더 표시될 수 있다.
도 5는 식품리스트 정보화면에서 사용자 정의가 선택되었을 때 표시되는 화면의 일 예를 보여주는 도면이다.
도 5를 참조하면, 상기 식품리스트 정보화면(300)에서 사용자 정의 카테고리가 선택되면(표시되면), 상기 식품리스트 정보화면(300)에는 식품 카테고리(301)와 식품 표시정보(310)와 함께 식품 추가를 위하여 선택하는 추가 선택부(321)와, 추가된 식품을 삭제하기 위하여 선택하는 삭제 선택부(322)가 표시될 수 있다. 상기 추가 선택부(321)를 선택하여, 정의되지 않은 식품을 사용자가 정의할 수 있다.
도 6은 도 5의 화면에서 추가 선택부가 선택되었을 때 표시되는 화면의 일 례를 보여주는 도면이다.
도 5 및 도 6을 참조하면, 도 5의 화면에서 추가 선택부(321)가 선택되면, 상기 제2화면(200)에서는 식품정보를 입력하기 위한 입력화면(330)이 표시될 수 있다. 상기 입력화면(330)은 도 5의 화면에서 팝업(Pop up)될 수 있다.
상기 입력화면(330)에는 식품 명칭을 입력하기 위한 입력부(333)와, 입력되는 식품의 명칭이 표시되는 명칭 표시부(332)가 표시될 수 있다. 입력되는 명칭은 한국어, 영어 등일 수 있으며, 입력되는 명칭의 언어에는 제한이 없음을 밝혀둔다.
상기 입력부(334)는 식품 명칭 입력을 완료한 경우에 선택하는 추가부(334)가 포함될 수 있다.
도 7은 도 6의 화면에서 추가부가 선택되었을 때 표시되는 화면의 일 예를 보여주는 도면이다.
도 6 및 도 7을 참조하면, 도 6의 화면에서 추가부(340)가 선택된 경우, 상기 제2화면(200)에서는 유통기한을 입력하기 위한 입력화면(340)이 표시될 수 있다. 유통기한을 입력하기 위한 입력화면(340)은, 식품리스트 입력화면(300)이 표시되는 위치에 표시될 수 있다. 상기 입력화면(340)에는, 입력된 명칭(341)과, 유통기한을 입력하기 위한 입력부(342)와, 입력된 유통기한 정보가 표시되는 유통기한 표시부(343)가 표시될 수 있다. 상기 입력부(342)는 유통기한 입력을 완료한 경우에 선택하는 선택부(344)를 포함할 수 있다. 본 발명에서 입력된 유통기한은 입력한 시간(날짜)로부터 남은 기한일 수 있다.
그리고, 상기 사용자 정의를 제외한 카테고리에 미리 정의된 식품 표시정보(310)는 식품 명칭 외에 유통기한 정보를 포함할 수 있다. 즉, 상기 사용자 정의를 제외한 식품 카테고리에 미리 정의된 식품의 유통기한은 미리 설정되어 있다. 상기 사용자 정의를 제외한 카테고리에 미리 정의된 식품의 유통기한은 상기 식품리스트 표시화면에서는 변경할 수 없다. 다른 예로서, 상기 사용자 정의를 제외한 카테고리에 미리 정의된 식품의 유통기한은 상기 식품리스트 표시화면에서는 변경할 수 없고, 식품위치 정보화면에서 표시된 식품의 유통기한은 사용자가 변경할 수 있다.
도 8은 도 7의 화면에서, 유통기한 입력이 완료되었을 때 표시되는 화면의 일 예를 보여주는 도면이다.
도 5 및 도 8을 참조하면, 도 7의 화면에서 상기 선택부(344)가 선택된 경우, 상기 식품리스트 정보화면(300)에는 추가된 식품 표시정보(311)가 표시될 수 있다. 예를 들어, 도 5와 같이 이미 추가된 식품 표시정보(311)가 8개인 경우 식품리스트 표시화면(300)에는 8개의 식품 표시정보(310)가 표시될 수 있다. 추후 사용자가 식품을 추가한 경우 도 18과 같이 식품리스트 표시화면(300)에는 새롭게 추가된 식품 표시정보(311)를 포함하여 총 9개의 식품 표시정보(310, 311)가 표시될 수 있다.
물론, 도 5 또는 도 8에서 특정 식품 표시정보(310, 311)를 선택한 후에 삭제 선택부(322)를 선택하면, 해당 식품 표시정보(310, 311)는 삭제될 수 있다(식품리스트 표시화면(300)에서 사라질 수 있다).
도 9는 도 5 또는 도 8의 화면에서 음성 입력 선택부가 선택되었을 때 표시되는 화면의 일 예를 보여주는 도면이다.
도 9를 참조하면, 도 5 또는 도 8의 화면에서 음성 입력 선택부(268)가 선택되면, 상기 제2화면(220)에서는 음성 입력화면(350)이 표시될 수 있다. 음성 입력화면이 표시된 후에는 사용자가 음성으로 식품의 명칭을 입력할 수 있다. 이 때, 상기 냉장고(1)는 음성을 입력하기 위한 마이크(미도시)를 포함할 수 있다.
상기 음성 입력화면(350)에는 음성 입력을 취소하기 위한 취소 선택부(351)가 표시될 수 있다. 상기 취소 선택부(351)를 선택하면, 도 9의 화면은 도 5 또는 도 8의 화면으로 전환될 수 있다.
도 10은 도 9의 화면에서 음성 입력이 완료되었을 때 표시되는 화면의 일 예를 보여주는 도면이다.
도 10을 참조하면, 도 9의 화면에서 음성 입력이 완료된 경우, 상기 제2화면(200)에서는 입력 결과 화면(360)이 표시될 수 있다. 상기 입력 결과 화면(360)에는 입력된 음성과 관련한 하나 이상의 명칭 정보가 표시될 수 있다. 상기 메모리부(40)에는 이미 정의된 식품의 명칭 정보 외에 식품 명칭이 미정의되었으나 입력된 음성과 관련한 식품의 명칭 정보가 추가적으로 저장될 수 있다. 예를 들어, 사용자가 "오"를 입력한 경우, 상기 입력 결과 화면(360)에서는 "오"를 포함하는 식품 명칭 정보(361)가 표시될 수 있다. 상기 입력 결과 화면(360)에서는 미표시된 식품의 명칭을 입력하기 위하여 선택하는 선택부(362)가 더 표시될 수 있다. 도 10의 화면에서 표시된 식품 명칭 정보를 선택한 경우 도 7의 화면으로 전환될 수 있다. 도 10의 화면에서 상기 선택부(362)가 선택되면, 도 6의 화면으로 전환될 수 있다.
도 11은 식품리스트 정보화면에 표시된 특정 식품을 식품위치 정보화면으로 이동시키는 방법을 보여주는 도면이다.
도 11을 참조하면, 상기 식품리스트 정보화면(300)에 표시된 특정 식품 표시정보(310)를 선택하고, 선택된 식품 표시정보(310)를 드래그(drag)하여 상기 식품위치 정보화면(260)의 특정 저장실로 이동시키면, 특정 저장실에 선택된 보관식품 정보(270)가 추가될 수 있다. 이 때, 상기 선택된 식품 표시정보(310)는 상기 식품리스트 정보화면(300)에서 삭제되지 않고, 단지 상기 식품위치 정보화면(260)에 보관식품 정보(270)가 추가된다.
도 12는 식품위치 정보화면의 특정 저장실에 저장된 식품 정보를 확인하는 방법의 일 예를 보여주는 도면이다.
도 12를 참조하면, 식품위치 정보화면(261)에 표시된 특정 저장실(261) 영역에서 보관식품 정보 외의 영역을 선택하면, 특정 저장실(261)이 확대되어 표시될 수 있다. 특정 저장실(261)이 확대된 상태에서 보관식품 정보(270)를 선택하여 좌우 방향으로 스크롤하면, 특정 저장실(261)에 보관된 하나 이상의 보관식품 정보(270)를 확인할 수 있다. 특정 저장실(261)에 다수의 보관식품 정보(270)가 위치하는 경우 다수의 보관식품 정보 중 일부 정보가 표시되거나 다수의 보관식품 정보가 오버랩될 수 있다. 이 경우, 특정 저장실(261)에 저장된 다수의 보관식품 정보(270)를 정확하게 확인하기 어렵다. 그러나 본 발명에 의하면, 특정 저장실(261)이 확대된 상태에서 보관식품 정보(270)를 선택하여 좌우 방향으로 스크롤할 수 있으므로, 다수의 보관식품 정보(270)를 정확하게 확인할 수 있다.
도 13은 식품위치 정보화면의 특정 저장실에 저장된 식품 정보를 확인하는 방법의 다른 예를 보여주는 도면이다.
도 13을 참조하면, 식품위치 정보화면(261)에 표시된 특정 저장실(261)의 테두리 부분을 선택하면, 특정 저장실(261)에 저장된 보관식품 리스트화면(370)이 표시될 수 있다. 상기 보관식품 리스트화면(370)는 상기 식품리스트 정보화면(300)과 대응되는 위치에 표시될 수 있다. 상기 보관식품 리스트화면(370)에서 표시되는 정보는 보관된 식품의 명칭과 유통기한을 포함할 수 있다.
도 14는 식품위치 정보화면에서 표시되는 특정 보관식품 정보가 선택되었을 때 표시되는 화면의 일 예를 보여주는 도면이다.
도 14를 참조하면, 상기 식품위치 정보화면(260)에 표시된 특정 보관식품 정보(270)를 선택하면, 상기 제2화면(200)에서는 선택된 보관식품 정보의 상세 정보화면(380)이 표시될 수 있다. 상기 상세 정보화면(380)은 상기 식품리스트 정보화면(300)과 대응되는 위치에 표시될 수 있다.
상기 상세 정보화면(380)에서는, 식품 카테고리 정보(381)와, 식품 명칭(380)과, 유통기한정보(383)와, 구입일 정보(384)와, 유통기한 재설정 선택부(385) 중 하나 이상이 표시될 수 있다. 상기 유통기한정보(383)는 남은 유통기한 정보와 구입일로부터 현재까지의 기간정보를 포함할 수 있다.
도 15는 도 14의 화면에서 유통기한 재설정 선택부가 선택되었을 때 표시되는 화면의 일 례를 보여주는 도면이다.
도 15를 참조하면, 도 14의 화면에서, 유통기한 재설정 선택부(385)가 선택되면, 상기 제2화면(200)에서는 유통기한을 입력하기 위한 입력화면(386)이 표시될 수 있다. 유통기한을 입력하기 위한 입력화면(386)은, 식품리스트 입력화면(300)이 표시되는 위치에 표시될 수 있다. 상기 입력화면(386)에는, 유통기한을 입력하기 위한 입력부(387)와, 입력된 유통기한 정보가 표시되는 유통기한 표시부(388)가 표시될 수 있다. 상기 입력부(387)는 유통기한 입력을 완료한 경우에 선택하는 선택부(389)를 포함할 수 있다. 본 발명에서 입력된 유통기한은 입력한 시간(날짜)로부터 남은 기한일 수 있다. 상기 선택부(389)가 선택된 경우, 일 례로 도 4의 화면 또는 도 14의 화면으로 전환될 수 있다.
도 16은 식품위치 정보화면에 표시된 보관식품 정보를 삭제하는 방법을 설명하기 위한 도면이다.
도 16을 참조하면, 상기 식품위치 정보화면(260)에 표시된 특정 보관식품 정보(270)를 선택하고, 선택된 보관식품 정보(270)를 드래그(drag)하여 상기 휴지통(267)으로 이동시키면, 특정 저장실에 선택된 보관식품 정보(270)는 사라진다(특정 저장실에서 표시된 보관식품 정보(270)가 제거될 수 있다).
도 17은 본 발명의 일 실시 예에 따른 인식 장치의 작동 방법을 보여주는 흐름도이고, 도 18 내지 도 22는 냉장고의 표시부에서 표시되는 화면을 보여주는 도면이다.
도 17 내지 도 22를 참조하면, 상기 인식 장치(30)가 인식 대상을 인식하기 위하여 상기 인식 장치(30)의 작동을 준비한다(S11). 즉, 상기 인식 장치(30)를 활성화시킨다. 상기 인식 장치(30)가 활성화되면, 상기 표시부(20)에는 도 18에 도시된 바와 같이 상기 표시부(20) 상에서의 인식 대상(500)의 위치를 가이드하기 위한 가이드 프레임(610)이 표시된다. 또한, 상기 표시부(20)에서는 인식 대상의 위치를 가이드 프레임(610)에 위치시키기 위한 안내 정보(620)가 표시될 수 있다.
또한, 상기 표시부(20)에서는 상기 인식 대상(500)의 이미지를 획득하기 위한 촬영 버튼(622)이 표시될 수 있다. 따라서, 상기 촬영 버튼(622)를 선택하면, 상기 가이드 프레임(610) 내에 위치한 인식 대상(500)의 이미지가 획득된다(S12).
다른 예로서, 상기 촬영 버튼(622)를 선택하지 않고, 상기 가이드 프레임(610)에 인식 대상(500)에 위치된 상태에서 일정 시간이 경과하면, 자동으로 상기 가이드 프레임(610) 내에 위치한 인식 대상(400)의 이미지가 획득될 수 있다.
상기 인식 대상(500)의 이미지가 획득된 후에는 획득된 이미지에서 인식 대상 영역이 추출된다(S13). 이 때, 상기 인식 대상 영역이 추출되는 과정에서는 도 19에 도시된 바와 같이 인식 대상 영역을 추출 중임을 알리기 위한 정보(630)가 표시될 수 있다.
그리고, 상기 표시부(20)에서는 인식 대상 영역의 추출을 취소하기 위한 취소 버튼(631)이 표시될 수 있다. 따라서, 상기 취소 버튼(631)을 선택한 경우에는, 상기 인식 대상 영역의 추출이 취소되고, 도 19의 화면에서 도 18의 화면으로 복귀하게 된다.
획득한 이미지에서 인식 대상 영역이 추출되면, 상기 표시부(20)에서는 도 20에 도시된 바와 같이 인식 대상 영역(640)이 표시된다. 이 때, 인식 대상 영역(640)과 비인식 대상 영역은 구분되어 표시될 수 있다. 예시적으로, 선에 의해서 인식 대상 영역(640)과 비인식 대상 영역이 구분될 수 있다.
본 실시 예에서 인식 대상 영역(640)은 획득한 이미지 전체에서 물품을 인식하기 위한 필요한 영역이다. 획득한 이미지에 다수의 물품에 대한 정보가 존재하는 경우에는 상기 표시부(20)에서는 다수의 인식 대상 영역(640)이 표시된다. 다수의 인식 대상 영역(640)는 상하 또는 좌우 방향으로 정렬되어 표시될 수 있다. 또한, 다수의 인식 대상 영역(640)은 서로 구분되어 표시될 수 있다.
상기 인식 대상 영역(640)의 추출 방법에 대해서 설명한다.
상기 인식 장치(30)가 인식 대상(500)의 이미지를 획득하면, 상기 제어부(50)는 획득된 이미지를 다수의 픽셀로 구분한다. 각 픽셀은 고유의 좌표 값을 가진다. 그 다음 상기 제어부(50)는 각 픽셀의 그레이 값을 판단하여 상기 각 픽셀에 고유값을 부여한다. 일 예로 픽셀의 그레이 값이 기준 값을 초과하는 경우에는 1을 부여하고, 그레이 값이 기준 값 이하인 경우에는 0을 부여한다.
그 다음, 상기 제어부(50)는 각 픽셀의 고유값을 기초로 인식 대상 영역을 추출한다. 일 예로 도 20에 도시된 바와 같이, 획득한 이미지는 구입한 물품의 순번(001, 002)과, 물품명(643), 물품 코드(644), 가격, 수량, 등을 포함한다. 이 때, 상기 제어부(50)는 물품의 순번, 물품명(643), 및 물품 코드(644) 중 하나 이상을 판단 기준으로 하여 인식 대상 영역을 추출한다.
상기 판단 기준이 물품의 순번인 경우, 특정 좌표 범위 내에서 1을 부여받은 픽셀 들이 이루는 형태가 0 또는 1인 경우, 이를 기초로 일정 범위를 인식 대상 영역으로 추출하게 된다.
본 실시 예에서 인식 대상 영역을 추출하는 것은 이미지에서 물품의 정보를 추출하는 것이 아니고, 단지 이미지 상에서 인식에 필요한 영역을 추출하는 것이다. 인식에 필요한 영역을 추출하는 이유는 이미지 상에서 물품 정보를 인식하기 위하여 필요한 인식 시간을 줄이기 위함이다. 즉, 이미지 상의 정보 중에서 불필요한 정보를 인식하지 않는 경우 인식 시간은 줄어들 수 있다.
추출된 인식 대상 영역(640) 내에는 물품명(643) 및 물품 코드(644) 중 하나 이상이 포함될 수 있다. 다만, 인식 대상 영역(640)에 포함되는 정보는 이에 한정되지 않고, 필요에 따라 수량, 가격, 구입 날짜 등이 포함되는 것도 가능하다.
상기 표시부(20)에는 추출된 인식 대상 영역(640)을 선택하기 위한 선택부(641)가 더 표시될 수 있다. 상기 선택부(641)는 관리 대상 물품과 비관리 대상 물품을 선택하기 위하여 사용된다. 이와 달리 상기 선택부(641)가 구비되지 않고, 인식 대상 영역(640)을 터치하는 것에 의해서 인식을 수행할 인식 대상 영역을 결정할 수 있다. 이 경우, 인식을 수행할 인식 대상 영역과 인식을 비수행할 인식 대상 영역은 구분되어 표시될 수 있다.
사용자는 상기 표시부(20) 상에 표시된 인식 대상 영역 내의 물품명을 확인하여 관리 대상 물품과 비관리 대상 물품을 판단할 수 있다. 그리고, 사용자는 관리 대상 물품에 대응하는 선택부(641)를 선택할 수 있다. 즉, 인식을 수행할 인식 대상 영역을 선택할 수 있다. 이 때, 미선택되는 물품이 실제적인 비관리 대상 물품이 된다.
본 실시 예에서는 사용자가 관리 대상 물품을 선택부(641)를 이용하여 선택하는 것으로 설명하였으나, 이와 달리 비관리 대상 물품(인식을 미수행할 인식 대상 영역임)을 선택부(641)를 이용하여 선택할 수 있다. 즉, 인식 대상 영역이 추출된 후에는 기본적으로 모든 물품이 관리 대상 물품인 것으로 판단된다. 그리고, 사용자는 선택부(641)를 이용하여 표시된 관리 대상 물품 중에서 비관리 대상 물품(인식을 미수행할 인식 대상 영역)을 선택할 수 있다. 예를 들어 각 선택부(641)에 "V"와 같은 형태가 표시되고, 사용자는 해당 선택부(641)를 선택하면, "V"와 같은 형태가 제거될 수 있다.
즉, 사용자의 관리 대상 물품 선택 또는 비관리 대상 물품의 선택에 의해서, 최종적으로 인식을 수행할 인식 대상 영역(640)이 결정된다(S15). 다만, 식품이 관리 대상 물품일 수 있으나, 사용자의 선택에 의해서 비관리 대상 물품으로 분류될 수 있다.
도 20에서, 상기 표시부(20)에는 인식 대상 영역(640)에 대응하는 정보를 인식하기 위하여 선택하는 완료 버튼(651) 또는 인식을 취소하기 위한 취소 버튼(652)이 표시될 수 있다.
그리고, 상기 제어부(50)는 상기 인식 대상 영역(640)에 대응하는 정보, 즉, 인식 대상 영역(640) 내에 포함된 정보를 인식하게 된다(S16). 반면, 상기 취소 버튼(652)이 선택되면, 도 18의 화면으로 복귀하게 된다.
한편, 도 20에서 완료 버튼(631)이 선택되면, 도 21에 도시된 바와 같이 상기 표시부(20)에서 인식 대상 영역의 정보를 인식 중임을 알리기 위한 정보(260)가 표시될 수 있다. 또한, 상기 표시부(20)에서는 인식 대상 영역의 정보 인식을 취소하기 위한 취소 버튼(261)이 표시될 수 있다.
따라서, 도 22의 화면에서, 상기 취소 버튼(661)을 선택한 경우에는, 상기 인식 대상 영역의 정보 인식이 취소되고, 도 21의 화면에서 도 18의 화면으로 복귀하게 된다.
한편, 상기 인식 대상 영역(640)이 다수의 종류의 정보를 포함하는 경우에는, 다수의 종류 간에 인식 순위가 정해져 있을 수 있다.
일 예로 상기 다수의 종류가 물품 코드와 물품명을 포함하는 경우에는, 상기 제어부(50)는 물품 코드를 인식한 후에 물품 코드를 먼저 인식하여 상기 메모리부(40)에 저장된 정보와 비교한다. 상기 메모리부(40)에는 물품 코드와 이에 해당하는 물품명 및 물품명이 속하는 물품 카테고리(인식된 정보가 속하는 물품 카테고리임)가 저장되어 있다.
따라서, 상기 제어부(50)는 인식한 물품 코드가 상기 메모리부(40)에 저장된 물품 코드와 일치하는지 여부를 판단한다. 만약, 인식한 물품 코드가 상기 메모리부(40)에 저장된 물품 코드와 일치하는 경우에는 인식한 물품 코드에 대응하는 물품 카테고리 또는 물품명이 상기 표시부(20)에서 표시된다(S17).
이 때, 인식한 물품 코드가 상기 메모리부(40)에 저장된 물품 코드와 일치하는 경우에는 상기 제어부(50)는 인식 대상 영역 내의 물품명을 인식하지 않는다. 이는 상기 제어부(50)의 인식 시간을 줄이기 위함이다.
상기 메모리부(40)에는 인식된 물품 코드의 비교를 위한 물품 코드가 저장되는 제1메모리와, 관리를 위하여 물품 카테고리 또는 물품명이 저장되는 제2메모리를 포함할 수 있다. 이 때, 상기 제1메모리와 제2메모리는 별도의 구성이거나 메모리부(40) 내에서 구분된 저장 공간일 수 있다.
반면, 인식한 물품 코드와 상기 메모리부(40)에 저장된 물품 코드가 일치하지 않는 경우에는 상기 제어부(50)는 인식 대상 영역 내의 물품명을 인식하여 상기 메모리부(40)에 저장된 정보와 비교한다. 상기 메모리부(40)에는 인식된 물품명과 비교를 위한 물품명이 저장될 수 있다.
만약, 인식한 물품명이 상기 메모리부(40)에 저장된 물품명과 일치하는 경우에는 인식한 물품명 또는 인식한 물품명이 속하는 물품 카테고리가 상기 표시부(20)에서 표시된다(S17).
본 실시 예에서는 물품 코드를 먼저 인식하고, 메모리부의 정보를 비교한 후에 물품명을 인식하는 것을 설명하였으나, 이와 달리 상기 물품 코드와 물품명을 인식한 후에 물품 코드를 먼저 상기 메모리부(40)에 저장된 정보와 비교하는 것도 가능하다. 이 경우, 인식한 물품 코드와 상기 메모리부에 저장된 물품 코드가 일치하는 경우에는 물품명과 상기 메모리부에 저장된 물품명의 비교를 수행하지 않으므로, 상기 제어부(50)의 인식 시간이 줄어들 수 있다.
인식 대상 영역 내에 포함된 정보의 인식이 완료되면, 도 22에 도시된 바와 같이 상기 표시부(20)에는 인식한 물품 코드 또는 물품명에 대응하는 카테고리 정보(673)가 표시될 수 있다. 또한, 상기 표시부(20)에는 카테고리 정보(673)에 대응하는 아이콘 정보(672)가 표시될 수 있다. 물론, 카테고리 정보(673)와 아이콘 정보(672) 중 어느 하나가 미표시되는 것도 가능하다.
또한, 상기 표시부(20)에는 최종적으로 관리 대상을 위한 물품을 선택하기 위한 선택부(671)가 표시될 수 있다. 상기 선택부(671)의 기능은 도 20의 선택부(641)의 기능과 동일하므로, 자세한 설명은 생략하기로 한다.
상기 표시부(20)에는 관리의 대상으로 추가될 물품(카테고리)의 총 개수 정보가 더 표시될 수 있다.
또한, 상기 표시부(20)에는 표시된 물품의 관리를 시작하기 위하여 선택하는 완료 버튼(675)과, 표시된 물품의 관리를 취소하기 위한 취소 버튼(676)이 표시될 수 있다.
한편, 인식한 물품 코드 및 물품명과 상기 메모리부(40)에 저장된 물품 코드와 물품명이 일치하지 않는 경우에는 상기 표시부(20)에서는 인식한 정보 자체, 즉 인식한 물품명 자체가 표시될 수 있다. 이 경우, 사용자는 물품명을 수정할 수 있고, 수정된 물품명이 메모리부에 저장된 물품명과 일치하는 경우에는 물품명과 대응되는 물품 카테고리가 표시될 수 있다.
또한, 상기 제어부(50)가 획득한 이미지에서 인식 대상 영역을 추출하고자 하였으나, 추출할 인식 대상 영역이 존재하지 않는 경우에는 상기 표시부(20)에서는 이미지 재획득 요청을 위한 정보가 표시될 수 있다.
도 22의 화면에서, 상기 완료 버튼(675)이 선택되면, 선택된 물품 카테고리(673) 또는 물품명과 함께 해당 물품 카테고리 또는 물품명의 개수, 현재 일자 등의 정보가 상기 메모리부(40)에 저장된다.
본 실시 예에 의하면, 상기 제어부가 획득한 이미지 전체의 정보를 인식하지 않고 인식 대상 영역을 추출하고, 인식 대상 영역이 결정되면, 결정된 인식 대상 영역 내에 포함된 정보를 인식하므로, 상기 제어부의 인식 시간이 줄어드는 장점이 있다.
또한, 추출된 인식 대상 영역이 표시부에 표시되므로, 사용자가 비관리 대상 물품을 선택할 수 있는 장점이 있고, 비관리 대상 물품이 선택되는 경우에는 비관리 대상 물품에 해당하는 인식 대상 영역의 정보는 인식하지 않으므로, 상기 제어부의 인식 시간이 한층 더 줄어들 수 있다.
도 23은 본 발명의 인식 장치에서 인식 대상이 인식된 후에 표시부에서 표시되는 화면을 보여주는 도면이다.
도 2, 도 22 및 도 23을 참조하면, 도 22에서 완료 버튼(675)이 선택되면, 상기 표시부(20)에서는 식품위치 정보화면(260)이 표시될 수 있다. 즉, 도 22의 화면이 도 23의 화면으로 전환될 수 있다.
상기 식품위치 정보화면(260)에는, 기 저장된 식품(271A: 또는 냉장고에서 기 관리 중인 식품임)과 관련한 정보, 추가된 식품(271B: 도 23에서는 일 예로 생선 및 과일임)과 관련한 정보가 함께 표시된다. 이 때, 기 저장된 식품(271A)과 관련한 정보와 추가된 식품(271B)과 관련한 정보는 상기 표시부(20)에서 비교 가능하게 표시된다.
예를 들어, 기 저장된 식품(271A)의 색상 또는 글자 크기가 추가된 식품(271B)의 색상 또는 글자 크기가 다르게 표시될 수 있다.
또는, 기 저장된 식품(271A)의 아이콘 형태, 크기, 또는 색상이 추가된 식품(271B)의 아이콘 형태, 크기 또는 색상과 다르게 표시될 수 있다.
또는, 추가된 식품(271B)이 깜빡이게 표시될 수 있다. 상기 추가된 식품(271B)은 일정 시간 경과 후에 깜빡거림이 사라질 수 있다.
또한, 상기 표시부(20)에서는 추가된 식품(271B)의 저장 예정 위치가 더 표시될 수 있다. 일 예로, 상기 식품위치 정보화면(260)에서 상기 추가된 식품(271B)이 예정 보관 위치에 자동으로 배치될 수 있다. 도 23을 참조하면, 추가된 식품(271B)이 생선인 경우, 냉동실에 배치될 수 있다. 또한, 추가된 식품(271B)이 과일인 경우, 냉장실 또는 야채실에 배치될 수 있다.
이와 같이 추가된 식품(271B)의 위치가 자동으로 결정된 후에는, 사용자는 추가된 식품(271B)의 보관 위치를 변경할 수 있다. 일 예로 추가된 식품(271B)인 생선의 위치를 터치한 후에 사용자는 냉장실로 드래그하여 이동시킬 수 있다.
사용자가 추가된 식품(271B)의 위치를 변경시키면, 상기 추가된 식품(271B)은 기 저장된 식품(271B)과 동일한 형태로 표시될 수 있다. 즉, 추가된 식품(271B)의 저장 위치가 변경되면, 색상, 글자 크기, 아이콘 형태, 아이콘 크기, 또는 아이콘 색상이 기 저장된 식품(271A)과 동일해지거나 깜빡거림이 사라질 수 있다.
본 실시 예에 의하면, 사용자가 식품명(또는 식품 카테고리), 보관 위치, 유통기한 등의 정보 중 하나 이상의 정보(이하 "식품과 관련한 정보"라 함를 직접 입력하지 않고, 인식 장치를 이용하여 인식 대상을 인식하는 것에 의해서 자동으로 추가된 식품과 관련한 정보가 저장 및 상기 표시부(20)에서 표시되므로, 사용자의 편의성이 향상되는 장점이 있다.
도 23에서는 냉장고에 구비되는 인식 장치(30)에서 인식 대상(500)의 인식을 완료한 경우에 표시부에서 추가된 식품(271B)과 관련한 정보가 자동으로 표시되는 것을 설명하였으나, 이와 달리 냉장고와 통신할 수 있는 단말기(80)의 인식 장치에서 인식 대상의 인식을 완료한 후에 상기 단말기(80)로부터 인식된 정보를 수신한 경우에도 동일하게 상기 표시부에서 추가된 식품(271B)과 관련한 정보가 표시되고, 상기 메모리부에도 추가된 식품(271B)과 관련한 정보 저장될 수 있다.
20: 디스플레이부 30: 인식장치
40: 메모리부

Claims (10)

  1. 저장실에 추가할 식품과 관련한 정보를 획득할 수 있는 인식 장치;
    상기 저장실에 보관된 식품과 관련한 정보를 표시할 수 있는 표시부;
    상기 저장실에 보관된 식품과 관련한 정보를 저장하는 메모리부;
    상기 표시부를 제어하는 제어부를 포함하고,
    상기 인식 장치에서 추가할 식품과 관련한 정보를 획득하면,
    상기 메모리부에 상기 추가할 식품과 관련한 정보가 저장되고,
    상기 표시부에서는 상기 메모리부에 추가된 식품과 관련한 정보가 표시되고,
    상기 인식 장치는 카메라이고,
    상기 카메라는, 물품의 구매 영수증을 촬영한 이미지로부터 추가될 식품과 관련한 정보를 획득하며,
    상기 제어부는, 획득한 이미지에서 인식 대상 영역을 추출하여 인식 대상 영역을 상기 표시부에 표시하고, 표시된 인식 대상 영역 중에서 인식을 수행할 인식 대상 영역을 결정하며, 결정된 인식 대상 영역 내에 포함된 정보를 인식하여 인식 결과를 표시하는 것을 특징으로 하는 냉장고.
  2. 삭제
  3. 제 1 항에 있어서,
    상기 표시부에서는, 상기 저장실에 기 저장된 식품과 관련한 정보와 추가된 식품과 관련한 정보가 비교 가능하게 표시되는 냉장고.
  4. 제 3 항에 있어서,
    상기 추가된 식품과 관련한 정보의 색상, 글자 크기, 아이콘 크기, 아이콘 형태, 아이콘 색상 중 하나 이상은 기 저장된 식품과 다르게 표시되는 냉장고.
  5. 제 3 항에 있어서,
    상기 추가된 식품과 관련한 정보는 깜빡이도록 표시되는 냉장고.
  6. 제 5 항에 있어서,
    상기 추가된 식품과 관련한 정보의 깜빡임은 일정 시간 경과 후 사라지는 냉장고.
  7. 제 3 항에 있어서,
    추가된 식품의 보관 위치는 자동으로 결정되고, 상기 표시부에서는 자동으로 결정된 추가된 식품의 보관 위치가 표시될 수 있는 냉장고.
  8. 제 7 항에 있어서,
    추가된 식품의 보관 위치는 수동으로 변경될 수 있는 냉장고.
  9. 제 8 항에 있어서,
    상기 추가된 식품의 보관 위치가 변경되면, 상기 추가된 식품과 관련한 정보의 색상, 글자 크기, 아이콘 크기, 아이콘 형태, 아이콘 색상 중 하나 이상은, 상기 기 저장된 식품과 관련한 정보와 동일하게 표시되는 냉장고.
  10. 삭제
KR1020130000086A 2012-09-28 2013-01-02 냉장고 KR102009933B1 (ko)

Priority Applications (3)

Application Number Priority Date Filing Date Title
KR1020130000086A KR102009933B1 (ko) 2013-01-02 2013-01-02 냉장고
CN201310450253.4A CN103712410B (zh) 2012-09-28 2013-09-27 电器产品
US14/040,176 US9639823B2 (en) 2012-09-28 2013-09-27 Electric product

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020130000086A KR102009933B1 (ko) 2013-01-02 2013-01-02 냉장고

Publications (2)

Publication Number Publication Date
KR20140088325A KR20140088325A (ko) 2014-07-10
KR102009933B1 true KR102009933B1 (ko) 2019-08-12

Family

ID=51736913

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020130000086A KR102009933B1 (ko) 2012-09-28 2013-01-02 냉장고

Country Status (1)

Country Link
KR (1) KR102009933B1 (ko)

Families Citing this family (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN105650994A (zh) * 2015-06-25 2016-06-08 宇龙计算机通信科技(深圳)有限公司 智能冰箱的控制方法及装置
US11016634B2 (en) * 2016-09-01 2021-05-25 Samsung Electronics Co., Ltd. Refrigerator storage system having a display
KR102365894B1 (ko) * 2020-07-21 2022-02-21 건국대학교 글로컬산학협력단 냉장고 식재료 관리 장치 및 방법
WO2023243737A1 (ko) * 2022-06-13 2023-12-21 엘지전자 주식회사 냉장고 및 냉장고 제어 방법
KR20240055532A (ko) * 2022-10-20 2024-04-29 삼성전자주식회사 냉장고 및 그의 제어 방법

Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20020016739A1 (en) * 1999-09-21 2002-02-07 Fujitsu Limited System and method for managing expiration-dated products utilizing an electronic receipt

Family Cites Families (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR101071032B1 (ko) * 2005-06-01 2011-10-06 엘지전자 주식회사 식품보관 냉장고
KR20120116207A (ko) * 2011-04-12 2012-10-22 엘지전자 주식회사 디스플레이 장치 및 이를 구비하는 냉장고

Patent Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20020016739A1 (en) * 1999-09-21 2002-02-07 Fujitsu Limited System and method for managing expiration-dated products utilizing an electronic receipt

Also Published As

Publication number Publication date
KR20140088325A (ko) 2014-07-10

Similar Documents

Publication Publication Date Title
US9639823B2 (en) Electric product
KR102009933B1 (ko) 냉장고
EP3537340A1 (en) User interface for object detection and labeling
KR101821818B1 (ko) 전기제품의 제어방법
KR102217024B1 (ko) 냉장고, 그 제어 방법 및 시스템
KR101863894B1 (ko) 연속 디스플레이 선반 에지 라벨 디바이스
KR20120118376A (ko) 냉장고의 제어방법
EP3675022A1 (en) Augmented reality feedback of inventory for an appliance
US20180172343A1 (en) Method for operating a household appliance, corresponding household appliance and system with a household appliance
US11421929B2 (en) Food management system
CN103714843A (zh) 电器产品及其控制方法
US10339690B2 (en) Image recognition scoring visualization
US20170038924A1 (en) Graphical user interface indicating virtual storage of consumable items
KR20190090290A (ko) 인공지능을 이용하여 제품을 식별하고 구분된 이미지를 출력하는 냉장고 및 방법
KR20120116751A (ko) 냉장고의 제어방법
JP2008191951A (ja) 設定情報作成装置、設定情報作成方法、設定情報作成プログラムおよび情報出力システム
US10514825B2 (en) Image recognition result visualization over time
JP6924662B2 (ja) 情報処理装置
KR20120118641A (ko) 냉장고의 제어방법
KR102018454B1 (ko) 입력 패턴에 따라 인공지능을 이용하여 정보를 처리하는 냉장고 및 방법
US11594019B2 (en) Refrigerator, server, and object recognition method of refrigerator
KR102067817B1 (ko) 전기 제품의 제어방법
US11966435B2 (en) Information processing apparatus, control method, and program
KR102046502B1 (ko) 전기 제품의 제어방법
KR102046507B1 (ko) 전기 제품의 제어방법

Legal Events

Date Code Title Description
A201 Request for examination
E902 Notification of reason for refusal
E701 Decision to grant or registration of patent right
GRNT Written decision to grant