KR102194275B1 - Displaying Apparatus of storage chamber and Controlling Method for the same - Google Patents

Displaying Apparatus of storage chamber and Controlling Method for the same Download PDF

Info

Publication number
KR102194275B1
KR102194275B1 KR1020130124739A KR20130124739A KR102194275B1 KR 102194275 B1 KR102194275 B1 KR 102194275B1 KR 1020130124739 A KR1020130124739 A KR 1020130124739A KR 20130124739 A KR20130124739 A KR 20130124739A KR 102194275 B1 KR102194275 B1 KR 102194275B1
Authority
KR
South Korea
Prior art keywords
drawer
door
area
picture
camera
Prior art date
Application number
KR1020130124739A
Other languages
Korean (ko)
Other versions
KR20150045255A (en
Inventor
김관형
홍삼열
김미란
권성두
이재영
Original Assignee
엘지전자 주식회사
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Priority to KR1020130124739A priority Critical patent/KR102194275B1/en
Application filed by 엘지전자 주식회사 filed Critical 엘지전자 주식회사
Priority to CN201510796498.1A priority patent/CN105222521B/en
Priority to EP15201309.0A priority patent/EP3026377B1/en
Priority to EP15189490.4A priority patent/EP2995892B1/en
Priority to EP15185841.2A priority patent/EP2995891B1/en
Priority to CN201610127539.2A priority patent/CN105758091B/en
Priority to PCT/KR2014/003523 priority patent/WO2014175643A1/en
Priority to CN201510795232.5A priority patent/CN105222519B/en
Priority to CN201510796663.3A priority patent/CN105222522B/en
Priority to CN201610127404.6A priority patent/CN105605881B/en
Priority to TR2018/08190T priority patent/TR201808190T4/en
Priority to EP15185971.7A priority patent/EP2998670B1/en
Priority to CN201610128042.2A priority patent/CN105650998B/en
Priority to EP15189491.2A priority patent/EP2995893B1/en
Priority to EP15201279.5A priority patent/EP3048398B1/en
Priority to EP15185818.0A priority patent/EP2995888B1/en
Priority to EP15201331.4A priority patent/EP3026378B1/en
Priority to US14/786,719 priority patent/US9915471B2/en
Priority to CN201510796450.0A priority patent/CN105222520B/en
Priority to CN201510796557.5A priority patent/CN105241175B/en
Priority to EP14788514.9A priority patent/EP2909548B1/en
Priority to CN201510795427.XA priority patent/CN105352261B/en
Priority to ES15185828.9T priority patent/ES2668348T3/en
Priority to CN201480011747.5A priority patent/CN105008833B/en
Priority to EP15185828.9A priority patent/EP2995889B1/en
Priority to EP15185839.6A priority patent/EP2995890B1/en
Priority to CN201510796407.4A priority patent/CN105241154B/en
Publication of KR20150045255A publication Critical patent/KR20150045255A/en
Priority to US14/929,845 priority patent/US9851139B2/en
Priority to US14/930,012 priority patent/US9920980B2/en
Priority to US14/930,057 priority patent/US9568241B2/en
Priority to US14/929,888 priority patent/US9546812B2/en
Priority to US14/929,978 priority patent/US10036587B2/en
Priority to US14/930,091 priority patent/US9528756B2/en
Priority to US14/930,444 priority patent/US9890994B2/en
Priority to US14/950,419 priority patent/US9920981B2/en
Priority to US14/950,466 priority patent/US9920982B2/en
Priority to US14/950,520 priority patent/US9739526B2/en
Priority to US15/721,140 priority patent/US10228187B2/en
Priority to US15/721,131 priority patent/US10215483B2/en
Priority to US15/720,989 priority patent/US10184715B2/en
Application granted granted Critical
Publication of KR102194275B1 publication Critical patent/KR102194275B1/en

Links

Images

Classifications

    • F—MECHANICAL ENGINEERING; LIGHTING; HEATING; WEAPONS; BLASTING
    • F25—REFRIGERATION OR COOLING; COMBINED HEATING AND REFRIGERATION SYSTEMS; HEAT PUMP SYSTEMS; MANUFACTURE OR STORAGE OF ICE; LIQUEFACTION SOLIDIFICATION OF GASES
    • F25D—REFRIGERATORS; COLD ROOMS; ICE-BOXES; COOLING OR FREEZING APPARATUS NOT OTHERWISE PROVIDED FOR
    • F25D29/00—Arrangement or mounting of control or safety devices
    • F—MECHANICAL ENGINEERING; LIGHTING; HEATING; WEAPONS; BLASTING
    • F25—REFRIGERATION OR COOLING; COMBINED HEATING AND REFRIGERATION SYSTEMS; HEAT PUMP SYSTEMS; MANUFACTURE OR STORAGE OF ICE; LIQUEFACTION SOLIDIFICATION OF GASES
    • F25D—REFRIGERATORS; COLD ROOMS; ICE-BOXES; COOLING OR FREEZING APPARATUS NOT OTHERWISE PROVIDED FOR
    • F25D23/00—General constructional features
    • F25D23/02—Doors; Covers
    • F25D23/028—Details
    • F—MECHANICAL ENGINEERING; LIGHTING; HEATING; WEAPONS; BLASTING
    • F25—REFRIGERATION OR COOLING; COMBINED HEATING AND REFRIGERATION SYSTEMS; HEAT PUMP SYSTEMS; MANUFACTURE OR STORAGE OF ICE; LIQUEFACTION SOLIDIFICATION OF GASES
    • F25D—REFRIGERATORS; COLD ROOMS; ICE-BOXES; COOLING OR FREEZING APPARATUS NOT OTHERWISE PROVIDED FOR
    • F25D25/00—Charging, supporting, and discharging the articles to be cooled
    • F25D25/02—Charging, supporting, and discharging the articles to be cooled by shelves
    • F25D25/024—Slidable shelves
    • F25D25/025—Drawers
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T1/00—General purpose image data processing
    • G06T1/0007—Image acquisition
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00—Image analysis
    • G06T7/10—Segmentation; Edge detection
    • G06T7/11—Region-based segmentation
    • F—MECHANICAL ENGINEERING; LIGHTING; HEATING; WEAPONS; BLASTING
    • F25—REFRIGERATION OR COOLING; COMBINED HEATING AND REFRIGERATION SYSTEMS; HEAT PUMP SYSTEMS; MANUFACTURE OR STORAGE OF ICE; LIQUEFACTION SOLIDIFICATION OF GASES
    • F25D—REFRIGERATORS; COLD ROOMS; ICE-BOXES; COOLING OR FREEZING APPARATUS NOT OTHERWISE PROVIDED FOR
    • F25D2400/00—General features of, or devices for refrigerators, cold rooms, ice-boxes, or for cooling or freezing apparatus not covered by any other subclass
    • F25D2400/36—Visual displays
    • F—MECHANICAL ENGINEERING; LIGHTING; HEATING; WEAPONS; BLASTING
    • F25—REFRIGERATION OR COOLING; COMBINED HEATING AND REFRIGERATION SYSTEMS; HEAT PUMP SYSTEMS; MANUFACTURE OR STORAGE OF ICE; LIQUEFACTION SOLIDIFICATION OF GASES
    • F25D—REFRIGERATORS; COLD ROOMS; ICE-BOXES; COOLING OR FREEZING APPARATUS NOT OTHERWISE PROVIDED FOR
    • F25D2700/00—Means for sensing or measuring; Sensors therefor
    • F25D2700/02—Sensors detecting door opening
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00—Indexing scheme for image analysis or image enhancement
    • G06T2207/10—Image acquisition modality
    • G06T2207/10004—Still image; Photographic image
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00—Indexing scheme for image analysis or image enhancement
    • G06T2207/30—Subject of image; Context of image processing
    • G06T2207/30204—Marker

Landscapes

  • Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • Chemical & Material Sciences (AREA)
  • Combustion & Propulsion (AREA)
  • Mechanical Engineering (AREA)
  • Thermal Sciences (AREA)
  • General Engineering & Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Cold Air Circulating Systems And Constructional Details In Refrigerators (AREA)

Abstract

본 발명은 냉장고의 저장실 표시 장치 및 그 제어 방법에 관한 것이다. 본 발명은 냉장고에서 식품이 저장되는 저장실 내부의 사진을 촬영하는 하나의 카메라; 상기 카메라에 의해서 촬영된 하나의 사진(picture)을 복수 개의 이미지(image)로 나누어 관리하는 제어부; 및 상기 복수 개의 이미지를 독립적으로 도시하는 디스플레이;를 포함하는 냉장고의 저장실 표시 장치를 제공한다.The present invention relates to an apparatus for displaying a storage compartment of a refrigerator and a method for controlling the same. The present invention is one camera for taking a picture inside the storage compartment in which food is stored in a refrigerator; A control unit that divides and manages one picture taken by the camera into a plurality of images; And a display independently showing the plurality of images.

Description

냉장고의 저장실 표시 장치 및 그 제어 방법{Displaying Apparatus of storage chamber and Controlling Method for the same}Displaying Apparatus of storage chamber and Controlling Method for the same

본 발명은 냉장고의 저장실 표시 장치 및 그 제어 방법에 관한 것으로서, 보다 상세하게는 사용자가 도어를 개방하지 않더라도 냉장고에 저장된 식품에 관한 정보를 제공할 수 있는 냉장고의 저장실 표시 장치 및 그 제어 방법에 관한 것이다.The present invention relates to a storage compartment display device of a refrigerator and a control method thereof, and more particularly, to a storage compartment display device of a refrigerator capable of providing information on food stored in a refrigerator even if a user does not open a door, and a control method thereof. will be.

일반적으로 냉장고는 냉동 사이클의 구동에 따라 발생된 냉기를 공급하는 장치로서, 식품을 저온의 상태로 보관하기 위한 장치이다.In general, a refrigerator is a device for supplying cold air generated by driving of a refrigeration cycle, and is a device for storing food in a low-temperature state.

종래의 냉장고의 경우, 단순히 식품을 저온의 상태로 보관하기 위한 기능 만을 수행할 수 있었다. 그러나, 근래에 들어서는 식품 보관 기능외에 추가적인 기능의 필요성이 증가되고 있다.In the case of a conventional refrigerator, only the function of storing food in a low-temperature state could be performed. However, in recent years, the need for additional functions in addition to the food storage function is increasing.

냉장고는 일정 수납물을 수납하여 보관하는 장치로서, 내부를 확인하기 위해서는 냉장고 도어를 열어서 확인하는 수밖에 없다. 또한 사용자가 시장이나 마트에서 물건을 사려고 할 때에 냉장고에 보관된 식품의 양과 종류에 대해서 파악하지 못하는 경우에 동일한 식품을 중복해서 사거나, 필요한 식품을 사지 못하는 불편함이 있었다. A refrigerator is a device that accommodates and stores certain items. In order to check the interior, the refrigerator door must be opened to check the inside. In addition, when a user attempts to buy a product at a market or a mart, if he cannot grasp the amount and type of food stored in the refrigerator, there is an inconvenience of purchasing the same food repeatedly or not purchasing the necessary food.

따라서 현재는 이러한 사용자의 불편을 해결하기 위한 다양한 연구가 진행되고 있다. Accordingly, various studies are currently being conducted to solve the inconvenience of users.

본 발명은 상기와 같은 문제점을 해결하기 위한 것으로서, 본 발명은 사용자가 냉장고 도어를 개방하지 않더라도 냉장고에 보관된 식품에 관한 정보를 제공하는 냉장고의 저장실 표시 장치 및 그 제어 방법을 제공하는 것이다.The present invention is to solve the above problems, and the present invention is to provide a storage compartment display device of a refrigerator and a control method thereof that provides information on food stored in the refrigerator even if the user does not open the refrigerator door.

또한 본 발명은 사용자에게 냉장고에 저장된 식품에 대한 최신 정보를 제공할 수 있다.In addition, the present invention may provide the user with the latest information on food stored in the refrigerator.

상기 목적을 달성하기 위하여, 본 발명은 냉장고에서 식품이 저장되는 저장실 내부의 사진을 촬영하는 하나의 카메라; 상기 카메라에 의해서 촬영된 하나의 사진(picture)을 복수 개의 이미지(image)로 나누어 관리하는 제어부; 및 상기 복수 개의 이미지를 독립적으로 도시하는 디스플레이;를 포함하고, 상기 저장실은, 선반에 식품이 거치되는 제1영역과, 상기 선반의 하부 공간으로 인입 또는 인출 가능한 드로워의 내측 공간에 의해서 정의되는 제2영역과, 상기 드로워 전방의 바닥에 형성되어, 상기 드로워가 상기 하부 공간으로부터 인출되면 상기 제2영역에 중첩되는 제3영역을 포함하고, 상기 카메라는 상기 제1영역, 상기 제2영역 및 상기 제3영역을 상기 하나의 카메라에 의해서 촬영하는 것을 특징으로 하는 냉장고의 저장실 표시 장치를 제공한다.In order to achieve the above object, the present invention is one camera for taking a picture of the inside of the storage compartment in which food is stored in a refrigerator; A control unit that divides and manages one picture taken by the camera into a plurality of images; And a display that independently shows the plurality of images, wherein the storage compartment is defined by a first area in which food is placed on a shelf, and an inner space of a drawer that can be inserted or withdrawn into a lower space of the shelf. A second area and a third area formed on the floor in front of the drawer and overlapping the second area when the drawer is drawn out from the lower space, and the camera includes the first area and the second area A storage compartment display device of a refrigerator, wherein an area and the third area are photographed by the one camera.

또한 상기 제어부는, 하나의 사진을 상기 제1영역을 도시하는 제1이미지와, 상기 제2영역을 도시하는 제2이미지 및 상기 제3영역을 도시하는 제3이미지로 구분하는 것이 가능하다.In addition, the control unit may divide one picture into a first image showing the first area, a second image showing the second area, and a third image showing the third area.

그리고 상기 제어부는 상기 카메라에 의해서 촬영된 복수 개의 사진 중에 특정 사진을 최종 사진으로 선택할 수 있다.In addition, the controller may select a specific photo from among a plurality of photos taken by the camera as a final photo.

물론 상기 제어부는 상기 최종 사진을 영역별로 구획하고, 구획된 이미지를 상기 디스플레이에 제공할 수 있다.Of course, the controller may divide the final photo by area and provide the divided image to the display.

특히 상기 저장실을 개폐하는 도어의 회전각을 감지하는 도어 회전 센서를 더 포함하고, 상기 제어부가 상기 도어의 회전각이 일정 각도 이상이라고 판단하면, 상기 제어부는 상기 카메라가 사진을 촬영하도록 명령하는 것이 가능하다.In particular, it further includes a door rotation sensor for sensing a rotation angle of the door opening and closing the storage compartment, and when the control unit determines that the rotation angle of the door is greater than or equal to a predetermined angle, the control unit commands the camera to take a picture. It is possible.

또한 상기 제어부가 상기 도어의 회전각이 일정 각도 이하라도 판단하면, 상기 카메라가 사진 촬영을 종료하도록 명령하고, 상기 제어부는 마지막으로 찍힌 사진을 최종 사진으로 선택해서 제1영역과 제3영역을 업데이트하는 것이 가능하다.In addition, if the control unit determines that the rotation angle of the door is less than or equal to a certain angle, the camera commands the camera to end photographing, and the control unit selects the last picture taken as the final picture and updates the first area and the third area. It is possible to do.

한편 상기 도어가 상기 저장실을 개폐하는지를 감지하는 도어 개폐 센서를 더 포함하고, 상기 제어부가 상기 도어가 개방되었다고 판단하면, 상기 도어 회전 센서가 구동될 수 있다.Meanwhile, a door open/close sensor for detecting whether the door opens or closes the storage compartment, and when the control unit determines that the door is open, the door rotation sensor may be driven.

나아가 상기 제어부는 상기 드로워가 상기 하부 공간으로 인입되기 시작할 때에 찍힌 사진을 최종 사진으로 선택해서 제2영역을 업데이트하는 것이 가능하다.Further, the control unit may select a picture taken when the drawer starts to enter the lower space as a final picture and update the second area.

또한 상기 드로워의 이동을 감지하는 드로워 센서를 더 포함하고, 상기 드로워 센서는 상기 드로워가 상기 하부 공간으로부터 인출되는 것을 감지할 수 있다.In addition, a drawer sensor for sensing movement of the drawer may be further included, and the drawer sensor may detect that the drawer is drawn out from the lower space.

물론 상기 드로워에는 표시된 패턴이 마련되고, 상기 제어부는 상기 카메라에 의해서 촬영된 상기 패턴의 이동을 분석해서 상기 드로워의 이동을 감지할 수 있다.Of course, a displayed pattern is provided on the drawer, and the controller may detect the movement of the drawer by analyzing the movement of the pattern photographed by the camera.

그리고 상기 제어부는, 상기 카메라에서 상기 패턴이 인식되고, 상기 패턴이 정지되며, 상기 패턴이 일정 거리 이상 이동된 때에 찍힌 사진을 최종 사진으로 선택해서 제2영역을 업데이트할 수 있다.In addition, the controller may update the second area by selecting a picture taken when the pattern is recognized by the camera, the pattern is stopped, and the pattern is moved by a predetermined distance or more as a final picture.

한편 상기 제어부는, 상기 카메라에서 상기 패턴이 인식되고, 상기 패턴이 일정 거리 이상 이동되면, 상기 카메라에 의해서 찍힌 사진이 상기 제2영역에 대한 정보를 포함하는 것으로 판단할 수 있다.Meanwhile, when the camera recognizes the pattern and the pattern is moved by a predetermined distance or more, the controller may determine that the picture taken by the camera includes information on the second area.

또한 상기 저장실의 좌측을 개방하는 좌측 도어와 상기 저장실의 우측을 개방하는 우측 도어를 구비하고, 상기 좌측 도어의 개폐를 감지하는 좌측 도어 개폐 센서 및 상기 우측 도어의 개폐를 감지하는 우측 도어 개폐 센서를 포함하는 냉장고에 대해서, 상기 제어부는 상기 좌측 도어가 개방되면 상기 한 장의 사진의 좌측 부분을 관리하고, 상기 우측 도어가 개방되면 상기 한 장의 사진의 우측 부분을 관리하는 것이 가능하다.In addition, a left door to open the left side of the storage compartment and a right door to open the right side of the storage compartment, a left door open/close sensor that detects the opening of the left door, and a right door open/close sensor that detects the opening of the right door. With respect to the included refrigerator, the controller may manage the left part of the one photo when the left door is opened, and manage the right part of the one photo when the right door is opened.

그리고 상기 좌측 도어와 상기 우측 도어가 개방되면, 상기 제어부는 상기 사진의 좌측 및 우측 부분을 관리할 수 있다.And when the left door and the right door are opened, the controller may manage left and right portions of the photo.

나아가 상기 디스플레이는 외부 단말기에 설치된 디스플레이부를 포함할 수 있다.Furthermore, the display may include a display unit installed in an external terminal.

그리고 상기 카메라는 소정 시간 간격으로 사진을 촬영하고, 상기 제어부는 각각의 사진에 대해 선택된 특정 이미지를 최종 이미지로 업데이트하는 것이 가능하다.Further, the camera may take pictures at predetermined time intervals, and the controller may update a specific image selected for each picture as a final image.

또한 상기 저장실을 개폐하는 도어의 회전각을 감지하는 도어 회전 센서를 더 포함하고, 상기 제어부에서 상기 도어가 소정 각도 이상 회전된 것으로 판단하면, 상기 제어부는 상기 제1영역에 관한 이미지를 업데이트할 수 있다.In addition, a door rotation sensor for detecting a rotation angle of a door opening and closing the storage compartment is further included, and when the control unit determines that the door is rotated by a predetermined angle or more, the control unit can update an image of the first area. have.

그리고 상기 드로워의 이동을 감지하는 드로워 센서를 더 포함하고, 상기 제어부에서 상기 드로워가 상기 하부 공간으로부터 인출된 것으로 판단하면, 상기 제어부는 상기 제2영역에 관한 이미지를 업데이트하는 것이 가능하다.Further, a drawer sensor for sensing movement of the drawer is further included, and when the control unit determines that the drawer has been pulled out from the lower space, the control unit may update an image of the second area. .

한편 상기 드로워의 이동을 감지하는 드로워 센서를 더 포함하고, 상기 제어부에서 상기 드로워가 상기 하부 공간에 인입된 것으로 판단하면, 상기 제어부는 상기 제3영역에 관한 이미지를 업데이트할 수 있다.Meanwhile, a drawer sensor for detecting movement of the drawer is further included, and when the control unit determines that the drawer has entered the lower space, the control unit may update an image of the third area.

또한 본 발명은 도어가 일정 각도 이상 회전되어 저장실을 개방하는지를 감지하는 단계; 하나의 카메라에 의해서, 선반에 식품이 거치되는 제1영역과, 상기 선반의 하부 공간으로 인입 또는 인출 가능한 드로워의 내측 공간에 의해서 정의되는 제2영역과, 상기 드로워 전방의 바닥에 형성되어 상기 드로워가 상기 하부 공간으로부터 인출되면 상기 제2영역에 중첩되는 제3영역을 한 장의 사진으로 촬영하는 단계; 한 장의 사진을 상기 제1영역에 대한 제1이미지와, 상기 제2영역에 대한 제2이미지와, 상기 제3영역에 대한 제3이미지로 구분하는 단계; 상기 제1이미지, 상기 제2이미지 및 상기 제3이미지 중에 적어도 하나를 개별적으로 업데이트하는 단계; 및 업데이트된 이미지를 표시하는 표시 단계;를 포함하는 냉장고의 저장실 표시 장치의 제어 방법을 제공할 수 있다.In addition, the present invention comprises the steps of detecting whether the door is rotated by a predetermined angle or more to open the storage compartment; By one camera, a first area in which food is placed on the shelf, a second area defined by an inner space of a drawer that can be inserted or withdrawn into a lower space of the shelf, and a floor in front of the drawer are formed. Taking a third area overlapping the second area as a single picture when the drawer is withdrawn from the lower space; Dividing a picture into a first image for the first area, a second image for the second area, and a third image for the third area; Individually updating at least one of the first image, the second image, and the third image; And a display step of displaying the updated image. The control method of the storage compartment display device of the refrigerator may be provided.

또한 상기 드로워가 열린 후에 상기 드로워가 닫히기 시작하는 지를 판단하는 제1판단 단계를 더 포함하고, 상기 제1판단 단계 후에 한 장의 사진을 촬영하는 것이 가능하다.Further, it is possible to further include a first determining step of determining whether the drawer starts to close after the drawer is opened, and taking a picture after the first determining step.

그리고 상기 제1판단 단계 후에 찍힌 사진을 최종 사진으로 선택하는 것이 가능하다.In addition, it is possible to select a picture taken after the first judgment step as a final picture.

물론 상기 업데이트 하는 단계에서는 상기 제2이미지를 업데이트할 수 있다.Of course, in the updating step, the second image may be updated.

또한 상기 도어가 닫히기 직전인 지를 판단하는 제2판단 단계를 더 포함하고, 상기 제2판단 단계 후에 한 장의 사진을 촬영할 수 있다.In addition, a second determining step of determining whether the door is just before closing may be further included, and a single picture may be taken after the second determining step.

나아가 상기 제2판단 단계 후에 찍힌 사진을 최종 사진으로 선택하는 것이 가능하다.Furthermore, it is possible to select the picture taken after the second judgment step as the final picture.

그리고 상기 업데이트하는 단계에서는 상기 제1이미지 및 제3이미지를 업데이트할 수 있다.In the updating step, the first image and the third image may be updated.

본 발명에 따르면, 사용자가 냉장고에 저장된 식품에 관한 정보를 얻기 위해 도어를 개방할 필요가 없어서, 저장실에 수용된 냉기가 누설되는 것을 막을 수 있다. 따라서 불필요한 냉기 손실을 막아서 냉장고의 에너지 효율을 향상시킬 수 있다.According to the present invention, it is not necessary for the user to open the door to obtain information on the food stored in the refrigerator, so that leakage of cold air contained in the storage compartment can be prevented. Therefore, energy efficiency of the refrigerator can be improved by preventing unnecessary loss of cold air.

또한 본 발명에서는 사용자에게 냉장고에 저장된 식품에 관한 최신 정보를 제공할 수 있기 때문에, 사용자에게 제공되는 식품 정보에 대한 신뢰도가 향상될 수 있다.In addition, in the present invention, since the latest information on food stored in the refrigerator can be provided to the user, reliability of the food information provided to the user can be improved.

또한 본 발명에서는 하나의 카메라에 의해서 다양한 위치에 보관된 식품에 관한 정보를 제공할 수 있기 때문에, 하나의 카메라를 설치하기 위한 구조만이 부가될 뿐이어서, 설계가 용이하게 이루어질 수 있다. 특히 카메라 사용으로 인해 발생되는 비용을 줄일 수 있다.In addition, in the present invention, since information on food stored in various locations can be provided by one camera, only a structure for installing one camera is added, so that design can be made easily. In particular, it is possible to reduce the cost incurred by using the camera.

도 1은 본 발명에 따른 냉장고의 정면도.
도 2는 도 1에서 도어가 개방된 도면.
도 3은 저장실의 바닥에 배치되는 제3영역을 도시한 도면.
도 4는 본 발명에 따른 제어 블록도.
도 5는 카메라의 화각을 설명한 도면.
도 6은 도 5의 측단면도.
도 7은 도 6의 상태에서 카메라에 찍힌 화면을 도시한 도면.
도 8은 냉장고의 요부를 도시한 단면도.
도 9는 드로워에 패턴이 표시된 상태를 도시한 도면.
도 10(a)는 좌우측 드로워가 인출된 상태를 촬영한 사진을 도시한 도면.
도 10(b)는 좌측 드로워는 인입되고, 우측 드로워는 인출된 상태를 도시한 도면.
도 11은 사용자에게 제공되는 화면.
도 12는 본 발명의 일 실시예에 따른 제어 흐름도.
도 13은 도 12의 변형례를 설명한 제어 흐름도.
도 14는 도 13의 다른 변형례를 설명한 제어 흐름도.
도 15는 도 12의 다른 변형례를 설명한 제어 흐름도.
도 16은 본 발명의 다른 실시예에 따른 제어 흐름도.1 is a front view of a refrigerator according to the present invention.
Figure 2 is a view in which the door is opened in Figure 1;
3 is a view showing a third area disposed on the floor of the storage room.
4 is a control block diagram according to the present invention.
5 is a view for explaining the angle of view of the camera.
Figure 6 is a side cross-sectional view of Figure 5;
7 is a view showing a screen taken by a camera in the state of FIG. 6;
8 is a cross-sectional view showing a main part of the refrigerator.
9 is a view showing a state in which a pattern is displayed on a drawer.
Figure 10 (a) is a view showing a picture taken in a state in which the left and right drawers are withdrawn.
Fig. 10(b) is a diagram showing a state in which the left drawer is pulled in and the right drawer is pulled out.
11 is a screen provided to a user.
12 is a control flow diagram according to an embodiment of the present invention.
13 is a control flowchart illustrating a modification example of FIG. 12.
14 is a control flow chart illustrating another modified example of FIG. 13.
15 is a control flow chart illustrating another modified example of FIG. 12.
16 is a control flowchart according to another embodiment of the present invention.

이하 상기의 목적을 구체적으로 실현할 수 있는 본 발명의 바람직한 실시예를 첨부한 도면을 참조하여 설명한다.It will now be described with reference to the accompanying drawings a preferred embodiment of the present invention that can specifically realize the above object.

이 과정에서 도면에 도시된 구성요소의 크기나 형상 등은 설명의 명료성과 편의상 과장되게 도시될 수 있다. 또한, 본 발명의 구성 및 작용을 고려하여 특별히 정의된 용어들은 사용자, 운용자의 의도 또는 관례에 따라 달라질 수 있다. 이러한 용어들에 대한 정의는 본 명세서 전반에 걸친 내용을 토대로 내려져야 한다.In this process, the size or shape of the components shown in the drawings may be exaggerated for clarity and convenience of description. In addition, terms specifically defined in consideration of the configuration and operation of the present invention may vary according to the intention or custom of users or operators. Definitions of these terms should be made based on the contents throughout the present specification.

도 1은 본 발명에 따른 냉장고의 정면도이고, 도 2는 도 1에서 도어가 개방된 도면이다. 이하 도 1 및 도 2를 참조해서 설명한다.1 is a front view of a refrigerator according to the present invention, and FIG. 2 is a view in which a door is opened in FIG. 1. Hereinafter, it will be described with reference to FIGS. 1 and 2.

본 발명에 따른 냉장고는 식품이 저장되는 저장실인 냉동실과 냉장실이 상/하로 구획되어 냉동실이 냉장실의 상측에 배치되는 탑 마운트 타입(Top Mount-Type)과, 냉동실과 냉장실이 좌/우측으로 구획된 사이드 바이 사이드 타입(Side By Side-Type)의 냉장고에도 동일하게 적용가능하다. The refrigerator according to the present invention includes a top mount-type in which a freezer compartment and a refrigerator compartment in which food is stored are divided up/down so that the freezer compartment is disposed on the upper side of the refrigerator compartment, and the freezer compartment and the refrigerator compartment are divided into left/right sides. The same applies to side-by-side-type refrigerators.

다만 본 실시예에서는 설명의 편의상 냉동실과 냉장실이 상/하로 구획되고 냉동실이 냉장실의 하측에 배치되는 바텀 프리져 타입(Bottom Freezer-Type)을 중심으로 설명한다. However, in this embodiment, for convenience of explanation, a bottom freezer-type in which the freezing chamber and the refrigerating chamber are divided up/down and the freezing chamber is disposed below the refrigerating chamber will be described.

냉장고의 본체는 외부에서 사용자가 보았을 때에 전체적인 외관을 형성하는 아우터 케이스(10)와 내부에 식품이 보관되는 저장실(22)을 형성하는 인너 케이스(12)를 포함한다. 상기 아우터 케이스(10)와 상기 인너 케이스(12)의 사이에는 소정의 공간이 형성되어 냉기가 순환되는 통로 등이 형성될 수 있다. 한편 상기 아우터 케이스(10)와 상기 인너 케이스(12)의 사이에는 단열재가 충진되어서 상기 저장실(22)의 내부가 외부에 비해서 상대적으로 저온을 유지할 수 있다.The main body of the refrigerator includes an outer case 10 forming an overall appearance when viewed by a user from the outside and an inner case 12 forming a storage compartment 22 in which food is stored. A predetermined space may be formed between the outer case 10 and the inner case 12 to form a passage through which cool air is circulated. Meanwhile, an insulating material is filled between the outer case 10 and the inner case 12 so that the inside of the storage compartment 22 can maintain a relatively low temperature compared to the outside.

또한 상기 아우터 케이스(10)와 상기 인너 케이스(12)의 사이 공간에 형성된 기계실(미도시)에는 냉매를 순환시켜 냉기를 발생시키는 냉매사이클장치가 설치된다. 냉매사이클장치를 이용해 냉장고 내부를 저온으로 유지하여 보관하는 식품류의 신선도를 유지될 수 있다. 냉매사이클장치는 냉매를 압축하는 압축기, 액체상태의 냉매를 기체상태로 상변환시켜 외부와 열교환이 이루어지게 하는 증발기(미도시) 등을 포함한다.In addition, in a machine room (not shown) formed in a space between the outer case 10 and the inner case 12, a refrigerant cycle device for circulating a refrigerant to generate cool air is installed. The freshness of foods stored by keeping the inside of the refrigerator at a low temperature by using a refrigerant cycle device can be maintained. The refrigerant cycle device includes a compressor for compressing a refrigerant, and an evaporator (not shown) that converts a liquid refrigerant into a gaseous state to exchange heat with the outside.

냉장고에는 저장실을 개폐하는 도어(20, 30)가 구비된다. 이때 도어는 각각 냉동실 도어(30) 및 상기 냉장실 도어(20)를 포함할 수 있고, 각각의 도어는 그 일단이 힌지에 의해서 냉장고의 본체에 회동가능하게 설치된다. 상기 냉동실 도어(30) 및 상기 냉장실 도어(20)는 복수 개로 이루어질 수 있다. 즉 도 2에 도시된 바와 같이, 상기 냉장실 도어(20) 및 상기 냉동실 도어(30)는 전방을 향해서 냉장고의 양 모서리를 중심으로 개방되는 형태로 설치될 수 있다. The refrigerator is provided with doors 20 and 30 for opening and closing the storage compartment. In this case, the doors may each include a freezing compartment door 30 and the refrigerating compartment door 20, and each of the doors is rotatably installed on the main body of the refrigerator by a hinge. The freezing compartment door 30 and the refrigerating compartment door 20 may be formed in plural. That is, as shown in FIG. 2, the refrigerating compartment door 20 and the freezing compartment door 30 may be installed in a form that opens toward the front, centering on both corners of the refrigerator.

상기 저장실(22)의 하단에는 베리어(Barrier)(60)가 설치되어, 상기 냉동실과 상기 냉장실을 구분할 수 있다. 상기 베리어(16)는 소정의 두께로 이루어져, 상기 인너 케이스(12)에 형성될 수 있다. 상기 베리어(16)는 수평방향으로 연장될 수 있다.A barrier 60 is installed at the lower end of the storage compartment 22 to separate the freezing compartment and the refrigerating compartment. The barrier 16 may have a predetermined thickness and may be formed on the inner case 12. The barrier 16 may extend in a horizontal direction.

상기 저장실(22)에는 상측에 식품이 거치되는 선반(40)을 포함할 수 있다. 이때 상기 선반(40)은 복수 개가 마련되고, 각각의 선반(40)에는 식품이 거치될 수 있다. 상기 선반(40)은 상기 저장실의 내부를 수평 방향으로 구획할 수 있다.The storage compartment 22 may include a shelf 40 on which food is mounted. In this case, a plurality of shelves 40 may be provided, and food may be mounted on each shelf 40. The shelf 40 may divide the interior of the storage chamber in a horizontal direction.

상기 저장실(22)에는 인입 또는 인출이 가능한 드로워(50)가 설치된다. 상기 드로워(50)에는 식품 등이 수용되어 보관된다. 상기 드로워(40)는 상기 저장실(22) 내에 좌우측으로 두 개가 배치되는 것이 가능하다. 사용자는 좌측에 배치되는 드로어에 접근하기 위해서는 상기 저장실(22)의 좌측 도어를 개방할 수 있다. 반면에 사용자가 우측에 배치되는 드로워에 접근하기 위해서는 상기 저장실(22)의 우측 도어를 개방할 수 있다. In the storage chamber 22, a drawer 50 capable of being drawn in or withdrawn is installed. Food and the like are accommodated and stored in the drawer 50. Two drawers 40 may be disposed in the storage compartment 22 to the left and right. The user may open the left door of the storage chamber 22 to access the drawer disposed on the left. On the other hand, in order for the user to access the drawer disposed on the right side, the right door of the storage compartment 22 may be opened.

또한 본 발명은 상기 저장실(22) 내부의 사진을 촬영하는 하나의 카메라(70)를 포함할 수 있다. 이때 상기 카메라(70)는 고정된 위치를 유지하도록 마련되어서, 동일한 부분을 촬영하는 것이 가능하다. In addition, the present invention may include one camera 70 for taking a picture inside the storage compartment 22. At this time, the camera 70 is provided to maintain a fixed position, so it is possible to photograph the same part.

특히 상기 카메라(70)는 상기 인너 케이스(12)의 상측벽에 아래를 향하도록 설치되어서, 상기 저장실(22)에 저장된 식품에 대한 평면 사진을 촬영할 수 있다.In particular, the camera 70 is installed facing downward on the upper wall of the inner case 12, so that a plan view of the food stored in the storage compartment 22 can be taken.

이때 상기 저장실(22)은 상기 선반(40)에 식품이 거치되는 제1영역(42), 상기 드로워(50)의 내측 공간에 의해서 정의되는 제2영역(52) 및 상기 드로워(50)가 인출되면 상기 제2영역(52)에 중첩되는 제3영역(62)을 포함할 수 있다. 이 부분에 대해서는 이후에 보다 상세하게 설명한다. At this time, the storage compartment 22 includes a first area 42 in which food is placed on the shelf 40, a second area 52 defined by an inner space of the drawer 50, and the drawer 50 When is drawn out, a third region 62 overlapping the second region 52 may be included. This part will be described in more detail later.

상기 제1영역(42), 상기 제2영역(52) 및 상기 제3영역(62)은 상기 저장실(22) 내에서 전체적으로 높낮이를 달리할 수 있다. 즉 상기 제1영역(42), 상기 제2영역(52) 및 상기 제3영역(62)의 순서로 낮아질 수 있다. The first region 42, the second region 52, and the third region 62 may have different heights in the storage chamber 22 as a whole. That is, the first region 42, the second region 52, and the third region 62 may be lowered in the order.

상기 카메라(70)에서 촬영된 사진이나 냉장고에 관한 다양한 정보는 냉장고의 전면에 마련되는 디스플레이(14)를 통해서 사용자에게 제공될 수 있다. 또한 사용자는 상기 디스플레이(14)를 통해서 냉장고에 관한 제어를 수행할 수 있다. A picture taken by the camera 70 or various information about the refrigerator may be provided to the user through the display 14 provided on the front of the refrigerator. In addition, the user can control the refrigerator through the display 14.

도 3은 저장실의 바닥에 배치되는 제3영역을 도시한 도면이다. 이하 도 3을 참조해서 설명한다.3 is a diagram illustrating a third area disposed on the floor of the storage room. Hereinafter, it demonstrates with reference to FIG.

상기 베리어(60)에는 함몰된 부분을 마련해서, 해당 부분에 식품이 저장될 수 있고, 이러한 영역을 상기 제3영역(62)이라고 칭한다. A recessed portion is provided in the barrier 60 so that food may be stored in the portion, and this area is referred to as the third area 62.

상기 제3영역(62)에는 달걀과 같은 밀폐가 필요한 식품이 저장되는 것이 가능한데, 이를 위해서 상기 제3영역(62)을 개폐하는 커버(68)를 구비하는 것이 가능하다. 이때 상기 커버(68)는 투명한 재질로 이루어져서, 상기 카메라(70)가 상측에서 촬영을 할 때에 상기 커버(68)가 가리더라도, 상기 제3영역(62)에 저장된 식품을 촬영할 수 있는 것이 바람직하다.Food that needs to be sealed, such as eggs, may be stored in the third area 62, and for this purpose, a cover 68 for opening and closing the third area 62 may be provided. At this time, it is preferable that the cover 68 is made of a transparent material, so that the food stored in the third area 62 can be photographed even if the cover 68 is covered when the camera 70 is photographed from the top. .

한편 상기 베리어(60)의 상측에는 상기 드로워(50)가 배치되게 된다. 따라서 상기 드로워(50)가 선반의 하부 공간으로 인입된 상태에서는 상기 제3영역(62)에 사용자가 접근할 수 있다. Meanwhile, the drawer 50 is disposed above the barrier 60. Accordingly, when the drawer 50 is drawn into the lower space of the shelf, the user can access the third area 62.

반면에 상기 드로워(50)가 선반의 하부 공간으로부터 인출된 상태에서는 상기 제3영역(62)의 상측에 상기 드로워(50)가 배치되게 되고, 사용자는 상기 제3영역(62)에 접근할 수 없다. On the other hand, when the drawer 50 is pulled out from the lower space of the shelf, the drawer 50 is disposed above the third area 62, and the user approaches the third area 62. Can not.

도 4는 본 발명에 따른 제어 블록도이다. 이하 도 4를 참조해서 설명한다. 4 is a control block diagram according to the present invention. Hereinafter, it demonstrates with reference to FIG.

본 발명은 상기 카메라(70)에 의해서 촬영된 하나의 사진을 복수 개의 이미지로 나누어 관리하는 제어부(100)를 포함한다. 이때 이미지는 상기 제어부(100)에 의해서 가공 또는 보정된 사진의 일부분을 의미하는 것이 가능하다. The present invention includes a control unit 100 that divides and manages a single picture taken by the camera 70 into a plurality of images. In this case, the image may mean a part of the photo processed or corrected by the control unit 100.

상기 제어부(100)는 상기 카메라(70)에서 사진을 촬영하도록 명령할 수 있고, 상기 카메라(70)에서 촬영된 사진을 전송받을 수 있다.The controller 100 may command the camera 70 to take a picture, and may receive a picture taken by the camera 70.

또한 상기 제어부(100)는 나누어진 이미지의 일부를 상기 디스플레이(14)에 제공해서, 사용자에게 상기 저장실(22)에 저장된 식품에 관한 최신 정보를 제공할 수 있다. 이때 상기 디스플레이(14)는 냉장고의 전면에 설치되는 것도 가능하고, 냉장고로부터 분리된 별도의 장치를 이루는 것도 가능하다. 즉 사용자는 핸드폰과 같은 외부 통신 단말기를 통해서 상기 저장실(22)에 관한 이미지를 전송받고, 정보를 획득하는 것이 가능하다.In addition, the controller 100 may provide a part of the divided image to the display 14 to provide the user with the latest information on the food stored in the storage compartment 22. At this time, the display 14 may be installed on the front of the refrigerator, or may form a separate device separated from the refrigerator. That is, the user can receive an image of the storage room 22 and obtain information through an external communication terminal such as a mobile phone.

특히 상기 제어부(100)는 선택된 사진을 복수 개의 이미지로 나누고, 해당 이미지를 상기 디스플레이(14)에 제공하는 것이 가능하다. 이때 상기 제어부(100)는 상기 카메라(70)에 의해서 찍힌 다수 개의 사진 중에 특정 사진을 선택하고, 해당 사진을 복수 개의 이미지로 구분해서 상기 디스플레이(14)에 제공할 수 있다. 이때 상기 제어부(100)에 의해서 선택되는 사진은 사용자가 마지막으로 상기 저장실(22)에 접근해서 식품의 종류를 변화시킨 내용에 관한 정보를 포함할 수 있다.In particular, the controller 100 may divide the selected photo into a plurality of images and provide the image to the display 14. In this case, the controller 100 may select a specific picture from among a plurality of pictures taken by the camera 70, divide the picture into a plurality of images, and provide the picture to the display 14. At this time, the picture selected by the control unit 100 may include information on the contents of the user's last access to the storage compartment 22 and changing the type of food.

본 발명은 상기 도어(20)가 상기 저장실(22)을 개폐하는지 감지할 수 있는 도어 개폐 센서(110)를 포함할 수 있다. 이때 상기 도어 개폐 센서(110)는 상기 아우터 케이스(10)에 마련되어서, 상기 아우터 케이스(10)에 상기 도어(20)가 접촉하게 되면 상기 도어(20)가 상기 저장실(22)을 밀폐하는 것으로 감지할 수 있다. 또한 상기 아우터 케이스(10)에 상기 도어(20)가 접촉하지 않으면, 상기 도어(20)가 상기 저장실(22)을 개방하는 것으로 감지할 수 있다. The present invention may include a door opening and closing sensor 110 capable of detecting whether the door 20 opens or closes the storage compartment 22. At this time, the door opening/closing sensor 110 is provided in the outer case 10, and when the door 20 comes into contact with the outer case 10, the door 20 seals the storage compartment 22. Can be detected. In addition, when the door 20 does not contact the outer case 10, it may be sensed that the door 20 opens the storage compartment 22.

또한 본 발명은 상기 도어(20)의 회전각을 감지하는 도어 회전 센서(120)를 포함할 수 있다. 이때 상기 도어 회전 센서(120)는 상기 도어(20)의 회전 방향 및 상기 도어(20)의 회전 각도를 감지할 수 있다. 예를 들어, 상기 도어(20)가 일정 각도 이상 회전하게 되면 상기 도어 회전 센서(120)에 변화가 발생해서, 상기 도어 회전 센서(120)에서 상기 도어(20)가 일정 각도 이상 회전된 것을 감지할 수 있다. 또한 상기 도어(20)가 특정 방향으로 회전되면 방향에 따라 발생되는 펄스의 변화 패턴을 감지해서 상기 도어(20)의 회전 방향을 감지하는 것이 가능하다. 물론 상기 도어 회전 센서(120)는 상술한 방식 이외에 다양한 형태로 변형될 수 있다. In addition, the present invention may include a door rotation sensor 120 that detects the rotation angle of the door 20. In this case, the door rotation sensor 120 may detect a rotation direction of the door 20 and a rotation angle of the door 20. For example, when the door 20 rotates at a certain angle or more, a change occurs in the door rotation sensor 120, and the door rotation sensor 120 detects that the door 20 is rotated by a certain angle or more. can do. In addition, when the door 20 is rotated in a specific direction, it is possible to detect a change pattern of pulses generated according to the direction to detect the rotation direction of the door 20. Of course, the door rotation sensor 120 may be modified in various forms other than the above-described method.

특히 상기 도어 회전 센서(120)는 상기 도어 개폐 센서(110)에서 상기 도어(20)가 상기 저장실(22)을 개방한 것으로 판단되는 경우에 한해서 구동될 수 있다. In particular, the door rotation sensor 120 may be driven only when the door open/close sensor 110 determines that the door 20 has opened the storage compartment 22.

상기 카메라(70)는 촬영을 시작하게 되면, 소정 간격으로 계속해서 사진을 촬영하는 것도 가능하다. 즉 상기 도어 회전 센서(120)에서 상기 도어(20)가 일정 각도 만큼 개방된 것으로 판단하면 상기 카메라(70)에서는 한 장의 사진이 아닌, 사진 촬영 중지 명령이 제공될 때까지 계속 사진을 촬영하는 것이 가능하다. When the camera 70 starts photographing, it is possible to continuously take pictures at predetermined intervals. That is, if the door rotation sensor 120 determines that the door 20 is opened by a certain angle, the camera 70 does not take a single picture, but continues to take a picture until a command to stop taking a picture is provided. It is possible.

본 발명은 상기 드로워(50)의 인출 또는 인입 여부를 감지하는 드로워 센서(130)를 포함할 수 있다. 상기 드로워 센서(130)는 상기 드로워(50)의 이동은 물론, 상기 드로워(50)의 이동 방향까지 감지하는 것이 가능하다. 이를 위해서 상기 드로워 센서(130)는 복수 개의 홀센서와 같은 형태로 이루어질 수 있다.The present invention may include a drawer sensor 130 that detects whether the drawer 50 is withdrawn or pulled in. The drawer sensor 130 may detect not only the movement of the drawer 50, but also the direction in which the drawer 50 moves. To this end, the drawer sensor 130 may have the same shape as a plurality of Hall sensors.

상기 카메라(70)에서 찍힌 사진은 저장부(18)에 저장될 수 있다. 이때 상기 저장부(18)는 냉장고에 마련될 수도 있고, 냉장고와는 별도의 다른 장치에 마련될 수 있다. 이때 상기 저장부(18)는 상기 디스플레이(14)와 함께 냉장고에 배치되거나, 상기 디스플레이(14)와 함께 냉장고와는 다른 장치에 구비될 수 있다.The photo taken by the camera 70 may be stored in the storage unit 18. In this case, the storage unit 18 may be provided in a refrigerator or may be provided in a device separate from the refrigerator. In this case, the storage unit 18 may be disposed in a refrigerator together with the display 14 or may be provided in a device other than the refrigerator together with the display 14.

도 5는 카메라의 화각을 설명한 도면이다. 이하 도 5를 참조해서 설명한다. 도 5에서는 설명의 편의를 위해서 상기 드로워(50)는 인출되어서 상기 카메라(70)가 상기 제3영역(62)을 촬영할 수 있고, 선반은 생략한 도면이다.5 is a view for explaining the angle of view of the camera. Hereinafter, it demonstrates with reference to FIG. In FIG. 5, for convenience of explanation, the drawer 50 is withdrawn so that the camera 70 can photograph the third area 62, and the shelf is omitted.

상기 카메라(70)는 상기 인너 케이스(12)의 상측벽에 상기 인너 케이스(12)의 후방 벽을 향해서 기울어지도록 배치될 수 있다.The camera 70 may be disposed on an upper wall of the inner case 12 to be inclined toward a rear wall of the inner case 12.

한편 상기 카메라(70)에서 촬영된 사진은 상기 저장실(22)의 폭 방향에 따른 수평 화각(angle of view)과 전후 방향에 따른 수직 화각(angle of view)을 가질 수 있다. Meanwhile, a picture taken by the camera 70 may have a horizontal angle of view along the width direction of the storage compartment 22 and a vertical angle of view along the front and rear direction.

이때 상기 카메라(70)에 따른 수평 화각은 두 개의 드로워(50)가 인출된 상태에서 두 개의 드로워(50)의 내측 공간 즉 상기 제3영역(62)에 저장된 식품이 보일 수 있도록 마련되는 것이 바람직하다. At this time, the horizontal angle of view according to the camera 70 is provided so that the inside space of the two drawers 50, that is, the food stored in the third area 62, can be seen while the two drawers 50 are drawn out. It is desirable.

도 6은 도 5의 측단면도이며, 도 7은 도 6의 상태에서 카메라에 찍힌 화면을 도시한다. 이하 도 6 내지 도 7을 참조해서 설명한다.6 is a side cross-sectional view of FIG. 5, and FIG. 7 shows a screen taken by a camera in the state of FIG. 6. Hereinafter, it will be described with reference to FIGS. 6 to 7.

상기 카메라(70)는 상기 인너 케이스(12)에 설치된다. 이때 상기 인너 케이스(12)는 상기 저장실(22)의 내측을 향해서 소정 길이 만큼 돌출형성된 돌출부(17)을 구비할 수 있다. The camera 70 is installed on the inner case 12. In this case, the inner case 12 may include a protrusion 17 protruding toward the inside of the storage chamber 22 by a predetermined length.

상기 인너 케이스(12)와 상기 아우터 케이스(10)의 사이에는 단열재가 충진되는데, 충분한 단열을 확보하기 위해서는 단열재가 일정 두께 이상이 유지되어야 한다. 따라서 본 발명에서는 상기 카메라(70)가 상기 저장실(22) 쪽으로 튀어나온 상기 돌출부(17)에 설치되어서, 상기 카메라(70)가 설치된 부분에서도 단열을 위한 단열재의 두께를 확보할 수 있다.An insulating material is filled between the inner case 12 and the outer case 10, and in order to secure sufficient heat insulation, the insulating material must be maintained at a certain thickness or more. Accordingly, in the present invention, the camera 70 is installed on the protrusion 17 protruding toward the storage chamber 22, so that the thickness of the insulating material for insulation can be secured even at the portion where the camera 70 is installed.

한편 상기 인너 케이스(12)에는 상기 저장실(22)에 사용자가 접근할 수 있도록 전방에 개구부(14)가 형성된다. 도어가 상기 개구부(14)를 개폐할 수 있다. Meanwhile, an opening 14 is formed in the front of the inner case 12 so that the user can access the storage compartment 22. A door can open and close the opening 14.

상기 카메라(70)는 상기 개구부(14)와 상기 선반(40)의 일단의 사이의 범위(l) 내에 설치되는 것이 바람직하다. 상기 카메라(70)는 상기 제1영역, 상기 제2영역(52) 및 상기 제3영역(62)에 대한 사진을 촬영해야 하기 때문에, 상기 선반(40)의 일단 보다 상기 인너 케이스(12)의 후벽으로 이동될 수 없다. The camera 70 is preferably installed within a range (l) between the opening 14 and one end of the shelf 40. Since the camera 70 has to take pictures of the first area, the second area 52 and the third area 62, the inner case 12 is more than one end of the shelf 40. It cannot be moved to the rear wall.

또한 상기 카메라(70)가 상기 개구부(14)를 벗어나도록 배치되면, 상기 도어(20)는 상기 개구부(14)를 밀폐할 수 없다. 따라서 상기 카메라(70)는 특정 범위(l)에 설치되는 것이 바람직하다. In addition, when the camera 70 is disposed so as to escape from the opening 14, the door 20 cannot seal the opening 14. Therefore, the camera 70 is preferably installed in a specific range (l).

도 6에서는 상기 카메라(70)의 수직 화각을 도시하는데, 수직 화각의 일단은 상기 드로워(50)의 일단까지 촬영할 수 있도록 배치되는 것이 바람직하다. In FIG. 6, a vertical angle of view of the camera 70 is shown, and one end of the vertical angle of view is preferably arranged so that one end of the drawer 50 can be photographed.

도 7에서와 같이 상기 카메라(70)에서는 한 장의 사진으로 상기 제1영역(42) 및 상기 제2영역(52)에 대한 사진을 촬영할 수 있다. 이때 상기 카메라(70)는 좌우측에 배치된 상기 드로워(50)의 양측에 대한 사진을 촬영할 수 있다. As shown in FIG. 7, the camera 70 may take pictures of the first area 42 and the second area 52 as a single picture. At this time, the camera 70 may take pictures of both sides of the drawer 50 disposed on the left and right sides.

도 8은 냉장고의 요부를 도시한 단면도이다. 이하 도 8을 참조해서 설명한다. 8 is a cross-sectional view showing a main part of the refrigerator. Hereinafter, it demonstrates with reference to FIG.

상기 도어(20)의 내측에는 식품을 저장할 수 있는 바스켓(21)이 구비될 수 있다. 상기 바스켓(21)은 상기 도어(20)가 상기 저장실(22)을 바라보는 면에 설치될 수 있다.A basket 21 for storing food may be provided inside the door 20. The basket 21 may be installed on a surface of the door 20 facing the storage compartment 22.

상기 카메라(70)가 촬영한 사진에 상기 바스켓(21)이 도시된다는 문제가 있을 수 있다. 따라서 본 발명에서는 상기 도어 회전 센서(120)를 통해서 상기 도어(20)가 일정 각도(θ) 이상 회전되었는지를 감지해서, 상기 카메라(70)를 통해서 사진을 촬영할 수 있다.There may be a problem that the basket 21 is shown in a picture taken by the camera 70. Accordingly, in the present invention, it is possible to take a picture through the camera 70 by detecting whether the door 20 is rotated by a predetermined angle θ or more through the door rotation sensor 120.

이때 일정 각도(θ)는 상기 카메라(70)가 사진을 촬영할 때에 해당 사진에 상기 바스켓(21)이 나타나지 않을 수 있는 각도를 의미할 수 있고, 이러한 일정 각도(θ)는 상기 바스켓(21)의 길이에 따라 달라질 수 있다. In this case, a certain angle θ may mean an angle at which the basket 21 may not appear in the photo when the camera 70 takes a photo, and this certain angle θ is the angle of the basket 21. May vary depending on the length.

도 9는 드로워에 패턴이 표시된 상태를 도시한 도면이다. 이하 도 9를 참조해서 설명한다. 9 is a diagram illustrating a state in which a pattern is displayed on a drawer. Hereinafter, it demonstrates with reference to FIG.

상기 드로워(50)에는 다양한 형태의 패턴(흑백의 색깔을 가지는 무늬)이 마련될 수 있다. 상기 카메라(70)는 촬영된 사진을 통해서 상기 패턴의 이동을 분석해서, 상기 드로워(50)의 이동 여부 및 이동 방향을 판독할 수 있다. 이때 상기 패턴을 통한 분석은 상기 제어부(100)에서 이루어지는 것이 가능하다.Various types of patterns (patterns having black and white colors) may be provided on the drawer 50. The camera 70 may analyze the movement of the pattern through the photographed picture, and read whether the drawer 50 moves and the movement direction. In this case, the analysis through the pattern may be performed by the control unit 100.

도 9에서는 패턴이 카메라의 형상을 간략화한 이미지와, '스마트 센서'라는 글자를 포함하고 있다. 한편 상기 패턴은 다양한 형태의 무늬를 포함할 수 있고, 흑백이 서로 교차되는 형태로 마련되어서, 상기 카메라(70)에서 인식가능하도록 할수 있다. In FIG. 9, the pattern includes a simplified image of the shape of the camera and the word'smart sensor'. Meanwhile, the pattern may include various types of patterns, and may be provided in a form in which black and white cross each other, so that the camera 70 can recognize it.

이때 패턴은 상기 카메라(70)에서 인식이 가능하도록, 상기 드로워(50)의 전면 상측에 표시되는 것이 가능하다. At this time, the pattern may be displayed on the front upper side of the drawer 50 so that the camera 70 can recognize it.

도 10(a)는 좌우측 드로워가 인출된 상태를 촬영한 사진을 도시한 도면이고, 도 10(b)는 좌측 드로워는 인입되고, 우측 드로워는 인출된 상태를 도시한 도면이다. 이하 도 10(a) 및 도 10(b)를 참조해서 설명한다.FIG. 10(a) is a view showing a photograph of a state in which the left and right drawers are withdrawn, and FIG. 10(b) is a diagram illustrating a state in which the left drawer is pulled in and the right drawer is pulled out. Hereinafter, it will be described with reference to FIGS. 10(a) and 10(b).

도 10에서 상기 패턴은 상기 드로워(50)의 상측 가운데 측에 마련되고, 물결 형태의 무늬를 이루는 예가 도시되어 있다.In FIG. 10, an example in which the pattern is provided in the middle of the upper side of the drawer 50 and forms a wave-shaped pattern is shown.

상기 카메라(70)에 의해서 촬영된 한 장의 사진에는 상기 제1영역(42)이 표현될 수 있다. 또한 한 장의 사진에는 상기 제2영역(52) 또는 상기 제3영역(62) 중에 하나가 도시될 수 있다. The first region 42 may be expressed in a single picture taken by the camera 70. In addition, one of the second region 52 or the third region 62 may be shown in one picture.

즉 도 10(a)에서와 같이 좌우측 드로워가 인출된 상태에서 촬영된 사진에는 좌우측에 배치된 상기 제1영역(42)과 좌우측에 배치된 상기 제2영역(52)이 도시된다.That is, as shown in FIG. 10(a), the first area 42 disposed on the left and right and the second area 52 disposed on the left and right are shown in the picture taken with the left and right drawers withdrawn.

반면에 도 10(b)에서와 같이 우측 드로워만 인출된 상태에서 촬영된 사진에는 좌우측에 배치된 상기 제1영역(42)과 좌측의 제3영역(62) 및 우측의 제2영역(52)이 도시될 수 있다.On the other hand, in the picture taken with only the right drawer drawn out as shown in FIG. 10(b), the first area 42 disposed on the left and right, the third area 62 on the left, and the second area 52 on the right side. ) Can be shown.

즉 상기 드로워(50)가 인출되면 사진에서 상기 제3영역(62)은 도시되지 않고 상기 제2영역이 도시된다. 반면에 상기 드로워(50)가 인입되면 사진에서 상기 제2영역(52)은 도시되지 않고 상기 제3영역(62)이 도시된다.That is, when the drawer 50 is withdrawn, the third area 62 is not shown in the photo, but the second area is shown. On the other hand, when the drawer 50 is inserted, the second area 52 is not shown in the picture, and the third area 62 is shown.

상기 카메라(70)는 동일한 위치에서 사진을 촬영한다. 상기 드로워(50)는 이동될 수 있고, 따라서 상기 드로워(50)의 위치에 따라 상기 카메라(70)에서 획득되는 사진은 다양한 영역에 대한 사진을 촬영할 수 있다.The camera 70 takes a picture at the same location. The drawer 50 may be moved, and thus, the picture acquired by the camera 70 according to the position of the drawer 50 may take pictures of various areas.

한편 도 10(b)에 도시된 바와 같이, 좌측에 구비되는 상기 드로워(50)가 상기 선반(40)의 하부 공간으로 완전히 인입되면, 패턴은 상기 카메라(70)에 의해서 인식되지 못한다. 즉 상기 카메라(70)에 의해서 찍힌 사진에는 패턴이 도시되어 있지 않다.Meanwhile, as shown in FIG. 10B, when the drawer 50 provided on the left side is completely inserted into the lower space of the shelf 40, the pattern is not recognized by the camera 70. That is, a pattern is not shown in the picture taken by the camera 70.

도 11은 사용자에게 제공되는 화면이다. 이하 도 11을 참조해서 설명한다. 11 is a screen provided to a user. Hereinafter, it demonstrates with reference to FIG.

상기 카메라(70)에서 촬영된 한 장의 사진은 상기 제1영역(42)을 도시하는 제1이미지와, 상기 제2영역(52)을 도시하는 제2이미지 및 상기 제3영역(62)을 도시하는 제3이미지로 구분될 수 있다. One picture taken by the camera 70 shows a first image showing the first area 42, a second image showing the second area 52, and the third area 62. It can be classified as a third image.

이렇게 구분된 사진은 도 11에서와 같이 독립적으로 사용자에게 제공될 수 있다. 즉 해당 영역에 대한 사진이 개별적으로 사용자에게 제공되어서 사용자는 해당 영역에 저장된 식품에 대한 정보를 쉽게 획득할 수 있다. The divided photos may be independently provided to the user as shown in FIG. 11. That is, photos of the corresponding area are individually provided to the user, so that the user can easily obtain information on food stored in the corresponding area.

즉 상기 제어부(100)는 각각의 사진을 개별적으로 업데이트(교체)해서 사용자에게 각각의 영역에 수용된 식품의 종류에 관한 정보를 제공할 수 있다. That is, the controller 100 may individually update (replace) each photo and provide information on the type of food accommodated in each area to the user.

도 11에 도시된 냉장실 선반은 상기 제1영역(42)을 의미하고, 야채실은 상기 제2영역(52)을 의미하며, 멀티수납코너는 상기 제3영역(62)을 의미할 수 있다. 물론 사용자의 선호도나 이미지 제공자의 편의에 따라 다양한 배치와, 다양한 형태로 변형되는 것도 가능하다. The refrigerator compartment shelf illustrated in FIG. 11 may refer to the first region 42, the vegetable compartment may refer to the second region 52, and the multi-storage corner may refer to the third region 62. Of course, it is also possible to change into various arrangements and various forms according to the user's preference or the convenience of the image provider.

한편 도 11의 화면은 냉장고에 설치된 디스플레이(14)에도 제공될 수 있지만, 냉장고가 아닌 별도의 외부 장치 예를 들어 핸드폰과 같은 장치에도 제공될 수 있다. 따라서 사용자는 집에서 외출을 한 상태에서 냉장고에 저장된 식품에 대한 정보를 얻을 수 있고, 이를 이용해서 쇼핑에 활용할 수 있다.Meanwhile, the screen of FIG. 11 may be provided to the display 14 installed in the refrigerator, but may also be provided to a device other than a refrigerator, for example, a mobile phone. Therefore, the user can obtain information about food stored in the refrigerator while going out from home, and use it for shopping.

이하 본 발명의 일 실시예에 따른 제어 흐름에 대해서 설명한다.Hereinafter, a control flow according to an embodiment of the present invention will be described.

도 12는 본 발명의 일 실시예에 따른 제어 흐름도이다. 이하 도 12를 참조해서 설명한다. 12 is a control flow diagram according to an embodiment of the present invention. It will be described below with reference to FIG. 12.

상기 도어(20)가 상기 저장실(22)을 개방하다고 판단된다(S10). 이때 상기 도어 개폐 센서(110)에 의해서 상기 도어(20)의 개폐가 감지될 수 있다.It is determined that the door 20 opens the storage compartment 22 (S10). At this time, the door opening/closing sensor 110 may detect the opening and closing of the door 20.

상기 도어(20)가 개방되면, 상기 도어 회전 센서(120)가 구동될 수 있다. 즉 사기 도어 회전 센서(120)에서 상기 도어(20)가 일정 각(θ) 이상 회전되는 지를 감지할 수 있다(S12).When the door 20 is opened, the door rotation sensor 120 may be driven. That is, the door rotation sensor 120 may detect whether the door 20 is rotated by a predetermined angle θ or more (S12).

상기 도어(20)가 일정 각도 이상 회전되면, 상기 카메라(70)는 사진을 촬영한다(S14). 이때 상기 카메라(70)는 소정 시간 간격, 예를 들어 1초에 10장 등의 사진을 촬영하는 것이 가능하다.When the door 20 is rotated by a predetermined angle or more, the camera 70 takes a picture (S14). At this time, the camera 70 may take 10 pictures at a predetermined time interval, for example, 1 second.

이때 찍힌 사진은 상기 제1영역(42)에 대한 제1이미지를 포함한다. 한편 상기 도어(20)가 일정 각도(θ) 이상 회전되었기 때문에 사진에는 상기 도어(20)에 설치된 바스켓 등의 간섭이 발생하지 않을 수 있다. The photograph taken at this time includes a first image of the first region 42. Meanwhile, since the door 20 has been rotated by a certain angle θ or more, interference from a basket installed on the door 20 may not occur in the photo.

상기 카메라(70)에 의해서 찍힌 사진은 상기 저장부(18)에 저장된다(S16). 이때 상기 카메라(70)에 의해서 복수 장의 사진이 찍히면 최근에 찍힌 사진은 저장되고, 그 전에 찍힌 사진은 상기 저장부(18)의 용량 제한으로 인해서 삭제되는 것도 가능하다. The picture taken by the camera 70 is stored in the storage unit 18 (S16). At this time, when a plurality of photos are taken by the camera 70, the recently taken photos are stored, and the photos taken before that may be deleted due to the capacity limitation of the storage unit 18.

한편 상기 드로워 센서(130)에 의해서 상기 드로워(50)가 열리는 지를 감지할 수 있다(S20). 상기 드로워 센서(130)는 상기 드로워(50)가 상기 선반(40)의 하부 공간으로부터 인출되는 것을 감지할 수 있다. Meanwhile, whether the drawer 50 is opened may be detected by the drawer sensor 130 (S20). The drawer sensor 130 may detect that the drawer 50 is drawn out from the lower space of the shelf 40.

그리고 상기 드로워 센서(130)에 의해서 상기 드로워(50)가 닫히는 지를 감지되면, 그 시각에 찍힌 사진 또는 그 시각에 가장 인접한 때에 찍힌 사진을 최종 사진(드로워 열린 상태)로 선택한다(S40).And when the drawer sensor 130 detects whether the drawer 50 is closed, the picture taken at the time or the picture taken at the time closest to the time is selected as the final picture (drawn open) (S40 ).

상기 제어부(100)는 상기 최종 사진을 상기 제1영역(42), 상기 제2영역(52) 및 상기 제3영역(62)으로 구분한다(S42).The control unit 100 divides the final photo into the first area 42, the second area 52, and the third area 62 (S42).

이어서 사진에 찍힌 부분이 상기 제2영역(52) 인지 상기 제3영역(62)인지를 판단한다. 즉 최종 사진에 의해서 제2이미지와 제3이미지 중에 어떤 이미지를 획득했는지를 판단한다(S44). 상술한 바와 같이 상기 드로워(50)가 인출되면 상기 제2영역(52)과 상기 제3영역(62)은 서로 중첩되는 부분이기 때문이다. Next, it is determined whether the part taken in the picture is the second area 52 or the third area 62. That is, it is determined which of the second image and the third image has been acquired based on the final photo (S44). As described above, when the drawer 50 is withdrawn, the second area 52 and the third area 62 overlap each other.

한편 S20에서 상기 드로워(50)가 인출되었다는 정보를 얻었기 때문에, S44에서는 상기 제어부에서 제2이미지를 얻은 것으로 판단할 수 있다.Meanwhile, since information indicating that the drawer 50 has been withdrawn is obtained in S20, it may be determined that the second image has been obtained from the control unit in S44.

그리고 상기 제2영역(52)에 대한 정보를 업데이트할 수 있다(S46). 상기 제어부(100)는 상기 제2영역(52)을 도시하는 제2이미지를 상기 디스플레이(14)에 전송해서, 해당 부분을 최종 사진에 근거하도록 변경할 수 있다.In addition, information on the second area 52 may be updated (S46). The controller 100 may transmit a second image showing the second area 52 to the display 14 and change the corresponding portion to be based on the final picture.

반면에 S30에서 상기 드로워(50)가 닫히지 시작하지 않는다고 판단하면, S14에서와 같이 다시 사진을 촬영할 수 있다. On the other hand, if it is determined in S30 that the drawer 50 does not start to close, the picture can be taken again as in S14.

S30에서 상기 드로워(50)가 닫히지 않는 상태는 사용자가 상기 제2영역(52)에 대한 액세스를 종료하지 않은 것으로 볼 수 있다. 즉 사용자는 상기 드로워(50)를 정지시킨 상태에서 상기 제2영역(52)에 새로운 식품을 저장하거나, 저장된 식품을 상기 제2영역(52)으로부터 꺼낼 수 있다. The state in which the drawer 50 is not closed in S30 may be regarded as that the user has not finished accessing the second area 52. That is, while the drawer 50 is stopped, the user may store a new food in the second area 52 or take out the stored food from the second area 52.

반면에 상기 드로워(50)가 닫히는 상태는 사용자가 상기 제2영역(52)에 대한 액세스를 종료하고, 상기 드로워(50)를 상기 선반(40)의 하부 공간으로 인입시킨다고 예측할 수 있다.On the other hand, when the drawer 50 is closed, it can be predicted that the user ends the access to the second area 52 and moves the drawer 50 into the lower space of the shelf 40.

한편 S20에서 상기 드로워(50)가 열리지 않은 상태에서, 상기 도어(20)가 닫히기 직전 인지를 판단할 수 있다(S60).Meanwhile, in a state in which the drawer 50 is not opened in S20, it may be determined whether the door 20 is immediately before closing (S60).

이때 상기 도어(20)가 닫히기 직전 인지 여부는 상기 도어 회전 센서(120)에서 감지될 수 있다. At this time, whether the door 20 is immediately before closing may be detected by the door rotation sensor 120.

사용자는 상기 저장실(22)에 대한 액세스를 종료하면 상기 도어(20)를 닫고, 상기 저장실(22)을 밀폐하게 된다. 즉 사용자는 상기 도어(20)가 상기 개구부(14)를 개방하도록 한 상태에서 상기 저장실(22)에 새로운 식품을 저장하거나, 저장된 식품을 상기 저장실(22)로부터 꺼낼 수 있다.When the user ends the access to the storage compartment 22, the door 20 is closed and the storage compartment 22 is sealed. That is, the user can store new food in the storage compartment 22 or take out the stored food from the storage compartment 22 with the door 20 open the opening 14.

만약 사용자가 상기 도어(20)를 닫게 되면, 사용자가 상기 저장실에 대한 접근을 종료하고, 다시 상기 도어(20)가 개방되기 전까지는 그 상태에서 식품이 저장된 상태를 유지하는 것으로 판단할 수 있다.If the user closes the door 20, it may be determined that the food is stored in that state until the user ends access to the storage compartment and the door 20 is opened again.

S60에서 상기 도어(20)가 닫히기 직전이라고 판단하면, 상기 카메라(70)에서 사진 촬영을 종료한다(S69). 즉 상기 카메라(70)의 구동을 중지시키는 것이 가능하다. If it is determined in S60 that the door 20 is just before closing, the camera 70 ends the photographing (S69). That is, it is possible to stop the driving of the camera 70.

그리고 상기 제어부(100)는 그 시각에 찍힌 사진 또는 그 시각에 가장 인접한 때에 찍힌 사진을 최종 사진(드로워 닫힌 상태)로 선택한다(S70). 즉 상기 제어부(100)는 상기 카메라(70)의 사진 촬영이 종료된 시점 또는 그 시점에 인접한 시점에 찍힌 사진을 최종 사진으로 선택할 수 있다.Then, the control unit 100 selects a picture taken at the time or a picture taken at the time closest to the time as the final picture (drawn and closed) (S70). That is, the control unit 100 may select a photograph taken at a point in time when photographing by the camera 70 is ended or a photograph taken at a point in time adjacent to the point in time as the final photograph.

상기 제어부(100)는 상기 최종 사진을 상기 제1영역(42), 상기 제2영역(52) 및 상기 제3영역(62)으로 구분한다(S72). 이때 상기 최종 사진에는 상기 제1영역(42)을 도시하는 제1이미지를 포함할 수 있다. 상기 제1영역(42)에 저장된 식품에 대한 최신 상태는 사용자가 상기 저장실(22)에 대한 접근을 종료한 상태이기 때문이다. 따라서 이때 획득된 제1이미지를 통해서 사용자는 상기 제1영역(42)에 대한 정확한 식품 정보를 획득할 수 있다. The controller 100 divides the final photo into the first area 42, the second area 52, and the third area 62 (S72). In this case, the final photo may include a first image showing the first region 42. The latest state of the food stored in the first area 42 is that the user has finished accessing the storage compartment 22. Accordingly, through the first image obtained at this time, the user can obtain accurate food information for the first area 42.

이어서 사진에 찍힌 부분이 상기 제2영역(52) 인지 상기 제3영역(62)인지를 판단한다. 즉 최종 사진에 의해서 제2이미지와 제3이미지 중에 어떤 이미지를 획득했는지를 판단한다(S74). 상술한 바와 같이 상기 드로워(50)가 인출되면 상기 제2영역(52)과 상기 제3영역(62)은 서로 중첩되는 부분이기 때문이다. Next, it is determined whether the part taken in the picture is the second area 52 or the third area 62. That is, it is determined which of the second image and the third image is acquired based on the final photo (S74). As described above, when the drawer 50 is withdrawn, the second area 52 and the third area 62 overlap each other.

한편 S60에서 상기 드로워(50)가 인입되었다는 정보를 얻었기 때문에, S74에서는 상기 제어부에서 제3이미지를 얻은 것으로 판단할 수 있다.Meanwhile, since information that the drawer 50 has been inserted is obtained in S60, it may be determined that the third image has been obtained from the control unit in S74.

그리고 상기 제1영역(42) 및 상기 제3영역(62)에 대한 정보를 업데이트할 수 있다(S76). 상기 제어부(100)는 상기 제1영역(42)을 도시하는 제1이미지와 상기 제3영역(62)을 도시하는 제3이미지를 상기 디스플레이(14)에 전송해서, 해당 부분을 최종 사진에 근거하도록 변경할 수 있다.In addition, information on the first region 42 and the third region 62 may be updated (S76). The control unit 100 transmits a first image showing the first area 42 and a third image showing the third area 62 to the display 14, so that the corresponding part is based on the final photo. Can be changed to

즉 본 발명에서는 사용자가 사용을 종료한 시점을 고려해서, 해당 시점에서 획득된 사진을 가공해서 사용자에게 해당 영역에 저장된 식품에 대한 정보를 제공하게 된다. 따라서 사용자는 상기 저장실(22)에 저장된 식품에 대한 정확한 정보를 얻을 수 있다. That is, in the present invention, in consideration of the point in time when the user ends the use, the photograph obtained at the point in time is processed to provide the user with information on the food stored in the corresponding area. Accordingly, the user can obtain accurate information on the food stored in the storage compartment 22.

한편 상기 도어 회전 센서(120), 상기 도어 개폐 센서(110) 및 상기 드로워 센서(130)는 좌우측에 각각 두 개씩 설치가 될 수 있다. 이러한 경우에 좌우측 도어, 좌우측 드로워에 대한 개별 정보를 획득할 수 있다. Meanwhile, the door rotation sensor 120, the door opening/closing sensor 110, and the drawer sensor 130 may be installed two at each of the left and right sides. In this case, individual information on the left and right doors and the left and right drawers can be obtained.

따라서 이러한 정보를 기반으로, 좌측 도어만 개방된 경우에는 한 장의 사진의 좌측 부분만을 업데이트하는 것이 가능하다. 반면에 우측 도어만 개방된 경우에는 한 장의 사진의 우측 부분만을 업데이트 하는 것이 가능하다.Therefore, based on this information, when only the left door is opened, it is possible to update only the left part of one picture. On the other hand, if only the right door is open, it is possible to update only the right part of one picture.

물론 좌측 도어와 우측 도어가 함께 개방된 경우에는 상술한 조건을 만족한다면, 한 장의 사진의 좌측 부분과 우측 부분을 함께 업데이트해서 상기 디스플레이(14)에 제공하는 것도 가능하다. Of course, when the left door and the right door are opened together, if the above-described conditions are satisfied, it is possible to update the left part and the right part of a single picture together and provide it to the display 14.

도 13은 도 12의 변형례를 설명한 제어 흐름도이다. 이하 도 13을 참조해서 설명한다. 13 is a control flowchart illustrating a modification example of FIG. 12. Hereinafter, it demonstrates with reference to FIG.

도 13의 변형례에서는 S60가 S62와 S64로 구체적으로 구분된 형태이고, 차이가 되는 부분에 대해서만 구체적으로 설명한다. In the modified example of FIG. 13, S60 is a form specifically divided into S62 and S64, and only the differences will be described in detail.

즉 상기 도어(20)가 닫히기 직전인지 여부는 상기 도어(20) 닫히는 방향으로 회전되는지를 판단하는 단계(S62)와 상기 도어(20)가 일정 각도(θ) 이상 회전되는지로 구체적으로 판단할 수 있다. That is, whether the door 20 is just before closing can be specifically determined by determining whether the door 20 is rotated in the closing direction (S62) and whether the door 20 is rotated by a predetermined angle θ or more. have.

다시 말해서, 상기 도어(20)가 닫히는 방향으로 회전되고(S60), 상기 도어가 일정 각 이하로 회전되면(S64), 상기 카메라(70)에 의한 사진 촬영을 종료할 수 있다.In other words, when the door 20 is rotated in the closing direction (S60), and the door is rotated below a certain angle (S64), photographing by the camera 70 may be terminated.

상기 카메라(70)에서 촬영되는 사진에서 상기 저장실(22)에 저장된 식품에 관한 정보를 얻기 위해서는, 상기 도어(20)는 물론 상기 도어(20)에 설치된 바스켓 등의 간섭이 발생하면 안된다. 따라서 상기 도어(20)가 닫히기 직전이라는 표현은, 상기 카메라(70)에서 촬영된 사진에 상기 도어(20) 및 기타 구성요소가 표현되지 않는 상태를 의미하는 것도 가능하다. In order to obtain information on the food stored in the storage compartment 22 from the picture taken by the camera 70, interference with the basket installed in the door 20 as well as the door 20 should not occur. Therefore, the expression that the door 20 is just before closing may mean a state in which the door 20 and other components are not expressed in the picture taken by the camera 70.

도 14는 도 13의 다른 변형례를 설명한 제어 흐름도이다. 이하 도 14를 참조해서 설명하되, 도 13과의 차이만을 설명한다.14 is a control flowchart illustrating another modified example of FIG. 13. Hereinafter, with reference to FIG. 14, only the difference from FIG. 13 will be described.

도 14에 따른 다른 변형례는 도 13과 달리, 상기 도어(20)의 회전 방향을 판단하지 않는다. In the other modified example of FIG. 14, unlike FIG. 13, the rotation direction of the door 20 is not determined.

S12에서 도어가 일정각 이상 회전되었다고 판단하면, 상기 도어(20)는 해당되는 순간에 열리는 방향으로 회전된다. 따라서 통상적으로 사용자가 상기 도어(20)를 다시 회전시켜서, 상기 도어(20)가 일정각 만큼 회전된 상태에 도달하면 사용자가 상기 도어(20)를 닫는 경우에 해당될 수 있다. If it is determined in S12 that the door has been rotated by a predetermined angle or more, the door 20 is rotated in a direction opened at the corresponding moment. Therefore, it may be the case that the user closes the door 20 when the user rotates the door 20 again and reaches a state in which the door 20 is rotated by a predetermined angle.

따라서 다른 변형례에서는 도 13에서의 S62를 생략하고, S20에서 드로워가 열리지 않았다고 판단하면, 도어가 일정각 이하로 회전되었는지 여부를 판단하는 S64를 바로 수행하게 된다.Accordingly, in another modification, if S62 in FIG. 13 is omitted and it is determined that the drawer is not opened in S20, S64 to determine whether the door has been rotated below a certain angle is immediately performed.

도 15는 도 12의 다른 변형례를 설명한 제어 흐름도이다. 이하 도 15를 참조해서 설명한다.15 is a control flowchart illustrating another modified example of FIG. 12. Hereinafter, it demonstrates with reference to FIG.

도 15에서는 상기 드로워(50)의 이동을 도 9에 따른 패턴에 의해서 감지하는 제어 흐름을 설명한다. 설명의 편의상 중복되는 부분은 생략하고, 차이가 되는 부분에 대해서만 설명한다. In FIG. 15, a control flow of sensing the movement of the drawer 50 by the pattern according to FIG. 9 will be described. For convenience of explanation, overlapping parts are omitted, and only parts that differ will be described.

전체적으로 S20과 S30이 S22, S24, S26의 단계로 구체적으로 구분될 수 있다.Overall, S20 and S30 may be specifically divided into steps S22, S24, and S26.

S16에서 같이 사진이 상기 저장부(18)에 저장된 후에, 상기 카메라(70)에서 패턴이 인식되는 지를 판단한다(S22).After the photo is stored in the storage unit 18 as in S16, it is determined whether the pattern is recognized by the camera 70 (S22).

상기 카메라(70)는 상기 인너 케이스(12)의 상측에서 하측을 향해서 사진을 촬영하기 때문에, 상기 카메라(70)에서 패턴이 보이지 않는 경우도 발생할 수 있다.Since the camera 70 takes a picture from the upper side of the inner case 12 to the lower side, a case in which a pattern is not visible from the camera 70 may occur.

상기 카메라(70)에 찍힌 사진에서 패턴이 인지되면, 패턴이 정지되는 지를 판단할 수 있다(S24). 상기 카메라(70)는 복수 장의 사진을 소정 시간 간격으로 촬영하기 때문에, 해당 사진을 분석하면 패턴의 이동 여부를 판단할 수 있다. 패턴은 상기 드로워(50)에 표시되기 때문에, 패턴이 이동되면 상기 드로워(50)도 이동되는 것으로 판단할 수 있다.When a pattern is recognized in the picture taken by the camera 70, it may be determined whether the pattern is stopped (S24). Since the camera 70 captures a plurality of pictures at predetermined time intervals, it is possible to determine whether the pattern is moved by analyzing the pictures. Since the pattern is displayed on the drawer 50, when the pattern is moved, it can be determined that the drawer 50 is also moved.

그리고 패턴이 상기 드로워(50)가 닫힌 상태의 위치부터 일정 거리 이상 이동했는지를 판단할 수 있다(S26). In addition, it may be determined whether the pattern has moved more than a certain distance from the position where the drawer 50 is closed (S26).

만약 패턴이 일정 거리 이상 이동하지 않았다면, 상기 드로워(50)가 충분히 개방되지 않은 상태이기 때문에 상기 제2영역(52)에 대한 적당한 이미지를 획득할 수 없다. 예를 들어 상기 드로워(50)가 1/3만 인출된 상태에서 찍힌 사진에서는 상기 드로워(50)의 내측 공간이 충분히 도시되지 않고, 해당 사진에서 획득된 이미지로는 사용자는 상기 제2영역(52)에 대한 정보를 얻을 수 없기 때문이다. If the pattern has not moved more than a certain distance, since the drawer 50 is not sufficiently opened, an appropriate image for the second area 52 cannot be obtained. For example, in a picture taken with only 1/3 of the drawer 50 drawn out, the inner space of the drawer 50 is not sufficiently shown, and the image obtained from the picture shows the user the second area This is because information about (52) is not available.

패턴이 일정 거리 이상 이동했다고 판단하면 사용자가 상기 제2영역(52)에 대한 접근을 종료하고, 상기 제2영역(52)에 대한 사용을 마쳤다고 볼 수 있다. If it is determined that the pattern has moved more than a certain distance, it can be considered that the user has finished accessing the second area 52 and has finished using the second area 52.

따라서 세 가지 조건이 만족하는 상태의 시각 또는 그 시각에 인접한 시각에서 획득된 사진은 상기 제2영역(52)에 저장된 식품에 관한 정보를 포함할 수 있다. Accordingly, a photograph obtained at a time when the three conditions are satisfied or at a time adjacent to the time may include information on food stored in the second area 52.

도 16은 본 발명의 다른 실시예에 따른 제어 흐름도이다. 이하 도 16을 참조해서 설명한다. 도 16의 제어 흐름은 상기 도어 개폐 센서(110)에 의해서 상기 도어(20)가 개방된 것으로 판단되면 소정 시간을 간격으로 계속 수행되는 것이 가능하다. 16 is a control flow chart according to another embodiment of the present invention. Hereinafter, it demonstrates with reference to FIG. The control flow of FIG. 16 may be continuously performed at intervals of a predetermined time when it is determined that the door 20 is opened by the door opening/closing sensor 110.

우선 상기 도어 회전 센서(120)에 의해서 상기 도어(20)가 일정 각도(θ) 이상 개방되는지를 판단한다(S100).First, it is determined whether the door 20 is opened by a predetermined angle θ or more by the door rotation sensor 120 (S100).

상기 도어(20)가 일정 각도 이상 개방되면, 상기 도어(20)에 간섭이 발생하지 않는 것으로 판단하고, 상기 카메라(70)는 사진 촬영을 한다(S110). 이때 상기 카메라(70)는 한 장의 사진을 촬영하는 것이 가능하다. When the door 20 is opened by a predetermined angle or more, it is determined that interference does not occur in the door 20, and the camera 70 takes a picture (S110). At this time, the camera 70 may take a single picture.

그리고 상기 드로워(50)가 제1설정 거리 이상 인출되었는지를 판단한다(S120). 이때 상기 제1설정 거리는 상기 카메라(70)에서 사진을 촬영했을 때에 상기 제2영역(52)에 대한 식품 정보가 충분히 획득가능한 거리를 의미할 수 있다. 예를 들어, 상기 제1설정 거리는 상기 드로워(50)의 전체 길이의 2/3를 의미하는 것도 가능하다. Then, it is determined whether the drawer 50 has been withdrawn more than a first set distance (S120). In this case, the first set distance may mean a distance at which food information on the second area 52 can be sufficiently obtained when a picture is taken by the camera 70. For example, the first set distance may mean 2/3 of the total length of the drawer 50.

상기 드로워(50)의 인출 거리는 상기 드로워(50) 센서에 의해서 감지될 수 있다.The draw distance of the drawer 50 may be sensed by the drawer 50 sensor.

한편 상기 드로워(50)가 상기 제1설정 거리 이상 인출되었다고 판단하면, 상기 제어부(100)는 사진을 영역별로 구획해서, 복수 개의 이미지로 구분할 수 있다(S122). On the other hand, if it is determined that the drawer 50 has been withdrawn by the first set distance or more, the controller 100 may divide the photo by area and divide it into a plurality of images (S122).

상기 드로워(50)가 인출된 상태에서 획득된 사진이기 때문에, 해당 사진에서는 제1이미지와 제2이미지가 획득될 수 있다. Since the picture is obtained while the drawer 50 is withdrawn, a first image and a second image may be obtained from the picture.

상기 제어부(100)는 제1이미지와 제2이미지를 업데이트할 수 있다(S124).The controller 100 may update the first image and the second image (S124).

반면에 S120에서 상기 드로워(50)가 상기 제1설정 거리 이상 인출되지 않았다고 판단하면, 상기 드로워(50)가 제2설정 거리 이하로 인출되었는지를 판단할 수 있다(S130). On the other hand, if it is determined in S120 that the drawer 50 has not been withdrawn more than the first set distance, it may be determined whether the drawer 50 has been withdrawn less than the second set distance (S130).

이때 상기 제2설정 거리는 상기 카메라(70)에서 사진을 촬영했을 때에 상기 제3영역(62)에 대한 식품 정보가 충분히 획득가능한 거리를 의미할 수 있다. 예를 들어, 상기 제2설정 거리는 상기 드로워(50)의 전체 길이의 1/3을 의미하는 것도 가능하다. 물론 상기 제2설정 거리는 '0'으로 선택해서, 상기 드로워(50)가 상기 선반의 하부 공간으로 완전히 인입된 상태를 선택하는 것도 가능하다. In this case, the second set distance may mean a distance at which food information on the third area 62 can be sufficiently obtained when a picture is taken by the camera 70. For example, the second set distance may mean 1/3 of the total length of the drawer 50. Of course, it is possible to select a state in which the drawer 50 is completely retracted into the lower space of the shelf by selecting '0' as the second set distance.

한편 상기 드로워(50)가 상기 제2설정 거리 이하 인출되었다고 판단하면, 상기 제어부(100)는 사진을 영역별로 구획해서, 복수 개의 이미지로 구분할 수 있다(S132). On the other hand, if it is determined that the drawer 50 is drawn out less than the second set distance, the controller 100 may divide the photo by area and divide it into a plurality of images (S132).

상기 드로워(50)가 인출된 상태에서 획득된 사진이기 때문에, 해당 사진에서는 제1이미지와 제3이미지가 획득될 수 있다. Since the picture is obtained while the drawer 50 is drawn out, a first image and a third image may be obtained from the picture.

상기 제어부(100)는 제1이미지와 제3이미지를 업데이트할 수 있다(S134).The controller 100 may update the first image and the third image (S134).

도 16에 따른 본 발명의 다른 실시예에서는 상기 도어(20)가 개방되면 제어가 반복되고, 상기 도어(20)가 상기 저장실(22)을 밀폐하면 완전히 종료된다. 종료된 상태에서는 더 이상 이미지에 대한 업데이트가 발생되지 않기 때문에, 상기 저장실(22)에 저장된 식품에 대한 최종 이미지가 획득될 수 있다In another embodiment of the present invention according to FIG. 16, when the door 20 is opened, control is repeated, and when the door 20 closes the storage compartment 22, it is completely terminated. Since the image is no longer updated in the finished state, a final image of the food stored in the storage compartment 22 can be obtained.

본 발명은 상술한 실시예에 한정되지 않으며, 첨부된 청구범위에서 알 수 있는 바와 같이 본 발명이 속한 분야의 통상의 지식을 가진 자에 의해 변형이 가능하고 이러한 변형은 본 발명의 범위에 속한다.The present invention is not limited to the above-described embodiments, and as can be seen from the appended claims, modifications may be made by those of ordinary skill in the field to which the present invention belongs, and such modifications are within the scope of the present invention.

10: 아우터 케이스 12: 인너 케이스
20: 도어 40: 선반
42: 제1영역 50: 드로워
52: 제2영역 60: 베리어
62: 제3영역 70: 카메라
100: 제어부10: outer case 12: inner case
20: door 40: shelf
42: first area 50: drawer
52: second area 60: barrier
62: third area 70: camera
100: control unit

Claims (27)

냉장고에서 식품이 저장되는 저장실 내부의 사진을 촬영하는 하나의 카메라;
상기 카메라에 의해서 촬영된 하나의 사진(picture)을 복수 개의 이미지(image)로 나누어 관리하는 제어부; 및
상기 복수 개의 이미지를 독립적으로 도시하는 디스플레이;를 포함하고,
상기 저장실은,
선반에 식품이 거치되는 제1영역과,
상기 선반의 하부 공간으로 인입 또는 인출 가능한 드로워의 내측 공간에 의해서 정의되는 제2영역과,
상기 드로워 전방의 바닥에 형성되어, 상기 드로워가 상기 하부 공간으로부터 인출되면 상기 제2영역에 중첩되는 제3영역을 포함하고,
상기 카메라는 상기 제1영역, 상기 제2영역 및 상기 제3영역을 상기 하나의 카메라에 의해서 촬영하고,
상기 제어부는,
하나의 사진을 상기 제1영역을 도시하는 제1이미지와, 상기 제2영역을 도시하는 제2이미지 및 상기 제3영역을 도시하는 제3이미지로 구분하는 것을 특징으로 하는 냉장고의 저장실 표시 장치.One camera for taking a picture of the inside of the storage compartment where food is stored in the refrigerator;
A control unit that divides and manages one picture taken by the camera into a plurality of images; And
Including; a display that independently shows the plurality of images,
The storage room,
A first area in which food is placed on the shelf,
A second area defined by an inner space of a drawer capable of being drawn into or withdrawn into a lower space of the shelf,
A third area formed on the floor in front of the drawer and overlapping the second area when the drawer is drawn out from the lower space,
The camera photographs the first area, the second area, and the third area by the one camera,
The control unit,
A storage compartment display device for a refrigerator, characterized in that one picture is divided into a first image showing the first area, a second image showing the second area, and a third image showing the third area. 삭제delete 제1항에 있어서,
상기 제어부는 상기 카메라에 의해서 촬영된 복수 개의 사진 중에 특정 사진을 최종 사진으로 선택하는 냉장고의 저장실 표시 장치.The method of claim 1,
The control unit selects a specific picture as a final picture among a plurality of pictures taken by the camera. 제3항에 있어서,
상기 제어부는 상기 최종 사진을 영역별로 구획하고, 구획된 이미지를 상기 디스플레이에 제공하는 것을 특징으로 하는 냉장고의 저장실 표시 장치.The method of claim 3,
The control unit divides the final photo by area and provides the divided image to the display. 제1항에 있어서,
상기 저장실을 개폐하는 도어의 회전각을 감지하는 도어 회전 센서를 더 포함하고,
상기 제어부가 상기 도어의 회전각이 일정 각도 이상이라고 판단하면, 상기 제어부는 상기 카메라가 사진을 촬영하도록 명령하는 것을 특징으로 하는 냉장고의 저장실 표시 장치.The method of claim 1,
Further comprising a door rotation sensor for detecting a rotation angle of the door opening and closing the storage compartment,
When the control unit determines that the rotation angle of the door is equal to or greater than a predetermined angle, the control unit commands the camera to take a picture. 제5항에 있어서,
상기 제어부가 상기 도어의 회전각이 일정 각도 이하라고 판단하면, 상기 카메라가 사진 촬영을 종료하도록 명령하고,
상기 제어부는 마지막으로 찍힌 사진을 최종 사진으로 선택해서 제1영역과 제3영역을 업데이트하는 것을 특징으로 하는 냉장고의 저장실 표시 장치.The method of claim 5,
When the control unit determines that the rotation angle of the door is less than or equal to a certain angle, the camera commands the camera to end photographing,
And the control unit updates the first region and the third region by selecting the last photograph as a final photograph. 제5항에 있어서,
상기 도어가 상기 저장실을 개폐하는지를 감지하는 도어 개폐 센서를 더 포함하고,
상기 제어부가 상기 도어가 개방되었다고 판단하면, 상기 도어 회전 센서가 구동되는 것을 특징으로 하는 냉장고의 저장실 표시 장치.The method of claim 5,
Further comprising a door opening and closing sensor for sensing whether the door opens or closes the storage compartment,
When the control unit determines that the door is open, the door rotation sensor is driven. 제1항에 있어서,
상기 제어부는 상기 드로워가 상기 하부 공간으로 인입되기 시작할 때에 찍힌 사진을 최종 사진으로 선택해서 제2영역을 업데이트하는 것을 특징으로 하는 냉장고의 저장실 표시 장치.The method of claim 1,
Wherein the controller selects a picture taken when the drawer starts to be drawn into the lower space as a final picture and updates the second area. 제8항에 있어서,
상기 드로워의 이동을 감지하는 드로워 센서를 더 포함하는 냉장고의 저장실 표시 장치The method of claim 8,
Storage compartment display device of a refrigerator further comprising a drawer sensor for sensing movement of the drawer 제9항에 있어서,
상기 드로워 센서는 상기 드로워가 상기 하부 공간으로부터 인출되는 것을 감지하는 것을 특징으로 하는 냉장고의 저장실 표시 장치.The method of claim 9,
The drawer sensor detects that the drawer is pulled out of the lower space. 제1항에 있어서,
상기 드로워에는 표시된 패턴이 마련되고,
상기 제어부는 상기 카메라에 의해서 촬영된 상기 패턴의 이동을 분석해서 상기 드로워의 이동을 감지하는 것을 특징으로 하는 냉장고의 저장실 표시 장치.The method of claim 1,
A marked pattern is provided on the drawer,
And the controller detects movement of the drawer by analyzing movement of the pattern photographed by the camera. 제11항에 있어서,
상기 제어부는,
상기 카메라에서 상기 패턴이 인식되고, 상기 패턴이 정지되며, 상기 패턴이 일정 거리 이상 이동된 때에 찍힌 사진을 최종 사진으로 선택해서 제2영역을 업데이트하는 것을 특징으로 하는 냉장고의 저장실 표시 장치.The method of claim 11,
The control unit,
Wherein the camera recognizes the pattern, the pattern is stopped, and the second region is updated by selecting a picture taken when the pattern is moved by a predetermined distance or more as a final picture. 제11항에 있어서,
상기 제어부는,
상기 카메라에서 상기 패턴이 인식되고, 상기 패턴이 일정 거리 이상 이동되면, 상기 카메라에 의해서 찍힌 사진이 상기 제2영역에 대한 정보를 포함하는 것으로 판단하는 것을 특징으로 하는 냉장고의 저장실 표시 장치.The method of claim 11,
The control unit,
And when the pattern is recognized by the camera and the pattern is moved by a predetermined distance or more, it is determined that a picture taken by the camera includes information on the second area. 제1항에 있어서,
상기 저장실의 좌측을 개방하는 좌측 도어와 상기 저장실의 우측을 개방하는 우측 도어를 구비하고, 상기 좌측 도어의 개폐를 감지하는 좌측 도어 개폐 센서 및 상기 우측 도어의 개폐를 감지하는 우측 도어 개폐 센서를 포함하는 냉장고에 대해서,
상기 제어부는 상기 좌측 도어가 개방되면 상기 하나의 사진의 좌측 부분을 관리하고, 상기 우측 도어가 개방되면 상기 하나의 사진의 우측 부분을 관리하는 것을 특징으로 하는 냉장고의 저장실 표시 장치.The method of claim 1,
A left door to open the left side of the storage compartment and a right door to open the right side of the storage compartment, and a left door open/close sensor that detects opening/closing of the left door, and a right door open/close sensor that detects opening/closing of the right door Regarding the refrigerator,
And the control unit manages a left portion of the one picture when the left door is opened, and manages a right portion of the one picture when the right door is opened. 제14항에 있어서,
상기 좌측 도어와 상기 우측 도어가 개방되면,
상기 제어부는 상기 사진의 좌측 및 우측 부분을 관리하는 것을 특징으로 하는 냉장고의 저장실 표시 장치.The method of claim 14,
When the left door and the right door are opened,
The control unit manages left and right portions of the photo. 제1항에 있어서,
상기 디스플레이는 외부 단말기에 설치된 디스플레이부를 포함하는 것을 특징으로 하는 냉장고의 저장실 표시 장치.The method of claim 1,
The display device of a storage compartment of a refrigerator, wherein the display includes a display unit installed on an external terminal. 제1항에 있어서,
상기 카메라는 소정 시간 간격으로 사진을 촬영하고,
상기 제어부는 각각의 사진에 대해 선택된 특정 이미지를 최종 이미지로 업데이트하는 것을 특징으로 하는 냉장고의 저장실 표시 장치.The method of claim 1,
The camera takes pictures at predetermined time intervals,
The control unit updates the specific image selected for each picture as a final image. 제17항에 있어서,
상기 저장실을 개폐하는 도어의 회전각을 감지하는 도어 회전 센서를 더 포함하고,
상기 제어부에서 상기 도어가 소정 각도 이상 회전된 것으로 판단하면, 상기 제어부는 상기 제1영역에 관한 이미지를 업데이트하는 것을 특징으로 하는 냉장고의 저장실 표시 장치.The method of claim 17,
Further comprising a door rotation sensor for detecting a rotation angle of the door opening and closing the storage compartment,
When the control unit determines that the door is rotated by a predetermined angle or more, the control unit updates an image of the first area. 제17항에 있어서,
상기 드로워의 이동을 감지하는 드로워 센서를 더 포함하고,
상기 제어부에서 상기 드로워가 상기 하부 공간으로부터 인출된 것으로 판단하면, 상기 제어부는 상기 제2영역에 관한 이미지를 업데이트하는 것을 특징으로 하는 냉장고의 저장실 표시 장치.The method of claim 17,
Further comprising a drawer sensor for detecting the movement of the drawer,
When the control unit determines that the drawer has been withdrawn from the lower space, the control unit updates an image of the second area. 제17항에 있어서,
상기 드로워의 이동을 감지하는 드로워 센서를 더 포함하고,
상기 제어부에서 상기 드로워가 상기 하부 공간에 인입된 것으로 판단하면, 상기 제어부는 상기 제3영역에 관한 이미지를 업데이트하는 것을 특징으로 하는 냉장고의 저장실 표시 장치.The method of claim 17,
Further comprising a drawer sensor for detecting the movement of the drawer,
When the control unit determines that the drawer has entered the lower space, the control unit updates an image of the third area. 도어가 일정 각도 이상 회전되어 저장실을 개방하는지를 감지하는 단계;
하나의 카메라에 의해서, 선반에 식품이 거치되는 제1영역과, 상기 선반의 하부 공간으로 인입 또는 인출 가능한 드로워의 내측 공간에 의해서 정의되는 제2영역과, 상기 드로워 전방의 바닥에 형성되어 상기 드로워가 상기 하부 공간으로부터 인출되면 상기 제2영역에 중첩되는 제3영역을 한 장의 사진으로 촬영하는 단계;
한 장의 사진을 상기 제1영역에 대한 제1이미지와, 상기 제2영역에 대한 제2이미지와, 상기 제3영역에 대한 제3이미지로 구분하는 단계;
상기 제1이미지, 상기 제2이미지 및 상기 제3이미지 중에 적어도 하나를 개별적으로 업데이트하는 단계; 및
업데이트된 이미지를 표시하는 표시 단계;를 포함하는 냉장고의 저장실 표시 장치의 제어 방법.Detecting whether the door is rotated by a predetermined angle or more to open the storage chamber;
By one camera, a first area in which food is placed on the shelf, a second area defined by an inner space of a drawer that can be inserted or withdrawn into a lower space of the shelf, and a floor in front of the drawer are formed. Taking a third area overlapping the second area as a single picture when the drawer is withdrawn from the lower space;
Dividing a picture into a first image for the first area, a second image for the second area, and a third image for the third area;
Individually updating at least one of the first image, the second image, and the third image; And
A method of controlling a storage compartment display device of a refrigerator including a display step of displaying an updated image. 제21항에 있어서,
상기 드로워가 열린 후에 상기 드로워가 닫히기 시작하는 지를 판단하는 제1판단 단계를 더 포함하고,
상기 제1판단 단계 후에 한 장의 사진을 촬영하는 것을 특징으로 하는 냉장고의 저장실 표시 장치의 제어 방법.The method of claim 21,
Further comprising a first determination step of determining whether the drawer starts to close after the drawer is opened,
A method of controlling a storage room display device of a refrigerator, comprising taking a picture after the first determining step. 제22항에 있어서,
상기 제1판단 단계 후에 찍힌 사진을 최종 사진으로 선택하는 것을 특징으로 하는 냉장고의 저장실 표시 장치의 제어 방법.The method of claim 22,
A method of controlling a storage room display device of a refrigerator, wherein a picture taken after the first determining step is selected as a final picture. 제22항에 있어서,
상기 업데이트 하는 단계에서는 상기 제2이미지를 업데이트하는 것을 특징으로 하는 냉장고의 저장실 표시 장치의 제어 방법.The method of claim 22,
In the updating step, the control method of the storage compartment display device of a refrigerator, wherein the second image is updated. 제21항에 있어서,
상기 도어가 닫히기 직전인 지를 판단하는 제2판단 단계를 더 포함하고,
상기 제2판단 단계 후에 한 장의 사진을 촬영하는 것을 특징으로 하는 냉장고의 저장실 표시 장치의 제어 방법.The method of claim 21,
Further comprising a second determination step of determining whether the door is immediately before closing,
A method for controlling a storage room display device of a refrigerator, comprising taking a picture after the second determining step. 제25항에 있어서,
상기 제2판단 단계 후에 찍힌 사진을 최종 사진으로 선택하는 것을 특징으로 하는 냉장고의 저장실 표시 장치의 제어 방법.The method of claim 25,
A method of controlling a storage room display device of a refrigerator, wherein a picture taken after the second determining step is selected as a final picture. 제25항에 있어서,
상기 업데이트 하는 단계에서는 상기 제1이미지 및 제3이미지를 업데이트하는 것을 특징으로 하는 냉장고의 저장실 표시 장치의 제어 방법.The method of claim 25,
In the updating step, the method of controlling a storage compartment display device of a refrigerator, wherein the first image and the third image are updated.
KR1020130124739A 2013-04-23 2013-10-18 Displaying Apparatus of storage chamber and Controlling Method for the same KR102194275B1 (en)

Priority Applications (40)

Application Number Priority Date Filing Date Title
KR1020130124739A KR102194275B1 (en) 2013-10-18 2013-10-18 Displaying Apparatus of storage chamber and Controlling Method for the same
ES15185828.9T ES2668348T3 (en) 2013-04-23 2014-04-22 Refrigerator and control method
CN201480011747.5A CN105008833B (en) 2013-04-23 2014-04-22 Refrigerator and its control method
EP15185841.2A EP2995891B1 (en) 2013-04-23 2014-04-22 Refrigerator
CN201610127539.2A CN105758091B (en) 2013-04-23 2014-04-22 Refrigerator and control method thereof
PCT/KR2014/003523 WO2014175643A1 (en) 2013-04-23 2014-04-22 Refrigerator and control method for the same
CN201510795232.5A CN105222519B (en) 2013-04-23 2014-04-22 Refrigerator and control method thereof
EP15201309.0A EP3026377B1 (en) 2013-04-23 2014-04-22 Refrigerator and control method for the same
CN201610127404.6A CN105605881B (en) 2013-04-23 2014-04-22 Refrigerator and control method thereof
TR2018/08190T TR201808190T4 (en) 2013-04-23 2014-04-22 Refrigerator and its control method.
EP15185971.7A EP2998670B1 (en) 2013-04-23 2014-04-22 A camera system for installation inside a refrigerator and a refrigerator comprising said camera system
CN201610128042.2A CN105650998B (en) 2013-04-23 2014-04-22 Refrigerator and control method thereof
CN201510795427.XA CN105352261B (en) 2013-04-23 2014-04-22 Refrigerator and its control method
EP15201279.5A EP3048398B1 (en) 2013-04-23 2014-04-22 Refrigerator and control method for the same
EP15185818.0A EP2995888B1 (en) 2013-04-23 2014-04-22 Refrigerator and control method for the same
EP15201331.4A EP3026378B1 (en) 2013-04-23 2014-04-22 Refrigerator and control method for the same
US14/786,719 US9915471B2 (en) 2013-04-23 2014-04-22 Refrigerator with camera and control method for the same
CN201510796450.0A CN105222520B (en) 2013-04-23 2014-04-22 Refrigerator and its control method
CN201510796557.5A CN105241175B (en) 2013-04-23 2014-04-22 Refrigerator and its control method
EP14788514.9A EP2909548B1 (en) 2013-04-23 2014-04-22 Refrigerator
CN201510796498.1A CN105222521B (en) 2013-04-23 2014-04-22 Refrigerator and its control method
CN201510796663.3A CN105222522B (en) 2013-04-23 2014-04-22 Refrigerator and its control method
EP15189490.4A EP2995892B1 (en) 2013-04-23 2014-04-22 Refrigerator
EP15185828.9A EP2995889B1 (en) 2013-04-23 2014-04-22 Refrigerator and control method for the same
EP15185839.6A EP2995890B1 (en) 2013-04-23 2014-04-22 Refrigerator
CN201510796407.4A CN105241154B (en) 2013-04-23 2014-04-22 Refrigerator and control method thereof
EP15189491.2A EP2995893B1 (en) 2013-04-23 2014-04-22 Refrigerator
US14/930,091 US9528756B2 (en) 2013-04-23 2015-11-02 Refrigerator with camera and control method for the same
US14/930,444 US9890994B2 (en) 2013-04-23 2015-11-02 Refrigerator with camera and control method for the same
US14/929,845 US9851139B2 (en) 2013-04-23 2015-11-02 Refrigerator and control method for the same
US14/929,888 US9546812B2 (en) 2013-04-23 2015-11-02 Refrigerator with camera and control method for the same
US14/929,978 US10036587B2 (en) 2013-04-23 2015-11-02 Refrigerator with camera and control method for the same
US14/930,012 US9920980B2 (en) 2013-04-23 2015-11-02 Refrigerator with camera and control method for the same
US14/930,057 US9568241B2 (en) 2013-04-23 2015-11-02 Refrigerator with camera and control method for the same
US14/950,520 US9739526B2 (en) 2013-04-23 2015-11-24 Refrigerator with heated camera module
US14/950,419 US9920981B2 (en) 2013-04-23 2015-11-24 Refrigerator with camera and control thereof
US14/950,466 US9920982B2 (en) 2013-04-23 2015-11-24 Refrigerator camera module
US15/721,140 US10228187B2 (en) 2013-04-23 2017-09-29 Refrigerator with camera and control method for the same
US15/721,131 US10215483B2 (en) 2013-04-23 2017-09-29 Refrigerator with camera and control method for the same
US15/720,989 US10184715B2 (en) 2013-04-23 2017-09-29 Refrigerator with camera and control method for the same

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020130124739A KR102194275B1 (en) 2013-10-18 2013-10-18 Displaying Apparatus of storage chamber and Controlling Method for the same

Publications (2)

Publication Number Publication Date
KR20150045255A KR20150045255A (en) 2015-04-28
KR102194275B1 true KR102194275B1 (en) 2020-12-22

Family

ID=53037288

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020130124739A KR102194275B1 (en) 2013-04-23 2013-10-18 Displaying Apparatus of storage chamber and Controlling Method for the same

Country Status (1)

Country Link
KR (1) KR102194275B1 (en)

Families Citing this family (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN114484982B (en) * 2020-11-12 2024-05-03 海信冰箱有限公司 Refrigerator and image processing method in refrigerator

Family Cites Families (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR100677269B1 (en) * 2005-03-15 2007-02-02 엘지전자 주식회사 Refrigerator with camera

Also Published As

Publication number Publication date
KR20150045255A (en) 2015-04-28

Similar Documents

Publication Publication Date Title
JP6307698B2 (en) refrigerator
KR101678444B1 (en) Refrigerator and Controlling Method for the same
KR102197963B1 (en) Refrigerator
KR102152400B1 (en) Refrigerator and Controlling Method for the same
KR102347134B1 (en) Refrigerator and Controlling Method for the same
KR102194275B1 (en) Displaying Apparatus of storage chamber and Controlling Method for the same
KR102495013B1 (en) Refrigerator and Controlling Method for the same
KR20180013448A (en) Refrigerator
KR20150118864A (en) Refrigerator and Controlling Method for the same
KR102417850B1 (en) Refrigerator and Controlling Method for the same
KR20150127013A (en) Refrigerator and Controlling Method for the same
KR102486508B1 (en) Refrigerator
KR102232657B1 (en) Refrigerator and Controlling Method for the same
KR102472530B1 (en) Refrigerator
KR102377310B1 (en) Refrigerator and Controlling Method for the same
KR101662087B1 (en) Refrigerator and Controlling Method for the same
US20230314063A1 (en) Refrigerator
CN114484982B (en) Refrigerator and image processing method in refrigerator
EP4209743A1 (en) Refrigerator
US20230316755A1 (en) Refrigerator appliance and methods for tracking stored items in a freezer chamber
KR20220091256A (en) Refrigerator
KR102231593B1 (en) Refrigerator and Controlling Method for the same

Legal Events

Date Code Title Description
A201 Request for examination
E902 Notification of reason for refusal
E701 Decision to grant or registration of patent right
GRNT Written decision to grant