KR20150045255A - Displaying Apparatus of storage chamber and Controlling Method for the same - Google Patents

Displaying Apparatus of storage chamber and Controlling Method for the same Download PDF

Info

Publication number
KR20150045255A
KR20150045255A KR20130124739A KR20130124739A KR20150045255A KR 20150045255 A KR20150045255 A KR 20150045255A KR 20130124739 A KR20130124739 A KR 20130124739A KR 20130124739 A KR20130124739 A KR 20130124739A KR 20150045255 A KR20150045255 A KR 20150045255A
Authority
KR
South Korea
Prior art keywords
door
drawer
photograph
image
area
Prior art date
Application number
KR20130124739A
Other languages
Korean (ko)
Other versions
KR102194275B1 (en
Inventor
김관형
홍삼열
김미란
권성두
이재영
Original Assignee
엘지전자 주식회사
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Priority to KR1020130124739A priority Critical patent/KR102194275B1/en
Application filed by 엘지전자 주식회사 filed Critical 엘지전자 주식회사
Priority to CN201610127539.2A priority patent/CN105758091B/en
Priority to CN201510796663.3A priority patent/CN105222522B/en
Priority to CN201510796450.0A priority patent/CN105222520B/en
Priority to CN201510795232.5A priority patent/CN105222519B/en
Priority to TR2018/08190T priority patent/TR201808190T4/en
Priority to EP15201331.4A priority patent/EP3026378B1/en
Priority to CN201510796557.5A priority patent/CN105241175B/en
Priority to EP15189490.4A priority patent/EP2995892B1/en
Priority to ES15185828.9T priority patent/ES2668348T3/en
Priority to EP15185839.6A priority patent/EP2995890B1/en
Priority to PCT/KR2014/003523 priority patent/WO2014175643A1/en
Priority to EP15185818.0A priority patent/EP2995888B1/en
Priority to EP15201309.0A priority patent/EP3026377B1/en
Priority to CN201610128042.2A priority patent/CN105650998B/en
Priority to CN201510795427.XA priority patent/CN105352261B/en
Priority to EP15185828.9A priority patent/EP2995889B1/en
Priority to CN201480011747.5A priority patent/CN105008833B/en
Priority to EP15201279.5A priority patent/EP3048398B1/en
Priority to CN201510796407.4A priority patent/CN105241154B/en
Priority to US14/786,719 priority patent/US9915471B2/en
Priority to EP15185841.2A priority patent/EP2995891B1/en
Priority to CN201510796498.1A priority patent/CN105222521B/en
Priority to EP14788514.9A priority patent/EP2909548B1/en
Priority to EP15189491.2A priority patent/EP2995893B1/en
Priority to EP15185971.7A priority patent/EP2998670B1/en
Priority to CN201610127404.6A priority patent/CN105605881B/en
Publication of KR20150045255A publication Critical patent/KR20150045255A/en
Priority to US14/930,012 priority patent/US9920980B2/en
Priority to US14/929,978 priority patent/US10036587B2/en
Priority to US14/930,444 priority patent/US9890994B2/en
Priority to US14/929,888 priority patent/US9546812B2/en
Priority to US14/930,091 priority patent/US9528756B2/en
Priority to US14/930,057 priority patent/US9568241B2/en
Priority to US14/929,845 priority patent/US9851139B2/en
Priority to US14/950,466 priority patent/US9920982B2/en
Priority to US14/950,419 priority patent/US9920981B2/en
Priority to US14/950,520 priority patent/US9739526B2/en
Priority to US15/720,989 priority patent/US10184715B2/en
Priority to US15/721,131 priority patent/US10215483B2/en
Priority to US15/721,140 priority patent/US10228187B2/en
Application granted granted Critical
Publication of KR102194275B1 publication Critical patent/KR102194275B1/en

Links

Images

Classifications

    • F—MECHANICAL ENGINEERING; LIGHTING; HEATING; WEAPONS; BLASTING
    • F25—REFRIGERATION OR COOLING; COMBINED HEATING AND REFRIGERATION SYSTEMS; HEAT PUMP SYSTEMS; MANUFACTURE OR STORAGE OF ICE; LIQUEFACTION SOLIDIFICATION OF GASES
    • F25D—REFRIGERATORS; COLD ROOMS; ICE-BOXES; COOLING OR FREEZING APPARATUS NOT OTHERWISE PROVIDED FOR
    • F25D29/00—Arrangement or mounting of control or safety devices
    • F—MECHANICAL ENGINEERING; LIGHTING; HEATING; WEAPONS; BLASTING
    • F25—REFRIGERATION OR COOLING; COMBINED HEATING AND REFRIGERATION SYSTEMS; HEAT PUMP SYSTEMS; MANUFACTURE OR STORAGE OF ICE; LIQUEFACTION SOLIDIFICATION OF GASES
    • F25D—REFRIGERATORS; COLD ROOMS; ICE-BOXES; COOLING OR FREEZING APPARATUS NOT OTHERWISE PROVIDED FOR
    • F25D23/00—General constructional features
    • F25D23/02—Doors; Covers
    • F25D23/028—Details
    • F—MECHANICAL ENGINEERING; LIGHTING; HEATING; WEAPONS; BLASTING
    • F25—REFRIGERATION OR COOLING; COMBINED HEATING AND REFRIGERATION SYSTEMS; HEAT PUMP SYSTEMS; MANUFACTURE OR STORAGE OF ICE; LIQUEFACTION SOLIDIFICATION OF GASES
    • F25D—REFRIGERATORS; COLD ROOMS; ICE-BOXES; COOLING OR FREEZING APPARATUS NOT OTHERWISE PROVIDED FOR
    • F25D25/00—Charging, supporting, and discharging the articles to be cooled
    • F25D25/02—Charging, supporting, and discharging the articles to be cooled by shelves
    • F25D25/024—Slidable shelves
    • F25D25/025—Drawers
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T1/00—General purpose image data processing
    • G06T1/0007—Image acquisition
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00—Image analysis
    • G06T7/10—Segmentation; Edge detection
    • G06T7/11—Region-based segmentation
    • F—MECHANICAL ENGINEERING; LIGHTING; HEATING; WEAPONS; BLASTING
    • F25—REFRIGERATION OR COOLING; COMBINED HEATING AND REFRIGERATION SYSTEMS; HEAT PUMP SYSTEMS; MANUFACTURE OR STORAGE OF ICE; LIQUEFACTION SOLIDIFICATION OF GASES
    • F25D—REFRIGERATORS; COLD ROOMS; ICE-BOXES; COOLING OR FREEZING APPARATUS NOT OTHERWISE PROVIDED FOR
    • F25D2400/00—General features of, or devices for refrigerators, cold rooms, ice-boxes, or for cooling or freezing apparatus not covered by any other subclass
    • F25D2400/36—Visual displays
    • F—MECHANICAL ENGINEERING; LIGHTING; HEATING; WEAPONS; BLASTING
    • F25—REFRIGERATION OR COOLING; COMBINED HEATING AND REFRIGERATION SYSTEMS; HEAT PUMP SYSTEMS; MANUFACTURE OR STORAGE OF ICE; LIQUEFACTION SOLIDIFICATION OF GASES
    • F25D—REFRIGERATORS; COLD ROOMS; ICE-BOXES; COOLING OR FREEZING APPARATUS NOT OTHERWISE PROVIDED FOR
    • F25D2700/00—Means for sensing or measuring; Sensors therefor
    • F25D2700/02—Sensors detecting door opening
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00—Indexing scheme for image analysis or image enhancement
    • G06T2207/10—Image acquisition modality
    • G06T2207/10004—Still image; Photographic image
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00—Indexing scheme for image analysis or image enhancement
    • G06T2207/30—Subject of image; Context of image processing
    • G06T2207/30204—Marker

Landscapes

  • Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • Chemical & Material Sciences (AREA)
  • Combustion & Propulsion (AREA)
  • Mechanical Engineering (AREA)
  • Thermal Sciences (AREA)
  • General Engineering & Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Cold Air Circulating Systems And Constructional Details In Refrigerators (AREA)

Abstract

The invention relates an apparatus for displaying the storage compartment of the refrigerator and a method for control of the same. The apparatus for displaying the storage compartment of the refrigerator in the invention comprises a camera that takes a picture of inside the storage compartment where food is stored; a controller that divides one picture taken by the said camera into multiple images and manages the images; and a display that shows the said images independently.

Description

냉장고의 저장실 표시 장치 및 그 제어 방법{Displaying Apparatus of storage chamber and Controlling Method for the same}DISPLAY APPARATUS AND CONTROLLING METHOD FOR THE SAME [0002]

본 발명은 냉장고의 저장실 표시 장치 및 그 제어 방법에 관한 것으로서, 보다 상세하게는 사용자가 도어를 개방하지 않더라도 냉장고에 저장된 식품에 관한 정보를 제공할 수 있는 냉장고의 저장실 표시 장치 및 그 제어 방법에 관한 것이다.The present invention relates to a storage room display device for a refrigerator and a control method thereof, and more particularly, to a storage room display device for a refrigerator capable of providing information on food stored in a refrigerator even if the user does not open the door will be.

일반적으로 냉장고는 냉동 사이클의 구동에 따라 발생된 냉기를 공급하는 장치로서, 식품을 저온의 상태로 보관하기 위한 장치이다.2. Description of the Related Art Generally, a refrigerator is a device for supplying cold air generated by driving a refrigeration cycle, and is a device for storing food in a low temperature state.

종래의 냉장고의 경우, 단순히 식품을 저온의 상태로 보관하기 위한 기능 만을 수행할 수 있었다. 그러나, 근래에 들어서는 식품 보관 기능외에 추가적인 기능의 필요성이 증가되고 있다.In the case of a conventional refrigerator, only the function of storing food in a low temperature state can be performed. However, in recent years, there is an increasing need for additional functions in addition to the food storage function.

냉장고는 일정 수납물을 수납하여 보관하는 장치로서, 내부를 확인하기 위해서는 냉장고 도어를 열어서 확인하는 수밖에 없다. 또한 사용자가 시장이나 마트에서 물건을 사려고 할 때에 냉장고에 보관된 식품의 양과 종류에 대해서 파악하지 못하는 경우에 동일한 식품을 중복해서 사거나, 필요한 식품을 사지 못하는 불편함이 있었다. The refrigerator is a device for storing and storing a certain object. In order to check the inside of the refrigerator, the refrigerator door must be opened and checked. In addition, when the user tries to buy goods from markets or marts, he or she can not buy the same food or buy necessary food if the amount and type of the food stored in the refrigerator can not be grasped.

따라서 현재는 이러한 사용자의 불편을 해결하기 위한 다양한 연구가 진행되고 있다. Therefore, various studies are currently under way to solve such inconveniences.

본 발명은 상기와 같은 문제점을 해결하기 위한 것으로서, 본 발명은 사용자가 냉장고 도어를 개방하지 않더라도 냉장고에 보관된 식품에 관한 정보를 제공하는 냉장고의 저장실 표시 장치 및 그 제어 방법을 제공하는 것이다.SUMMARY OF THE INVENTION It is an object of the present invention to provide a storage room display device and a control method thereof for providing information on food stored in a refrigerator even if the user does not open the refrigerator door.

또한 본 발명은 사용자에게 냉장고에 저장된 식품에 대한 최신 정보를 제공할 수 있다.Further, the present invention can provide the user with the latest information on the food stored in the refrigerator.

상기 목적을 달성하기 위하여, 본 발명은 냉장고에서 식품이 저장되는 저장실 내부의 사진을 촬영하는 하나의 카메라; 상기 카메라에 의해서 촬영된 하나의 사진(picture)을 복수 개의 이미지(image)로 나누어 관리하는 제어부; 및 상기 복수 개의 이미지를 독립적으로 도시하는 디스플레이;를 포함하고, 상기 저장실은, 선반에 식품이 거치되는 제1영역과, 상기 선반의 하부 공간으로 인입 또는 인출 가능한 드로워의 내측 공간에 의해서 정의되는 제2영역과, 상기 드로워 전방의 바닥에 형성되어, 상기 드로워가 상기 하부 공간으로부터 인출되면 상기 제2영역에 중첩되는 제3영역을 포함하고, 상기 카메라는 상기 제1영역, 상기 제2영역 및 상기 제3영역을 상기 하나의 카메라에 의해서 촬영하는 것을 특징으로 하는 냉장고의 저장실 표시 장치를 제공한다.In order to accomplish the above object, the present invention provides a refrigerator comprising: a camera for photographing a photo inside a storage compartment in which food is stored in a refrigerator; A controller for dividing and managing one picture taken by the camera into a plurality of images; And a display that independently displays the plurality of images, wherein the storage compartment is defined by a first area where food is placed on the shelf and an inner space of the drawer that can be drawn into or withdrawn from the lower space of the shelf And a third region formed on the bottom of the drawer and overlapping with the second region when the drawer is drawn out from the lower space, wherein the camera includes a first region, a second region, Area and the third area are photographed by the one camera.

또한 상기 제어부는, 하나의 사진을 상기 제1영역을 도시하는 제1이미지와, 상기 제2영역을 도시하는 제2이미지 및 상기 제3영역을 도시하는 제3이미지로 구분하는 것이 가능하다.Further, the control section may divide one photograph into a first image showing the first region, a second image showing the second region, and a third image showing the third region.

그리고 상기 제어부는 상기 카메라에 의해서 촬영된 복수 개의 사진 중에 특정 사진을 최종 사진으로 선택할 수 있다.The control unit may select a specific photograph as a final photograph among a plurality of photographs taken by the camera.

물론 상기 제어부는 상기 최종 사진을 영역별로 구획하고, 구획된 이미지를 상기 디스플레이에 제공할 수 있다.Of course, the control unit may divide the final photograph into regions and provide the divided image to the display.

특히 상기 저장실을 개폐하는 도어의 회전각을 감지하는 도어 회전 센서를 더 포함하고, 상기 제어부가 상기 도어의 회전각이 일정 각도 이상이라고 판단하면, 상기 제어부는 상기 카메라가 사진을 촬영하도록 명령하는 것이 가능하다.The controller may further include a door rotation sensor for sensing a rotation angle of the door that opens and closes the storage room, and when the controller determines that the rotation angle of the door is greater than or equal to a predetermined angle, It is possible.

또한 상기 제어부가 상기 도어의 회전각이 일정 각도 이하라도 판단하면, 상기 카메라가 사진 촬영을 종료하도록 명령하고, 상기 제어부는 마지막으로 찍힌 사진을 최종 사진으로 선택해서 제1영역과 제3영역을 업데이트하는 것이 가능하다.If the controller determines that the angle of rotation of the door is less than a predetermined angle, the controller instructs the camera to end photographing, and the controller selects the last photograph as a final picture to update the first area and the third area It is possible to do.

한편 상기 도어가 상기 저장실을 개폐하는지를 감지하는 도어 개폐 센서를 더 포함하고, 상기 제어부가 상기 도어가 개방되었다고 판단하면, 상기 도어 회전 센서가 구동될 수 있다.The controller may further include a door opening / closing sensor for detecting whether the door opens / closes the storage room. When the controller determines that the door is opened, the door rotation sensor may be driven.

나아가 상기 제어부는 상기 드로워가 상기 하부 공간으로 인입되기 시작할 때에 찍힌 사진을 최종 사진으로 선택해서 제2영역을 업데이트하는 것이 가능하다.Further, the control unit may update the second area by selecting a photograph taken when the drawer starts to be drawn into the lower space as a final picture.

또한 상기 드로워의 이동을 감지하는 드로워 센서를 더 포함하고, 상기 드로워 센서는 상기 드로워가 상기 하부 공간으로부터 인출되는 것을 감지할 수 있다.The apparatus further includes a draw sensor for sensing the movement of the drawer, and the draw sensor may sense that the drawer is drawn out from the lower space.

물론 상기 드로워에는 표시된 패턴이 마련되고, 상기 제어부는 상기 카메라에 의해서 촬영된 상기 패턴의 이동을 분석해서 상기 드로워의 이동을 감지할 수 있다.Of course, the pattern may be provided in the drawer, and the control unit may analyze movement of the pattern photographed by the camera to sense the movement of the drawer.

그리고 상기 제어부는, 상기 카메라에서 상기 패턴이 인식되고, 상기 패턴이 정지되며, 상기 패턴이 일정 거리 이상 이동된 때에 찍힌 사진을 최종 사진으로 선택해서 제2영역을 업데이트할 수 있다.The control unit may update the second area by selecting a picture taken when the pattern is recognized by the camera, the pattern is stopped, and the pattern is moved by a predetermined distance or more as a final picture.

한편 상기 제어부는, 상기 카메라에서 상기 패턴이 인식되고, 상기 패턴이 일정 거리 이상 이동되면, 상기 카메라에 의해서 찍힌 사진이 상기 제2영역에 대한 정보를 포함하는 것으로 판단할 수 있다.Meanwhile, the control unit may determine that the photograph taken by the camera includes information on the second area when the pattern is recognized by the camera and the pattern is moved over a certain distance.

또한 상기 저장실의 좌측을 개방하는 좌측 도어와 상기 저장실의 우측을 개방하는 우측 도어를 구비하고, 상기 좌측 도어의 개폐를 감지하는 좌측 도어 개폐 센서 및 상기 우측 도어의 개폐를 감지하는 우측 도어 개폐 센서를 포함하는 냉장고에 대해서, 상기 제어부는 상기 좌측 도어가 개방되면 상기 한 장의 사진의 좌측 부분을 관리하고, 상기 우측 도어가 개방되면 상기 한 장의 사진의 우측 부분을 관리하는 것이 가능하다.A left door opening / closing sensor for sensing the opening / closing of the left door, and a right door opening / closing sensor for sensing opening / closing of the right door, wherein the left door opens to the left side of the storage room and the right door opens to the right side of the storage room. The controller controls the left portion of the one photograph when the left door is opened and the right portion of the one photograph when the right door is opened.

그리고 상기 좌측 도어와 상기 우측 도어가 개방되면, 상기 제어부는 상기 사진의 좌측 및 우측 부분을 관리할 수 있다.When the left door and the right door are opened, the control unit can manage the left and right portions of the photograph.

나아가 상기 디스플레이는 외부 단말기에 설치된 디스플레이부를 포함할 수 있다.Furthermore, the display may include a display unit installed in an external terminal.

그리고 상기 카메라는 소정 시간 간격으로 사진을 촬영하고, 상기 제어부는 각각의 사진에 대해 선택된 특정 이미지를 최종 이미지로 업데이트하는 것이 가능하다.And, the camera captures a picture at predetermined time intervals, and the control unit can update a specific image selected for each picture with a final image.

또한 상기 저장실을 개폐하는 도어의 회전각을 감지하는 도어 회전 센서를 더 포함하고, 상기 제어부에서 상기 도어가 소정 각도 이상 회전된 것으로 판단하면, 상기 제어부는 상기 제1영역에 관한 이미지를 업데이트할 수 있다.The controller may further include a door rotation sensor that senses a rotation angle of the door that opens and closes the storage room. When the controller determines that the door is rotated by a predetermined angle or more, the controller may update the image of the first area have.

그리고 상기 드로워의 이동을 감지하는 드로워 센서를 더 포함하고, 상기 제어부에서 상기 드로워가 상기 하부 공간으로부터 인출된 것으로 판단하면, 상기 제어부는 상기 제2영역에 관한 이미지를 업데이트하는 것이 가능하다.And a draw sensor for detecting the movement of the drawer. When the control unit determines that the drawer is drawn out from the lower space, the control unit can update the image of the second area .

한편 상기 드로워의 이동을 감지하는 드로워 센서를 더 포함하고, 상기 제어부에서 상기 드로워가 상기 하부 공간에 인입된 것으로 판단하면, 상기 제어부는 상기 제3영역에 관한 이미지를 업데이트할 수 있다.The controller may further include an image sensor for sensing movement of the drawer. When the controller determines that the drawer is drawn in the lower space, the controller may update the image of the third area.

또한 본 발명은 도어가 일정 각도 이상 회전되어 저장실을 개방하는지를 감지하는 단계; 하나의 카메라에 의해서, 선반에 식품이 거치되는 제1영역과, 상기 선반의 하부 공간으로 인입 또는 인출 가능한 드로워의 내측 공간에 의해서 정의되는 제2영역과, 상기 드로워 전방의 바닥에 형성되어 상기 드로워가 상기 하부 공간으로부터 인출되면 상기 제2영역에 중첩되는 제3영역을 한 장의 사진으로 촬영하는 단계; 한 장의 사진을 상기 제1영역에 대한 제1이미지와, 상기 제2영역에 대한 제2이미지와, 상기 제3영역에 대한 제3이미지로 구분하는 단계; 상기 제1이미지, 상기 제2이미지 및 상기 제3이미지 중에 적어도 하나를 개별적으로 업데이트하는 단계; 및 업데이트된 이미지를 표시하는 표시 단계;를 포함하는 냉장고의 저장실 표시 장치의 제어 방법을 제공할 수 있다.Further, the present invention provides a method of controlling a refrigerator, comprising: sensing whether a door is rotated by a predetermined angle or more to open a storage compartment; A second area defined by a first area where food is stuck on the shelf and an inner space of a drawer that can be drawn into or withdrawn from the lower space of the shelf by one camera and a second area defined on the floor in front of the drawer Photographing a third area overlapping the second area when the drawer is drawn out from the lower space as a single photograph; Dividing a single photograph into a first image for the first region, a second image for the second region, and a third image for the third region; Updating at least one of the first image, the second image, and the third image separately; And a displaying step of displaying the updated image on the display screen of the storage room of the refrigerator.

또한 상기 드로워가 열린 후에 상기 드로워가 닫히기 시작하는 지를 판단하는 제1판단 단계를 더 포함하고, 상기 제1판단 단계 후에 한 장의 사진을 촬영하는 것이 가능하다.And a first determining step of determining whether the drawer starts to be closed after the drawer is opened, and it is possible to take a single picture after the first determining step.

그리고 상기 제1판단 단계 후에 찍힌 사진을 최종 사진으로 선택하는 것이 가능하다.It is also possible to select a photograph taken after the first judgment step as a final photograph.

물론 상기 업데이트 하는 단계에서는 상기 제2이미지를 업데이트할 수 있다.Of course, the updating step may update the second image.

또한 상기 도어가 닫히기 직전인 지를 판단하는 제2판단 단계를 더 포함하고, 상기 제2판단 단계 후에 한 장의 사진을 촬영할 수 있다.Further comprising a second determining step of determining whether the door is just before the door is closed, and taking one picture after the second determining step.

나아가 상기 제2판단 단계 후에 찍힌 사진을 최종 사진으로 선택하는 것이 가능하다.Furthermore, it is possible to select a picture taken after the second determination step as a final picture.

그리고 상기 업데이트하는 단계에서는 상기 제1이미지 및 제3이미지를 업데이트할 수 있다.And updating the first image and the third image in the updating step.

본 발명에 따르면, 사용자가 냉장고에 저장된 식품에 관한 정보를 얻기 위해 도어를 개방할 필요가 없어서, 저장실에 수용된 냉기가 누설되는 것을 막을 수 있다. 따라서 불필요한 냉기 손실을 막아서 냉장고의 에너지 효율을 향상시킬 수 있다.According to the present invention, it is not necessary for the user to open the door to obtain information on the food stored in the refrigerator, so that the cold air contained in the storage chamber can be prevented from leaking. Therefore, it is possible to prevent unnecessary loss of cold air, thereby improving the energy efficiency of the refrigerator.

또한 본 발명에서는 사용자에게 냉장고에 저장된 식품에 관한 최신 정보를 제공할 수 있기 때문에, 사용자에게 제공되는 식품 정보에 대한 신뢰도가 향상될 수 있다.In addition, since the present invention provides the user with the latest information on the food stored in the refrigerator, the reliability of the food information provided to the user can be improved.

또한 본 발명에서는 하나의 카메라에 의해서 다양한 위치에 보관된 식품에 관한 정보를 제공할 수 있기 때문에, 하나의 카메라를 설치하기 위한 구조만이 부가될 뿐이어서, 설계가 용이하게 이루어질 수 있다. 특히 카메라 사용으로 인해 발생되는 비용을 줄일 수 있다.In addition, since the present invention can provide information on foods stored in various locations by a single camera, only a structure for installing one camera is added, so that the design can be easily performed. In particular, the cost of using the camera can be reduced.

도 1은 본 발명에 따른 냉장고의 정면도.
도 2는 도 1에서 도어가 개방된 도면.
도 3은 저장실의 바닥에 배치되는 제3영역을 도시한 도면.
도 4는 본 발명에 따른 제어 블록도.
도 5는 카메라의 화각을 설명한 도면.
도 6은 도 5의 측단면도.
도 7은 도 6의 상태에서 카메라에 찍힌 화면을 도시한 도면.
도 8은 냉장고의 요부를 도시한 단면도.
도 9는 드로워에 패턴이 표시된 상태를 도시한 도면.
도 10(a)는 좌우측 드로워가 인출된 상태를 촬영한 사진을 도시한 도면.
도 10(b)는 좌측 드로워는 인입되고, 우측 드로워는 인출된 상태를 도시한 도면.
도 11은 사용자에게 제공되는 화면.
도 12는 본 발명의 일 실시예에 따른 제어 흐름도.
도 13은 도 12의 변형례를 설명한 제어 흐름도.
도 14는 도 13의 다른 변형례를 설명한 제어 흐름도.
도 15는 도 12의 다른 변형례를 설명한 제어 흐름도.
도 16은 본 발명의 다른 실시예에 따른 제어 흐름도.1 is a front view of a refrigerator according to the present invention;
Figure 2 shows the door open in Figure 1;
Figure 3 shows a third area disposed at the bottom of the storage compartment;
4 is a control block diagram according to the present invention;
5 is a view for explaining an angle of view of a camera;
Fig. 6 is a side sectional view of Fig. 5; Fig.
FIG. 7 is a view showing a screen taken on the camera in the state of FIG. 6; FIG.
8 is a cross-sectional view showing a substantial part of a refrigerator.
9 is a view showing a state in which a pattern is displayed on a drawer;
Fig. 10 (a) is a photograph showing a state in which the left and right drawers are drawn out. Fig.
10 (b) shows a state in which the left drawer is drawn and the right drawer is drawn.
11 is a screen provided to a user;
12 is a control flow diagram according to an embodiment of the present invention;
13 is a control flowchart for explaining a modification of Fig.
14 is a control flowchart for explaining another modification of Fig.
15 is a control flowchart for explaining another modification of Fig.
16 is a control flow diagram according to another embodiment of the present invention.

이하 상기의 목적을 구체적으로 실현할 수 있는 본 발명의 바람직한 실시예를 첨부한 도면을 참조하여 설명한다.DETAILED DESCRIPTION OF THE PREFERRED EMBODIMENTS Hereinafter, preferred embodiments of the present invention will be described with reference to the accompanying drawings.

이 과정에서 도면에 도시된 구성요소의 크기나 형상 등은 설명의 명료성과 편의상 과장되게 도시될 수 있다. 또한, 본 발명의 구성 및 작용을 고려하여 특별히 정의된 용어들은 사용자, 운용자의 의도 또는 관례에 따라 달라질 수 있다. 이러한 용어들에 대한 정의는 본 명세서 전반에 걸친 내용을 토대로 내려져야 한다.The sizes and shapes of the components shown in the drawings may be exaggerated for clarity and convenience. In addition, terms defined in consideration of the configuration and operation of the present invention may be changed according to the intention or custom of the user, the operator. Definitions of these terms should be based on the content of this specification.

도 1은 본 발명에 따른 냉장고의 정면도이고, 도 2는 도 1에서 도어가 개방된 도면이다. 이하 도 1 및 도 2를 참조해서 설명한다.FIG. 1 is a front view of a refrigerator according to the present invention, and FIG. 2 is a door opened in FIG. This will be described below with reference to Figs. 1 and 2. Fig.

본 발명에 따른 냉장고는 식품이 저장되는 저장실인 냉동실과 냉장실이 상/하로 구획되어 냉동실이 냉장실의 상측에 배치되는 탑 마운트 타입(Top Mount-Type)과, 냉동실과 냉장실이 좌/우측으로 구획된 사이드 바이 사이드 타입(Side By Side-Type)의 냉장고에도 동일하게 적용가능하다. The refrigerator according to the present invention includes a top mount type in which a freezing compartment and a refrigerating compartment in which food is stored are divided into upper and lower portions and a freezing compartment is disposed on the upper side of the refrigerating compartment; The present invention is equally applicable to a side-by-side refrigerator.

다만 본 실시예에서는 설명의 편의상 냉동실과 냉장실이 상/하로 구획되고 냉동실이 냉장실의 하측에 배치되는 바텀 프리져 타입(Bottom Freezer-Type)을 중심으로 설명한다. However, in the present embodiment, a bottom freezer-type in which the freezing compartment and the refrigerating compartment are partitioned upward / downward for convenience of explanation and the freezing compartment is disposed on the lower side of the refrigerating compartment will be mainly described.

냉장고의 본체는 외부에서 사용자가 보았을 때에 전체적인 외관을 형성하는 아우터 케이스(10)와 내부에 식품이 보관되는 저장실(22)을 형성하는 인너 케이스(12)를 포함한다. 상기 아우터 케이스(10)와 상기 인너 케이스(12)의 사이에는 소정의 공간이 형성되어 냉기가 순환되는 통로 등이 형성될 수 있다. 한편 상기 아우터 케이스(10)와 상기 인너 케이스(12)의 사이에는 단열재가 충진되어서 상기 저장실(22)의 내부가 외부에 비해서 상대적으로 저온을 유지할 수 있다.The main body of the refrigerator includes an outer case 10 that forms an overall appearance when viewed from the outside and an inner case 12 that forms a storage room 22 in which food is stored. A predetermined space may be formed between the outer case 10 and the inner case 12 to form a passage through which cool air is circulated. Meanwhile, a space between the outer case 10 and the inner case 12 is filled with a heat insulating material, so that the inside of the storage chamber 22 can be maintained at a relatively low temperature as compared with the outside.

또한 상기 아우터 케이스(10)와 상기 인너 케이스(12)의 사이 공간에 형성된 기계실(미도시)에는 냉매를 순환시켜 냉기를 발생시키는 냉매사이클장치가 설치된다. 냉매사이클장치를 이용해 냉장고 내부를 저온으로 유지하여 보관하는 식품류의 신선도를 유지될 수 있다. 냉매사이클장치는 냉매를 압축하는 압축기, 액체상태의 냉매를 기체상태로 상변환시켜 외부와 열교환이 이루어지게 하는 증발기(미도시) 등을 포함한다.A refrigerant cycle device for circulating a refrigerant to generate cold air is installed in a machine room (not shown) formed between the outer case 10 and the inner case 12. By using the refrigerant cycle device, the freshness of the foodstuff can be maintained while keeping the inside of the refrigerator at a low temperature. The refrigerant cycle device includes a compressor for compressing a refrigerant, an evaporator (not shown) for phase-converting refrigerant in a liquid state into a gaseous state to cause heat exchange with the outside, and the like.

냉장고에는 저장실을 개폐하는 도어(20, 30)가 구비된다. 이때 도어는 각각 냉동실 도어(30) 및 상기 냉장실 도어(20)를 포함할 수 있고, 각각의 도어는 그 일단이 힌지에 의해서 냉장고의 본체에 회동가능하게 설치된다. 상기 냉동실 도어(30) 및 상기 냉장실 도어(20)는 복수 개로 이루어질 수 있다. 즉 도 2에 도시된 바와 같이, 상기 냉장실 도어(20) 및 상기 냉동실 도어(30)는 전방을 향해서 냉장고의 양 모서리를 중심으로 개방되는 형태로 설치될 수 있다. The refrigerator is provided with doors (20, 30) for opening and closing the storage room. At this time, each of the doors may include a freezing chamber door 30 and the refrigeration chamber door 20, and one end of each door is rotatably installed to the main body of the refrigerator by a hinge. The freezer compartment door 30 and the refrigerator compartment door 20 may have a plurality of openings. That is, as shown in FIG. 2, the refrigerator compartment door 20 and the freezer compartment door 30 may be installed so as to open toward both corners of the refrigerator toward the front.

상기 저장실(22)의 하단에는 베리어(Barrier)(60)가 설치되어, 상기 냉동실과 상기 냉장실을 구분할 수 있다. 상기 베리어(16)는 소정의 두께로 이루어져, 상기 인너 케이스(12)에 형성될 수 있다. 상기 베리어(16)는 수평방향으로 연장될 수 있다.A barrier 60 is provided at the lower end of the storage compartment 22 to separate the freezing compartment from the refrigerating compartment. The barrier 16 may have a predetermined thickness and may be formed on the inner case 12. The barrier 16 may extend in the horizontal direction.

상기 저장실(22)에는 상측에 식품이 거치되는 선반(40)을 포함할 수 있다. 이때 상기 선반(40)은 복수 개가 마련되고, 각각의 선반(40)에는 식품이 거치될 수 있다. 상기 선반(40)은 상기 저장실의 내부를 수평 방향으로 구획할 수 있다.The storage room (22) may include a shelf (40) on which food is placed. At this time, a plurality of shelves (40) are provided, and food can be mounted on each shelf (40). The shelf 40 can divide the inside of the storage compartment horizontally.

상기 저장실(22)에는 인입 또는 인출이 가능한 드로워(50)가 설치된다. 상기 드로워(50)에는 식품 등이 수용되어 보관된다. 상기 드로워(40)는 상기 저장실(22) 내에 좌우측으로 두 개가 배치되는 것이 가능하다. 사용자는 좌측에 배치되는 드로어에 접근하기 위해서는 상기 저장실(22)의 좌측 도어를 개방할 수 있다. 반면에 사용자가 우측에 배치되는 드로워에 접근하기 위해서는 상기 저장실(22)의 우측 도어를 개방할 수 있다. The storage chamber 22 is provided with a drawer 50 which can be drawn in or drawn out. Food and the like are received and stored in the drawer (50). Two of the drawers 40 may be disposed in the storage chamber 22 to the left and right. The user may open the left door of the storage room 22 to approach the drawer disposed on the left side. On the other hand, the user may open the right door of the storage compartment 22 to access the drawer disposed on the right side.

또한 본 발명은 상기 저장실(22) 내부의 사진을 촬영하는 하나의 카메라(70)를 포함할 수 있다. 이때 상기 카메라(70)는 고정된 위치를 유지하도록 마련되어서, 동일한 부분을 촬영하는 것이 가능하다. In addition, the present invention may include one camera 70 for photographing the inside of the storage room 22. [ At this time, the camera 70 is provided to keep the fixed position, and it is possible to photograph the same part.

특히 상기 카메라(70)는 상기 인너 케이스(12)의 상측벽에 아래를 향하도록 설치되어서, 상기 저장실(22)에 저장된 식품에 대한 평면 사진을 촬영할 수 있다.Particularly, the camera 70 is installed on the upper side wall of the inner case 12 so as to face downward, and can take a plane photograph of food stored in the storage room 22.

이때 상기 저장실(22)은 상기 선반(40)에 식품이 거치되는 제1영역(42), 상기 드로워(50)의 내측 공간에 의해서 정의되는 제2영역(52) 및 상기 드로워(50)가 인출되면 상기 제2영역(52)에 중첩되는 제3영역(62)을 포함할 수 있다. 이 부분에 대해서는 이후에 보다 상세하게 설명한다. At this time, the storage compartment 22 includes a first area 42 in which food is placed on the shelf 40, a second area 52 defined by the inner space of the drawer 50, And a third region 62 overlapped with the second region 52 when the first region 62 is drawn out. This part will be described in more detail later.

상기 제1영역(42), 상기 제2영역(52) 및 상기 제3영역(62)은 상기 저장실(22) 내에서 전체적으로 높낮이를 달리할 수 있다. 즉 상기 제1영역(42), 상기 제2영역(52) 및 상기 제3영역(62)의 순서로 낮아질 수 있다. The first region 42, the second region 52, and the third region 62 may have different elevations in the storage chamber 22 as a whole. That is, the first region 42, the second region 52, and the third region 62 in this order.

상기 카메라(70)에서 촬영된 사진이나 냉장고에 관한 다양한 정보는 냉장고의 전면에 마련되는 디스플레이(14)를 통해서 사용자에게 제공될 수 있다. 또한 사용자는 상기 디스플레이(14)를 통해서 냉장고에 관한 제어를 수행할 수 있다. The photographs taken by the camera 70 or various information about the refrigerator can be provided to the user through the display 14 provided on the front of the refrigerator. The user can also control the refrigerator through the display 14.

도 3은 저장실의 바닥에 배치되는 제3영역을 도시한 도면이다. 이하 도 3을 참조해서 설명한다.3 is a view showing a third region disposed at the bottom of the storage chamber. This will be described below with reference to Fig.

상기 베리어(60)에는 함몰된 부분을 마련해서, 해당 부분에 식품이 저장될 수 있고, 이러한 영역을 상기 제3영역(62)이라고 칭한다. The barrier 60 is provided with a depressed portion, and the food can be stored in the portion, and this region is referred to as the third region 62.

상기 제3영역(62)에는 달걀과 같은 밀폐가 필요한 식품이 저장되는 것이 가능한데, 이를 위해서 상기 제3영역(62)을 개폐하는 커버(68)를 구비하는 것이 가능하다. 이때 상기 커버(68)는 투명한 재질로 이루어져서, 상기 카메라(70)가 상측에서 촬영을 할 때에 상기 커버(68)가 가리더라도, 상기 제3영역(62)에 저장된 식품을 촬영할 수 있는 것이 바람직하다.In the third region 62, it is possible to store a food requiring sealing such as an egg. For this purpose, it is possible to provide a cover 68 for opening and closing the third region 62. It is preferable that the cover 68 is made of a transparent material so that the food stored in the third region 62 can be photographed even if the cover 68 is covered when the camera 70 photographs from above .

한편 상기 베리어(60)의 상측에는 상기 드로워(50)가 배치되게 된다. 따라서 상기 드로워(50)가 선반의 하부 공간으로 인입된 상태에서는 상기 제3영역(62)에 사용자가 접근할 수 있다. On the other hand, the drawer 50 is disposed above the barrier 60. Therefore, the user can access the third area 62 when the drawer 50 is drawn into the lower space of the shelf.

반면에 상기 드로워(50)가 선반의 하부 공간으로부터 인출된 상태에서는 상기 제3영역(62)의 상측에 상기 드로워(50)가 배치되게 되고, 사용자는 상기 제3영역(62)에 접근할 수 없다. On the other hand, in a state in which the drawer 50 is drawn out from the lower space of the shelf, the drawer 50 is arranged above the third area 62, and the user approaches the third area 62 Can not.

도 4는 본 발명에 따른 제어 블록도이다. 이하 도 4를 참조해서 설명한다. 4 is a control block diagram according to the present invention. This will be described below with reference to Fig.

본 발명은 상기 카메라(70)에 의해서 촬영된 하나의 사진을 복수 개의 이미지로 나누어 관리하는 제어부(100)를 포함한다. 이때 이미지는 상기 제어부(100)에 의해서 가공 또는 보정된 사진의 일부분을 의미하는 것이 가능하다. The present invention includes a control unit (100) for dividing and managing one photograph taken by the camera (70) into a plurality of images. At this time, the image may be a part of the photograph that has been processed or corrected by the control unit 100.

상기 제어부(100)는 상기 카메라(70)에서 사진을 촬영하도록 명령할 수 있고, 상기 카메라(70)에서 촬영된 사진을 전송받을 수 있다.The control unit 100 may instruct the camera 70 to take a picture and receive a picture taken by the camera 70. [

또한 상기 제어부(100)는 나누어진 이미지의 일부를 상기 디스플레이(14)에 제공해서, 사용자에게 상기 저장실(22)에 저장된 식품에 관한 최신 정보를 제공할 수 있다. 이때 상기 디스플레이(14)는 냉장고의 전면에 설치되는 것도 가능하고, 냉장고로부터 분리된 별도의 장치를 이루는 것도 가능하다. 즉 사용자는 핸드폰과 같은 외부 통신 단말기를 통해서 상기 저장실(22)에 관한 이미지를 전송받고, 정보를 획득하는 것이 가능하다.The controller 100 may also provide a portion of the divided image to the display 14 to provide the user with up-to-date information about the food stored in the storage room 22. At this time, the display 14 may be installed on the front surface of the refrigerator or may be a separate device separated from the refrigerator. That is, the user can receive the image of the storage room 22 through the external communication terminal such as a mobile phone and obtain the information.

특히 상기 제어부(100)는 선택된 사진을 복수 개의 이미지로 나누고, 해당 이미지를 상기 디스플레이(14)에 제공하는 것이 가능하다. 이때 상기 제어부(100)는 상기 카메라(70)에 의해서 찍힌 다수 개의 사진 중에 특정 사진을 선택하고, 해당 사진을 복수 개의 이미지로 구분해서 상기 디스플레이(14)에 제공할 수 있다. 이때 상기 제어부(100)에 의해서 선택되는 사진은 사용자가 마지막으로 상기 저장실(22)에 접근해서 식품의 종류를 변화시킨 내용에 관한 정보를 포함할 수 있다.In particular, the controller 100 divides the selected photograph into a plurality of images, and provides the image to the display 14. At this time, the controller 100 may select a specific photograph among a plurality of photographs taken by the camera 70, divide the photograph into a plurality of images, and provide the selected photograph to the display 14. At this time, the photograph selected by the controller 100 may include information about the content of the food that has been changed by the user to approach the storage room 22 last.

본 발명은 상기 도어(20)가 상기 저장실(22)을 개폐하는지 감지할 수 있는 도어 개폐 센서(110)를 포함할 수 있다. 이때 상기 도어 개폐 센서(110)는 상기 아우터 케이스(10)에 마련되어서, 상기 아우터 케이스(10)에 상기 도어(20)가 접촉하게 되면 상기 도어(20)가 상기 저장실(22)을 밀폐하는 것으로 감지할 수 있다. 또한 상기 아우터 케이스(10)에 상기 도어(20)가 접촉하지 않으면, 상기 도어(20)가 상기 저장실(22)을 개방하는 것으로 감지할 수 있다. The present invention may include a door opening / closing sensor 110 for detecting whether the door 20 is opened or closed. The door opening and closing sensor 110 is provided in the outer case 10 so that the door 20 seals the storage compartment 22 when the door 20 is brought into contact with the outer case 10 Can be detected. Also, if the door 20 is not in contact with the outer case 10, the door 20 can be detected as opening the storage compartment 22.

또한 본 발명은 상기 도어(20)의 회전각을 감지하는 도어 회전 센서(120)를 포함할 수 있다. 이때 상기 도어 회전 센서(120)는 상기 도어(20)의 회전 방향 및 상기 도어(20)의 회전 각도를 감지할 수 있다. 예를 들어, 상기 도어(20)가 일정 각도 이상 회전하게 되면 상기 도어 회전 센서(120)에 변화가 발생해서, 상기 도어 회전 센서(120)에서 상기 도어(20)가 일정 각도 이상 회전된 것을 감지할 수 있다. 또한 상기 도어(20)가 특정 방향으로 회전되면 방향에 따라 발생되는 펄스의 변화 패턴을 감지해서 상기 도어(20)의 회전 방향을 감지하는 것이 가능하다. 물론 상기 도어 회전 센서(120)는 상술한 방식 이외에 다양한 형태로 변형될 수 있다. In addition, the present invention may include a door rotation sensor 120 for sensing a rotation angle of the door 20. At this time, the door rotation sensor 120 may sense the rotation direction of the door 20 and the rotation angle of the door 20. For example, when the door 20 rotates more than a predetermined angle, the door rotation sensor 120 changes and the door rotation sensor 120 detects that the door 20 is rotated by a predetermined angle or more can do. Further, when the door 20 is rotated in a specific direction, it is possible to sense the direction of rotation of the door 20 by sensing a pulse change pattern generated according to the direction. Of course, the door rotation sensor 120 may be modified into various forms other than the above-described method.

특히 상기 도어 회전 센서(120)는 상기 도어 개폐 센서(110)에서 상기 도어(20)가 상기 저장실(22)을 개방한 것으로 판단되는 경우에 한해서 구동될 수 있다. In particular, the door rotation sensor 120 may be driven only when the door opening / closing sensor 110 determines that the door 20 has opened the storage compartment 22.

상기 카메라(70)는 촬영을 시작하게 되면, 소정 간격으로 계속해서 사진을 촬영하는 것도 가능하다. 즉 상기 도어 회전 센서(120)에서 상기 도어(20)가 일정 각도 만큼 개방된 것으로 판단하면 상기 카메라(70)에서는 한 장의 사진이 아닌, 사진 촬영 중지 명령이 제공될 때까지 계속 사진을 촬영하는 것이 가능하다. When the photographing of the camera 70 is started, it is also possible to continuously photograph a photograph at a predetermined interval. That is, if it is determined by the door rotation sensor 120 that the door 20 is opened by a predetermined angle, the camera 70 continuously photographs the photograph until the photographing stop instruction is provided It is possible.

본 발명은 상기 드로워(50)의 인출 또는 인입 여부를 감지하는 드로워 센서(130)를 포함할 수 있다. 상기 드로워 센서(130)는 상기 드로워(50)의 이동은 물론, 상기 드로워(50)의 이동 방향까지 감지하는 것이 가능하다. 이를 위해서 상기 드로워 센서(130)는 복수 개의 홀센서와 같은 형태로 이루어질 수 있다.The present invention may include a draw sensor 130 for detecting whether the drawer 50 is drawn or drawn. The drop sensor 130 can sense the movement of the drawer 50 as well as the movement of the drawer 50. For this, the draw sensor 130 may be formed in the same shape as a plurality of Hall sensors.

상기 카메라(70)에서 찍힌 사진은 저장부(18)에 저장될 수 있다. 이때 상기 저장부(18)는 냉장고에 마련될 수도 있고, 냉장고와는 별도의 다른 장치에 마련될 수 있다. 이때 상기 저장부(18)는 상기 디스플레이(14)와 함께 냉장고에 배치되거나, 상기 디스플레이(14)와 함께 냉장고와는 다른 장치에 구비될 수 있다.The photograph taken by the camera 70 may be stored in the storage unit 18. At this time, the storage unit 18 may be provided in a refrigerator or in another device separate from the refrigerator. At this time, the storage unit 18 may be disposed in the refrigerator together with the display 14, or may be provided in an apparatus other than the refrigerator together with the display 14.

도 5는 카메라의 화각을 설명한 도면이다. 이하 도 5를 참조해서 설명한다. 도 5에서는 설명의 편의를 위해서 상기 드로워(50)는 인출되어서 상기 카메라(70)가 상기 제3영역(62)을 촬영할 수 있고, 선반은 생략한 도면이다.5 is a view for explaining the angle of view of the camera. This will be described below with reference to FIG. In FIG. 5, for convenience of explanation, the drawer 50 is taken out so that the camera 70 can photograph the third area 62, and the shelf is omitted.

상기 카메라(70)는 상기 인너 케이스(12)의 상측벽에 상기 인너 케이스(12)의 후방 벽을 향해서 기울어지도록 배치될 수 있다.The camera 70 may be disposed on the upper wall of the inner case 12 so as to be inclined toward the rear wall of the inner case 12. [

한편 상기 카메라(70)에서 촬영된 사진은 상기 저장실(22)의 폭 방향에 따른 수평 화각(angle of view)과 전후 방향에 따른 수직 화각(angle of view)을 가질 수 있다. On the other hand, the photograph taken by the camera 70 may have a horizontal angle of view along the width direction of the storage room 22 and a vertical angle of view along the forward and backward directions.

이때 상기 카메라(70)에 따른 수평 화각은 두 개의 드로워(50)가 인출된 상태에서 두 개의 드로워(50)의 내측 공간 즉 상기 제3영역(62)에 저장된 식품이 보일 수 있도록 마련되는 것이 바람직하다. At this time, the horizontal viewing angle of the camera 70 is set so that the food stored in the inner space of the two drawers 50, that is, the food in the third area 62, can be seen while the two drawers 50 are drawn out .

도 6은 도 5의 측단면도이며, 도 7은 도 6의 상태에서 카메라에 찍힌 화면을 도시한다. 이하 도 6 내지 도 7을 참조해서 설명한다.Fig. 6 is a side sectional view of Fig. 5, and Fig. 7 is a view taken on the camera in the state of Fig. This will be described below with reference to Figs. 6 to 7. Fig.

상기 카메라(70)는 상기 인너 케이스(12)에 설치된다. 이때 상기 인너 케이스(12)는 상기 저장실(22)의 내측을 향해서 소정 길이 만큼 돌출형성된 돌출부(17)을 구비할 수 있다. The camera (70) is installed in the inner case (12). At this time, the inner case 12 may have a protrusion 17 protruding toward the inside of the storage chamber 22 by a predetermined length.

상기 인너 케이스(12)와 상기 아우터 케이스(10)의 사이에는 단열재가 충진되는데, 충분한 단열을 확보하기 위해서는 단열재가 일정 두께 이상이 유지되어야 한다. 따라서 본 발명에서는 상기 카메라(70)가 상기 저장실(22) 쪽으로 튀어나온 상기 돌출부(17)에 설치되어서, 상기 카메라(70)가 설치된 부분에서도 단열을 위한 단열재의 두께를 확보할 수 있다.A heat insulating material is filled between the inner case 12 and the outer case 10. In order to secure sufficient heat insulation, the heat insulating material must be maintained at a certain thickness or more. Therefore, in the present invention, the camera 70 is installed on the projecting portion 17 protruding toward the storage room 22, so that the thickness of the heat insulating material for insulation can be secured even in the portion where the camera 70 is installed.

한편 상기 인너 케이스(12)에는 상기 저장실(22)에 사용자가 접근할 수 있도록 전방에 개구부(14)가 형성된다. 도어가 상기 개구부(14)를 개폐할 수 있다. Meanwhile, the inner case 12 is provided with an opening 14 at a front thereof so that the user can access the storage room 22. So that the door can open and close the opening 14.

상기 카메라(70)는 상기 개구부(14)와 상기 선반(40)의 일단의 사이의 범위(l) 내에 설치되는 것이 바람직하다. 상기 카메라(70)는 상기 제1영역, 상기 제2영역(52) 및 상기 제3영역(62)에 대한 사진을 촬영해야 하기 때문에, 상기 선반(40)의 일단 보다 상기 인너 케이스(12)의 후벽으로 이동될 수 없다. The camera 70 is preferably installed within a range 1 between the opening 14 and one end of the shelf 40. The camera 70 is required to take a picture of the first area 52 and the third area 62 so that the camera 70 can take a picture of the first area 52, It can not be moved to the rear wall.

또한 상기 카메라(70)가 상기 개구부(14)를 벗어나도록 배치되면, 상기 도어(20)는 상기 개구부(14)를 밀폐할 수 없다. 따라서 상기 카메라(70)는 특정 범위(l)에 설치되는 것이 바람직하다. Also, if the camera 70 is disposed to be out of the opening 14, the door 20 can not seal the opening 14. [ Therefore, it is preferable that the camera 70 is installed in a specific range (1).

도 6에서는 상기 카메라(70)의 수직 화각을 도시하는데, 수직 화각의 일단은 상기 드로워(50)의 일단까지 촬영할 수 있도록 배치되는 것이 바람직하다. 6 shows a vertical angle of view of the camera 70. It is preferable that one end of the vertical angle of view is disposed so as to be able to photograph up to one end of the drawer 50. [

도 7에서와 같이 상기 카메라(70)에서는 한 장의 사진으로 상기 제1영역(42) 및 상기 제2영역(52)에 대한 사진을 촬영할 수 있다. 이때 상기 카메라(70)는 좌우측에 배치된 상기 드로워(50)의 양측에 대한 사진을 촬영할 수 있다. As shown in FIG. 7, the camera 70 can take a picture of the first area 42 and the second area 52 with a single photograph. At this time, the camera 70 can take pictures of both sides of the drawer 50 disposed on the right and left sides.

도 8은 냉장고의 요부를 도시한 단면도이다. 이하 도 8을 참조해서 설명한다. 8 is a cross-sectional view showing a substantial part of the refrigerator. This will be described below with reference to FIG.

상기 도어(20)의 내측에는 식품을 저장할 수 있는 바스켓(21)이 구비될 수 있다. 상기 바스켓(21)은 상기 도어(20)가 상기 저장실(22)을 바라보는 면에 설치될 수 있다.A basket (21) capable of storing food can be provided inside the door (20). The basket (21) may be installed on a surface of the door (20) facing the storage room (22).

상기 카메라(70)가 촬영한 사진에 상기 바스켓(21)이 도시된다는 문제가 있을 수 있다. 따라서 본 발명에서는 상기 도어 회전 센서(120)를 통해서 상기 도어(20)가 일정 각도(θ) 이상 회전되었는지를 감지해서, 상기 카메라(70)를 통해서 사진을 촬영할 수 있다.There may be a problem that the basket 21 is shown on a photograph taken by the camera 70. [ Accordingly, in the present invention, the door rotation sensor 120 detects whether the door 20 is rotated by a predetermined angle or more, and photographs the camera through the camera 70.

이때 일정 각도(θ)는 상기 카메라(70)가 사진을 촬영할 때에 해당 사진에 상기 바스켓(21)이 나타나지 않을 수 있는 각도를 의미할 수 있고, 이러한 일정 각도(θ)는 상기 바스켓(21)의 길이에 따라 달라질 수 있다. The predetermined angle? May be an angle at which the basket 21 may not be displayed on the picture when the camera 70 photographs the picture. The predetermined angle? It depends on the length.

도 9는 드로워에 패턴이 표시된 상태를 도시한 도면이다. 이하 도 9를 참조해서 설명한다. 9 is a diagram showing a state in which a pattern is displayed on a drawer. This will be described below with reference to FIG.

상기 드로워(50)에는 다양한 형태의 패턴(흑백의 색깔을 가지는 무늬)이 마련될 수 있다. 상기 카메라(70)는 촬영된 사진을 통해서 상기 패턴의 이동을 분석해서, 상기 드로워(50)의 이동 여부 및 이동 방향을 판독할 수 있다. 이때 상기 패턴을 통한 분석은 상기 제어부(100)에서 이루어지는 것이 가능하다.The drawer 50 may be provided with various types of patterns (patterns having black and white colors). The camera 70 can analyze the movement of the pattern through the photographed photograph, and can read whether the drawer 50 is moved or moved. At this time, the analysis through the pattern can be performed in the control unit 100.

도 9에서는 패턴이 카메라의 형상을 간략화한 이미지와, '스마트 센서'라는 글자를 포함하고 있다. 한편 상기 패턴은 다양한 형태의 무늬를 포함할 수 있고, 흑백이 서로 교차되는 형태로 마련되어서, 상기 카메라(70)에서 인식가능하도록 할수 있다. In Fig. 9, the pattern includes an image in which the shape of the camera is simplified and a character called " smart sensor ". On the other hand, the pattern may include patterns of various shapes, and black and white may be provided so as to intersect with each other, so that the pattern can be recognized by the camera 70.

이때 패턴은 상기 카메라(70)에서 인식이 가능하도록, 상기 드로워(50)의 전면 상측에 표시되는 것이 가능하다. At this time, the pattern can be displayed on the front side of the drawer 50 so that the pattern can be recognized by the camera 70.

도 10(a)는 좌우측 드로워가 인출된 상태를 촬영한 사진을 도시한 도면이고, 도 10(b)는 좌측 드로워는 인입되고, 우측 드로워는 인출된 상태를 도시한 도면이다. 이하 도 10(a) 및 도 10(b)를 참조해서 설명한다.Fig. 10 (a) is a photograph showing a state in which the left and right drawers are drawn out, Fig. 10 (b) is a drawing showing a state in which the left drawer is drawn and the right drawer is drawn. This will be described below with reference to Figs. 10 (a) and 10 (b).

도 10에서 상기 패턴은 상기 드로워(50)의 상측 가운데 측에 마련되고, 물결 형태의 무늬를 이루는 예가 도시되어 있다.In Fig. 10, the pattern is provided on the upper side of the upper side of the drawer 50, and shows an example of a wavy pattern.

상기 카메라(70)에 의해서 촬영된 한 장의 사진에는 상기 제1영역(42)이 표현될 수 있다. 또한 한 장의 사진에는 상기 제2영역(52) 또는 상기 제3영역(62) 중에 하나가 도시될 수 있다. The first area 42 may be represented in a photograph taken by the camera 70. [ In addition, one of the second region 52 and the third region 62 may be shown in one photograph.

즉 도 10(a)에서와 같이 좌우측 드로워가 인출된 상태에서 촬영된 사진에는 좌우측에 배치된 상기 제1영역(42)과 좌우측에 배치된 상기 제2영역(52)이 도시된다.That is, as shown in FIG. 10 (a), photographs taken in the state in which the left and right drawers are drawn out show the first region 42 disposed on the left and right sides and the second region 52 disposed on the left and right sides.

반면에 도 10(b)에서와 같이 우측 드로워만 인출된 상태에서 촬영된 사진에는 좌우측에 배치된 상기 제1영역(42)과 좌측의 제3영역(62) 및 우측의 제2영역(52)이 도시될 수 있다.On the other hand, as shown in FIG. 10 (b), the first region 42 and the left third region 62 and the right second region 52 Can be shown.

즉 상기 드로워(50)가 인출되면 사진에서 상기 제3영역(62)은 도시되지 않고 상기 제2영역이 도시된다. 반면에 상기 드로워(50)가 인입되면 사진에서 상기 제2영역(52)은 도시되지 않고 상기 제3영역(62)이 도시된다.That is, when the drawer 50 is drawn out, the third region 62 is not shown in the photograph but the second region is shown. On the other hand, when the drawer 50 is drawn in, the second region 52 is not shown in the photograph and the third region 62 is shown.

상기 카메라(70)는 동일한 위치에서 사진을 촬영한다. 상기 드로워(50)는 이동될 수 있고, 따라서 상기 드로워(50)의 위치에 따라 상기 카메라(70)에서 획득되는 사진은 다양한 영역에 대한 사진을 촬영할 수 있다.The camera 70 takes a picture at the same position. The drawer 50 can be moved so that the picture acquired by the camera 70 according to the position of the drawer 50 can take pictures of various areas.

한편 도 10(b)에 도시된 바와 같이, 좌측에 구비되는 상기 드로워(50)가 상기 선반(40)의 하부 공간으로 완전히 인입되면, 패턴은 상기 카메라(70)에 의해서 인식되지 못한다. 즉 상기 카메라(70)에 의해서 찍힌 사진에는 패턴이 도시되어 있지 않다.10 (b), if the drawer 50 provided on the left side is completely drawn into the lower space of the shelf 40, the pattern can not be recognized by the camera 70. That is, no pattern is shown in the photograph taken by the camera 70.

도 11은 사용자에게 제공되는 화면이다. 이하 도 11을 참조해서 설명한다. 11 is a screen provided to the user. This will be described below with reference to FIG.

상기 카메라(70)에서 촬영된 한 장의 사진은 상기 제1영역(42)을 도시하는 제1이미지와, 상기 제2영역(52)을 도시하는 제2이미지 및 상기 제3영역(62)을 도시하는 제3이미지로 구분될 수 있다. One photograph taken by the camera 70 shows a first image showing the first region 42, a second image showing the second region 52, and a third image showing the third region 62 The third image can be divided into three.

이렇게 구분된 사진은 도 11에서와 같이 독립적으로 사용자에게 제공될 수 있다. 즉 해당 영역에 대한 사진이 개별적으로 사용자에게 제공되어서 사용자는 해당 영역에 저장된 식품에 대한 정보를 쉽게 획득할 수 있다. The separated pictures can be provided to the user independently as shown in FIG. That is, photographs for the respective regions are individually provided to the user, so that the user can easily acquire information on the foods stored in the corresponding regions.

즉 상기 제어부(100)는 각각의 사진을 개별적으로 업데이트(교체)해서 사용자에게 각각의 영역에 수용된 식품의 종류에 관한 정보를 제공할 수 있다. That is, the control unit 100 can individually update (replace) each photograph to provide the user with information on the type of food accommodated in each area.

도 11에 도시된 냉장실 선반은 상기 제1영역(42)을 의미하고, 야채실은 상기 제2영역(52)을 의미하며, 멀티수납코너는 상기 제3영역(62)을 의미할 수 있다. 물론 사용자의 선호도나 이미지 제공자의 편의에 따라 다양한 배치와, 다양한 형태로 변형되는 것도 가능하다. 11 represents the first area 42, the vegetable compartment represents the second area 52, and the multi-storage corner may refer to the third area 62. [ Of course, it is also possible to have various arrangements and various forms according to the preference of the user or the convenience of the image provider.

한편 도 11의 화면은 냉장고에 설치된 디스플레이(14)에도 제공될 수 있지만, 냉장고가 아닌 별도의 외부 장치 예를 들어 핸드폰과 같은 장치에도 제공될 수 있다. 따라서 사용자는 집에서 외출을 한 상태에서 냉장고에 저장된 식품에 대한 정보를 얻을 수 있고, 이를 이용해서 쇼핑에 활용할 수 있다.On the other hand, the screen of FIG. 11 may be provided to the display 14 installed in the refrigerator, but may also be provided in a separate external device such as a cell phone instead of a refrigerator. Therefore, the user can obtain information about the food stored in the refrigerator while going out from the house, and utilize it for shopping.

이하 본 발명의 일 실시예에 따른 제어 흐름에 대해서 설명한다.Hereinafter, a control flow according to an embodiment of the present invention will be described.

도 12는 본 발명의 일 실시예에 따른 제어 흐름도이다. 이하 도 12를 참조해서 설명한다. 12 is a control flowchart according to an embodiment of the present invention. This will be described below with reference to FIG.

상기 도어(20)가 상기 저장실(22)을 개방하다고 판단된다(S10). 이때 상기 도어 개폐 센서(110)에 의해서 상기 도어(20)의 개폐가 감지될 수 있다.It is determined that the door 20 opens the storage compartment 22 (S10). At this time, the opening / closing of the door 20 can be detected by the door open / close sensor 110.

상기 도어(20)가 개방되면, 상기 도어 회전 센서(120)가 구동될 수 있다. 즉 사기 도어 회전 센서(120)에서 상기 도어(20)가 일정 각(θ) 이상 회전되는 지를 감지할 수 있다(S12).When the door 20 is opened, the door rotation sensor 120 may be driven. In other words, it is possible to detect whether the door 20 is rotated by a certain angle (?) Or more from the fraud door rotation sensor 120 (S12).

상기 도어(20)가 일정 각도 이상 회전되면, 상기 카메라(70)는 사진을 촬영한다(S14). 이때 상기 카메라(70)는 소정 시간 간격, 예를 들어 1초에 10장 등의 사진을 촬영하는 것이 가능하다.When the door 20 is rotated over a predetermined angle, the camera 70 takes a picture (S14). At this time, the camera 70 can photograph 10 pictures at a predetermined time interval, for example, 1 second.

이때 찍힌 사진은 상기 제1영역(42)에 대한 제1이미지를 포함한다. 한편 상기 도어(20)가 일정 각도(θ) 이상 회전되었기 때문에 사진에는 상기 도어(20)에 설치된 바스켓 등의 간섭이 발생하지 않을 수 있다. At this time, the photographed image includes the first image for the first region 42. On the other hand, since the door 20 is rotated by a certain angle or more, interference of the basket installed on the door 20 may not occur in the photograph.

상기 카메라(70)에 의해서 찍힌 사진은 상기 저장부(18)에 저장된다(S16). 이때 상기 카메라(70)에 의해서 복수 장의 사진이 찍히면 최근에 찍힌 사진은 저장되고, 그 전에 찍힌 사진은 상기 저장부(18)의 용량 제한으로 인해서 삭제되는 것도 가능하다. The photograph taken by the camera 70 is stored in the storage unit 18 (S16). At this time, if a plurality of photographs are taken by the camera 70, recently photographed photographs may be stored, and the photographs taken before the photographs may be deleted due to capacity limitation of the storage unit 18.

한편 상기 드로워 센서(130)에 의해서 상기 드로워(50)가 열리는 지를 감지할 수 있다(S20). 상기 드로워 센서(130)는 상기 드로워(50)가 상기 선반(40)의 하부 공간으로부터 인출되는 것을 감지할 수 있다. Meanwhile, it is possible to detect whether the drawer 50 is opened by the draw sensor 130 (S20). The draw sensor 130 may detect that the drawer 50 is drawn out from the lower space of the shelf 40.

그리고 상기 드로워 센서(130)에 의해서 상기 드로워(50)가 닫히는 지를 감지되면, 그 시각에 찍힌 사진 또는 그 시각에 가장 인접한 때에 찍힌 사진을 최종 사진(드로워 열린 상태)로 선택한다(S40).When it is detected by the draw sensor 130 that the drawer 50 is closed, a photograph taken at that time or a photograph taken when the drawer closest to the time is selected as a final picture (state in which the drawer is opened) (S40 ).

상기 제어부(100)는 상기 최종 사진을 상기 제1영역(42), 상기 제2영역(52) 및 상기 제3영역(62)으로 구분한다(S42).The control unit 100 divides the final photograph into the first area 42, the second area 52 and the third area 62 (S42).

이어서 사진에 찍힌 부분이 상기 제2영역(52) 인지 상기 제3영역(62)인지를 판단한다. 즉 최종 사진에 의해서 제2이미지와 제3이미지 중에 어떤 이미지를 획득했는지를 판단한다(S44). 상술한 바와 같이 상기 드로워(50)가 인출되면 상기 제2영역(52)과 상기 제3영역(62)은 서로 중첩되는 부분이기 때문이다. Then, it is determined whether the photographed portion is the second region 52 or the third region 62. That is, it is determined which image among the second image and the third image is acquired by the final photograph (S44). As described above, when the drawer 50 is drawn out, the second region 52 and the third region 62 overlap each other.

한편 S20에서 상기 드로워(50)가 인출되었다는 정보를 얻었기 때문에, S44에서는 상기 제어부에서 제2이미지를 얻은 것으로 판단할 수 있다.On the other hand, since it is determined in S20 that the drawer 50 has been drawn out, it is determined in S44 that the control unit has obtained the second image.

그리고 상기 제2영역(52)에 대한 정보를 업데이트할 수 있다(S46). 상기 제어부(100)는 상기 제2영역(52)을 도시하는 제2이미지를 상기 디스플레이(14)에 전송해서, 해당 부분을 최종 사진에 근거하도록 변경할 수 있다.The information on the second area 52 may be updated (S46). The control unit 100 may transmit a second image showing the second area 52 to the display 14 so as to change the corresponding part based on the final photograph.

반면에 S30에서 상기 드로워(50)가 닫히지 시작하지 않는다고 판단하면, S14에서와 같이 다시 사진을 촬영할 수 있다. On the other hand, if it is determined in S30 that the drawer 50 does not start to be closed, a photograph can be taken again as in S14.

S30에서 상기 드로워(50)가 닫히지 않는 상태는 사용자가 상기 제2영역(52)에 대한 액세스를 종료하지 않은 것으로 볼 수 있다. 즉 사용자는 상기 드로워(50)를 정지시킨 상태에서 상기 제2영역(52)에 새로운 식품을 저장하거나, 저장된 식품을 상기 제2영역(52)으로부터 꺼낼 수 있다. The state in which the drawer 50 is not closed at S30 can be regarded as the end of the access to the second area 52 by the user. That is, the user can store new food in the second region 52 or take out the stored food from the second region 52 while the drawer 50 is stopped.

반면에 상기 드로워(50)가 닫히는 상태는 사용자가 상기 제2영역(52)에 대한 액세스를 종료하고, 상기 드로워(50)를 상기 선반(40)의 하부 공간으로 인입시킨다고 예측할 수 있다.On the other hand, the state in which the drawer 50 is closed can be predicted that the user finishes the access to the second area 52 and draws the drawer 50 into the lower space of the shelf 40.

한편 S20에서 상기 드로워(50)가 열리지 않은 상태에서, 상기 도어(20)가 닫히기 직전 인지를 판단할 수 있다(S60).On the other hand, if the door 50 is not opened in S20, it can be determined whether or not the door 20 is about to close (S60).

이때 상기 도어(20)가 닫히기 직전 인지 여부는 상기 도어 회전 센서(120)에서 감지될 수 있다. At this time, whether or not the door 20 is about to be closed can be detected by the door rotation sensor 120.

사용자는 상기 저장실(22)에 대한 액세스를 종료하면 상기 도어(20)를 닫고, 상기 저장실(22)을 밀폐하게 된다. 즉 사용자는 상기 도어(20)가 상기 개구부(14)를 개방하도록 한 상태에서 상기 저장실(22)에 새로운 식품을 저장하거나, 저장된 식품을 상기 저장실(22)로부터 꺼낼 수 있다.When the user finishes accessing the storage room 22, the user closes the door 20 and hermetically closes the storage room 22. That is, the user can store new food in the storage room 22 or take out the stored food from the storage room 22 in a state where the door 20 opens the opening 14.

만약 사용자가 상기 도어(20)를 닫게 되면, 사용자가 상기 저장실에 대한 접근을 종료하고, 다시 상기 도어(20)가 개방되기 전까지는 그 상태에서 식품이 저장된 상태를 유지하는 것으로 판단할 수 있다.If the user closes the door 20, it can be determined that the user maintains the stored state of the food until the access to the storage room is terminated and the door 20 is opened again.

S60에서 상기 도어(20)가 닫히기 직전이라고 판단하면, 상기 카메라(70)에서 사진 촬영을 종료한다(S69). 즉 상기 카메라(70)의 구동을 중지시키는 것이 가능하다. If it is determined in S60 that the door 20 is about to close, the camera 70 ends the photographing (S69). That is, it is possible to stop driving the camera 70.

그리고 상기 제어부(100)는 그 시각에 찍힌 사진 또는 그 시각에 가장 인접한 때에 찍힌 사진을 최종 사진(드로워 닫힌 상태)로 선택한다(S70). 즉 상기 제어부(100)는 상기 카메라(70)의 사진 촬영이 종료된 시점 또는 그 시점에 인접한 시점에 찍힌 사진을 최종 사진으로 선택할 수 있다.Then, the control unit 100 selects a photograph taken at that time or a photograph which is closest to the time, as a final picture (state in which the drawer is closed) (S70). That is, the control unit 100 may select a photo at the time point when the photographing of the camera 70 ends or at a point adjacent to the point of time as the final photograph.

상기 제어부(100)는 상기 최종 사진을 상기 제1영역(42), 상기 제2영역(52) 및 상기 제3영역(62)으로 구분한다(S72). 이때 상기 최종 사진에는 상기 제1영역(42)을 도시하는 제1이미지를 포함할 수 있다. 상기 제1영역(42)에 저장된 식품에 대한 최신 상태는 사용자가 상기 저장실(22)에 대한 접근을 종료한 상태이기 때문이다. 따라서 이때 획득된 제1이미지를 통해서 사용자는 상기 제1영역(42)에 대한 정확한 식품 정보를 획득할 수 있다. The controller 100 divides the final photograph into the first area 42, the second area 52 and the third area 62 (S72). At this time, the final photograph may include a first image showing the first region 42. The latest state of the food stored in the first region 42 is because the user has finished accessing the storage room 22. Accordingly, the user can obtain accurate food information for the first region 42 through the obtained first image.

이어서 사진에 찍힌 부분이 상기 제2영역(52) 인지 상기 제3영역(62)인지를 판단한다. 즉 최종 사진에 의해서 제2이미지와 제3이미지 중에 어떤 이미지를 획득했는지를 판단한다(S74). 상술한 바와 같이 상기 드로워(50)가 인출되면 상기 제2영역(52)과 상기 제3영역(62)은 서로 중첩되는 부분이기 때문이다. Then, it is determined whether the photographed portion is the second region 52 or the third region 62. That is, it is determined which image among the second image and the third image is acquired by the final photograph (S74). As described above, when the drawer 50 is drawn out, the second region 52 and the third region 62 overlap each other.

한편 S60에서 상기 드로워(50)가 인입되었다는 정보를 얻었기 때문에, S74에서는 상기 제어부에서 제3이미지를 얻은 것으로 판단할 수 있다.On the other hand, since the information indicating that the drawer 50 has been drawn in S60 is obtained, it is determined in S74 that the control unit has obtained the third image.

그리고 상기 제1영역(42) 및 상기 제3영역(62)에 대한 정보를 업데이트할 수 있다(S76). 상기 제어부(100)는 상기 제1영역(42)을 도시하는 제1이미지와 상기 제3영역(62)을 도시하는 제3이미지를 상기 디스플레이(14)에 전송해서, 해당 부분을 최종 사진에 근거하도록 변경할 수 있다.The information about the first area 42 and the third area 62 may be updated (S76). The control unit 100 transmits a first image showing the first region 42 and a third image showing the third region 62 to the display 14 and displaying the corresponding portion on the basis of the final photograph .

즉 본 발명에서는 사용자가 사용을 종료한 시점을 고려해서, 해당 시점에서 획득된 사진을 가공해서 사용자에게 해당 영역에 저장된 식품에 대한 정보를 제공하게 된다. 따라서 사용자는 상기 저장실(22)에 저장된 식품에 대한 정확한 정보를 얻을 수 있다. That is, in the present invention, considering the time when the user ends the use, the user obtains information about the food stored in the corresponding region by processing the photograph obtained at that time. Accordingly, the user can obtain accurate information on the food stored in the storage room 22.

한편 상기 도어 회전 센서(120), 상기 도어 개폐 센서(110) 및 상기 드로워 센서(130)는 좌우측에 각각 두 개씩 설치가 될 수 있다. 이러한 경우에 좌우측 도어, 좌우측 드로워에 대한 개별 정보를 획득할 수 있다. On the other hand, the door rotation sensor 120, the door open / close sensor 110, and the draw sensor 130 may be installed on the left and right sides, respectively. In this case, individual information on the right and left doors and the left and right drawers can be obtained.

따라서 이러한 정보를 기반으로, 좌측 도어만 개방된 경우에는 한 장의 사진의 좌측 부분만을 업데이트하는 것이 가능하다. 반면에 우측 도어만 개방된 경우에는 한 장의 사진의 우측 부분만을 업데이트 하는 것이 가능하다.Therefore, if only the left door is opened based on this information, it is possible to update only the left part of one photograph. On the other hand, when only the right door is opened, it is possible to update only the right portion of one photograph.

물론 좌측 도어와 우측 도어가 함께 개방된 경우에는 상술한 조건을 만족한다면, 한 장의 사진의 좌측 부분과 우측 부분을 함께 업데이트해서 상기 디스플레이(14)에 제공하는 것도 가능하다. Of course, when the left door and the right door are opened together, it is also possible to update the left portion and the right portion of a single photograph to provide the same to the display 14, if the above conditions are satisfied.

도 13은 도 12의 변형례를 설명한 제어 흐름도이다. 이하 도 13을 참조해서 설명한다. 13 is a control flowchart illustrating the modification of Fig. This will be described below with reference to FIG.

도 13의 변형례에서는 S60가 S62와 S64로 구체적으로 구분된 형태이고, 차이가 되는 부분에 대해서만 구체적으로 설명한다. In the modification of Fig. 13, S60 is specifically divided into S62 and S64, and only differences will be described in detail.

즉 상기 도어(20)가 닫히기 직전인지 여부는 상기 도어(20) 닫히는 방향으로 회전되는지를 판단하는 단계(S62)와 상기 도어(20)가 일정 각도(θ) 이상 회전되는지로 구체적으로 판단할 수 있다. That is, whether or not the door 20 is just before the door 20 is closed may be determined by determining whether the door 20 is rotated in a direction to close the door 20 or by determining whether the door 20 is rotated by a predetermined angle or more have.

다시 말해서, 상기 도어(20)가 닫히는 방향으로 회전되고(S60), 상기 도어가 일정 각 이하로 회전되면(S64), 상기 카메라(70)에 의한 사진 촬영을 종료할 수 있다.In other words, the door 20 is rotated in the closing direction (S60), and when the door is rotated to a certain angle or less (S64), the photographing by the camera 70 can be terminated.

상기 카메라(70)에서 촬영되는 사진에서 상기 저장실(22)에 저장된 식품에 관한 정보를 얻기 위해서는, 상기 도어(20)는 물론 상기 도어(20)에 설치된 바스켓 등의 간섭이 발생하면 안된다. 따라서 상기 도어(20)가 닫히기 직전이라는 표현은, 상기 카메라(70)에서 촬영된 사진에 상기 도어(20) 및 기타 구성요소가 표현되지 않는 상태를 의미하는 것도 가능하다. In order to obtain information on the food stored in the storage room 22 in the picture photographed by the camera 70, interference with the basket 20 installed in the door 20 as well as the door 20 should not occur. Accordingly, the expression 'immediately before the door 20 is closed' means that the door 20 and other components are not displayed on the photograph taken by the camera 70.

도 14는 도 13의 다른 변형례를 설명한 제어 흐름도이다. 이하 도 14를 참조해서 설명하되, 도 13과의 차이만을 설명한다.14 is a control flowchart illustrating another modification of Fig. The following description will be made with reference to Fig. 14, but only the difference from Fig. 13 will be described.

도 14에 따른 다른 변형례는 도 13과 달리, 상기 도어(20)의 회전 방향을 판단하지 않는다. 14, unlike FIG. 13, does not determine the direction of rotation of the door 20. FIG.

S12에서 도어가 일정각 이상 회전되었다고 판단하면, 상기 도어(20)는 해당되는 순간에 열리는 방향으로 회전된다. 따라서 통상적으로 사용자가 상기 도어(20)를 다시 회전시켜서, 상기 도어(20)가 일정각 만큼 회전된 상태에 도달하면 사용자가 상기 도어(20)를 닫는 경우에 해당될 수 있다. If it is determined in S12 that the door has been rotated by a certain angle or more, the door 20 is rotated in a direction to open at the moment. Therefore, when the user normally rotates the door 20 again and the door 20 is rotated by a predetermined angle, the door 20 may be closed by the user.

따라서 다른 변형례에서는 도 13에서의 S62를 생략하고, S20에서 드로워가 열리지 않았다고 판단하면, 도어가 일정각 이하로 회전되었는지 여부를 판단하는 S64를 바로 수행하게 된다.Therefore, in another modification, S62 in FIG. 13 is omitted. If it is determined in S20 that the drawer is not opened, S64 is immediately performed to determine whether the door has been rotated to a certain angle or less.

도 15는 도 12의 다른 변형례를 설명한 제어 흐름도이다. 이하 도 15를 참조해서 설명한다.15 is a control flowchart illustrating another modification of Fig. This will be described below with reference to FIG.

도 15에서는 상기 드로워(50)의 이동을 도 9에 따른 패턴에 의해서 감지하는 제어 흐름을 설명한다. 설명의 편의상 중복되는 부분은 생략하고, 차이가 되는 부분에 대해서만 설명한다. Fig. 15 illustrates a control flow for sensing the movement of the drawer 50 by the pattern shown in Fig. For the convenience of explanation, the overlapping portions are omitted and only the difference portions are described.

전체적으로 S20과 S30이 S22, S24, S26의 단계로 구체적으로 구분될 수 있다.S20 and S30 as a whole can be specifically divided into the steps of S22, S24 and S26.

S16에서 같이 사진이 상기 저장부(18)에 저장된 후에, 상기 카메라(70)에서 패턴이 인식되는 지를 판단한다(S22).After the photograph is stored in the storage unit 18 at S16, it is determined whether the camera 70 recognizes the pattern (S22).

상기 카메라(70)는 상기 인너 케이스(12)의 상측에서 하측을 향해서 사진을 촬영하기 때문에, 상기 카메라(70)에서 패턴이 보이지 않는 경우도 발생할 수 있다.Since the camera 70 photographs the photograph from the upper side to the lower side of the inner case 12, the camera 70 may not be able to see the pattern.

상기 카메라(70)에 찍힌 사진에서 패턴이 인지되면, 패턴이 정지되는 지를 판단할 수 있다(S24). 상기 카메라(70)는 복수 장의 사진을 소정 시간 간격으로 촬영하기 때문에, 해당 사진을 분석하면 패턴의 이동 여부를 판단할 수 있다. 패턴은 상기 드로워(50)에 표시되기 때문에, 패턴이 이동되면 상기 드로워(50)도 이동되는 것으로 판단할 수 있다.If the pattern is recognized in the photograph taken on the camera 70, it can be determined whether the pattern is stopped (S24). Since the camera 70 photographs a plurality of photographs at predetermined time intervals, it is possible to determine whether the pattern is moved by analyzing the photographs. Since the pattern is displayed on the drawer 50, it can be determined that the drawer 50 is also moved when the pattern is moved.

그리고 패턴이 상기 드로워(50)가 닫힌 상태의 위치부터 일정 거리 이상 이동했는지를 판단할 수 있다(S26). Then, it is determined whether the pattern has moved by a predetermined distance or more from the position where the drawer 50 is closed (S26).

만약 패턴이 일정 거리 이상 이동하지 않았다면, 상기 드로워(50)가 충분히 개방되지 않은 상태이기 때문에 상기 제2영역(52)에 대한 적당한 이미지를 획득할 수 없다. 예를 들어 상기 드로워(50)가 1/3만 인출된 상태에서 찍힌 사진에서는 상기 드로워(50)의 내측 공간이 충분히 도시되지 않고, 해당 사진에서 획득된 이미지로는 사용자는 상기 제2영역(52)에 대한 정보를 얻을 수 없기 때문이다. If the pattern has not moved beyond a certain distance, a proper image for the second area 52 can not be obtained because the drawer 50 is not sufficiently opened. For example, in the photograph taken with the drawer 50 taken out in 1/3 of the drawer 50, the inner space of the drawer 50 is not sufficiently shown, and as the image obtained in the photograph, It is impossible to obtain the information about the image 52.

패턴이 일정 거리 이상 이동했다고 판단하면 사용자가 상기 제2영역(52)에 대한 접근을 종료하고, 상기 제2영역(52)에 대한 사용을 마쳤다고 볼 수 있다. If it is determined that the pattern has moved a predetermined distance or more, the user can see that the access to the second area 52 is terminated and the use of the second area 52 is completed.

따라서 세 가지 조건이 만족하는 상태의 시각 또는 그 시각에 인접한 시각에서 획득된 사진은 상기 제2영역(52)에 저장된 식품에 관한 정보를 포함할 수 있다. Therefore, the photographs obtained at the time of the state in which the three conditions are satisfied or at the time adjacent to the time may include information on the food stored in the second region 52.

도 16은 본 발명의 다른 실시예에 따른 제어 흐름도이다. 이하 도 16을 참조해서 설명한다. 도 16의 제어 흐름은 상기 도어 개폐 센서(110)에 의해서 상기 도어(20)가 개방된 것으로 판단되면 소정 시간을 간격으로 계속 수행되는 것이 가능하다. 16 is a control flowchart according to another embodiment of the present invention. This will be described below with reference to Fig. The control flow of FIG. 16 can be continued at intervals of predetermined time if it is determined that the door 20 is opened by the door opening / closing sensor 110.

우선 상기 도어 회전 센서(120)에 의해서 상기 도어(20)가 일정 각도(θ) 이상 개방되는지를 판단한다(S100).First, it is determined whether the door 20 is opened by a predetermined angle (?) By the door rotation sensor 120 (S100).

상기 도어(20)가 일정 각도 이상 개방되면, 상기 도어(20)에 간섭이 발생하지 않는 것으로 판단하고, 상기 카메라(70)는 사진 촬영을 한다(S110). 이때 상기 카메라(70)는 한 장의 사진을 촬영하는 것이 가능하다. When the door 20 is opened by a predetermined angle or more, it is determined that no interference occurs in the door 20, and the camera 70 takes a picture (S110). At this time, the camera 70 can photograph a single photograph.

그리고 상기 드로워(50)가 제1설정 거리 이상 인출되었는지를 판단한다(S120). 이때 상기 제1설정 거리는 상기 카메라(70)에서 사진을 촬영했을 때에 상기 제2영역(52)에 대한 식품 정보가 충분히 획득가능한 거리를 의미할 수 있다. 예를 들어, 상기 제1설정 거리는 상기 드로워(50)의 전체 길이의 2/3를 의미하는 것도 가능하다. Then, it is determined whether the drawer 50 has been drawn more than the first predetermined distance (S120). Here, the first predetermined distance may mean a distance at which food information about the second area 52 can be sufficiently obtained when a photograph is taken by the camera 70. For example, the first set distance may mean 2/3 of the entire length of the drawer 50.

상기 드로워(50)의 인출 거리는 상기 드로워(50) 센서에 의해서 감지될 수 있다.The draw-out distance of the drawer 50 can be sensed by the drawer 50 sensor.

한편 상기 드로워(50)가 상기 제1설정 거리 이상 인출되었다고 판단하면, 상기 제어부(100)는 사진을 영역별로 구획해서, 복수 개의 이미지로 구분할 수 있다(S122). If the controller 50 determines that the drawer 50 has been drawn more than the first predetermined distance, the controller 100 divides the pictures into areas and divides them into a plurality of images (step S122).

상기 드로워(50)가 인출된 상태에서 획득된 사진이기 때문에, 해당 사진에서는 제1이미지와 제2이미지가 획득될 수 있다. Since the drawer 50 is a photograph obtained in a drawn-out state, the first image and the second image can be obtained in the photograph.

상기 제어부(100)는 제1이미지와 제2이미지를 업데이트할 수 있다(S124).The controller 100 may update the first image and the second image (S124).

반면에 S120에서 상기 드로워(50)가 상기 제1설정 거리 이상 인출되지 않았다고 판단하면, 상기 드로워(50)가 제2설정 거리 이하로 인출되었는지를 판단할 수 있다(S130). On the other hand, if it is determined in step S120 that the drawer 50 has not been drawn more than the first predetermined distance, it can be determined whether the drawer 50 is drawn below the second set distance in step S130.

이때 상기 제2설정 거리는 상기 카메라(70)에서 사진을 촬영했을 때에 상기 제3영역(62)에 대한 식품 정보가 충분히 획득가능한 거리를 의미할 수 있다. 예를 들어, 상기 제2설정 거리는 상기 드로워(50)의 전체 길이의 1/3을 의미하는 것도 가능하다. 물론 상기 제2설정 거리는 '0'으로 선택해서, 상기 드로워(50)가 상기 선반의 하부 공간으로 완전히 인입된 상태를 선택하는 것도 가능하다. Here, the second set distance may mean a distance at which food information about the third area 62 can be sufficiently obtained when the camera 70 photographs the photograph. For example, the second setting distance may be 1/3 of the entire length of the drawer 50. Of course, it is also possible to select the second set distance as '0', and to select the state in which the drawer 50 is completely drawn into the lower space of the shelf.

한편 상기 드로워(50)가 상기 제2설정 거리 이하 인출되었다고 판단하면, 상기 제어부(100)는 사진을 영역별로 구획해서, 복수 개의 이미지로 구분할 수 있다(S132). If it is determined that the drawer 50 has been drawn below the second predetermined distance, the controller 100 divides the pictures into areas and divides them into a plurality of images (S132).

상기 드로워(50)가 인출된 상태에서 획득된 사진이기 때문에, 해당 사진에서는 제1이미지와 제3이미지가 획득될 수 있다. Since the drawer 50 is a photograph obtained in a drawn-out state, the first image and the third image can be obtained in the photograph.

상기 제어부(100)는 제1이미지와 제3이미지를 업데이트할 수 있다(S134).The controller 100 may update the first image and the third image (S134).

도 16에 따른 본 발명의 다른 실시예에서는 상기 도어(20)가 개방되면 제어가 반복되고, 상기 도어(20)가 상기 저장실(22)을 밀폐하면 완전히 종료된다. 종료된 상태에서는 더 이상 이미지에 대한 업데이트가 발생되지 않기 때문에, 상기 저장실(22)에 저장된 식품에 대한 최종 이미지가 획득될 수 있다16, the control is repeated when the door 20 is opened. When the door 20 is closed, the door 20 is completely closed. A final image for the food stored in the storage room 22 can be obtained since no more updates to the image are generated in the terminated state

본 발명은 상술한 실시예에 한정되지 않으며, 첨부된 청구범위에서 알 수 있는 바와 같이 본 발명이 속한 분야의 통상의 지식을 가진 자에 의해 변형이 가능하고 이러한 변형은 본 발명의 범위에 속한다.It is to be understood that the invention is not limited to the disclosed embodiments, but, on the contrary, is intended to cover various modifications and equivalent arrangements included within the spirit and scope of the appended claims.

10: 아우터 케이스 12: 인너 케이스
20: 도어 40: 선반
42: 제1영역 50: 드로워
52: 제2영역 60: 베리어
62: 제3영역 70: 카메라
100: 제어부10: outer case 12: inner case
20: Door 40: Shelf
42: first region 50: drawer
52: second area 60: barrier
62: third area 70: camera
100:

Claims (27)

냉장고에서 식품이 저장되는 저장실 내부의 사진을 촬영하는 하나의 카메라;
상기 카메라에 의해서 촬영된 하나의 사진(picture)을 복수 개의 이미지(image)로 나누어 관리하는 제어부; 및
상기 복수 개의 이미지를 독립적으로 도시하는 디스플레이;를 포함하고,
상기 저장실은,
선반에 식품이 거치되는 제1영역과,
상기 선반의 하부 공간으로 인입 또는 인출 가능한 드로워의 내측 공간에 의해서 정의되는 제2영역과,
상기 드로워 전방의 바닥에 형성되어, 상기 드로워가 상기 하부 공간으로부터 인출되면 상기 제2영역에 중첩되는 제3영역을 포함하고,
상기 카메라는 상기 제1영역, 상기 제2영역 및 상기 제3영역을 상기 하나의 카메라에 의해서 촬영하는 것을 특징으로 하는 냉장고의 저장실 표시 장치.One camera for photographing the inside of the storage room in which the food is stored in the refrigerator;
A controller for dividing and managing one picture taken by the camera into a plurality of images; And
And a display that independently displays the plurality of images,
Wherein,
A first region where food is placed on the shelf,
A second area defined by an inner space of a drawer which can be drawn into or withdrawn from the lower space of the shelf,
And a third region formed on the bottom of the drawer front and overlapping the second region when the drawer is drawn out from the lower space,
Wherein the camera photographs the first area, the second area, and the third area by the one camera. 제1항에 있어서,
상기 제어부는,
하나의 사진을 상기 제1영역을 도시하는 제1이미지와, 상기 제2영역을 도시하는 제2이미지 및 상기 제3영역을 도시하는 제3이미지로 구분하는 것을 특징으로 하는 냉장고의 저장실 표시 장치.The method according to claim 1,
Wherein,
Wherein one picture is divided into a first image showing the first area, a second image showing the second area, and a third image showing the third area. 제1항에 있어서,
상기 제어부는 상기 카메라에 의해서 촬영된 복수 개의 사진 중에 특정 사진을 최종 사진으로 선택하는 냉장고의 저장실 표시 장치.The method according to claim 1,
Wherein the control unit selects a specific picture as a final picture among a plurality of pictures taken by the camera. 제3항에 있어서,
상기 제어부는 상기 최종 사진을 영역별로 구획하고, 구획된 이미지를 상기 디스플레이에 제공하는 것을 특징으로 하는 냉장고의 저장실 표시 장치.The method of claim 3,
Wherein the control unit divides the final photograph into regions and provides the divided image to the display unit. 제1항에 있어서,
상기 저장실을 개폐하는 도어의 회전각을 감지하는 도어 회전 센서를 더 포함하고,
상기 제어부가 상기 도어의 회전각이 일정 각도 이상이라고 판단하면, 상기 제어부는 상기 카메라가 사진을 촬영하도록 명령하는 것을 특징으로 하는 냉장고의 저장실 표시 장치.The method according to claim 1,
Further comprising a door rotation sensor for sensing a rotation angle of the door for opening and closing the storage room,
Wherein the control unit instructs the camera to take a picture when the controller determines that the rotation angle of the door is greater than a predetermined angle. 제5항에 있어서,
상기 제어부가 상기 도어의 회전각이 일정 각도 이하라도 판단하면, 상기 카메라가 사진 촬영을 종료하도록 명령하고,
상기 제어부는 마지막으로 찍힌 사진을 최종 사진으로 선택해서 제1영역과 제3영역을 업데이트하는 것을 특징으로 하는 냉장고의 저장실 표시 장치.6. The method of claim 5,
When the controller determines that the angle of rotation of the door is less than a predetermined angle,
Wherein the control unit updates the first area and the third area by selecting the last photograph as a final photograph. 제5항에 있어서,
상기 도어가 상기 저장실을 개폐하는지를 감지하는 도어 개폐 센서를 더 포함하고,
상기 제어부가 상기 도어가 개방되었다고 판단하면, 상기 도어 회전 센서가 구동되는 것을 특징으로 하는 냉장고의 저장실 표시 장치.6. The method of claim 5,
Further comprising a door opening / closing sensor for detecting whether the door opens / closes the storage room,
Wherein the door rotation sensor is driven when the controller determines that the door is opened. 제1항에 있어서,
상기 제어부는 상기 드로워가 상기 하부 공간으로 인입되기 시작할 때에 찍힌 사진을 최종 사진으로 선택해서 제2영역을 업데이트하는 것을 특징으로 하는 냉장고의 저장실 표시 장치.The method according to claim 1,
Wherein the control unit updates the second area by selecting a photograph taken when the drawer starts to enter the lower space as a final photograph. 제8항에 있어서,
상기 드로워의 이동을 감지하는 드로워 센서를 더 포함하는 냉장고의 저장실 표시 장치9. The method of claim 8,
And a draw sensor for detecting movement of the drawer, 제9항에 있어서,
상기 드로워 센서는 상기 드로워가 상기 하부 공간으로부터 인출되는 것을 감지하는 것을 특징으로 하는 냉장고의 저장실 표시 장치.10. The method of claim 9,
Wherein the draw sensor senses that the drawer is drawn out from the lower space. 제1항에 있어서,
상기 드로워에는 표시된 패턴이 마련되고,
상기 제어부는 상기 카메라에 의해서 촬영된 상기 패턴의 이동을 분석해서 상기 드로워의 이동을 감지하는 것을 특징으로 하는 냉장고의 저장실 표시 장치.The method according to claim 1,
The pattern is provided on the drawer,
Wherein the control unit analyzes movement of the pattern photographed by the camera to detect movement of the drawer. 제11항에 있어서,
상기 제어부는,
상기 카메라에서 상기 패턴이 인식되고, 상기 패턴이 정지되며, 상기 패턴이 일정 거리 이상 이동된 때에 찍힌 사진을 최종 사진으로 선택해서 제2영역을 업데이트하는 것을 특징으로 하는 냉장고의 저장실 표시 장치.12. The method of claim 11,
Wherein,
Wherein the camera updates the second area by selecting a photograph taken when the pattern is recognized, the pattern is stopped, and the pattern is moved by a predetermined distance or more as a final photograph. 제11항에 있어서,
상기 제어부는,
상기 카메라에서 상기 패턴이 인식되고, 상기 패턴이 일정 거리 이상 이동되면, 상기 카메라에 의해서 찍힌 사진이 상기 제2영역에 대한 정보를 포함하는 것으로 판단하는 것을 특징으로 하는 냉장고의 저장실 표시 장치.12. The method of claim 11,
Wherein,
Wherein when the pattern is recognized by the camera and the pattern is moved by a predetermined distance or more, it is determined that the photograph taken by the camera includes information on the second area. 제1항에 있어서,
상기 저장실의 좌측을 개방하는 좌측 도어와 상기 저장실의 우측을 개방하는 우측 도어를 구비하고, 상기 좌측 도어의 개폐를 감지하는 좌측 도어 개폐 센서 및 상기 우측 도어의 개폐를 감지하는 우측 도어 개폐 센서를 포함하는 냉장고에 대해서,
상기 제어부는 상기 좌측 도어가 개방되면 상기 한 장의 사진의 좌측 부분을 관리하고, 상기 우측 도어가 개방되면 상기 한 장의 사진의 우측 부분을 관리하는 것을 특징으로 하는 냉장고의 저장실 표시 장치.The method according to claim 1,
A left door opening / closing sensor for detecting opening / closing of the left door, and a right door opening / closing sensor for detecting opening / closing of the right door, the door having a left door opening the left side of the storage room and a right door opening the right side of the storage room As for the refrigerator,
Wherein the control unit manages a left portion of the one photograph when the left door is opened and manages a right portion of the one photograph when the right door is opened. 제14항에 있어서,
상기 좌측 도어와 상기 우측 도어가 개방되면,
상기 제어부는 상기 사진의 좌측 및 우측 부분을 관리하는 것을 특징으로 하는 냉장고의 저장실 표시 장치.15. The method of claim 14,
When the left door and the right door are opened,
Wherein the control unit manages left and right portions of the photograph. 제1항에 있어서,
상기 디스플레이는 외부 단말기에 설치된 디스플레이부를 포함하는 것을 특징으로 하는 냉장고의 저장실 표시 장치.The method according to claim 1,
Wherein the display includes a display unit installed in an external terminal. 제1항에 있어서,
상기 카메라는 소정 시간 간격으로 사진을 촬영하고,
상기 제어부는 각각의 사진에 대해 선택된 특정 이미지를 최종 이미지로 업데이트하는 것을 특징으로 하는 냉장고의 저장실 표시 장치.The method according to claim 1,
The camera captures a picture at predetermined time intervals,
Wherein the control unit updates the specific image selected for each photograph with the final image. 제17항에 있어서,
상기 저장실을 개폐하는 도어의 회전각을 감지하는 도어 회전 센서를 더 포함하고,
상기 제어부에서 상기 도어가 소정 각도 이상 회전된 것으로 판단하면, 상기 제어부는 상기 제1영역에 관한 이미지를 업데이트하는 것을 특징으로 하는 냉장고의 저장실 표시 장치.18. The method of claim 17,
Further comprising a door rotation sensor for sensing a rotation angle of the door for opening and closing the storage room,
Wherein the control unit updates the image of the first area when the controller determines that the door is rotated by a predetermined angle or more. 제17항에 있어서,
상기 드로워의 이동을 감지하는 드로워 센서를 더 포함하고,
상기 제어부에서 상기 드로워가 상기 하부 공간으로부터 인출된 것으로 판단하면, 상기 제어부는 상기 제2영역에 관한 이미지를 업데이트하는 것을 특징으로 하는 냉장고의 저장실 표시 장치.18. The method of claim 17,
Further comprising a draw sensor for sensing movement of the drawer,
Wherein the control unit updates the image of the second area when the controller determines that the drawer is drawn out from the lower space. 제17항에 있어서,
상기 드로워의 이동을 감지하는 드로워 센서를 더 포함하고,
상기 제어부에서 상기 드로워가 상기 하부 공간에 인입된 것으로 판단하면, 상기 제어부는 상기 제3영역에 관한 이미지를 업데이트하는 것을 특징으로 하는 냉장고의 저장실 표시 장치.18. The method of claim 17,
Further comprising a draw sensor for sensing movement of the drawer,
Wherein the control unit updates the image of the third area when the controller determines that the drawer is drawn into the lower space. 도어가 일정 각도 이상 회전되어 저장실을 개방하는지를 감지하는 단계;
하나의 카메라에 의해서, 선반에 식품이 거치되는 제1영역과, 상기 선반의 하부 공간으로 인입 또는 인출 가능한 드로워의 내측 공간에 의해서 정의되는 제2영역과, 상기 드로워 전방의 바닥에 형성되어 상기 드로워가 상기 하부 공간으로부터 인출되면 상기 제2영역에 중첩되는 제3영역을 한 장의 사진으로 촬영하는 단계;
한 장의 사진을 상기 제1영역에 대한 제1이미지와, 상기 제2영역에 대한 제2이미지와, 상기 제3영역에 대한 제3이미지로 구분하는 단계;
상기 제1이미지, 상기 제2이미지 및 상기 제3이미지 중에 적어도 하나를 개별적으로 업데이트하는 단계; 및
업데이트된 이미지를 표시하는 표시 단계;를 포함하는 냉장고의 저장실 표시 장치의 제어 방법.Sensing whether the door is rotated over a predetermined angle to open the storage compartment;
A second area defined by a first area where food is stuck on the shelf and an inner space of a drawer that can be drawn into or withdrawn from the lower space of the shelf by one camera and a second area defined on the floor in front of the drawer Photographing a third area overlapping the second area when the drawer is drawn out from the lower space as a single photograph;
Dividing a single photograph into a first image for the first region, a second image for the second region, and a third image for the third region;
Updating at least one of the first image, the second image, and the third image separately; And
And displaying the updated image on the display unit. 제21항에 있어서,
상기 드로워가 열린 후에 상기 드로워가 닫히기 시작하는 지를 판단하는 제1판단 단계를 더 포함하고,
상기 제1판단 단계 후에 한 장의 사진을 촬영하는 것을 특징으로 하는 냉장고의 저장실 표시 장치의 제어 방법.22. The method of claim 21,
Further comprising a first determining step of determining whether the drawer starts to be closed after the drawer is opened,
And a step of photographing one photograph after the first determining step. 제22항에 있어서,
상기 제1판단 단계 후에 찍힌 사진을 최종 사진으로 선택하는 것을 특징으로 하는 냉장고의 저장실 표시 장치의 제어 방법.23. The method of claim 22,
And selecting a picture taken after the first determination step as a final picture. 제22항에 있어서,
상기 업데이트 하는 단계에서는 상기 제2이미지를 업데이트하는 것을 특징으로 하는 냉장고의 저장실 표시 장치의 제어 방법.23. The method of claim 22,
And updating the second image in the updating step. 제21항에 있어서,
상기 도어가 닫히기 직전인 지를 판단하는 제2판단 단계를 더 포함하고,
상기 제2판단 단계 후에 한 장의 사진을 촬영하는 것을 특징으로 하는 냉장고의 저장실 표시 장치의 제어 방법.22. The method of claim 21,
Further comprising a second judging step of judging whether or not the door is just before closing,
And a second photographing step of photographing one photograph after the second determining step. 제25항에 있어서,
상기 제2판단 단계 후에 찍힌 사진을 최종 사진으로 선택하는 것을 특징으로 하는 냉장고의 저장실 표시 장치의 제어 방법.26. The method of claim 25,
And selecting a picture taken after the second determination step as a final picture. 제25항에 있어서,
상기 업데이트 하는 단계에서는 상기 제1이미지 및 제3이미지를 업데이트하는 것을 특징으로 하는 냉장고의 저장실 표시 장치의 제어 방법.26. The method of claim 25,
And updating the first image and the third image in the updating step.
KR1020130124739A 2013-04-23 2013-10-18 Displaying Apparatus of storage chamber and Controlling Method for the same KR102194275B1 (en)

Priority Applications (40)

Application Number Priority Date Filing Date Title
KR1020130124739A KR102194275B1 (en) 2013-10-18 2013-10-18 Displaying Apparatus of storage chamber and Controlling Method for the same
CN201510796498.1A CN105222521B (en) 2013-04-23 2014-04-22 Refrigerator and its control method
EP14788514.9A EP2909548B1 (en) 2013-04-23 2014-04-22 Refrigerator
CN201510795232.5A CN105222519B (en) 2013-04-23 2014-04-22 Refrigerator and control method thereof
TR2018/08190T TR201808190T4 (en) 2013-04-23 2014-04-22 Refrigerator and its control method.
EP15201331.4A EP3026378B1 (en) 2013-04-23 2014-04-22 Refrigerator and control method for the same
CN201510796557.5A CN105241175B (en) 2013-04-23 2014-04-22 Refrigerator and its control method
CN201510796663.3A CN105222522B (en) 2013-04-23 2014-04-22 Refrigerator and its control method
ES15185828.9T ES2668348T3 (en) 2013-04-23 2014-04-22 Refrigerator and control method
EP15185839.6A EP2995890B1 (en) 2013-04-23 2014-04-22 Refrigerator
PCT/KR2014/003523 WO2014175643A1 (en) 2013-04-23 2014-04-22 Refrigerator and control method for the same
EP15185818.0A EP2995888B1 (en) 2013-04-23 2014-04-22 Refrigerator and control method for the same
EP15185841.2A EP2995891B1 (en) 2013-04-23 2014-04-22 Refrigerator
CN201610128042.2A CN105650998B (en) 2013-04-23 2014-04-22 Refrigerator and control method thereof
CN201510795427.XA CN105352261B (en) 2013-04-23 2014-04-22 Refrigerator and its control method
EP15185828.9A EP2995889B1 (en) 2013-04-23 2014-04-22 Refrigerator and control method for the same
CN201480011747.5A CN105008833B (en) 2013-04-23 2014-04-22 Refrigerator and its control method
EP15201279.5A EP3048398B1 (en) 2013-04-23 2014-04-22 Refrigerator and control method for the same
CN201510796407.4A CN105241154B (en) 2013-04-23 2014-04-22 Refrigerator and control method thereof
US14/786,719 US9915471B2 (en) 2013-04-23 2014-04-22 Refrigerator with camera and control method for the same
CN201610127539.2A CN105758091B (en) 2013-04-23 2014-04-22 Refrigerator and control method thereof
EP15189490.4A EP2995892B1 (en) 2013-04-23 2014-04-22 Refrigerator
CN201510796450.0A CN105222520B (en) 2013-04-23 2014-04-22 Refrigerator and its control method
EP15189491.2A EP2995893B1 (en) 2013-04-23 2014-04-22 Refrigerator
EP15185971.7A EP2998670B1 (en) 2013-04-23 2014-04-22 A camera system for installation inside a refrigerator and a refrigerator comprising said camera system
CN201610127404.6A CN105605881B (en) 2013-04-23 2014-04-22 Refrigerator and control method thereof
EP15201309.0A EP3026377B1 (en) 2013-04-23 2014-04-22 Refrigerator and control method for the same
US14/930,057 US9568241B2 (en) 2013-04-23 2015-11-02 Refrigerator with camera and control method for the same
US14/929,845 US9851139B2 (en) 2013-04-23 2015-11-02 Refrigerator and control method for the same
US14/930,012 US9920980B2 (en) 2013-04-23 2015-11-02 Refrigerator with camera and control method for the same
US14/929,888 US9546812B2 (en) 2013-04-23 2015-11-02 Refrigerator with camera and control method for the same
US14/930,091 US9528756B2 (en) 2013-04-23 2015-11-02 Refrigerator with camera and control method for the same
US14/929,978 US10036587B2 (en) 2013-04-23 2015-11-02 Refrigerator with camera and control method for the same
US14/930,444 US9890994B2 (en) 2013-04-23 2015-11-02 Refrigerator with camera and control method for the same
US14/950,520 US9739526B2 (en) 2013-04-23 2015-11-24 Refrigerator with heated camera module
US14/950,466 US9920982B2 (en) 2013-04-23 2015-11-24 Refrigerator camera module
US14/950,419 US9920981B2 (en) 2013-04-23 2015-11-24 Refrigerator with camera and control thereof
US15/720,989 US10184715B2 (en) 2013-04-23 2017-09-29 Refrigerator with camera and control method for the same
US15/721,131 US10215483B2 (en) 2013-04-23 2017-09-29 Refrigerator with camera and control method for the same
US15/721,140 US10228187B2 (en) 2013-04-23 2017-09-29 Refrigerator with camera and control method for the same

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020130124739A KR102194275B1 (en) 2013-10-18 2013-10-18 Displaying Apparatus of storage chamber and Controlling Method for the same

Publications (2)

Publication Number Publication Date
KR20150045255A true KR20150045255A (en) 2015-04-28
KR102194275B1 KR102194275B1 (en) 2020-12-22

Family

ID=53037288

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020130124739A KR102194275B1 (en) 2013-04-23 2013-10-18 Displaying Apparatus of storage chamber and Controlling Method for the same

Country Status (1)

Country Link
KR (1) KR102194275B1 (en)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN114484982A (en) * 2020-11-12 2022-05-13 海信（山东）冰箱有限公司 Refrigerator and image processing method in refrigerator

Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20060099985A (en) * 2005-03-15 2006-09-20 엘지전자 주식회사 Refrigerator with camera

Patent Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20060099985A (en) * 2005-03-15 2006-09-20 엘지전자 주식회사 Refrigerator with camera

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN114484982A (en) * 2020-11-12 2022-05-13 海信（山东）冰箱有限公司 Refrigerator and image processing method in refrigerator
CN114484982B (en) * 2020-11-12 2024-05-03 海信冰箱有限公司 Refrigerator and image processing method in refrigerator

Also Published As

Publication number Publication date
KR102194275B1 (en) 2020-12-22

Similar Documents

Publication Publication Date Title
KR101678444B1 (en) Refrigerator and Controlling Method for the same
KR102152400B1 (en) Refrigerator and Controlling Method for the same
KR102197963B1 (en) Refrigerator
KR20240073841A (en) Refrigerator and Controlling Method for the same
KR102347134B1 (en) Refrigerator and Controlling Method for the same
KR20150045255A (en) Displaying Apparatus of storage chamber and Controlling Method for the same
KR20180013448A (en) Refrigerator
KR20150127013A (en) Refrigerator and Controlling Method for the same
KR102417850B1 (en) Refrigerator and Controlling Method for the same
KR102232657B1 (en) Refrigerator and Controlling Method for the same
KR102486508B1 (en) Refrigerator
KR102472530B1 (en) Refrigerator
US20230314063A1 (en) Refrigerator
KR101662087B1 (en) Refrigerator and Controlling Method for the same
KR102377310B1 (en) Refrigerator and Controlling Method for the same
US20230224595A1 (en) Refrigerator
KR102231593B1 (en) Refrigerator and Controlling Method for the same
KR20220091256A (en) Refrigerator

Legal Events

Date Code Title Description
A201 Request for examination
E902 Notification of reason for refusal
E701 Decision to grant or registration of patent right
GRNT Written decision to grant