TWI660147B - 冰箱及冰箱系統 - Google Patents

冰箱及冰箱系統 Download PDF

Info

Publication number
TWI660147B
TWI660147B TW107110481A TW107110481A TWI660147B TW I660147 B TWI660147 B TW I660147B TW 107110481 A TW107110481 A TW 107110481A TW 107110481 A TW107110481 A TW 107110481A TW I660147 B TWI660147 B TW I660147B
Authority
TW
Taiwan
Prior art keywords
camera
refrigerator
image
storage room
food
Prior art date
Application number
TW107110481A
Other languages
English (en)
Other versions
TW201925706A (zh
Inventor
内田毅
峯澤聡司
新倉栄二
井上陽子
Original Assignee
日商三菱電機股份有限公司
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 日商三菱電機股份有限公司 filed Critical 日商三菱電機股份有限公司
Application granted granted Critical
Publication of TWI660147B publication Critical patent/TWI660147B/zh
Publication of TW201925706A publication Critical patent/TW201925706A/zh

Links

Classifications

    • F—MECHANICAL ENGINEERING; LIGHTING; HEATING; WEAPONS; BLASTING
    • F25—REFRIGERATION OR COOLING; COMBINED HEATING AND REFRIGERATION SYSTEMS; HEAT PUMP SYSTEMS; MANUFACTURE OR STORAGE OF ICE; LIQUEFACTION SOLIDIFICATION OF GASES
    • F25D—REFRIGERATORS; COLD ROOMS; ICE-BOXES; COOLING OR FREEZING APPARATUS NOT OTHERWISE PROVIDED FOR
    • F25D29/00—Arrangement or mounting of control or safety devices
    • F25D29/005—Mounting of control devices
    • F—MECHANICAL ENGINEERING; LIGHTING; HEATING; WEAPONS; BLASTING
    • F25—REFRIGERATION OR COOLING; COMBINED HEATING AND REFRIGERATION SYSTEMS; HEAT PUMP SYSTEMS; MANUFACTURE OR STORAGE OF ICE; LIQUEFACTION SOLIDIFICATION OF GASES
    • F25D—REFRIGERATORS; COLD ROOMS; ICE-BOXES; COOLING OR FREEZING APPARATUS NOT OTHERWISE PROVIDED FOR
    • F25D23/00—General constructional features
    • F25D23/02—Doors; Covers
    • F25D23/028—Details
    • G—PHYSICS
    • G03—PHOTOGRAPHY; CINEMATOGRAPHY; ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ELECTROGRAPHY; HOLOGRAPHY
    • G03B—APPARATUS OR ARRANGEMENTS FOR TAKING PHOTOGRAPHS OR FOR PROJECTING OR VIEWING THEM; APPARATUS OR ARRANGEMENTS EMPLOYING ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ACCESSORIES THEREFOR
    • G03B17/00—Details of cameras or camera bodies; Accessories therefor
    • G03B17/56—Accessories
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04M—TELEPHONIC COMMUNICATION
    • H04M1/00—Substation equipment, e.g. for use by subscribers
    • H04M1/72—Mobile telephones; Cordless telephones, i.e. devices for establishing wireless links to base stations without route selection
    • H04M1/724—User interfaces specially adapted for cordless or mobile telephones
    • H04M1/72403—User interfaces specially adapted for cordless or mobile telephones with means for local support of applications that increase the functionality
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/57—Mechanical or electrical details of cameras or camera modules specially adapted for being embedded in other devices
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/80—Camera processing pipelines; Components thereof
    • H04N23/81—Camera processing pipelines; Components thereof for suppressing or minimising disturbance in the image signal generation
    • F—MECHANICAL ENGINEERING; LIGHTING; HEATING; WEAPONS; BLASTING
    • F25—REFRIGERATION OR COOLING; COMBINED HEATING AND REFRIGERATION SYSTEMS; HEAT PUMP SYSTEMS; MANUFACTURE OR STORAGE OF ICE; LIQUEFACTION SOLIDIFICATION OF GASES
    • F25D—REFRIGERATORS; COLD ROOMS; ICE-BOXES; COOLING OR FREEZING APPARATUS NOT OTHERWISE PROVIDED FOR
    • F25D2400/00—General features of, or devices for refrigerators, cold rooms, ice-boxes, or for cooling or freezing apparatus not covered by any other subclass
    • F25D2400/36—Visual displays
    • F—MECHANICAL ENGINEERING; LIGHTING; HEATING; WEAPONS; BLASTING
    • F25—REFRIGERATION OR COOLING; COMBINED HEATING AND REFRIGERATION SYSTEMS; HEAT PUMP SYSTEMS; MANUFACTURE OR STORAGE OF ICE; LIQUEFACTION SOLIDIFICATION OF GASES
    • F25D—REFRIGERATORS; COLD ROOMS; ICE-BOXES; COOLING OR FREEZING APPARATUS NOT OTHERWISE PROVIDED FOR
    • F25D2400/00—General features of, or devices for refrigerators, cold rooms, ice-boxes, or for cooling or freezing apparatus not covered by any other subclass
    • F25D2400/36—Visual displays
    • F25D2400/361—Interactive visual displays
    • F—MECHANICAL ENGINEERING; LIGHTING; HEATING; WEAPONS; BLASTING
    • F25—REFRIGERATION OR COOLING; COMBINED HEATING AND REFRIGERATION SYSTEMS; HEAT PUMP SYSTEMS; MANUFACTURE OR STORAGE OF ICE; LIQUEFACTION SOLIDIFICATION OF GASES
    • F25D—REFRIGERATORS; COLD ROOMS; ICE-BOXES; COOLING OR FREEZING APPARATUS NOT OTHERWISE PROVIDED FOR
    • F25D2500/00—Problems to be solved
    • F25D2500/06—Stock management
    • F—MECHANICAL ENGINEERING; LIGHTING; HEATING; WEAPONS; BLASTING
    • F25—REFRIGERATION OR COOLING; COMBINED HEATING AND REFRIGERATION SYSTEMS; HEAT PUMP SYSTEMS; MANUFACTURE OR STORAGE OF ICE; LIQUEFACTION SOLIDIFICATION OF GASES
    • F25D—REFRIGERATORS; COLD ROOMS; ICE-BOXES; COOLING OR FREEZING APPARATUS NOT OTHERWISE PROVIDED FOR
    • F25D2700/00—Means for sensing or measuring; Sensors therefor
    • F25D2700/02—Sensors detecting door opening
    • F—MECHANICAL ENGINEERING; LIGHTING; HEATING; WEAPONS; BLASTING
    • F25—REFRIGERATION OR COOLING; COMBINED HEATING AND REFRIGERATION SYSTEMS; HEAT PUMP SYSTEMS; MANUFACTURE OR STORAGE OF ICE; LIQUEFACTION SOLIDIFICATION OF GASES
    • F25D—REFRIGERATORS; COLD ROOMS; ICE-BOXES; COOLING OR FREEZING APPARATUS NOT OTHERWISE PROVIDED FOR
    • F25D2700/00—Means for sensing or measuring; Sensors therefor
    • F25D2700/06—Sensors detecting the presence of a product

Landscapes

  • Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • Thermal Sciences (AREA)
  • Chemical & Material Sciences (AREA)
  • Combustion & Propulsion (AREA)
  • Mechanical Engineering (AREA)
  • General Engineering & Computer Science (AREA)
  • Signal Processing (AREA)
  • Multimedia (AREA)
  • General Physics & Mathematics (AREA)
  • Human Computer Interaction (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Cold Air Circulating Systems And Constructional Details In Refrigerators (AREA)

Abstract

提供一種冰箱，該冰箱係以更少台之相機的台數，可得到抑制影像之抖動及變形，並拍攝至各片棚板的內部之更清晰的貯藏室影像。因此，冰箱包括：本體，係被形成收容食品之貯藏室；一片以上之棚板，係被設置於貯藏室內，並被載置食品；門，係開閉貯藏室之一側；相機(2)，係被設置於門之內側的面，並拍攝貯藏室內的影像；以及相機移動裝置(20)，係使相機(2)在上下方向移動。相機移動裝置(20)係在相鄰的棚板彼此之間、及貯藏室的上端內面與上端內面之旁邊的棚板之間之各自的至少一處使相機(2)停止。相機(2)係每當相機移動裝置(20)使相機(2)停止移動時拍攝。

Description

冰箱及冰箱系統
本發明係有關於一種冰箱及冰箱系統。
在包括偵測冰箱內之影像之相機的冰箱，已知以所預定的固定速度使相機一面從移動範圍的上端往下端移動一面拍攝者(例如參照專利文獻1)。
【先行專利文獻】
【專利文獻】
[專利文獻1]日本特開2016-148503號公報
可是，在如專利文獻1所示的冰箱，因為以固定速度使相機一面移動一面拍攝，所以在所拍攝之影像發生抖動。又，根據相機所拍攝之時序，在所拍攝之影像中，有拍到貯藏室內之棚板上的食品之部分大為變形的可能性。又，根據相機所拍攝之時序，有位於棚板之內部的食品被前面之食品或棚板遮住的可能性。於是，根據以上之事項，所得之影像不適合影像識別，在用於影像識別的情況，貯藏室內之收容狀況的判定精度就降低。
本發明係為了解決如上述所示之課題的至少一個所開發者。其目的在於提供一種冰箱及冰箱系統，該冰箱係以更少台之相機的台數，可得到抑制影像之抖動及變形，並拍攝至各片棚板的內部之更清晰的貯藏室影像。
本發明之冰箱係包括：本體，係被形成收容食品之貯藏室；一片以上之棚板，係被設置於該貯藏室內，並被載置食品；門，係開閉該貯藏室之一側；相機，係被設置於該門之內側的面，並拍攝該貯藏室內的影像；以及相機移動裝置，係使該相機在上下方向移動；該相機移動裝置係在相鄰的該棚板彼此之間、及該貯藏室的上端內面與該上端內面之旁邊的該棚板之間之各自的至少一處使該相機停止；該相機係每當該相機移動裝置使該相機停止移動時拍攝。
本發明之冰箱系統係包括：如上述所示構成之冰箱；通訊裝置，係傳送該相機所拍攝之影像；以及終端裝置，係被設置成可與該通訊裝置進行通訊，並可接收通訊裝置所傳送之該相機所拍攝的影像。
若依據本發明之冰箱及冰箱系統，具有以更少台之相機的台數，可得到抑制影像之抖動及變形，並拍攝至各片棚板的內部之更清晰的貯藏室影像之效果。
1‧‧‧操作面板
1a‧‧‧面板顯示部
2‧‧‧相機
3‧‧‧影像伺服器
4‧‧‧貯藏室影像記憶部
5‧‧‧貯藏室影像管理部
6‧‧‧無線通訊部
7‧‧‧路由器裝置
8‧‧‧網際網路
9‧‧‧雲端伺服器
10‧‧‧使用者終端機
20‧‧‧相機移動裝置
21‧‧‧步進馬達
22‧‧‧蝸輪
23‧‧‧小齒輪
24‧‧‧齒條
25‧‧‧導引部
26‧‧‧蝸輪
27‧‧‧進給螺桿
28‧‧‧相機支撐部
29‧‧‧槽部
30‧‧‧食品
100‧‧‧冷藏室
101‧‧‧冷藏室門
102‧‧‧冷藏室棚板
103‧‧‧棚板支撐部
104‧‧‧門袋
110‧‧‧急冷室
111‧‧‧急冷箱
200‧‧‧製冰室
300‧‧‧切換室
400‧‧‧冷凍室
500‧‧‧蔬菜室
1000‧‧‧冰箱本體
1001‧‧‧控制基板
第1圖係本發明之第1實施形態之冰箱的正視圖。
第2圖係本發明之第1實施形態之冰箱的剖面圖。
第3圖係本發明之第1實施形態的冰箱之相機移動裝置的立體圖。
第4圖係透視本發明之第1實施形態的相機移動裝置之主要部所表示的放大立體圖。
第5圖係透視本發明之第1實施形態的相機移動裝置之別例的主要部所表示的放大立體圖。
第6圖係說明本發明之第1實施形態的相機移動裝置之在最下部的動作的圖。
第7圖係說明本發明之第1實施形態的相機移動裝置之在最下部的動作的圖。
第8圖係說明本發明之第1實施形態的相機移動裝置之在最下部的動作的圖。
第9圖係與比較例一起表示本發明之第1實施形態的冰箱之貯藏室內的影像之一例的圖。
第10圖係表示本發明之第1實施形態的冰箱之在時刻A之貯藏室內的影像之一例的圖。
第11圖係表示本發明之第1實施形態的冰箱之在時刻B之貯藏室內的影像之一例的圖。
第12圖係表示本發明之第1實施形態的冰箱之在時刻C之貯藏室內的影像之一例的圖。
第13圖係表示本發明之第1實施形態的冰箱之在時刻D之貯藏室內的影像之一例的圖。
第14圖係表示包括本發明之第1實施形態的冰箱之冰箱 系統的構成的圖。
第15圖係表示本發明之第1實施形態的冰箱系統之使用者終端機的顯示例的圖。
第16圖係表示本發明之第1實施形態的冰箱系統之使用者終端機的顯示例的圖。
第17圖係表示本發明之第1實施形態的冰箱系統之使用者終端機的顯示例的圖。
第18圖係表示本發明之第1實施形態的冰箱之食品影像資料庫所記憶之內容的一例的圖。
第19圖係表示本發明之第2實施形態的冰箱之相機的攝影位置之一例的主要部剖面圖。
一面參照附加之圖面，一面說明本發明之實施形態。在各圖，對相同或相當之部分附加相同的符號，並重複的說明係適當地簡化或省略。此外，本發明係不是被限定為以下的實施形態，可在不超出本發明之主旨的範圍進行各種變形。
第1實施形態
從第1圖至第18圖係與本發明之第1實施形態相關者，第1圖係冰箱的正視圖，第2圖係冰箱的剖面圖，第3圖係冰箱之相機移動裝置的立體圖，第4圖係透視相機移動裝置之主要部所表示的放大立體圖，第5圖係透視相機移動裝置之別例的主要部所表示的放大立體圖，從第6圖至第8圖係說明相機移動裝置之在最下部的動作的圖，第9圖係與比較例一起表示冰箱之貯藏室內的影像之一例的圖，第10圖係表示冰 箱之在時刻A之貯藏室內的影像之一例的圖，第11圖係表示冰箱之在時刻B之貯藏室內的影像之一例的圖，第12圖係表示冰箱之在時刻C之貯藏室內的影像之一例的圖，第13圖係表示冰箱之在時刻D之貯藏室內的影像之一例的圖，第14圖係表示包括冰箱之冰箱系統的構成的圖，從第15圖至第17圖係表示冰箱系統之使用者終端機的顯示例的圖，第18圖係表示冰箱之食品影像資料庫所記憶之內容的一例的圖。
此外，在各圖有各構成元件之尺寸的關係或形狀等與實際者係相異的情況。又，在專利說明書中之各構成元件彼此的位置關係(例如上下關係等)係原則上是將冷凍冰箱設置成可使用之狀態時者。
本發明之第1實施形態的冰箱係包括第1圖所示之冰箱本體1000。在本第1實施形態，冷藏室100、製冰室200、切換室300、冷凍室400以及蔬菜室500被形成於冰箱本體1000。這些冷藏室100、製冰室200、切換室300、冷凍室400以及蔬菜室500係收容食品的貯藏室。
這些貯藏室係如第1圖所示，從上按照冷藏室100、製冰室200與切換室300、冷凍室400以及蔬菜室500之順序所配置。製冰室200與切換室300係被配置成在相同的上下位置左右地排列。開閉冷藏室100之冷藏室門101被設置於冷藏室100的前面。冷藏室門101係開閉貯藏室之一側之門的一例。又，製冰室200、切換室300、冷凍室400以及蔬菜室500係構成為可與被設置於各自之前面的門一起拉出至冰箱本體1000的前側。
操作面板1被設置於冷藏室門101的前面。操作面板1包括面板顯示部1a。面板顯示部1a係可顯示資訊的本體顯示部。在面板顯示部1a，可顯示例如各貯藏室之設定溫度及現在之溫度等的冰箱內資訊。面板顯示部1a係包括例如液晶顯示器。操作面板1係包括例如觸控面板、按鈕、開關等的操作部。使用者係藉由操作操作面板1的操作部，可輸入所需的資訊。此外，操作面板1的設置位置係不是限定為冷藏室100的門，亦可是其他的貯藏室的門、冰箱本體1000的側面等。
如第2圖所示，冷藏室100係藉冷藏室門101塞住前面側(面向第2圖為左側)。此外，第2圖所示之剖面圖係根據第1圖中之剖面A-A’者。在冷藏室100的內部，被設置一片以上的冷藏室棚板102。此處，列舉設置複數片冷藏室棚板102的情況。冷藏室100的內部係藉這些冷藏室棚板102在上下方向隔開成複數個空間(棚)。食品被載置於冷藏室棚板102之上。
各片冷藏室棚板102係藉棚板支撐部103在冷藏室100內之預定位置所支撐。棚板支撐部103係以從冷藏室100的側壁內面向冷藏室100之內側突出的方式所形成。此外，亦可將棚板支撐部103構成為可變更一片冷藏室棚板102的上下位置。
最下段的冷藏室棚板102之下側的空間係急冷室110。急冷箱111被設置於急冷室110的內部。急冷箱111係可沿著軌道等之導引構件(未圖示)，向前方拉出。門袋104被設置於冷藏室門101之內側的面。在此門袋104亦可載置、收 容食品。
相機2被設置於冷藏室門101之內側的面。相機2係從冷藏室門101之側拍攝貯藏室(此處係冷藏室100)之內部的影像，並作為貯藏室影像輸出。本發明之第1實施形態的冰箱本體1000包括相機移動裝置20。相機移動裝置20係使相機2在上下方向移動的裝置。相機移動裝置20係被設置於冷藏室門101之內側的面。
相機移動裝置20係在可動範圍使相機2在上下方向移動。可動範圍係所預設的範圍。此處，可動範圍的上端係冷藏室100內的上端部。又，可動範圍的下端係位於最下面的門袋104之正上的位置。
其次，一面參照第3圖至第5圖，一面說明相機移動裝置20的構成。相機移動裝置20係如第3圖及第4圖所示，包括步進馬達21、蝸輪22、小齒輪23、齒條24、導引部25以及相機支撐部28。相機2係被固定於相機支撐部28。導引部25係被固定於冷藏室門101，相機支撐部28係可對導引部25移動。導引部25係至少在上述的可動範圍沿著上下方向所配置。導引部25係導引在上述之可動範圍之相機2及相機支撐部28的移動。
如第4圖所示，步進馬達21、蝸輪22以及齒條24被安裝於相機支撐部28。齒條24被安裝於導引部25。齒條24係在上述的可動範圍沿著上下方向所配置。又，槽部29被形成於導引部25。槽部29係在上述的可動範圍所配置。
步進馬達21係驅動相機2的移動。蝸輪22被固 定於步進馬達21的驅動軸。小齒輪23係一體地構成大齒輪與小齒輪。小齒輪23之大齒輪與小齒輪係被固定成轉軸成為相同。小齒輪23之大齒輪係與蝸輪22嚙合。小齒輪23之小齒輪係與齒條24嚙合。
藉步進馬達21使蝸輪22轉動時，小齒輪23轉動。藉由與齒條24嚙合之狀態的小齒輪23轉動，小齒輪23的轉軸沿著齒條24成直線狀地移動。小齒輪23的轉軸係被相機支撐部28支撐成可轉動。因此，藉這種齒條與小齒輪機構，相機移動裝置20係將步進馬達21的旋轉運動變換成對導引部25之相機支撐部28的直線運動，使相機2對冷藏室門101在上下方向移動。
此外，相機2的移動量係與步進馬達21的轉動量成正比。而且，步進馬達21的轉動量係可使用步進數來控制。因此，相機移動裝置20係可使用步進馬達21的步進數來控制相機2的移動量。
第5圖所示者係相機移動裝置20之構成的別例。在此別例，藉進給螺桿機構使相機2移動。在此別例，相機移動裝置20包括步進馬達21、蝸輪22、蝸輪26、進給螺桿27以及相機支撐部28。
蝸輪22被固定於步進馬達21的驅動軸。蝸輪26與蝸輪22嚙合。進給螺桿27與蝸輪26連結成轉軸成為相同。進給螺桿27係在上述的可動範圍沿著上下方向所配置。相機支撐部28被安裝於進給螺桿27。在相機支撐部28，被切削與進給螺桿27之螺紋脊卡合的陰螺紋。相機2被固定於相機支 撐部28。
藉步進馬達21使蝸輪22轉動時，蝸輪26及進給螺桿27轉動。藉由進給螺桿27轉動，相機支撐部28藉螺桿作用沿著進給螺桿27的轉軸成直線狀地移動。藉這種進給螺桿機構，相機移動裝置20係將步進馬達21之旋轉運動變換成相機支撐部28的直線運動，使相機2對冷藏室門101在上下方向移動。
其次，一面參照第6圖至第8圖，一面說明相機移動裝置20之上述的可動範圍之下端部分構成、及相機移動裝置20使相機2移至上述之可動範圍的下端時的動作。如上述所示，在導引部25，在上述的可動範圍形成槽部29。如這些圖所示，此槽部29係上述之可動範圍的下端部分，從上下方向往冷藏室門101側的方向圓滑地彎曲。在其他的部分，槽部29係沿著上下方向。
在相機支撐部28所形成之未圖示的突起部被插入槽部29內。此突起質量部係被配置於比小齒輪23更靠近冷藏室門101側。小齒輪23在齒條24上轉動時，藉由相機支撐部28的突起部在被限制於槽部29內之狀態在槽部29內移動，決定相機支撐部28之方向，即相機2的方向。
如第6圖所示，槽部29係在沿著上下方向的部分，即使相機支撐部28移動亦相機2的方向被保持與冷藏室門101係相反側之狀態。相機2繼續下降而相機支撐部28的突起部到達槽部29的彎曲部時，相機支撐部28的小齒輪23係仍然繼續下降，相對地，相機支撐部28的突起部係被槽部 29導引，停止下降，而向冷藏室門101側開始移動。因此，如第7圖所示，相機支撐部28開始傾斜，而相機2開始朝下。
然後，相機2來到上述之可動範圍的下端時，如第8圖所示，相機2係朝向正下。如上述所示，可動範圍的下端係門袋104之正上的位置。因此，位於可動範圍之下端的相機2係可從上方拍攝門袋104的內部。依此方式，相機移動裝置20係可將相機2移動至可從上方拍攝門袋104之內部的位置及方向。
相機2係例如在開閉冷藏室門101時拍攝冷藏室100內。這是由於開閉冷藏室門101時，冷藏室100內的食品進出，而具有冷藏室100內之收容狀態變化的可能性。冰箱本體1000包括可偵測門之開閉的感測器。此感測器係例如是一般之磁鐵方式的感測器。即，此感測器係例如藉設置於冰箱本體1000側之一對磁簧開關檢測出被埋入冷藏室門101之磁鐵的接近。相機2係例如在偵測到打開之冷藏室門101被關閉後，在照明冷藏室100內之間拍攝。
藉此相機2之冷藏室100內的攝影係與藉相機移動裝置20之相機2的移動連繫地進行。其次，說明相機2與相機2之連繫的攝影動作。在拍攝冷藏室100內時，相機移動裝置20係一面在中途使相機2停止移動，一面使相機2從上述之可動範圍的一端移動至另一端。而且，相機2係每當相機移動裝置20使相機2停止移動時拍攝。
例如，相機移動裝置20係使相機2在下方向從上述之可動範圍的上端移至下端。在此時，相機移動裝置20係 在冷藏室100的上端內面與該上端內面之旁邊的冷藏室棚板102之間的至少一處使相機2停止。而且，在停在該位置之間相機2係拍攝影像。在此時相機2所拍攝之影像係表示冷藏室100的上端內面之旁邊的冷藏室棚板102，即最上段之冷藏室棚板102的收容狀況。在相機2拍攝影像後，相機移動裝置20係使相機2再開始下降。
又，相機移動裝置20係在相鄰的冷藏室棚板102彼此之間的各個之至少一處使相機2停止。而且，在停在該位置之間相機2係拍攝影像。在此時相機2所拍攝之影像係表示位於相機2之位置的正下之冷藏室棚板102的收容狀況。在相機2拍攝影像後，相機移動裝置20係使相機2再開始下降。
依此方式，相機2到達上述之可動範圍的下端時，如上述所示，相機2來到可從上方拍攝門袋104之內部的位置及方向。而且，在停在該位置之間相機2係拍攝影像。在此時相機2所拍攝之影像係表示最下部之門袋104的收容狀況。
依以上之方式，在相機2位於相鄰的冷藏室棚板102彼此之間的位置時相機2係拍攝。又，在相機2位於冷藏室100的上端內面、與此上端內面之旁邊的冷藏室棚板102之間的位置時，亦相機2係拍攝。進而，在本第1實施形態，相機2係從上方拍攝門袋104的內部。此外，亦可相機移動裝置20係在上方向使相機2從上述之可動範圍的下端移至上端。
在本第1實施形態，相機移動裝置20係使用步進馬達21的步進數來控制在上述的可動範圍內之相機2的位置。即，相機移動裝置20係藉由計數步進馬達21的步進馬達 21的步進數來特定使相機2停止的位置。
此處，在棚板支撐部103之位置被固定而無法變更的情況，使相機2停止的位置亦可固定於。因此，例如，相機移動裝置20係預先記憶關於使相機2停止之位置的資訊，例如步進馬達21的步進數。而且，想到在步進馬達21的步進數成為預先記憶之值時相機移動裝置20係使相機2停止。
又，在可變更冷藏室棚板102之位置的情況，係想到依如下之方式來特定現在之冷藏室棚板102的位置，並決定相機2的停止位置。首先，第1例係將檢測出冷藏室棚板102之位置的手段設置於棚板支撐部103。作為檢測出冷藏室棚板102之位置的手段，具體而言，例如想到使用微開關等。在此情況，預先將微開關設定成在將冷藏室棚板102配置於棚板支撐部103之適當的位置時，被該冷藏室棚板102推壓。而且，根據哪一個微開關被推壓，可檢測出冷藏室棚板102的位置。
第2例係使用相機2所拍攝之影像來特定冷藏室棚板102之位置的方法。在本方法，首先，最初一面以相機移動裝置20在上述之可動範圍的整體使相機2移動，一面以相機2拍攝影像。在此時之攝影位置係若最後可網羅以相機2可拍攝之冷藏室100的整個範圍，無特別限定。而且，分析依此方式所拍攝之影像，可特定現在之冷藏室棚板102的位置。
此外，相機移動裝置20係可作成在偵測冷藏室門101之開閉的感測器偵測到冷藏室門101之閉動作的情況，使相機2移至上述之可動範圍的一端，進行步進馬達21的原點修正。即，在感測器偵測到冷藏室門101之閉動作的情況，相 機移動裝置20係最初使相機2移至上述之可動範圍的例如上端。而且，相機移動裝置20係將步進馬達21之步進數的計數值歸零。藉由作成依此方式，可修正步進馬達21的步進數與實際之相機2的位置之偏差。
再一面參照第2圖一面繼續說明。冰箱本體1000係包括控制基板1001。控制基板1001係例如被收容於冰箱本體1000之背面側的上部。在控制基板1001，包括用以實施形態冰箱本體1000的動作所需之各種控制的控制電路等。控制基板1001係例如包括微電腦，即，包括處理器及記憶體。控制基板1001係藉由處理器執行記憶體所記憶之程式，而執行所預設的處理，控制冰箱本體1000。
本發明之第1實施形態的冰箱系統係首先包括如以上所示構成的冰箱本體1000。又，此冰箱系統係更包括影像伺服器3。影像伺服器3係用以進行貯藏室影像之保存、管理以及往外部的傳送者。影像伺服器3係被設置於設置冰箱本體1000的住宅內(以下只稱為「住宅內」)，且，冰箱本體1000之貯藏室的外側。第1圖及第2圖所示者係將影像伺服器3配置於冰箱本體1000之頂部的外面部之例子。此外，影像伺服器3的設置位置係不限定為冰箱本體1000之頂部。只要是將影像伺服器3設置於冰箱本體1000的貯藏室之外，亦可設置於冰箱本體1000的側面、背面或貯藏室的門。又，亦可將影像伺服器3組裝於控制基板1001。
影像伺服器3係與上述之控制基板1001一樣地包括例如微電腦，即，包括處理器及記憶體。又，影像伺服器3 係如第2圖所示，包括貯藏室影像記憶部4、貯藏室影像管理部5以及無線通訊部6。這些各部之功能係例如在影像伺服器3的微電腦，藉由處理器執行記憶體所記憶之程式，而執行所預設的處理所實現。此外，影像伺服器3係例如與控制基板1001連接，從控制基板1001接受電力的供給而動作。
貯藏室影像記憶部4係記憶從相機2所輸出之貯藏室影像。如上述所示，偵測到冷藏室門101之開閉時，相機2係與相機移動裝置20連繫地拍攝冷藏室100內之各片冷藏室棚板102及最下部之門袋104的收容狀況。相機2係向貯藏室影像記憶部4輸出所拍攝之影像。從相機2所輸出之影像係被輸入貯藏室影像記憶部4。
因此，在貯藏室影像記憶部4，每當冷藏室門101開閉(即，每當有冷藏室100內之收容狀態變化的可能性)時，就被輸入從相機2所輸出之影像。依此方式，在貯藏室影像記憶部4係總是被輸入最新之狀態之冷藏室100內的影像。
貯藏室影像記憶部4係暫時記憶所輸入之最新的貯藏室影像。在此時，貯藏室影像記憶部4係將貯藏室影像被輸入貯藏室影像記憶部4的時刻作為攝影時刻資訊，與該貯藏室影像一起暫時地記憶。此外，攝影時刻資訊係亦包含所拍攝之日期(月日或年月日)的資訊。
此處，一面參照第9圖。一面在與比較例對比下說明藉本發明之第1實施形態的冰箱本體1000所拍攝之影像的特徵。面向第9圖之紙面時右側的5個影像係藉本發明之第1實施形態的冰箱本體1000所拍攝之各冷藏室棚板102及最下 部的門袋104之收容狀況的影像例。
又，面向第9圖之紙面時左側的5個影像係在比較例之各冷藏室棚板102及最下部的門袋104之收容狀況的影像例。在此比較例，2台相機被設置於固定的位置。為了作成以2台相機可拍攝全部的冷藏室棚板102及最下部之門袋104的收容狀況，在各相機係使用魚眼透鏡。
在此比較例，偏離相機之正面的冷藏室棚板102就存在。因此，在第9圖之例子，尤其在最上段與從上面第3個影像變形就變大。又，在這些影像，成為來自從冷藏室棚板102之下向上看的視點之影像。因此，係難從影像確認內部的收容狀況。又，對用以判定收容狀況的影像識別係不適合。
相對地，在藉本發明之第1實施形態的冰箱本體1000所拍攝之影像，在全部之冷藏室棚板102的影像，變形比比較例少。而且，內部之收容狀況的確認亦容易。因此，藉由用於影像識別，可更正確地判定收容狀況。
依此方式，在本發明之第1實施形態的冰箱本體1000，使相機2在上下方向移動的相機移動裝置20係在相鄰的棚板彼此之間、及冷藏室的上端內面與該上端內面之旁邊的棚板之間之各自的至少一處使相機2停止。而且，相機2係每當相機移動裝置20使相機2停止移動時拍攝。因此，以更少台之相機的台數，可得到抑制影像之抖動及變形，並拍攝至各片棚板的內部之更清晰的貯藏室影像。而且，藉由將依此方式所得之影像用於影像識別，可更正確地判定貯藏室內的收容狀況。
再一面參照第2圖一面繼續說明。在貯藏室影像記憶部4，記憶如以上所說明之各冷藏室棚板102及最下部的門袋104之收容狀況的最新影像。貯藏室影像管理部5係從貯藏室影像記憶部4取得貯藏室影像記憶部4所記憶之這些的貯藏室影像及攝影時刻資訊。
但，在貯藏室影像記憶部4所記憶之貯藏室影像，亦具有因相機2之透鏡之特性上的原因而發生微小之變形的可能性。又，根據冷藏室100內之照明及收容狀態，亦想到在各影像間有亮度不均的情況。因此，因應於需要，貯藏室影像管理部5係修正相機2所拍攝之影像的亮度及變形的一方或雙方。即，根據此意義，貯藏室影像管理部5係修正相機2所拍攝之影像的亮度及變形的一方或雙方的影像處理部。
貯藏室影像管理部5係從因應於需要所修正之各冷藏室棚板102之收容狀況的最新影像，合成冷藏室100內之整體的最新影像。而且，貯藏室影像管理部5係根據攝影時刻資訊。按照攝影時刻之順序變更合成後之貯藏室影像的排列並記憶。依此方式，藉相機2所拍攝之貯藏室影像係暫時被記憶於貯藏室影像記憶部4後，向貯藏室影像管理部5移動並受到管理。
進而，貯藏室影像管理部5係在判別入庫及出庫後按照時間序列保存並管理藉相機2所拍攝之食品的影像。例如，貯藏室影像管理部5係首先，從藉相機2所拍攝之影像，抽出各個食品的影像。接著，貯藏室影像管理部5係比較從在連續的2個時間點藉相機2所拍攝之影像所抽出之各個食品的 影像，藉此，對各個食品判別對冷藏室100入庫或出庫。在此時，從在入庫或出庫的判別所使用之2個影像的攝影日期時間，可特定大致之入庫日期時間及出庫日期時間。依此方式，貯藏室影像管理部5係根據藉相機2所拍攝之影像，對各個食品的影像，特定入庫日期時間及出庫日期時間，並按照時間序列保存並管理各個食品的影像。
其次，參照第10圖至第13圖，列舉具體例來說明使用藉相機2所拍攝的影像之食品的入庫及出庫的判別。第10圖所示者係在時刻A之冷藏室100內的影像之例子。將此時刻A當作出入庫判定的基準時刻。
第11圖所示者係在時刻B之冷藏室100內的影像之例子。時刻B係比時刻A更後的時刻。貯藏室影像管理部5係藉由取時刻A之冷藏室100內的影像與時刻B之冷藏室100內的影像之差分，判定從最上面的冷藏室棚板102將2瓶啤酒進行出庫。貯藏室影像管理部5係從時刻A之影像抽出該2瓶啤酒的影像。而且，貯藏室影像管理部5係與所抽出之影像一起記憶出入庫的區別，即在此處係「出庫」與出庫時刻B。
第12圖所示者係在時刻C之冷藏室100內的影像之例子。時刻C係比時刻B更後的時刻。貯藏室影像管理部5係藉由取時刻B之冷藏室100內的影像與時刻C之冷藏室100內的影像之差分，判定從下開始第2段的冷藏室棚板102將沙拉進行出庫。貯藏室影像管理部5係從時刻A或時刻B之影像抽出該沙拉的影像。而且，貯藏室影像管理部5係與所抽出之影像一起記憶出入庫的區別，即在此處係「出庫」與出庫時 刻C。
第13圖所示者係在時刻D之冷藏室100內的影像之例子。時刻D係比時刻C更後的時刻。貯藏室影像管理部5係藉由取時刻C之冷藏室100內的影像與時刻D之冷藏室100內的影像之差分，判定對最上面的冷藏室棚板102將2瓶牛奶進行入庫，更對從下面開始第2段的冷藏室棚板102將蛋糕進行入庫。。貯藏室影像管理部5係從時刻D之影像抽出該2瓶牛奶及該蛋糕的影像。而且，貯藏室影像管理部5係與所抽出之影像一起記憶出入庫的區別，即在此處係「入庫」與入庫時刻D。
依此方式，貯藏室影像管理部5係可根據相機2所拍攝之影像，判定對冷藏室100有無出入庫。
再一面參照第2圖一面繼續說明。無線通訊部6係可與外部通訊的通訊裝置。無線通訊部6係使用例如周知的無線通訊技術，在冰箱本體1000的影像伺服器3與路由器裝置7之間進行資訊的相互通訊。此外，影像伺服器3與路由器裝置7之通訊係不限定為無線方式，亦可是有線方式。
第14圖所示者係本發明之第1實施形態的冰箱系統之整體構成。如第14圖所示，本發明之第1實施形態的冰箱系統包括使用者終端機10。使用者終端機10係被設置成可與是通訊裝置之無線通訊部6通訊的終端裝置。使用者終端機10係具體而言，例如是PC、智慧型手機、平板終端機等。此外，使用者終端機10係被設置1台以上，被設置複數台較佳。
使用者終端機10包括未圖示之終端機顯示部。終端機顯示部係例如包括液晶顯示器等。又，亦可作成以觸控面板構成終端機顯示部，可顯示資訊，而且受理來自使用者的操作。使用者終端機10之終端機顯示部係可顯示包含貯藏室影像及攝影時刻資訊的各種資訊。
如第14圖所示，冰箱本體1000、影像伺服器3以及路由器裝置7係被設置於住宅內。路由器裝置7係例如經由網際網路8，與雲端伺服器9連接成可通訊。雲端伺服器9係上述之外部伺服器。在第14圖係作為外部伺服器，舉例表示使用由與網際網路8連接之複數台伺服器(伺服器群)所構成之雲端伺服器9的情況。可是，外部伺服器係不限定為雲端伺服器9，亦可是一台伺服器。網際網路8及雲端伺服器9係位於設置冰箱本體1000之住宅內之外側的住宅外(以下只稱為「住宅外」)。
無線通訊部6係經由路由器裝置7及網際網路8，向住宅外的雲端伺服器9傳送貯藏室影像記憶部4及貯藏室影像管理部5所記憶之影像及資訊。而且，雲端伺服器9係記憶所接收之影像及資訊。
在此時，設想對雲端伺服器9之通訊擁擠，而無法以一次上傳(傳送)貯藏室影像的情況，亦可作成設定從無線通訊部6對雲端伺服器9之貯藏室影像的上傳之最大重試次數。而且，亦可作成無線通訊部6係在到達最大重試次數的情況，即時地上傳。
住宅外之使用者終端機10係經由網際網路8對雲 端伺服器9存取。使用者在使用者終端機10進行與冰箱本體1000相關之影像及資訊的顯示操作時，使用者終端機10係傳送傳送要求。收到傳送要求之雲端伺服器9係向使用者終端機10傳送本身所記憶之影像及資訊。使用者終端機10係從雲端伺服器9經由網際網路8接收影像及資訊。而且，使用者終端機10係將所接收之與冰箱本體1000相關的影像及資訊顯示於終端機顯示部。
此外，亦可使用者終端機10係不經由雲端伺服器9等之外部伺服器，而經由路由器裝置7及網際網路8接收從無線通訊部6所傳送之與冰箱本體1000相關之影像及資訊。又，在貯藏室影像管理部5判定有對冷藏室100之出入庫的情況，亦可無線通訊部6係經由路由器裝置7及網際網路8向使用者終端機10通知該主旨。
第15圖至第17圖係使用者終端機10所顯示之畫面的例子。第15圖所示者係「出入庫時間線」的顯示例。如上述所示，影像伺服器3之貯藏室影像管理部5係根據相機2所拍攝之冷藏室100內的影像，記憶出入庫日期時間、所出入庫之食品的影像。出入庫時間線係按照時間序列排列地顯示這些之影像及資訊的畫面。
第16圖所示者係「出入庫列表」的顯示例。此出入庫列表亦與出入庫時間線一樣地顯示影像伺服器3的貯藏室影像管理部5所記憶之出入庫日期時間、出入庫的區別、所出入庫之食品的影像。但，在此出入庫列表與出入庫時間線，顯示形式相異。此出入庫列表係將出入庫日期時間及所出入庫之 食品的影像分成「入庫」之行與「出庫」之行，並顯示成列表狀的畫面。
第17圖所示者係「庫存食品一覽表」的顯示例。如上述所示，影像伺服器3之貯藏室影像管理部5係從相機2所拍攝之冷藏室100內的影像，抽出各個食品的影像並記憶。此庫存食品一覽表係以一覽表形式顯示在某時刻冷藏室100內所收容之各個食品的影像之畫面。
此外，以上之「出入庫時間線」、「出入庫列表」以及「庫存食品一覽表」的各畫面係亦可顯示於操作面板1的面板顯示部1a。又，亦可作成在面板顯示部1a，除了這些畫面以外，還可顯示在貯藏室影像管理部5所管理及記憶的各種影像及資訊、以及貯藏室影像記憶部4所記憶之影像等。
亦可貯藏室影像管理部5係不僅從相機2所拍攝之影像抽出冷藏室100內之各個食品的影像，而且從相機2所拍攝之影像判定冷藏室100內之各個食品的種類及數量。為了此判定，貯藏室影像管理部5係預先記憶食品影像資料庫。食品影像資料庫係對各食品種類，將該食品的形狀、大小、顏色以及外裝標籤的至少一種賦與對應之資料的集合。根據此意義，在貯藏室影像管理部5，包括食品資訊記憶部，該食品資訊記憶部係對各食品種類，將該食品的形狀、大小、顏色以及外裝標籤的至少一種賦與對應並預先記憶。
一面參照第18圖一面說明食品影像資料庫所記憶之資訊的具體例。食品影像資料庫係對各食品種類，記憶可將該食品種類與其他的食品種類區別之特徵性的屬性。此處，與 該食品種類賦與對應地記憶屬於該食品種類的食品本身或裝入該食品之容器的特徵量。具體而言，對各食品種類，將形狀(輪廓)、長軸的大小、代表色(RGB值)以及標籤(文字)等的資訊作為特徵量。
此外，作為食品影像資料庫所記憶之各食品種類的形狀，除了此處所例舉之輪廓以外，亦可採用例如最接近該食品之外形的幾何學上的形狀(例如圓柱、梯形等)。在此情況，在藉貯藏室影像管理部5之判定，例如根據圖案比對等的手法進行與食品影像資料庫所記憶之形狀的比對。又，關於顏色，亦可作成除了使用代表色之RGB值以外，還可使用例如亮度、彩度等其他的指標值。
貯藏室影像管理部5係一面參照如以上所示之食品影像資料庫所記憶的資訊，一面根據貯藏室影像管理部5所保存、管理之影像，判定貯藏室(此處係冷藏室100)內之食品的種類及數量。在此判定，貯藏室影像管理部5係對從相機2所拍攝之影像抽出的各個食品的影像，比對是否與食品影像資料庫所記憶之食品的種類中哪一種之食品種類的特徵量一致。
然後，在有與各個食品的影像一致之食品影像資料庫所記憶之特徵量的情況，貯藏室影像管理部5係判定該影像之食品的種類係在食品影像資料庫對該一致之特徵量所賦予對應的種類。此外，在食品影像資料庫無特徵量一致之資料的情況，亦可作成以最類似之食品的種類替代該影像之食品的種類，或者該影像之食品的係當作種類不明之收容物，並僅識別大小。
依此方式，貯藏室影像管理部5係藉由比較從相機2所拍攝之影像抽出之食品的影像、與食品影像資料庫所記憶之特徵量，可對冷藏室100內所收容之食品，特定種類及其數量。
第2實施形態
第19圖係與本發明之第2實施形態相關者，係表示冰箱之相機的攝影位置之一例的主要部剖面圖。以下，對本第2實施形態的冰箱系統，列舉根據第1實施形態之構成的情況，主要說明與第1實施形態的相異點。
此處所說明之第2實施形態係在上述之第1實施形態的構成，相機移動裝置20作成在相鄰的冷藏室棚板102彼此之間、及冷藏室100的上端內面與該上端內面之旁邊的冷藏室棚板102之間的至少2處以上使相機2停止。而且，相機2係每當相機移動裝置20使相機2停止移動時拍攝。
即，在相鄰的冷藏室棚板102彼此之間之相異的2個以上的位置，相機2係拍攝。又，相機2在冷藏室100的上端內面與該上端內面之旁邊的冷藏室棚板102之間的相異之2個以上的位置，亦相機2係拍攝。
第19圖所示者係在相鄰的冷藏室棚板102彼此之間的3處，使相機2停止並拍攝的例子。如第19圖所示，在相鄰的冷藏室棚板102彼此之間之比較上側的位置使相機2停止並拍攝的情況，可拍攝位於冷藏室棚板102之內部的食品30。又，對食品30之包裝上面亦易清晰地拍攝。可是，難從前面拍攝位於冷藏室棚板102之前側的食品30。
相對地，在相鄰的冷藏室棚板102彼此之間之比較下側的位置使相機2停止並拍攝的情況，可從前面拍攝位於冷藏室棚板102之前側的食品30。另一方面，位於冷藏室棚板102之內部的食品30係成為位於前面之食品30的影子。
因此，藉由對一片冷藏室棚板102，以相機2從上下位置相異的複數個位置拍攝，而可從冷藏室棚板102的前側至內側，拍攝更多的食品。
在本第2實施形態，貯藏室影像管理部5係對各片冷藏室棚板102，修正位於比該冷藏室棚板102上側之2處以上的位置之相機2所拍攝的影像之亮度及變形的一方或雙方後，進行合成，而產生該冷藏室棚板102之食品收容狀態影像。而且，貯藏室影像管理部5係將各片102之食品收容狀態影像合成，而產生冷藏室100內之整體的影像。
此外，關於其他的構成係與第1實施形態一樣，此處係省略其說明。
在如以上所示構成的冰箱系統，亦可具有與第1實施形態一樣之效果。進而，因為從冷藏室棚板102的前側至內側，可得到清晰地拍攝更多之食品的影像，所以收容狀況的確認係容易。又，藉由將依此方式所得之影像用於影像識別，可更正確地判定貯藏室內的收容狀況。
【工業上之可應用性】
本發明係可利用於包括拍攝貯藏室內之影像之相機的冰箱。又，可利用於向冰箱之外部傳送貯藏室內之影像的冰箱系統。

Claims (13)

  1. 一種冰箱，係包括：本體，係被形成收容食品之貯藏室；一片以上之棚板，係被設置於該貯藏室內，並被載置食品；門，係開閉該貯藏室之一側；相機，係被設置於該門之內側的面，並拍攝該貯藏室內的影像；以及相機移動裝置，係使該相機在上下方向移動；該相機移動裝置係在相鄰的該棚板彼此之間、及該貯藏室的上端內面與該上端內面之旁邊的該棚板之間之各自的至少一處使該相機停止；該相機係每當該相機移動裝置使該相機停止移動時拍攝。
  2. 如申請專利範圍第1項之冰箱，其中該相機移動裝置係在相鄰的該棚板彼此之間、及該貯藏室的上端內面與該上端內面之旁邊的該棚板之間之各自的至少2處以上使該相機停止。
  3. 如申請專利範圍第2項之冰箱，其中更包括影像處理部，該影像處理部係對各片棚板，修正位於比該棚板上側之2處以上的位置之該相機所拍攝的影像之亮度及變形的一方或雙方後，進行合成，而產生該棚板102之食品收容狀態影像。
  4. 如申請專利範圍第1至3項中任一項之冰箱，其中更包括被設置於門之內側的門袋；該相機移動裝置係可將該相機移動至可從上方拍攝該門袋之內部的位置及方向。
  5. 如申請專利範圍第1至3項中任一項之冰箱，其中該相機移動裝置係包括驅動該相機之移動的步進馬達；使該相機在所預設的可動範圍內在上下方向移動；使用該步進馬達之步進數來控制在該可動範圍內之該相機的位置。
  6. 如申請專利範圍第5項之冰箱，其中更包括偵測該門之開閉的感測器；該相機移動裝置係在該感測器偵測到該門之閉動作的情況，使該相機移動至該可動範圍的一端，進行該步進馬達的原點修正。
  7. 一種冰箱系統，係包括：如申請專利範圍第1~3項中任一項之冰箱；通訊裝置，係傳送該相機所拍攝之影像；以及終端裝置，係被設置成可與該通訊裝置進行通訊，並可接收通訊裝置所傳送之該相機所拍攝的影像。
  8. 如申請專利範圍第7項之冰箱系統，其中更包括影像管理部，該影像管理部係根據該相機所拍攝的影像，判定對該貯藏室之出入庫的有無；該通訊裝置係在該影像管理部判定對該貯藏室有出入庫的情況，向該終端裝置通知該主旨。
  9. 如申請專利範圍第8項之冰箱系統，其中該影像管理部係從該相機所拍攝的影像抽出對該貯藏室有出入庫之食品的影像，且判定出入庫之區別及出入庫日期時間；該通訊裝置係向該終端裝置傳送從該相機所拍攝的影像所抽出之有出入庫之食品的影像、及出入庫之區別與出入庫日期時間的資訊。
  10. 如申請專利範圍第9項之冰箱系統，其中該終端裝置係能以時間序列顯示有出入庫之食品的影像、及出入庫之區別與出入庫日期時間的資訊。
  11. 如申請專利範圍第9項之冰箱系統，其中該終端裝置係能區分入庫與出庫地顯示有出入庫之食品的影像、及出入庫之區別與出入庫日期時間的資訊。
  12. 如申請專利範圍第8項之冰箱系統，其中該影像管理部係從該相機所拍攝的影像抽出該貯藏室內之各個食品的影像；該通訊裝置係向該終端裝置傳送從該相機所拍攝的影像所抽出之該貯藏室內之各個食品的影像；該終端裝置係可顯示該貯藏室內之各個食品的影像。
  13. 如申請專利範圍第8項之冰箱系統，其中該影像管理部係對各食品的種類，將該食品的形狀、大小、顏色以及外裝標籤的至少一種賦與對應並預先記憶，且參照所記憶之資訊，從該相機所拍攝的影像判定該貯藏室內之各個食品的種類及數量。
TW107110481A 2017-11-27 2018-03-27 冰箱及冰箱系統 TWI660147B (zh)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
PCT/JP2017/042403 WO2019102616A1 (ja) 2017-11-27 2017-11-27 冷蔵庫及び冷蔵庫システム
??PCT/JP2017/042403 2017-11-27

Publications (2)

Publication Number Publication Date
TWI660147B true TWI660147B (zh) 2019-05-21
TW201925706A TW201925706A (zh) 2019-07-01

Family

ID=66631867

Family Applications (1)

Application Number Title Priority Date Filing Date
TW107110481A TWI660147B (zh) 2017-11-27 2018-03-27 冰箱及冰箱系統

Country Status (7)

Country Link
US (1) US11506449B2 (zh)
EP (1) EP3719424B1 (zh)
JP (1) JP7092794B2 (zh)
KR (1) KR102378032B1 (zh)
CN (1) CN111386435B (zh)
TW (1) TWI660147B (zh)
WO (1) WO2019102616A1 (zh)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
TWI778388B (zh) * 2019-08-02 2022-09-21 日商三菱電機股份有限公司 冰箱

Families Citing this family (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR102619657B1 (ko) * 2018-06-15 2023-12-29 삼성전자주식회사 냉장고와 서버 및 서버의 제어 방법
DE102019121949A1 (de) * 2019-08-14 2021-02-18 Liebherr-Hausgeräte Ochsenhausen GmbH Kühl- und/oder Gefriergerät
US11408611B2 (en) * 2020-01-21 2022-08-09 Haier Us Appliance Solutions, Inc. Oven appliance with an adjustable camera assembly
US20230123202A1 (en) * 2020-03-18 2023-04-20 Vestel Elektronik Sanayi Ve Ticaret A.S. System for capturing and preferably processing images of a compartment of a refrigerator and refrigerator
CN113468359A (zh) * 2020-07-14 2021-10-01 青岛海信电子产业控股股份有限公司 一种智能冰箱及食材识别方法
US20220136766A1 (en) * 2020-11-04 2022-05-05 Scott C Harris Smart Refrigerator
JP7453133B2 (ja) 2020-12-15 2024-03-19 日立グローバルライフソリューションズ株式会社 貯蔵庫、貯蔵システム及び画像認識方法
US20220397338A1 (en) * 2021-06-14 2022-12-15 Haier Us Appliance Solutions, Inc. Inventory management system in a refrigerator appliance
CN114294885B (zh) * 2021-06-23 2023-04-07 海信视像科技股份有限公司 冰箱及图像采集方法

Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN204806813U (zh) * 2015-06-15 2015-11-25 合肥华凌股份有限公司 移动摄像头结构和冰箱
TWI532964B (zh) * 2013-03-12 2016-05-11 東芝股份有限公司 冰箱、攝影裝置、冰箱用門板置物架、冰箱用保持器
TWI540300B (zh) * 2013-03-12 2016-07-01 東芝股份有限公司 冰箱、攝影裝置
TWI553280B (zh) * 2013-03-12 2016-10-11 東芝生活電器股份有限公司 冰箱、攝影裝置、冰箱用門板置物架、冰箱用保持器
JP2016183826A (ja) * 2015-03-26 2016-10-20 日本電産コパル株式会社 撮像ユニット及び冷蔵庫
CN206257852U (zh) * 2016-12-12 2017-06-16 哈尔滨理工大学 智能冰箱
CN107036389A (zh) * 2017-05-10 2017-08-11 江苏新安电器有限公司 一种智能化的冰箱内置摄像头监控系统

Family Cites Families (30)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP3738196B2 (ja) 2001-03-30 2006-01-25 三洋電機株式会社 冷蔵庫
JP2005276992A (ja) * 2004-03-24 2005-10-06 Yamaha Motor Co Ltd 部品認識装置、表面実装機、及び、部品検査装置
KR100677269B1 (ko) * 2005-03-15 2007-02-02 엘지전자 주식회사 카메라가 구비된 냉장고
JP2007046833A (ja) * 2005-08-09 2007-02-22 Funai Electric Co Ltd 物品保存庫、物品保存庫監視システム及び冷蔵庫監視システム
WO2009138359A2 (de) 2008-05-13 2009-11-19 BSH Bosch und Siemens Hausgeräte GmbH Haushaltsgerät mit bilderfassungsvorrichtung
JP4618355B2 (ja) * 2008-09-25 2011-01-26 ソニー株式会社 画像処理装置及び画像処理方法
JP2012055031A (ja) 2010-08-31 2012-03-15 Nidec Sankyo Corp モータ
KR20120117464A (ko) * 2011-04-15 2012-10-24 엘지전자 주식회사 냉장고 및 냉장고의 제어방법
CN108955070A (zh) * 2012-07-27 2018-12-07 博西华电器（江苏）有限公司 智能冰箱、包含该智能冰箱的冰箱系统及其控制方法
KR102000448B1 (ko) * 2013-03-27 2019-10-01 엘지전자 주식회사 냉장고
JP6167328B2 (ja) * 2013-03-29 2017-07-26 パナソニックＩｐマネジメント株式会社 冷蔵庫
JP6167288B2 (ja) 2013-03-29 2017-07-26 パナソニックＩｐマネジメント株式会社 冷蔵庫
WO2014168265A1 (ko) 2013-04-10 2014-10-16 엘지전자 주식회사 영상 인식을 이용한 냉장고의 보관 품목 관리 방법 및 그 냉장고
DE102013211096A1 (de) * 2013-06-14 2014-12-18 BSH Bosch und Siemens Hausgeräte GmbH Kältegerätesystem
JP6313014B2 (ja) 2013-08-27 2018-04-18 東芝ライフスタイル株式会社 カメラシステム、冷蔵庫
EP2843336A1 (en) 2013-09-03 2015-03-04 Panasonic Corporation Refrigerator and refrigerator system for monitoring food
JP6266374B2 (ja) * 2014-02-14 2018-01-24 東芝ライフスタイル株式会社 収納装置、画像処理装置、画像処理方法およびプログラム
CN103927755A (zh) 2014-04-23 2014-07-16 东莞市天勤仪器有限公司 多景深图像处理方法
JP2016057022A (ja) * 2014-09-11 2016-04-21 株式会社東芝 食材管理システム
US20160203591A1 (en) * 2015-01-09 2016-07-14 Umm Al-Qura University System and process for monitoring the quality of food in a refrigerator
JP2016148503A (ja) 2015-02-05 2016-08-18 日本電産コパル株式会社 冷蔵庫、冷蔵庫管理方法及びプログラム
JP6592970B2 (ja) 2015-06-02 2019-10-23 三菱電機株式会社 冷蔵庫
JP6814531B2 (ja) * 2015-07-29 2021-01-20 シャープ株式会社 収納庫
US10027866B2 (en) * 2015-08-05 2018-07-17 Whirlpool Corporation Refrigerators having internal content cameras, and methods of operating the same
KR20170027246A (ko) * 2015-09-01 2017-03-09 삼성전자주식회사 냉장고
JP6324360B2 (ja) * 2015-11-04 2018-05-16 三菱電機株式会社 冷蔵庫及びそれを含むネットワークシステム
US9784497B2 (en) * 2016-02-03 2017-10-10 Multimedia Image Solution Limited Smart refrigerator
CN106382789B (zh) * 2016-08-30 2019-04-02 青岛海尔股份有限公司 冰箱内储物信息的管理方法与冰箱
CN108507250A (zh) * 2017-02-24 2018-09-07 富泰华工业（深圳）有限公司 冰箱及其摄像系统
CN107270627A (zh) 2017-07-30 2017-10-20 张亚平 智慧节能电冰箱

Patent Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
TWI532964B (zh) * 2013-03-12 2016-05-11 東芝股份有限公司 冰箱、攝影裝置、冰箱用門板置物架、冰箱用保持器
TWI540300B (zh) * 2013-03-12 2016-07-01 東芝股份有限公司 冰箱、攝影裝置
TWI553280B (zh) * 2013-03-12 2016-10-11 東芝生活電器股份有限公司 冰箱、攝影裝置、冰箱用門板置物架、冰箱用保持器
JP2016183826A (ja) * 2015-03-26 2016-10-20 日本電産コパル株式会社 撮像ユニット及び冷蔵庫
CN204806813U (zh) * 2015-06-15 2015-11-25 合肥华凌股份有限公司 移动摄像头结构和冰箱
CN206257852U (zh) * 2016-12-12 2017-06-16 哈尔滨理工大学 智能冰箱
CN107036389A (zh) * 2017-05-10 2017-08-11 江苏新安电器有限公司 一种智能化的冰箱内置摄像头监控系统

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
TWI778388B (zh) * 2019-08-02 2022-09-21 日商三菱電機股份有限公司 冰箱

Also Published As

Publication number Publication date
WO2019102616A1 (ja) 2019-05-31
CN111386435A (zh) 2020-07-07
CN111386435B (zh) 2022-02-01
EP3719424B1 (en) 2023-09-20
JPWO2019102616A1 (ja) 2020-11-19
KR102378032B1 (ko) 2022-03-24
EP3719424A1 (en) 2020-10-07
KR20200066705A (ko) 2020-06-10
JP7092794B2 (ja) 2022-06-28
EP3719424A4 (en) 2020-11-11
TW201925706A (zh) 2019-07-01
US20200363125A1 (en) 2020-11-19
US11506449B2 (en) 2022-11-22

Similar Documents

Publication Publication Date Title
TWI660147B (zh) 冰箱及冰箱系統
KR102569605B1 (ko) 냉장고 및 냉장고 시스템
US10184715B2 (en) Refrigerator with camera and control method for the same
JP7040193B2 (ja) 冷蔵庫システム
TWI710739B (zh) 冰箱
US20160223250A1 (en) Refrigerator and control method for the same
US20160138860A1 (en) Refrigerator and control method for the same
JP6323279B2 (ja) 保冷保温庫、及び、その管理システム
JP2017040425A (ja) 冷蔵庫およびプログラム
JP2000055533A (ja) 冷却貯蔵庫及びその管理システム
JP7263914B2 (ja) 冷蔵庫
KR102259582B1 (ko) 냉장고 및 그 제어 방법
TW202314174A (zh) 冰箱
KR102231593B1 (ko) 냉장고 및 그 제어 방법
CN115086540A (zh) 冰箱及其摄像区域的配置方法