TWI840437B - 冰箱 - Google Patents

Abstract

本發明在適切的時機將使用者的發話進行聲音辨識。冰箱(13)的聲音辨識控制部(33)，在門開關(26)檢測到冰箱(13)的門的開狀態時，判定聲音取得部(25)取得的聲音資料是否滿足既定的聲音辨識開始條件，在滿足聲音辨識開始條件的情況，藉由聲音辨識部使聲音辨識進行，另一方面，在未滿足該聲音辨識開始條件的情況，不藉由聲音辨識部使聲音辨識進行。

Description

冰箱

本發明關於具有聲音取得功能的冰箱。

近年來，開發有藉由麥克風(microphone)(以下，僅稱為麥克風(mic))等聲音取得裝置而取得使用者的聲音，針對已取得的聲音的具有聲音辨識功能的冰箱。

在專利文獻1，揭示有在冰箱本體的上部前方設有操作關聯功能部，在此操作關聯功能部使麥克風、揚聲器等的聲音關聯功能內藏的構成。

在專利文獻2，揭示有家電即例如冰箱，若偵測成為使聲音取得部啟動的契機的預先定義好的現象的發生，則聲音取得部啟動而取得聲音，且對使用者通知聲音取得部為運作狀態的構成。所謂上述現象的發生，是冰箱的門成為開狀態、冰箱的既定的按鈕被操作。又，聲音取得部的運作狀態的通知，以聲音輸出、通知燈的亮燈進行。通知燈是設在被設置於冰箱的前門的前面的操作板。在專利文獻2所記載的冰箱，藉由上述構成，是否無誤地取得使用者的發話、在不希望聲音的取得的情況下聲音取得功能是否為非運作等，能夠解消針對聲音取得功能的使用者的不安。

專利文獻1：日本專利第3904390號公報。

專利文獻2：日本特開2017-4231號公報。

然而，在專利文獻二所記載的構成，在冰箱的門為開狀態的情況，繼續進行聲音辨識。此情況，雖然使用者被通知進行聲音辨識，但是聲音辨識的停止是有必要使用者的操作。

即，使用者不希望聲音辨識的情況，每次聲音辨識的停止操作為必要，又，在使用者忘了聲音辨識的停止操作的情況下變成不必要地進行聲音辨識。

因此，本發明的一態樣，其目的在於，能夠在適切的時機將使用者的發話進行聲音辨識的冰箱的提供。

為了解決上述課題，本發明一態樣的冰箱，包括：聲音取得部；門開閉檢測部，檢測冰箱的門的開閉；及聲音辨識控制部，在該門開閉檢測部檢測到該門的開狀態時，判定該聲音取得部取得的聲音資料是否滿足既定的聲音辨識開始條件，在該聲音資料滿足該聲音辨識開始條件的情況，藉由聲音辨識部使該聲音資料的聲音辨識進行，另一方面，在該聲音資料未滿足該聲音辨識開始條件的情況，不藉由該聲音辨識部使該聲音資料的聲音辨識進行。

根據本發明的一態樣，能夠在適切的時機將使用者的發話進行聲音辨識。

1:聲音對話系統

11:伺服器

12:使用者住宅

13、91~93:冰箱

15:通信網路

21:控制部

22:記憶部

24:聲音輸出部

25:聲音取得部

26:門開關(門開閉檢測部)

27:庫內燈

28:警報蜂鳴器(警告部)

29:操作板

31:聲音輸出控制部

33:聲音辨識控制部

34:亮燈控制部

35:警報控制部(警告控制部)

36:操作板控制部

41:控制部

42:記憶部

44:聲音辨識部

51:聲音資料提供部

61~65:第一門~第五門

61a、61b:第一門

71:蓋部件(部件)

71a:下蓋

72:麥克風安裝部

72a:麥克風保持部

72b:貫通孔

72c:錐形狀部

81:麥克風

圖1是表示包含本發明的實施方式的冰箱的聲音對話系統的構成的說明圖。

圖2是表示圖1所示的冰箱的控制系統的構成的方塊圖。

圖3是表示圖1所示的伺服器的控制系統的構成的方塊圖。

圖4是表示圖1所示的冰箱的外觀的立體圖。

圖5是表示拆下圖4所示的蓋部件的上蓋的狀態的冰箱的上面部分的立體圖。

圖6是表示與圖4所示的冰箱所具有的門開關的導通斷開連動而將麥克風開啟關閉的構成的電路圖。

圖7是表示圖1所示的聲音對話系統的冰箱的動作的流程圖。

圖8是表示著眼於圖7所示的冰箱的動作中，門的開閉和聲音辨識的必要性的關係的動作的流程圖。

圖9是表示著眼於本發明的其他的實施方式的冰箱的圖7所示的動作中，門的開閉和聲音辨識的必要性的關係的動作的流程圖。

圖10是表示本發明的再其他的實施方式的冰箱的警報控制部的動作的流程圖。

圖11是表示本發明的再其他的實施方式的冰箱的警報控制部的動作的流程圖。

圖12是表示本發明的再其他的實施方式的冰箱的外觀的立體圖。

圖13是表示拆下圖12所示的蓋部件的上蓋的狀態的冰箱的上面部分的立體圖。

圖14的(a)是表示圖5所示的麥克風安裝部的構造和第一門61的位置關係的縱剖面圖，圖14的(b)是從下觀看圖14的(a)的構造的情況的下蓋的下面圖。

圖15的(a)是表示圖14的(a)所示的麥克風安裝部的其他的例子的麥克風安裝部的構造和第一門的位置關係的縱剖面圖，圖15的(b)是從下觀看圖15的(a)的構造的情況的下蓋的下面圖。

〔實施方式一〕

以下，針對本發明的一實施方式進行詳細的說明。

(聲音對話系統1的構成)

圖1是表示包含本實施方式的冰箱13的聲音對話系統1的構成的說明圖。如圖1所示，在聲音對話系統1，經由通信網路15而連接伺服器11與被設置於使用者住宅12的冰箱13。

冰箱13是具有用於與通信網路15連接而與伺服器11進行通信的無線通信功能的網路家電。無線通信功能，可以內藏於冰箱13本體，也可以具備於被外附在冰箱13本體的通信配接器(communication adapter)中。

在使用者住宅12整備有成為通信網路15的一部分的無線LAN(Wireless Local Area Network)。無線LAN的無線AP14，與包含網際網路的通信網路15連接。無線AP14，例如是WiFi(註冊商標)路由器、WiFi(註冊商標)存取點等的通信設備。在本實施方式中，雖然作為通信網路15例示包含網際網路的構成，但是也能夠利用電話線網路、移動通信網、CATV(CAble TeleVision)通信網、衛星通信網等。

冰箱13具有取得使用者的發話的聲音，對取得的聲音的回答進行發話的聲音對話功能。此情況，冰箱13將已取得的聲音的聲音資料發送至伺服器11，伺服器11進行從冰箱13接收的聲音資料的聲音辨識而特定發話的內容，將基於特定的內容的回答的聲音資料向冰箱13發送。回答的聲音資料是從冰箱13發話的聲音資料，如例如對來自使用者的問題回答的聲音資料、對使用者的發話內容對話成立般的聲音資料。

此外，也可以是冰箱13作為具有聲音辨識功能，以冰箱13進行聲音辨識而特定發話的內容，將特定的內容發送至伺服器11，從伺服器11接收回答的聲音資料的構成。或者，也可以是不由伺服器11，而冰箱13作為進行聲音辨識，且準備回答的聲音資料的構成。

(冰箱13的整體構成)

圖2是表示冰箱13的控制系統的構成的方塊圖。如圖2所示，冰箱13包括控制部21、記憶部22、通信部23、聲音輸出部24、聲音取得部25、門開關(門開閉檢測部)26、庫內燈27、警報蜂鳴器(警告部)28及操作板29。控制部21包括聲音輸出控制部31、聲音辨識控制部33、亮燈控制部34、警報控制部(警告控制部)35及操作板控制部36。

控制部21由例如CPU(Central Processing Unit)、專用處理器等的運算處理部等構成的微型電腦而構成，控制冰箱13的各部的動作。

記憶部22記憶在冰箱13被使用的各種資訊，也記憶從伺服器11下載的應發話的聲音資料、聲音對話的回答的聲音資料等。通信部23，藉由控制部21的控制，經由通信網路15與伺服器11進行互相通信。

聲音輸出部24具有揚聲器，藉由聲音輸出控制部31的控制，輸出基於聲音資料的聲音。聲音取得部25具有麥克風81(參照圖5)，取得聲音，將取得的聲音變換為電信號。

門開關26偵測冰箱13的門的開閉狀態，例如在門的開狀態成為導通，在閉狀態成為斷開。庫內燈27在冰箱13的門的開狀態中亮燈。警報蜂鳴器28是將冰箱13的門的開狀態對使用者進行警告的蜂鳴器。

操作板29是具有顯示部，用於藉由操作板控制部36的控制，供使用者對冰箱13輸入指示、藉由顯示部將冰箱13的狀態(庫內溫度、設定溫度等)進行通知的使用者介面。在本實施方式中，操作板29被設於冰箱13的庫內。

聲音輸出控制部31控制聲音輸出部24。具體而言，聲音輸出控制部31在應發話的聲音資料存在的情況，使其聲音資料藉由聲音輸出部24發話。應發話的聲音資料，是從伺服器11接收的聲音資料、被記憶於記憶部22的聲音資料等。

聲音辨識控制部33，在聲音取得部25取得的聲音資料表示的使用者的發話滿足在伺服器11的聲音辨識開始條件的情況，將使用者的聲音資料向伺服器11發送而使聲音辨識開始。聲音辨識控制部33在伺服器11的聲音辨識的開始之後，將聲音取得部25取得的使用者的聲音資料依序向伺服器11發送。

另一方面，聲音辨識控制部33在聲音取得部25取得的聲音資料表示的使用者的發話未滿足在伺服器11的聲音辨識開始條件的情況，不向伺服器11發送其聲音資料。藉此，在伺服器11的聲音辨識不會開始。

又，聲音辨識控制部33在聲音取得部25已取得的聲音資料表示的使用者的發話滿足在伺服器11的聲音辨識結束條件的情況，停止向伺服器11的聲音資料的發送。或者，聲音辨識控制部33在從使用者(例如藉由對操作板29的使用者的操作輸入)接受在伺服器11的聲音辨識的結束指示的情況，停止向伺服器11的聲音資料的發送。藉此，在伺服器11的聲音辨識結束。

聲音辨識開始條件，例如是使用者的發話的語尾上揚，即使用者的發話為疑問形、或是使用者的發話包含既定的開始關鍵字。使用者的疑問形的發話，例如是「之前預先買了○○，放在哪裡了？」的發話。開始關鍵字，例如是「咦？」、「哪裡？」的發話。此外，由使用者的這些的疑問形的發話及開始關鍵字，無論哪一個均是表示使用者的與冰箱13的對話開始的意思的發話。

聲音辨識結束條件，是在使用者的發話包含有既定的結束關鍵字。結束關鍵字，例如是「停止」、「不是」的發話。如此的結束關鍵字，例如是表示使用者的與冰箱13的對話結束的意思的發話。又，聲音辨識的結束指示，是指作為操作板29的聲音辨識結束而設定的鍵被操作。

為了進行上述的動作，聲音辨識控制部33具有檢測關於使用者的聲音資料語尾上揚的頻率解析功能。進而，具有檢測在使用者的聲音資料包含有開始關鍵字、及包含有結束關鍵字的聲音辨識功能。此外，結束關鍵字也可以藉由在伺服器11的聲音辨識處理而被檢測。

亮燈控制部34在聲音辨識控制部33將聲音取得部25取得的聲音資料向伺服器11發送的期間中，即伺服器11進行關於聲音取得部25取得的聲音資料的聲音辨識的期間中，以庫內燈27成為與通常的亮燈狀態不同的亮 燈狀態的方式控制庫內燈27。藉此，亮燈控制部34是向使用者告知關於使用者的聲音為聲音辨識中。

此外，所謂與通常的亮燈狀態不同的亮燈狀態，例如是庫內燈27週期性地反覆明亮的狀態(明狀態)和黑暗的狀態(暗狀態)的狀態、或者是庫內燈27閃爍的狀態。又，亮燈控制部34也可以在庫內燈27可變化亮燈色的情況，於聲音辨識控制部33將聲音資料向伺服器11發送的期間中，使亮燈色依序變化。

警報控制部35，藉由門開關26的導通斷開而檢測冰箱13的門的開閉狀態，在從門的開狀態的檢測時點開始，門的開狀態持續既定時間以上的情況，使警報蜂鳴器28動作而對使用者給予警告。

又，警報控制部35，在向伺服器11的使用者的聲音資料的發送開始或結束時，為了向使用者告知此事態，使警報蜂鳴器28動作。

操作板控制部36接受對操作板29的使用者的輸入操作，又，將冰箱13的狀態(庫內溫度、設定溫度等)顯示在操作板29的顯示部。

(伺服器11的構成)

圖3是表示伺服器11的控制系統的構成的方塊圖。伺服器11管理冰箱13，如圖3所示，包括控制部41、記憶部42、通信部43及聲音辨識部44。控制部41包括聲音資料提供部51。

控制部21，例如包含由CPU(Central Processing Unit)、專用處理器等的運算處理部等構成的微型電腦，控制伺服器11的各部的動作。

記憶部42記憶在伺服器11被使用的各種資訊，又，記憶各種的文章例，即聲音資料提供部51在提供至冰箱13的聲音資料的作成時參照的文章例等。通信部43，藉由控制部41的控制而經由通信網路15與冰箱13通信。

聲音辨識部44進行從冰箱13發送而通信部43接收的聲音資料的聲音辨識，變換成文字列。聲音辨識部44不只有聲音資料的向僅文字列的變換功能，也包括變換成有意義的文章的功能等。

聲音資料提供部51將對聲音辨識後的聲音資料的回答的聲音資料提供至冰箱13。此情況，聲音資料提供部51參照記憶部42而作成回答的聲音資料、或經由通信網路15而取得回答的聲音資料。

(冰箱13的構造的概要)

圖4是表示冰箱13的外觀的立體圖。圖5是表示拆下圖4所示的蓋部件(部件)71的上蓋的狀態的冰箱13的上面部分的立體圖。圖6是表示與門開關26的導通斷開(第一門61的門的開閉)連動而將麥克風81開啟關閉的構成的電路圖。

如圖4所示，冰箱13具有從上部朝向下部例如從第一至第五門61~65。第一門61是冷藏室的門，第二門62是調整冷凍室的門，第三門63是製冰室的門，第四門64是冷凍室的門，第五門65是蔬菜室的門。第一門61是左右對開類型。操作板29，例如被設在第一門61的兩片門中的大的一方的門的開放端側。

冰箱13在上面具有蓋部件71。在蓋部件71的內部，設有可開閉地支承第一門61的鉸鏈，偵測第一門61的開閉的門開關26、及聲音取得部25所具有的麥克風81。

如圖5所示，麥克風81在蓋部件71的下蓋71a的前端部的冰箱13的寬度方向的中央部分附近的麥克風安裝部72，將聲音輸入部朝向下方而安裝。麥克風安裝部72具有大致圓筒狀的麥克風保持部72a，在下蓋71a的麥克風81之下的部分，形成貫通下蓋71a的貫通孔。

如圖6所示，門開關26例如藉由第一門61的開狀態成為導通，由第一門61的閉狀態成為斷開。麥克風81與門開關26的導通動作連動而與電源82連接，成為導通。藉此，麥克風81能夠根據必要而容易地開啟關閉。

(冰箱13的動作)

在上述的構成中，在以下說明關於聲音對話系統1的冰箱13的動作。圖7是表示聲音對話系統1的冰箱13的動作的流程圖。在此，針對以門開關26的導通斷開而檢測第一門61的開閉的情況的動作進行說明。此外，第一門61簡單地表現為門。

如圖7所示，若聲音對話系統1開始動作，則控制部21監視門開關26的導通斷開狀態即門的開閉狀態。控制部21的聲音辨識控制部33，若門成為開狀態(門開關26導通)(S11)、則藉由聲音取得部25的麥克風81取得使用者的聲音，判定是否要開始聲音辨識(S12)。在此判定，聲音辨識控制部33判定使用者的發話是否滿足前述的聲音辨識開始條件。

聲音辨識控制部33，若在S12的判定的結果為是的話，將由麥克風81取得的使用者的聲音資料向伺服器11發送(S13)。

進而，控制部21向使用者報知關於使用者的聲音為聲音辨識中(S14)。因此，亮燈控制部34將使用者的聲音資料向伺服器11發送的期間中，以庫內燈27成為與通常的亮燈狀態不同的亮燈狀態的方式進行控制。 具體而言，以成為庫內燈27週期性地反覆明狀態和暗狀態的狀態、或者庫內燈27閃爍的狀態的方式進行控制。或者，亮燈控制部34在庫內燈27可變化亮燈色的情況，向伺服器11的使用者的聲音資料的發送期間中，依序使亮燈色變化。又，警報控制部35，在開始向伺服器11的使用者的聲音資料 的發送時，使警報蜂鳴器28動作。此外，亮燈控制部34及警報控制部35的上述報知動作，進行至少一個即可。

其後，聲音辨識控制部33判定是否要結束聲音辨識(S15)。在此判定，聲音辨識控制部33判定使用者的發話是否滿足前述的聲音辨識結束條件、或是否有來自使用者聲音辨識的結束指示。若S15的判定結果為是的話，向S20前進，結束向伺服器11的使用者的聲音資料的發送。在S20中，警報控制部35，為了向使用者報知已結束向伺服器11的使用者的聲音資料的發送，使警報蜂鳴器28動作。此時，警報蜂鳴器28是設為與將已開始向伺服器11的使用者的聲音資料的發送報知時(S14)音色、音程不同。藉此，使用者能夠辨識聲音資料向伺服器11發送開始、及發送結束，能夠解除關於聲音辨識動作的運作狀態的不安。

接著，聲音輸出控制部31，在S15的判定結果為否，且從伺服器11接收回答的聲音資料的情況(S16)，使其聲音資料藉由聲音輸出部24播放而輸出為聲音(S17)。

其後，聲音辨識控制部33，若門成為閉狀態(門開關26斷開)(S18)，門的閉狀態持續既定時間(例如10~20秒)以上(從門的閉狀態的檢測時點經過既定時間後)(S19)，則結束使用者的聲音資料的向伺服器11的發送(S20)。

又，若在S12的判定的結果為否，門的開狀態持續既定時間(例如10秒)以上(S21)，則聲音輸出控制部31藉由聲音輸出部24使對使用者搭話般的發話進行(S22)。在此的發話，例如是「有什麼話想說嗎？」或「今天好嗎？」的內容，其聲音資料例如記憶部22記憶。

接著，若對於在S22的來自冰箱13的發話，而從使用者有什麼答覆的話(S23)，則前進至S13，將藉由麥克風81取得的使用者的聲音資料向伺服器11發送。其後，同樣進行S14以後的動作。

另一方面，若在S23中從使用者並無什麼答覆，門的開狀態成為有必要警報的時間持續的話，則警報控制部35，判斷為有需要門的開狀態的警報(S25)，使警報蜂鳴器28動作(S26)。其後，若返回至S24的動作，門成為閉狀態(門開關26斷開)，則聲音對話系統1即冰箱13結束動作。

又，若在S18中，若門為開狀態(門開關26導通)，門的開狀態成為有必要警報的時間持續的話，則警報控制部35，判斷為有需要門的開狀態的警報(S27)，使警報蜂鳴器28動作(S28)。其後，返回至S13的動作。

又，在S19中，聲音辨識控制部33在門的閉狀態未滿既定時間時，將使用者的聲音資料向伺服器11發送(S29)，控制部21(亮燈控制部34、警報控制部35)將關於使用者的聲音為聲音辨識中向使用者報知(S30)，返回至S19的動作。此外，在S29及S30的動作之後，與S16及S17的情況相同，在從伺服器11接收回答的聲音資料的情況，將其聲音資料藉由聲音輸出部24播放而輸出為聲音。

(冰箱13的門的開閉和聲音辨識的必要性的關係)

接著，於圖8表示著眼於圖7所示的冰箱13的動作中，門的開閉和聲音辨識的必要性的關係的冰箱13的動作。圖8是表示著眼於門的開閉和聲音辨識的必要性的關係的冰箱13的動作的流程圖。

圖8的各步驟S的號碼所示的動作，由於與圖7的各步驟S的號碼所示的動作相同，因此省略圖8的動作的說明。

(冰箱13的優點)

在冰箱13，在冰箱13的門為開狀態的情況，成為從麥克風81取得聲音資料，聲音資料所示的使用者的發話，在滿足聲音辨識開始條件的情況開始聲音辨識，在未滿足聲音辨識開始條件的情況不開始聲音辨識。此外，在此的聲音辨識開始條件，是使用者的發話為疑問形，或者是在使用者的發話包含既定的開始關鍵字，這些是表示使用者的與冰箱13對話開始的意思的發話。

因此，使用者在希望進行聲音辨識的情況、進行也可以的情況，進行如滿足聲音辨識開始條件般的發話，藉此無需進行對操作板29的操作等、用於指示聲音辨識的開始的操作。相同地，使用者在不希望聲音辨識的情況，不進行如滿足聲音辨識開始條件般的發話，藉此無需進行對操作板29的操作等、用於指示聲音辨識的停止的操作。藉此，冰箱13能夠提升便利性，且能夠在適切的時機將使用者的發話進行聲音辨識。

又，在冰箱13，在藉由伺服器11而為聲音辨識中的情況，在從麥克風81取得的聲音資料所示的使用者的發話滿足聲音辨識結束條件的情況，成為結束聲音辨識。此外，在此的聲音辨識結束條件，是在使用者的發話包含有既定的結束關鍵字。此結束關鍵字，是表示使用者的與冰箱13的對話結束的意思的發話。

因此，使用者在使聲音辨識結束的情況，無需進行對操作板29的操作等、用於指示聲音辨識的結束的操作。藉此，冰箱13能夠提升便利性。

又，冰箱13從門成為閉狀態至經過既定時間為止，繼續使用者的聲音資料而進行聲音辨識。藉此，冰箱13例如即使在使用者一邊發話一邊關門的情況、在關門之後立刻發話的情況，也能夠將如此的使用者的發話進行聲音辨識，能夠提升便利性。

〔實施方式二〕

在以下針對本發明的其他實施方式進行說明。此外，為了便於說明，針對與在上述實施方式已說明的部件具有相同功能的部件，標註相同符號，並且不重複其說明。

(冰箱91的聲音辨識控制部33的構成)

在前述的實施方式的冰箱13，聲音辨識控制部33，以在聲音取得部25取得的聲音資料所示的使用者的發話滿足在伺服器11的聲音辨識開始條件的情況，將使用者的聲音資料向伺服器11發送而使聲音辨識開始的方式進行。進而，此情況的聲音辨識開始條件，是使用者的發話為疑問形(使用者的發話的語尾上揚)、或是使用者的發話為包含既定的開始關鍵字。

在本實施方式的冰箱91的聲音辨識開始條件，是設為在門的開狀態中，聲音取得部25的麥克風81取得的聲音資料所示的音量為既定的閾值以上，且將其聲音資料辨識為使用者的聲音的聲音資料的情況。因此，聲音辨識控制部33，在門的開狀態中，麥克風81取得的聲音資料所示的音量為既定的閾值以上，且在將其聲音資料辨識為使用者的聲音的聲音資料的情況，將麥克風81取得的使用者的聲音資料向伺服器11發送而使聲音辨識開始。

(冰箱91的動作)

在上述的構成中，在以下說明關於聲音對話系統1的冰箱91的動作。

聲音辨識控制部33，在圖7的動作中，若門成為開狀態(門開關26導通)(S11)，判定是否要開始聲音辨識(S12)。在此判定，聲音辨識控制部33判定藉由聲音取得部25的麥克風81取得的聲音資料是否滿足聲音辨識開始條件。具體而言，聲音辨識控制部33，在S12中，麥克風81取得的 聲音資料所示的音量為既定的閾值以上，且在將其聲音資料辨識為使用者的聲音的聲音資料的情況，判定為需要開始聲音辨識。聲音辨識控制部33，若在S12的判定的結果為是的話，將藉由麥克風81取得的聲音資料向伺服器11發送(S13)。冰箱91的其他的動作，與在圖7已說明的冰箱13的動作相同。

(冰箱91的門的開閉和聲音辨識的必要性的關係)

接著，圖9表示著眼於圖7說明的冰箱91的動作中，門的開閉和聲音辨識的必要性的關係的冰箱91的動作。圖9是表示著眼於門的開閉和聲音辨識的必要性的關係的冰箱91的動作的流程圖。此外，圖9的各步驟S的號碼所示的動作中，與圖7的各步驟S的號碼相同號碼的動作，由於與在圖7中已說明的動作為相同，因此省略說明。又，S51及S52的動作，是與圖7的S12的動作對應的動作。

如圖9所示，聲音辨識控制部33，若門成為開狀態(門開關26導通)(S11)、則藉由聲音取得部25的麥克風81取得聲音資料，從取得的聲音資料判定聲音辨識開始的必要性(S12)。此情況，聲音辨識控制部33，若麥克風81取得的聲音資料所示的音量為既定的閾值以上(S51)，且將此聲音資料辨識為使用者的聲音的聲音資料(S52)的話，則將使用者的聲音資料向伺服器11發送而使聲音辨識開始(S13)。

此外，在S51中，在麥克風81取得的聲音資料所示的音量未滿既定的閾值的情況，及在S52中，在無法將聲音資料辨識為使用者的聲音的聲音資料的情況，聲音辨識控制部33什麼都不做。

又，在S13中，將使用者的聲音向伺服器11發送而使聲音辨識開始的情況，向冰箱91發送從伺服器11對使用者進行適當的答覆的回答的聲音資料，從冰箱91播放並輸出其聲音資料也可以。

(冰箱91的優點)

在冰箱91，在冰箱91的門為開狀態的情況，與冰箱13相同，從麥克風81取得聲音資料，聲音資料所示的使用者的發話，成為在滿足聲音辨識開始條件的情況開始聲音辨識，在未滿足聲音辨識開始條件的情況不開始聲音辨識。此外，在此的聲音辨識開始條件，是從麥克風81取得的聲音資料所示的音量為既定的閾值以上，且將聲音資料辨識為使用者的聲音的聲音資料的情況。

因此，使用者在希望進行聲音辨識的情況、進行也可以的情況，進行如滿足聲音辨識開始條件般的發話，即以聲音資料所示的音量成為既定的閾值以上般的音量進行發話，藉此無需進行對操作板29的操作等、用於指示聲音辨識的開始的操作。相同地，使用者在不希望聲音辨識的情況，不進行如滿足聲音辨識開始條件般的上述的發話，藉此無需進行對操作板29的操作等、用於指示聲音辨識的停止的操作。藉此，冰箱91能夠提升便利性，且能夠在適切的時機將使用者的發話進行聲音辨識。

〔實施方式三〕

在以下針對本發明的其他的實施方式進行說明。此外，為了便於說明，針對與在上述實施方式已說明的部件具有相同功能的部件，標註相同符號，並且不重複其說明。

圖10是表示本實施方式的聲音對話系統1的冰箱92的警報控制部35的動作的流程圖。若門的開狀態為有必要警報的時間持續的話，則判斷為 需要門的開狀態的警報(S25、S27)，圖7所示的冰箱13的警報控制部35僅使警報蜂鳴器28動作(S26、S28)。

相對於此，本實施方式的冰箱92的警報控制部35，在判斷為需要門的開狀態的警報的情況，成為進行圖10的動作。即，冰箱92的警報控制部35，如圖10所示，門成為開狀態(S61)，例如若門的開狀態持續2分鐘以上(既定時間以上)則判斷為需要門的開狀態的警報(S62)。

此情況，警報控制部35，若麥克風81取得的聲音資料所示的音量為未滿閾值(S63)的話，使警報蜂鳴器28動作(S64)，藉此進行門的開狀態的警報。其後，前進向S66的動作。警報控制部35的此警報動作，與圖7所示的S26及S28的動作相同，是通常(通常時)的警報動作，例如是使警報蜂鳴器28以短的間隔長時間鳴叫。

另一方面，警報控制部35，在S63中，若麥克風81取得的聲音資料所示的音量為閾值以上，則藉由短的警告音進行警報(S65)。其後，前進向S66的動作。警報控制部35的此警報動作，與S64的通常的警報動作不同，例如是使警報蜂鳴器28以長的間隔短時間鳴叫。

如此般，在麥克風81取得的聲音資料所示的音量為閾值以上的情況，即判斷為使用者以將冰箱92的門打開的狀態發話的情況，則警報控制部35例如使警報蜂鳴器28以長的動作間隔短時間鳴叫。如此般，對S65的警報控制部35的警報蜂鳴器28的控制，是與對S64的警報控制部35的警報蜂鳴器28的通常的控制不同的控制，警報是不會成為使用者的發話及麥克風81的使用者的聲音資料的取得的干擾。

此外，在S65的對警報蜂鳴器28的警報控制部35的控制，除了上述控制以外，僅使警報蜂鳴器28的動作間隔變長的控制(無聲時間變長的控 制)、僅使警報蜂鳴器28的音量變小的控制、或者使警報蜂鳴器28的間隔變長，以短時間且小音量鳴叫的控制也可以。或者，警報控制部35取代在S65的由警報蜂鳴器28的警報動作，而藉由來自聲音輸出部24的發話，對使用者警告門為開狀態也可以。進而，也可以是如後述的冰箱93，作為不進行警報動作的構成。

如此的控制，例如，在成為以警報控制部35進行從警報強度弱至警報強度強為止的複數階段的警報控制的方式的情況，相當於警報強度弱的控制。

(冰箱92的優點)

冰箱92在判斷為門的開狀態持續既定時間以上而需要門的開狀態的警報的情況，在麥克風81取得的聲音資料所示的音量未滿既定的閾值的情況，判斷為使用者仍未發話，進行通常的警報動作。另一方面，相同地，冰箱92在判斷為需要門的開狀態的警報的情況，即在麥克風81取得的聲音資料所示的音量為既定的閾值以上的情況，判斷為使用者在發話，警報是以不會成為使用者的發話及由麥克風81的使用者的聲音資料的取得的干擾的方式，進行與通常的警報動作不同的警報動作。

此外，在本實施方式，冰箱92(聲音辨識控制部33)，在麥克風81取得的聲音資料所示的音量為未滿既定的閾值的情況和為既定的閾值以上的情況，如上述，表示了關於以進行不同的警報動作的方式控制的情況。然而，冰箱92(聲音辨識控制部33)，取代在麥克風81取得的聲音資料所示的音量為未滿既定的閾值的情況，作為聲音取得部25取得聲音且在伺服器11未進行聲音辨識的情況，取代在麥克風81取得的聲音資料所示的音量為既定的閾值以上的情況，作為聲音取得部25取得聲音且在伺服器11行聲 音辨識的情況，如上述般，以進行不同的警報動作的方式控制的構成也可以。

藉此，冰箱92即使在門的開狀態持續既定時間以上而進行門的開狀態的警報動作的情況，警報是不會成為使用者的發話及由麥克風81的使用者的聲音資料的取得的干擾。

〔實施方式四〕

在以下針對本發明的其他的實施方式進行說明。此外，為了便於說明，針對與在上述實施方式已說明的部件具有相同功能的部件，標註相同符號，並且不重複其說明。

圖11是表示本實施方式的聲音對話系統1的冰箱93的警報控制部35的動作的流程圖。本實施方式的冰箱93的警報控制部35，取代圖7的S25(S27)及S26(S28)的動作，成為進行圖11的S72及S73的動作。

即，冰箱93的警報控制部35，如圖11所示，若門成為開狀態(S71)，對麥克風81繼續一定時間以上沒有聲音的輸入(S72)的話，則判斷為需要門的開狀態的警報。此情況，警報控制部35使警報蜂鳴器28動作(S73)，藉此進行門的開狀態的警報。其後，前進向S74的動作。由警報控制部35的此警報動作，與圖7所示的S26及S28的動作相同，是通常的警報動作。

另一方面，警報控制部35，在S27中，若對麥克風81繼續一定時間以上有聲音的輸入，則不進行門的開狀態的警報(使警報蜂鳴器28不動作)，前進向S74的動作。

如此般，警報控制部35，若在麥克風81繼續一定時間以上有聲音輸入的情況，即使用者以將冰箱92的門打開的狀態繼續一定時間以上發話著的情況，則成為不進行門的開狀態的警報(使警報蜂鳴器28不動作)。 如此的警報控制部35的控制，警報是不會成為使用者的發話及麥克風81的使用者的聲音資料的取得的干擾。

此外，在S72中，警報控制部35，若對麥克風81繼續一定時間以上有聲音的輸入，則取代不進行門的開狀態的警報的構成，進行與冰箱92的警報控制部35(例如圖10的S65的動作)相同的動作的構成也可以。

(冰箱93的優點)

冰箱93在門的開狀態持續既定時間以上而判斷為需要門的開狀態的警報的情況，即在麥克風81繼續一定時間以上未有聲音的輸入的情況，由於使用者未發話，因此進行通常的警報動作。另一方面，冰箱93，相同地，判斷為需要門的開狀態的警報的情況，即在麥克風81繼續一定時間以上有聲音的輸入的情況，判斷為使用者發話著，不進行警報動作。

此外，在本實施方式，冰箱93(聲音辨識控制部33)在成為在麥克風81繼續一定時間以上未有聲音的輸入的情況與有聲音輸入的情況，表示了關於以切換警報動作的有無的方式控制的情況。然而，冰箱93(聲音辨識控制部33)，取代在麥克風81繼續一定時間以上未有聲音的輸入的情況，作為聲音取得部25取得聲音且在伺服器11未進行聲音辨識的情況，取代在麥克風81繼續一定時間以上有聲音的輸入的情況，作為聲音取得部25取得聲音且在伺服器11進行聲音辨識的情況，如上述般，以切換警報動作的有無的方式控制的構成也可以。

藉此，冰箱93在門的開狀態持續既定時間的情況，通常是即使是進行門的開狀態的警報動作的構成，也能夠不會成為使用者的發話及由麥克風81的使用者的聲音資料的取得的干擾。

〔實施方式五〕

在以上的實施方式，針對開閉第一門61的情況作為例子，控制聲音辨識動作、警報動作等的情況進行說明。然而，以上的實施方式的構成，不限於開閉第一門61的情況，在開閉其他的第二門62~第五門65的情況也相同地可適用。

〔實施方式六〕

在以下針對本發明的其他的實施方式進行說明。此外，為了便於說明，針對與在上述實施方式已說明的部件具有相同功能的部件，標註相同符號，並且不重複其說明。

圖12是表示本實施方式的冰箱91~93的外觀的立體圖。圖13是表示拆下圖12所示的蓋部件71的上蓋的狀態的冰箱13的上面部分的立體圖。

在以上的實施方式，表示關於冰箱91~93作為第一門61具有左右對開的兩片的門的形式的情況。然而，冰箱91~93，如圖12所示，也可以是作為第一門61具有可右開及左開的一片門的形式。

此情況，如圖13所示，與圖5的情況相同，在蓋部件71的下蓋71a的麥克風安裝部72，將麥克風81朝向下方而安裝。

〔實施方式七〕

圖14的(a)是表示圖5所示的麥克風安裝部72的構造和第一門61的位置關係的縱剖面圖，圖14的(b)是從下觀看圖14的(a)的構造的情況的下蓋71a的下面圖。

圖15的(a)是表示圖14的(a)所示的麥克風安裝部72的其他的例子的麥克風安裝部72的構造和第一門61的位置關係的縱剖面圖，圖15的(b)是從下觀看圖15的(a)的構造的情況的下蓋71a的下面圖。

如圖14的(a)(b)所示，麥克風安裝部72具有保持麥克風81的麥克風保持部72a、貫通下蓋71a的貫通孔72b、將下蓋71a的下面側的貫通孔72b的周圍加工成向下擴展的錐(cone)形狀的錐形狀部72c。麥克風安裝部72具有錐形狀部72c，藉此能夠提高集音性能。

又，麥克風安裝部72和第一門61的位置關係，如圖14的(a)所示，也可以是在已關閉第一門61時，藉由第一門61(第一門61a)的上面完全地堵塞錐形狀部72c的狀態。或者，在已關閉第一門61時，也可以是並非藉由第一門61(第一門61b)的上面完全地堵塞錐形狀部72c，而是錐形狀部72c的一部分向第一門61(第一門61b)的外面側突出的狀態。在後者的情況，即使在已關閉第一門61(第一門61b)的狀態，在麥克風81也變得易於取入外部的聲音。因此後者的構成，合適於伴隨第一門61以外的第二門62~第五門65的開閉動作而控制聲音辨識動作、警報動作等的情況。

又，如圖14的(a)(b)所示的麥克風安裝部72的構造，也可以是如圖15的(a)(b)所示的構造。圖15的(a)(b)所示的麥克風安裝部72，和圖14的(a)(b)所示的麥克風安裝部72，錐形狀部72c的形狀不同。

〔總結〕

本發明態樣一的冰箱，其包括：聲音取得部；門開閉檢測部，檢測冰箱的門的開閉；聲音辨識控制部，在該門開閉檢測部檢測到該門的開狀態時，判定該聲音取得部取得的聲音資料是否滿足既定的聲音辨識開始條件，在該聲音資料滿足該聲音辨識開始條件的情況，藉由聲音辨識部使該聲音資料的聲音辨識進行，另一方面，在該聲音資料未滿足該聲音辨識開始條件的情況，不藉由該聲音辨識部使該聲音資料的聲音辨識進行。

本發明態樣二的冰箱，在上述態樣一中，其中，也可以是如下構成：該聲音辨識控制部，在該聲音辨識部進行聲音辨識的情況，判定該聲音取得取得的聲音資料是否滿足既定的聲音辨識結束條件，在該聲音資料滿足該聲音辨識結束條件的情況，使該聲音辨識部的該聲音資料的聲音辨識結束。

本發明態樣三的冰箱，在上述態樣一或二中，其中，也可以是如下構成：該聲音辨識控制部，在該門開閉檢測部檢測到該門的閉狀態時，從該門的閉狀態的檢測時點開始既定時間，使該聲音辨識部的該聲音資料的聲音辨識繼續進行，在從該門的閉狀態的檢測時點經過既定時間後，使該聲音辨識部的該聲音資料的聲音辨識結束。

本發明態樣四的冰箱，在上述態樣一至三的任一者中，其中，也可以是如下構成，包括：警告部，進行對使用者的警告；警告控制部，在該門的開狀態成為需要警告的時間持續的情況，使該警告部動作；該警告控制部，在該聲音取得部取得聲音且該聲音辨識部未進行聲音辨識的情況，以進行通常時的警告動作的方式控制該警告部，另一方面，在該聲音取得部取得聲音且該聲音辨識部進行聲音辨識的情況，該警告部以進行與該通常時不同的動作的方式控制該警告部。

本發明態樣五的冰箱，在上述態樣一至三的任一者中，其中，也可以是如下構成，包括：警告部，進行對使用者的警告；警告控制部，在該門的開狀態成為需要警告的時間持續的情況，使該警告部動作；該警告控制部，在該聲音取得部取得的聲音資料所示的音量為未滿既定的閾值的情況，以進行通常時的警告動作的方式控制該警告部，另一方面，在該聲 音取得部取得的聲音資料所示的音量為既定的閾值以上的情況，該警告部以進行與該通常時不同的動作的方式控制該警告部。

本發明態樣六的冰箱，在上述態樣一至三的任一者中，其中，也可以是如下構成，包括：警告部，進行對使用者的警告；警告控制部，在該門的開狀態成為需要警告的時間持續的情況，使該警告部動作；該警告控制部，在對該聲音取得部繼續一定時間以上未有聲音的輸入的情況，以進行通常時的警告動作的方式控制該警告部，另一方面，在對該聲音取得部繼續一定時間以上有聲音的輸入的情況，該警告部以進行與該通常時不同的動作的方式控制該警告部。

本發明態樣七的冰箱，在上述態樣一至六的任一者中，其中，也可以是如下構成：該聲音取得部具有麥克風；該麥克風在被設於冰箱的上面的具有上下方向的貫通孔的部件的該貫通孔，將聲音輸入部朝向下方而安裝；該部件的下面的該貫通孔的周圍，形成為向下方擴展的錐形狀。

本發明態樣八的聲音對話系統，其中，包括：態樣1至7中任一項所述的冰箱；及伺服器，包含該聲音辨識部，且藉由該聲音辨識部進行從該冰箱接收的聲音資料的聲音辨識而特定發話的內容，將基於特定的內容的回答的聲音資料回覆至冰箱。

本發明並非限定於上述之各實施方式，可於申請專利範圍所示之範圍進行各種變更，關於適宜地組合分別於不同實施方式所揭示之技術性方法而獲得之實施方式，也包含於本發明之技術範圍。進而，組合各實施方式中所分別揭示的技術性方法，藉此能夠形成新的技術性特徵。

13、91~93:冰箱

21:控制部

22:記憶部

23:通信部

24:聲音輸出部

25:聲音取得部

26:門開關(門開閉檢測部)

27:庫內燈

28:警報蜂鳴器(警告部)

29:操作板

31:聲音輸出控制部

33:聲音辨識控制部

34:亮燈控制部

35:警報控制部(警告控制部)

36:操作板控制部

Claims (8)

1. 一種冰箱，其包括：聲音取得部；門開閉檢測部，檢測冰箱的門的開閉；及聲音辨識控制部，在該門開閉檢測部檢測到該門的開狀態時，判定該聲音取得部取得的聲音資料是否滿足既定的聲音辨識開始條件，在該聲音資料滿足該聲音辨識開始條件的情況，藉由聲音辨識部使該聲音資料的聲音辨識進行，另一方面，在該聲音資料未滿足該聲音辨識開始條件的情況，不藉由該聲音辨識部使該聲音資料的聲音辨識進行，所述既定的聲音識別開始條件包括以下條件中的至少一個：(i)使用者的發話為疑問形；(ii)在所述用戶的發話中包含既定的開始關鍵字，所述既定的開始關鍵字表示所述使用者有開始與所述冰箱的對話的意思；(iii)所述聲音取得部取得的所述聲音資料所示的聲音的音量為既定的閾值以上，所述聲音資料為所述使用者的聲音的聲音資料。
2. 如請求項1所述的冰箱，其中，該聲音辨識控制部，在該聲音辨識部進行聲音辨識的情況，判定該聲音取得部取得的聲音資料是否滿足既定的聲音辨識結束條件，在該聲音資料滿足該聲音辨識結束條件的情況，使該聲音辨識部的該聲音資料的聲音辨識結束，所述既定的聲音辨識結束條件為在所述使用者的發話中包含既定的結束關鍵字，所述既定的結束關鍵字表示所述使用者有結束與所述冰箱的對話的意思。
3. 如請求項1或2所述的冰箱，其中，該聲音辨識控制部，在該門開閉檢測部檢測到該門的閉狀態時，從該門的閉狀態的檢測時點開始既定時間，使 該聲音辨識部的該聲音資料的聲音辨識繼續進行，在從該門的閉狀態的檢測時點經過既定時間後，使該聲音辨識部的該聲音資料的聲音辨識結束。
4. 如請求項1或2所述的冰箱，其包括：警告部，進行對使用者的警告；及警告控制部，在該門的開狀態成為需要警告的時間持續的情況，使該警告部動作；其中該警告控制部，在該聲音取得部取得聲音且該聲音辨識部未進行聲音辨識的情況，以進行通常時的警告動作的方式控制該警告部，另一方面，在該聲音取得部取得聲音且該聲音辨識部進行聲音辨識的情況，以該警告部進行與該通常時不同的動作的方式控制該警告部。
5. 如請求項1或2所述的冰箱，其包括：警告部，進行對使用者的警告；及警告控制部，在該門的開狀態成為需要警告的時間持續的情況，使該警告部動作；其中該警告控制部，在該聲音取得部取得的聲音資料所示的音量為未滿既定的閾值的情況，以進行通常時的警告動作的方式控制該警告部，另一方面，在該聲音取得部取得的聲音資料所示的音量為既定的閾值以上的情況，該警告部以進行與該通常時不同的動作的方式控制該警告部。
6. 如請求項1或2所述的冰箱，其包括：警告部，進行對使用者的警告；及警告控制部，在該門的開狀態成為需要警告的時間持續的情況，使該警告部動作；其中 該警告控制部，在對該聲音取得部繼續一定時間以上未有聲音的輸入的情況，以進行通常時的警告動作的方式控制該警告部，另一方面，在對該聲音取得部繼續一定時間以上有聲音的輸入的情況，該警告部以進行與該通常時不同的動作的方式控制該警告部。
7. 如請求項1或2所述的冰箱，其中，該聲音取得部具有麥克風；該麥克風在被設於冰箱的上面的具有上下方向的貫通孔的部件的該貫通孔，將聲音輸入部朝向下方而安裝；該部件的下面的該貫通孔的周圍，形成為向下方擴展的錐(cone)形狀。
8. 一種冰箱的聲音對話系統，其包括：請求項1至7項中任一項所述的冰箱；及伺服器，包含該聲音辨識部，且藉由該聲音辨識部進行從該冰箱接收的聲音資料的聲音辨識而特定發話的內容，將基於特定的內容的回答的聲音資料回覆至冰箱。