TW201821946A - 數據發送系統及其方法 - Google Patents

Abstract

本發明係揭露一種數據發送系統及其方法，其中包含儲存模組，用於儲存不同用戶訊息與複數個情緒類別的對應關係，以及複數個情緒類別與複數個數據類別的對應關係；訊息獲取模組，用於獲取待判定的用戶訊息；控制模組，用於判斷用戶所屬的情緒類別，以及選擇匹配的數據類別；以及數據發送模組，用於根據匹配的數據類別向用戶發送數據。

Description

數據發送系統及其方法

本發明關於一種數據交換技術領域，特別是關於一種根據用戶情緒有針對性地發送不同數據的數據發送系統及方法。

隨著電腦技術、微電子技術、網路技術等快速的發展，數據交換方式有了更多的突破，機器人技術也得到了飛速發展。當前的機器人不僅可以應用於工業領域，也在逐步應用於人們的日常生活領域，例如生活服務類機器人的發明，為人們的生活帶來了一些便利和樂趣。

習知技術中的生活服務類機器人，已經基本上具備了為用戶發送各種數據的功能，例如，為了滿足用戶的需要，為用戶播放音樂或播放視頻等。然而習知的機器人的發送方式一般分為兩種：

（1）根據用戶選擇被動發送數據；採用這種方式，用戶需要在龐雜的資料庫中選擇需要的數據，增加了用戶的工作量，缺乏主動性，用戶體驗不好；

（2）一定範圍內所有用戶統一發送相同的數據；這種方式沒有對發送內容進行分類，也沒有對用戶進行分類和判斷，發送內容沒有針對性，導致用戶接收了一些不必要的發送內容，而真正需要的發送內容反而無法獲取。

現在雖然已經出現了一些新型的生活服務類機器人，可以判斷用戶的情緒，同時即時給出應對，但是其判斷都是根據笑容等即時訊息進行判別。由於用戶在和機器人交流時不會長時期保持笑容，故誤判率較高。同時該種機器人在判斷用戶情緒後主要是在溝通交流方式上有一定的變化，並沒有根據用戶情緒進行數據交互方式的調整，因此仍無法克服上述技術問題。

針對習知技術中的問題，本發明的目的在於提供一種數據發送系統及其方法，自動識別用戶情緒，根據用戶情緒選擇不同的數據進行主動發送，提高數據發送系統的情感陪伴質量。

本發明實施例提供一種數據發送系統，其包含：

儲存模組，用於儲存不同用戶訊息與複數個情緒類別的對應關係，以及複數個情緒類別與複數個數據類別的對應關係；

訊息獲取模組，用於獲取待判定的用戶訊息；

控制模組，用於根據待判定的用戶訊息判斷用戶所屬的情緒類別，以及根據用戶所屬的情緒類別選擇匹配的數據類別；以及

數據發送模組，用於根據匹配的數據類別向用戶發送數據。

較佳地，用戶訊息包含圖像特徵值，圖像特徵值包含用戶圖像中的指定動作頻率值；

儲存模組儲存指定動作的動作特徵集合；

訊息獲取模組包含：

圖像獲取單元，用於獲取指定時間內待判定的用戶圖像；以及

圖像特徵值提取單元，用於將待判定的用戶圖像與指定動作的動作特徵集合進行匹配，得到待判定的指定動作頻率值；

不同用戶訊息與複數個情緒類別的對應關係包含各種情緒類別所對應的指定動作頻率值的門檻值範圍；

控制模組對比待判定的動作頻率值與各種情緒類別所對應的動作頻率值的門檻值範圍，並將包含待判定的動作頻率值的門檻值範圍所對應的情緒類別作為用戶所屬的情緒類別。

較佳地，用戶訊息包含聲音特徵值，聲音特徵值包含用戶聲音中指定狀態頻率值；

儲存模組儲存指定狀態所對應的聲學特性集合；

訊息獲取模組包含：

聲音獲取單元，用於獲取指定時間內待判定的用戶聲音；以及

聲音特徵值提取單元，用於將待判定的用戶聲音與指定狀態的聲學特性集合進行匹配得到待判定的指定狀態頻率值；

不同用戶訊息與複數個情緒類別的對應關係包含各種情緒類別所對應的指定狀態頻率值的門檻值範圍；

控制模組對比待判定的指定狀態頻率值與各種情緒類別所對應的指定狀態頻率值的門檻值範圍，並將包含待判定的指定狀態頻率值的門檻值範圍所對應的情緒類別作為用戶所屬的情緒類別。

較佳地，聲學特性集合包含指定狀態的音量值範圍、音調值範圍、音色值範圍或其組合。

較佳地，用戶訊息包含用戶輸入語音、用戶輸入文字、用戶設置訊息或其組合；

訊息獲取模組包含關鍵詞提取單元，關鍵詞提取單元用於提取所述用戶輸入語音、用戶輸入文字、用戶設置訊息中或其組合與情緒相關聯的關鍵詞；

不同用戶訊息與複數個情緒類別的對應關係包含各種情緒類別所對應的關鍵詞。

較佳地，儲存模組儲存複數個用戶自身特徵與複數個數據類別的對應關係，用戶自身特徵包含用戶年齡、用戶身份或其組合；

數據發送系統還包含自身特徵獲取模組，用於獲取待判定的用戶自身特徵；

控制模組根據待判定的用戶自身特徵選擇匹配的數據類別。

較佳地，自身特徵獲取模組包含圖像特徵識別單元、聲音特徵識別單元、文字特徵識別單元和設置特徵識別單元中的至少一種。

較佳地，數據包含文字、圖像和音頻中至少一種。

本發明實施例還提供一種數據發送方法，包含下列步驟：

獲取待判定的用戶訊息；

根據不同用戶訊息與複數個情緒類別的對應關係判斷用戶所屬的情緒類別；

根據複數個情緒類別與複數個數據類別的對應關係選擇匹配的數據類別；以及

根據匹配的數據類別向用戶發送數據。

較佳地，用戶訊息包含圖像特徵值，圖像特徵值包含用戶圖像中的指定動作頻率值；

獲取待判定的用戶訊息，包含下列步驟：

獲取指定時間內待判定的用戶圖像；

將待判定的用戶圖像與指定動作的動作特徵集合進行匹配，得到指定時間內待判定的指定動作頻率值；

不同用戶訊息與複數個情緒類別的對應關係包含各種情緒類別所對應的指定動作頻率值的門檻值範圍；

判斷用戶所屬的情緒類別，包含下列步驟：

對比待判定的動作頻率值與各種情緒類別所對應的動作頻率值的門檻值範圍；

將包含待判定的動作頻率值的門檻值範圍所對應的情緒類別作為用戶所屬的情緒類別。

較佳地，用戶訊息包含聲音特徵值，聲音特徵值包含用戶圖像中的指定狀態頻率值；

獲取待判定的用戶訊息，包含下列步驟：

獲取指定時間內待判定的用戶聲音；

將待判定的用戶聲音與指定狀態的聲學特性集合進行匹配，得到指定時間內待判定的指定狀態頻率值；

不同用戶訊息與複數個情緒類別的對應關係包含各種情緒類別所對應的指定狀態頻率值的門檻值範圍；

判斷用戶所屬的情緒類別，包含下列步驟：

對比待判定的狀態頻率值與各種情緒類別所對應的狀態頻率值的門檻值範圍；

將包含待判定的狀態頻率值的門檻值範圍所對應的情緒類別作為用戶所屬的情緒類別。

本發明所提供的數據發送系統及其方法具有下列優點：

本發明提供了一種主動進行數據發送的技術方案，首先根據用戶訊息判斷用戶當前的情緒，再主動發送適合於用戶當前情緒的數據，從而提高數據發送系統的情感陪伴質量；在指定時間內持續採集用戶的圖像與聲音，根據用戶動作與聲學特性中出現指定狀態的頻率來判斷用戶的情緒，對於情緒的判斷更加準確；用戶不必自己親手操作即可以獲得更合適的發送數據，也避免了無關數據的接收，使得數據的發送更具主動性和針對性。

現在將參考圖式更全面地描述示例實施方式。然而，示例實施方式能夠以多種形式實施，且不應被理解為限於在此闡述的實施方式；相反，提供這些實施方式使得本發明將全面和完整，並將示例實施方式的構思全面地傳達給本發明所屬技術領域中具有通常知識者。在圖中相同的圖式標記表示相同或類似的結構，因而將省略對它們的重複描述。

如圖1所示，本發明實施例提供一種數據發送系統，其包含：

儲存模組100，用於儲存不同用戶訊息與複數個情緒類別的對應關係，以及複數個情緒類別與複數個數據類別的對應關係；

訊息獲取模組200，用於獲取待判定的用戶訊息；

控制模組300，用於根據待判定的用戶訊息判斷用戶所屬的情緒類別，以及根據用戶所屬的情緒類別選擇匹配的數據類別；以及

數據發送模組400，用於根據匹配的數據類別向用戶發送數據。

其中，複數個情緒類別可以包含愉快、難過、高興、低落等，情緒類別與數據類別可以是一對一的關係，也可以是多對多的關係，例如，情緒類別愉快對應快樂類的數據，情緒類別難過對應舒緩類的數據等，具體可以根據實際需要進行修改，此處儲存模組100儲存的對應關係可以是數據發送系統出廠前設置的，也可以根據用戶設置進行修改，且對應關係不限於此處列舉的情況，均屬於本發明的保護範圍之內。

此處被發送的數據一般為多媒體數據，例如音頻、圖像、文字等的結合，也可以是單獨發送音頻、圖像或文字等，為用戶提供多方面的服務，例如語音提示、播放音樂、播放影片等，並且藉由與情緒關聯，主動發送相關的數據或進行恰當的交流應對，可以更滿足用戶的實時需要。

如圖2所示，本發明的數據發送系統可以根據用戶的圖像來判斷用戶的情緒類別，因此用戶訊息可選地包含圖像特徵值，訊息獲取模組200可以包含：

圖像獲取單元201，用於獲取指定時間內待判定的用戶圖像；以及

圖像特徵值提取單元202，用於提取待判定的用戶圖像的圖像特徵值；

不同用戶訊息與複數個情緒類別的對應關係包含各種情緒類別所對應的圖像特徵值的門檻值範圍。

圖像特徵值可選地包含用戶圖像中的指定動作頻率值；儲存模組儲存指定動作的動作特徵集合；圖像特徵值提取單元將待判定的用戶圖像與指定動作的動作特徵集合進行匹配得到待判定的指定動作頻率值。

上述指定動作可以是各種預先設定的動作，可以包含臉部表情、肢體動作等等，例如利用微笑、大笑、拍手等動作來表徵用戶是否情緒愉快，利用扶額、皺眉、聳肩等動作來表徵用戶是否情緒緊張，利用流淚、掩面等動作來表徵用戶是否情緒低落等。指定動作可以是數據發送系統在出廠時已經設置好的，也可以是後期用戶自己設置的，且指定動作的類別不限於上述列舉的幾種，均屬於本發明的保護範圍之內。

相應地，不同用戶訊息與複數個情緒類別的對應關係包含各種情緒類別所對應的指定動作頻率值的門檻值範圍，控制模組300對比待判定的動作頻率值與各種情緒類別所對應的動作頻率值的門檻值範圍，並將包含待判定的動作頻率值的門檻值範圍所對應的情緒類別作為用戶所屬的情緒類別。

當圖像特徵值包含用戶圖像中的指定動作頻率值時，各種所述情緒類別所對應的圖像特徵值的門檻值範圍也就是各種情緒類別所對應的指定動作頻率值的門檻值範圍。例如，在實際應用中，可以定義當笑容出現的頻率值大於一定門檻值時，表示用戶愉快，也可以定義當笑容出現的頻率值大於一定門檻值且拍手動作出現的頻率也大於另一門檻值時，表示用戶愉快，具體動作的組合方式以及與各種頻率的門檻值範圍的比較關係可以根據實際需要進行設定。

本發明在指定時間內持續採集用戶圖像，然後計算在這一指定時間內的指定動作頻率值，相對於習知技術中即時判斷的方式，提高了情緒判斷的準確性。例如，設定指定時間為十分鐘，一個人在前兩分鐘內表現出了微笑，然而後面八分鐘可能表現出皺眉，這樣由於微笑雖然出現了但頻率較低，採用本發明的方法可能就不會判定為愉快，也就不會發送愉快對應的數據，而採用習知技術中的方法，可能在微笑一出現時就判定其為愉快，並發送愉快對應的數據，這樣就可能出現誤判，甚至檢測到的微笑也可能只是一種錯誤識別，因此習知技術中的發送方法無法滿足用戶真正的需要。

如圖3所示，本發明的數據發送系統可以根據用戶的聲音來判斷用戶的情緒類別，因此用戶訊息可選地包含聲音特徵值，用戶訊息包含聲音特徵值，訊息獲取模組包含：

聲音獲取單元203，用於獲取指定時間內待判定的用戶聲音；以及

聲音特徵值提取單元204，用於提取待判定的用戶聲音的聲音特徵值；

不同用戶訊息與複數個情緒類別的對應關係包含各種情緒類別所對應的聲音特徵值的門檻值範圍。

聲音特徵值可選地包含用戶聲音中的指定狀態頻率值；儲存模組儲存指定狀態所對應的聲學特性集合；聲音特徵值提取單元將用戶聲音與聲學特性集合進行匹配得到指定狀態頻率值。進一步地，聲學特性集合可以包含指定狀態所對應的音量值範圍、音調值範圍、音色值範圍或其組合。

相應地，不同用戶訊息與複數個情緒類別的對應關係包含各種情緒類別所對應的指定狀態頻率值的門檻值範圍。控制模組300對比待判定的指定狀態頻率值與各種情緒類別所對應的指定狀態頻率值的門檻值範圍，並將包含待判定的指定狀態頻率值的門檻值範圍所對應的情緒類別作為用戶所屬的情緒類別。同樣地，採用指定時間內持續採集用戶聲音，並根據用戶聲音中指定狀態頻率值來判斷情緒的方法，可以有效地提高用戶情緒檢測的準確性。

上述指定狀態可以有愉快狀態、高興狀態、難過狀態、思考狀態、低落狀態等，例如，在實際應用中，可以定義當用戶的聲音中音量值處於一定預設範圍內，音調值處於另一預設範圍內時作為愉快狀態，且愉快狀態出現的頻率值大於一定門檻值時，則用戶所屬的情緒類別為愉快。

此處所說的用戶聲音包含用戶語音，但也可以包含其他的聲音，例如用戶拍手的聲音或用戶跺腳的聲音等，均可以根據這些聲音來判斷用戶是否處於某一指定狀態中，並進一步根據指定狀態出現的頻率值判斷用戶的情緒類別。

另外，聲音特徵值也可以包含用戶聲音中用戶語音所對應的文字訊息；聲音特徵值提取單元204從用戶聲音中提取出用戶語音，將用戶語音轉換為文字訊息，並提取文字訊息中與情緒相關聯的關鍵詞；不同用戶訊息與複數個情緒類別的對應關係包含各種情緒類別所對應的關鍵詞；因此，控制模組300根據文字訊息中與情緒關聯的關鍵詞判斷用戶所屬的情緒類別。

在實際應用中，用戶可以直接向數據發送系統說出自己當前的情緒或需求，例如，用戶說“我現在心情不好”，則可以提取情緒相關聯的關鍵詞“心情不好”，控制模組300可以判斷“心情不好”屬於難過的情緒類別，進而發送舒緩類別的數據；用戶也可以直接說：“我想要聽些舒緩的音樂”，則控制模組300可以直接根據關鍵詞“舒緩”選擇發送舒緩類別的數據，應用十分方便。實際應用的方式不限於此處列舉的內容，均屬於本發明的保護範圍之內。

另外，在實際應用中，本發明也可以將上述複數個方式結合起來應用，例如同時根據圖像特徵值和聲音特徵值進行綜合判斷用戶所屬的情緒類別，均屬於本發明的保護範圍之內。綜合性的判斷可以進一步提高情緒類別判斷的準確性，降低誤判率。

進一步地，用戶訊息還包含用戶輸入文字、用戶設置訊息或其組合；訊息獲取模組200包含關鍵詞提取單元205，關鍵詞提取單元205用於提取用戶輸入文字、用戶設置訊息或其組合中與情緒相關聯的關鍵詞；不同用戶訊息與複數個情緒類別的對應關係包含各種情緒類別所對應的關鍵詞。在實際應用中，用戶可以藉由輸入鍵盤或觸摸屏等輸入設備輸入文字或進行選項設置，例如，用戶直接輸入“我現在心情不錯”，則可以提取情緒相關聯的關鍵詞“心情不錯”，控制模組300可以判斷“心情不錯”屬於愉快的情緒類別，進而發送快樂類別的數據，或者用戶設置於下午一點半播放快樂的音樂，則控制模組300可以在下午一點半時直接選擇快樂類別的數據進行發送。

如圖4所示，本發明還可以藉由用戶的年齡來選擇適合的數據進行發送，儲存模組儲存複數個用戶年齡範圍與複數個數據類別的對應關係；系統還包含年齡獲取模組500，用於獲取待判定的用戶年齡；控制模組300根據待判定的用戶年齡選擇匹配的數據類別。年齡獲取模組500可選地包含圖像年齡識別單元、聲音年齡識別單元、文字年齡識別單元和設置年齡識別單元中的至少一種，分別可以藉由圖像識別用戶的年齡，藉由聲音識別用戶的年齡，藉由用戶輸入文字中與年齡有關的關鍵詞識別用戶的年齡，或者藉由用戶設置訊息中與年齡有關的關鍵詞識別用戶的年齡。

在實際應用中，可以使用臉部識別或聲音識別等方式來判斷用戶的年齡，例如，針對兒童，發送兒歌、成語或童話故事等數據，針對老人，發送戲曲類在線音樂或電臺等數據。

如圖5所示，本發明還可以根據用戶的不同身份選擇合適的數據發送，儲存模組儲存不同用戶身份與複數個數據類別的對應關係；數據發送系統還包含身份獲取模組600，用於獲取待判定的用戶身份；控制模組300根據待判定的用戶身份選擇匹配的數據類別。身份獲取模組600可選地包含圖像身份識別單元、聲音身份識別單元、文字身份識別單元和設置身份識別單元中的至少一種，分別可以藉由圖像識別用戶的身份，藉由聲音識別用戶的身份，藉由用戶輸入文字中與身份有關的關鍵詞識別用戶的身份，或者藉由用戶設置訊息中與身份有關的關鍵詞識別用戶的身份。

在實際應用中，可以使用臉部識別或聲音識別等方式來判斷用戶的身份。另外，不同用戶也可以預先設置自己偏好的數據類別。例如，用戶A喜歡快樂類的數據，用戶B喜歡舒緩類的數據，用戶C喜歡熱鬧類的數據，當某一用戶使用時，首先識別到當前使用的是用戶B，則控制模組300可以直接選擇舒緩類的數據進行發送。

圖4和圖5中所示出的用戶年齡和用戶身份都是指的用戶自身特徵，在實際應用中，用戶自身特徵對於發送數據的影響可以是多方面的，而不限於此處列舉的兩種情況。

如圖6所示，為本發明另一實施例的數據發送系統的結構示意圖。在該實施例中，本發明的數據發送系統具體應用於一種智慧娛樂機器人中。在智慧娛樂機器人中設置本地控制主機，而儲存模組100和控制模組300設置於雲端伺服器中。本地控制主機可以與雲端伺服器藉由無線收發模組進行連接。用戶訊息包含圖像特徵值和聲音特徵值，訊息獲取模組200包含圖像獲取單元201、圖像特徵值提取單元202、聲音獲取單元203和聲音特徵值提取單元204，具體地，圖像特徵值提取單元202和聲音特徵值提取單元204設置於本地控制主機中，圖像獲取單元201採用攝像裝置，並進一步可選為設置在智慧娛樂機器人頭部的前置攝像頭，聲音獲取單元203採用聲音輸入裝置，並進一步可選為麥克風。數據發送模組400可選包含顯示裝置和聲音輸出裝置。

採用該實施例的智慧娛樂機器人的工作原理如下：本地控制主機藉由攝像裝置和聲音輸入裝置獲取在指定時間內用戶圖像和用戶聲音，從中提取得到圖像特徵值和聲音特徵值，將圖像特徵值和聲音特徵值藉由無線收發模組發送至雲端伺服器；雲端伺服器根據圖像特徵值和聲音特徵值判斷用戶所屬的情緒類別，並根據用戶所屬的情緒類別選擇匹配的數據類別，然後將匹配的數據類別發送至本地控制主機；本地控制主機獲取雲端伺服器發送的匹配的數據類別，根據該數據類別選擇對應的數據，以及將匹配的數據藉由顯示裝置和聲音輸出裝置進行發送。

具體地，各個數據類別所對應的具體的數據，如音頻、圖像和文字等內容，可以儲存在雲端伺服器中，也可以儲存在本地控制主機中。

其中，攝像裝置和聲音輸入裝置可以採用其他類型的設備，而不以上述列舉的內容為限。顯示裝置可以是設置在智慧娛樂機器人表面的顯示器，聲音輸出裝置可以是喇叭，但不限於此，其他例如採用音響或將顯示器與智慧娛樂機器人分離設置等方式也是可以的。

另外，該實施例中的顯示裝置可以不僅用於數據的發送顯示，也可以用於前期雲端伺服器和本地控制主機的設定內容的設置，具體地，顯示裝置可以採用觸摸螢幕或顯示器加輸入鍵盤的組合方式，獲取用戶輸入的設定數據。採用該實施例的智慧娛樂機器人，用戶在使用時，可以首先藉由顯示裝置和本地控制主機來設定一些基本參數，例如，設定不同用戶訊息與複數個情緒類別的對應關係，設定複數個情緒類別與複數個數據的對應關係，設定不同用戶身份的數據發送偏好等，在設置完後，本地控制主機藉由無線收發模組將設定的參數發送至雲端伺服器進行儲存。具體地，此處設定基本參數可以是全新的設置，包含但不限於情緒類別的分類，數據的分類，以及其中的對應關係，也可以設置不同用戶的數據偏好，不同用戶的年齡和不同年齡對應的數據類別等其他參數；也可以是對雲端伺服器中已有的參數的修改或增加，以便利用戶使用或出廠設置為基礎，可以採用複數個靈活的方式，均屬於本發明的保護範圍之內。

進一步地，當顯示裝置為觸摸螢幕或帶有輸入鍵盤的顯示屏時，用戶還可以藉由操作觸摸螢幕或輸入鍵盤來直接播放或停止發送的數據，以避免該智慧娛樂機器人主動發送數據可能會帶來的干擾。

該實施例的智慧娛樂機器人相比於習知技術中的服務類機器人來說，不僅可以根據用戶訊息進行用戶情緒判斷，並且可以根據用戶情緒主動發送數據進行交互，同時其結合了圖像識別和聲音識別兩種用戶訊息獲取方式，對用戶的情緒判斷更加準確及時，提高了服務類機器人的主動性和針對性。另外，該智慧娛樂機器人藉由採集指定時間內用戶圖像和用戶聲音，並根據在該指定時間內指定動作頻率值和指定狀態頻率值來判斷用戶情緒，減小了誤判的概率，大大增加了情緒判斷的準確性。

如圖7所示，本發明一實施例還提供了一種數據發送方法，包含下列步驟：

S100：獲取待判定的用戶訊息；

S200：根據不同用戶訊息與複數個情緒類別的對應關係判斷用戶所屬的情緒類別；

S300：根據複數個情緒類別與複數個數據類別的對應關係選擇匹配的數據類別；

S400：根據匹配的數據類別向用戶發送數據。

在該實施例中，用戶訊息進一步可以包含圖像特徵值、聲音特徵值或其組合。不同用戶訊息與複數個情緒類別的對應關係可選地包含各種情緒類別所對應的圖像特徵值的門檻值範圍、各種情緒類別所對應的聲音特徵值的門檻值範圍或其組合。

採用該種數據發送方法，不僅可以根據用戶訊息進行用戶情緒判斷，並且可以根據用戶情緒主動發送數據進行交互，同時其採用了圖像識別、聲音識別或其兩種用戶訊息獲取方式，判斷時可以根據持續一段時間內的採集訊息綜合判斷，對用戶的情緒判斷更加準確及時，提高了數據發送的主動性和針對性。

如圖8所示，為本發明的一種訊息獲取方式的流程圖，具體為獲取用戶的圖像特徵值的流程圖，圖像特徵值可選地包含用戶圖像中的指定動作頻率值。獲取圖像特徵值包含如下步驟：

S101-A：獲取指定時間內待判定用戶圖像；

S102-A：將待判定的用戶圖像與指定動作的動作特徵集合進行匹配；

S103-A：得到指定時間內待判定的指定動作頻率值。

如上所述，指定動作可以設定為用戶在不同情緒時常用的一些肢體動作，例如用戶在高興時會大笑或手舞足蹈，在難過時會皺眉、掩面或哭泣等，此處僅為舉例，而不以此為限。在實際應用中，用戶圖像較佳為用戶的臉部圖像，判斷用戶所屬的情緒類別，較佳為根據用戶圖像中笑容表情出現的頻率值與複數個情緒類別的對應關係判斷用戶所屬的情緒類別。因此，可以藉由識別用戶臉部的笑容頻率來進行統計判斷用戶的情緒。

相應地，不同用戶訊息與複數個情緒類別的對應關係包含各種情緒類別所對應的指定動作頻率值的門檻值範圍；

判斷用戶所屬的情緒類別，包含如下步驟：

對比待判定的動作頻率值與各種情緒類別所對應的動作頻率值的門檻值範圍；

將包含待判定的動作頻率值的門檻值範圍所對應的情緒類別作為用戶所屬的情緒類別。

如圖9所示，為本發明的一種訊息獲取方式的流程圖，具體為獲取用戶的聲音特徵值的流程圖，聲音特徵值包含用戶聲音中的指定狀態頻率值。獲取聲音特徵值包含如下步驟：

S101-B：獲取指定時間內待判定的用戶聲音；

S102-B：將待判定的用戶聲音與指定狀態的聲學特性集合進行匹配；

S103-B：得到指定時間內待判定的指定狀態頻率值。

如上所述，指定狀態可以是愉快、難過、高興、沉思等狀態，同樣地，此處僅為舉例，而不以此為限。指定狀態較佳根據用戶的音量值、音調值和音色值中至少一種進行判斷。因此，可以藉由捕捉用戶聲音的大小、語氣、語調或其組合來進行統計判斷用戶的情緒。具體應用過程中，可以首先設定各種不同情緒類別下，對應的聲音特徵值的數值範圍。例如，當用戶高興時，音調可能會偏高，音量可能會偏大，當用戶難過時，音調可能會偏低，音量可能會偏小等，此處僅為舉例，而不以此為限。

相應地，不同用戶訊息與複數個情緒類別的對應關係包含各種情緒類別所對應的指定狀態頻率值的門檻值範圍；

判斷用戶所屬的情緒類別，包含如下步驟：

對比待判定的狀態頻率值與各種情緒類別所對應的狀態頻率值的門檻值範圍；

將包含待判定的狀態頻率值的門檻值範圍所對應的情緒類別作為用戶所屬的情緒類別。

如上所述，本發明藉由採集指定時間內的用戶圖像、用戶聲音或其組合，並且藉由頻率值來比較，而不是藉由單次檢測來判斷情緒，大大提高了情緒判斷的準確性。

如圖10所示，為本發明另一實施例的複數個情緒類別與不同用戶訊息以及複數個數據類別的對應關係的示意圖。在該實施例中，情緒類別簡單地分為愉快和非愉快兩種。具體情緒類別區分的標準可以是：用戶圖像中笑容出現的頻率值大於第一頻率門檻值且用戶聲音中愉快狀態出現頻率值大於第二頻率門檻值時，情緒類別為愉快，否則為非愉快。複數個情緒類別與數據類別的對應關係如下表所示： 表1 另一實施例的情緒類別和數據類別對應表

如圖11所示，為本發明另一實施例的數據發送方法的流程圖。該實施例採用的是如圖6所示的智慧娛樂機器人，具體所示數據發送方法包含如下步驟：

S601：攝像裝置在指定時間內獲取用戶臉部圖像；

S602：聲音輸入裝置在指定時間內獲取用戶聲音；

S603：本地控制主機處理用戶臉部圖像和用戶聲音得到圖像特徵值和聲音特徵值；

S604：本地控制主機將圖像特徵值和聲音特徵值上傳至雲端伺服器；

S605：雲端伺服器判斷用戶臉部圖像中笑容出現的頻率值是否大於第一頻率門檻值，如果是，則繼續步驟S606，否則繼續步驟S607；

S606：雲端伺服器判斷用戶聲音中愉快狀態出現的頻率值是否大於第二頻率門檻值，如果是，則繼續步驟S608，否則繼續步驟S607；

S607：雲端伺服器選擇舒緩類數據並將數據類別發送至本地控制主機，由本地控制主機控制顯示裝置和聲音輸出裝置發送數據，然後結束此次流程；

S608：雲端伺服器選擇快樂類數據並將數據類別發送至本地控制主機，由本地控制主機控制顯示裝置和聲音輸出裝置發送數據，然後結束此次流程。

上述只是一種數據發送的具體實施方式，而不作為本發明保護範圍的限制。在實際應用中，先根據用戶圖像判斷情緒，再藉由用戶聲音進行確認，或者先根據用戶聲音判斷情緒，再藉由用戶圖像進行確認，或者同時參考用戶圖像和用戶聲音的結合來判斷情緒，均是可以實現的。

採用該種實施例，結合了指定時間內圖像和聲音中指定動作頻率值和指定狀態頻率值來綜合判斷用戶情緒，判斷更加準確，減小了誤判率。

如圖12所示，為本發明再一實施例的複數個情緒類別與複數個數據類別的對應關係的示意圖。在該實施例中，複數個情緒類別和數據類別的對應關係如下表所示： 表2 再一實施例的情緒類別和數據類別對應表

將情緒類別分為難過、高興和愉快三種，數據對應分為舒緩類、熱鬧類和歡樂類三種。

如圖13所示，為本發明再一實施例的選擇匹配的數據類別，該實施例可以採用如圖6所示的智慧娛樂機器人。具體包含如下步驟：

S701：雲端伺服器的數據按照舒緩、熱鬧和歡樂進行分類；

S702：本地控制主機等待雲端伺服器的調用指令；

S703：本地控制主機判斷要播放的數據類別是否為歡樂，如果是，則繼續步驟S704，否則繼續步驟S705；

S704：本地控制主機選擇快樂的數據，然後繼續步驟S710；

S705：本地控制主機判斷要播放的數據類別是否為熱鬧，如果是，則繼續步驟S706，否則繼續步驟S707；

S706：本地控制主機選擇熱鬧的數據，然後繼續步驟S710；

S707：本地控制主機判斷要播放的數據類別是否為舒緩，如果是，則繼續步驟S708，否則繼續步驟S709；

S708：本地控制主機選擇舒緩的數據，然後繼續步驟S710；

S709：本地控制主機返回選擇錯誤至雲端伺服器，然後結束本次流程；

S710：本地控制主機控制顯示裝置、聲音輸出裝置或其兩者發送選擇的數據。

在實際應用中，情緒分類的種類數越多，分類越細緻，根據用戶情緒發送數據的針對性越強，但是也會增加情緒判斷的繁瑣度，因此，情緒分類的種類數具體可以根據實際需要進行調整。

如圖14所示，本發明還可以增加根據用戶的年齡選擇合適的數據的方式，例如，針對兒童，發送兒歌、成語故事和童話故事等內容；針對老人，發送一些戲曲類在線音樂或電臺等內容。具體地，用戶年齡可以是根據用戶圖像識別得到的，也可以是根據聲音特徵值識別得到的，也可以是在上述方法應用之前，由用戶預先設置的年齡值等。另外，還可以增加根據用戶的身份選擇合適的數據的方式，例如，根據每個不同用戶的數據偏好進行優先選擇發送。當有多個用戶時，可以分別設置多個用戶的多媒體內容偏好，並且可以藉由用戶圖像和用戶聲音等用戶自身特徵區分當前是哪個用戶在使用。具體根據用戶年齡或用戶身份發送數據包含如下步驟：

S801：獲取待判定的用戶年齡或用戶身份；

S802：根據待判定的用戶年齡選擇匹配的數據類別；

S803：根據匹配的數據類別向用戶發送數據。

如圖15所示，用戶訊息還可以包含用戶輸入文字或用戶設置訊息。用戶可以藉由輸入鍵盤或觸摸螢幕等輸入設備輸入文字或進行參數設置。具體根據用戶輸入文字或用戶設置訊息進行數據發送包含如下步驟：

S901：獲取用戶輸入文字或用戶設置訊息；

S902：提取用戶輸入文字或用戶設置訊息中與情緒相關聯的關鍵詞；

S903：根據與情緒相關聯的關鍵詞選擇用戶所屬的情緒類別；

S904：根據複數個情緒類別與複數個數據類別的對應關係選擇匹配的數據類別；

S905：根據匹配的數據類別向用戶發送數據。

另外，如上所述，用戶訊息還可以包含用戶聲音中用戶語音所對應的文字訊息，根據用戶語音所對應的文字訊息發送數據的方式可以參照圖15的方式，即首先提取用戶語音所對應的文字訊息中與情緒相關聯的關鍵詞，根據與情緒相關聯的關鍵詞選擇用戶所屬的情緒類別，根據複數個情緒類別與複數個數據類別的對應關係選擇匹配的數據類別，然後根據匹配的數據類別向用戶發送數據。

本發明結合上述複數個實施方式為用戶提供了複數個選擇，極大地方便了用戶的使用。將該數據發送方法應用於智慧娛樂機器人或其他設備中時，可以為用戶提供全方面複數個交互服務。

本發明所提供的數據發送方法及數據發送系統具有下列優點：

本發明提供了一種主動進行數據發送的技術方案，首先根據用戶訊息判斷用戶當前的情緒，再主動發送適合於用戶當前情緒的數據，從而提高數據發送系統的情感陪伴質量；在指定時間內持續採集用戶的圖像與聲音，根據用戶動作與聲學特性中出現指定狀態的頻率來判斷用戶的情緒，對於情緒的判斷更加準確；用戶不必自己親手操作即可以獲得更合適的發送數據，也避免了無關數據的接收，使得數據的發送更具主動性和針對性。

以上內容是結合具體的較佳實施方式對本發明所作的進一步詳細說明，不能認定本發明的具體實施只侷限於這些說明。對於本發明所屬技術領域中具有通常知識者來說，在不脫離本發明構思的前提下，還可以做出多種簡單推演或替換，都應當視為屬於本發明的保護範圍。

100‧‧‧儲存模組

200‧‧‧訊息獲取模組

201‧‧‧圖像獲取單元

202‧‧‧圖像特徵值提取單元

203‧‧‧聲音獲取單元

204‧‧‧聲音特徵值提取單元

205‧‧‧關鍵詞提取單元

300‧‧‧控制模組

400‧‧‧數據發送模組

500‧‧‧年齡獲取模組

600‧‧‧身份獲取模組

S100~S400、S101-A~S103-A、S101-B~S103-B、S601~S608、S701~S710、S801~S803、S901~S905‧‧‧步驟。

藉由閱讀參照以下圖式對非限制性實施例所作的詳細描述，本發明的其它特徵、目的和優點將會變得更明顯。 圖1是本發明一實施例的數據發送系統的結構示意圖； 圖2是本發明的訊息獲取模組的一種設置方式的結構示意圖； 圖3是本發明的訊息獲取模組的另一種設置方式的結構示意圖； 圖4是本發明具有年齡識別功能的數據發送系統的結構示意圖； 圖5是本發明具有身份識別功能的數據發送系統的結構示意圖； 圖6是本發明再一實施例的數據發送系統的結構示意圖； 圖7是本發明一實施例的數據發送方法的流程圖； 圖8是本發明一種訊息獲取方式的流程圖； 圖9是本發明另一種訊息獲取方式的流程圖； 圖10是本發明另一實施例的多種情緒類別與不同用戶訊息以及多種數據類別的對應關係的示意圖； 圖11是本發明另一實施例的數據發送方法的流程圖； 圖12是本發明再一實施例的多種情緒類別與多種數據類別的對應關係的示意圖； 圖13是本發明另一實施例的選擇匹配的數據類別的流程圖； 圖14是本發明根據用戶年齡或身份發送數據的流程圖； 圖15是本發明根據用戶輸入文字或用戶設置訊息發送數據的流程圖。

Claims (11)

1. 一種數據發送系統，其包含： 儲存模組，用於儲存不同用戶訊息與複數個情緒類別的對應關係，以及該複數個情緒類別與複數個數據類別的對應關係； 訊息獲取模組，用於獲取待判定的用戶訊息； 控制模組，用於根據該待判定的用戶訊息判斷用戶所屬的情緒類別，以及根據該用戶所屬的情緒類別選擇匹配的數據類別；以及 數據發送模組，用於根據該匹配的數據類別向用戶發送數據。
2. 如申請專利範圍第1項所述之數據發送系統，其中該用戶訊息包含圖像特徵值，該圖像特徵值包含用戶圖像中的指定動作頻率值； 該儲存模組儲存指定動作的動作特徵集合； 該訊息獲取模組包含： 圖像獲取單元，用於獲取指定時間內待判定的用戶圖像；以及 圖像特徵值提取單元，用於將該待判定的用戶圖像與該指定動作的動作特徵集合進行匹配，得到待判定的指定動作頻率值； 不同用戶訊息與該複數個情緒類別的對應關係包含各種該情緒類別所對應的指定動作頻率值的門檻值範圍； 該控制模組對比該待判定的動作頻率值與各該情緒類別所對應的動作頻率值的門檻值範圍，並將包含該待判定的動作頻率值的門檻值範圍所對應的情緒類別作為用戶所屬的情緒類別。
3. 如申請專利範圍第1或2項所述之數據發送系統，其中該用戶訊息包含聲音特徵值，該聲音特徵值包含用戶聲音中指定狀態頻率值； 該儲存模組儲存該指定狀態所對應的聲學特性集合； 該訊息獲取模組包含： 聲音獲取單元，用於獲取指定時間內待判定的用戶聲音；以及 聲音特徵值提取單元，用於將該待判定的用戶聲音與指定狀態的聲學特性集合進行匹配得到待判定的指定狀態頻率值； 不同用戶訊息與該複數個情緒類別的對應關係包含各該情緒類別所對應的指定狀態頻率值的門檻值範圍； 該控制模組對比該待判定的指定狀態頻率值與各該情緒類別所對應的指定狀態頻率值的門檻值範圍，並將包含該待判定的指定狀態頻率值的門檻值範圍所對應的情緒類別作為用戶所屬的情緒類別。
4. 如申請專利範圍第3項所述之數據發送系統，其中該聲學特性集合包含該指定狀態的音量值範圍、音調值範圍、音色值範圍或其組合。
5. 如申請專利範圍第1項所述之數據發送系統，其中該用戶訊息包含用戶輸入語音、用戶輸入文字、用戶設置訊息或其組合； 該訊息獲取模組包含關鍵詞提取單元，該關鍵詞提取單元用於提取該用戶輸入語音、用戶輸入文字、用戶設置訊息中或其組合與情緒相關聯的關鍵詞； 不同用戶訊息與該複數個情緒類別的對應關係包含各種該情緒類別所對應的關鍵詞。
6. 如申請專利範圍第1項所述之數據發送系統，其中該儲存模組儲存複數個用戶自身特徵與複數個數據類別的對應關係，該用戶自身特徵包含用戶年齡、用戶身份或其組合； 該數據發送系統更包含自身特徵獲取模組，用於獲取待判定的用戶自身特徵； 該控制模組根據該待判定的用戶自身特徵選擇匹配的數據類別。
7. 如申請專利範圍第6項所述之數據發送系統，其中該自身特徵獲取模組包含圖像特徵識別單元、聲音特徵識別單元、文字特徵識別單元和設置特徵識別單元中的至少一種。
8. 如申請專利範圍第1項所述之數據發送系統，其中該數據包含文字、圖像和音頻中至少一種。
9. 一種數據發送方法，其包含下列步驟： 獲取待判定的用戶訊息； 根據不同用戶訊息與複數個情緒類別的對應關係判斷用戶所屬的情緒類別； 根據該複數個情緒類別與複數個數據類別的對應關係選擇匹配的數據類別；以及 根據該匹配的數據類別向用戶發送數據。
10. 如申請專利範圍第9項所述之數據發送方法，其中該用戶訊息包含圖像特徵值，該圖像特徵值包含該用戶圖像中的指定動作頻率值； 該獲取待判定的用戶訊息，包含下列步驟： 獲取指定時間內待判定的用戶圖像； 將該待判定的用戶圖像與指定動作的動作特徵集合進行匹配，得到指定時間內待判定的指定動作頻率值；以及 不同用戶訊息與該複數個情緒類別的對應關係包含各該情緒類別所對應的指定動作頻率值的門檻值範圍； 該判斷用戶所屬的情緒類別，包含下列步驟： 對比該待判定的動作頻率值與各該情緒類別所對應的動作頻率值的門檻值範圍；以及 將包含該待判定的動作頻率值的門檻值範圍所對應的情緒類別作為用戶所屬的情緒類別。
11. 如申請專利範圍第9或10項所述之數據發送方法，其中該用戶訊息包含聲音特徵值，該聲音特徵值包含用戶圖像中的指定狀態頻率值； 該獲取待判定的用戶訊息，包含下列步驟： 獲取指定時間內待判定的用戶聲音； 將該待判定的用戶聲音與指定狀態的聲學特性集合進行匹配，得到指定時間內待判定的指定狀態頻率值；以及 不同用戶訊息與該複數個情緒類別的對應關係包含各該情緒類別所對應的指定狀態頻率值的門檻值範圍； 該判斷用戶所屬的情緒類別，包含下列步驟： 對比該待判定的狀態頻率值與各該情緒類別所對應的狀態頻率值的門檻值範圍； 將包含該待判定的狀態頻率值的門檻值範圍所對應的情緒類別作為用戶所屬的情緒類別。