TWI524286B - Popular with the recommended system - Google Patents

Description

流行穿著推薦系統

本發明係為一種分析推薦系統，特別為一種流行穿著推薦系統，並依據使用者之影像及偏好進行穿著推薦。

網路資訊傳播與手持行動裝置的普及化，結合依據使用者習慣推薦及學習功能之互動式系統亦逐漸多元化，其中因應日常生活之服飾穿搭推薦系統也成為多方研究改良之主流。然而，目前多數服飾穿搭推薦系統僅達到方便使用者管理個人服飾或提供使用者線上搜尋衣服之平台(專利200622802、102120299及100121515)並無實際考量使用者身形膚色特徵進行服飾推薦，容易造成所得之服飾組合可能不適合使用者外型，再者，也因該系統過於複雜，使用者必須學會繁瑣的操作步驟，降低了其使用者經驗舒適度；而專利200931332及200847048提出以一個人體形貌擷取裝置針對人體進行表面計測及影像擷取，再進行處理以獲得該人體形貌資料之方法，然而，因需藉由特定的硬體設施(人體形貌擷取裝置)之輔助才能獲得人體形貌資料，該硬體設施之建置費用及使用者必須到具有該硬體設施之場所才能進行量測之限制，都減少此系統擴展性與便利性。本專利只需兩張使用者全身影像(正面與反面)進行處理，即能夠獲得使用者身形膚色特徵(亦即形貌資料)進行服飾穿著推薦，無需繁瑣的使用者操作步驟及不需仰 賴特定的硬體設施，與先前技術相較之下有明顯地進步性與方便性。，由此可見，上述習用方式仍有諸多缺失，實非一良善之設計，而亟待加以改良。

本發明提出一種流行穿著推薦系統，係指一種運用於網路環境下，基於使用者身形膚色、使用者以往服飾偏好與專家建置之流行穿著知識庫，推薦使用者當前流行穿著且符合其偏好之服飾商品，該系統使用行動裝置拍照功能得到使用者正面與側面全身影像進行分析處理，得到使用者身形膚色特徵傳送回平台端進行符合偏好之流行服飾推薦，並且根據使用者回饋資訊進行偏好學習，該系統係運用雲端平台進行建置與系統管理，所有流程皆透過網路通訊程式來達成。使用者需具備手持式行動通訊裝置(如，智慧型手機、PDA或平板電腦)並具有三個模組：(1)身形膚色特徵分析模組、(2)推薦服飾資訊顯示模組與(3)資料傳送接收模組；使用者先換上緊身服裝站在鏡子前面，將手機放在肚子中心，並對著鏡中自己拍下全身正面與側面兩張影像，再將兩張影像經由身形膚色特徵分析模組進行分析處理以得到使用者年齡、性別、膚色、身形輪廓、上/下半身長度、上/下半身寬度、上/下半身厚度(胖瘦程度)之參數值。

本發明平台端之服飾穿著推薦模組根據從行動端傳回之使用者身形膚色特徵進行滿足使用者服飾偏好之流行穿著推薦，其推薦過程分為兩階段：(1)流行穿著推薦，及(2)符合服飾偏好推薦，「流行穿著推薦」之目的在於先根據使用者身形膚色特徵挑選出專家建議之流行穿著打扮， 其過程由服飾穿著推薦模組將使用者身形膚色特徵值當作輸入參數值，從流行穿著專家知識庫中逐一搜尋符合的流行穿著知識規則，將滿足輸入參數的知識規則記錄下來，最後，對所有被記錄下來的知識規則之輸出結果取聯集並過濾掉重覆項目，即為此階段之流行穿著推薦結果；緊接著進行「符合服飾偏好推薦」，「符合服飾偏好推薦」之目的為從上一階段的流行穿著推薦結果中，再考慮服飾本身的特徵參數(例如：價格、品牌、質料、剪裁樣式...等)是否與使用者以往購買服飾的偏好相符合，篩選出使用者會有高度購買意願的服飾項目，其過程由服飾穿著推薦模組先根據行動裝置UUID至使用者服飾偏好資料庫取回使用者服飾偏好模型，此模型為一個二元分類器(Binary Classifier)，其輸入端為多維度的參數值，輸出端為兩元值(TRUE：符合偏好/FALSE：不符合偏好)，服飾穿著推薦模組逐一將每一項流行穿著推薦項目輸入使用者服飾偏好模型，並根據模型輸出結果，篩選出為TRUE的項目記錄下來，最後，將這些項目透過資料傳送接收模組傳送至行動裝置端之推薦服飾資訊顯示模組供使用者進行瀏覽與勾選。

本發明提供一種流行穿著推薦系統，包含一行動裝置端及一平台端，其中該行動裝置端包含：一身形膚色特徵分析模組，根據使用者之正面與側面影像產生一特徵分析資料；一資料傳送接收模組；該特徵分析資料或一使用者挑選服飾結果傳送至該平台端，以及接收從該平台端傳入之一推薦服飾資訊；一推薦服飾資訊顯示模組，顯示該推薦服飾資訊，並將該使用者挑選服飾結果儲存於該行動裝置端並透過該資料傳送接收模組傳送至該平台端；其中該平台端包含：一服飾穿著推薦模組，根據該特徵分析資料、一穿著知識規則及一使用者服飾偏好模型進行穿著推薦，並 產生該推薦服飾資訊；一服飾偏好學習模組，根據該使用者挑選服飾結果進行偏好分析學習及更新該使用者服飾偏好模型；一流行穿著專家知識庫，係儲存由流行專家與服裝設計師提供之該穿著知識規則，並提供該服飾穿著推薦模組進行穿著推薦；一使用者服飾偏好資料庫，係儲存該使用者服飾偏好模型與該行動裝置端之UUID，並提供該服飾穿著推薦模組進行穿著推薦；以及一服飾商品資料庫，係儲存所有服飾商品之複數個特徵參數，並提供該服飾偏好學習模組進行偏好分析學習及更新。

其中該特徵分析資料包含使用者之年齡、性別、膚色、身形輪廓、上及下半身長度、上及下半身寬度、上及下半身厚度。其中各該特徵參數包含價格、品牌、質料以及剪裁樣式。

其中該身形膚色特徵分析模組，更包含：一人臉偵測單元，係根據使用者之正面影像進行偵測，辨識出使用者之臉部範圍，估計使用者之年齡、性別及膚色；一人形偵測單元，係根據使用者之正面影像進行偵測，辨識出使用者之身形輪廓範圍；一行動裝置偵測單元，係根據使用者之正面影像進行偵測，辨識出使用者之行動裝置輪廓範圍；一上下半身長度與寬度偵測單元，係根據使用者之正面影像進行偵測並利用該人臉偵測單元、該人形偵測單元及該行動裝置偵測單元之辨識結果，辨識出使用者之上下半身長度與寬度值；以及一上下半身厚度偵測單元，係根據使用者之側面影像進行偵測並利用該人臉偵測單元、該人形偵測單元及該行動裝置偵測單元之辨識結果，辨識出使用者之上下半身厚度值。

其中該服飾穿著推薦模組，更包含：一流行穿著推薦單元，係根據該特徵分析資料及該流行穿著專家知識庫進行穿著推薦；以及一服 飾偏好推薦單元，係根據該使用者服飾偏好模型進行穿著推薦。

其中該服飾偏好學習模組，更包含：一服飾商品特徵轉換單元，根據該使用者挑選服飾結果轉換為服飾商品之各該特徵參數，以及一使用者服飾偏好模型訓練單元，根據各該特徵參數進行學習更新該使用者服飾偏好模型。

本發明之流行穿著推薦系統相較於習知技術而言，具下列優點：

1.本發明行動裝置端之身形膚色特徵分析模組能分析使用者正面與側面全身影像，偵測出年齡、性別、膚色、身形輪廓、上/下半身長度、上/下半身寬度、上/下半身厚度(胖瘦程度)等特徵資料，提供平台端之服飾穿著推薦模組作為推薦依據。

2.本發明行動裝置端之推薦服飾資訊顯示模組能將平台端回傳之推薦服飾資訊進行顯示供使用者挑選，將挑選結果儲存於行動裝置端並傳送回平台端之服飾偏好學習模組進行使用者服飾偏好學習。

3.本發明行動裝置端之資料傳送接收模組，負責接收從平台端傳回之推薦服飾資訊及傳送使用者挑選之服飾資料回平台端。

4.本發明平台端之服飾穿著推薦模組結合流行穿著專家知識庫與使用者服飾偏好資料庫運作流程，根據使用者身形膚色特徵進行符合使用者服飾偏好之流行穿著推薦。

5.本發明平台端之服飾偏好學習模組結合服飾商品資料庫與使用者服飾偏好資料庫運作流程，根據使用者挑選之服飾資料進行偏好分析學習以更新使用者服飾偏好模型。

6.本發明平台端之流行穿著專家知識庫由流行專家與服裝設計師事先根據店家服飾商品資料庫建立流行穿著知識規則，每季會隨著新服飾上市進行更新。

7.本發明平台端之使用者服飾偏好資料庫儲存每一位使用者的服飾偏好模型與行動裝置UUID，配合服飾穿著推薦模組進行符合使用者服飾偏好之推薦。

8.本發明平台端之服飾商品資料庫儲存店家所有服飾商品特徵參數(例如：價格、品牌、質料、剪裁樣式...等)，配合服飾偏好學習模組進行服飾商品特徵轉換。

上列詳細說明係針對本發明之一可行實施例之具體說明，惟該實施例並非用以限制本發明之專利範圍，凡未脫離本發明技藝精神所為之等效實施或變更，均應包含於本案之專利範圍中。

綜上所述，本案不但在空間型態上確屬創新，並能較習用物品增進上述多項功效，應已充分符合新穎性及進步性之法定發明專利要件，爰依法提出申請，懇請 貴局核准本件發明專利申請案，以勵發明，至感德便。

101‧‧‧全身正面與側面影像

102‧‧‧身形膚色特徵分析模組

103‧‧‧特徵分析資料

104‧‧‧資料傳送接收模組

105‧‧‧服飾穿著推薦模組

106‧‧‧流行穿著知識規則

107‧‧‧流行穿著專家知識庫

108‧‧‧使用者服飾偏好資料庫

109‧‧‧使用者服飾偏好模型

110‧‧‧推薦結果

111‧‧‧推薦服飾資訊顯示模組

112‧‧‧使用者回饋資訊

113‧‧‧服飾偏好學習模組

114‧‧‧服飾商品資料庫

115‧‧‧特徵參數

116‧‧‧轉換後的使用者回饋資訊

201‧‧‧人臉偵測單元

202‧‧‧人形偵測單元

203‧‧‧行動裝置偵測單元

204‧‧‧上下半身長度與寬度偵測單元

205‧‧‧上下半身厚度偵測單元

301‧‧‧行動裝置

401‧‧‧流行穿著推薦單元

402‧‧‧服飾偏好推薦單元

501‧‧‧服飾商品特徵轉換單元

502‧‧‧使用者服飾偏好模型訓練單元

L1‧‧‧臉部範圍

L2‧‧‧行動裝置範圍

L3‧‧‧上半身長度

L4‧‧‧下半身長度

L5‧‧‧上半身寬度

L6‧‧‧下半身寬度

L7‧‧‧上半身厚度

L8‧‧‧下半身厚度

第1圖為本發明之流行穿著推薦系統架構圖。

第2圖為本發明之身形膚色特徵分析模組架構圖。

第3A圖為本發明之身形膚色特徵分析模組分析示意圖。

第3B圖為本發明之身形膚色特徵分析模組分析示意圖。

第4圖為本發明之服飾穿著推薦模組架構圖。

第5圖為本發明之服飾偏好學習模組實架構圖。

第6圖為本發明之服飾偏好學習模組學習示意圖。

第7圖為本發明之流行穿著專家知識庫之流行穿著知識規則示意圖。

為利 貴審查委員了解本發明之技術特徵、內容與優點及其所能達到之功效，茲將本發明配合附圖，並以實施例之表達形式詳細說明如下，而其中所使用之圖式，其主旨僅為示意及輔助說明書之用，未必為本發明實施後之真實比例與精準配置，故不應就所附之圖式的比例與配置關係解讀、侷限本發明於實際實施上的權利範圍，合先敘明。

請參第1圖，為本發明之流行穿著推薦系統架構圖，主要包括兩部分，行動裝置端與平台端，其中行動裝置端係位於使用者行動裝置上，使用者透過行動裝置拍攝全身正面與側面影像101，將此影像經由身形膚色特徵分析模組102處理後得到使用者之特徵分析資料，將特徵分析資料103與行動裝置UUID透過資料傳送接收模組104傳送至平台端之服飾穿著推薦模組105，服飾穿著推薦模組105先進行「流行穿著推薦」，從流 行穿著專家知識庫107中逐一取出流行穿著知識規則106，將特徵分析資料103當作知識規則之輸入參數，將滿足輸入參數的知識規則記錄下來，最後，對所有被記錄下來的知識規則之輸出結果取聯集並過濾掉重覆項目，即為此階段之流行穿著推薦結果；服飾穿著推薦模組105緊接著進行「符合服飾偏好推薦」，其過程為先根據行動裝置UUID至使用者服飾偏好資料庫108取回使用者服飾偏好模型109，服飾穿著推薦模組105逐一將上一階段的流行穿著推薦結果中每一項流行穿著推薦項目輸入使用者服飾偏好模型109，並根據模型輸出結果，篩選出為TRUE的項目記錄下來，最後，即獲得符合潮流與服飾偏好之推薦結果110。服飾穿著推薦模組105將符合潮流與服飾偏好之推薦結果110傳送至行動裝置端之推薦服飾資訊顯示模組111供使用者進行瀏覽與勾選；推薦服飾資訊顯示模組111將使用者勾選後的使用者回饋資訊112透過資料傳送接收模組104傳送至平台端之服飾偏好學習模組113進行服飾偏好學習；服飾偏好學習模組113先從服飾商品資料庫114取回使用者回饋資訊112中每個服飾商品的特徵參數115進行特徵轉換，再使用此轉換後的使用者回饋資訊116更新使用者服飾偏好模型109，並將更新後的使用者服飾偏好模型109存入使用者服飾偏好資料庫108中以作為下次推薦使用。

請參閱第2圖所示，為本發明之身形膚色特徵分析模組架構圖，身形膚色特徵分析模組102針對全身正面與側面影像101進行分析取得特徵分析資料103，身形膚色特徵分析模組102主要單元包括：人臉偵測單元201，負責針對使用者全身正面影像進行人臉偵測，辨識出臉部範圍，並估計使用者年齡、性別與膚色；人形偵測單元202，負責針對使用者全身 正面影像進行人形偵測，辨識出身形輪廓範圍；行動裝置偵測單元203，負責針對使用者全身正面影像中行動裝置影像進行偵測，辨識出行動裝置輪廓範圍；上下半身長度與寬度偵測單元204，運用人臉偵測單元201、人形偵測單元202與行動裝置偵測單元203之結果計算出使用者上下半身長度與寬度值；上下半身厚度偵測單元205，負責針對使用者全身側面影像進行使用者上下半身厚度值計算。

身形膚色特徵分析模組102具有各種影像分析演算法，能偵測使用者年齡、性別、膚色、身形輪廓、上/下半身長度、上/下半身寬度與上/下半身厚度(胖瘦程度)，如第3A圖及第3B圖所示，身形膚色特徵分析模組先根據使用者正面全身影像進行人臉偵測辨識出臉部範圍L1並計算臉部範圍L1內的臉部特徵，預估出使用者年齡、性別與膚色；然後進行人形偵測，獲得使用者身形輪廓；再對行動裝置301偵測辨識出行動裝置範圍L2，計算臉部範圍L1最下端與行動裝置範圍L2最上端之距離以得到使用者影像上半身長度L3(包含脖子)，接著，根據行動裝置301與影像內行動裝置範圍L2的大小比例，等比例放大使用者影像上半身長度L3，即可得使用者實際的上半身包含脖子之長度，最後，扣掉一般大眾脖子平均長度即為使用者實際上半身長度值；同理，計算行動裝置範圍L2最下端與使用者身形輪廓範圍最下端之距離為使用者影像之下半身長度L4，然後再等比例放大，即可得使用者實際下半身長度值；將偵測上半身長度L3範圍內最寬距離作為上半身寬度L5再等比例放大，即為使用者實際上半身寬度；下半身寬度L6亦同裡求得；使用者上及下半身厚度值(胖瘦程度)分析方式可藉由身形膚色特徵分析模組102，讀入使用者側面全身影像進行人形偵測， 以得到使用者側面人形範圍，然後分別計算上半身寬度L7最大值與下半身寬度L8最大值，再等比例放大，即可預估出使用者實際的上下半身厚度值(胖瘦程度)，最後，將上述各種使用者身形膚色特徵(即為特徵分析資料103)，連同行動裝置UUID透過資料傳送接收模組104傳送至平台端服飾穿著推薦模組105進行推薦。

請參閱第4圖所示，為本發明之服飾穿著推薦模組架構圖，服飾穿著推薦模組105主要包括：一流行穿著推薦單元401，此流行穿著推薦單元401根據顧特徵分析資料103結合流行穿著專家知識庫107，進行流行穿著推薦；服飾偏好推薦單元402，此服飾偏好推薦單元402結合使用者服飾偏好資料庫109，從流行穿著推薦單元401的推薦結果中進行篩選，得到符合潮流且滿足服飾偏好之推薦結果110。

請參閱第5圖，為本發明之服飾偏好學習模組架構圖，由圖中可知，服飾偏好學習模組113主要包括：服飾商品特徵轉換單元501，此服飾商品特徵轉換單元501負責將使用者回饋資訊112中每一項服飾商品進行特徵轉換，將服飾商品改以其多項特徵參數115表示；使用者服飾偏好模型訓練單元502，此使用者服飾偏好模型訓練單元502根據經由服飾商品特徵轉換單元501轉換後的使用者回饋資訊112，對使用者服飾偏好模型109進行更新。如第6圖所示，使用者回饋資訊112為一系列推薦項目是否被使用者接受之結果，當使用者於推薦服飾資訊顯示模組111勾選某一推薦項目時，表示其接受此一推薦項目，遂將此項目之接受結果設為TRUE，推薦服飾資訊顯示模組111逐一將使用者所勾選的項目記錄下來形成一正面例子集合(Positive Instances Set)，同時也將無勾選的項目記錄下來形成負 面例子集合(Negative Instances Set)，最後，將此兩集合傳回平台端之服飾偏好學習模組113，服飾偏好學習模組113先將集合中每個例子的服飾商品進行特徵轉換，從服飾商品資料庫114取回其此服飾的特徵參數115，再根據此兩集合更新使用者服飾偏好模型109(即訓練二元分類器，Binary Classifier Training)。

流行穿著專家知識庫107由流行專家與服裝設計師事先根據店家的服飾商品資料庫建立流行穿著知識規則106，每季會隨著新服飾商品上市進行更新，流行穿著知試規則採用規則基礎(Rule-Based)方式建立，每條規則都有多項輸入參數與輸出結果，當所有輸入參數皆滿足時才回應輸出結果，輸入參數為行動裝置端之使用者身形膚色特徵集合，輸出結果為服飾商品資料庫中多項不同種類服飾商品之配對資訊，專家根據其專業知識為每條規則之多個輸入參數設定數值範圍(如年齡介於A與B之間、性別為C、膚色為D、上半身長度介於E與F之間、下半身長度介於G與H之間、上半身寬度介於I與J之間及下半身寬度介於K與L之間、上半身厚度介於M與N之間、下半身厚度介於O與P之間)，以及唯有所有輸入參數皆滿足時才回應的多項服飾穿著配對資訊，以作為根據特徵分析資料103進行推薦之流行穿著資訊，流行穿著知識規則106之範例，如第7圖所示。

綜上所述，本案不僅於技術思想上確屬創新，並具備習用之傳統方法所不及之上述多項功效，已充分符合新穎性及進步性之法定發明專利要件，爰依法提出申請，懇請 貴局核准本件發明專利申請案，以勵發明，至感德便。

101‧‧‧全身正面與側面影像

102‧‧‧身形膚色特徵分析模組

103‧‧‧特徵分析資料

104‧‧‧資料傳送接收模組

105‧‧‧服飾穿著推薦模組

106‧‧‧流行穿著知識規則

107‧‧‧流行穿著專家知識庫

108‧‧‧使用者服飾偏好資料庫

109‧‧‧使用者服飾偏好模型

110‧‧‧推薦結果

111‧‧‧推薦服飾資訊顯示模組

112‧‧‧使用者回饋資訊

113‧‧‧服飾偏好學習模組

114‧‧‧服飾商品資料庫

115‧‧‧特徵參數

116‧‧‧轉換後的使用者回饋資訊

Claims (6)

1. 一種流行穿著推薦系統，包含：一行動裝置端及一平台端，其中該行動裝置端包含：一身形膚色特徵分析模組，根據使用者之正面與側面影像產生一特徵分析資料；一資料傳送接收模組；該特徵分析資料或一使用者挑選服飾結果傳送至該平台端，以及接收從該平台端傳入之一推薦服飾資訊；一推薦服飾資訊顯示模組，顯示該推薦服飾資訊，並將該使用者挑選服飾結果儲存於該行動裝置端並透過該資料傳送接收模組傳送至該平台端；其中該平台端包含：一服飾穿著推薦模組，根據該特徵分析資料、一穿著知識規則及一使用者服飾偏好模型進行穿著推薦，並產生該推薦服飾資訊；一服飾偏好學習模組，根據該使用者挑選服飾結果進行偏好分析學習及更新該使用者服飾偏好模型；一流行穿著專家知識庫，係儲存由流行專家與服裝設計師提供之該穿著知識規則，並提供該服飾穿著推薦模組進行穿著推薦；一使用者服飾偏好資料庫，係儲存該使用者服飾偏好模型與該行動裝置端之UUID，並提供該服飾穿著推薦模組進行穿著推薦；以及一服飾商品資料庫，係儲存所有服飾商品之複數個特徵參數，並提供該服飾偏好學習模組進行偏好分析學習及更新。
2. 如申請專利範圍第1項所述之流行穿著推薦系統，其中該特徵分析資料 包含使用者之年齡、性別、膚色、身形輪廓、上及下半身長度、上及下半身寬度、上及下半身厚度。
3. 如申請專利範圍第1項所述之流行穿著推薦系統，其中各該特徵參數包含價格、品牌、質料以及剪裁樣式。
4. 如申請專利範圍第1項所述之流行穿著推薦系統，其中該身形膚色特徵分析模組，更包含：一人臉偵測單元，係根據使用者之正面影像進行偵測，辨識出使用者之臉部範圍，估計使用者之年齡、性別及膚色；一人形偵測單元，係根據使用者之正面影像進行偵測，辨識出使用者之身形輪廓範圍；一行動裝置偵測單元，係根據使用者之正面影像進行偵測，辨識出使用者之行動裝置輪廓範圍；一上下半身長度與寬度偵測單元，係根據使用者之正面影像進行偵測並利用該人臉偵測單元、該人形偵測單元及該行動裝置偵測單元之辨識結果，辨識出使用者之上下半身長度與寬度值；以及一上下半身厚度偵測單元，係根據使用者之側面影像進行偵測並利用該人臉偵測單元、該人形偵測單元及該行動裝置偵測單元之辨識結果，辨識出使用者之上下半身厚度值。
5. 如申請專利範圍第1項所述之流行穿著推薦系統，其中該服飾穿著推薦模組，更包含：一流行穿著推薦單元，係根據該特徵分析資料及該流行穿著專家知識庫進行穿著推薦；以及 一服飾偏好推薦單元，係根據該使用者服飾偏好模型進行穿著推薦。
6. 如申請專利範圍第1項所述之流行穿著推薦系統，其中該服飾偏好學習模組，更包含：一服飾商品特徵轉換單元，根據該使用者挑選服飾結果轉換為服飾商品之各該特徵參數，以及一使用者服飾偏好模型訓練單元，根據各該特徵參數進行學習更新該使用者服飾偏好模型。