TWI786956B - 線上眼鏡試配的處理系統與方法 - Google Patents

線上眼鏡試配的處理系統與方法 Download PDF

Info

Publication number
TWI786956B
TWI786956B TW110143402A TW110143402A TWI786956B TW I786956 B TWI786956 B TW I786956B TW 110143402 A TW110143402 A TW 110143402A TW 110143402 A TW110143402 A TW 110143402A TW I786956 B TWI786956 B TW I786956B
Authority
TW
Taiwan
Prior art keywords
server
face
information
target frame
face image
Prior art date
Application number
TW110143402A
Other languages
English (en)
Other versions
TW202321986A (zh
Inventor
王宏智
Original Assignee
視鏡科技股份有限公司
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 視鏡科技股份有限公司 filed Critical 視鏡科技股份有限公司
Priority to TW110143402A priority Critical patent/TWI786956B/zh
Application granted granted Critical
Publication of TWI786956B publication Critical patent/TWI786956B/zh
Publication of TW202321986A publication Critical patent/TW202321986A/zh

Links

Images

Landscapes

  • Stereophonic System (AREA)
  • Image Processing (AREA)

Abstract

一種線上眼鏡試配的處理系統與方法,包括用戶端與伺服器端。用戶端具有第一處理單元、攝影單元、顯示單元與第一通訊單元,第一處理單元驅動攝影單元拍攝人臉影像,第一通訊單元傳輸人臉影像;伺服器端具有第二處理單元、第二儲存單元與第二通訊單元,第二儲存單元儲存臉廓匹配程序與多組鏡框模型,臉廓匹配程序根據人臉影像獲得臉部位置特徵與輪廓曲線資訊;用戶端向伺服器端發送選配要求,從鏡框模型中擇一為目標鏡框物件,臉廓匹配程序根據臉部位置特徵與輪廓曲線資訊調整目標鏡框物件,使目標鏡框物件疊合至人臉影像的眼部區域。

Description

線上眼鏡試配的處理系統與方法
發明是關於一種線上的影像處理系統與方法,尤指一種線上眼鏡試配的處理系統與方法。
隨著網路商務的成熟發展,消費者可以隨時隨地透過網際網路購買所需的商品。但由於特定商品的自身因素,消費者從商品圖片無法得到搭配商品時的狀態,例如:眼鏡鏡框或衣服等。因此許多廠商也積極開發擴增實境,使其應用於使用者與目標商品的搭配。但對於一般使用者而言,擴增實境需要硬體設備的支援,所以只能在特定設備上播放。並且現行的擴增實境僅針對目標物的調整,因此使用者仍無法得到目標商品的觀看體驗。
或者,使用者在拍攝人臉影像的過程中,使用者根據系統提示在拍攝畫面中加入比例尺等特殊物件。這樣的作法雖然可以實現准確定位的目的,但是拍攝的過程中不一定能即刻找到指定物件。再者,拍攝過程中使用者需要另一手手持比例尺,而另一隻手手持行動裝置拍攝影像。因此,使用者拍攝時的體驗將會大幅下降。
有鑑於此,本發明的目的在於提供一種本發明的線上眼鏡試配的處理系統。
所述的線上眼鏡試配的處理系統包括用戶端與伺服器端。用戶端具有第一處理單元、攝影單元、顯示單元與第一通訊單元,第一處理單元電性連接於攝影單元、顯示單元與第一通訊單元,第一處理單元驅動攝影單元拍攝人臉影像,第一處理單元驅動第一通訊單元傳輸人臉影像;伺服器端網路連接於用戶端,伺服器端具有第二處理單元、第二儲存單元與第二通訊單元,第二處理單元電性連接於第二通訊單元與第二儲存單元,第二通訊單元接收人臉影像,第二儲存單元儲存臉廓匹配程序與至少組鏡框模型,第二處理單元執行臉廓匹配程序,臉廓匹配程序根據人臉影像獲得臉部位置特徵與輪廓曲線資訊;其中,用戶端向伺服器端發送選配要求,從鏡框模型中擇為目標鏡框物件,臉廓匹配程序根據臉部位置特徵與輪廓曲線資訊調整目標鏡框物件,使目標鏡框物件疊合至人臉影像的眼部區域。線上眼鏡試配的處理系統可以提供即時的影像試配,也可以根據人臉影像的臉型進一步選擇相應的眼鏡鏡框,並且動態根據人臉位置調整眼鏡鏡框的轉動。
在一實施例中,臉部位置特徵包括眼部座標資訊、耳朵座標資訊、鼻座標資訊、嘴巴座標資訊與眉毛座標資訊。
在一實施例中,輪廓曲線資訊包括兩側臉曲線資訊、上額曲線資訊與下巴曲線資訊。
在一實施例中,第二處理單元計算該兩側臉曲線資訊之間的一寬度資訊、以及該下巴曲線資訊與該兩側臉曲線資訊之間的一高度資訊;並根據所述側臉曲線資訊、上額曲線資訊或下巴曲線資訊輸出臉型結果。
在一實施例中,第二處理單元調整目標鏡框物件的三維座標與外觀尺寸,使目標鏡框物件的鏡框區域疊合且平行於眼部區域。
在一實施例中,臉廓匹配程序輸出疊合目標鏡框物件與人臉影像的結果影像,伺服器端將結果影像發送至用戶端。
在一實施例中,線上眼鏡試配的處理方法包括由用戶端拍攝人臉影像,並傳輸人臉影像至伺服器端;伺服器端根據人臉影像獲得臉部位置特徵與輪廓曲線資訊;用戶端向伺服器端發送選配要求,從多組鏡框模型中擇為目標鏡框物件;伺服器端根據臉部位置特徵與輪廓曲線資訊縮放並轉動目標鏡框物件,使目標鏡框物件疊合至人臉影像的眼部區域。又,該伺服器可以計算該兩側臉曲線資訊之間的一寬度資訊、以及該下巴曲線資訊與該兩側臉曲線資訊之間的一高度資訊;並根據所述側臉曲線資訊、上額曲線資訊或下巴曲線資訊輸出臉型結果。
在一實施例中,用戶端向伺服器端發送選配要求的步驟前包括伺服器端根據臉型結果匹配所述鏡框模型,並將匹配出的所述鏡框模型封裝為型號資訊;伺服器端將型號資訊發送至用戶端。
在一實施例中,在目標鏡框物件疊合至人臉影像的眼部區域的步驟包括:伺服器端調整目標鏡框物件的三維座標與外觀尺寸,使目標鏡框物件的鏡框區域疊合且平行於眼部區域。
在一實施例中,在目標鏡框物件疊合至人臉影像的眼部區域的步驟後包括:伺服器端輸出疊合目標鏡框物件與人臉影像的結果影像;由伺服器端將結果影像發送至用戶端。
所述的線上眼鏡試配的處理系統與方法可以提供即時的影像試配,也可以根據人臉影像的臉型進一步選擇相應的眼鏡鏡框,並且動態根據人臉位置調整眼鏡鏡框的轉動。
茲有關本發明之詳細內容及技術說明,現以實施例來作進一步說明,但應瞭解的是,該等實施例僅為例示說明之用,而不應被解釋為本發明實施之限制。
請參考圖1所示,其係為本發明的線上眼鏡試配的處理系統架構示意圖。本發明的線上眼鏡試配的處理系統001包括用戶端100與伺服器端200。用戶端100網路連接於伺服器端200。用戶端100可以是但不限定為行動電話、平板、個人電腦或筆記型電腦。
用戶端100具有第一處理單元110、顯示單元120、輸入單元130、攝影單元140、第一儲存單元150與第一通訊單元160。第一處理單元110電性連接於攝影單元140、顯示單元120、輸入單元130、第一儲存單元150與第一通訊單元160。第一處理單元110驅動攝影單元140拍攝人臉影像152,第一處理單元110驅動第一通訊單元160傳輸人臉影像152。人臉影像152可以是靜態圖像,也可以是動態影像。人臉影像152包含目標對象的臉部。第一儲存單元150除了儲存眼鏡試配程式151外,也可以暫存人臉影像152。
第一處理單元110執行眼鏡試配程式151,並於顯示單元120中播放所拍攝的人臉影像152。眼鏡試配程式151除了可以是獨立的應用程式外,也可以內嵌於瀏覽器之中。眼鏡試配程式151調用第一通訊單元160,並傳輸人臉影像152至伺服器端200。或者,從伺服器端200接收人臉影像152的處理結果,並於顯示單元120上播放處理結果(前述處理結果將於後文詳述)。
輸入單元130接收使用者的操作要求,操作要求包括使用者帳號密碼、使用者資訊、拍攝人臉影像152、選擇鏡框模型222、決定鏡框模型222或輸入鏡框選擇條件等。輸入單元130可以是獨立的元件,也可以是結合於顯示單元120,例如:觸控螢幕。攝影單元140可以是內建於用戶端100的電子元件,例如:行動裝置的攝像感光元件。亦或者,攝影單元140可以是外接的視訊攝影機(webcam)或數位相機等。
伺服器端200具有第二處理單元210、第二儲存單元220與第二通訊單元230。第二處理單元210電性連接於第二通訊單元230與第二儲存單元220。第二儲存單元220儲存用戶資料庫221、至少一組鏡框模型222與臉廓匹配程序223。用戶資料庫221紀錄多組使用者帳戶224、用戶登入資訊、臉部資訊、鏡框選擇歷程資訊或鏡框購買歷程資訊。鏡框模型222係為眼鏡鏡框的立體圖像建模檔案。一般而言,鏡框模型222可以是但不限定為ProE、Solidwork、 Sketch UP 、3Ds Max、Maya、 Zbrush、Rhino或Alias等模型軟體的輸出檔案,也可以是由廠商自行開發且支援WEBGL等格式的輸出檔案。
第二通訊單元230可以是有線網路或無線網路的通訊介面。第二通訊單元230傳輸用戶登入資訊、人臉影像152或疊合鏡框後的結果影像等。伺服器端200接收用戶登入資訊後,第二處理單元210根據用戶資料庫221確認用戶登入資訊是否正確。若為正確的用戶端100時,伺服器端200發送回應訊息至用戶端100與眼鏡試配程式151,以使眼鏡試配程式151進行後續的處理。伺服器端200接獲人臉影像152後執行以下處理步驟,並同時配合圖2所示,其係為本發明的線上眼鏡試配的處理方法之運作流程式意圖。 步驟S210:由用戶端拍攝人臉影像,並傳輸人臉影像至伺服器端; 步驟S220:伺服器端根據人臉影像獲得臉部位置特徵與輪廓曲線資訊; 步驟S230:用戶端向伺服器端發送選配要求,從多組鏡框模型中擇一為目標鏡框物件; 步驟S240:伺服器端根據臉部位置特徵與輪廓曲線資訊縮放並轉動目標鏡框物件,使目標鏡框物件疊合至人臉影像的眼部區域;以及 步驟S250:伺服器端將疊合後的輸出結果發送至用戶端。
首先,用戶端100透過各自的使用者帳戶224登入伺服器端200。用戶端100拍攝使用者的人臉影像152,如圖3A所示。圖3A中係以虛線框的圈選位置表示為目標臉部310。用戶端100透過無線網路或行動通訊網路將人臉影像152傳輸至伺服器端200。伺服器端200在確認用戶資訊後,伺服器端200對於人臉影像152進行臉廓匹配程序223。
臉廓匹配程序223針對人臉影像152比對使用者的臉部位置特徵,臉部位置特徵包括眼部座標資訊321、耳朵座標資訊322、鼻座標資訊323、嘴巴座標資訊324與眉毛座標資訊325,請參考圖3B所示,其係為此一實施例的臉部位置特徵的示意圖。為方便說明,將人臉影像152中的使用者的人臉區域稱為目標臉部310。臉部位置特徵用於標記目標臉部310的各器官與周邊位置。並為清楚說明,臉部位置特徵的座標標示分別為眼部座標資訊321、耳朵座標資訊322、鼻座標資訊323、嘴巴座標資訊324與眉毛座標資訊325。
接著,臉廓匹配程序223對目標臉部310進行輪廓曲線資訊的識別。輪廓曲線資訊包括兩側臉曲線資訊、上額曲線資訊與下巴曲線資訊。臉廓匹配程序223可以通過邊緣偵測(edge detection)或空間深度偵測等方式,從人臉影像152中獲取目標臉部310的邊緣,並從而得到目標臉部310的多組邊緣座標資訊。邊緣座標的數量除了可以是預設數量外,也可以根據使用者的設定值,或者根據伺服器端200的計算能力所決定。
臉廓匹配程序223將目標臉部310的左側臉曲線LF與右側臉曲線RF,目標臉部310上方的上額曲線UP,目標臉部310下方的下巴曲線BM。並且為能清楚說明各曲線中的不同位置(可對應邊緣座標),因此下文對於各曲線中的位置將採取編號作為表示。左側臉曲線座標LF(n)與右側臉曲線座標RF(n),上額曲線座標UP(n),下巴曲線座標BM(n),其中n為位置的編號。不同曲線可以設定相應數量的編號。
臉廓匹配程序223分別對左側臉曲線LF、右側臉曲線RF、上額曲線UP與下巴曲線BM計算相應的曲率,並得到相應的左側臉曲線資訊、右側臉曲線資訊、上額曲線資訊與下巴曲線資訊。臉廓匹配程序223根據曲線上的多組邊緣座標資訊與法線獲得各組臉廓曲線的曲率。臉廓匹配程序223計算兩側臉曲線之間的寬度資訊。臉廓匹配程序223計算下巴曲線與側臉曲線的高度資訊。
寬度資訊係為兩側臉曲線的邊緣座標資訊的水平直線距離。 寬度資訊可以選自側臉曲線的最上方或是相應眼部座標資訊321的兩邊緣座標資訊。高度資訊係由下巴曲線資訊中的最低點的邊緣座標與上額曲線資訊的最高點的邊緣座標的垂直直線距離。請參考圖3C與圖3D所示,其係分別為一實施例曲線資訊示意圖與一實施例的寬度資訊與高度資訊的示意圖。
舉例來說,左側臉曲線資訊係由編號為『LF(0)、LF(1)、LF(2)、LF(3)』。右側臉曲線資訊係由編號為『RF(0)、RF(1)、RF(2)、RF(3)』的邊緣座標所構成。臉廓匹配程序223可以選擇左側臉曲線座標LF(0)與右側臉曲線座標RF(0)的直線距離作為寬度資訊。
下巴曲線資訊由編號為『BM(0)、BM(1)、BM(2)、BM(3)、BM(4)、BM(5)、BM(6)』的邊緣座標所構成。上額曲線資訊由編號為『UP(0)、UP(1)、UP(2)、UP(3)、UP(4)、UP(5)、UP(6)、UP(7)、UP(8)、UP(9)、UP(10)、UP(11)』的邊緣座標所構成。下巴曲線座標BM(3)為臉部最低點的邊緣座標。上額曲線座標UP(6)為臉部最高點的邊緣座標。臉廓匹配程序223根據下巴曲線座標BM(3)與上額曲線座標UP(6)得到直線距離的高度資訊。
接著,臉廓匹配程序223從左側臉曲線資訊、右側臉曲線資訊、上額曲線資訊、寬度資訊、高度資訊或下巴曲線資訊中任選至少兩資訊,用於評估臉型結果。臉型結果包括橢圓形臉、菱形臉、方形臉、長形臉和圓形臉。臉廓匹配程序223將側臉曲線資訊、寬度資訊、高度資訊或下巴曲線資訊劃分為多組區段,並將不同區段的組合對應設定不同的臉型結果,如圖3C所示。請參考表1所示,其係為目標臉部310的各曲線的曲率表。曲率表所載數值係為示例,並非限定於此。
表1. 目標臉部的各曲線的曲率表
  側臉曲率 下巴曲率 平均寬度縮放 比例% 寬高 比例% 下方臉部曲率 全臉曲率
橢圓形 0.0021~ 0.0047 0.0102~0.0182 -20.67 29.39 0.0046~0.0126 0.0068~0.0121
圓形 0.0027~ 0.0062 0.1186~0.0154 -21.07 26.10 0.0053~0.0136 0.0066~0.011
三角形 0.0021~0.0039 0.0106~0.0193 -23.11 29.83 0.0045~0.011 0.0068~0.0115
長形 0.002~0.0043 0.0111~0.0184 -20.35 33.13 0.0056~0.0116 0.0072~0.0112
菱形 0.0018~0.0053 0.0099~0.0164 -21.88 28.77 0.0047~0.0103 0.0065~0.0106
方形 0.0023~0.0051 0.0094~0.0144 -19.49 27.21 0.0047~0.0103 0.0078~0.0095
表1中的寬高比例係為((高度資訊-寬度資訊)/寬度資訊)的計算結果。此外,寬度資訊除了如前文中係以兩邊緣座標作為計算外,也可以選取多組的邊緣座標作為平均。舉例來說,可以選擇編號『LF(0)、LF(1)、LF(2)、LF(3)』與『RF(0)、RF(1)、RF(2)、RF(3)』的邊緣座標,並且計算各組的寬度並計算寬度平均作為寬度資訊。臉廓匹配程序223根據寬高比例與各曲線資訊判斷目標臉部310的臉型結果。除此之外,臉廓匹配程序223也可以通過機器學習或深度學習等方式作為識別各曲線組合的相應臉型結果。
除此之外,臉廓匹配程序223也可以根據鼻座標資訊與耳朵座標資訊辨識鏡框寬度。亦或者臉廓匹配程序223也可以採用本發明的發明人所提之台灣專利申請案106118167所記載的眼鏡鏡框尺寸與臉部特徵尺寸的關係式: 關於眼鏡鏡框的寬度的計算公式: P = -1.036X 2+ 23.365X -2.089Y + Z ± 5 其中,P為鏡框寬度(mm);X為使用者之鼻樑高度(mm);Y為使用者之鼻樑寬度(mm);Z為使用者之眼耳距離(mm) ); 關於鼻托的角度的計算公式: M=180-Q = 180-Tan -1(X/(Y/2)) 其中,M表示鼻托角度(°);Y表示鼻樑寬度(mm);X表示鼻樑高度(mm):Q表示鼻樑傾斜度(°); 關於眼鏡框的鏡腳長度的計算公式: R = Z + 13 + F 其中,Z表示眼耳距離(mm);R表示鏡腳長度(mm);F 表示上下限值(mm),一般介於0~40mm之範圍。
在臉廓匹配程序223選擇臉型結果後,伺服器端200提供鏡框模型222的型錄至用戶端100,以供用戶端100選擇任一鏡框模型222,如圖4A。而所選的鏡框模型222稱為目標鏡框物件225。使用者選擇鏡框模型222後,用戶端100向伺服器端200發送選配要求,選配要求包括所選的目標鏡框物件225。伺服器端200根據臉型結果從第二儲存單元220中選擇相應的鏡框模型222。
一般而言,伺服器端200將鏡框模型222係以外觀種類作為分類的依據。鏡框模型222的外觀主要是以鏡片的外框架,其次鏡腳、鉸鍊、鼻梁或鼻托。每一種外觀類別優先對應各自的臉型結果。舉例來說,圓形的鏡框模型222可以對應到所有的臉型結果。方形的鏡框模型222可以對應到橢圓形臉或圓形臉。
伺服器端200產生臉型結果後,伺服器端200會優先從相應的分類選擇鏡框模型222為所述鏡框型錄,並傳送至用戶端100,如圖4B所示。在圖4B中係以虛線外框作為使用者所選擇的目標鏡框物件225的鏡框模型222。在圖4A中,伺服器端200識別使用者為橢圓形臉。因此伺服器端200選取圓形鏡框與寬形鏡框的鏡框模型222,以供使用者選擇。
伺服器端200調整目標鏡框物件225的三維座標與外觀尺寸,使目標鏡框物件225的鏡框區域疊合且平行於眼部區域410。眼部區域410係根據眼部座標資訊321所形成,在圖4A中係以虛線框表示眼部區域410。眼部區域410係以長形作為說明,但實際可以根據演算法或運算能力調整為其他形狀。
若伺服器端200識別目標臉部310為長形臉,伺服器端200選擇橢圓形、圓形或貓眼形外觀的鏡框模型222為所述鏡框型錄。伺服器端200將鏡框型錄發送至用戶端100,如圖4C所示。
伺服器端200可以根據眼部區域410的上緣決定目標鏡框物件225的上緣,也可以根據耳朵座標資訊322決定目標鏡框物件225的上緣。接著,伺服器端200根據寬度資訊與耳朵座標資訊322調整目標鏡框物件225的寬度,使得目標鏡框物件225的鏡腳可以貼伏於目標臉部310的兩側邊。伺服器端200進一步調整目標鏡框物件225的翻轉角度,使得目標鏡框物件225的鏡片可以平行於眼部區域410。
於此同時,伺服器端200將輸出疊合目標鏡框物件225與人臉影像152的輸出結果153。伺服器端200將結果影像發送至用戶端100。若人臉影像152為動態影片時,則伺服器端200會根據目標臉部310的各項特徵對目標鏡框物件225進行調整,所述的調整包括鏡框模型222的轉動、翻轉、縮放或位移的相關處理。伺服器端200將以串流的方式將輸出結果153發送至用戶端100。
用戶端100決定目標鏡框物件225後,用戶端100可以向伺服器端200發送確認要求。伺服器端200根據確認要求記錄所選擇的目標鏡框物件225。臉廓匹配程序223除了記錄目標鏡框物件225外,臉廓匹配程序223更可以人工智慧結合。臉廓匹配程序223也可以根據人臉影像判斷消費者的年齡、性別,甚至可以根據影像中的服裝來判斷消費者屬於哪個族群,例如上班族或學生,或者是根據服裝或配飾判斷消費習性,例如追求時尚或以實用為主。由大數據分析可以得到各種經驗值,而且臉廓匹配程序223可以學習而增加判斷的精準度。
所述的線上眼鏡試配的處理系統與方法可以提供即時的影像試配,也可以根據人臉影像152的臉型進一步選擇相應的眼鏡鏡框,並且動態根據人臉位置調整眼鏡鏡框的轉動。
惟以上所述者,僅為本發明之較佳實施例而已,當不能以此限定本發明實施之範圍,即大凡依本發明申請專利範圍及發明說明內容所作之簡單的等效變化與修飾,皆仍屬本發明專利涵蓋之範圍內。
001:處理系統
100:用戶端
110:第一處理單元
120:顯示單元
130:輸入單元
140:攝影單元
150:第一儲存單元
151:眼鏡試配程式
152:人臉影像
153:輸出結果
160:第一通訊單元
200:伺服器端
210:第二處理單元
220:第二儲存單元
221:用戶資料庫
222:鏡框模型
223:臉廓匹配程序
224:使用者帳戶
225:目標鏡框物件
230:第二通訊單元
310:目標臉部
321:眼部座標資訊
322:耳朵座標資訊
323:鼻座標資訊
324:嘴巴座標資訊
325:眉毛座標資訊
410:眼部區域
LF:左側臉曲線
RF:右側臉曲線
UP:上額曲線
BM:下巴曲線
圖1為本發明的線上眼鏡試配的處理系統架構示意圖。 圖2為的運作流程示意圖。 圖3A為本發明的目標臉部的示意圖。 圖3B為本發明的臉部位置特徵的示意圖。 圖3C為本發明的曲線資訊示意圖。 圖3D為本發明的此一實施例的寬度資訊與高度資訊的示意圖。 圖4A為本發明的此一實施例的鏡框模型型錄的顯示畫面示意圖。 圖4B為本發明的此一實施例的鏡框模型試配。 圖4C為本發明的此一實施例的另一種鏡框模型試配。
001:處理系統
100:用戶端
110:第一處理單元
120:顯示單元
130:輸入單元
140:攝影單元
150:第一儲存單元
151:眼鏡試配程式
152:人臉影像
153:輸出結果
160:第一通訊單元

Claims (10)

  1. 一種線上眼鏡試配的處理系統,其係包括:一用戶端,具有一第一處理單元、一攝影單元、一顯示單元與一第一通訊單元,該第一處理單元電性連接於該攝影單元、該顯示單元與該第一通訊單元,該第一處理單元驅動該攝影單元拍攝一人臉影像,該第一處理單元驅動該第一通訊單元傳輸該人臉影像;一伺服器端,網路連接於該用戶端,該伺服器端具有一第二處理單元、一第二儲存單元與一第二通訊單元,該第二處理單元電性連接於該第二通訊單元與該第二儲存單元,該第二通訊單元接收該人臉影像,該第二儲存單元儲存一臉廓匹配程序與至少一組鏡框模型,該第二處理單元執行該臉廓匹配程序,該臉廓匹配程序根據該人臉影像獲得一臉部位置特徵與一輪廓曲線資訊;其中,該用戶端向該伺服器端發送一選配要求,該伺服器端根據該臉部位置特徵與該輪廓曲線資訊從該些鏡框模型中擇一為一目標鏡框物件,該臉廓匹配程序根據該臉部位置特徵與該輪廓曲線資訊調整該目標鏡框物件,使該目標鏡框物件疊合至該人臉影像的一眼部區域;其中該臉部位置特徵包括一眼部座標資訊、一耳朵座標資訊、一鼻座標資訊、一嘴巴座標資訊與一眉毛座標資訊;其中該輪廓曲線資訊包括兩側臉曲線資訊、一上額曲線資訊與一下巴曲線資訊。
  2. 如請求項1所述之線上眼鏡試配的處理系統,其中該人臉影像為動態影像,所述調整該目標鏡框物件包括該目標鏡框物件的轉動、翻轉、縮放或位移的相關處理,該伺服器端係以串流的方式將輸出結果發送至該用戶端。
  3. 如請求項1所述之線上眼鏡試配的處理系統,其中該第二 處理單元調整該目標鏡框物件的一三維座標與一外觀尺寸,使該目標鏡框物件的一鏡框區域疊合且平行於該眼部區域。
  4. 如請求項1所述之線上眼鏡試配的處理系統,其中該臉廓匹配程序輸出疊合該目標鏡框物件與該人臉影像的一結果影像,該伺服器端將該結果影像發送至該用戶端。
  5. 一種線上眼鏡試配的處理方法,包括:由一用戶端拍攝一人臉影像,並傳輸該人臉影像至一伺服器端;該伺服器端根據該人臉影像獲得一臉部位置特徵與一輪廓曲線資訊;該用戶端向該伺服器端發送一選配要求,該伺服器端根據該臉部位置特徵與該輪廓曲線資訊從多組鏡框模型中擇一為一目標鏡框物件;以及該伺服器端根據該臉部位置特徵與該輪廓曲線資訊縮放並轉動該目標鏡框物件,使該目標鏡框物件疊合至該人臉影像的一眼部區域;中該臉部位置特徵包括一眼部座標資訊、一耳朵座標資訊、一鼻座標資訊、一嘴巴座標資訊與一眉毛座標資訊;該輪廓曲線資訊包括兩側臉曲線資訊、一上額曲線資訊與一下巴曲線資訊。
  6. 如請求項5所述之線上眼鏡試配的處理方法,其中在獲得該臉部位特徵與該輪廓曲線資訊的步驟包括:該伺服器端根據該些側臉曲線資訊、該寬度資訊、該高度資訊、該上額曲線資訊或該下巴曲線資訊輸出一臉型結果。
  7. 如請求項6所述之線上眼鏡試配的處理方法,其中在該用戶端向該伺服器端發送該選配要求的步驟前包括:該伺服器端根據該臉型結果匹配該些鏡框模型,並將匹配出的該些鏡框模型封裝為一型號資訊;以及該伺服器端將該型號資訊發送至該用戶端。
  8. 如請求項5所述之線上眼鏡試配的處理方法,其中在該目標鏡框物件疊合至該人臉影像的該眼部區域的步驟包括:該伺服器端調整該目標鏡框物件的一三維座標與一外觀尺寸,使該目標鏡框物件的一鏡框區域疊合且平行於該眼部區域。
  9. 如請求項5所述之線上眼鏡試配的處理方法,其中,在目標鏡框物件疊合至該人臉影像的該眼部區域的步驟後包括:該伺服器端輸出疊合該目標鏡框物件與該人臉影像的一結果影像;由該伺服器端將該結果影像發送至該用戶端。
  10. 如請求項5所述之線上眼鏡試配的處理方法,其中該人臉影像為動態影像,所述調整該目標鏡框物件包括該目標鏡框物件的轉動、翻轉、縮放或位移的相關處理,該伺服器端係以串流的方式將輸出結果發送至該用戶端。
TW110143402A 2021-11-22 2021-11-22 線上眼鏡試配的處理系統與方法 TWI786956B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
TW110143402A TWI786956B (zh) 2021-11-22 2021-11-22 線上眼鏡試配的處理系統與方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
TW110143402A TWI786956B (zh) 2021-11-22 2021-11-22 線上眼鏡試配的處理系統與方法

Publications (2)

Publication Number Publication Date
TWI786956B true TWI786956B (zh) 2022-12-11
TW202321986A TW202321986A (zh) 2023-06-01

Family

ID=85794996

Family Applications (1)

Application Number Title Priority Date Filing Date
TW110143402A TWI786956B (zh) 2021-11-22 2021-11-22 線上眼鏡試配的處理系統與方法

Country Status (1)

Country Link
TW (1) TWI786956B (zh)

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN104408764A (zh) * 2014-11-07 2015-03-11 成都好视界眼镜有限公司 眼镜虚拟试戴方法、装置及系统
US20160174690A1 (en) * 2013-03-15 2016-06-23 Skin Republic, Inc. Systems and methods for specifying and formulating customized topical agents
CN110348936A (zh) * 2019-05-23 2019-10-18 珠海随变科技有限公司 一种眼镜推荐方法、装置、系统及存储介质

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20160174690A1 (en) * 2013-03-15 2016-06-23 Skin Republic, Inc. Systems and methods for specifying and formulating customized topical agents
CN104408764A (zh) * 2014-11-07 2015-03-11 成都好视界眼镜有限公司 眼镜虚拟试戴方法、装置及系统
CN110348936A (zh) * 2019-05-23 2019-10-18 珠海随变科技有限公司 一种眼镜推荐方法、装置、系统及存储介质

Also Published As

Publication number Publication date
TW202321986A (zh) 2023-06-01

Similar Documents

Publication Publication Date Title
US11592691B2 (en) Systems and methods for generating instructions for adjusting stock eyewear frames using a 3D scan of facial features
US11495002B2 (en) Systems and methods for determining the scale of human anatomy from images
TWI755671B (zh) 用於眼鏡之虛擬試戴系統及方法
US9254081B2 (en) Fitting glasses frames to a user
US9842246B2 (en) Fitting glasses frames to a user
JP7356403B2 (ja) 眼鏡フレームの仮想適合化のための方法、装置及びコンピュータプログラム
JP6840889B2 (ja) 眼鏡フレームの仮想適合化のための方法、装置及びコンピュータプログラム
US6944327B1 (en) Method and system for selecting and designing eyeglass frames
WO2023109753A1 (zh) 虚拟角色的动画生成方法及装置、存储介质、终端
CN109063539B (zh) 眼镜虚拟佩戴方法、装置、计算机设备及存储介质
JP2023515517A (ja) ライブフィッティングを含む眼鏡フレームのフィッティング
KR102231239B1 (ko) 안경 착용 시뮬레이션 방법
CN106570747A (zh) 结合手势识别的眼镜在线适配方法及系统
CN111461814A (zh) 虚拟眼镜的试戴方法、终端设备及存储介质
TWI786956B (zh) 線上眼鏡試配的處理系統與方法
CN217718730U (zh) 一种确定患者佩戴面罩型号的装置
US12014462B2 (en) Generation of a 3D model of a reference object to perform scaling of a model of a user's head
TWI663561B (zh) 虛擬眼鏡選配方法與系統
US20220351467A1 (en) Generation of a 3d model of a reference object to perform scaling of a model of a user's head
US20230221585A1 (en) Method and device for automatically determining production parameters for a pair of spectacles
WO2023152373A1 (en) Method for head image recording and corresponding mobile device
CN117882031A (zh) 用于进行对象的数字测量的系统和方法