TWI701565B

TWI701565B - 資料標記系統及資料標記方法

Info

Publication number: TWI701565B
Application number: TW107145816A
Authority: TW
Inventors: 張如瑩; 林柏霖; 潘桓毅; 謝佳恩; 黃玟瑜
Original assignee: 財團法人工業技術研究院
Priority date: 2018-12-19
Filing date: 2018-12-19
Publication date: 2020-08-11
Also published as: TW202024946A; CN111339325A

Abstract

本揭露提出一種資料標記系統及資料標記方法。此資料標記系統包括一標記資料庫、一未標記資料庫、一標記資料擴增模組，及一操作平台，該操作平台訊號連接該標記資料庫、該未標記資料庫及該標記資料擴增模組，並且包括一標記模式編修介面，且該標記模式編修介面可供輸入資料與執行編修操作以產生至少一確認標記模式，其中該標記資料擴增模組依據該至少一確認標記模式與該未標記資料庫執行運算以產生至少一新增標記資料，並將該至少一新增標記資料儲存至該標記資料庫。

Description

資料標記系統及資料標記方法

本揭露是有關於一種資料處理系統以及一種資料處理方法。

大部分人工智慧的運作，需要經過訓練與學習，通常是利用標記資料作為訓練學習的樣本。隨著市場應用的需求，當人工智慧要解決更複雜的問題時，為了維持相當的精確度，勢必需要更大量的標記資料，而且人工智慧在不同領域的運用時，所需要的標記資料也有所差異，因此人工智慧更廣泛的應用及更佳的表現，需仰賴大量的標記資料作為後盾。

資料標記常見的作法是人工標記，相當耗費人力與時間成本，為了能縮短開發時間或成本而發展了自動標記的技術作為輔助。目前自動標記的運作是採用遞迴的方式，也就是標記系統對文本執行自動標記預測後，人工對整個文本的預測結果進行檢視與校對，再將校對後的預測結果回授給系統以建立預測模組，此作法是由人工對文本的完整預測結果進行校對，在校對的資料為整個文本而資料量偏大的情況下，較容易發生校對不完全，錯誤的標記資料持續累積，將對系統表現造成影響。

本揭露提供一種資料標記系統，以及一種資料標記方法。

在一示範的實施例中，本揭露係有關於一種資料標記系統，包括一標記資料庫、一未標記資料庫、一標記資料擴增模組，及一操作平台，該操作平台訊號連接該標記資料庫、該未標記資料庫及該標記資料擴增模組，並且包括一標記模式編修介面，且該標記模式編修介面可供輸入資料與執行編修操作以產生至少一確認標記模式，其中該標記資料擴增模組依據該至少一確認標記模式與該未標記資料庫執行運算以產生至少一新增標記資料，並將該至少一新增標記資料儲存至該標記資料庫。

在一示範的實施例中，本揭露係有關於一種資料標記方法，適用於一資料標記系統，並包括接收資料或編修操作、依據接收的該資料或編修操作，產生至少一確認標記模式、依據該至少一確認標記模式與一未標記資料庫執行運算以產生至少一新增標記資料，及將該至少一新增標記資料儲存至一標記資料庫。

基於上述，本揭露實施例提出的資料標記系統及資料標記方法，其中該操作平台可接收編修操作以產生確認標記模式，並且該標記資料擴增模組是依據經過編修操作後產生的確認標記模式來執行運算，以產生新增標記資料而擴增該標記資料庫，同時提高標記資料庫中的正確度。

為讓本揭露的上述特徵和優點能更明顯易懂，下文特舉實施例，並配合所附圖式作詳細說明如下。

在本案說明書全文（包括申請專利範圍）中所使用的「訊號連接」一詞可指任何直接或間接的連接手段。舉例而言，若文中描述處理器訊號連接於儲存器，則應該被解釋成該處理器可以直接連接於該儲存器，或者該處理器可以透過其他裝置或某種連接手段而間接地連接至該儲存器。另外，凡可能之處，在圖式及實施方式中使用相同標號的元件/構件/步驟代表相同或類似部分。不同實施例中使用相同標號或使用相同用語的元件/構件/步驟可以相互參照相關說明。

圖1是依據本揭露之一實施例繪示之資料標記系統1。所述資料標記系統1包括一標記資料庫2、一未標記資料庫3、一標記資料擴增模組4，及訊號連接該標記資料庫2、該未標記資料庫3及該標記資料擴增模組4的一操作平台5。其中，該標記資料庫2用以儲存已被標記的資料，而該未標記資料庫3則用以儲存未被標記的資料。

該操作平台5包括一標記模式編修介面51，並且該標記模式編修介面51可供輸入資料與執行編修操作以產生至少一確認標記模式。本實施例的操作平台5可供使用者輸入資料與執行編輯、新增及刪減，此外該操作平台5還可以是經由應用程式介面輸入資料以與執行編輯、新增及刪減。

該標記資料擴增模組4依據該至少一確認標記模式與該未標記資料庫3執行運算以產生至少一新增標記資料，並將該至少一新增標記資料儲存至該標記資料庫2，以擴充該標記資料庫2。

進一步參照圖2，其是依據本揭露之一實施例繪示之資料標記方法之流程圖，並適用於圖1所示之資料標記系統1。本實施例的資料標記方法的步驟說明如下：執行步驟S1，該操作平台5的標記模式編修介面51接收資料或編修操作後，執行步驟S2，該標記模式編修介面51依據接收的資料或編修操作產生至少一確認標記模式。而所述確認標記模式為標記模式(pattern)資料，其定義了執行資料標記的規則。

接著執行步驟S3，該標記資料擴增模組4依據該至少一確認標記模式與該未標記資料庫3執行運算以產生該至少一新增標記資料，並且執行步驟S4，將該至少一新增標記資料儲存至該標記資料庫2。具體而言，在本實施例的步驟S3、S4中，該標記資料擴增模組4是依據該至少一確認標記模式對該未標記資料庫3中的資料執行標記演算法，以標記該未標記資料庫3中的資料，並產生該至少一新增標記資料，進而將產生的新增標記資料儲存至該標記資料庫2以擴增該標記資料庫2。

圖1、2所示之資料標記系統1及資料標記方法，可用以處理語料資料、影像資料或聲音資料。在用以處理語料資料的情況下，該未標記資料庫3為語料資料庫，並且該標記資料庫2是標記語料庫，也就是儲存被標記完成的語料資料。而該確認標記模式則是用以標記語料資料，其可包括詞形資訊、句法資訊及語意資訊等其中至少一。所述標記模式具體上的資料態樣，以3C產品的產品保固相關的標記模式為例，可以是[*Number*‘-Year’,‘ Limited’,‘Warranty’]，其中*Number*表示數值類語意類別。

在圖1、2所示之資料標記系統1及資料標記方法用以處理影像資料的情況下，該未標記資料庫3為影像資料庫，並且該標記資料庫2是標記影像資料庫，也就是儲存被標記完成的影像資料。而該確認標記模式則是可用以對影像資料進行標記的規則，其可包括特徵資訊、線條資訊、光源資訊、輪廓資訊、色彩資訊及材質資訊等其中至少一。

在圖1、2所示之資料標記系統1及資料標記方法用以處理聲音資料的情況下，該未標記資料庫3為聲音資料庫，並且該標記資料庫2是標記聲音資料庫，也就是儲存被標記完成的聲音資料。而該確認標記模式則是可用以對聲音資料進行標記的規則，其可包括能量資訊、頻率資訊、節奏資訊及語言資訊等其中至少一。

參照圖3，其是依據本揭露之另一實施例繪示之資料標記系統1。本實施例的資料標記系統1與圖1類似，其同樣包括一標記資料庫2、一未標記資料庫3、一標記資料擴增模組4，及訊號連接該標記資料庫2、該未標記資料庫3及該標記資料擴增模組4的一操作平台5。而本實施例的資料標記系統1進一步還包括訊號連接該標記資料庫2的一自動資料標記模組6。其中，該標記資料庫2用以儲存已被標記的資料，而該未標記資料庫3則用以儲存未被標記的資料。

本實施例的標記資料擴增模組4可存取該未標記資料庫3及該標記資料庫2，並包括可儲存標記模式的一標記模式資料集42及可執行一標記演算法的一擴增單元41。

該操作平台5包括訊號連接該擴增單元41的一標記模式編修介面51，及訊號連接該自動資料標記模組6且可供輸入資料的一資料標記預測介面52。本實施例的操作平台5可供使用者輸入資料與執行編輯、新增及刪減，此外該操作平台5還可以是經由應用程式介面輸入資料以或執行編輯、新增及刪減。

該標記模式編修介面51可供輸入資料與執行編修操作，並且該資料標記預測介面52可供輸入資料及顯示預測結果。本實施例的自動資料標記模組6可經配置以執行資料標記預測。

參照圖3、4，其中圖4是依據本揭露之另一實施例繪示之資料標記方法之流程圖，並適用於圖3所示之資料標記系統1。本實施例的資料標記方法的步驟說明如下：執行步驟S1，該操作平台5的標記模式編修介面51接收資料或編修操作，並執行步驟S21，該標記模式編修介面51接收至少一標記模式。接著執行步驟S22，該標記模式編修介面51將接收的該至少一標記模式設為該至少一確認標記模式。在本實施例中，使用者是在標記模式編修介面51上執行編修，以輸入標記模式，並且該標記模式編修介面51以使用者輸入的標記模式作為確認標記模式。補充說明的是，在其他實施方式中，該標記模式編修介面51也可以是接收經由外部應用程式介面輸入資料或執行編輯、新增及刪減。

在取得該至少一確認標記模式後，執行步驟S23，該標記資料擴增模組4將該至少一確認標記模式儲存至該標記模式資料集42，在本實施例中，該標記資料擴增模組4先依據該標記模式資料集42中的標記模式與該至少一確認標記模式執行檢驗，檢驗確認後將該至少一確認標記模式儲存及更新至該標記模式資料集42，其中該標記資料擴增模組4是檢驗該至少一確認標記模式是否與該標記模式資料集42中的資料重複或衝突，以排除標記模式間發生重複或衝突的情況，在其他實施方式中也可以是由該擴增單元41執行前述檢驗。

接著執行步驟S31，該標記資料擴增模組4的擴增單元41依據該標記模式資料集42與該未標記資料庫3執行該標記演算法以產生至少一新增標記資料，並且執行步驟S4，將該至少一新增標記資料儲存至該標記資料庫2。具體而言，在本實施例的步驟S31中，該擴增單元41是依據在標記模式資料集42的該至少一確認標記模式及原已儲存在該標記模式資料集42中的標記模式，對該未標記資料庫3中的資料執行標記演算法，以標記該未標記資料庫3中的資料，並產生該至少一新增標記資料。在執行步驟S31後，該擴增單元41將產生的新增標記資料儲存至該標記資料庫2以擴增該標記資料庫2。本實施例的標記演算法可以是字串搜尋演算法或長詞優先演算法。

在該標記模式資料集42中未預先存在資料的情況下，本實施例的步驟S23可選擇性地不執行，此情況下步驟S31中，該擴增單元41是只依據步驟S22中產生的該至少一確認標記模式來標記該未標記資料庫3中的資料。

本實施例的資料標記方法還可進一步執行步驟S51，該操作平台5的資料標記預測介面52接收一未標記資料，並執行步驟S52，該自動資料標記模組6依據該標記資料庫2對該未標記資料執行資料標記預測，並將對應於該未標記資料的預測結果傳送至該操作平台5，本實施例的自動資料標記模組6可以是執行Conditional Random Field、Maximum-Entropy Markov Model、Recurrent Neural Network演算法。接著，該操作平台5顯示對應於該未標記資料的預測結果。

圖3、4所示之資料標記系統1及資料標記方法，可用以處理語料資料、影像資料或聲音資料。在用以處理語料資料的情況下，該未標記資料庫3為語料資料庫，並且該標記資料庫2是標記語料庫，也就是儲存被標記完成的語料資料，此外，該未標記資料為語料資料。而該確認標記模式則是用以標記語料資料，其可包括詞形資訊、句法資訊及語意資訊等其中至少一。所述標記模式具體上的資料態樣，以3C產品的產品保固相關的標記模式為例，可以是[*Number*‘-Year’,‘ Limited’,‘Warranty’]，其中*Number*表示數值類語意類別。

在圖3、4所示之資料標記系統1及資料標記方法用以處理影像資料的情況下，該未標記資料庫3為影像資料庫，並且該標記資料庫2是標記影像資料庫，也就是儲存被標記完成的影像資料，此外，該未標記資料為影像資料。而該確認標記模式則是可用以對影像資料進行標記的規則，其可包括特徵資訊、線條資訊、光源資訊、輪廓資訊、色彩資訊及材質資訊等其中至少一。

在圖3、4所示之資料標記系統1及資料標記方法用以處理聲音資料的情況下，該未標記資料庫3為聲音資料庫，並且該標記資料庫2是標記聲音資料庫，也就是儲存被標記完成的聲音資料，此外，該未標記資料為聲音資料。而該確認標記模式則是可用以對聲音資料進行標記的規則，其可包括能量資訊、頻率資訊、節奏資訊及語言資訊等其中至少一。

參照圖5，其是依據本揭露之另一實施例繪示之資料標記系統1。本實施例的資料標記系統1與圖3所示之實施例類似，同樣包括一標記資料庫2、一未標記資料庫3、一標記資料擴增模組4、訊號連接該標記資料庫2的一自動資料標記模組6，及訊號連接該標記資料庫2、該未標記資料庫3及該標記資料擴增模組4的一操作平台5。相似地，本實施例的標記資料擴增模組4包括一擴增單元41及一標記模式資料集42。而本實施例與圖3所示之實施例主要差異在於，本實施例的操作平台5是包括訊號連接該標記資料擴增模組4的一擴增單元41的一標記模式編修介面51、訊號連接該自動資料標記模組6且可供輸入資料的一資料標記預測介面52，及訊號連接該標記資料庫2的一人工標記介面53，其中，該人工標記介面53可供輸入資料及執行資料標記。

參照圖5、6，其中圖6是依據本揭露之另一實施例繪示之資料標記方法之流程圖，並適用於圖5所示之資料標記系統1。本實施例的資料標記方法與圖4所示的實施例類似，同樣執行步驟S1、步驟S21至步驟S23、步驟S31及步驟S4，來產生至少一確認標記模式及至少一新增標記資料以儲存於標記資料庫2中，並且同樣可執行步驟S51、S52，對一未標記資料執行資料標記預測。

而本實施例的資料標記方法可進一步執行步驟S61，該操作平台5的人工標記介面53接收並顯示該未標記資料，並且執行步驟S62，該人工標記介面53接收對應該未標記資料的至少一資料標記操作，並產生對應該未標記資料的標記結果；也就是使用者可將預計要人工標記的未標記資料輸入該人工標記介面53，並在該人工標記介面53上執行資料標記操作。接著執行步驟S63，該人工標記介面53將對應該未標記資料的該標記結果儲存至該標記資料庫2。

在其他實施方式中，所述人工標記介面53可以與該資料標記預測介面52整合為同一介面，以供輸入未標記資料，並進一步依配置執行人工標記或標記預測。

圖5、6所示之資料標記系統1及資料標記方法，可用以處理語料資料、影像資料或聲音資料。在用以處理語料資料的情況下，該未標記資料庫3為語料資料庫，並且該標記資料庫2是標記語料庫，也就是儲存被標記完成的語料資料，此外，輸入的未標記資料為語料資料。而該確認標記模式則是用以標記語料資料，其可包括詞形資訊、句法資訊及語意資訊等其中至少一。所述標記模式具體上的資料態樣，以3C產品的產品保固相關的標記模式為例，可以是[*Number*‘-Year’,‘ Limited’,‘Warranty’]，其中*Number*表示數值類語意類別。

在圖5、6所示之資料標記系統1及資料標記方法用以處理影像資料的情況下，該未標記資料庫3為影像資料庫，並且該標記資料庫2是標記影像資料庫，也就是儲存被標記完成的影像資料，此外，輸入的未標記資料為影像資料。而該確認標記模式則是可用以對影像資料進行標記的規則，其可包括特徵資訊、線條資訊、光源資訊、輪廓資訊、色彩資訊及材質資訊等其中至少一。

在圖5、6所示之資料標記系統1及資料標記方法用以處理聲音資料的情況下，該未標記資料庫3為聲音資料庫，並且該標記資料庫2是標記聲音資料庫，也就是儲存被標記完成的聲音資料，此外，輸入的未標記資料為聲音資料。而該確認標記模式則是可用以對聲音資料進行標記的規則，其可包括能量資訊、頻率資訊、節奏資訊及語言資訊等其中至少一。

參照圖7，其是依據本揭露之另一實施例繪示之資料標記系統1。本實施例的資料標記系統1與圖1所示之實施例類似，其同樣包括一標記資料庫2、一未標記資料庫3、一標記資料擴增模組4，及訊號連接該標記資料庫2、該未標記資料庫3及該標記資料擴增模組4的一操作平台5。其中，該標記資料庫2用以儲存已被標記的資料，而該未標記資料庫3則用以儲存未被標記的資料。

而本實施例的標記資料擴增模組4可存取該未標記資料庫3及該標記資料庫2，並包括可儲存標記模式的一標記模式資料集42、可執行一模式生成演算法的一標記模式生成單元43，及可執行一標記演算法的一擴增單元41。

該操作平台5包括訊號連接該標記模式生成單元43與該擴增單元41的一標記模式編修介面51，及可供輸入資料的一資料標記預測介面52。本實施例的操作平台5可供使用者輸入執行編輯、新增及刪減，此外該操作平台5還可供經由應用程式介面輸入資料以或執行編輯、新增及刪減。

進一步參照圖8，其是依據本揭露之另一實施例繪示之資料標記方法之流程圖，並適用於圖7所示之資料標記系統1。本實施例的資料標記方法的步驟說明如下：執行步驟71，該標記資料擴增模組4的標記模式生成單元43依據該未標記資料庫3執行模式生成演算法，以產生至少一候選標記模式。在該標記資料擴增模組4將該至少一候選標記模式傳送至該操作平台5後，執行步驟72，該操作平台5顯示該至少一候選標記模式。本實施例的標記模式生成單元43執行的模式生成演算法可以是N-Gram, Apriori algorithm, AprioriAll algorithm 或 AprioriSome algorithm。

在產生並顯示該至少一候選標記模式後，執行步驟S11，該操作平台5接收資料或編修操作，其中該操作平台5是接收對應該至少一候選標記模式的編修操作。在本實施例的步驟S11中，使用者經由該操作平台5的標記模式編修介面51對該至少一候選標記模式執行編修操作，並且可一或多次的修改、新增及刪減該至少一候選標記模式。接著執行步驟S24，該操作平台5依據該至少一編修操作產生至少一確認標記模式，其中該標記模式編修介面51依據該至少一候選標記模式及接收到的編修操作，產生至少一確認標記模式，換言之，本實施例的該至少一確認標記模式即是使用者對該至少一候選標記模式進行修改、新增及刪減後所產生。

在取得該至少一確認標記模式後，執行步驟S23，該標記資料擴增模組4將該至少一確認標記模式儲存至該標記模式資料集42，在本實施例中，該標記資料擴增模組4先依據該標記模式資料集42中的標記模式與該至少一確認標記模式執行檢驗，檢驗確認後將該至少一確認標記模式儲存及更新至該標記模式資料集42，其中該標記資料擴增模組4執行的檢驗，是檢驗該至少一確認標記模式是否與該標記模式資料集42中的資料重複或衝突，以排除標記模式間發生重複或衝突的情況，在其他實施方式中可由該擴增單元41執行前述檢驗。

接著執行步驟S31，該標記資料擴增模組4的擴增單元41依據該標記模式資料集42與該未標記資料庫3執行該標記演算法以產生至少一新增標記資料，並且執行步驟S4，將該至少一新增標記資料儲存至該標記資料庫2。具體而言，在本實施例的步驟S31中，該擴增單元41是依據在標記模式資料集42的該至少一確認標記模式及原已儲存在該標記模式資料集42中的標記模式，對該未標記資料庫3中的資料執行標記演算法，以標記該未標記資料庫3中的資料，並產生該至少一新增標記資料，進而儲存至該標記資料庫2以擴增該標記資料庫2。本實施例的標記演算法可以是字串搜尋演算法或長詞優先演算法。

圖7、8所示之資料標記系統1及資料標記方法，可用以處理語料資料、影像資料或聲音資料。在用以處理語料資料的情況下，該未標記資料庫3為語料資料庫，並且該標記資料庫2是標記語料庫，也就是儲存被標記完成的語料資料，此外，該候選標記模式與確認標記模式則是用以標記語料資料，其可包括詞形資訊、句法資訊及語意資訊等其中至少一。所述標記模式具體上的資料態樣，以3C產品的產品保固相關的標記模式為例，可以是[*Number*‘-Year’,‘ Limited’,‘Warranty’]，其中*Number*表示數值類語意類別。

在圖7、8所示之資料標記系統1及資料標記方法用以處理影像資料的情況下，該未標記資料庫3為影像資料庫，並且該標記資料庫2是標記影像資料庫，也就是儲存被標記完成的影像資料，此外，該候選標記模式與確認標記模式則是可用以對影像資料進行標記的規則，其可包括特徵資訊、線條資訊、光源資訊、輪廓資訊、色彩資訊及材質資訊等其中至少一。

在圖7、8所示之資料標記系統1及資料標記方法用以處理聲音資料的情況下，該未標記資料庫3為聲音資料庫，並且該標記資料庫2是標記聲音資料庫，也就是儲存被標記完成的聲音資料，此外，該候選標記模式與確認標記模式則是可用以對聲音資料進行標記的規則，其可包括能量資訊、頻率資訊、節奏資訊及語言資訊等其中至少一。

參照圖9，其是依據本揭露之另一實施例繪示之資料標記系統1。本實施例的資料標記系統1與圖7示之實施例類似，同樣包括一標記資料庫2、一未標記資料庫3、一標記資料擴增模組4，及訊號連接該標記資料庫2、該未標記資料庫3及該標記資料擴增模組4的一操作平台5。相似地，該標記資料擴增模組4包括一擴增單元41、一標記模式資料集42及一標記模式生成單元43，而該操作平台5亦包括一標記模式編修介面51及一資料標記預測介面52；本實施例與圖7的差異在於，本實施例的資料標記系統1還進一步包括訊號連接該標記資料庫2的一自動資料標記模組6，其中該自動資料標記模組6經配置以執行資料標記預測。

參照圖9、10，其中圖10是依據本揭露之另一實施例，繪示之資料標記方法之流程圖，並適用於圖9所示之資料標記系統1。本實施例的資料標記方法的與圖8所示的實施例類似，同樣執行步驟S71、S72，以產生至少一候選標記模式及執行步驟S11、S24、S23，以取得至少一確認標記模式且儲存至該標記模式資料集42，並執行步驟S31、S4，產生至少一新增標記資料以擴增該標記資料庫2。

而本實施例資料標記方法進一步執行步驟S51，該操作平台5的資料標記預測介面52接收一未標記資料，並執行步驟S52，該自動資料標記模組6依據該標記資料庫2對該未標記資料執行資料標記預測，並將對應於該未標記資料的預測結果傳送至該操作平台5，本實施例的自動資料標記模組6可以是執行Conditional Random Field、 Maximum-Entropy Markov Model或Recurrent Neural Network演算法。接著，該操作平台5顯示對應於該未標記資料的預測結果。

圖9、10所示之資料標記系統1及資料標記方法，可用以處理語料資料、影像資料或聲音資料。在用以處理語料資料的情況下，該未標記資料庫3為語料資料庫，並且該標記資料庫2是標記語料庫，也就是儲存被標記完成的語料資料。此外，該未標記資料是語料資料，並且該候選標記模式與確認標記模式則是用以標記語料資料，其可包括詞形資訊、句法資訊及語意資訊等其中至少一。所述標記模式具體上的資料態樣，以3C產品的產品保固相關的標記模式為例，可以是[*Number*‘-Year’,‘ Limited’,‘Warranty’]，其中*Number*表示數值類語意類別。

在圖9、10所示之資料標記系統1及資料標記方法用以處理影像資料的情況下，該未標記資料庫3為影像資料庫，並且該標記資料庫2是標記影像資料庫，也就是儲存被標記完成的影像資料。此外，該未標記資料是聲音資料，並且該候選標記模式與確認標記模式則是可用以對影像資料進行標記的規則，其可包括特徵資訊、線條資訊、光源資訊、輪廓資訊、色彩資訊及材質資訊等其中至少一。

在圖9、10所示之資料標記系統1及資料標記方法用以處理聲音資料的情況下，該未標記資料庫3為聲音資料庫，並且該標記資料庫2是標記聲音資料庫，也就是儲存被標記完成的聲音資料。此外，該未標記資料是影像資料，該候選標記模式與確認標記模式則是可用以對聲音資料進行標記的規則，其可包括能量資訊、頻率資訊、節奏資訊及語言資訊等其中至少一。

參照圖11，其是依據本揭露之另一實施例繪示之資料標記系統1。本實施例的資料標記系統1與圖9所示之實施例類似，同樣包括一標記資料庫2、一未標記資料庫3、一標記資料擴增模組4、訊號連接該標記資料庫2的一自動資料標記模組6，及訊號連接該標記資料庫2、該未標記資料庫3及該標記資料擴增模組4的一操作平台5。此外，本實施例的標記資料擴增模組4同樣包括一標記模式資料集42、一擴增單元41，及一標記模式生成單元43。而本實施例與圖9所示之實施例主要差異在於，本實施例的操作平台5是包括訊號連接該擴增單元41的一標記模式編修介面51、訊號連接該自動資料標記模組6且可供輸入資料的一資料標記預測介面52，及訊號連接該標記資料庫2的一人工標記介面53，其中，該人工標記介面53可供輸入資料及執行資料標記。

參照圖11、12，其中圖12是依據本揭露之另一實施例繪示之資料標記方法之流程圖，並適用於圖11所示之資料標記系統1。本實施例的資料標記方法與圖10所示的實施例類似，同樣執行步驟S71、S72，以產生至少一候選標記模式及執行步驟S11、S24、S23，以取得至少一確認標記模式且儲存至該標記模式資料集42，並執行步驟S31、S4，依據該至少一確認標記模式產生至少一新增標記資料以擴增該標記資料庫2，還執行步驟S51、S52，對未標記資料執行資料標記預測。

而本實施例的資料標記方法可進一步執行步驟S61，該操作平台5的人工標記介面53接收並顯示一未標記資料，並且執行步驟S62，該人工標記介面53接收對應該未標記資料的至少一資料標記操作，並產生對應該未標記資料的標記結果；也就是使用者可將預計要人工標記的未標記資料輸入該人工標記介面53，並在該人工標記介面53上執行資料標記操作。接著執行步驟S63，該人工標記介面53將對應該未標記資料的該標記結果儲存至該標記資料庫2。

圖11、12所示之資料標記系統1及資料標記方法，可用以處理語料資料、影像資料或聲音資料。在用以處理語料資料的情況下，該未標記資料庫3為語料資料庫，並且該標記資料庫2是標記語料庫，也就是儲存被標記完成的語料資料。此外，輸入的未標記資料是語料資料，並且該候選標記模式與確認標記模式則是用以標記語料資料，其可包括詞形資訊、句法資訊及語意資訊等其中至少一。所述標記模式具體上的資料態樣，以3C產品的產品保固相關的標記模式為例，可以是[*Number*‘-Year’,‘ Limited’,‘Warranty’]，其中*Number*表示數值類語意類別。

在圖11、12所示之資料標記系統1及資料標記方法用以處理影像資料的情況下，該未標記資料庫3為影像資料庫，並且該標記資料庫2是標記影像資料庫，也就是儲存被標記完成的影像資料。此外，輸入的未標記資料是聲音資料，並且該候選標記模式與確認標記模式則是可用以對影像資料進行標記的規則，其可包括特徵資訊、線條資訊、光源資訊、輪廓資訊、色彩資訊及材質資訊等其中至少一。

在圖11、12所示之資料標記系統1及資料標記方法用以處理聲音資料的情況下，該未標記資料庫3為聲音資料庫，並且該標記資料庫2是標記聲音資料庫，也就是儲存被標記完成的聲音資料。此外，輸入的未標記資料是影像資料，該候選標記模式與確認標記模式則是可用以對聲音資料進行標記的規則，其可包括能量資訊、頻率資訊、節奏資訊及語言資訊等其中至少一。

補充說明的是，本發明的資料標記方法可以由一或多個伺服器來運行，並且經由網際網路與該操作平台提供服務。

雖然本揭露已經以實施例揭露如上，然其並非用以限定本揭露，任何所屬技術領域中具有通常知識者，在不脫離本揭露的精神和範圍內，當可作些許的更動與潤飾，故本揭露的保護範圍當以後附的申請專利範圍所界定者為準。

1：資料標記系統 2：標記資料庫 3：未標記資料庫 4：標記資料擴增模組 41：擴增單元 42：標記模式資料集 43：標記模式生成單元 5：操作平台 51：標記模式編修介面 52：資料標記預測介面 53：人工標記介面 6：自動資料標記模組 S1~S5：步驟 S11、S21~S24、S31、S51、S52、S61~S63、S71、S72：步驟

圖1是依據本揭露之一實施例繪示之資料標記系統的方塊圖。圖2是依據本揭露之一實施例繪示之資料標記方法的流程圖。圖3是依據本揭露之另一實施例繪示之資料標記系統的方塊圖。圖4是依據本揭露之另一實施例繪示之資料標記方法的流程圖。圖5是依據本揭露之另一實施例繪示之資料標記系統的方塊圖。圖6是依據本揭露之另一實施例繪示之資料標記方法的流程圖。圖7是依據本揭露之另一實施例繪示之資料標記系統的方塊圖。圖8是依據本揭露之另一實施例繪示之資料標記方法的流程圖。圖9是依據本揭露之另一實施例繪示之資料標記系統的方塊圖。圖10是依據本揭露之另一實施例繪示之資料標記方法的流程圖。圖11是依據本揭露之另一實施例繪示之資料標記系統的方塊圖。圖12是依據本揭露之另一實施例繪示之資料標記方法的流程圖。

1：資料標記系統 2：標記資料庫 3：未標記資料庫 4：標記資料擴增模組 5：操作平台 51：標記模式編修介面

Claims

一種資料標記系統，包括：一標記資料庫；一未標記資料庫；一標記資料擴增模組；及一操作平台，訊號連接該標記資料庫、該未標記資料庫及該標記資料擴增模組，並包括一標記模式編修介面，且該標記模式編修介面可供輸入資料與執行編修操作以產生至少一確認標記模式，其中，該標記資料擴增模組依據該至少一確認標記模式與該未標記資料庫執行運算以產生至少一新增標記資料，並將該至少一新增標記資料儲存至該標記資料庫。
如申請專利範圍第1項所述的資料標記系統，其中該標記模式編修介面顯示至少一候選標記模式，並依據該至少一候選標記模式及使用者對該至少一候選標記模式的編修操作，產生該至少一確認標記模式。
如申請專利範圍第2項所述的資料標記系統，其中該標記資料擴增模組包括：一標記模式生成單元，訊號連接該標記模式編修介面，並依據該未標記資料庫執行一模式生成演算法以產生該至少一候選標記模式；及一擴增單元，訊號連接該標記模式編修介面，並依據該未標記資料庫及該至少一確認標記模式執行一標記演算法以產生該至少一新增標記資料，並將該至少一新增標記資料儲存至該標記資料庫。
如申請專利範圍第1項所述的資料標記系統，還包括訊號連接該標記資料庫的一自動資料標記模組，其中該操作平台還包括：一資料標記預測介面，可供輸入一未標記資料並顯示預測結果，其中，該自動資料標記模組依據該標記資料庫對該未標記資料執行資料標記預測，並將對應該未標記資料的預測結果傳送至該資料標記預測介面。
如申請專利範圍第1項所述的資料標記系統，其中該標記模式編修介面可供使用者輸入至少一標記模式，並且將輸入的該至少一標記模式設為該至少一確認標記模式。
如申請專利範圍第1項所述的資料標記系統，其中該編修操作包括修改、新增及刪減其中至少一者。
如申請專利範圍第1項所述的資料標記系統，其中該操作平台還包括可供輸入一未標記資料及執行資料標記的一人工標記介面，該人工標記介面可顯示該未標記資料，並將使用者對該未標記資料執行資料標記的結果儲存至該標記資料庫。
如申請專利範圍第1項所述的資料標記系統，其中該標記資料庫是語料標記資料庫、影像標記資料庫或聲音標記資料庫，且該未標記資料庫為語料資料庫、影像資料庫或聲音資料庫，並且該至少一確認標記模式是語料標記模式、影像標記模式或聲音標記模式。
如申請專利範圍第2項所述的資料標記系統，其中該至少一候選標記模式是語料標記模式、影像標記模式或聲音標記模式。
如申請專利範圍第1項所述的資料標記系統，其中該至少一確認標記模式包括詞形資訊、句法資訊及語意資訊其中至少一，或特徵資訊、線條資訊、光源資訊、輪廓資訊、色彩資訊及材質資訊其中至少一，或能量資訊、音頻資訊、節奏資訊及語言資訊其中至少一。
如申請專利範圍第2項所述的資料標記系統，其中該至少一候選標記模式包括詞形資訊、句法資訊及語意資訊其中至少一，或特徵資訊、線條資訊、光源資訊、輪廓資訊、色彩資訊及材質資訊其中至少一，或能量資訊、音頻資訊、節奏資訊及語言資訊其中至少一。
如申請專利範圍第5項所述的資料標記系統，其中使用者輸入的該至少一標記模式包括詞形資訊、句法資訊及語意資訊其中至少一者，或特徵資訊、線條資訊、光源資訊、輪廓資訊、色彩資訊及材質資訊其中至少一者，或能量資訊、音頻資訊、節奏資訊及語言資訊其中至少一者。
如申請專利範圍第4或第7項所述的資料標記系統，其中該未標記資料是文字資料、影像資料或聲音資料。
一種資料標記方法，適用於一資料標記系統，並包括：接收資料或編修操作；依據接收的該資料或編修操作，產生至少一確認標記模式；依據該至少一確認標記模式與一未標記資料庫執行運算以產生至少一新增標記資料；及將該至少一新增標記資料儲存至一標記資料庫。
如申請專利範圍第14項所述的資料標記方法，還包括該資料標記系統的一操作平台顯示至少一候選標記模式，其中該操作平台是接收對應該至少一候選標記模式的編修操作，並且依據該至少一編修操作產生至少一確認標記模式，該操作平台依據該至少一編修操作產生至少一確認標記模式之步驟包括：該操作平台依據該至少一候選標記模式及接收到的編修操作，產生該至少一確認標記模式。
如申請專利範圍第15項所述的資料標記方法，還包括該資料標記系統的一標記資料擴增模組依據該未標記資料庫執行一模式生成演算法以產生該至少一候選標記模式，其中該至少一新增標記資料是該標記資料擴增模組依據該至少一確認標記模式與該未標記資料庫執行一標記演算法所產生。
如申請專利範圍第14項所述的資料標記方法，還包括：該資料標記系統的一操作平台接收一未標記資料；該資料標記系統的一自動資料標記模組依據該標記資料庫對該未標記資料執行資料標記預測，並將對應該未標記資料的預測結果傳送至該操作平台；及該操作平台顯示對應該未標記資料的預測結果。
如申請專利範圍第14項所述的資料標記方法，其中由該資料標記系統的一操作平台依據該至少一編修操作產生該至少一確認標記模式，並且該操作平台依據該至少一編修操作產生該至少一確認標記模式之步驟包括：該操作平台接收至少一標記模式；及該操作平台將接收的該至少一標記模式設為該至少一確認標記模式。
如申請專利範圍第14項所述的資料標記方法，其中該至少一編修操作是執行修改、新增及刪減其中至少一者。
如申請專利範圍第14項所述的資料標記方法，還包括：該資料標記系統的一操作平台接收並顯示一未標記資料；該操作平台接收對應該未標記資料的至少一資料標記操作，並產生對應該未標記資料的標記結果；及將對應該未標記資料的該標記結果儲存至該標記資料庫。
如申請專利範圍第14項所述的資料標記方法，其中該標記資料庫是語料標記資料庫、影像標記資料庫或聲音標記資料庫，且該未標記資料庫為語料資料庫、影像資料庫或聲音資料庫，並且該確認標記模式是語料標記模式、影像標記模式或聲音標記模式。
如申請專利範圍第15項所述的資料標記方法，其中該至少一候選標記模式是語料標記模式、影像標記模式或聲音標記模式。
如申請專利範圍第14項所述的資料標記方法，其中該確認標記模式包括詞形資訊、句法資訊及語意資訊其中至少一，或特徵資訊、線條資訊、光源資訊、輪廓資訊、色彩資訊及材質資訊其中至少一，或能量資訊、音頻資訊、節奏資訊及語言資訊其中至少一。
如申請專利範圍第15項所述的資料標記方法，其中該至少一候選標記模式包括詞形資訊、句法資訊及語意資訊其中至少一，或特徵資訊、線條資訊、光源資訊、輪廓資訊、色彩資訊及材質資訊其中至少一，或能量資訊、音頻資訊、節奏資訊及語言資訊其中至少一。
如申請專利範圍第18項所述的資料標記方法，其中該操作平台接收的該至少一標記模式包括詞形資訊、句法資訊及語意資訊其中至少一者，或特徵資訊、線條資訊、光源資訊、輪廓資訊、色彩資訊及材質資訊其中至少一者，或能量資訊、音頻資訊、節奏資訊及語言資訊其中至少一者。
如申請專利範圍第17或第20項所述的資料標記方法，其中該未標記資料是文字資料、影像資料或聲音資料。