TWI636427B - 對應影像擷取裝置的深度圖品質的驗證方法及其驗證系統 - Google Patents

對應影像擷取裝置的深度圖品質的驗證方法及其驗證系統 Download PDF

Info

Publication number
TWI636427B
TWI636427B TW106117980A TW106117980A TWI636427B TW I636427 B TWI636427 B TW I636427B TW 106117980 A TW106117980 A TW 106117980A TW 106117980 A TW106117980 A TW 106117980A TW I636427 B TWI636427 B TW I636427B
Authority
TW
Taiwan
Prior art keywords
pattern
image
predetermined
depth map
test
Prior art date
Application number
TW106117980A
Other languages
English (en)
Other versions
TW201903716A (zh
Inventor
何明哲
Original Assignee
鈺立微電子股份有限公司
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 鈺立微電子股份有限公司 filed Critical 鈺立微電子股份有限公司
Priority to TW106117980A priority Critical patent/TWI636427B/zh
Priority to CN201710449332.1A priority patent/CN108986154A/zh
Application granted granted Critical
Publication of TWI636427B publication Critical patent/TWI636427B/zh
Publication of TW201903716A publication Critical patent/TW201903716A/zh

Links

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00Image analysis
    • G06T7/40Analysis of texture
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00Image analysis
    • G06T7/50Depth or shape recovery
    • G06T7/529Depth or shape recovery from texture
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N17/00Diagnosis, testing or measuring for television systems or their details

Abstract

對應影像擷取裝置的深度圖品質的驗證方法包含一顯示器顯示一主機所產生的對應於一極端狀況測試、一視深測試和一亮度測試的至少一測試中的每一測試的複數個預定圖案的每一預定圖案;該影像擷取裝置和該主機對該每一預定圖案執行一深度圖產生步驟以產生一深度圖;在該影像擷取裝置和該主機對對應於該每一測試的複數個預定圖案執行該深度圖產生步驟後,該主機根據對應該至少一測試的複數個深度圖,判斷該影像擷取裝置的深度圖品質是否符合一品管標準。

Description

對應影像擷取裝置的深度圖品質的驗證方法及其驗證系 統
本發明是有關於一種對應影像擷取裝置的深度圖品質的驗證方法及其驗證系統,尤指一種利用對應於極端狀況測試、部位測試、視深測試和亮度測試的至少一測試驗證影像擷取裝置的深度圖品質的驗證方法及其驗證系統。
在現有技術中,影像擷取裝置所擷取的左眼影像與右眼影像可用以產生深度圖。當該深度圖產生後,應用該影像擷取裝置的手勢遙控系統便可利用該深度圖對應於操作物件(例如操作者的手)的深度資訊決定該操作物件與該影像擷取裝置之間的大約距離,並根據該大約距離,產生靜態手勢控制指令、動態手勢控制指令或游標控制指令。
因為該手勢遙控系統可利用該深度圖決定該操作物件的大約距離,所以如果該深度圖的品質不好(例如破碎的深度圖),則該手勢遙控系統根據該深度圖所決定該大約距離便可能是錯誤的,導致該手勢遙控系統根據該錯誤的大約距離,產生錯誤的靜態手勢控制指令、動態手勢控制指令或游標控制指令。因此,如何驗證對應該影像擷取裝置的深度圖的品質是設計該手勢遙控系統的 一項重要課題。
本發明的一實施例提供一種對應影像擷取裝置的深度圖品質的驗證方法,其中應用於該驗證方法的一驗證系統包含一主機與一顯示器,其中該影像擷取裝置包含至少二影像感測器。該驗證方法包含該顯示器顯示該主機所產生的對應於一極端狀況(corner case)測試、一視深測試和一亮度測試的至少一測試中的每一測試的複數個預定圖案的每一預定圖案;該影像擷取裝置和該主機對該每一預定圖案執行一深度圖產生步驟,其中該深度圖產生步驟包含:該至少二影像感測器的每一影像感測器對該每一預定圖案執行一影像擷取動作以產生對應該每一預定圖案的一影像;及該主機根據該至少二影像感測器所分別產生的至少二影像,產生一深度圖;在該影像擷取裝置和該主機對對應於該每一測試的複數個預定圖案執行該深度圖產生步驟後,該主機根據對應該至少一測試的複數個深度圖,判斷該影像擷取裝置的深度圖品質是否符合一品管標準。
本發明的另一實施例提供一種對應影像擷取裝置的深度圖品質的驗證方法,其中應用於該驗證方法的一驗證系統包含一主機、一顯示器與一前景裝置,其中該影像擷取裝置包含至少二影像感測器。該驗證方法包含該顯示器顯示對應於一部位測試(region test)的複數個預定圖案中的每一預定圖案的背景子圖案和該前景裝置具有對應於該每一預定圖案的前景子圖案;該影像擷取裝置和該主機對該每一預定圖案的前景子圖案和背景子圖案執行一深度圖產生步驟,其中該深度圖產生步驟包含:該至少二影像感測器的每一影像感測器對該每一預定圖案的前景子圖案和背景子圖案執行一影像擷取動作以產生對應該每一預定圖案的一影像;該主機根據該至少二影像感測器所分別產生的至少二影 像,產生一深度圖;在該影像擷取裝置和該主機對對應於該部位測試的複數個預定圖案執行該深度圖產生步驟後,該主機根據對應該部位測試的複數個深度圖,判斷該影像擷取裝置的深度圖品質是否符合一品管標準。
本發明的另一實施例提供一種對應影像擷取裝置的深度圖品質的驗證系統,其中該影像擷取裝置包含至少二影像感測器。該驗證系統包含一主機和一顯示器。該主機是用以產生對應於一極端狀況測試、一視深測試和一亮度測試的至少一測試中的每一測試的複數個預定圖案。該顯示器是用以顯示該複數個預定圖案。當該顯示器顯示該複數個預定圖案的每一預定圖案時,該影像擷取裝置和該主機對該每一預定圖案執行一深度圖產生步驟以產生一深度圖,以及在該影像擷取裝置和該主機對對應於該每一測試的複數個預定圖案執行該深度圖產生步驟後,該主機根據對應該至少一測試的複數個深度圖,判斷該影像擷取裝置的深度圖品質是否符合一品管標準。
本發明的另一實施例提供一種對應影像擷取裝置的深度圖品質的驗證系統,其中該影像擷取裝置包含至少二影像感測器。該驗證系統包含一主機、一前景裝置和一顯示器。該顯示器顯示對應於一部位測試的複數個預定圖案中的每一預定圖案的背景子圖案和該前景裝置具有對應於該每一預定圖案的前景子圖案。當該顯示器和該前景裝置分別顯示該每一預定圖案的前景子圖案和背景子圖案時,該影像擷取裝置和該主機對該每一預定圖案的前景子圖案和背景子圖案執行一深度圖產生步驟以產生一深度圖,以及在該影像擷取裝置和該主機對對應於該部位測試的複數個預定圖案執行該深度圖產生步驟後,該主機根據對應該部位測試的複數個深度圖,判斷該影像擷取裝置的深度圖品質是否符合一品管標準。
本發明的另一實施例提供一種對應影像擷取裝置的深度圖品質的驗證方法,其中該影像擷取裝置包含至少二影像感測器。該驗證方法包含提供一測試狀態下的複數個預定圖案的每一預定圖案;執行一複數個深度圖產生步驟,其中該步驟包含:該至少二影像感測器的每一影像感測器對該複數個預定圖案的每一預定圖案執行一影像擷取動作以產生對應該每一預定圖案的一影像;及根據該至少二影像感測器對每一預定圖案所分別產生的至少二影像,產生該每一預定圖案對應的一深度圖;及根據對應該測試狀態的該複數個深度圖,判斷該影像擷取裝置的深度圖品質是否符合一品管標準。
本發明提供一種對應影像擷取裝置的深度圖品質的驗證方法及其驗證系統。該驗證方法及該驗證系統可根據該影像擷取裝置的製造商的實際需求,利用一極端狀況測試、一部位測試、一視深測試和一亮度測試的至少一測試驗證該影像擷取裝置的深度圖品質。相較於現有技術,因為本發明是利用上述對應於該極端狀況測試、該部位測試、該視深測試和該亮度測試的該至少一測試驗證該影像擷取裝置的深度圖品質,所以本發明更可確保該影像擷取裝置的深度圖品質。
100、1500‧‧‧影像擷取裝置
102、104‧‧‧影像感測器
1102‧‧‧左眼影像
1104‧‧‧右眼影像
1106、1710‧‧‧深度圖
1502‧‧‧前景裝置
1702、1706‧‧‧前景影像
1704、1708‧‧‧背景影像
11022、11042‧‧‧四方形
11062、17102‧‧‧第一區域
11064、17104‧‧‧第二區域
200‧‧‧驗證系統
202‧‧‧主機
204‧‧‧顯示器
Z、Z1‧‧‧距離
300-312、1600-1612、2400-2410‧‧‧步驟
第1圖是本發明的第一實施例說明一種對應影像擷取裝置的深度圖品質的驗證系統的示意圖。
第2圖是本發明的第二實施例說明一種對應影像擷取裝置的深度圖品質的驗證方法的流程圖。
第3圖是說明對應該隨機圖案的第一影像、第二影像和深度圖的示意圖。
第4圖是說明對應該對焦圖案的第一影像、第二影像和深度圖的示意圖。
第5圖是說明對應該左右條紋圖案的第一影像、第二影像和深度圖的示意圖。
第6圖是說明對應該上下條紋圖案的第一影像、第二影像和深度圖的示意圖。
第7圖是說明對應該重複圖案的第一影像、第二影像和深度圖的示意圖。
第8、9圖是說明對應該無紋理圖案的第一影像、第二影像和深度圖的示意圖。
第10圖是說明顯示器是投影幕的示意圖。
第11圖是說明對應該第一預定圖案的第一影像、第二影像和深度圖的示意圖。
第12圖是說明對應該第二預定圖案的第一影像、第二影像和深度圖的示意圖。
第13圖是說明對應該第三預定圖案的第一影像、第二影像和深度圖的示意圖。
第14圖是說明對應該第四預定圖案的第一影像、第二影像和深度圖的示意圖。
第15圖是本發明的第三實施例說明一種對應影像擷取裝置的深度圖品質的驗證系統的示意圖。
第16圖是本發明的第四實施例說明一種對應影像擷取裝置的深度圖品質的驗證方法的流程圖。
第17圖是說明對應前景裝置位於顯示器的中央的第一影像、第二影像和深度圖的示意圖。
第18圖是說明對應前景裝置位於顯示器的左上角的第一影像、第二影像和深度圖的示意圖。
第19圖是說明對應前景裝置位於顯示器的右上角的第一影像、第二影像和深度圖的示意圖。
第20圖是說明對應前景裝置位於顯示器的左下角的第一影像、第二影像和深度圖的示意圖。
第21圖是說明對應前景裝置位於顯示器的右下角的第一影像、第二影像和深度 圖的示意圖。
第22圖是說明前景裝置是矩形裝置的示意圖。
第23圖是說明前景裝置是十字形裝置的示意圖。
第24圖是本發明的第五實施例說明一種對應影像擷取裝置的深度圖品質的驗證方法的流程圖。
請參照第1圖,第1圖是本發明的第一實施例說明一種對應影像擷取裝置100的深度圖品質的驗證系統200的示意圖,其中影像擷取裝置100包含二影像感測器102、104。但本發明並不受限於影像擷取裝置100包含二影像感測器102、104,亦即影像擷取裝置100可包含至少二影像感測器。如第1圖所示,驗證系統200包含一主機202和一顯示器204。請參照第1、2圖,第2圖是本發明的第二實施例說明一種對應影像擷取裝置的深度圖品質的驗證方法的流程圖。第2圖的驗證方法是利用第1圖的影像擷取裝置100與驗證系統200說明,詳細步驟如下:步驟300:開始;步驟302:顯示器204顯示主機202所產生的對應於一預設測試或測試狀態的複數個預定圖案的每一預定圖案;步驟304:影像感測器102、104對該每一預定圖案執行一影像擷取動作以分別產生對應該每一預定圖案的一第一影像和一第二影像;步驟306:主機202根據影像感測器102、104所分別產生的第一影像和第二影像,產生一深度圖;步驟308:顯示器204是否已顯示完主機202所產生的對應該預設測 試或該測試狀態的複數個預定圖案;如果否,跳回步驟304;如果是,進行步驟310;步驟310:主機202根據對應該預設測試或該測試狀態的複數個深度圖,判斷對應影像擷取裝置100的深度圖品質是否符合一品管標準;步驟312:結束。
在步驟302中,該預設測試或測試狀態可以是一極端狀況(corner case)測試、一視深測試(apparent depth test)和一亮度測試的至少一測試中的每一測試,但本發明並不受限於上述測試。以該至少一測試包含該極端狀況測試為例,對應於該極端狀況測試的複數個預定圖案為一隨機圖案(random pattern)、一對焦圖案(focus pattern)、一左右條紋圖案(stripe pattern)、一上下條紋圖案、一重複圖案(repeat pattern)和一無紋理圖案(textureless pattern)的至少一圖案。但本發明並不受限於對應於該極端狀況測試的複數個預定圖案為該隨機圖案、該對焦圖案、該左右條紋圖案、該上下條紋圖案、該重複圖案和該無紋理圖案的至少一圖案。在步驟304中,當該每一預定圖案是該隨機圖案(如第3圖所示)、該對焦圖案(如第4圖所示)、該左右條紋圖案(如第5圖所示)、該上下條紋圖案(如第6圖所示)、該重複圖案(如第7圖所示)或該無紋理圖案(如第8、9圖所示)時,影像感測器102、104對該每一預定圖案執行該影像擷取動作以分別產生對應該每一預定圖案的第一影像和第二影像,其中該第一影像是一左眼影像以及該第二影像是一右眼影像。在步驟306中,在影像感測器102、104分別產生該第一影像和該第二影像後,主機202即可根據影像感測器102、104所分別產生的第一影像和第二影像,產生對應影像擷取裝置100與顯示器204之間距離Z的一深度圖(如第3-9圖所示)。但在本發明的另一實施例中,主機202是根據影像感測器102、104所分別產生的第一影像和第二影像,產生對應影像擷取裝置100與顯示器204之間距離Z 的一視差(disparity)圖。另外,如第3-9圖所示,因為距離Z是一定值,所以主機202所產生對應距離Z的深度圖理想上應是一完整的深度圖(亦即該深度圖只具有對應距離Z的一第一灰階值)。另外,在本發明的另一實施例中,顯示器204是一投影幕,且主機202另具有一投影功能以投影該每一預定圖案至顯示器204(如第10圖所示)。在步驟310中,當顯示器204顯示完主機202所產生的對應該極端狀況測試的複數個預定圖案(例如該隨機圖案(如第3圖所示)、該對焦圖案(如第4圖所示)、該左右條紋圖案(如第5圖所示)、該上下條紋圖案(如第6圖所示)、該重複圖案(如第7圖所示)或該無紋理圖案(如第8、9圖所示))後,主機202即可根據對應該至少一測試的複數個對應距離Z的深度圖,判斷對應影像擷取裝置100的深度圖品質是否符合該品管標準。因為主機202所產生對應距離Z的深度圖理想上應是完整的深度圖,所以主機202可根據該複數個對應距離Z的深度圖的至少一深度圖的灰階值的破碎程度,判斷對應影像擷取裝置100的深度圖品質是否符合該品管標準。例如,當該複數個對應距離Z的深度圖中,大於一預定數目的深度圖的灰階值的破碎程度低於一預定百分比、或該複數個對應距離Z的深度圖中每一深度圖的灰階值的破碎程度都低於該預定百分比時,主機202判斷對應影像擷取裝置100的深度圖品質符合該品管標準。另外,該複數個深度圖中每一深度圖的灰階值的破碎程度可由該每一深度圖對應同一深度的灰階值的數目決定,或由對應該同一深度的灰階值實際上所形成的圖形的完整性決定。例如,在理想上,對應該同一深度的灰階值的數目應該等於1,所以如果對應該同一深度的灰階值的數目越大,則主機202可判定該每一深度圖的灰階值的破碎程度越大。又例如,如果對應該同一深度的灰階值所形成的圖形應該為一圓形,所以主機202可根據對應該同一深度的灰階值實際上所形成的圖形與該圓形之間的相似程度,決定該每一深度圖的灰階值的破碎程度。另外,主機202亦可根據對應距離Z的深度圖,計算出一相對應的計算值Z’,以及利用計算值Z’與距離Z之間的誤差, 判斷對應影像擷取裝置100的深度圖品質是否符合該品管標準。
另外,在步驟302中,以該至少一測試包含該視深測試為例,對應於該視深測試的複數個預定圖案中的每一預定圖案對應一專屬視深,且包含一左眼預定子圖案與一右眼預定子圖案。因為對應於該視深測試的複數個預定圖案中的一第一預定圖案是對應一第一視深(例如100cm),所以顯示器204可根據一分時的方式,依序顯示對應該第一預定圖案的左眼預定子圖案與右眼預定子圖案。在步驟304中,如第11圖所示,當顯示器204顯示對應該第一預定圖案的左眼預定子圖案時,影像感測器102對對應該第一預定圖案的左眼預定子圖案執行該影像擷取動作以產生該第一影像(一左眼影像1102,其中左眼影像1102包含一四方形11022);當顯示器204顯示對應該第一預定圖案的右眼預定子圖案時,影像感測器104對對應該第一預定圖案的右眼預定子圖案執行該影像擷取動作以產生該第二影像(一右眼影像1104,其中右眼影像1104包含一四方形11042)。在步驟306中,在影像感測器102、104分別產生該第一影像和該第二影像後,主機202即可根據影像感測器102、104所分別產生的第一影像和第二影像,產生對應該第一視深與左眼影像1102的深度圖1106,其中因為第11圖的第二區域11064是以左眼影像1102表示,所以第二區域11064的位置會對應左眼影像1102中四方形11022的位置。但在本發明的另一實施例中,主機202可根據影像感測器102、104所分別產生的第一影像和第二影像,產生對應該第一視深與右眼影像1104的深度圖,其中此時第11圖的第二區域11064的位置將會對應右眼影像1104中四方形11042的位置。如第11圖所示,深度圖1106內的一第一區域11062具有對應距離Z的第一灰階值,以及深度圖1106內的一第二區域11064具有對應該第一視深的一第二灰階值,其中該第一視深是由四方形11022(對應左眼影像1102)與四方形11042(對應右眼影像1104)所決定。於第11圖中,依據四方形11022(對應左眼影像 1102)與四方形11042(對應右眼影像1104)可決定一深度(亦即該第一視深),其中第11圖所示的該第一視深不等於距離Z(請參照第1圖距離Z的定義),所以第一區域11062的第一灰階值和第二區域11064的第二灰階值可能不同。因此,第二區域11064的第二灰階值會隨著四方形11022與四方形11042之間的視差改變而改變。另外,影像感測器102、104和主機202對對應一第二視深(例如200cm)的第二預定圖案(如第12圖所示)、對應一第三視深(例如300cm)的第三預定圖案(如第13圖所示)和對應一第四視深(例如400cm)的第四預定圖案(如第14圖所示)的操作原理皆和影像感測器102、104和主機202對對應該第一視深(例如100cm)的第一預定圖案的操作原理相同,在此不再贅述。亦即如第11-14圖所示,第二區域11064的第二灰階值會隨著四方形11022與四方形11042之間的視差改變而改變。另外,本發明並不受限於對應於該視深測試的複數個預定圖案包含上述4個預定圖案(該第一預定圖案、該第二預定圖案、該第三預定圖案和該第四預定圖案)。在步驟310中,當顯示器204顯示完主機202所產生的對應該視深測試的複數個預定圖案(例如對應該第一視深的第一預定圖案、對應該第二視深的第二預定圖案、對應該第三視深的第三預定圖案和對應該第四視深的第四預定圖案)後,主機202即可根據對應該至少一測試的複數個對應不同視深的深度圖,判斷對應影像擷取裝置100的深度圖品質是否符合該品管標準。例如,主機202可根據對應該第一視深的深度圖,計算出一相對應的視深,以及利用該第一視深與該相對應的視深之間的誤差,判斷對應影像擷取裝置100的深度圖品質是否符合該品管標準。
另外,在步驟302中,以該至少一測試包含該亮度測試為例,對應於該亮度測試的複數個預定圖案中的每一預定圖案對應一專屬亮度,其中該專屬亮度可對應於一環境亮度或顯示器204顯示該每一預定圖案的亮度。例如對應於 該亮度測試的複數個預定圖案中的一第一預定圖案對應一第一亮度,其中對應於該亮度測試的複數個預定圖案中的第一預定圖案可為如第8圖所示的無紋理圖案。但本發明並不受限於對應於該亮度測試的複數個預定圖案中的第一預定圖案是為如第8圖所示的無紋理圖案。另外,對應於該亮度測試的複數個預定圖案可為相同的預定圖案或不同的預定圖案。另外,影像感測器102、104和主機202對對應於該亮度測試的複數個預定圖案的操作原理皆和影像感測器102、104和主機202對對應於該極端狀況測試的複數個預定圖案的操作原理相同,在此不再贅述。
請參照第15圖,第15圖是本發明的第三實施例說明一種對應影像擷取裝置100的深度圖品質的驗證系統1500的示意圖。如第15圖所示,驗證系統1500包含一主機202、一顯示器204和一前景裝置1502,其中前景裝置1502介於顯示器204與影像擷取裝置100之間。請參照第15、16圖,第16圖是本發明的第四實施例說明一種對應影像擷取裝置的深度圖品質的驗證方法的流程圖。第16圖的驗證方法是利用第15圖的影像擷取裝置100與驗證系統1500說明,詳細步驟如下:步驟1600:開始;步驟1602:顯示器204顯示對應於一部位測試(region test)的複數個預定圖案中的每一預定圖案的背景子圖案和前景裝置1502具有對應於該每一預定圖案的前景子圖案;步驟1604:影像感測器102、104對該每一預定圖案的前景子圖案和背景子圖案執行一影像擷取動作以分別產生對應該每一預定圖案的一第一影像和一第二影像; 步驟1606:主機202根據影像感測器102、104所分別產生的第一影像和第二影像,產生一深度圖;步驟1608:顯示器204和前景裝置1502是否已顯示完對應該部位測試的複數個預定圖案的背景子圖案和前景子圖案;如果否,跳回步驟1604;如果是,進行步驟1610;步驟1610:主機202根據對應該部位測試的複數個深度圖,判斷對應影像擷取裝置100的深度圖品質是否符合一品管標準;步驟1612:結束。
在步驟1602中,主機202可分別產生對應該每一預定圖案的背景子圖案和前景子圖案至顯示器204和前景裝置1502,其中該背景子圖案是如第8圖所示的無紋理圖案,且前景裝置1502是另一顯示器。但本發明並不受限於該背景子圖案是如第8圖所示的無紋理圖案。另外,在本發明的另一實施例中,主機202僅產生對應該每一預定圖案的背景子圖案至顯示器204,也就是說前景裝置1502可以是一板子、一布幕或一非顯示器的裝置,其具有對應該每一預定圖案的前景子圖案。在步驟1604中,影像感測器102、104同時對前景裝置1502所顯示的對應該每一預定圖案的前景子圖案和顯示器204所顯示的對應該每一預定圖案的背景子圖案執行該影像擷取動作以分別產生該第一影像和該第二影像(亦即該第一影像和該第二影像都包含前景裝置1502所顯示的對應該每一預定圖案的前景子圖案和顯示器204所顯示的對應該每一預定圖案的背景子圖案),其中該第一影像是一左眼影像以及該第二影像是一右眼影像。如第17圖所示,在步驟1604中,以影像擷取裝置100的一擷取影像方向為基準,當前景裝置1502位於顯示器204的中央時,影像感測器102、104可分別同時對前景裝置1502所顯示的對應該每一預定圖案的前景子圖案和顯示器204所顯示的對應該每一預定圖案的背景 子圖案執行該影像擷取動作以分別產生該第一影像(左眼影像)和該第二影像(右眼影像),其中該第一影像包含一前景影像1702(對應於前景裝置1502所顯示的對應該每一預定圖案的前景子圖案)和一背景影像1704(對應於顯示器204所顯示的對應該每一預定圖案的背景子圖案),以及該第二影像亦包含一前景影像1706(對應於前景裝置1502所顯示的對應該每一預定圖案的前景子圖案)和一背景影像1708(對應於顯示器204所顯示的對應該每一預定圖案的背景子圖案)。在步驟1606中,在影像感測器102、104分別產生該第一影像和該第二影像後,主機202即可根據影像感測器102、104所分別產生的第一影像和第二影像,產生一深度圖1710,其中如第17圖所示,深度圖1710內的一第一區域17102具有對應影像擷取裝置100與顯示器204之間距離Z的第一灰階值,以及深度圖1710內的一第二區域17104具有對應影像擷取裝置100與前景裝置1502之間距離Z1的一第二灰階值,其中距離Z1是可調整的。另外,以影像擷取裝置100的擷取影像方向為基準,當前景裝置1502位於顯示器204的左上角(如第18圖所示)、前景裝置1502位於顯示器204的右上角(如第19圖所示)、前景裝置1502位於顯示器204的左下角(如第20圖所示)及前景裝置1502位於顯示器204的右下角(如第21圖所示)時,影像感測器102、104和主機202的操作原理皆和前景裝置1502位於顯示器204的中央的操作原理相同,在此不再贅述。在步驟1610中,當前景裝置1502和顯示器204顯示完對應該部位測試的複數個預定圖案(如第17-21圖所示)後,主機202即可根據對應該部位測試的複數個對應距離Z和距離Z1的深度圖,判斷對應影像擷取裝置100的深度圖品質是否符合該品管標準。例如,因為深度圖1710內的第二區域17104可位於深度圖1710內的第一區域17102的中央(如第17圖所示)、左上角(如第18圖所示)、右上角(如第19圖所示)、左下角(如第20圖所示)及右下角(如第21圖所示),所以主機202可根據第17-21圖,判斷對應於影像擷取裝置100的深度圖品質是否符合該品管標準,亦即主機202可根據第17-21圖,判斷第17-21圖所示 的深度圖的所有區域是否已符合該品管標準。另外,主機202亦可根據深度圖1710,分別計算出對應於距離Z和Z1的計算值Z’和Z1’,以及利用計算值Z’與距離Z之間的誤差和計算值Z1’與距離Z1之間的誤差,判斷對應於影像擷取裝置100的深度圖品質是否符合該品管標準。另外,如第17圖所示,因為前景裝置1502是一正方形裝置,所以該前景子圖案是一正方形圖案。但在本發明的另一實施例中,因為前景裝置1502是一矩形裝置(如第22圖所示)或一十字形裝置(如第23圖所示),所以該前景子圖案是一矩形圖案或一十字形圖案(crisscross pattern)。但本發明並不受限於該前景子圖案是正方形圖案、矩形圖案或十字形圖案。
另外,在本發明的另一實施例中,如第3-9圖、第11-14圖和第17-23圖所示的預定圖案另包含主機202另產生對應不同材質(例如玻璃、絨布等)的參數以模擬在不同材質上顯示如第3-9圖、第11-14圖和第17-23圖所示的預定圖案的狀況。
另外,請參照第1、15、24圖,第24圖是本發明的第五實施例說明一種對應影像擷取裝置的深度圖品質的驗證方法的流程圖。第24圖的驗證方法是利用第1圖的影像擷取裝置100與驗證系統200和第15圖的影像擷取裝置100與驗證系統1500說明,詳細步驟如下:步驟2400:開始;步驟2402:提供一測試狀態下的複數個預定圖案的每一預定圖案;步驟2404:影像感測器102、104對該每一預定圖案執行一影像擷取動作以分別產生對應該每一預定圖案的一第一影像和一第二影像;步驟2406:主機202根據影像感測器102、104所分別產生的第一影像 和第二影像,產生一深度圖;步驟2408:主機202根據對應該測試狀態的複數個深度圖,判斷對應影像擷取裝置100的深度圖品質是否符合一品管標準;步驟2410:結束。
在步驟2402中,該測試狀態可以是該極端狀況測試、該視深測試、該亮度測試或該部位測試。當該測試狀態是該極端狀況測試時,該每一預定圖案可參照第3-9圖。當該測試狀態是該視深測試時,該每一預定圖案可參照第11-14圖。當該測試狀態是該亮度測試為例,該每一預定圖案對應一專屬亮度,其中該專屬亮度可對應於該環境亮度或顯示器204顯示該每一預定圖案的亮度,其中該每一預定圖案可為如第8圖所示的無紋理圖案。但本發明並不受限於該每一預定圖案是如第8圖所示的無紋理圖案。當該測試狀態是該部位測試時,該每一預定圖案可參照第17-23圖。另外,步驟2404-2408可參照步驟3404、3406、3410或步驟1604、1606、1610,在此不再贅述。
另外,本發明並不受限於根據該極端狀況測試、該部位測試、該視深測試和該亮度測試的至少一測試,驗證影像擷取裝置100的深度圖品質,亦即本發明亦可根據其他可用以驗證深度圖品質的測試,驗證影像擷取裝置100的深度圖品質。
綜上所述,本發明所提供的驗證方法及驗證系統可根據該影像擷取裝置的製造商的實際需求,利用上述該極端狀況測試、該部位測試、該視深測試和該亮度測試的至少一測試驗證該影像擷取裝置的深度圖品質。相較於現有技術,因為本發明是利用上述對應於該極端狀況測試、該部位測試、該視深測 試和該亮度測試的至少一測試驗證該影像擷取裝置的深度圖品質,所以本發明更可確保該影像擷取裝置的深度圖品質。
以上所述僅為本發明之較佳實施例,凡依本發明申請專利範圍所做之均等變化與修飾,皆應屬本發明之涵蓋範圍。

Claims (25)

  1. 一種對應影像擷取裝置的深度圖品質的驗證方法,其中應用於該驗證方法的一驗證系統包含一主機與一顯示器,其中該影像擷取裝置包含至少二影像感測器,該驗證方法包含:該顯示器顯示該主機所產生的對應於一極端狀況(corner case)測試、一視深測試(apparent depth test)和一亮度測試的至少一測試中的每一測試的複數個預定圖案的每一預定圖案;該影像擷取裝置和該主機對該每一預定圖案執行一深度圖產生步驟,其中該深度圖產生步驟包含:該至少二影像感測器的每一影像感測器對該每一預定圖案執行一影像擷取動作以產生對應該每一預定圖案的一影像;及該主機根據該至少二影像感測器所分別產生的至少二影像,產生一深度圖,其中該深度圖的灰階值的數目小於或等於2;及在該影像擷取裝置和該主機對對應於該每一測試的複數個預定圖案執行該深度圖產生步驟後,該主機根據對應該至少一測試的複數個深度圖,判斷該影像擷取裝置的深度圖品質是否符合一品管標準。
  2. 如請求項1所述的驗證方法,其中對應於該極端狀況測試的複數個預定圖案包含一隨機圖案、一對焦圖案(focus pattern)、一左右條紋圖案(stripe pattern)、一上下條紋圖案、一重複圖案(repeat pattern)和一無紋理圖案(textureless pattern)的至少一圖案。
  3. 如請求項1所述的驗證方法,其中對應於該視深測試的複數個預定圖案中的每一預定圖案對應一專屬視深,且包含一左眼預定子圖案與一右眼預定子圖案。
  4. 如請求項3所述的驗證方法,其中該顯示器根據一分時的方式,顯示該左眼預定子圖案與該右眼預定子圖案。
  5. 如請求項4所述的驗證方法,其中該至少二影像感測器的每一影像感測器對該每一預定圖案中執行該影像擷取動作以產生該影像包含:當該顯示器顯示該左眼預定子圖案時,該至少二影像感測器的一第一影像感測器對該左眼預定子圖案執行該影像擷取動作以產生該影像。
  6. 如請求項4所述的驗證方法,其中該至少二影像感測器的每一影像感測器對該每一預定圖案中執行該影像擷取動作以產生該影像包含:當該顯示器顯示該右眼預定子圖案時,該至少二影像感測器的一第二影像感測器對該右眼預定子圖案執行該影像擷取動作以產生該影像。
  7. 如請求項1所述的驗證方法,其中對應於該亮度測試的複數個預定圖案中的每一預定圖案對應一專屬亮度。
  8. 如請求項7所述的驗證方法,其中該專屬亮度對應於一環境亮度或該顯示器顯示該每一預定圖案的亮度。
  9. 一種對應影像擷取裝置的深度圖品質的驗證方法,其中應用於該驗證方法的一驗證系統包含一主機、一顯示器與一前景裝置,其中該影像擷取裝置包含至少二影像感測器,該驗證方法包含:該顯示器顯示對應於一部位測試(region test)的複數個預定圖案中的每一預定圖案的背景子圖案和該前景裝置具有對應於該每一預定圖案的前景子圖案;該影像擷取裝置和該主機對該每一預定圖案的前景子圖案和背景子圖案執行一深度圖產生步驟,其中該深度圖產生步驟包含:該至少二影像感測器的每一影像感測器對該每一預定圖案的前景子圖案和背景子圖案執行一影像擷取動作以產生對應該每一預定圖案的一影像;及該主機根據該至少二影像感測器所分別產生的至少二影像,產生一深度圖;及在該影像擷取裝置和該主機對對應於該部位測試的複數個預定圖案執行該深度圖產生步驟後,該主機根據對應該部位測試的複數個深度圖,判斷該影像擷取裝置的深度圖品質是否符合一品管標準。
  10. 如請求項9所述的驗證方法,其中以該影像擷取裝置的一擷取影像方向為基準,對應於該部位測試的複數個預定圖案包含該前景裝置位於該顯示器的中央的影像、該前景裝置位於該顯示器的左上角的影像、該前景裝置位於該顯示器的右上角的影像、該前景裝置位於該顯示器的左下角的影像及該前景裝置位於該顯示器的右下角的影像的至少一影像。
  11. 如請求項9所述的驗證方法,其中該前景子圖案為一正方形圖案、一矩形圖案或一十字形圖案(crisscross pattern)。
  12. 一種對應影像擷取裝置的深度圖品質的驗證系統,其中該影像擷取裝置包含至少二影像感測器,該驗證系統包含:一主機,用以產生對應於一極端狀況測試、一視深測試和一亮度測試的一至少一測試中的每一測試的複數個預定圖案;及一顯示器,用以顯示該複數個預定圖案;其中當該顯示器顯示該複數個預定圖案的每一預定圖案時,該影像擷取裝置和該主機對該每一預定圖案執行一深度圖產生步驟以產生一深度圖,其中該深度圖的灰階值的數目小於或等於2,以及在該影像擷取裝置和該主機對對應於該每一測試的複數個預定圖案執行該深度圖產生步驟後,該主機根據對應該至少一測試的複數個深度圖,判斷該影像擷取裝置的深度圖品質是否符合一品管標準。
  13. 如請求項12所述的驗證系統,其中對應於該極端狀況測試的複數個預定圖案包含一隨機圖案、一對焦圖案、一左右條紋圖案、一上下條紋圖案、一重複圖案和一無紋理圖案的至少一圖案。
  14. 如請求項12所述的驗證系統,其中對應於該視深測試的複數個預定圖案中的每一預定圖案對應一專屬視深,且包含一左眼預定子圖案與一右眼預定子圖案。
  15. 如請求項14所述的驗證系統,其中該顯示器根據一分時的方式,顯示該左眼預定子圖案與該右眼預定子圖案。
  16. 如請求項15所述的驗證系統,其中該影像擷取裝置和該主機對該每一預定圖案執行該深度圖產生步驟以產生該深度圖包含:當該顯示器顯示該左眼預定子圖案時,該至少二影像感測器的一第一影像感測器對該左眼預定子圖案執行一影像擷取動作以產生一左眼影像;當該顯示器顯示該右眼預定子圖案時,該至少二影像感測器的一第二影像感測器對該右眼預定子圖案執行該影像擷取動作以產生該一右眼影像;及該主機根據該左眼影像與該右眼影像,產生該深度圖。
  17. 如請求項12所述的驗證系統,其中對應於該亮度測試的複數個預定圖案中的每一預定圖案對應一專屬亮度。
  18. 如請求項17所述的驗證系統,其中該專屬亮度對應於一環境亮度或該顯示器顯示該每一預定圖案的亮度。
  19. 如請求項12所述的驗證系統,其中該顯示器是一投影幕。
  20. 一種對應影像擷取裝置的深度圖品質的驗證系統,其中該影像擷取裝置包含至少二影像感測器,該驗證系統包含:一主機;一前景裝置;及一顯示器,其中該顯示器顯示對應於一部位測試的複數個預定圖案中的每一預定圖案的背景子圖案和和該前景裝置具有對應於該每一預定圖案的前景子圖案;其中當該顯示器和該前景裝置分別顯示該每一預定圖案的前景子圖案和背景子圖案時,該影像擷取裝置和該主機對該每一預定圖案的前景子圖案和背景子圖案執行一深度圖產生步驟以產生一深度圖,以及在該影像擷取裝置和該主機對對應於該部位測試的複數個預定圖案執行該深度圖產生步驟後,該主機根據對應該部位測試的複數個深度圖,判斷該影像擷取裝置的深度圖品質是否符合一品管標準。
  21. 如請求項20所述的驗證系統,其中以該影像擷取裝置的一擷取影像方向為基準,對應於該部位測試的複數個預定圖案包含該前景裝置位於該顯示器的中央的影像、該前景裝置位於該顯示器的左上角的影像、該前景裝置位於該顯示器的右上角的影像、該前景裝置位於該顯示器的左下角的影像或該前景裝置位於該顯示器的右下角的影像的至少一影像。
  22. 如請求項20所述的驗證系統,其中該前景子圖案為一正方形圖案、一矩形圖案或一十字形圖案。
  23. 一種對應影像擷取裝置的深度圖品質的驗證方法,其中該影像擷取裝置包含至少二影像感測器,該驗證方法包含:提供一測試狀態下的複數個預定圖案的每一預定圖案;執行一複數個深度圖產生步驟,其中該步驟包含:該至少二影像感測器的每一影像感測器對該複數個預定圖案的每一預定圖案執行一影像擷取動作以產生對應該每一預定圖案的一影像;及根據該至少二影像感測器對每一預定圖案所分別產生的至少二影像,產生該每一預定圖案對應的一深度圖,其中該深度圖的灰階值的數目小於或等於2;及根據對應該測試狀態的該複數個深度圖,判斷該影像擷取裝置的深度圖品質是否符合一品管標準。
  24. 如請求項23所述的驗證方法,其中該測試狀態是一極端狀況測試、一視深測試、一亮度測試或一部位測試。
  25. 如請求項23所述的驗證方法,其中該每一預定圖案包含一背景子圖案和一前景子圖案。
TW106117980A 2017-05-31 2017-05-31 對應影像擷取裝置的深度圖品質的驗證方法及其驗證系統 TWI636427B (zh)

Priority Applications (2)

Application Number Priority Date Filing Date Title
TW106117980A TWI636427B (zh) 2017-05-31 2017-05-31 對應影像擷取裝置的深度圖品質的驗證方法及其驗證系統
CN201710449332.1A CN108986154A (zh) 2017-05-31 2017-06-14 对应图像获取装置的深度图质量的验证方法及其验证系统

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
TW106117980A TWI636427B (zh) 2017-05-31 2017-05-31 對應影像擷取裝置的深度圖品質的驗證方法及其驗證系統

Publications (2)

Publication Number Publication Date
TWI636427B true TWI636427B (zh) 2018-09-21
TW201903716A TW201903716A (zh) 2019-01-16

Family

ID=64453171

Family Applications (1)

Application Number Title Priority Date Filing Date
TW106117980A TWI636427B (zh) 2017-05-31 2017-05-31 對應影像擷取裝置的深度圖品質的驗證方法及其驗證系統

Country Status (2)

Country Link
CN (1) CN108986154A (zh)
TW (1) TWI636427B (zh)

Families Citing this family (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN109982074B (zh) * 2019-04-11 2021-01-15 歌尔光学科技有限公司 一种获取tof模组的倾斜角度的方法、装置及组装方法

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
TW201426161A (zh) * 2012-12-27 2014-07-01 Ind Tech Res Inst 深度影像擷取裝置、其校正方法與量測方法
CN104636725A (zh) * 2015-02-04 2015-05-20 华中科技大学 一种基于深度图像的手势识别方法与系统
CN104639933A (zh) * 2015-01-07 2015-05-20 前海艾道隆科技(深圳)有限公司 一种立体视图的深度图实时获取方法及系统
TW201711456A (zh) * 2015-09-02 2017-03-16 財團法人工業技術研究院 具備自身校正的深度攝影裝置以及自身校正方法

Family Cites Families (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101257641A (zh) * 2008-03-14 2008-09-03 清华大学 基于人机交互的平面视频转立体视频的方法
US9406132B2 (en) * 2010-07-16 2016-08-02 Qualcomm Incorporated Vision-based quality metric for three dimensional video
US20130162763A1 (en) * 2011-12-23 2013-06-27 Chao-Chung Cheng Method and apparatus for adjusting depth-related information map according to quality measurement result of the depth-related information map
KR101970563B1 (ko) * 2012-11-23 2019-08-14 엘지디스플레이 주식회사 3차원 입체 영상용 깊이지도 보정장치 및 보정방법
US9628778B2 (en) * 2013-10-14 2017-04-18 Eys3D Microelectronics, Co. Calibration system of a stereo camera and calibration method of a stereo camera
EP3088839B1 (en) * 2013-12-27 2018-12-26 Sony Corporation Image processing device and image processing method
CN105282537A (zh) * 2014-07-04 2016-01-27 聚晶半导体股份有限公司 图像获取装置
CN105657402B (zh) * 2016-01-18 2017-09-29 深圳市未来媒体技术研究院 一种深度图恢复方法

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
TW201426161A (zh) * 2012-12-27 2014-07-01 Ind Tech Res Inst 深度影像擷取裝置、其校正方法與量測方法
CN104639933A (zh) * 2015-01-07 2015-05-20 前海艾道隆科技(深圳)有限公司 一种立体视图的深度图实时获取方法及系统
CN104636725A (zh) * 2015-02-04 2015-05-20 华中科技大学 一种基于深度图像的手势识别方法与系统
TW201711456A (zh) * 2015-09-02 2017-03-16 財團法人工業技術研究院 具備自身校正的深度攝影裝置以及自身校正方法

Also Published As

Publication number Publication date
TW201903716A (zh) 2019-01-16
CN108986154A (zh) 2018-12-11

Similar Documents

Publication Publication Date Title
EP2561799B1 (en) Visual function testing device
EP2975602B1 (en) Method and device for determining the level of residual image of display
JP6146094B2 (ja) 情報操作表示システム、表示プログラム、および、表示方法
JP5655134B2 (ja) 3次元シーンにおけるテクスチャを生成する方法及び装置
TWI394431B (zh) 評價立體影像顯示面板的方法及系統
JP2020182251A (ja) 画像処理装置、画像処理方法、及びプログラム
CN105306922B (zh) 一种深度相机参考图的获取方法和装置
CN107396097B (zh) 一种虚拟现实设备的视差测试的方法和装置
JP6379433B2 (ja) 運動姿勢分析装置及び運動姿勢分析情報生成方法
US8432391B2 (en) Remote control device and remote control method
CN111248851B (zh) 一种视功能自测方法
CN111161358B (zh) 一种用于结构光深度测量的相机标定方法和装置
CN111033573B (zh) 信息处理装置、系统、图像处理方法及存储介质
JP6380778B2 (ja) 運動姿勢分析装置及び運動姿勢分析情報生成方法
US10671173B2 (en) Gesture position correctiing method and augmented reality display device
CN109073363A (zh) 图像识别装置、图像识别方法以及图像识别单元
TWI636427B (zh) 對應影像擷取裝置的深度圖品質的驗證方法及其驗證系統
CN113412500A (zh) 模拟装置、模拟方法及模拟程序
TWI417774B (zh) 光學距離判斷裝置、光學觸控螢幕系統及光學觸控測距之方法
US9857919B2 (en) Wearable device with intelligent user-input interface
JP6425406B2 (ja) 情報処理装置、情報処理方法、プログラム
WO2021064912A1 (ja) 補正方法、補正プログラムおよび情報処理システム
US20100128249A1 (en) Test method for compound-eye distance measuring apparatus, test apparatus, and chart used for the same
JP6306903B2 (ja) 情報処理装置、情報処理装置の制御方法およびプログラム
JP2016192600A (ja) 情報処理装置および投影装置