TWI795987B

TWI795987B - 雲台裝置

Info

Publication number: TWI795987B
Application number: TW110141499A
Authority: TW
Inventors: 王秀雯; 林士文
Original assignee: 致伸科技股份有限公司
Priority date: 2021-11-08
Filing date: 2021-11-08
Publication date: 2023-03-11
Also published as: US11582395B1; TW202319677A

Abstract

一種雲台裝置，其用以承載外部拍攝裝置，雲台裝置包括深度相機、控制單元及致動件。深度相機設置用以獲取被拍攝對象的空間座標。控制單元設置用以根據空間座標確定雲台裝置的方向調整值。致動件設置用以接收控制單元傳輸的方向調整值，並根據方向調整值調整雲台裝置的空間指向，以使外部拍攝裝置能夠追蹤被拍攝對象。控制單元更設置用以獲取雲台裝置的初始三軸資料與雲台裝置設定後的三軸資料，以確定初始三軸資料與設定後的三軸資料之間的角度差值，致動件更設置用以接收控制單元傳輸的角度差值。

Description

雲台裝置

本發明係有關於一種雲台裝置，尤其係有關於一種包括深度相機的雲台裝置。

現有的手持式雲台是透過按鈕切換使用者所需的拍攝模式，並且必需在拍攝裝置中安裝應用程式，利用藍芽連接三軸穩定器，以進行二維影像辨認。然而當被拍攝對象的移動速度太快時，現有的手持式雲台容易發生遺失人物追蹤。

本發明提供一種雲台裝置，其用以承載外部拍攝裝置，雲台裝置包括深度相機、控制單元及致動件。深度相機設置用以獲取被拍攝對象的空間座標。控制單元設置用以根據空間座標確定雲台裝置的方向調整值。致動件設置用以接收控制單元傳輸的方向調整值，並根據方向調整值調整雲台裝置的空間指向，以使外部拍攝裝置能夠追蹤被拍攝對象。控制單元更設置用以獲取雲台裝置的初始三軸資料與雲台裝置設定後的三軸資料，以確定初始三軸資料與設定後的三軸資料之間的角度差值，致動件更設置用以接收控制單元傳輸的角度差值。

在本發明的一些實施例中，致動件更設置用以根據角度差值調整雲台裝置的角度。

在本發明的一些實施例中，雲台裝置設定後的三軸資料為雲台裝置承載外部拍攝裝置之後，自動辨識或手動設定外部拍攝裝置的姿態，而得到此姿態對應的雲台裝置設定後的三軸資料。

在本發明的一些實施例中，控制單元更設置用以將深度相機獲取的被拍攝對象的空間座標對映到雲台裝置設定後的三軸資料進行運算，以確定雲台裝置的方向調整值。

在本發明的一些實施例中，雲台裝置更包括：支撐部；以及夾具，設置用以承載外部拍攝裝置，其中致動件連接於支撐部與夾具之間，深度相機設置在支撐部上方。

在本發明的一些實施例中，深度相機更設置用以獲取被拍攝對象的肢體姿勢資料，控制單元更設置用以接收並識別肢體姿勢資料，以確定肢體姿勢資料對應的控制指令。

在本發明的一些實施例中，肢體姿勢資料為手勢資料。

在本發明的一些實施例中，控制指令為觸發雲台裝置的特定功能。舉例來說，觸發雲台裝置的特定功能可例如為使雲台裝置自動調整至特定角度，而使外部拍攝裝置連同自動調整至特定姿態。

在本發明的一些實施例中，雲台裝置不包括慣性測量單元。

值得注意的是，由於本發明的雲台裝置包括深度相機，其可根據深度相機獲取的空間座標對被拍攝對象進行實時追蹤，以提高拍攝的準確度及實時性，故可有效解決先前技術中所述的課題。此外，本發明的雲台裝置可透過深度相機接收肢體姿勢資料（例如手勢資料），並交由控制單元識別肢體姿勢資料，以確定對應的控制指令，使雲台裝置或外部拍攝裝置進行對應的控制指令。如此一來，使用者不須透過按壓或觸控雲台裝置或外部拍攝裝置，即可切換成使用者所需的拍攝模式。

本發明的優點及特徵以及達到其方法將參照例示性實施例及附圖進行更詳細的描述而更容易理解。然而，本發明可以不同形式來實現且不應被理解僅限於此處所陳述的實施例。相反地，對所屬技術領域具有通常知識者而言，所提供的此些實施例將使本揭露更加透徹與全面且完整地傳達本發明的範疇。

本文中的空間相對用語，例如「下」、「上」，這是為了便於敘述圖式中一元件或特徵與另一元件或特徵之間的相對關係。這些空間相對用語的真實意義包含其他方位。例如，當圖式上下翻轉180度時，一元件與另一元件之間的關係，可能從「下」變成「上」。本文中所使用的空間相對敘述也應作同樣的解釋。

如先前技術所述，因先前的雲台為手持式，當被拍攝對象的移動速度太快時，現有的手持式雲台需持續跟著人物，因此容易發生遺失人物追蹤。據此，本發明提供一種自動追蹤不須人為介入的雲台裝置，其可例如為手持式或固定式。本發明的雲台裝置可根據深度相機獲取的空間座標對被拍攝對象進行實時追蹤，以提高拍攝的準確度及實時性，故可單人自拍並完成箇中拍攝場景需求，而可有效解決先前技術中所述的課題。此外，本發明的雲台裝置可透過深度相機接收肢體姿勢資料（例如手勢資料），並交由控制單元識別肢體姿勢資料，以確定對應的控制指令，使雲台裝置進行對應的控制指令。如此一來，使用者不須透過按壓或觸控雲台裝置，即可切換成使用者所需的拍攝模式。以下將詳述本發明的雲台裝置的各種實施例。

圖1為根據本發明一實施例之雲台裝置的元件示意圖。如圖1所示，雲台裝置1用以承載外部拍攝裝置2。使用者可將外部拍攝裝置2安裝至雲台裝置1上。

雲台裝置1包括深度相機12、控制單元14以及致動件16。深度相機12設置用以獲取被拍攝對象的空間座標（或可稱三維座標，其可包括深度資料）。空間座標可構成點雲資料。深度相機12可透過結構光，以物體遠近對映至結構光投射的特徵變化，以獲取深度資料；或可根據飛行時間（Time of Flying, ToF）原理，得到光碰到物體的來回時間差，以獲取被拍攝對象的深度資料；或為雙目相機，以立體相對獲取深度資料；或為光學雷達（light detection and ranging, Lidar）；或為毫米波雷達（Millimeter wave radar）。

控制單元14設置用以根據空間座標確定雲台裝置1的方向調整值（例如致動件16的三軸電機的旋轉值）。在一些實施例中，控制單元14包括系統單晶片（System on a Chip, SoC）、微控制器（micro-control unit, MCU）或其他合適的處理器。

致動件16設置用以接收控制單元12傳輸的方向調整值，並根據方向調整值調整雲台裝置1的空間指向，以使外部拍攝裝置2能夠實時追蹤被拍攝對象。在一些實施例中，致動件16根據方向調整值調整雲台裝置1的空間指向，使深度相機12及外部拍攝裝置2皆能夠指向被拍攝對象所在的位置，也就是說，深度相機12及外部拍攝裝置2皆能夠實時追蹤被拍攝對象。

圖2為根據本發明一實施例之雲台裝置的外觀示意圖。在一些實施例中，致動件16包括第一軸電機161、第二軸電機162及第三軸電機163，以控制雲台裝置1的方向軸、橫滾軸及俯仰軸的角度，進而控制外部拍攝裝置2的空間指向，以實時追蹤被拍攝對象。

值得注意的是，參考圖1及圖2，控制單元14更設置用以獲取雲台裝置1的初始三軸資料與雲台裝置1設定後的三軸資料，以確定初始三軸資料與設定後的三軸資料之間的角度差值，此角度差值可為零或不為零。

初始三軸資料為雲台裝置1開機後但尚未調整前的初始三軸資料，此時雲台裝置1可承載或未承載外部拍攝裝置2。雲台裝置1承載外部拍攝裝置2之後，可自動辨識或透過使用者手動設定外部拍攝裝置2的姿態（此時若有調整雲台裝置1，三軸的角度會改變），而使控制單元14得到此姿態對應的三軸資料，其即為上述之雲台裝置1設定後的三軸資料。此設定好的外部拍攝裝置2的姿態即為拍攝者設定的拍攝角度。在一些實施例中，利用自動辨識以自動調整外部拍攝裝置2的姿態可利用深度相機12獲取被拍攝者的肢體姿勢資料（例如手勢資料），然後交由控制單元14識別肢體姿勢資料對應的指令，進而使致動件16作動，使雲台裝置自動調整至特定角度，進而使外部拍攝裝置2的姿態達到設定值，使控制單元14得到此姿態對應的三軸資料。

致動件16更設置用以接收控制單元14傳輸的角度差值。在一些實施例中，致動件16更設置用以根據角度差值調整雲台裝置1的角度。如此一來，雲台裝置1可使外部拍攝裝置2大致保持在拍攝者設定的拍攝角度，不致於偏差太多。

在一些實施例中，控制單元14更設置用以將深度相機獲取的被拍攝對象的空間座標以及雲台設定後的三軸資料（或可稱姿態），進行姿態對映計算。也就是說，將空間座標對映到雲台裝置設定後的三軸資料進行旋轉運算，以確定雲台裝置的方向調整值。隨後，致動件16的第一軸電機161、第二軸電機162及第三軸電機163可根據控制單元14下達的方向調整值而作動，以追蹤被拍攝對象。

在一些實施例中，深度相機12更設置用以獲取被拍攝對象的肢體姿勢資料，控制單元14更設置用以接收並識別肢體姿勢資料，以確定肢體姿勢資料對應的控制指令。在一些實施例中，肢體姿勢資料為手勢資料。詳細而言，控制單元14接收肢體姿勢資料，然後建構點雲資料，萃取人體的骨架特徵，以深度學習運算進行肢體姿勢資料識別。如此一來，本發明的雲台裝置1能夠透過被拍攝對象所展示出的特定肢體姿勢啟動雲台裝置1，而不需透過按鈕或觸控方式啟動雲台裝置1。

在本發明的一些實施例中，控制指令為觸發雲台裝置的特定功能。舉例來說，可透過被拍攝對象所展示出的特定肢體姿勢，觸發雲台裝置1自動調整至特定角度，而使外部拍攝裝置連同自動調整至特定姿態。

在一些實施例中，如圖2所示，雲台裝置更包括支撐部11以及夾具（或可稱卡座）17。支撐部11亦可作為手持部。夾具17設置用以承載外部拍攝裝置2。致動件16連接於支撐部11與夾具17之間。深度相機12設置在支撐部11上方。然而本發明不限於前述實施例，在其他實施例中，深度相機12設置在雲台裝置1之中的其他位置，以方便深度相機12及外部拍攝裝置2同步實時追蹤被拍攝對象。

另需注意的是，本發明的深度相機12亦可取代現有的手持式雲台之中的慣性測量單元（例如包括陀螺儀、加速度計及磁力計）。舉例來說，本發明的深度相機12除了可獲取被拍攝對象的空間座標之外，亦可獲取雲台裝置1的三軸資料的動態變化，控制單元14可據此計算補償角度及電機速度，再由致動件16進行實時反向補償，故本發明的雲台裝置1除了具有追蹤效果之外也具有穩定效果，因此在一些實施例中，本發明的雲台裝置1可不包括慣性測量單元。然而在其他實施例中，本發明的雲台裝置1可包括慣性測量單元，以分攤控制單元14的運算。

惟以上所述者，僅為本發明之較佳實施例而已，當不能以此限定本發明實施之範圍，即大凡依本發明申請專利範圍及發明說明內容所作之簡單的等效變化與修飾，皆仍屬本發明專利涵蓋之範圍內。另外，本發明的任一實施例或申請專利範圍不須達成本發明所揭露之全部目的或優點或特點。此外，摘要部分和標題僅是用來輔助專利文件搜尋之用，並非用來限制本發明之權利範圍。

1:雲台裝置

11:支撐部

12:深度相機

14:控制單元

16:致動件

161:第一軸電機

162:第二軸電機

163:第三軸電機

17:夾具

2:外部拍攝裝置

圖1為根據本發明一實施例之雲台裝置的元件示意圖。

圖2為根據本發明一實施例之雲台裝置的外觀示意圖。

1:雲台裝置

12:深度相機

14:控制單元

16:致動件

2:外部拍攝裝置

Claims

一種雲台裝置，其用以承載一外部拍攝裝置，該雲台裝置包括：一深度相機，設置用以獲取一被拍攝對象的空間座標；一控制單元，設置用以獲取該雲台裝置的初始三軸資料與該雲台裝置設定後的三軸資料，以確定該初始三軸資料與該設定後的該三軸資料之間的一角度差值，該雲台裝置設定後的該三軸資料為該雲台裝置承載該外部拍攝裝置之後，該外部拍攝裝置被設定好的一姿態對應的該三軸資料，該姿態為一拍攝者設定的一拍攝角度，該控制單元更設置用以將該空間座標對映到該雲台裝置設定後的該三軸資料進行運算，以確定該雲台裝置的方向調整值；以及一致動件，設置用以接收該控制單元傳輸的該方向調整值，並根據該方向調整值調整該雲台裝置的空間指向，以使該外部拍攝裝置能夠追蹤該被拍攝對象。
如請求項1所述之雲台裝置，其中該致動件更設置用以根據該角度差值調整該雲台裝置的一角度。
如請求項1所述之雲台裝置，其中該雲台裝置設定後的該三軸資料為該雲台裝置承載該外部拍攝裝置之後，自動辨識或手動設定該外部拍攝裝置的該姿態，而得到該姿態對應的該雲台裝置設定後的該三軸資料。
如請求項1所述之雲台裝置，更包括：一支撐部；以及一夾具，設置用以承載該外部拍攝裝置，其中該致動件連接於該支撐部與該夾具之間，該深度相機設置在該支撐部上方。
如請求項1所述之雲台裝置，其中該深度相機更設置用以獲取該被拍攝對象的肢體姿勢資料，該控制單元更設置用以接收並識別該肢體姿勢資料，以確定該肢體姿勢資料對應的一控制指令。
如請求項5所述之雲台裝置，其中該肢體姿勢資料為一手勢資料。
如請求項5所述之雲台裝置，其中該控制指令為觸發該雲台裝置的一特定功能。
如請求項1所述之雲台裝置，其中該雲台裝置不包括一慣性測量單元。