TWI539810B - 全景景象拍攝及瀏覽之行動裝置、系統及方法 - Google Patents

全景景象拍攝及瀏覽之行動裝置、系統及方法 Download PDF

Info

Publication number
TWI539810B
TWI539810B TW103120431A TW103120431A TWI539810B TW I539810 B TWI539810 B TW I539810B TW 103120431 A TW103120431 A TW 103120431A TW 103120431 A TW103120431 A TW 103120431A TW I539810 B TWI539810 B TW I539810B
Authority
TW
Taiwan
Prior art keywords
mobile device
panoramic scene
panoramic
shooting
angle range
Prior art date
Application number
TW103120431A
Other languages
English (en)
Other versions
TW201537977A (zh
Inventor
張景嵩
張汝南
郭厚錦
Original Assignee
英華達股份有限公司
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 英華達股份有限公司 filed Critical 英華達股份有限公司
Publication of TW201537977A publication Critical patent/TW201537977A/zh
Application granted granted Critical
Publication of TWI539810B publication Critical patent/TWI539810B/zh

Links

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60Control of cameras or camera modules
    • H04N23/698Control of cameras or camera modules for achieving an enlarged field of view, e.g. panoramic image capture
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60Control of cameras or camera modules
    • H04N23/63Control of cameras or camera modules by using electronic viewfinders
    • H04N23/631Graphical user interfaces [GUI] specially adapted for controlling image capture or setting capture parameters
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60Control of cameras or camera modules
    • H04N23/66Remote control of cameras or camera parts, e.g. by remote control devices
    • H04N23/661Transmitting camera control signals through networks, e.g. control via the Internet

Description

全景景象拍攝及瀏覽之行動裝置、系統及方法
本發明係關於一種全景景象拍攝及瀏覽系統,特別係關於一種結合頭戴式攝像裝置之全景景象拍攝及瀏覽的系統、方法及其行動裝置。
3C產品日益發展,目前數位相機和照相手機幾乎已成了一種生活必需品。為了吸引消費者,這些數位相機或手機製造廠商無不致力於開發數位相機和照相手機的拍照功能。當前,數位相機或照相手機之功能已擴展出所謂的360度全景模式拍照功能。
目前已知的360度全景模式拍照功能之實施,乃是藉由數位相機或手機上的攝像裝置,根據其所能拍攝的視角範圍,得出一拍攝視角移動量,沿一預定平面依據視角移動量順時鐘或逆時鐘轉動數位相機或手機上的攝像裝置,依序拍攝得出不同方位的多個影像。這些多個影像的左右或上下兩側與拍攝順序上的前一個影像或後一個影像具有重疊範圍,經由比對此些影像的重疊範圍處並利用影像疊合處理,最後合成一張具有360度視角之全景景象。
請參照第1圖,其所繪示者為一已知全景景象拍攝方式的實施示意圖。主要是由一使用者10操作一拍攝裝置12來達成。一般 來說,拍攝裝置12例如是一數位相機或一具攝影鏡頭之照相手機,且能夠將所拍攝的多個影像合成為一全景景象。如第1圖所示,使用者10手持拍攝裝置12,用手部控制拍攝裝置12沿一預定平面按照一定的速度順時鐘或逆時鐘移動迴轉拍照,亦即進行所欲拍攝之全景景象的各個方位影像分別拍照,之後再利用拍攝裝置12本身具有的影像處理功能將各個方位影像合成一全景景象。然而,上述的拍攝方式由於使用者須以同一拍攝裝置12移動至不同方位以擷取不同方位的影像,常因為使用者移動拍攝裝置12的速度不均勻、持有裝置的手晃動以及拍攝景像中的人物或物體在拍攝的過程中移動等狀況而導致各個方位影像的拍攝不成功,進而無法順利合成一全景景象,或者合成後之全景景象的品質不佳。
為了克服上述缺點,中華人民共和國實用新型專利第201773251U號,揭示另一種全景拍攝方式,其使用一可360度定速旋轉的底座將上述的拍攝裝置12固定住,使得攝像裝置12得以沿一預定平面順時鐘或逆時鐘定速迴轉拍照,避免了上述使用者10移動拍攝裝置12可能產生的速度不均勻以及持有拍攝裝置12的手晃動等問題。然而,上述拍攝方式於操作時需要在所述之可360度定速旋轉的底座上另外安裝腳架才能使用。另外,對應不同的拍攝裝置12之拍攝視角範圍及相關功能規格,需要對驅動所述可360度定速旋轉的底座之步進馬達設定不同的馬達轉速,往往造成使用者操作上的不方便。
另一方面,當使用者10欲利用拍攝裝置12上所內建之顯示單元及瀏覽功能觀看合成得出之具有360度視角之全景景象時,通常瀏覽方式為:使用者10藉由拍攝裝置12上所附之功能按鍵或觸控面板,進行左右方向的點選操控來移動全景景象,讓使用者可以查看全景景象的各個視角範圍。然而,上述的影像瀏覽方式對使用者而言,常常會因為拍攝裝置12上的視角轉向操作問題,而在使用時產生不便,例 如:使用者10點擊左方向鍵欲將目前瀏覽視角轉為向左方區域觀看,然而,拍攝裝置12對於點擊左方向鍵的行為定義卻是將瀏覽視角中心點向左方轉動,導致使用者10進行影像瀏覽時,由目前的視角區域轉為目前視角區域的右方區域,讓使用者10在操作上,無法直觀地瀏覽全景景象。有鑑於此,針對以上所述之缺點,發明人提出一種全景景象拍攝及瀏覽系統及方法。
本發明的一目的係提出一種用於頭戴式全景景象拍攝系統與全景景象體感瀏覽方法,將具有複數攝像頭的頭戴式裝置作為全景景象拍攝裝置,將影像資料無線傳輸至一搭載全景景象瀏覽應用程式之行動裝置,使之實現全景景象體感瀏覽功能,使得克服在數位相機或照相手機上採用迴轉取景方式進行全景景象拍攝時所出現的缺陷,以及克服使用者瀏覽全景景象時所遭遇畫面操控不直觀的問題。
因此,本發明提出一種具全景景象拍攝及瀏覽功能之行動裝置,適用於與一拍攝裝置通訊連結,行動裝置至少包含:一觸控顯示模組、一中央處理模組、一記憶模組及一動作感測模組;其中,觸控顯示模組、中央處理模組及記憶模組以一傳輸介面連結,且動作感測模組與中央處理模組電性連接;動作感測模組係用以偵測行動裝置的一狀態;以及中央處理模組更執行記憶模組中一應用程式,依據從一拍攝裝置所擷取之複數個部分影像及分別對應於所述部分影像之一定位資訊,以產生一合成的全景景象,且依據行動裝置之狀態,控制合成的全景景象被顯示於觸控顯示模組的一瀏覽視角範圍。
依據一實施例,其中,所述拍攝裝置具有複數個影像攝取鏡頭。
依據一實施例,其中,所述複數個影像攝取鏡頭位於同一水平面上或同一球面上,且固定於一適於配戴於人體頭部上之載體上。
依據一實施例,其中,所述拍攝裝置更包含一微處理單元,用以產生分別對應於所述部分影像之定位資訊,所述定位資訊至少包含一拍攝視角範圍。
依據一實施例,其中,合成的全景景象於觸控顯示模組上的瀏覽視角範圍相同於或小於拍攝視角範圍。
依據一實施例,其中,行動裝置更包含一無線通訊模組,其中,所述無線通訊模組與拍攝裝置間係藉由一無線通訊方式建立一通訊連結,且無線通訊方式符合藍牙、低功耗藍牙、無線相容性認證或第三代行動通訊等通訊規範其中之一。
依據一實施例,其中,動作感測模組至少包含一加速度計、一重力感測器和一陀螺儀,且行動裝置之狀態為包含加速度變化、角速度變化及X軸、Y軸、Z軸之重力分量變化其中之一。
本發明的一個目的在於提供了一種全景景象拍攝及瀏覽系統,包含:一拍攝裝置,至少具有複數個影像攝取鏡頭,所述影像攝取鏡頭係用以分別拍攝一部分影像,且拍攝裝置產生分別對應於所述部分影像的一定位資訊;一行動裝置,至少具有一動作感測模組,並與拍攝裝置間具有一通訊連結以控制拍攝裝置,動作感測模組係用以偵測行動裝置的一狀態;其中,行動裝置係用以接收來自拍攝裝置部分影像及定位資訊;以及行動裝置更用以依據所述部分影像及定位資訊產生一合成的全景景象,且依據狀態,控制合成的全景景象被顯示於行動裝置時的一瀏覽視角範圍。
依據一實施例,其中複數個影像攝取鏡頭位於同一水平面上且固定於一適於配戴於人體頭部之載體上。
依據一實施例,其中,定位資訊至少包含一拍攝視角範圍。
依據一實施例,其中,合成的全景景象於行動裝置上的瀏覽視角範圍相同於或小於拍攝視角範圍。
依據一實施例,其中,合成的全景景象於行動裝置上的瀏覽視角範圍之左右視角範圍為60至220度。
依據一實施例,其中,合成的全景景象於行動裝置上的瀏覽視角範圍之上下視角範圍為60至120度。
依據一實施例,其中,動作感測模組至少包含一加速度計、一重力感測器和一陀螺儀,且狀態包含加速度變化、角速度變化及X軸、Y軸、Z軸之重力分量變化其中之一。
依據一實施例,其中行動裝置與拍攝裝置間係藉由一無線通訊方式建立通訊連結。
依據一實施例,其中無線通訊方式符合藍牙(Bluetooth)、低功耗藍牙(BLE;Bluetooth Low Energy)、無線相容性認證(Wi-Fi;Wireless Fidelity)或第三代行動通訊(3G;Third Generation)等通信規範其中之一。
依據一實施例,上述影像攝取鏡頭位於同一球面上且固定於一適於配戴於人體頭部之載體上。
本發明的另一個目的在於提供了一種全景景象拍攝及瀏覽方法,包含:(a)利用複數個影像攝取鏡頭分別拍攝複數個不同方位的數位影像,且取得分別對應於所述數位影像的定位資訊;(b)一行動裝置依據對應於所述數位影像之定位資訊,合成該等數位影像為一合成的全景景象(c)顯示合成的全景景象於行動裝置上,並依據行動裝置的一狀態顯示合成的全景景象之不同方位之一瀏覽視角範圍。
依據一實施例,其中拍攝步驟包含複數個影像攝取鏡頭同時拍攝所述不同方位的數位影像。
依據一實施例,其中更包含傳送所述數位影像及其拍攝視角範圍資訊至行動裝置。
本發明的全景景象拍攝系統輕便易於攜帶,不同於習知方式藉手部移動裝置進行全景拍攝,乃藉由複數攝像鏡頭對不同方向同時拍攝及合成全景景象,具有降低使用者操作門檻及增加全景景象品質功效。
本發明的全景景象瀏覽方法,在瀏覽360度全景景象時,利用行動裝置的動作感測模組,感測行動裝置移動的角度並控制全景景象顯示角度,讓使用者藉由直覺性操作達成直觀全景相片情景感受,增強用戶體感經驗。
10‧‧‧使用者
12‧‧‧拍攝裝置
24‧‧‧通訊連結
220‧‧‧應用程式
200、200a、200b、200c、200d‧‧‧影像攝取鏡頭
302‧‧‧載體
40‧‧‧全景景象拍攝及瀏覽系統
41‧‧‧行動裝置
4101‧‧‧觸控顯示模組
4103‧‧‧中央處理模組
4105‧‧‧記憶模組
4107‧‧‧動作感測模組
4109‧‧‧無線通訊模組
4111‧‧‧傳輸介面
42‧‧‧全景景象拍攝裝置
4200‧‧‧攝像單元
4202‧‧‧微處理單元
4204‧‧‧儲存單元
4206‧‧‧無線通訊單元
4208‧‧‧供電單元
4210‧‧‧控制傳輸介面
500‧‧‧全景景象
502‧‧‧全景景象之一瀏覽視角範圍視景
502a‧‧‧全景景象之另一瀏覽視角範圍視景
6000、6002、6004、6006、6008、6010、6012‧‧‧步驟
900‧‧‧景物
901、903、905、907‧‧‧複數個影像攝取鏡頭各自的視角範圍
第1圖係一已知全景景象拍攝方式的實施示意圖。
第2圖係本發明利用全景景象拍攝裝置進行全景景象拍攝並利用行動裝置進行全景景象瀏覽的示意圖。
第3圖係本發明第一實施例之全景景象拍攝及瀏覽系統的全景景象拍攝裝置的示意圖。
第4圖係本發明第二實施例之全景景象拍攝及瀏覽系統的全景景象拍攝裝置的示意圖。
第5圖係本發明之全景景象拍攝及瀏覽系統示意圖。
第6圖係執行本發明之全景景象拍攝及瀏覽系統之行動裝置之應用程式的第一瀏覽狀態示意圖。
第7圖係執行本發明之全景景象拍攝及瀏覽系統之行動裝置之應用程 式的第二瀏覽狀態示意圖。
第8圖係本發明之全景景象拍攝及瀏覽方法流程圖。
第9圖係本發明之全景景象拍攝及瀏覽系統之拍攝裝置的視角範圍示意圖。
下面參照附圖,對本發明所提出之全景景象拍攝及瀏覽系統及方法之具體實施方式做進一步的詳細描述。由於本發明係揭露一種全景景象拍攝及瀏覽系統。在本發明之實施例中所利用到的一些關於電路電子模組元件,係利用現有技術來達成,故在下述說明中,並不作完整描述。此外,於下述內文中之圖式,亦並未依據實際之相關尺寸完整繪製,其作用僅在表達與本發明特徵有關之示意圖。
首先,請參照第2、5圖,係為本發明之全景景象拍攝及瀏覽系統示意圖,包含:一全景景象拍攝裝置42,至少具有複數個影像攝取鏡頭200,這些影像攝取鏡頭200係分別拍攝一全景景象之一部分影像,全景景象拍攝裝置42並載入所述部分影像的定位資訊;一行動裝置41,至少具有一動作感測模組4107,並與拍攝裝置42間具有一通訊連結24,行動裝置41係透過通訊連結24控制全景景象拍攝裝置42,動作感測模組4107係用以偵測行動裝置41的狀態;其中,行動裝置41控制全景景象拍攝裝置42之影像攝取鏡頭200分別拍攝一全景景象之一部分影像,且全景景象拍攝裝置42將所拍攝之全景景象之所有部分影像及其定位資訊傳送至行動裝置41;以及行動裝置41更依據全景景象之所有部分影像之定位資訊合成全景景象,並顯示全景景象於行動裝置41上,且依據動作感測模組4107所偵測得之行動裝置41的狀態,控制全景景象於行動裝置41上的一瀏覽視角範圍。此外,行動裝置41實施方式可包含行動電話、智慧型手機(Smartphone)、掌上 型電腦(PDA;Personal Digital Assistant)或筆記型電腦(NB;Notebook)等態樣,但本發明並不限制行動裝置41之實施態樣型式。
請繼續參照第2、5圖,接著詳細說明本發明利用全景景象拍攝裝置42進行全景景象拍攝並利用行動裝置41進行全景景象瀏覽的操作方式。如第2圖所示,本發明提出利用一全景景象拍攝裝置42,例如一適於配戴於人體頭部之載體,結合一行動裝置41來進行全景景象之拍攝及瀏覽,此處的全景景象拍攝裝置42和行動裝置41是經由通訊連結24聯結,進而構成一全景景象拍攝及瀏覽系統40。其中,全景景象拍攝裝置42整合有複數個影像攝取鏡頭200,複數個影像攝取鏡頭200是依據各個影像攝取鏡頭200可攝取的影像視角範圍配置,使彼此相鄰的影像攝取鏡頭200於視角範圍邊緣能部分重疊。利用頭戴式全景景象拍攝裝置42所拍攝取得的複數影像,經由通訊連結24傳輸至行動裝置41。行動裝置41上可以搭載有一具備全景景象生成及全景景象體感瀏覽之功能的應用程式220,以實現本發明之利用頭戴式全景景象拍攝裝置42及行動裝置41進行全景景象拍攝及全景景象體感瀏覽之目的。
請參閱第3圖,第3圖為本發明第一實施例中,全景景象拍攝及瀏覽系統的全景景象拍攝裝置42的示意圖。如第3圖所示,本實施例之全景景象拍攝裝置42包括複數個影像攝取鏡頭200固定地置於一適合人體頭部配戴之載體302上,明顯地,這使所述影像攝取鏡頭200位於同一水平面上且分別面對四個不同方位,各個影像攝取鏡頭200可為標準鏡頭、廣角鏡頭或魚眼鏡頭。
接下來,請參閱第4圖,為本發明第二實施例中,全景景象拍攝及瀏覽系統的全景景象拍攝裝置42的示意圖。如第4圖所示,在較佳的實施狀態下,如第3圖所示的全景景象拍攝裝置42可以進一步具有另一影像攝取鏡頭200,其中,複數個影像攝取鏡頭200會位於 同一球面上;在較佳的實施狀態下,複數個影像攝取鏡頭200可固定地置於一適合人體頭部配戴之一載體302上。綜上所述,本發明之全景景象拍攝裝置42之影像攝取鏡頭200的數量並不受限於本實施例所提出者。
請繼續參考第5圖,為本發明全景景象拍攝及瀏覽系統示意圖。首先,如第5圖所示,本實施例之全景景象拍攝及瀏覽系統40由一全景景象拍攝裝置42和一行動裝置41所組成。其中,全景景象拍攝裝置42包括一攝像單元4200、一微處理單元4202、一儲存單元4204、一無線通訊單元4206、一供電單元4208和一控制傳輸介面4210。而行動裝置41包括一觸控顯示模組4101、一中央處理模組4103、一記憶模組4105、一動作感測模組4107、一無線通訊模組4109和傳輸介面4111。至於全景景象拍攝裝置42和行動裝置41之間的連接關係及其中各元件彼此的連接關係,稍候詳述。
在全景景象拍攝裝置42中,攝像單元4200、微處理單元4202、儲存單元4204、供電單元4208及無線通訊單元4206彼此之間以控制傳輸介面4210互相電性及通信連接,供電單元4208並進一步與一外部電源(未顯示)電性連接,外部電源是經由供電單元4208提供整個全景景象拍攝裝置42所需電力。在較佳的實施狀態下,攝像單元4200攝取影像的左右視角範圍可為60度至220度,上下視角範圍可為60度至120度;攝像單元4200由微處理單元4202控制影像操作模式,微處理單元4202並將攝像單元4200所攝取的影像經內部一類比數位轉換器(未顯示)轉換為數位影像資料,數位影像資料會被儲存於儲存單元4204。另外,要說明的是,第5圖所示之攝像單元4200可以具有如第3圖、第4圖所示之各個影像攝取鏡頭200,攝像單元4200是配合各個影像攝取鏡頭200用以攝取一全景景象之不同部分的一拍攝視角範圍之影像。
行動裝置41和全景景象拍攝裝置42,是透過行動裝置41的無線通訊模組4109及全景景象拍攝裝置42的無線通訊單元4206之間的通訊連結24進行通訊連結。在較佳的實施狀態下,無線通訊單元4206和無線通訊模組4109之間的通訊連結24符合藍牙、低功耗藍牙、無線相容性認證或第三代行動通訊等通信規範。行動裝置41之中央處理模組4103會發出一控制指令並經由無線通訊模組4109發送至全景景象拍攝裝置42,由全景景象拍攝裝置42的無線通訊單元4206接收並傳送給微處理單元4202,進而控制攝像單元4200的一特定視角範圍的影像監控、影像拍攝或影像錄製的實施。其中,為了讓全景景象拍攝裝置42的複數個影像攝取鏡頭200,在進行拍攝取得多個影像後,其根據多個影像所合成的全景景象於行動裝置41上的呈現能夠完全銜接,在影像攝取鏡頭200進行拍攝的同時,全景景象拍攝裝置42必須在每個由影像轉換的數位影像資料中嵌入定位資訊,亦即載入攝取影像的方位及拍攝視角範圍資訊。至於全景景象拍攝裝置42嵌入定位資訊的操作細節,稍候於後全景景象拍攝及瀏覽方法中詳述。
儲存單元4204是具有儲存功能的電子元件,例如:快閃記憶體。儲存單元4204是用以儲存攝像單元4200所接收之影像資料,並且也能儲存微處理單元4202所必需之運作程式,如:初始化程式、影像定位資訊及拍攝視角範圍資訊之預處理程式。無線通訊單元4206及無線通訊模組4109可使全景景象拍攝裝置42及行動裝置41彼此之間互相通訊連接24並傳送資訊,例如無線通訊單元4206可用以自行動裝置41之無線通訊模組4109接收中央處理模組4103所發出的控制指令,也可用來傳輸儲存單元4204內之影像資料到無線通訊模組4109,無線通訊單元4206和無線通訊模組4109是以無線通信的方式實施,在較佳的實施狀態下,無線通訊單元4206和無線通訊模組4109之 間的通訊連結24是符合藍牙、低功耗藍牙、無線相容性認證或第三代行動通訊等通信規範。
第5圖所示之供電單元4208,是用以提供全景景象拍攝裝置42運作所需的電力,其運作模式可包含正常、省電和待機模式。在正常運作模式下,供電單元4208提供電力予攝像單元4200、微處理單元4202、儲存單元4204和無線通訊單元4206,使得全景景象拍攝裝置42能拍攝並取得影像。在省電運作模式下,供電單元4208提供電力予微處理單元4202、無線通訊單元4206電力,同時選擇性地提供電力予儲存單元4204、攝像單元4200內任一或多個影像攝取鏡頭200,以進行特定方位的影像攝取或監控。在待機運作模式下,供電單元4208僅提供無線通訊單元4206電力以進行喚醒機制。上述運作模式切換可藉由微處理單元4202與行動裝置41之中央處理模組4103所發出之控制指令聯動實現,透過不同運作模式節省供電的輸出,以達到有效延長全景景象拍攝裝置42運作時限之功效,但本發明並不對全景景象拍攝裝置42的運作模式種類加以限制。
請繼續參閱第5圖,在行動裝置41中,觸控顯示模組4101、中央處理模組4103、無線通訊模組4109、記憶模組4105彼此之間是以傳輸介面4111互相電性及通訊連接,中央處理模組4103又進一步和動作感測模組4107電性連接,記憶模組4105則進一步具有應用程式220。其中,觸控顯示模組4101,接收使用戶的滑動、點擊、拖曳等手勢所產生的觸控訊號後產生控制信號,用以控制中央處理模組4103產生對應控制指令,如:選取特定鏡頭進行監控、拍攝影像、錄製影像,或瀏覽全景景象。此外,觸控顯示模組4101更用以顯示全景景象拍攝裝置42所拍攝之影像。記憶模組4105,是用以儲存全景景象資料,及提供中央處理模組4103所需的程式,其中,在記憶模組4105中的應用程式220包含用以合成自全景景象拍攝裝置42接收之複數具定位資訊 之影像,定位資訊可包含方位資訊或拍攝視角範圍等資訊,並進一步形成一具定位資訊之全景景象,使用者可藉由這些資訊將各個影像銜接成一全景景象並實現一全景景象之體感瀏覽。應用程式220之執行可使中央處理模組4103依據全景景象之所有部分影像之視角範圍資訊,在觸控顯示模組4101上呈現一特定瀏覽視角範圍之全景景象,例如左右瀏覽視角範圍為200度、上下瀏覽視角範圍為100度,相同於或小於全景景象拍攝裝置42之任一影像攝取鏡頭200所拍攝之任一拍攝視角範圍,並藉由動作感測模組4107偵測行動裝置41的狀態,進而控制全景景象於行動裝置41上的瀏覽視角範圍,使得使用者於瀏覽全景景象時,就好像自身被全景景象所包圍住,當使用者將其行動裝置41往右移動時,即可將視角範圍向右延伸,當使用者將行動裝置41往左移動時,即可將視角範圍向左延伸,且瀏覽視角範圍的變化等同於頭戴式全景景象拍攝裝置42之任一影像攝取鏡頭200所拍攝之影像的拍攝視角範圍變化。如此一來,即可達到處理全景景象的體感瀏覽目的。
動作感測模組4107是用以偵測行動裝置41之狀態因用戶施加外力而產生之變化,包含加速度、角速度、旋轉角度及X軸、Y軸、Z軸之重力分量等變化,並提供一感應訊號給中央處理模組4103,使中央處理模組4103對行動裝置41發出對應的控制訊號。其中,動作感測模組4107進一步包含了加速度計、重力感測器和陀螺儀等偵測元件,以偵測用戶轉動、晃動或移動行動裝置41等位置、姿勢、方位變化態樣,但本發明不限定動作感測模組4107所具有的偵測器種類。無線通訊模組4109,是用以傳送中央處理模組4103之控制指令至全景景象拍攝裝置42之無線通訊單元4206,並由無線通訊單元4206接收全景景象資料。中央處理模組4103,是用以對全景景象拍攝裝置42中微處理單元4202發出控制指令,並能處理自全景景象拍攝裝置42所攝取之複數影像,進而將複數影像合成全景景象;中央處理模組4103也能 搭配接收動作感測模組4107之感應訊號來聯動執行記憶模組4105內之應用程式220,進而調整全景景象瀏覽區的視角範圍。
接著,請一併參閱第6圖及第7圖,分別為執行本發明之全景景象拍攝及瀏覽系統40之行動裝置41之應用程式220時的第一瀏覽狀態示意圖及第二瀏覽狀態示意圖。如第6圖所示,當執行全景景象拍攝及瀏覽系統40之行動裝置41之應用程式220瀏覽全景景象500時,可在如第5圖所示行動裝置41的觸控顯示模組4101上顯示全景景象500之一瀏覽視角範圍視景502,瀏覽視角範圍視景502之座標範圍是依據頭戴式全景景象拍攝裝置42所拍攝之影像的定位資訊所得。當行動裝置41的動作感測模組4107感測到行動裝置41向左方移動的狀態時,便如第7圖所示,觸控顯示模組4101會顯示全景景象500之另一瀏覽視角範圍視景502a,其中,瀏覽視角範圍視景502a相對瀏覽視角範圍視景502為向逆時針方向移動,且偏轉的角度能與行動裝置41向左移動的感測量相對應。
此外,藉由擴充全景景象拍攝裝置42之攝像鏡頭可達成3D全景景象拍攝瀏覽功能。在一實施方式中,複數攝像頭可為4個視角120度超廣角鏡頭,其配置方式採各鏡頭左右兩側視角。在如第4圖所示的實施方式中,全景景象拍攝裝置42中配置攝像鏡頭200,搭配上述全景景象拍攝瀏覽系統40,可使用戶產生三維視角直觀體感。
接著,請參閱第8圖,為本發明之使用全景景象拍攝裝置42進行全景景象拍攝及瀏覽的方法流程圖。參照第8圖,使用全景景象拍攝裝置30的全景景象拍攝及瀏覽方法,流程依序如下:
步驟6000:影像攝取鏡頭200定位設定。其中,使用者藉由如第5圖所示的行動裝置41中之觸控顯示模組4101觀看全景景象拍攝裝置42之各攝像鏡頭所監控之畫面,藉以設定各攝像鏡頭對應使用者自身觀測方位資訊。例如:請參照第3圖以及第9圖之全景景象拍 攝及瀏覽系統之拍攝裝置的視角範圍示意圖,全景景象拍攝裝置42之複數影像攝取鏡頭200依據使用者分別自影像攝取鏡頭200a~d所觀測到的複數景物900之間的方位關係設定為影像攝取鏡頭200a(攝取前方畫面)、影像攝取鏡頭200b(攝取左方畫面)、影像攝取鏡頭200c(攝取後方畫面)以及影像攝取鏡頭200d(攝取右方畫面)。
步驟6002:利用拍攝裝置對拍攝不同方位的數位影像並取得定位資訊。利用一全景景象拍攝裝置42之影像攝取鏡頭對一全景景象拍攝不同方位的數位影像,經由攝像單元4200取得影像,影像經類比轉換數位轉換器處理成為數位影像資料,數位影像資料會暫存於儲存單元4204。同時,利用這些影像攝取鏡頭200取得這些數位影像資料的定位資訊,定位資訊包含拍攝視角範圍資訊及前述步驟6000之複數影像攝取鏡頭200的方位資訊。請參照第9圖所示:影像攝取鏡頭200a之視角範圍901為全景景象視角範圍中300度至60度視角區域,影像攝取鏡頭200b之視角範圍903為全景景象視角範圍中30度至150度視角區域,影像攝取鏡頭200c之視角範圍905為全景景象視角範圍中120度至240度視角區域,影像攝取鏡頭200d之視角範圍907為全景景象視角範圍中210度至330度視角區域。以影像攝取鏡頭200a、b的視角範圍為例可知,影像攝取鏡頭200a、b間,有全景景象視角範圍中30~60度的重疊視角範圍;上述影像攝取鏡頭200a~d的視角範圍以及重疊視角範圍等定位資訊,乃用於後續複數數位影像資料邊緣疊合之全景景象合成。
步驟6004:嵌入定位資訊。微處理單元4202將儲存單元4204內所儲存之複數影像攝取鏡頭200取得之複數數位影像資料,依據前述使用者對影像攝取鏡頭200a~d對應使用者自身觀測方位資訊之定位設定,將影像攝取鏡頭200a~d包含拍攝視角範圍資訊及對應使用者自身觀測方位資訊(例如:前方、左方、後方、右方畫面鏡頭分 別設定為1號、2號、3號、4號,以方便後續全景景象合成作業)之定位資訊分別對應嵌入各數位影像資料。
步驟6006:傳送內嵌定位資訊之數位影像資料至行動裝置。透過微處理單元4202的控制,將儲存在儲存單元4204的內嵌定位資訊之數位影像資料經由無線通訊單元4206傳送至行動裝置41。
步驟6008:行動裝置41接收內嵌定位資訊之數位影像資料。行動裝置41中無線通訊模組4109接收由全景景象拍攝裝置42之無線通訊單元4206所傳輸之內嵌定位資訊之數位影像資料,中央處理模組4103將之儲存於記憶模組4105。
步驟6010:行動裝置41合成具定位資訊之全景景象,並將全景景象顯示於行動裝置41上。行動裝置41之中央處理模組4103藉由記憶模組4105之應用程式220合成多個上述內嵌定位資訊之數位影像資料,產生一具有一定位資訊,特別是拍攝視角範圍資訊之全景景象。如第6圖所示的全景景象500,應用程式220處理全景景象體感瀏覽之功能,在觸控顯示單元模組4101呈現一固定前方視角範圍之全景景象500之一視角範圍視景502。全景景象500之一視角範圍視景502之座標範圍是依據全景景象拍攝裝置42所拍攝之影像的定位資訊特別是拍攝視角範圍資訊所得。
步驟6012:行動裝置41感測自身狀態的變化,並顯示全景景象之不同視角範圍視景。行動裝置41之中央處理模組4103藉由動作感測模組4107中所包含的偵測器,感知行動裝置41因受用戶施加外力所產生的狀態變化,其包含行動裝置41之加速度、角速度、旋轉角度或X軸、Y軸、Z軸之重力分量等狀態訊號變化。其偵測模式可包含用戶轉動、晃動或移動行動裝置41狀態等位置、姿勢、方位變化態樣,藉由動作感測模組4107內含之類比數位轉換器產生數位感應訊號。此外,行動裝置41之中央處理模組4103,藉由動作感測模組4107 所提供之數位感應訊號,藉由記憶模組4105中包含之應用程式220中位移計算函式,用以計算全景景象500之一視角範圍視景502之中心座標移動數值。此外,行動裝置41之中央處理模組4103,藉由記憶模組4105中包含之應用程式220實施全景景象500體感瀏覽功能,依據上述所得之中心座標移動數值,使全景景象500之一視角範圍視景502產生對應移動,得以瀏覽全景景象500之另一視角範圍視景502a,使用戶產生直觀體感。
雖然本發明以前述之較佳實施例揭露如上,然其並非用以限定本發明,任何熟習相像技藝者,在不脫離本發明之精神和範圍內,當可作些許之更動與潤飾,因此本發明之專利保護範圍須視本說明書所附之申請專利範圍所界定者為準。
40‧‧‧全景景象拍攝及瀏覽系統
41‧‧‧行動裝置
4101‧‧‧觸控顯示模組
4103‧‧‧中央處理模組
4105‧‧‧記憶模組
220‧‧‧應用程式
4107‧‧‧動作感測模組
4109‧‧‧無線通訊模組
4111‧‧‧傳輸介面
24‧‧‧通訊連結
42‧‧‧全景景象拍攝裝置
4200‧‧‧攝像單元
4202‧‧‧微處理單元
4204‧‧‧儲存單元
4206‧‧‧無線通訊單元
4208‧‧‧供電單元
4210‧‧‧控制傳輸介面

Claims (20)

  1. 一種行動裝置,適於與一拍攝裝置通訊連結,用以拍攝及瀏覽全景景象,該拍攝裝置具有一供電單元,用以提供該拍攝裝置運作所需的電力,其運作模式包含正常、省電和待機模式,該行動裝置包含:一觸控顯示模組;一記憶模組;一動作感測模組,偵測該行動裝置的一狀態;及一中央處理模組,利用一傳輸介面連結該觸控顯示模組與該記憶模組,並電性連接該動作感測模組,該中央處理模組執行該記憶模組中一應用程式,依據該拍攝裝置所擷取之複數個部分影像及對應於該些部分影像之一定位資訊,產生一合成的全景景象,且依據該行動裝置之該狀態,顯示該合成的全景景象於該觸控顯示模組的一瀏覽視角範圍。
  2. 如申請專利範圍第1項所述之行動裝置,其中,該拍攝裝置具有複數個影像攝取鏡頭。
  3. 如申請專利範圍第2項所述之行動裝置,其中,該些影像攝取鏡頭固定於一適於配戴於人體頭部上之載體上。
  4. 如申請專利範圍第1項所述之行動裝置,其中,該拍攝裝置更包含一微處理單元,產生分別對應於該些部分影像之該定位資訊,該定位資訊至少包含一拍攝視角範圍。
  5. 如申請專利範圍第4項所述之行動裝置,其中,該合成的全景景象於該觸控顯示模組上的該瀏覽視角範圍等於或小於該拍攝視角範圍。
  6. 如申請專利範圍第1項所述之行動裝置,更包含:一無線通訊模組,藉由一無線通訊方式建立通訊連結,該無線通訊方式符合藍牙、低功耗藍牙、無線相容性認證或第三代行動通訊規範。
  7. 如申請專利範圍第1項所述之行動裝置,其中,該動作感測模組至少包含一加速度計、一重力感測器或一陀螺儀,且該行動裝置之該狀態為包含加速度變化、角速度變化或X軸、Y軸、Z軸之重力分量變化。
  8. 一種全景景象拍攝及瀏覽系統,包含:一拍攝裝置,至少具有複數個影像攝取鏡頭,該些影像攝取鏡頭分別拍攝一部分影像,且該拍攝裝置產生對應於該些部分影像的一定位資訊,該拍攝裝置還具有一供電單元,用以提供該拍攝裝置運作所需的電力,其運作模式包含正常、省電和待機模式;及一行動裝置,至少具有一動作感測模組,並與該拍攝裝置間具有一通訊連結以控制該拍攝裝置,該動作感測模組偵測該行動裝置的一狀態;其中,該行動裝置接收該些部分影像及該定位資訊,依據該些部分影像及該定位資訊產生一合成的全景景象,且依據該狀態,顯示該合成的全景景象於該行動裝置的一瀏覽視角範圍。
  9. 如申請專利範圍第8項所述之全景景象拍攝及瀏覽系統,其中該些影像攝取鏡頭固定於一適於配戴於人體頭部之載體上。
  10. 如申請專利範圍第8項所述之全景景象拍攝及瀏覽系統,其中該定位資訊至少包含一拍攝視角範圍。
  11. 如申請專利範圍第10項所述之全景景象拍攝及瀏覽系統,其中,該合成的全景景象於該行動裝置上的該瀏覽視角範圍等於或小於該拍攝視角範圍。
  12. 如申請專利範圍第10項所述之全景景象拍攝及瀏覽系統,其中,該拍攝視角範圍為60至220度。
  13. 如申請專利範圍第8項所述之全景景象拍攝及瀏覽系統,其中,該合成的全景景象於該行動裝置上的該瀏覽視角範圍之上下視角範圍為60至120度。
  14. 如申請專利範圍第8項所述之全景景象拍攝及瀏覽系統,其中該動作感測模組至少包含一加速度計、一重力感測器或一陀螺儀,且該狀態包含加速度變化、角速度變化或X軸、Y軸、Z軸之重力分量變化。
  15. 如申請專利範圍第8項所述之全景景象拍攝及瀏覽系統,其中該行動裝置與該拍攝裝置間係藉由一無線通訊方式建立該通訊連結。
  16. 如申請專利範圍第15項所述之全景景象拍攝及瀏覽系統,其中該無線通訊方式符合藍牙、低功耗藍牙、無線相容性認證或第三代行動通訊規範。
  17. 一種全景景象拍攝及瀏覽方法,適用於一行動裝置,該行動裝置與一拍攝裝置通訊連結,該拍攝裝置還具有一供電單元,用 以提供該拍攝裝置運作所需的電力,其運作模式包含正常、省電和待機模式,該方法包含下列步驟:拍攝複數個不同方位的影像,且取得分別對應於該些影像的一定位資訊;依據該定位資訊,合成該些影像為一全景景象;及顯示該全景景象於該行動裝置,並依據該行動裝置的一狀態,顯示該全景景象之一瀏覽視角範圍。
  18. 如申請專利範圍第17項所述之全景景象拍攝及瀏覽方法,其中該定位資訊至少包含一拍攝視角範圍。
  19. 如申請專利範圍第18項所述之全景景象拍攝及瀏覽方法,其中該瀏覽視角範圍等於或小於該拍攝視角範圍。
  20. 如申請專利範圍第17項所述之全景景象拍攝及瀏覽方法,其中該狀態包含加速度變化、角速度變化或X軸、Y軸、Z軸之重力分量變化。
TW103120431A 2014-03-21 2014-06-13 全景景象拍攝及瀏覽之行動裝置、系統及方法 TWI539810B (zh)

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201410108443.2A CN103841332B (zh) 2014-03-21 2014-03-21 全景景象拍摄及浏览的移动装置、系统及方法

Publications (2)

Publication Number Publication Date
TW201537977A TW201537977A (zh) 2015-10-01
TWI539810B true TWI539810B (zh) 2016-06-21

Family

ID=50804429

Family Applications (1)

Application Number Title Priority Date Filing Date
TW103120431A TWI539810B (zh) 2014-03-21 2014-06-13 全景景象拍攝及瀏覽之行動裝置、系統及方法

Country Status (3)

Country Link
US (1) US9635254B2 (zh)
CN (2) CN103841332B (zh)
TW (1) TWI539810B (zh)

Families Citing this family (33)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN104471519B (zh) 2014-06-16 2020-09-25 华为技术有限公司 移动终端中呈现全景照片的方法和装置、以及移动终端
CN104065952A (zh) * 2014-07-02 2014-09-24 联想(北京)有限公司 穿戴式电子设备和图像处理方法
US9936128B2 (en) * 2015-05-20 2018-04-03 Google Llc Automatic detection of panoramic gestures
US9824723B1 (en) * 2015-08-27 2017-11-21 Amazon Technologies, Inc. Direction indicators for panoramic images
US9934823B1 (en) * 2015-08-27 2018-04-03 Amazon Technologies, Inc. Direction indicators for panoramic images
TWI601426B (zh) * 2015-11-27 2017-10-01 樹德科技大學 立體環景影像之監控系統
CN105681632B (zh) * 2015-12-31 2019-06-28 深圳市华途数字技术有限公司 多目摄像机及其帧同步的方法
CN105657370A (zh) * 2016-01-08 2016-06-08 李昂 一种封闭性的可穿戴全景摄像与处理系统及其操作方法
US20170243384A1 (en) * 2016-02-19 2017-08-24 Mediatek Inc. Image data processing system and associated methods for processing panorama images and image blending using the same
US10839601B2 (en) * 2016-03-31 2020-11-17 Sony Corporation Information processing device, information processing method, and program
US10136058B2 (en) 2016-07-27 2018-11-20 Shakil Hussain Virtual presence device, system, and method
US10547776B2 (en) 2016-09-23 2020-01-28 Apple Inc. Devices, methods, and graphical user interfaces for capturing and recording media in multiple modes
CN107872615B (zh) * 2016-09-28 2024-02-09 刘辉 全景扫描监控系统
US10339627B2 (en) 2016-10-10 2019-07-02 Gopro, Inc. Apparatus and methods for the optimal stitch zone calculation of a generated projection of a spherical image
KR102598082B1 (ko) * 2016-10-28 2023-11-03 삼성전자주식회사 영상 표시 장치, 모바일 장치 및 그 동작방법
CN106357966A (zh) * 2016-11-01 2017-01-25 乐视控股(北京)有限公司 全景图像拍摄装置及全景图像获取方法
CN106603908A (zh) * 2016-11-16 2017-04-26 惠州Tcl移动通信有限公司 全景拍摄装置及终端
CN108121146B (zh) * 2016-11-30 2024-02-09 北京弘益鼎视科技发展有限公司 全景扫描装置
KR102656425B1 (ko) * 2016-12-07 2024-04-12 삼성전자주식회사 영상을 표시하는 전자 장치 및 방법
CN107124544A (zh) * 2017-03-31 2017-09-01 北京疯景科技有限公司 全景拍摄装置及方法
CN109819157A (zh) * 2017-11-20 2019-05-28 富泰华工业(深圳)有限公司 全景摄像机及其控制方法
WO2019113935A1 (zh) * 2017-12-15 2019-06-20 李昂 一种封闭性的可穿戴全景摄像与处理系统及其操作方法
CN108234960A (zh) * 2018-02-08 2018-06-29 广东雷洋智能科技股份有限公司 应用于家庭服务机器人的全景监控方法
CN110913119A (zh) * 2018-09-17 2020-03-24 北京松果电子有限公司 视频拍摄的控制方法、装置、视频终端以及存储介质
US11340709B2 (en) 2018-10-18 2022-05-24 Hewlett-Packard Development Company, L.P. Relative gestures
CN109995980B (zh) * 2019-04-16 2023-10-31 南京喵星科技有限公司 一种基于移动通信网络的单镜头车载全景行车记录系统
CN111917904B (zh) * 2019-05-10 2022-05-06 深圳富泰宏精密工业有限公司 控制方法及电子装置
CN110209001A (zh) * 2019-06-04 2019-09-06 上海亦我信息技术有限公司 一种用于3d建模的三脚支架及相机拍摄姿态识别方法
CN110381306A (zh) * 2019-07-23 2019-10-25 深圳移动互联研究院有限公司 一种球形三维全景成像系统
TWI735237B (zh) 2020-05-22 2021-08-01 茂傑國際股份有限公司 360度全景影像選擇顯示之攝影機及方法
CN112835084B (zh) * 2021-01-05 2022-02-11 中国电力科学研究院有限公司 基于电力网络场景的电力设备定位方法、系统及电力设备
CN115484377B (zh) * 2021-06-15 2023-08-29 杭州海康威视数字技术股份有限公司 用于场景的全景成像的摄像机
CN113271398A (zh) * 2021-05-12 2021-08-17 江苏海洋大学 一种发带式超高清运动全景vr摄像机

Family Cites Families (12)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2010256534A (ja) * 2009-04-23 2010-11-11 Fujifilm Corp 全方位画像表示用ヘッドマウントディスプレイ装置
US9128281B2 (en) * 2010-09-14 2015-09-08 Microsoft Technology Licensing, Llc Eyepiece with uniformly illuminated reflective display
JP2011205573A (ja) * 2010-03-26 2011-10-13 Sony Corp 制御装置、カメラシステム及びプログラム
CN102207674A (zh) * 2010-03-30 2011-10-05 鸿富锦精密工业(深圳)有限公司 全景图像拍摄装置及方法
CN101872243B (zh) * 2010-06-13 2012-10-10 上海杰图软件技术有限公司 一种实现跟随现实空间方向的360°全景播放系统及其方法
CN201773251U (zh) 2010-07-15 2011-03-23 上海丽宝数码技术有限公司 全景环摄台
CN101958891A (zh) * 2010-09-01 2011-01-26 上海杰图房网信息科技有限公司 利用便携式拍摄设备构建房产全景展示的系统和方法
US8576276B2 (en) * 2010-11-18 2013-11-05 Microsoft Corporation Head-mounted display device which provides surround video
CN102831816B (zh) * 2012-08-17 2014-11-19 深圳先进技术研究院 一种提供实时场景地图的装置
CN103177472B (zh) * 2012-09-20 2015-10-07 深圳市金立通信设备有限公司 一种三维全景照片合成显示系统及方法
CN103118230B (zh) * 2013-02-28 2016-06-22 腾讯科技(深圳)有限公司 一种全景图像采集方法、装置以及系统
CN103647955B (zh) * 2013-12-31 2017-06-16 英华达(上海)科技有限公司 头戴式影像摄录像装置及其系统

Also Published As

Publication number Publication date
CN109040600A (zh) 2018-12-18
TW201537977A (zh) 2015-10-01
CN103841332B (zh) 2018-10-12
US9635254B2 (en) 2017-04-25
CN103841332A (zh) 2014-06-04
US20150271402A1 (en) 2015-09-24
CN109040600B (zh) 2021-03-30

Similar Documents

Publication Publication Date Title
TWI539810B (zh) 全景景象拍攝及瀏覽之行動裝置、系統及方法
US11189055B2 (en) Information processing apparatus and method and program
JP6678122B2 (ja) 画像処理装置、画像処理方法及び画像処理プログラム
US10924641B2 (en) Wearable video camera medallion with circular display
JP6205072B2 (ja) 撮像制御装置、撮像制御方法、カメラ、カメラシステム及びプログラム
JP5659304B2 (ja) 画像生成装置および画像生成方法
US9332208B2 (en) Imaging apparatus having a projector with automatic photography activation based on superimposition
WO2020238380A1 (zh) 全景拍摄方法及终端设备
US10999480B2 (en) Methods for camera movement compensation
WO2013069049A1 (ja) 画像生成装置および画像生成方法
CA3040824A1 (en) Information processing terminal
JP6452440B2 (ja) 画像表示システム、画像表示装置、画像表示方法、およびプログラム
WO2013069048A1 (ja) 画像生成装置および画像生成方法
CN108881733A (zh) 一种全景拍摄方法及移动终端
CN109348020A (zh) 一种拍照方法及移动终端
WO2021026789A1 (zh) 基于手持云台的拍摄方法、手持云台及存储介质
CN113645410B (zh) 图像采集方法、设备及机器可读存储介质
WO2015194084A1 (ja) 情報処理装置、情報処理システム、情報処理方法およびプログラム
JP2020198516A (ja) 撮像装置、画像処理方法、プログラム
CN108881721A (zh) 一种显示方法及终端
WO2022061541A1 (zh) 控制方法、手持云台、系统及计算机可读存储介质
WO2013136602A1 (ja) プロジェクタ付き撮影装置及びその撮影制御方法
EP3520071B1 (en) Consistent spherical photo and video orientation correction
CN113784018A (zh) 可折叠显示取景器用户界面
CN109361860A (zh) 一种终端设备控制方法及终端设备

Legal Events

Date Code Title Description
MM4A Annulment or lapse of patent due to non-payment of fees