TWM635659U - Immersive Streaming Video Capture and Imaging Device - Google Patents
Immersive Streaming Video Capture and Imaging Device Download PDFInfo
- Publication number
- TWM635659U TWM635659U TW111207003U TW111207003U TWM635659U TW M635659 U TWM635659 U TW M635659U TW 111207003 U TW111207003 U TW 111207003U TW 111207003 U TW111207003 U TW 111207003U TW M635659 U TWM635659 U TW M635659U
- Authority
- TW
- Taiwan
- Prior art keywords
- image
- module
- image capture
- capture module
- capturing
- Prior art date
Links
Images
Landscapes
- Closed-Circuit Television Systems (AREA)
- Endoscopes (AREA)
Abstract
一種沉浸式串流影像擷取與成像之裝置,其透過第一影像擷取模組所擷取之包含拍攝目標的偵測影像判斷距離參數後,依據距離參數及各第二影像擷取模組與第一影像擷取模組間之裝置距離分別計算各第二影像擷取模組的轉動角度,並依據各轉動角度控制各第二影像擷取模組轉動後,生成包含第一影像擷取模組與各第二影像擷取模組同步產生之第一影像串流與各第二影像串流的串流組合之技術手段,可以達成降低架設提供多拍攝角度之串流媒體之環境的複雜度及降低架設者困擾的技術功效。 An immersive streaming image capture and imaging device, which judges the distance parameter through the detection image including the shooting target captured by the first image capture module, and then according to the distance parameter and each second image capture module Calculate the rotation angle of each second image capture module separately from the device distance between the first image capture module, and control the rotation of each second image capture module according to each rotation angle to generate The technical means of combining the first video stream and the second video streams synchronously generated by the module and the second video capture modules can reduce the complexity of setting up the streaming media environment that provides multiple shooting angles The technical effect of reducing the speed and reducing the trouble of the builder.
Description
一種影像擷取與成像裝置,特別係指一種沉浸式串流影像擷取與成像之裝置。 An image capture and imaging device, especially an immersive streaming image capture and imaging device.
隨著硬體技術的進步與網路頻寬的提升,透過網際網路傳遞影音內容也越來越普及。目前,透過網際網路傳遞影音內容的方式主要使用串流媒體或媒體檔案等方式,其中,媒體檔案的方式即為將下載的影音內容完整儲存為檔案後再播放,串流媒體則是在下載影音內容的同時播放影音內容且通常不儲存下載的影音內容。 With the advancement of hardware technology and the improvement of network bandwidth, the transmission of audio and video content through the Internet is becoming more and more popular. At present, the methods of transmitting video and audio content through the Internet mainly use streaming media or media files. Among them, the method of media files is to store the downloaded audio and video content as a file before playing, and streaming media is to download The audiovisual content is played simultaneously with the audiovisual content and the downloaded audiovisual content is usually not stored.
串流媒體通常被使用在影音點播、網路電視、視訊通話、直播等場合,其中,目前視訊通話與直播的環境大多是通話者或直播者使用一個影像擷取裝置產生影音串流並將所產生的影音串流透過網際網路傳遞給其他通話者或直播觀眾,因此,在通話或直播過程中,其他通話者或直播觀眾只能由同一個拍攝角度觀看到通話者或直播者,若要需要以多個不同的拍攝角度進行通話或直播,通話者或直播者需要架設多個影像擷取裝置並以多個不同的頻道進行通話或直播,其他通話者或直播觀眾也需要切換頻道才能觀看到不同拍攝角度的畫面,如此,除了造成通話者或直播者在架設通話/直播環境的複雜度與困擾外,其他通話者或直播觀眾切換觀看的拍攝角度也不方便。 Streaming media is usually used in video-on-demand, Internet TV, video calls, live broadcasts, etc. Among them, the current environment of video calls and live broadcasts is mostly that the caller or live broadcaster uses an image capture device to generate video and audio streams. The generated video stream is transmitted to other callers or live viewers through the Internet. Therefore, during the call or live broadcast, other callers or live viewers can only watch the caller or live broadcast from the same camera angle. If you want It is necessary to conduct calls or live broadcasts from multiple different shooting angles. The caller or live broadcaster needs to set up multiple image capture devices and conduct calls or live broadcasts on multiple different channels. Other callers or live broadcast viewers also need to switch channels to watch In this way, in addition to the complexity and troubles of the caller or live broadcaster in setting up the call/live broadcast environment, it is also inconvenient for other callers or live broadcast viewers to switch viewing angles.
綜上所述,可知先前技術中長期以來一直存在架設提供多拍攝角度之串流媒體之環境容易造成被拍攝者困擾的問題,因此有必要提出改進的技術手段,來解決此一問題。 To sum up, it can be seen that there has been a problem in the prior art for a long time that setting up a streaming media environment that provides multiple shooting angles is likely to cause confusion to the photographer. Therefore, it is necessary to propose improved technical means to solve this problem.
有鑒於先前技術存在架設提供多拍攝角度之串流媒體之環境容易造成被拍攝者困擾的問題,本創作遂揭露一種沉浸式串流影像擷取與成像之裝置,其中: In view of the problem in the prior art that setting up a streaming media environment that provides multiple shooting angles is likely to cause confusion to the photographer, this creation discloses an immersive streaming video capture and imaging device, in which:
本創作所揭露之沉浸式串流影像擷取與成像之裝置,至少包含:第一影像擷取模組,用以擷取包含一拍攝目標之一第一偵測影像,及用以擷取包含該拍攝目標之第一目標影像以產生一第一影像串流;多個第二影像擷取模組,每一該第二影像擷取模組用以與該第一影像擷取模組同步擷取第二目標影像以分別產生多個第二影像串流;控制模組,用以依據該第一偵測影像判斷一距離參數,及用以依據該距離參數及各該第二影像擷取模組與該第一影像擷取模組間之一裝置距離分別計算與各該第二影像擷取模組對應之各轉動角度,並依據各該轉動角度控制各該第二影像擷取模組轉動;成像模組,用以生成一串流組合,該串流組合包含該第一影像串流及該些第二影像串流。 The immersive streaming image capture and imaging device disclosed in this creation at least includes: a first image capture module, used to capture a first detection image including a shooting target, and used to capture a first detection image including a shooting target The first target image of the shooting target is used to generate a first image stream; a plurality of second image capture modules, each of the second image capture modules is used to capture synchronously with the first image capture module The second target image is taken to generate a plurality of second image streams respectively; the control module is used to judge a distance parameter according to the first detection image, and is used to judge a distance parameter according to the distance parameter and each of the second image capture modules A device distance between the group and the first image capture module calculates the rotation angles corresponding to each of the second image capture modules, and controls the rotation of each of the second image capture modules according to the rotation angles ; The imaging module is used to generate a stream combination, the stream combination includes the first video stream and the second video streams.
本創作所揭露之裝置如上,與先前技術之間的差異在於本創作透過第一影像擷取模組所擷取之包含拍攝目標的偵測影像判斷距離參數後,依據距離參數及各第二影像擷取模組與第一影像擷取模組間之裝置距離分別計算各第二影像擷取模組的轉動角度,並依據各轉動角度控制各第二影像擷取模組轉動後,生成包含第一影像擷取模組與各第二影像擷取模組同步產生之第一影像 串流與各第二影像串流的串流組合,藉以解決先前技術所存在的問題,並可以達成降低架設多拍攝角度之視訊環境的技術功效。 The device disclosed in this creation is as above, and the difference between it and the prior art is that this creation judges the distance parameter based on the detection image including the shooting target captured by the first image capture module, and then according to the distance parameter and each second image The device distance between the capture module and the first image capture module calculates the rotation angle of each second image capture module respectively, and controls the rotation of each second image capture module according to each rotation angle to generate A first image generated synchronously by an image capture module and each second image capture module The combination of the stream and the streams of the second image streams solves the problems in the prior art, and achieves the technical effect of reducing the video environment with multiple shooting angles.
100:裝置 100: device
110:第一影像擷取模組 110: The first image capture module
120:第二影像擷取模組 120: Second image capture module
121~124:第二影像擷取模組 121~124: The second image capture module
130:第三影像擷取模組 130: The third image capture module
150:控制模組 150: Control module
160:成像模組 160: Imaging module
170:通訊模組 170: Communication module
190:顯示模組 190: display module
210:拍攝目標 210: shooting target
250:顯示裝置 250: display device
311:目標距離 311: target distance
321~324:裝置距離 321~324: Device distance
331~334:轉動角度 331~334: rotation angle
400:影格 400: frame
411~455:像素區域 411~455: pixel area
步驟510:第一影像擷取模組擷取包含拍攝目標之第一偵測影像 Step 510: The first image capture module captures the first detection image including the shooting target
步驟520:依據第一偵測影像產生距離參數 Step 520: Generate distance parameters according to the first detected image
步驟530:依據距離參數及各第二影像擷取模組與第一影像擷取模組之裝置距離分別計算各第二影像擷取模組之轉動角度 Step 530: Calculate the rotation angle of each second image capture module according to the distance parameter and the device distance between each second image capture module and the first image capture module
步驟540:依據各轉動角度控制各第二影像擷取模組向第一影像擷取模組轉動 Step 540: Control each second image capture module to rotate toward the first image capture module according to each rotation angle
步驟550:第一影像擷取模組擷取包含拍攝目標之第一目標影像以產生第一影像串流及第二影像擷取模組與第一影像擷取模組同步擷取第二目標影像以產生第二影像串流 Step 550: The first image capture module captures the first target image including the shooting target to generate the first video stream and the second image capture module captures the second target image synchronously with the first image capture module to generate the second video stream
步驟560:生成包含第一影像串流與第二影像串流之串流組合 Step 560: Generate a stream combination including the first video stream and the second video stream
步驟570:傳送串流組合至顯示裝置,顯示裝置顯示第一影像串流與第二影像串流至少其中之一 Step 570: Send the combination of streams to the display device, and the display device displays at least one of the first video stream and the second video stream
第1圖為本創作所提之沉浸式串流影像擷取與成像之系統架構圖。 Figure 1 is a system architecture diagram of the immersive streaming video capture and imaging proposed in this creation.
第2圖為本創作所提之沉浸式串流影像擷取與成像之裝置之元件示意圖。 Figure 2 is a schematic diagram of the components of the immersive streaming video capture and imaging device proposed in this creation.
第3圖為本創作實施例所提之轉動角度之示意圖。 Fig. 3 is a schematic diagram of the rotation angle mentioned in the embodiment of the invention.
第4圖為本創作實施例所提之串流組合之影格之示意圖。 Figure 4 is a schematic diagram of the video frame of the streaming combination mentioned in the embodiment of the invention.
第5圖為本創作所提之沉浸式串流影像擷取與成像之流程圖。 Figure 5 is a flowchart of the immersive streaming video capture and imaging proposed in this creation.
以下將配合圖式及實施例來詳細說明本創作之特徵與實施方式,內容足以使任何熟習相關技藝者能夠輕易地充分理解本創作解決技術問題所應用的技術手段並據以實施,藉此實現本創作可達成的功效。 The features and implementation methods of this creation will be described in detail below in conjunction with the drawings and embodiments. The content is sufficient to enable anyone familiar with the relevant arts to easily and fully understand the technical means used by this creation to solve technical problems and implement them accordingly, thereby realizing The effect that this creation can achieve.
本創作可以控制裝置內的多個影像擷取模組轉向特定的目標並控制各個影像擷取模組產生同步的影像串流,並可以將各個影像擷取模組所產生之同步的影像串流組合生成串流組合。 This creation can control multiple image capture modules in the device to turn to a specific target and control each image capture module to generate a synchronous image stream, and can synchronize the image stream generated by each image capture module Combine to generate a streaming mix.
在本創作中,影像擷取模組可以包含第一影像擷取模組、第二影像擷取模組,在部分的實施例中,影像擷取模組還可以包含第三影像擷取模組。其中,第一影像擷取模組與第三影像擷取模組通常只有一個,第二影像擷取模組可以有多個,但本創作並不以上述為限。 In this invention, the image capture module may include a first image capture module and a second image capture module, and in some embodiments, the image capture module may also include a third image capture module . Wherein, there is usually only one first image capture module and the third image capture module, and there may be multiple second image capture modules, but the invention is not limited to the above.
以下先以「第1圖」本創作所提之沉浸式串流影像擷取與成像之系統架構圖及「第2圖」本創作所提之沉浸式串流影像擷取與成像之裝置之元件示意圖來說明本創作的運作。如「第1圖」所示,本創作之裝置100含有第一影像擷取模組110、多個第二影像擷取模組120、控制模組150、成像模組160,及可附加的第三影像擷取模組130、通訊模組170、顯示模組190。其中,裝置100通常是長方體等六面體,但本創作並不以此為限。
The following is the system architecture diagram of the immersive streaming image capture and imaging proposed in "Figure 1" and the components of the immersive streaming image capture and imaging device in "Figure 2". Schematic diagram to illustrate the operation of this creation. As shown in "Fig. 1", the
第一影像擷取模組110與控制模組150及成像模組160電性連接,且第一影像擷取模組110所設置的位置通常與裝置100之殼體的最左側與最右側的距離相同或相近,即第一影像擷取模組110可以設置在裝置100之中央的軸線上,但本創作並不以此為限。
The first
第一影像擷取模組110負責擷取包含拍攝目標210的第一偵測影像。第一影像擷取模組110可以在接收到控制模組150所傳送的偵測訊號時擷取第一偵測影像。一般而言,第一影像擷取模組110可以每隔一定時間接收到一次偵測訊號,也就是說,第一影像擷取模組110可以每隔一定時間擷取一次第一偵測影像。
The first
第一影像擷取模組110也負責擷取包含拍攝目標210之目標影像,並負責產生影像串流(在本創作中,第一影像擷取模組110所擷取之目標影像也被稱為第一目標影像,且第一影像擷取模組110所產生之影像串流也被稱為第一影像串流)。更詳細的,第一影像擷取模組110可以持續擷取第一目標影像,並依照第一目標影像的擷取順序產生包含各個第一目標影像的第一影像串流,也就是產生依序以各第一目標影像為影格(frame)的第一影像串流,其中,第一影像擷取模組110可以在接收到控制模組150所傳送的開拍訊號時開始持續擷
取第一目標影像並產生第一影像串流,也可以在接收到控制模組150所傳送的停拍訊號時停止擷取第一目標影像以結束第一影像串流。
The first
每一個第二影像擷取模組120都與控制模組150及成像模組160電性連接,負責與第一影像擷取模組110同步擷取目標影像,並負責產生影像串流(在本創作中,第二影像擷取模組120所擷取之目標影像也被稱為第二目標影像,且第二影像擷取模組120所產生之影像串流也被稱為第二影像串流)。第二影像擷取模組120可以在第一影像擷取模組110開始擷取第一目標影像的同時開始持續擷取第二目標影像,並依照第二目標影像的擷取順序產生包含各個第二目標影像的第二影像串流,也就是產生依序以各第二目標影像為影格的第二影像串流,其中,第二影像擷取模組120可以在接收到控制模組150所傳送的開拍訊號時開始持續擷取第二目標影像並產生第二影像串流,藉以與第一影像擷取模組110同步擷取目標影像並同步產生影像串流,也可以在接收到控制模組150所傳送的停拍訊號時停止擷取第二目標影像以結束第二影像串流。
Each second
第三影像擷取模組130與控制模組150及成像模組160電性連接,且第三影像擷取模組130通常與第一影像擷取模組110相鄰,即第三影像擷取模組130與第一影像擷取模組110之間通常沒有其他影像擷取模組,但本創作並不以此為限。在部分的實施例中,第三影像擷取模組130與第一影像擷取模組110所設置之位置之連線的中點通常與裝置100之殼體的最左側與最右側的距離相同或相近,即第一影像擷取模組110與第三影像擷取模組130可以設置在裝置100之中央的軸線的兩側,且第一影像擷取模組110與第三影像擷取模組130與裝置100之中央的軸線的距離相同或相近;在某些實施例中,第一影像擷取模組110可以設置在裝置100之中央的軸線上,第三影像擷取模組130可以設置在第一影
像擷取模組的一側,即第三影像擷取模組130可以設置在裝置100之中央的軸線的任一側,但本創作並不以上述為限。
The third
第三影像擷取模組130可以擷取包含拍攝目標210的第二偵測影像。第三影像擷取模組130可以在接收到控制模組150所傳送的偵測訊號時擷取第二偵測影像。一般而言,第三影像擷取模組130可以每隔一定時間接收到一次偵測訊號並擷取一次第三偵測影像。
The third
第三影像擷取模組130也可以與第一影像擷取模組110同步擷取目標影像,並負責產生影像串流(在本創作中,第三影像擷取模組130所擷取之目標影像也被稱為第三目標影像,且第三影像擷取模組130所產生之影像串流也被稱為第三影像串流)。第三影像擷取模組130可以在第一影像擷取模組110開始擷取第一目標影像的同時開始持續擷取第三目標影像,並依照第三目標影像的擷取順序產生包含各個第三目標影像的第三影像串流,也就是產生依序以各第三目標影像為影格的第三影像串流,其中,第三影像擷取模組120可以在接收到控制模組150所傳送的開拍訊號時開始持續擷取第三目標影像並產生第三影像串流,藉以與第一影像擷取模組110同步擷取目標影像並同步產生影像串流,也可以在接收到控制模組150所傳送的停拍訊號時停止擷取第三目標影像以結束第三影像串流。
The third
一般而言,第二影像擷取模組120與第三影像擷取模組130所擷取的目標影像可以包含拍攝目標210,但在部分的實施例中,第二影像擷取模組120與第三影像擷取模組130所擷取的目標影像也可能沒有包含拍攝目標210,本創作沒有特別的限制。
Generally speaking, the target image captured by the second
要說明的是,本創作之影像擷取模組(即第一影像擷取模組110、第二影像擷取模組120、第三影像擷取模組130)可以排列於同一平面,且本創作之影像擷取模組可以直線或弧形排列;本創作之影像擷取模組也可以排列於兩個或兩個以上的多個平面,且排列於同一平面之影像擷取模組可以直線或弧形排列。
It should be noted that the image capture modules of the invention (i.e. the first
控制模組150與影像擷取模組電性連接,可以產生偵測訊號、開拍訊號、與停拍訊號,並可以將所產生的偵測訊號傳送給第一影像擷取模組110與第三影像擷取模組130,及可以將所產生的開拍訊號與停拍訊號傳送給所有的影像擷取模組。
The
一般而言,控制模組150可以在影像擷取模組未產生影像串流時,也就是裝置100啟動後或傳送所產生之停拍訊號給影像擷取模組後,每隔一定時間產生一次偵測訊號並傳送偵測訊號給第一影像擷取模組110(若裝置100包含第三影像擷取模組130則傳送偵測訊號給第一影像擷取模組110與第三影像擷取模組130),直到產生開拍訊號使得影像擷取模組同步產生影像串流時停止產生偵測訊號。
Generally speaking, the
控制模組150也負責依據第一影像擷取模組110所擷取到的第一偵測影像判斷距離參數。其中,控制模組150所判斷之距離參數通常是第一影像擷取模組110與拍攝目標210的距離值(在本創作中也被稱為目標距離),但本創作並不以此為限,例如,距離參數也可以是與第一影像擷取模組110對應的焦距或第一影像擷取模組110中用來擷取影像的透鏡組的位置訊息等。
The
控制模組150可以使用習知之方式由第一偵測影像判斷距離參數,例如,控制模組150可以對第一偵測影像進行影像辨識(如依序進行邊緣偵
測、像素組合、特徵擷取、特徵比對等處理)以辨識第一偵測影像中的特定物體(如人頭、人臉、五官、鈕扣等),並依據所辨識出之特定物體在第一偵測影像中的大小(或像素數)、第一影像擷取模組110擷取第一偵測影像的焦距、與預先記錄之該特定物體的真實大小的範圍以相似三角形的計算式(焦距*特定物體之真實大小/特定物體在第一偵測影像中之大小)計算距離參數的可能範圍;又如,控制模組150可以控制第一影像擷取模組110調整所包含之透鏡組的位置以透過牛頓法判斷距離參數。但本創作由第一偵測影像判斷距離參數之方式並不以上述為限。
The
若裝置100包含第三影像擷取模組130,則控制模組150也可以依據第一影像擷取模組110與第三影像擷取模組130同步擷取之第一偵測影像與第二偵測影像判斷距離參數。控制模組150同樣可以使用三角視差法等習知方式由第一偵測影像與第二偵測影像判斷距離參數,但本創作並不以此為限。
If the
控制模組150也負責依據所判斷出之距離參數及預先建立之各第二影像擷取模組120與第一影像擷取模組110間的距離(在本創作中也被稱為「裝置距離」)分別計算與各第二影像擷取模組120對應的轉動角度,並負責依據所計算出之轉動角度控制各第二影像擷取模組轉動。
The
舉例來說,若如「第3圖」所示,距離參數為第一影像擷取模組110與拍攝目標210間的目標距離311,則控制模組150可以依據目標距離311及第一影像擷取模組110與第二影像擷取模組121間之裝置距離321透過三角函數計算出第二影像擷取模組121的轉動角度331,即轉動角度331為tan-1(裝置距離321/目標距離311);相似的,第二影像擷取模組122~124的轉動角度332~334分別可以
由目標距離311及第一影像擷取模組110與第二影像擷取模組122~124間之裝置距離322~324計算產生。
For example, if the distance parameter is the
成像模組160與影像擷取模組及通訊模組170電性連接,負責生成包含影像擷取模組同步產生之影像串流的串流組合,也就是說,成像模組160所產生的串流組合可以包含第一影像擷取模組110所產生的第一影像串流、第二影像擷取模組120與第一影像擷取模組同步產生的第二影像串流,若裝置100也包含第三影像擷取模組130,則串流組合也可以包含第三影像擷取模組130與第一影像擷取模組同步產生的第三影像串流。
The
更詳細的,成像模組160所產生串流組合也可以是包含多個影格的影像串流,串流組合中的每一個影格可以包含多個像素區塊,且串流組合中所有影格所包含之像素區塊的大小與數量可以都相同,如「第4圖」所示,影格400包含25個像素區塊。串流組合中每個影格的每一個像素區塊包含一個不同影像擷取模組所擷取之目標影像(在本創作中,像素區塊所包含的目標影像也被稱為影像畫面),且串流組合中每一個影格的不同像素區塊為各影像擷取模組同步擷取之目標影像。換句話說,由於各影像擷取模組所產生的影像串流同步,即各個影像擷取模組所產生之影像串流中的目標影像同步,所以成像模組160可以將同步之目標影像分別加入串流組合之同一個影格的不同像素區塊中。
In more detail, the stream combination generated by the
一般而言,串流組合所包含之各個影像串流的目標影像(影像畫面)在串流組合之所有影格中的位置是固定的,也就是說,在串流組合的影格中排列在相同位置之像素區塊所包含的影像畫面都是同一個影像擷取模組所產生之影像串流在不同時間的目標影像(影格)。舉例來說,若第二影像擷取模組124所擷取之第二目標影像被排列在影格400中最左上角的像素區塊411,則在
串流組合的所有影格中,第二影像擷取模組124所擷取之第二目標影像都固定排列在最左上角的像素區塊411。
Generally speaking, the position of the target image (image frame) of each video stream included in the stream combination is fixed in all the frames of the stream combination, that is, they are arranged at the same position in the frames of the stream combination The image frames included in the pixel block are target images (frames) at different times of the image stream generated by the same image capture module. For example, if the second target image captured by the second
需要特別一提的是,串流組合中各個影像串流之目標影像在串流組合的各影格中所對應之像素區塊的位置可以依據各影像串流之擷取角度所決定,也就是說,成像模組160可以依據各影像擷取模組在裝置100中的相對位置或模組識別資料決定各影像擷取模組所擷取之目標影像在串流組合之各影格中像素區塊的位置。舉例來說,若裝置100包含25個影像擷取模組,假設依據影像擷取模組設置在裝置100中之位置由左至右分別為第二影像擷取模組124、…、第二影像擷取模組122、…、第一影像擷取模組110、…、第二影像擷取模組121、…、第二影像擷取模組123,則第二影像擷取模組124所擷取第二目標影像將可以排列在串流組合之影格400中最左上角的像素區塊411,排列在第二影像擷取模組124右側且與第二影像擷取模組124相鄰的影像擷取模組所產生之影像串流中的第二目標影像可以排列在影格400的第一列左邊第二個像素區塊412,依此類推,…,第一影像擷取模組110所擷取的第一目標影像可以排列在串流組合之影格400最中央的像素區塊433,…,排列在第二影像擷取模組123左側且與第二影像擷取模組123相鄰的影像擷取模組所產生之影像串流中的第二目標影像可以排列在影格400的最後一列右邊第二個像素區塊454,第二影像擷取模組123所擷取第二目標影像將可以排列在串流組合之影格400中最右下角的像素區塊455。
What needs to be specially mentioned is that the position of the pixel block corresponding to the target image of each image stream in each frame of the stream combination can be determined according to the capture angle of each image stream, that is to say The
通訊模組170可以與成像模組160及顯示模組190電性連接,也可以透過有線及/或無線通訊技術與顯示裝置250等外部裝置連接,藉以使得裝置
100與外部裝置可以相互傳遞資料或訊號,例如,將成像模組160所產生的串流組合傳送至顯示裝置250,或接收其他通訊裝置所傳送的影音串流等。
The
顯示模組190與通訊模組170電性連接,可以顯示通訊模組170所接收到的影音串流。
The
顯示裝置250可以與通訊模組170連接,並可以接收通訊模組170所傳送的串流組合,及可以顯示所接收到之串流組合中的第一影像串流、特定一個或多個第二影像擷取模組120第二影像串流、及/或第三影像串流,顯示裝置250也可以顯示所有影像串流。
The
接著以一個實施例來解說本創作的運作過程,並請參照「第5圖」本創作所提之沉浸式串流影像擷取與成像之流程圖。 Next, an example is used to explain the operation process of this creation, and please refer to "Figure 5" for the flow chart of the immersive streaming video capture and imaging mentioned in this creation.
在裝置100之使用者啟動裝置100後,第一影像擷取模組110可以擷取包含拍攝目標210之第一偵測影像(步驟510)。在本實施例中,假設在裝置100啟動後,控制模組150可以每隔一定時間產生偵測訊號,第一影像擷取模組110可以在控制模組150每一次產生偵測訊號後,擷取一次第一偵測影像。
After the user of the
在第一影像擷取模組110擷取第一偵測影像後,控制模組150可以依據第一影像擷取模組110所擷取到的第一偵測影像產生距離參數(步驟520)。在本實施例中,假設距離參數為目標距離,控制模組150可以依據牛頓法判斷距離參數或透過辨識第一偵測影像中之特定物體的大小並與預存值比對以判斷距離參數。
After the first
在控制模組150產生距離參數後,控制模組150可以依據所產生的距離參數及各第二影像擷取模組120與第一影像擷取模組110之裝置距離分別計算各第二影像擷取模組120的轉動角度(步驟530),並可以依據所計算出之各
第二影像擷取模組120的轉動角度控制各第二影像擷取模組120轉動(步驟540)。在本實施例中,假設控制模組150可以逐一透過tan-1(裝置距離/距離參數)的三角函數計算出各第二影像擷取模組120的轉動角度,並控制各第二影像擷取模組120向拍攝目標210旋轉轉動角度,若影像擷取模組如「第3圖」所示,控制模組150可以先計算第二影像擷取模組124的轉動角度再控制第二影像模組124逆時鐘轉動所計算出之轉動角度,接著,控制模組150可以計算第二影像擷取模組122的轉動角度並控制第二影像模組122逆時鐘旋轉轉動角度、計算第二影像擷取模組121/123的轉動角度並控制第二影像擷取模組121/123順時鐘旋轉轉動角度。
After the distance parameter is generated by the
在控制模組150控制第二影像擷取模組像拍攝目標210轉動後,第一影像擷取模組110可以擷取包含拍攝目標210之第一目標影像以產生包含第一目標影像的第一影像串流,第二影像擷取模組120也可以與第一影像擷取模組110同步擷取第二目標影像並產生包含第二目標影像的第二影像串流(步驟550)。在本實施例中,假設控制模組150可以產生開拍訊號,使得第一影像擷取模組110與第二影像擷取模組120可以在控制模組150產生開拍訊號時同步開始擷取目標影像以產生同步的第一影像串流與第二影像串流。
After the
在影像擷取模組同步擷取目標影像並產生同步的影像串流後,成像模組160可以生成包含所有影像擷取模組同步產生之影像串流的串流組合(步驟560)。在本實施例中,假設成像模組160可以依據各影像擷取模組在裝置100中之排列位置(相對位置)或影像擷取模組的模組識別資料決定第一影像串流與第二影像串流中同步之目標影像的排列順序,並可以逐一將第一影像串流與
第二影像串流中同步的目標影像依序加入同一個影格的不同像素區塊中,藉以生成包含所有影像擷取模組同步產生之影像串流的串流組合。
After the image capturing modules synchronously capture the target image and generate a synchronous video stream, the
如此,透過本創作,可以透過一個裝置取得使用者在同一時間不同角度的目標影像以供後續使用,例如,儲存為串流檔案以等待播放,或傳送到外部裝置顯示等。 In this way, through this creation, the target images of the user at different angles at the same time can be obtained through one device for subsequent use, for example, stored as a streaming file for playback, or sent to an external device for display.
舉例來說,在上述實施例中,若裝置100包含通訊模組170,則成像模組160生成串流組合(步驟560)後,通訊模組170可以將成像模組160所生成的串流組合傳送給顯示裝置250,使得顯示裝置250顯示串流組合中所包含的一個或多個影像串流(步驟570)。例如,顯示裝置250可以每隔一段時間依序由串流組合的每個影格中取出不同像素區域的目標影像並顯示所取出目標影像以輪播不同的影像串流,顯示裝置250也可以直接顯示串流組合使得被顯示的畫面同時呈現出不同拍攝角度的使用者,顯示裝置250由串流組合的各個影格中取出各個像素區域中目標影像並以對應的像素顯示所讀出的目標影像藉以在不同的視角顯示出對應拍攝角度的影像串流。
For example, in the above-mentioned embodiment, if the
綜上所述,可知本創作與先前技術之間的差異在於具有透過第一影像擷取模組所擷取之包含拍攝目標的偵測影像判斷距離參數後,依據距離參數及各第二影像擷取模組與第一影像擷取模組間之裝置距離分別計算各第二影像擷取模組的轉動角度,並依據各轉動角度控制各第二影像擷取模組轉動後,生成包含第一影像擷取模組與各第二影像擷取模組同步產生之第一影像串流與各第二影像串流的串流組合之技術手段,藉由此一技術手段可以來解決先前技術所存在架設提供多拍攝角度之串流媒體之環境容易造成被拍攝者困擾的問題,進而達成降低架設多拍攝角度之視訊環境之複雜度的技術功效。 To sum up, it can be seen that the difference between this invention and the prior art lies in that after the distance parameter is judged from the detection image including the shooting target captured by the first image capture module, according to the distance parameter and each second image capture Calculate the rotation angle of each second image capture module by taking the device distance between the module and the first image capture module, and control the rotation of each second image capture module according to each rotation angle to generate The technical means of the combination of the first video stream and the second video streams generated synchronously by the image capture module and each second image capture module can solve the problems existing in the prior art by this technical means Setting up a streaming media environment that provides multiple shooting angles is likely to cause problems for photographers, thereby achieving the technical effect of reducing the complexity of setting up a video environment with multiple shooting angles.
再者,本創作之沉浸式串流影像擷取與成像之裝置,可實現於硬體、韌體或硬體與韌體之組合中,亦可以不同元件散佈於若干互連之電腦裝置的分散方式實現。 Moreover, the device for capturing and imaging immersive streaming images of the present invention can be implemented in hardware, firmware, or a combination of hardware and firmware, and can also be distributed among several interconnected computer devices. way to achieve.
雖然本創作所揭露之實施方式如上,惟所述之內容並非用以直接限定本創作之專利保護範圍。任何本創作所屬技術領域中具有通常知識者,在不脫離本創作所揭露之精神和範圍的前提下,對本創作之實施的形式上及細節上作些許之更動潤飾,均屬於本創作之專利保護範圍。本創作之專利保護範圍,仍須以所附之申請專利範圍所界定者為準。 Although the implementation methods disclosed in this creation are as above, the content described is not used to directly limit the scope of patent protection of this creation. Anyone who has ordinary knowledge in the technical field of this creation, without departing from the spirit and scope disclosed in this creation, makes slight changes to the form and details of the implementation of this creation, which belongs to the patent protection of this creation scope. The scope of patent protection for this creation shall still be defined by the scope of the attached patent application.
110:第一影像擷取模組 110: The first image capture module
120:第二影像擷取模組 120: Second image capture module
121~123:第二影像擷取模組 121~123: The second image capture module
130:第三影像擷取模組 130: The third image capture module
150:控制模組 150: Control module
160:成像模組 160: Imaging module
170:通訊模組 170: Communication module
190:顯示模組 190: display module
210:拍攝目標 210: shooting target
250:顯示裝置 250: display device
Claims (8)
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
TW111207003U TWM635659U (en) | 2022-07-01 | 2022-07-01 | Immersive Streaming Video Capture and Imaging Device |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
TW111207003U TWM635659U (en) | 2022-07-01 | 2022-07-01 | Immersive Streaming Video Capture and Imaging Device |
Publications (1)
Publication Number | Publication Date |
---|---|
TWM635659U true TWM635659U (en) | 2022-12-21 |
Family
ID=85786699
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
TW111207003U TWM635659U (en) | 2022-07-01 | 2022-07-01 | Immersive Streaming Video Capture and Imaging Device |
Country Status (1)
Country | Link |
---|---|
TW (1) | TWM635659U (en) |
-
2022
- 2022-07-01 TW TW111207003U patent/TWM635659U/en unknown
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US9774896B2 (en) | Network synchronized camera settings | |
US8115799B2 (en) | Method and apparatus for obtaining acoustic source location information and a multimedia communication system | |
JP6432029B2 (en) | Method and system for producing television programs at low cost | |
JP7123523B2 (en) | Method and system for automatically producing television programs | |
WO2017113734A1 (en) | Video multipoint same-screen play method and system | |
JP2007189357A (en) | Device and method for distributing arbitrary-viewpoint video | |
WO2022019719A1 (en) | Generation and distribution of immersive media content from streams captured via distributed mobile devices | |
WO2023279793A1 (en) | Video playing method and apparatus | |
KR20190083906A (en) | System and method for transmitting a plurality of video image | |
US20220199120A1 (en) | Image processing device, image processing method, and image processing program | |
TWI822158B (en) | System and method for immersive capture of streaming video and imaging | |
KR102026454B1 (en) | System and method for transmitting a plurality of video image | |
TWM635659U (en) | Immersive Streaming Video Capture and Imaging Device | |
KR102024437B1 (en) | System and method for transmitting a plurality of video image | |
WO2023036218A1 (en) | Method and apparatus for determining width of viewpoint | |
WO2014012242A1 (en) | Image generation method | |
JP2012004991A (en) | Broadcast receiving apparatus and control method for the same | |
CN113938617A (en) | Multi-channel video display method and equipment, network camera and storage medium | |
CN117395521A (en) | Immersive streaming image acquisition and imaging device and method | |
CN114762353A (en) | Device and method for playing virtual reality images input by multiple cameras in real time | |
KR20160082368A (en) | Contents Synchronization Method and System in Network-based Multi Display | |
KR102012580B1 (en) | Apparatus and method for multimedia contents handling | |
KR102599664B1 (en) | System operating method for transfering multiview video and system of thereof | |
US10264241B2 (en) | Complimentary video content | |
JP7468391B2 (en) | Image capture device and image capture processing method |