JP7480908B2 - 映像合成装置及び映像合成方法 - Google Patents
映像合成装置及び映像合成方法 Download PDFInfo
- Publication number
- JP7480908B2 JP7480908B2 JP2023500223A JP2023500223A JP7480908B2 JP 7480908 B2 JP7480908 B2 JP 7480908B2 JP 2023500223 A JP2023500223 A JP 2023500223A JP 2023500223 A JP2023500223 A JP 2023500223A JP 7480908 B2 JP7480908 B2 JP 7480908B2
- Authority
- JP
- Japan
- Prior art keywords
- frame rate
- image
- timing
- images
- frame
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
- 238000000034 method Methods 0.000 title claims description 37
- 230000002194 synthesizing effect Effects 0.000 title claims description 35
- 230000015572 biosynthetic process Effects 0.000 claims description 54
- 238000003786 synthesis reaction Methods 0.000 claims description 54
- 230000008569 process Effects 0.000 claims description 23
- 238000001514 detection method Methods 0.000 claims description 14
- 238000004891 communication Methods 0.000 description 14
- 238000010586 diagram Methods 0.000 description 11
- 230000006870 function Effects 0.000 description 8
- 239000000872 buffer Substances 0.000 description 7
- 230000005540 biological transmission Effects 0.000 description 6
- 239000002131 composite material Substances 0.000 description 5
- 230000001360 synchronised effect Effects 0.000 description 4
- 238000001308 synthesis method Methods 0.000 description 4
- 230000003111 delayed effect Effects 0.000 description 3
- 238000003384 imaging method Methods 0.000 description 3
- 238000005516 engineering process Methods 0.000 description 2
- 239000000203 mixture Substances 0.000 description 2
- 230000033228 biological regulation Effects 0.000 description 1
- 230000007423 decrease Effects 0.000 description 1
- 230000003247 decreasing effect Effects 0.000 description 1
- 230000001934 delay Effects 0.000 description 1
- 230000000694 effects Effects 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 230000008707 rearrangement Effects 0.000 description 1
- 230000002441 reversible effect Effects 0.000 description 1
Images
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/60—Control of cameras or camera modules
- H04N23/66—Remote control of cameras or camera parts, e.g. by remote control devices
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N5/00—Details of television systems
- H04N5/222—Studio circuitry; Studio devices; Studio equipment
- H04N5/262—Studio circuits, e.g. for mixing, switching-over, change of character of image, other special effects ; Cameras specially adapted for the electronic generation of special effects
- H04N5/2624—Studio circuits, e.g. for mixing, switching-over, change of character of image, other special effects ; Cameras specially adapted for the electronic generation of special effects for obtaining an image which is composed of whole input images, e.g. splitscreen
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N5/00—Details of television systems
- H04N5/222—Studio circuitry; Studio devices; Studio equipment
- H04N5/262—Studio circuits, e.g. for mixing, switching-over, change of character of image, other special effects ; Cameras specially adapted for the electronic generation of special effects
Landscapes
- Engineering & Computer Science (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- Studio Devices (AREA)
Description
複数のカメラからの映像を1の画面に合成する際に、それぞれの映像のフレームのタイミングと所定のタイミングとの時間ずれを検出し、
前記カメラに対して、前記時間ずれが減少するように、撮像するフレームレートを指示し、
前記複数のカメラからの映像を1の画面に合成して出力する。
指示するフレームレートは、映像を合成する映像合成フレームレートから一定値だけ離れた値であることを特徴とする。
指示するフレームレートは、映像を合成する映像合成フレームレートから前記時間ずれに応じた値だけ離れた値であることを特徴とする。
前記フレームレートを定期的に指示することを特徴とする。
前記時間ずれが一定値以下であれば、指示するフレームレートを固定することを特徴とする。
前記所定のタイミングは、合成処理開始タイミングであることを特徴とする。
前記合成処理開始タイミングは、前記複数のカメラからの映像のフレーム終了タイミングの平均値であることを特徴とする。
複数のカメラからの映像を1の画面に合成する際に、それぞれの映像のフレームのタイミングと所定のタイミングとの時間ずれを検出し、
前記カメラに対して、前記時間ずれが減少するように、撮像するフレームレートを指示し、
前記複数のカメラからの映像を1の画面に合成して出力する。
USBVisionとは、カメラからの映像データをユーザバッファへ転送するために、AIAによって策定された規格である。
GenICamとは、カメラの種類や映像伝送の形式に係らず、幅広い標準インターフェースの設定をエンドツーエンドで行うために、EMVA(European Machine Vision Association)によって策定されたソフトウェアインターフェース規格である。
HDMI(High Definition Multimedia Interface)とは、AV機器向けに、企業7社によって策定された伝送規格である。
フレーム終了タイミングの平均値=(1/N)*Σ(t2(k)-t1(k))
但し、t1(0)=t1(0)+n*1/f0
Nはフレーム終了タイミングの平均値を導出する映像の数
t1(k)はk番目のフレームに対する合成処理開始タイミング
t1(k)はk番目のフレームの終了タイミング
f0は映像合成フレームレート
T=(t2-t1)*(1/f0)/|1/f-1/f0|
フレームレート算出回路102は、見込み時間Tが経過するまでは、一定値のフレームレートを指示し、見込み時間Tが経過後に、再計算してもよい。
101:時間ずれ検出回路
102:フレームレート算出回路
103:クロスバスイッチ
104:アップダウンコンバータ
105:バッファ
106:画素合成回路
200:映像合成装置
210:映像合成装置
20:カメラ
21:通信ネットワーク
22:モニタ
51:1フレーム分の映像信号
52:ブランキング
53:走査線
54:表示画面
Claims (9)
- 複数のカメラからの映像を1の画面に合成する際に、それぞれの映像のフレームのタイミングと合成処理のタイミングとの時間ずれを検出し、
前記検出の結果に応じて、前記時間ずれが減少するようなフレームレートを、映像を合成する映像合成フレームレートから該当するカメラの制御分解能に相当する一定値だけ離れた値に決定し、
前記決定したフレームレートを、該当するカメラに指示し、
前記複数のカメラからの映像を1の画面に合成して出力する映像合成装置。 - 複数のカメラからの映像を1の画面に合成する際に、それぞれの映像のフレームのタイミングと合成処理のタイミングとの時間ずれを検出し、
フレーム長よりも短いしきい値と前記時間ずれを比較する制御関数を参照することで、前記検出の結果に応じて、前記時間ずれが減少するようなフレームレートを、該当するカメラの制御分解能で定められる値に決定し、
前記決定したフレームレートを、該当するカメラに指示し、
前記複数のカメラからの映像を1の画面に合成して出力する映像合成装置。 - 複数のカメラからの映像を1の画面に合成する際に、それぞれの映像のフレームのタイミングと合成処理のタイミングとの時間ずれを検出し、
前記検出の結果に応じて、前記時間ずれが減少するようなフレームレートを、該当するカメラの制御分解能で定められる値に決定し、
前記決定したフレームレートに応じたフレーム数を、該当するカメラに指示し、
前記複数のカメラからの映像を1の画面に合成して出力する映像合成装置。 - 前記該当するカメラの制御分解能で定められる値は、映像を合成する映像合成フレームレートから前記時間ずれに応じた値だけ離れた階段状の値であることを特徴とする請求項2又は3に記載の映像合成装置。
- 前記フレームレートを定期的に指示することを特徴とする請求項1又は2に記載の映像合成装置。
- 前記合成処理のタイミングは、合成処理開始タイミング、或いは前記複数のカメラからの映像のフレーム終了タイミングの平均値であることを特徴とする請求項1から3のいずれかに記載の映像合成装置。
- 複数のカメラからの映像を1の画面に合成する際に、それぞれの映像のフレームのタイミングと合成処理のタイミングとの時間ずれを検出し、
前記検出の結果に応じて、前記時間ずれが減少するようなフレームレートを、映像を合成する映像合成フレームレートから該当するカメラの制御分解能に相当する一定値だけ離れた値に決定し、
前記決定したフレームレートを、該当するカメラに指示し、
前記複数のカメラからの映像を1の画面に合成して出力する映像合成方法。 - 複数のカメラからの映像を1の画面に合成する際に、それぞれの映像のフレームのタイミングと合成処理のタイミングとの時間ずれを検出し、
フレーム長よりも短いしきい値と前記時間ずれを比較する制御関数を参照することで、前記検出の結果に応じて、前記時間ずれが減少するようなフレームレートを、該当するカメラの制御分解能で定められる値に決定し、
前記決定したフレームレートを、該当するカメラに指示し、
前記複数のカメラからの映像を1の画面に合成して出力する映像合成方法。 - 複数のカメラからの映像を1の画面に合成する際に、それぞれの映像のフレームのタイミングと合成処理のタイミングとの時間ずれを検出し、
前記検出の結果に応じて、前記時間ずれが減少するようなフレームレートを、該当するカメラの制御分解能で定められる値に決定し、
前記決定したフレームレートに応じたフレーム数を、該当するカメラに指示し、
前記複数のカメラからの映像を1の画面に合成して出力する映像合成方法。
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
PCT/JP2021/006139 WO2022176109A1 (ja) | 2021-02-18 | 2021-02-18 | 映像合成装置及び映像合成方法 |
Publications (2)
Publication Number | Publication Date |
---|---|
JPWO2022176109A1 JPWO2022176109A1 (ja) | 2022-08-25 |
JP7480908B2 true JP7480908B2 (ja) | 2024-05-10 |
Family
ID=82930323
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2023500223A Active JP7480908B2 (ja) | 2021-02-18 | 2021-02-18 | 映像合成装置及び映像合成方法 |
Country Status (3)
Country | Link |
---|---|
US (1) | US20240121505A1 (ja) |
JP (1) | JP7480908B2 (ja) |
WO (1) | WO2022176109A1 (ja) |
Citations (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US20120092443A1 (en) | 2010-10-14 | 2012-04-19 | Cisco Technology, Inc. | Network Synchronization Video for Composite Video Streams |
JP2018207279A (ja) | 2017-06-02 | 2018-12-27 | 株式会社日立ビルシステム | 映像監視システム及び映像監視装置 |
JP2020198510A (ja) | 2019-05-31 | 2020-12-10 | 日本電信電話株式会社 | 同期制御装置、同期制御方法及び同期制御プログラム |
-
2021
- 2021-02-18 JP JP2023500223A patent/JP7480908B2/ja active Active
- 2021-02-18 US US18/276,225 patent/US20240121505A1/en active Pending
- 2021-02-18 WO PCT/JP2021/006139 patent/WO2022176109A1/ja active Application Filing
Patent Citations (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US20120092443A1 (en) | 2010-10-14 | 2012-04-19 | Cisco Technology, Inc. | Network Synchronization Video for Composite Video Streams |
JP2018207279A (ja) | 2017-06-02 | 2018-12-27 | 株式会社日立ビルシステム | 映像監視システム及び映像監視装置 |
JP2020198510A (ja) | 2019-05-31 | 2020-12-10 | 日本電信電話株式会社 | 同期制御装置、同期制御方法及び同期制御プログラム |
Also Published As
Publication number | Publication date |
---|---|
US20240121505A1 (en) | 2024-04-11 |
JPWO2022176109A1 (ja) | 2022-08-25 |
WO2022176109A1 (ja) | 2022-08-25 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP4991129B2 (ja) | 映像音声再生装置および映像音声再生方法 | |
US6429902B1 (en) | Method and apparatus for audio and video end-to-end synchronization | |
WO2005009031A1 (ja) | 撮像装置と同期信号発生装置 | |
US20130166769A1 (en) | Receiving device, screen frame transmission system and method | |
JPWO2013190787A1 (ja) | 受信装置およびその同期処理方法 | |
US20070188645A1 (en) | Image output apparatus, method and program thereof, and imaging apparatus | |
JP2012169727A (ja) | 映像信号処理装置および映像信号処理方法 | |
JP7480908B2 (ja) | 映像合成装置及び映像合成方法 | |
WO2019004783A1 (ko) | 다채널 영상을 위한 전송 시스템 및 이의 제어 방법, 다채널 영상 재생 방법 및 장치 | |
JP4104577B2 (ja) | 画像伝送装置、画像伝送方法、伝送システム、及び映像監視システム | |
JP5068282B2 (ja) | 映像伝送装置及び方法 | |
JP6776126B2 (ja) | 画像処理装置および画像処理方法、並びにプログラム | |
US10212316B2 (en) | Video processing apparatus | |
WO2022137324A1 (ja) | 映像信号を合成する装置、方法及びプログラム | |
WO2022137325A1 (ja) | 映像信号を合成する装置、方法及びプログラム | |
WO2023017577A1 (ja) | 映像信号を合成する装置、方法及びプログラム | |
WO2023017578A1 (ja) | 映像信号を合成する装置、方法及びプログラム | |
WO2023013072A1 (ja) | 映像信号を合成する装置、方法及びプログラム | |
WO2022137326A1 (ja) | 映像音響合成装置、方法及びプログラム | |
JP2011146930A (ja) | 情報処理装置、情報処理方法、およびプログラム | |
WO2022269723A1 (ja) | 同期制御を行う通信システム、その同期制御方法、受信サーバ及び同期制御プログラム | |
US11483453B2 (en) | Remote support system and method | |
TWI390956B (zh) | 影像顯示系統及其播放同步方法 | |
KR100475343B1 (ko) | 다채널 입력을 위한 단일 아날로그/디지털 컨버터 소자를이용한 멀티플렉싱 장치 및 방법 | |
JP3059151B1 (ja) | デ―タストリ―ム切替装置及びデ―タストリ―ム切替方法 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20230628 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20231121 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20240116 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20240130 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20240306 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20240326 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20240408 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 7480908 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |