JP7293982B2 - 処理装置、方法、及びプログラム - Google Patents
処理装置、方法、及びプログラム Download PDFInfo
- Publication number
- JP7293982B2 JP7293982B2 JP2019153490A JP2019153490A JP7293982B2 JP 7293982 B2 JP7293982 B2 JP 7293982B2 JP 2019153490 A JP2019153490 A JP 2019153490A JP 2019153490 A JP2019153490 A JP 2019153490A JP 7293982 B2 JP7293982 B2 JP 7293982B2
- Authority
- JP
- Japan
- Prior art keywords
- message
- image
- information
- imaging device
- processing device
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
Images
Landscapes
- Information Transfer Between Computers (AREA)
- Computer And Data Communications (AREA)
- Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)
Description
近年、撮像装置(例えば、Webカメラ)により撮像された画像を、ネットワークを介してリアルタイムに配信する技術が開発されている。なお、本明細書において、画像は、静止画像又は動画像であり、さらに音声を含んでいてもよい。Webカメラの画像圧縮率は、Webカメラの性能に依存する。そのため、高圧縮な画像圧縮方式(即ち、コーデック)を採用していても、高圧縮な画像を出力することが困難なWebカメラが存在することとなる。そのようなWebカメラから出力された画像をそのまま配信してしまうと、帯域を圧迫したり、配信を受ける側の記憶容量を圧迫したりするおそれがある。
図1は、本実施形態に係る配信システム1の構成の一例を示す図である。図1に示すように、本実施形態に係る配信システム1は、撮像装置100、制御装置200、及び処理装置300を含む。
撮像装置100は、画像を撮像する装置である。ここでの画像とは、静止画又は動画であり、さらに音声を含んでいてもよい。撮像装置100は、外部から制御可能な撮像パラメータに従って、画像を撮像する。撮像パラメータは、例えば、ズーム率、パン角及びチルト角等を含む。
制御装置200は、配信システム1による動作を制御する装置である。詳しくは、制御装置200は、処理装置300に接続されており、各種メッセージを処理装置300に送信することで、メッセージに応じた処理を撮像装置100及び処理装置300に実行させる。
処理装置300は、配信システム1における各種処理を実行する装置である。処理装置300は、撮像装置100及び制御装置200に接続され、撮像装置100と制御装置200との間のメッセージのやり取りを仲介する、いわゆるGW(Gate Way)として機能する。撮像装置100と制御装置200とは、GWである処理装置300を境界としてそれぞれ別のネットワークに属していてもよい。さらに、処理装置300は、撮像装置100により撮像された画像を圧縮する、トランスコーダとして機能する。図1に示すように、処理装置300は、書き換え部310、生成部320、及び転送制御部330を含む。
以下、図2を参照しながら、配信システム1の動作について詳しく説明する。図2は、本実施形態に係る配信システム1において送受信されるメッセージの流れを説明するための図である。図2の上段に示すように、制御装置200は、カメラ制御要求を処理装置300に送信し、処理装置300は受信したカメラ制御要求に対し書き換え部310による書き換えを行った上で撮像装置100に転送する。一方で、撮像装置100は、カメラ制御要求に対する応答であるカメラ制御応答(第3のメッセージに相当)を処理装置300に送信し、処理装置300は受信したカメラ制御応答に対し書き換え部310による書き換えを行った上で制御装置200に転送する。また、図2の下段に示すように、処理装置300は、画像要求を撮像装置100に送信し、撮像装置100は、かかる画像要求に対する応答として第1の画像を処理装置300に送信する。一方で、制御装置200は、画像要求を処理装置300に送信し、処理装置300は、かかる画像要求に対する応答として、生成部320により生成された第2の画像を制御装置200に送信する。
図2に示すように、処理装置300は、カメラ制御要求、カメラ制御応答、画像要求、及び画像を受信し得る。そこで、転送制御部330は、受信したメッセージがどのメッセージであるかを識別し、適切な転送先に転送する。転送制御部330は、受信したメッセージのヘッダ部分に基づいて、受信したメッセージがどのメッセージであるかを識別する。一例として、カメラ制御要求及び画像要求についての識別方法について説明する。
GET /XXX/video-stream/YY/ HTTP/1.0
User-Agent: Player-1.00
x-sessioncookie: 21F48FCB730218
Accept: application/x-rtsp-tunneled
POST /XXX/video-stream/YY/ HTTP/1.0
User-Agent: Player -1.00
x-sessioncookie: 21F48FCB730218
Accept: application/x-rtsp-tunneled
Content-Length: 32767
GET /XXX/camera-control/YY/set HTTP/1.0
Accept: */*
User-Agent: CtrlEntity-1.0
Host:192.168.1.10
メッセージは、複数のパケットに分割して受信される場合がある。そこで、転送制御部330は、受信したメッセージの種別を識別できるまでバッファリングを行う。詳しくは、転送制御部330は、メッセージのヘッダ部分が揃うまで、パケットのバッファリングを行い、メッセージのヘッダ部分に基づいてメッセージの種別を識別する。その後、識別したメッセージの種別に応じて異なるバッファリングを行う。
転送制御部330は、制御装置200からカメラ制御要求を受信した場合、ボディ部分に含まれる装置情報が書き換え部310により書き換えられたカメラ制御要求を撮像装置100に転送する。詳しくは、転送制御部330は、制御装置200からカメラ制御要求を受信すると、上記バッファリングを行ってHTTPメッセージ単位でカメラ制御要求を書き換え部310に転送する。次いで、転送制御部330は、書き換え部310から出力された書き換え後のカメラ制御要求をパケット単位に分割して撮像装置100に転送する。
転送制御部330は、撮像装置100からカメラ制御応答が受信された場合、ボディ部分に含まれる装置情報が書き換え部310により書き換えられたカメラ制御応答を制御装置200に転送する。詳しくは、転送制御部330は、撮像装置100からカメラ制御応答を受信すると、上記バッファリングを行ってHTTPメッセージ単位でカメラ制御応答を書き換え部310に送信する。次いで、転送制御部330は、書き換え部310から出力された書き換え後のカメラ制御応答をパケット単位に分割して制御装置200に送信する。
転送制御部330は、制御装置200から画像要求を受信した場合、生成部320により生成された第2の画像を制御装置200に送信する。詳しくは、転送制御部330は、制御装置200から画像要求を受信すると、受信した画像要求を生成部320に転送する。かかる画像要求は、第2の画像を送信するよう要求するメッセージである。次いで、転送制御部330は、生成部320から出力された第2の画像を制御装置200に送信する。
(1)カメラ制御処理
図3は、本実施形態に係る配信システム1により実行されるカメラ制御処理の流れの一例を示すシーケンス図である。図3に示すように、本シーケンスには、撮像装置100、制御装置200、及び処理装置300が関与する。
図4は、本実施形態に係る配信システム1により実行される画像再圧縮処理の流れの一例を示すシーケンス図である。図4に示すように、本シーケンスには、撮像装置100及び処理装置300が関与する。
図5は、本実施形態に係る配信システム1により実行される画像配信処理の流れの一例を示すシーケンス図である。図5に示すように、本シーケンスには、制御装置200及び処理装置300が関与する。
続いて、図6を参照して、本実施形態に係る情報処理装置のハードウェア構成について説明する。図6は、本実施形態に係る情報処理装置のハードウェア構成の一例を示すブロック図である。なお、図6に示す情報処理装置900は、例えば、図1に示した処理装置300を形成し得る。本実施形態に係る処理装置300による情報処理は、ソフトウェアと、以下に説明するハードウェアとの協働により実現される。
以上、図1~図6を参照しながら、本発明の一実施形態について詳細に説明した。上記説明したように、本実施形態に係る処理装置300は、制御装置200からカメラ制御要求を受信すると、カメラ制御要求のボディ部分に含まれる装置情報を書き換えて撮像装置100に送信する。これにより、制御装置200が所望するカメラ制御を撮像装置100に実行させることができる。また、本実施形態に係る処理装置300は、制御装置200から画像要求を受信した場合、撮像装置100による撮像された画像に対し所定の変換処理を適用した第2の画像を制御装置200に送信する。これにより、制御装置200は、撮像装置100単体では配信困難であった高圧縮の画像の配信を受けることができる。
100 撮像装置
200 制御装置
300 処理装置
310 書き換え部
320 生成部
330 転送制御部
Claims (11)
- 撮像装置、及び制御装置に接続される処理装置であって、
前記撮像装置により撮像された第1の画像に対し所定の変換処理を適用して第2の画像を生成する生成部と、
メッセージのボディ部分に含まれる、前記撮像装置に対応する情報、前記制御装置に対応する情報、又は前記処理装置に対応する情報である装置情報を書き換える書き換え部と、
前記制御装置から第1のメッセージを受信した場合、ボディ部分に含まれる前記装置情報が前記書き換え部により書き換えられた前記第1のメッセージを前記撮像装置に転送し、前記制御装置から第2のメッセージを受信した場合、前記生成部により生成された前記第2の画像を前記制御装置に送信する転送制御部と、
を備える処理装置。 - 前記書き換え部は、前記第1のメッセージのボディ部分に含まれる前記処理装置の前記装置情報を前記撮像装置の前記装置情報に書き換える、請求項1に記載の処理装置。
- 前記転送制御部は、前記撮像装置から前記第1のメッセージに対する応答である第3のメッセージが受信された場合、ボディ部分に含まれる前記装置情報が前記書き換え部により書き換えられた前記第3のメッセージを前記制御装置に転送する、請求項1又は2に記載の処理装置。
- 前記書き換え部は、前記第3のメッセージのボディ部分に含まれる前記撮像装置の前記装置情報を前記処理装置の前記装置情報に書き換える、請求項3に記載の処理装置。
- 前記転送制御部は、前記制御装置から受信した前記メッセージのヘッダ部分に基づいて、受信した前記メッセージが前記第1のメッセージであるか前記第2のメッセージであるかを識別する、請求項1~4のいずれか一項に記載の処理装置。
- 前記メッセージは、複数のパケットに分割して受信され、
前記転送制御部は、受信した前記パケットが前記第1のメッセージを構成する場合、前記第1のメッセージを構成する複数の前記パケットの全てをバッファリングし、受信した前記パケットが前記第2のメッセージを構成する場合、受信した前記パケットが前記第2のメッセージを構成することが識別された時点でバッファリングを停止する、請求項5に記載の処理装置。 - 前記第1のメッセージは、前記撮像装置が前記第1の画像を撮像する際に適用する撮像パラメータを制御するためのメッセージである、請求項1~6のいずれか一項に記載の処理装置。
- 前記第2のメッセージは、前記第2の画像を送信するよう要求するメッセージである、請求項1~7のいずれか一項に記載の処理装置。
- 前記装置情報は、装置のアドレス及びポート番号の少なくともいずれかを含む、請求項1~8のいずれか一項に記載の処理装置。
- 撮像装置、及び制御装置に接続される処理装置を制御する方法であって、
前記撮像装置により撮像された第1の画像に対し所定の変換処理を適用して第2の画像を生成することと、
メッセージのボディ部分に含まれる、前記撮像装置に対応する情報、前記制御装置に対応する情報、又は前記処理装置に対応する情報である装置情報を書き換えることと、
前記制御装置から第1のメッセージを受信した場合、ボディ部分に含まれる前記装置情報が書き換えられた前記第1のメッセージを前記撮像装置に転送し、前記制御装置から第2のメッセージを受信した場合、前記第2の画像を前記制御装置に送信することと、
を含む方法。 - 撮像装置、及び制御装置に接続される処理装置を制御するコンピュータを、
前記撮像装置により撮像された第1の画像に対し所定の変換処理を適用して第2の画像を生成する生成部と、
メッセージのボディ部分に含まれる、前記撮像装置に対応する情報、前記制御装置に対応する情報、又は前記処理装置に対応する情報である装置情報を書き換える書き換え部と、
前記制御装置から第1のメッセージを受信した場合、ボディ部分に含まれる前記装置情報が前記書き換え部により書き換えられた前記第1のメッセージを前記撮像装置に転送し、前記制御装置から第2のメッセージを受信した場合、前記生成部により生成された前記第2の画像を前記制御装置に送信する転送制御部と、
として機能させるためのプログラム。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2019153490A JP7293982B2 (ja) | 2019-08-26 | 2019-08-26 | 処理装置、方法、及びプログラム |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2019153490A JP7293982B2 (ja) | 2019-08-26 | 2019-08-26 | 処理装置、方法、及びプログラム |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2021034898A JP2021034898A (ja) | 2021-03-01 |
JP7293982B2 true JP7293982B2 (ja) | 2023-06-20 |
Family
ID=74676335
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2019153490A Active JP7293982B2 (ja) | 2019-08-26 | 2019-08-26 | 処理装置、方法、及びプログラム |
Country Status (1)
Country | Link |
---|---|
JP (1) | JP7293982B2 (ja) |
Family Cites Families (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPH10164555A (ja) * | 1996-11-29 | 1998-06-19 | Canon Inc | サーバ及びクライアント及び制御方法及び記憶媒体 |
JPH10164553A (ja) * | 1996-11-29 | 1998-06-19 | Canon Inc | 映像サーバ及びクライアント及び制御方法及び記憶媒体 |
JP3774539B2 (ja) * | 1997-04-10 | 2006-05-17 | キヤノン株式会社 | 通信装置システム及び通信装置システム制御方法 |
-
2019
- 2019-08-26 JP JP2019153490A patent/JP7293982B2/ja active Active
Also Published As
Publication number | Publication date |
---|---|
JP2021034898A (ja) | 2021-03-01 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US11979636B2 (en) | Systems and methods for transmission of data streams | |
US8116235B2 (en) | Peer-to-peer aided live video sharing system | |
EP2683173A1 (en) | Distributed on-demand media transcoding system and method | |
US10785511B1 (en) | Catch-up pacing for video streaming | |
US11249796B2 (en) | Method and apparatus for enhanced assertion management in cloud media processing | |
JP6238255B2 (ja) | 監視カメラシステムによる監視方法及び動画分割装置 | |
EP2676432A2 (en) | Remote controlled studio camera system | |
US10341670B1 (en) | Video encoder bit rate stabilization | |
EP1679895A1 (en) | Medium signal transmission method, reception method, transmission/reception method, and device | |
US8667159B2 (en) | Communication device, communication method, and computer product | |
US8456532B1 (en) | Internet protocol camera transcode avoidance | |
US20020056122A1 (en) | Network system for distributing video information to clients | |
JP2008061223A (ja) | 通信装置及び通信方法 | |
JP2013012833A (ja) | 送信装置及び送信装置の制御方法 | |
JP7293982B2 (ja) | 処理装置、方法、及びプログラム | |
US20170318223A1 (en) | Imaging apparatus | |
US9049350B2 (en) | Imaging apparatus that transmits media data to reception apparatus, method of processing information, and storage medium | |
US9363574B1 (en) | Video throttling based on individual client delay | |
JP2010258894A (ja) | 映像受信装置、映像受信方法及びプログラム | |
JP2015506622A (ja) | ビデオ監視のための方法、関連するシステム、関連する監視サーバ及び関連する監視カメラ | |
WO2016177257A1 (zh) | 一种数据分享的方法和装置 | |
KR100841412B1 (ko) | 사용자 단말기에 따른 최적의 멀티미디어 서비스 제공 방법및 이를 구현하는 시스템 | |
JP7492647B2 (ja) | 断片化mp4を活用したhttpベースのメディアストリーミングサービス | |
WO2023275969A1 (ja) | データ中継装置、配信システム、データ中継方法、及びコンピュータ可読媒体 | |
JP2004102459A (ja) | 情報処理システムおよび方法、情報処理装置および方法、並びにプログラム |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20220510 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20230425 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20230509 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20230522 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 7293982 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |