JP6658504B2 - 撮像装置、撮像方法および撮像システム - Google Patents

撮像装置、撮像方法および撮像システム Download PDF

Info

Publication number
JP6658504B2
JP6658504B2 JP2016503954A JP2016503954A JP6658504B2 JP 6658504 B2 JP6658504 B2 JP 6658504B2 JP 2016503954 A JP2016503954 A JP 2016503954A JP 2016503954 A JP2016503954 A JP 2016503954A JP 6658504 B2 JP6658504 B2 JP 6658504B2
Authority
JP
Japan
Prior art keywords
raw data
imaging device
server
imaging
network
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
JP2016503954A
Other languages
English (en)
Other versions
JPWO2015125405A1 (ja
Inventor
伊藤　雄二郎
雄二郎 伊藤
雅利 大谷
雅利 大谷
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Sony Corp
Original Assignee
Sony Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Sony Corp filed Critical Sony Corp
Publication of JPWO2015125405A1 publication Critical patent/JPWO2015125405A1/ja
Application granted granted Critical
Publication of JP6658504B2 publication Critical patent/JP6658504B2/ja
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N1/00—Scanning, transmission or reproduction of documents or the like, e.g. facsimile transmission; Details thereof
    • H04N1/00127—Connection or combination of a still picture apparatus with another apparatus, e.g. for storage, processing or transmission of still picture signals or of information associated with a still picture
    • H04N1/00204—Connection or combination of a still picture apparatus with another apparatus, e.g. for storage, processing or transmission of still picture signals or of information associated with a still picture with a digital computer or a digital computer system, e.g. an internet server
    • H04N1/00244—Connection or combination of a still picture apparatus with another apparatus, e.g. for storage, processing or transmission of still picture signals or of information associated with a still picture with a digital computer or a digital computer system, e.g. an internet server with a server, e.g. an internet server
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60—Control of cameras or camera modules
    • H04N23/66—Remote control of cameras or camera parts, e.g. by remote control devices
    • H04N23/661—Transmitting camera control signals through networks, e.g. control via the Internet
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L63/00—Network architectures or network communication protocols for network security
    • H04L63/04—Network architectures or network communication protocols for network security for providing a confidential data exchange among entities communicating through data packet networks
    • H04L63/0428—Network architectures or network communication protocols for network security for providing a confidential data exchange among entities communicating through data packet networks wherein the data content is protected, e.g. by encrypting or encapsulating the payload
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L69/00—Network arrangements, protocols or services independent of the application payload and not provided for in the other groups of this subclass
    • H04L69/04—Protocols for data compression, e.g. ROHC
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/80—Camera processing pipelines; Components thereof
    • H04N23/84—Camera processing pipelines; Components thereof for processing colour signals
    • H04N23/843—Demosaicing, e.g. interpolating colour pixel values
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N25/00—Circuitry of solid-state image sensors [SSIS]; Control thereof
    • H04N25/70—SSIS architectures; Circuits associated therewith
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N25/00—Circuitry of solid-state image sensors [SSIS]; Control thereof
    • H04N25/70—SSIS architectures; Circuits associated therewith
    • H04N25/71—Charge-coupled device [CCD] sensors; Charge-transfer registers specially adapted for CCD sensors
    • H04N25/75—Circuitry for providing, modifying or processing image signals from the pixel array
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N25/00—Circuitry of solid-state image sensors [SSIS]; Control thereof
    • H04N25/10—Circuitry of solid-state image sensors [SSIS]; Control thereof for transforming different wavelengths into image signals
    • H04N25/11—Arrangement of colour filter arrays [CFA]; Filter mosaics
    • H04N25/13—Arrangement of colour filter arrays [CFA]; Filter mosaics characterised by the spectral characteristics of the filter elements
    • H04N25/134—Arrangement of colour filter arrays [CFA]; Filter mosaics characterised by the spectral characteristics of the filter elements based on three different wavelength filter elements

Landscapes

  • Engineering & Computer Science (AREA)
  • Signal Processing (AREA)
  • Multimedia (AREA)
  • Computer Security & Cryptography (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Computing Systems (AREA)
  • General Engineering & Computer Science (AREA)
  • Computer Hardware Design (AREA)
  • Studio Devices (AREA)

Description

本技術は、撮像素子を用いて被写体を撮像可能な撮像装置、撮像方法および撮像システムに関する。
近年、業務用カメラの高画素化および高フレームレート化が進んでいる。このため、カメラのコントローラの負荷はますます増大の傾向にある。
カメラのコントローラの負荷を減らしてカメラを小型化するために、カメラの撮像素子より生成されるＲＡＷデータに対するＲＧＢ変換、色歪み補正、画像調整、ガンマ補正などの処理を、カメラに光ケーブルを通じて接続された現像ユニットにて行うようにしたシステムが知られている（例えば、特許文献１参照。）。
特開２０１１−２１６９４８号公報
本技術は、コントローラの負荷をより抑え、小型化および省電力化を図ることのできる撮像装置、撮像方法および撮像システムを提供することを目的とする。
上記の目的を達成するために、本技術に係る撮像装置は、カラー用の撮像素子と、前記撮像素子より出力されたカラー毎のアナログ信号をデジタル信号に変換してＲＡＷデータを生成するＡ／Ｄ変換器と、前記Ａ／Ｄ変換器により生成された前記ＲＡＷデータを格納したＩＰパケットを生成する送信処理部と、前記生成されたＩＰパケットをネットワークを通じて、前記ＲＡＷデータの現像処理を行うことが可能なサーバに送信するネックワークインタフェースとを具備する。
前記の撮像装置は、前記Ａ／Ｄ変換器により生成された前記ＲＡＷデータをバッファリングするバッファをさらに具備するものであってよい。
前記の撮像装置は、前記サーバから送信される、当該サーバのビジー状態を示すビジー情報を取得するビジー情報取得部と、前記検出されたビジー情報をもとに前記バッファの出力レートを変更するコントローラとをさらに具備するものであってよい。
本技術に係る撮像方法は、Ａ／Ｄ変換器にて、カラー用の撮像素子より出力されたカラー毎のアナログ信号をデジタル信号に変換してＲＡＷデータを生成し、送信処理部にて、前記生成された前記ＲＡＷデータを格納したＩＰパケットを生成し、ネットワークインタフェースにより、前記生成されたＩＰパケットをネットワークを通じて、前記ＲＡＷデータの現像処理を行うことが可能なサーバに送信する方法である。
本技術に係る別の観点に基づく撮像システムは、撮像装置と、この撮像装置とネットワークを通じて接続可能なサーバとを具備し、前記撮像装置は、カラー用の撮像素子と、前記撮像素子より出力されたカラー毎のアナログ信号をデジタル信号に変換してＲＡＷデータを生成するＡ／Ｄ変換器と、前記Ａ／Ｄ変換器により生成された前記ＲＡＷデータを格納したＩＰパケットを生成する送信処理部と、前記生成されたＩＰパケットをネットワークを通じて前記サーバに送信するネックワークインタフェースと、を具備し、前記サーバが、前記ＲＡＷデータの現像処理を行うように構成されたＣＰＵを具備する。
以上のように、本技術によれば、コントローラの負荷をより抑え、小型化および省電力化を図ることができる。
本技術に係る第１の実施形態の撮像システム１０の全体の構成を示すブロック図である。 第１の実施形態の撮像システム１０（１０Ａ）における撮像装置１００（１００Ａ）およびネットワークサーバ２００の構成を示すブロック図である。 第２の実施形態の撮像システム１０Ｂにおける主に撮像装置１００Ｂの構成を示すブロック図である。 第３の実施形態の撮像システム１０Ｃにおける主に撮像装置１００Ｃの構成を示すブロック図である。 第１の実施形態の撮像装置１００Ａの変形例１を示すブロック図である。 第２の実施形態の撮像装置１００Ｂの変形例１を示すブロック図である。 第３の実施形態の撮像装置１００Ｃの変形例１を示すブロック図である。 第１の実施形態の撮像装置１００Ａの変形例２を示すブロック図である。 第２の実施形態の撮像装置１００Ｂの変形例２を示すブロック図である。 第３の実施形態の撮像装置１００Ｃの変形例２を示すブロック図である。 第１の実施形態の撮像装置１００Ａの変形例３を示すブロック図である。 第２の実施形態の撮像装置１００Ｂの変形例３を示すブロック図である。 第３の実施形態の撮像装置１００Ｃの変形例３を示すブロック図である。
以下、本技術に係る実施形態を、図面を参照しながら説明する。
＜第１の実施形態＞
［撮像システム１０の構成］
図１は本技術に係る第１の実施形態の撮像システム１０の全体の構成を示すブロック図である。
この撮像システム１０は、１以上の撮像装置１００と、ネットワークサーバ２００と、ネットワーク３００とを備える。
この撮像システム１０において、各々の撮像装置１００は、被写体を撮像し、撮像信号からＲＡＷデータを生成してネットワーク３００に送り出す。
ネットワークサーバ２００は、ネットワーク３００を通じて撮像装置１００より送られてきたＲＡＷデータに対して現像処理、保存処理などを行う。すなわち、ＲＡＷデータがネットワーク３００を通じて各々の撮像装置１００からネットワークサーバ２００に伝送される。
ネットワーク３００は、ＬＡＮ（Local Area Network）であっても、ＷＡＮ（Wide Area Network）、あるいはインターネットであってもよい。なお、撮像装置１００は１つであってもよい。ネットワークサーバ２００は、分散型で処理を実行するために複数あってもよい。
［撮像装置の構成］
図２は、第１の実施形態の撮像システム１０（１０Ａ）における撮像装置１００（１００Ａ）およびネットワークサーバ２００の構成を示すブロック図である。
なお、同図において、撮像システム１０は「撮像システム１０Ａ」と表記し、撮像装置１００は「撮像装置１００Ａ」と表記する。
撮像装置１００Ａは、レンズ１０１、撮像素子１０２、Ａ／Ｄ変換器１０３、送信処理部１０４、ネットワークインタフェース１０５およびコントローラ１１０を備える。
レンズ１０１は、像光を撮像素子１０２の撮像面に結像するためのレンズである。
撮像素子１０２は、光をその強さに応じたＲＧＢ毎の電気的信号に変換する。撮像素子１０２は、例えば、ＣＭＯＳ（Complementary MOS）イメージセンサー、ＣＣＤ（Charge Coupled Device）イメージセンサーなどである。撮像素子１０２は、例えば、ベイヤー配列を有するものである。
Ａ／Ｄ変換器１０３は、撮像素子１０２より出力されたＲＧＢ毎のアナログ信号から、Ａ／Ｄ変換によって１画素あたり例えば１２ビットなどのＲＡＷデータを生成する。
送信処理部１０４は、Ａ／Ｄ変換器１０３より出力されたＲＡＷデータからＴＣＰ／ＩＰ（Transmission Control Protocol / Internet Protocol）ネットワーク伝送用のパケット（ＩＰパケット）を生成する。このパケットには、予め指定されたネットワークサーバ２００のＩＰアドレスなどを含むヘッダ構造が付加される。転送プロトコルには、例えば、ＦＴＰ（File Transfer Protocol）などが用いられる。
ネットワークインタフェース１０５は、送信処理部１０４により生成されたＩＰパケットを、ネットワーク３００を通じてネットワークサーバ２００に伝送する。
コントローラ１１０は、例えばＣＰＵ（Central Processing Unit）、メインメモリなどのハードウェアと、プログラムなどのソフトウェアとで構成される。コントローラ１１０は、プログラマブルコントローラなどで構成されてもよい。コントローラ１１０は、撮像素子１０２、Ａ／Ｄ変換器１０３、送信処理部１０４、ネットワークインタフェース１０５などの制御を行う。
典型的な撮像装置（図示せず）では、コントローラが、ＲＡＷデータに対する現像処理までをも担っていた。このため、コントローラには、高速なＣＰＵ、大容量のメインメモリなどが必要とされていた。これに対して本実施形態の撮像装置１００Ａでは、ＲＡＷデータに対する現像処理は、撮像装置１００にネットワーク３００を通じて接続されたネットワークサーバ２００のハードウェア資源を用いて行われる構成となっている。このため、撮像装置１００のコントローラ１１０には、現像処理の負荷を見込んだ高速なＣＰＵ、大容量のメインメモリなどが不要となり、撮像装置１００の小型化、省電力化、低コスト化を実現できる。
ネットワークサーバ２００は、具体的には、ＣＰＵ（Central Processing Unit）２０１、メモリ２０２、ストレージ２０３、ネットワークインタフェース２０４、ユーザインタフェース２０５、システムバス２０６などのコンピュータのハードウェアと、オペレーティングシステム、現像を含む画像処理のためのアプリケーションプログラムなどのソフトウェアを備えて構成されるものである。
ＣＰＵ２０１は、アプリケーションプログラムを実行することによって、ネットワークサーバ２００（コンピュータ）を次のように動作させることが可能である。
１．ＣＰＵ２０１は、ネットワークインタフェース２０４にて受信されたＩＰパケットからＲＡＷデータを取り出してメモリ２０２に展開し、映像化のための現像処理を行う。ここで言う現像処理とは、少なくとも、撮像装置１００の撮像素子１０２のＲＧＢ画素配列（ベイヤー配列など）に対応した画素補間処理を含むものである。また、画素補間処理の他、色歪み補正、ホワイトバランス調整、ガンマ補正、コントラスト調整、シャープネス処理など様々な画像調整などが行われてもよい。
２．ＣＰＵ２０１は、映像化されたデータ（以下「映像データ」と呼ぶ。）をユーザインタフェース２０５の表示装置に表示させるための処理を行う。
３．ＣＰＵ２０１は、映像データをストレージ２０３に保存する処理を行う。
４．ＣＰＵ２０１は、現像処理によって生成された映像データあるいはストレージ２０３に保存された映像データをネットワーク３００を通じて別の機器に伝送する処理を行う。
メモリ２０２は、オペレーティングシステムおよびアプリケーションプログラムなどのソフトウェアや、ＲＡＷデータ、さらには現像処理過程のデータなどが一時的に記憶される。
ストレージ２０３は、例えばＨＤＤ（Hard disk drive）、ＳＳＤ（solid state drive）、磁気テープレコーダなどの大容量の外部記憶装置である。ストレージ２０３には、例えば、現像前のＲＡＷデータや、現像された映像データなどが格納される。
ネットワークインタフェース２０４は、ネットワーク３００との接続を処理するインタフェースである。
ユーザインタフェース２０５は、ユーザからの各種の指示や画像調整のための各種のパラメータの値の入力などを受け付ける入力装置と、現像処理のためのＧＵＩ（Graphical User Interface）、さらには現像された映像データなどを表示する表示装置とを有する。入力装置は具体的にはキーボード、マウスなどである。表示装置は具体的には液晶ディスプレイ、有機ＥＬディスプレイなどである。
ネットワークサーバ２００は、現像処理などを行うためにＧＰＵ（Graphics Processing Unit）やＧＰＧＰＵ（General-purpose computing on graphics processing units）２０７を備えて構成されたものであってよい。
［撮像システム１０Ａの動作］
次に、本実施形態の撮像システム１０Ａの動作を説明する。
まず、撮像装置１００Ａにおいて、レンズ１０１により撮像素子１０２の撮像面に像光が結像される。撮像素子１０２からはＲＧＢ毎の光の強さに対応したアナログの電気信号が出力される。その撮像素子１０２からのアナログの電気信号はＡ／Ｄ変換器１０３に入力される。
Ａ／Ｄ変換器１０３は、撮像素子１０２からのアナログの電気信号からＡ／Ｄ変換によって、画素毎に例えば１２ビットのＲＡＷデータを生成し、送信処理部１０４に供給する。
送信処理部１０４は、Ａ／Ｄ変換器１０３より供給されたＲＡＷデータから複数のＩＰパケットを生成し、ネットワーク３００に送り出す。ＩＰパケットの宛先はネットワークサーバ２００である。
なお、Ａ／Ｄ変換器１０３にて得られたＲＡＷデータに対して、例えば画素の欠陥補正、色ノイズ補正などの処理が行われてもよい。すなわち、ＩＰパケットに格納されるＲＡＷデータは、撮像素子１０２の画素配列構造を有するＲＡＷデータであれば、個々の画素の値に対して何らかの処理が施されたものであってもよい。
ネットワークサーバ２００のＣＰＵ２０１は、ネットワークインタフェース２０４にてＩＰパケットを受信すると、この受信したＩＰパケットからＲＡＷデータを抽出し、メモリ２０２に展開する。
ネットワークサーバ２００のＣＰＵ２０１は、メモリ２０２に展開されたＲＡＷデータに対して、少なくとも画素補間処理を含む現像処理を行う。この現像処理によって生成された映像データはストレージ２０３に一旦保存される。映像データは、ユーザインタフェース２０５の表示装置にリアルタイムに表示されてもよい。
この実施形態の撮像システム１０Ａにおいて、撮像装置１００Ａからネットワークサーバ２００にＲＡＷデータを良好に連続伝送するためには、Ａ／Ｄ変換器１０３の出力レートとＲＡＷデータの伝送レートとが常時一致していなければならない。このような条件を満足するために、撮像装置１００Ａとネットワークサーバ２００とのネットワーク３００を通じた接続に十分な通信速度が保証されている必要がある。
Ａ／Ｄ変換器１０３の出力レートは、撮像素子１０２の解像度、フレームレート、さらにはＲＡＷデータにおける画素毎のビット数などによって決まる。例えば、近年、例えば、業務用（放送／シネマ用途）の撮像装置の要求スペックにおいて、撮像素子の水平解像度は２．５Ｋ以上、フレームレートは２３フレーム／秒以上、画素毎のビット数は１２ビット（１２ビット、１４ビット、１６ビットなど）以上とされている。
以上のように、本実施形態の撮像システム１０Ａでは、撮像装置１００ＡがＲＡＷデータをパケット化し、ネットワーク３００を通じてネットワークサーバ２００に伝送する。ネットワークサーバ２００は、受信したパケットからＲＡＷデータを抽出して画素補間などの現像処理を行う。すなわち、撮像装置１００での現像処理が不要になることから撮像装置１００内のコントローラ１１０の負荷を大幅に低減でき、撮像装置１００の小型化、高速化、低コスト化を図れる。
＜第２の実施形態＞
図３は第２の実施形態の撮像システム１０Ｂにおける主に撮像装置１００Ｂの構成を示すブロック図である。ネットワークサーバ２００の構成は第１の実施形態と同じである。また、撮像装置１００Ｂにおいて、第１の実施形態の撮像装置１００Ａと同一の部分には同じ符号が付けられている。
この第２の実施形態の撮像システム１０Ｂの第１の実施形態の撮像システム１０Ａとの相違点は、撮像装置１００Ｂにおいて、Ａ／Ｄ変換器１０３と送信処理部１０４との間にバッファ１０６が設けられている点にある。バッファ１０６は、Ａ／Ｄ変換器１０３の出力レートとＲＡＷデータの伝送レートとの差を吸収するためのメモリである。
撮像装置１００Ｂとネットワークサーバ２００との間に十分な通信速度が保証されない場合には、このようにバッファ１０６を追加した構成とすることによって、撮像装置１００Ｂからネットワークサーバ２００にＲＡＷデータを良好に連続伝送することができる。例えば、現像後の映像フレームの欠落などを防止できる。
＜第３の実施形態＞
図４は第３の実施形態の撮像システム１０Ｃにおける主に撮像装置１００Ｃの構成を示すブロック図である。ネットワークサーバ２００の構成は第１の実施形態と同じである。また、撮像装置１００Ｃにおいて、第２の実施形態の撮像装置１００Ｂと同一の部分には同じ符号が付けられている。
この撮像システム１０Ｃの撮像装置１００Ｃはビジー情報取得部１０７を備える。
ビジー情報取得部１０７は、ネットワークサーバ２００から撮像装置１００Ｃにネットワーク３００を通じて送信されるサーバビジー情報を検出する。ビジー情報取得部１０７は、サーバビジー情報を検出すると、コントローラ１１０にそのサーバビジー情報に対応するステータスを通知する。
コントローラは、ビジー情報取得部１０７からのサーバビジー情報のステータスを受けると、バッファ１０６からのＲＡＷデータの出力レートを低下させるように制御する。
バッファ１０６からのＲＡＷデータの出力レートを低下させる方法としては、例えば、以下がある。
１．サーバビジー情報がビジー状態とアンビジー状態の２つの値をとりうる場合を想定する。コントローラ１１０は、ビジー状態を受けてバッファ１０６からの出力を停止させ、アンビジー状態を受けて出力を再開するように制御を行う。
２．サーバビジー情報がネットワークサーバ２００のビジー度を定量的に示す値を有する場合を想定する。コントローラ１１０は、ビジー度の値に対応した時間、バッファ１０６からの出力を停止させる。これにより、コントローラ１１０は、バッファ１０６からの出力レートを動的に制御する。
ネットワークサーバ２００が、複数の撮像装置１００Ｃ（図１の複数の撮像装置１００参照）からＲＡＷデータのパケットを受信して処理する場合、ネットワークサーバ２００のＣＰＵ２０１の負荷が時間的に変動する。ネットワークサーバ２００のＣＰＵ２０１は、例えば、ＲＡＷデータのパケットの受信レート、接続中の撮像装置１００Ｃの数など、負荷を監視する。ＣＰＵ２０１は、検出された負荷に対応したサーバビジー情報を生成して、パケット送信元の撮像装置１００Ｃに応答するように制御をする。なお、ネットワークサーバ２００でのサーバビジー情報の応答制御は、その他、様々な方式に置き換えてもよい。
ネットワークサーバ２００のＣＰＵ２０１は、例えば、次のような場合にサーバビジー情報を撮像装置１００Ｃに送信する。
１．別の撮像装置１００ＣからのＲＡＷデータの現像処理を実行中であるとき。
２．ＣＰＵ２０１の空きリソースが決められた割合以下であるとき。
３．その他。
本実施形態によれば、ネットワークサーバ２００の負荷状況に応じて、撮像装置１００Ｃからネットワークサーバ２００へのＲＡＷデータの伝送レートを制御することができ、ネットワークサーバ２００の負荷を時間的に分散することができる。これにより、撮像システム１０Ｃの信頼性を向上させることができる。
＜変形例１＞
次に、上記の実施形態の変形例を説明する。
図５、図６、図７は上記の第１の実施形態から第３の実施形態の撮像装置１００Ａ、１００Ｂ、１００Ｃ各々の変形例１を示すブロック図である。
図５、図６、図７に示すように、これらの変形例１においては、ＲＡＷデータのパケット化の前に、ＲＡＷデータを暗号化する暗号化部１０８が設けられる。ＲＡＷデータの暗号化には、例えば、ＤＥＳ（Data Encryption Standard：標準暗号）、ＡＥＳ（Advanced Encryption Standard：共通鍵暗号方式）、または公開鍵暗号方式などを用いてもよい。
これにより、ネットワーク３００からのＲＡＷデータの盗聴などを防止することができ、信頼性を向上させることができる。
＜変形例２＞
図８、図９、図１０は上記の第１の実施形態から第３の実施形態の撮像装置１００Ａ、１００Ｂ、１００Ｃ各々の変形例２を示すブロック図である。
図８、図９、図１０に示すように、これらの変形例２においては、Ａ／Ｄ変換器１０３より出力されるＲＡＷデータを圧縮するデータ圧縮部１０９が設けられる。ＲＡＷデータの圧縮には、例えば、ＭＰＥＧ−２（MPEG：Moving Picture Experts Group）、ＡＶＣ、ＸＡＶＣ、ＪＰＥＧ２０００（JPEG：Joint Photographic Experts Group）などを用いることができる。
これにより、ＲＡＷデータの伝送量を低減することができる。また、バッファ１０６のサイズを抑えることができる。
＜変形例３＞
図１１、図１２、図１３は上記の第１の実施形態から第３の実施形態の撮像装置１００Ａ、１００Ｂ、１００Ｃ各々の変形例３を示すブロック図である。
図１１、図１２、図１３に示すように、これらの変形例３においては、Ａ／Ｄ変換器１０３より出力されるＲＡＷデータを圧縮するデータ圧縮部１０９と、圧縮されたＲＡＷデータを暗号化する暗号化部１０８が設けられる。

これによりネットワーク３００からのＲＡＷデータの盗聴などを防止することができ、信頼性を向上させることができる。また、ＲＡＷデータの伝送量を低減することができる。さらに、バッファ１０６のサイズを抑えることができる。
なお、図１２、図１３の撮像装置１００Ｂ、１００Ｃにおいて、データ圧縮部１０９は暗号化部１０８の出力側に配置されていてもよい。
なお、本技術は以下のような構成もとることができる。
（１） カラー用の撮像素子と、
前記撮像素子より出力されたカラー毎のアナログ信号をデジタル信号に変換してＲＡＷデータを生成するＡ／Ｄ変換器と、
前記Ａ／Ｄ変換器により生成された前記ＲＡＷデータを格納したＩＰパケットを生成する送信処理部と、
前記生成されたＩＰパケットをネットワークを通じて、前記ＲＡＷデータの現像処理を行うことが可能なサーバに送信するネックワークインタフェースと
を具備する撮像装置。
（２）前記（１）に記載の撮像装置であって、
前記Ａ／Ｄ変換器により生成された前記ＲＡＷデータをバッファリングするバッファを
さらに具備する撮像装置。
（３）前記（２）に記載の撮像装置であって、
前記サーバから送信される、当該サーバのビジー状態を示すビジー情報を取得するビジー情報取得部と、
前記検出されたビジー情報をもとに前記バッファの出力レートを変更するコントローラと
をさらに具備する撮像装置。
（４）前記（１）から（３）のうちいずれか１つに記載の撮像装置であって、
前記撮像素子の水平解像度が２．５Ｋ以上である
撮像装置。
（５）前記（１）から（４）のうちいずれか１つに記載の撮像装置であって、
前記ＲＡＷデータのフレームレートが２３フレーム／秒以上である
撮像装置。
（６）前記（１）から（５）のうちいずれか１つに記載の撮像装置であって、
前記ＲＡＷデータの画素毎のビット数が１２ビット以上である
撮像装置。
（７）前記（１）から（６）のうちいずれか１つに記載の撮像装置であって、
前記ＲＡＷデータを圧縮する圧縮部をさらに具備し、
前記送信処理部は、前記圧縮されたＲＡＷデータを格納したＩＰパケットを生成する
撮像装置。
（８）前記（１）から（６）のうちいずれか１つに記載の撮像装置であって、
前記ＲＡＷデータを暗号化する暗号化部をさらに具備し、
前記送信処理部は、前記暗号化されたＲＡＷデータを格納したＩＰパケットを生成する
撮像装置。
（９）前記（１）から（６）のうちいずれか１つに記載の撮像装置であって、
前記ＲＡＷデータを圧縮する圧縮部をさらに具備し、
前記ＲＡＷデータを暗号化する暗号化部をさらに具備し、
前記送信処理部は、前記圧縮され、かつ前記暗号化されたＲＡＷデータを格納したＩＰパケットを生成する
撮像装置。
１０…撮像システム
１００…撮像装置
１０１…レンズ
１０２…撮像素子
１０３…Ａ／Ｄ変換器
１０４…送信処理部
１０５…ネットワークインタフェース
１０６…バッファ
１０７…ビジー情報取得部
１０８…暗号化部
１０９…データ圧縮部
１１０…コントローラ
２００…ネットワークサーバ
２０１…ＣＰＵ
３００…ネットワーク

Claims (10)

  1. カラー用撮像素子と、
    前記撮像素子より出力されたカラー毎のアナログ信号をデジタル信号に変換してＲＡＷデータを生成するＡ／Ｄ変換器と、
    前記Ａ／Ｄ変換器により生成された前記ＲＡＷデータをバッファリングするバッファと、
    前記バッファにバッファリングされたＲＡＷデータを格納したＩＰパケットを生成する送信処理部と、
    前記生成されたＩＰパケットをネットワークを通じて、前記ＲＡＷデータの現像処理を行うことが可能なサーバに送信するネットワークインタフェースと、
    前記サーバから送信される、当該サーバのビジー状態を示すビジー情報を取得するビジー情報取得部と、
    前記取得されたビジー情報をもとに前記バッファの出力レートを変更するコントローラと
    を具備する撮像装置。
  2. 請求項１に記載の撮像装置であって、
    前記撮像素子の水平解像度が２．５Ｋ以上である
    撮像装置。
  3. 請求項１または２に記載の撮像装置であって、
    前記ＲＡＷデータのフレームレートが２３フレーム／秒以上である
    撮像装置。
  4. 請求項１から３のいずれか１つに記載の撮像装置であって、
    前記ＲＡＷデータの画素毎のビット数が１２ビット以上である
    撮像装置。
  5. 請求項１から４のいずれか１つに記載の撮像装置であって、
    前記ＲＡＷデータを圧縮する圧縮部をさらに具備し、
    前記送信処理部は、前記圧縮されたＲＡＷデータを格納したＩＰパケットを生成する
    撮像装置。
  6. 請求項１から４のいずれか１つに記載の撮像装置であって、
    前記ＲＡＷデータを暗号化する暗号化部をさらに具備し、
    前記送信処理部は、前記暗号化されたＲＡＷデータを格納したＩＰパケットを生成する
    撮像装置。
  7. 請求項１から４のいずれか１つに記載の撮像装置であって、
    前記ＲＡＷデータを圧縮する圧縮部をさらに具備し、
    前記ＲＡＷデータを暗号化する暗号化部をさらに具備し、
    前記送信処理部は、前記圧縮され、かつ前記暗号化されたＲＡＷデータを格納したＩＰパケットを生成する
    撮像装置。
  8. 請求項７に記載の撮像装置であって、
    前記暗号化部は、前記圧縮部により圧縮されたＲＡＷデータを暗号化する
    撮像装置。
  9. Ａ／Ｄ変換器にて、カラー用の撮像素子より出力されたカラー毎のアナログ信号をデジタル信号に変換してＲＡＷデータを生成し、
    前記生成されたＲＡＷデータをバッファにバッファリングし、
    送信処理部にて、前記バッファにバッファリングされたＲＡＷデータを格納したＩＰパケットを生成し、
    ネットワークインタフェースにより、前記生成されたＩＰパケットをネットワークを通じて、前記ＲＡＷデータの現像処理を行うことが可能なサーバに送信し、
    前記サーバから送信される、当該サーバのビジー状態を示すビジー情報を取得し、
    前記取得されたビジー情報をもとに前記バッファの出力レートを変更する
    撮像方法。
  10. 撮像装置と、この撮像装置とネットワークを通じて接続可能なサーバとを具備し、
    前記撮像装置は、
    カラー用の撮像素子と、
    前記撮像素子より出力されたカラー毎のアナログ信号をデジタル信号に変換してＲＡＷデータを生成するＡ／Ｄ変換器と、
    前記Ａ／Ｄ変換器により生成された前記ＲＡＷデータをバッファリングするバッファと、
    前記バッファにバッファリングされたＲＡＷデータを格納したＩＰパケットを生成する送信処理部と、
    前記生成されたＩＰパケットをネットワークを通じて前記サーバに送信するネックワークインタフェースと、
    前記サーバから送信される、当該サーバのビジー状態を示すビジー情報を取得するビジー情報取得部と、
    前記取得されたビジー情報をもとに前記バッファの出力レートを変更するコントローラとを具備し、
    前記サーバが、
    前記ＲＡＷデータの現像処理を行うように構成されたＣＰＵ
    を具備する撮像システム。
JP2016503954A 2014-02-19 2015-01-08 撮像装置、撮像方法および撮像システム Active JP6658504B2 (ja)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
JP2014029440 2014-02-19
JP2014029440 2014-02-19
PCT/JP2015/000062 WO2015125405A1 (ja) 2014-02-19 2015-01-08 撮像装置、撮像方法および撮像システム

Publications (2)

Publication Number Publication Date
JPWO2015125405A1 JPWO2015125405A1 (ja) 2017-03-30
JP6658504B2 true JP6658504B2 (ja) 2020-03-04

Family

ID=53877934

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2016503954A Active JP6658504B2 (ja) 2014-02-19 2015-01-08 撮像装置、撮像方法および撮像システム

Country Status (5)

Country Link
US (1) US10469727B2 (ja)
EP (1) EP3079344B1 (ja)
JP (1) JP6658504B2 (ja)
CN (1) CN105981364A (ja)
WO (1) WO2015125405A1 (ja)

Families Citing this family (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP7483386B2 (ja) 2020-01-21 2024-05-15 キヤノン株式会社 画像処理システム

Family Cites Families (20)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US7369160B2 (en) * 2001-06-15 2008-05-06 Yokogawa Electric Corporation Camera system for transferring both image data and an image processing program to transfer the image data to an external device
JP4782951B2 (ja) * 2001-07-31 2011-09-28 富士通株式会社 放送型通信システム
CN100515035C (zh) * 2001-09-10 2009-07-15 株式会社尼康 数字照相机系统、图像存储装置和数字照相机
JP4240973B2 (ja) * 2002-09-26 2009-03-18 ソニー株式会社 画像処理システム、画像処理装置および方法、記録媒体、並びにプログラム
JP2004147104A (ja) * 2002-10-24 2004-05-20 Sony Corp 動画像符号化装置
JP2004147262A (ja) * 2002-10-28 2004-05-20 Matsushita Electric Ind Co Ltd ネットワークカメラ装置およびカメラ映像配信方法
JP4636777B2 (ja) * 2002-12-06 2011-02-23 三洋電機株式会社 デジタルカメラ、デジタルカメラの制御方法およびファイルサーバ
US7548258B2 (en) * 2003-11-21 2009-06-16 Arecont Vision Llc. High resolution network video camera with massively parallel implementation of image processing, compression and network server
JP2007142551A (ja) * 2005-11-15 2007-06-07 Nikon Corp プログラムおよび情報処理装置
JP4847161B2 (ja) * 2006-03-02 2011-12-28 キヤノン株式会社 画像送信装置および撮像装置
JP2008048050A (ja) * 2006-08-11 2008-02-28 Hitachi Kokusai Electric Inc 暗号化データ通信システム
JP2008236396A (ja) * 2007-03-20 2008-10-02 Fujifilm Corp カメラシステム、撮像装置及びサービスサーバ
JP4908343B2 (ja) 2007-08-06 2012-04-04 オリンパス株式会社 撮像システム
CN100587638C (zh) * 2008-04-29 2010-02-03 上海交通大学 针对高实时性图像采集与处理的机器视觉系统
WO2010036445A1 (en) * 2008-07-22 2010-04-01 Validity Sensors, Inc. System, device and method for securing a device component
JP2011216948A (ja) 2010-03-31 2011-10-27 Sony Corp カメラシステム、映像処理装置及びカメラ装置
JP2012005056A (ja) * 2010-06-21 2012-01-05 Canon Inc 画像処理装置、画像処理方法及びプログラム
JP2012256118A (ja) * 2011-06-07 2012-12-27 Canon Inc 画像復元装置およびその方法
US20130321458A1 (en) * 2012-05-30 2013-12-05 Northrop Grumman Systems Corporation Contextual visualization via configurable ip-space maps
US9608809B1 (en) * 2015-02-05 2017-03-28 Ionic Security Inc. Systems and methods for encryption and provision of information security using platform services

Also Published As

Publication number Publication date
EP3079344A1 (en) 2016-10-12
CN105981364A (zh) 2016-09-28
WO2015125405A1 (ja) 2015-08-27
JPWO2015125405A1 (ja) 2017-03-30
EP3079344A4 (en) 2017-07-26
US20160353003A1 (en) 2016-12-01
US10469727B2 (en) 2019-11-05
EP3079344B1 (en) 2021-03-03

Similar Documents

Publication Publication Date Title
US9172907B2 (en) Method and apparatus for dynamically adjusting aspect ratio of images during a video call
US7876360B2 (en) Image data transfer processor and surveillance camera system
US9344678B2 (en) Information processing apparatus, information processing method and computer-readable storage medium
US10785511B1 (en) Catch-up pacing for video streaming
JP2008219479A (ja) 画像伝送システム、撮像装置、及び画像伝送方法
TWI655865B (zh) 用於組態自數位視訊攝影機輸出之視訊串流之方法
US20190306462A1 (en) Image processing apparatus, videoconference system, image processing method, and recording medium
WO2017164983A1 (en) Adaptation of streaming data based on the environment at a receiver
JP6658504B2 (ja) 撮像装置、撮像方法および撮像システム
WO2018003938A1 (ja) 映像信号処理装置、映像信号処理方法、およびプログラム
JP5836090B2 (ja) 撮像装置及び制御方法
JP2012137900A (ja) 映像出力システム、映像出力方法及びサーバ装置
US8427577B2 (en) Method for converting between interlaced video and progressive video during transmission via a network
KR100623710B1 (ko) 하드웨어 리소스를 공유하여 복수의 동영상 콘텐츠를처리하는 방법
EP2495972A1 (en) Monitoring device and method for monitoring a location
KR20150095080A (ko) 영상 데이터 전송 장치 및 방법
US20230034162A1 (en) Transmission apparatus and transmission method
JP2006270346A (ja) 映像配信システムおよびネットワークカメラ
KR101212947B1 (ko) 데이터 전송 장치
KR20160046561A (ko) 영상 관리 장치 및 방법
CN103281510A (zh) 将数码成像装置的数码图像传输至主机的方法
JP2015073154A (ja) データ伝送システム、データ伝送プログラム及びデータ伝送方法
JP2004282598A (ja) 画像生成装置、画像生成方法、プログラム、および記録媒体
JP2017022546A (ja) 通信装置

Legal Events

Date Code Title Description
A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20180105

A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20180105

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20190108

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20190311

A02 Decision of refusal

Free format text: JAPANESE INTERMEDIATE CODE: A02

Effective date: 20190806

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20191106

A911 Transfer to examiner for re-examination before appeal (zenchi)

Free format text: JAPANESE INTERMEDIATE CODE: A911

Effective date: 20191115

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20200107

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20200120

R151 Written notification of patent or utility model registration

Ref document number: 6658504

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R151