JP2013174584A - シーン内の反射物を再構成する方法 - Google Patents

シーン内の反射物を再構成する方法 Download PDF

Info

Publication number
JP2013174584A
JP2013174584A JP2013006564A JP2013006564A JP2013174584A JP 2013174584 A JP2013174584 A JP 2013174584A JP 2013006564 A JP2013006564 A JP 2013006564A JP 2013006564 A JP2013006564 A JP 2013006564A JP 2013174584 A JP2013174584 A JP 2013174584A
Authority
JP
Japan
Prior art keywords
scene
model
signal
reflector
array
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
JP2013006564A
Other languages
English (en)
Other versions
JP5950835B2 (ja
JP2013174584A5 (ja
Inventor
Petros T Boufounos
ペトロス・ティー・ボウフォウノス
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Mitsubishi Electric Corp
Original Assignee
Mitsubishi Electric Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Mitsubishi Electric Corp filed Critical Mitsubishi Electric Corp
Publication of JP2013174584A publication Critical patent/JP2013174584A/ja
Publication of JP2013174584A5 publication Critical patent/JP2013174584A5/ja
Application granted granted Critical
Publication of JP5950835B2 publication Critical patent/JP5950835B2/ja
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • GPHYSICS
    • G01MEASURING; TESTING
    • G01SRADIO DIRECTION-FINDING; RADIO NAVIGATION; DETERMINING DISTANCE OR VELOCITY BY USE OF RADIO WAVES; LOCATING OR PRESENCE-DETECTING BY USE OF THE REFLECTION OR RERADIATION OF RADIO WAVES; ANALOGOUS ARRANGEMENTS USING OTHER WAVES
    • G01S7/00Details of systems according to groups G01S13/00, G01S15/00, G01S17/00
    • G01S7/02Details of systems according to groups G01S13/00, G01S15/00, G01S17/00 of systems according to group G01S13/00
    • G01S7/28Details of pulse systems
    • G01S7/285Receivers
    • G01S7/295Means for transforming co-ordinates or for evaluating data, e.g. using computers
    • GPHYSICS
    • G01MEASURING; TESTING
    • G01SRADIO DIRECTION-FINDING; RADIO NAVIGATION; DETERMINING DISTANCE OR VELOCITY BY USE OF RADIO WAVES; LOCATING OR PRESENCE-DETECTING BY USE OF THE REFLECTION OR RERADIATION OF RADIO WAVES; ANALOGOUS ARRANGEMENTS USING OTHER WAVES
    • G01S13/00Systems using the reflection or reradiation of radio waves, e.g. radar systems; Analogous systems using reflection or reradiation of waves whose nature or wavelength is irrelevant or unspecified
    • G01S13/88Radar or analogous systems specially adapted for specific applications
    • G01S13/89Radar or analogous systems specially adapted for specific applications for mapping or imaging
    • GPHYSICS
    • G01MEASURING; TESTING
    • G01SRADIO DIRECTION-FINDING; RADIO NAVIGATION; DETERMINING DISTANCE OR VELOCITY BY USE OF RADIO WAVES; LOCATING OR PRESENCE-DETECTING BY USE OF THE REFLECTION OR RERADIATION OF RADIO WAVES; ANALOGOUS ARRANGEMENTS USING OTHER WAVES
    • G01S17/00Systems using the reflection or reradiation of electromagnetic waves other than radio waves, e.g. lidar systems
    • G01S17/88Lidar systems specially adapted for specific applications
    • G01S17/89Lidar systems specially adapted for specific applications for mapping or imaging
    • GPHYSICS
    • G01MEASURING; TESTING
    • G01SRADIO DIRECTION-FINDING; RADIO NAVIGATION; DETERMINING DISTANCE OR VELOCITY BY USE OF RADIO WAVES; LOCATING OR PRESENCE-DETECTING BY USE OF THE REFLECTION OR RERADIATION OF RADIO WAVES; ANALOGOUS ARRANGEMENTS USING OTHER WAVES
    • G01S7/00Details of systems according to groups G01S13/00, G01S15/00, G01S17/00
    • G01S7/48Details of systems according to groups G01S13/00, G01S15/00, G01S17/00 of systems according to group G01S17/00
    • G01S7/483Details of pulse systems
    • G01S7/486Receivers
    • GPHYSICS
    • G01MEASURING; TESTING
    • G01CMEASURING DISTANCES, LEVELS OR BEARINGS; SURVEYING; NAVIGATION; GYROSCOPIC INSTRUMENTS; PHOTOGRAMMETRY OR VIDEOGRAMMETRY
    • G01C3/00Measuring distances in line of sight; Optical rangefinders
    • G01C3/02Details
    • G01C3/06Use of electric means to obtain final indication
    • G01C3/08Use of electric radiation detectors
    • GPHYSICS
    • G01MEASURING; TESTING
    • G01SRADIO DIRECTION-FINDING; RADIO NAVIGATION; DETERMINING DISTANCE OR VELOCITY BY USE OF RADIO WAVES; LOCATING OR PRESENCE-DETECTING BY USE OF THE REFLECTION OR RERADIATION OF RADIO WAVES; ANALOGOUS ARRANGEMENTS USING OTHER WAVES
    • G01S15/00Systems using the reflection or reradiation of acoustic waves, e.g. sonar systems
    • G01S15/003Bistatic sonar systems; Multistatic sonar systems
    • GPHYSICS
    • G01MEASURING; TESTING
    • G01SRADIO DIRECTION-FINDING; RADIO NAVIGATION; DETERMINING DISTANCE OR VELOCITY BY USE OF RADIO WAVES; LOCATING OR PRESENCE-DETECTING BY USE OF THE REFLECTION OR RERADIATION OF RADIO WAVES; ANALOGOUS ARRANGEMENTS USING OTHER WAVES
    • G01S15/00Systems using the reflection or reradiation of acoustic waves, e.g. sonar systems
    • G01S15/88Sonar systems specially adapted for specific applications
    • G01S15/89Sonar systems specially adapted for specific applications for mapping or imaging

Landscapes

  • Engineering & Computer Science (AREA)
  • Remote Sensing (AREA)
  • Physics & Mathematics (AREA)
  • Radar, Positioning & Navigation (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • General Physics & Mathematics (AREA)
  • Electromagnetism (AREA)
  • Measurement Of Velocity Or Position Using Acoustic Or Ultrasonic Waves (AREA)
  • Radar Systems Or Details Thereof (AREA)

Abstract

【課題】この発明によれば、シーン内の反射物を再構成する方法が得られる。
【解決手段】シーン内の反射物が反射信号を用いて再構成される。まず、信号がシーンに送信され、反射信号が、アレイに配置された受信機によって受信される。次に、反射信号が処理されて、シーン内の反射物が再構成され、この処理は、任意の反射物の前および後ろにあるシーンの反射率がゼロに等しいモデルを実施する。
【選択図】図3

Description

この発明は、包括的には、アクティブコヒーレント信号を用いてシーン内の奥行きを検知することに関し、より詳細には、シーン内の反射物の距離をコヒーレントに検知することに関する。
信号取得ハードウェアおよび信号取得ソフトウェアの進歩によって、様々な信号形式のコヒーレント処理が大幅に改善されてきた。これによって、超音波検知およびミリ波レーダなどの技術を用いたますます正確な距離測定が可能になる。非貫通性(non−penetrating)のコヒーレント信号を用いると、シーン内の奥行きを測定して再構成し、奥行きマップを形成することが可能である。
アクティブセンサアレイ
通常のコヒーレントアクティブアレイは、送信構成要素および受信構成要素を備える。これらは、検知形式および利用可能なハードウェアに応じて、別々の物理デバイスとすることもできるし、同じトランスデューサとすることもできる。各送信機がパルスを送信し、パルスは、シーン内の物体から反射され、受信機によって受信される。コヒーレント受信機が反射パルスの波形を受信し、反射パルスの波形は処理されて、シーンからの所望の情報が回復される。これは、受信信号の時間平均エネルギーしか取得することができない可視光センサなどの非コヒーレント受信機とは対照的である。
反射波形を取得することができることによって、コヒーレントアレイは、送信パルスが送信された時刻から反射パルスが受信されるまでの送信パルスの伝搬時間を測定することが可能になる。したがって、シーン内の反射物の距離および位置、すなわちシーンの奥行きを推定することが可能である。
具体的には、送信機sはパルスp(t)をシーンに送信する。このパルスは、送信機から距離dにある反射物によって反射され、反射物から距離dにある受信機によって、τsr=(d+d)/cだけ遅延して受信される。ここで、cは送信信号の速度である。送信機および受信機が無指向性であると仮定すると、受信信号は、y(t)=xp(t−τsr)である。式中、xは反射物の反射率である。
多くの場合、この遅延を周波数領域、すなわち、
Figure 2013174584
で表すことがより便利である。式中、大文字はフーリエ変換を表す。この伝搬方程式は線形である。すなわち、重ね合わせの原理を用いて、複数のパルスの送信からの受信信号および複数の反射物からの反射を表すことができる。センサの指向性を組み込むことは簡単である。
レーダ探知システムを表すために、シーンは、その全体が考慮される。シーンは、N個の点の格子を用いて離散化され、N個の点は、xを用いて各点の反射率を表す。周波数に依存した反射率をモデル化することは簡単ではあるが、反射率は周波数の関数として一定であると仮定される。τsrnを用いて送信機sから格子点nを通って受信機rまでの伝搬遅延を表すと、伝搬方程式は、
Figure 2013174584
となる。
モデルベースの圧縮センシング
圧縮センシングは、信号が存在する周囲空間の割合ではなく、信号の複雑度の割合で信号を取得して再構成する能力を大幅に改善することを可能にする。これは、信号モデルを用いて達成される。従来の圧縮センシングを定式化したものは、信号が或る基底においてスパース(sparse:疎)であると仮定する。再構成中に実施されるスパース性モデルは、周囲信号の次元よりも低い割合で信号を取得することから生じる劣決定システムにおける曖昧性を解消する。
スパースは、本明細書において用いられるとき、信号処理においてよく知られた技術用語であり、相対的な不明瞭な用語ではない。「スパース」近似は、高次元の観測データおよび取得行列を所与として連立一次方程式を満たすスパースベクトル、すなわちほとんどの係数がゼロに等しいかまたはほぼ等しいベクトルを推定する。
スパース性以外の信号モデルを用いて、サンプリング要件を削減し、再構成の性能を改善することもできる。多様体、群スパース性モデル、結合スパース性モデル、および融合フレームスパース性(fusion frame sparsity)モデルが例示のモデルである。多数のこれらのモデルは、信号が、よく知られた再構成プロセスおよび回復条件を有するより一般的なモデルである、部分空間の和集合に属することを仮定することによって表すことができる。従来の信号スパース性は、部分空間の和集合のモデルの特殊な場合でもある。
通常、線形システム
y=Ax (2)
を用いて取得された測定値から信号を回復する際に部分空間の和集合が用いられる。式中、Aは取得システムを表し、取得システムは、通例、劣決定である。信号は、Aに関する或る特定の条件下で、入力信号と一致する部分空間のうちの部分空間の和集合に属するベクトル
Figure 2013174584
を求めることによって回復することができる。
モデルベースの圧縮サンプリングマッチング追跡(CoSaMP)およびモデルベースの反復型硬閾値法(IHT)などの通常の欲張りプロセスは、それらの非モデルベースの対応するものを一般化したものであり、
Figure 2013174584
を最適化するように試みるものである。式中、Sは、モデルに対して許される信号の空間である。Sをその凸緩和と置き換えることによって、欲張りプロセスの代わりに凸最適化手順を用いることができる。
幾つかの欲張りプロセスは、2つの基本ステップを反復する。第1に、対象となる信号の候補台集合(support)が特定され、第2に、その台集合上のシステムが反転される。それ以外のものは、コスト関数‖y−Ax‖を改善することと、制約付きの信号台集合を実施することとを反復する。モデルベースの対応するものは、対象となる信号の台集合モデルに従って、台集合特定ステップまたは実施ステップを変更する。
モデルベースの凸最適化手順は、幾つかの方法で実施することができる。通例、これらの手順は、データ忠実度コスト‖y−Ax‖を、信号モデルからの逸脱にペナルティを科す凸関数であるモデルベースのコストg(x)とバランスさせるように試みる。たとえば、ほとんどの圧縮センシングの用途に用いられている標準的なスパース性モデルでは、モデルベースのコストは、lペナルティg(x)=‖x‖である。そのような凸コストを最適化する1つの手法は、コストのデータ忠実度部分を改善する勾配降下法と、モデルベースのコストを改善する硬閾値法または軟閾値法のステップとを交互に行うことである。
この発明の実施の形態は、アクティブコヒーレント検知を用いてシーン内の奥行きを検知する方法を提供する。シーンは、スパースではあるが、さらなる重要な構造を示す。この構造は、従来のスパース回復プロセスを用いると利用することはできない。
したがって、この発明は、遮蔽制約を実施するシーンモデルを用いて奥行きマップを回復する。
この発明は、よく知られたモデルベースの圧縮サンプリングマッチング追跡(CoSaMP)プロセスの一変形形態を提供し、これによって、再構成の性能は大幅に改善される。
より具体的には、本方法は、アクティブコヒーレント検知システムを用いて、パルスをシーンに送信する。パルスは、シーン内の反射物(物体)によって反射される。反射パルスは、システムによって受信され、処理されてシーンの奥行きが再構成される。この処理は、欲張り再構成方法または凸再構成方法を用いる。この方法は、奥行き検知に最適な信号モデルを実施する。
具体的には、このモデルは、検知システムから離れるあらゆる方向に沿って、回復された信号が1つの反射物しか含むことができないこと、すなわち、1つの反射物しか特定することができないことを規定する。特定された反射物の後ろにあるいずれの物体も、特定された反射物によって覆い隠され、特定された反射物の前にあるいずれの物体も、反射物を覆い隠し、したがって、反射物は特定可能ではなくなる。
この発明は、奥行き検知の用途にコヒーレント検知技術を用いる。そのような用途について、スパース性モデルおよびシーンモデルがシステム性能の改善に重要な役割を果たす。モデルおよび対応する方法は、奥行きマップの特定の構造を考慮に入れるように明示的に設計される。
この発明の実施形態による複数の受信機によって奥行き検知されるシーンおよび反射物の概略図である。 この発明の実施形態による、物体を検知するセンサアレイを有するシーンモデルの概略図である。 この発明の実施形態によるモデルの実施の概略図である。 この発明の実施形態による、最大の奥行きを求めるプロセスの流れ図である。 この発明の実施形態による奥行き検知のための方法の流れ図である。 この発明の実施形態によるモデルベースの圧縮サンプリングマッチング追跡(CoSaMP)の一変形形態の疑似コードである。 この発明の実施形態によるトランケーション演算子プロセスの疑似コードである。 従来の再構成とモデルベースの再構成とを比較するブロック概略図である。
奥行き検知のための信号取得モデル
この発明の実施形態は、シーンの奥行きマップを得る方法を提供する。
図1Aに示すように、実施形態はアクティブコヒーレント検知アレイを用いる。簡単にするために、1つの送信機101および複数の受信機102が、反射物(物体)103を含むシーンからの反射パルスを検知する。たとえば、各送信機に、他の送信機とは別にパルスを送信させ、反射を記録し、拡大再構成問題を形成することによって、複数の送信機を容易に組み込むことができる。代替的に、複数の送信機は、異なるパルス、たとえば直交パルス、非コヒーレントパルス、またはランダム生成パルスを用いて同時に送信を行うことができる。
実施形態は、2次元シーンまたは3次元シーンを検知するために、直線アレイまたは平面アレイをそれぞれ用いる。この発明は、シーン内の各反射物からアレイまでの奥行きdすなわち距離を求める。送信信号は、シーン内の物体を貫通しない。二次反射は考慮されない。換言すれば、シーン内の物体は、その背後にあるあらゆる物を見えなくするかまたは覆い隠す。
特殊な場合として、実施形態は、遠距離場近似の下で平面アレイを調べる。すなわち、シーン内の反射物103は、反射信号が受信機102においてほぼ平面104となるようにアレイから十分遠くにある。
遠距離場近似では、シーン内の各点n105は、アレイからの距離dと、φ=[θxn θynで表される、アレイ平面の法線に対する2次元角度θとによって表される。変換ψ=[sinθxn sinθynが定義される。2次元シーンを検知する直線アレイの場合、唯一の変更は角度が1次元であるということである。以下、角度ψは、奥行き座標dとは対照的に方位座標(orientation coordinates)である。
アレイの座標平面における各受信機rのロケーションは、v=[xとして定義される。したがって、遠距離場近似の下では、信号が送信機からシーンの点nまで進み、センサrまで戻る距離は、2d+xsinθxn+ysinθyn=2d+v ψに等しく、対応する遅延は、(2d+v ψ)/cに等しい。したがって、受信機は、
Figure 2013174584
によって表すことができる。1つの送信機しか用いられていないので、式中、式(1)におけるsに対する依存関係は取り除かれている。式(4)における線形システムは、
Y(ω)=A(ω) (5)
を用いて簡潔に表される。
このシステムは、通常は広帯域である。
周波数空間は、ω,・・・,ωに離散化され、システム全体は、上述したように、
Figure 2013174584
である。以下、Aを伝搬行列とも呼ぶ。
実施するために、行列Aの随伴エルミート行列(adjoint)をA(ω)の随伴エルミート行列から求めることは簡単である。
Figure 2013174584
一様なアレイまたは他の構造化されたアレイの多くの場合に、A(ω)およびその随伴エルミート行列の効率的な計算が可能である。これらの場合、式(7)は、Aの明示的な計算よりも効率的でもある。
システムが、同時に送信を行う複数の送信機を用いる場合、各送信機が別々に送信を行っているかのように形成された個々の伝搬行列を加算することによる重ね合わせの原理を用いて、伝搬行列A全体を形成することができる。
また、システムが、幾つかの送信機は別々に送信を行い、幾つかの送信機は他の送信機と同時に送信を行う複数の送信機を用いる場合、各送信に対応する行列を積み重ねることによって別々の送信および同時の送信の任意の組み合わせを含むように伝搬行列Aを拡大することができる。
たとえば、システムが3つの送信機を用い、各送信機は、1つの特定のパルスを送信し、対応する伝搬行列A、AおよびAを有する。第1の送信機が単独で送信を行い、データがYに記録され、その後、送信機2および3からの同時の送信が続き、データがYに記録され、その後、送信機1および2からの同時の送信が続き、データがYに記録される場合、システム全体の式は、
Figure 2013174584
となる。
シーンモデル
図1Bおよび図2Aは、この発明の実施形態によるシーンモデル150を示している。図は、アレイ201および物体(反射物)202を示している。送信パルスが、特定の方向に沿ったシーン内のいずれの反射物によっても反射されない場合、この方向に沿った全てのシーンの点xは反射せず、したがって、それらの点の反射率はゼロに等しい。目に見える反射物が或る方向に沿って存在する場合、その反射物の前にある、この方向に沿ったシーン点は空、すなわちゼロである。そうでない場合、反射物は、遮蔽され、目に見えない。反射物の背後にある点もゼロである。その理由は、別の反射物がそこにあったとしても、信号は、反射物の背後にある点には決して到達せず、したがって、反射されないからである。加えて、方向のうちの僅かなもののみが、空ではなく反射物を含み得ることをさらに実施することができる。
たとえば、平面アレイでは、座標ψ=ψおよびd≠dを有する2つの点m、nが、ともに非ゼロの反射率を有することはできない。換言すれば、係数空間は群に分割され、群内の全ての要素が同じ方位座標を有する(すなわち、受信機から同じ方向で離れている)場合、各群は1スパースである。奥行きマップ自体が物体の数においてデンス(dense:密)でない場合、さらなる構造を課すことができ、言い換えれば、群のうちのK個の群のみがアクティブであること、すなわち、方位方向のうちのK個の方位方向に沿ってのみ物体が存在することを課すことができる。ここで、Kは所望のスパース性である。
これは、部分空間の和集合のモデルである。座標空間がN×4N個の方位点およびN個の奥行き点に離散化されると仮定すると、モデルを含む部分空間の数は
Figure 2013174584
である。式中、奥行きマップがデンスであるとき、K=Nである。式(8)の左辺における部分空間の数に対する上限は、制約無しのKスパースシーンモデルと同じである。これは、上限が緩いことを意味し、部分空間の数に依存する或る特定の保証を、その限界を用いて改善することができないことを意味する。しかしながら、これは、モデルが単純なスパース性を上回る改良物でないことを意味するものではない。モデルを実施することによって、結果は、制約無しのスパース性モデルを上回って大幅に改善される。
モデルの実施
図2Aは、取得された信号202に対するモデルの実施201と、その結果の実施された信号203とを示している。明らかに、反射物204までの奥行きは実施後により良くなっている。
図2Bに示すように、指定された方向に沿った各ラインについて(211)、この実施によって、大きさ係数において最大の奥行きが求められ(212)、他の全ての係数がゼロに設定される(213)。
再構成方法
図3は、この発明の実施形態による再構成方法を示している。説明を要しない疑似コードを図4に示す。これらのステップは、推定された信号が収束するまで反復する。レーダ信号再構成は極めて複雑であり、したがって、方法のステップは、当該技術分野で知られているようにメモリおよび入出力インターフェースに接続されたプロセッサ300において実行される。
最初に(ステップ1)、信号推定値がゼロに設定される(310)。入力データ301は、取得された信号の行列Yである。ステップ4において、入力データが信号推定値とどれくらい一致していないかを表す残差、すなわちR=Y−Axが、信号推定値および入力データ(信号)から求められる(320)。
次に(330)、現在の信号推定値、信号モデルおよび残差を用いて信号推定値が更新される。再構成手順に応じて、モデルは、このステップにおいて用いられる場合もあるし、用いられない場合もある。
次に、ステップ340において、信号推定値が、モデルを実施することによって更新される。プロセスは収束するまで320から繰り返される。
図4は、図3におけるステップの1つの可能な実施態様、具体的にはこの発明の実施形態によるモデルベースのCoSaMPの一変形形態の疑似コードを示している。
図4のステップ1は310に対応し、ステップ4は320に対応し、ステップ5、6、7および8は330に対応し、ステップ9および10は340に対応し、ステップ2、3および11は収束までの反復(繰り返し)に対応する。
信号推定値の更新は、プロキシ(proxy)
Figure 2013174584
を計算するステップ5(信号勾配の更新)によって実行され、次いで、ステップ6において、台集合候補
Figure 2013174584
が特定される。
直線探索がステップ7において用いられ、ステップ5において計算された勾配にどの程度追従しているのかが求められ、推定値が改善される。ステップ8は、ステップ7によって求められた信号推定値を改善し、一時的な信号推定値を形成する。この信号は、ステップ9および10において、モデルに従ってトランケートされる。
標準的なCoSaMPおよび標準的なモデルベースのCoSaMPと比較したこの変形形態の違いは次のとおりである。第1の違いは、従来技術のように疑似逆行列を用いる完全最小二乗最小化(full least−squares minimization)の代わりに、ステップ7において直線探索を用いてコストを削減することである。これによって、伝搬行列A(ω)が関数形式でのみ利用可能であれば、明示的に利用可能でなくても、プロセスは大幅により効率的になる。変更されたプロセスには、A(ω)およびその随伴エルミート行列の適用が必要とされ、これは、通例、アレイの適用において容易に計算可能である。
第2の違いは、モデルの要件に従って台集合特定ステップ6および9が変更されていることである。具体的には、トランケーション演算trunc(x)の疑似コードを図2Bおよび図5に示す。
トランケーションは、先ず、各方位において、単一の最大の奥行きの大きさ係数を選択し、次いで、それらのうちのK個の最大のものを選択する。したがって、各方位において1つの係数のみが常に選択される。これによって、上述した遮蔽制約が実施される。
この発明は、奥行き検知の用途にコヒーレント検知技術を用いる。そのような用途について、スパース性モデルおよびシーンモデルがシステム性能の改善に重要な役割を果たす。モデルおよび対応する方法は、奥行きマップの特定の構造を考慮に入れるように明示的に設計される。
図6は、従来技術の逆投影および従来技術のCoSaMPを、この発明の実施形態によるモデルベースの再構成と比較している。左から右に、図は、元のシーン、逆投影再構成、CoSaMPを用いた従来のスパース性ベースの再構成、およびこの発明の実施形態によるモデルベースのCoSaMPを用いたモデルベースの再構成を示している。上段は、21個の要素のアレイの場合の結果を示し、下段は、15個の要素のアレイの場合の結果を示している。モデルベースの手法は良好な結果を与えていることが明らかである。
この比較は、76.5GHzを中心とした3GHzの周波数帯域幅で動作するミリ波システムを用いてシミュレートされている。角度空間ψは、201個の全格子点について(角度の正弦の寸法で)0.01の解像度で離散化されている。シーンは、2cmの格子解像度を伴う1mの最大奥行きを有する。
上段は、モデルベースの手法を用いて補正された、従来のスパース性ベースの圧縮センシングの通常の失敗の態様を示している。逆投影結果からわかるように、近傍ピクセルの比較的高いコヒーレンスに起因して、反射物の回りに大きな曖昧性がある。これらは、従来のスパース性ベースのCS再構成を混乱させる可能性がある。たとえば、CoSaMPは、反射物のうちの1つおよびその回りの領域しか検出しない。
再構成された信号の所望のスパース性を低減することによっても、性能は改善しない。モデルベースの手法は、これらの曖昧性を解消し、信号を正確に再構成する。
曖昧性が大きい場合であっても、下段に示す例のように、モデルは、再構成の性能を大幅に改善する。具体的には、逆投影再構成の大きな水平ブラーによって示されるように、アレイの要素の数を削減することによって、アレイの曖昧性が増大する。予想されるように、単純なスパース再構成はシーンを回復することができない。モデルベースの手法は、奥行きマップの台集合の特定を大幅に改善する。全変動ベースの平滑化(total−variation based smoothing)などのその後の処理を用いて、作成された奥行きマップをさらに平滑化することもできる。

Claims (21)

  1. 反射信号を用いてシーン内の反射物を再構成する方法であって、
    送信機を用いて、前記シーンに信号を送信する、送信機を用いるステップと、
    受信機を用いるステップであって、前記シーン内の前記反射物から反射された前記信号を前記反射信号として受信し、前記受信機はアレイに配列されている、受信機を用いるステップと、
    前記反射信号を処理するステップであって、前記シーン内の前記反射物を再構成し、該処理するステップは、任意の反射物の前および後ろにある前記シーンの反射率がゼロに等しいモデルを実施する、処理するステップと、
    を含む、反射信号を用いてシーン内の反射物を再構成する方法。
  2. 前記送信機および前記受信機はコヒーレントである、請求項1に記載の方法。
  3. 前記信号は広帯域パルスである、請求項1に記載の方法。
  4. 前記アレイは、遠距離場近似の下で直線である、請求項1に記載の方法。
  5. 前記アレイは、遠距離場近似の下で平面である、請求項1に記載の方法。
  6. 前記シーンは点に離散化される、請求項1に記載の方法。
  7. 前記シーン内の各点nは、距離dと、前記アレイの軸の法平面に対する1次元角度θとによって表される、請求項4または請求項6に記載の方法。
  8. 前記シーン内の各点nは、距離dと、前記アレイの平面の法線に対する2次元角度θとによって表される、請求項5または請求項6に記載の方法。
  9. 座標空間が、N×N個の方位点およびN個の奥行き点に離散化され、前記モデルは、
    Figure 2013174584
    であり、式中、Kは所望のスパース性である、請求項6に記載の方法。
  10. 前記シーンはスパースである、請求項1に記載の方法。
  11. 前記パルスは直交に生成される、請求項3に記載の方法。
  12. 前記パルスはランダムに生成される、請求項3に記載の方法。
  13. 前記パルスは非コヒーレントとなるように生成される、請求項3に記載の方法。
  14. 前記処理するステップは、
    前記モデルと一致する初期信号推定値を形成するステップと、
    前記反射信号が前記信号推定値とどの程度一致していないのかを表す残差を求めるステップと、
    前記モデルおよび前記残差に従って現在の信号推定値を用いて前記信号推定値を更新するステップと、
    収束するまで前記求めるステップおよび前記更新するステップを繰り返すステップと、
    を含み、
    前記信号推定値は、前記再構成された反射物であり、前記反射物までの奥行き値を含む、請求項1に記載の方法。
  15. 前記更新するステップは、指定された方向に沿った各ラインについて、大きさ係数において最大の奥行きが非ゼロの点として求められ、他の全ての係数がゼロに設定されるように前記モデルを実施して、信号推定値を更新する、請求項14に記載の方法。
  16. 前記更新するステップは、前記モデルを実施することによって特定される前記シーンの前記非ゼロの点に対して疑似逆行列を実行する、請求項15に記載の方法。
  17. 前記更新するステップは、前記モデルを実施することによって特定される前記シーンの前記非ゼロの点に対して勾配降下を実行する、請求項15に記載の方法。
  18. 前記更新するステップは、勾配降下を実行し、その後に前記モデルを実施する、請求項15に記載の方法。
  19. 前記処理するステップは、前記モデルを実施する欲張り手順によって実行される、請求項1に記載の方法。
  20. 前記処理するステップは、前記モデルを実施する凸最適化手順によって実行される、請求項1に記載の方法。
  21. 座標ψ=ψおよびd≠dを有する2つの点m、nがともに非ゼロの反射率を有するということはない、請求項5に記載の方法。
JP2013006564A 2012-02-27 2013-01-17 シーン内の反射物を再構成するシステム Active JP5950835B2 (ja)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
US13/405,504 2012-02-27
US13/405,504 US9244158B2 (en) 2012-02-27 2012-02-27 Depth sensing using active coherent signals

Publications (3)

Publication Number Publication Date
JP2013174584A true JP2013174584A (ja) 2013-09-05
JP2013174584A5 JP2013174584A5 (ja) 2016-01-28
JP5950835B2 JP5950835B2 (ja) 2016-07-13

Family

ID=49004202

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2013006564A Active JP5950835B2 (ja) 2012-02-27 2013-01-17 シーン内の反射物を再構成するシステム

Country Status (2)

Country Link
US (1) US9244158B2 (ja)
JP (1) JP5950835B2 (ja)

Cited By (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2015021966A (ja) * 2013-07-22 2015-02-02 三菱電機株式会社 壁の背後のシーンにおけるターゲットを検出する方法及びシステム
WO2015093068A1 (ja) * 2013-12-19 2015-06-25 三菱電機株式会社 スペクトル推定装置及びスペクトル推定方法
JP2015128568A (ja) * 2013-12-05 2015-07-16 キヤノン株式会社 劣決定系線型方程式の求解方法及び求解装置
JP2016099346A (ja) * 2014-11-24 2016-05-30 三菱電機株式会社 シーンを再構成するシステムおよび方法
JP2017040644A (ja) * 2015-08-20 2017-02-23 三菱電機株式会社 壁の背後に位置するシーンの雑音のない画像を求めるシステムおよび方法
JP2017532147A (ja) * 2014-10-30 2017-11-02 コーニンクレッカ フィリップス エヌ ヴェKoninklijke Philips N.V. 超音波画像を形成する際の圧縮センシング

Families Citing this family (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US9857463B2 (en) * 2012-11-12 2018-01-02 Sony Corporation Radar apparatus and method
CN106908755B (zh) * 2017-03-01 2019-03-26 西安电子科技大学 无线声传感器网络下压缩气体泄漏的声源方位估计方法
US10609361B2 (en) 2018-06-29 2020-03-31 Semiconductor Components Industries, Llc Imaging systems with depth detection

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2011137817A (ja) * 2009-12-29 2011-07-14 Mitsubishi Electric Research Laboratories Inc ストリーミング測定値からストリーミング信号を再構築するための方法
JP2012502269A (ja) * 2008-09-04 2012-01-26 コーニンクレッカ フィリップス エレクトロニクス エヌ ヴィ 分散スペクトル検知
US20120019406A1 (en) * 2010-07-16 2012-01-26 Sony Corporation Radar tomography apparatus and method

Family Cites Families (20)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US4059759A (en) * 1976-05-25 1977-11-22 The United States Of America As Represented By The United States Energy Research And Development Administration Passive and active pulse stacking scheme for pulse shaping
US5134884A (en) * 1986-05-02 1992-08-04 Forrest Anderson Single pulse imaging device
US4816833A (en) * 1987-06-16 1989-03-28 Westinghouse Electric Corp. Pulse doppler surveillance post signal processing and scan to scan correlation
US5038150A (en) * 1990-05-14 1991-08-06 Hughes Aircraft Company Feed network for a dual circular and dual linear polarization antenna
US5557283A (en) * 1991-08-30 1996-09-17 Sheen; David M. Real-time wideband holographic surveillance system
US5278757A (en) * 1991-11-15 1994-01-11 The Trustees Of The University Of Pennsylvania Synthetic aperture ultrasonic imaging system using a minimum or reduced redundancy phased array
US5734736A (en) * 1994-06-17 1998-03-31 Trw Inc. Autonomous rendezvous and docking system and method therefor
US5988829A (en) * 1997-07-28 1999-11-23 Nsi Enterprises, Inc. Direct/indirect lighting fixtures
US5986815A (en) * 1998-05-15 1999-11-16 Optical Coating Laboratory, Inc. Systems, methods and apparatus for improving the contrast ratio in reflective imaging systems utilizing color splitters
US7209664B1 (en) * 2003-06-10 2007-04-24 Nortel Networks Limited Frequency agile transmitter and receiver architecture for DWDM systems
US20060116579A1 (en) * 2004-11-29 2006-06-01 Pai-Chi Li Ultrasound imaging apparatus and method thereof
US8041087B2 (en) * 2005-04-05 2011-10-18 Bradley University Radiographic imaging display apparatus and method
US7580620B2 (en) * 2006-05-08 2009-08-25 Mitsubishi Electric Research Laboratories, Inc. Method for deblurring images using optimized temporal coding patterns
US7869705B2 (en) * 2008-01-21 2011-01-11 Microsoft Corporation Lighting array control
EP2247978A4 (en) * 2008-01-30 2012-12-26 Qualcomm Mems Technologies Inc THIN LIGHTING SYSTEM
US8711128B2 (en) * 2010-11-05 2014-04-29 Synaptics Incorporated Method and apparatus for sensing an input object relative to a sensing region of an ultrasound sensor device
US9076255B2 (en) * 2011-05-31 2015-07-07 General Electric Company Method and system for reconstruction of tomographic images
US8982363B2 (en) * 2011-10-07 2015-03-17 Massachusetts Institute Of Technology Method and apparatus to determine depth information for a scene of interest
CA2851839C (en) * 2011-10-17 2020-09-15 Butterfly Network, Inc. Transmissive imaging and related apparatus and methods
US8816899B2 (en) * 2012-01-26 2014-08-26 Raytheon Company Enhanced target detection using dispersive vs non-dispersive scatterer signal processing

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2012502269A (ja) * 2008-09-04 2012-01-26 コーニンクレッカ フィリップス エレクトロニクス エヌ ヴィ 分散スペクトル検知
JP2011137817A (ja) * 2009-12-29 2011-07-14 Mitsubishi Electric Research Laboratories Inc ストリーミング測定値からストリーミング信号を再構築するための方法
US20120019406A1 (en) * 2010-07-16 2012-01-26 Sony Corporation Radar tomography apparatus and method

Non-Patent Citations (1)

* Cited by examiner, † Cited by third party
Title
JPN6016006028; Petros Boufounos, M. Salman Asif: 'Compressive Sampling for Streaming Signals with Sparse Frequency Content' Information Sciences and Systems (CISS), 2010 44th Annual Conference on , 201003, page.1-6, IEEE *

Cited By (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2015021966A (ja) * 2013-07-22 2015-02-02 三菱電機株式会社 壁の背後のシーンにおけるターゲットを検出する方法及びシステム
JP2015128568A (ja) * 2013-12-05 2015-07-16 キヤノン株式会社 劣決定系線型方程式の求解方法及び求解装置
WO2015093068A1 (ja) * 2013-12-19 2015-06-25 三菱電機株式会社 スペクトル推定装置及びスペクトル推定方法
JP5985079B2 (ja) * 2013-12-19 2016-09-06 三菱電機株式会社 スペクトル推定装置及びスペクトル推定方法
JP2017532147A (ja) * 2014-10-30 2017-11-02 コーニンクレッカ フィリップス エヌ ヴェKoninklijke Philips N.V. 超音波画像を形成する際の圧縮センシング
US11467272B2 (en) 2014-10-30 2022-10-11 Koninklijke Philips N.V. Compressive sensing in forming ultrasound images
JP2016099346A (ja) * 2014-11-24 2016-05-30 三菱電機株式会社 シーンを再構成するシステムおよび方法
JP2017040644A (ja) * 2015-08-20 2017-02-23 三菱電機株式会社 壁の背後に位置するシーンの雑音のない画像を求めるシステムおよび方法

Also Published As

Publication number Publication date
US9244158B2 (en) 2016-01-26
JP5950835B2 (ja) 2016-07-13
US20130226509A1 (en) 2013-08-29

Similar Documents

Publication Publication Date Title
JP5950835B2 (ja) シーン内の反射物を再構成するシステム
US9239388B2 (en) Pairwise grouping of joint sparsity models for sensing array processing
Guerneve et al. Three‐dimensional reconstruction of underwater objects using wide‐aperture imaging SONAR
US9915730B2 (en) Method and system for through-the-wall radar imaging
US9239387B2 (en) Method and system for reconstructing scenes using virtual arrays of transducers and joint sparsity models
JP6828039B2 (ja) 近接場マイクロ波イメージング用の方法及びシステム
CN106066987B (zh) Tof成像中的参数在线校准和补偿
JP6472370B2 (ja) 3次元(3d)シーン画像を生成するシステム及び方法
CN106405548A (zh) 基于多任务贝叶斯压缩感知的逆合成孔径雷达成像方法
CN105866740B (zh) 一种基于压缩感知的水声匹配场定位方法
CN110109101A (zh) 一种基于自适应阈值的压缩感知三维sar成像方法
CN104007414A (zh) 基于平面阵的二维波达方向估计方法和估计器
KR20200065827A (ko) 레이더 영상 재구성 기반 객체 추적 장치 및 방법
US9767361B2 (en) Bathymetric techniques using satellite imagery
Krishnan et al. Synthetic aperture radar imaging exploiting multiple scattering
Zheng et al. DOA estimation via coarray tensor completion with missing slices
Roy et al. Robust array calibration using time delays with application to ultrasound tomography
Boufounos Depth sensing using active coherent illumination
CN103869312A (zh) 一种连续场景的稀疏阵列sar侧视三维成像方法
CN110133656A (zh) 一种基于互质阵列的分解与融合的三维sar稀疏成像方法
CN106918809B (zh) 快速干涉合成孔径声纳原始回波时域仿真方法
CN103048649A (zh) 一种基于相变图分析的稀疏微波成像雷达性能评估方法
US11740328B2 (en) Methods and systems for processing radar signals
JP2004245742A (ja) 地中探査装置
JP6071845B2 (ja) シーンを再構成するシステム

Legal Events

Date Code Title Description
A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20151202

A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20151202

A871 Explanation of circumstances concerning accelerated examination

Free format text: JAPANESE INTERMEDIATE CODE: A871

Effective date: 20151202

A975 Report on accelerated examination

Free format text: JAPANESE INTERMEDIATE CODE: A971005

Effective date: 20151215

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20160223

RD02 Notification of acceptance of power of attorney

Free format text: JAPANESE INTERMEDIATE CODE: A7422

Effective date: 20160316

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20160325

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20160510

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20160607

R150 Certificate of patent or registration of utility model

Ref document number: 5950835

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250