JP7371907B2 - 船舶の航行支援システムにおける管理サーバ、船舶の航行支援方法、及び船舶の航行支援プログラム - Google Patents
船舶の航行支援システムにおける管理サーバ、船舶の航行支援方法、及び船舶の航行支援プログラム Download PDFInfo
- Publication number
- JP7371907B2 JP7371907B2 JP2019233798A JP2019233798A JP7371907B2 JP 7371907 B2 JP7371907 B2 JP 7371907B2 JP 2019233798 A JP2019233798 A JP 2019233798A JP 2019233798 A JP2019233798 A JP 2019233798A JP 7371907 B2 JP7371907 B2 JP 7371907B2
- Authority
- JP
- Japan
- Prior art keywords
- vertices
- radar
- ship
- management server
- target
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
- 238000000034 method Methods 0.000 title claims description 47
- 238000001514 detection method Methods 0.000 claims description 99
- 238000012545 processing Methods 0.000 claims description 62
- 238000004891 communication Methods 0.000 claims description 23
- 239000000284 extract Substances 0.000 claims description 13
- 230000033001 locomotion Effects 0.000 claims description 10
- 239000013598 vector Substances 0.000 claims description 7
- 230000010365 information processing Effects 0.000 claims description 2
- 238000007726 management method Methods 0.000 description 177
- 238000010586 diagram Methods 0.000 description 35
- 230000008569 process Effects 0.000 description 12
- 230000006870 function Effects 0.000 description 11
- 238000012549 training Methods 0.000 description 9
- 101100272667 Xenopus laevis ripply2.2 gene Proteins 0.000 description 6
- 238000012986 modification Methods 0.000 description 6
- 230000004048 modification Effects 0.000 description 6
- 230000005540 biological transmission Effects 0.000 description 5
- 230000001133 acceleration Effects 0.000 description 4
- 230000008859 change Effects 0.000 description 4
- 238000005516 engineering process Methods 0.000 description 3
- 230000007613 environmental effect Effects 0.000 description 3
- 230000004044 response Effects 0.000 description 3
- 239000002131 composite material Substances 0.000 description 2
- 230000008094 contradictory effect Effects 0.000 description 2
- 230000000694 effects Effects 0.000 description 2
- 238000013213 extrapolation Methods 0.000 description 2
- 238000010801 machine learning Methods 0.000 description 2
- 238000005096 rolling process Methods 0.000 description 2
- 239000007787 solid Substances 0.000 description 2
- XLYOFNOQVPJJNP-UHFFFAOYSA-N water Substances O XLYOFNOQVPJJNP-UHFFFAOYSA-N 0.000 description 2
- 238000007792 addition Methods 0.000 description 1
- 230000003321 amplification Effects 0.000 description 1
- 230000004888 barrier function Effects 0.000 description 1
- 230000004397 blinking Effects 0.000 description 1
- 238000006243 chemical reaction Methods 0.000 description 1
- 238000010276 construction Methods 0.000 description 1
- 238000013523 data management Methods 0.000 description 1
- 238000012217 deletion Methods 0.000 description 1
- 230000037430 deletion Effects 0.000 description 1
- 238000000605 extraction Methods 0.000 description 1
- 230000005484 gravity Effects 0.000 description 1
- 238000003384 imaging method Methods 0.000 description 1
- 239000004973 liquid crystal related substance Substances 0.000 description 1
- 238000010295 mobile communication Methods 0.000 description 1
- 238000003199 nucleic acid amplification method Methods 0.000 description 1
- 230000010355 oscillation Effects 0.000 description 1
- 238000012797 qualification Methods 0.000 description 1
- 230000005855 radiation Effects 0.000 description 1
- 238000010079 rubber tapping Methods 0.000 description 1
- 239000013535 sea water Substances 0.000 description 1
Images
Classifications
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B63—SHIPS OR OTHER WATERBORNE VESSELS; RELATED EQUIPMENT
- B63B—SHIPS OR OTHER WATERBORNE VESSELS; EQUIPMENT FOR SHIPPING
- B63B49/00—Arrangements of nautical instruments or navigational aids
-
- G—PHYSICS
- G01—MEASURING; TESTING
- G01S—RADIO DIRECTION-FINDING; RADIO NAVIGATION; DETERMINING DISTANCE OR VELOCITY BY USE OF RADIO WAVES; LOCATING OR PRESENCE-DETECTING BY USE OF THE REFLECTION OR RERADIATION OF RADIO WAVES; ANALOGOUS ARRANGEMENTS USING OTHER WAVES
- G01S7/00—Details of systems according to groups G01S13/00, G01S15/00, G01S17/00
- G01S7/02—Details of systems according to groups G01S13/00, G01S15/00, G01S17/00 of systems according to group G01S13/00
- G01S7/04—Display arrangements
- G01S7/06—Cathode-ray tube displays or other two dimensional or three-dimensional displays
- G01S7/22—Producing cursor lines and indicia by electronic means
-
- G—PHYSICS
- G08—SIGNALLING
- G08G—TRAFFIC CONTROL SYSTEMS
- G08G3/00—Traffic control systems for marine craft
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B63—SHIPS OR OTHER WATERBORNE VESSELS; RELATED EQUIPMENT
- B63B—SHIPS OR OTHER WATERBORNE VESSELS; EQUIPMENT FOR SHIPPING
- B63B43/00—Improving safety of vessels, e.g. damage control, not otherwise provided for
- B63B43/18—Improving safety of vessels, e.g. damage control, not otherwise provided for preventing collision or grounding; reducing collision damage
- B63B43/20—Feelers
-
- G—PHYSICS
- G01—MEASURING; TESTING
- G01S—RADIO DIRECTION-FINDING; RADIO NAVIGATION; DETERMINING DISTANCE OR VELOCITY BY USE OF RADIO WAVES; LOCATING OR PRESENCE-DETECTING BY USE OF THE REFLECTION OR RERADIATION OF RADIO WAVES; ANALOGOUS ARRANGEMENTS USING OTHER WAVES
- G01S13/00—Systems using the reflection or reradiation of radio waves, e.g. radar systems; Analogous systems using reflection or reradiation of waves whose nature or wavelength is irrelevant or unspecified
- G01S13/87—Combinations of radar systems, e.g. primary radar and secondary radar
-
- G—PHYSICS
- G01—MEASURING; TESTING
- G01S—RADIO DIRECTION-FINDING; RADIO NAVIGATION; DETERMINING DISTANCE OR VELOCITY BY USE OF RADIO WAVES; LOCATING OR PRESENCE-DETECTING BY USE OF THE REFLECTION OR RERADIATION OF RADIO WAVES; ANALOGOUS ARRANGEMENTS USING OTHER WAVES
- G01S13/00—Systems using the reflection or reradiation of radio waves, e.g. radar systems; Analogous systems using reflection or reradiation of waves whose nature or wavelength is irrelevant or unspecified
- G01S13/88—Radar or analogous systems specially adapted for specific applications
- G01S13/91—Radar or analogous systems specially adapted for specific applications for traffic control
-
- G—PHYSICS
- G01—MEASURING; TESTING
- G01S—RADIO DIRECTION-FINDING; RADIO NAVIGATION; DETERMINING DISTANCE OR VELOCITY BY USE OF RADIO WAVES; LOCATING OR PRESENCE-DETECTING BY USE OF THE REFLECTION OR RERADIATION OF RADIO WAVES; ANALOGOUS ARRANGEMENTS USING OTHER WAVES
- G01S13/00—Systems using the reflection or reradiation of radio waves, e.g. radar systems; Analogous systems using reflection or reradiation of waves whose nature or wavelength is irrelevant or unspecified
- G01S13/88—Radar or analogous systems specially adapted for specific applications
- G01S13/91—Radar or analogous systems specially adapted for specific applications for traffic control
- G01S13/917—Radar or analogous systems specially adapted for specific applications for traffic control for marine craft or other waterborne vessels
-
- G—PHYSICS
- G01—MEASURING; TESTING
- G01S—RADIO DIRECTION-FINDING; RADIO NAVIGATION; DETERMINING DISTANCE OR VELOCITY BY USE OF RADIO WAVES; LOCATING OR PRESENCE-DETECTING BY USE OF THE REFLECTION OR RERADIATION OF RADIO WAVES; ANALOGOUS ARRANGEMENTS USING OTHER WAVES
- G01S13/00—Systems using the reflection or reradiation of radio waves, e.g. radar systems; Analogous systems using reflection or reradiation of waves whose nature or wavelength is irrelevant or unspecified
- G01S13/88—Radar or analogous systems specially adapted for specific applications
- G01S13/93—Radar or analogous systems specially adapted for specific applications for anti-collision purposes
- G01S13/937—Radar or analogous systems specially adapted for specific applications for anti-collision purposes of marine craft
-
- G—PHYSICS
- G01—MEASURING; TESTING
- G01S—RADIO DIRECTION-FINDING; RADIO NAVIGATION; DETERMINING DISTANCE OR VELOCITY BY USE OF RADIO WAVES; LOCATING OR PRESENCE-DETECTING BY USE OF THE REFLECTION OR RERADIATION OF RADIO WAVES; ANALOGOUS ARRANGEMENTS USING OTHER WAVES
- G01S7/00—Details of systems according to groups G01S13/00, G01S15/00, G01S17/00
- G01S7/003—Transmission of data between radar, sonar or lidar systems and remote stations
-
- G—PHYSICS
- G01—MEASURING; TESTING
- G01S—RADIO DIRECTION-FINDING; RADIO NAVIGATION; DETERMINING DISTANCE OR VELOCITY BY USE OF RADIO WAVES; LOCATING OR PRESENCE-DETECTING BY USE OF THE REFLECTION OR RERADIATION OF RADIO WAVES; ANALOGOUS ARRANGEMENTS USING OTHER WAVES
- G01S7/00—Details of systems according to groups G01S13/00, G01S15/00, G01S17/00
- G01S7/02—Details of systems according to groups G01S13/00, G01S15/00, G01S17/00 of systems according to group G01S13/00
- G01S7/41—Details of systems according to groups G01S13/00, G01S15/00, G01S17/00 of systems according to group G01S13/00 using analysis of echo signal for target characterisation; Target signature; Target cross-section
- G01S7/411—Identification of targets based on measurements of radar reflectivity
- G01S7/412—Identification of targets based on measurements of radar reflectivity based on a comparison between measured values and known or stored values
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
- G06Q10/00—Administration; Management
- G06Q10/04—Forecasting or optimisation specially adapted for administrative or management purposes, e.g. linear programming or "cutting stock problem"
- G06Q10/047—Optimisation of routes or paths, e.g. travelling salesman problem
-
- G06Q50/40—
-
- G—PHYSICS
- G01—MEASURING; TESTING
- G01S—RADIO DIRECTION-FINDING; RADIO NAVIGATION; DETERMINING DISTANCE OR VELOCITY BY USE OF RADIO WAVES; LOCATING OR PRESENCE-DETECTING BY USE OF THE REFLECTION OR RERADIATION OF RADIO WAVES; ANALOGOUS ARRANGEMENTS USING OTHER WAVES
- G01S13/00—Systems using the reflection or reradiation of radio waves, e.g. radar systems; Analogous systems using reflection or reradiation of waves whose nature or wavelength is irrelevant or unspecified
- G01S13/86—Combinations of radar systems with non-radar systems, e.g. sonar, direction finder
Description
しかし、レーダーは、その性能や、周囲状況等に応じて、必ずしも物標の外部形状を正確に表示することができない場合がある。特に小型船舶の場合、その船体特徴から海からの環境変化を受けやすく、船体に上下左右方向の揺れが生じている。このため、レーダー画像をそのまま表示する場合、画像が不鮮明になることがある。
従って、特に小型船舶の場合、搭載したレーダーだけでは十分な航行支援が得られない虞がある。
本願は上記課題を解決する手段を複数含んでいるが、その一例を挙げるならば、船舶の航行支援システムにおける管理サーバであって、前記管理サーバは、物標の探知装置と接続されたユーザ端末との間で、ネットワーク経由でデータの送受信を行う通信手段と、前記物標の探知結果情報に基づいて抽出した物標の複数の頂点のうち、一群として移動する頂点を同一の物標に属するものとして識別する頂点情報管理手段と、を備え、前記同一の物標に属するものとして識別した頂点に基づいて、前記通信手段が、前記物標の輪郭の概要を表示させるように前記ユーザ端末に対して指示を送信することを特徴とする。
さらに、本発明のさらなる態様によれば、船舶の航行支援方法と、船舶の航行支援プログラムとを提供する。
好ましくは、小型船舶上で、スマートフォンやタブレット端末などの安価で簡易な持ち運び可能なユーザ端末を活用した、ネットワークの構築を可能にする。
上記した以外の課題、構成及び効果は、以下の実施形態の説明により明らかにされる。
本船舶航行支援システム1は、船舶2、4、6で使用されるユーザ端末30と管理サーバ(プラットフォーム)50とをネットワーク70を介して接続している。また、本船舶航行支援システム1は、陸上管理端末40と管理サーバ50とをネットワーク70を介して接続している。ユーザ端末30同士の通信も可能である。
ユーザ端末30は、例えば、ユーザが船舶2、4、6等で使用可能なタブレット、スマートフォン等の、携帯型パソコンの機能を有する任意の装置である。
陸上管理端末40は、例えば、ユーザが陸上で使用可能な通常のパーソナルコンピュータまたはノート型パーソナルコンピュータ等の設置型または携帯型パソコンの機能を有する任意の装置である。
管理サーバ50は、例えば、ユーザが陸上で使用可能な通常のパーソナルコンピュータまたはノート型パーソナルコンピュータ等の設置型または携帯型パソコンの機能を有する任意の装置である。また管理サーバ50は、クラウド上のサーバで実装されていてもかまわない。
例えば、ユーザ端末30の通信手段は、携帯電話通信(SIM(Subscriber Identity Module)カードによるデータ通信)によるデータ通信(符号72参照)を用いて、管理サーバ50、陸上管理端末40、または他のユーザ端末30との間でデータを送受信することができる。ユーザ端末を船内のWi-Fi(登録商標)に接続し、Wi-Fi経由で管理サーバ50と通信を行う構成としてもよい。船内Wi-Fiは衛星通信等を用いて陸上のネットワークと接続されていてもよい。陸上管理端末40と管理サーバ50の間のデータ通信(符号74参照)は、無線ネットワークでも有線ネットワークでもかまわない。それぞれの端末30、40はネットワーク70(72、74)を介して管理サーバ50との間で情報を送受信することができる。
他、GPS(GLOBAL POSITIONING SYSTEM)システム、風向風速計システム、国際VHF(Very High Frequency:超短波)無線システム等がネットワーク70に接続することができる。
本明細書では、各モジュールが、処理を行う主体(主語)として記載をしているが、実際には各種プログラムやアプリケーションなど(モジュール)を処理するプロセッサが処理を実行する。
図2は、本発明に係る物標探知装置10の回路構成の概念図の例である。
図2を参照すると、各船舶2、4、6に搭載される物標探知装置10が例示されている。船舶の航行支援のため、船舶には各種の物標探知装置が搭載され得るが、例えば、物標探知装置10はレーダー10である。ただし、物標探知装置10は、物標(ターゲット)の画像を取得可能なカメラ、ライダー(LIDAR)で代用することが可能である。
1秒間に発射される送信パルス信号の数を、パルス繰り返し周波数という。レーダーのパルス繰り返し周波数は、探知する距離、使用するパルス幅により決定される。自船近くの海上を探知する場合、パルス繰り返し周波数は高くなる。一方、遠方を探知するときは、電波の往復に時間がよりかかるため、パルス繰り返し周波数はより低くなる。
レーダー10により出力可能な物標情報は、例えば、自船から物標までの相対距離、自船から物標までの方位、物標を探知したとき時刻や物標の速度等が検出可能となっている。レーダー10によって探知された物標に対して物標番号を順次自動的に振り付けることができる。これら物標情報は、モーター部14によるアンテナ部12の回転毎(例えば、約3秒)に更新され得る。
図3は、ユーザ端末30、管理サーバ50及び陸上管理端末40間のデータの流れの概念図の例である。
ユーザ端末30は、レーダー10の指示部28と接続されており(図2参照)、レーダー探知結果受信モジュール31にて、物標の探知結果情報(物標情報とレーダー画像情報)を得ることができる。レーダー探知結果受信モジュール31にて受信した情報は、そのときの時刻とともにユーザ端末30内に蓄積することができる。
ユーザ端末30は、方位センサ、ジャイロコンパスなど、真方位信号を得るための外部デバイスまたは内部デバイスまたはプログラム等を有している。ユーザ端末30は、自船位置受信モジュール32と自船方位受信モジュール33にて、自船の位置情報(緯度、経度)及び方位情報を得ることができる。なお、方位には、真北方位を基準にするものと自船の船首方位(航行方位)を基準にするものとがあるが、双方に対応できるものとする。自船位置受信モジュール32と自船方位受信モジュール33にて受信した情報は、そのときの時刻とともにユーザ端末30内に蓄積することができる。
ユーザ端末30は、通信モジュール35を有しており、図1に例示したネットワーク70を介して管理サーバ50の通信モジュール55と接続されている。このため、ユーザ端末30が取得したレーダー探知結果情報、自船位置情報及び自船方位情報、並びにユーザ端末30が処理した物標の複数の頂点の情報(特に、緯度経度、速度、針路等)を管理サーバ50に順次アップロードすることができる。
管理サーバ50は、マップ作成モジュール58で作成したマップ情報をユーザ端末30及び陸上管理端末40に送信することができる。マップ情報は、少なくとも、同一の物体に属すものとして識別した頂点の情報を含む。それによって、例えば、同一の物体IDを有する各頂点をマップ上で結ぶことで、物標の輪郭の概要を描くことを可能にする。さらに、マップ情報には、該当する物体IDの周辺の地図情報を含み得る。
ユーザ端末30は、マップ表示モジュール39を有しており、マップ作成モジュール38、58にて作成されたマップをディスプレイまたはスクリーン上に表示する。このマップは、マップ作成モジュール38、58に基づいて適宜更新されてもよい。
陸上管理端末40は、マップ表示モジュール49を有しており、マップ作成モジュール48、58にて作成されたマップをディスプレイまたはスクリーン上に表示する。このマップは、マップ作成モジュール48、58に基づいて適宜更新されてもよい。
さらに、陸上管理端末40は、船舶情報管理モジュール47を有しており、予め登録されている各船舶の船名、大きさ、形状等の情報を統括管理している。船舶情報管理モジュール47から得られた船舶等の情報は、適宜、マップ作成モジュール48、58に送られて、その情報をマップ上に表示することができる。
図3に例示した構成では、ユーザ端末30側の画像処理モジュール34にて、物標の探知結果情報(特にレーダー画像)に基づいて、ユーザ端末30が画像処理を行って物標の複数の頂点を抽出している。
図4に例示した構成では、ユーザ端末30は、レーダー探知結果受信モジュール31、自船位置受信モジュール32、自船方位受信モジュール33から得た各種情報を、通信モジュール35を介して管理サーバ50に送信する。
管理サーバ50は、画像処理モジュール54を有することで、ユーザ端末30から送信された物標の探知結果情報(特にレーダー画像)に基づいて、管理サーバ50が画像処理を行って物標の複数の頂点を抽出する。
ユーザ端末30の画像処理モジュール34と管理サーバ50の画像処理モジュール54とは実質的に同一に構成することができ、他の構成は、図3に例示したものと同様であるので、さらなる説明は割愛する。
図5は、画像処理モジュール34、54で行われる作業を(A)、(B)、(C)で分けて示す概念図の例である。
図5(A)を参照すると、レーダー10から得られる3つの物標Oa、Ob、Ocを含むレーダー画像の概念図が例示されている。レーダーは、その性能や、周囲状況等に応じて、必ずしも物標Oa、Ob、Ocの外部形状を正確に表示することができない場合がある。
例えば、特に小型船舶の場合、その船体特徴から海からの環境変化を受けやすく、上下左右方向の揺れが生じている。また、例えば、気候条件等により海面の揺れの影響を受けて、船体に上下左右方向の揺れが生じている。このため、レーダー10から得られたレーダー画像をそのまま表示する場合、画像が不鮮明になり得る。
図5(B)を参照すると、図5(A)に示したレーダー画像上の3つの物標Oa、Ob、Ocに対して、ユーザ端末30の画像処理モジュール34または管理サーバ50の画像処理モジュール54にて画像処理を行った結果、複数の頂点K1-K7が抽出されることを例示している。
レーダー画像では、物標の輪郭を細密に表現することができないが、特徴的な頂点を表示することは可能である。
例えば、物標がブイなどの特に小さな物体の場合、レーダー画像で移動しない狭い範囲の物標Oaとして描画されるが、この物標Oaの例えば中心に対して1つの頂点K1を得ることができる。他には、例えばOaの画像のX軸方向の長さ中間とY軸方向の長さの中間の交わる点を頂点K1としたり、Oaの画像の重心を頂点K1としてもよい。
また、物標がプレジャーボートなどの小型船の場合、レーダー画像上に棒状に表示される物標Obの船首位置と船尾位置にて、この物標Obの両端に対して2つの頂点K2、K3を求めることができる。
また、物標がバージ船などの大型船の場合、船幅方向を有する船首位置と船尾位置にて、この物標Ocの4つの角に対して4つの頂点K4、K5、K6、K7を求めることができる。
さらに、物標の外部形状に応じて、3つ、5つ、またはそれ以上の数の物標の頂点が求められることもある(図示略)。
画像処理は、例えば、以下の作業を含み得る。
ユーザ端末30または管理サーバ50は、レーダー画像を「ピクセル化された画像」として受信する。「ピクセル化された画像」とは、複数のピクセル(パッチ)または複数のピクセル集合(パッチ集合)を含む画像(イメージ)のことである。
ユーザ端末30の画像処理モジュール34または管理サーバ50の画像処理モジュール54は、この取り込まれた「ピクセル化された画像」に対して、トリガ信号に応答して、画像処理を行う。
画像処理モジュール34、54は、予め各種レーダー画像に対して画像処理のトレーニングを行う。トレーニングは、例えば、数百、数千、またはそれ以上の異なる物標の画像に対して行われ、各種結果を蓄積する。その際、例えば、海面だけの画像、海面と一艘の小型船舶だけの画像、海面と二艘の小型船舶の画像等、様々な状況での画像処理を行って、その結果について統計データを計算及び生成してもよい。
トレーニングによって、高い識別率、例えば、99%程度の識別率が得られた後で、実際にレーダー画像処理を行って、ピクセル化された画像から物標の頂点を識別し抽出する。
なお、物標の頂点情報は少なくともそのレーダー画像を撮影した日時情報(または補完等により数秒前後の頂点情報を算出した場合にはその時刻)とその頂点の座標情報とを有しており、その他、レーダー特定情報、ユーザ端末特定情報、速度、方位、移動ベクトル等を含んでいてもよい。
図6は、頂点情報管理モジュール56で行われる作業を(A)、(B)、(C)で分けて示す概念図の例である。
管理サーバ50の頂点情報管理モジュール56は、画像処理モジュール34、54によって抽出された複数の頂点K1-K7(図5(C)参照)の情報を蓄積する。好ましくは、物標探知装置(レーダー)10が物標探知結果を更新する度(例えば、3秒毎)に、画像処理が繰り返されて、その都度、頂点情報管理モジュール56は、頂点の情報を蓄積する。従って、抽出された各頂点K1-K7の位置座標の経時的な変化は、サーバ50上の頂点情報管理モジュール56で監視・記録される。頂点情報管理モジュール56は、抽出された各頂点の情報(特に、緯度経度)を追跡することで、複数の頂点K1-K7の分割化を行う。
図6(A)を参照すると、頂点情報管理モジュール56は、分類した各小集団ごとに、それぞれ異なる物体IDを付与している。例えば、頂点K1に対しては物体ID1、頂点K2及びK3に対しては物体ID2、頂点K4-K7に対しては物体ID3が付与されている。
さらに、一度付与された物体IDに対して、新たに別の物体IDを付与することも可能である(例えば、1物体として識別された集団が2つの小集団に分類したことが識別された場合等)。さらに、一度付与された物体IDに対して、キャンセルを行うことも可能である(例えば、1物体として識別された集団が虚像であると識別された場合等)。
例えば、1つの頂点(例えば、K1)だけが、その位置座標、移動方位、移動速度等を、他の周辺の頂点とは相違させることが観察される場合、その1つの頂点に対してだけ、1つの物体ID(例えば、ID1)を付与することができる。例えば、海面または海水中には、ブイ(漂流型または係留型)が存在するが、ブイは、海面上に所定の大きさと形状を表すため、レーダー映像上にブイが含まれ得る。1つの頂点に対してだけ1つの物体IDを付与する場合、例えば、使用されるブイの大きさの範囲以内で行う。
例えば、図6(B)を参照すると、物体ID(ID1)が付与された1つの頂点K1に対して、その位置座標が中心となるように小円L1が示されている。物体IDが単一の頂点に付与される場合、その位置座標を点で表す。その点は径方向の大きさを有していてもよい。
また、物体ID(ID2)が付与された2つの頂点K2、K3に対して、各位置座標をむすぶように細長い棒状の形状L2が示されている。他、単にK2、K3の位置座標を直線でつなげてもよい。その直線は太さを有していてもよく、直線の端部では、丸くされてもよい(R処理)。
また、3つまたは5つ以上の頂点に対して共通する物体IDを付与する場合、多角形の点を外縁に沿って一筆書きで結ぶことで、その輪郭の概要を表示する。
従って、従来のレーダーからは必ずしも鮮明な物標の画像が得られなかったが(図5(A)を参照)、本発明では、一群として移動する物標の頂点に基づいて、物標の輪郭の概要を直線で表示するので、より鮮明な物標の画像が得られる(図6(B)を参照)。
レーダー画像は必ずしも物標の輪郭を精密に表示しないため、そこから抽出される頂点の位置座標にはズレが生じ得る。例えば、図6(C)を参照すると、K4-K7の4つの頂点のうち、頂点K4、K5では実際の位置K8、K9と比べて前後左右に微妙にズレて示されている。
本発明では、抽出されたK4、K5、K6、K7を直線でつなぐ替わりに、各頂点の位置調整を行った後、調整された位置K8、K9、K6、K7を直線L4で結んでもよい。
例えば、管理サーバ50には、既知の船体情報を予め複数登録しておく。そして、抽出された頂点と登録された船体情報とを対比して、近似するものを求めてもよい。この場合、管理サーバ50は、実際の運用を行う前に、トレーニングを行う。トレーニングは、例えば、数百、数千、またはそれ以上の異なる物標の画像に対して行われ、各種結果を蓄積する。その際、例えば、抽出された位置と実際の位置のズレが、前後または左右で、0.1%、1%、または2%の割合で生じた場合等、様々な状況での処理を行って、その結果について統計データを計算及び生成してもよい。トレーニングによって、ある程度高い成功率(識別率)、例えば、99%程度の成功率が得られた後で、実際に抽出された点(例えば、K4、K5、K6、K7)に基づいて、予め登録された船体情報のうちで最もマッチングするものを選び出して、調整された位置(例えば、K8、K9、K6、K7)を直線で結んでもよい。同様に、同一物標のレーダー画像が経時的に微小変化する場合、頂点抽出時には、その微小変化をキャンセルさせて各頂点の相対位置を維持するように調整してもよい。
図7は、端末30、40のディスプレイ上に表示されるマップを(A)、(B)で分けて示す概念図の例である。
図7(A)を参照すると、ユーザ端末30または陸上管理端末40のディスプレイ上に表示され得るマップの例が示されている。
複数の頂点K1-K7(図6(A)参照)のうち、一群として移動する頂点を同一の物体に属すものとして識別することにより、それら複数の頂点K1-K7は、3つのグループに分類されて、それぞれ異なる物体(ID1、ID2、ID3参照)として表されている。
各物体を表示する際、該当する海図の情報を重ねて表示することができる。例えば、符号Q13、Q14に例示するように、緯度経度がわかるように海図を表示するとともに、符号Q15に例示するように、付近の陸地(沿岸等)を示す地図を表示してもよい。なお、沿岸等は、時刻によって水位の変化に合わせて輪郭を変化させる場合がある。このため、沿岸等を表示する場合、基準時刻の地図を表示させる。可能であれば、時刻または水位の変化に合わせて予想される沿岸等の地図を表示してもよい。
ユーザは各物体IDの振られた物体に対して、物体名を入力することができる。例えば、ユーザは、四角形の物体ID3をタップすることで、入力画面が表示され、「バージ船XX丸」などの入力を行うことができる。
また、予め船舶の位置情報等が取得できている場合には、その位置情報の場所に存在する船舶の名称を物体IDと対応付けて表示するようにしても良い。
レーダー映像表示では、自船位置ID1は画面中央にあり、上方に向って走行している状態で表示される。自船位置ID1から真上に伸びているラインA12は、船首線に相当し、固定されて動かない。船首線A12と同一直線上に、自船の航行速度を示す速度ベクトルを表示してもよい(図示略)。
図7(B)では、符号G1-G5に示すように、自船位置ID1を中心とした同心円が複数表示されているが、これらは固定距離環であって、一定の距離毎に表示されていて動かない。固定距離環は、他船ID2、ID3等までのおおよその距離を素早く読み取るために役立つ。多重円表示となっている各固定距離環は、画面上での表示が任意にオンオフされてもよい。
固定距離環のうちの一つG3には、自船位置ID1を中心に、360度目盛りが刻まれた方位目盛値が表示されている。方位目盛値は、自船ID1を中心として、他船などの物標の方位を知るときのスケールとして使用される。
また、図面上には示されていないが、電子カーソル(EBI:Electronic Bearing Line)が設けられ得る。電子カーソルは、画面中央の自船位置ID1から伸びる可変の方位マークであって、他船などの物標の方位をより正確に測る場合に使用される。
従来技術と同様に、レーダー画像上で、他船や島などの物標までの距離及び方位は、画面上のVRMやEBIを用いて測定することができるが、本明細書では、その詳細な説明を省略する。
図7(B)では、自船位置ID1を中心としたヘディングアップ(HU)表示方式が採用されているが、ノースアップ(NU)表示方式へと変更することは可能である。また、図7(B)では、各頂点の位置座標を追跡することで、頂点の過去の位置座標に基づいて、各物体の移動状態をエコートレイル状に表示している(符号P13及びP14参照)。エコートレイルは、船が走行中であれば船影を航跡として表示できる機能のことをいう。エコートレイルでは、画面上に表れる各船の軌跡を表示するので、各船の動向が理解容易となる。ただし、エコートレイル状の画像表示を切り替えて、非エコートレイル状に画像表示することは可能である。
図9は、図8に示した2つの小型船からの探知結果の例である。
実施例1は、単一のレーダー10から得られたレーダー画像の画像処理に基づく。次に、複数のレーダー10を用いる場合を例示する。
図8を参照すると、海上に3艘の小型船O1、O2、O3が存在している。この例では、中央の小型船O3は停止しており、本発明に係るユーザ端末30を有していない。上方の小型船O1は、船首線A1で示されるように、右から左に向って航行しており、本発明に係るユーザ端末30を有している。下方の小型船O2は、船首線A2で示されているように、左下から右上に斜め上方に航行しており、本発明に係るユーザ端末30を有している。これら小型船O1、O2は、それぞれのレーダー10を用いて周囲の物標を探知することができ、特に、中央の小型船O3が探知可能になっている。
例えば、小型船O1-O3は、港湾内等で航行するプレジャーボートである。
図9(B)を参照すると、同様に、図8の下方に示した小型船O2のレーダーによる、小型船O3のレーダー探知結果を概略的に示している。
複数の小型船O1、O2から送信される各レーダー探知結果情報は、それぞれ基準(真北方向を基準にするか、船首方向を基準にする)を明らかにして、管理サーバ50に送信され、頂点情報管理モジュール56では、統一された基準のもと、各位置情報の追跡、対比等が行われる。
図9(C)を参照すると、抽出された2つの頂点М1、М2に基づいて、物標O3の輪郭の概要を描く例を示している。例えば、2点М1、М2間を直線でむすぶ際、直線に所定の幅をもたせてもよい。また、各頂点では、角に丸みを付けることができる。他、単に2点М1、М2間を直線でむすぶだけでもよい。
同様に、小型船O2のレーダーによる、小型船O3のレーダー画像の処理によって、物標の船首位置と船尾位置に相当する2つの頂点М3、М4を求めることができる。
ユーザ端末30は、探知結果情報、特にレーダー画像上の物標の画像情報を解析し、その時の物標の位置情報から、特定した物標の位置座標、移動ベクトル、移動速度等を算出する。
算出した物標の位置座標の変化を、例えば、時刻(タイムスタンプ)、端末ID、緯度、経度、速度、方位等の各フィールドを有するフォーマットで管理サーバ50にアップロードする。
送信される数値の単位は、送信側及び受信側で明らかにする。
例えば、速度の単位は(m/s、km/h、またはkn)である。
また、方位は、その基準(真北基準または船首方位基準)と単位(度、Deg)を明らかにする。
例えば、次の頂点情報が送信される。
[M1,20191212090000,O1,35.55345117,139.24523411,1.32,278・・・]
この頂点情報は、先頭から順に、頂点ID(レーダー探知した船舶の識別情報またはレーダーを示す識別情報)、時刻(タイムスタンプ)緯度、端末ID、経度、速度、方位がカンマ区切りで繋げられたものである。
このセンテンスは、レーダー探知結果が更新される度に、端末30から管理サーバ50にアップロードされる。
図11は、図10に示した2つの小型船からの探知結果を(A)と(B)で分けて示す概念図の例である。
図10を参照すると、図8に示した3艘の小型船O1-O3について、所定時間経過後の様子が示されている。中央の小型船O3は停止を続けており、上方の小型船O1は、船首線A1で示されるように、右から左に向ってさらに航行しており、下方の小型船O2は、船首線A2で示されるように、左下から右上に斜め上方にさらに航行している。この場合も同様に、上下の二艘の小型船O1、O2は、中央の小型船O3をそれぞれレーダー探知可能となっている。
図11(B)を参照すると、同様に、図10の下方に示した小型船O2のレーダーによる、小型船O3のレーダー探知結果を概略的に示している。物標のレーダー画像の処理によって、物標の2つの頂点М7、М8を求めることができる。
例えば、まず、小型船O1のレーダーから頂点M1、M2の頂点情報が求められる。
頂点情報には、各頂点の識別番号、レーダー探知を行った船舶の識別番号、頂点の緯度、経度、速度、方位、時刻(タイムスタンプ)が含まれる。頂点情報は、レーダー10から得られるレーダー画像の解析、レーダー10が備える物標追尾機能を利用することで求めることができる。
次に、ある時間経過後、小型船O1のレーダーから頂点M5、M6の頂点情報が求められる。
次に、ある時間経過後、小型船O2のレーダーから頂点M7、M8の頂点情報が求められる。
管理サーバ50は、これら情報をデータベース上に集積していき、各頂点М1-М8について、同一の物体に属している組を探し求める。
管理サーバ50の頂点情報管理モジュール56では、頂点情報を統括したデータベースを有し、そのデータベース上で、複数の頂点に対して、様々な観点から頂点の組を求めることができる。
表1では、時刻(探知時刻)、緯度、経度、端末ID(船舶番号)、頂点ID(頂点番号)を示しているが、他、速度、方位、方位の基準等も同様にデータベース上に集約される。
例えば、表1の頂点番号M1を参照すると、小型船O1により、2019年12月12日09時00分00秒にレーダー探知された、頂点M1について、緯度(35.55345117)と経度(139.24523411)が例示されている。
これによって、同一時刻に、同一レーダーにより、緯度経度の異なる2つの頂点が識別されているのが解る。この際、2つの緯度経度を比較するとき、例えば、プラスマイナス1mまたは0.5m程度の誤差の範囲内で、それらの値が一致しているか否かの判定を行ってもよい(例えば、日本では、1mあたり緯度:0.000008983148616、1mあたり経度:0.000010966382364)。緯度経度の値は、船舶の存在する地域を基準とする。
同様に頂点番号M6を参照すると、小型船O1により、2019年12月12日09時03分00秒にレーダー探知された、頂点M6について、緯度(35.55395229)と経度(139.24528427)が例示されている。
これによって、M1、M2の受信後の所定時間経過後(3分後)の同一時刻、同一レーダーにより、緯度経度の異なる2つの頂点M5、M6が識別されているのが解る。
頂点M1と頂点M5と、頂点M2と頂点M6とが、例えば、99%や99.9%等の予め定められた範囲内で、それぞれ緯度経度が一致すると仮定する。さらに、このとき、各頂点の速度が0であって、特定の方位に移動していないことが得られたとする。この場合、頂点情報管理モジュール56は、各頂点は移動しておらず、頂点M1と頂点M5は一致し、頂点M2と頂点M6は一致すると判定することができる。この結果、頂点情報管理モジュール56は、頂点M1と頂点M2(頂点M5と頂点M6)は同一の物体に属していると推測することができる。この作業を繰り返すことで、頂点情報管理モジュール56は、頂点の組を求める判定の精度を上げることができる。
頂点情報管理モジュール56は、各船舶から得られた頂点情報をすべてデータベース上に蓄積する。
次に、同一の船舶のレーダー10によって求められた各頂点情報のうち、近距離(例えば、小型船舶の長さ等を考慮して、少なくとも数メートル)で相対的位置を保っている頂点の組(例えば、小型船舶の船首と船尾の両端の組)を見つける。
次に、頂点情報管理モジュール56は、端末30からアップロードされた点の履歴に頂点の複数時刻において、作業対象の頂点の座標を求める(表1参照)。
レーダー画像は、必ずしも物標のすべての輪郭を表示できない場合がある。例えば、物標が大型船の影に隠れると、その物標はレーダー探知範囲内から消えることが起こり得る。そのような場合で、物標の頂点の追跡を行う場合、既知の情報から、所定時間経過後の頂点の情報を計算により求めることができる。
また、ある離散的に連続する時点で、物標の位置座標、速度、方位が知られている場合、その物標の任意の中間時点の位置座標を内挿により求めることができる。その際、直前直後の時刻、座標および平均化した速度、針路から、物標の速度、加速度等を考慮して、任意の中間時点の位置を算出することができる。
例えば、頂点情報管理モジュール56は、O1から得られたある時刻(表1の2019年12月12日09時00分00秒参照)における2つの頂点M1とM2の間の距離L11を求める。この値は、三平方の定理に基づいて、位置座標(表1の緯度、経度参照)から求められる。M1の緯度と経度をX1とY1、M2の緯度と経度をX2とY2とすると、これら2点の間の距離は、(X1-X2)の2乗と、(Y1-Y2)の2乗とを足した値の平方根からL11を求めることができる。
次に、O1から得られた所定時間経過後の時刻(表1の2019年12月12日09時03分00秒参照)における2つの頂点M5とM6の間の距離L12を求める。M1の緯度と経度をX5とY5、M2の緯度と経度をX6とY6とすると、同様に、(X5-X6)の2乗と、(Y5-Y6)の2乗とを足した値の平方根からL12を求めることができる。
L11-L12<E1
上記値が、E1を下回るとき(好ましくはゼロであるとき)、2つの頂点M1、M2の組と、2つの頂点M5、M6の組とが同じ物標に属していると仮に判定することができる。この結果、例えば、上記頂点M1、M2、M5、M6に対して、同一の物体IDを付与する。
頂点M3、M4、M7、M8についても同じ作業を行って、同様に頂点間の長さL21とL22とを求めてもよい。この結果、例えば、上記頂点M1、M2、M5、M6に対して、同一の物体IDを付与する。
船舶の場合、船体が揺れて、ローリングやピッチングの影響を受けることがある。特に小型船舶の場合、その船体特徴から海からの環境変化を受けやすく、上下左右方向の揺れが生じている。このため、船舶の頂点座標等の判定では、船首方向(前後方向)または船幅方向(左右方向)での船体の揺れを考慮して、閾値を設定してもよい。
閾値の変更は、手動によって切り替えられてもよく、または、外部から入力される気候情報に基づいて、自動で切り替えられてもよい。
例えば、頂点情報管理モジュール56は、各頂点情報をデータベース上で管理し、そのデータベース上に各頂点に付与された物体IDを関連付ける。その際、ある時刻間隔(例えば、5分等)、実質的に同一の位置座標(例えば、99.9%の精度等)で、異なる物体IDが存在しているか否かの判定を定期的に行う(例えば、3分毎等)。
かかる場合、頂点情報管理モジュール56は、O1に基づいてM1、M2、M5、M6に付与された物体IDと、O1に基づいてM3、M4、M7、M8に付与された物体IDに対して、それぞれ、重みづけをしてもよい。この作業を繰り返して、所定時間(例えば、30分等)頂点情報に相違が認められなければ、M1、M2、M5、M6に付与された物体IDとM3、M4、M7、M8に付与された物体IDとを一つに集約してもよい。この際、好ましくは、頂点情報管理モジュール56は、既に物体IDが振られている点が存在する場合は、その中で最も小さい(若い)物体IDを有する物体にすべての点を帰属させる。
図12を参照すると、3艘の小型船O21、O22及びO23と、それらの中央に位置する1隻の大型船O24が示されている。中央の大型船O14は停泊しており、本発明に係るプログラムを含むユーザ端末30を有していない。これに対し、周囲の3艘の小型船O21、O22及びO23は、それぞれ本発明に係るプログラムを含むユーザ端末30を有しており、それぞれのレーダー10を用いて、周囲の物標を探知することができ、特に、中央の大型船O24が探知可能となっている。
例えば、大型船O24は、港湾内等で重い貨物を積んで航行するバージまたはライターである。
例えば、小型船O21のレーダーでは、大型船O24の4つの頂点D1-D4のうち、手前側の3つの頂点D1、D2、D4は識別できるが、最も遠方の頂点D3を鮮明に識別できない場合が起こり得る。その場合、時刻T21で識別された3つの頂点D1、D2、D4について、それぞれの情報を管理サーバ50に送信する。
また、小型船O22のレーダーでは、大型船O24の4つの頂点D1-D4のうち、手前側の3つの頂点D1-D3は識別できるが、最も遠方の頂点D4を鮮明に識別できない場合が起こり得る。その場合、時刻T22で識別された3つの頂点D1-D3について、それぞれの情報を管理サーバ50に送信する。
管理サーバ50は、各小型船O21-O23から受信した頂点情報をデータベース上に蓄積していく。
例えば、図12の状態において、小型船O22から見て、物標O24の4つの頂点のうち、手前側の3つの頂点D1、D2、D3が識別できるが、向こう側の頂点D4が識別できない場合を想定する。
例えば、上記3点の座標から得られる2辺(例えば、辺AB、辺AC)から、cosθの値を求める。
cosθ = (AB・AC) / (|AB|*|AC|)
アークコサイン関数を用いて、cosθからθ(∠BAC)を求めることができる。
求められた角度の経時的な変化を追跡していくことで、その角度が経時的に一定の範囲内に保たれているか否かの判定をすることができる。
同様に、管理サーバ50側は、ある時刻の範囲で密集している2つ、3つ、または4つの頂点を抽出して(例えば、D1、D2、D3、D4のうちの少なくとも2つ)、これら頂点の間の距離を求めることができる。
また、管理サーバ50側は、例えば、小型船O21からのD1、D2、D4の値に基づいて、これら頂点が同一の物標に属していると判定して、別の共通の物体IDを付与したと仮定する(例えば、角度に基づく)。
この場合、本体一つの物体に対して複数の物体IDが付与されるため、画面上でそれら物体IDに基づいて3つの画像が重ねて表示され得る。
実施例2の場合と同様に、管理サーバ50側は、各頂点の経時的な変化を追跡して、同一の物体に対して複数の物体IDが重複して付与されていると判定した場合、最も若い物体IDに統一化してもよい。
管理サーバ50の頂点情報管理モジュール56は、どの船舶のレーダーから得られた頂点情報であるかを用いてより頂点情報をグルーピングして、それぞれのグループ間の相対的な相対的位置を保って移動している頂点であるかどうかを判断することとしてもよい。
例えば、レーダーごとにまとめられた頂点のグループに対して時系列に頂点の軌跡を追って、グループ間で一致する軌跡を示す頂点がある場合には、同一の物体に属しているものと分類する。
方位分解能とは、自船から同一距離にある方位の少し異なる2つの物標を、それぞれレーダー画面上で識別できる映像分解能力をいう。方位分解能は、船に使用されるアンテナの水平ビーム幅によって決定され、通常、水平ビーム幅が狭くなるほど、方位分解能は高まる。
水平ビーム幅は、発射する電波の左右方向の角度特性をいう。一般に水平ビーム幅は、アンテナの水平長により決定されている。アンテナの水平長が長くなると、水平ビーム幅が狭くなっている。小型船の場合、一般的に、搭載されているアンテナの水平ビーム幅は広い。
距離分解能とは、自船から同一方向にある距離の異なる2つの物標を、それぞれレーダー画面上で識別できる映像分解能力をいう。距離分解能は、船に使用されるアンテナの送信パルス幅によって決定され、通常、送信パルス幅が短くなるほど、距離分解能は高まる。即ち、パルス幅の設定によって、距離分解能力が左右される。
図13(A)を参照すると、3艘の小型船O31、O33、O34が示されている。それぞれ、停泊しているものと仮定する。ここで、図の中央の2艘の小型船O33、O34が互いに近づいて停泊しており、それぞれ本発明に係るプログラムを含むユーザ端末30を有していないものとする。図の下方の小型船O31は、本発明に係るプログラムを含むユーザ端末30を有しているものとする。従って、小型船O31は、レーダー10を用いて、周囲の物標を探知することができ、特に、中央の小型船O33、O34が探知可能となっている。
なお、図13(A)に例示するように、二艘の小型船O33、O34が小型船O31から見て縦に密集して並んでいる場合、レーダーの距離分解能(符号A31参照)が問題になりやすい。また、二艘の小型船O33、O34が小型船O21から見て横に密集して並んでいる場合(図示略)、レーダーの方位分解能が問題になりやすい。
しかしながら、二艘の小型船O33、O34が互いに相対関係を維持しなくなり、例えば、それぞれが別々の方向に向かって移動しはじめると仮定する。その場合、画像処理モジュール34、54は、小型船O31のレーダー探知結果情報に基づいて、新たに二艘の小型船O33、O34を区別して表示したレーダー画像に基づいて、O33、O34の頂点(例えば、船首側と船尾側の2点ずつ、計4点)を抽出する。
このように、管理サーバ50の頂点情報管理モジュール56は、各頂点情報の経時的な変化を追跡することで、一度付与した物体IDに対して、適宜修正を加えることができる。
即ち、頂点情報管理モジュール56は、送信されてくる頂点情報をデータベース上等に蓄積していくことで、レーダーの方位分解能または距離分解能による影響下で、物標の誤認識が生じた場合であっても、適宜、その修正を加えることができる。このように、物体に対する頂点の更新時、相対的位置を保たなくなった点が存在する場合、物体IDを発行し、以降、別の物体として扱う。
最小探知距離とは、レーダー画面上で探知識別表示できる自船からもっとも近い距離をいう。換言すると、最小探知距離とは、レーダー画面上で他船などの物標映像を識別できる自船からの最小の距離をいう。通常、最小探知距離より手間にある物標は、レーダー画面上では映像として表示することができない。このため、最小探知距離より手間にある物標は、自船の近くに存在していても、レーダー画面上では映像として表示されない現象が生じ得る。
最小探知距離は、主に送信パルス幅によって決定され、パルス幅が短くなるほど、最小探知距離は小さくなる。最小探知距離は、レーダーの垂直ビーム幅とも関係する。垂直ビーム幅は、レーダーから発射される電波の垂直方向の角度をいう。通常、小型漁船に用いられる小型レーダーでは、垂直ビーム幅は25度前後となっている。これは、船体が揺れて、ローリングやピッチングの影響を受けても、垂直ビームの探知角度が大きく外れないようにするためである。
図14(A)を参照すると、海上にある3つの物体O41、O42、O43の側面図が示されているここで、図の中央の物体(例えば、ブイ)O43が最も小型で、本発明に係るプログラムを含むユーザ端末30を有していない。図の左右の二艘の船O41、O42は、それぞれ本発明に係るプログラムを含むユーザ端末30を有している。
管理サーバ50の頂点情報管理モジュール56は、この頂点情報に基づいて、処理を進めて、一度、ブイO43は存在しないものとして物体IDを付与しなかったが、その後、O43の頂点に基づいて、新たに物体IDを付与してもよい。
このように、頂点情報管理モジュール56は、各頂点情報の経時的な変化を追跡することで、レーダーの最小探知距離の影響下で、一度付与しなかった物体IDに対して、適宜修正を加えることができる。
図14(B)を参照すると、海上にある3つの物体O51、O52、O53、O54の側面図が示されているここで、図の中央の右側の物体O53が最も小型で、本発明に係るプログラムを含むユーザ端末30を有していない。また、図の中央の左側の船O54が最も大型で、本発明に係るプログラムを含むユーザ端末30を有していない。図の左右の二艘の船O51、O52は、それぞれ本発明に係るプログラムを含むユーザ端末30を有している。
管理サーバ50の頂点情報管理モジュール56は、この頂点情報に基づいて、処理を進めて、一度、小型船O53は存在しないものとして物体IDを付与しなかったが、その後、小型船O52によって探知されたO53の頂点に基づいて、新たに物体IDを付与してもよい。
従って、従来のレーダー10では、追尾物標が大型船の後方や島影等に入ると、それらの影響下でレーダー映像が消えるため、物標情報を喪失していたが、本船舶航行支援システム1では、複数の船舶上のレーダー10を複合して活用することで、単一のレーダーでは捕捉できなかった物標情報を他のレーダーから捕捉することが可能となる。
偽像とは、発射電波の二次反射によって生じる現象である。虚像は、実際には物標が海上には存在していないが、あたかも存在するようにレーダー画面上に現れる映像をいう。虚像は、自船上の構造物だけでなく、自船周辺にある強い反射物標からの信号に起因して生じることがある。従来技術では、内海の海峡大橋など航路帯の真正面に位置する物体からのレーダー反射は強いため、この現象は避けられないといわれている。
図16は、図15に示した2つの船舶O61、65によるレーダー探知結果を(A)、(B)で分けて示す概念図の例である。
図15を参照すると、2つの陸地の間を結ぶ橋などの構造物O63の近くを3艘の船舶O61、O62、O65が進んでいるものとする。そして、橋O63の付近で船舶O61、65から周囲の他船をレーダー探知するものとする。
この場合、画像処理モジュール34、54は、小型船O65のレーダー探知結果情報に基づいて、発射電波の二次反射の影響を受けないことにより、レーダー画像に基づいて、虚像O64の頂点を抽出しない。管理サーバ50の頂点情報管理モジュール56は、この頂点情報に基づいて、処理を進めるため、小型船O61からの結果とは異なる結果を出力し得る。
このように、頂点情報管理モジュール56は、虚像(発射電波の二次反射)の影響下で、同一の物体に属すものとして識別した頂点の情報を端末30、40に出力する際、矛盾するデータがある場合には、その識別情報をさらに追加して出力してもよい(例えば、物標IDに虚像について重みづけをする)。
さらに、頂点情報管理モジュール56は、各頂点情報の経時的な変化を追跡することで、O64が虚像であると判定した場合には、一度付与した物体IDに対して、例えばキャンセルするように、適宜修正を加えることができる。
なお、レーダーの方位分解能と距離分解能、レーダーの最小探知距離、大型船によるレーダー探知への影響の場合においても、複数の異なるレーダーからの探知結果に矛盾がある場合、同様に表示態様を変化させてもよい。
ただし、船舶上で用いられる物標の探知装置は、レーダーに限定されない。
例えば、船舶上でライダーを用いることができる。この場合、ライダー画像からの物体認識情報を、レーダー画像からの物体認識情報の替わりに用いることができる。
また、船舶上でカメラを用いることができる。この場合、カメラ画像(可視光、赤外)からの物体認識情報を、レーダー画像からの物体認識情報の替わりに用いることができる。
ライダーまたはカメラによって得られた画像に対して、頂点を求める画像処理は、レーダーの場合と同様に行うことができる(図5、図6参照)。
ステップS71では、ユーザ端末30は、所定のトリガ信号に応答して、画像処理を開始する。
ステップS72では、ユーザ端末30は、レーダー10からのレーダー探知結果情報を受信する。レーダー探知結果情報は、特にレーダー画像である(図5(A)参照)。
ステップS73では、ユーザ端末30は、レーダー画像の画像処理を行い、頂点を抽出する(図5(B)参照)。
ステップS74では、ユーザ端末30は、抽出した頂点情報を管理サーバ50に送信する(図5(C)参照)。
ステップS75では、一度フローを終了する。ただし、例えば、レーダー10からのレーダー探知結果情報が更新されると、再度、ステップS71から同じ処理を繰り返す。
ステップS81では、管理サーバ50は、所定のトリガ信号に応答して、頂点情報の識別を開始する。
ステップS82では、管理サーバ50は、データベース等に頂点情報を蓄積する。頂点情報には、頂点番号、船舶番号、緯度経度、速度、方位等が含まれる。
ステップS83では、管理サーバ50は、同一物体に属する頂点の組を抽出し、共通の物体IDを付与する(図6(A)参照)。
ステップS84では、管理サーバ50は、物体IDを端末30、40に送信する。端末30、40は、受信した物体IDに基づいて、物体IDに相当する物標の輪郭の概要を表示する(図6(B)参照)。
ステップS85では、一度フローを終了する。ただし、例えば、ユーザ端末30から新しい頂点情報が送付されると、再度、ステップS81から同じ処理を繰り返す。
管理サーバ50と、物標探知装置10と接続されたユーザ端末30とを、ネットワーク70経由でデータの送受信を行えるように接続し(図1参照)、
物標の探知結果情報に基づいて抽出した物標の複数の頂点(図5(C)参照)を、管理サーバ50がユーザ端末30から受信し、
ユーザ端末30が抽出した物標の複数の頂点のうち、一群として移動する頂点を同一の物標に属するものとして管理サーバ50が識別し(図6(A)参照)、
同一の物標に属するものとして識別した頂点に基づいて、物標の輪郭の概要を表示させるように(図6(B)参照)ユーザ端末30に対して管理サーバ50が指示を送信する、各ステップを有する。
例えば、従来のレーダーからは必ずしも鮮明な物標の画像が得られなかった。特に、レーダー画像の特性上、物標の輪郭が不鮮明になることがあった。物標が大型船の影などに入ると、物標を見失う場合もあった。本発明では、レーダー画像に対して画像処理を行って頂点を抽出するため、各頂点により物標の輪郭を鮮明に表示することができる。その際、同一の物標に属する頂点の組を識別し、管理することで、物標の追跡を各頂点に基づいて行うことができる。各頂点の位置座標を蓄積することで、蓄積された情報に基づいて各頂点の将来の動向を推測することも可能になる。
好ましくは、小型船舶上で、スマートフォンやタブレット端末などの安価で簡易な持ち運び可能なユーザ端末を活用した、ネットワークの構築を可能にする。
また、制御線や情報線は説明上必要と考えられるものを示しており、製品上必ずしも全ての制御線や情報線を示しているとは限らない。実際には殆ど全ての構成が相互に接続されていると考えてもよい。
2、4、6 船舶
10 物標の探知装置(船舶用レーダー)
28 レーダーの指示部
30 ユーザ端末
34、54 画像処理モジュール(画像処理手段)
35、45、55 通信モジュール(通信手段)
40 陸上管理端末
50 管理サーバ
56 頂点情報管理モジュール(頂点情報管理手段)
70、72、74 ネットワーク
Claims (19)
- 船舶の航行支援システムにおける管理サーバであって、
前記管理サーバは、
物標の探知装置と接続されたユーザ端末との間で、ネットワーク経由でデータの送受信を行う通信手段と、
前記物標の探知結果情報に基づいて抽出した物標の複数の頂点のうち、一群として移動する頂点を同一の物標に属するものとして識別する頂点情報管理手段と、を備え、
前記同一の物標に属するものとして識別した頂点に基づいて、前記通信手段が、前記物標の輪郭の概要を表示させるように前記ユーザ端末に対して指示を送信する
ことを特徴とする管理サーバ。 - 請求項1に記載の管理サーバであって、
前記物標の探知装置はレーダーであり、前記物標の探知結果情報はレーダー画像を含み、
前記ユーザ端末が、前記レーダー画像に対して画像処理を行うことで前記複数の頂点を抽出する、管理サーバ。 - 請求項1または2に記載の管理サーバであって、
前記頂点情報管理手段は、相対的位置を保って移動している頂点の組を、前記同一の物標に属する一群として移動する頂点として識別する、管理サーバ。 - 請求項1~3のいずれか1項に記載の管理サーバであって、
前記頂点情報管理手段は、
前記複数の頂点の位置座標の相対関係、
前記複数の頂点の間の距離、
前記複数の頂点のなす角度、
前記複数の頂点のなす領域の面積、及び
前記複数の頂点の移動ベクトル、のうち、少なくとも1つが保たれている頂点の組を、前記同一の物標に属する一群として移動する頂点として識別する、管理サーバ。 - 請求項1~4のいずれか1項に記載の管理サーバであって、
前記同一の物標に属するものとして識別した頂点を直線でつなげることで、前記物標の輪郭の概要を表示させるように前記ユーザ端末に対して指示を送信する、管理サーバ。 - 請求項1~5のいずれか1項に記載の管理サーバであって、
前記同一の物標に属するものとして識別した頂点に対して、共通の物体識別情報を付与する、管理サーバ。 - 請求項6に記載の管理サーバであって、前記物標の探知装置はレーダーであり、前記物標の探知結果情報はレーダー画像を含み、
レーダーの方位分解能、
レーダーの距離分解能、
レーダーの最小探知距離、
レーダーの大型船の影響、及び
レーダーの偽像、のうち、少なくとも1つによる影響下で付与された前記物体識別情報を修正する手段を有する、管理サーバ。 - 請求項6または7に記載の管理サーバであって、
前記頂点情報管理手段は、前記同一の物標に属するものとして識別された頂点に対して、前記同一の物標が複数の物標に属するものとして識別した場合には、前記複数の物標ごとに、異なる前記物体識別情報を付与する、管理サーバ。 - 請求項6または7に記載の管理サーバであって、
前記頂点情報管理手段は、前記同一の物標に属するものとして識別された頂点と、他の同一の物標に属するものとして識別された頂点とが重複して同じ物標に属するものと判定した場合には、それぞれの前記物体識別情報を一つの物体識別情報に統合する、管理サーバ。 - 管理サーバにおける船舶の航行支援方法であって、
管理サーバと、物標の探知装置と接続されたユーザ端末とは、ネットワーク経由でデータの送受信を行えるように接続されており、
前記物標の探知結果情報に基づいて抽出した前記物標の複数の頂点を、前記ユーザ端末から受信し、
前記物標の複数の頂点のうち、一群として移動する頂点を同一の物標に属するものとして識別し、
前記同一の物標に属するものとして識別した頂点に基づいて、前記物標の輪郭の概要を表示させるように前記ユーザ端末に対して指示を送信する
ことを特徴とする航行支援方法。 - 請求項10に記載の船舶の航行支援方法であって、
前記物標の探知装置はレーダーであり、前記物標の探知結果情報はレーダー画像を含み、
前記ユーザ端末が、前記レーダー画像に対して画像処理を行うことで前記複数の頂点を選出する、船舶の航行支援方法。 - 請求項10または11に記載の船舶の航行支援方法であって、
相対的位置を保って移動している頂点の組を、前記同一の物標に属する一群として移動する頂点として識別する、船舶の航行支援方法。 - 請求項10~12のいずれか1項に記載の船舶の航行支援方法であって、
前記複数の頂点の位置座標の相対関係、
前記複数の頂点の間の距離、
前記複数の頂点のなす角度、
前記複数の頂点のなす領域の面積、及び
前記複数の頂点の移動ベクトル、のうち、少なくとも1つが保たれている頂点の組を、前記同一の物標に属する一群として移動する頂点として識別する、船舶の航行支援方法。 - 請求項10~13のいずれか1項に記載の船舶の航行支援方法であって、
前記同一の物標に属するものとして識別した頂点を直線でつなげることで、前記物標の輪郭の概要を表示させるように前記ユーザ端末に対して指示を送信する、船舶の航行支援方法。 - 請求項10~14のいずれか1項に記載の船舶の航行支援方法であって、
前記同一の物標に属するものとして識別した頂点に対して、共通の物体識別情報を付与する船舶の航行支援方法。 - 請求項15に記載の船舶の航行支援方法であって、前記物標の探知装置はレーダーであり、前記物標の探知結果情報はレーダー画像を含み、
レーダーの方位分解能、
レーダーの距離分解能、
レーダーの最小探知距離、
レーダーの大型船の影響、及び
レーダーの偽像、のうち、少なくとも1つによる影響下で付与された前記物体識別情報を修正する、船舶の航行支援方法。 - 請求項15または16に記載の船舶の航行支援方法であって、
前記同一の物標に属するものとして識別された頂点に対して、前記同一の物標が複数の物標に属するものとして識別した場合には、前記複数の物標ごとに、異なる前記物体識別情報を付与する、船舶の航行支援方法。 - 請求項15または16に記載の船舶の航行支援方法であって、
前記同一の物標に属するものとして識別された頂点と、他の同一の物標に属するものとして識別された頂点とが重複して同じ物標に属するものと判定した場合には、それぞれの前記物体識別情報を一つの物体識別情報に統合する、船舶の航行支援方法。 - 船舶の航行支援プログラムであって、
管理サーバに請求項10~18のいずれか1つの方法に記載の各ステップを実行させるためのプログラム。
Priority Applications (7)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2019233798A JP7371907B2 (ja) | 2019-12-25 | 2019-12-25 | 船舶の航行支援システムにおける管理サーバ、船舶の航行支援方法、及び船舶の航行支援プログラム |
CN202080089160.1A CN114846530A (zh) | 2019-12-25 | 2020-12-24 | 船舶的航行辅助系统中的管理服务器、船舶的航行辅助方法及船舶的航行辅助程序 |
KR1020227021364A KR20220117241A (ko) | 2019-12-25 | 2020-12-24 | 선박의 항행 지원 시스템에 있어서의 관리 서버, 선박의 항행 지원 방법, 및 선박의 항행 지원 프로그램 |
US17/788,148 US20230038494A1 (en) | 2019-12-25 | 2020-12-24 | Administrative server in ship navigation assistance system, ship navigation assistance method, and ship navigation assistance program |
EP20906351.0A EP4082890A4 (en) | 2019-12-25 | 2020-12-24 | ADMINISTRATIVE SERVER IN A VESSEL NAVIGATION SUPPORT SYSTEM, VESSEL NAVIGATION SUPPORT METHOD AND VESSEL NAVIGATION SUPPORT PROGRAM |
PCT/JP2020/048367 WO2021132437A1 (ja) | 2019-12-25 | 2020-12-24 | 船舶の航行支援システムにおける管理サーバ、船舶の航行支援方法、及び船舶の航行支援プログラム |
JP2023176359A JP2023184555A (ja) | 2019-12-25 | 2023-10-12 | 船舶の航行支援システムにおける管理サーバ、船舶の航行支援方法、及び船舶の航行支援プログラム |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2019233798A JP7371907B2 (ja) | 2019-12-25 | 2019-12-25 | 船舶の航行支援システムにおける管理サーバ、船舶の航行支援方法、及び船舶の航行支援プログラム |
Related Child Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2023176359A Division JP2023184555A (ja) | 2019-12-25 | 2023-10-12 | 船舶の航行支援システムにおける管理サーバ、船舶の航行支援方法、及び船舶の航行支援プログラム |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2021103396A JP2021103396A (ja) | 2021-07-15 |
JP7371907B2 true JP7371907B2 (ja) | 2023-10-31 |
Family
ID=76574304
Family Applications (2)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2019233798A Active JP7371907B2 (ja) | 2019-12-25 | 2019-12-25 | 船舶の航行支援システムにおける管理サーバ、船舶の航行支援方法、及び船舶の航行支援プログラム |
JP2023176359A Pending JP2023184555A (ja) | 2019-12-25 | 2023-10-12 | 船舶の航行支援システムにおける管理サーバ、船舶の航行支援方法、及び船舶の航行支援プログラム |
Family Applications After (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2023176359A Pending JP2023184555A (ja) | 2019-12-25 | 2023-10-12 | 船舶の航行支援システムにおける管理サーバ、船舶の航行支援方法、及び船舶の航行支援プログラム |
Country Status (6)
Country | Link |
---|---|
US (1) | US20230038494A1 (ja) |
EP (1) | EP4082890A4 (ja) |
JP (2) | JP7371907B2 (ja) |
KR (1) | KR20220117241A (ja) |
CN (1) | CN114846530A (ja) |
WO (1) | WO2021132437A1 (ja) |
Families Citing this family (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US20230012090A1 (en) * | 2021-07-09 | 2023-01-12 | Kawasaki Motors, Ltd. | Periphery recognition support system and method for personal watercraft |
WO2023032168A1 (ja) * | 2021-09-03 | 2023-03-09 | ニューラルポケット株式会社 | 情報処理システム、情報処理装置、サーバ装置、端末装置、携帯端末装置、プログラム、又は方法 |
WO2023100389A1 (ja) * | 2021-12-02 | 2023-06-08 | 古野電気株式会社 | 情報処理方法、情報処理装置及びコンピュータプログラム |
WO2023100390A1 (ja) * | 2021-12-02 | 2023-06-08 | 古野電気株式会社 | 情報処理方法、レーダー装置及びコンピュータプログラム |
WO2023233867A1 (ja) * | 2022-06-02 | 2023-12-07 | 古野電気株式会社 | 船舶情報共有システム、船舶情報共有装置、及び船舶情報共有方法 |
KR102573700B1 (ko) * | 2023-06-15 | 2023-09-01 | 한국해양과학기술원 | 예인 및 피예인 물표 식별 장치 및 방법 |
Citations (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2017182730A (ja) | 2016-03-31 | 2017-10-05 | 富士通株式会社 | 衝突リスク算出プログラム、衝突リスク算出方法および衝突リスク算出装置 |
JP2019184438A (ja) | 2018-04-11 | 2019-10-24 | パナソニック株式会社 | 物体検出装置、物体検出システム、及び物体検出方法 |
Family Cites Families (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP4925525B2 (ja) * | 2001-08-03 | 2012-04-25 | 古野電気株式会社 | 他船表示装置 |
JP4550568B2 (ja) | 2004-07-30 | 2010-09-22 | 五洋建設株式会社 | 船舶の運航管理方法及び装置 |
CN105390029B (zh) * | 2015-11-06 | 2019-04-26 | 武汉理工大学 | 基于航迹融合和航迹预测的船舶避碰辅助决策方法及系统 |
JP6659367B2 (ja) * | 2016-01-15 | 2020-03-04 | パナソニック株式会社 | 物体検出装置および物体検出方法 |
WO2019140699A1 (en) * | 2018-01-22 | 2019-07-25 | SZ DJI Technology Co., Ltd. | Methods and system for multi-target tracking |
EP3561542A1 (en) * | 2018-04-27 | 2019-10-30 | Veoneer Sweden AB | Generic object tracking based on significant points |
-
2019
- 2019-12-25 JP JP2019233798A patent/JP7371907B2/ja active Active
-
2020
- 2020-12-24 EP EP20906351.0A patent/EP4082890A4/en active Pending
- 2020-12-24 CN CN202080089160.1A patent/CN114846530A/zh active Pending
- 2020-12-24 US US17/788,148 patent/US20230038494A1/en active Pending
- 2020-12-24 WO PCT/JP2020/048367 patent/WO2021132437A1/ja unknown
- 2020-12-24 KR KR1020227021364A patent/KR20220117241A/ko unknown
-
2023
- 2023-10-12 JP JP2023176359A patent/JP2023184555A/ja active Pending
Patent Citations (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2017182730A (ja) | 2016-03-31 | 2017-10-05 | 富士通株式会社 | 衝突リスク算出プログラム、衝突リスク算出方法および衝突リスク算出装置 |
JP2019184438A (ja) | 2018-04-11 | 2019-10-24 | パナソニック株式会社 | 物体検出装置、物体検出システム、及び物体検出方法 |
Also Published As
Publication number | Publication date |
---|---|
KR20220117241A (ko) | 2022-08-23 |
US20230038494A1 (en) | 2023-02-09 |
EP4082890A4 (en) | 2024-02-14 |
CN114846530A (zh) | 2022-08-02 |
JP2023184555A (ja) | 2023-12-28 |
WO2021132437A1 (ja) | 2021-07-01 |
EP4082890A1 (en) | 2022-11-02 |
JP2021103396A (ja) | 2021-07-15 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP7371907B2 (ja) | 船舶の航行支援システムにおける管理サーバ、船舶の航行支援方法、及び船舶の航行支援プログラム | |
JP6150418B2 (ja) | 情報表示装置、魚群探知機及び情報表示方法 | |
US20190204416A1 (en) | Target object detecting device, method of detecting a target object and computer readable medium | |
EP3710858A1 (en) | Real-time monitoring of surroundings of marine vessel | |
CN104660993B (zh) | 基于ais和cctv的海事智能监控方法及系统 | |
US20120274504A1 (en) | Information display device, information display method, and radar apparatus | |
US11262449B2 (en) | Signal processing device and radar device | |
US20220172464A1 (en) | Water non-water segmentation systems and methods | |
CN103175525A (zh) | 基于电子海图和导航数据的雷达图像模拟系统和方法 | |
EP3926364A1 (en) | Ship target object detection system, method of detecting ship target object and reliability estimating device | |
JP2001281331A (ja) | 船舶情報表示装置 | |
CN109001725A (zh) | 一种海上无人艇海上多目标跟踪方法 | |
Bruhn et al. | Conducting look-out on an unmanned vessel: Introduction to the advanced sensor module for MUNIN’s autonomous dry bulk carrier | |
CN112347218A (zh) | 无人船艇的环境地图生成方法及无人船艇感知系统 | |
JP2001004398A (ja) | 衛星sar画像に基づく移動体の移動情報検出方法 | |
US20230351764A1 (en) | Autonomous cruising system, navigational sign identifying method, and non-transitory computer-readable medium | |
Xu et al. | Hydrographic data inspection and disaster monitoring using shipborne radar small range images with electronic navigation chart | |
US20230169404A1 (en) | Learning data collecting system, method of collecting learning data, and estimating device | |
CN115542317A (zh) | 一种基于多信息源的海面目标综合识别方法及系统 | |
CN116323387A (zh) | 船舶监视系统、船舶监视方法、信息处理装置以及程序 | |
WO2023286360A1 (ja) | 学習用データ収集装置、学習用データ収集方法、及びプログラム | |
KR102249156B1 (ko) | 증강현실 이미지를 이용한 항해 보조장치 | |
US20230331357A1 (en) | Autonomous cruising system, navigational sign identifying method, and non-transitory computer-readable medium | |
WO2023162561A1 (ja) | 物標監視装置、操船システム、物標監視方法、及びプログラム | |
US20230022049A1 (en) | Vessel field of awareness apparatus and method |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20221223 |
|
RD02 | Notification of acceptance of power of attorney |
Free format text: JAPANESE INTERMEDIATE CODE: A7422 Effective date: 20221223 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20230912 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20231012 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 7371907 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |