CN114258372B - 船舶信息显示系统、船舶信息显示方法、图像生成装置以及程序 - Google Patents
船舶信息显示系统、船舶信息显示方法、图像生成装置以及程序 Download PDFInfo
- Publication number
- CN114258372B CN114258372B CN202080058419.6A CN202080058419A CN114258372B CN 114258372 B CN114258372 B CN 114258372B CN 202080058419 A CN202080058419 A CN 202080058419A CN 114258372 B CN114258372 B CN 114258372B
- Authority
- CN
- China
- Prior art keywords
- ship
- data
- unit
- azimuth
- information display
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
- 238000000034 method Methods 0.000 title claims description 26
- 238000001514 detection method Methods 0.000 claims abstract description 22
- XLYOFNOQVPJJNP-UHFFFAOYSA-N water Substances O XLYOFNOQVPJJNP-UHFFFAOYSA-N 0.000 claims description 8
- 238000010586 diagram Methods 0.000 description 18
- 239000002131 composite material Substances 0.000 description 15
- 230000008569 process Effects 0.000 description 14
- 238000012545 processing Methods 0.000 description 10
- 230000006870 function Effects 0.000 description 8
- 238000004364 calculation method Methods 0.000 description 7
- 230000010365 information processing Effects 0.000 description 6
- 230000002194 synthesizing effect Effects 0.000 description 5
- 230000008901 benefit Effects 0.000 description 4
- 238000010276 construction Methods 0.000 description 4
- 238000012986 modification Methods 0.000 description 4
- 230000004048 modification Effects 0.000 description 4
- 230000009471 action Effects 0.000 description 3
- 230000000694 effects Effects 0.000 description 3
- 208000036259 susceptibility to 4 autoimmune disease Diseases 0.000 description 3
- 230000003190 augmentative effect Effects 0.000 description 2
- 238000012937 correction Methods 0.000 description 2
- 238000003384 imaging method Methods 0.000 description 2
- 238000013459 approach Methods 0.000 description 1
- 230000015572 biosynthetic process Effects 0.000 description 1
- 230000008859 change Effects 0.000 description 1
- 238000004891 communication Methods 0.000 description 1
- 238000005516 engineering process Methods 0.000 description 1
- 230000002708 enhancing effect Effects 0.000 description 1
- 239000004973 liquid crystal related substance Substances 0.000 description 1
- 239000000463 material Substances 0.000 description 1
- 238000005259 measurement Methods 0.000 description 1
- 239000003607 modifier Substances 0.000 description 1
- 230000003287 optical effect Effects 0.000 description 1
- 238000009877 rendering Methods 0.000 description 1
- 239000007787 solid Substances 0.000 description 1
- 238000003786 synthesis reaction Methods 0.000 description 1
- 230000000007 visual effect Effects 0.000 description 1
Classifications
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B63—SHIPS OR OTHER WATERBORNE VESSELS; RELATED EQUIPMENT
- B63B—SHIPS OR OTHER WATERBORNE VESSELS; EQUIPMENT FOR SHIPPING
- B63B49/00—Arrangements of nautical instruments or navigational aids
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V20/00—Scenes; Scene-specific elements
- G06V20/50—Context or environment of the image
- G06V20/56—Context or environment of the image exterior to a vehicle by using sensors mounted on the vehicle
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B63—SHIPS OR OTHER WATERBORNE VESSELS; RELATED EQUIPMENT
- B63B—SHIPS OR OTHER WATERBORNE VESSELS; EQUIPMENT FOR SHIPPING
- B63B79/00—Monitoring properties or operating parameters of vessels in operation
- B63B79/20—Monitoring properties or operating parameters of vessels in operation using models or simulation, e.g. statistical models or stochastic models
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T11/00—2D [Two Dimensional] image generation
- G06T11/60—Editing figures and text; Combining figures or text
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T15/00—3D [Three Dimensional] image rendering
- G06T15/10—Geometric effects
- G06T15/20—Perspective computation
- G06T15/205—Image-based rendering
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T19/00—Manipulating 3D models or images for computer graphics
- G06T19/006—Mixed reality
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T7/00—Image analysis
- G06T7/70—Determining position or orientation of objects or cameras
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V10/00—Arrangements for image or video recognition or understanding
- G06V10/20—Image preprocessing
- G06V10/25—Determination of region of interest [ROI] or a volume of interest [VOI]
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V10/00—Arrangements for image or video recognition or understanding
- G06V10/70—Arrangements for image or video recognition or understanding using pattern recognition or machine learning
- G06V10/77—Processing image or video features in feature spaces; using data integration or data reduction, e.g. principal component analysis [PCA] or independent component analysis [ICA] or self-organising maps [SOM]; Blind source separation
- G06V10/80—Fusion, i.e. combining data from various sources at the sensor level, preprocessing level, feature extraction level or classification level
-
- G—PHYSICS
- G08—SIGNALLING
- G08G—TRAFFIC CONTROL SYSTEMS
- G08G3/00—Traffic control systems for marine craft
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B63—SHIPS OR OTHER WATERBORNE VESSELS; RELATED EQUIPMENT
- B63B—SHIPS OR OTHER WATERBORNE VESSELS; EQUIPMENT FOR SHIPPING
- B63B43/00—Improving safety of vessels, e.g. damage control, not otherwise provided for
- B63B43/18—Improving safety of vessels, e.g. damage control, not otherwise provided for preventing collision or grounding; reducing collision damage
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2200/00—Indexing scheme for image data processing or generation, in general
- G06T2200/24—Indexing scheme for image data processing or generation, in general involving graphical user interfaces [GUIs]
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/30—Subject of image; Context of image processing
- G06T2207/30248—Vehicle exterior or interior
- G06T2207/30252—Vehicle exterior; Vicinity of vehicle
-
- G—PHYSICS
- G08—SIGNALLING
- G08G—TRAFFIC CONTROL SYSTEMS
- G08G3/00—Traffic control systems for marine craft
- G08G3/02—Anti-collision systems
Landscapes
- Engineering & Computer Science (AREA)
- Physics & Mathematics (AREA)
- Theoretical Computer Science (AREA)
- General Physics & Mathematics (AREA)
- Ocean & Marine Engineering (AREA)
- Multimedia (AREA)
- Mechanical Engineering (AREA)
- Combustion & Propulsion (AREA)
- Chemical & Material Sciences (AREA)
- Computer Vision & Pattern Recognition (AREA)
- Remote Sensing (AREA)
- Radar, Positioning & Navigation (AREA)
- Computer Graphics (AREA)
- Software Systems (AREA)
- Computing Systems (AREA)
- Computer Hardware Design (AREA)
- General Engineering & Computer Science (AREA)
- Geometry (AREA)
- Probability & Statistics with Applications (AREA)
- Health & Medical Sciences (AREA)
- Medical Informatics (AREA)
- General Health & Medical Sciences (AREA)
- Evolutionary Computation (AREA)
- Databases & Information Systems (AREA)
- Artificial Intelligence (AREA)
- Processing Or Creating Images (AREA)
Abstract
提供一种易于直观地掌握船舶的尺寸的船舶信息显示系统。船舶信息显示系统具备:位置检测部,检测船舶的位置并生成位置数据;方位检测部,检测船舶的船首方位并生成方位数据;存储部,存储表示以船舶的位置数据的检测场所为基准的船舶的平面尺寸的尺寸数据;对象配置部,将表示船舶的船舶对象以与方位数据对应的朝向以及与尺寸数据对应的大小配置在虚拟三维空间的与位置数据对应的位置处;图像生成部,通过对基于设定在虚拟三维空间中的视点位置以及视线方向的场景进行描绘,生成包括船舶对象的图像;以及显示部,显示图像。
Description
技术领域
本发明涉及船舶信息显示系统、船舶信息显示方法、图像生成装置以及程序。
背景技术
在专利文献1中,公开了一种船操作支援装置,其具备:设置于船舶上的多台摄像部(摄像头),以多个拍摄图像相互重叠的方式对船舶的周围进行拍摄;图像合成部,基于规定的虚拟视点V合成由摄像部拍摄的图像;测量部(毫米波雷达),测量从船舶到岸壁的距离;修正部(控制部),将由测量部测量的从船舶到岸壁的距离修正为从虚拟视点看到的船舶到岸壁的距离;图像输出部,输出将由修正部修正的从船舶到岸壁的距离叠加在由图像合成部合成的图像上的图像;以及显示部,显示从图像输出部输出的图像。
现有技术文献
专利文献
专利文献1:日本特开2018-188043号公报。
发明内容
发明要解决的问题
另外,在船舶离靠岸时等,虽然需要掌握船舶的船舷与岸壁或拖船等周围物的距离,但由于船舶上的船员的视线被上甲板遮蔽,无法目视确认水面附近的船舷,因此难以直观地掌握船舶的尺寸。这种问题在大型船舶中尤其明显。
本发明是鉴于上述课题而完成的,其主要目的在于,提供一种容易直观地掌握船舶的尺寸的船舶信息显示系统、船舶信息显示方法、图像生成装置以及程序。
用于解决问题的手段
为了解决上述课题,本发明的一个方式的船舶信息显示系统具备:位置检测部,检测船舶的位置并生成位置数据;方位检测部,检测所述船舶的船首方位并生成方位数据;存储部,存储表示以所述船舶的所述位置数据的检测场所为基准的所述船舶的平面尺寸的尺寸数据;对象配置部,将表示所述船舶的船舶对象以与所述方位数据对应的朝向以及与所述尺寸数据对应的大小配置在虚拟三维空间的与所述位置数据对应的位置;图像生成部,通过描绘基于设定在所述虚拟三维空间中的视点位置以及视线方向的场景,生成包含所述船舶对象的图像;以及显示部,显示所述图像。
另外,在本发明的其他方式的船舶信息显示方法中,检测船舶的位置并生成位置数据,检测所述船舶的船首方位并生成方位数据,获取表示以所述船舶的所述位置数据的检测场所为基准的所述船舶的平面尺寸的尺寸数据,将表示所述船舶的船舶对象以与所述方位数据对应的朝向以及与所述尺寸数据对应的大小配置在虚拟三维空间的与所述位置数据对应的位置,通过描绘基于设定在所述虚拟三维空间中的视点位置以及视线方向的场景,生成包括所述船舶对象的图像,并显示所述图像。
另外,本发明的其他方式的图像生成装置具备:位置获取部,获取表示船舶的位置的位置数据;方位获取部,获取表示所述船舶的船首方位的方位数据;尺寸获取部,获取表示以所述船舶的所述位置数据的检测场所为基准的所述船舶的平面尺寸的尺寸数据;对象配置部,将表示所述船舶的船舶对象以与所述方位数据对应的朝向以及与所述尺寸数据对应的大小配置在虚拟三维空间的与所述位置数据对应的位置;以及图像生成部,通过描绘基于设定在所述虚拟三维空间中的视点位置以及视线方向的场景,生成包括所述船舶对象的图像。
另外,本发明的其他方式的程序使计算机作为以下各部发挥功能:位置获取部,获取表示船舶的位置的位置数据;方位获取部,获取表示所述船舶的船首方位的方位数据;尺寸获取部,获取表示以所述船舶的所述位置数据的检测场所为基准的所述船舶的平面尺寸的尺寸数据;对象配置部,将表示所述船舶的船舶对象以与所述方位数据对应的朝向以及与所述尺寸数据对应的大小配置在虚拟三维空间的与所述位置数据对应的位置处;以及图像生成部,通过描绘基于设定在所述虚拟三维空间中的视点位置以及视线方向的场景,生成包括所述船舶对象的图像。
发明效果
根据本发明,能够易于直观地掌握船舶的尺寸。
附图说明
图1是表示实施方式的船舶信息显示系统的结构例的框图。
图2是表示实施方式的图像生成装置的结构例的框图。
图3是表示由摄像头拍摄的摄像头图像的例子的图。
图4是表示虚拟三维空间的例子的图。
图5是表示通过绘制而生成的增强用图像的例子的图。
图6是表示将摄像头图像和增强用图像进行合成后的合成图像的例子的图。
图7是表示虚拟三维空间的例子的图。
图8是表示将摄像头图像和增强用图像进行合成后的合成图像的例子的图。
图9是表示实施方式的船舶信息显示方法的步骤的例子的流程图。
图10是表示其他船舶对象配置处理的步骤的例子的流程图。
图11是表示虚拟三维空间的例子的图。
图12是表示将摄像头图像和增强用图像进行合成后的合成图像的例子的图。
图13是用于说明尺寸数据的图。
具体实施方式
以下,参照附图对本发明的实施方式进行说明。
图1是表示实施方式的船舶信息显示系统100的结构例的框图。
船舶信息显示系统100具备图像生成装置1、雷达2、GNSS接收机3、AIS4、ECDIS5、陀螺罗盘6、摄像头7、以及便携式信息终端8。这些设备例如与LAN(Local Area Network:局域网)等的网络N连接,能够相互进行网络通信。
图像生成装置1生成包含以增强现实(AR:Augmented Reality)的方式表现船舶(己方船舶)周围的状况的图像的视频数据,并显示于自身的显示部22(参照图2)或者便携式信息终端8的显示部上。
雷达2检测存在于己方船舶周围的目标,并生成表示目标的位置以及速度矢量的目标追踪数据(TT(Target Tracking:目标追踪)数据)。
GNSS接收机3基于从GNSS(Global Navigation Satellite System:全球导航卫星系统)接收到的电波来检测己方船舶的位置,并生成表示己方船舶的位置的位置数据。GNSS接收机3是位置检测部的一个例子。
AIS(Automatic Identification System:船舶自动识别系统)4接收从其他船舶或者陆地上的基站发送的AIS数据。AIS数据包括其他船舶的船名、标识符、位置、长度、宽度、航向、船速、船首方位、以及目的地等各种数据。AIS4是其他船舶数据接收部的一个例子,AIS数据是其他船舶数据的一个例子。
ECDIS(Electronic Chart Display and Information System:电子海图信息显示系统)5从GNSS接收机3获取己方船舶的位置数据,并将己方船舶的位置显示在电子海图上。另外,ECDIS5还在电子海图上显示设定为依次通过多个航路点的预定航行路线。
陀螺罗盘6检测己方船舶的船首方位,并生成表示船首方位的方位数据。陀螺罗盘6是方位检测部的一个例子。但并不限定于此,也可以使用GPS罗盘或者磁罗盘等。
摄像头7对己方船舶的外部进行拍摄,并生成图像(以下,称为摄像头图像)。摄像头7例如以朝向船首方位的方式设置在桥上。摄像头7也可以构成为,根据图像生成装置1的操作部21(参照图2)检测出的操作输入来进行摇摆或倾斜。
便携式信息终端8由船员携带,显示由图像生成装置1生成的图像。便携式信息终端8例如是平板计算机。便携式信息终端8例如经由未图示的接入点与网络N无线连接。
在本实施方式中,船舶信息显示系统100中所包含的各个设备搭载于船舶。但并不限定于此,例如,图像生成装置1也可以配置在陆地上的塔台等中,便携式信息终端8也可以由拖船的船员或岸壁上的作业人员等携带。
图2是表示实施方式的图像生成装置1的结构例的框图。图像生成装置1具备控制部10、操作部21、以及显示部22。
控制部10是包括CPU、RAM、ROM、非易失性存储器以及输入/输出接口等的计算机。控制部10的CPU根据从ROM或者非易失性存储器加载到RAM中的程序来执行信息处理。
程序例如可以经由光盘或者存储卡等信息存储介质供给,也可以经由例如互联网或LAN等通信网络供给。
在控制部10的非易失性存储器等的存储器中,除了程序之外,还存储有在根据程序执行的信息处理中使用的各种数据。
控制部10具备位置获取部11、方位获取部12、尺寸获取部13、虚拟空间构建部14、对象配置部15、匹配度判定部16、距离计算部17、预测位置计算部18、以及图像生成部19。这些功能部通过控制部10的CPU根据程序执行信息处理来实现。
操作部21例如是轨迹球等的指示设备。显示部22例如是液晶显示器等的显示装置。
位置获取部11获取由GNSS接收机3生成的表示己方船舶的位置的位置数据。方位获取部12获取由陀螺罗盘6生成的表示己方船舶的船首方位的方位数据。
尺寸获取部13从控制部10的存储器中获取己方船舶的尺寸数据。但并不限定于此,尺寸数据也可以从外部的数据库中获取。
虚拟空间构建部14构建虚拟三维空间,设定虚拟摄像头的视点位置以及视线方向。对象配置部15将各种虚拟对象配置在虚拟三维空间中。
关于匹配度判定部16、距离计算部17、以及预测位置计算部18,将在后面进行详细描述。
图像生成部19通过绘制(描绘)虚拟摄像头所拍摄的虚拟三维空间的场景(景象),来生成增强用图像。另外,图像生成部19通过将增强用图像合成到表示由现实的摄像头7所拍摄的现实空间的场景的摄像头图像中,来生成合成图像。
图3是表示由摄像头7拍摄的摄像头图像30的例子的图。该图的例子示出了摄像头7在以朝向船首方位的方式设置在桥上的情况下拍摄的摄像头图像30。摄像头图像30例如包括己方船舶的图像31以及其他船舶的图像32等。
图4是表示由虚拟空间构建部14构建的虚拟三维空间40的例子的图。虚拟三维空间40的坐标系被设定为与现实空间的坐标系对应。
在虚拟三维空间40中配置有虚拟摄像头41。在虚拟摄像头41中设定视点位置以及视线方向。基于虚拟摄像头41的视点位置以及视线方向的视野42中所包含的场景成为绘制的对象。
虚拟摄像头41的视点位置以及视点方向例如与现实的摄像头7的位置以及朝向对应地设定。因此,虚拟摄像头41的视点方向与船首方位连动地变化。另外,如果现实的摄像头7摇摆或倾斜,虚拟摄像头41的视点方向也与其相应地变化。
在虚拟三维空间40中配置有屏幕43。屏幕43是与现实的摄像头7的位置以及朝向对应的区域,并且是合成有由摄像头7拍摄的摄像头图像30(参照图3)的区域。屏幕43通常被配置为以恰好的比例包含在虚拟摄像头41的视野42中。
在虚拟三维空间40中配置有路线对象51以及其他船舶对象52等的虚拟对象。路线对象51基于从ECDIS5中获取的预定航行路线的数据而被配置。其他船舶对象52基于从AIS4中获取的AIS数据(其他船舶数据的例子)而被配置。
例如,其他船舶对象52以与长度/宽度数据对应的大小、与船首方位数据对应的朝向配置在与AIS数据中所包含的位置数据对应的位置。其他船舶对象52具有模仿船舶的形状的立体的形状,能够易于一目了然地掌握船首的方向。
图5是表示由图像生成部19生成的增强用图像44的例子的图。图像生成部19通过绘制虚拟三维空间40中的虚拟摄像头41所拍摄的场景,来生成包括路线对象51以及其他船舶对象52等的虚拟对象的增强用图像44。
在增强用图像44中,路线对象51以及其他船舶对象52等的虚拟对象是具有透射性的对象(例如,半透射)。另外,在增强用图像44中,虚拟对象以外的背景区域为全透射。
图6是表示由图像生成部19生成的将摄像头图像30与增强用图像44进行合成后的合成图像60的例子的图。
在合成图像60中包含叠加在其他船舶的图像32上的其他船舶对象52。如上所述,由于路线对象51以及其他船舶对象52具有透射性,因此即使路线对象51以及其他船舶对象52重叠,也能够目视确认己方船舶的图像31以及其他船舶的图像32。
进一步地,在合成图像60中,包含船首方位线61、方位刻度62、周围显示63、以及其他船舶信息显示64等。
船首方位线61是表示己方船舶的船首方位的显示,其基于来自陀螺罗盘6的方位数据而生成。周围显示63是表示己方船舶的周围的目标的状况的显示,其基于来自雷达2的TT数据而生成。其他船舶信息显示64是表示其他船舶的信息的显示,其基于来自AIS4的AIS数据而生成。
此外,虚拟三维空间40中的虚拟摄像头41的视点位置以及视点方向例如也可以被设定为与船员所携带的便携式信息终端8的位置以及姿态连动的变化。
在该情况下,如图7所示,可以产生虚拟摄像头41的视野42与屏幕43不一致的状况。如图8所示,在合成图像60中,摄像头图像30仅合成在增强用图像44的一部分区域上,在除此之外的区域显示增强用图像44的背景。
图9以及图10是表示由船舶信息显示系统100实现的实施方式的船舶信息显示方法步骤的例子的流程图。这些图所示的信息处理例如当船舶在港湾中靠近或者离开岸壁或者栈桥时等执行。
图11以及图12是表示执行图9以及图10所示的信息处理时的虚拟三维空间40以及合成图像60的例子的图。这些图示出了利用拖船推动船舶从而使船舶进入靠岸区域的情形。
图像生成装置1的控制部10通过根据程序执行图9以及图10所示的信息处理,作为上述图2所示的各部发挥作用:位置获取部11、方位获取部12、尺寸获取部13、虚拟空间构建部14、对象配置部15、匹配度判定部16、距离计算部17、预测位置计算部18、以及图像生成部19。
首先,控制部10获取位置数据、方位数据、以及尺寸数据等(S11;作为位置获取部11、方位获取部12、以及尺寸获取部13的处理)。具体而言,控制部10从GNSS接收机3获取表示己方船舶的位置的位置数据,从陀螺罗盘6获取表示己方船舶的船首方位的方位数据,从自身的存储器获取己方船舶的尺寸数据。
其中,尺寸数据表示以己方船舶的位置数据的检测场所为基准的己方船舶的平面尺寸。位置数据的检测场所是GNSS接收机3的天线的位置。例如,如图13所示,尺寸数据作为己方船舶具有矩形状的平面外形的数据,包括从检测场所到船首的长度Lb、从检测场所到左舷的长度Lp、从检测场所到右舷的长度Ls、以及从检测场所到船尾的长度La。
接下来,控制部10在虚拟三维空间40中配置船舶对象53以及目标区域对象55等(S12;作为对象配置部15的处理,参照图11)。
具体而言,控制部10将表示己方船舶的船舶对象53以与方位数据对应的朝向以及与尺寸数据对应的大小配置在与虚拟三维空间40中的位置数据对应的位置。
例如,船舶对象53被配置为与检测场所(参照图13)对应的点位于与位置数据对应的坐标上。另外,船舶对象53被配置为与船首对应的前端朝向与方位数据对应的方位上。
另外,船舶对象53被生成为矩形状的对象,其从与检测场所对应的点到前端、左端、右端、以及后端为止的各长度具有与尺寸数据中所包含的各长度Lb、Lp、Ls、La(参照图13)对应的大小。
船舶对象53优选是平面对象(即,不具有厚度的对象)。另外,船舶对象53优选配置在与水面对应的高度。
进一步地,控制部10将表示搭载于己方船舶的重物的重物对象54配置在船舶对象53上。重物对象54例如表示搭载于己方船舶的装载物或发动机等。重物对象54例如构成为箱状的立体对象。
具体而言,控制部10从自身的存储器获取表示搭载于己方船舶的重物的位置的重物数据,并将重物对象54配置在通过重物对象54的重物数据确定的位置。另外,也可以根据重物的重量使重物对象54的大小发生变化。
而且,控制部10对表示己方船舶应该到达的目标区域(例如靠岸区域)的目标区域对象55进行配置。目标区域对象55也与船舶对象53同样地构成为平面对象,并配置在与水面对应的高度。
具体而言,控制部10从自身的存储器获取表示己方船舶应该到达的目标区域的区域数据,并将目标区域对象55配置在通过区域数据确定的区域中。
目标区域对象55既可以具有与船舶对象53相同的形状以及大小,也可以具有包含船舶对象53的形状以及大小。另外,也可以在目标区域对象55上显示易于掌握平行度的网格线。
返回到图9的说明,接下来,控制部10判定船舶对象53与目标区域对象55的匹配度(S13;作为匹配度判定部16的处理)。匹配度例如是基于船舶对象53与目标区域对象55的重叠面积而计算的。
但不限定于此,匹配度既可以基于例如船舶对象53与目标区域对象55的平行度来计算,也可以基于船舶对象53与目标区域对象55的岸壁侧的边之间的距离来计算。
接下来,控制部10执行其他船舶对象配置处理(S14)。图10是表示其他船舶对象配置处理S14的步骤的例子的流程图。
在其他船舶对象配置处理S14中,首先,控制部10从AIS4(参照图1)获取AIS数据(其他船舶数据的例子)(S21)。
接下来,控制部10判定通过AIS数据确定的其他船舶是否为拖船(S22)。例如通过AIS数据中是否包含表示拖船的标识符来判断是否为拖船。但并不限于此,也可以通过己方船舶与其他船舶的距离是否为阈值以下来判断是否为拖船。
在其他船舶是拖船时(S22:是),控制部10基于AIS数据来配置表示拖船的其他船舶对象56(S23;作为对象配置部15的处理)。
其他船舶对象56的配置与上述的其他船舶对象52的配置(参照图4)相同。即,其他船舶对象56以与长度/宽度数据对应的大小以及与船首方位数据对应的朝向被配置在与AIS数据中所包含的位置数据对应的位置处。
接下来,控制部10计算从己方船舶的船舷到其他船舶的距离(S24;作为距离计算部17的处理)。己方船舶的船端(左舷或者右舷)的位置是基于己方船舶的位置数据、方位数据、以及尺寸数据而计算的,其他船舶的位置是基于AIS数据而计算的。
接下来,在计算出的距离为阈值以下时(S25:是),控制部10在船舶对象53的其他船舶对象56附近的位置附加表示接触的接触标记67,并且在其他船舶对象56的附近附加表示其他船舶的航行状态的箭头68(S26)。
箭头68的朝向表示其他船舶的船首方位或者航向,箭头68的大小表示其他船舶的船速。此外,接触标记67以及箭头68也可以附加在绘制后的增强用图像44或者合成图像60中。
此外,在说明的例子中,在其他船舶不是拖船的情况下,则不配置其他船舶对象56,但不限于此,也可以根据其他船舶是否是拖船来改变显示方式,以识别是否为拖船。
通过以上,其他船舶对象配置处理S14结束。
返回图9的说明,接下来,控制部10计算经过规定时间后的己方船舶的预测位置以及预测姿态,并配置表示它们的预测船舶对象57(S16)。己方船舶的预测位置以及预测姿态是基于表示判定为拖船的其他船舶的船首方位或船速等的航行状态的数据而计算出的。
预测船舶对象57也与船舶对象53同样地构成为平面对象,并配置在与水面对应的高度。在图11以及图12的例子中,示出了表示己方船舶在两艘拖船的推动下向岸壁平行移动的预测船舶对象57。
接下来,控制部10通过设定虚拟三维空间40中的虚拟摄像头41的视点位置以及视线方向,并对虚拟摄像头41拍摄的场景进行绘制,从而生成增强用图像44(S16-S17;作为虚拟空间构建部14以及图像生成部19的处理)。
接下来,控制部10通过将生成的增强用图像44与由现实的摄像头7(参照图1)拍摄到的摄像头图像30进行合成来生成合成图像60(参照图12)(S18;作为图像生成部19的处理)。
然后,控制部10将生成的合成图像60输出至显示部22(参照图2)或者便携式信息终端8(参照图1)(S19)。通过以上的方式,一系列的处理结束。这些处理以规定的时间间隔反复执行。
如图12所示,在合成图像60中,包含表示己方船舶的外形的船舶对象53。由此,能够易于直观地掌握己方船舶的尺寸或与周围物的距离。尤其是,通过将船舶对象53设为平面对象,并配置在与水面对应的高度处,从而易于直观地掌握水面附近的己方船舶的尺寸。
另外,在合成图像60中,也包括表示搭载于己方船舶的重物的重物对象54。由此,易于掌握己方船舶中的重物的位置。因此,在离靠岸时,应该对己方船舶的哪个位置施加多大的力的研究变得容易。
另外,在合成图像60中,也包括表示己方船舶应该到达的目标区域的目标区域对象55。目标区域对象55例如以与岸壁的图像35相邻的方式显示。由此,在离靠岸时,使己方船舶向哪个方向移动的研究、己方船舶到达了目标区域中的哪个位置的判断变得容易。
另外,在合成图像60中,也包括表示船舶对象53与目标区域对象55的匹配度的匹配度显示65。由此,己方船舶在目标区域中处于哪个位置的判断变得容易。
另外,在合成图像60中,也包括表示拖船的其他船舶对象56。其他船舶对象56叠加在拖船的图像36上。由此,易于掌握拖船的位置、大小、以及方向。
另外,在合成图像60中,也包括表示从己方船舶的船舷到其他船舶的距离的距离显示66。这样,由于不仅显示位置数据,还显示使用尺寸数据而计算出的己方船舶的船舷到其他船舶的距离,因此容易掌握更准确的距离。
另外,在合成图像60中,也包括表示与其他船舶接触的接触标记67。由此,易于掌握从拖船向己方船舶的哪个位置施加力。
另外,在合成图像60中,也包括表示其他船舶的船首方位或者航向并且与其他船舶的船速对应的大小的箭头68。由此,易于掌握从拖船向哪个方向施加多大的力。
以上,对本发明的实施方式进行了说明,但本发明并不限定于以上说明的实施方式,对本领域技术人员而言能够进行各种变更。
例如,显示部也可以是佩戴于船员的头部的头戴式显示器。增强用图像44基于与头戴式显示器的位置以及姿态连动地变化的虚拟摄像头41的视点位置以及视线方向而生成。
此外,在非透射型的头戴式显示器中,输出合成了增强用图像44和摄像头图像30的合成图像60,在透射型的头戴式显示器中仅输出增强用图像44。
附图标记说明
1:图像生成装置、2:雷达、3:GNSS接收机、4:AIS、5:ECDIS,6:陀螺罗盘、7:摄像头、8:便携式信息终端、10:控制部、11:位置获取部、12:方位获取部、13:尺寸获取部、14:虚拟空间构建部、15:对象配置部、16:匹配度判定部、17:距离计算部、18:预测位置计算部、19:图像生成部、21:操作部、22:显示部、30:摄像头图像、31:己方船舶的图像、32:其他船舶的图像、35:岸壁的图像、36:拖船的图像、40:虚拟三维空间、41:虚拟摄像头、42:视野、43:屏幕、44:增强用图像、51:路线对象、52:其他船舶对象、53:船舶对象、54:重物对象、55:目标区域对象、56:其他船舶对象、57:预测船舶对象、60:合成图像、61:船首方位线、62:方位刻度、63:周围显示、64:其他船舶信息显示、65:匹配度显示、66:距离显示、67:接触标记、68:箭头、100:船舶信息显示系统
术语
并非所有的目的或效果/优点都能够根据本说明书中记载的任何特定实施方式来实现。因此,例如本领域技术人员能够想到,特定实施方式能够构成为,以实现或优化本说明书中所教导的一个或多个效果,优点的方式进行动作,而不一定实现在本说明书中教导或建议那样的其他的目的或效果,优点。
本说明书中记载的全部处理通过由包含一个或多个计算机或处理器的计算系统执行的软件代码模块来具体实现,从而完全自动化。代码模块能够存储在任意类型的非临时性计算机可读介质或其他的计算机存储装置中。一部分或者全部的方法能够通过专用的计算机硬件来实现。
从本公开中可以明确,在本说明书中记载的内容以外,还有许多其他的变形例。例如,根据实施方式,本说明书中记载的算法中的任意一个特定的动作,事件或者功能能够以不同的时序执行,并且能够追加、合并或者完全排除(例如,并非全部所记载的行为或者事件都需要执行算法)。另外,在特定的实施方式中,动作或事件例如能够多线程处理,中断处理,或者,经由多个处理器或处理器内核或在其他的并行架构上并行地而不是逐次地执行。另外,不同的任务或者进程也能够通过能一起发挥功能的不同的机器和/或计算系统来执行。
与本说明书中公开的实施方式相关联地说明的各种例示的逻辑块以及模块能够通过处理器等机器来实施或者执行。处理器也可以是微处理器,或者,处理器也可以是控制器,微控制器或状态机或者这些的组合等。处理器能够包含构成为对计算机可执行命令进行处理的电路。在另一实施方式中,处理器包含特殊应用集成电路(ASIC)、现场可编程逻辑门阵列(FPGA)、或者不处理计算机可执行命令而执行逻辑运算的其他可编程设备。处理器还能够实现为计算设备的组合,例如数字信号处理器(数字信号处理装置)与微处理器的组合、多个微处理器、与DSP内核组合的一个以上的微处理器、或者任意的其他这样的结构。在本说明书中,主要对数字技术进行说明,但处理器也能够主要包含模拟元件。例如,本说明书中记载的信号处理算法的一部分或全部能够通过模拟电路,或模拟与数字的混合电路来实现。计算环境包括微处理器、大型计算机、数字信号处理器、便携式计算设备、设备控制器、或者基于装置内的计算引擎的计算机系统,但也能够包含不限定于这些的任意类型的计算机系统。
除非另有说明,对于“能够”、“完成”、“大概”或者“有可能性”等带有条件的语言,为了传达特定实施方式包括特定的特征,要素和/或步骤,但不包括其他的实施方式的意思,按照通常使用的上下文中的意思来理解。因此,通常,这样的带有条件的语言并不意味着特征,要素和/或步骤是一个以上的实施方式所需要的任何方法,也不意味着一个以上的实施方式必然包含用于确定这些特征,要素和/或步骤是否包含在任意的特定实施方式中或是否被执行的逻辑。
语句“X、Y、Z中的至少一个”这样的选择性语言,除非另有说明,就在通常用于表示项目,术语等可以是X、Y、Z中的任意一个或者是它们的任意的组合的上下文中来进行理解(例:X、Y、Z)。因此,这样的选择性语言通常并不意味着每个特定实施方式都需要存在X中的至少一个、Y中的至少一个、或者Z中的至少一个。
本说明书中记载的和/或附图所示的流程图中的任意的过程描述,要素或者功能块应被理解为包含用于实现过程中的特定的逻辑功能或者要素的一个以上的可执行命令在内的潜在的模块、片段或者代码的一部分。代替的实施方式包含在本说明书中记载的实施方式的范围内,在此,如本领域技术人员能理解的那样,可以根据所关联的功能性,以实质上同时或相反的顺序从图示或说明的流程中删除要素或功能,或者按照不同的顺序执行
只要没有特别明示,“一个”这样的数词通常应被解释为包含一个以上的所描述的项目。因此,“如上设定的一个设备”等语句旨在包含一个以上列举出的设备。这样的一个或多个所列举出的设备也能够以执行所记载的引用的方式集合性地构成。例如,“构成为执行以下的A、B以及C的处理器”能够包括,构成为执行A的第一处理器以及构成为执行B以及C的第二处理器。此外,即使明确地列出所导入的实施例的具体的数量的列举,本领域技术人员也应该解释为这样的列举典型地意味着至少列举出的数量(例如,不使用其他修饰语的“两个列举”的单纯的列举通常是指至少两个列举或者两个以上的列举)
通常,本说明书中使用的术语通常旨在为“非限制性”术语(例如,术语“包括”应解释为“不仅如此,而且至少包括”,术语“具有”应解释为“至少具有”,术语“包括”应解释为“虽然包括以下,但不限定于这些”),这将由本领域技术人员来判断。
为了说明的目的,本说明书中使用的术语“水平”不论其方向如何,都被定义为与使用所说明的系统的区域的地板的平面或表面平行的平面,或者实施所说明的方法的平面。术语“地板”能够置换为术语“地面”或“水面”。术语“垂直/铅直”是指与所定义的水平线垂直/铅直的方向。“上侧”、“下侧”、“下”、“上”、“侧面”、“更高”、“更低”、“上方”、“超过”、“下的”等术语针对水平面而被定义。
在本说明书中使用的术语的“附着”、“连接”、“成对”以及其他的关联术语,只要没有另外的注释,就应解释为包括能够拆卸,能够移动,固定,能够调节和/或能够拆卸地连接或者连结。连接/连结包含具有直接连接和/或说明的两个结构构件之间的中间构造的连接。
只要没有特别明示,本说明书中使用的“大致”、“约”以及“实质上”这样的术语在前的数量包括列举出的数量,另外,其还表示执行所希望的功能或者实现所希望的结果的接近所记载的数量的数量。例如,只要没有特别明示,“大致”、“约”以及“实质上”是指小于所记载的数值10%的值。如在本说明书中使用的那样,“大致”、“约”以及“实质上”等术语在前并且已被公开的实施方式的特征还表示执行所希望的功能或者对其特征实现所希望的结果的具有可变性的几个特征。
能够将许多的变形例以及修改例添加到上述的实施方式中,应理解为这些要素处于其他可允许的例子中。所有这样的修改以及变形旨在包括在本公开的范围内,并通过以下的权利要求的范围进行保护。
Claims (16)
1.一种船舶信息显示系统,其中,具备:
位置检测部,检测船舶的位置,并生成位置数据;
方位检测部,检测所述船舶的船首方位,并生成方位数据;
存储部,存储表示以所述船舶的所述位置数据的检测场所为基准的所述船舶的平面尺寸的尺寸数据;
对象配置部,将表示所述船舶的船舶对象以与所述方位数据对应的朝向以及与所述尺寸数据对应的大小配置在虚拟三维空间的与所述位置数据对应的位置;
图像生成部,通过对基于设定在所述虚拟三维空间中的视点位置以及视线方向的场景进行描绘,生成包含所述船舶对象的图像;以及
显示部,显示所述图像。
2.根据权利要求1所述的船舶信息显示系统,其中,
所述视点位置以及所述视线方向是与所述显示部的位置以及姿态对应设定的。
3.根据权利要求1或2所述的船舶信息显示系统,其中,
所述船舶对象是平面对象。
4.根据权利要求1至3中任一项所述的船舶信息显示系统,其中,
所述对象配置部将所述船舶对象配置在与水面对应的高度。
5.根据权利要求1至4中任一项所述的船舶信息显示系统,其中,
所述对象配置部基于表示所述船舶中的重物的位置的重物数据,在所述船舶对象上配置表示所述重物的重物对象。
6.根据权利要求1至5中任一项所述的船舶信息显示系统,其中,
所述对象配置部基于表示所述船舶的目标区域的区域数据,在所述虚拟三维空间中配置表示所述目标区域的目标区域对象。
7.根据权利要求6所述的船舶信息显示系统,其中,
还具备匹配度判定部,所述匹配度判定部判定所述船舶对象与所述目标区域对象的匹配度。
8.根据权利要求1至7中任一项所述的船舶信息显示系统,其中,
还具备摄像头,所述摄像头对所述船舶的外部进行拍摄,
所述图像生成部将由所述摄像头拍摄到的图像合成到通过描绘而生成的所述图像的与所述摄像头的位置以及朝向对应的区域。
9.根据权利要求1至8中任一项所述的船舶信息显示系统,其中,
还具备其他船舶数据接收部,所述其他船舶数据接收部接收至少包括表示其他船舶的位置的位置数据的其他船舶数据,
所述对象配置部基于所述其他船舶数据,在所述虚拟三维空间配置其他船舶对象。
10.根据权利要求9所述的船舶信息显示系统,其中,
还具备距离计算部,所述距离计算部基于所述位置数据、所述方位数据、所述尺寸数据以及所述其他船舶数据,计算所述船舶的船舷与其他船舶的距离。
11.根据权利要求10所述的船舶信息显示系统,其中,
在所述距离为阈值以下时,所述对象配置部在所述船舶对象的与所述其他船舶对象接近的部位附加表示接触的接触标记。
12.根据权利要求9至11中任一项所述的船舶信息显示系统,其中,
在所述其他船舶数据包含表示拖船的标识符的情况下,所述对象配置部配置所述其他船舶对象。
13.根据权利要求1至12中任一项所述的船舶信息显示系统,其中,
还具备:其他船舶数据接收部,接收至少包括表示其他船舶的航行状态的航行数据的其他船舶数据;以及
预测位置计算部,基于所述其他船舶数据,来计算经过规定时间后的所述船舶的预测位置,
所述对象配置部在所述预测位置配置预测船舶对象。
14.一种船舶信息显示方法,其中,
检测船舶的位置,并生成位置数据,
检测所述船舶的船首方位,并生成方位数据,
获取表示以所述船舶的所述位置数据的检测场所为基准的所述船舶的平面尺寸的尺寸数据,
将表示所述船舶的船舶对象以与所述方位数据对应的朝向以及与所述尺寸数据对应的大小配置在虚拟三维空间的与所述位置数据对应的位置,
通过对基于设定在所述虚拟三维空间中的视点位置以及视线方向的场景进行描绘,生成包含所述船舶对象的图像,
显示所述图像。
15.一种图像生成装置,其中,具备:
位置获取部,获取表示船舶的位置的位置数据;
方位获取部,获取表示所述船舶的船首方位的方位数据;
尺寸获取部,获取表示以所述船舶的所述位置数据的检测场所为基准的所述船舶的平面尺寸的尺寸数据;
对象配置部,将表示所述船舶的船舶对象以与所述方位数据对应的朝向以及与所述尺寸数据对应的大小配置在虚拟三维空间的与所述位置数据对应的位置;以及
图像生成部,通过对基于设定在所述虚拟三维空间中的视点位置以及视线方向的场景进行描绘,生成包括所述船舶对象的图像。
16.一种存储介质,存储有程序,其中,所述程序使计算机作为以下各部发挥功能:
位置获取部,获取表示船舶的位置的位置数据;
方位获取部,获取表示所述船舶的船首方位的方位数据;
尺寸获取部,获取表示以所述船舶的所述位置数据的检测场所为基准的所述船舶的平面尺寸的尺寸数据;
对象配置部,将表示所述船舶的船舶对象以与所述方位数据对应的朝向以及与所述尺寸数据对应的大小配置在虚拟三维空间的与所述位置数据对应的位置;以及,
图像生成部,通过对基于设定在所述虚拟三维空间中的视点位置以及视线方向的场景进行描绘,生成包括所述船舶对象的图像。
Applications Claiming Priority (3)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2019163871 | 2019-09-09 | ||
JP2019-163871 | 2019-09-09 | ||
PCT/JP2020/030345 WO2021049221A1 (ja) | 2019-09-09 | 2020-08-07 | 船舶情報表示システム、船舶情報表示方法、画像生成装置、及びプログラム |
Publications (2)
Publication Number | Publication Date |
---|---|
CN114258372A CN114258372A (zh) | 2022-03-29 |
CN114258372B true CN114258372B (zh) | 2024-06-04 |
Family
ID=74866508
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN202080058419.6A Active CN114258372B (zh) | 2019-09-09 | 2020-08-07 | 船舶信息显示系统、船舶信息显示方法、图像生成装置以及程序 |
Country Status (5)
Country | Link |
---|---|
US (1) | US11964737B2 (zh) |
EP (1) | EP4030390A4 (zh) |
JP (1) | JPWO2021049221A1 (zh) |
CN (1) | CN114258372B (zh) |
WO (1) | WO2021049221A1 (zh) |
Families Citing this family (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN113570748A (zh) * | 2021-07-23 | 2021-10-29 | 上海外高桥造船有限公司 | 一种面向智能船舶的远程运维调试支持系统及船舶 |
US11659043B1 (en) | 2022-01-27 | 2023-05-23 | Meta Platforms Technologies, Llc | Systems and methods for predictively downloading volumetric data |
WO2024053524A1 (ja) * | 2022-09-05 | 2024-03-14 | 古野電気株式会社 | 航行支援装置、航行支援方法 |
CN117999221A (zh) * | 2022-09-07 | 2024-05-07 | 广东逸动科技有限公司 | 一种生成船舶系统的拓扑图的方法以及相关装置 |
WO2024050733A1 (zh) * | 2022-09-07 | 2024-03-14 | 广东逸动科技有限公司 | 一种识别多台船外机安装位置的方法以及相关装置 |
Citations (14)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US6212132B1 (en) * | 1998-08-04 | 2001-04-03 | Japan Radio Co., Ltd. | Three-dimensional radar apparatus and method for displaying three-dimensional radar image |
JP2005289264A (ja) * | 2004-04-01 | 2005-10-20 | Furuno Electric Co Ltd | 船舶航行支援装置 |
JP2006065831A (ja) * | 2004-07-30 | 2006-03-09 | Penta Ocean Constr Co Ltd | 船舶の運航管理方法及び装置 |
CN101038168A (zh) * | 2001-08-03 | 2007-09-19 | 古野电气株式会社 | 移动体显示装置 |
JP2010003274A (ja) * | 2008-06-23 | 2010-01-07 | National Maritime Research Institute | 目視認識支援装置及び目視認識支援方法 |
JP2011225208A (ja) * | 2010-03-30 | 2011-11-10 | Ns Solutions Corp | 画像表示システム及び画像表示方法及びプログラム |
CN103376442A (zh) * | 2012-04-27 | 2013-10-30 | 古野电气株式会社 | 信息显示装置以及信息显示方法 |
KR20150125862A (ko) * | 2014-04-30 | 2015-11-10 | 인하대학교 산학협력단 | 3차원 정합을 이용한 증강현실 장치 및 그 방법 |
JP2016082586A (ja) * | 2014-10-17 | 2016-05-16 | 日本無線株式会社 | 画像生成装置 |
WO2018138411A1 (en) * | 2017-01-25 | 2018-08-02 | Rolls-Royce Oy Ab | Modelling a vessel and its vicinity in real-time |
WO2018216537A1 (ja) * | 2017-05-24 | 2018-11-29 | 古野電気株式会社 | 映像生成装置 |
JP2018188043A (ja) * | 2017-05-10 | 2018-11-29 | 株式会社ソフトウェア・ファクトリー | 操船支援装置 |
WO2019093416A1 (ja) * | 2017-11-08 | 2019-05-16 | Molエンジニアリング株式会社 | 船舶の航行支援システム |
WO2019096401A1 (en) * | 2017-11-17 | 2019-05-23 | Abb Schweiz Ag | Real-time monitoring of surroundings of marine vessel |
Family Cites Families (12)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP4096622B2 (ja) * | 2002-05-21 | 2008-06-04 | 株式会社セガ | 画像処理方法及び装置、並びにプログラム及び記録媒体 |
FR2979736B1 (fr) * | 2011-09-05 | 2013-08-30 | Centre Nat Etd Spatiales | Procede de detection de messages sia |
JP6178592B2 (ja) * | 2013-03-07 | 2017-08-09 | 古野電気株式会社 | 状況表示装置、状況表示プログラム及び状況表示方法 |
JP6108886B2 (ja) * | 2013-03-11 | 2017-04-05 | 古野電気株式会社 | 移動体表示装置及び移動体表示方法 |
JP6234710B2 (ja) * | 2013-05-31 | 2017-11-22 | 古野電気株式会社 | レーダ装置及び物標捕捉追尾方法 |
US9826164B2 (en) * | 2014-05-30 | 2017-11-21 | Furuno Electric Co., Ltd. | Marine environment display device |
JP6382996B2 (ja) * | 2014-09-16 | 2018-08-29 | 古野電気株式会社 | 自船周囲情報表示装置及び自船周囲情報表示方法 |
US10948570B2 (en) * | 2015-04-28 | 2021-03-16 | Furuno Electric Company Limited | Signal processor and radar apparatus |
JP6932487B2 (ja) | 2016-07-29 | 2021-09-08 | キヤノン株式会社 | 移動体監視装置 |
CN110520692B (zh) * | 2017-05-24 | 2024-03-26 | 古野电气株式会社 | 影像生成装置 |
JP6857546B2 (ja) * | 2017-05-24 | 2021-04-14 | 古野電気株式会社 | 映像生成装置及び映像生成方法 |
WO2019130940A1 (ja) * | 2017-12-25 | 2019-07-04 | 古野電気株式会社 | 映像生成装置及び映像生成方法 |
-
2020
- 2020-08-07 JP JP2021545167A patent/JPWO2021049221A1/ja active Pending
- 2020-08-07 WO PCT/JP2020/030345 patent/WO2021049221A1/ja unknown
- 2020-08-07 CN CN202080058419.6A patent/CN114258372B/zh active Active
- 2020-08-07 EP EP20862345.4A patent/EP4030390A4/en active Pending
-
2022
- 2022-03-07 US US17/688,452 patent/US11964737B2/en active Active
Patent Citations (14)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US6212132B1 (en) * | 1998-08-04 | 2001-04-03 | Japan Radio Co., Ltd. | Three-dimensional radar apparatus and method for displaying three-dimensional radar image |
CN101038168A (zh) * | 2001-08-03 | 2007-09-19 | 古野电气株式会社 | 移动体显示装置 |
JP2005289264A (ja) * | 2004-04-01 | 2005-10-20 | Furuno Electric Co Ltd | 船舶航行支援装置 |
JP2006065831A (ja) * | 2004-07-30 | 2006-03-09 | Penta Ocean Constr Co Ltd | 船舶の運航管理方法及び装置 |
JP2010003274A (ja) * | 2008-06-23 | 2010-01-07 | National Maritime Research Institute | 目視認識支援装置及び目視認識支援方法 |
JP2011225208A (ja) * | 2010-03-30 | 2011-11-10 | Ns Solutions Corp | 画像表示システム及び画像表示方法及びプログラム |
CN103376442A (zh) * | 2012-04-27 | 2013-10-30 | 古野电气株式会社 | 信息显示装置以及信息显示方法 |
KR20150125862A (ko) * | 2014-04-30 | 2015-11-10 | 인하대학교 산학협력단 | 3차원 정합을 이용한 증강현실 장치 및 그 방법 |
JP2016082586A (ja) * | 2014-10-17 | 2016-05-16 | 日本無線株式会社 | 画像生成装置 |
WO2018138411A1 (en) * | 2017-01-25 | 2018-08-02 | Rolls-Royce Oy Ab | Modelling a vessel and its vicinity in real-time |
JP2018188043A (ja) * | 2017-05-10 | 2018-11-29 | 株式会社ソフトウェア・ファクトリー | 操船支援装置 |
WO2018216537A1 (ja) * | 2017-05-24 | 2018-11-29 | 古野電気株式会社 | 映像生成装置 |
WO2019093416A1 (ja) * | 2017-11-08 | 2019-05-16 | Molエンジニアリング株式会社 | 船舶の航行支援システム |
WO2019096401A1 (en) * | 2017-11-17 | 2019-05-23 | Abb Schweiz Ag | Real-time monitoring of surroundings of marine vessel |
Non-Patent Citations (2)
Title |
---|
兰培真 ; 张大勇 ; .船舶航行三维显示系统的地形建模.集美大学学报(自然科学版).2009,(第02期),第41-46页. * |
娄树理 ; 董言治 ; 周晓东 ; .基于OpenGL的舰船目标红外图像生成.弹箭与制导学报.2007,(第05期),第79-82页. * |
Also Published As
Publication number | Publication date |
---|---|
EP4030390A4 (en) | 2023-10-18 |
US11964737B2 (en) | 2024-04-23 |
EP4030390A1 (en) | 2022-07-20 |
WO2021049221A1 (ja) | 2021-03-18 |
CN114258372A (zh) | 2022-03-29 |
US20220185435A1 (en) | 2022-06-16 |
JPWO2021049221A1 (zh) | 2021-03-18 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN114258372B (zh) | 船舶信息显示系统、船舶信息显示方法、图像生成装置以及程序 | |
US20220130117A1 (en) | Image generating device for generating three-dimensional display data | |
US11270458B2 (en) | Image generating device | |
JP7138706B2 (ja) | 表示データ生成装置 | |
CN112640445B (zh) | 影像生成装置及影像生成方法 | |
US11548598B2 (en) | Image generating device and method of generating image | |
US20200089957A1 (en) | Image generating device | |
US20220355908A1 (en) | Tidal information display device | |
JP7190500B2 (ja) | 航法装置、航法支援情報の生成方法、および、航法支援情報の生成プログラム | |
JP6923739B2 (ja) | 航法装置、vslam補正方法、空間情報推定方法、vslam補正プログラム、および、空間情報推定プログラム | |
JP7431194B2 (ja) | 拡張現実に基づく潮流表示装置 | |
US11268814B2 (en) | Movement information calculating device, movement information calculating method and movement information calculating program | |
CN115019217A (zh) | 基于增强现实的潮流显示装置 | |
US20240149992A1 (en) | Navigational information displaying device, navigational information displaying method, and a non-transitory computer-readable medium | |
JP7313454B2 (ja) | 相対位置計測装置、相対位置計測方法、および、相対位置計測プログラム | |
JP7359803B2 (ja) | 潮流情報表示装置、arナビゲーションシステム、潮流情報表示方法、及び潮流情報表示プログラム | |
WO2024053524A1 (ja) | 航行支援装置、航行支援方法 | |
US20240303854A1 (en) | Target monitoring system, target monitoring method, and recording medium | |
WO2024053526A1 (ja) | 航行支援装置、航行支援方法 | |
US20240135635A1 (en) | Image generating device, ship information displaying method and a non-transitory computer-readable medium | |
JP7489289B2 (ja) | 航路演算装置 | |
US20240320846A1 (en) | Target monitoring device, target monitoring method, and recording medium | |
WO2024053525A1 (ja) | 航行支援装置、航行支援方法 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
GR01 | Patent grant | ||
GR01 | Patent grant |