CN103975576B - 利用天花板移动式透明显示器的船舶用增强现实系统及其实现方法 - Google Patents

利用天花板移动式透明显示器的船舶用增强现实系统及其实现方法 Download PDF

Info

Publication number
CN103975576B
CN103975576B CN201280035870.1A CN201280035870A CN103975576B CN 103975576 B CN103975576 B CN 103975576B CN 201280035870 A CN201280035870 A CN 201280035870A CN 103975576 B CN103975576 B CN 103975576B
Authority
CN
China
Prior art keywords
ship
movable type
transparent display
type transparent
ceiling
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201280035870.1A
Other languages
English (en)
Other versions
CN103975576A (zh
Inventor
金善泳
吴宰镛
朴世吉
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
KOREA OCEAN RES AND DEV I
Original Assignee
KOREA OCEAN RES AND DEV I
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by KOREA OCEAN RES AND DEV I filed Critical KOREA OCEAN RES AND DEV I
Publication of CN103975576A publication Critical patent/CN103975576A/zh
Application granted granted Critical
Publication of CN103975576B publication Critical patent/CN103975576B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • G—PHYSICS
    • G01—MEASURING; TESTING
    • G01C—MEASURING DISTANCES, LEVELS OR BEARINGS; SURVEYING; NAVIGATION; GYROSCOPIC INSTRUMENTS; PHOTOGRAMMETRY OR VIDEOGRAMMETRY
    • G01C21/00—Navigation; Navigational instruments not provided for in groups G01C1/00 - G01C19/00
    • G01C21/005—Navigation; Navigational instruments not provided for in groups G01C1/00 - G01C19/00 with correlation of navigation data from several sources, e.g. map or contour matching
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00—Details of television systems
    • H04N5/222—Studio circuitry; Studio devices; Studio equipment
    • H04N5/262—Studio circuits, e.g. for mixing, switching-over, change of character of image, other special effects ; Cameras specially adapted for the electronic generation of special effects
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T19/00—Manipulating 3D models or images for computer graphics
    • G06T19/006—Mixed reality
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T11/00—2D [Two Dimensional] image generation
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T17/00—Three dimensional [3D] modelling, e.g. data description of 3D objects
    • G—PHYSICS
    • G08—SIGNALLING
    • G08G—TRAFFIC CONTROL SYSTEMS
    • G08G3/00—Traffic control systems for marine craft
    • G—PHYSICS
    • G08—SIGNALLING
    • G08G—TRAFFIC CONTROL SYSTEMS
    • G08G3/00—Traffic control systems for marine craft
    • G08G3/02—Anti-collision systems

Landscapes

  • Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Radar, Positioning & Navigation (AREA)
  • Remote Sensing (AREA)
  • Theoretical Computer Science (AREA)
  • Ocean & Marine Engineering (AREA)
  • Computer Graphics (AREA)
  • Software Systems (AREA)
  • Computer Hardware Design (AREA)
  • General Engineering & Computer Science (AREA)
  • Automation & Control Theory (AREA)
  • Geometry (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Traffic Control Systems (AREA)
  • Navigation (AREA)
  • Processing Or Creating Images (AREA)
  • Controls And Circuits For Display Device (AREA)
  • Devices For Indicating Variable Information By Combining Individual Elements (AREA)

Abstract

根据本发明的利用天花板移动式透明显示器的船舶用增强现实系统，其特征在于，包含：在船舶操舵室的天花板可移动地设置的天花板移动式透明显示器；识别所述船舶的位置及航海者的头部和视线方向的识别部；根据所述船舶的位置及所述航海者的头部和视线方向，自从相关外部地形的外部地形数据库接收外部图像数据信息的接收部；调整所述接收部接收的所述外部图像数据和通过玻璃窗的实际外部图像成一致的注册部；以及将所述注册部调整的所述外部图像数据的信息通过所述天花板移动式透明显示器输出于所述实际外部图像位置的输出部。

Description

利用天花板移动式透明显示器的船舶用增强现实系统及其实 现方法
技术领域
本发明涉及利用天花板移动式透明显示器的船舶用增强现实系统及其实现方法。
背景技术
增强现实(Augmented Reality)是指将使用者亲眼所见的现实世界和具有附加信息的虚拟世界叠加产生的新环境。融合现实环境和虚拟环境的增强现实系统是自从1990年后半期以美国、日本为中心展开了研究开发。将现实世界以虚拟世界补充概念的增强现实虽然是使用以计算机图形生成的虚拟环境，但主要的还是现实环境。计算机图形是起对现实环境附加提供必要信息的作用。
另外，用于同时显示现实环境和虚拟环境的透明显示装置基于最新显示技术的发展也出现了利用透明电子元件的透明显示装置。透明显示装置是在透明玻璃或透明塑胶上层压透明电极、透明半导体及透明绝缘体等来实现。发光面是由有机发光二极管(OLED :Organic Light Emitting Diode)、发光二极管(LED :Light Emitting Diode)或液晶(LCD:Liquid Crystal Display)等形成。
关于船舶航行系统的现有技术如韩国专利申请第10-2007-0037443号“根据含有波浪信息的ECDIS安全运行船舶的方法”的掲示，通过雷达正确地测量波浪信息，将这种信息通过ECDIS显示并同时相互分享，提供通过波浪信息和ECDIS信息可以提高船舶运行安全性的根据含有波浪信息的ECDIS安全运行船舶的方法。
然而，单靠这种用于提高船舶运行安全性的电子海图显示系统(ECDIS)总是有限制，所以同时显示关于现实环境的多种信息及船舶运行所需的虚拟信息，在急迫时刻帮助船长的判断力，以确保船舶的安全性、扩大船舶运行的效率性和正确性，需要适用增强现实系统。
发明内容
发明需要解决的技术课题
本发明涉及用于解决这种现有技术问题的利用天花板移动式透明显示器的船舶用增强现实系统及增强现实的实现方法，其目的是通过使用者所看到的船舶外部背景和物体上用虚拟环境叠加相关这些的信息，使得能一眼看到航行所需的信息，凭直觉判断复杂多样的航海信息，以确保船舶运行的稳定性，事先防止意外的航行事故。
解决课题的技术方案
为了完成如上所述的目的，根据本发明的利用天花板移动式透明显示器的船舶用增强现实系统，其特征在于，包含：在船舶操舵室的天花板可移动地设置的天花板移动式透明显示器；识别所述船舶的位置及航海者的头部和视线方向的识别部；根据所述船舶的位置及所述航海者的头部和视线方向，自从相关外部地形的外部地形数据库接收外部图像数据信息的接收部；调整所述接收部接收的所述外部图像数据和通过玻璃窗的实际外部图像成一致的注册部；以及将所述注册部调整的所述外部图像数据的信息通过所述天花板移动式透明显示器输出于所述实际外部图像位置的输出部。
另外，根据本发明，其特征在于，所述识别部包含GPS系统以识别所述船舶的移动速度和位置，并包含识别传感器以识别所述航海者的头部和视线方向。
另外，根据本发明，其特征在于，根据所述识别传感器识别的所述航海者的头部和视线方向，所述天花板移动式透明显示器沿着天花板移动。
另外，根据本发明，其特征在于，所述天花板移动式透明显示器是沿着附着在天花板的轨道部移动。
另外，根据本发明，其特征在于，所述外部图像数据是以3D数据构成。
另外，根据本发明，其特征在于，所述接收部根据所述船舶的航海位置从海图数据库接收海图，所述注册部将所述海图调整成与实际外部图像一致，所述输出部通过所述天花板移动式透明显示器显示所述船舶的航路。
另外，根据本发明，其特征在于，所述接收部从包含内河航道、海底地形、气象及海域特性相关信息的电子海图显示系统(ECDIS)接收所述内河航道、海底地形、气象及海域特性信息，所述注册部将所述内河航道、海底地形、气象及海域特性相关的信息调整成与实际外部图像一致，所述输出部将所述内河航道、海底地形、气象及海域特性相关信息输出于所述天花板移动式透明显示器。
另外，根据本发明，其特征在于，所述接收部从AIS(船舶自动识别装置)接收在海上运行的周围船舶的信息，所述注册部将所述周围船舶的信息调整成与实际外部图像一致，通过所述输出部输出于所述天花板移动式透明显示器。
另外，根据本发明，其特征在于，所述注册部根据预先设定的周围船舶不同尺寸的模板调整从所述AIS接收的周围船舶的尺寸，通过所述输出部输出于所述天花板移动式透明显示器。
另外，根据本发明，其特征在于，所述接收部从雷达接收外部的移动物体，在所述注册部将所述移动物体的移动速度及位置调整成与实际外部图像一致，并通过所述输出部输出于所述天花板移动式透明显示器。
另外，根据本发明，其特征在于，若所述移动物体不是从所述AIS接收的周围船舶时，在所述注册部调整成与实际外部图像一致，并通过所述输出部输出于所述天花板移动式透明显示器。
另外，根据本发明，其特征在于，所述船舶的外部照度比预先设定值较低时，利用在所述实际外部图像的位置预先设定的模板来显示。
根据本发明的另一实施例，利用天花板移动式透明显示器的船舶用增强现实系统，其特征在于，包含：在船舶操舵室的天花板可移动地设置的天花板移动式透明显示器；识别所述船舶的位置及航海者的头部和视线方向的识别部；根据所述船舶的位置及所述航海者的头部和视线方向，自从相关外部地形的外部地形数据库接收外部图像数据信息的接收部；调整所述接收部接收的所述外部图像数据和通过玻璃窗的实际外部图像成一致的注册部；以及将所述注册部调整的所述外部图像数据的信息通过所述天花板移动式透明显示器输出于所述实际外部图像位置的输出部，所述接收部包含接收内河航道、海底地形、气象及海域特性相关的信息，所述船舶的移动速度及航路，周围船舶的移动速度及航路，以及移动物体的移动速度及航路而计算的计算部，并根据事先设定的时间间隔预测所述船舶随时间的危险因素。
另外，根据本发明，其特征在于，所述危险因素包含与所述海底地形冲突的危险、与所述周围船舶冲突的危险、根据所述气象遇难的危险、根据所述海域特性遇难的危险、与所述外部地形冲突的危险。
另外，根据本发明，其特征在于，包含当发现所述危险因素时， 起警报功能的警报部。
另外，根据本发明，其特征在于，包含在所述警报部启动警报功能时，向导航控制装置发送控制信号以自动修正所述船舶航路的控制部。
根据本发明的利用天花板移动式透明显示器的船舶用增强现实的实现方法，其特征在于，包含：在船舶操舵室的天花板可移动地设置的天花板移动式透明显示器；识别所述船舶的位置及航海者的头部和视线方向的识别步骤；根据所述船舶的位置及所述航海者的头部和视线方向，自从相关外部地形的外部地形数据库接收外部图像数据信息的接收步骤；调整所述接收部接收的所述外部图像数据和通过玻璃窗的实际外部图像成一致的注册步骤；以及将所述注册部调整的所述外部图像数据的信息通过所述天花板移动式透明显示器输出于所述实际外部图像位置的输出步骤。
另外，根据本发明，其特征在于，所述接收步骤根据所述船舶的航海位置从海图数据库接收海图，所述注册步骤将所述海图调整成与实际外部图像一致，所述输出步骤通过所述天花板移动式透明显示器显示所述船舶的航路。
另外，根据本发明，其特征在于，所述接收步骤从包含内河航道、海底地形、气象及海域特性相关信息的电子海图显示系统(ECDIS)接收所述内河航道、海底地形、气象及海域特性信息，在所述注册步骤将所述内河航道、海底地形、气象及海域特性相关的信息调整成与实际外部图像一致，所述输出步骤将所述内河航道、海底地形、气象及海域特性信息输出于所述天花板移动式透明显示器。
另外，根据本发明，其特征在于，所述接收步骤从AIS(船舶自动识别装置)接收在海上运行的周围船舶的信息，所述注册步骤将所述周围船舶的信息调整成与实际外部图像一致，通过所述输出步骤输出于所述天花板移动式透明显示器。
另外，根据本发明，其特征在于，所述接收步骤从雷达接收外部的移动物体，在所述注册步骤将所述移动物体的移动速度及位置调整成与实际外部图像一致，并通过所述输出步骤输出于所述天花板移动式透明显示器。
另外，根据本发明，其特征在于，包含计算所述内河航道、海底地形、气象及海域特性相关的信息，所述船舶的移动速度及航路，所述周围船舶的移动速度及航路，以及所述移动物体的移动速度及航路的计算步骤，并根据事先设定的时间间隔预测所述船舶随时间的危险因素。
另外，根据本发明，其特征在于，所述危险因素包含与所述海底地形冲突的危险、与所述周围船舶冲突的危险、根据所述气象遇难的危险、根据所述海域特性的遇难危险、与所述外部地形冲突的危险，并且包含当发现所述危险因素时，起警报功能的警报步骤。
另外，根据本发明，其特征在于，包含在所述警报步骤启动警报功能时，向导航控制装置发送控制信号以自动修正所述船舶航路的控制步骤。
有益效果
本发明的目的是提供在使用者所看到的背景及物体上叠加虚拟环境，相比于现有技术用于实现更现实的增强现实的装置及方法。
另外，在各种船舶事故的原因中，已经确定疏忽造成的事故占大部分，这是因为航海者过度疲倦所引起的，根据本发明的利用天花板移动式透明显示器的船舶用增强现实系统能使航海者一目了然复杂多样的航海信息，由此提高凭直觉的判断能力，具有防止海洋事故的效果。
另外，使用天花板移动式透明显示器时，天花板移动式透明显示器向使用者所看的地方移动，便提供相关实际外部图像的信息，因此不需在操舵室的所有玻璃窗设置高价的透明显示器装备，具有节省设置费用的效果，并且按着航海者的嗜好将天花板式显示器放入天花板在off的状态下亦可航行。
附图说明
图1是根据本发明的利用天花板移动式透明显示器的船舶用增强现实系统的方块图。
图2是根据本发明的天花板移动式透明显示器的示意图。
图3是根据本发明另一实施例的利用天花板移动式透明显示器的船舶用增强现实系统的方块图。
图4是根据本发明的利用天花板移动式透明显示器的船舶用增强现实系统的示意图。
图5是根据本发明的利用天花板移动式透明显示器的船舶用增强现实的实现方法流程图。
具体实施方式
以下，结合附图对本发明进行详细的说明。首先，要注意在图中对相同的构成因素或部件尽可能用相同的参考符号来表示。在说明本发明时，为了不模糊本发明的要旨将省略有关公知功能或构成的具体说明。
增强现实技术是重合实际图像和虚拟图像而显示的技术，在航海者展望的外部图像叠加航海支援信息而输出，由此可以提供更直觉的信息。
基于增强现实技术的智能航海支援系统，结合CCTV摄像机及透明显示器用图像合成技术，三维注册技术，传感器数据融合技术和智能导航技术，以航海者易于理解的形态提供航行信息，是可以提高航行安全及信息传达效率的新概念航海系统。
使用增强现实(AR)技术的航海支援系统要注册(Registration)实际视觉信息和虚拟信息，由于视觉信息的位置根据使用者的位置及视线方向而不同，因此利用摄像机或多种传感器等必须正确的找出使用者的位置和视线方向。
使用增强现实(AR)技术的航行信息提供系统利用实时海上信息提供系统，电子海图，AIS等可以应用在船舶回避冲突，海上交通流量管制，船舶监控等方面。
图1是根据本发明的利用天花板移动式透明显示器的船舶用增强现实系统的方块图。
如图1所示，根据本发明的利用天花板移动式透明显示器的船舶用增强现实系统(1)包含天花板移动式透明显示器100，识别部200, 接收部300, 注册部400, 输出部500，
在识别部200利用GPS系统识别目前船舶的移动速度和位置，由配置成能识别航海者的头部方向及视线方向的识别传感器检测识别航海者的视线方向。
为了识别航海者的视线方向，识别传感器可由瞳孔识别摄像机和用于识别航海者头部方向的识别摄像机分别构成，或是能同时识别航海者视线和头部方向的一个传感器。
识别传感器检测航海者的头部方向及瞳孔的动作，即向航海者所展望的视线方向设置在天花板上的天花板移动式透明显示器100沿着天花板移动。
在操舵室的天花板沿着玻璃窗的周围设置轨道部900，以便安装天花板移动式透明显示器100与玻璃窗相隔一定间隔能自由地移动。
经考虑识别航海者头部及视线方向的识别传感器所检测的航海者头部方向及视线方向，按着航海者的视线移动的方向天花板移动式透明显示器100沿着轨道部900移动，因此相比于操舵室的所有玻璃窗为透明显示器的情况，减小透明显示器的设置面积，具有降低设置费用的优点。另外，天花板移动式透明显示器100在off状态时，可紧贴或放入天花板，航海者可按照之前的方式使用雷达、AIS、GPS、电子海图显示系统(ECDIS)、海图数据库等的外部信息，航海者可以采取以肉眼航行的方式。
接收部300是根据船舶的位置、航海者的头部及视线的方向自从相关外部地形的外部地形数据库(DB)接收外部图像数据。
在注册部400执行将接收的外部图像数据和航海者所看到的实际外部图像之间的位置相互正确地成一致的注册过程，输出部500将在注册部400一致的外部图像数据的多种信息，即相关陆地的信息、相关浮标的信息等通过天花板移动式透明显示器100输出于实际外部图像的位置上。
为了有效地适用于与实际外部图像的注册过程，并且使航海者易于找出实际航行信息，外部图像数据是以3D数据构成较好。即，相关外部地形的外部地形数据库(DB)的构建以3D数据构成较好。
图2是根据本发明的天花板移动式透明显示器的示意图。
如图2所示，通过天花板移动式透明显示器100可以显示多种航行信息，多种航行信息可以包含船舶的航路、内河航道、海底地形、气象及海域特性相关的信息、周围船舶的信息，目前航行位置信息等。
多种航行信息中相关船舶航路计划的信息收集是根据本发明的接收部300根据船舶的航海位置从海图数据库(DB)接收海图，在注册部400将接收的海图调整成与实际外部图像一致。
输出部500将经实际外部图像和接收的海图之间调整的海图正确位置通过天花板移动式透明显示器100显示船舶的航路。
另外，内河航道、海底地形、气象及海域特性相关信息的收集是同样的由接收部300从电子海图显示系统(ECDIS)接收，
在注册部400将接收的内河航道、海底地形、气象及海域特性相关的信息调整成与实际外部图像的位置一致。
输出部500经实际外部图像和接收的内河航道、海底地形、气象及海域特性之间的调整通过天花板移动式透明显示器100显示内河航道、海底地形、气象及海域特性。
另外，在海上运行的周围船舶相关信息的收集也由接收部300从AIS(船舶自动识别装置)接收，
在注册部400将接收的周围船舶相关信息调整成与实际外部图像的位置一致。
输出部500经实际外部图像和接收的周围船舶相关信息之间的调整通过天花板移动式透明显示器100显示周围船舶相关信息。
在此，根据收集的周围船舶尺寸注册部400调整选择预先设定的周围船舶不同尺寸的模板通过输出部500显示在天花板移动式透明显示器100上。
因为不能制作对所有船舶的三维模型，模板是指根据大小和种类将船舶分类的模型。在外部照度较低的情况下，同时输出这种船舶模板和三维虚拟地形信息时，此图像起可以替代实际外部图像的虚拟现实功能。
这样事先构建周围船舶不同尺寸的模板，在夜间航行时，实际从AIS收集的信息中显示周围船舶在近处航行，但以航海者的肉眼无法识别而很难直觉有多大的周围船舶在相距多小，此时用模板在天花板移动式透明显示器100显示，将有助于航海者的航行信息的收集和判断。
船舶的航行时间在如夜间或阴天模糊不清时，航海者预先设定外部照度低的基准，通过照度传感器实时检测外部照度，当检测的外部照度低于预先设定值时，表示实际外部图像不能以航海者的肉眼判断，为了补强这点利用预先设定的模板显示实际外部图像。
作为参考，根据海上人命救助公约(Solars)，客船、100m以上的船舶、危险船舶等必须义务性的向外部发送船舶相关信息，这些周围船舶的船舶航行信息通过AIS收集。AIS是指船舶自动识别装置(Automatic Identification System)，是实时提供船舶的位置、航线、速率等航海信息的尖端装置。这是在海上用于防止船舶冲突的装置，根据国际海事组织(IMO)是义务设置项目，采用船舶自动识别装置(AIS)，就在不能识别周围船舶的情况下，亦能判断他船的存在和进行状态。
通过AIS能收集的周围船舶以外的小型船舶，或船舶以外在海上漂流的移动物体相关信息的收集是接收部300从雷达接收，移动物体的移动速度及位置在注册部400调整成与实际外部图像一致后，通过输出部500输出于天花板移动式透明显示器100上。
图3是根据本发明另一实施例的利用天花板移动式透明显示器的船舶用增强现实系统的方块图。
如图3所示，根据本发明的利用天花板移动式透明显示器的船舶用增强现实系统除了天花板移动式透明显示器100、识别部200、接收部300、注册部400、输出部500以外，还可以包含计算部600。
总合接收部300从电子海图显示系统(ECDIS)接收收集的内河航道、海底地形、气象及海域特性相关信息，识别部200通过GPS识别的目前船舶的移动速度及航路信息，接收部300根据船舶的航海位置从海图数据库(DB)接收收集的海图相关信息，接收部300通过AIS接收收集的在海上航行的周围船舶相关信息，由计算部600根据船舶的航路计划计算基于周围船舶、移动物体、内河航道、暗礁海底地形的冲突危险性。
航海者可以预先设定时间间隔使计算部600以一定时间间隔执行对冲突危险性的计算，以根据船舶的进行时间设定的时间间隔可以预测危险因素。
在此，危险因素是指与海底地形冲突的危险，与周围船舶冲突的危险，根据气象恶化遇难的危险，根据如漩涡、水流的速度等的海域特性遇难的危险、与如陆地、岛等的外部地形冲突的危险。
还可以包含当发现危险因素时，向航海者警告起警报功能的警报部700。
警报使用如天花板移动式透明显示器100屏幕闪烁的图像报警，或使用声音报警。两者都可以使用，或是航海者可以选择这种报警的种类。
另外，还可以包含当发现危险因素而在警报部700启动警报功能时，向导航控制装置发送控制信号以自动修正船舶航路的控制部800。
借此，根据本发明的利用天花板移动式透明显示器的船舶用增强现实系统向航海者提供一目了然的实际图像和航海所需的综合信息而提高直觉的判断，并通过航路自动调整功能亦可事先防止航海者的疏忽，由此防止海上冲突。
图4是根据本发明的利用天花板移动式透明显示器的船舶用增强现实系统的示意图。
如图4所示，航海者可以一眼看出在船舶操舵室的天花板可移动地设置的天花板移动式透明显示器100显示的多种信息和实际外部图像。
图5是根据本发明的利用天花板移动式透明显示器的船舶用增强现实的实现方法流程图。
如图5所示，利用天花板移动式透明显示器的船舶用增强现实的实现方法包含：识别船舶的位置及航海者的头部和视线方向的识别步骤S100；根据船舶的位置及航海者的头部和视线方向，自从相关外部地形的外部地形数据库接收外部图像数据信息的接收步骤S200；调整接收部接收的所述外部图像数据和实际外部图像成一致的注册步骤S300；以及通过注册步骤S300调整的外部图像数据的信息通过所述天花板移动式透明显示器输出于实际外部图像位置的输出步骤S400。
接收步骤S200根据船舶的航海位置从海图数据库接收海图，从包含内河航道、海底地形、气象及海域特性相关信息的电子海图显示系统(ECDIS)接收所述内河航道、海底地形、气象及海域特性信息，从AIS(船舶自动识别装置)接收在海上运行的周围船舶的信息，从雷达接收外部的移动物体，在注册步骤S300调整这些信息和实际外部图像成一致，在输出步骤S400通过天花板移动式透明显示器显示各种信息。
还可以包含总合计算这些多种外部信息，例如，内河航道、海底地形、气象及海域特性相关的信息，船舶的移动速度及航路，周围船舶的移动速度及航路，以及移动物体的移动速度及航路，并计算依航路计划航行时，是否有危险因素的计算步骤S500。
还可以包含根据航海者事先设定的时间间隔，预测随船舶航海时间的危险因素，当发现危险因素时，向航海者发送警报信号的警报步骤S600。
在此，危险因素可以列举与海底地形冲突的危险、与周围船舶冲突的危险、根据气象遇难的危险、根据海域特性遇难的危险、与外部地形冲突的危险等，但并不限定于此。
还可以包含在警报步骤S600启动警报功能时，向导航控制装置发送控制信号以修正船舶航路计划的控制步骤S700。
以上，对本发明的特定实施例进行了说明，但凡是本技术领域中具有通常知识的技术人员应该了解不脱离记载的权利要求书所表示的发明思想及范围之下，可以实施多种变更，改造及变化。
产业上的利用可能性
本发明可以应用于增强现实装置及系统领域，以及船舶航行系统领域。

Claims (14)

1.一种利用天花板移动式透明显示器的船舶用增强现实系统，其特征在于，包含：
在船舶操舵室的天花板可移动地设置的天花板移动式透明显示器；
识别所述船舶的位置及航海者的头部和视线方向的识别部；
根据所述船舶的位置及所述航海者的头部和视线方向，自从相关外部地形的外部地形数据库接收外部图像数据信息的接收部；
调整所述接收部接收的所述外部图像数据和实际外部图像成一致的注册部；以及
将所述注册部调整的所述外部图像数据的信息通过所述天花板移动式透明显示器输出于所述实际外部图像位置的输出部，
所述识别部包含GPS系统以识别所述船舶的移动速度和位置，并包含识别传感器以识别所述航海者的头部和视线方向，
根据所述识别传感器识别的所述航海者的头部和视线方向，所述天花板移动式透明显示器沿着天花板移动。
2.根据权利要求1所述的利用天花板移动式透明显示器的船舶用增强现实系统，其特征在于，所述天花板移动式透明显示器是沿着附着在天花板的轨道部移动。
3.根据权利要求2所述的利用天花板移动式透明显示器的船舶用增强现实系统，其特征在于，所述外部图像数据是以3D数据构成。
4.根据权利要求3所述的利用天花板移动式透明显示器的船舶用增强现实系统，其特征在于，所述接收部根据所述船舶的航海位置从海图数据库接收海图，
所述注册部将所述海图调整成与实际外部图像一致，
所述输出部通过所述天花板移动式透明显示器显示所述船舶的航路。
5.根据权利要求4所述的利用天花板移动式透明显示器的船舶用增强现实系统，其特征在于，所述接收部从包含内河航道、海底地形、气象及海域特性相关信息的电子海图显示系统(ECDIS)接收所述内河航道、海底地形、气象及海域特性信息，
所述注册部将所述内河航道、海底地形、气象及海域特性相关的信息调整成与实际外部图像一致，
所述输出部将所述内河航道、海底地形、气象及海域特性相关信息输出于所述天花板移动式透明显示器。
6.根据权利要求5所述的利用天花板移动式透明显示器的船舶用增强现实系统，其特征在于，所述接收部从AIS(船舶自动识别装置)接收在海上运行的周围船舶的信息，
所述注册部将所述周围船舶的信息调整成与实际外部图像一致，
通过所述输出部将所述周围船舶的信息输出于所述天花板移动式透明显示器。
7.根据权利要求6所述的利用天花板移动式透明显示器的船舶用增强现实系统，其特征在于，所述注册部根据预先设定的周围船舶不同尺寸的模板调整从所述AIS接收的周围船舶的尺寸，通过所述输出部将所述周围船舶的模板输出于所述天花板移动式透明显示器。
8.根据权利要求7所述的利用天花板移动式透明显示器的船舶用增强现实系统，其特征在于，所述接收部从雷达接收外部的移动物体，
在所述注册部将所述移动物体的移动速度及位置调整成与实际外部图像一致，
通过所述输出部将所述移动物体输出于所述天花板移动式透明显示器。
9.根据权利要求8所述的利用天花板移动式透明显示器的船舶用增强现实系统，其特征在于，若所述移动物体不是从所述AIS接收的周围船舶时，在所述注册部调整成与实际外部图像一致，并通过所述输出部将所述移动物体输出于所述天花板移动式透明显示器。
10.根据权利要求9所述的利用天花板移动式透明显示器的船舶用增强现实系统，其特征在于，所述船舶的外部照度比预先设定值较低时，利用在所述实际外部图像的位置预先设定的模板来显示。
11.根据权利要求1所述的利用天花板移动式透明显示器的船舶用增强现实系统，其特征在于，
所述接收部包含接收内河航道、海底地形、气象及海域特性相关的信息，所述船舶的移动速度及航路，周围船舶的移动速度及航路，以及移动物体的移动速度及航路而计算的计算部，
并根据事先设定的时间间隔预测所述船舶随时间的危险因素。
12.根据权利要求11所述的利用天花板移动式透明显示器的船舶用增强现实系统，其特征在于，所述危险因素包含与所述海底地形冲突的危险、与所述周围船舶冲突的危险、根据所述气象遇难的危险、根据所述海域特性遇难的危险、与所述外部地形冲突的危险。
13.根据权利要求12所述的利用天花板移动式透明显示器的船舶用增强现实系统，其特征在于，包含当发现所述危险因素时，起警报功能的警报部。
14.根据权利要求13所述的利用天花板移动式透明显示器的船舶用增强现实系统，其特征在于，包含在所述警报部启动警报功能时，向导航控制装置发送控制信号以自动修正所述船舶航路的控制部。
CN201280035870.1A 2011-07-21 2012-07-20 利用天花板移动式透明显示器的船舶用增强现实系统及其实现方法 Active CN103975576B (zh)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
KR1020110072440A KR101072395B1 (ko) 2011-07-21 2011-07-21 천정 이동형 투명 디스플레이를 이용한 선박용 증강현실 시스템 및 그 구현 방법
KR10-2011-0072440 2011-07-21
PCT/KR2012/005800 WO2013012279A2 (ko) 2011-07-21 2012-07-20 천정 이동형 투명 디스플레이를 이용한 선박용 증강현실 시스템 및 그 구현 방법

Publications (2)

Publication Number Publication Date
CN103975576A CN103975576A (zh) 2014-08-06
CN103975576B true CN103975576B (zh) 2017-03-01

Family

ID=45032652

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201280035870.1A Active CN103975576B (zh) 2011-07-21 2012-07-20 利用天花板移动式透明显示器的船舶用增强现实系统及其实现方法

Country Status (5)

Country Link
US (1) US9401049B2 (zh)
JP (1) JP5816751B2 (zh)
KR (1) KR101072395B1 (zh)
CN (1) CN103975576B (zh)
WO (1) WO2013012279A2 (zh)

Families Citing this family (37)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2013032955A1 (en) 2011-08-26 2013-03-07 Reincloud Corporation Equipment, systems and methods for navigating through multiple reality models
KR101361643B1 (ko) 2012-04-23 2014-02-13 엠텍비젼 주식회사 투명 디스플레이 패널을 이용한 객체 표시 방법 및 장치
KR101361863B1 (ko) * 2012-11-29 2014-02-13 한국해양과학기술원 메뉴버링 북렛 기반의 선박조종성능 및 안전운항영역 가시화 시스템 및 그 방법
KR101289349B1 (ko) * 2013-03-11 2013-07-29 (주)동하테크 해양 네비게이션시스템
KR20150041482A (ko) * 2013-10-08 2015-04-16 삼성전자주식회사 디스플레이 장치 및 이를 이용한 디스플레이 방법
KR101456439B1 (ko) * 2013-10-14 2014-10-31 한국해양과학기술원 투명 디스플레이를 이용한 선박용 영상 개선 시스템
KR20150073269A (ko) * 2013-12-20 2015-07-01 현대자동차주식회사 차량용 클러스터 장치
US9392212B1 (en) 2014-04-17 2016-07-12 Visionary Vr, Inc. System and method for presenting virtual reality content to a user
JP6425913B2 (ja) * 2014-05-13 2018-11-21 古野電気株式会社 情報表示装置
GB2532465B (en) 2014-11-19 2021-08-11 Bae Systems Plc Interactive control station
GB2532464B (en) 2014-11-19 2020-09-02 Bae Systems Plc Apparatus and method for selectively displaying an operational environment
WO2016135473A1 (en) 2015-02-25 2016-09-01 Bae Systems Plc Apparatus and method for effecting a control action in respect of system functions
US9665170B1 (en) 2015-06-10 2017-05-30 Visionary Vr, Inc. System and method for presenting virtual reality content to a user based on body posture
US9751607B1 (en) 2015-09-18 2017-09-05 Brunswick Corporation Method and system for controlling rotatable device on marine vessel
JP6236549B1 (ja) * 2016-06-02 2017-11-22 日本郵船株式会社 船舶航行支援装置
CN106184646B (zh) * 2016-07-18 2019-04-02 江苏金海星导航科技有限公司 一种江河渡船防碰撞装置
KR101900851B1 (ko) * 2016-07-22 2018-11-08 목포해양대학교 산학협력단 선박 항해 감시장치 및 방법
KR20190088545A (ko) 2016-12-05 2019-07-26 케이스 웨스턴 리저브 유니버시티 상호작용적 증강 현실 프리젠테이션들을 표시하기 위한 시스템들, 방법들 및 매체들
KR101941521B1 (ko) * 2016-12-07 2019-01-23 한국해양과학기술원 해상객체의 자동추적 시스템 및 방법
KR101895129B1 (ko) * 2016-12-19 2018-10-04 한국해양과학기술원 황천 상황 시 이용가능한 운항안전 진단 시스템
FI129545B (en) * 2017-01-25 2022-04-14 Rolls Royce Oy Ab Modeling of a ship and its surroundings in real time
GB201703968D0 (en) * 2017-03-13 2017-04-26 Computational Eng Sg System for building situation awareness
WO2018216535A1 (ja) 2017-05-24 2018-11-29 古野電気株式会社 映像生成装置
EP3633985B1 (en) * 2017-05-24 2023-02-15 Furuno Electric Co., Ltd. Video generation device
CN111357281B (zh) * 2017-12-25 2023-05-30 古野电气株式会社 影像生成装置以及影像生成方法
JP7214402B2 (ja) * 2018-08-30 2023-01-30 株式会社 商船三井 映像生成装置及び映像生成方法
JP7191595B2 (ja) * 2018-08-30 2022-12-19 株式会社 商船三井 映像生成装置及び映像生成方法
CN108939488B (zh) * 2018-08-31 2020-03-31 东南大学 一种基于增强现实的帆船辅助训练路径规划方法
JP7346436B2 (ja) * 2018-10-09 2023-09-19 古野電気株式会社 周辺監視装置及び周辺監視方法
JP6603424B1 (ja) * 2019-01-21 2019-11-06 株式会社ソフトシーデーシー 移動型表示装置
CN109996059A (zh) * 2019-04-09 2019-07-09 中船第九设计研究院工程有限公司 一种基于虚拟现实构建的船舶辅助驾驶系统
CN109911140A (zh) * 2019-04-09 2019-06-21 上海萃钛智能科技有限公司 一种水域航行信息增强装置、系统及方法
KR20210067107A (ko) 2019-11-29 2021-06-08 한국이네비정보기술주식회사 Ar 기반 선박용 디지털 망원경 시스템
WO2021261810A1 (ko) * 2020-06-24 2021-12-30 주식회사 맵시 증강현실 및 3d 이미지를 이용한 항해 보조장치
EP4086573A1 (en) * 2021-05-05 2022-11-09 Furuno Electric Co., Ltd. Tidal information display device
EP4086575A1 (en) * 2021-05-07 2022-11-09 Furuno Electric Co., Ltd. Tidal current information display device
EP4148387A1 (en) * 2021-09-10 2023-03-15 Furuno Electric Co., Ltd. Predicted course display device and method

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2008151992A (ja) * 2006-12-18 2008-07-03 Nippon Seiki Co Ltd ヘッドアップディスプレイ装置
JP2010076524A (ja) * 2008-09-25 2010-04-08 Mazda Motor Corp 車両用運転支援装置
CN101913357A (zh) * 2009-04-02 2010-12-15 通用汽车环球科技运作公司 在全挡风玻璃平视显示器上标记兴趣点位置
KR101004126B1 (ko) * 2010-09-27 2010-12-27 (주)에디넷 3차원 항만 관제 시스템
CN102039992A (zh) * 2009-10-14 2011-05-04 古野电气株式会社 航行辅助装置

Family Cites Families (11)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2005233712A (ja) 2004-02-18 2005-09-02 Hitachi Software Eng Co Ltd 位置表示システム
IL169934A (en) * 2005-07-27 2013-02-28 Rafael Advanced Defense Sys Real-time geographic information system and method
JP4720386B2 (ja) * 2005-09-07 2011-07-13 株式会社日立製作所 運転支援装置
JP4763537B2 (ja) * 2006-07-13 2011-08-31 株式会社デンソー 運転支援情報報知装置
GB2441802A (en) * 2006-09-13 2008-03-19 Marine & Remote Sensing Soluti Safety system for a vehicle
KR100966711B1 (ko) * 2008-07-03 2010-06-29 강민구 병마개
JP4702437B2 (ja) * 2008-11-25 2011-06-15 トヨタ自動車株式会社 車両用表示装置
US20100238161A1 (en) * 2009-03-19 2010-09-23 Kenneth Varga Computer-aided system for 360º heads up display of safety/mission critical data
KR101113312B1 (ko) * 2009-12-10 2012-03-13 이성종 선박 충돌방지 시스템 및 선박 충돌방지 방법
US20110268262A1 (en) * 2010-04-30 2011-11-03 American Teleconferncing Services Ltd. Location-Aware Conferencing With Graphical Interface for Communicating Information
JP5211120B2 (ja) * 2010-07-30 2013-06-12 株式会社東芝 情報表示装置及び情報表示方法

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2008151992A (ja) * 2006-12-18 2008-07-03 Nippon Seiki Co Ltd ヘッドアップディスプレイ装置
JP2010076524A (ja) * 2008-09-25 2010-04-08 Mazda Motor Corp 車両用運転支援装置
CN101913357A (zh) * 2009-04-02 2010-12-15 通用汽车环球科技运作公司 在全挡风玻璃平视显示器上标记兴趣点位置
CN102039992A (zh) * 2009-10-14 2011-05-04 古野电气株式会社 航行辅助装置
KR101004126B1 (ko) * 2010-09-27 2010-12-27 (주)에디넷 3차원 항만 관제 시스템

Also Published As

Publication number Publication date
JP2014529322A (ja) 2014-11-06
WO2013012279A3 (ko) 2013-03-21
WO2013012279A2 (ko) 2013-01-24
US20140160165A1 (en) 2014-06-12
CN103975576A (zh) 2014-08-06
JP5816751B2 (ja) 2015-11-18
US9401049B2 (en) 2016-07-26
KR101072395B1 (ko) 2011-10-11

Similar Documents

Publication Publication Date Title
CN103975576B (zh) 利用天花板移动式透明显示器的船舶用增强现实系统及其实现方法
KR101072397B1 (ko) 모니터를 이용한 선박용 증강 현실 시스템 및 그 구현 방법
KR101289349B1 (ko) 해양 네비게이션시스템
CN103106817A (zh) 一种基于增强式虚拟现实系统的航海科技仿真系统
CN111354226B (zh) 基于三维图像的自主驾驶船舶航行远程监控方法和装置
CN201435162Y (zh) 船舶智能避碰预警装置
US11892298B2 (en) Navigational danger identification and feedback systems and methods
CN109360450A (zh) 一种智慧航标的船舶交通管理方法及系统
KR100687277B1 (ko) 전자해도가 내장된 선박자동식별장치
CN109911140A (zh) 一种水域航行信息增强装置、系统及方法
CN104751601A (zh) 一种海上应急搜救系统
CN106898184A (zh) 一种游艇仿真训练模拟器
CN111625159B (zh) 用于远程驾驶的人机交互操作界面显示方法、装置和终端
JP2021047125A (ja) 制御装置
CN103177606A (zh) 基于日盲紫外光信号的引航靠泊系统
KR101072393B1 (ko) 투명디스플레이를 이용한 선박용 증강 현실 시스템 및 그 구현 방법
CN104101360A (zh) 一种海底无人航行器导航信息显示处理方法
CN117232520A (zh) 一种适用于海上航行的船舶智能导航系统及导航方法
KR20160019417A (ko) 3차원 지도 표시 시스템
RU133285U1 (ru) Судовой интегрированный навигационно-промысловый комплекс
KR102464207B1 (ko) 증강현실을 이용한 선박 안전운항 관리시스템
CN102435161B (zh) 在电子航道图上标识水深的方法
TWM554985U (zh) 船舶電子海圖顯示及安全警示系統
KR101813242B1 (ko) 해양교통시설의 상태 정보 제공 시스템 및 방법
CN115547112B (zh) 一种海上船舶智能航行的语音智能标绘与警示播放系统

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant