CN1203369A - 标定观测图象的装置和系统 - Google Patents

标定观测图象的装置和系统 Download PDF

Info

Publication number
CN1203369A
CN1203369A CN98109765.0A CN98109765A CN1203369A CN 1203369 A CN1203369 A CN 1203369A CN 98109765 A CN98109765 A CN 98109765A CN 1203369 A CN1203369 A CN 1203369A
Authority
CN
China
Prior art keywords
image
information
subdomain
observation
order
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN98109765.0A
Other languages
English (en)
Other versions
CN1163760C (zh
Inventor
松村隆宏
中野博隆
杉村利明
铃木晃
片桐雅二
池田武史
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Nippon Telegraph and Telephone Corp
Original Assignee
Nippon Telegraph and Telephone Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Priority claimed from JP7547197A external-priority patent/JP3225882B2/ja
Priority claimed from JP9213251A external-priority patent/JP3053169B2/ja
Priority claimed from JP28072797A external-priority patent/JP3053172B2/ja
Application filed by Nippon Telegraph and Telephone Corp filed Critical Nippon Telegraph and Telephone Corp
Publication of CN1203369A publication Critical patent/CN1203369A/zh
Application granted granted Critical
Publication of CN1163760C publication Critical patent/CN1163760C/zh
Anticipated expiration legal-status Critical
Expired - Fee Related legal-status Critical Current

Links

Images

Classifications

    • G—PHYSICS
    • G01—MEASURING; TESTING
    • G01C—MEASURING DISTANCES, LEVELS OR BEARINGS; SURVEYING; NAVIGATION; GYROSCOPIC INSTRUMENTS; PHOTOGRAMMETRY OR VIDEOGRAMMETRY
    • G01C21/00—Navigation; Navigational instruments not provided for in groups G01C1/00 - G01C19/00
    • G01C21/26—Navigation; Navigational instruments not provided for in groups G01C1/00 - G01C19/00 specially adapted for navigation in a road network
    • G01C21/34—Route searching; Route guidance
    • G01C21/36—Input/output arrangements for on-board computers
    • G01C21/3626—Details of the output of route guidance instructions
    • G01C21/365—Guidance using head up displays or projectors, e.g. virtual vehicles or arrows projected on the windscreen or on the road itself
    • G—PHYSICS
    • G01—MEASURING; TESTING
    • G01C—MEASURING DISTANCES, LEVELS OR BEARINGS; SURVEYING; NAVIGATION; GYROSCOPIC INSTRUMENTS; PHOTOGRAMMETRY OR VIDEOGRAMMETRY
    • G01C21/00—Navigation; Navigational instruments not provided for in groups G01C1/00 - G01C19/00
    • G01C21/26—Navigation; Navigational instruments not provided for in groups G01C1/00 - G01C19/00 specially adapted for navigation in a road network
    • G01C21/34—Route searching; Route guidance
    • G01C21/36—Input/output arrangements for on-board computers
    • G01C21/3626—Details of the output of route guidance instructions
    • G01C21/3635—Guidance using 3D or perspective road maps
    • G—PHYSICS
    • G01—MEASURING; TESTING
    • G01C—MEASURING DISTANCES, LEVELS OR BEARINGS; SURVEYING; NAVIGATION; GYROSCOPIC INSTRUMENTS; PHOTOGRAMMETRY OR VIDEOGRAMMETRY
    • G01C21/00—Navigation; Navigational instruments not provided for in groups G01C1/00 - G01C19/00
    • G01C21/26—Navigation; Navigational instruments not provided for in groups G01C1/00 - G01C19/00 specially adapted for navigation in a road network
    • G01C21/34—Route searching; Route guidance
    • G01C21/36—Input/output arrangements for on-board computers
    • G01C21/3667—Display of a road map
    • G01C21/3673—Labelling using text of road map data items, e.g. road names, POI names

Landscapes

  • Engineering & Computer Science (AREA)
  • Radar, Positioning & Navigation (AREA)
  • Remote Sensing (AREA)
  • Automation & Control Theory (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Processing Or Creating Images (AREA)
  • Image Analysis (AREA)
  • Image Processing (AREA)
  • Instructional Devices (AREA)

Abstract

本发明的观测标定装置和系统包括一个图象获取部分用以获取图象,一个位置信息获取部分用以当拍摄图象时记录摄像机位置,一个摄像机说明信息获取部分用以当拍摄图象时获取摄像机角度、焦距和图象尺寸,一个地图信息管理部分用以管理地图信息,根据获取的位置、摄像机角度、焦距和图象尺寸确定地图信息空间中的视觉空间,并且记录视觉空间中的当时结构,一个标定信息制备部分用以制备包括所述结构和转换位置的名称或说明信息,一个标定信息输出部分用以将地图信息的名称或说明信息叠加到图象中对应于其在制备的标定信息中的位置信息的位置处,以及一个控制部分用以控制上述各个部分。

Description

标定观测图象的装置和系统
本发明涉及一种向使用者提供利用在移动物体或类似物上的诸如摄像机的观测图象输入装置拍摄的有关图象信息的装置和系统，并在一个图象显示器或一个透射屏幕上提供关于所述图象的每个子域的叠加地理信息。
本发明基于申请号为Hei 9-75471，Hei 9-186679，Hei 9-213251和Hei9-280727的日本专利申请，在此参考了其中的内容。
对于提示使用者关于其周围的地理信息的常用系统，已有各种导航系统。例如，首次公开号Hei 8-273000的日本专利申请公开了一种导航装置，它包括一个位置更新部分用以当输入车辆的位置数据和运动数据时参照公路图数据更新车辆位置，一个显示数据产生部分用以基于地图数据和类似数据产生显示公路数据和显示背景数据，一个三维视频图象数据产生部分用以基于这些显示数据准备三维视频图象数据，以及一个存储器部分。当使用者预先设定一个包括一个目的地区域和要经过的区域的旅行路线时，该导航装置由一台计算机在视频图象显示屏幕上提供设定的路线的可能性，该计算机模拟实际存在的道路和其环境，而不是二维地图屏幕。另外，根据该装置，使用者能够看到自己沿公路实际旅行的运动图象显示。
然而，当利用同样的装置进行公路导航时，为了识别实际环境中的物体是什么，使用者必须将实际环境与从计算机得到的地理信息作比较。换句话说，为了识别一座建筑物、一条公路或一座山在使用者的眼里实际是什么，使用者必须潜意识地动动脑子，在使用者看到的什么和作为运动图象显示的地图中的符号之间进行相应的工作。在城市，为了把握方向或找到路标，使用者将计算机制备的地图与实际环境作比较，在前进方向认出了建筑物的特征后，再考虑地图以识别该建筑物。由于上述原因，不能排除使用者对计算机中的地图和实际环境的多次比较。特别是在黑暗中或在晚上，实际环境很难看清，要作出一种相关性的判断十分困难。
本发明的目的是提供一种标定观测图象的装置和系统，这些观测图象告知使用者计算机中的地理信息与显示在储存有实际情景的监视器上的一个图象的各部分或与显示在象挡风玻璃那样能透过实际情景的物体上的视频图象(下称观测图象)具有相关性。
本发明的第一个实施例是一个观测标定装置，它包括一个图象获取部分用以摄取图象；一个位置信息获取部分用以当摄取图象时获得摄像机的位置；一个摄像机说明信息获取部分用以当摄取图象时获得摄像机角度、焦距和图象尺寸；一个地图信息管理部分用以管理地图信息，根据所述获得的位置、摄像机角度、焦距和图象尺寸决定地图信息空间中的视觉空间，并且记录所述视觉空间中的结构；一个标定信息制备部分用以制备包括所述结构的名称或说明信息和它们的传递位置的标定信息；一个标定信息输出部分用以把来自所述地图信息的所述名称或说明信息叠加到图像中对应于所述制备的标定信息中的位置信息的位置，并且将所述的叠加图象输出到一个可视装置；以及一个控制部分用以控制上述各部分。
本发明的另一个实施例是一个观测标定系统，它包括一个观测标定终端和一个观测标定中心站；所述观测标定终端包括一个图象获取部分用以摄取图象，一个位置信息获取部分用以当摄取图象时获得摄像机的位置，一个摄像机说明信息获取部分用以当摄取图象时获得摄像机角度、焦距和图象尺寸，一个图象处理部分用以将所述摄取的图象分成一组子域，一个通信控制部分用以通过所述通信网将有关分成子域的所述图象的各部分、所述摄像机角度、所述焦距和所述图象尺寸信息送到所述观测标定中心站，并从所述观测标定中心站接收标定信息，一个标定信息输出部分用以将所述标定信息中的结构名称或说明信息叠加到图像中的相应位置，并将所述叠加图形输出到一个可视装置，以及一个终端控制部分用以控制所述所有部分；所述观测标定中心站包括一个通信控制部分用以通过所述通信网从所述观测标定终端接收有关分成子域的所述图象的各部分、所述摄像机角度、所述焦距和所述图象尺寸信息，并将标定信息送到所述观测标定终端，一个地图信息管理部分用以管理地图信息，根据所接收的位置、摄像机角度、焦距和图象尺寸决定地图信息空间中的视觉空间，并且记录所述视觉空间中的结构，一个标定信息制备部分用以使所述记录的结构与所述图象的子域相关联，并制备包括所述相关结构和它们的转换位置的名称或说明信息的标定信息，以及一个中心站控制部分用以控制上述所有部分。
本发明的另一个实施例是一个观测标定装置，它包括一个图象获取部分用以摄取图象；一个位置信息获取部分用以当摄取图象时获得摄像机的位置；一个摄像机说明信息获取部分用以当摄取图象时获得摄像机角度、焦距和图象尺寸；一个图象处理部分用以将由所述图象获取部分获取的图象分成一组子域；地图信息管理部分用以管理地图信息，根据所述获取的位置、摄像机角度、焦距和图象尺寸决定地图信息空间中的视觉空间，并且记录出现在所述视觉空间中的结构；一个标定信息制备部分用以使所记录的结构与所述图象的子域相关联，并制备包括所述相关结构和它们的转换位置的名称或说明信息的标定信息；一个通信地址寄存器部分用以存储与所述结构有关的通信装置的通信地址；一个通信处理部分用以根据所述接收的通信地址与所述通信地址建立通信信道；一个标定信息输出部分用以把来自所述地图信息的所述名称或说明信息叠加到图像中对应于所述制备的标定信息中的转换位置的位置，并且将所述的叠加图象输出到一个可视装置；一个屏幕位置指定部分可允许使用者在所述可视装置的屏幕上指定一个位置，当使用者在所述可视装置的屏幕上指定一个位置时决定相应所述指定屏幕位置的所述标定信息中的所述结构，决定与来自所述通信地址寄存器部分的所述确定的结构有关的所述通信装置的所述通信地址；以及一个控制部分用以控制上述所有部分。
本发明的另一个实施例是一个观测标定系统，它包括一个观测标定终端和一个观测标定中心站；所述观测标定终端包括一个图象获取部分用以摄取图象，一个位置信息获取部分用以当摄取图象时获得摄像机的位置，一个摄像机说明信息获取部分用以当摄取图象时获得摄像机角度、焦距和图象尺寸，一个图象处理部分用以将所述摄取的图象分成一组子域，一个通信控制部分用以通过所述通信网将有关分成子域的所述图象的各部分、所述摄像机角度、所述焦距和所述图象尺寸信息送到所述观测标定中心站，并从所述观测标定中心站接收标定信息和通信地址，一个通信处理部分用以根据所述接收的通信地址建立到该通信地址的信道，一个标定信息输出部分用以叠加所述图象的相应位置的所述标定信息中的结构名称或说明信息，并在一个可视装置上显示所述叠加的图象，一个屏幕位置指定部分用以让使用者在所述可视装置的屏幕上指定一个位置，当使用者在所述可视装置的屏幕上指定一个位置时决定相应所述指定屏幕位置的所述标定信息中的所述结构，将所述结构输出到所述通信控制部分，并且将由所述通信控制部分接收的与所述结构有关的所述通信装置的通信地址送到所述通信处理部分；以及一个终端控制部分用以控制上述所有部分；所述观测标定中心站包括一个通信控制部分用以通过所述通信网从所述观测标定终端接收有关分成子域的所述图象的各部分、所述摄像机角度、所述焦距和所述图象尺寸的信息，并将所述标定信息和通信地址送到所述观测标定终端，一个地图信息管理部分用以管理地图信息，根据所述接收的位置、摄像机角度、焦距和图象尺寸决定地图信息空间中的视觉空间，并且记录所述视觉空间中的结构，一个标定信息制备部分用以使所述记录的结构与所述图象的子域相关联，并制备包括所述相关结构和它们的转换位置的名称或说明信息的标定信息，一个通信地址存贮器部分用以储存与所述结构有关的通信装置的通信地址，并输出由所述标定信息中的结构信息指定的结构通信地址，以及有关中心站控制部分用以控制上述所有部分。
本发明的另一个实施例是一个观测标定系统，它包括一个观测标定终端和一个观测标定中心站；所述观测标定终端包括一个图象获取部分用以摄取图象，一个位置信息获取部分用以当摄取图象时获得摄像机的位置，一个摄像机说明信息获取部分用以当摄取图象时获得摄像机角度、焦距和图象尺寸，一个图象处理部分用以将所述摄取的图象分成一组子域，一个通信控制部分用以通过所述通信网将有关分成子域的所述图象的各部分、所述摄像机角度、所述焦距和所述图象尺寸的信息送到所述观测标定中心站，并从所述观测标定中心站接收标定信息和通信地址，一个标定信息输出部分用以叠加所述图象的相应位置的所述标定信息中的结构名称或说明信息，并在一个可视装置上显示所述叠加的图象，当收到一个通信地址时在所述可视装置上显示该通信地址，一个屏幕位置指定部分用以让使用者在所述可视装置的屏幕上指定一个位置，当使用者在所述可视装置的屏幕上指定一个位置时决定相应所述指定屏幕位置的所述标定信息中的所述结构，将所述结构输出到所述通信控制部分，并且将与由所述通信控制部分接收的所述结构有关的所述通信装置的通信地址送到所述标定信息输出部分；以及一个终端控制部分用以控制上述所有部分；所述观测标定中心站包括一个通信控制部分用以通过所述通信网从所述观测标定终端接收有关分成子域的所述图象的各部分、所述摄像机角度、所述焦距和所述图象尺寸的信息，并将所述标定信息和通信地址送到所述观测标定终端，一个地图信息管理部分用以管理地图信息，根据所述接收的位置、摄像机角度、焦距和图象尺寸决定地图信息空间中的视觉空间，并且记录所述视觉空间中的结构，一个标定信息制备部分用以使所述记录的结构与所述图象的子域相关联，并制备包括所述相关结构和它们的转换位置的名称或说明信息的标定信息，一个通信存贮器部分用以储存与所述结构有关的通信装置的通信地址，并输出由所述标定信息中的结构信息指定的结构通信地址，以及有关中心站控制部分用以控制上述所有部分。
由于本发明使计算机中的地图信息与实际情景观测图象的各部分相关联，并向使用者显示其结果，这就不需要人工将计算机上的地图与实际情景比较作出相关性判断。
另外，由于本发明的另一个实施例使计算机中的地图信息与实际情景观测图象的各部分相关联，并向使用者显示其结果，不需要人工将计算机上的地图与实际情景比较作出相关性判断，并且，因为只需简单接触屏幕上的一个区域就能告知该区域建筑内居民的电话号码或类似信息，使用者可以将其用作一种极其方便的新型电话号码簿。
图1是根据本发明第一个实施例的一种观测标定装置的结构框图。
图2是根据本发明第二个实施例的一种观测标定装置的结构框图。
图3是本发明第二个实施例的观测标定装置进行工作的流程图。
图4是一种观测图象文件的数据结构图。
图5A是一种二维地图的实例。
图5B是一种三维地图的实例。
图6是计算视觉空间的一种方法的示意图。
图7是一个三维地图空间中视觉空间的一个实例的示意图。
图8是一个投影实例示意图。
图9是观测图象中的子域各部分实例的示意图。
图10是CG图象中的子域各部分的示意图。
图11是解释观测图象子域与CG图象子域的匹配图形的示意图。
图12是一个观测图象上叠加标定信息的实例的示意图。
图13是本发明观测标定系统的结构框图。
图14是本发明第三个实施例的观测标定装置结构框图。
图15是图14的观测标定装置进行工作的流程图。
图16是利用第三个实施例的本发明的观测通信系统结构框图。
图17是本发明第四个实施例的距离-参照观测标定装置结构框图。
图18是图17的实施例的观测标定装置进行工作的流程图。
图19A是二维地图的一个实例。
图19B是三维地图的一个实例。
图20是本发明第五个实施例的距离-参照观测标定装置结构框图。
图21是本实施例的观测标定系统结构框图。
首先描述本发明标定观测图象装置(下称观测标定装置)基本结构的一个实例。本发明的观测标定装置以三维数据形式在计算机中制备地图数据，在拍摄时获取拍摄的图象(下称观测图象以区别计算机图形图像(下称CG))的摄像机位置、摄像机角度、焦距和图象尺寸，确定从计算机三维地图空间中的摄像机位置、角度和焦距观测的视觉空间(可视空间)，获得有关包含在所述确定视觉空间中的结构的地理信息，然后在实际情景的观测图象上叠加和显示所述地理信息，从而使两者间得以关联。形成叠加和显示所述地理信息背景的所述观测图象不必限定为显示在监视器上拍摄的观测图象，例如，可以是通过玻璃如挡风玻璃透过或反射镜等类似物反射的实际情景的图象。该地理信息包括有关计算机制备的结构和类似物的名称和/或说明信息，说明信息是有关结构的各种特征(如轮廓和色彩)的信息。本说明书中所指“结构”不仅仅指人造结构，也指所述地图数据库中有各种地理结构的所有数据，包括山川、河流和海洋。当在观测图象上叠加和显示地理信息时，根据摄像机的位置、摄像机的角度、焦距和图象尺寸确定所述观测图象中将出现所述地理信息标明的各个结构的位置(下称转换位置)，用以叠加和显示所述结构的名称或说明信息。
进一步地，为了提高所述观测图象中的结构和所述CG图象中的结构之间相关性的精度水平，由图形匹配方式使在所述观测图象的各个子域首先获取的结构相关联。根据镜头捕捉的结构制备所述CG图象，由图形匹配使所述CG图象子域与所述观测图象中的子域相关联，并且确定作为所述相关子域基础的所述结构。下面描述制备CG图象方法的一个实例。根据所述获得的摄像机位置、摄像机角度、焦距和图象尺寸访问三维地图数据库(下称“数据库”)用以确定三维地图空间中的视觉空间。确定所述视觉空间中的结构并且将各个结构的三维数据转换成由所述摄像机屏幕形成的投影平面上的一个三维投影。进一步地，在形成各个结构的投影图的扫描数据中，利用诸如常用矢量方法的一种方法将由于其他结构的遮断而不能被看见的扫描数据作为遮断扫描清除。根据清除遮断扫描后保留下来的扫描数据将所述CG图象分成子域。由于使用了一个三维地图数据数据库，所以能使相应于各个子域的结构名称与该子域相关联。
这样，利用图形匹配使CG图象的各个子域与观测图象的各个子域相关联，得到CG图象的各个子域中的结构名称。由三维地图空间中的结构位置坐标在投影平面上进行三维投影转换确定出将叠加获取的结构名称的实际情景图象的位置坐标。根据即将叠加获取的结构名称的实际情景图象的位置坐标制备标定信息。根据所述标定信息使所述结构名称叠加在实际情景的观测图象上，并由一个可视装置显示所述结构名称。
进一步地，根据本发明的观测标定装置也可装上通信地址存贮器用以储存与所述结构(电话号码、传真号码、IP地址、email地址、WWW页面地址等)，屏幕位置指示仪用以向使用者指明在所述可视装置屏幕上的位置，以及通信处理器用以当收到通信地址时与通信地址建立通信信道。在这种情况下，当使用者指出所述可视装置屏幕上的一个位置时，所述屏幕位置指示仪确定与所指出的屏幕位置相应的所述标定信息中的结构，接收来自所述通信地址存储器的与确定的结构有关的所述通信装置的通信地址，并且将其送到所述通信处理器。通信处理器能够根据收到的通信地址与通信地址建立通信信道。结果，使用者只需简单触摸所述屏幕上的一个区域就能向所述标定信息结构中的居民打电话，发传真或email。
在上述配置中，该配置可以这样，当使用者在所述可视装置屏幕上指明一个位置时，通信处理器首先在所述可视装置屏幕上显示收到的通信地址信息，并且根据使用者的通信启动请求与所述通信地址建立通信信道。进一步地，可以装上目的地指示仪为使用者指明所述目的地，其中所述标定信息制备装置将对应于使用者指明的目的地的目的地识别信息加到标定信息上，这样，当目的地识别信息加到标定信息上时，所述标定信息输出装置将显示一个符合所述目的地条件的结构。进一步地，当使用者在一个可视装置的屏幕上指明一个位置时，一个屏幕位置指示仪确定相应于所述指明屏幕位置的所述标定信息中的结构，从所述通信地址存储器接收与确定的结构有关的所述通信装置的通信地址，并且将所述通信地址送到所述标定信息输出装置，这样，所述标定信息输出装置可以在所述观测图象上叠加和显示所述收到的通信地址信息。
为了进一步提高本发明的观测标定装置中的观测图象结构和CG图象中的结构之间的相关性精度水平，对于观测图象中的各点，可以利用长度值，它是当拍摄时观测图象各点到摄像机位置的距离。同样地，能够确定拍摄时CG图象的子域各点到摄像机位置距离的长度值。例如，能够确定CG图象各个子域的一组长度值的平均值与观测图象的各个子域的一组长度值的平均值的比例。由该比例确定是否能够使观测图象的子域与CG图象的子域相关联。或者可以确定观测图象子域和CG图象子域之间的重叠比例，并且由所述子域之间的平均长度比例和重叠比例决定是否能够使观测图象的子域与CG图象的子域相关联。基于所述获取的结构制备一个CG图象，由图形匹配使所述CG图形的子域与所述观测图形的子域相关联，并且确定所述相关子域基于的所述结构。当然，所述比例不必限定为平均长度值，它可以是从一组长度得到的任何统计值。
下面将参照附图详细描述本发明的一个实施例。
图1是根据本发明第一个实施例的观测标定终端结构的一个框图。
本实施例的观测标定装置包括一个诸如数字摄像机的图象获取部分1用以获取图象，一个诸如GPS(全球定位系统)接收器的位置信息获取部分2用以当拍摄时记录所述摄像机的位置，一个诸如与所述数字摄像机连接的三维电子罗盘那样的摄像机说明信息获取部分3用以当拍摄时记录所述摄像机角度、焦距和图象尺寸，一个诸如地图数据库管理程序的地图信息管理部分5用以管理地图信息，根据所记录的位置、摄像机角度、焦距和图象尺寸确定地图信息空间的视觉空间并且获取出现在所述视觉空间中的结构，一个标定信息制备部分6A用以制备包括结构的名称或轮廓和位置的标定信息，一个标定信息输出部分7A用以将地图信息中的名称和轮廓叠加在图像中对应于与得到的标定信息中的位置有关的信息的位置，并且将所述叠加的图象输出到一个可视装置(图中未画出)，以及一个控制部分8A用以控制所述各个部分1-7A。
图2是根据本发明第二个实施例的观测标定装置结构的一个框图，图3是图2的观测标定装置进行工作的流程图。第二个实施例不同于第一个实施例，它有一个图象处理部分4用以处理来自与控制部分分离的图象获取部分1的图象。由于图1所示的第一个实施例与图2所示的第二个实施例的基本工作流程相同，下面详细描述图2所示的实施例的工作，而省略图1所示实施例的工作描述。
图2所示实施例的观测标定装置包括一个诸如数字摄像机的图象获取部分1用以获取图象，一个诸如GPS(全球定位系统)接收器的位置信息获取部分2用以当拍摄时记录所述摄像机的位置，一个诸如与所述数字摄像机连接的三维罗盘那样的摄像机说明信息获取部分3用以当拍摄时记录所述摄像机角度、焦距和图象尺寸，一个图象处理部分4用以将拍摄的图象分成一组子域，一个地图信息管理部分5用以管理地图信息，根据所记录的位置、摄像机角度、焦距和图象尺寸确定地图信息空间的视觉空间并且获取出现在所述视觉空间中的结构，一个标定信息制备部分6B用以使根据利用图形匹配的图象子域获取的结构相关联，并且制备包括所述相关结构的名称或说明信息和转换位置的标定信息，一个标定信息输出部分7用以将生成的标定信息中的结构名称或说明信息叠加在图像中的相应位置，一个标定信息输出部分7B用以将所述叠加的图象输出到一个可视装置，以及一个控制部分8用以控制上述各个部分1-7B。
下面参照图3详细描述本实施例的工作。当观测标定装置开启后，控制部分8B首先将程序开启命令送到位置信息获取部分2、摄像机说明信息获取部分3和图象获取部分用以获得有关观测图象的信息。当从控制部分8收到指令时，位置信息获取部分2每秒从GPS接收器或类似装置收集位置信息，并将其送到控制部分8B(步骤21)。这里，时间间隔不必限定为以秒为单位。当从控制部分8收到指令时，图象获取部分1每秒获取观测图象，并且将其送到控制部分8B(步骤22)。当从控制部分8收到指令时，拍摄时摄像机说明信息获取部分3记录观测图象的摄像机角度(步骤23)例如一对水平角度和垂直角度。同时，如果观测图象装置具有变焦能力，也获得焦距(步骤24)。由于对于每个观测图象装置图象尺寸都是标准的，控制部分8B储存所述图象尺寸信息。控制部分8B储存收集的信息作为观测图象存储信息。
图4给出了观测图象文件数据结构的文件格式的一个实例。图4所示的观测图象文件有标题信息和图象数据。标题信息包括位置信息、摄像机角度信息、焦距、时间信息和图象储存信息的图象尺寸、类型和大小。所述位置信息包括东经、北纬和海拔高度(如东经137度55分10秒，北纬34度34分30秒和海拔高度101米，33厘米)。所述摄像机角度包括水平角度和垂直角度(如逆时针水平角254度，垂直角15度)。所述焦距数据包括拍摄时摄像机镜头的焦距(如28mm)。所述时间信息包括拍摄时间(如1997年1月31日15点15分15秒，日本标准时间)。所述图象储存信息的图象尺寸包括垂直和水平象素尺寸(如640×480)。它也有所述储存信息类型(如TIFE格式，8比特彩色格式)。在所述储存信息中它还包含字节数目(如307.2KB)。图象数据本身以二进制格式储存。
在储存一个观测图象文件后，控制部分8B指示图象处理部分4从观测图象提取轮廓线并将所述观测图象分成一组子域。在图象处理部分4中，根据观测图象的密度差通过微分处理提取轮廓线(边界线)(步骤25)，并且通过用作为边界的轮廓线进行标定将所述观测图象分成子域(步骤26)。这里使用的技术术语“标定”是用在图象子域部分的一个技术术语，不同于用在本发明标题中的“观测标定”。作为一种处理，所述图象首先转换成单色图象。由于轮廓出现在亮度突变部分，因此由微分处理和确定微分值大于一个阈值的部分提取所述轮廓线。这时，所述轮廓线的线宽应是一个单一的象素，轮廓线应当相连。因此进行修磨处理使连接线有一个单一的象素线宽。这里，可以利用通常已知的方法适当地进行所述微分处理和修磨处理。
得到的轮廓线认作是所述子域的轮廓线，对轮廓线形成的子域进行标序号。最大的数目等于子域数目，各个子域中的象素数目代表所述子域的面积。图9给出了一个观测图象被分成一组子域的一个实例。可以在子域之间结合相似性(接近)测定，从而进行组合处理，将有相似特性的一组子域合并成一个单一子域。所述合并方法可以是任何现成方法。
在控制部分完成将观测图象分成子域的处理之后，它发送根据地图信息管理部分5的观测图象文件的标题信息，并输出处理请求用以计算所述视觉空间(步骤27)。作为一个地图信息管理部分5的一个实例，它有一个地图数据库程序。地图信息管理部分5管理三维地图数据。虽然可接收二维地图数据，但在这种情况下没有高度信息，因此降低了实际情景标定转换位置的精度。当基于二维地图信息时，由附加高度信息进行处理。例如，在房屋二维数据的情况下，如果能够得到代表该房屋的房屋层数的信息，那么用一个常数乘以所述层数就能估算出房屋的高度，根据二维数据的估算确定的高度信息就能制备三维数据。甚至如果没有层数信息，可根据房屋图的面积或位置而指定一个标准高度能够估算高度信息，以类似的方法根据估算的高度信息制备三维数据。以这种方式制备三维信息。
图5A和图5B给出了地图数据的实例。图5A表示二维地图信息空间，图5B表示三维地图信息空间。对于该三维地图信息空间，地图信息管理部分5从控制部分8B接收指令，根据观测图象文件的标题信息计算视觉空间(步骤28)。图6给出了计算视觉空间的一个实例。首先，在水平方向形成XY轴，在垂直方向形成Z轴。从观测图象文件的标题信息中的位置信息，在三维地图信息空间中设定观察点E的位置。例如，该点在东经137度55分10秒，北纬34度34分30秒高度101米33厘米，地图网格号码中与其相应的坐标被设定。类似地，根据标题信息的摄像机角度信息中的水平角度和垂直角度设定摄像机角度方向。在观察点E的前方沿表示所述摄像机角度的线以焦距长度的一点设定焦点。观察线方向矢量是沿该线起始于观察点E的单位矢量。利用观测图象文件中的图象尺寸，由水平方向尺寸设定摄像机屏幕中的沿水平轴的宽度a，由垂直方向尺寸设定沿垂直轴的宽度b。水平a和垂直b的平面垂直于有观察方向矢量的摄像机角度方向，该平面如此设定以致包含焦点F。确定将观察点E坐标与摄像机屏幕的四角连接的各线，从观察点E延伸的四条线形成的三维空间就是视觉空间。图7给出了三维地图空间的视觉空间的一个实例，其中的三维地图空间是从XZ平面观察的。图7中阴影线包围的部分是属于视觉空间的空间XZ平面上的一个横截面。在图7的实例中，建筑物和一座山峰包含在所述视觉空间中。
进一步地，所述地图信息管理部分5确定在所述确认的视觉空间中存在的结构。对于每个结构，在所述视觉空间中确定是否存在形成表示所述结构的三维物体的顶点。一般地，由具有标准尺寸的二维网格划分二维地图空间。作为划分三维空间网格的方法，除垂直和水平二维方向中的网格之外，在高度方向用标准间隔切割网格。这样，所述空间被分成立体单位空间。首先，对每个立体单位空间作与所述视觉空间存在叠加的分析，然后确定有叠加的三维单位地图空间的数目。这里，三维单位地图空间的数目类似于一个网格数目。对三维单位地图空间中有叠加的结构进行分析以获知与所述视觉空间部分的叠加部分。确定连接形成所述结构的顶点坐标和所述观察点坐标的连线，如果所述连线与图8的摄像机屏幕有一个交点则它们位于所述视觉空间中。在形成一个结构的多个顶点中，只要所述顶点之一满足这个条件，该结构就有与所述视觉空间重叠的部分。
当结构或部分结构包含在所述视觉空间中时，每个结构以摄像机屏幕作为投影平面进行三维投影转换(步骤29)。这里，如图8所示，在表达利用下式(1)，基于观察点E的坐标系统中的点P后，由投影到摄像机屏幕上的点P确定交点Q。 x ′ y ′ z ′ = - ly r lx r 0 - lxlz r - lylz r r lx ly lz x - ex + lxt y - ey + lyt z - ez + lzt - - - - ( 1 ) X Y = t t - z ′ t t - z ′ x ′ y ′ - - - - - ( 2 )
其中，点P＝(x，y，z)；形成结构的顶点坐标
      点E＝(ex，ey，ez)；观察点坐标
      矢量L＝(1x，1y，1z)；观察方向矢量(单位矢量)
      点P’＝(x’，y’，z’)；基于观察点E坐标系统表达的点P坐标
      r＝(1x2+1y2)1/2
      交点Q＝(X，Y)；点P在摄像机屏幕上的投影
      t是焦距。
对于三维投影转换，确定由各个结构的顶点形成的面。例如，如果一个立方体表示所述结构，那么将确定六个面。当投影将每个面转换到摄像机屏幕上，根据包含在投影子域中的摄像机面上的各个象素测定从观察点到摄像机面上相应点的距离，并作为一个长度值(Z值)储存在存储器中。对每个结构的每个面的摄像机屏幕上的每个象素计算所述长度值(Z值)，并储存在所述存储器中。在等式(1)中，z’表示从观察点的长度值(A值)。
在三维投影转换到摄像机屏幕上的结构中，有能从观察点看得到的结构，也有从观察点看不到的结构。在这些结构中，需要确定从观察点能够看见的结构，并且确定观察点反面或被其他结构挡住的那些面。因此，进行遮断面处理(步骤30)。有许多方法进行遮断面处理；例如，可以利用Z过渡方法。其它可用的方法包括扫描线方法或声线描迹方法。
在摄像机屏幕上提取一个任意象素，根据该象素确定具有最小长度值的面。以这种方式反复处理每个结构的各个面后，对于摄像机屏幕上的每个象素保留最靠近观察点的面。对于摄像机屏幕上的每个象素找到最靠近观察点的面，由于具有最靠近观察点的通常面的摄像机屏幕上的象素一般形成一个子域，由具有一个通常面作为最接近面的象素组成的一组子域形成在所述摄像机屏幕上。以这种方式确定的子域是由从观察点看到的结构的子域的三维转换得到的子域。省去观察点反面或被其他结构挡住的那些面。
以这种方式形成的子域形成CG图象域(步骤31)。
根据形成CG图象子域的二维形式的顶点坐标，在投影转换之前确定三维坐标，在此之间的对应关系作为关联信息储存在存储器中。该关联信息用作确定二维子域的那个结构是一个投影。
根据省去遮断线后保留的扫描数据，将CG图象分成子域。由于利用三维地图数据库，有可能使每个子域与作为子域基础的结构名称相关联。CG图象划分的子域顺序编号。图10给出了CG图象分成一组子域的一个实例。
在完成将CG图象分成子域的过程后，控制部分8B指示标定信息制备部分6B使CG图象子域与观测图象子域相关联(步骤32)。标定信息制备部分6B通过模型匹配使CG图象子域与观测图象子域相关联(步骤33，参见图11)。
观测图象子域与CG图象子域相关联，顺序从最小编号(例如，第1)的子域开始。尽管对于所述相关联可使用任何常用匹配方法，但在这种情况下使用简单的模型匹配方法。也就是，当比较后两个子域之间的重叠部分的比例大于或等于设定的一个域值常数比例时，它们被认为是有同一结构的子域。例如，在观测图象的第一个子域R1中，在所述子域中的每个象素的坐标值为(A，B)。由于在同一子域之内，所以坐标(A，B)的象素值是1。在CG图象的第一个子域S1中，如果坐标(A，b)是在子域S1中，那么象素值是1并且有重叠，但是如果在S1之外，那么象素值是0并且没有重叠。这样，在重叠的情况下在坐标(A，B)的重叠系数K(A，B)为1，在没有重叠的情况下为0。重叠系数K(A，B)是由移动子域R1中的坐标(A，B)确定的。在移动入子域R1中的N1个坐标(A，B)中，确定重叠系数K(A，B)为1的N2个坐标，如果N2/N1大于或等于阈值，观测图象的子域被确定为对应于CG图象的子域S1。从第一到最后的观测图象子域都进行这种相关性确定。作为另一个匹配方法，可以使用一个估算函数从而使得即使在XY方向有一个小的位置偏差也将获得相同的值。
在使CG图象子域与观测图象子域相关联后，标定信息制备部分6B进入一个程序，确定观测图象的每个子域被重叠的信息，并与作为标定信息的重叠位置一起制备(步骤34)。首先取得相应于观测图象子域的CG图象子域。CG图象子域最初是由在摄像机屏幕上对三维地图空间的三维结构的一个面进行三维投影转换得到取得的。然后，用CG图象子域的长度值(Z值)作为信息标号确定作为三维投影转换基础的三维结构面。根据作为基础的结构面，访问三维地图数据库以获得所述结构的名称或说明信息。这里，说明信息指任何与所述结构有关的信息，可以是任何有关所述结构的信息。根据观测图象子域确定所述名称或说明信息重叠的位置坐标。确定方法可以是任何方法。例如，可以是在形成子域的形状重力中心。由所述结构的名称、说明信息和转换位置坐标制备标定信息。表1给出了标定信息的一个实例。
表1
    结构名称     重叠位置     尺寸
    富士山建筑物A建筑物B     (300，500)(450，250)(150，200)     101012
在制备标定信息后，标定信息制备部分6B将标定信息送到控制部分8B。
当收到标定信息后，控制部分8B指示标定信息输出部分7B将标定信息输出到用以显示的可视装置或类似装置。这里，可视装置包括诸如显示器或头带式显示器的任何视频图象显示器。标定信息中的所述结构的名称或说明信息重叠在观测图象的某些位置(步骤35)，被重叠的观测图象输出到视频图象显示器(步骤36)。图12给出了与标定信息重叠的观测图象的一个实例。
在标定信息输出部分7B输出标定信息后，通知控制部分8B输出完成。在控制部分8B收到输出完成的通知后，它再次重复以上指出的程序用以进行观测标定。
下面将描述本发明的观测标定装置用到一个通信系统中的一个实例。图13是图12的观测标定装置用到一个通信系统中的一个观测标定系统的结构图。该观测标定系统包括一个观测标定终端40，一个观测标定中心站50和一个通信网60。
所述观测标定终端40包括一个图象获取部分41用以摄取图象，一个位置信息获取部分42用以当摄取图象时获得摄像机的位置，一个摄像机说明信息获取部分43用以当摄取图象时获得摄像机角度、焦距和图象尺寸，一个图象处理部分44用以将所述摄取的图象分成一组子域，通信控制装置45用以通过一个通信网60将有关分成子域的所述图象的各部分、所述摄像机角度、所述焦距和所述图象尺寸信息送到一个观测标定中心站50，并从所述观测标定中心站50接收标定信息，标定输出装置47将标定信息中的结构名称或说明信息叠加在所述图象的相应位置，并将所述重叠图象输出到一个可视装置，以及一个终端控制部分46用以控制上述所有部分。
所述观测标定中心站50包括一个通信控制部分53用以通过所述通信网60从所述观测标定终端40接收有关分成子域的所述图象的各部分、所述摄像机角度、所述焦距和所述图象尺寸信息，并将所述标定信息送到所述观测标定终端40，一个地图信息管理部分51用以管理地图信息，根据所述接收的摄像机角度、焦距和图象尺寸值确定地图信息空间中的视觉空间，并且记录所述视觉空间中的结构，一个标定信息制备部分52用以通过图形匹配使所述图象的子域与所述记录的结构相关联，并制备包括所述结构的名称或说明信息和相应转换位置的标定信息，以及一个中心站控制部分54用以控制上述所有部分。
所述标定信息制备部分52可以与图2中的标定信息制备部分6B结构相同。
下面参照附图描述本发明的观测标定装置的第三个实施例。
图14是本发明第三个实施例的观测标定装置结构图，图15是图14的观测标定装置进行工作的流程图。在图14和15中，与图1-3中的部件相同的部件标号相同。
如图14所示，本实施例的观测标定装置包括一个诸如数字摄像机的图象获取部分1用以获取图象，一个诸如GPS(全球定位系统)接收器的位置信息获取部分2用以当拍摄时记录所述摄像机的位置，一个诸如与所述数字摄像机连接的三维电子罗盘那样的摄像机说明信息获取部分3用以当拍摄时记录所述摄像机角度、焦距和图象尺寸，一个图象处理部分4用以将拍摄的图象分成一组子域，一个地图信息管理部分5用以管理地图信息，根据所述获取的摄像机位置、摄像机角度、焦距和图象尺寸确定地图信息空间的视觉空间并且记录所述视觉空间中的当时结构，一个屏幕位置指示部分11能够让使用者在可视装置的屏幕上指出一个位置，用以当使用者在可视装置的屏幕上指出一个位置时在标定信息中确定对应于指定屏幕位置的结构，从通信地址存储器部分9确定与结构有关的通信装置的通信地址，并将所述通信地址送到通信处理部分10，一个标定信息制备部分6C用以使获得的结构与图象子域相关联并制备包括相应结构的名称或说明信息和转换位置的标定信息，一个标定信息输出部分7C用以使结构名称或说明信息重叠于图像中对应于获取的标定信息中转换位置的位置处，一个通信地址存储器部分9用以储存与所述结构有关的通信装置的通信地址，一个通信处理部分10用以接收通信地址并建立与通信地址的通信信道，一个目标状态指定部分12用以让使用者指定目标状态，以及一个控制部分8C用以控制1-7C和9-12各个部分。
下面参照图15详细描述第三个实施例的工作。在图15所示的过程中，与图2所示的第二个实施例不同的程序步骤34C和以下的步骤。当该装置启动时，使CG图象子域与观测图象子域相关联。
在使CG图象子域与观测图象子域相关联后，标定信息制备部分6C进入一个步骤，根据观测图象的每个子域确定被重叠的信息，并同时制备要重叠的位置作为标定信息(步骤34C)。首先，以上述实例的同样方式，取得观测图象每个子域的相应CG图象子域。取得的CG图象子域最初由在摄像机屏幕上进行三维地图空间的三维结构的一个面的三维投影转换得到。利用CG图象子域的长度值(Z值)作为信息标号，确定作为三维投影转换基础的三维结构面。在三维转换期间制备的连接信息也可用作信息标号。利用原始结构面，访问三维地图数据库以获得所述结构的名称或说明信息。这里，说明信息指与所述结构有关的信息，可以是任何有关所述结构的信息。然后，根据观测图象子域确定所述重叠名称或说明信息的位置坐标。确定方法可以是任何方法。例如，可以是子域形成的形状重力中心。由所述结构的名称或说明信息和位置坐标制备标定信息(步骤34C)。这时，在本实施例中，给使用者在目标状态指定部分12指定的目标状态结构一个目的地识别标记“1”用以指定其为一个目标状态。表2给出了标定信息的一个实例。
表2
   结构名称     重叠位置  字体尺寸   目标识别标记
    富士山建筑物A建筑物B     (300，500)(450，250)(150，200)     101012        010
在制备标定信息后，标定信息制备部分6C将标定信息送到控制部分8C。
当收到标定信息后，控制部分8C指示标定信息输出部分7C在可视装置上显示标定信息。这里，可视装置包括诸如显示器或头带式显示器的视频显示器。标定信息输出部分7C将标定信息中的结构名称或说明信息叠加在观测图象的一些位置(步骤35C)，然后在视频显示器上显示重叠的观测图象(步骤36C)。在这种情况下，与目标状态相配，显示具有目的地识别标记“1”的结构。
当使用者利用屏幕位置指示部分11在可视装置的屏幕上指定一个位置时，控制部分8C从标定信息中确定相应于所述指定屏幕位置的结构，从通信地址存储器部分9中确定与结构有关的通信装置的通信地址，并且将所述通信地址送到通信处理部分10(步骤37)。通信处理部分10首先在可视装置的屏幕上显示收到的通信地址信息，然后根据使用者的通信启动请求与该通信地址建立通信信道(步骤38)。
也可以由标定信息输出部分7C将通信地址显示在可视装置的屏幕上而不必将其送到通信处理部分10。
当观测标定过程继续进行时，重复进行上述过程。
图16是图14的观测标定装置应用到一个通信系统的一个观测标定系统结构图。图16所示的观测标定信息包括一个通信终端40C，一个通信中心站50C和一个通信网60。在图16中，与图13中相同的部件的标号相同。
所述通信终端40C包括一个图象获取部分41用以摄取图象，一个位置信息获取部分42用以当摄取图象时获得摄像机的位置，一个摄像机说明信息获取部分43用以当摄取图象时获得摄像机角度、焦距和图象尺寸，一个图象处理部分44用以将所述摄取的图象分成一组子域，一个通信控制部分45C用以通过一个通信网60将有关分成子域的所述图象的各部分、所述摄像机位置、所述摄像机角度、所述焦距、所述图象尺寸信息、指定一个位置或建筑为一个目的地的目的地识别信息和标定信息的结构信息送到一个通信中心站50C，并从所述通信中心站50C接收标定信息和通信地址，一个标定信息输出部分47用以将标定信息中的结构名称或说明信息叠加在所述图象的转换位置，将所述重叠图象输出到一个可视装置，如果标定信息中的目的地识别标记为“1”，显示目的地的位置或建筑的结构，一个通信处理部分48用以接收一个通信地址并与该通信地址建立信道，一个屏幕位置指示部分49A用以使使用者能在可视装置的屏幕上指定一个位置，将所述结构信息输出到通信控制部分45C，并且将与在通信控制部分45C收到的结构有关的通信装置的通信地址送到通信处理部分48，一个目标状态指定部分49B用以使使用者能够指定目标状态，以及一个终端控制部分46B。
所述通信中心站50C包括一个通信控制部分53C用以通过所述通信网60从所述通信终端40C接收有关分成子域的所述图象的各部分、所述摄像机角度、所述焦距、所述图象尺寸信息、目的地识别信息和标定信息的结构信息，并将标定信息和通信地址送到所述通信终端40C，一个地图信息管理部分51用以管理地图信息，根据所述接收的摄像机位置、摄像机角度、焦距和图象尺寸值确定地图信息空间中的视觉空间，并且记录所述视觉空间中的结构，一个通信地址存储器部分55用以存储与每个结构有关的通信装置的通信地址，并输出由标定信息的结构信息指定的结构通信地址，一个标定信息制备部分52C用以通过图形匹配使所述图象的子域与所述记录的结构相关联，制备包括所述相关结构的名称或说明信息和所述转换位置的标定信息，如果所述结构是使用者作为一个目的地指定的位置或结构，则产生一个目的地识别标记“1”，以及一个中心站控制部分54C用以控制上述所有部分。
下面参照附图描述本发明的第四个实施例。图17是本发明第四个实施例的观测标定装置结构图，图18是图17的观测标定装置进行工作的流程图。在图17和18中，与图2和3中相同部件的标号相同。
如图17所示，第四个实施例的观测标定装置包括一个诸如数字摄像机的图象获取部分1用以获取图象，一个诸如GPS(全球定位系统)接收器的位置信息获取部分2用以当拍摄时记录图象获取部分1的位置，一个诸如与所述数字摄像机连接的三维电子罗盘那样的摄像机说明信息获取部分3用以当图象获取部分1拍摄图象时记录所述摄像机角度、焦距和图象尺寸，一个图象处理部分4用以将拍摄的图象分成一组子域，一个距离信息获取部分13用以当拍摄图象时确定所述图象的每个子域的图象各点相对于摄像机位置的距离(长度值)，一个地图信息管理部分5用以管理地图信息，根据所述获取的摄像机位置、摄像机角度、焦距和图象尺寸确定地图信息空间的视觉空间并且记录出现在所述视觉空间中的结构，一个标定信息制备部分6D用以根据地图信息管理部分5记录的结构制备CG图象，然后当拍摄图象时确定CG图象各个子域的各点相对于摄像机位置的距离长度值，根据CG图象子域各点的一组平均长度值和图象子域各点的一组平均长度值之间的比例用图形匹配使图象子域与CG图象子域相关联，并且制备包括相关联的结构和转换位置的名称或说明信息的标定信息，一个标定信息输出部分7用以使制备的标定信息中的结构名称或说明信息与图像中对应于转换位置的位置相重叠，并且将所述重叠图象输出到一个可视装置，以及一个控制部分8D用以控制上述1-5，6D，7D和13各个部分。
当处理图象时距离信息获取部分13利用有关三维测量方法的常规技术确定图象获取部分1得到的观测图象子域各点和图象获取部分1(摄像机位置)之间的距离。在这种情况下，有关三维测量常用方法的参考文献有《图象电子学会杂志》24卷，第五期，pp474-482(日本)。该文献描述了诸如光探测方法(脉冲光投射和调制光投射)，单眼透射方法，立体图象方法和快速立体方法(狭缝光投射和图形光投影)。例如，脉冲光投射方法是投射一个光脉冲并测量其反射回来的时间来确定距离的一种方法，调制光投射方法是由发射一束其密度在时间上被一个正弦波或一个矩形波调制的光并找到反射波的相位差来确定距离的一个方法。立体图象方法是由一组摄像机取得的图象之间的三角测量确定一个三维位置的方法，狭缝光投射方法是由投射狭缝光形成的图象位置的三角测量确定距离的一种方法，图形光投影方法是由利用一个光图形给测量空间编码的一些图象获得精确距离图象的一种方法。
因为本实施例只有一个图象获取部分1，所以利用诸如光探测方法的三维测量方法确定距离，其中距离信息获取部分13只需要一个获取的图象。
控制部分8B将从图象获取部分1得到的图象当作观测图象，以图象获取部分1作为参照摄像机。由图象获取部分1使所述位置/摄像机特征/图象信息通过控制部分8D到达距离信息获取部分13。
当观测标定装置启动时，控制部分8D首先将一个获取有关观测图象信息的程序启动指令送到图象获取部分1，位置信息获取部分2和摄像机说明信息获取部分3。位置信息获取部分1从控制部分8D接收指令并每秒从GPS接收器收集位置信息，并将其送到控制部分8D(步骤21)。在这种情况下，时间间隔不必限定在以秒为单位，可以取任何时间间隔。摄像机说明信息获取部分3从控制部分8D接收指令并当拍摄图象时获取诸如摄像机的观测图象记录装置的摄像机角度例如一组水平角和垂直角(步骤22)，并且如果观测图象记录装置有一个变焦能力时同时获取焦距(步骤23)。图象获取部分1从控制部分8D接收指令并且每秒拍摄图象，将其送到控制部分8D(步骤24)。因为对于每个观测图象记录装置来说图象尺寸是固定的，控制部分8D储存图象尺寸信息。距离信息获取部分13确定长度值，它是从图象各点对于拍摄图象时各子域点的摄像机位置的距离(步骤24-1)。控制部分8D将收集的信息储存在图4所示的一个观测图象文件中。随后，以类似于第二个实施例的方式进行从步骤25-31的过程。在将CG图象分成子域的步骤31完成后，控制部分8D指示标定信息制备部分6D进行CG图象子域和观测图象子域之间的相关性操作。
在标定信息制备部分6D制备CG图象后，确定当拍摄图象时CG图象子域各点到摄像机位置的距离的长度值。然后，根据CG图象子域各点的长度值确定CG图象各个子域的平均长度值(步骤32-2)。例如，假设CG图象的第m个子域是由一个结构Z的图象占据的一个子域。这时，必须由比较观察点和图象点之间的距离(长度值)确定结构Z是否实际存在在观测图象中。然后，在CG图象第m个子域中取得一组取样坐标X1，X2，X3，并计算从观察点(摄像机位置)到点X1的距离，从观察点到点X2的距离，从观察点到点X3的距离(参见图19A)。观测图象中相应于坐标点X1，X2，X3的坐标点为X′1，X′2，X′3。利用距离信息获取部分13分别测量观察点到点X′1之间的距离，观察点到点X′2之间的距离和观察点到点X′3之间的距离。如果观察点和点X1，X2，X3之间的距离分别是101米，103米和102米，那么，平均长度值是102米。如果观察点和点X′1，X′2，X′3之间的距离分别是99米，103米和101米，那么，平均长度值是101米。在这种情况下，距离比是0.99019。如果所述值设定为0.90，因为0.99019＞0.90，那么认为结构Z在观测图象中存在。
下面确定CG图象各个子域的平均长度值和观测图象各个子域的平均长度值之间的比例(距离比)。另一方面，确定在观测图象和CG图象中的被比较的两个子域之间的重叠比例(重叠率)。然后，被比较的子域的距离比和重叠率相乘，其结果与予设的域值相比较。如果大于阈值，那么使它们关联为有同一结构的子域。对于观测图象子域与CG图象子域从低编号(如第一号)的子域顺序进行相关性操作(步骤32D)。下面进行重叠率的计算。例如，对于观测图象第一个子域R1，子域的每个象素坐标值是(A，B)。坐标(A，B)的象素值由于是在一个子域中为1。在CG图象的第一个子域S1中，如果坐标(A，B)在S1中，那么象素值将为1并且它们重叠。如果在S1外，象素值将为0并且它们不重叠。以这种方式，如果它们重叠则在坐标(A，B)的重叠系数K(A，B)确定为1，如果不重叠确定为0。在子域R1中移动坐标(A，B)用以确定重叠系数K(A，B)。那么对于在子域R1中移动的坐标(A，B)的N1个坐标，确定重叠系数K(A，B)为1的N2个坐标，重叠率为N2/N1。
作为另外的匹配方法，也能利用估算函数，即使在XY方向有一点位置误差它们也有相同的值。
随后，以与第二个实施例相同的方式，标定信息制备部分6D取得与观测图象子域有关的CG图象子域的结构(步骤33)，然后确定观测图象各个子域被重叠的信息用以与重叠的位置一起制备标定信息(步骤34)。然后，当收到制备的标定信息后，控制部分8D向标定信息输出部分7D发出指令，使可视装置通过显示器或类似装置输出标定信息。标定信息中的结构名称或说明信息叠加在观测图象的位置(步骤35)，并且将重叠的观测图象输出到一个视频显示器(步骤37，参见图12)。当输出标定信息时，标定信息输出部分7D通知控制部分输出完成。当控制部分8D收到输出已完成的通知，如果观测标定过程继续进行则再次进行上述步骤。
下面参照附图20描述第四个实施例的观测标定装置的改进，该装置是本发明的第五个实施例。图20所示的第五个实施例的观测标定装置包括诸如数字摄像机的第一和第二图象获取部分1A，1B用以获取第一和第二图象，诸如GPS(全球定位系统)接收器的第一和第二位置信息获取部分2A，2B用以当拍摄时分别记录第一和第二图象获取部分1A，1B的位置，诸如与所述数字摄像机连接的三维电子罗盘那样的第一和第二摄像机说明信息获取部分3A，3B用以当第一和第二位图象获取部分1，2拍摄图象时记录所述摄像机角度、焦距和图象尺寸，一个图象处理部分4用以将拍摄的图象分成一组子域，一个距离信息获取部分13B用以确定对于第一图象的每个子域从第二图象到第一图象各点的距离(长度值)，一个地图信息管理部分5用以管理地图信息，根据所记录的摄像机位置、摄像机角度、焦距和图象尺寸确定地图信息空间的视觉空间并且记录出现在所述视觉空间中的结构，一个标定信息制备部分6D用以使图象子域中记录的结构与利用图形匹配的每个子域的图象和CG图象之间的平均长度值的比例相关联，并且制备包括相关结构和转换位置的名称或说明信息的标定信息，一个标定信息输出部分7D用以使制备的标定信息中的结构名称或说明信息重叠在图像中相应于转换的位置，并且将所述重叠图象输出到一个可视装置，以及一个控制部分8E用以控制上述1-7D各个部分。
因为本实施例有一组图象获取部分，位置信息获取部分和摄像机说明信息获取部分，距离信息获取部分13B不仅可以利用光定位方法，而且可以利用上述的立体图象方法，快速立体图象方法以及其它需要一组获取的图象的方法，确定拍摄图象时的摄像机位置和观测图象子域的各点。
控制部分8E将第一图象获取部分1A作为参照摄像机，从第一图象获取部分1A得到的图象(第一图象)作为观测图象。第二图象获取部分1B是一台用于获取距离信息的摄像机，第二图象获取部分1B的图象(第二图象)不作为观测图象，第二图象获取部分1B用与第一图象获取部分1A相同的方式获取位置，摄像机特征和图象。来自第一和第二图象获取部分1A，1B的位置，摄像机特征和图象信息通过控制部分8E送到距离信息获取部分13B。
当观测标定装置启动时，控制部分8E首先将程序启动指令送到图象获取部分1A，1B，位置信息获取部分2A，2B和摄像机说明信息获取部分3A，3B用以获取有关观测图象的信息。位置信息获取部分1A，1B从控制部分8E接收指令并每秒从GPS接收器或类似装置收集位置信息，将其送到控制部分8E。在这种情况下，时间间隔不必限定在以秒为单位，可以取任何时间间隔。图象获取部分1A，1B从控制部分接收指令，每秒拍摄观测图象，并且将其送到控制部分8E。摄像机说明信息获取部分3A，3B从控制部分8E接收指令并当拍摄图象时获取诸如摄像机的观测图象记录装置的摄像机角度例如一组水平角和垂直角，并且如果观测图象装置有一个变焦能力时同时获取焦距。因为对于每个观测图象装置来说图象尺寸是固定的，控制部分8E储存图象尺寸信息。距离信息获取部分13B对每个子域确定从第二图象到第一图象各点的距离(长度值)。控制部分8E将收集的信息作为一个观测图象文件储存。下面的操作与第四个实施例相同。
本发明的观测标定装置也可以有三个或更多的图象获取部分，位置信息获取部分和摄像机说明信息获取部分。
图21是图20的观测标定装置应用到一个通信系统的观测标定系统结构图。该观测标定系统包括一个观测标定终端40E，一个观测标定中心站50和一个通信网60。在图21中，与图13中相同的部件其标号相同。
观测标定终端40E包括第一和第二图象获取部分41A，41B用以获取图象，第一和第二位置信息获取部分42A，42B用以当拍摄图象时记录摄像机位置，第一和第二说明信息获取部分43A，43B用以当拍摄图象时记录摄像机角度、焦距和图象尺寸，一个图象处理部分44用以将拍摄的图象分成一组子域，一个距离信息获取部分491用以确定图象子域各点的长度值，该长度值是当拍摄图象时从摄像机位置到图象各点的距离，一个通信控制部分45用以将有关分成子域的通信部分，摄像机位置，摄像机角度，焦距和图象尺寸的信息通过通信网60送到观测标定中心站50，并从观测标定中心站50接收标定信息，一个标定信息输出部分47用以将标定信息中的结构的名称或说明信息叠加在图像中对应于转换位置的位置，并将所述重叠图象输出到一个可视装置，以及一个终端控制部分46E用以控制上述各个部分。
所述观测标定中心站50E包括一个通信控制部分51E用以通过所述通信网60从所述观测标定终端40E接收有关分成子域的所述图象的各部分、所述摄像机角度、所述焦距、所述图象尺寸和平均长度值的信息，并将标定信息送到所述观测标定终端40E，一个地图信息管理部分52用以管理地图信息，根据所述接收的摄像机位置、摄像机角度、焦距和图象尺寸值确定地图信息空间中的视觉空间，并且记录所述视觉空间中的当时结构，一个标定信息制备部分53E用以根据由地图信息管理部分52记录的结构制备计算机图解图的一个CG图象，然后确定从拍摄图象时的摄像机位置到CG图象各个子域点的距离长度值，由将这些CG图象各个子域点的距离长度值与一组图象各个子域点的长度值进行比较使图象子域与CG图象子域相关联，确定所述相关子域的结构，并且制备包括所述结构和转换位置的名称和说明信息的标定信息，以及一个中心站控制部分54E用以控制上述所有部分。
本系统的工作与图20所示装置的操作相同。另外，图象获取部分，位置信息获取部分和摄像机说明信息获取部分的数目可以是一个，就象图17所示的第四个实施例，或者也可以是三个或四个。

Claims (29)

1、一种观测标定装置包括：
图象获取机构用以拍摄图象；
位置信息获取机构用以获取拍摄图象时摄像机的位置；
摄像机说明信息获取机构用以获取拍摄图象时摄像机角度、焦距和图象尺寸；
地图信息管理机构用以管理地图信息，根据所述获取的位置、摄像机角度、焦距和图象尺寸确定一个图象信息空间中的一个视觉空间，并记录出现在视觉空间中的结构；
标定信息制备机构用以制备包括所述结构和它们的转换位置的名称或说明信息的标定信息；
标定信息输出机构用以将来自地图信息的所述名称或说明信息叠加到图象中对应于制备的标定信息中的位置信息的位置，并将所述重叠的图象输出到一个可视装置；以及
控制机构用以控制上述机构。
2、根据权利要求1所述的观测标定装置，还包括：
图象处理机构用以将所述图象获取机构获取的图象分成一组子域；其中
所述标定信息制备机构使所记录的结构与所述图象子域相关联，并且制备包括所述相关结构和它们的转换位置的所述名称或说明信息的标定信息；
所述标定信息输出机构将所述标定信息中的所述名称或说明信息叠加在相应于所述图象中的转换位置的位置，并且将该重叠图象输出到可视装置；以及
所述控制机构控制包括所述图象获取机构的每个机构。
3、根据权利要求2所述的观测标定装置，其中所述标定信息制备机构根据所述记录的结构制备计算机图解(CG)图象，利用图形匹配使所述图象中的所述子域与所述CG图象中的子域相关联，确定所述相关子域的结构，并且制备包括所述结构的名称或说明信息以及它们的转换位置的标定信息。
4、根据权利要求2所述的观测标定装置，其中所述标定信息制备机构将所述记录的结构三维投影转换到摄像机屏幕上，通过去掉从观察点看不见的结构制备CG图象，将所述CG图象沿CG图象子域的轮廓线分成子域，利用图形匹配使所述图象中的所述子域与所述CG图象中的子域相关联，确定作为与所述图象的所述子域相关的所述CG图象子域的基础的所述结构，并且制备包括所述结构和它们的转换位置的所述名称或说明信息的标定信息。
5、一种观测标定系统包括一个观测标定终端和一个观测标定中心站；
所述观测标定终端包括
图象获取机构用以拍摄图象，
位置信息获取机构用以当拍摄图象时获取摄像机的位置，
摄像机说明信息获取机构用以当拍摄图象时获取摄像机角度、焦距和图象尺寸，
图象处理机构用以将所述图象获取机构获取的图象分成一组子域，
通信控制机构用以通过所述通信网将有关分成子域的所述图象的部分，所述摄像机角度，所述焦距和所述图象尺寸的信息送到所述观测标定中心站，并从所述观测标定中心站接收标定信息，
标定信息输出机构用以将所述标定信息中的结构名称或说明信息叠加在所述图象的相应位置，并将所述重叠的图象输出到一个可视装置；以及
终端控制机构用以控制上述机构；所述观测标定中心站包括
通信控制机构用以通过所述通信网从所述观测标定终端接收有关分成子域的所述图象的部分，所述摄像机角度，所述焦距和所述图象尺寸的信息，并将所述标定信息送到所述观测标定终端，
地图信息管理机构用以管理地图信息，根据所述获取的位置摄像机角度焦距和图象尺寸确定一个图象信息空间中的一个视觉空间，并记录所述视觉空间中的当时结构，
标定信息制备机构用以使所述记录的结构与所述图象子域相关联，并且制备包括所述相关结构和它们的转换位置的所述名称或说明信息的标定信息，以及
中心站控制机构用以控制上述机构。
6、根据权利要求5所述的观测标定系统，其中所述标定信息制备机构根据所述记录的结构制备计算机图解(CG)图象，利用图形匹配使所述图象中的所述子域与所述CG图象中的子域相关联，确定所述相关子域的结构，并且制备包括所述结构和它们的转换位置的所述名称或说明信息的标定信息。
7、根据权利要求5所述的观测标定系统，其中所述标定信息制备机构将所述记录的结构三维投影转换到摄像机屏幕上，通过去掉从观察点看不见的结构制备CG图象，将所述CG图象沿CG图象子域的轮廓线分成子域，利用图形匹配使所述图象中的所述子域与所述CG图象中的子域相关联，确定作为与所述图象的所述子域相关的所述CG图象子域的基础的所述结构，并且制备包括所述结构的名称或说明信息以及它们的转换位置的标定信息。
8、一种观测标定信息装置包括：
图象获取机构用以拍摄图象；
位置信息获取机构用以当拍摄图象时获取摄像机的位置；
摄像机说明信息获取机构用以当拍摄图象时获取摄像机角度、焦距和图象尺寸；
图象处理机构用以将由所述图象获取机构获取的图象分成一组子域；
地图信息管理机构用以管理地图信息，根据所述获取的位置摄像机角度焦距和图象尺寸确定一个图象信息空间中的一个视觉空间，并记录所述视觉空间中的当时结构；
标定信息制备机构用以使所述记录的结构与所述图象子域相关联，并且制备包括所述相关结构和它们的转换位置的所述名称或说明信息的标定信息；
通信地址储存机构用以储存有关所述结构的通信装置的通信地址；
通信处理机构用以根据接收的通信地址与所述通信地址建立通信信道；
标定信息输出机构用以将地图信息中的名称或说明信息叠加到图像中对应于其制备的标定信息中的转换位置的位置处，并将所述重叠的图象输出到一个可视装置；
屏幕位置指示机构用以让使用者在所述可视装置的屏幕上指定一个位置，当使用者在所述可视装置的屏幕上指定一个位置后确定相应于所述指定屏幕位置的所述标定信息中的结构，从所述通信储存机构确定有关确定的结构的通信装置的通信地址；以及
控制机构用以控制上述机构。
9、根据权利要求8所述的观测标定装置，其中所述通信处理机构这样构成，当使用者在所述可视装置的屏幕上指定一个位置时，在所述可视装置上显示收到的通信地址信息，并且根据使用者的通信启动请求与所述的通信地址建立通信信道。
10、根据权利要求8所述的观测标定装置，还包括：
图象处理机构用以将由所述图象获取机构获取的图象分成一组子域；其中
所述标定信息制备机构使所述记录的结构与所述图象子域相关联，并且制备包括所述相关结构和它们的转换位置的所述名称或说明信息的标定信息；
所述标定信息输出机构将标定信息中的名称或说明信息叠加在相应于其在图像中的的转换位置的位置，在可视装置上显示重叠的图象，并当收到一个通信地址时在可视装置上显示通信地址；以及
所述控制机构控制包括所述图象获取机构的各个机构。
11、根据权利要求8-10之中任何一项所述的观测标定装置，还包括：
目标状态指定机构用以使使用者能够指定目标状态；其中
所述标定信息制备机构将表明由使用者指定的目标状态已经完成的目标状态识别信息加到所述标定信息上；以及
所述标定信息输出机构显示当目标状态识别信息加到所述标定信息上时一个结构与目标状态匹配。
12、根据权利要求8-10之中任何一项所述的观测标定装置，其中所述标定信息制备机构根据所述记录的结构制备计算机图解(CG)图象，利用图形匹配使所述图象中的所述子域与所述CG图象中的子域相关联，确定所述相关子域的结构，并且制备包括所述结构和它们的转换位置的所述名称或说明信息的标定信息。
13、根据权利要求8-10之中任何一项所述的观测标定装置，其中所述标定信息制备机构将所述记录的结构三维投影转换到摄像机屏幕上，通过去掉从观察点看不见的结构制备CG图象，将所述CG图象沿CG图象子域的轮廓线分成子域，利用图形匹配使所述图象中的所述子域与所述CG图象中的子域相关联，确定作为与所述图象的所述子域相关的所述CG图象子域的基础的所述结构，并且制备包括所述结构和它们的转换位置的所述名称或说明信息的标定信息。
14、一种观测标定系统包括一个观测标定终端和一个观测标定中心站；
所述观测标定终端包括
图象获取机构用以拍摄图象，
位置信息获取机构用以当拍摄图象时获取摄像机的位置，
摄像机说明信息获取机构用以当拍摄图象时获取摄像机角度、焦距和图象尺寸，
图象处理机构用以将所述图象获取机构获取的图象分成一组子域，
通信控制机构用以通过所述通信网将有关分成子域的所述图象的部分，所述摄像机角度，所述焦距和所述图象尺寸的信息送到所述观测标定中心站，并从所述观测标定中心站接收标定信息和通信地址，
通信处理机构根据接收的通信地址与所述通信地址建立信道，
标定信息输出机构用以将所述标定信息中的结构名称或说明信息叠加在所述图象的相应位置，并将所述重叠的图象输出到一个可视装置，
屏幕位置指示机构用以让使用者在所述可视装置的屏幕上指定一个位置，当使用者在所述可视装置的屏幕上指定一个位置后确定相应于所述指定屏幕位置的所述标定信息中的结构，将所述结构输出到所述通信控制机构，并且将有关所述通信控制机构收到的所述结构的通信装置的通信地址送到所述通信处理机构；以及
终端控制机构用以控制上述机构；所述观测标定中心站包括
通信控制机构用以通过所述通信网从所述观测标定终端接收有关分成子域的所述图象的部分，所述摄像机角度，所述焦距和所述图象尺寸的信息，并将所述标定信息和通信地址送到所述观测标定终端，
地图信息管理机构用以管理地图信息，根据所述获取的位置摄像机角度焦距和图象尺寸确定一个图象信息空间中的一个视觉空间，并记录出现在所述视觉空间中的结构，
标定信息制备机构用以使所述记录的结构与所述图象子域相关联，并且制备包括所述相关结构和它们的转换位置的所述名称或说明信息的标定信息，
通信地址储存机构用以储存有关所述结构的通信装置的通信地址，并且输出由所述标定信息中的结构信息指明的结构通信地址，以及
中心站控制机构用以控制上述机构。
15、根据权利要求14所述的观测标定系统，其中所述通信处理机构这样构成，当使用者在所述可视装置的屏幕上指定一个位置时，在所述可视装置上显示收到的通信地址信息，并且根据使用者的通信启动请求与所述的通信地址建立通信信道。
16、一种观测标定系统包括一个观测标定终端和一个观测标定中心站；
所述观测标定终端包括
图象获取机构用以拍摄图象，
位置信息获取机构用以当拍摄图象时获取摄像机的位置，
摄像机说明信息获取机构用以当拍摄图象时获取摄像机角度、焦距和图象尺寸，
图象处理机构用以将所述图象获取机构获取的图象分成一组子域，
通信控制机构用以通过所述通信网将有关分成子域的所述图象的部分，所述摄像机角度，所述焦距和所述图象尺寸的信息送到所述观测标定中心站，并从所述观测标定中心站接收标定信息和通信地址，
标定信息输出机构用以将所述标定信息中的结构名称或说明信息叠加在所述图象的相应位置，并将所述重叠的图象输出到一个可视装置，并且用以当收到所述通信地址时在所述可视装置上显示通信地址，
屏幕位置指示机构用以让使用者在所述可视装置的屏幕上指定一个位置，当使用者在所述可视装置的屏幕上指定一个位置后确定相应于所述指定屏幕位置的所述标定信息中的机构，将所述结构输出到所述通信控制机构，并且将有关所述通信控制机构收到的所述机构的通信装置的通信地址送到所述通信处理机构；以及
终端控制机构用以控制上述机构；所述构成标定中心站包括
通信控制机构用以通过所述通信网从所述观测标定终端接收有关分成子域的所述图象的部分，所述摄像机角度，所述焦距和所述图象尺寸的信息，并将所述标定信息和通信地址送到所述观测标定终端，
地图信息管理机构用以管理地图信息，根据所述获取的位置摄像机角度焦距和图象尺寸确定一个图象信息空间中的一个视觉空间，并记录所述视觉空间中的当时结构，
标定信息制备机构用以使所述记录的结构与所述图象子域相关联，并且制备包括所述相关结构和它们的转换位置的所述名称或说明信息的标定信息，
通信储存机构用以储存有关所述结构的通信装置的通信地址，并且输出由所述标定信息中的结构信息指明的结构通信地址，以及
中心站控制机构用以控制上述机构。
17、根据权利要求14-16之中任何一项所述的观测标定系统，所述观测标定终端还包括：
目标状态指定机构用以使使用者能够指定目标状态；其中
所述标定信息制备机构将表明由使用者指定的目标状态已经完成的目标状态识别信息加到所述标定信息上；以及
所述标定信息输出机构显示当目标状态识别信息加到所述标定信息上时一个结构与目标状态匹配。
18、根据权利要求14-16之中任何一项所述的观测标定系统，其中所述标定信息制备机构根据所记录的结构制备计算机图解(CG)图象，利用图形匹配使所述图象中的所述子域与所述CG图象中的子域相关联，确定所述相关子域的结构，并且制备包括所述结构和它们的转换位置的所述名称或说明信息的标定信息。
19、根据权利要求14-16之中任何一项所述的观测标定系统，其中所述标定信息制备机构将所述记录的结构三维投影转换到摄像机屏幕上，通过去掉从观察点看不见的结构制备CG图象，将所述CG图象沿CG图象子域的轮廓线分成子域，利用图形匹配使所述图象中的所述子域与所述CG图象中的子域相关联，确定作为与所述图象的所述子域相关的所述CG图象子域的基础的所述结构，并且制备包括所述结构和它们的转换位置的所述名称或说明信息的标定信息。
20、根据权利要求1所述的观测标定装置，还包括：
距离信息获取机构用以对所述图象的各点确定一个长度值，该长度值是当所述图象获取机构拍摄图象时从摄像机位置到所述图象各点的距离；其中
所述标定信息制备机构根据所述距离信息获取机构确定的长度值使所述地图信息管理机构记录的结构与所述图象相关联，并且制备包括所述结构和它们的转换位置的名称或说明信息的标定信息。
21、根据权利要求2所述的观测标定装置，还包括：
距离信息获取机构用以对所述图象的各点确定一个长度值，该长度值是当所述图象获取机构拍摄图象时从摄像机位置到所述图象各点的距离；其中
所述标定信息制备机构根据所述距离信息获取机构确定的长度值使所述地图信息管理机构记录的结构与所述图象相关联，并且制备包括所述结构和它们的转换位置的名称或说明信息的标定信息。
22、根据权利要求3所述的观测标定装置，还包括：
距离信息获取机构用以对所述图象的各点确定一个长度值，该长度值是当所述图象获取机构拍摄图象时从摄像机位置到所述图象各点的距离；其中
所述标定信息制备机构在根据所述地图信息管理机构记录的结构制备计算机图解图象的CG图象之后确定当拍摄图象时从所述摄像机位置到CG图象子域各点的距离长度值，利用一组所述CG图象各个子域点的长度值和一组所述图象各个子域点的长度值之间的比例通过图形匹配使所述图象中的所述子域与所述CG图象中的子域相关联，确定相关联的子域的结构，并且制备包括所述结构的所述名称或说明信息以及它们的转换位置的标定信息。
23、根据权利要求3所述的观测标定装置，还包括：
距离信息获取机构用以对所述图象的各点确定一个长度值，该长度值是当所述图象获取机构拍摄图象时从摄像机位置到所述图象各点的距离；其中
所述标定信息制备机构在根据所述地图信息管理机构记录的结构制备计算机图解图象的CG图象之后确定当拍摄图象时从所述摄像机位置到CG图象子域各点的距离长度值，利用一组所述CG图象各个子域点的长度值和一组所述图象各个子域点的长度值之间的比例由图形匹配使所述图象中的所述子域与所述CG图象中的子域相关联，并且叠加所述CG图象子域和所述图象子域之间的比例，确定相关联的子域的结构，并且制备包括所述结构的所述名称或说明信息以及它们的转换位置的标定信息。
24、根据权利要求20-23之中任何一项所述的观测标定装置，其中所述标定信息制备机构将所述记录的结构三维投影转换到摄像机屏幕上，通过去掉从观察点看不见的结构制备CG图象，并将所述CG图象用CG图象子域的轮廓线分成子域。
25、根据权利要求20-23之中任何一项所述的观测标定装置，包括一组图象获取机构、所述位置信息获取机构和所述摄像机说明信息机构。
26、根据权利要求5所述的观测标定系统，其中
所述观测标定终端还包括距离信息获取机构用以对所述图象的各点确定一个长度值，该长度值是当所述图象获取机构拍摄图象时从摄像机位置到所述图象各点的距离；
在所述的观测标定终端，所述标定信息输出机构通过通信网将有关分成子域的所述图象部分，所述摄像机角度，所述焦距，所述图象尺寸和长度值发送到所述观测标定中心站，并且从所述观测标定中心站接收标定信息；和
在所述观测标定中心站，所述图象控制机构通过通信网从所述观测标定终端接收有关分成子域的所述图象部分，所述摄像机角度，所述焦距，所述图象尺寸和长度值的信息，并且将所述标定信息发送到所述观测标定终端，以及
在根据所述地图信息管理机构记录的结构制备计算机图解图象的CG图象之后，所述标定信息制备机构确定当拍摄图象时从所述摄像机位置到CG图象子域各点的距离长度值，由比较一组所述CG图象各个子域点的长度值和一组所述图象各个子域点的长度值使所述图象中的所述子域与所述CG图象中的子域相关联，确定所述相关子域的结构，并且制备包括所述结构和它们的转换位置的所述名称或说明信息的标定信息。
27、根据权利要求26所述的观测标定系统，其中在所述观测标定中心站中，所述标定信息制备机构在根据所述地图信息管理机构记录的结构制备计算机图解图象的CG图象之后确定当拍摄图象时从所述摄像机位置到CG图象子域各点的距离长度值，利用一组所述CG图象各个子域点的长度值和一组所述图象各个子域点的长度值之间的比例由图形匹配使所述图象中的所述子域与所述CG图象中的子域相关联，并且所述CG图象子域和所述图象子域之间的叠加比例，确定相关联的子域的结构，并且制备包括所述结构的名称或说明信息以及它们的转换位置的标定信息。
28、根据权利要求26或27所述的观测标定装置，其中所述标定信息制备机构将所述记录的结构三维投影转换到摄像机屏幕上，通过去掉从观察点看不见的结构制备CG图象，并将所述CG图象用CG图象子域的轮廓线分成子域。
29、根据权利要求26或27所述的观测标定装置，包括一组所述图象获取机构、所述位置信息获取机构和所述摄像机说明信息机构。
CNB981097650A 1997-03-27 1998-03-27 标定观测图象的装置和系统 Expired - Fee Related CN1163760C (zh)

Applications Claiming Priority (12)

Application Number Priority Date Filing Date Title
JP75471/97 1997-03-27
JP7547197A JP3225882B2 (ja) 1997-03-27 1997-03-27 景観ラベリングシステム
JP75471/1997 1997-03-27
JP186679/1997 1997-07-11
JP186679/97 1997-07-11
JP18667997 1997-07-11
JP213251/1997 1997-08-07
JP213251/97 1997-08-07
JP9213251A JP3053169B2 (ja) 1997-08-07 1997-08-07 景観ラベル利用型通信装置およびシステム
JP28072797A JP3053172B2 (ja) 1997-07-11 1997-10-14 距離参照型景観ラベリング装置およびシステム
JP280727/1997 1997-10-14
JP280727/97 1997-10-14

Publications (2)

Publication Number Publication Date
CN1203369A true CN1203369A (zh) 1998-12-30
CN1163760C CN1163760C (zh) 2004-08-25

Family

ID=27465817

Family Applications (1)

Application Number Title Priority Date Filing Date
CNB981097650A Expired - Fee Related CN1163760C (zh) 1997-03-27 1998-03-27 标定观测图象的装置和系统

Country Status (4)

Country Link
US (1) US6222583B1 (zh)
EP (2) EP0867690B1 (zh)
CN (1) CN1163760C (zh)
DE (1) DE69818889T2 (zh)

Cited By (15)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN100345158C (zh) * 2001-07-12 2007-10-24 杜莱布斯公司 用于产生涉及几何失真的格式化信息的方法和系统
CN100371952C (zh) * 2003-04-21 2008-02-27 日本电气株式会社 识别视频图像对象及应用视频图像注释的设备和方法
US7343268B2 (en) 2001-06-20 2008-03-11 Zenrin Co., Ltd. Three-dimensional electronic map data creation method
CN100384220C (zh) * 2006-01-17 2008-04-23 东南大学 摄像机标定数据的采集方法及其标定板
US7728869B2 (en) 2005-06-14 2010-06-01 Lg Electronics Inc. Matching camera-photographed image with map data in portable terminal and travel route guidance method
CN101426086B (zh) * 2007-11-02 2011-03-30 索尼株式会社 信息显示装置、方法、成像装置和图像数据发送方法
CN102137183A (zh) * 2010-01-26 2011-07-27 株式会社泛泰 移动通信终端及方法
CN101726308B (zh) * 2008-10-15 2012-07-25 北京龙图通信息技术有限公司 一种生成导航电子地图路口实景诱导图的方法
CN101460810B (zh) * 2006-04-28 2012-10-31 诺基亚公司 校准
CN102884400A (zh) * 2010-05-14 2013-01-16 索尼公司 信息处理设备，信息处理系统和程序
CN103185583A (zh) * 2011-12-30 2013-07-03 上海博泰悦臻电子设备制造有限公司 车辆位置分享方法、车辆位置分享系统
CN103248869A (zh) * 2013-04-23 2013-08-14 大连汇新钛设备开发有限公司 水产养殖移动式水下摄录像系统
CN104145173A (zh) * 2012-03-02 2014-11-12 高通股份有限公司 用于定位的视觉ocr
CN107404598A (zh) * 2010-02-08 2017-11-28 株式会社尼康 摄影装置、信息取得系统、程序及记录介质
CN110462343A (zh) * 2017-04-03 2019-11-15 罗伯特·博世有限公司 基于地图的用于车辆的自动图像标记

Families Citing this family (162)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US8432414B2 (en) 1997-09-05 2013-04-30 Ecole Polytechnique Federale De Lausanne Automated annotation of a view
US6466701B1 (en) 1997-09-10 2002-10-15 Ricoh Company, Ltd. System and method for displaying an image indicating a positional relation between partially overlapping images
JP3109469B2 (ja) * 1998-02-20 2000-11-13 日本電気株式会社 画像入力装置
US9075136B1 (en) 1998-03-04 2015-07-07 Gtj Ventures, Llc Vehicle operator and/or occupant information apparatus and method
JP4296451B2 (ja) * 1998-06-22 2009-07-15 株式会社日立製作所 画像記録装置
JP4144961B2 (ja) * 1999-01-14 2008-09-03 富士フイルム株式会社 画像データ通信システム，サーバ・システムおよびその制御方法ならびにサーバ・システムを制御するためのプログラムを格納した記録媒体
JP4559555B2 (ja) * 1999-03-16 2010-10-06 株式会社日立製作所 立体地図表示方法およびナビゲーション装置
US6995792B1 (en) * 1999-09-30 2006-02-07 Casio Computer Co., Ltd. Camera with positioning capability
US7542070B2 (en) * 2000-01-17 2009-06-02 Fujifilm Corporation Image processing apparatus, and photographing system for receiving and creating processing information
EP1266282B1 (en) * 2000-03-17 2010-04-21 Microsoft Corporation System and method for non-uniform scaled mapping
US6657661B1 (en) * 2000-06-20 2003-12-02 Hewlett-Packard Development Company, L.P. Digital camera with GPS enabled file management and a device to determine direction
EP1172741A3 (en) * 2000-07-13 2004-09-01 Sony Corporation On-demand image delivery server, image resource database, client terminal, and method of displaying retrieval result
JP3841630B2 (ja) * 2000-08-29 2006-11-01 オリンパス株式会社 画像取り扱い装置
GB2368219A (en) * 2000-09-13 2002-04-24 Roke Manor Research Camera system with GPS
US6751338B1 (en) * 2000-12-15 2004-06-15 Cognex Corporation System and method of using range image data with machine vision tools
EP1227301A1 (de) * 2001-01-29 2002-07-31 Siemens Aktiengesellschaft Positionsbestimmung mit Handyunterstützung
SE519884C2 (sv) * 2001-02-02 2003-04-22 Scalado Ab Metod för zoomning och för att framställa en zoomningsbar bild
US6690762B1 (en) * 2001-02-28 2004-02-10 Canon Kabushiki Kaisha N-dimensional data encoding of projected or reflected data
FR2827460B1 (fr) * 2001-07-12 2004-10-29 Poseidon Procede et systeme pour fournir, selon un format standard, a des logiciels de traitement d'images des informations liees aux caracteristiques des appareils de capture d'image et/ou des moyens de resti
FR2827459B1 (fr) * 2001-07-12 2004-10-29 Poseidon Procede et systeme pour fournir a des logiciels de traitement d'image des informations formatees liees aux caracteristiques des appareils de capture d'image et/ou des moyens de restitution d'image
US8675980B2 (en) 2001-07-12 2014-03-18 Do Labs Method and system for reducing update frequency of image-processing means
US20030161506A1 (en) * 2002-02-25 2003-08-28 Eastman Kodak Company Face detection computer program product for redeye correction
JP2003263104A (ja) * 2002-03-11 2003-09-19 Mitsubishi Electric Corp 撮像情報認識システム
EP1349363B1 (en) * 2002-03-29 2014-01-08 FUJIFILM Corporation Digital camera connected to a navigation device and to an external storage information system
US6917370B2 (en) * 2002-05-13 2005-07-12 Charles Benton Interacting augmented reality and virtual reality
CN1284098C (zh) * 2002-05-21 2006-11-08 国际商业机器公司 图中点标注位置确定装置、终端设备、系统及其方法
JP2003346185A (ja) * 2002-05-24 2003-12-05 Olympus Optical Co Ltd 情報表示システム及び携帯情報端末
US7424133B2 (en) 2002-11-08 2008-09-09 Pictometry International Corporation Method and apparatus for capturing, geolocating and measuring oblique images
US20040114042A1 (en) * 2002-12-12 2004-06-17 International Business Machines Corporation Systems and methods for annotating digital images
JP4032355B2 (ja) * 2003-03-27 2008-01-16 カシオ計算機株式会社 表示処理装置、表示制御方法および表示処理プログラム
FR2856495B1 (fr) * 2003-06-17 2005-09-09 France Telecom Procede d'aide a la navigation dans des bases d'information geo-localisee
FI116547B (fi) * 2003-09-04 2005-12-15 Nokia Corp Menetelmä ja laitteisto matkaviestimeen tallennettavien kuvien nimeämiseksi
DE10343942B4 (de) * 2003-09-23 2012-08-09 Robert Bosch Gmbh Assistenzeinrichtung für Kraftfahrzeuge und Verfahren zur Visualisierung von Zusatzinformationen
US8745515B2 (en) * 2004-04-07 2014-06-03 Nokia Corporation Presentation of large pages on small displays
WO2005029308A2 (en) * 2003-09-24 2005-03-31 Nokia Corporation Improved presentation of large objects on small displays
JP3972366B2 (ja) * 2003-09-26 2007-09-05 マツダ株式会社 車両用情報提供装置
US8665325B2 (en) 2003-10-08 2014-03-04 Qwest Communications International Inc. Systems and methods for location based image telegraphy
US20050104976A1 (en) * 2003-11-17 2005-05-19 Kevin Currans System and method for applying inference information to digital camera metadata to identify digital picture content
US20050149258A1 (en) * 2004-01-07 2005-07-07 Ullas Gargi Assisting navigation of digital content using a tangible medium
US20050228860A1 (en) * 2004-04-12 2005-10-13 Kimmo Hamynen Methods and apparatus for geographically based Web services
US20060195858A1 (en) * 2004-04-15 2006-08-31 Yusuke Takahashi Video object recognition device and recognition method, video annotation giving device and giving method, and program
US20060002590A1 (en) * 2004-06-30 2006-01-05 Borak Jason M Method of collecting information for a geographic database for use with a navigation system
US8751156B2 (en) 2004-06-30 2014-06-10 HERE North America LLC Method of operating a navigation system using images
US7460953B2 (en) 2004-06-30 2008-12-02 Navteq North America, Llc Method of operating a navigation system using images
WO2006056622A1 (es) * 2004-11-19 2006-06-01 Daem Interactive, Sl Dispositivo personal con funciones de adquirir imágenes, para aplicación de recursos de realidad aumentada y método
US20060114336A1 (en) * 2004-11-26 2006-06-01 Hang Liu Method and apparatus for automatically attaching a location indicator to produced, recorded and reproduced images
GB2421653A (en) * 2004-12-24 2006-06-28 Trek Wireless Ltd System for the collection and association of image and position data
US7720436B2 (en) * 2006-01-09 2010-05-18 Nokia Corporation Displaying network objects in mobile devices based on geolocation
US8301159B2 (en) * 2004-12-31 2012-10-30 Nokia Corporation Displaying network objects in mobile devices based on geolocation
JP4632793B2 (ja) * 2005-01-12 2011-02-16 京セラ株式会社 ナビゲーション機能付き携帯型端末機
US8108142B2 (en) * 2005-01-26 2012-01-31 Volkswagen Ag 3D navigation system for motor vehicles
US7451041B2 (en) 2005-05-06 2008-11-11 Facet Technology Corporation Network-based navigation system having virtual drive-thru advertisements integrated with actual imagery from along a physical route
US20070070233A1 (en) * 2005-09-28 2007-03-29 Patterson Raul D System and method for correlating captured images with their site locations on maps
JP2007133489A (ja) * 2005-11-08 2007-05-31 Sony Corp 仮想空間画像表示方法、装置、仮想空間画像表示プログラム及び記録媒体
TW200806027A (en) * 2005-11-11 2008-01-16 Sony Corp Imaging/reproducing device
US8280405B2 (en) * 2005-12-29 2012-10-02 Aechelon Technology, Inc. Location based wireless collaborative environment with a visual user interface
JP2007256816A (ja) * 2006-03-24 2007-10-04 Casio Comput Co Ltd ラベルシート及びラベル作成装置
JP4935145B2 (ja) 2006-03-29 2012-05-23 株式会社デンソー カーナビゲーション装置
US7873238B2 (en) 2006-08-30 2011-01-18 Pictometry International Corporation Mosaic oblique images and methods of making and using same
JP2008131217A (ja) * 2006-11-20 2008-06-05 Funai Electric Co Ltd 携帯機器
JP5076468B2 (ja) * 2006-12-01 2012-11-21 株式会社デンソー 通信型ナビゲーションシステム、車両ナビゲーション装置及びセンター装置
JP2008160631A (ja) * 2006-12-26 2008-07-10 Funai Electric Co Ltd 携帯機器
US8593518B2 (en) * 2007-02-01 2013-11-26 Pictometry International Corp. Computer system for continuous oblique panning
US8520079B2 (en) * 2007-02-15 2013-08-27 Pictometry International Corp. Event multiplexer for managing the capture of images
JP4914268B2 (ja) * 2007-03-29 2012-04-11 株式会社日立製作所 検索サービスサーバの情報検索方法。
US9240029B2 (en) * 2007-04-30 2016-01-19 Here Global B.V. Street level video simulation display system and method
US7688229B2 (en) * 2007-04-30 2010-03-30 Navteq North America, Llc System and method for stitching of video for routes
US8385672B2 (en) * 2007-05-01 2013-02-26 Pictometry International Corp. System for detecting image abnormalities
US9262818B2 (en) 2007-05-01 2016-02-16 Pictometry International Corp. System for detecting image abnormalities
US20080273109A1 (en) * 2007-05-02 2008-11-06 Drew Bamford Portable device with interactive display and geographical location capability
DE102007022588A1 (de) * 2007-05-14 2008-11-27 Robert Bosch Gmbh Verfahren zur Anzeige von Videobildern und Videosystemen
CN101680766B (zh) * 2007-05-31 2013-01-23 松下电器产业株式会社 图像摄影装置、附加信息提供服务器及附加信息过滤系统
US8009178B2 (en) * 2007-06-29 2011-08-30 Microsoft Corporation Augmenting images for panoramic display
US8874364B2 (en) * 2007-08-02 2014-10-28 Volkswagen Ag Navigation system
US8024113B2 (en) * 2007-08-02 2011-09-20 Volkswagen Ag Navigation system
US9329052B2 (en) * 2007-08-07 2016-05-03 Qualcomm Incorporated Displaying image data and geographic element data
US8994851B2 (en) * 2007-08-07 2015-03-31 Qualcomm Incorporated Displaying image data and geographic element data
US8644842B2 (en) 2007-09-04 2014-02-04 Nokia Corporation Personal augmented reality advertising
US7991226B2 (en) * 2007-10-12 2011-08-02 Pictometry International Corporation System and process for color-balancing a series of oblique images
US8086071B2 (en) * 2007-10-30 2011-12-27 Navteq North America, Llc System and method for revealing occluded objects in an image dataset
US8531472B2 (en) 2007-12-03 2013-09-10 Pictometry International Corp. Systems and methods for rapid three-dimensional modeling with real façade texture
US8531449B2 (en) * 2007-12-18 2013-09-10 Navteq B.V. System and method for producing multi-angle views of an object-of-interest from images in an image dataset
US9582937B2 (en) 2008-01-02 2017-02-28 Nokia Technologies Oy Method, apparatus and computer program product for displaying an indication of an object within a current field of view
US7961224B2 (en) * 2008-01-25 2011-06-14 Peter N. Cheimets Photon counting imaging system
TW201005673A (en) * 2008-07-18 2010-02-01 Ind Tech Res Inst Example-based two-dimensional to three-dimensional image conversion method, computer readable medium therefor, and system
US9191238B2 (en) * 2008-07-23 2015-11-17 Yahoo! Inc. Virtual notes in a reality overlay
EP2307854A1 (en) * 2008-07-31 2011-04-13 Tele Atlas B.V. Method of displaying navigation data in 3d
CA2725552A1 (en) * 2008-07-31 2010-02-04 Tele Atlas B.V. Computer arrangement and method for displaying navigation data in 3d
US8588547B2 (en) 2008-08-05 2013-11-19 Pictometry International Corp. Cut-line steering methods for forming a mosaic image of a geographical area
TW201015202A (en) * 2008-10-03 2010-04-16 Altek Corp Image pickup device capable of providing GPS coordinates of subject to be shot and method for detecting GPS coordinates thereof
US8890898B2 (en) * 2009-01-28 2014-11-18 Apple Inc. Systems and methods for navigating a scene using deterministic movement of an electronic device
US20100188397A1 (en) * 2009-01-28 2010-07-29 Apple Inc. Three dimensional navigation using deterministic movement of an electronic device
US8294766B2 (en) 2009-01-28 2012-10-23 Apple Inc. Generating a three-dimensional model using a portable electronic device recording
CN101799621B (zh) * 2009-02-05 2012-12-26 联想(北京)有限公司 一种拍摄方法和拍摄设备
JP4735731B2 (ja) * 2009-03-23 2011-07-27 富士ゼロックス株式会社 画像処理システム
US8401222B2 (en) 2009-05-22 2013-03-19 Pictometry International Corp. System and process for roof measurement using aerial imagery
IT1399396B1 (it) * 2009-06-23 2013-04-16 Midulla Metodo e sistema di identificazione di oggetti presenti in una foto o in un video digitali
EP2467820A4 (en) * 2009-08-21 2015-05-06 Samsung Electronics Co Ltd CONTACT ARTICLE INFORMATION MANAGEMENT METHOD, USER DEVICE FOR EXECUTING THE METHOD, AND STORAGE MEDIUM THEREOF
US8755815B2 (en) 2010-08-31 2014-06-17 Qualcomm Incorporated Use of wireless access point ID for position determination
US8395547B2 (en) * 2009-08-27 2013-03-12 Hewlett-Packard Development Company, L.P. Location tracking for mobile computing device
US9330494B2 (en) 2009-10-26 2016-05-03 Pictometry International Corp. Method for the automatic material classification and texture simulation for 3D models
TW201122711A (en) * 2009-12-23 2011-07-01 Altek Corp System and method for generating an image appended with landscape information
US20110161875A1 (en) * 2009-12-29 2011-06-30 Nokia Corporation Method and apparatus for decluttering a mapping display
JP5143856B2 (ja) * 2010-04-16 2013-02-13 株式会社ソニー・コンピュータエンタテインメント ３次元画像表示装置、および３次元画像表示方法
US8391789B2 (en) * 2010-04-19 2013-03-05 Nokia Corporation Apparatus for facilitating peripheral device selection
US8687094B2 (en) * 2010-06-15 2014-04-01 Lg Electronics Inc. Mobile terminal and method of displaying object related information therein
US8963954B2 (en) * 2010-06-30 2015-02-24 Nokia Corporation Methods, apparatuses and computer program products for providing a constant level of information in augmented reality
US8477190B2 (en) 2010-07-07 2013-07-02 Pictometry International Corp. Real-time moving platform management system
US9118832B2 (en) 2010-08-17 2015-08-25 Nokia Technologies Oy Input method
JP2012065263A (ja) * 2010-09-17 2012-03-29 Olympus Imaging Corp 撮影機器
CN103222319B (zh) 2010-09-29 2016-08-10 高通股份有限公司 一种用于移动计算设备的方法及移动计算设备
US8823732B2 (en) 2010-12-17 2014-09-02 Pictometry International Corp. Systems and methods for processing images with edge detection and snap-to feature
KR101867558B1 (ko) * 2010-12-21 2018-06-15 퀄컴 인코포레이티드 뷰이미지의 적어도 하나의 피처에 주석을 달기 위한 컴퓨터화 방법 및 장치
CN102724398B (zh) * 2011-03-31 2017-02-08 联想(北京)有限公司 图像数据提供方法、组合方法及呈现方法
MX339356B (es) 2011-06-10 2016-05-17 Pictometry Int Corp Sistema y metodo para formar una secuencia de video que contiene datos de gis en tiempo real.
US9361283B2 (en) * 2011-11-30 2016-06-07 Google Inc. Method and system for projecting text onto surfaces in geographic imagery
EP2820576A4 (en) 2012-02-29 2015-11-18 Nokia Technologies Oy METHOD AND DEVICE FOR PRESENTING OBJECTS AT A USER INTERFACE
US9183538B2 (en) 2012-03-19 2015-11-10 Pictometry International Corp. Method and system for quick square roof reporting
WO2014005066A1 (en) * 2012-06-28 2014-01-03 Experience Proximity, Inc., Dba Oooii Systems and methods for navigating virtual structured data relative to real-world locales
US9091628B2 (en) 2012-12-21 2015-07-28 L-3 Communications Security And Detection Systems, Inc. 3D mapping with two orthogonal imaging views
US9244272B2 (en) 2013-03-12 2016-01-26 Pictometry International Corp. Lidar system producing multiple scan paths and method of making and using same
US9881163B2 (en) 2013-03-12 2018-01-30 Pictometry International Corp. System and method for performing sensitive geo-spatial processing in non-sensitive operator environments
US9164281B2 (en) 2013-03-15 2015-10-20 Honda Motor Co., Ltd. Volumetric heads-up display with dynamic focal plane
US20160054563A9 (en) * 2013-03-14 2016-02-25 Honda Motor Co., Ltd. 3-dimensional (3-d) navigation
US10339711B2 (en) 2013-03-15 2019-07-02 Honda Motor Co., Ltd. System and method for providing augmented reality based directions based on verbal and gestural cues
US9747898B2 (en) 2013-03-15 2017-08-29 Honda Motor Co., Ltd. Interpretation of ambiguous vehicle instructions
US9275080B2 (en) 2013-03-15 2016-03-01 Pictometry International Corp. System and method for early access to captured images
US9393870B2 (en) 2013-03-15 2016-07-19 Honda Motor Co., Ltd. Volumetric heads-up display with dynamic focal plane
US9378644B2 (en) 2013-03-15 2016-06-28 Honda Motor Co., Ltd. System and method for warning a driver of a potential rear end collision
US10215583B2 (en) 2013-03-15 2019-02-26 Honda Motor Co., Ltd. Multi-level navigation monitoring and control
US9753950B2 (en) 2013-03-15 2017-09-05 Pictometry International Corp. Virtual property reporting for automatic structure detection
US8704939B1 (en) * 2013-03-20 2014-04-22 Lg Electronics Inc. Mobile device and method for controlling the same
US8866953B2 (en) 2013-03-20 2014-10-21 Lg Electronics Inc. Mobile device and method for controlling the same
EP2976710A4 (en) 2013-03-20 2016-10-26 Lg Electronics Inc PORTABLE DEVICE AND METHOD FOR CONTROLLING THEREOF
US9699373B2 (en) * 2013-04-28 2017-07-04 Tencnt Technology (Shenzhen) Company Limited Providing navigation information to a point of interest on real-time street views using a mobile device
JP6485969B2 (ja) 2013-09-11 2019-03-20 アイバイ，インコーポレイテッド ビデオコンテンツの動的バインド
WO2015048375A1 (en) 2013-09-27 2015-04-02 Cinsay, Inc. N-level replication of supplemental content
US10701127B2 (en) 2013-09-27 2020-06-30 Aibuy, Inc. Apparatus and method for supporting relationships associated with content provisioning
DE102014219575A1 (de) * 2013-09-30 2015-07-23 Honda Motor Co., Ltd. Verbesserte 3-Dimensionale (3-D) Navigation
DE102014219567A1 (de) * 2013-09-30 2015-04-02 Honda Motor Co., Ltd. Dreidimensionale (3-d) navigation
JP2015095802A (ja) 2013-11-13 2015-05-18 ソニー株式会社 表示制御装置、表示制御方法、およびプログラム
ES2684643T3 (es) 2014-01-10 2018-10-03 Pictometry International Corp. Sistema y procedimiento de evaluación de estructura mediante aeronave no tripulada
US9292913B2 (en) 2014-01-31 2016-03-22 Pictometry International Corp. Augmented three dimensional point collection of vertical structures
WO2015120188A1 (en) 2014-02-08 2015-08-13 Pictometry International Corp. Method and system for displaying room interiors on a floor plan
KR101474521B1 (ko) * 2014-02-14 2014-12-22 주식회사 다음카카오 영상 데이터베이스 구축 방법 및 장치
DE102014208663A1 (de) * 2014-05-08 2015-11-12 Conti Temic Microelectronic Gmbh Vorrichtung und verfahren zur bereitstellung von informationsdaten zu einem in einem videobildstrom enthaltenen objekt einer fahrzeugumgebung
KR20160061154A (ko) * 2014-11-21 2016-05-31 엘지전자 주식회사 이동단말기 및 그 제어방법
US10402676B2 (en) 2016-02-15 2019-09-03 Pictometry International Corp. Automated system and methodology for feature extraction
US10671648B2 (en) 2016-02-22 2020-06-02 Eagle View Technologies, Inc. Integrated centralized property database systems and methods
US10620910B2 (en) 2016-12-23 2020-04-14 Realwear, Inc. Hands-free navigation of touch-based operating systems
US11099716B2 (en) 2016-12-23 2021-08-24 Realwear, Inc. Context based content navigation for wearable display
US11507216B2 (en) 2016-12-23 2022-11-22 Realwear, Inc. Customizing user interfaces of binary applications
US20180316877A1 (en) * 2017-05-01 2018-11-01 Sensormatic Electronics, LLC Video Display System for Video Surveillance
TWI687112B (zh) * 2018-01-29 2020-03-01 光禾感知科技股份有限公司 分散式室內定位系統及其方法
CN108520106B (zh) * 2018-03-19 2022-09-23 美国西北仪器公司 用于空间设计的方法和系统
US11604904B2 (en) 2018-03-19 2023-03-14 Northwest Instrument Inc. Method and system for space design
WO2019229887A1 (ja) * 2018-05-30 2019-12-05 マクセル株式会社 カメラ装置
CN110662015A (zh) * 2018-06-29 2020-01-07 北京京东尚科信息技术有限公司 用于显示图像的方法及装置
US11656090B2 (en) * 2018-10-08 2023-05-23 Here Global B.V. Method and system for generating navigation data for a geographical location
JP7203692B2 (ja) * 2019-06-12 2023-01-13 本田技研工業株式会社 情報処理装置、情報処理方法、及びプログラム
CN112995578B (zh) * 2019-12-02 2022-09-02 杭州海康威视数字技术股份有限公司 电子地图显示方法、装置、系统及电子设备
CN113052769B (zh) * 2020-11-08 2021-12-17 江苏中科能凯夫空调有限公司 基于尺寸辨别的自适应标签选择系统及方法

Family Cites Families (14)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US4315282A (en) * 1980-09-11 1982-02-09 Electronic Devices Incorporated Write and edit circuitry for electronic marking of displayed TV signal images
JPS58201016A (ja) 1982-05-19 1983-11-22 Alps Electric Co Ltd 電子式コ−ス誘導装置
NL8901695A (nl) 1989-07-04 1991-02-01 Koninkl Philips Electronics Nv Werkwijze voor het weergeven van navigatiegegevens voor een voertuig in een omgevingsbeeld van het voertuig, navigatiesysteem voor het uitvoeren van de werkwijze, alsmede voertuig voorzien van een navigatiesysteem.
US5289572A (en) * 1989-10-24 1994-02-22 Mitsubishi Denki Kabushiki Kaisha Electronic map combined with user service information
JPH03196372A (ja) * 1989-12-26 1991-08-27 Toshiba Corp 画像の位置合わせ装置
JPH05113343A (ja) 1991-10-22 1993-05-07 Pioneer Electron Corp ナビゲーシヨンシステム
JP3314195B2 (ja) * 1992-12-28 2002-08-12 ミノルタ株式会社 画像処理装置
US5467441A (en) * 1993-07-21 1995-11-14 Xerox Corporation Method for operating on objects in a first image using an object-based model data structure to produce a second contextual image having added, replaced or deleted objects
JP3498852B2 (ja) 1993-10-20 2004-02-23 富士写真光機株式会社 雲台情報表示用コントローラ
DE19521929A1 (de) * 1994-10-07 1996-04-11 Mannesmann Ag Einrichtung zur Zielführung von Personen
US5963664A (en) * 1995-06-22 1999-10-05 Sarnoff Corporation Method and system for image combination using a parallax-based technique
JPH0914976A (ja) 1995-06-29 1997-01-17 Matsushita Electric Ind Co Ltd 車載用ナビゲーションシステム
JPH0933277A (ja) 1995-07-18 1997-02-07 Matsushita Electric Ind Co Ltd 経路案内装置
JPH0933271A (ja) 1995-07-21 1997-02-07 Canon Inc ナビゲーション装置及び撮像装置

Cited By (25)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US7343268B2 (en) 2001-06-20 2008-03-11 Zenrin Co., Ltd. Three-dimensional electronic map data creation method
CN100345158C (zh) * 2001-07-12 2007-10-24 杜莱布斯公司 用于产生涉及几何失真的格式化信息的方法和系统
CN100371952C (zh) * 2003-04-21 2008-02-27 日本电气株式会社 识别视频图像对象及应用视频图像注释的设备和方法
US7728869B2 (en) 2005-06-14 2010-06-01 Lg Electronics Inc. Matching camera-photographed image with map data in portable terminal and travel route guidance method
US7826967B2 (en) 2005-06-14 2010-11-02 Lg Electronics Inc. Matching camera-photographed image with map data in portable terminal and travel route guidance method
CN100384220C (zh) * 2006-01-17 2008-04-23 东南大学 摄像机标定数据的采集方法及其标定板
CN101460810B (zh) * 2006-04-28 2012-10-31 诺基亚公司 校准
CN101426086B (zh) * 2007-11-02 2011-03-30 索尼株式会社 信息显示装置、方法、成像装置和图像数据发送方法
CN101726308B (zh) * 2008-10-15 2012-07-25 北京龙图通信息技术有限公司 一种生成导航电子地图路口实景诱导图的方法
CN102137183A (zh) * 2010-01-26 2011-07-27 株式会社泛泰 移动通信终端及方法
US11048941B2 (en) 2010-02-08 2021-06-29 Nikon Corporation Imaging device and information acquisition system in which an acquired image and associated information are held on a display
CN112565552A (zh) * 2010-02-08 2021-03-26 株式会社尼康 摄影装置、信息取得系统及程序
US10452914B2 (en) 2010-02-08 2019-10-22 Nikon Corporation Imaging device and information acquisition system in which an acquired image and associated information are held on a display
CN107404598B (zh) * 2010-02-08 2020-11-17 株式会社尼康 摄影装置、信息取得系统、程序及记录介质
US11741706B2 (en) 2010-02-08 2023-08-29 Nikon Corporation Imaging device and information acquisition system in which an acquired image and associated information are held on a display
US11455798B2 (en) 2010-02-08 2022-09-27 Nikon Corporation Imaging device and information acquisition system in which an acquired image and associated information are held on a display
CN107404598A (zh) * 2010-02-08 2017-11-28 株式会社尼康 摄影装置、信息取得系统、程序及记录介质
CN102884400A (zh) * 2010-05-14 2013-01-16 索尼公司 信息处理设备，信息处理系统和程序
CN102884400B (zh) * 2010-05-14 2016-08-24 索尼公司 信息处理设备，信息处理系统和程序
CN103185583A (zh) * 2011-12-30 2013-07-03 上海博泰悦臻电子设备制造有限公司 车辆位置分享方法、车辆位置分享系统
CN104145173A (zh) * 2012-03-02 2014-11-12 高通股份有限公司 用于定位的视觉ocr
CN103248869A (zh) * 2013-04-23 2013-08-14 大连汇新钛设备开发有限公司 水产养殖移动式水下摄录像系统
CN103248869B (zh) * 2013-04-23 2015-09-23 大连汇新钛设备开发有限公司 水产养殖移动式水下摄录像系统
CN110462343A (zh) * 2017-04-03 2019-11-15 罗伯特·博世有限公司 基于地图的用于车辆的自动图像标记
CN110462343B (zh) * 2017-04-03 2023-08-18 罗伯特·博世有限公司 使用自动标记的图像来对车辆进行导航的方法和系统

Also Published As

Publication number Publication date
US6222583B1 (en) 2001-04-24
EP0867690B1 (en) 2003-10-15
EP0867690A1 (en) 1998-09-30
DE69818889D1 (de) 2003-11-20
DE69818889T2 (de) 2004-09-09
EP1306648A3 (en) 2004-05-19
EP1306648A2 (en) 2003-05-02
CN1163760C (zh) 2004-08-25

Similar Documents

Publication Publication Date Title
CN1163760C (zh) 标定观测图象的装置和系统
JP4284644B2 (ja) ３次元モデル構築システム及び３次元モデル構築プログラム
EP2737279B1 (en) Variable density depthmap
CN107505644A (zh) 基于车载多传感器融合的三维高精度地图生成系统及方法
JP3225882B2 (ja) 景観ラベリングシステム
WO2007038736A2 (en) System and method for correlating captured images with their site locations on maps
KR100484941B1 (ko) 영상정보를 이용한 지리정보 구축 및 브라우징 시스템과그 방법
JP2009511965A (ja) 強化地図を生成する方法
CN109961522A (zh) 图像投射方法、装置、设备和存储介质
JPH1165431A (ja) 景観ラベル付カーナビゲーション装置およびシステム
CN111932627B (zh) 一种标识物绘制方法及系统
WO2019138597A1 (en) System and method for assigning semantic label to three-dimensional point of point cloud
KR20200110120A (ko) 3d-vr 멀티센서 시스템 기반의 도로 시설물 관리 솔루션을 구현하는 시스템 및 그 방법
Chen et al. Geographical data acquisition
EP1052599A2 (en) Formation of orthogonally projected image from centrally projected image
US20030154021A1 (en) Method for obtaining a map representation, and a navigation device
JP3156646B2 (ja) 検索型景観ラベリング装置およびシステム
CN108664639A (zh) 一种含经纬度信息照片在地理信息系统中展示的方法
JP5262232B2 (ja) 画像上方位表示方法及び装置並びに写真
JPH1186034A (ja) 景観ラベル付ヒューマンナビゲーション装置およびシステム
JP3156645B2 (ja) 情報発信型景観ラベリング装置およびシステム
JP3053172B2 (ja) 距離参照型景観ラベリング装置およびシステム
CN103335645B (zh) 面向景观规划的空间精确定位的图像获取方法
Adler Geographical information in delimitation, demarcation, and management of international land boundaries
JP2010033017A (ja) 地図表示装置

Legal Events

Date Code Title Description
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
C06 Publication
PB01 Publication
C14 Grant of patent or utility model
GR01 Patent grant
C17 Cessation of patent right
CF01 Termination of patent right due to non-payment of annual fee

Granted publication date: 20040825