CN101243300A - 图像显示装置和图像生成装置 - Google Patents

图像显示装置和图像生成装置 Download PDF

Info

Publication number
CN101243300A
CN101243300A CNA2006800294210A CN200680029421A CN101243300A CN 101243300 A CN101243300 A CN 101243300A CN A2006800294210 A CNA2006800294210 A CN A2006800294210A CN 200680029421 A CN200680029421 A CN 200680029421A CN 101243300 A CN101243300 A CN 101243300A
Authority
CN
China
Prior art keywords
image
video generation
map
request
display device
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CNA2006800294210A
Other languages
English (en)
Inventor
饭阪笃
西村健二
森敏昭
山本章裕
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Panasonic Holdings Corp
Original Assignee
Matsushita Electric Industrial Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Matsushita Electric Industrial Co Ltd filed Critical Matsushita Electric Industrial Co Ltd
Publication of CN101243300A publication Critical patent/CN101243300A/zh
Pending legal-status Critical Current

Links

Images

Classifications

    • GPHYSICS
    • G01MEASURING; TESTING
    • G01CMEASURING DISTANCES, LEVELS OR BEARINGS; SURVEYING; NAVIGATION; GYROSCOPIC INSTRUMENTS; PHOTOGRAMMETRY OR VIDEOGRAMMETRY
    • G01C21/00Navigation; Navigational instruments not provided for in groups G01C1/00 - G01C19/00
    • G01C21/26Navigation; Navigational instruments not provided for in groups G01C1/00 - G01C19/00 specially adapted for navigation in a road network
    • G01C21/34Route searching; Route guidance
    • G01C21/36Input/output arrangements for on-board computers
    • G01C21/3626Details of the output of route guidance instructions
    • G01C21/3647Guidance involving output of stored or live camera images or video streams
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00Television systems
    • H04N7/18Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast
    • H04N7/183Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast for receiving images from a single remote source
    • GPHYSICS
    • G08SIGNALLING
    • G08GTRAFFIC CONTROL SYSTEMS
    • G08G1/00Traffic control systems for road vehicles
    • G08G1/09Arrangements for giving variable traffic instructions
    • G08G1/0962Arrangements for giving variable traffic instructions having an indicator mounted inside the vehicle, e.g. giving voice messages
    • G08G1/0968Systems involving transmission of navigation instructions to the vehicle
    • G08G1/0969Systems involving transmission of navigation instructions to the vehicle having a display in the form of a map

Abstract

本发明提供一种显示和生成易于移动中的用户直观地把握的地图图像的图像显示装置和图像生成装置。图像提供系统中,图像生成装置(2)与外部的摄像装置(1)可通信地相连接,图像显示装置(3)与图像生成装置(2)可通信地相连接。图像显示装置(3)中,显示部(34)显示搭载了自身的移动体周围的第一地图图像。通信部(35)发送被显示的第一地图图像的视点角度和视线方向,由此向图像生成装置(2)请求视点变换图像。图像生成装置(2)中,中央处理部(33)响应通信部(35)的请求,生成使从摄像装置(1)得到的摄像图像的视点角度和视线方向、与第一地图图像的视点角度和视线方向相一致的视点变换图像。通信部(35)将由中央处理部(33)生成的视点变换图像传送给图像显示装置。图像显示装置(3)的显示部(34)显示视点变换图像被重叠的第二地图图像。

Description

图像显示装置和图像生成装置
技术领域
本发明涉及一种显示及生成由摄像装置取得的拍摄图像被重叠的地图图像的图像显示装置和图像生成装置。
背景技术
作为现有的地图显示装置有如下的装置。现有的地图显示装置,通过交通管制网络,与设置在各交通信号机的摄像装置可通信地相连接。各交通信号机分别在交叉路口的东侧、西侧、南侧以及北侧各设置一个。设置在东侧交通信号机的摄像装置对与自身相对的道路,即从西方向进入交叉路口的道路的状况进行摄像,并将由此得到的图像通过交通管制网络发送给地图显示装置。另外,西侧、南侧以及北侧的摄像装置也分别把表示与自身相对的道路,即从东侧、北侧以及南侧进入交叉路口的道路状况的图像,通过交通管制网络发送给地图显示装置。
地图显示装置包括印有交叉路口的地图形信息显示板、和分别分配在东西南北四个方向的四个监视器。东侧用监视器隐藏在印在地图图形信息显示板的交叉路口的东侧部分。西侧用、南侧用以及北侧用监测器分别隐藏在印在地图图形信息显示板的交叉路口的西侧部分、南侧部分以及北侧部分。
地图显示装置,利用西侧的摄像装置取得表示交叉路口东侧的道路的图像,并向左方向(逆时针方向)旋转后,再将旋转后的图像显示于东侧用的监视器。同样,西侧用监视器显示江表示交叉路口西侧的道路状况的图像向右方向(顺时针方向)旋转的图像。而且南侧用监视器显示将表示交叉路口南侧的道路状况的图像上下翻转(1 80度旋转)的图像。而且北侧用监视器显示表示交叉路口北侧的道路状况的图像。
通过上述的处理,地图形信息显示板上显示如从正上方看到的交叉路口周围的图像。据此,监控者能够直观地把握交叉路口的状态。
专利文献1:日本特开平11-161888号公报
在所述地图图形信息显示板显示的图像的视点,就是摄像装置的视点,即摄像机的视点原样。对此,在地图形信息显示板上描绘的交叉路口,即道路地图的视点设定在交叉路口的正上方。也就是说,两个视点互不相同。如果在交通管制中心内等静止的空间看这样的地图图形显示板的内容,监控者就可容易地把握。
但是,问题是例如是在车内等移动空间。由于图像和道路地图的视点互不相同,所以驾驶员很难直观地把握地图形信息显示板的显示内容。
因此本发明的目的在于提供一种显示及生成易于移动中用户直观地把握的地图图像的显示装置及生成装置。
发明内容
为了达成上述目的,本发明的第一技术方案是,通过通信网络与设置在外部的至少一个摄像装置及图像生成装置相连接、且至少可以显示两种地图图像的图像显示装置。图像显示装置包括:第一显示部,显示搭载了图像显示装置的移动体周围的第一地图图像;请求发送部,至少将在第一显示部显示的第一地图图像的视点角度和视线方向发送给图像生成装置,由此向图像生成装置请求视点变换图像。在此,图像生成装置响应来自请求发送部的请求,从摄像装置取得摄像图像后,生成使所取得的摄像图像的视点角度和视线方向,与通过请求发送部发送过来的视点角度和视线方向相一致的视点变换图像,并提供给图像显示装置。图像显示装置还包括第二显示部,显示图像生成装置所提供的视点变换图像被重叠的第二地图图像。
图像显示装置中,请求发送部还将移动体的前进方向发送给图像生成装置。此时,图像生成装置响应来自请求发送部的请求,从摄像装置取得摄像图像,并根据从请求发送部传送来的前进方向,生成将所取得的摄像图像的一部分切出的中间图像,且利用所生成的中间图像生成视点变换图像,并提供给图像显示装置。
图像生成装置通过通信网络与相互设置在不同地方的多个摄像装置相连接。此时,图像显示装置中,请求发送部还将任一摄像装置的设置地点发送给图像生成装置,由此向图像生成装置请求该设置地点的视点变换图像。图像生成装置响应来自请求发送部的请求,从设置在所请求的设置地点的摄像装置取得摄像图像,生成视点变换图像并提供给图像显示装置。图像显示装置中,第二显示部显示请求发送部所请求的设置地点的视点变换图像被重叠的第二地图图像。
第二地图图像中,视点变换图像在相当于摄像装置的设置地点的位置和设置地点的周围及相当于被摄像装置拍摄到的地点的位置被重叠。
本发明的第二技术方案是,通过通信网络与设置在外部的至少一个摄像装置及图像生成装置相连接、且至少可以显示两种地图图像的图像显示装置。图像显示装置包括:第一生成部,生成搭载了图像显示装置的移动体周围的第一地图图像;第一显示部,显示由第一生成部生成的第一地图图像;请求发送部,将在第一显示部显示的第一地图图像的视点角度和视线方向发送给图像生成装置,由此向图像生成装置请求视点变换图像。在此,图像生成装置响应来自请求发送部的请求,从摄像装置取得摄像图像后,使所得到的摄像图像的视点角度和视线方向、与由请求发送部发送的视点角度和视线方向相一致而生成视点变换图像,并提供给图像显示装置。图像显示装置还包括:第二生成部,生成图像生成装置所提供的视点变换图像被重叠的第二地图图像;第二显示部,显示由第二生成部生成的第二地图图像。
图像显示装置中,请求发送部还将移动体的前进方向发送给图像生成装置。图像生成装置响应来自请求发送部的请求,从摄像装置取得摄像图像,并根据从请求发送部传送来的前进方向,生成将所取得的摄像图像的一部分切出的中间图像,而且利用所生成的中间图像生成视点变换图像,并提供给图像显示装置。
图像生成装置,通过通信网络与相互设置在不同地点的多个摄像装置相连接。此时,图像显示装置中,请求发送部还将各个摄像装置的设置地点发送给图像生成装置,由此向图像生成装置请求该设置地点的视点变换图像。图像生成装置响应来自请求发送部的请求,从设置在所请求的设置地点的摄像装置取得摄像图像,生成视点变换图像并提供给图像显示装置。图像显示装置中,第二显示部显示请求发送部所请求的设置地点的视点变换图像被重叠的第二地图图像。
第二生成部通过将图像生成装置所提供的视点变换图像在相当于摄像装置的设置地点的位置和设置地点的周围及相当于被摄像装置拍摄到的地点的位置进行重叠,从而生成第二地图图像。
本发明的第三技术方案是图像提供系统。图像提供系统包括:图像生成装置,与设置在外部的至少一个摄像装置可通信地相连接;图像显示装置,与图像生成装置可通信地相连接,且至少可以显示两种地图图像。其中,图像显示装置包括:第一显示部,显示搭载了图像显示装置的移动体周围的第一地图图像;请求发送部,通过将由第一显示部显示的第一地图图像的视点角度和视线方向发送给图像生成装置,由此向图像生成装置请求视点变换图像。另外,图像生成装置包括:图像取得部,响应来自请求发送部的请求,从摄像装置取得摄像图像;视点变换处理部,生成使从拍摄装置取得的摄像图像的视点角度和视线方向、与第一地图图像的视点角度和视线方向相一致的视点变换图像;发送部,将由视点变换处理部生成的视点变换图像发送给图像显示装置。图像显示装置还包含第二显示部,该第二显示部显示图像生成装置所提供的视点变换图像被重叠的第二地图图像。
本发明的第四技术方案是,通过通信网络与相互设置在外部的至少一个摄像装置及图像显示装置相连接、且至少可以生成两种地图图像的图像生成装置。图像生成装置包括:第一生成部,生成表示外部移动体周围的第一地图图像;视点变换处理部,响应从移动体发出来的请求,利用摄像装置取得摄像图像后,生成使所得到的的视点角度和视线方向、与第一地图图像的视点角度和视线方向相一致的视点变换图像;第二生成部,生成由视点变换处理部生成的视点变换图像被重叠的第二地图图像;发送部,将第二生成部所生成的第二地图图像发送给移动体。
本发明的效果,根据上述的各技术方案,第二地图图像中,由于视点变换图像的方向及视点角度与第一地图图像自身的方向及视点角度之间的调整被确定,因此移动空间内的用户观察第二地图图像时,能够直观地把握被重叠于其上的视点变换图像的内容。
附图说明
图1是表示本发明的第一实施方式涉及的图像提供系统的整体构成的模块图。
图2是表示图1所示的图像生成装置2的详细构成的模块图。
图3是表示图1所示的图像显示装置3的详细构成的模块图。
图4是表示图1所示的图像生成装置2及图像显示装置3的各自处理顺序的流程图。
图5是例示出由图4所示的步骤S12显示的第一地图图像的模式图。
图6是例示出由图4所示的步骤S14显示的检修测试点地图图像的模式图。
图7是例示出由图4所示的步骤S16所生成的视点变换图像请求的数据结构的模式图。
图8是例示出由图4所示的步骤S18所生成的第二地图图像的模式图。
图9是表示由图4所示的步骤S18所生成的第二地图图像的代替例的模式图。
图10是表示由图4所示的步骤18所生成的第二地图图像的代替例的模式图。
图11是例示出由图4所示的步骤S14所表示的检修测试点地图图像的模式图。
符号标记
1摄像装置
2图像生成装置
3图像显示装置
4通信网络
21、35通信部
22、32存储装置
23、33中央处理部
31输入装置
34显示部
具体实施方式
图1是本发明的第一实施方式涉及的图像提供系统的整体构成的模块图。在图1中,图像提供系统通过通信网络4与至少一个摄像装置1、图像生成装置2以及图像显示装置3可通信地相连接。
摄像装置1设置在实际中的道路周围,且由自身的摄像机视点拍摄道路的情况,并把得到的摄像图像发送给通信网络4。以下对摄像装置1的设置例进行说明。在图1的例中,图像装置1设置在道路的中央线的上方,且向此道路的上侧及下侧的两道行车线设置的。此时,摄像装置1由自身的摄像机视点对所述道路的两道行车线的情况进行拍摄,并把拍摄到的摄像图像发送给通信网络4。
图像生成装置2,例如,通信网络4上的服务器装置,向图像显示装置3提供视点变换图像。对视点变换图像的详细内容在后面具体说明。
在此,图2是表示图1所示的图像生成装置2的详细构成的模块图。在图2中,图像生成装置2包括通信部21、存储装置22以及中央处理部23。
通信部21将通过通信网络4传送来的各种数据转送给中央处理部23,并将从中央处理部23接收到的各种数据传送给通信网络4。存储装置22,如图2所示,存储数据库,该数据库用于对通信网络4上的各摄像装置1至少管理视点角度、视线方向、设置位置、摄像位置以及识别信息。其中,视点角度是摄像装置1的光轴对道路路面的角度,视线方向是摄像装置1在水平面内的视线方向(相当于方位),摄像位置是关于利用摄像装置1所拍摄到的道路区域的位置信息。
中央处理部23,典型的包含CPU、ROM以及RAM。CPU利用作为工作区的RAM,执行预先存储在ROM中的计算机程序。对中央处理器23的具体的处理方式,将在后面参照流程图进行说明。
图像显示装置3,典型的是设置在作为移动空间的车中的信息终端装置或导航装置,作为特征性的处理,有:对图像生成装置2请求视点变换图像;将从图像生成装置2传送来的视点变换图像合成(重叠)并显示在地图图像上。
在此,图3是表示图1所示的图像显示装置3的详细构成的模块图。在图3中,图像显示装置3包括输入装置31、存储装置32、中央处理部33、显示部34以及通信部35。
输入装置31,如示例的,是由图像显示装置3的用户操作的触摸屏或按钮。
存储装置32,如图3所示,存储地点数据库,该地点数据库是指可特定图像生成装置2可提供视点变换图像的地点(以下称作可提供地点)的信息汇集。存储装置32还储存表示如日本全国那样规定范围的地图的地图数据库。地图数据将在显示部34显示的地图的视点角度向上下方向和/或左右方向可变更地被构成。而且,地图数据库还被构成为对显示部34的画面(以下称作显示画面)的地图的方向(上北(north-up)及向前进方向(headiong-up))可变更。
中央处理部33,典型的包含CPU、ROM以及RAM。CPU利用作为工作区的RAM,执行预先存储在ROM中的计算机程序。对中央处理器33的具体的处理方式,将在后面参照流程图进行说明。
显示部34显示在中央处理部33作成的各种图像。
通信部35,将通过通信网络4传送来的各种数据转送给中央处理部33,并把从中央处理部33接收到的各种数据传送给通信网络4。
下面参照图4的流程图,对上面的图像生成装置2和图像显示装置3的详细的处理方式进行说明。
首先,在图像显示装置3中,中央处理部33生成第一地图图像(图4;步骤S11)。具体而言,中央处理部33利用未图示的GPS接收机和自律航法传感器的输出,导出设有图像显示装置3的车辆的目前位置后,从存储装置32的地图数据库读出表示目前位置周围的地图数据。中央处理部33利用读出的地图数据生成第一地图图像。其中,被生成的第一地图图像的方向和视点角度,通过用户操作输入装置31来设定,或着是预先定好的。
如上生成的基本地图数据,从中央处理部33传送到显示部34,而显示部34将如图5所示的第一地图图像显示在显示画面上(步骤S12)。而且,第一地图图像中,通过周知的路径检索处理而导出的路径也可以被合成。
在此,想把视点变换图像显示在显示部34时,用户如预定的那样操作输入装置31。则输入装置31将视点变换图像的显示请求传给中央处理部33。中央处理部33一旦接收到这种视点变换图像的显示请求(步骤S13),则生成在可提供地点合成有规定的记号(以下称作可提供地点记号)的检修测试点地图(参照图6)(步骤S14)。在图6中,用●表示了可提供地点记号,这是希望让用户容易知道摄像机图像被提供了,也可以是包含例如摄像机记号或摄像机插图的图标。而由于道路上设有多个摄像机,能得到的道路图像的区域连续时,也可如图11所示,显示成可提供区域。而且,可以在显示检修测试点地图的时刻,将地图的方向设成上为北。这是因为,以前进方向行进时,在请求视点变换图像的时刻和接收到的时刻,地图的方向可能发生了一些变化,或者每次地图的方向(车的朝向方位)改变时,视点变换图像的方向也要改变。
对步骤S14的处理具体地进行说明,首先,与上述相同,读出表示目前位置周围的地图数据。中央处理器33还从地图数据库读出被包含在地图数据覆盖范围内的可提供地点信息。中央处理器33在读出的地图数据所表示的地图中,在由读出的可提供地点信息特定位置合成可提供地点记号,从而生成检修测试点地图。
以上的检修测试点地图(参照图6),从中央处理部33传送给显示部34,并通过显示部34显示出来(步骤S14)。
还有,步骤S14中,由读出的可提供地点信息被特定的全体可提供地点可以以列表(list)形式表示。且若步骤S13判断为NO,则处理返回到步骤S11。
当检修测试点地图被显示时,用户通过操作输入装置31来指定自己希望的可提供地点。由此,被指定的可提供地点信息被传给中央处理器33(步骤S15)。
其次,中央处理部33生成用于图像显示装置3对图像生成装置2请求视点变换图像的信息(以下称作视点变换图像请求)(步骤S16)。在此,视点变换图像请求,如图7所示,包括由通信网络4上特定图像生成装置2和图像显示装置3各自的识别信息,还包含当前被设定的表示地图方向和视点角度的信息、和由步骤S15得到的可提供地点信息。
这样生成的视点变换图像请求通过通信部35,传送给通信网络4(步骤S16),并在通信网络4上被传送,被图像生成装置2的通信部21所接收(图4的程序SQ1)。
在图像生成装置2中,若中央处理部23接收了来自通信部21的视点变换图像请求(步骤S21),则生成摄像图像请求(步骤S22),该摄像图像请求是用于对设置在包含于所述视点变换图像请求的可提供地点的摄像装置1、请求摄像图像的。而且,中央处理部23也可以将接收到的可提供地点当作摄像位置来识别,并生成用于请求摄像图像的摄像图像请求。
对步骤S22的处理具体地进行说明,中央处理部23从存储装置22内的数据库(参照图2)取出摄像装置1的识别信息,该摄像装置1存在于与包含在所接收到的视点变换图像请求中的可提供地点信息相一致的设置位置。中央处理部23生成包含所取出的识别信息的摄像图像请求。
这样生成的摄像图像请求,通过通信部21传送给通信网络4(步骤S22),且被包含在该摄像图像请求中的识别信息由被分配的摄像装置1接收(图4的程序SQ2)。摄像装置1响应接收到的摄像图像请求,生成如上所述的摄像图像,并返回给图像生成装置2(程序SQ3)。
在图像生成装置2中,中央处理部23通过通信部21,接收到摄像图像时(步骤S23),进行摄像图像的视点变换处理(步骤S24)。
对步骤S24的处理具体地进行说明,中央处理部23从存储装置22内的数据库(参照图2)取出本次接收到的摄像图像的发送源即摄像装置1的视点角度和视线方向。由于取出的视点角度与已在图像显示装置2中当前设定的地图的视点角度不同,因此中央处理部23使本次的摄像图像的视点角度与地图的视点角度相一致。中央处理部23还使根据取出的视线方向被特定的视点变换结束的摄像图像的方向与目前的地图方向相一致,从而生成视点变换图像。
这样生成的视点变换图像,通过通信部21传送给通信网络4(步骤S24),并被视点变换图像请求的发送源即图像显示装置3的通信部35所接收。(图4的程序SQ4)。
在图像显示装置3中,中央处理装置33通过通信部35接收了视点变换图像时(步骤S17),生成合成了视点变换图像的第二地图图像(步骤S18)。
对步骤S18的处理具体地进行说明,中央处理部33从存储装置32的地图数数库读取表示在步骤S15指定的地点周围的地图数据。中央处理部33在读取的地图数据表示的地图图像中的指定可提供地点上,合成本次接收的视点变换图像,从而生成如图8所示的第二地图图像。
另外,在图8的例中,视点变换图像被合成在可指定提供的地点上,但也可以被重叠在摄像装置1的设置地点的周围、相当于通过摄像装置拍摄到的地点的位置。如图9所示,视点变换图像也可以被合成为使用户识别与可指定提供地点的关联性。而且,图像显示装置3也可以构成为、是生成图8所示的第二地图图像、还是生成图9所示的第二地图图像,通过用户操作输入装置31而可变更的。
而且,如图10所示,可以在视点变换图像的两端设置三角按钮,通过按此三角按钮来移动显示在视点变换图像上的道路的位置。
这样生成的第二地图图像,从中央处理部33传送给显示部34,而显示部34将接收到的第二地图图像显示在显示画面上(步骤S19)。这种第二地图图像中,由于视点变换图像的方向和视点角度与地图图像自身的方向即视点角度间的调整被确定,因此移动空间内的用户能够直观地把握视点变换图像的内容。
还有,在本实施方式中,生成了反映道路的两道行车线的视点变换图像。但是不限于此,也可以是,通过图像显示装置3将车辆的前进方向发送给图像生成装置2,从而图像生成装置2能够识别车辆的前进方向,因此生成只反映有车辆行驶的行车线的中间图像后,生成如上所述的视点变换图像,并提供给图像显示装置3。由此,图像生成装置2可以根据车辆的前进方向,将视点变换图像的覆盖范围被改变了的视点变换图像提供给图像显示装置3。这时,图像显示装置3生成并显示只反映车辆的行驶车线的视点变换图像被重叠的第二地图图像。由此,用户可以不用观察对面行车线的情况,而且更直观地把握自己很关心的行车线的状况。
而且,步骤S19之后,处理也可返回到步骤S11,但是步骤S19之后用户可以通过执行步骤S14来指定其它的可提供地点,且图像显示装置3可以取得反映其它地点的视点变换图像。由此,用户可以观察另外的第二地图图像。
而且,在本实施方式中,还对第一及第二地图图像在图像显示装置3侧被生成的例进行了说明,但不限于此,第一及第二地图图像也可以在图像生成装置2侧被生成。此时,图像显示装置3需要将生成第一及第二地图图像时需要的信息传送给图像生成装置2。并且,图像显示装置3可以直接与摄像装置1进行通信时,本实施方式中也可以将由图像生成装置2进行的视点变换处理、由图像显示装置3侧进行。而且用户对预先设定的地点和设定路线上的特定地点(传到互联网上的交通堵塞多发生的交叉路口和测试点(ポイント)),通过图像生成装置2和图像显示装置3来自动地监控动画,并通过图像处理进行交通流量计测,从而在发生交通堵塞或解除交通堵塞等的交通状况有变化等时候,能够自动地显示此地点的图像。而且,自动监控动画的测试点可以在设定的路线之上依次改变的同时检索发生交通堵塞的地点,也可以对与堵塞信息不一致的测试点显示图像,该堵塞信息是通过从FM多路广播或道路上的发送机发送的交通信息系统(VICS(Vehicle Information and Communication System))等而得到的。
产业上的可用性
本发明中的图像显示装置,有用于请求移动中的用户直观地把握地图图像的车载的信息终端装置和导航装置等。而本发明中的图像生成装置,有用于通过通信网络与如上所述的信息终端装置和导航装置等相连接的服务器等。

Claims (10)

1、一种图像显示装置,通过通信网络与设置在外部的至少一个摄像装置及图像生成装置相连接、且至少可以显示两种地图图像,
所述图像显示装置,包括:
第一显示部,显示搭载了所述图像显示装置的移动体周围的第一地图图像;
请求发送部,通过至少将在所述第一显示部显示的第一地图图像的视点角度和视线方向发送给所述图像生成装置,向所述图像生成装置请求视点变换图像,
所述图像生成装置,响应来自所述请求发送部的请求,从所述摄像装置取得摄像图像后,生成使所取得的摄像图像的视点角度和视线方向、与由所述请求发送部发送的视点角度和视线方向相一致的视点变换图像,并提供给所述图像显示装置,
所述图像显示装置,还包括:第二显示部,显示由所述图像生成装置提供的视点变换图像被重叠的第二地图图像。
2、如权利请求1所述的图像显示装置,
所述图像显示装置中,所述请求发送部还将所述移动体的前进方向发送给所述图像生成装置,
所述图像生成装置,响应来自请求发送部的请求,从所述摄像装置取得摄像图像,并根据从所述请求发送部发送来的前进方向,生成所取得的摄像图像的一部分被切出的中间图像,并且,利用所生成的中间图像生成视点变换图像,并提供给所述图像显示装置。
3、如权利请求1所述的图像显示装置,
所述图像生成装置通过所述通信网络与相互设置在不同地点的多个摄像装置相连接,
所示图像显示装置中,所述请求发送部还将任一摄像装置的设置地点发送给所述图像生成装置,由此向所述图像生成装置请求该设置地点的视点变换图像,
所述图像生成装置,响应来自所述请求发送部的请求,从被设置在所请求的设置地点的摄像装置取得摄像图像,生成视点变换图像并提供给所述图像显示装置,
所述图像显示装置中,所述第二显示部显示所述请求发送部所请求的设置地点的视点变换图像被重叠的第二地图图像。
4、如权利请求1所述的图像显示装置,
所述第二地图图像中,视点变换图像在相当于所述摄像装置的设置地点的位置和设置地点的周围及相当于被摄像装置拍摄到的地点的位置被重叠。
5、一种图像显示装置,通过通信网络与设置在外部的至少一个摄像装置及图像生成装置相连接、且至少可以显示两种地图图像,
所述图像显示装置,包括:
第一生成部,生成搭载了所述图像显示装置的移动体周围的第一地图图像;
第一显示部,显示由所述第一生成部生成的第一地图图像;
请求发送部,将在所述第一显示部显示的第一地图图像的视点角度和视线方向发送给所述图像生成装置,由此向所述图像生成装置请求视点变换图像,
所述图像生成装置,响应来自所述请求发送部的请求,从所述摄像装置取得摄像图像后,生成使所取得的摄像图像的视点角度和视线方向、与所述第一地图图像的视点角度和视线方向相一致的视点变换图像,并提供给所述图像显示装置,
所述图像显示装置,还包括:
第二生成部,生成所述图像生成装置所提供的视点变换图像被重叠的第二地图图像;
第二显示部,显示由所述第二生成部生成的第二地图图像。
6、如权利请求5所述的图像显示装置,
所述图像显示装置中,所述请求发送部还将所述移动体的前进方向发送给所述图像生成装置,
所述图像生成装置,
响应来自所述请求发送部的请求,从所述摄像装置取得摄像图像,并根据从所述请求发送部发送来的前进方向,生成所取得的摄像图像的一部分被切出的中间图像,并且,利用所生成的中间图像生成视点变换图像,并提供给所述地图图像显示装置。
7、如权利请求5所述的图像显示装置,
所述图像生成装置,通过通信网络与相互设置在不同地点的多个摄像装置相连接,
所述图像显示装置中,所述请求发送部还将任一摄像装置的设置地点发送给所述图像生成装置,由此向所述图像生成装置请求该设置地点的视点变换图像,
所述图像生成装置,响应来自所述请求发送部的请求,从设置在所请求的设置地点的摄像装置取得摄像图像,生成视点变换图像并提供给所述地图图像显示装置,
所述图像显示装置中,所述第二显示部显示所述请求发送部所请求的设置地点的视点变换图像被重叠的第二地图图像。
8、如权利请求5所述的图像显示装置,所述第二生成部将所述图像生成装置所提供的视点变换图像在相当于所述摄像装置的设置地点的位置和设置地点的周围及相当于被摄像装置拍摄到的地点的位置进行重叠,从而生成第二地图图像。
9、一种图像提供系统,所述系统包括:图像生成装置,与设置在外部的至少一个摄像装置可通信地相连接;及
图像显示装置,与所述图像生成装置可通信地相连接,且至少可以显示两种地图图像,
所述图像显示装置,包含:第一显示部,显示搭载了所述图像显示装置的移动体周围的第一地图图像;及
请求发送部,将由所述第一显示部显示的第一地图图像的视点角度和视线方向发送给所述图像生成装置,由此向所述图像生成装置请求视点变换图像,
所述图像生成装置,包含:图像取得部,响应来自所述请求发送部的请求,从所述摄像装置取得摄像图像;
视点变换处理部,生成视点变换图像,该视点变换图像是使由所述图像取得部取得的摄像图像的视点角度和视线方向、与所述第一地图图像的视点角度和视线方向相一致而得到的;及
发送部,将由所述视点变换处理部生成的视点变换图像发送给所述图像显示装置,
所述图像显示装置,还包含第二显示部,显示图像生成装置所提供的视点变换图像被重叠的第二地图图像。
10、一种图像生成装置,通过通信网络与设置在外部的至少一个摄像装置相连接、且至少可以生成两种地图图像,
所述图像生成装置,包括:第一生成部,生成表示外部的移动体周围地图的第一地图图像;
视点变换处理部,响应从所述移动体发出的请求,从所述摄像装置取得摄像图像后,使所取得的摄像图像的视点角度和视线方向、与所述第一地图图像的视点角度和视线方向相一致而生成视点变换图像;
第二生成部,生成由视点变换处理部生成的视点变换图像被重叠的第二地图图像;
发送部,将由所述第二生成部生成的第二地图图像向所述移动体发送。
CNA2006800294210A 2005-09-02 2006-08-31 图像显示装置和图像生成装置 Pending CN101243300A (zh)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
JP2005254787A JP4207941B2 (ja) 2005-09-02 2005-09-02 画像表示装置及び画像生成装置
JP254787/2005 2005-09-02

Publications (1)

Publication Number Publication Date
CN101243300A true CN101243300A (zh) 2008-08-13

Family

ID=37808922

Family Applications (1)

Application Number Title Priority Date Filing Date
CNA2006800294210A Pending CN101243300A (zh) 2005-09-02 2006-08-31 图像显示装置和图像生成装置

Country Status (5)

Country Link
US (1) US20090256906A1 (zh)
EP (1) EP1921419A4 (zh)
JP (1) JP4207941B2 (zh)
CN (1) CN101243300A (zh)
WO (1) WO2007026839A1 (zh)

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN104919518A (zh) * 2013-01-24 2015-09-16 索尼公司 图像显示设备、图像显示方法与图像显示系统
CN106157312A (zh) * 2016-07-05 2016-11-23 董超超 一种通过斑块特征配准的图像显示装置
CN106204585A (zh) * 2016-07-05 2016-12-07 董超超 一种通过斑块特征配准的图像生成装置

Families Citing this family (15)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP5022134B2 (ja) * 2007-07-31 2012-09-12 三菱重工業株式会社 交通状態表示装置
JP5281421B2 (ja) * 2009-01-23 2013-09-04 アルパイン株式会社 車載システム
JP5402322B2 (ja) 2009-07-02 2014-01-29 ソニー株式会社 情報処理装置および情報処理方法
JP5792424B2 (ja) 2009-07-03 2015-10-14 ソニー株式会社 地図情報表示装置、地図情報表示方法およびプログラム
US9122701B2 (en) * 2010-05-13 2015-09-01 Rovi Guides, Inc. Systems and methods for providing media content listings according to points of interest
US8825392B2 (en) 2011-06-30 2014-09-02 Navteq B.V. Map view
US20130162665A1 (en) * 2011-12-21 2013-06-27 James D. Lynch Image view in mapping
US9256961B2 (en) 2012-06-28 2016-02-09 Here Global B.V. Alternate viewpoint image enhancement
US9256983B2 (en) 2012-06-28 2016-02-09 Here Global B.V. On demand image overlay
KR20140054909A (ko) * 2012-10-30 2014-05-09 팅크웨어(주) 광각 렌즈 카메라 영상을 이용한 내비게이션 안내 장치 및 방법
US9851299B2 (en) 2014-10-25 2017-12-26 Isle Management Co. Method of analyzing air quality
CN108062864A (zh) * 2016-11-09 2018-05-22 奥迪股份公司 一种用于车辆的交通场景可视化系统和方法及车辆
US10527449B2 (en) * 2017-04-10 2020-01-07 Microsoft Technology Licensing, Llc Using major route decision points to select traffic cameras for display
JP6828587B2 (ja) * 2017-05-22 2021-02-10 トヨタ自動車株式会社 画像処理システム、画像処理方法、情報処理装置及び記録媒体
JP2019079475A (ja) * 2017-10-27 2019-05-23 大日本印刷株式会社 画像再生システム及び画像再生方法

Family Cites Families (14)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH0935177A (ja) * 1995-07-18 1997-02-07 Hitachi Ltd 運転支援方法および運転支援装置
JP3521180B2 (ja) 1997-11-28 2004-04-19 株式会社日立国際電気 交通要所監視用itvシステムの表示方法及び装置
JP4486175B2 (ja) * 1999-01-29 2010-06-23 株式会社日立製作所 立体地図表示装置および方法
JP3831548B2 (ja) * 1999-06-16 2006-10-11 ペンタックス株式会社 写真測量画像処理装置、写真測量画像処理方法、および写真測量画像処理プログラムを格納した記憶媒体
JP2002310687A (ja) * 2001-04-17 2002-10-23 Denso Corp ナビゲーション装置、および、プログラム
US7411594B2 (en) * 2002-01-15 2008-08-12 Canon Kabushiki Kaisha Information processing apparatus and method
JP4078080B2 (ja) * 2002-01-15 2008-04-23 キヤノン株式会社 情報処理装置および方法
JP3877204B2 (ja) * 2002-04-05 2007-02-07 松下電器産業株式会社 外部映像入手システムおよびそれに用いられる装置
JP2004005493A (ja) * 2002-04-24 2004-01-08 Vehicle Information & Communication System Center 運転者支援情報送信装置及び運転者支援情報受信装置ならびに運転者支援情報提供システム
JP4048292B2 (ja) * 2002-06-14 2008-02-20 松下電器産業株式会社 交通情報表示システム及び撮像画像送信装置並びに車載用の情報表示装置と記憶媒体
JP4092479B2 (ja) * 2003-01-07 2008-05-28 日産自動車株式会社 車両用運転支援装置
JP3963865B2 (ja) * 2003-06-03 2007-08-22 財団法人日本建設情報総合センター 地図表示システム、地図表示方法
US20050031169A1 (en) * 2003-08-09 2005-02-10 Alan Shulman Birds eye view virtual imaging for real time composited wide field of view
US7376510B1 (en) * 2004-11-05 2008-05-20 Navteq North America, Llc Map display for a navigation system

Cited By (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN104919518A (zh) * 2013-01-24 2015-09-16 索尼公司 图像显示设备、图像显示方法与图像显示系统
CN104919518B (zh) * 2013-01-24 2017-12-08 索尼公司 图像显示设备、图像显示方法与图像显示系统
CN106157312A (zh) * 2016-07-05 2016-11-23 董超超 一种通过斑块特征配准的图像显示装置
CN106204585A (zh) * 2016-07-05 2016-12-07 董超超 一种通过斑块特征配准的图像生成装置

Also Published As

Publication number Publication date
JP4207941B2 (ja) 2009-01-14
WO2007026839A1 (ja) 2007-03-08
JP2007064924A (ja) 2007-03-15
US20090256906A1 (en) 2009-10-15
EP1921419A4 (en) 2011-09-07
EP1921419A1 (en) 2008-05-14

Similar Documents

Publication Publication Date Title
CN101243300A (zh) 图像显示装置和图像生成装置
JP5052003B2 (ja) 情報配信システム
BRPI0618127A2 (pt) dispositivo de navegação exibindo informação de tráfego
JPH085394A (ja) 携帯端末装置及びそれを用いた通信システム
US20080221790A1 (en) Method and terminal for providing a route in a navigation system using satellite image
KR20060039434A (ko) 길 안내 시스템 및 길 안내 방법
JP2014164316A (ja) 車載カメラを用いた情報提供システム
JP2010072713A (ja) 大型車輌後方映像提供システム
JP2008021037A (ja) 情報通信システム
JP2002334097A (ja) サービス提供システム、管理端末、移動体、サービス提供プログラム及びサービス提供方法
WO2020059188A1 (ja) ナビゲーションシステム、ナビゲーション表示方法、およびナビゲーション表示プログラム
WO2019117047A1 (ja) 車載装置、情報提示方法
JP5247347B2 (ja) 画像表示システムおよび主装置
WO2004084437A1 (en) Navigation system using mobile device and method thereof
JPH11160080A (ja) 移動体情報システム
JP2697961B2 (ja) ポータブル形ナビゲーション・システム
JP2008249475A (ja) 車載装置及び交通情報提示方法
JP5411548B2 (ja) 地図表示システムおよび地図表示方法
JP2015137849A (ja) ナビゲーションシステム、ナビゲーション方法、およびプログラム
CN1983159A (zh) 网络显示装置、计算机和控制计算机的方法
JP2008040711A (ja) 地図・写真画像表示装置及びプログラム
JP2006127382A (ja) 情報配信システム、情報配信方法、情報配信用プログラム
KR20140031481A (ko) 교통 정보 제공 시스템 및 방법
US20070222856A1 (en) Portable Device for Viewing an Image and Associated Production Method
JP4503393B2 (ja) 目的地案内装置、プログラム及びその記録媒体

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
C02 Deemed withdrawal of patent application after publication (patent law 2001)
WD01 Invention patent application deemed withdrawn after publication

Open date: 20080813