CN1268161C - 移动通信系统、移动通信终端及其程序 - Google Patents

移动通信系统、移动通信终端及其程序 Download PDF

Info

Publication number
CN1268161C
CN1268161C CNB200410045145XA CN200410045145A CN1268161C CN 1268161 C CN1268161 C CN 1268161C CN B200410045145X A CNB200410045145X A CN B200410045145XA CN 200410045145 A CN200410045145 A CN 200410045145A CN 1268161 C CN1268161 C CN 1268161C
Authority
CN
China
Prior art keywords
video
positional information
mobile communication
communication terminal
frame
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Expired - Fee Related
Application number
CNB200410045145XA
Other languages
English (en)
Other versions
CN1551664A (zh
Inventor
近藤大辅
安泽和哉
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
NTT Docomo Inc
Original Assignee
NTT Docomo Inc
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by NTT Docomo Inc filed Critical NTT Docomo Inc
Publication of CN1551664A publication Critical patent/CN1551664A/zh
Application granted granted Critical
Publication of CN1268161C publication Critical patent/CN1268161C/zh
Anticipated expiration legal-status Critical
Expired - Fee Related legal-status Critical Current

Links

Images

Classifications

    • GPHYSICS
    • G01MEASURING; TESTING
    • G01CMEASURING DISTANCES, LEVELS OR BEARINGS; SURVEYING; NAVIGATION; GYROSCOPIC INSTRUMENTS; PHOTOGRAMMETRY OR VIDEOGRAMMETRY
    • G01C21/00Navigation; Navigational instruments not provided for in groups G01C1/00 - G01C19/00
    • G01C21/26Navigation; Navigational instruments not provided for in groups G01C1/00 - G01C19/00 specially adapted for navigation in a road network
    • G01C21/34Route searching; Route guidance
    • G01C21/36Input/output arrangements for on-board computers
    • G01C21/3626Details of the output of route guidance instructions
    • G01C21/3647Guidance involving output of stored or live camera images or video streams

Landscapes

  • Engineering & Computer Science (AREA)
  • Radar, Positioning & Navigation (AREA)
  • Remote Sensing (AREA)
  • Automation & Control Theory (AREA)
  • Multimedia (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)
  • Television Signal Processing For Recording (AREA)
  • Mobile Radio Communication Systems (AREA)
  • Telephonic Communication Services (AREA)

Abstract

本发明涉及移动通信系统、移动通信终端及其程序。在移动通信终端(10)中,位置信息分配部分(24)将由照相部分(20)获取的图像与关于这些图像被获取位置的位置信息相关联。视频生成部分(30)通过利用图像来生成一个包括与位置信息相关的帧的视频。视频查询部分(70)指定与位置信息相关的视频帧,该位置信息是接近由位置检测部分(22)获取的位置信息。回放部分(72)显示指定的帧。

Description

移动通信系统、移动通信终端及其程序
技术领域
本发明涉及移动通信系统、移动通信终端及其程序。更具体地,本发明涉及通过利用视频向移动通信终端的用户提供导航服务的移动通信系统、移动通信终端和程序。
背景技术
在上述领域中的技术包括各种类型的导航设备。这样的导航设备的其中一种类型是通过照相机来获取视频的导航设备,该视频与指定的点相关,诸如地图上的十字路口被预先存储,并且与地图上的点相关的视频基于从GPS(全球定位系统)获取的位置信息来显示(例如,日本专利申请特开平No.2000-304559)。换句话说,这种导航设备通过显示当前位置周围拍摄的视频来提供路线导航服务。
发明内容
然而,由于上述导航设备将视频与指定的点相关联,诸如,地图上的十字路口,视频与粗略的位置信息相关联。因此,在设备的实际位置上,显示不同于位置周围的景物的视频,这是尚未解决的问题。
为了解决上述问题,本发明提供了能够显示目标位置景物的视频的移动通信系统、移动通信终端和程序。
为了解决上述问题,本发明的移动通信系统包括第一移动通信终端和第二通信终端。第一移动通信终端包括:第一位置信息获取装置,用于获取位置信息;照相装置,用于获取现场图像;位置信息分配装置,用于将在预定的时间间隔内由照相装置获取的每一个图像与由第一位置信息获取装置获取的位置信息相关联,并且指定图像被获取的位置;视频生成装置,用于基于由照相装置拍摄的多个图像来产生一个视频,其中包括每一个关于获取位置的位置信息相关的帧,并且包括每个与位置信息分配装置的位置信息相关的图像;存储装置,用于存储视频生成装置产生的视频和与包含在视频中的帧相关的位置信息项;以及发射装置,用于发射存储在存储装置中的视频和与包含在视频中的帧相关的位置信息项。第二移动通信终端包括:接收装置,用于接收与从第一移动通信终端发射的视频和与包含在视频中的帧相关的位置信息项;第二位置信息获取装置,用于获取位置信息;查询装置,用于在接收装置接收的位置信息中指定与第二位置信息获取装置获取的位置信息相应的位置信息,以指定与指定的位置信息相关的视频帧;以及回放装置,用于显示由查询装置指定的视频帧。
此外,本发明的移动通信终端与根据上述发明的移动通信系统的第一移动通信终端相应。移动通信终端包括:位置信息获取装置,用于获取位置信息;照相装置,用于获取现场的图像;位置信息分配装置,用于将在预定的时间间隔由照相装置获取的每一个图像与由位置信息获取装置获取的位置信息相关联,并且指定图像被获取的位置;视频生成装置,用于基于由照相装置拍摄的多个图像来产生一个视频,其中包括每一个与关于获取位置的位置信息相关的帧,并且包括每个与位置信息分配装置的位置信息相关的图像;存储装置,用于存储视频生成装置产生的视频和与包含在视频中的帧相关的位置信息项;以及发射装置,用于发射存储在存储装置中的视频和与包含在视频中的帧相关的位置信息项。
此外,本发明的移动通信终端与根据上述发明的移动通信系统的第二移动通信终端相应。移动通信终端包括:接收装置,用于接收一个包括每个与用于指定获取位置的位置信息相关的帧和位置信息项的视频;位置信息获取装置,用于获取位置信息;查询装置,用于在从接收装置接收的位置信息项中指定与位置信息获取装置获取的位置信息相应的位置信息,以指定与指定的位置信息相关的视频帧;以及回放装置,用于显示由查询装置指定的视频帧。
根据本发明,移动通信系统包括第一移动通信终端和第二移动通信终端。在第一移动通信终端中,在一个预定的时间间隔中由照相装置获取的每一图像与关于图像被获取位置的位置信息相关。随后,视频生成装置从包括每个与位置信息相关的图像的多个图像中产生一个视频,该视频包括每个与位置信息相关的帧。视频由发射装置发射到第二移动通信终端。在第二移动通信终端中,回放装置显示与位置信息相关的帧,该位置信息与第二位置信息获取装置获取的位置信息相应。从而,在第一移动通信终端中,视频包括每个与关于帧被获取位置的位置信息相关的帧。因此,第一移动通信终端能生成包括每个与位置信息相关的帧的视频,其几乎没有偏离帧被获取的位置。此外,在第二移动通信终端,显示基于第二位置信息获取装置获取的位置信息指定的帧。因此,第二移动通信终端可以在当前位置显示关于临近该位置的景物的视频。
为了解决上述问题,本发明的移动通信终端包括第一移动通信终端和第二移动通信终端。第一移动通信终端包括:第一位置信息获取装置,用于获取位置信息;照相装置,用于获取现场图像;位置信息分配装置,用于将在预定的时间间隔由照相装置获取的每一个图像由从第一位置信息获取装置获取的位置信息相关联,并且指定图像被获取的位置;视频生成装置,用于基于由照相装置拍摄的多个图像来产生一个视频,其中包括每一个与关于获取位置的位置信息相关的帧,并且包括每个与位置信息分配装置的位置信息相关的图像;存储装置,用于存储视频生成装置产生的视频和与包含在视频中的帧相关的位置信息项;以及发射装置,用于发射存储在存储装置中的视频和与包含在视频中的帧相关的位置信息项。第二移动通信终端包括:接收装置,用于接收从第一移动通信终端发射的视频和与该视频帧相关的位置信息项;回放装置,用于显示接收装置接收的视频;以及地图显示装置,用于显示二维地图信息和通过在二维地图信息上叠加来显示一个基于与回放装置显示的视频帧相关的位置信息项的行进轨迹。
此外,本发明的移动通信终端与根据上述本发明的移动通信系统的第二移动通信终端相应。移动通信终端包括:接收装置,用于接收包括每个与用于指定获取位置的位置信息相关的帧的视频和位置信息项;回放装置,用于显示接收装置接收的视频;以及地图显示装置,用于显示二维地图信息和通过在二维地图信息叠加来显示一个基于与回放装置显示的视频帧相关的位置信息项的行进轨迹。
根据上述发明,移动通信系统包括第一移动通信终端和第二移动通信终端。在第一移动通信终端,在一个预定的时间间隔中由照相装置获取的每一图像与关于图像被获取位置的位置信息相关。随后,视频生成装置从包括每个与位置信息相关的图像的多个图像中产生一个视频,该视频包括每个与位置信息相关的帧。该视频是由发射装置发射到第二移动通信终端。在第二移动通信终端,回放装置显示视频,以及地图显示装置显示二维地图信息和在其上叠加的行进轨迹,行进轨迹是基于与正被显示的帧相关的位置信息项。因此,第一移动通信终端可以产生包括每个与位置信息相关的帧的视频,该轨迹几乎没有偏离帧被获取的位置。此外,在第二移动通信终端,通过在二维地图信息上叠加,地图显示装置显示基于正被显示的帧相关的位置信息项的行进轨迹。因此,第二移动通信终端可以提供关于二维地图上的位置的信息和位置周围的景物的视频。
为了解决上述问题,本发明的移动通信终端包括:位置信息获取装置,用于获取位置信息;照相装置,用于获取现场图像;位置信息分配装置,用于将在预定时间间隔由照相装置获取的每一个图像与由位置信息获取装置获取的位置信息相关联,并且指定图像被获取的位置;视频生成装置,用于基于由照相装置拍摄的多个图像来产生一个视频,其中包括每一个与关于获取位置的位置信息相关的帧,并且包括每个与位置信息分配装置的位置信息相关的图像;存储装置,用于存储视频生成装置产生的视频和与包含在视频中的帧相关的位置信息项;查询装置,用于在存储装置存储的位置信息项中指定与位置信息获取装置获取的位置信息相应的位置信息,以指定与指定的位置信息相关的视频帧;以及回放装置,用于显示由查询装置指定的视频帧。
在根据本发明的移动通信终端中,在一个预定的时间间隔由照相装置获取的每个图像与关于图像被获取位置的位置信息相关。随后,视频生成装置从包括每个与位置信息相关的图像的多个图像中产生一个视频,该视频包括每个与位置信息相关的帧。随后,回放装置显示与位置信息获取装置获取的位置信息相关的视频帧。因此,根据本发明的移动通信终端能够产生包括每个与位置信息相关的帧的视频,其几乎没有偏离帧被获取的位置。此外,根据本发明的移动通信终端能够显示基于位置信息获取装置获取的位置信息指定的帧,并且因此能够在当前位置显示关于临近该位置的景物的视频。
为了解决上述问题,本发明的移动通信终端包括:位置信息获取装置,用于获取位置信息;照相装置,用于获取现场的图像;位置信息分配装置,用于将在预定的时间间隔内由照相装置获取的每一个图像与由位置信息获取装置获取的位置信息相关联,并且指定图像被获取的位置;视频生成装置,用于基于由照相装置拍摄的多个图像来产生一个视频,所述视频包括每一个与关于获取位置的位置信息相关的帧,并且包括每个与位置信息分配装置的位置信息相关的图像;存储装置,用于存储视频生成装置产生的视频和与包含在视频中的帧相关的位置信息项;发射装置,用于发射存储在存储装置中的视频和与包含在视频中的帧相关的位置信息项;以及帧频调节装置,用于基于包括每一个与位置信息分配装置的位置信息相关的图像的由照相装置获取的多个图像来调节视频的帧频,帧频调节装置基于图像被获取的顺序将多个图像划分为多个包括预定数目的图像的组;对于每个组,确定指示基于与相应组中预定数量的图像相关的位置信息的行进轨迹方向的方向信息;当基于为相应的组确定的方向信息和为至少一个先前的组和下一个组确定的方向信息的方向变化量大于预定的量时,为每个组将用于基于相应组中的预定数量的图像的视频的帧频设置为第一帧频;以及当方向变化量等于或者小于预定量时将帧频设置为低于第一帧频的第二帧频;其中,视频生成装置利用多个图像,根据为多个组的每一个确定的帧频来生成视频。
在根据这个发明的移动通信终端中,在一个预定的时间间隔由照相装置获取的每个图像与关于图像被获取位置的位置信息相关。随后,视频生成装置从包括每个与位置信息相关的图像的多个图像中产生一个视频,该视频包括每个与位置信息相关的帧。随后,回放装置显示视频以及地图显示装置通过在二维地图信息上叠加来显示基于正被回放的视频帧相关的位置信息项的行进轨迹。因而,本发明提供一种移动通信终端,能够产生包括每一个与位置信息相关的帧的视频,其几乎没有偏离帧被获取的位置。此外,由于地图显示装置通过在二维地图信息上叠加来显示基于与回放装置正显示的视频帧相关的位置信息项的行进轨迹,这个移动通信终端可以向用户提供关于二维地图上的位置的信息,以及关于位置周围景物的视频。
优选地,上述的提供有视频生成装置的移动通信终端进一步包括一个帧频调节装置。帧频调节装置基于多个包括每一个与位置信息分配装置的位置信息相关的图像的由照相装置获取的图像来调节视频的帧频。帧频调节装置基于图像被获取的顺序将多个图像划分为多个包括预定数目的图像的组。对于每个组,帧频调节装置确定指示基于与相应组中预定数目的图像相关的位置信息的行进轨迹方向的方向信息。当基于为相应的组确定的方向信息和为至少一个先前的组和下一个组确定的方向信息的方向变化量大于预定的量时,帧频调节装置为每个组将用于基于相应组中的预定数目的图像的视频的帧频设置为第一帧频,以及当方向变化量等于或者小于预定量时将帧频设置为低于第一帧频的第二帧频。此外,视频生成装置利用多个图像,根据为多个组的每一个确定的帧频来生成视频。
在如同上述构造的移动通信终端中,如果基于行进轨迹的拍摄位置周围没有大的方向变化,帧频调节装置为从这个位置周围获取的图像生成的视频设置一个低的帧频。这样,移动通信终端能生成一个具有对于几个包括没有大的方向变化的区域的低帧频的视频,因此在现场内的景物没有明显的变化,由此降低了容量(capacity)。
优选地,一个具有视频生成装置的移动通信终端进一步包括第二发射装置和接收装置。第二发射装置将由视频生成装置产生的视频和与视频帧相关的位置信息项发射到服务器。服务器是一个调节由视频生成装置生成的视频的帧频的服务器。服务器基于图像被获取的顺序将包含在视频中的多个图像划分为多个组,每组包括预定数目的图像,并且为每个组确定指示基于与相应组中的预定数目的图像相关的位置信息的行进轨迹方向的方向信息。当基于为相应的组确定的方向信息和为至少一个先前的组和下一个组确定的方向信息的方向变化量大于预定的量时,服务器进一步为每个组将基于相应组中预定数目的图像的视频的帧频变为第一帧频,并且当方向变化量等于或者小于预定量时将视频的帧频变为低于第一帧频的第二帧频。接收装置接收具有服务器调节后的帧频的视频和与视频帧相关的位置信息项,以及随后在存储装置中存储视频和位置信息项。
在如同上述构造的移动通信终端中,第二发射装置向服务器发射一个视频和与之相关的位置信息,并且随后接收帧频由服务器调节过的视频。服务器为基于图像被获取的位置周围的行进轨迹没有大的方向变化的部分设置一个用于这些位置的视频的低的帧频。这样,如上所述构造的移动通信终端能产生具有一个用于包括没有大的方向变化的部分的低的帧频的视频,因此,在现场内的景物没有明显的变化,由此降低了容量。
优选地,在显示视频的移动通信终端中,回放装置参考基于与视频帧相关的位置信息的行进轨迹并且显示指示基于行进轨迹的行进方向的符号。
如同上述构造的移动通信终端在视频上叠加一个指示行进方向的预定符号,并且因此能够向移动通信终端的用户提供便利的路线导航服务。
为了解决上述问题,根据本发明的一个程序使得移动通信终端操作如下:位置信息获取装置,用于获取位置信息;照相装置,用于获取现场的图像;位置信息分配装置,用于将在预定的时间间隔由照相装置获取的每一个图像与由位置信息获取装置获取的位置信息相关联,并且指定图像被获取的位置;视频生成装置,用于基于由照相装置拍摄的多个图像来产生一个视频,其中包括每一个与关于获取位置的位置信息相关的帧,并且包括每个与位置信息分配装置的位置信息相关的图像,并且用于在存储装置中存储视频和与视频帧相关的位置信息项;以及发射装置,用于发射存储在存储装置中的视频和与包含在视频中的帧相关的位置信息项。
如同上述构造的程序使得一个移动通信终端作为如上所述的位置信息获取装置、照相装置、位置信息分配装置、视频生成装置和发射装置进行操作。因此,根据该程序操作的移动通信终端能够产生包括每个与位置信息相关的帧的视频,其几乎没有偏离帧被获取的位置。
为了解决上述问题,根据本发明的程序使得移动通信终端操作如下:接收装置,用于接收包括每个与用于指定获取位置的位置信息相关的帧的视频和位置信息项;位置信息获取装置,用于获取位置信息;查询装置,用于在由接收装置接收的位置信息项中指定与位置信息获取装置获取的位置信息相应的位置信息,以指定与指定的位置信息相关的视频帧;以及回放装置,用于显示由查询装置指定的视频帧。
如同上述构造的程序使得一个移动通信终端作为如上所述的接收装置、位置信息获取装置、查询装置和回放装置进行操作。因此,根据该程序操作的移动通信终端能在当前的位置显示关于邻近位置的景物的视频。
为了解决上述问题,根据本发明的程序使得一个移动通信终端如下进行操作:接收装置,用于接收包括每个与用于指定获取位置的位置信息相关的帧的视频和位置信息项;回放装置,用于显示由接收装置接收的视频;以及地图显示装置,用于显示二维地图信息和通过在二维地图信息上进行叠加来显示一个基于与由回放装置显示的视频帧相关的位置信息项的行进轨迹。
如同上述构造的程序使得移动通信终端作为如上所述的接收装置、回放装置以及地图显示装置进行操作。因此,根据该程序操作的移动通信终端能提供关于二维地图的位置的信息和位置周围的景物的视频。
为了解决上述问题,根据本发明的程序使得一个移动通信终端如下进行操作:位置信息获取装置,用于获取位置信息;照相装置,用于获取现场图像;位置信息分配装置,用于将在预定的时间间隔由照相装置获取的每一个图像与由位置信息获取装置获取的位置信息相关联,并且指定图像被获取的位置;视频生成装置,用于基于由照相装置拍摄的多个图像来产生一个视频,其中包括每一个与关于获取位置的位置信息相关的帧,并且包括每个与位置信息分配装置的位置信息相关的图像;以及用于在存储装置中存储视频和与视频帧相关的位置信息项;查询装置,用于在存储装置存储的位置信息项中指定与位置信息获取装置获取的位置信息相应的位置信息,以指定与指定的位置信息相关的视频帧;以及回放装置,用于显示由查询装置指定的视频帧。
如同上述构造的程序使得移动通信终端作为如上所述的位置信息获取装置、照相装置、位置信息分配装置、视频生成装置以及查询装置和回放装置进行操作。因此,根据该程序操作的移动通信终端能生成包括每个与位置信息相关的帧的视频,几乎没有偏离帧被获取的位置。根据该程序进行操作的移动通信终端还可以在其当前的位置显示关于邻近该位置的景物的视频。
为了解决上述问题,根据本发明的程序使得移动通信终端如下进行操作:位置信息获取装置,用于获取位置信息;照相装置,用于获取现场图像;位置信息分配装置,用于将在预定的时间间隔由照相装置获取的每一个图像与由位置信息获取装置获取的位置信息相关联,并且指定图像被获取的位置;视频生成装置,用于基于由照相装置拍摄的多个图像来产生一个视频,其中包括每一个与关于获取位置的位置信息相关的帧,并且包括每个与位置信息分配装置的位置信息相关的图像;以及用于在存储装置存储视频和与视频帧相关的位置信息项;回放装置,用于显示存储装置中存储的视频;以及地图显示装置,用于显示二维地图信息和通过在二维地图信息上叠加来显示基于与回放装置显示的各个视频帧相关的位置信息项的行进轨迹。
如同上述构造的程序使得移动通信终端作为如上所述的位置信息获取装置、照相装置、位置信息分配装置、视频生成装置、回放装置以及地图显示装置进行操作。因此,根据该程序操作的移动通信终端能生成包括每个与位置信息相关的帧的视频,几乎没有偏离帧被获取的位置。根据该程序进行操作的移动通信终端还可以在二维地图信息上由地图显示装置显示基于每个与视频帧相关的位置信息的行进轨迹,并且因此能够提供关于二维地图位置的信息和关于位置周围的景物的视频。
从在下文中给出的详细描述和附图中将更加充分地理解本发明,其仅作为说明给出,并不认为是限制本发明。
进一步地,本发明的应用范围将从此后给出的详细描述中变得清晰。然而,应当明白详细描述和特定举例当表明本发明的优选实施例时,仅作为说明目的被给出,因为从详细的描述中,在本发明的精神和范围内的各种变化和修改对于本领域的技术人员是显而易见的。
附图说明
在下面的详细描述过程中,将参考附图,其中:
图1是示出根据一个实施例的移动通信系统的结构的图;
图2是示出根据该实施例的移动通信终端的功能结构的方框图;
图3是示出根据该实施例的移动通信终端中的数据流程的图;
图4是示出根据该实施例移动通信终端中的数据流程的图;
图5是用于说明根据该实施例帧频调节部分所执行的过程的原理的图;
图6是示出根据该实施例的MP4文件的结构的图;
图7是示出根据该实施例MP4文件的结构的图;
图8是示出根据该实施例的移动通信终端的功能结构的方框图;
图9是示出根据该实施例的视频生成服务器的功能结构的方框图;
图10是示出根据该实施例的移动通信终端的功能结构的方框图;
图11是示出根据该实施例的回放部分正显示的图片的举例和根据该实施例的地图显示部分显示的图片的举例的图;
图12是示出根据该实施例的由回放部分显示的图片的举例的图的方框图;
图13是示出根据该实施例的移动通信终端的功能结构的方框图;
图14是示出根据该实施例的移动通信终端的功能结构的方框图;
图15是示出根据该实施例的移动通信终端的视频文件生成操作的流程图;
图16是图15示出的帧频调节过程的流程图;
图17是示出根据该实施例的移动通信终端的视频文件生成操作的流程图;
图18是示出根据该实施例的移动通信终端的视频文件回放操作的流程图;
图19是示出根据该实施例的视频生成程序的结构的图;
图20是示出根据该实施例的视频生成程序的结构的图;
图21是示出根据该实施例的视频回放程序的结构的图;
图22是示出根据该实施例的视频生成和回放程序的结构的图;
图23是示出根据该实施例的视频生成和回放程序的结构的图。
具体实施方式
现在将参考附图描述一个根据本发明的实施例的移动通信系统1。在此后的描述中,为了更容易理解描述,在所有附图中,相同或者等价的部分将由相同的附图标记表示。
图1是示出根据一个实施例的移动通信系统的结构的图。根据这个实施例,在图1中示出的移动通信系统1包括移动通信终端4,移动通信终端6,移动通信终端8,移动通信终端10,移动通信终端12,邮件服务器14,视频生成服务器16和视频记录服务器18。移动通信终端4、移动通信终端6、移动通信终端8、移动通信终端10、移动通信终端12、邮件服务器14、视频生成服务器16和视频记录服务器18每个都被连接到移动通信网络2。
接下来,现在将说明移动通信终端4。移动通信终端4是一个信息通信终端,诸如蜂窝电话,其由用户携带。移动通信终端4实质上包括CPU(中央处理单元),存储设备,显示设备,诸如显示装置,和输入设备,诸如按钮,通信设备,照相机等等。
图2是示出移动通信终端4的功能结构的方框图。移动通信终端4功能上包括照相部分(照相装置)20,位置检测部分(位置信息获取装置)22,位置信息分配部分(位置信息分配装置)24,临时存储部分26,帧频调节部分(帧频调节装置)28,视频生成部分(视频生成装置)30,存储部分(存储装置)32,和无线通信部分(发射装置)34。
照相部分20获取在移动通信终端4当前的位置的现场图像。照相部分20用在上述移动通信终端4上提供的照相机来实现这一功能。图3和4是示出移动通信终端4的数据流程的图。如图3所示出的,照相部分20获取由移动通信终端4的用户携带的移动通信终端4当前位置的图像(附图标记36)。照相部分20以每秒30帧的速率获取图像。
位置检测部分22获取关于移动通信终端4当前位置的位置信息项。这样的位置信息可以通过GPS(全球定位系统)获取,并且包括由GPS(全球定位系统)获取的纬度和经度信息,如图3中的附图标记38所表示的。位置检测部分22例如以每秒15次的速率获取位置信息。
返回图2,位置信息分配部分24将由照相部分32在预定的时间间隔获取的每个图像与关于图像被获取位置的位置信息相关联。与照相部分20获取的图像相关的位置信息是由位置检测部分22获取的位置信息。位置信息分配部分24在临时存储部分26中存储与位置信息项相关的图像。临时存储部分26可以由存储设备,诸如RAM(随机存取存储器)来实现。在图3中,附图标记40表示包括位置信息分配部分24的图像和与之相关的位置信息项的数据。位置检测部分22和照相部分20分别以不同的速率获取位置信息项和图像,因此,当图像和位置信息在同一时间获取时,这些图像能够如图3所示的相应位置信息相关联。同时,图像可以与最近时间获取的位置信息相关。
返回到图2,帧频调节部分28确定由视频生成部分20通过利用在临时存储部分26存储的图像而产生的视频的帧频,这将在以后进行说明。图5是一个用于说明该过程原理的图,该过程由帧频调节部分28执行。参考图5,帧频调节部分28将存储在临时存储部分26的多个图像划分为包含预定数量的图像的组。帧频调节部分28确定关于每个组的方向信息。方向信息从基于相关子相应组中的图像的位置信息项的行进轨迹确定。在图5中,V1,V2,V3和V4显示相应组的每一个的方向信息。“预定数量”可以是例如每10秒获取的图像数。
帧频调节部分28计算基于用于处理目标组的方向信息的向量和基于用于确定下一个组的方向信息的向量之间的角度。当角度等于或者小于预定角度时,帧频调节部分28确定用于处理目标组的方向变化是小的。“预定角度”例如可以是45度。当帧频调节部分28确定用于处理目标组的方向变化为小时,它将用于从包含在处理目标组中的图像中产生的视频的帧频设置为一个低的值。在图5示出的举例中,第一个10秒的方向信息V1的向量和下一个10秒的位置信息V2的向量形成一个超过45度的角度,并且因此帧频调节部分28确定方向变化为大并且将用于相应于方向信息V1的组的帧频设置为高值。高值可以是例如每秒15帧,如在图4中用附图标记42所表示的。
返回到图5,接下来,由于方向信息V2的向量和下一个10秒的方向信息V3的向量形成低于45度的角度,帧频调节部分28确定方向变化为小。然而,由于帧频调节部分28已经确定先前的方向变化为大,其为相应于方向信息V2的组设置一个高的帧频。接下来,方向信息V3的向量和由实线来表示的下一个10秒的方向信息V4的向量形成大于45度的方向变化角度,并且因此帧频调节部分28确定方向变化为大并且为相应于方向信息V3的组设置一个高的帧频。另一方面,如果是由虚线表示的方向信息V4的情况,方向信息V3的向量和方向信息V4的向量形成一个等于或者少于45度的角度,并且帧频调节部分28判断方向变化为小。同时,先前的方向变化为小,并且因此帧频调节部分28为相应于方向信息V3的组设置一个低的帧频。这个低的帧频可以例如是每秒1帧,如在图4中用附图标记44所表示的。
返回到图2,视频生成部分30利用存储在临时存储部分26中的多个图像来生成一个视频。视频的帧频根据帧频调节部分28确定的帧频来设置。视频生成部分30将每个视频帧与关于帧被获取位置的位置信息相关联。在关联于存储在临时存储部分26中的各个图像的位置信息项中间,与相应于上述视频的各个帧的图像的位置信息与视频帧相关。视频生成部分30利用生成的视频和与其各自的帧相关的位置信息来生成一个视频文件,并且在存储部分32存储视频文件。存储部分32以移动通信终端4的存储设备的形式被构造。
像这样的一个视频文件,MPEG-4形式的视频文件例如可以如图4中附图标记46所表示的那样被使用。图6是一个示出MP4文件的结构的图,其是一种MPEG-4类型的文件。MP4文件包括一个“moov”标题区域,被称为基本单位(atom),其中标题信息被存储,以及一个“mdat”区域,其中视频数据,音频数据等被存储。在这个实施例中,通过扩展一个常规的MP4文件,包括视频的帧数和与各个帧数相关的上述位置信息可以被存储在“mdat”区域,以及一个轨迹(位置)部分,显示位置信息已经被存储的区域可以在“moov”标题区域被构造。注意,如表示另一个MP4文件结构的图7中所示出的,上述位置信息可以被存储在“moov”标题区域。
返回到图2,无线通信部分34发射存储在存储部分32中的视频文件到将在稍后进行说明的视频登记服务器18或者其他的移动通信终端。
接下来,将说明移动通信终端6。移动通信终端6是一个信息通信终端,诸如蜂窝电话,其由用户携带。移动通信终端6的物理结构与移动通信终端4类似。
图8是示出移动通信终端6的功能结构的方框图。移动通信终端8功能上包括照相部分(照相装置)20,位置检测部分(位置信息获取装置)22,位置信息分配部分(位置信息分配装置)24,临时存储部分26,视频生成部分(视频生成装置)48,无线通信部分(第二发射装置和接收装置)50,以及存储部分(存储装置)52。
照相部分20有类似于移动通信终端4的照相部分20的结构,并且获取在移动通信终端6的当前位置的现场图像。位置检测部分22有类似于移动通信终端4的位置检测部分22的结构,并且获取关于移动通信终端6的当前位置的位置信息。
位置信息分配部分24有类似于移动通信终端4的位置信息分配部分24的结构,并且将照相部分22获取的图像与关于图像被获取的各个位置的位置信息相关,并且在临时存储部分26中存储这些图像和位置信息项。
视频生成部分48生成包括多个帧的视频,每个帧是一个存储在临时存储部分26中的图像。每个视频帧与关于图像被获取位置的位置信息相关。在与临时存储部分26中存储的图像有关的位置信息项中,与上述视频的各个帧相应的图像有关的位置信息与视频帧相关。视频生成部分48通过利用生成的视频和与视频的各个帧有关的位置信息项来生成一个视频文件。像这样的一个视频文件,例如,具有与移动通信终端4的视频生成部分30生成的MP4文件有相同结构的MP4文件可以被使用。
无线通信部分50将由视频生成部分48生成的视频文件发射到视频生成服务器16。无线通信部分50能够例如根据电视电话协议来发射视频文件。在接收视频文件之后,生成服务器16调节视频帧频,这将在稍后进行说明。无线通信部分50接收包括具有由视频生成服务器16设置的帧频的视频的视频文件,并且在存储部分52中存储视频文件。无线通信部分50发射存储在存储部分52中的视频文件到视频登记服务器18或者其他的移动通信终端。
接下来,现在将说明视频生成服务器16。视频生成服务器16调节从移动通信终端发射的视频文件中的视频帧频。在调节帧频之后,视频生成服务器16将包括具有已调节帧频的视频的视频文件送回到移动通信终端。视频生成服务器16实质上是一个计算机系统,包括CPU(中央处理单元),存储设备诸如存储器,存储设备诸如硬盘,通信设备和其他的组件。
图9是示出视频生成服务器16的功能结构的方框图。在功能项中,视频生成服务器16包括通信部分54,解码部分56,帧频调节部分58,视频生成部分60和存储部分62。
通信部分54接收从移动通信终端发射的视频文件。通信部分54还向这个移动通信终端送回包括已经调节帧频的视频的视频文件,如在稍后所描述的。
解码部分56对通信部分54接收的视频文件进行解码。帧频调节部分58调节解码视频的帧频。这个帧频调节与移动通信终端4的帧频调节部分28所执行的类似。
视频生成部分60通过利用帧频已经由帧频调节部分58进行了调节的视频和与这个视频的各个帧相关的位置信息项来生成视频文件。随后,视频生成部分60在存储部分62中存储视频文件。这个视频文件具有与移动通信终端4的视频生成部分30生成的视频文件类似的结构。如上所述,通信部分54向移动通信终端送回在存储部分62中存储的视频文件。
接下来,现在将说明移动通信终端8。移动通信终端8接收从移动通信终端4或者6发射的视频文件或者在视频登记服务器18中登记的视频文件,并且随后显示包含在这个视频文件中的视频。移动通信终端8有与移动通信终端4类似的结构。
图10是示出移动通信终端8的功能结构的方框图。移动通信终端8功能上包括无线通信部分(接收装置)64,存储部分66,位置检测部分(位置信息获取装置)68,视频查询部分(查询装置),回放部分(回放装置)72,地图显示部分(地图显示装置)74和显示转换器部分76。
无线通信部分64接收上述从另一个移动通信终端,诸如移动通信终端4或者移动通信终端6发射的视频文件。无线通信部分64在存储部分66中存储接收的视频文件。
位置检测部分68类似移动通信终端4的位置检测部分22来进行构造,并且获取关于移动通信终端8当前位置的位置信息。
视频查询部分70将由位置检测部分68获取的位置信息与在存储部分66中存储的视频文件中的视频的每个帧相关的位置信息相比较,并且规定与最接近由位置检测部分68获取的位置信息的位置信息相关的帧。
回放部分72在移动通信终端8的显示设备上显示由视频查询部分70指定的帧。回放部分72还可能显示由移动通信终端8的用户在存储部分66中存储的视频文件中间选择的回放文件中的视频。回放部分72还参考与上述视频帧的每一个相关的位置信息,并且在当前正在显示的帧上叠加一个预定的符号,该符号指示到帧稍后显示的位置而不是当前帧被获取的位置的路线的方向。
地图显示部分74在移动通信终端8的显示设备上显示二维地图信息。地图显示部分74能够例如通过向二维信息已经登记的服务器发出访问请求来获得二维地图信息。地图显示部分74在正在显示的二维地图信息上显示基于与回放部分72正显示的视频的各个帧相关的位置信息项的行进轨迹。
显示转换器部分76在由回放部分72提供的显示模式和由地图显示部分74提供的显示模式之间转换显示设备上的显示模式。移动通信终端8的用户选择在显示设备上的显示模式。显示转换器部分76还能通过平分显示设备的屏幕来同时在显示设备上提供由回放部分72提供的显示模式和由地图显示部分72提供的显示模式。图11示出一个由回放部分72提供的显示设备屏幕上的图片的举例和由地图显示部分74提供的屏幕上显示的举例。图11中的附图标记78指出由回放部分72在屏幕上正在显示的帧的举例,以及附图标记80指出由地图显示部分74在屏幕上正在显示的帧的举例。正像图11所示出的,基于与回放部分72显示的帧相关的位置信息项的行进轨迹在地图显示部分74显示的二维地图上显示。图12示出由回放部分72在屏幕上显示的图片的举例。当显示十字路口周围的景物的帧时,回放部分72参考与视频帧相关的位置信息,并且如果与将在稍后显示的帧相关的位置信息指示位于在十字路口交叉的另一个街道的方向的位置,显示一个指示到该位置的路线,如图12所示出的。
接下来,现在将说明移动通信终端10。移动通信终端10是一个信息通信终端,诸如蜂窝电话,其由用户携带。移动通信终端10有实质上类似于移动通信终端4的结构。
图13是示出移动通信终端10的功能结构的方框图。移动通信终端10功能上包括照相部分(照相装置)20,位置检测部分(位置信息获取装置)22,位置信息分配部分(位置信息分配装置)24,临时存储部分26,帧频调节部分(帧频调节装置)28,视频生成部分(视频生成装置)30,存储部分(存储装置)32,视频查询部分(查询装置)70,回放部分(回放装置)72,地图显示部分(地图显示装置)74,显示转换器部分76和无线通信部分82。
照相部分20类似于移动通信终端4的照相部分20来构造,并且获取移动通信终端6当前位置的现场图像。位置检测部分22类似于移动通信终端4的位置检测部分22来构造,并且获取关于移动通信终端10的当前位置的位置信息。位置信息分配部分24、临时存储部分26、帧频调节部分28、视频生成部分30和存储部分32分别类似于移动通信终端4的位置信息分配部分24、临时存储部分26、帧频调节部分28、视频生成部分30和存储部分32来构造。视频查询部分70、回放部分72、地图显示部分74和显示转换器部分76分别类似于移动通信终端8的视频查询部分70、回放部分72、地图显示部分74和显示转换器部分76来构造。视频查询部分70、回放部分72和地图显示部分74存取在存储部分32中存储的视频文件。
无线通信部分82向其他的移动通信终端或者视频登记服务器18发射存储在存储部分32中的视频文件。无线通信部分82还能接收从其他移动通信终端发射的视频文件或者在登记服务器18中登记的视频文件,并将它们存储在存储部分32中。
接下来,现在将说明移动通信终端12。移动通信终端12是一个信息通信终端,诸如蜂窝电话,其由用户携带。移动通信终端12有实质上类似于移动通信终端4的结构。
图14是示出移动通信终端12的功能结构的方框图。移动通信终端12功能上包括照相部分(照相装置)20,位置检测部分(位置信息获取装置)22,位置信息分配部分(位置信息分配装置)24,临时存储部分26,视频生成部分(视频生成装置)48,无线通信部分(第二发射装置和接收装置)50,存储部分(存储装置)52,视频查询部分(查询装置)70,回放部分(回收装置)72,地图显示部分(地图显示装置)74和显示转换器部分76。
照相部分20有类似于移动通信终端4的照相部分20的结构,并且获取移动通信终端12当前位置的现场图像。位置检测部分22有类似于移动通信终端4的位置检测部分22的结构,并且获取关于移动通信终端12的当前位置的位置信息。位置信息分配部分24、临时存储部分26、视频生成部分48、无线通信部分50、存储部分52分别类似于移动通信终端6的位置信息分配部分24、临时存储部分26、帧频调节部分28、视频生成部分48、无线通信部分50、存储部分52来构造。视频查询部分70、回放部分72、地图显示部分74和显示转换器部分76分别类似于移动通信终端8的视频查询部分70、回放部分72、地图显示部分74和显示转换器部分76来构造。视频查询部分70、回放部分72和地图显示部分74存取在存储部分52中存储的视频文件。无线通信部分50还可以向其他的移动通信终端或者视频登记服务器18发射存储在存储部分52中的视频文件。无线通信部分50还能接收从其他移动通信终端发射的视频文件或者在登记服务器18中登记的视频文件,并可以将它们存储在存储部分32中。
接下来,现在将说明邮件服务器14和视频登记服务器18。邮件服务器14和视频登记服务器18实质上包括CPU(中央处理单元),存储设备诸如存储器,存储设备诸如硬盘,通信设备和其他的组件。邮件服务器14接收从上述移动通信终端发送的邮件和附着于其上的视频文件,并且将它们传送到作为邮件目的地的其他移动通信终端。视频登记服务器18登记和公开由上述移动通信终端生成的视频文件。视频登记服务器18响应来自移动通信终端的视频文件的访问请求,向这个移动通信终端发射视频文件。
以下,将说明根据当前实施例的移动通信系统1的操作。首先,将说明移动通信终端4和10的视频文件生成操作。图15是一个流程图,示出移动通信终端4和10的视频文件生成操作。图16是图15的流程中的帧频调节过程的流程图。
如图15中示出的,在移动通信终端4和10中,照相部分20获取现场的图像(步骤S01)。与此并行的,位置检测部分22获取位置信息(步骤S02)。随后,位置信息分配部分24将每个图像与关于图像被获取位置的位置信息相关联,并且将图像连同位置信息项存储在临时存储部分26中(步骤S03)。接下来,帧频调节部分28执行帧频调节过程,用于确定将从多个正存储在临时存储部分26中的图像中生成的视频的帧频(步骤S04)。
在帧频调节过程中,首先,方向变化标志被设置为OFF(关),如图16所示出的(步骤S05)。这个方向变化标志是在帧频调节部分28已经确定先前的方向变化为大的情况下,用于存储确定结果的标志。在初始状态,方向变化标志被设置为OFF。
随后,在从照相开始时间的10秒内获取的图像中,帧频调节部分28从临时存储部分26获取与第一获取图像相关的位置信息和与最后获取的图像相关的位置信息。此外,对于在接下来的10秒内获取的图像,帧频调节部分28还从临时存储部分26获取与第一获取图像相关的位置信息和与最后获取的图像相关的位置信息(步骤S06)。随后,基于每个10秒期间的两条位置信息,帧频调节部分28导出两条方向信息(步骤S07)。
接下来,基于两条方向信息计算两个方向向量之间的角度。随后,通过确定角度是否大于一个预定的角度来确定方向变化是否为大,或者确定方向变化标志是否已经被设置为ON(开)(步骤S08)。在这两个条件的至少其中一个被满足的情况下,帧频调节部分28将帧频设置为一个高的值(步骤S09),并且将方向变化标志设置为ON(步骤S10)。另一方面,如果这两个条件的任意一个都不满足,帧频调节部分28将帧频设置为一个低的值(步骤S11),并且将方向变化标志设置为OFF(步骤S12)。随后,确定在临时存储部分26中是否还有任一将被处理的数据(步骤S13)。如果有数据,帧频调节部分28为在接下来的10秒内获取的图像获取与第一获取图像相关的位置信息和与最后获取的图像相关的位置信息(步骤S14),并且从步骤S07开始继续该过程。另一方面,如果在临时存储部分26中没有将被处理的数据,帧频调节过程结束。
返回到图15,视频生成部分30根据帧频调节部分28确定的帧频来生成视频,并且随后生成包括视频和与视频帧相关的位置信息的视频文件(步骤S15)。
接下来,将说明移动通信终端6、12的视频文件生成操作。图17是一个流程图,示出移动通信终端6和12的视频文件生成操作。如图17所示出的,在移动通信终端6和12中,照相部分20获取现场的图像(步骤S21)。与此并行的,位置检测部分22获取位置信息(步骤S22)。随后,位置信息分配部分24将每个图像与关于图像被获取位置的位置信息相关联,并且将图像连同位置信息项一起存储在临时存储部分26中(步骤S23)。
接下来,视频生成部分48利用多个存储在临时存储部分26中的图像来生成视频文件(步骤S24)。这个视频文件通过无线通信部分50被发射到视频生成服务器16(步骤S25)。视频生成服务器16调节视频文件中图像文件的帧频(步骤S26),并且将视频再生成为一个视频文件(步骤S27)。视频生成服务器16的帧频调节过程类似于移动通信终端4的帧频调节部分28。随后,视频生成服务器16将如上所述生成的视频文件发射到无线通信部分50。无线通信部分50将其存储在存储部分52中(步骤S28)。
接下来,将说明移动通信终端8、10和12的视频文件回放操作。图18是一个流程图,示出移动通信终端8、10和12的视频文件回放操作。操作的说明将基于假定在移动通信终端8、10和12的存储部分中已经存储了视频文件而给出的。
如图18所示出的,首先,位置检测部分获取位置信息(步骤S31)。随后,视频查询部分70在与存储在存储部分的视频文件中的视频的各个帧相关的位置信息项中指定最接近由位置检测部分获取的位置信息的位置信息,并且随后指定与指定的位置信息相关的帧。回放部分74显示指定的帧(步骤S32)。与此并行的,地图显示部分74显示二维地图信息和一个在其上叠加的行进轨迹,该轨迹是基于与正在显示的帧相关的位置信息项(步骤S33)。随后,确定是否还有任一将被回放部分72显示的帧(步骤S34)。如果没有将由回放部分72显示的帧,这个过程结束。另一方面,如果还有帧将被显示,过程从步骤S31继续进行。
接下来,现在将说明用于根据当前的实施例操作如移动通信终端4的移动通信终端的视频生成程序100。图19是示出视频生成程序100的结构。视频生成程序100包括:用于控制整个过程的主模块102,:照相模块104,位置检测模块106,位置信息分配模块108,帧频调节模块110,视频生成模块112,无线通信模块114。例如,由记录介质诸如CD-ROM、DVD、ROM等,或者由半导体存储器来提供视频生成程序100。视频生成程序100可以是一个作为经过网络在载波上的计算机数据信号被提供的程序。照相模块104、位置检测模块106、位置信息分配模块108、帧频调节模块110、视频生成模块112和无线通信模块114使得计算机执行的功能分别与上述的移动通信终端4的上述照相部分20、位置检测部分22、位置信息分配部分24、帧频调节部分28、视频生成部分30和无线通信部分34的那些功能相同。
接下来,现在将说明根据当前的实施例用于操作如移动通信终端6的移动通信终端的视频生成程序120。视频生成程序120包括:用于控制整个过程的主模块122,照相模块124,位置检测模块126,位置信息分配模块128,视频生成模块130和无线通信模块132。例如,由记录介质诸如CD-ROM、DVD、ROM等,或者由半导体存储器来提供视频生成程序120。视频生成程序120可以是作为经过网络在载波上的计算机数据信号被提供的程序。照相模块124、位置检测模块126、位置信息分配模块128、视频生成模块130和无线通信模块132使得计算机执行的功能分别与上述的移动通信终端6的上述照相部分20、位置检测部分22、位置信息分配部分24、帧频调节部分28、视频生成部分48和无线通信部分50的那些功能相同。
接下来,现在将说明根据当前的实施例用于操作如移动通信终端8的移动通信终端的视频回放程序140。图21是示出视频回放程序140的结构的图。视频回放程序140包括:用于控制整个过程的主模块142,无线通信模块144,位置检测模块146,视频查询模块148,回放模块150,地图显示模块152和显示转换器模块154。例如,由记录介质诸如CD-ROM、DVD、ROM等,或者由半导体存储器来提供视频回放程序140。视频回放程序140可以是作为经过网络在载体上的计算机数据信号被提供的程序。无线通信模块144、位置检测模块146、视频查询模块148、回放模块150、地图显示模块152和显示转换器模块154使得计算机执行的功能分别与上述的移动通信终端8的上述无线通信部分64、视频查询部分70、回放部分72、地图显示部分74和显示转换器部分76的那些功能相同。
接下来,现在将说明根据当前的实施例用于操作如移动通信终端10的移动通信终端的视频生成和回放程序160。图22是示出视频生成和回放程序160的结构的图。视频生成和回放程序160包括:用于控制整个过程的主模块162,照相模块164,位置检测模块166,位置信息分配模块168,帧频调节模块170,视频生成模块172,无线通信模块174,视频查询模块176,回放模块178,地图显示模块180和显示转换器模块182。例如,由记录介质诸如CD-ROM、DVD、ROM等,或者由半导体存储器来提供视频生成和回放程序160。视频生成和回放程序160可以是作为经过网络在载波上的计算机数据信号被提供的程序。照相模块164、位置检测模块166、位置信息分配模块168、帧频调节模块170、视频生成模块172、无线通信模块174、视频查询模块176、回放模块178、地图显示模块180和显示转换器模块182使得计算机执行的功能分别与上述的移动通信终端10的上述照相部分20、位置检测部分22、位置信息分配部分24、帧频调节部分28、视频生成部分30、无线通信部分82、视频查询部分70、回放部分72、地图显示部分74和显示转换器部分76的那些功能相同。
接下来,现在将说明根据当前的实施例用于操作如移动通信终端12的移动通信终端的视频生成和回放程序200。图23是示出视频生成和回放程序200的结构的图。视频生成和回放程序200包括:用于控制整个过程的主模块202,照相模块204,位置检测模块206,位置信息分配模块208,视频生成模块210,无线通信模块212,视频查询模块214,回放模块216,地图显示模块218和显示转换器模块220。例如,由记录介质诸如CD-ROM、DVD、ROM等,或者由半导体存储器来提供视频生成和回放程序200。视频生成和回放程序200可以是作为经过网络在载波上的计算机数据信号被提供的程序。照相模块204、位置检测模块206、位置信息分配模块208、视频生成模块210、无线通信模块212、视频查询模块214、回放模块216、地图显示模块218和显示转换器模块220使得计算机执行的功能分别与上述的移动通信终端12的上述照相部分20、位置检测部分22、位置信息分配部分24、视频生成部分48、无线通信部分50、视频查询部分70、回放部分72、地图显示部分74和显示转换器部分76的那些功能相同。
以下,现在将说明根据当前的实施例移动通信系统1的作用和效果。在移动通信终端4、6、10和12中,照相部分20在预定时间间隔获取图像,并且位置信息分配部分24将每个图像与关于图像被获取位置的位置信息相关联。视频生成部分通过利用多个与相应的位置信息相关的图像来生成包括每个与关于帧被获取位置的位置信息相关联的帧的视频。因此,视频生成部分生成包括每个与位置信息相关的帧的视频,其几乎没有偏离帧被获取的位置。这些移动通信终端考虑到存储期望路线的视频,例如,取代生成一个作为路线周围信息的地图。
在移动通信终端4和10中,帧频调节部分28参考与存储在临时存储部分中的多个图像相关的位置信息项,如果一些图像被获取的位置周围的行进轨迹方向没有大的变化,将从这些位置周围获取的图像产生的视频帧频设置为一个低的值。这样,移动通信终端4和10能提供具有用于没有大的方向变化的部分的降低的帧频的视频,并且因此在现场内的景物没有大的变化,由此降低了容量。
在移动通信终端6和12中,由视频生成部分生成的视频文件被发射到视频生成服务器16。视频生成服务器16参考与视频帧相关的位置信息项,如果在一些帧被获取的位置周围的行进轨迹方向没有大的变化,减少位置周围获取的帧数。移动通信终端6和12接收具有调节后的帧频的视频。这样,移动通信终端6和12能够获取具有为没有大的方向变化的部分的降低的速率的视频,并且因此在现场内的景物没有大的变化,由此降低了容量。
在移动通信终端8、10和12中,回放部分72显示与偏离位置检测部分获取的位置信息最少的位置信息相关的帧。这样,移动通信终端8、10和12可以在当前的位置显示和邻近它们当前的位置的景物有最轻微的区别的视频。根据这个实施例的移动通信终端允许用户走路的同时将实际景物与正在显示的视频的景物相比较,而具有常规导航功能的终端用户不得不仅通过地图信息来核对当前的位置。例如,即使通过GPS获取的位置信息和实际当前的位置之间有偏移,用户能够通过将实际景物与正在显示的视频的景物相比较来注意到这个偏移。
此外,在移动通信终端8、10和12中,地图显示部分74与回放部分72正显示的帧同步显示二维地图信息,并且还在二维地图信息上显示基于回放部分72显示的帧的行进轨迹。这样,移动通信终端8、10和12能提供关于二维地图上的位置的信息和位置周围的景物的图像。
此外,在移动通信终端8、10和12中,回放部分72通过在视频上叠加来显示预定的符号,所述符号指示行进的方向,并且因此可以向移动通信终端的用户提供便捷的线导航服务。
上面已经描述的优选的实施例并不旨在限制本发明,应当明白可以进行各种变化。例如,当根据上述实施例4,6,10和12的移动通信终端生成具有每秒15帧的最大帧频的视频,并且这些帧都与位置信息相关时,帧的数量可以被减少,以便在每0.1秒时间间隔内只有一个帧与位置信息相关。
本发明的原理已经在优选实施例中进行了说明和描述,但是对于本领域的技术人员来说,很明显,不脱离这样的原理,本发明可以在安排和细节上进行修改。因此,我们要求伴随权利要求书的精神和范围发生的所有变化和修改的权利。

Claims (6)

1.一种移动通信终端,包括:
位置信息获取装置,用于获取位置信息;
照相装置,用于获取现场的图像;
位置信息分配装置,用于将在预定的时间间隔内由照相装置获取的每一个图像与由位置信息获取装置获取的位置信息相关联,并且指定图像被获取的位置;
视频生成装置,用于基于由照相装置拍摄的多个图像来产生一个视频,所述视频包括每一个与关于获取位置的位置信息相关的帧,并且包括每个与位置信息分配装置的位置信息相关的图像;
存储装置,用于存储视频生成装置产生的视频和与包含在视频中的帧相关的位置信息项;
发射装置,用于发射存储在存储装置中的视频和与包含在视频中的帧相关的位置信息项;以及
帧频调节装置,用于基于包括每一个与位置信息分配装置的位置信息相关的图像的由照相装置获取的多个图像来调节视频的帧频,帧频调节装置基于图像被获取的顺序将多个图像划分为多个包括预定数目的图像的组;对于每个组,确定指示基于与相应组中预定数量的图像相关的位置信息的行进轨迹方向的方向信息;当基于为相应的组确定的方向信息和为至少一个先前的组和下一个组确定的方向信息的方向变化量大于预定的量时,为每个组将用于基于相应组中的预定数量的图像的视频的帧频设置为第一帧频;以及当方向变化量等于或者小于预定量时将帧频设置为低于第一帧频的第二帧频;
其中,视频生成装置利用多个图像,根据为多个组的每一个确定的帧频来生成视频。
2.一种移动通信终端,包括:
接收装置,用于接收包括每个与用于指定被获取位置的位置信息相关的帧和位置信息项的视频;
位置信息获取装置,用于获取位置信息;
查询装置,用于在由接收装置接收的位置信息项中指定与由位置信息获取装置获取的位置信息相应的位置信息,以指定与指定的位置信息相关的视频帧;以及
回放装置,用于显示由查询装置指定的视频帧。
3.根据权利要求2所述的移动通信终端,其中,回放装置显示由接收装置接收的视频,
移动通信终端进一步包括地图显示装置,用于显示二维地图信息和通过在二维地图信息上叠加来显示一个基于与回放装置显示的视频帧相关的位置信息项的行进轨迹。
4.一种移动通信终端,包括:
位置信息获取装置,用于获取位置信息;
照相装置,用于获取现场图像;
位置信息分配装置,用于将在预定时间间隔由照相装置获取的每一个图像与由位置信息获取装置获取的位置信息相关联,并且指定图像被获取的位置;
视频生成装置,用于基于由照相装置拍摄的多个图像来产生一个视频,所述视频包括每一个与关于获取位置的位置信息相关的帧,并且包括每个与位置信息分配装置的位置信息相关的图像;
存储装置,用于存储视频生成装置产生的视频和与包含在视频中的帧相关的位置信息项;
查询装置,用于在存储装置中存储的位置信息项中指定与位置信息获取装置获取的位置信息相应的位置信息,以指定与指定的位置信息相关的视频帧;以及
回放装置,用于显示由查询装置指定的视频帧。
5.根据权利要求4所述的移动通信终端,其中,回放装置显示存储在存储装置中的视频,
移动通信终端进一步包括地图显示装置,用于显示二维地图信息和通过在二维地图信息上叠加来显示基于与回放装置显示的视频帧相关的位置信息的行进轨迹。
6.根据权利要求4或5的移动通信终端,进一步包括:
帧频调节装置,用于基于包括每一个与位置信息分配装置的位置信息相关的图像的由照相装置获取的多个图像来调节视频的帧频,帧频调节装置基于图像被获取的顺序将多个图像划分为多个包括预定数目的图像的组;对于每个组,确定指示基于与相应组中预定数量的图像相关的位置信息的行进轨迹方向的方向信息;当基于为相应的组确定的方向信息和为至少一个先前的组和下一个组确定的方向信息的方向变化量大于预定的量时,为每个组将用于基于相应组中的预定数量的图像的视频的帧频设置为第一帧频;以及当方向变化量等于或者小于预定量时将帧频设置为低于第一帧频的第二帧频;
其中,视频生成装置利用多个图像,根据为多个组的每一个确定的帧频来生成视频。
CNB200410045145XA 2003-04-14 2004-04-14 移动通信系统、移动通信终端及其程序 Expired - Fee Related CN1268161C (zh)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
JP109367/2003 2003-04-14
JP2003109367A JP3725134B2 (ja) 2003-04-14 2003-04-14 移動通信システム、移動通信端末、及びプログラム。

Publications (2)

Publication Number Publication Date
CN1551664A CN1551664A (zh) 2004-12-01
CN1268161C true CN1268161C (zh) 2006-08-02

Family

ID=32905990

Family Applications (1)

Application Number Title Priority Date Filing Date
CNB200410045145XA Expired - Fee Related CN1268161C (zh) 2003-04-14 2004-04-14 移动通信系统、移动通信终端及其程序

Country Status (4)

Country Link
US (1) US7405752B2 (zh)
EP (1) EP1469286A3 (zh)
JP (1) JP3725134B2 (zh)
CN (1) CN1268161C (zh)

Families Citing this family (43)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2005032105A1 (en) * 2003-09-30 2005-04-07 Koninklijke Philips Electronics, N.V. System and method for automatically retrieving information for a portable information system
JP2006060422A (ja) * 2004-08-18 2006-03-02 Olympus Corp 画像伝送装置
US7698055B2 (en) * 2004-11-16 2010-04-13 Microsoft Corporation Traffic forecasting employing modeling and analysis of probabilistic interdependencies and contextual data
US7519564B2 (en) 2004-11-16 2009-04-14 Microsoft Corporation Building and using predictive models of current and future surprises
US7831532B2 (en) 2004-11-16 2010-11-09 Microsoft Corporation Precomputation and transmission of time-dependent information for varying or uncertain receipt times
JP2008527542A (ja) * 2005-01-06 2008-07-24 シュルマン,アラン ナビゲーション及びインスペクションシステム
JP2006217498A (ja) * 2005-02-07 2006-08-17 Nec Corp 端末装置、携帯端末装置、情報収集サーバ、情報通知システム、情報通知方法および情報収集方法
JP4624234B2 (ja) * 2005-10-19 2011-02-02 富士フイルム株式会社 画像再生装置及び画像再生プログラム
US7592912B2 (en) 2005-12-09 2009-09-22 Time Warner Cable Inc. Emergency alert data delivery apparatus and methods
US8566887B2 (en) 2005-12-09 2013-10-22 Time Warner Cable Enterprises Llc Caption data delivery apparatus and methods
JP4550927B2 (ja) * 2006-03-28 2010-09-22 パナソニック株式会社 ナビゲーション装置
US8433299B2 (en) * 2006-11-22 2013-04-30 Bindu Rama Rao System for providing interactive media to user of mobile device
US10803474B2 (en) 2006-11-22 2020-10-13 Qualtrics, Llc System for creating and distributing interactive advertisements to mobile devices
US11256386B2 (en) 2006-11-22 2022-02-22 Qualtrics, Llc Media management system supporting a plurality of mobile devices
US8478250B2 (en) 2007-07-30 2013-07-02 Bindu Rama Rao Interactive media management server
US8700014B2 (en) 2006-11-22 2014-04-15 Bindu Rama Rao Audio guided system for providing guidance to user of mobile device on multi-step activities
US10454995B2 (en) 2007-06-11 2019-10-22 Crackle, Inc. System and method for obtaining and sharing content associated with geographic information
JP5018332B2 (ja) * 2007-08-17 2012-09-05 ソニー株式会社 画像処理装置、撮像装置、画像処理方法、およびプログラム
WO2009024831A1 (en) * 2007-08-17 2009-02-26 Nokia Corporation A method of and a mobile communication device for producing personalised maps
US8314789B2 (en) * 2007-09-26 2012-11-20 Autodesk, Inc. Navigation system for a 3D virtual scene
US9488471B2 (en) * 2007-11-05 2016-11-08 Doubleshot, Inc. Methods and systems for navigation and terrain change detection
KR100920364B1 (ko) 2008-01-03 2009-10-07 주식회사 알티캐스트 위치 기반 영상 서비스 제공 방법 및 장치
US8095610B2 (en) 2008-03-28 2012-01-10 Time Warner Cable Inc. Methods and apparatus for centralized and decentralized emergency alert messaging
US20090249406A1 (en) * 2008-03-31 2009-10-01 Broadcom Corporation Mobile video device with enhanced video navigation
US20090249422A1 (en) * 2008-03-31 2009-10-01 Broadcom Corporation Video transmission system with authentication based on a global clock and methods for use therewith
KR101518829B1 (ko) * 2008-06-17 2015-05-11 삼성전자주식회사 위치 정보를 포함하는 동영상 녹화 및 재생 방법 및 장치
TWI386626B (zh) * 2008-07-07 2013-02-21 Wistron Corp 用於一導航系統中的圖資更新裝置及相關導航系統
WO2010031656A1 (en) * 2008-09-22 2010-03-25 International Business Machines Corporation Method and system for playing video on a mobile device
TWI367650B (en) 2008-10-20 2012-07-01 Quanta Comp Inc Communication system and communication method for assisting user retrieving geography-associated multimedia information
US8311556B2 (en) 2009-01-22 2012-11-13 Htc Corporation Method and system for managing images and geographic location data in a mobile device
CN101576926B (zh) * 2009-06-04 2011-01-26 浙江大学 一种基于地理信息系统的监控视频检索方法
US8301202B2 (en) * 2009-08-27 2012-10-30 Lg Electronics Inc. Mobile terminal and controlling method thereof
US20110102637A1 (en) * 2009-11-03 2011-05-05 Sony Ericsson Mobile Communications Ab Travel videos
WO2012004928A1 (ja) * 2010-07-08 2012-01-12 パナソニック株式会社 撮像装置
JP5589900B2 (ja) * 2011-03-03 2014-09-17 株式会社豊田中央研究所 局所地図生成装置、グローバル地図生成装置、及びプログラム
CN102679989A (zh) * 2012-05-23 2012-09-19 李杰波 一种用于物流配送导航方法及其应用的物流配送车
JP6083019B2 (ja) * 2012-09-28 2017-02-22 株式会社ユピテル システム、プログラム、撮像装置、及び、ソフトウェア
US9472091B2 (en) 2013-10-21 2016-10-18 Time Warner Cable Enterprises Llc Systems and methods for providing emergency alerts
CN104897164A (zh) * 2014-03-06 2015-09-09 宇龙计算机通信科技(深圳)有限公司 视频地图分享方法、装置及系统
CN105222773B (zh) 2015-09-29 2018-09-21 小米科技有限责任公司 导航方法及装置
CA2952721A1 (en) 2015-12-31 2017-06-30 Wal-Mart Stores, Inc. Audio/visual recording apparatus, audio/visual recording and playback system and methods for the same
CN105812660A (zh) * 2016-03-15 2016-07-27 深圳市至壹科技开发有限公司 基于地理位置的视频处理方法
US10477349B2 (en) 2018-02-13 2019-11-12 Charter Communications Operating, Llc Apparatus and methods for device location determination

Family Cites Families (18)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US7010144B1 (en) * 1994-10-21 2006-03-07 Digimarc Corporation Associating data with images in imaging systems
JP3658659B2 (ja) * 1995-11-15 2005-06-08 カシオ計算機株式会社 画像処理装置
JPH09200666A (ja) 1996-01-11 1997-07-31 Nippon Telegr & Teleph Corp <Ntt> 記録位置付き画像生成表示方法および装置
US6008492A (en) * 1996-10-23 1999-12-28 Slater; Mark Hyperspectral imaging method and apparatus
JP3883619B2 (ja) 1996-11-05 2007-02-21 ソニー株式会社 ナビゲーション装置および方法
JPH10150625A (ja) 1996-11-15 1998-06-02 Canon Inc 無線携帯端末装置および移動端末装置
JP2000050123A (ja) * 1998-07-27 2000-02-18 Sony Corp 撮像装置、ナビゲーション装置、icカード及び静止画像の表示方法
US6182010B1 (en) * 1999-01-28 2001-01-30 International Business Machines Corporation Method and apparatus for displaying real-time visual information on an automobile pervasive computing client
US7082162B2 (en) * 1999-04-17 2006-07-25 Pts Corporation Segment-based encoding system including segment-specific metadata
JP4351324B2 (ja) 1999-04-22 2009-10-28 株式会社ザナヴィ・インフォマティクス ナビゲーション装置および情報提供システム
US6140943A (en) * 1999-08-12 2000-10-31 Levine; Alfred B. Electronic wireless navigation system
US6895126B2 (en) * 2000-10-06 2005-05-17 Enrico Di Bernardo System and method for creating, storing, and utilizing composite images of a geographic location
JP2002199320A (ja) 2000-12-27 2002-07-12 Jisedai Joho Hoso System Kenkyusho:Kk ビデオ撮影カメラ
JP3472273B2 (ja) * 2001-03-07 2003-12-02 キヤノン株式会社 画像再生装置及び画像処理装置及び方法
JP2003046969A (ja) * 2001-07-30 2003-02-14 Sony Corp 情報処理装置および方法、記録媒体、並びにプログラム
JP2003125457A (ja) 2001-10-16 2003-04-25 Toshiba Corp 無線通信端末装置及び無線通信方法
DE60330898D1 (de) * 2002-11-12 2010-02-25 Intellivid Corp Verfahren und system zur verfolgung und verhaltensüberwachung von mehreren objekten, die sich durch mehrere sichtfelder bewegen
US20040107181A1 (en) * 2002-11-14 2004-06-03 FIORI Product Development, Inc. System and method for capturing, storing, organizing and sharing visual, audio and sensory experience and event records

Also Published As

Publication number Publication date
JP2004320242A (ja) 2004-11-11
US7405752B2 (en) 2008-07-29
EP1469286A2 (en) 2004-10-20
JP3725134B2 (ja) 2005-12-07
CN1551664A (zh) 2004-12-01
US20040257440A1 (en) 2004-12-23
EP1469286A3 (en) 2010-07-07

Similar Documents

Publication Publication Date Title
CN1268161C (zh) 移动通信系统、移动通信终端及其程序
CN1798335A (zh) 移动摄像机系统
CN1256568C (zh) 信息终端装置及地图信息提供系统
CN100339854C (zh) 数字数据传递方法
CN100341368C (zh) 移动通信终端、控制移动通信终端的方法和遥控系统
CN1774614A (zh) 步行者导行装置、步行者导行系统、步行者导行方法及程序
RU2007112676A (ru) Способ добавления географических названий к изображениям на мобильном коммуникационном терминале
US20070195373A1 (en) Method for providing recommendations using image, location data, and annotations
JP2004226140A (ja) 情報端末装置、ナビゲーションシステム、および情報処理方法、並びにコンピュータ・プログラム
CN1734989A (zh) 使用包含位置信息的数字广播信号的数字广播系统和方法
CN1521484A (zh) 适用于指引导航系统中另一方位置的装置和方法
CN1859798A (zh) 区域触发定位方法及装置
US9002142B2 (en) Method for generating a customized composite map image and electronic apparatus for implementing the same
CN1752769A (zh) 定位系统、定位装置、定位信息提供装置以及定位方法
CN1522023A (zh) 对配备摄像机的移动通信终端的操作限制技术
JP2017139725A (ja) 映像表示方法及び映像表示装置
CN1841424A (zh) 任务选择援助装置、以及任务选择援助方法
CN1926559A (zh) 移动通信系统、移动终端和固定站设备,字符识别设备、方法和程序
CN1977266A (zh) 位置适当的服务列表的系统和方法
US20120046042A1 (en) Apparatus and method for power control in geo-tagging in a mobile terminal
CN1534590A (zh) 显示处理装置、显示控制方法及显示处理程序
CN1842192A (zh) 操作设定决定方法及其系统
CN1914853A (zh) 用于识别捕获内容的机会的方法和设备
US20080104099A1 (en) Use of information correlation for relevant information
CN1898974A (zh) 信息分发系统和信息分发服务器以及便携式终端和信息分发方法

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
C14 Grant of patent or utility model
GR01 Patent grant
C17 Cessation of patent right
CF01 Termination of patent right due to non-payment of annual fee

Granted publication date: 20060802

Termination date: 20110414