WO2023132267A1 - 地理情報システム - Google Patents

地理情報システム Download PDF

Info

Publication number
WO2023132267A1
WO2023132267A1 PCT/JP2022/047495 JP2022047495W WO2023132267A1 WO 2023132267 A1 WO2023132267 A1 WO 2023132267A1 JP 2022047495 W JP2022047495 W JP 2022047495W WO 2023132267 A1 WO2023132267 A1 WO 2023132267A1
Authority
WO
WIPO (PCT)
Prior art keywords
content
geographic
user
information system
image
Prior art date
Application number
PCT/JP2022/047495
Other languages
English (en)
French (fr)
Inventor
善太郎 渡邉
哲也 及川
泰隆 倉本
Original Assignee
株式会社スカイマティクス
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 株式会社スカイマティクス filed Critical 株式会社スカイマティクス
Publication of WO2023132267A1 publication Critical patent/WO2023132267A1/ja

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/50Information retrieval; Database structures therefor; File system structures therefor of still image data
    • G06F16/53Querying
    • G06F16/538Presentation of query results
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/50Information retrieval; Database structures therefor; File system structures therefor of still image data
    • G06F16/58Retrieval characterised by using metadata, e.g. metadata not derived from the content or metadata generated manually
    • G06F16/587Retrieval characterised by using metadata, e.g. metadata not derived from the content or metadata generated manually using geographical or spatial information, e.g. location
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T11/002D [Two Dimensional] image generation
    • G06T11/60Editing figures and text; Combining figures or text
    • GPHYSICS
    • G09EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09BEDUCATIONAL OR DEMONSTRATION APPLIANCES; APPLIANCES FOR TEACHING, OR COMMUNICATING WITH, THE BLIND, DEAF OR MUTE; MODELS; PLANETARIA; GLOBES; MAPS; DIAGRAMS
    • G09B29/00Maps; Plans; Charts; Diagrams, e.g. route diagram
    • GPHYSICS
    • G09EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09BEDUCATIONAL OR DEMONSTRATION APPLIANCES; APPLIANCES FOR TEACHING, OR COMMUNICATING WITH, THE BLIND, DEAF OR MUTE; MODELS; PLANETARIA; GLOBES; MAPS; DIAGRAMS
    • G09B29/00Maps; Plans; Charts; Diagrams, e.g. route diagram
    • G09B29/10Map spot or coordinate position indicators; Map reading aids

Definitions

  • the present invention relates to a geographic information system for managing and visually displaying geospatial information in which geographic objects such as land, natural objects, or man-made objects exist in association with their geographic positions.
  • Patent Document 1 describes a disaster prevention/disaster recovery support system using a geographic information system.
  • the use of this disaster prevention/disaster recovery support system is to support the planning of measures to prevent damage before a disaster occurs, and to assist recovery work after a disaster occurs.
  • this system Based on the input inundation depth information, this system creates an inundation depth layer that associates the inundation depth information with the topographic map information, gives different colors to the inundation depth layer according to the inundation depth, and The inundation depth layer is displayed superimposed on topographic map information.
  • the geographic information system can be used for a wide variety of purposes other than the disaster countermeasures described above. Moreover, even for the same application, different users may have different needs for the map information system. Therefore, the types of geographic information that should be managed by the geographic information system differ depending on their uses and users.
  • the disaster prevention/disaster recovery support system described in Patent Document 1 displays a flood depth layer, so it is useful for flood damage countermeasures, but may not be suitable for other uses or needs.
  • one object of the present invention is to provide a geographic information system that can be applied to a wider range of different uses or user needs.
  • Another object of the present invention is to provide a geographic information system capable of managing a wider variety of geographic information.
  • Another object of the present invention is to provide a geographical information system capable of visually displaying each piece of geographical information in a manner that utilizes not only its geographical location but also time.
  • a geographic information system that is communicatively connected to a user terminal and provides geographic information to the user terminal includes a database for managing one or more geographic contents and an arbitrary content registration means for receiving one or more geographic contents selected by the user terminal and uploaded from the user terminal, and registering the received geographic contents in the database; and at least one of the geographic contents registered in the database content display means for providing the user terminal with one or more types of partially displayed geographical information screens.
  • the geographic content does not necessarily have to be terrestrial data, and may be data in the sky, data in the ground, data in the sea, and the like, and each data can be associated with a corresponding geographic space.
  • the user terminal is not limited to a personal computer, and may be a smart phone, a tablet, a head-mounted display, a new terminal device that will be born in the future, or the like, regardless of the type of structure, function, or application.
  • Each of the geographic contents uploaded from the user terminal has one of a plurality of predetermined content types.
  • the content registration means when receiving one or more geographic contents uploaded from the user terminal, identifies a content type of each of the received geographic contents, and registers each of the received geographic contents with the identified The content is registered in the database in a predetermined registration format corresponding to the content type.
  • the predetermined registration format corresponding to any one of the one or more content types also includes geographic coordinates associated with the geographic content.
  • the content registration means causes the user to directly specify the geographic coordinates, or by having the user specify on the map a point to be linked to the geographic content. You can associate geographic coordinates with your content.
  • the content display means searches the database for geographic content that matches the specified condition, using specified conditions arbitrarily specified by a user with respect to one or more kinds of predetermined search conditions, and displays the searched geographic content.
  • the types of geographic content include at least orthorectified images and one or more other types.
  • the types of geographic content include at least moving images.
  • the content registration means specifies the geographical coordinates of the start point and the end point of the moving image, and stores the moving image at the start point and the end point. It is registered in the database in the registration format for moving images associated with each geographical coordinate.
  • the geographic coordinates registered in association with the moving image do not need to be limited to the start and end points. Good to be registered.
  • the movement trajectory passing through the point designated by the user is not limited to a straight line, and a non-linear shape such as a U-shaped trajectory indicating a round-trip route, a polygonal line, or a curved trajectory may be registered.
  • the content display means includes an entity image display unit that reproduces and displays the moving image together with the first content display unit in the first type of geographical information screen when creating the first type of geographical information screen. to place.
  • the content display means further displays a camera position mark on the map of the first content display section at a position between the geographical coordinates of the start point and the end point of the moving image.
  • the content display means moves the camera position mark from the start point toward the end point according to the playback time point when the moving image is played back on the stereoscopic image display unit.
  • the camera position mark may be a mark that indicates not only the position of the camera at the time of photographing but also the line-of-sight direction of the camera.
  • the types of geographic content may include at least panoramic images (omnidirectional images, 360-degree images, or images captured with a much wider angular range than normal photographic images).
  • the content registration means can identify geographic coordinates indicating a photographing position of the panoramic photograph and register them in the database.
  • the content registration means registers the panoramic photograph in the database in a panoramic photograph registration format associated with the geographical coordinates by, for example, having the user specify the coordinates of the photographing point on a map. can be registered.
  • the type of geographic content may include at least a DSM (Digital Surface Model).
  • a DSM is a file that expresses three-dimensional data consisting of the elevation of the surface of a feature in a two-dimensional mesh format.
  • the content registration means can identify geographic coordinates defining a planar geographic area corresponding to the DSM and register them in the database. If the received DSM does not contain the geographic coordinates of the geographic area corresponding to the geographic area, the content registration means registers the content in the DSM registration format associated with the geographic coordinates by, for example, having the user specify the geographic coordinates on a map. Can be registered in the database.
  • DEM Digital Elevation Model
  • DTM Digital Terrain Model
  • DHM Digital Height Model
  • DLM Digital Land Use Map
  • Those geographic models may be placed in the same layer as the orthomap image and presented to the user as an image.
  • icons of those geographic models are displayed superimposed on the orthomap image, and when the user clicks on the icon, a viewer for that model is launched and the model is shown to the user as an image.
  • the type of geographic content may include at least 3D (three-dimensional) point cloud data.
  • 3D point cloud data refers to a set of point data having three-dimensional coordinates.
  • the content registration means specifies geographic coordinates indicating a geographic area corresponding to the 3D point cloud data and registers the geographic coordinates in the database. can be done.
  • 3D point cloud data may also be handled in the same manner as the DSM described above.
  • the type of geographic content may include at least 3D (three-dimensional) mesh data.
  • 3D mesh data refers to three-dimensional data composed of polygons with each point of the three-dimensional point group data as a vertex, and the surface of the polygon is called a mesh.
  • the content registration means can specify geographic coordinates indicating an imaging area of the 3D mesh data and register them in the database.
  • 3D mesh data may also be handled in the same manner as the DSM described above.
  • the type of geographic content may include at least a label.
  • a label is a geographic content composed of an arbitrary point specified by a user on a map and information attached to the point.
  • the information associated with the point includes label names, memos, files, URL links, and the like.
  • the content registration means can specify geographical coordinates for managing the label by allowing the user to designate a point where the label is to be placed on the map, and register the label in the database in association with the geographical coordinates. .
  • orthoimages, DSM, 3D point cloud data, 3D mesh data, etc. do not necessarily need to be input from the outside.
  • Such data may be generated, for example, by performing SfM/MVS analysis.
  • panoramic photos do not necessarily need to be input from the outside, and this system combines the images and videos registered in the database to generate a panoramic image. You can
  • the content display means allows the user to specify a measurement area on the orthoimage, measures the distance, area, volume, etc. of the specified area, and superimposes the measurement results on the orthoimage in the form of a graph, for example. can be displayed as
  • the content display means displays the displayed background image as any geographic content (for example, one of orthorectified images of a plurality of periods).
  • the content display means displays the displayed background image as any geographic content (for example, one of orthorectified images of a plurality of periods).
  • the measurement area and measurement results themselves can be registered in the database as geographic content.
  • the measurement area and the measurement result can be searched using any search means in the same way as other geographic contents registered by the user.
  • any comments or tags input by the user may be added, as with other geographic content.
  • the user may freely update the geographic coordinates of the vertices of the measurement area.
  • the updated vertex coordinates may be overwritten and saved in the database.
  • the content display means allows the user to select one or more geographic contents on the first type of geographic information screen, and provides the user with superimposed display as a format for displaying the geographic contents.
  • a format and split display format can be selected.
  • the selection method a method in which the user selects geographic contents one by one, and a method in which the user designates a certain geographic area and simultaneously selects one or more geographic contents existing within that geographic area are adopted. obtain.
  • the content display means can compare and browse the selected geographic contents.
  • a second type of geographic information screen having a second content display portion displayed in a split display format is created, and the second type of geographic information screen is provided to the user terminal.
  • the content display means may divide the geographic information screen by the number of geographic contents existing in the geographic area selected by the user on the map and display the geographic contents.
  • the number of divisions of the geographic information screen is not limited to two, and any number of geographic contents desired by the user can be displayed in a divided display format.
  • the content display means When displaying a plurality of panoramic photographs in a split display format, the content display means allows the user to change the line-of-sight direction of one of the panoramic photographs. It may also be possible to automatically change the viewing direction of the panoramic photograph.
  • the content display means when displaying a plurality of panoramic photographs in a split display format, changes the line-of-sight direction of the displayed plurality of panoramic photographs to the point designated by the user. It may be changed so as to point in the direction toward .
  • the content display means can not only display the geographic contents but also analyze the difference between the geographic contents of different periods, and analyze the difference. It would be nice to be able to display the results.
  • the content display means analyzes each of the geographic content before performing the difference analysis to extract overlapping feature points, By performing a local iterative operation so that the difference between is minimized, the position error of the geographic content may be automatically corrected.
  • the content display means does not necessarily have to automatically perform the difference analysis. , click on the map, or directly specify numerical values from the screen or file, and perform local iterative calculations to minimize the difference between these overlapping feature points, thereby semi-automatically correcting positional errors in geographic content.
  • the content registration and display means may not only be able to register and display certain geographic content, but may also be able to register and display analysis results obtained by performing image analysis or AI analysis using the geographic content as an input, as another geographic content.
  • the content display means analyzes the difference between the image analysis results or AI analysis results of these different periods, and It is good to be able to display the analysis result.
  • the analysis result may not only be displayed on the content display means, but may also be output externally so as to be imported into an external system.
  • the content registration means identifies the date and time of each of the received geographic contents, and informs the user of each of the received geographic contents.
  • Arbitrary one or more tags are set, and each of the received geographic contents is stored in the database in a predetermined registration format corresponding to each content type associated with the identified date and time and the set tag. register.
  • the one or more types of predetermined search conditions include at least a period condition for narrowing down the geographic content to be searched by the date and time, and a tag condition for narrowing down the geographic content to be searched by the tag. .
  • the content registration means can register one or more geographic contents uploaded from the user terminal in association with one or more projects arbitrarily set by the user.
  • the content registration means performs a first registration method of registering one or more geographic contents in association with one project, and a second registration method of registering a plurality of geographic contents in association with a plurality of projects. can be selected.
  • the content registration means automatically classifies the plurality of uploaded geographic contents into a plurality of groups, causing the user to perform a desired modification for each of the classified groups; causing the user to set a project for each of the classified groups; and
  • the geographic content to which it belongs is associated with the set project and registered in the database.
  • the content display means receives a request to open a project desired by the user from the user terminal, and displays the first type of geographic information screen using geographic content in the database associated with the desired project. Create and provide to the user terminal.
  • the first type of geographic information screen has a tag editing section for the user to edit the tag of each geographic content displayed on the first type of geographic information screen.
  • FIG. 1 is a diagram showing an overall hardware configuration of a geographic information system according to one embodiment
  • FIG. 4 is a diagram showing a configuration example of a management table stored in a database
  • FIG. 4 is a diagram showing an example of a split display screen of multiple contents
  • FIG. 5 is a diagram showing the flow of control for opening a project by the content display unit
  • FIG. 4 is a diagram showing a flow of control for searching and displaying content by a content display unit
  • FIG. 5 is a diagram showing a flow of control for switching between split display and superimposed display of content by a content display unit
  • FIG. 4 is a diagram showing an example of a screen displaying a moving image
  • FIG. 5 is a diagram showing the flow of processing for controlling a camera position mark according to the playback time point of a moving image by a content display unit
  • FIG. 10 is a diagram showing the flow of processing for controlling the playback point of a moving image according to the camera position mark by the content display unit;
  • FIG. 11 is a diagram showing an example of a screen resulting from automatically grouping selected content
  • FIG. 10 is a diagram showing an example of a screen for modifying a content group
  • FIG. 5 is a diagram showing a more detailed flow of control when content is uploaded by a content display unit;
  • FIG. 10 is a diagram showing a flow of one aspect of controlling the line-of-sight direction of a plurality of panoramic images by a content display unit when displaying a plurality of panoramic images in a split display format;
  • FIG. 11 is a diagram showing another mode of flow for controlling the line-of-sight direction of a plurality of panoramic images by the content display section when the panoramic images are displayed in a split display format;
  • FIG. 2 illustrates the flow of control for alignment between multiple geographic content that resides in the same geographic region. The figure which shows the example of the project screen which displayed the panorama image.
  • FIG. 1 shows the overall hardware configuration of a geographic information system according to one embodiment.
  • a geographic information system 1 is communicably connected to one or more user terminals 3 via a communication network 5 and provides the user terminals 3 with geographic information. That is, the geographic information system 1 can receive various types of geographic content from the user terminal 3, store and register the received geographic content. Then, the geographic information system 1 displays the registered geographic content superimposed on the map, displays a plurality of geographic content in comparison, displays detailed information of the geographic content, etc., on the user terminal 3. , can provide geographic information in a variety of ways.
  • Types of geographic content that can be handled by the geographic information system 1 include, for example, a single still image (hereinafter also referred to as a single image) captured by a camera at an arbitrary point, a panorama display 360-degree images and/or omnidirectional images, moving images, orthoimages of any region, multiple still images for creating the orthoimages, 3D or 2D model data of any geographical feature or region ( For example, DEM (Digital Elevation Model), DTM (Digital Terrain Model), DHM (Digital Height Model), 3D point cloud data (point data with 3D coordinates) set), 3D mesh data (three-dimensional data consisting of polygons with each point of the three-dimensional point cloud data as a vertex), DLM (Digital Land Use Map), etc.), and their contents were analyzed.
  • DEM Digital Elevation Model
  • DTM Digital Terrain Model
  • DHM Digital Height Model
  • 3D point cloud data point data with 3D coordinates
  • 3D mesh data three-dimensional data consisting of polygons with each point of the three-
  • the analysis data includes, for example, difference analysis results between multiple registered geographic contents, image analysis results, AI analysis results obtained by analyzing geographic contents with artificial intelligence (AI), and difference analysis results between multiple image analysis results. , and/or differential analysis results between multiple AI analysis results.
  • AI artificial intelligence
  • the geographic information system 1 comprises a processor 7, a memory 9, and a database 11.
  • Various computer programs are stored in the memory 9, and when the processor 7 executes these computer programs, various functions for providing geographic information, which will be described in detail below, are realized.
  • the computer programs in the memory 9 include, for example, the content registration unit 13, the ortho generation unit 15, the tile image generation unit 17, the content display unit 19, the content analysis unit 21, and the like.
  • the content registration unit 13 is a program that receives content from the user terminal 3, stores it in the database 11, and registers it.
  • the ortho-image generator 15 is a program for creating an ortho-image from a plurality of registered single images of a certain area.
  • the tile image generation unit 17 is a program that generates a plurality of tile images from images to be displayed, such as orthorectified images and single images, for displaying them at a zoom rate desired by the user.
  • the content display unit 19 is a program for displaying user-desired content in a user-desired manner.
  • the content analysis unit 21 is a collection of one or more types of content analysis tools 23, and each content analysis tool 23 is a program for analyzing a predetermined type of content by a predetermined method for a predetermined purpose.
  • the database 11 stores and manages one or more types of management tables 25, registered various content files 17, and the like.
  • the database 11 may also hold one or more types of maps (not shown) (alternatively, the maps may be distributed in real-time when the maps are displayed, from an external map providing system through the network 5 to the geographical information system 1). ).
  • FIG. 2 shows a configuration example of the management table 25 stored in the database 11.
  • FIG. 2 exemplifies a project management table 25A for managing projects and a content management table 25B for managing contents (there is also a user management table 25A for managing users, not shown). table, etc.).
  • One or more projects set by the user are registered in the project management table 25A in a project registration format. That is, the project management table 25A contains, for each project (that is, the purpose or work for which the user uses the geographic information system 1), the name of the project, the location on the map to be displayed in the project, or the address notation of the area. , user groups that can browse the project, content analysis tools that can be used in the project, etc. are registered.
  • One or more contents (content files) uploaded from the user terminal 3 are registered in the content management table 25B in a predetermined registration format corresponding to each content type. That is, for each content received (uploaded) from the user terminal 3, the content management table 25B stores the file name, file type (that is, content type), geographical coordinates (latitude, longitude, altitude) of the shooting start point, Geographical coordinates (latitude, longitude, altitude) of the shooting end point, orientation of the camera at the start of shooting, orientation of the camera at the end of shooting, name of the project in which the content is used, tags attached to the content (optional by the user) Concepts related to the purpose of use, application, characteristics, location, utility, value, etc.
  • the date and time of the content (at the time of shooting or registration), etc. are registered.
  • the content type is a single image or an orthoimage
  • the same shooting position and orientation are registered at the start and end of shooting, but with moving images, different shooting positions and orientations can be registered at the start and end of shooting.
  • the geographic coordinates of the representative four corner points of the orthoimage are registered as the geographic coordinates of the shooting start point.
  • FIG. 3 shows an example of a project screen that the geographic information system 1 displays on the user terminal 3.
  • a project screen for working on that project is displayed on the user terminal 3.
  • the one shown in FIG. 3 is one of the typical project screens.
  • a project name column 33 At the top of the project screen 31 illustrated in FIG. 3, there are a project name column 33, a tag search column 35, and a period search column 37.
  • a content display frame 39 At the center of the project screen 31 is a content display frame 39, with a detail display frame 41 on the left.
  • An upload button 62 is located above the content display frame 39
  • a download button 71 is located below the detail display frame 41 .
  • the project name column 33 displays the name of the currently opened project.
  • the user can enter any tag there, search the database 11 for only the content with that tag attached, and display it in the content display frame 39 .
  • the period search field 37 the user enters an arbitrary period (the start date and end date of the period), searches the database 11 for only the contents with dates and times within that period, and searches the content display frame 39. can be displayed in By selectively or combining different types of search conditions such as tags and periods to search for content, the user is prevented from displaying content that is conceptually and date-wise unnecessary for work in the content display frame 39. be able to.
  • the content display format can be switched between two types, superimposed display and split display.
  • the switching can be performed by clicking the split/superimposed display switching button 59 on the content display frame 39 .
  • Fig. 3 shows the case where the superimposed display format is currently selected.
  • the background of the content display frame 39 is a map 43 selected by the user from a plurality of types of maps prepared in advance (for example, maps with different images such as illustrations and satellite photographs from different vendors). one type of map) is displayed.
  • the location or area displayed on the map when the project is first opened is the location or area corresponding to the representative location of the project registered in the project management table 25A (Fig. 2) (then the user scrolls to display the location or area). place or region can be changed freely).
  • Content registered by the user (and searched by tag and/or period) is superimposed and displayed on the map 43 as the background.
  • the orthorectified image 45 of the region is displayed with its stereoscopic image overlaid on the map 43 (a set of tile images used for displaying the stereoscopic image depending on the zoom factor). are different).
  • Contents other than orthoimages are not actual images, but icons 47 (normal 49 (single image taken with a smartphone), 51 (360-degree still image for panorama display), 53 (moving image), 55 (analysis result data) on the map 43 or orthoimage 47 placed and displayed.
  • the front-to-back positional relationship in which the contents are displayed is such that, from the back side to the front, the map 43 is first in the back, the orthoimage 45 is next, and the other content icons 47, 49, 51, 53 are in the front. , 55.
  • This display order has nothing to do with the date and time order of the content.
  • the display position of each content (or its icon) on the map is a position corresponding to the geographical coordinates of each content registered in the content management table 25B.
  • icons of content other than orthoimages are superimposed on each other, for example, they are arranged in order of date and time (for example, icons with newer date and time are superimposed on older icons), and the same geographical location Even the coordinates icon is displayed slightly shifted so that the icon behind it is not hidden.
  • the following display order may be adopted. It displays a map on the backmost layer, displays orthorectified images and 3D model data actual images on the middle layer above it, and displays other geographic content icons on the frontmost layer.
  • the orthoimage of the intermediate layer and the real image of the 3D model data can be adjusted for their respective transparency, so that the relationship between them can be visually recognized.
  • the geographic content to be displayed includes analysis data
  • the following display order may be adopted. It displays the map on the backmost layer, displays the orthoimage (or orthoimage and 3D model data actual image) on the intermediate layer above it, and further analyzes on the second intermediate layer above it. It represents the data and displays icons for other geographic content in the frontmost layer above it.
  • the list 57 of the contents displayed on the map 43 of the content display frame 39 can be displayed in the forefront of the content display frame 39 if the user so desires.
  • the display content list 57 displays thumbnail images 58 of the content displayed on the map 43 (the substance of the thumbnail image is omitted in FIG. 3).
  • the thumbnail images 58 of the selected contents are also selected (eg, marked with a checkmark) on the display contents list 57 as well.
  • the selected content is also selected on the map 43 (for example, an icon or orthoimage of the selected content). display color changes). This makes it easier for the user to check where on the map what kind of content is located.
  • FIG. 4 shows a display example of the content display frame 39 when switched to the split display format.
  • the user selects four contents (for example, orthorectified images of substantially the same area with different shooting dates) 73A to 73D in advance in the superimposed display format illustrated in FIG. 39 shows an example of switching from superimposed display to split display.
  • the split display format a plurality of content entities selected by the user are displayed in comparison.
  • analysis result data 75 exists for the selected contents 73A-73D, the substance of the analysis result data 75 is also displayed together. This makes it easy for the user to visually and numerically grasp the differences and changes between the selected contents.
  • the user can select an arbitrary point or a line segment connecting two points on one orthoimage (for example, 73A). , or if an area with three or more points as vertices is specified (in the example of FIG. 4, the rectangular area indicated by the dashed line is specified by the user), the same geographic area as specified by the user is also specified on the other orthorectified images 73B to 73D. A point, line segment, or region of coordinates is automatically identified and displayed.
  • each of the orthorectified images 73A to 73D is accompanied by three-dimensional model data created in the creation process
  • each of the three-dimensional model data is used to generate the points, line segments, or points specified by the user.
  • Various measurements and analyses such as distance measurement, area measurement, deposition measurement, comparison of measured values, and statistical processing, can be performed using any of the analysis tools 23 described above.
  • FIG. 3 shows, as an example, a case where detailed information of the orthorectified image 45 is displayed.
  • the types of columns in the detailed information displayed in the detailed display frame 41 differ depending on the content type. There are a column 67, a tag editing column 69, and the like.
  • the entity image of the content is displayed in the entity image column 63 of the content.
  • This stereoscopic image can be displayed in a full-screen display or any other size desired by the user.
  • this field 63 allows the user to set the transmittance of the orthorectified image.
  • this column 63 also enables the reproduction of moving images.
  • the user can enter and add arbitrary comments to the content, or correct existing comments and register the comments.
  • the tag editing column 69 the user can enter any tag for the content to additionally register a new tag or delete an existing registered tag.
  • the download button 71 when the download button 71 is clicked, the content file displayed in the detailed display frame 41 can be downloaded from the geographic information system 1 to the user terminal 3.
  • any content file can be uploaded from the user terminal 3 to the geographic information system 1.
  • FIG. 5 shows the control flow for opening the above-described project and displaying the project screen 31 by the content display unit 19 (FIG. 1).
  • a project screen 31 of the project As shown in FIG. 5, when the user designates a project to be opened (step S1), a project screen 31 of the project as shown in FIG. In , a map specified by the user is displayed as a background, superimposed on the map, and various registered contents (such as orthoimages and , icons for other types of content) are displayed (S2). Each content is displayed at a location on the map corresponding to the geographic coordinates of that content. As described above, the layout relationship in the front and back of the content is the order of the map, the orthoimage, and other content icons from the back to the front. Furthermore, the icon of the analysis tool 23 used in the project (registered in the project on the project management table 25A) is also displayed in the content display frame 39 (S3).
  • FIG. 6 shows the flow of control for searching and displaying content on the project screen 31 by the content display unit 19 (FIG. 1).
  • searching When narrowing down (searching) is performed with one or more designated conditions combining two or more of the above three types of search conditions: tag, map display range, and period, content associated with the project will be: Only the contents that meet these specified conditions are selected, and only the selected contents are displayed on the map of the content display frame 39 (S17).
  • FIG. 7 shows a control flow for switching the display format in the content display frame 39 of the project screen 31 between split display and superimposed display by the content display unit 19 (FIG. 1).
  • the user selects one or more pieces of content on the map or from the content list in the content display frame 39.
  • the database 11 is searched for analysis result data related to the selected content (S23).
  • An entity image of the selected content is displayed in a split display format together with the data (S24). If there is no analysis result data, the actual image of the selected content is displayed in a split display format that allows comparison viewing (S25).
  • FIG. 8 shows a display example when a moving image is displayed on the project screen 31 as illustrated in FIG.
  • the moving image 83 is displayed in the image column 81 .
  • a play button 85 below the moving image 83, the moving image 83 can be played.
  • a playback point (playback time from the start frame) display 87 of the moving image 83 is shown, and a playback point mark 89 is also displayed on the playback control bar.
  • the trajectory setting field 91 is displayed in the detailed display frame 41 .
  • the geographical coordinates of the start point (shooting start position) and the end point (shooting end position) of this moving image and the direction of the camera are displayed (these information will be displayed at the time of content registration, which will be described later). ), the user can also change the geographic coordinates of the start and end points and the camera orientation in the trajectory setting field 91 .
  • a start point mark 93 and an end point mark 97 are automatically displayed on the respective geographical coordinates of the start point and end point of this moving image in the content display frame 39, and the start point mark 93 and the end point mark 97 are automatically displayed.
  • a trajectory mark 95 connected by straight lines is also automatically displayed.
  • the trajectory mark 95 approximately represents the movement trajectory of the camera during moving image shooting. If the movement locus of the camera that captured the moving image is a curve or polygonal line, the user may be allowed to set not only the starting point and the end point, but also the coordinates of one or more waypoints on the movement locus. In that case, a polygonal line or curve trajectory mark 95 may be displayed so as to reach the end point from the start point via one or more waypoints in order.
  • a camera position mark 99 is automatically displayed at a position corresponding to the playback time point 87 on the trajectory mark 95 .
  • the position is automatically calculated by proportionally distributing the total length of the trajectory mark 95 at the ratio of the reproduction time point to the total reproduction time length of the moving image, and the camera position mark 99 is displayed at that position. Therefore, while the moving image is being reproduced, the camera position mark 99 moves along the trajectory mark 95 from the start point to the end point, thereby allowing the user to know from which position on the map the scene being viewed was taken. can grasp something.
  • the camera position mark 99 on the map moves accordingly.
  • the moving image playback point mark 89 (playback point) moves accordingly.
  • FIG. 9 shows the flow of processing for controlling the camera position mark 99 according to the playback time point of the moving image 83 by the content display unit 19 (FIG. 1).
  • a start point mark 93, an end point mark 97, and a locus mark 95 are displayed on the map of the content display frame 39 (S31). Further, the position on the trajectory mark 95 corresponding to the playback time of the moving image 83 is calculated, and the camera position mark 99 is displayed at that position (S32).
  • FIG. 10 shows the flow of processing for controlling the playback point of the moving image 83 according to the camera position mark 99 by the content display unit 19 (FIG. 1).
  • 11 to 16 show examples of a series of screens displayed on the user terminal 3 by the geographic information system 1 when uploading and registering content.
  • a registration method selection screen 106 as shown in FIG. 11 is displayed. On this screen 106, one of a method of registering one or more contents in one project and a method of registering a plurality of contents in a plurality of projects can be selected. By clicking the button 103, the former can be selected, and by clicking the button 105, the latter can be selected.
  • This screen 106 has a file selection field 107 and a map display field 109 .
  • the user can use the file selection field 107 to select one or more content files to be registered in any directory on the user terminal 3 or network 5 .
  • the map display field 109 displays a map of an arbitrary area selected by the user or a map of an area including the position coordinates described in the content file selected by the user and desired to be registered.
  • a list of thumbnail images 111 of the selected contents is displayed in the content selection field 107 as shown in FIG.
  • a content icon 113 representing the serial number of the selected content is displayed at a position corresponding to the geographical coordinates of the selected content on the map in the map display field 109 .
  • next step to be performed is displayed depending on whether the content is registered in one project or registered in a plurality of projects. is different.
  • control proceeds to the project registration step, and a project registration screen 121 as shown in FIG. 16 is displayed.
  • control proceeds to the content classification step and content classification screen 115 as shown in FIG. 14 is displayed.
  • the content registration unit 13 (Fig. 1) of the geographic information system 1 automatically classifies the selected content into a plurality of groups.
  • This classification classifies contents presumed to be registered in the same project into the same group, and contents presumed to be registered in different projects into different groups. , based on the geographic coordinates, camera orientation, shooting date and time recorded in the content file, for example, using a machine-learned neural network.
  • the result of this automatic classification is displayed on the content classification screen 115 illustrated in FIG. That is, the result of automatic classification is displayed in the file classification field 117 of this screen 115 .
  • the screen switches to a classification correction screen 118 as shown in FIG.
  • the user selects arbitrary content on the file selection column 107 or the map display column 109 and moves it to an arbitrary group in the destination group box 119, thereby grouping the content. can be fixed.
  • the user clicks the confirm button 120 on this screen the correction result is confirmed, and the screen shifts to the content classification screen 115 illustrated in FIG.
  • control proceeds to the project registration step, and a project registration screen 121 as shown in FIG. 16 is displayed.
  • the icon 113 of the content belonging to the group is displayed in the map display field 109 for each content group, and an icon 113 for setting the project to which the content is registered is displayed.
  • a project setting field 123 is displayed.
  • the user can set the name of the project to be registered and content processing (for example, orthoimage processing, tile image processing, etc.) to be performed on the content of the group.
  • the content file of the group is uploaded from the user terminal 3 to the geographic information system 1, and the registration destination is registered. registered in the project.
  • the geographic information system 1 applies the set content processing to the uploaded content.
  • the geographic information system 1 allows the user to designate the starting and ending positions of the moving image and the direction of the camera on the map in the map display field 109 as shown in FIG. (the specific screen for that is not shown), and the geographical coordinates of the start and end points and the orientation of the camera are also registered together with the video file.
  • FIG. 17 shows the flow of control for registering the above-described content by the content registration unit 13 (FIG. 1).
  • the user selects whether content is to be registered (uploaded) to one project or multiple projects (S41). Even if one of them is selected, the user then selects one or more contents to be registered using the content selection field 107 on the content selection screen 106 (FIG. 12) (S42). Then, the icon of the selected content is displayed at the corresponding position on the map in the map display field 109 of the content selection screen 106 (FIG. 12) (S43).
  • the selected content is automatically grouped (S44).
  • the user modifies the automatic classification results. That is, the user causes the classification correction screen 118 (FIG. 15) to be displayed, moves the cursor over the map in the map display field 109 in the screen 118 (Yes at S45), and selects any content on the map.
  • the group can be corrected (S46).
  • the user moves the cursor to the file selection column 107 in the classification correction screen 118 (Fig. 15) (No in S45), selects any content from the content list in the column 107, and selects the destination group box.
  • the group can be corrected by moving it to an arbitrary group within 119 (S47).
  • the user sets information for each project on the project registration screen 121 (Fig. 16) (S48). Further, the user sets the processing to be performed on the content on the project registration screen 121 (FIG. 16) (S49).
  • FIG. 18 shows a more detailed control flow of the content upload step shown in step S50 of FIG.
  • the extension of the uploaded content file is checked (S51), and the type of content is identified (S52-S55).
  • types of content single images (still images), orthoimages, moving images, and 3D model data are exemplified in FIG. 360-degree still or moving images for panoramic display, reporting documents for a point or area, etc.).
  • the identification result is a single image (Yes at S52), and if ortho-imaging processing is not set for that single image (No at S56), it is stored in the database 11 in a predetermined registration format for single images. It is registered (S59).
  • orthoimage processing is set for multiple overlapping single images of a certain area taken with a camera (Yes in S56), an orthoimage of that area can be created from those multiple single images. (S57), and a tile image for display is created from the orthoimage (S58). Then, the single image, the orthorectified image and the tile image are associated with each other and stored and registered in the database 11 in a predetermined registration format for each image type (S59).
  • 3D model data of the area is created as an intermediate product.
  • This three-dimensional model data may also be stored and registered in the database 11 in a predetermined registration format for three-dimensional model data, associated with the orthorectified image, or independently of the orthorectified image (S59).
  • a tile image for display is created from the orthorectified image (S58), and the orthorectified image and the tile image are associated with each other. It is stored and registered in the database 11 in a predetermined registration format for image type (S59).
  • the user is prompted on the map display field 109 of the project registration screen 121 (FIG. 16) to indicate the start and end points of the movement locus of the camera when shooting the moving image. and the direction of the line of sight of the camera is set (S60) (if the movement trajectory is a polygonal line or curve, the positions of one or more waypoints on the movement trajectory may also be set).
  • the moving image is stored and registered in the database 11 in a predetermined registration format for moving images together with setting information such as the start point, the end point and the orientation of the camera (S59).
  • the one or more geographic coordinates that can be registered in association with each geographic content include, for example, the coordinates of the shooting point of the single image, the coordinates of the viewpoint (shooting point) of the panoramic image, and the direction of the central position of the entire panoramic image (panoramic image ), the coordinates of the contour vertices of the orthorectified image, the coordinates of the contour vertices of the geographic area where the 3D model exists, the movement of the camera from the start to the end of shooting the moving image Coordinates of the start point and end point of the trajectory, passing point as necessary, and geographic coordinates of the analysis target content of the analysis data can be included.
  • FIG. 19 shows an example flow of control of a tool that measures the area and volume of a certain geographic area as an example of the content analysis tool 23 .
  • the tool displays the geographic points of the vertices of the designated area in the orthoimage. Using the coordinates, the planar area of the designated area is calculated (S62). Also, if a 3D model (for example, 3D point cloud data or 3D mesh data) exists in the specified area, the 3D model is acquired by the tool (S63), and the 3D model is specified. The volume of the specified area is calculated (S64) using the geographic coordinates of the points within the area.
  • a 3D model for example, 3D point cloud data or 3D mesh data
  • the volume of the designated region at each time is calculated using the three-dimensional models obtained at different times.
  • method (S65) The calculation results of the area of the designated area and the volume of each period are associated with the geographic coordinates of the designated area, registered in the database 11 as geographic content of the measurement data, and displayed on the geographic information display screen, such as a graph. format (S66).
  • the tool further allows the user to select desired geographic content (e.g., an orthorectified image or an image of three-dimensional data from any of the different periods above) as the background of the content display frame 39 when the calculation results are displayed. ) (S67).
  • desired geographic content e.g., an orthorectified image or an image of three-dimensional data from any of the different periods above
  • the selected content is displayed as the background (S68).
  • FIG. 20 shows the flow of one aspect of controlling the line-of-sight direction of a plurality of panoramic images displayed in a split display format.
  • the line-of-sight directions of a plurality of panoramic images are controlled to be changed by the same pan (horizontal swing of the line of sight) angle and tilt (vertical swing of the line of sight) angle.
  • the database 11 is searched for panorama images (for example, panorama photographic images) present in the map area displayed in the content display frame 39 (S71).
  • panorama images for example, panorama photographic images
  • the user designates a plurality of panorama images to be displayed in the split display format from the retrieved panorama images (S72)
  • the specified panorama images are displayed in the content display frame 39 in the split display format ( S73).
  • a user's mouse operation on a plurality of displayed panorama images is monitored (S74), and when a mouse operation on any one panorama image is detected (S75), the amount of pan operation of the mouse operation and A tilt (vertical swing of the line of sight) operation amount is calculated (S76). Then, the calculated pan (vertical swing of the line of sight) operation amount pan and the calculated tilt operation amount tilt are simultaneously applied to all the displayed panorama images (S77), and the line of sight of all the panorama images is applied. are simultaneously changed by the same pan angle and the same tilt angle.
  • control can be performed so that the line-of-sight directions of all the panoramic images are aligned in the same azimuth, for example, north.
  • the line-of-sight directions of all the displayed panorama images can be aligned in the same direction.
  • FIG. 21 shows another mode of flow for controlling the line-of-sight direction of a plurality of panoramic images displayed in a split display format.
  • the line-of-sight directions of a plurality of panoramic images are controlled in a direction toward one point on the map.
  • the database 11 is searched for panorama images (for example, panorama photographic images) present in the map area displayed in the content display frame 39 (S81).
  • the user designates a plurality of panorama images to be displayed in the split display format from among the panorama images retrieved (S82).
  • the user designates one point to which the panorama images are directed, on the displayed map or by inputting geographic coordinate values (S83).
  • a pan angle for directing each panorama image to the specified point. is calculated (S84).
  • a plurality of specified panorama images to which the calculated pan angles are respectively applied are displayed in the content display frame 39 in a split format (S85). In this way, the pan directions of the line of sight of all the displayed panorama images are directed to the same one specified point.
  • FIG. 22 shows the flow of control for alignment between multiple geographic contents (particularly images) existing in the same geographic area.
  • This control enables analysis tools to perform calculations with high accuracy, such as comparing geographic content existing in the same geographic region or analyzing differences between them, such as the area and volume calculations shown in FIG.
  • This control is performed as a pre-process to enable it to be performed.
  • step S91 it is checked whether the user has specified feature points in a plurality of images to be analyzed. If the user specifies a feature point (No in S91), the specified feature point is used as a clue for alignment, and control proceeds to step S93. On the other hand, if the user does not specify feature points (Yes in S91), feature points are automatically identified in each of the images to be analyzed (S92), and control proceeds to step S93.
  • step S93 pixels in the neighboring area containing each feature point are extracted from each image, and the feature amount of each feature point is calculated from the extracted pixels. Then, a matching process is performed to find which feature point of one image matches which feature point of another image, using the feature quantity for each feature point between different images (S94).
  • Predetermined initial values are set for parameters of image transformation matrices for scaling, translating, rotating, skewing, etc. of each image, and those image transformation matrices are applied to each image (S96). .
  • the error of the geographical coordinate value is calculated (S97), and it is checked whether the error has decreased from the previously calculated error. (S97). If the error has not decreased, the parameters of the image transformation matrix are changed by a predetermined unit amount in the direction opposite to the parameter change direction from the previous parameters to the current parameters (S98), and the process proceeds to step S96 again. An error is calculated.
  • step S97 it is checked whether the error of all feature point pairs of all pairs of images to be analyzed converges within a predetermined allowable error range (S99). .
  • the parameter of the image transformation matrix related to that error is changed by the unit amount of household in the same direction as the direction of change from the previous time to the current time (S100). Return to step S96 again.
  • step S99 As the process of steps S96 to S100 is repeated, all the errors finally converge in step S99, and this control ends.
  • FIG. 23 shows an example of a screen displaying a panoramic image.
  • the icon 51 of one panorama image displayed in the content display frame 39 within the project screen 31 is selected by the user, and the selected panorama image is displayed in the entity image column 63 of the detail display frame 41.
  • the panorama image icon 51 is arranged at the coordinates of the viewpoint of the panorama image (or the shooting point in the case of a panorama photograph) on the map in the content display frame 39 .
  • the panorama image displayed in the entity image field 63 can be panned and tilted by the user by operating the mouse.
  • the portion displayed in the entity image field 63 of the panorama image by the content display unit 19 based on the geographical coordinates of the panorama image registered in the database 11 (for example, the orientation of the central position in the horizontal direction of the entire panorama image). Calculate the azimuth (or pan angle) of the horizontal center position of the .
  • the content display unit 19 recalculates the panning angle, that is, the orientation of the central position of the display portion based on the amount of panning operation by the user, and Change (pan) the display to match.
  • the content display unit 19 associates, on the map in the content display frame 39, a line-of-sight mark 511 indicating the orientation (line-of-sight direction) of the central position of the display portion of the panorama image with the icon 51 of the panorama image. displayed.
  • a line-of-sight mark 511 indicating the orientation (line-of-sight direction) of the central position of the display portion of the panorama image with the icon 51 of the panorama image. displayed.

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Databases & Information Systems (AREA)
  • Data Mining & Analysis (AREA)
  • General Engineering & Computer Science (AREA)
  • Mathematical Physics (AREA)
  • Business, Economics & Management (AREA)
  • Educational Administration (AREA)
  • Educational Technology (AREA)
  • Library & Information Science (AREA)
  • Instructional Devices (AREA)
  • Processing Or Creating Images (AREA)
  • Information Retrieval, Db Structures And Fs Structures Therefor (AREA)

Abstract

広範な異なる用途又はユーザニーズに適用し得る地理情報システムを提供する。 地理情報システム1は、データベース11と、ユーザからアップロードされる地理コンテンツをデータベースに登録するコンテンツ登録部13と、登録された地理コンテンツを表示した地理情報画面をユーザ端末に提供するコンテンツ表示部19とを備える。登録可能な地理コンテンツは、単画像、オルソ画像、動画像、3次元モデルデータ、それらの解析結果データなどである。地理情報画面では、重畳表示と分割表示が選べる。重畳表示の場合、コンテンツの表示配置は、背面から前面へ向かって、地図、オルソ画像、その他のコンテンツのアイコンの順である。分割表示では、複数のコンテンツが対比閲覧できる。動画像を再生すると、再生時点に応じた地図上の位置にカメラ位置マークが表示される。

Description

地理情報システム
 本発明は、土地、自然物又は人工物などの地理物の存在する地理空間の情報を、それら地理空間の地理的位置に関連付けて管理し、かつ視覚的に表示するための地理情報システムに関する。
 例えば特許文献1に、地理情報システムを用いた防災・災害復旧支援システムが記載されている。この防災・災害復旧支援システムの用途は、災害発生前に被害を防ぐための対策の立案を支援したり、災害発生後に復旧作業を支援したりすることにある。
 このシステムは、入力された浸水深さ情報に基づき、地形図情報に浸水深さ情報を関連付けした浸水深レイヤを作成し、その浸水深レイヤに浸水深さに応じて異なる着色を施し、そして、その浸水深レイヤを地形図情報に重畳表示する。
特開2007-220030号公報
 地理情報システムを利用し得る用途は、上記のような災害対策の他に多岐にわたる。また、同じ用途においても、ユーザにより、地図情報システムに対するニーズが異なるであろう。したがって、地理情報システムで管理されるべき地理情報の種類は、それぞれの用途及びユーザにより異なる。
 例えば、特許文献1に記載された防災・災害復旧支援システムは、浸水深レイヤを表示するので、水害対策には有用であるが、それとは異なる用途又はニーズには適さない可能性がある。
 上記したことに鑑み、本発明の一つの目的は、より広範な異なる用途又はユーザニーズに適用し得る地理情報システムを提供することにある。
 本発明の別の目的は、より広範な種類の地理情報を管理できる地理情報システムを提供することにある。
 本発明のまた別の目的は、それぞれの地理情報を、その地理的位置だけでなく時間をも利用した方法で、視覚的に表示することができる地理情報システムを提供することにある。本発明のその他の目的は、以下の説明から明らかになる。
 開示された一つの実施形態に従えば、ユーザ端末と通信可能に接続され、前記ユーザ端末に地理情報を提供する地理情報システムは、1以上の地理コンテンツを管理するためのデータベースと、ユーザに任意に選択されて前記ユーザ端末からアップロードされる1以上の地理コンテンツを受信して、前記受信した地理コンテンツを前記データベースに登録するコンテンツ登録手段と、前記データベースに登録された前記地理コンテンツのうちの少なくとも一部を表示した1種類以上の地理情報画面を前記ユーザ端末に提供するコンテンツ表示手段とを備える。
前記地理コンテンツは、必ずしも地上のデータである必要はなく、上空のデータ、地中のデータ、海中のデータなどでも良く、それぞれデータは対応する地理空間に紐づけられ得る。
前記ユーザ端末は、パーソナルコンピュータに限定されず、スマートフォン、タブレット、ヘッドマウントディスプレイ、将来生まれるであろう新たな端末装置などでよく、その構造や機能や用途の種類を問わない。
 前記ユーザ端末からアップロードされる前記地理コンテンツの各々は、所定の複数のコンテンツ種別のうちのいずれか一つのコンテンツ種別をもつ。
 前記コンテンツ登録手段は、前記ユーザ端末からアップロードされた1以上の地理コンテンツを受信した場合、前記受信した地理コンテンツの各々のコンテンツ種別を識別し、前記受信した地理コンテンツの各々を、前記識別されたコンテンツ種別に応じた所定の登録形式で、前記データベースに登録する。
 前記1以上のコンテンツ種別のうちのいずれの種別に応じた前記所定の登録形式にも、地理コンテンツに関連付けられた地理座標が含まれる。
受信した地理コンテンツに地理座標が含まれない場合、ユーザに直接地理座標を指定させるか、あるいは地理コンテンツに紐つける地点をユーザに地図上で指定させることで、前記コンテンツ登録手段は、受信した地理コンテンツに地理座標を関連付けることができる。
 前記コンテンツ表示手段は、所定の1種類以上のサーチ条件に関しユーザが任意に指定した指定条件を用いて、前記指定条件に合致する地理コンテンツを前記データベースから検索し、前記検索された地理コンテンツの表示画像を所定の地図上の前記地理座標に対応した位置に重畳して表示した第1のコンテンツ表示部を有する第1種類の地理情報画面を作成し、前記第1種類の地理情報画面を前記ユーザ端末に提供する。
 前記地理コンテンツの前記種別には、少なくとも、オルソ画像と他の1以上の種別が含まれる。
 前記地理コンテンツの前記種別には、少なくとも、動画像が含まれる。前記コンテンツ登録手段は、前記ユーザ端末からアップロードされる前記地理コンテンツに動画像が含まれる場合、前記動画像の始点と終点のそれぞれの地理座標を特定し、前記動画像を前記始点と前記終点のそれぞれの地理座標に関連付けた動画用登録形式で前記データベースに登録する。
 動画像に紐つけて登録される地理座標は始点と終点に限定する必要はなく、動画を撮影した時の移動軌跡を地図上に表示する際に必要とユーザが考えて指定した数の地点が登録されて良い。ユーザに指定された地点を通る移動軌跡は、直線に限られず、直線でない形状、例えば、往復経路を示すU字状の軌跡や折れ線状や曲線状の軌跡が登録可能であってよい。
 前記コンテンツ表示手段は、前記第1種類の地理情報画面を作成するとき、前記第1種類の地理情報画面内に、前記第1のコンテンツ表示部と共に前記動画像を再生し表示する実体画像表示部を配置する。
 前記コンテンツ表示手段は、さらに、前記第1のコンテンツ表示部の前記地図上に、前記動画像の前記始点の地理座標と前記終点の地理座標との間に位置に、カメラ位置マークを表示する。
 前記コンテンツ表示手段は、さらに、前記実体画像表示部における前記動画像の再生時に、再生時点に応じて前記カメラ位置マークを前記始点から前記終点へ向けて移動させる。
前記カメラ位置マークは、撮影時のカメラ位置だけではなく、カメラの視線方向も示すようなマークであっても良い。
前記地理コンテンツの前記種別には、少なくとも、パノラマ画像(全天球画像、360度画像、あるいは通常の写真画像より非常に広い角度範囲を撮影した画像)が含まれ得る。前記コンテンツ登録手段は、前記ユーザ端末からアップロードされる前記地理コンテンツにパノラマ写真が含まれる場合、前記パノラマ写真の撮影位置を示す地理座標を特定し、前記データベースに登録することができる。
受信したパノラマ写真に地理座標が含まれない場合、ユーザに地図上で撮影地点の座標を指定させるなどの方法で、前記コンテンツ登録手段は、地理座標に関連付けたパノラマ写真用登録形式で前記データベースに登録することができる。
前記地理コンテンツの前記種別には、少なくとも、DSM(Digital Surface Model:数値表層モデル)が含まれ得る。DSMとは、地物表面の標高からなる3次元データを2次元メッシュ形式で表現したファイルを指す。前記コンテンツ登録手段は、前記ユーザ端末からアップロードされる前記地理コンテンツにDSMが含まれる場合、前記DSMに対応する平面的地理領域を定義する地理座標を特定し、前記データベースに登録することができる。受信したDSMに対応する地理領域の地理座標が含まれない場合、ユーザに地図上でその地理座標を指定させるなどの方法で、前記コンテンツ登録手段は、地理座標に関連付けたDSM用登録形式で前記データベースに登録することができる。これと同様の扱いを、その他の種類の地理モデル、例えばDEM(Digital Elevation Model:数値標高モデル)、DTM(Digital Terrain Model:数値地形モデル)、 DHM(Digital Hight Model:数値高さモデル)、DLM(Digital Land Use Map:土地利用分類図)などについても行ってよい。また、ユーザ端末からアップロードされた或る地理領域の多数の写真画像を用いて、その地理領域の上記のような地理モデルを、本システムがその内部で自動的に作成して、上記のように登録できるようにしてもよい。それらの地理モデルは、オルソ地図画像と同じレイヤーに配置されて画像としてユーザに見せるようにしてもよい。あるいは、それらの地理モデルのアイコンがオルソ地図画像の上に重畳して表示され、そのアイコンをユーザがクリックすると、そのモデル用のビューワが立ち上がって、そのモデルを画像としてユーザに見せるようになっていてもよい。
前記地理コンテンツの前記種別には、少なくとも、3D(3次元)点群データが含まれ得る。3D点群データとは、3次元座標をもった点データの集合を指す。前記コンテンツ登録手段は、前記ユーザ端末からアップロードされる前記地理コンテンツに3D点群データが含まれる場合、前記3D点群データに対応する地理領域を示す地理座標を特定し、前記データベースに登録することができる。3D点群データについても、上述したDSMに対する取り扱いと同様の取り扱いが行えるようにしてよい。
前記地理コンテンツの前記種別には、少なくとも、3D(3次元)メッシュデータが含まれ得る。3Dメッシュデータとは、3次元点群データの各点を頂点とするポリゴンから構成される3次元データを指し、前記ポリゴンの表面をメッシュと呼ぶ。前記コンテンツ登録手段は、前記ユーザ端末からアップロードされる前記地理コンテンツに3Dメッシュデータが含まれる場合、前記3Dメッシュデータの撮影領域を示す地理座標を特定し、前記データベースに登録することができる。3Dメッシュデータについても、上述したDSMに対する取り扱いと同様の取り扱いが行えるようにしてよい。
前記地理コンテンツの前記種別には、少なくとも、ラベルが含まれ得る。ラベルとは、ユーザが地図上で指定する任意の地点とその地点に付随される情報で構成される地理コンテンツを指す。その地点に付随される情報とは、ラベル名称、メモ、ファイル、URLリンクなどである。前記コンテンツ登録手段は、ユーザにラベルを配置したい地点を地図上で指定させることで、そのラベルを管理する地理座標を特定し、地理座標に紐づけてそのラベルを前記データベースに登録することができる。
前記地理コンテンツのうち、オルソ画像、DSM、3D点群データ、3Dメッシュデータなどについては、必ずしも外部から入力される必要はなく、本システムが、前記データベースに登録された画像や動画を元に、例えばSfM/MVS解析を行うことで、それらのデータを生成しても良い。
前記地理コンテンツのうち、パノラマ写真については、必ずしも外部から入力される必要はなく、本システムが、前記データベースに登録された画像や動画を元に、それらの画像を結合して、パノラマ画像を生成しても良い。
前記コンテンツ表示手段は、ユーザにオルソ画像上で計測領域を指定させることで、指定された領域の距離、面積、体積などを計測し、その計測結果を例えばグラフなどの形式でオルソ画像上に重畳して表示するようにしてよい。
前記コンテンツ表示手段は、ユーザが前記計測領域を指定するとき、または、前記計測結果を表示するとき、表示される背景画像を、任意の地理コンテンツ(例えば、複数時期のオルソ画像の内のいずれか、あるいは、オルソ画像に代えてDSMなどの地理モデルの画像)に切り替えることができてよい。これにより、ユーザは計測対象領域の状況をより詳細に又は的確に把握することができる。
前記計測領域及び計測結果は、それ自体が地理コンテンツとして前記データベースに登録され得る。これにより前記計測領域及び計測結果も、ユーザが登録した他の地理コンテンツと同様に、任意のサーチ手段を使って検索することができる。また、前記計測領域及び計測結果を前記データベースに登録する際は、他の地理コンテンツと同様に、ユーザの入力した任意のコメントやタグを付与することができてよい。
前記計測領域は、前記計測領域が前記データベースに登録された後であっても、ユーザによりその頂点等の地理座標を自由に更新することができてよい。更新された頂点座標は、前記データベースに上書き保存されてよい。
 前記コンテンツ表示手段は、前記第1種類の地理情報画面において、前記ユーザに1以上の地理コンテンツを選択させることができ、かつ、前記ユーザに、前記地理コンテンツを表示するための形式として、重畳表示形式と分割表示形式を選択させることができる。選択方法には、ユーザが一つ一つの地理コンテンツを順に選択する方法と、ユーザがある地理領域を指定することでその地理領域内に存在する1以上の地理コンテンツを同時に選択する方法が採用し得る。
 前記コンテンツ表示手段は、前記第1種類の地理情報画面において、前記ユーザが1以上の地理コンテンツを選択すると共に前記分割表示形式を選択した場合、前記選択された地理コンテンツを対比して閲覧可能な分割表示形式で表示した第2のコンテンツ表示部を有する第2種類の地理情報画面を作成して、前記第2種類の地理情報画面を前記ユーザ端末に提供する。
前記コンテンツ表示手段は、ユーザが地図上で選択した地理領域に存在する地理コンテンツの数だけ、地理情報画面を分割してそれらの地理コンテンツを表示することができてよい。地理情報画面の分割数は2に限らず、ユーザが望む数の地理コンテンツを分割表示形式で表示することができる。
前記コンテンツ表示手段は、複数のパノラマ写真を分割表示形式で表示する場合、どれか一つのパノラマ写真の視線方向をユーザが変更するよう操作する、その操作に追従する形で、表示された他のパノラマ写真の視線方向も自動的に変更することができてよい。
前記コンテンツ表示手段は、複数のパノラマ写真を分割表示形式で表示する場合、ユーザが地図上で任意の一地点を指定すると、表示された複数のパノラマ写真の視線方向を、ユーザに指定された地点に向かう方向に指向するように変更できてよい。
前記コンテンツ表示手段は、ある地理領域に複数の異なる時期の地理コンテンツが存在する場合、それら地理コンテンツを表示できるだけでなく、それら異なる時期の地理コンテンツの相互間の差分を解析して、その差分解析結果を表示できてよい。
前記コンテンツ表示手段は、前記複数時期の地理コンテンツがそれぞれ位置誤差を有する場合、前記の差分解析を行う前に、その地理コンテンツをそれぞれ解析して重複した特徴点を抽出し、この重複した特徴点の差が最小となるように局所反復演算を行うことで、地理コンテンツが有する位置誤差を自動補正しても良い。
前記コンテンツ表示手段は、前記複数時期の地理コンテンツがそれぞれ位置誤差を有する場合、前記の差分解析を行う際に必ずしも全て自動で行う必要はなく、その地理コンテンツの中で重複した特徴点を人が、地図上をクリックあるいは、画面またはファイルから数値を直接指定し、この重複した特徴点の差が最小となるように局所反復演算を行うことで、地理コンテンツが有する位置誤差を半自動的に補正しても良い。
前記コンテンツ登録及び表示手段は、ある地理コンテンツを登録及び表示できるだけでなく、その地理コンテンツを入力として画像解析又はAI解析を行なった解析結果も、別の地理コンテンツとして、登録及び表示できてよい。
前記コンテンツ表示手段は、ある地理領域に複数の異なる時期の画像解析結果又はAI解析結果が存在する場合、それら異なる時期の画像解析結果又はAI解析結果の相互間の差分を解析して、その差分解析結果を表示できてよい。
前記解析結果は、前記コンテンツ表示手段に表示されるだけではなく、外部システムにインポートできるよう、外部出力できてよい。
 前記コンテンツ登録手段は、前記ユーザ端末からアップロードされた1以上の地理コンテンツを受信した場合、前記受信した地理コンテンツの各々の日時を特定すると共に、前記受信した地理コンテンツの各々に対して前記ユーザに任意の1以上のタグを設定させ、前記受信した地理コンテンツの各々を、前記識別された日時と前記設定されたタグとに関連付けられた各コンテンツ種別に応じた所定の登録形式で、前記データベースに登録する。
 前記所定の1種類以上のサーチ条件には、少なくとも、前記検索される地理コンテンツを前記日時で絞り込むための期間条件と、前記検索される地理コンテンツを前記タグで絞り込むためのタグ条件とが含まれる。
 前記コンテンツ登録手段は、前記ユーザ端末からアップロードされた1以上の地理コンテンツを、前記ユーザが任意に設定した1以上のプロジェクトに関連付けて登録することができる。
  前記コンテンツ登録手段は、1つのプロジェクトに関連付けて1以上の地理コンテンツを登録する第1の登録方法と、複数のプロジェクトに関連付けて複数の地理コンテンツを登録する第2の登録方法とを、前記ユーザに選択させることができる。
 前記コンテンツ登録手段は、前記第2の登録方法が選択されると共に前記ユーザ端末から複数の地理コンテンツがアップロードされた場合、前記アップロードされた複数の地理コンテンツを自動的に複数のグループに分類し、前記分類された複数のグループの各々について前記ユーザに所望の修正を実行させ、前記分類された複数のグループの各々について前記ユーザにプロジェクトを設定させ、そして、前記分類された複数のグループの各々に属する前記地理コンテンツを前記設定されたプロジェクトに関連付けて前記データベースに登録する。
 前記コンテンツ表示手段は、前記ユーザ端末から前記ユーザが所望するプロジェクトを開く要求を受け、前記所望されたプロジェクトに関連付けられた前記データベース内の地理コンテンツを用いて、前記第1種類の地理情報画面を作成して前記ユーザ端末に提供する。
 前記第1種類の地理情報画面は、前記第1種類の地理情報画面上に表示された地理コンテンツの各々のタグを前記ユーザが編集するためのタグ編集部を有する。
一実施形態にかかる地理情報システムの全体的なハードウェア構成を示す図。 データベースに記憶された管理テーブルの構成例を示す図。 プロジェクトの表示画面の例を示す図。 複数のコンテンツの分割表示画面の例を示す図。 コンテンツ表示部によるプロジェクトを開く制御の流れを示す図。 コンテンツ表示部によるコンテンツを検索し表示する制御の流れを示す図。 コンテンツ表示部によるコンテンツの分割表示と重畳表示を切り替える制御の流れを示す図。 動画を表示する画面の例を示す図。 コンテンツ表示部による動画の再生時点に応じてカメラ位置マークを制御する処理の流れを示す図。 コンテンツ表示部によるカメラ位置マークに応じて動画の再生時点を制御する処理の流れを示す図。 コンテンツの登録の仕方を選ぶ画面の例を示す図。 登録したいコンテンツを選択する画面の例を示す図。 登録したいコンテンツを選択した結果の画面の例を示す図。 選択されたコンテンツを自動的にグループ分けした結果の画面の例を示す図。 コンテンツのグループを修正する画面の例を示す図。 グループごとにプロジェクトを登録する画面の例を示す図。 コンテンツ登録部によるコンテンツを登録する制御の流れを示す図。 コンテンツ表示部によるコンテンツアップロード時のより詳細な制御の流れを示す図。 コンテンツ解析ツールの計算処理の一つの制御例の流れを示す図。 複数のパノラマ画像を分割表示形式で表示した場合の、コンテンツ表示部による、それらパノラマ画像の視線方向を制御する一つの態様の流れを示す図。 複数のパノラマ画像を分割表示形式で表示した場合の、コンテンツ表示部による、それらパノラマ画像の視線方向を制御する別の一つの態様の流れを示す図。 同じ地理領域に存在する複数の地理コンテンツ間の位置合わせをする制御の流れを示す図。 パノラマ画像を表示したプロジェクト画面の例を示す図。
 図1は、一実施形態にかかる地理情報システムの全体的なハードウェア構成を示す。
 一実施形態にかかる地理情報システム1は、1以上のユーザ端末3に通信ネットワーク5を介して通信可能に接続され、ユーザ端末3に対して地理情報を提供する。すなわち、地理情報システム1は、ユーザ端末3から様々な種別の地理コンテンツを受信し、受信した地理コンテンツを保存し登録できる。そして、地理情報システム1は、ユーザ端末3に対して、登録された地理コンテンツを地図上に重畳して表示する、複数の地理コンテンツを対比して表示する、地理コンテンツの詳細情報を表示するなど、様々な態様で地理情報を提供することができる。地理情報システム1が扱える地理コンテンツ(以下、コンテンツと略称する)の種別には、例えば、任意の地点でカメラで撮影された単一の静止画像(以下、単画像ともいう)、パノラマ表示用の360度画像及び/又は全天球画像、動画像、任意の地域のオルソ画像、そのオルソ画像を作成するための複数の静止画像、任意の地理物や地域の3次元又は2次元のモデルデータ(例えば、DEM(Digital Elevation Model:数値標高モデル)、DTM(Digital Terrain Model:数値地形モデル)、 DHM(Digital Hight Model:数値高さモデル)、3D点群データ(3次元座標をもった点データの集合)、3Dメッシュデータ(3次元点群データの各点を頂点とするポリゴンから構成される3次元データ)、DLM(Digital Land Use Map:土地利用分類図)など)、それらのコンテンツを解析した解析データ、などがあるが、これに限られるわけではない。上記解析データには、例えば、登録された複数の地理コンテンツ間の差分解析結果、画像解析結果、人工知能(AI)で地理コンテンツを解析したAI解析結果、複数の画像解析結果間の差分解析結果、及び/又は複数のAI解析結果間の差分解析結果などがあり得る。
 地理情報システム1は、プロセッサ7、メモリ9、データベース11を備える。メモリ9には、各種のコンピュータプログラムが格納されており、それらのコンピュータプログラムをプロセッサ7が実行することにより、以下に詳述する地理情報の提供のための各種の機能が実現される。
 メモリ9内のコンピュータプログラムには、例えば、コンテンツ登録部13、オルソ生成部15、タイル画像生成部17、コンテンツ表示部 19、コンテンツ解析部21などがある。コンテンツ登録部13は、コンテンツをユーザ端末3から受信してデータベース11に格納し登録するプログラムである。オルソ生成部15は、登録されたある地域の複数の単画像から、オルソ画像を作成するプログラムである。タイル画像生成部17は、オルソ画像や単画像などの表示対象画像から、それをユーザ所望のズーム率で表示するための複数のタイル画像を作成するプログラムである。コンテンツ表示部19は、ユーザ所望のコンテンツをユーザ所望の態様で表示するプログラムである。コンテンツ解析部21は、1種類以上のコンテンツ解析ツール23の集まりであり、各コンテンツ解析ツール23は、所定の目的のために所定の種別のコンテンツを所定の方法で分析するプログラムである。
 データベース11は、1種類以上の管理テーブル25、及び、登録された各種のコンテンツのファイル17などを格納し管理する。データベース11は、また、1種類以上の地図(図示省略)を保持していてもよい(あるいは、地図は、地図を表示するときにリアルタイムで、外部の地図提供システムからネットワーク5を通じて地理情報システム1に受信されてもよい。)。
 図2は、データベース11に記憶された管理テーブル25の構成例を示す。
 図2には、プロジェクトを管理するためのプロジェクト管理テーブル25A、及びコンテンツを管理するためのコンテンツ管理テーブル25Bが例示されている(その他に、図示してないが、ユーザを管理するためのユーザ管理テーブルなどもあり得る)。
 プロジェクト管理テーブル25Aには、ユーザにより設定された1以上のプロジェクトが、プロジェクト用の登録形式で登録される。すなわち、プロジェクト管理テーブル25Aには、プロジェクト(つまり、ユーザが地理情報システム1を使用する目的又は作業)ごとに、そのプロジェクトの名称、そのプロジェクトで表示されるべき地図上の場所又は地域の住所表記、そのプロジェクトを閲覧できるユーザグループ、そのプロジェクトで使用できるコンテンツ解析ツール、などが登録される。
 コンテンツ管理テーブル25Bには、ユーザ端末3からアップロードされた1以上のコンテンツ(コンテンツファイル)が、それぞれのコンテンツ種別に応じた所定の登録形式で登録される。すなわち、コンテンツ管理テーブル25Bには、ユーザ端末3から受信(アップロード)されたコンテンツごとに、ファイル名、ファイルの種別(つまりコンテンツの種別)、撮影開始地点の地理座標(緯度、経度、高度)、撮影終了地点の地理座標(緯度、経度、高度)、撮影開始時のカメラの向き、撮影終了時点のカメラの向き、そのコンテンツが使われるプロジェクトの名称、そのコンテンツに付されたタグ(ユーザが任意に設定したそのコンテンツの利用目的、用途、特性、場所、効用、価値などに関わる概念)、そのコンテンツの(撮影時又は登録時の)日時、などが登録される。なお、コンテンツ種類が単画像やオルソ画像の場合、撮影開始時と終了時について同じ撮影位置と向きが登録されるが、動画像では撮影開始時と終了時で異なる撮影位置と向きが登録され得る。また、オルソ画像の場合、撮影開始地点の地理座標には、そのオルソ画像の代表的な四隅の地点の地理座標が登録される。
 図3は、地理情報システム1がユーザ端末3に表示するプロジェクト画面の例を示す。
 ユーザが地理情報システム1にログインして、自分の閲覧可能なプロジェクトの内の一つを開くと、そのプロジェクトの作業を行うためのプロジェクト画面がユーザ端末3に表示される。プロジェクト画面には複数の種類があるが、図3に示されたものは、代表的なプロジェクト画面の一つである。
 図3に例示されたプロジェクト画面31の上部には、プロジェクト名欄33、タグサーチ欄35、期間サーチ欄37がある。プロジェクト画面31の中央には、コンテンツ表示フレーム39があり、その左側に詳細表示フレーム41がある。また、コンテンツ表示フレーム39の上隣にアップロードボタン62があり、詳細表示フレーム41に下隣にダウンロードボタン71がある。
 プロジェクト名欄33には、今開かれているプロジェクトの名称が表示される。タグサーチ欄35では、そこにユーザが任意のタグを記入して、そのタグが付されたコンテンツだけをデータベース11から検索して、コンテンツ表示フレーム39に表示することができる。期間サーチ欄37では、そこにユーザが任意の期間(期間の開始日と終了日)を記入して、その期間内の日時が付されたコンテンツだけをデータベース11から検索して、コンテンツ表示フレーム39に表示することができる。このようにタグと期間という異なる種類のサーチ条件を選択的又は組み合わせてコンテンツをサーチすることで、ユーザは、概念的及び日時的に作業に不要なコンテンツをコンテンツ表示フレーム39に表示させないようにすることができる。
 コンテンツ表示フレーム39では、コンテンツの表示形式を、重畳表示と分割表示の2種類の間で切り替えられる。その切り替えは、コンテンツ表示フレーム39上の分割/重畳表示切替ボタン59をクリックすることで行える。
 図3の例では、今、重畳表示形式が選ばれている場合を示す。重畳表示形式では、コンテンツ表示フレーム39の背景として、所定の地図43(予め用意された複数種類の地図(例えば、異なるベンダーからのイラストや衛星写真など異なる画像の地図)の中からユーザが選んだ一種類の地図)が表示される。プロジェクトを開いた当初に表示される地図の場所又は地域は、プロジェクト管理テーブル25A(図2)に登録されたそのプロジェクトの代表箇所に相当する場所又は地域である(その後、ユーザがスクロールなどで表示場所又は地域を自由に変えられる)。この背景としての地図43の上に、ユーザが登録した(そして、タグ及び/又は期間で検索された)コンテンツが重畳して表示される。
 その場合、図3に示すように、地域のオルソ画像45は、その実体画像が地図43の上に載せられて表示される(ズーム率に応じて実体画像の表示に使用されるタイル画像のセットは異なる)。オルソ画像以外のコンテンツ(例えば、単画像、パノラマ表示用画像、動画像、3次元モデルデータ、解析結果データなど)は、実体画像ではなく、それぞれのコンテンツ種別を示すアイコン47(通常カメラで撮影した単画像)、49(スマートフォンで撮影した単画像)、51(パノラマ表示用360度静止画像)、53(動画像)、55(解析結果データ)の形式で、地図43又はオルソ画像47の上に載せられて表示される。したがって、コンテンツが表示される前後配置関係は、背面側から前面へ向かって、まず最背面に地図43、次にオルソ画像45、そして、最前面に他のコンテンツのアイコン47、49、51、53、55という順序となる。この表示順序は、コンテンツの日時の順序に関係がない。各コンテンツ(又はそのアイコン)の地図上の表示位置は、コンテンツ管理テーブル25Bに登録された各コンテンツの地理座標に対応する位置である。
 また、複数のオルソ画像が重畳表示される場合には、それらオルソ画像の間に前後配置関係はなく、それぞれのオルソ画像に対してユーザが設定した透明度に応じた明瞭度で、それぞれのオルソ画像が表示される。
 また、オルソ画像以外のコンテンツのアイコンを相互に重ねて表示する場合は、例えば日時順の前後配置(例えば、日時のより新しいアイコンがより古いアイコンの上に重ねられる)で、かつ、全く同じ地理座標のアイコンでも背後のアイコンが隠れないように若干位置をずらして、表示される。
 上述した、背面から前面へ、地図、オルソ画像、そして、その他の地理コンテンツのアイコンという表示順序に代えて、次のような表示順序を採用しても良い。それは、最も背面側のレイヤに地図を表示し、その上の中間レイヤにオルソ画像と3次元モデルデータの実画像を表示し、最も前面側のレイヤにその他の地理コンテンツのアイコンを表示するものである。中間レイヤのオルソ画像と3次元モデルデータの実画像は、それぞれの透明度を調節でき、それによりお互いの関係が視認できるようになっていてよい。
 また、表示される地理コンテンツに解析データが含まれる場合には、次のような表示順序を採用しても良い。それは、最も背面側のレイヤに地図を表示し、その上の中間レイヤにオルソ画像(又は、オルソ画像と3次元モデルデータの実画像)を表示し、さらにその上の第2の中間レイヤに解析データを表し、その上の最も前面側のレイヤにその他の地理コンテンツのアイコンを表示するものである。
 このような態様で複数のコンテンツを重畳表示することで、ユーザは地図上に何処に何のコンテンツがあるかを容易に把握できる。
 さらに、ユーザが望めば、コンテンツ表示フレーム39の地図43上に表示されたコンテンツのリスト57を、コンテンツ表示フレーム39の最前面に表示することもできる。表示コンテンツリスト57には、地図43上に表示されたコンテンツのサムネイル画像58(図3では、サムネイル画像の実体は図示省略)が表示される。ユーザが、地図43上で任意の1以上のコンテンツを選択すると、表示コンテンツリスト57上でも、その選択されたコンテンツのサムネイル画像58も選択される(例えば、チェックマークが付く)。逆に、ユーザが、表示コンテンツリスト57上で任意の1以上のサムネイル画像58を選択すると、地図43上でも、その選択されたコンテンツが選択される(例えば、選択されたコンテンツのアイコン又はオルソ画像の表示色が変わる)。これにより、ユーザは、地図上の何処にどのようなコンテンツがあるかを一層確認しやすい。
 さらに、ユーザがコンテンツ表示フレーム39上の分割/重畳表示切替ボタン59をクリックすると、コンテンツ表示フレーム39の表示形式が重畳表示から分割表示へ(又はその逆へ)と切り替わる。図4は、分割表示形式に切り替えた場合のコンテンツ表示フレーム39の表示例を示す。図4の例は、ユーザが予め、図3に例示された重畳表示形式の時に4つのコンテンツ(例えば、撮影日時の異なるほぼ同じ地域のオルソ画像)73A~73Dを選択した上で、コンテンツ表示フレーム39を重畳表示から分割表示へと切り替えた場合の例を示している。図4に示すように、分割表示形式では、ユーザが選択した複数のコンテンツの実体が対比して表示される。さらに、選択されたコンテンツ73A~73Dに関して解析結果データ75が存在する場合には、その解析結果データ75の実体も一緒に表示される。これにより、ユーザは、選択した複数のコンテンツ間の相違や変化を、視覚的かつ数値的に把握することが容易である。
 また、図4に例示するように、分割表示形式で複数のオルソ画像73A~73Dが対比表示された場合、ユーザが一つのオルソ画像(例えば73A)上で任意の地点、2地点を結ぶ線分、又は3地点以上を頂点とする領域を指定すると(図4の例では、破線で示した矩形領域がユーザに指定された)、他のオルソ画像73B~73D上でも、ユーザの指定と同じ地理座標の地点、線分、又は領域が自動的に特定され表示される。そして、それぞれのオルソ画像73A~73Dに、その作成過程で作られた3次元モデルデータが付属する場合には、それぞれの3次元モデルデータを利用して、ユーザが指定した上記地点、線分又は領域についての各種の計測や解析(例えば、距離計測、面積計測、堆積計測、計測値の対比や統計処理など)を、前述した解析ツール23のいずれかを用いて行うことができる。
 再び図3を参照して、ユーザがコンテンツ表示フレーム39上の任意の一つのコンテンツについて詳細情報表示を要求する(例えば、そのコンテンツのアイコン又はサムネイル画像をダブルクリックする)と、そのコンテンツの詳細情報が、詳細表示フレーム41に表示される。図3は、一例として、オルソ画像45の詳細情報が表示された場合を示している。詳細表示フレーム41に表示される詳細情報内の複数の欄の種類は、コンテンツの種別により異なるが、どのコンテンツ種別にも共通する欄として、コンテンツの実体画像欄63、基本情報欄65、コメント編集欄67、タグ編集欄69などがある。
 コンテンツの実体画像欄63には、そのコンテンツの実体画像が表示される。この実体画像は、全画面表示やその他のユーザ所望のサイズで表示できる。オルソ画像の場合は、ユーザはこの欄63で、そのオルソ画像の透過率の設定ができる。動画像の場合、この欄63で、動画の再生もできる。
 コメント編集欄67には、そのコンテンツに対して、ユーザが任意のコメントを記入して追加したり、既存のコメントを修正したりして、そのコメントを登録できる。タグ編集欄69では、そのコンテンツに対して、ユーザが任意のタグを記入して新タグを追加登録したり、既存の登録済みタグを削除したりすることができる。
 また、ダウンロードボタン71をクリックすると、詳細表示フレーム41に表示されたコンテンツのファイルを、地理情報システム1からユーザ端末3にダウンロードできる。
 また、アップロードボタン62をクリックすると、任意のコンテンツファイルをユーザ端末3から地理情報システム1へアップロードできる。
 図5は、コンテンツ表示部19(図1)による、上述したプロジェクトを開いてプロジェクト画面31を表示する制御の流れを示す。
 図5に示すように、ユーザが開きたいプロジェクトを指定すると(ステップS1)、そのプロジェクトの図3に例示したようなプロジェクト画面31がユーザ端末3に表示され、その画面31内のコンテンツ表示フレーム39では、ユーザが指定した地図が背景として表示され、その地図の上に重畳して、そのプロジェクトに関連付けられた(コンテンツ管理テーブル25B上でそのプロジェクトが登録された)各種の登録コンテンツ(オルソ画像や、その他の種類のコンテンツのアイコンなど)が表示される(S2)。各コンテンツは、そのコンテンツの地理座標に対応した地図上の位置に表示される。前述したように、コンテンツの前後の配置関係は、背面から前面へ向かって、地図、オルソ画像、その他のコンテンツアイコンの順である。さらに、コンテンツ表示フレーム39内に、そのプロジェクトで使用される解析ツール23(プロジェクト管理テーブル25A上でそのプロジェクトに登録された)のアイコンも表示される(S3)。
 この状態で、ユーザが任意の1つのコンテンツの詳細情報表示を要求すると(S4)、そのコンテンツの詳細情報が詳細表示フレーム41に表示される(S5)。ユーザは詳細表示フレーム41に表示された各種欄の詳細情報を編集することで(S6)、そのコンテンツに付けられたタグなどの付加情報を追加、変更、削除などして、コンテンツ管理テーブル25B内の登録情報を更新することができる(S7)。
 図6は、コンテンツ表示部19(図1)による、プロジェクト画面31上でコンテンツを検索し表示する制御の流れを示す。
  図6に示すように、プロジェクト画面31(図3)のタグサーチ欄35でユーザが任意のタグを指定してサーチ(絞り込み)を要求すると(S11)、そのプロジェクトに関連付けれたコンテンツの中から、そのタグが付されたコンテンツだけがサーチされる(S12)。ユーザが、コンテンツ表示フレーム39に表示される地図をスクロールしたり、拡大縮小したり、地図上で任意の領域を選択したりして、その地図の表示範囲を任意の領域に指定すると(S13)、そのプロジェクトに関連付けれたコンテンツの中から、その指定された領域に存在するコンテンツだけがサーチされる(S14)。また、期間サーチ欄37でユーザが任意の期間を指定してサーチ(絞り込み)を要求すると(S15)、そのプロジェクトに関連付けれたコンテンツの中から、その期間内に入る日時が付されたコンテンツだけがサーチされる(S16)。
 以上のタグ、地図表示範囲及び期間という3種類のサーチ条件の1種又は2種以上組み合わせた1以上の指定条件で絞り込み(サーチ)が行われると、そのプロジェクトに関連付けれたコンテンツの中から、それらの指定条件に合致するコンテンツだけが選択されることになり、その選択されたコンテンツだけがコンテンツ表示フレーム39の地図上に表示される(S17)。
 図7は、コンテンツ表示部19(図1)による、プロジェクト画面31のコンテンツ表示フレーム39での表示形式を分割表示と重畳表示との間で切り替える制御の流れを示す。
 図7に示すように、プロジェクト画面31(図3)のコンテンツ表示フレーム39が重畳表示形式であるときに、ユーザが、コンテンツ表示フレーム39内の地図上又はコンテンツリストから1又は複数のコンテンツを選択した上で(S21)、分割/重畳表示切替ボタン59をクリックすると(S22)、選択されたコンテンツに関する解析結果のデータがデータベース11からサーチされ(S23)、解析結果データがあれば、その解析結果データと一緒に選択コンテンツの実体画像が分割表示形式で表示される(S24)。解析結果データが無ければ、選択コンテンツの実体画像が対比閲覧できる分割表示形式で表示される(S25)。
 その後、ユーザが分割/重畳表示切替ボタン59をクリックすると(S26)、コンテンツ表示フレーム39の表示形式が重畳表示に切り替わる(S27)。以後、(図7には明確に図示してないが)ユーザが分割/重畳表示切替ボタン59をクリックする都度、重畳表示と分割表示が交互に切り替わる。
 図8は、図3に例示したようなプロジェクト画面31で動画を表示するときの表示例を示す。
 図8に示すように、プロジェクト画面31で(例えば、ユーザが動画像アイコン47をダブルクリックすることで)詳細表示フレーム41に動画像の詳細情報を表示した場合、詳細表示フレーム41のトップの実体画像欄81に、その動画像83が表示される。動画像83の下にある再生ボタン85をクリックすれば、その動画像83が再生できる。また、動画像83の再生時点(開始フレームからの再生時間)表示87が示され、再生制御バーにも再生時点マーク89が表示される。
 このように詳細表示フレーム41に動画像を表示した場合、詳細表示フレーム41内に軌跡設定欄91が表示される。この軌跡設定欄91には、この動画像の始点(撮影開始位置)と終点(撮影終了位置)のぞれぞれの地理座標とカメラの向きが表示され(これらの情報は後述するコンテンツ登録時に設定され得る)、ユーザは、始点と終点の地理座標とカメラ向きを、軌跡設定欄91で変更することもできる。
 さらに、この場合、コンテンツ表示フレーム39には、この動画の始点と終点のそれぞれの地理座標上に、始点マーク93と終点マーク97が自動的に表示され、かつ、始点マーク93と終点マーク97を例えば直線分で結んだ軌跡マーク95も自動的に表示される。軌跡マーク95は、動画撮影時のカメラの移動軌跡を近似的に表す。なお、動画を撮影したカメラの移動軌跡が曲線や折れ線である場合には、始点と終点だけではなく、その移動軌跡上の1以上の経由地点の座標もユーザが設定できるようにしてよい。その場合、始点から1以上の経由地点を順に経由して終点に到達するような折れ線または曲線の軌跡マーク95が表示されるようにしてよい。
 さらに、軌跡マーク95上の再生時点87に対応した位置に、カメラ位置マーク99が自動的に表示される。つまり、動画の全再生時間長における再生時点の割合で軌跡マーク95の全長を比例配分した位置が自動的に計算され、その位置にカメラ位置マーク99が表示される。したがって、動画が再生されている間、カメラ位置マーク99が軌跡マーク95に沿って始点から終点へ向かって移動していき、それにより、ユーザは今見ているシーンが地図上のどの位置から撮影したものかを把握できる。
 また、動画の再生制御バー上の再生時点マーク89(再生時点)をユーザが移動させれば、これに連動して地図上のカメラ位置マーク99も移動する。同様に、地図上のカメラ位置マーク99をユーザが移動させれば、これに連動して動画の再生時点マーク89(再生時点)も移動する。
 図9は、コンテンツ表示部19(図1)による、動画83の再生時点に応じてカメラ位置マーク99を制御する処理の流れを示す。
 図9に示すように、コンテンツ表示フレーム39の地図上に、始点マーク93、終点マーク97、軌跡マーク95が表示される(S31)。さらに、動画83の再生時点に応じた軌跡マーク95上の位置が計算され、その位置にカメラ位置マーク99が表示される(S32)。
 図10は、コンテンツ表示部19(図1)による、カメラ位置マーク99に応じて動画83の再生時点を制御する処理の流れを示す。
 図10に示すように、ユーザが地図上のカメラ位置マーク99を軌跡マーク95に沿って移動させると(S41)、カメラ位置マーク99の位置に対応した動画83の再生時点が計算され、その計算された再生時点に動画の実際の再生時点が変更される(S42)。
 再び図3を参照する。プロジェクト画面31内のアップロードボタン62をユーザがクリックすると、ユーザは、上述したような各種のコンテンツをユーザ端末3から地図情報システム1にアップロードし登録することができる。
 図11から図16は、コンテンツのアップロードと登録の際に、地理情報システム1がユーザ端末3に表示する一連の画面の例を示す。
 上述したアップロードボタン62をクリックするとまず、図11に示すような登録方法選択画面106が表示される。この画面106では、1以上のコンテンツを1つのプロジェクトに登録する方法と、複数のコンテンツを複数プロジェクトに登録する方法の一方を選択できる。ボタン103をクリックすれば前者が、ボタン105をクリックすれば後者が選択できる。
 ボタン103と105のいずれをクリックした場合でも、次に、制御はコンテンツ選択ステップに進み、図12に示すようなコンテンツ選択画面106が表示される。この画面106には、ファイル選択欄107と地図表示欄109がある。ユーザは、ファイル選択欄107を用いて、ユーザ端末3又はネットワーク5上の任意のディレクトリにある、登録したい1以上のコンテンツファイルを選択することができる。地図表示欄109には、ユーザが選んだ任意の地域の地図か、又は、ユーザが選択した登録したいコンテンツファイルに記述されている地位座標を包含する地域の地図が表示される。
 ユーザが、ファイル選択欄107を用いて、登録したい1以上のコンテンツファイルを選択すると、図13に示すように、コンテンツ選択欄107に、選択されたコンテンツのサムネイル画像111のリストが表示される。また、地図表示欄109内の地図上の選択コンテンツの地理座標に対応した位置に、選択コンテンツの整理番号を表したコンテンツアイコン113が表示される。
 このように登録したいコンテンツを選択した後、ユーザが次へボタン114をクリックすると、1つのプロジェクトに登録する場合と、複数のプロジェクトに登録する場合とで、次に行われるステップと表示される画面が異なる。前者の場合は、制御はプロジェクト登録ステップに進み、図16に示すようなプロジェクト登録画面121が表示される。他方、後者の場合は、制御はコンテンツ分類ステップに進み、図14に示すようなコンテンツ分類画面115が表示される。
 後者の場合にコンテンツ分類ステップに進むと、地理情報システム1のコンテンツ登録部13(図1)が自動的に、選択されたコンテンツを複数のグループに分類する。この分類は、同じプロジェクトに登録されると推測されるコンテンツは同じグループに、異なるプロジェクトに登録されると推測されるコンテンツは異なるグループに分類するもので、例えば、コンテンツファイルの種別(識別子)や、コンテンツファイルに記録されている地理座標、カメラの向き、撮影日時などに基づいて、例えば機械学習したニューラルネットワークを用いて行うことができる。この自動分類の結果が、図14に例示したコンテンツ分類画面115に表示される。すなわち、この画面115のファイル分類欄117に、自動分類の結果が表示される。
 この画面115のファイル分類欄117に示された分類結果について、ユーザが修正を要求すると、画面は図15に示すような分類修正画面118に切り替わる。この分類修正画面118で、ユーザは、ファイル選択欄107か地図表示欄109上で任意のコンテンツを選び、それを移動先グループボックス119内の任意のグループに移動させることで、コンテンツのグループ分類を修正できる。この画面で、ユーザが確定ボタン120をクリックすると、修正結果が確定されて、画面は図14に例示したコンテンツ分類画面115に移る。
 図14に例示したコンテンツ分類画面115で、ユーザが次へボタン116をクリックすると、制御はプロジェクト登録ステップへ進み、図16に示すようなプロジェクト登録画面121が表示される。
 図16に例示したプロジェクト登録画面121では、各コンテンツグループごとに、地図表示欄109にそのグループに属するコンテンツのアイコン113が表示され、かつ、それらのコンテンツの登録先であるプロジェクトを設定するためのプロジェクト設定欄123が表示される。プロジェクト設定欄123では、ユーザは、登録先のプロジェクトの名称や、そのグループのコンテンツに対して行うべきコンテンツ処理(例えば、オルソ画像化処理やタイル画像化処理など)を設定できる。
 このプロジェクト登録画面121で、ユーザが、必要なプロジェクト設定を行った上で、次へボタン125をクリックすると、そのグループのコンテンツファイルがユーザ端末3から地理情報システム1へアップロードされて、登録先のプロジェクトに登録される。その際に、地理情報システム1は、設定されたコンテンツ処理を、アップロードされたコンテンツに対して施す。また、コンテンツが動画の場合には、地理情報システム1は、ユーザに、図16に示したような地図表示欄109内の地図上で、その動画の始点や終点の位置やカメラの向きを指定させて(そのための具体的な画面は図示省略)、その始点と終点の地理座標やカメラ向きも動画のファイルと共に登録する。
 図17は、コンテンツ登録部13(図1)による、上述したコンテンツを登録する制御の流れを示す。
 図17に示すように、ユーザが、登録方法選択画面101(図11)上で、コンテンツの登録(アップロード)先が1つのプロジェクトか複数のプロジェクトかを選択する(S41)。いずれかが選択された場合でも、その後、ユーザは、コンテンツ選択画面106(図12)のコンテンツ選択欄107を用いて、登録したい1以上のコンテンツを選択する(S42)。すると、選択されたコンテンツのアイコンが、コンテンツ選択画面106(図12)の地図表示欄109の地図上の対応する位置に表示される(S43)。
 その後、ステップS41で複数プロジェクトへの登録が選択された場合にのみ、選択されたコンテンツの自動的なグループ分類が行われる(S44)。その後、ユーザが、自動的な分類結果を修正する。すなわち、ユーザが、分類修正画面118(図15)を表示させ、その画面118内の地図表示欄109内の地図上にカーソルを持っていき(S45でYes)、地図上の任意のコンテンツを選択して移動先グループボックス119内の任意のグループへ移動させることで、グループの修正ができる(S46)。あるいは、ユーザが、分類修正画面118(図15)内のファイル選択欄107にカーソルを持っていき(S45でNo)、その欄107内のコンテンツリストから任意のコンテンツを選択して移動先グループボックス119内の任意のグループへ移動させることで、グループの修正ができる(S47)。
 このようにして各プロジェクトに登録されるコンテンツが確定した後、ユーザが、プロジェクト登録画面121(図16)で各プロジェクトの情報を設定する(S48)。さらに、ユーザが、プロジェクト登録画面121(図16)でコンテンツに対して行うべき処理を設定する(S49)。
 以上の設定が終わった後、ユーザがプロジェクト登録画面121(図16)の次へボタン125をクリックすると、各プロジェクトに登録されるべきコンテンツのファイルが、設定された上記の各種情報と一緒に地理情報サーバ1へアップロードされ、データベース11に格納され登録される(S50)。
 図18は、図17のステップS50に示すコンテンツアップロードのステップのより詳細な制御の流れを示す。
 図18に示すように、アップロードされたコンテンツファイルの拡張子が調べられ(S51)、そのコンテンツの種別が識別される(S52~S55)。コンテンツの種別として、図18では単画像(静止画像)、オルソ画像、動画像、3次元モデルデータが例示されているが、それ以外の種別(例えば、解析結果でデータ、カメラごとに識別子の異なるパノラマ表示用360度静止画像又は動画像、ある地点又は地域に関する報告文書、など)もあり得る。
 そして、識別結果が単画像の場合(S52でYes)、もしその単画像についてオルソ画像化処理が設定されていなければ(S56でNo)、単画像用の所定の登録形式でデータベース11に格納及び登録される(S59)。
 また、ある地域をカメラで撮影した相互にオーバーラップする複数の単画像について、オルソ画像化処理が設定されている場合は(S56でYes)、それらの複数の単画像からその地域のオルソ画像が作成され(S57)、そのオルソ画像から表示用のタイル画像が作成される(S58)。そして、それらの単画像、オルソ画像及びタイル画像が相互に関連づけられて、それぞれの画像種別用の所定の登録形式でデータベース11に格納され登録される(S59)。なお、ステップS57のオルソ画像を作成する過程では、通常、中間生成物としてその地域の3次元モデルデータが作られる。この3次元モデルデータも、オルソ画像に関連付けられて、あるいは、オルソ画像から独立して、3次元モデルデータ用の所定の登録形式でデータベース11に格納され登録されてよい(S59)。
 また、上記の識別結果がオルソ画像の場合(S53でYes)、そのオルソ画像から表示用のタイル画像が作成され(S58)、そして、そのオルソ画像及びタイル画像が相互に関連づけられて、それぞれの画像種別用の所定の登録形式でデータベース11に格納され登録される(S59)。
 また、上記の識別結果が動画像の場合(S54でYes)、プロジェクト登録画面121(図16)の地図表示欄109上でユーザにその動画の撮影時のカメラの移動軌跡の始点と終点の位置とカメラの視線の向きを設定させる(S60)(移動軌跡が折れ線や曲線などの場合、その移動軌跡上の1以上の経由地点の位置も設定されてよい)。その後、その動画像が、始点と終点とカメラ向きなどの設定情報と共に、動画像用の所定の登録形式でデータベース11に格納され登録される(S59)。
 アップロードされた地理コンテンツを上記のようなプロセスで登録するとき、そのアップロードされた地理コンテンツに、その地理コンテンツに対応する地点又は地域を特定する1以上の地理座標が付属しているならば、その付属する地理座標がその地理コンテンツに関連付けて登録され得る。他方、そのような地理座標がそのアップロードされた地理コンテンツに付属してない場合には、ユーザにその地理座標の数値を入力させるか、または、ユーザに地理情報表示画面に表示された地図上でその地理座標に該当する地点を指定させるかすることで、そのユーザから提供された地理座標がその地理コンテンツに関連付けて登録され得る。
 各地理コンテンツに関連付けて登録され得る1以上の地理座標には、例えば、単画像の撮影地点の座標、パノラマ画像の視座(撮影地点)の座標とパノラマ画像の全体の中心位置の方位(パノラマ画像のその他の所定位置の方位も含まれてよい)、オルソ画像の輪郭の頂点の座標、3次元モデルが存在する地理領域の輪郭の頂点の座標、動画像の撮影開始から終了までのカメラの移動軌跡の始点と終点と必要に応じた通過点の座標、及び、解析データの解析対象コンテンツの地理座標などがあり得る。
 図19は、コンテンツ解析ツール23の一例として、ある地理領域の面積と体積を計測するツールの制御例の流れを示す。
 図19に示すように、コンテンツ表示フレーム39上に表示されたオルソ画像地図上でユーザが所望の地理領域を指定すると(S61)、そのツールにより、そのオルソ画像内のその指定領域の頂点の地理座標を用いて、その指定領域の平面的な面積が計算される(S62)。また、その指定領域に三次元モデル(例えば、3D点群データあるいは3Dメッシュデータなど)が存在するならば、その3次元モデルがそのツールに取得され(S63)、そして、その3次元モデルの指定領域内の諸点の地理座標を用いてその指定領域の体積が計算される(S64)。
 その同じ指定領域に、異なる複数の時期に得られた複数の3次元モデルが存在する場合、それら異なる時期のそれぞれの3次元モデルを用いて、ぞれぞれの時期の指定領域の体積が上記方法で計算される(S65)。指定領域の面積とそれぞれの時期の体積の計算結果は、その指定領域の地理座標と関連付けられて、計測データの地理コンテンツとしてデータベース11に登録され、そして、地理情報表示画面上に例えばグラフなどの形式で表示される(S66)。
 このツールはさらに、上記計算結果が表示されている時、ユーザがコンテンツ表示フレーム39の背景として所望の地理コンテンツ(例えば、上記異なる時期の内のいずれかの時期のオルソ画像又は3次元データの画像)を選択することを可能にする(S67)。ユーザがある地理コンテンツを背景として選ぶと、その選択されたコンテンツを背景として表示する(S68)。このように、指定領域の面積と異なる時期の体積の計算結果を表示しているとき、所望の地理コンテンツ、とくに所望の時期の地理コンテンツ、を背景として表示することで、ユーザは、時期による地理状態の変化を把握しやすくなる。
 図20は、複数のパノラマ画像を分割表示形式で表示した場合の、それらパノラマ画像の視線方向を制御する一つの態様の流れを示す。この態様では、複数のパノラマ画像の視線方向が同じパン(視線の左右振り)角度とチルト(視線の上下振り)角度だけ変更されるように制御される。
 図20に示すように、コンテンツ表示フレーム39に表示された地図領域に存在するパノラマ画像(例えば、パノラマ写真画像)がデータベース11から検索される(S71)。それら検索されたパノラマ画像の中から、ユーザが分割表示形式で表示したい複数のパノラマ画像を指定すると(S72)、指定された複数のパノラマ画像が分割表示形式でコンテンツ表示フレーム39に表示される(S73)。
 表示された複数のパノラマ画像に対するユーザによるマウス操作が監視され(S74)、そして、その内のいずれか一つのパノラマ画像に対するマウス操作が検出されると(S75)、そのマウス操作のパン操作量とチルト(視線の上下振り)操作量が計算される(S76)。そして、計算されたパン(視線の上下振り)操作量のパンと、計算されたチルト操作量のチルトとが、表示された全部のパノラマ画像に同時に適用されて(S77)、全パノラマ画像の視線が同時に同じパン角度と同じチルト角度だけ変更される。
 なお、ステップS73で複数のパノラマ画像を表示した初期に、全てのパノラマ画像の視線方向を例えば北のように同じ方位にそろえるように制御することができ、その場合、図20に示されたプロセスにより、表示された全てのパノラマ画像の視線方向を同一方向へそろえることができる。
 図21は、複数のパノラマ画像を分割表示形式で表示した場合の、それらパノラマ画像の視線方向を制御する別の一つの態様の流れを示す。。この態様では、複数のパノラマ画像の視線方向が、地図上のある1地点に向かう方向に制御される。
 図21に示すように、コンテンツ表示フレーム39に表示された地図領域に存在するパノラマ画像(例えば、パノラマ写真画像)がデータベース11から検索される(S81)。それら検索されたパノラマ画像の中から、ユーザが分割表示形式で表示したい複数のパノラマ画像を指定する(S82)。また、ユーザが、それらパノラマ画像を指向させたい一つの地点を、表示された地図上で又は地理座標値入力で指定する(S83)。すると、その指定地点の地理座標と、措定されたそれぞれのパノラマ画像の視座地点(つまり、パノラマ写真の撮影地点)の地理座標に基づいて、それぞれのパノラマ画像を指定地点へ指向させるためのパン角度が計算される(S84)。そして、計算されたパン角度がそれぞれ適用された複数の指定パノラマ画像が、分割形式でコンテンツ表示フレーム39に表示される(S85)。こうして、表示された全てのパノラマ画像の視線のパン方向が、同じ一つの指定地点へ向かう。
 そして、それら複数のパノラマ画像に対するユーザによるマウス操作が監視され(S86)、そして、その内のいずれか一つのパノラマ画像に対するマウス操作が検出されると(S87)、そのマウス操作のチルト操作量が計算される(S88)。そして、計算されたチルト操作量のチルトが、表示された全部のパノラマ画像に同時に適用されて(S89)、それら全パノラマ画像の視線が同時に同じチルト角度だけ変更される。
 図22は、同じ地理領域に存在する複数の地理コンテンツ(特に画像)間の位置合わせをする制御の流れを示す。この制御は、例えば、図19に示した面積と体積の計算のような、同じ地理領域に存在する地理コンテンツを対比する又はそれらの間の差分を解析するなどの計算を高精度に解析ツールが行えるようにするために、その前処理として行われる制御である。
 図22に示すように、解析対象の複数の画像において、ユーザが特徴点を指定したかどうかがチェックされる(S91)。ユーザが特徴点を指定すれば(S91でNo)、その指定された特徴点が位置合わせの手掛かりとされて、制御はステップS93へ進む。他方、ユーザが特徴点を指定しなければ(S91でYes)、解析対象の複数の画像のそれぞれにおいて、複数の特徴点が自動的に特定され(S92)、そして、制御はステップS93へ進む。
 ステップS93で、各画像から各特徴点を含むその近傍の領域の画素が抽出され、それら抽出された画素から各特徴点の特徴量が計算される。そして、異なる画像間で、各特徴点毎にその特徴量を用いて、ある画像の各特徴点が他の画像のどの特徴点にマッチするかを見つけ出すマッチング処理が行われる(S94)。
 そして、各画像の拡大縮小、平行移動、回転、スキューなどをそれぞれ行うための画像変換行列のパラメタに所定の初期値が設定されて、それらの画像変換行列が各画像に適用される(S96)。その後、解析対象の複数画像内の各ペアの画像間でマッチした特徴点ペア毎に、地理座標値の誤差が計算され(S97)、その誤差が前回計算した誤差より減少したかどうかっチェックされる(S97)。誤差が減少してなければ、画像変換行列のパラメタが、前回のパラメタから今回のパラメタへのパラメタ変更方向とは逆方向へ所定単位量だけ変更され(S98)、そして、再びステップS96へ進んで誤差が計算される。
 他方、ステップS97で誤差が減少していたら、解析対象の全てのペアの画像の全ての特徴点ペアの誤差が、所定の許容誤差範囲内に収束しているか否かがチェックされる(S99)。その結果、未だ収束してない誤差があれば、その誤差に関わる画像変換行列のパラメタが、前回から今回への変更方向と同方向へ所帯の単位量だけ変更され(S100)、そして、制御は再びステップS96へ戻る。
 ステップS96 ~S100のプロセスが繰り返されていくと、最終的に、ステップS99で全ての誤差が収束することになり、それでこの制御は終了する。
 図23は、パノラマ画像を表示した画面の例を示す。
 図23は、プロジェクト画面31内のコンテンツ表示フレーム39に表示された1つのパノラマ画像のアイコン51がユーザにより選択され、その選択されたパノラマ画像が詳細表示フレーム41の実体画像欄63に表示された例を示す。パノラマ画像のアイコン51は、コンテンツ表示フレーム39内の地図上のそのパノラマ画像の視座(パノラマ写真であれば、それの撮影地点)の座標に配置される。実体画像欄63に表示されたパノラマ画像は、ユーザがマウス操作で、パンしたりチルトしたりすることができる。
 コンテンツ表示部19が、データベース11に登録されたそのパノラマ画像の地理座標(例えば、パノラマ画像全体の水平方向の中心位置の方位)に基づいて、そのパノラマ画像の実体画像欄63に表示された部分の水平方向の中央位置の方位(つまりパン角度)を計算する。ユーザが、そのパノラマ画像の上記表示部分をパンすると、コンテンテンツ表示部19は、ユーザによるパンの操作量に基づいて、パン角度つまり上記表示部分の中央位置の方位を計算し直し、その方位に合致するように上記表示部分を変更(パン)する。加えて、コンテンツ表示部19は、コンテンツ表示フレーム39内の地図上に、そのパノラマ画像の上記表示部分の中央位置の方位(視線方向)を示す視線マーク511を、そのパノラマ画像のアイコン51に関連づけて表示する。この視線マーク511により、ユーザは、自分がどの方向のパノラマ画像部分を見ているかを容易に把握できる。
 以上、一つの実施形態を説明したが、これは本発明の説明のための例示であり、この実施形態にのみ本発明を限定する趣旨ではない。本発明は、その要旨を逸脱しない範囲で他の様々な形態で実施可能である。
1:地理情報システム、3:ユーザ端末、11:データベース、13:コンテンツ登録部、15:オルソ生成部、17:タイル画像生成部、19:コンテンツ表示部、21:コンテンツ解析部、23:解析ツール、25:管理テーブル、25A:プロジェクト管理テーブル、25B:コンテンツ管理テーブル、27:コンテンツファイル、31:プロジェクト画面、39:コンテンツ表示フレーム、43:地図、45:オルソ画像、47,49,51,53,55:コンテンツアイコン、57:表示コンテンツリスト、58:コンテンツのサムネイル画像、59:分割/重畳表示切替ボタン、61:解析ツールアイコン、63:アップロードボタン、63:実体画像欄、65:基本情報欄、67:コメント編集欄、69:タグ編集欄、75:解析結果データ、83:動画像、85:再生ボタン、87:再生時点表示、89:再生時点マーク、93:始点マーク、95:軌跡マーク、97:終点マーク、99:カメラ位置マーク、91:軌跡設定欄、101:登録方法選択画面、106:コンテンツ選択画面、107:コンテンツ選択欄、109:地図表示欄、111:サムネイル画像、113:コンテンツアイコン、115:コンテンツ分類画面、117:ファイル分類欄、118:分類修正画面、119:移動先グループボックス、121:プロジェクト登録画面、123:プロジェクト設定欄

 

Claims (12)

  1. ユーザ端末と通信可能に接続され、前記ユーザ端末に地理情報を提供する地理情報システムにおいて、
     1以上の地理コンテンツを管理するためのデータベースと、
     前記ユーザ端末からアップロードされる1以上の地理コンテンツを受信して、前記受信した地理コンテンツを前記データベースに登録するコンテンツ登録手段と、
     前記データベースに登録された前記地理コンテンツのうちの少なくとも一部を表示した1種類以上の地理情報画面を前記ユーザ端末に提供するコンテンツ表示手段と
    を備え、
     前記ユーザ端末からアップロードされる前記地理コンテンツの各々は、所定の複数のコンテンツ種別のうちのいずれか一つのコンテンツ種別をもち、
     前記コンテンツ登録手段は、前記ユーザ端末からアップロードされた1以上の地理コンテンツの各々のコンテンツ種別を識別し、前記アップロードされた地理コンテンツの各々を、前記識別されたコンテンツ種別に応じた所定の登録形式で、前記データベースに登録し、
     前記1以上のコンテンツ種別のうちのいずれの種別に応じた前記所定の登録形式にも、地理コンテンツに関連付けられた地理座標が含まれ、
     前記コンテンツ表示手段は、所定の1種類以上のサーチ条件に関しユーザが任意に指定した指定条件を用いて、前記指定条件に合致する地理コンテンツを前記データベースから検索し、前記検索された地理コンテンツの表示画像を所定の地図上の前記地理座標に対応した位置に重畳して表示した第1のコンテンツ表示部を有する第1種類の地理情報画面を作成し、前記第1種類の地理情報画面を前記ユーザ端末に提供する、
    ように構成された地理情報システム。
  2. 請求項1記載の地理情報システムにおいて、
     前記地理コンテンツの前記種別には、少なくとも、オルソ画像と他の1以上の種別が含まれ、
     前記コンテンツ表示手段は、前記検索された地理コンテンツにオルソ画像と他の1以上の種別の地理コンテンツが含まれる場合、前記第1種類の地理情報画面を作成するとき、前記第1のコンテンツ表示部に、背面から前面に向かって、前記地図、前記オルソ画像の実体画像、及び前記他の1以上の種別のコンテンツのアイコンの順で、それらを重畳して表示する、
    ように構成された地理情報システム。
  3. 請求項1又は2のいずれか一項記載の地理情報システムにおいて、
     前記地理コンテンツの前記種別には、少なくとも、動画像が含まれ、
     前記コンテンツ登録手段は、前記ユーザ端末からアップロードされる前記地理コンテンツに動画像が含まれる場合、前記動画像の始点と終点のそれぞれの地理座標を特定し、前記動画像を前記始点と前記終点のそれぞれの地理座標に関連付けた動画用登録形式で前記データベースに登録し、
     前記コンテンツ表示手段は、前記第1種類の地理情報画面を作成するとき、前記第1種類の地理情報画面内に、前記第1のコンテンツ表示部と共に前記動画像を再生し表示する実体画像表示部を配置し、
     前記コンテンツ表示手段は、さらに、前記第1のコンテンツ表示部の前記地図上に、前記動画像の前記始点の地理座標から前記終点の地理座標までの間の移動軌跡上の位置に、カメラ位置マークを表示し、
     前記コンテンツ表示手段は、さらに、前記実体画像表示部における前記動画像の再生時に、再生時点に応じて前記カメラ位置マークを前記始点から前記終点へ向けて前記移動軌跡に沿って移動させる、
    ように構成された地理情報システム。
  4. 請求項1又は2のいずれか一項記載の地理情報システムにおいて、
     前記地理コンテンツの前記種別には、少なくとも、前記地理コンテンツを解析した解析データが含まれ、
     前記コンテンツ表示手段は、前記第1種類の地理情報画面を作成するとき、前記第1のコンテンツ表示部に、背面から前面に向かって、前記地図、前記オルソ画像の実体画像、前記解析データ、及び前記他の1以上の種別のコンテンツのアイコンの順で、それらを重畳して表示する、
    ように構成された地理情報システム。
  5. 請求項1又は2のいずれか一項記載の地理情報システムにおいて、
     前記地理コンテンツの前記種別には、少なくとも、パノラマ画像が含まれ、
     前記コンテンツ登録手段は、前記ユーザ端末からアップロードされた前記地理コンテンツにパノラマ画像が含まれる場合、前記パノラマ画像の視座の地理座標及び/又は前記パノラマ画像の所定箇所の方位に関連付けて、前記パノラマ画像を前記データベースに登録し、
     前記コンテンツ表示手段は、前記第1種類の地理情報画面を作成するとき、前記第1種類の地理情報画面内に、前記第1のコンテンツ表示部と共に前記パノラマ画像を表示するパノラマ画像表示部を配置し、
     前記コンテンツ表示手段は、さらに、前記第1のコンテンツ表示部の前記地図上に、前記パノラマ画像の前記視座の地理座標の位置にマークを表示し、
     前記コンテンツ表示手段は、さらに、前記パノラマ画像表示部に表示された前記パノラマ画像の部分の中央位置の方位を前記第1のコンテンツ表示部の前記地図上に表示する、
    ように構成された地理情報システム。
  6. 請求項1又は2のいずれか一項記載の地理情報システムにおいて、
     前記地理コンテンツの前記種別には、少なくとも、3次元データが含まれ、
     前記コンテンツ登録手段は、前記ユーザ端末からアップロードされる前記地理コンテンツに前記3次元データが含まれる場合、前記3次元データが存在する地理領域の地理座標に関連付けて、前記3次元データを前記データベースに登録し、
     前記コンテンツ表示手段は、前記第1種類の地理情報画面を作成するとき、前記第1種類の地理情報画面内に、前記第1のコンテンツ表示部と共に前記3次元データを表示する3次元データ表示部を配置する、
    ように構成された地理情報システム。
  7. 請求項1乃至6のいずれか一項記載の地理情報システムにおいて、
     前記コンテンツ表示手段は、前記第1種類の地理情報画面において、前記ユーザに1以上の地理コンテンツを選択させることができ、かつ、前記ユーザに、前記地理コンテンツを表示するための形式として、重畳表示形式と分割表示形式を選択させることができ、
     前記コンテンツ表示手段は、前記第1種類の地理情報画面において、前記ユーザが1以上の地理コンテンツを選択すると共に前記分割表示形式を選択した場合、前記選択された地理コンテンツを対比して閲覧可能な分割表示形式で表示した第2のコンテンツ表示部を有する第2種類の地理情報画面を作成して、前記第2種類の地理情報画面を前記ユーザ端末に提供する、
    ように構成された地理情報システム。
  8.  請求項7記載の地理情報システムにおいて、
     前記地理コンテンツの前記種別には、少なくとも、パノラマ画像が含まれ、
     前記コンテンツ表示手段は、複数の前記パノラマ画像を分割表示形式で表示した場合、前記ユーザが前記表示された複数のパノラマ画像のうちのいずれか一つをパン又はチルトさせる操作をした時、前記表示された複数のパノラマ画像の全てを、前記ユーザの操作に応じてパン又はチルトさせる、
    ように構成された地理情報システム。
  9.  請求項7又は8記載の地理情報システムにおいて、
     前記コンテンツ表示手段は、複数の前記パノラマ画像を分割表示形式で表示した場合、前記ユーザが前記第1種類の地理情報画面の地図上で一つの地点を指定した時、前記表示された複数のパノラマ画像の全てを前記指定された一つの地点に指向させる、
    ように構成された地理情報システム。
  10. 請求項1乃至9のいずれか一項記載の地理情報システムにおいて、
     前記コンテンツ登録手段は、前記ユーザ端末からアップロードされた1以上の地理コンテンツを受信した場合、前記受信した地理コンテンツの各々の日時を特定すると共に、前記受信した地理コンテンツの各々に対して前記ユーザに任意の1以上のタグを設定させ、前記受信した地理コンテンツの各々を、前記識別された日時と前記設定されたタグとに関連付けられた各コンテンツ種別に応じた所定の登録形式で、前記データベースに登録し、
     前記所定の1種類以上のサーチ条件には、少なくとも、前記検索される地理コンテンツを前記日時で絞り込むための期間条件と、前記検索される地理コンテンツを前記タグで絞り込むためのタグ条件とが含まれる、
    ように構成された地理情報システム。
  11. 請求項1乃至10のいずれか一項記載の地理情報システムにおいて、
     前記コンテンツ登録手段は、前記ユーザ端末からアップロードされた1以上の地理コンテンツを、前記ユーザが任意に設定した1以上のプロジェクトに関連付けて登録することができ、
      前記コンテンツ登録手段は、1つのプロジェクトに関連付けて1以上の地理コンテンツを登録する第1の登録方法と、複数のプロジェクトに関連付けて複数の地理コンテンツを登録する第2の登録方法とを、前記ユーザに選択させることができ、
     前記コンテンツ登録手段は、前記第2の登録方法が選択されると共に前記ユーザ端末から複数の地理コンテンツがアップロードされた場合、前記アップロードされた複数の地理コンテンツを自動的に複数のグループに分類し、前記分類された複数のグループの各々について前記ユーザに所望の修正を実行させ、前記分類された複数のグループの各々について前記ユーザにプロジェクトを設定させ、そして、前記分類された複数のグループの各々に属する前記地理コンテンツを前記設定されたプロジェクトに関連付けて前記データベースに登録し、
     前記コンテンツ表示手段は、前記ユーザ端末から前記ユーザが所望するプロジェクトを開く要求を受け、前記所望されたプロジェクトに関連付けられた前記データベース内の地理コンテンツを用いて、前記第1種類の地理情報画面を作成して前記ユーザ端末に提供する、
    ように構成された地理情報システム。
  12. 請求項1乃至11のいずれか一項記載の地理情報システムにおいて、
     前記第1種類の地理情報画面は、前記第1種類の地理情報画面上に表示された地理コンテンツの各々のタグを前記ユーザが編集するためのタグ編集部を有する、
    ように構成された地理情報システム。

     
PCT/JP2022/047495 2022-01-05 2022-12-22 地理情報システム WO2023132267A1 (ja)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
JP2022-000498 2022-01-05
JP2022000498A JP2023100091A (ja) 2022-01-05 2022-01-05 地理情報システム

Publications (1)

Publication Number Publication Date
WO2023132267A1 true WO2023132267A1 (ja) 2023-07-13

Family

ID=87073675

Family Applications (1)

Application Number Title Priority Date Filing Date
PCT/JP2022/047495 WO2023132267A1 (ja) 2022-01-05 2022-12-22 地理情報システム

Country Status (2)

Country Link
JP (1) JP2023100091A (ja)
WO (1) WO2023132267A1 (ja)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN117197754A (zh) * 2023-10-19 2023-12-08 航天正通汇智(北京)科技股份有限公司 一种基于超清宽幅视频的安全监测方法

Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2010118061A (ja) * 2008-11-13 2010-05-27 Nhn Corp 電子地図を用いてサービスを提供するための方法、システム及びコンピュータ読取可能な記録媒体
JP2011134294A (ja) * 2009-11-26 2011-07-07 Jvc Kenwood Holdings Inc 情報表示装置、情報表示装置の制御方法、およびプログラム
JP2013183218A (ja) * 2012-02-29 2013-09-12 Nikon Corp 動画再生装置および動画再生プログラム
KR20160111756A (ko) * 2015-03-17 2016-09-27 엘지전자 주식회사 이동 단말기 및 그의 사진 관리방법
JP2018061216A (ja) * 2016-10-07 2018-04-12 パナソニックIpマネジメント株式会社 情報表示システム及び情報表示方法
JP2021168118A (ja) * 2020-04-08 2021-10-21 フラミー インコーポレイテッド ロケーションベースのコンテンツマッチング方法及びシステム

Patent Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2010118061A (ja) * 2008-11-13 2010-05-27 Nhn Corp 電子地図を用いてサービスを提供するための方法、システム及びコンピュータ読取可能な記録媒体
JP2011134294A (ja) * 2009-11-26 2011-07-07 Jvc Kenwood Holdings Inc 情報表示装置、情報表示装置の制御方法、およびプログラム
JP2013183218A (ja) * 2012-02-29 2013-09-12 Nikon Corp 動画再生装置および動画再生プログラム
KR20160111756A (ko) * 2015-03-17 2016-09-27 엘지전자 주식회사 이동 단말기 및 그의 사진 관리방법
JP2018061216A (ja) * 2016-10-07 2018-04-12 パナソニックIpマネジメント株式会社 情報表示システム及び情報表示方法
JP2021168118A (ja) * 2020-04-08 2021-10-21 フラミー インコーポレイテッド ロケーションベースのコンテンツマッチング方法及びシステム

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN117197754A (zh) * 2023-10-19 2023-12-08 航天正通汇智(北京)科技股份有限公司 一种基于超清宽幅视频的安全监测方法
CN117197754B (zh) * 2023-10-19 2024-04-30 航天正通汇智(北京)科技股份有限公司 一种基于超清宽幅视频的安全监测方法

Also Published As

Publication number Publication date
JP2023100091A (ja) 2023-07-18

Similar Documents

Publication Publication Date Title
JP5053404B2 (ja) 関連メタデータに基づくデジタル画像のキャプチャと表示
US9916070B1 (en) Architectures and methods for creating and representing time-dependent imagery
US10403044B2 (en) Telelocation: location sharing for users in augmented and virtual reality environments
US7848593B2 (en) Method of producing and displaying an aerial photograph data set
JP4507991B2 (ja) 情報処理装置、情報処理方法、およびプログラム
JP3823724B2 (ja) 3次元空中遊覧改良サーバ、その方法、及び記録媒体
US20210019941A1 (en) Generating Immersive Trip Photograph Visualizations
CN105205853A (zh) 一种用于全景视图管理的3d图像拼接合成方法
CN101510978A (zh) 图像显示设备、图像显示方法、程序和记录介质
WO2023132267A1 (ja) 地理情報システム
CN112270736B (zh) 增强现实处理方法及装置、存储介质和电子设备
US20150052475A1 (en) Projections to fix pose of panoramic photos
CN101136022A (zh) 资源信息的全景制作和展示系统
JP4153761B2 (ja) 3次元モデル空間生成装置、3次元モデル空間生成方法、及び3次元モデル空間生成プログラム
CN105005960A (zh) 获取水印照片的方法、装置及系统
CN105183823A (zh) 一种虚拟对象和实景影像的互动展示系统
US8456471B2 (en) Point-cloud clip filter
CN105183154A (zh) 一种虚拟对象和实景影像的互动展示方法
JP6110780B2 (ja) 付加情報表示システム
Schaffland et al. An interactive web application for the creation, organization, and visualization of repeat photographs
KR100797518B1 (ko) 산림영상 판독 및 수치임상도 제작 시스템과 그 방법
KR102149283B1 (ko) 분양 정보를 포함한 지도를 제공하는 방법 및 컴퓨터 프로그램
US10446190B1 (en) Fast image sequencing
KR101934799B1 (ko) 파노라마 영상을 이용하여 새로운 컨텐츠를 생성하는 방법 및 시스템
JP6122991B2 (ja) 画像表示装置および画像表示方法

Legal Events

Date Code Title Description
121 Ep: the epo has been informed by wipo that ep was designated in this application

Ref document number: 22918851

Country of ref document: EP

Kind code of ref document: A1