WO2010013373A1 - 電子地図上での写真表示方法及びシステム、並びにその電子地図 - Google Patents

電子地図上での写真表示方法及びシステム、並びにその電子地図 Download PDF

Info

Publication number
WO2010013373A1
WO2010013373A1 PCT/JP2009/002069 JP2009002069W WO2010013373A1 WO 2010013373 A1 WO2010013373 A1 WO 2010013373A1 JP 2009002069 W JP2009002069 W JP 2009002069W WO 2010013373 A1 WO2010013373 A1 WO 2010013373A1
Authority
WO
WIPO (PCT)
Prior art keywords
display
photograph
map
photographing
data
Prior art date
Application number
PCT/JP2009/002069
Other languages
English (en)
French (fr)
Other versions
WO2010013373A9 (ja
Inventor
門林理恵子
Original Assignee
独立行政法人情報通信研究機構
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 独立行政法人情報通信研究機構 filed Critical 独立行政法人情報通信研究機構
Publication of WO2010013373A1 publication Critical patent/WO2010013373A1/ja
Publication of WO2010013373A9 publication Critical patent/WO2010013373A9/ja

Links

Images

Classifications

    • GPHYSICS
    • G09EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09BEDUCATIONAL OR DEMONSTRATION APPLIANCES; APPLIANCES FOR TEACHING, OR COMMUNICATING WITH, THE BLIND, DEAF OR MUTE; MODELS; PLANETARIA; GLOBES; MAPS; DIAGRAMS
    • G09B29/00Maps; Plans; Charts; Diagrams, e.g. route diagram
    • G09B29/003Maps
    • G09B29/006Representation of non-cartographic information on maps, e.g. population distribution, wind direction, radiation levels, air and sea routes
    • G09B29/007Representation of non-cartographic information on maps, e.g. population distribution, wind direction, radiation levels, air and sea routes using computer methods
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/20Information retrieval; Database structures therefor; File system structures therefor of structured data, e.g. relational data
    • G06F16/29Geographical information databases
    • GPHYSICS
    • G09EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09BEDUCATIONAL OR DEMONSTRATION APPLIANCES; APPLIANCES FOR TEACHING, OR COMMUNICATING WITH, THE BLIND, DEAF OR MUTE; MODELS; PLANETARIA; GLOBES; MAPS; DIAGRAMS
    • G09B29/00Maps; Plans; Charts; Diagrams, e.g. route diagram
    • G09B29/003Maps
    • G09B29/005Map projections or methods associated specifically therewith

Definitions

  • the present invention relates to a method of displaying a photograph on a map by connecting a photograph having geographical information such as a landscape and a building with a three-dimensional line-of-sight information to a map according to a shooting point by an electronic map management server, and
  • the present invention relates to a system, a program, and an electronic map for implementing a method for displaying a photograph on the electronic map.
  • a system for associating a photograph having geographical information such as a photograph of a landscape or a building with an electronic map according to the photographing point For example, in Patent Document 1, a photograph image with photographing identification information obtained by adding photographing identification information including time information, a photographing direction, and a photographing position to a photograph image photographed by a mobile terminal with a digital camera is transmitted to a server. There has been disclosed a photo providing system with a position orientation in which a server provides a map including a shooting position and a photo image at the shooting point to a user terminal.
  • Patent Documents 2 and 3 a method for associating a photograph having geographic information with a map according to the shooting point, and a system for implementing the photograph mapping method.
  • Patent Documents 4 to 6 there are Patent Documents 4 to 6, and services (Google map and Google Earth) for viewing the map in three dimensions are known.
  • the present invention provides a method for displaying a photograph taken at a point in the map on the electronic map with high presence so that the direction of shooting is intuitively easy to understand, and a photograph display on the electronic map. It is an object to provide a system, a program, and an electronic map for implementing the method.
  • a method for displaying a photograph on an electronic map of the present invention comprises the following arrangement. That is, a photo terminal, an electronic map management server, and a display terminal are provided, and a photograph having geographical information photographed by the photographing terminal is connected to the map according to the photographing point by the electronic map management server, and the display terminal
  • a photographing step for photographing a photograph by a photographing means in a photographing terminal, a photographing point detecting step for detecting a point at which a photograph is photographed by a photographing point detecting means, and a photographing direction detection Shooting direction detection step for detecting the direction and elevation angle at which the photograph was taken by the means, photographic image data obtained by the shooting means by the communication means, and shooting condition data obtained by the shooting point detection means and the shooting direction detection means.
  • Photo data receiving step for receiving photo image data and shooting condition data transmitted from the shooting terminal
  • Photo image data recording step for recording the photo image data received from the shooting terminal by the photo image data recording unit
  • shooting condition data A shooting condition data recording step for recording shooting condition data received from the shooting terminal by the recording unit, and a photo registration processing unit for registering the photo in association with a position on the map corresponding to the shooting point of the photo, and recording the map data Received from the display terminal by the photo registration step for updating the map data
  • the search display condition data receiving step for receiving the search condition data and the display condition data transmitted from the display terminal by the communication means, and the search processing unit.
  • Corresponding map data, shooting condition data, and photographic image The corresponding photographic image data is displayed in a substantially panel-like panel according to the output from the search processing unit and the display condition data received from the display terminal. Displayed as a photo, placed at a position on the map corresponding to the shooting point of the photo, oriented according to the direction on the map corresponding to the shooting direction of the photo, and further indicating the shooting elevation angle of the photo.
  • a display data generation step for performing an arithmetic process for attaching and displaying an elevation angle icon to the panel photograph, and a display data transmission step for transmitting display data to the display terminal by the communication means are performed.
  • the search condition input step for inputting conditions related to the map or photo to be searched and the display condition input section A display condition input step for inputting a condition to be transmitted, a search display condition transmission step for transmitting the search condition data and the display condition data to the electronic map management server by the communication means, and display data from the electronic map management server by the communication means.
  • the display data receiving step is performed, and the display output unit outputs the display data as an image by the display output unit.
  • the display data generation step is performed by the electronic map management server, but may be performed by the display terminal as follows. That is, a photo terminal, an electronic map management server, and a display terminal are provided, and a photograph having geographical information photographed by the photographing terminal is connected to the map according to the photographing point by the electronic map management server, and the display terminal
  • a photographing step for photographing a photograph by a photographing means in a photographing terminal, a photographing point detecting step for detecting a point at which a photograph is photographed by a photographing point detecting means, and a photographing direction detection Shooting direction detection step for detecting the direction and elevation angle at which the photograph was taken by the means, photographic image data obtained by the shooting means by the communication means, and shooting condition data obtained by the shooting point detection means and the shooting direction detection means.
  • Photo data receiving step for receiving photo image data and shooting condition data transmitted from the shooting terminal
  • Photo image data recording step for recording the photo image data received from the shooting terminal by the photo image data recording unit
  • shooting condition data A shooting condition data recording step for recording shooting condition data received from the shooting terminal by the recording unit, and a photo registration processing unit for registering the photo in association with a position on the map corresponding to the shooting point of the photo, and recording the map data Received from the display terminal by the photo registration step for updating the map data
  • the search display condition data receiving step for receiving the search condition data and the display condition data transmitted from the display terminal by the communication means, and the search processing unit.
  • a display data generation step and a display data transmission step of transmitting display data to a display terminal by a communication means are performed.
  • a search condition input unit is used to input a condition relating to a map or a photograph to be searched.
  • a condition input step a display condition input step for inputting a condition related to a display method of the search result by the display condition input unit, and a search display condition transmission for transmitting the search condition data and the display condition data to the electronic map management server by the communication means
  • display data reception for receiving display data from the electronic map management server by the communication means.
  • the display is processed and arranged at a position on the map corresponding to the photographing point of the photograph, and is oriented in accordance with the direction on the map corresponding to the photographing direction of the photograph, and further, the elevation icon indicating the photographing elevation angle of the photograph
  • a display data generation step for performing arithmetic processing for performing display processing attached to the panel photograph, and an image display step for outputting the display data as an image by the display output unit are performed.
  • the center of the lower end of the panel photo is made to correspond to the shooting point of the photo
  • the orientation of the lower end of the panel photo is made to correspond to the shooting direction
  • the panel photo is erected vertically on the map.
  • An arrow-shaped elevation angle icon that indicates the shooting direction with an arrow corresponding to the shooting elevation angle may be provided at the center of the upper end to make it easier to visually recognize the direction of the photograph.
  • the center of the lower end of the panel photo is made to correspond to the shooting point of the photo
  • the orientation of the lower end of the panel photo is made to correspond to the shooting direction
  • the panel photo is tilted at an angle corresponding to the shooting elevation angle
  • an arrow-shaped elevation icon indicating a shooting direction with an arrow perpendicular to the panel photograph may be provided at the center of the upper end of the panel photograph.
  • an elevation angle icon may be provided on both the front and back sides of the panel photo so that the elevation angle icon can be viewed at all times.
  • the map display may be switched to the visual field in the direction of the elevation icon at the photographing point of the panel photograph to contribute to the convenience of operation.
  • a panel photograph may be arranged substantially in parallel with the map so that the photograph can always be viewed without depending on the shooting direction.
  • the center of the bottom of the panel photo corresponds to the shooting point of the photo
  • the orientation of the bottom of the panel photo corresponds to the shooting direction
  • the shooting elevation angle A face-type elevation icon that indicates the shooting direction in the line-of-sight direction may be attached to the panel photograph so that the shooting direction can be easily recognized.
  • the shooting direction is aggregated as a parameter, and a direction analysis display circle indicating the frequency distribution of the shooting direction with a radius corresponding to the direction on the map is added, Reference information may be provided.
  • the shooting elevation angle is aggregated as a parameter, and the frequency distribution of the shooting elevation angle is added with an elevation angle analysis display circle indicated by a radius to provide reference information. Good.
  • the shooting time is aggregated as a parameter, and a shooting time analysis display circle indicating the frequency distribution of the shooting time zone with the hands of a 24-hour analog clock is added. Reference information may be provided.
  • Reference information may be provided for a plurality of photographs located in a predetermined range on a map by displaying an index indicating the photograph in different colors using the photographer as a parameter.
  • the same photographer's movement route may be indicated and displayed by a line segment connecting the photo shooting points to provide reference information.
  • the photos may be displayed in a slide show by continuously specifying the photos to provide reference information.
  • Reference information may be provided by displaying a map including the shooting point of the photos between slideshows of a plurality of photos.
  • the travel time is calculated from the difference in the shooting times, and the estimated time required for sightseeing is displayed.
  • Reference information may be provided.
  • the shooting terminal equipped with a motion sensor displays the map and shooting point, tilts the shooting terminal to enter the direction, and contributes to the convenience of photo registration. You may let them.
  • the photograph display system on the electronic map of the present invention has the following configuration. That is, a photo terminal, an electronic map management server, and a display terminal are provided, and a photograph having geographical information photographed by the photographing terminal is connected to the map according to the photographing point by the electronic map management server, and the display terminal
  • the photographing terminal includes a photographing means for photographing the photograph, a photographing point detecting means for detecting the point where the photograph was photographed, and a photographing direction detection for detecting the direction and elevation angle where the photograph was photographed.
  • a communication means for transmitting the photographic image data obtained by the photographing means and the photographing condition data obtained by the photographing point detecting means and the photographing direction detecting means to the electronic map management server.
  • a photographic image data recording unit for recording photographic image data received from the photographing terminal, and a photographing condition for recording photographing condition data received from the photographing terminal.
  • a data recording unit, a map data recording unit for recording map data, and a search processing unit for searching corresponding map data, photographing condition data, and photographic image data in accordance with the search condition data received from the display terminal In accordance with the output from the search processing unit and the display condition data received from the display terminal, the corresponding photographic image data is displayed as a substantially panel-like panel photograph, and the map corresponding to the photographing point of the photograph is displayed. Is arranged in accordance with the direction on the map corresponding to the shooting direction of the photo, and further, an elevation icon indicating the shooting elevation angle of the photo is attached to the panel photo and displayed to generate display data.
  • a display calculation processing unit for performing calculation processing to perform image processing, and a communication means for transmitting and receiving data to and from the photographing terminal and the display terminal.
  • the display terminal relates to a map or a photograph to be searched.
  • a search condition input unit for inputting search condition data
  • a display condition input unit for inputting display condition data related to a display method of search results
  • a display output unit for outputting display data received from the electronic map management server as an image
  • And a communication means for transmitting the search condition data from the search condition input section and the display condition data from the display condition input section to the electronic map management server and receiving display data from the electronic map management server.
  • the display calculation processing unit for generating the display data is performed by the electronic map management server, but may be provided in the display terminal as follows. That is, a photo terminal, an electronic map management server, and a display terminal are provided, and a photograph having geographical information photographed by the photographing terminal is connected to the map according to the photographing point by the electronic map management server, and the display terminal
  • the photographing terminal includes a photographing means for photographing the photograph, a photographing point detecting means for detecting the point where the photograph was photographed, and a photographing direction detection for detecting the direction and elevation angle where the photograph was photographed.
  • a communication means for transmitting the photographic image data obtained by the photographing means and the photographing condition data obtained by the photographing point detecting means and the photographing direction detecting means to the electronic map management server.
  • a photographic image data recording unit for recording photographic image data received from the photographing terminal, and a photographing condition for recording photographing condition data received from the photographing terminal.
  • a communication means for transmitting and receiving data to and from the terminal and the display terminal is provided, and a search condition input unit for inputting search condition data relating to a map or a photograph to be searched and display condition data relating to a display method of search results are input to the display terminal Display condition input unit, display condition data from the display condition input unit, and calculation processing data for display received from the electronic map management server,
  • the image data is displayed and processed as a substantially panel-like panel photograph, arranged at a position on the map corresponding to the photographing point of the photograph, and oriented in accordance with the direction on the map corresponding to the photographing direction of the
  • the terminal display arithmetic processing unit for generating display data by performing arithmetic processing for attaching and displaying an elevation angle icon indicating the shooting elevation angle of the photograph to the panel photograph, and the output from the terminal display arithmetic processing unit as an image
  • a display output unit for outputting, and communication means for transmitting search condition data from the search condition input unit to the electronic map management server and receiving display data from the electronic map management server are provided.
  • the program of the present invention causes a photographing terminal, an electronic map management server, or a display terminal to execute the above-described photo display method on the electronic map, or causes the photographing terminal, the electronic map management server, or the display terminal to execute the above-described electronic display. It functions as a photo display system on a map.
  • the electronic map of the present invention is generated by the above-described method for displaying a photograph on an electronic map, or functions as a photograph display system on the above-described electronic map.
  • the present invention has the following effects by providing the above configuration. That is, since the substantially panel-like photograph is arranged on the map according to the photographing point and the photographing direction, an electronic map with a photo with high presence can be obtained.
  • FIG. 1 is an explanatory diagram showing an overview of the use of a photo display system on an electronic map according to the present invention.
  • This system includes a photographing terminal (1) having at least a means for taking a photograph, a means for recording data relating to a photograph taken by the photographing terminal (1), data relating to a map, and a computing means.
  • the photographing terminal (1), the server (2), and the display terminal (3) can all be configured by a known personal computer, but as the photographing terminal (1), a mobile phone with a camera or a digital camera with a communication device is simple. Available to: It is also possible to use both the photographing terminal (1) and the display terminal (3).
  • photograph data (103) composed of photograph image data (101) of the photographed photograph and its photographing condition data (102) is transmitted to the server (2).
  • the photograph data (103) is divided into photograph image data (101) and photographing condition data (102), recorded in the database, and received from the display terminal (3).
  • the display condition data (502) the corresponding photograph image data (101), the photographing condition data (102), and the map data (301) are searched, and processing for displaying the photograph on the electronic map is performed.
  • the displayed display data (302) is transmitted to the display terminal (3).
  • the display terminal (3) outputs the obtained display data (302) as an image.
  • the server (2) records the photographic data (103) without dividing it into photographic image data (101) and photographing condition data (102), or records the photograph on an electronic map.
  • the processing for displaying can be appropriately changed, for example, by both the server (2) and the display terminal (3) or by only the display terminal (3). A system for realizing such an overall configuration and an implementation method thereof will be described below with reference to examples.
  • FIG. 2 is a block diagram of the photographing terminal (1) according to the present invention
  • FIG. 3 is a flowchart of the data processing.
  • the photographing terminal (1) includes a CPU (11) that performs arithmetic processing, a memory (12) such as a ROM / RAM, a storage device (13) such as a hard disk, a monitor (14) that displays a screen, a user's
  • a network adapter (16) for connecting and communicating with a network such as the Internet
  • a photographing means (17) for taking a photograph such as a digital photograph
  • a photograph Shooting point detection means (18) such as a GPS sensor for detecting the shooting point
  • a shooting direction detection means such as a GPS sensor for detecting the shooting point, and a shooting direction detection means (gyro sensor for detecting the direction in which the photograph was taken, a magnetic bearing sensor, an acceleration sensor for detecting the elevation angle, and a motion sensor) 19).
  • a shooting area detecting means (20) provided in a lens aperture mechanism for detecting a field angle, a focal length, and a depth of field for taking a picture, a shooting time detecting means (21) for detecting a time when a picture is taken, A photographer registration means (22) for identifying a person who photographed the image may be provided.
  • the means for detecting the focal length and the depth of field in the photographing region detecting means (20) is not essential. When such information is included, a shooting area that is clearly shot is obtained, and when it is not included, a shooting area that can be shot is obtained.
  • the photographing time detection means (21) a clock built in the photographing terminal (1) may be used, or a time stamp received from an external time authentication management server may be used.
  • the photographer registration means (22) can use data input via the input device (15) of the photographing terminal (1).
  • the CPU (11) includes a photographing means (17), a spot detecting means (18), a photographing direction detecting means (19), a photographing region detecting means (20), a photographing time detecting means (21), and a photographer registration means (22). ) Photographic image data (101) and photographic condition data (102) from photographic data reading unit (23), photographic data processing unit (24) for processing the read photographic data (103), and network for transmitting and receiving data A transmission / reception unit (25) is provided at least.
  • the photograph data (103) obtained by the photographing region detection (S154) by the means (20), the photographing time detection (S155) by the photographing time detection means (21), and the photographer registration (S156) by the photographer registration means (22) is obtained.
  • it is read by the photo data reading unit (23) (S157) and transmitted to the server (2) by the network transmitting / receiving unit (25) (S158).
  • the photo data processing unit (24) performs data concatenation processing, or splits into photo image data (101) including a photo image and shooting condition data (102) including text relating to shooting conditions. You may do it.
  • a mail transmission / reception device provided in a camera-equipped mobile phone or the like.
  • a configuration in which an e-mail is attached and transmitted a configuration in which data is transmitted peer-to-peer using a predetermined protocol, and a user operation after being temporarily stored in another server on the network
  • Various conventionally known data communication methods such as a configuration by communication using FTP or HTTP, can be used.
  • FIG. 4 is a configuration diagram of the server (2) according to the present invention
  • FIG. 5 is a flowchart of the data processing.
  • the server (2) includes a CPU (31) that performs arithmetic processing, a memory (32) such as ROM / RAM, a storage device (33) such as a hard disk, a monitor (34) that displays a screen, and user inputs. Is provided with an input device (35) for transmitting the information to the CPU, and a network adapter (36) for connecting and communicating with a network such as the Internet.
  • the CPU (31) includes a network transmission / reception unit (37) that transmits and receives data to and from the photographing terminal (1) and the display terminal (3), and photographic image data (101) and photographing condition data (from the photographing terminal (1)). 102) is registered in association with the corresponding position in the map data (301), the photo registration processing unit (38), the photo image data (101) and the shooting condition data (102) from the photo registration processing unit (38), A retrieval condition data reading unit (39) and a photographing condition reading unit (40) to be read out respectively, and a search condition data reading unit (to read out the search condition data (501) and display condition data (502) transmitted from the display terminal (3), respectively.
  • a network transmission / reception unit (37) that transmits and receives data to and from the photographing terminal (1) and the display terminal (3), and photographic image data (101) and photographing condition data (from the photographing terminal (1)). 102) is registered in association with the corresponding position in the map data (301), the photo registration processing unit (38), the photo image data (101) and the shooting condition data (10
  • a shooting condition data search unit (43) that performs a search process from the shooting condition data recording unit of the storage device (33), and photographic image data (101) corresponding to the obtained shooting condition data (102) are stored in the storage device (33).
  • the map data (302) is preferably stored in the storage device (33) in advance, but can also be downloaded from an external server via a network as necessary.
  • the CPU (31) also concatenates the shooting condition data (102) with the corresponding photographic image data (101) and map data (302) in a format corresponding to the display condition data (502) to display data.
  • a display data generation unit (47) for generating (302) is provided.
  • the photograph image data (101) and the photographing condition data (102) obtained from the photographing terminal (1) by the network transmission / reception unit (37) are first stored in the storage device (33) by the photograph registration processing unit (38), respectively.
  • registration processing may be performed in association with the corresponding position of the map data (301), or registration processing may be performed independently of the map data (301). If the photographic data (103) received from the photographing terminal (1) is not separated into the photographic image data (101) and the photographing condition data (102), the photographic image is processed by the data division calculation processing unit provided in the CPU (31). Data (101) and shooting condition data (102) are divided (S302).
  • the search condition data (501) and the display condition data (502) are input from the display terminal (3) via the network transmitting / receiving unit (37), the search condition data reading unit (41) and the display condition data reading unit (42) ),
  • the search condition data (501) is read (S303) and the display condition data (502) is read (S304).
  • the shooting condition data search unit (43) searches the shooting condition data (102) corresponding to the search condition data (501) from the shooting condition data recording unit of the storage device (33) (S305).
  • the condition data (102) is read from the photo registration processing unit (38) by the photographing condition reading unit (40) (S306).
  • the search condition data (501) it is possible to set a condition for displaying only a map.
  • the photograph image data (101) corresponding to the obtained shooting condition data (102) is retrieved from the photograph image data recording unit of the storage device (33) by the photograph image data retrieval unit (44) (S307).
  • the image data reading unit (39) reads it (S308).
  • the map data (302) corresponding to the obtained shooting condition data (102) is retrieved from the storage device (33) by the map data retrieval unit (45) (S309), and the map data reading unit (46). (S310).
  • the read photographic image data (101) and map data (302) are concatenated with the shooting condition data (102) in a format corresponding to the display condition data (502) by the display data generation unit (47) and displayed. (302) is generated (S311).
  • the generated display data (302) is transmitted to the display terminal (3) by the network transmission / reception unit (37).
  • the display data (302) that is the main part of the present invention will be described in detail later.
  • FIG. 6 is a block diagram of the display terminal (3) according to the present invention
  • FIG. 7 is a flowchart of the data processing.
  • the display terminal (3) includes a CPU (51) that performs arithmetic processing, a memory (52) such as ROM / RAM, a storage device (53) such as a hard disk, a monitor (54) that displays the screen, An input device (55) for transmitting input to the CPU and a network adapter (56) for connecting and communicating with a network such as the Internet are provided.
  • the CPU (51) has a search condition reading unit (57) and a display condition reading unit (58) for reading and processing the search condition data (501) and the display condition data (502) input from the input device (55), A network transmission / reception unit (59) for transmitting / receiving data to / from the server (2), a display data reading unit (60) for reading out display data (302) received from the server (2), and a monitor (54) for display data (302)
  • the display data processing part (61) which carries out an output process is provided.
  • the search condition data (501) relating to the photo to be searched and the display condition data (502) relating to the display method of the search result are input from the input device (55) such as a keyboard or a mouse, and the search condition reading unit ( 57) and a display condition reading unit (58) (S501) (S502), and a transmission process to the server (2) via the network adapter (56) (S503).
  • the display data (302) processed by the server (2) according to the search condition data (501) and the display condition data (502) is received by the display terminal (3) via the network adapter (56), and the display data is read out.
  • the data is read by the unit (60) (S504), displayed by the display data processing unit (61) in a format corresponding to the display condition data (502) (S505), and displayed on the monitor (54) as the display output unit. This is output (S506).
  • the character data included in the display data (302) may be output as voice.
  • the display data (302) is generated and processed by the server (2).
  • the map data (301) is displayed by the display arithmetic processing unit corresponding to the display data generating unit (47). ),
  • the shooting condition data (102), and the photographic image data (101) are combined to generate display data for performing arithmetic processing for display processing, and the display data is converted into substantive display data ( 302) may be performed by the display terminal (3).
  • FIG. 8 is a perspective view showing a panel photograph displayed on the electronic map.
  • the photograph image data (101) photographed by the photographing terminal (1) and registered in the server (2) is output from the search processing unit by the display calculation processing unit of the server (2).
  • display processing is performed as a substantially panel-shaped panel photograph (A).
  • the arrangement position of the panel photograph (A) on the map is such that the center (B) of the lower end of the panel photograph (A) corresponds to the photographing point of the photograph.
  • the center (B) of the lower end of the panel photo (A) may be placed at an altitude of about 1 to 2 m above the ground of the map, You may simply treat it as altitude zero and place it on the ground.
  • the orientation of the panel photograph (A) on the map is adjusted according to the shooting direction of the lower edge (C) of the panel photograph (A). That is, the side (C) at the lower end of the panel photograph (A) is arranged in an orientation orthogonal to the shooting direction.
  • an elevation angle icon (D) indicating the shooting elevation angle is additionally displayed.
  • the elevation icon (D) is provided at least on the back of the panel photograph (A) and is displayed in the shape of an arrow.
  • FIG. 9 is a side view of a panel photograph displayed on the electronic map.
  • the panel photograph (A) may be erected vertically as shown in FIG. 9 (a) or may not be erected vertically as shown in FIG. 9 (b). Good.
  • FIG. 9 (b) when not standing vertically on the ground, an orientation in which the panel surface and the photographing direction are perpendicular, that is, an orientation in which the direction indicated by the elevation angle icon (D) coincides with the photographing direction is preferable. .
  • the elevation icon (D) may be provided only on the back surface of the panel photograph (A) as shown in FIG. 10, or may be provided on both the front and back sides of the panel photograph (A) as shown in FIG. When it is provided on both the front and back sides of the photograph (A), it may be always set, or may be set to be displayed on the surface as necessary. If the elevation icon (D) is only on the back of the panel photograph (A), the elevation icon (D) is behind the panel photograph (A) and becomes difficult to see depending on the angle at which the user views the map or photograph. Sometimes.
  • the positional relationship between the user's field of view, the panel photo (A), and the elevation icon (D) is calculated and set so that it appears on the surface only when the elevation icon (D) is estimated to be difficult to view. May be.
  • FIG. 12 is an explanatory diagram showing a mode of switching the map display to the visual field in the direction of the elevation angle icon.
  • the elevation angle icon (D) of the particular panel photograph (A) of interest is designated by clicking or the like, so that FIG.
  • the panel photograph (A) may be enlarged and displayed in front of the user's field of view.
  • the panel photograph (A) can be viewed in the actual shooting direction, so that a sense of reality is enhanced.
  • FIG. 13 is an explanatory diagram illustrating an example of a bird's-eye view display of a three-dimensional map.
  • the panel photograph (A) is difficult to see. Therefore, as shown in FIG. It is preferable to arrange and display the image substantially parallel to the map. Then, by designating the specific panel photo (A) to be noticed by clicking or the like, the map display is switched to an orientation in which the panel photo (A) can be easily seen as shown in FIG. Good.
  • FIG. 14 is a map having a panel photograph provided with an elevation angle icon according to another embodiment
  • FIG. 15 is a panel photograph provided with the elevation angle icon according to another embodiment.
  • the panel photograph (A) is arranged parallel to the map as in the above embodiment
  • the lower center (B) of the panel photograph (A) corresponds to the shooting point of the photograph
  • the lower edge (C) of the panel is adjusted according to the shooting direction, that is, the lower edge (C) of the panel photograph (A) is arranged in an orientation orthogonal to the shooting direction.
  • an elevation angle icon (E) a face-type icon indicating the shooting direction in the line-of-sight direction corresponding to the shooting elevation angle is attached to the panel photograph.
  • it is in the shape of a person's profile, but animal faces such as birds, dogs and cats can also be used.
  • the line-of-sight direction may be indicated by the direction of a protrusion such as a nose.
  • FIG. 16 is an explanatory diagram illustrating an example in which a three-dimensional icon is provided on a two-dimensional map.
  • the three-dimensional icon is small and difficult to visually recognize.
  • FIGS. A panel photograph (A) as an icon is easily displayed.
  • a conventionally known technique for example, google maps api for flash plus kmz
  • a three-dimensional display object is arranged on a two-dimensional map
  • a panel photograph (A) having photographing condition data (102) is displayed three-dimensionally by a user operation.
  • a three-dimensional map may be displayed by clicking an icon or the like in a state where a shooting position and a shooting direction are displayed on a two-dimensional map, such as a photo thumbnail.
  • the panel photo (A) may be provided with metadata in a plurality of languages, and the building name included in the panel photo (A) may be displayed in text by switching the language of the two-dimensional map.
  • FIG. 17 and 18 are maps with display of analysis results according to the shooting direction for a plurality of pieces of photo data.
  • FIG. 18 (a) shows shooting information of a photographer 1 at 9-12 o'clock
  • FIG. 18 (c) shows shooting information at 9-12 o'clock for a certain photographer 2
  • FIG. 18 (d) shows shooting information at 13-17 o'clock for a certain photographer 2.
  • the shooting information is shown.
  • an icon (F) with a different color depending on the photographer is displayed at the shooting location of each photo, and clicking the icon (F) displays the photo (G) at that shooting location
  • an icon (H) indicating the shooting direction is attached to the photograph (G).
  • the shooting direction and the shooting elevation angle are aggregated as parameters, and the shooting direction frequency distribution (I) and shooting elevation frequency distribution (J) are set to the direction or elevation angle.
  • the frequency distributions (I) and (J) may also be color-coded by the photographer. Further, depending on the direction, it may be distinguished by shading or hue.
  • the shooting times may be aggregated as a parameter, and the frequency distribution of the shooting time zone may be displayed with a 24-hour analog clock hand or the like. . This also makes it possible to grasp the tendency of the time zone in which a photograph is taken in a specific area, which can be used for sightseeing reference.
  • FIG. 19 and 20 are maps with display of the movement route of the photographer
  • FIG. 20 (a) is the shooting information of a certain photographer at 9 to 12 o'clock
  • FIG. 20C shows shooting information of a certain photographer 2 at 15-217 o'clock.
  • the movement route of the same photographer may be displayed with a line segment (K) connecting the photographing points (F).
  • This movement locus (F) may also be color-coded by the photographer. If a large number of photographers are aggregated and analyzed, the movement tendency in a specific area can be grasped and used for sightseeing reference.
  • Such information regarding movement can also be used for a photo album creation service including information regarding maps and shooting directions.
  • the album may be an online album on the Internet or a print.
  • the subject name candidates and the like may be presented to provide additional information. In that case, in general map data, small shops and tourist spots are treated uniformly regardless of the scale, but with this system, tourist spots and famous landmarks are presented as candidates. It is preferable.
  • FIG. 21 is an explanatory diagram showing a slide show.
  • the photo is reproduced after reproducing the map indicating the shooting position.
  • the map may also be displayed with additional information such as a travel route.
  • FIG. 22 is an explanatory diagram of a photographing terminal showing a user interface for inputting photographing condition data.
  • a shooting terminal equipped with a motion sensor or the like is used to add or correct the shooting direction and elevation after shooting
  • a map (L) and shooting point (B) are displayed as shown in FIG.
  • FIG. 22 (b) it is possible to input simply by tilting the photographing terminal (3) and performing the azimuth determination operation (N).
  • the direction of the map (L) may be set so as not to change when the photographing terminal (3) is tilted.
  • the camera may move while acquiring position information, and the position information may be incorrect. Even in such a case, it is necessary to input shooting conditions after shooting. At that time, the confirmation of the shooting point is performed by referring to the diagram of the boarding route and the map.
  • FIG. 23 is an explanatory diagram of a photographing terminal showing a user interface for inputting search condition data.
  • the parameters necessary for the search may be numeric input from the keyboard or a slider as shown in FIG. 23 (a), or the shooting direction may be specified using a compass icon as shown in FIG. 23 (b).
  • the elevation angle may be designated using an arrow-shaped icon. According to these, it is possible to easily estimate the time required for sightseeing and dynamically create a sightseeing model course.
  • the photographer who finished the activity within that time will be given priority to search and display photos and travel history, and if you specify the starting point, the radius It is possible to search and display the movement trajectory of a photographer who has started moving from within 200 m and who has finished the activity within the specified time.
  • the URL to the photograph of the search result or the page of the photograph group is displayed as a QR code
  • the QR code is displayed on a small portable terminal such as a mobile phone.
  • the search area is automatically set based on the range of the map displayed on the screen of a PC, etc., and the photos included in it are searched for those close to the direction specified by the user. Also good.
  • the elevation angle information of the photo used as the key is automatically extracted, Set it as a search parameter. According to this, it is possible to search for a photo close to the user's intention while searching using the line-of-sight information while reducing the number of parameters specified by the user and simplifying the interface.
  • the present invention may be provided as a program that causes the photographing terminal (1), the server (2), and the display terminal (3) to function as the above-described electronic map photo display system.
  • the program may be provided by being stored in a computer storage medium such as a CD.
  • a substantially panel-like photograph is arranged on a map according to the photographing point and photographing direction, an electronic map with a photo with a high sense of reality can be obtained, which is industrially useful. It can be easily applied as an additional function to existing technologies such as Google Earth.

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Databases & Information Systems (AREA)
  • Educational Administration (AREA)
  • Educational Technology (AREA)
  • Business, Economics & Management (AREA)
  • Mathematical Physics (AREA)
  • General Engineering & Computer Science (AREA)
  • Ecology (AREA)
  • Life Sciences & Earth Sciences (AREA)
  • Computer Hardware Design (AREA)
  • Remote Sensing (AREA)
  • Data Mining & Analysis (AREA)
  • Instructional Devices (AREA)
  • Processing Or Creating Images (AREA)
  • Information Retrieval, Db Structures And Fs Structures Therefor (AREA)

Abstract

 撮影端末と、電子地図管理サーバーと、表示端末とを備え、撮影端末で撮影された地理情報を有する写真画像を、電子地図管理サーバーで撮影地点に応じて地図に連結処理し、表示端末で写真を地図上に表示するシステムを提供する。撮影端末では、写真を撮影する際に、撮影地点と撮影方向の情報を写真画像に付加して記録し、電子地図管理サーバーに送信する。表示端末から指定された検索条件に基づいて、電子地図管理サーバーから地図画像と、関連した写真画像データが表示端末に送信され、地図画像と写真画像を組み合わせて表示する。写真画像は仰角を含む撮影方向の情報に基づいて地図画像に組み合わされて表示される。

Description

電子地図上での写真表示方法及びシステム、並びにその電子地図
 本発明は、風景や建物などの地理情報を有し3次元視線情報付きの写真を、電子地図管理サーバーで撮影地点に応じて地図に連結処理し、写真を地図上に表示する方法、並びに、その電子地図上での写真表示方法を実施するシステム、プログラム、電子地図に関する。
 風景や建物の写真など地理情報を有する写真を、その撮影地点に応じて電子地図に対応付けるシステムは知られている。
例えば、特許文献1には、デジタルカメラ付き携帯端末で撮影した写真画像に、時刻情報と撮影方角と撮影位置とからなる撮影識別情報を付加した撮影識別情報付き写真画像をサーバーへ送信し、そのサーバーが撮影位置を含む地図やその撮影地点での写真画像を利用者端末へ提供する位置方位付き写真提供システムが開示されている。
本発明者も、特許文献2及び3に、地理情報を有する写真を、その撮影地点に応じて地図に対応付ける方法、並びに、その写真マッピング方法を実施するシステムを開示している。
他方、電子地図に関しては、特許文献4~6があり、地図を立体的に視認するサービス(グーグルマップやグーグルアース)が知られている。
これらによると、電子地図上の所望の地点に、その地点で撮影した写真を関連付けて、地図上に写真を表示することが可能である。
しかしながら、従来技術では、地図上に表示される写真は、固定された一定の向きで表示されるので、写真と地図との方位関係が十分明示されず、臨場感が芳しくなかった。特に、写真撮影の仰角に関する情報は利用されていなかった。
特開2007-52809 特願2008-61233 特願2008-61234 特表2008-501161 特表2007-531004 特表2007-524113
そこで、本発明は、電子地図上に、その地図内の地点で撮影された写真を、撮影の方向が直感的にわかりやすいように臨場感の高く表示する方法と、その電子地図上での写真表示方法を実施するシステム、プログラム、並びに、電子地図を提供することを課題とする。
上記課題を解決するために、本発明の電子地図上での写真表示方法は次の構成を備える。すなわち、撮影端末と、電子地図管理サーバーと、表示端末とを備え、撮影端末で撮影された地理情報を有する写真を、電子地図管理サーバーで撮影地点に応じて地図に連結処理し、表示端末で写真を地図上に表示するシステムにおいて、撮影端末では、撮影手段によって、写真を撮影する写真撮影ステップと、撮影地点検知手段によって、写真を撮影した地点を検知する撮影地点検知ステップと、撮影方向検知手段によって、写真を撮影した方角及び仰角を検知する撮影方向検知ステップと、通信手段によって、撮影手段で得られた写真画像データと、撮影地点検知手段及び撮影方向検知手段で得られた撮影条件データを、電子地図管理サーバーへ送信する写真データ送信ステップとを行い、電子地図管理サーバーでは、通信手段によって、撮影端末から送信された写真画像データと撮影条件データを受信する写真データ受信ステップと、写真画像データ記録部によって、撮影端末から受信した写真画像データを記録する写真画像データ記録ステップと、撮影条件データ記録部によって、撮影端末から受信した撮影条件データを記録する撮影条件データ記録ステップと、写真登録処理部によって、写真の撮影地点に相当する地図上の位置に写真を関連付けて登録し、地図データ記録部の地図データを更新する写真登録ステップと、通信手段によって、表示端末から送信された検索条件データと表示条件データを受信する検索表示条件データ受信ステップと、検索処理部によって、表示端末から受信された検索条件データに応じて、対応する地図データと撮影条件データと写真画像データとを検索処理する検索処理ステップと、表示演算処理部によって、検索処理部からの出力と、表示端末から受信する表示条件データとに応じて、対応する写真画像データを略パネル状のパネル写真として表示処理し、その写真の撮影地点に相当する地図上の位置に配置すると共に、その写真の撮影方角に相当する地図上の方角に合わせて配向し、更に、その写真の撮影仰角を示す仰角アイコンをパネル写真に付設表示処理するための演算処理を行う表示データ生成ステップと、通信手段によって、表示データを表示端末へ送信する表示データ送信ステップとを行い、表示端末では、検索条件入力部によって、検索対象の地図または写真に関する条件を入力する検索条件入力ステップと、表示条件入力部によって、検索結果の表示方法に関する条件を入力する表示条件入力ステップと、通信手段によって、検索条件データと表示条件データを電子地図管理サーバーへ送信する検索表示条件送信ステップと、通信手段によって、電子地図管理サーバーから表示データを受信する表示データ受信ステップと、表示出力部によって、表示データを画像として出力する画像表示ステップとを行うことを特徴とする。
上記方法では、表示データの生成ステップを電子地図管理サーバーで行うが、次のように、表示端末で行ってもよい。すなわち、撮影端末と、電子地図管理サーバーと、表示端末とを備え、撮影端末で撮影された地理情報を有する写真を、電子地図管理サーバーで撮影地点に応じて地図に連結処理し、表示端末で写真を地図上に表示するシステムにおいて、撮影端末では、撮影手段によって、写真を撮影する写真撮影ステップと、撮影地点検知手段によって、写真を撮影した地点を検知する撮影地点検知ステップと、撮影方向検知手段によって、写真を撮影した方角及び仰角を検知する撮影方向検知ステップと、通信手段によって、撮影手段で得られた写真画像データと、撮影地点検知手段及び撮影方向検知手段で得られた撮影条件データを、電子地図管理サーバーへ送信する写真データ送信ステップとを行い、電子地図管理サーバーでは、通信手段によって、撮影端末から送信された写真画像データと撮影条件データを受信する写真データ受信ステップと、写真画像データ記録部によって、撮影端末から受信した写真画像データを記録する写真画像データ記録ステップと、撮影条件データ記録部によって、撮影端末から受信した撮影条件データを記録する撮影条件データ記録ステップと、写真登録処理部によって、写真の撮影地点に相当する地図上の位置に写真を関連付けて登録し、地図データ記録部の地図データを更新する写真登録ステップと、通信手段によって、表示端末から送信された検索条件データと表示条件データを受信する検索表示条件データ受信ステップと、検索処理部によって、表示端末から受信された検索条件データに応じて、対応する地図データと撮影条件データと写真画像データとを検索処理する検索処理ステップと、表示用演算処理部によって、検索処理部から出力される地図データと撮影条件データと写真画像データとを連結して表示処理するための演算処理を行う表示用データ生成ステップと、通信手段によって、表示データを表示端末へ送信する表示データ送信ステップと、を行い、表示端末では、検索条件入力部によって、検索対象の地図または写真に関する条件を入力する検索条件入力ステップと、表示条件入力部によって、検索結果の表示方法に関する条件を入力する表示条件入力ステップと、通信手段によって、検索条件データと表示条件データを電子地図管理サーバーへ送信する検索表示条件送信ステップと、通信手段によって、電子地図管理サーバーから表示用データを受信する表示データ受信ステップと、端末表示演算処理部によって、表示条件入力部からの表示条件データと、電子地図管理サーバーから受信した表示用演算処理データとを用いて、写真画像データを略パネル状のパネル写真として表示処理し、その写真の撮影地点に相当する地図上の位置に配置すると共に、その写真の撮影方角に相当する地図上の方角に合わせて配向し、更に、その写真の撮影仰角を示す仰角アイコンをパネル写真に付設表示処理するための演算処理を行う表示データ生成ステップと、表示出力部によって、表示データを画像として出力する画像表示ステップとを行うことを特徴とする。
ここで、パネル写真の下端部中央をその写真の撮影地点に対応させ、パネル写真の下端の配向を撮影方角に対応させて、パネル写真を地図上に垂直に立設し、また、パネル写真の上端部中央に、撮影仰角に対応させた矢印で撮影方向を示す矢印状の仰角アイコンを設けて、写真の方向を視認しやすくしてもよい。
同様に、パネル写真の下端部中央を、その写真の撮影地点に対応させ、パネル写真の下端の配向を撮影方角に対応させると共に、撮影仰角に応じた角度で傾斜させて、パネル写真を地図上に立設し、また、パネル写真の上端部中央に、パネル写真に垂直な矢印で撮影方向を示す矢印状の仰角アイコンを設けてもよい。
また、適宜必要に応じ、仰角アイコンをパネル写真の表裏両面に設けて、常時仰角アイコンを視認できるようにしてもよい。
クリック等による仰角アイコンの指定によって、そのパネル写真の撮影地点で、その仰角アイコンの方向の視野に、地図表示を切り替えて、操作の利便に寄与させてもよい。
3次元地図の俯瞰表示の場合には、パネル写真を地図と略平行に配して表示して、撮影方向に寄らず常時写真を視認できるようにしてもよい。
 パネル写真を地図と平行に配して表示する場合は、パネル写真の下端部中央をその写真の撮影地点に対応させ、パネル写真の下端の配向を撮影方角に対応させ、また、撮影仰角に対応させた視線方向で撮影方向を示す顔型の仰角アイコンを、パネル写真に付設して、撮影方向を視認しやすくしてもよい。
 地図上の所定範囲に位置する複数の写真に対して、撮影方角をパラメータとして集計し、その撮影方角の頻度分布を、地図上の方角に対応した半径で示す方角分析表示円を付加して、参考情報を提供してもよい。
 地図上の所定範囲に位置する複数の写真に対して、撮影仰角をパラメータとして集計し、その撮影仰角の頻度分布を、半径で示す仰角分析表示円を付加して、参考情報を提供してもよい。
地図上の所定範囲に位置する複数の写真に対して、撮影時刻をパラメータとして集計し、その撮影時間帯の頻度分布を、24時間式アナログ時計の針で示す撮影時刻分析表示円を付加して、参考情報を提供してもよい。
地図上の所定範囲に位置する複数の写真に対して、撮影者をパラメータとして、写真を示す指標を色分け表示して、参考情報を提供してもよい。
地図上の所定範囲に位置する複数の写真に対して、同じ撮影者の移動経路を、写真撮影地点をつなぐ線分で示して表示して、参考情報を提供してもよい。
地図上の所定範囲に位置する複数の写真に対して、それらの写真の連続的な指定によって、その写真をスライドショーで表示して、参考情報を提供してもよい。
複数の写真のスライドショーの合間に、その写真の撮影地点を含む地図を表示して、参考情報を提供してもよい。
地図上の所定範囲に位置する複数の写真に対して、同一撮影者による複数の写真を選択することで、その撮影時刻の差から移動時間を算出し、観光に必要な時間の見積もり表示を行い、参考情報を提供してもよい。
 写真の撮影後に撮影方向に関するデータを入力する場合は、モーションセンサを備えた撮影端末により、地図及び撮影地点を表示し、撮影端末を傾斜させて方位の確定入力を行い、写真登録の利便に寄与させてもよい。
 移動中の鉄道または航路車両で写真を撮影し、撮影地点を後から入力する場合は、その路線のダイヤグラムと地図とを参照させて、撮影地点の確定入力を行い、写真登録の利便に寄与させてもよい。
本発明の電子地図上での写真表示システムは、次の構成を備える。 すなわち、撮影端末と、電子地図管理サーバーと、表示端末とを備え、撮影端末で撮影された地理情報を有する写真を、電子地図管理サーバーで撮影地点に応じて地図に連結処理し、表示端末で写真を地図上に表示するシステムにおいて、撮影端末には、写真を撮影する撮影手段と、写真を撮影した地点を検知する撮影地点検知手段と、写真を撮影した方角及び仰角を検知する撮影方向検知手段と、撮影手段によって得られた写真画像データと、撮影地点検知手段及び撮影方向検知手段によって得られた撮影条件データを、電子地図管理サーバーへ送信する通信手段とを設け、電子地図管理サーバーには、撮影端末から受信した写真画像データを記録する写真画像データ記録部と、撮影端末から受信した撮影条件データを記録する撮影条件データ記録部と、地図データを記録する地図データ記録部と、表示端末から受信する検索条件データに応じて、対応する地図データと撮影条件データと写真画像データとを検索処理する検索処理部と、その検索処理部からの出力と、表示端末から受信する表示条件データとに応じて、対応する写真画像データを略パネル状のパネル写真として表示処理し、その写真の撮影地点に相当する地図上の位置に配置すると共に、その写真の撮影方角に相当する地図上の方角に合わせて配向し、更に、その写真の撮影仰角を示す仰角アイコンをパネル写真に付設表示処理して、表示データを生成するための演算処理を行う表示演算処理部と、撮影端末及び表示端末とデータ送受信する通信手段とを設け、表示端末には、検索対象の地図または写真に関する検索条件データが入力される検索条件入力部と、検索結果の表示方法に関する表示条件データが入力される表示条件入力部と、電子地図管理サーバーから受信した表示データを画像として出力する表示出力部と、検索条件入力部からの検索条件データと表示条件入力部からの表示条件データを電子地図管理サーバーへ送信し、電子地図管理サーバーから表示データを受信する通信手段とを設けたことを特徴とする。
上記システムでは、表示データの生成を行う表示演算処理部を電子地図管理サーバーで行うが、次のように、表示端末に設けてもよい。 すなわち、撮影端末と、電子地図管理サーバーと、表示端末とを備え、撮影端末で撮影された地理情報を有する写真を、電子地図管理サーバーで撮影地点に応じて地図に連結処理し、表示端末で写真を地図上に表示するシステムにおいて、撮影端末には、写真を撮影する撮影手段と、写真を撮影した地点を検知する撮影地点検知手段と、写真を撮影した方角及び仰角を検知する撮影方向検知手段と、撮影手段によって得られた写真画像データと、撮影地点検知手段及び撮影方向検知手段によって得られた撮影条件データを、電子地図管理サーバーへ送信する通信手段とを設け、電子地図管理サーバーには、撮影端末から受信した写真画像データを記録する写真画像データ記録部と、撮影端末から受信した撮影条件データを記録する撮影条件データ記録部と、地図データを記録する地図データ記録部と、表示端末から受信する検索条件データに応じて、対応する地図データと撮影条件データと写真画像データとを検索処理する検索処理部と、その検索処理部から出力される地図データと撮影条件データと写真画像データとを連結して表示処理するための演算処理を行い、表示用データを生成するための表示用演算処理部と、撮影端末及び表示端末とデータ送受信する通信手段とを設け、表示端末には、検索対象の地図または写真に関する検索条件データが入力される検索条件入力部と、検索結果の表示方法に関する表示条件データが入力される表示条件入力部と、表示条件入力部からの表示条件データと、電子地図管理サーバーから受信した表示用演算処理データとを用いて、写真画像データを略パネル状のパネル写真として表示処理し、その写真の撮影地点に相当する地図上の位置に配置すると共に、その写真の撮影方角に相当する地図上の方角に合わせて配向し、更に、その写真の撮影仰角を示す仰角アイコンをパネル写真に付設表示処理するための演算処理を行い、表示データを生成するための端末表示演算処理部と、端末表示演算処理部からの出力を画像として出力する表示出力部と、検索条件入力部からの検索条件データを電子地図管理サーバーへ送信し、電子地図管理サーバーから表示用データを受信する通信手段とを設けたことを特徴とする。
本発明のプログラムは、撮影端末または電子地図管理サーバーまたは表示端末に、上述の電子地図上での写真表示方法を実行させるか、または、撮影端末または電子地図管理サーバーまたは表示端末を、上述の電子地図上での写真表示システムとして機能させることを特徴とする。
本発明の電子地図は、上述の電子地図上での写真表示方法により生成されるか、または、上述の電子地図上での写真表示システムとして機能することを特徴とする。
本発明は、上記構成を備えることにより次の効果を奏する。 すなわち、略パネル状の写真が、その撮影地点及び撮影方向に応じて地図上に配置されるので、臨場感高い写真付き電子地図が得られる。
本発明による電子地図上での写真表示システムが使用される概要を示す説明図 本発明による撮影端末の構成図 同、データ処理のフローチャート 本発明によるサーバーの構成図 同、データ処理のフローチャート 本発明による表示端末の構成図 同、データ処理のフローチャート 電子地図上に表示されるパネル写真を示す斜視図 電子地図上に表示されるパネル写真の側面図 パネル写真と仰角アイコンとの関係を示す斜視説明図及び側面説明図 同、別実施例図 仰角アイコンの方向の視野に地図表示を切り替える様態を示す説明図 3次元地図の俯瞰表示例を示す説明図 別実施例の仰角アイコンの付設されたパネル写真を有する地図 同、別実施例の仰角アイコンを備えたパネル写真 2次元地図に3次元のアイコンを設けた例を示す説明図 複数の写真データについて撮影方向による分析結果の表示を伴う地図 同、ある撮影者の特定時間における撮影情報の表示を伴う地図 撮影者の移動経路の表示を伴う地図 同、ある撮影者の特定時間における撮影情報の表示を伴う地図 スライドショーの様態を示す説明図 撮影条件データを入力するユーザインタフェースを示す撮影端末の説明図 検索条件データを入力するユーザインタフェースを示す撮影端末の説明図
以下、本発明の実施形態を、図面に示す実施例を基に説明する。なお、実施形態は下記の例示に限らず、本発明の趣旨から逸脱しない範囲で、前記特許文献など従来公知の技術を用いて適宜設計変更可能である。 図1は、本発明による電子地図上での写真表示システムが使用される概要を示す説明図である。本システムには、写真を撮影する手段を少なくとも有する撮影端末(1)と、その撮影端末(1)で撮影された写真に関するデータと地図に関するデータを記録する手段と、演算手段とを少なくとも有するサーバー(2)と、そのサーバー(2)から出力された写真を電子地図上に表示する手段を少なくとも有する表示端末(3)と、インターネット(4)などの通信回線を介して撮影端末(1)、サーバー(2)、表示端末(3)の間でデータ授受を行う通信手段とが備わる。撮影端末(1)、サーバー(2)、表示端末(3)のいずれも、公知のパソコンで構成可能であるが、撮影端末(1)としては、カメラ付き携帯電話または通信装置付きデジタルカメラが簡易に利用できる。また、撮影端末(1)と表示端末(3)とを兼用することも可能である。
撮影端末(1)では、撮影した写真の写真画像データ(101)とその撮影条件データ(102)とから成る写真データ(103)を、サーバー(2)へ送信する。サーバー(2)では、その写真データ(103)を写真画像データ(101)と撮影条件データ(102)とに分割してデータベースに記録し、表示端末(3)から受信する検索条件データ(501)と表示条件データ(502)に応じて、該当する写真画像データ(101)及びと撮影条件データ(102)、並びに地図データ(301)を検索し、写真を電子地図に表示するための処理を施した表示データ(302)を表示端末(3)へ送信する。表示端末(3)では、得られた表示データ(302)を画像出力する。
これを基本的な構成とするが、例えば、サーバー(2)で写真データ(103)を写真画像データ(101)と撮影条件データ(102)とに分割しないで記録したり、写真を電子地図に表示するための処理を、サーバー(2)と表示端末(3)の双方で行ったり、表示端末(3)のみで行ったりするなど適宜変容可能である。このような全体構成を実現するためのシステムと、その実施方法について、以下に実施例を挙げて説述する。
図2は、本発明による撮影端末(1)の構成図、図3は、そのデータ処理のフローチャートである。 本実施例では、カメラ付きの小型通信端末を挙げる。撮影端末(1)には、演算処理を司るCPU(11)、それと協働するROM・RAM等のメモリー(12)、ハードディスク等の記憶装置(13)、画面表示するモニター(14)、ユーザーの入力をCPUに伝達する入力デバイス(15)、インターネット等のネットワークと接続して通信するためのネットワークアダプタ(16)の他に、デジタル写真などの写真を撮影する撮影手段(17)と、写真を撮影した地点を検知するGPSセンサーなどの撮影地点検知手段(18)と、写真を撮影した方角を検知するジャイロセンサーや磁気方位センサー及び仰角を検知する加速度センサーやモーションセンサーから成る撮影方向検知手段(19)が備わる。
更に、写真を撮影する画角、焦点距離、被写界深度を検知するレンズ絞り機構に備わる撮影領域検知手段(20)や、写真を撮影した時刻を検知する撮影時刻検知手段(21)、写真を撮影した人を特定する撮影者登録手段(22)等を設けてもよい。なお、撮影領域検知手段(20)における焦点距離と被写界深度を検知する手段は必須ではない。それらの情報を含めた場合には、明瞭に撮影される撮影領域が求められ、含めない場合には、撮影されうる撮影領域が求められる。 また、撮影時刻検知手段(21)には、撮影端末(1)に内蔵される時計を用いてもよいし、外部の時刻認証管理サーバーから受信するタイムスタンプを用いてもよい。また、撮影者登録手段(22)には、撮影端末(1)の入力デバイス(15)を介して入力されるデータが利用できる。
CPU(11)には、撮影手段(17)や地点検知手段(18)、撮影方向検知手段(19)、撮影領域検知手段(20)、撮影時刻検知手段(21)、撮影者登録手段(22)からの写真画像データ(101)及び撮影条件データ(102)を読み出す写真データ読出部(23)、読み出した写真データ(103)を演算処理する写真データ処理部(24)、データを送受するネットワーク送受信部(25)が少なくとも備わる。
この構成により、撮影手段(17)による写真撮影(S151)や、撮影地点検知手段(18)による撮影地点検知(S152)、撮影方向検知手段(19)による撮影方向検知(S153)、撮影領域検知手段(20)による撮影領域検知(S154)、撮影時刻検知手段(21)による撮影時刻検知(S155)、撮影者登録手段(22)による撮影者登録(S156)をされた写真データ(103)は、写真データ読出部(23)によって読み出され(S157)、ネットワーク送受信部(25)によってサーバー(2)へ送信される(S158)。この際、必要に応じ写真データ処理部(24)によってデータの連結処理をしたり、写真画像を含む写真画像データ(101)と、撮影条件に関するテキストを含む撮影条件データ(102)とに分割処理したりしてもよい。
撮影端末(1)からサーバー(2)へデータ送信(S158)するには、カメラ付き携帯電話などに備わるメール送受信装置を利用するのが簡便である。インターネット(4)を介する場合には、周知のように電子メールに添付させて送信する構成、所定のプロトコルを用いてピアツーピアで送信する構成、ネットワーク上の別のサーバーに一旦格納した後にユーザーの操作によりFTPやHTTPなどを用いた通信による構成など、従来公知のさまざまなデータ通信方法が利用可能である。なお、写真画像データ(101)及び撮影条件データ(102)をネットワーク上の別サーバーに一旦格納した場合は、そのサーバーのネットワークアドレス(パス・ファイル名を含む)を、写真画像データ(101)及び撮影条件データ(102)の代用として用いてもよい。
図4は、本発明によるサーバー(2)の構成図、図5は、そのデータ処理のフローチャートである。サーバー(2)には、演算処理を司るCPU(31)、それと協働するROM・RAM等のメモリー(32)、ハードディスク等の記憶装置(33)、画面表示するモニター(34)、ユーザーの入力をCPUに伝達する入力デバイス(35)、インターネット等のネットワークと接続して通信するためのネットワークアダプタ(36)が備わる。
CPU(31)には、撮影端末(1)や表示端末(3)とデータを送受するネットワーク送受信部(37)や、撮影端末(1)から受信した写真画像データ(101)及び撮影条件データ(102)を、地図データ(301)の対応する位置に関連付けて登録処理する写真登録処理部(38)、写真登録処理部(38)から写真画像データ(101)及び撮影条件データ(102)を、それぞれ読み出す写真画像データ読出部(39)及び撮影条件読出部(40)、表示端末(3)から送信された検索条件データ(501)及び表示条件データ(502)をそれぞれ読み出す検索条件データ読出部(41)及び表示条件データ読出部(42)、そして、検索演算処理部として、検索条件データ(501)に対応する撮影条件データ(102)を記憶装置(33)の撮影条件データ記録部から検索処理する撮影条件データ検索部(43)と、得られた撮影条件データ(102)に対応する写真画像データ(101)を記憶装置(33)の写真画像データ記録部から検索処理する写真画像データ検索部(44)、得られた撮影条件データ(102)に対応する地図データ(302)を記憶装置(33)から検索処理する地図データ検索部(45)と、それを読み出す地図データ読出部(46)が備わる。
なお、地図データ(302)は、予め記憶装置(33)に蓄積しておくことが好ましいが、必要に応じて逐次ネットワークを介して外部サーバーからダウンロードすることも可能である。
CPU(31)には、また、表示条件データ(502)に対応する形式で、撮影条件データ(102)とそれに対応する写真画像データ(101)及び地図データ(302)を連結処理して表示データ(302)を生成する表示データ生成部(47)が備わる。
 この構成により、ネットワーク送受信部(37)によって撮影端末(1)から得られた写真画像データ(101)及び撮影条件データ(102)は、まず、写真登録処理部(38)によってそれぞれ記憶装置(33)の写真画像データ記録部及び撮影条件データ記録部に写真登録処理される(S301)。この写真登録時には、地図データ(301)の対応する位置に関連付けて登録処理してもよいし、地図データ(301)とは独立に登録処理してもよい。
 また、撮影端末(1)から受信した写真データ(103)が写真画像データ(101)と撮影条件データ(102)とに未分離なら、CPU(31)に備わるデータ分割演算処理部によって、写真画像データ(101)と撮影条件データ(102)に分割処理する(S302)。
ネットワーク送受信部(37)を介して表示端末(3)から検索条件データ(501)及び表示条件データ(502)の入力があれば、検索条件データ読出部(41)及び表示条件データ読出部(42)によって、それぞれ検索条件データ(501)の読み出し(S303)及び表示条件データ(502)の読み出し(S304)を行う。
そして、撮影条件データ検索部(43)によって、検索条件データ(501)に対応する撮影条件データ(102)を記憶装置(33)の撮影条件データ記録部から検索処理し(S305)、該当する撮影条件データ(102)を、撮影条件読出部(40)によって、写真登録処理部(38)から読み出す(S306)。なお、検索条件データ(501)には、地図のみを表示する条件を設定することも可能である。
 次いで、得た撮影条件データ(102)に対応する写真画像データ(101)を、写真画像データ検索部(44)によって記憶装置(33)の写真画像データ記録部から検索処理し(S307)、写真画像データ読出部(39)によって読み出す(S308)。
 これと同時に、得た撮影条件データ(102)に対応する地図データ(302)を、地図データ検索部(45)によって記憶装置(33)から検索処理し(S309)、地図データ読出部(46)によって読み出す(S310)。
 読み出した写真画像データ(101)と地図データ(302)は、表示データ生成部(47)によって、表示条件データ(502)に対応する形式で、撮影条件データ(102)と連結処理されて表示データ(302)を生成する(S311)。
生成された表示データ(302)は、ネットワーク送受信部(37)によって、表示端末(3)へ送信される。
なお、本発明の要部である表示データ(302)については、後に詳述する。
図6は、本発明による表示端末(3)の構成図、図7は、そのデータ処理のフローチャートである。表示端末(3)には、演算処理を司るCPU(51)、それと協働するROM・RAM等のメモリー(52)、ハードディスク等の記憶装置(53)、画面表示するモニター(54)、ユーザーの入力をCPUに伝達する入力デバイス(55)、インターネット等のネットワークと接続して通信するためのネットワークアダプタ(56)が備わる。
CPU(51)には、入力デバイス(55)から入力された検索条件データ(501)及び表示条件データ(502)を読み出し処理する検索条件読出部(57)及び表示条件読出部(58)や、サーバー(2)とデータを送受するネットワーク送受信部(59)、サーバー(2)から受信した表示データ(302)を読み出し処理する表示データ読出部(60)、表示データ(302)をモニター(54)で出力処理する表示データ処理部(61)を備える。
この構成により、検索対象の写真に関する検索条件データ(501)と、検索結果の表示方法に関する表示条件データ(502)が、キーボードやマウス等の入力デバイス(55)から入力され、検索条件読出部(57)及び表示条件読出部(58)によって読み出し処理され(S501)(S502)、ネットワークアダプタ(56)を介してサーバー(2)へ送信処理される(S503)。 検索条件データ(501)及び表示条件データ(502)に応じてサーバー(2)処理された表示データ(302)は、ネットワークアダプタ(56)を介して表示端末(3)で受信され、表示データ読出部(60)によって読み出し処理され(S504)、表示データ処理部(61)によって、表示条件データ(502)に応じた形式で表示処理され(S505)、表示出力部としてのモニター(54)に画像出力される(S506)。この際、表示データ(302)に含まれる文字データを音声出力してもよい。
上記実施例では、表示データ(302)をサーバー(2)で生成処理したが、サーバー(2)では、上記の表示データ生成部(47)に相応する表示用演算処理部によって、地図データ(301)と撮影条件データ(102)と写真画像データ(101)とを連結して表示処理するための演算処理を行う表示用データを生成処理するにとどめ、その表示用データを実体的な表示データ(302)へ変換する処理は表示端末(3)で行ってもよい。
 図8は、電子地図上に表示されるパネル写真を示す斜視図である。
撮影端末(1)で撮影されサーバー(2)に登録された写真画像データ(101)は、サーバー(2)の表示演算処理部によって、その検索処理部からの出力である写真画像データ(101)と撮影条件データ(102)と地図データと、表示端末(3)から受信する表示条件データとに応じて、略パネル状のパネル写真(A)として表示処理される。
そのパネル写真(A)の地図上での配置位置は、パネル写真(A)の下端部中央(B)をその写真の撮影地点に対応させる。実際の撮影時には、撮影者の目の高さで撮影されるので、パネル写真(A)の下端部中央(B)を地図の地面から約1~2m高度を上げて配置してもよいし、簡便に高度ゼロとして扱い地面に接地させて配置してもよい。
パネル写真(A)の地図上での配向は、パネル写真(A)の下端の辺(C)を、撮影方角に応じて調整する。すなわち、パネル写真(A)の下端の辺(C)が、撮影方角に直交する配向で配置する。
パネル写真(A)の上端部中央には、撮影仰角を示す仰角アイコン(D)が付設表示される。仰角アイコン(D)はパネル写真(A)の少なくとも背面に設けられ、矢印形状で表示する。
図9は、電子地図上に表示されるパネル写真の側面図である。
 パネル写真(A)は、図9(イ)に示すように、一律地面に垂直に立設してもよいし、図9(ロ)に示すように、地面に垂直に立設しなくてもよい。図9(ロ)のように、地面に垂直に立設しない場合は、パネル面と撮影方向とが垂直な配向、すなわち、仰角アイコン(D)の指示する方向が撮影方向と一致する配向が好ましい。
図10及び11は、パネル写真と仰角アイコンとの関係を示すものであり、(イ)斜視説明図と(ロ)側面説明図を表す。
仰角アイコン(D)は、図10のように、パネル写真(A)の背面のみに設けてもよいし、図11のように、パネル写真(A)の表裏両面に設けてもよい。写真(A)の表裏両面に設ける場合は、常時でもよいし、必要に応じて表面にも表示するように設定してもよい。
仰角アイコン(D)がパネル写真(A)の背面のみであると、利用者が地図や写真を見る角度によっては、仰角アイコン(D)がパネル写真(A)の陰になって視認困難になることがある。また、他のパネル写真(A)の陰になって視認困難になることもある。そこで、利用者の視野と、パネル写真(A)及び仰角アイコン(D)との位置関係を算出して、仰角アイコン(D)が視認困難と推定された場合のみ、表面にも現れるように設定してもよい。
図12は、仰角アイコンの方向の視野に地図表示を切り替える様態を示す説明図である。
図12(イ)のように、パネル写真(A)の表示されている地図において、注目する特定のパネル写真(A)の仰角アイコン(D)を、クリック等によって指定することによって、図12(ロ)のように、そのパネル写真(A)を利用者視野の正面に拡大表示してもよい。この時、利用者が地図を見る方向を、仰角アイコン(D)の方向と一致させると、そのパネル写真(A)を実際の撮影方向で見ることができるので、臨場感が高まる。
図13は、3次元地図の俯瞰表示例を示す説明図である。
3次元地図が真俯瞰で表示されている場合は、パネル写真(A)が見えにくいので、図13(イ)のように、パネルが略水平になるように、すなわち、パネル写真(A)を地図と略平行に配して表示することが好ましい。そして、注目する特定のパネル写真(A)を、クリック等によって指定することによって、図13(ロ)のように、そのパネル写真(A)を視認しやすい配向に地図表示が切り替わる設定にしてもよい。
図14は、別実施例の仰角アイコンの付設されたパネル写真を有する地図であり、図15は、その別実施例の仰角アイコンを備えたパネル写真である。
前記実施例のように、パネル写真(A)を地図と平行に配して表示する場合は、パネル写真(A)の下端部中央(B)をその写真の撮影地点に対応させると共に、パネル写真の下端の辺(C)を撮影方角に応じて調整、すなわち、パネル写真(A)の下端の辺(C)が、撮影方角に直交する配向で配置する。
 そして、仰角アイコン(E)として、撮影仰角に対応させた視線方向で撮影方向を示す顔型のアイコンを、パネル写真に付設する。図示の例では、人の横顔の形であるが、鳥や犬猫などの動物の顔も利用できる。その視線方向は、鼻などの突部の方向で示してもよい。
 図16は、2次元地図に3次元のアイコンを設けた例を示す説明図である。
 図16(イ)のように、大縮尺の地図では、3次元のアイコンが小さくて視認困難であるが、図16(ロ)(ハ)のように、利用者の視野を変えると、3次元アイコンとしてのパネル写真(A)が視認容易に表示される。このように、2次元地図に3次元オブジェクトを組み込むには、従来公知の技術(例えば、google maps api for
flash plus
kmz) が適宜利用でき、2次元地図上に3次元表示可能なオブジェクトを配置し、利用者の操作によって撮影条件データ(102)を具備するパネル写真(A)を3次元的に表示するようにする。
 また、写真のサムネイルのように、2次元地図に撮影位置や撮影方向を表示している状態で、アイコン等をクリックすることで、3次元地図が表示されるようにしてもよい。
 また、パネル写真(A)に複数言語でメタデータを具備させ、2次元地図の言語を切り替えることで、パネル写真(A)に含まれる建物名をテキスト表示させてもよい。
 図17及び18は、複数の写真データについて撮影方向による分析結果の表示を伴う地図であり、図18(イ)は、ある撮影者1の9~12時における撮影情報、図18(ロ)は、ある撮影者1の13~17時における撮影情報、図18(ハ)は、ある撮影者2の9~12時における撮影情報、図18(ニ)は、ある撮影者2の13~17時における撮影情報を示す。
 地図上の所定範囲について、各写真の撮影地点に、撮影者によって色の異なるアイコン(F)が表示され、そのアイコン(F)をクリックすると、その撮影地点での写真(G)が表示されると共に、その写真(G)に撮影方角を示すアイコン(H)が付設されている。
ここで、地図上の所定範囲に含まれる多数の写真について、撮影方角と撮影仰角をパラメータとして集計し、撮影方角の頻度分布(I)と撮影仰角の頻度分布(J)を、方角または仰角に対応した半径で示す円で表示してもよい。これによって、その特定地域で写真の撮影される傾向が把握でき、観光の参考等に利用できる。
 なお、頻度分布(I)(J)も、撮影者によって色分けしてもよい。また、方向によって、濃淡や色相で区別してもよい。
また同様に、地図上の所定範囲に位置する複数の写真に対して、撮影時刻をパラメータとして集計し、その撮影時間帯の頻度分布を、24時間式アナログ時計の針などで表示してもよい。これによっても、特定地域で写真の撮影される時間帯の傾向が把握でき、観光の参考等に利用できる。
 図19及び20は、撮影者の移動経路の表示を伴う地図であり、図20(イ)は、ある撮影者の9~12時における撮影情報、図20(ロ)は、ある撮影者の12~15時における撮影情報、図20(ハ)は、ある撮影者2の15~217時における撮影情報を示す。
地図上の所定範囲に位置する複数の写真に対して、同じ撮影者の移動経路を、撮影地点(F)をつなぐ線分(K)で示して表示してもよい。この移動軌跡(F)も、撮影者によって色分けしてもよい。多数の撮影者について集計分析すれば、特定地域での移動傾向が把握でき観光の参考等に利用できる。
また、同一撮影者による複数の写真を選択することで、その撮影時刻の差から移動時間を算出し、観光に必要な時間の見積もり表示を行うことも可能である。
 このような移動に関する情報は、地図や撮影方向に関する情報を含んだ写真のアルバム作成サービスに利用することもできる。アルバムとしては、ネット上のオンラインアルバムや印刷体としてもよい。また、写真を登録した際に、その被写体名の候補などを提示して、付加情報を具備させてもよい。その場合、一般の地図データには、小商店も観光スポットも規模に関わらず均一に扱われているが、本システムでは、観光スポットや著名なランドマークを候補として上位に提示されるようにすることが好ましい。
 図21は、スライドショーの様態を示す説明図である。
 従来のスライドショーは写真のみを再生するが、本発明によるスライドショーでは、撮影位置を示す地図を再生した後に写真を再生する。その地図も、移動経路等の付加情報を伴わせて表示してもよい。
図22は、撮影条件データを入力するユーザインタフェースを示す撮影端末の説明図である。
モーションセンサ等を備えた撮影端末により、撮影の方角や仰角を撮影後に追加したり修正する場合には、図22(イ)のように、地図(L)及び撮影地点(B)を表示し、図22(ロ)のように、撮影端末(3)を傾斜させて方位の確定操作(N)を行うのみで容易に入力できる。図22(ハ)のように、撮影端末(3)を傾斜させた時に、地図(L)の方向は変わらないように設定してもよい。
また、鉄道等の車中から撮影した場合、位置情報を取得している間に移動し、位置情報が正しくないものになる場合がある。このような場合にも、撮影後に撮影条件を入力する必要が生じる。その際には、乗車路線のダイヤグラムと地図とを参照させて、撮影地点の確定入力を行う。
図23は、検索条件データを入力するユーザインタフェースを示す撮影端末の説明図である。
検索に必要なパラメータは、図23(イ)のように、キーボードからの数値入力やスライダーでもよいし、図23(ロ)のように、コンパス状のアイコンを用いて撮影方角を指定してもよいし、図23(ハ)のように、矢印状のアイコンを用いて仰角を指定してもよい。
 これらによると、観光に必要な時間の見積もりや、観光のモデルコースを動的に作成することを容易に行える。例えば、朝9時から夕方4時まで四条辺りという指定をすると、その時間内に活動を終えた撮影者を優先して、写真と移動履歴を検索表示し、開始地点を指定すると、そこから半径200m以内から移動を開始した撮影者で、指定時間内に活動を終えた人の移動軌跡を検索表示させられる。
 また、PCなど表示画面の大きな表示端末(3)で写真を検索した時に、検索結果の写真もしくは写真群のページへのURLをQRコードにして表示し、携帯電話等の小型携帯型端末ではQRコードを撮影することで、検索結果のページの情報を得ることができるので、出先でこれらのページにアクセスすることが容易にできる。
 また、視線情報を利用した検索で撮影方位を基に検索する際、特に著名な観光地の場合には、利用者が指定した撮影方位に近い方位で撮影された写真が多数あることが予想される。そこで、PCなどの画面に表示されている地図の範囲をもとに、検索地域を自動で設定し、その中に含まれる写真で、利用者が指定した方位に近いものを検索するようにしてもよい。この際、利用者が明示的に仰角を指定していなくても、例えば利用者が視線情報付き写真をキーにして類似検索をした場合は、キーにした写真の仰角情報を自動抽出して、検索のパラメータに設定するとよい。これによると、視線情報を利用した検索を、利用者の指定するパラメータを少なく抑えてインタフェースを簡便にしつつも、利用者の意図に近い写真の検索ができるようになる。
本発明は、撮影端末(1)、サーバー(2)、表示端末(3)を、上述の電子地図上での写真表示システムとして機能させるプログラムとして提供してもよい。また、そのプログラムをCD等のコンピュータ用記憶媒体に格納して提供してもよい。
本発明によると、略パネル状の写真が、その撮影地点及び撮影方向に応じて地図上に配置されるので、臨場感高い写真付き電子地図が得られ便利であり、産業上有用である。グーグルアース等の既存技術に付加機能として適用することも容易である。
1 撮影端末2 サーバー3 表示端末4 インターネット11 CPU12 メモリー13 記憶装置14 モニター15 入力デバイス16 ネットワークアダプタ17 撮影手段18 撮影地点検知手段19 撮影方向検知手段20 撮影領域検知手段21 撮影時刻検知手段22 撮影者登録手段23 写真データ読出部24 写真データ処理部25 ネットワーク送受信部31 CPU32 メモリー33 記憶装置34 モニター35 入力デバイス36 ネットワークアダプタ37 ネットワーク送受信部 38 写真登録処理部39 写真画像データ読出部40 撮影条件読出部41 検索条件データ読出部42 表示条件データ読出部43 撮影条件データ検索部44 写真画像データ検索部45 地図データ検索部46 地図データ読出部47 表示データ生成部51 CPU52 メモリー53 記憶装置54 モニター55 入力デバイス56 ネットワークアダプタ57 検索条件読出部58 表示条件読出部59 ネットワーク送受信部60 表示データ読出部61 表示データ処理部
101 写真画像データ
102 撮影条件データ103 写真データ301 地図データ302 表示データ303 表示用データ501 検索条件データ502 表示条件データ A 写真パネル B 写真パネルの下端部中央 C 写真パネルの下端辺 D 仰角アイコン E 2次元表示用の仰角アイコン F 撮影地点 G 選択写真 I 撮影方角の分析結果 J 撮影仰角の分析結果 K 撮影者の移動軌跡 L 電子地図 M 撮影視野 N 入力確定ボタン

Claims (22)

  1. 撮影端末と、電子地図管理サーバーと、表示端末と、を備え、 撮影端末で撮影された地理情報を有する写真を、電子地図管理サーバーで撮影地点に応じて地図に連結処理し、表示端末で写真を地図上に表示するシステムにおいて、撮影端末では、撮影手段によって、写真を撮影する写真撮影ステップと、撮影地点検知手段によって、写真を撮影した地点を検知する撮影地点検知ステップと、撮影方向検知手段によって、写真を撮影した方角及び仰角を検知する撮影方向検知ステップと、通信手段によって、撮影手段で得られた写真画像データと、撮影地点検知手段及び撮影方向検知手段で得られた撮影条件データを、電子地図管理サーバーへ送信する写真データ送信ステップと、を行い、電子地図管理サーバーでは、通信手段によって、撮影端末から送信された写真画像データと撮影条件データを受信する写真データ受信ステップと、写真画像データ記録部によって、撮影端末から受信した写真画像データを記録する写真画像データ記録ステップと、撮影条件データ記録部によって、撮影端末から受信した撮影条件データを記録する撮影条件データ記録ステップと、写真登録処理部によって、写真の撮影地点に相当する地図上の位置に写真を関連付けて登録し、地図データ記録部の地図データを更新する写真登録ステップと、通信手段によって、表示端末から送信された検索条件データと表示条件データを受信する検索表示条件データ受信ステップと、
    検索処理部によって、表示端末から受信された検索条件データに応じて、対応する地図データと撮影条件データと写真画像データとを検索処理する検索処理ステップと、
    表示演算処理部によって、検索処理部からの出力と、表示端末から受信する表示条件データとに応じて、対応する写真画像データを略パネル状のパネル写真として表示処理し、その写真の撮影地点に相当する地図上の位置に配置すると共に、その写真の撮影方角に相当する地図上の方角に合わせて配向し、更に、その写真の撮影仰角を示す仰角アイコンをパネル写真に付設表示処理するための演算処理を行う表示データ生成ステップと、
    通信手段によって、表示データを表示端末へ送信する表示データ送信ステップと、を行い、表示端末では、検索条件入力部によって、検索対象の地図または写真に関する条件を入力する検索条件入力ステップと、表示条件入力部によって、検索結果の表示方法に関する条件を入力する表示条件入力ステップと、通信手段によって、検索条件データと表示条件データを電子地図管理サーバーへ送信する検索表示条件送信ステップと、通信手段によって、電子地図管理サーバーから表示データを受信する表示データ受信ステップと、表示出力部によって、表示データを画像として出力する画像表示ステップと、を行うことを特徴とする電子地図上での写真表示方法。
  2. 撮影端末と、電子地図管理サーバーと、表示端末と、を備え、 撮影端末で撮影された地理情報を有する写真を、電子地図管理サーバーで撮影地点に応じて地図に連結処理し、表示端末で写真を地図上に表示するシステムにおいて、撮影端末では、撮影手段によって、写真を撮影する写真撮影ステップと、撮影地点検知手段によって、写真を撮影した地点を検知する撮影地点検知ステップと、撮影方向検知手段によって、写真を撮影した方角及び仰角を検知する撮影方向検知ステップと、通信手段によって、撮影手段で得られた写真画像データと、撮影地点検知手段及び撮影方向検知手段で得られた撮影条件データを、電子地図管理サーバーへ送信する写真データ送信ステップと、を行い、電子地図管理サーバーでは、通信手段によって、撮影端末から送信された写真画像データと撮影条件データを受信する写真データ受信ステップと、写真画像データ記録部によって、撮影端末から受信した写真画像データを記録する写真画像データ記録ステップと、撮影条件データ記録部によって、撮影端末から受信した撮影条件データを記録する撮影条件データ記録ステップと、写真登録処理部によって、写真の撮影地点に相当する地図上の位置に写真を関連付けて登録し、地図データ記録部の地図データを更新する写真登録ステップと、通信手段によって、表示端末から送信された検索条件データと表示条件データを受信する検索表示条件データ受信ステップと、
    検索処理部によって、表示端末から受信された検索条件データに応じて、対応する地図データと撮影条件データと写真画像データとを検索処理する検索処理ステップと、
    表示用演算処理部によって、検索処理部から出力される地図データと撮影条件データと写真画像データとを連結して表示処理するための演算処理を行う表示用データ生成ステップと、
    通信手段によって、表示データを表示端末へ送信する表示データ送信ステップと、を行い、表示端末では、検索条件入力部によって、検索対象の地図または写真に関する条件を入力する検索条件入力ステップと、表示条件入力部によって、検索結果の表示方法に関する条件を入力する表示条件入力ステップと、通信手段によって、検索条件データと表示条件データを電子地図管理サーバーへ送信する検索表示条件送信ステップと、通信手段によって、電子地図管理サーバーから表示用データを受信する表示データ受信ステップと、端末表示演算処理部によって、表示条件入力部からの表示条件データと、電子地図管理サーバーから受信した表示用演算処理データとを用いて、写真画像データを略パネル状のパネル写真として表示処理し、その写真の撮影地点に相当する地図上の位置に配置すると共に、その写真の撮影方角に相当する地図上の方角に合わせて配向し、更に、その写真の撮影仰角を示す仰角アイコンをパネル写真に付設表示処理するための演算処理を行う表示データ生成ステップと、表示出力部によって、表示データを画像として出力する画像表示ステップと、を行うことを特徴とする電子地図上での写真表示方法。
  3. パネル写真の下端部中央をその写真の撮影地点に対応させ、パネル写真の下端の配向を撮影方角に対応させて、パネル写真を地図上に垂直に立設し、
    また、パネル写真の上端部中央に、撮影仰角に対応させた矢印で撮影方向を示す矢印状の仰角アイコンを設ける
    請求項1または2に記載の電子地図上での写真表示方法。
  4. パネル写真の下端部中央を、その写真の撮影地点に対応させ、パネル写真の下端の配向を撮影方角に対応させると共に、撮影仰角に応じた角度で傾斜させて、パネル写真を地図上に立設し、
    また、パネル写真の上端部中央に、パネル写真に垂直な矢印で撮影方向を示す矢印状の仰角アイコンを設ける
    請求項1または2に記載の電子地図上での写真表示方法。
  5. 仰角アイコンを、パネル写真の表裏両面に設ける
    請求項3または4に記載の電子地図上での写真表示方法。
  6. 仰角アイコンの指定によって、そのパネル写真の撮影地点で、その仰角アイコンの方向の視野に、地図表示を切り替える請求項3ないし5に記載の電子地図上での写真表示方法。
  7.  3次元地図の俯瞰表示の場合には、パネル写真を地図と略平行に配して表示する
    請求項1ないし5に記載の電子地図上での写真表示方法。
  8.  パネル写真を地図と平行に配して表示する場合は、
    パネル写真の下端部中央をその写真の撮影地点に対応させ、パネル写真の下端の配向を撮影方角に対応させ、
    また、撮影仰角に対応させた視線方向で撮影方向を示す顔型の仰角アイコンを、パネル写真に付設する
    請求項1または2または7に記載の電子地図上での写真表示方法。
  9.  地図上の所定範囲に位置する複数の写真に対して、撮影方角をパラメータとして集計し、
    その撮影方角の頻度分布を、地図上の方角に対応した半径で示す方角分析表示円を付加する
    請求項1ないし8に記載の電子地図上での写真表示方法。
  10.  地図上の所定範囲に位置する複数の写真に対して、撮影仰角をパラメータとして集計し、
    その撮影仰角の頻度分布を、半径で示す仰角分析表示円を付加する
    請求項1ないし9に記載の電子地図上での写真表示方法。
  11. 地図上の所定範囲に位置する複数の写真に対して、撮影時刻をパラメータとして集計し、
    その撮影時間帯の頻度分布を、24時間式アナログ時計の針で示す撮影時刻分析表示円を付加する
    請求項1ないし10に記載の電子地図上での写真表示方法。
  12. 地図上の所定範囲に位置する複数の写真に対して、撮影者をパラメータとして、写真を示す指標を色分け表示する
    請求項1ないし11に記載の電子地図上での写真表示方法。
  13. 地図上の所定範囲に位置する複数の写真に対して、同じ撮影者の移動経路を、写真撮影地点をつなぐ線分で示して表示する
    請求項1ないし12に記載の電子地図上での写真表示方法。
  14. 地図上の所定範囲に位置する複数の写真に対して、それらの写真の連続的な指定によって、その写真をスライドショーで表示する
    請求項1ないし13に記載の電子地図上での写真表示方法。
  15. 複数の写真のスライドショーの合間に、その写真の撮影地点を含む地図を表示する
    請求項1ないし14に記載の電子地図上での写真表示方法。
  16. 地図上の所定範囲に位置する複数の写真に対して、同一撮影者による複数の写真を選択することで、その撮影時刻の差から移動時間を算出し、観光に必要な時間の見積もり表示を行う
    請求項1ないし15に記載の電子地図上での写真表示方法。
  17.  写真の撮影後に撮影方向に関するデータを入力する場合は、モーションセンサを備えた撮影端末により、地図及び撮影地点を表示し、撮影端末を傾斜させて方位の確定入力を行う
    請求項1ないし16に記載の電子地図上での写真表示方法。
  18.  移動中の鉄道または航路車両で写真を撮影し、撮影地点を後から入力する場合は、その路線のダイヤグラムと地図とを参照させて、撮影地点の確定入力を行う
    請求項1ないし17に記載の電子地図上での写真表示方法。
  19. 撮影端末と、電子地図管理サーバーと、表示端末と、を備え、 撮影端末で撮影された地理情報を有する写真を、電子地図管理サーバーで撮影地点に応じて地図に連結処理し、表示端末で写真を地図上に表示するシステムにおいて、撮影端末には、写真を撮影する撮影手段と、写真を撮影した地点を検知する撮影地点検知手段と、写真を撮影した方角及び仰角を検知する撮影方向検知手段と、撮影手段によって得られた写真画像データと、撮影地点検知手段及び撮影方向検知手段によって得られた撮影条件データを、電子地図管理サーバーへ送信する通信手段と、を設け、電子地図管理サーバーには、撮影端末から受信した写真画像データを記録する写真画像データ記録部と、撮影端末から受信した撮影条件データを記録する撮影条件データ記録部と、地図データを記録する地図データ記録部と、
    表示端末から受信する検索条件データに応じて、対応する地図データと撮影条件データと写真画像データとを検索処理する検索処理部と、
     その検索処理部からの出力と、表示端末から受信する表示条件データとに応じて、対応する写真画像データを略パネル状のパネル写真として表示処理し、その写真の撮影地点に相当する地図上の位置に配置すると共に、その写真の撮影方角に相当する地図上の方角に合わせて配向し、更に、その写真の撮影仰角を示す仰角アイコンをパネル写真に付設表示処理して、表示データを生成するための演算処理を行う表示演算処理部と、
     撮影端末及び表示端末とデータ送受信する通信手段と、を設け、
    表示端末には、検索対象の地図または写真に関する検索条件データが入力される検索条件入力部と、検索結果の表示方法に関する表示条件データが入力される表示条件入力部と、電子地図管理サーバーから受信した表示データを画像として出力する表示出力部と、検索条件入力部からの検索条件データと表示条件入力部からの表示条件データを電子地図管理サーバーへ送信し、電子地図管理サーバーから表示データを受信する通信手段と、を設けたことを特徴とする電子地図上での写真表示システム。
  20. 撮影端末と、電子地図管理サーバーと、表示端末と、を備え、 撮影端末で撮影された地理情報を有する写真を、電子地図管理サーバーで撮影地点に応じて地図に連結処理し、表示端末で写真を地図上に表示するシステムにおいて、撮影端末には、写真を撮影する撮影手段と、写真を撮影した地点を検知する撮影地点検知手段と、写真を撮影した方角及び仰角を検知する撮影方向検知手段と、撮影手段によって得られた写真画像データと、撮影地点検知手段及び撮影方向検知手段によって得られた撮影条件データを、電子地図管理サーバーへ送信する通信手段と、を設け、電子地図管理サーバーには、撮影端末から受信した写真画像データを記録する写真画像データ記録部と、撮影端末から受信した撮影条件データを記録する撮影条件データ記録部と、地図データを記録する地図データ記録部と、
    表示端末から受信する検索条件データに応じて、対応する地図データと撮影条件データと写真画像データとを検索処理する検索処理部と、
     その検索処理部から出力される地図データと撮影条件データと写真画像データとを連結して表示処理するための演算処理を行い、表示用データを生成するための表示用演算処理部と、
     撮影端末及び表示端末とデータ送受信する通信手段と、を設け、
    表示端末には、検索対象の地図または写真に関する検索条件データが入力される検索条件入力部と、検索結果の表示方法に関する表示条件データが入力される表示条件入力部と、表示条件入力部からの表示条件データと、電子地図管理サーバーから受信した表示用演算処理データとを用いて、写真画像データを略パネル状のパネル写真として表示処理し、その写真の撮影地点に相当する地図上の位置に配置すると共に、その写真の撮影方角に相当する地図上の方角に合わせて配向し、更に、その写真の撮影仰角を示す仰角アイコンをパネル写真に付設表示処理して、表示データを生成するための演算処理を行う端末表示演算処理部と、端末表示演算処理部からの出力を画像として出力する表示出力部と、検索条件入力部からの検索条件データを電子地図管理サーバーへ送信し、電子地図管理サーバーから表示用データを受信する通信手段と、を設けたことを特徴とする電子地図上での写真表示システム。
  21. 撮影端末または電子地図管理サーバーまたは表示端末に、請求項1ないし18に記載の電子地図上での写真表示方法を実行させるか、または、撮影端末または電子地図管理サーバーまたは表示端末を、請求項19または20に記載の電子地図上での写真表示システムとして機能させることを特徴とするプログラム。
  22. 請求項1ないし18に記載の電子地図上での写真表示方法により生成されるか、または、請求項19または20に記載の電子地図上での写真表示システムとして機能することを特徴とする電子地図。
PCT/JP2009/002069 2008-07-31 2009-05-12 電子地図上での写真表示方法及びシステム、並びにその電子地図 WO2010013373A1 (ja)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
JP2008198928A JP5334159B2 (ja) 2008-07-31 2008-07-31 電子地図上での写真表示方法及びシステム
JP2008-198928 2008-07-31

Publications (2)

Publication Number Publication Date
WO2010013373A1 true WO2010013373A1 (ja) 2010-02-04
WO2010013373A9 WO2010013373A9 (ja) 2010-03-18

Family

ID=41610089

Family Applications (1)

Application Number Title Priority Date Filing Date
PCT/JP2009/002069 WO2010013373A1 (ja) 2008-07-31 2009-05-12 電子地図上での写真表示方法及びシステム、並びにその電子地図

Country Status (2)

Country Link
JP (1) JP5334159B2 (ja)
WO (1) WO2010013373A1 (ja)

Families Citing this family (12)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2011193169A (ja) * 2010-03-12 2011-09-29 National Institute Of Information & Communication Technology 撮影画像と撮影情報の同時表示処理方法、及び装置
JP5458411B2 (ja) * 2010-03-12 2014-04-02 独立行政法人情報通信研究機構 撮影画像表示装置、撮影画像表示方法、及び撮影画像表示方法によって出力される電子地図
JP5514038B2 (ja) * 2010-08-16 2014-06-04 株式会社 ミックウェア ストリートビュー自動出力装置、地図自動出力装置、ストリートビュー自動出力方法、地図自動出力方法、およびプログラム
JP5698524B2 (ja) * 2010-12-27 2015-04-08 オリンパスイメージング株式会社 画像再生装置
JP5789982B2 (ja) * 2010-12-29 2015-10-07 株式会社ニコン 撮影方向決定プログラム及び表示装置
US8164599B1 (en) * 2011-06-01 2012-04-24 Google Inc. Systems and methods for collecting and providing map images
JP5644814B2 (ja) * 2011-06-30 2014-12-24 キヤノンマーケティングジャパン株式会社 情報処理装置、情報処理システム、制御方法、情報処理方法およびそのプログラム
US10970888B2 (en) 2011-12-27 2021-04-06 Sony Corporation Information processing device, information processing method and program
US9471911B2 (en) * 2012-03-13 2016-10-18 Canon Kabushiki Kaisha Information processing apparatus and information processing method
JP6682821B2 (ja) 2014-12-05 2020-04-15 株式会社リコー サービスシステム、情報処理装置、サービス提供方法
JP2017146347A (ja) * 2016-02-15 2017-08-24 大日本印刷株式会社 表示装置及び表示システム
JP7437630B2 (ja) 2020-03-23 2024-02-26 パナソニックIpマネジメント株式会社 表示装置、表示方法、及び車両

Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2007052809A (ja) * 2006-10-18 2007-03-01 Sabo Frontier Foundation 位置方位付き写真提供システム及びそのプログラム

Patent Citations (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2007052809A (ja) * 2006-10-18 2007-03-01 Sabo Frontier Foundation 位置方位付き写真提供システム及びそのプログラム

Also Published As

Publication number Publication date
JP2010039583A (ja) 2010-02-18
WO2010013373A9 (ja) 2010-03-18
JP5334159B2 (ja) 2013-11-06

Similar Documents

Publication Publication Date Title
JP5334159B2 (ja) 電子地図上での写真表示方法及びシステム
US10057485B2 (en) Imaging apparatus and methods for generating a guide display using imaging height posture information
JP4796435B2 (ja) 画像ビューア
JP4914268B2 (ja) 検索サービスサーバの情報検索方法。
CN104115180B (zh) 信息处理设备、信息处理方法和程序
JP5467177B2 (ja) 情報提供装置、情報提供方法、情報提供処理プログラム、情報提供処理プログラムを記録した記録媒体、及び情報提供システム
JP5229791B2 (ja) 写真マッピング方法及びシステム、並びにプログラム及び記憶媒体
JPWO2016002285A1 (ja) 情報処理装置、情報処理方法およびプログラム
JP2007041964A (ja) 画像処理装置
JP2006059136A (ja) ビューア装置及びそのプログラム
CN102656605A (zh) 图像处理装置、图像处理方法、图像处理程序以及记录介质
KR20180100074A (ko) 공간객체 검색결과 정렬 방법, 시스템 및 컴퓨터 독취가능 저장장치
JP5223034B2 (ja) 情報提供装置、情報提供方法、情報提供処理プログラム、及び情報提供処理プログラムを記録した記録媒体
CN111680238B (zh) 信息分享方法、装置和存储介质
JP5288445B2 (ja) 写真マッピング方法及びシステム、並びにプログラム及び記憶媒体
JP2013115624A (ja) 撮影装置、表示方法及びプログラム
JP2014038429A (ja) 画像処理装置、画像処理方法および画像処理プログラム
JP2010129032A (ja) 画像検索装置および画像検索プログラム
JP6210807B2 (ja) 表示制御装置及び表示制御装置の制御方法
TW200928311A (en) Satellite navigation method and system
JP5951465B2 (ja) 道路情報に基づいて見通しエリアを決定するプログラム、情報端末、サーバ及び方法
WO2018000299A1 (en) Method for assisting acquisition of picture by device
JP2010276364A (ja) ナビ情報作成装置、ナビゲーションシステム、ナビゲーション情報作成方法、およびナビゲーション方法
JP5272107B2 (ja) 情報提供装置、情報提供処理プログラム、情報提供処理プログラムを記録した記録媒体、及び情報提供方法
JP2016133701A (ja) 情報提供システム、及び情報提供方法

Legal Events

Date Code Title Description
121 Ep: the epo has been informed by wipo that ep was designated in this application

Ref document number: 09802623

Country of ref document: EP

Kind code of ref document: A1

NENP Non-entry into the national phase

Ref country code: DE

122 Ep: pct application non-entry in european phase

Ref document number: 09802623

Country of ref document: EP

Kind code of ref document: A1