CN103562957B - 信息提供装置、信息提供方法以及信息提供系统 - Google Patents

信息提供装置、信息提供方法以及信息提供系统 Download PDF

Info

Publication number
CN103562957B
CN103562957B CN201180071234.XA CN201180071234A CN103562957B CN 103562957 B CN103562957 B CN 103562957B CN 201180071234 A CN201180071234 A CN 201180071234A CN 103562957 B CN103562957 B CN 103562957B
Authority
CN
China
Prior art keywords
information
configuration
dimensional
unit
user
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201180071234.XA
Other languages
English (en)
Other versions
CN103562957A (zh
Inventor
高见真也
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Lotte Group Co.,Ltd.
Original Assignee
Rakuten Inc
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Rakuten Inc filed Critical Rakuten Inc
Publication of CN103562957A publication Critical patent/CN103562957A/zh
Application granted granted Critical
Publication of CN103562957B publication Critical patent/CN103562957B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T15/00—3D [Three Dimensional] image rendering
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/50—Information retrieval; Database structures therefor; File system structures therefor of still image data
    • G06F16/53—Querying
    • G06F16/532—Query formulation, e.g. graphical querying
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/50—Information retrieval; Database structures therefor; File system structures therefor of still image data
    • G06F16/58—Retrieval characterised by using metadata, e.g. metadata not derived from the content or metadata generated manually
    • G06F16/583—Retrieval characterised by using metadata, e.g. metadata not derived from the content or metadata generated manually using metadata automatically derived from the content
    • G06F16/5854—Retrieval characterised by using metadata, e.g. metadata not derived from the content or metadata generated manually using metadata automatically derived from the content using shape and object relationship
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/50—Information retrieval; Database structures therefor; File system structures therefor of still image data
    • G06F16/58—Retrieval characterised by using metadata, e.g. metadata not derived from the content or metadata generated manually
    • G06F16/5866—Retrieval characterised by using metadata, e.g. metadata not derived from the content or metadata generated manually using information manually generated, e.g. tags, keywords, comments, manually generated location and time information
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0481—Interaction techniques based on graphical user interfaces [GUI] based on specific properties of the displayed interaction object or a metaphor-based environment, e.g. interaction with desktop elements like windows or icons, or assisted by a cursor's changing behaviour or appearance
    • G06F3/04815—Interaction with a metaphor-based environment or interaction object displayed as three-dimensional, e.g. changing the user viewpoint with respect to the environment or object
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T15/00—3D [Three Dimensional] image rendering
    • G06T15/10—Geometric effects
    • G06T15/20—Perspective computation

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • General Engineering & Computer Science (AREA)
  • Data Mining & Analysis (AREA)
  • Databases & Information Systems (AREA)
  • Library & Information Science (AREA)
  • Computer Graphics (AREA)
  • Geometry (AREA)
  • Computing Systems (AREA)
  • Human Computer Interaction (AREA)
  • Mathematical Physics (AREA)
  • Processing Or Creating Images (AREA)

Abstract

能够高效地检索包含符合用户喜好的物体的图像的图像数据，或者能够高效地推荐与符合用户喜好的摄影点有关的信息。信息提供装置从终端装置接收表示三维空间中的物体的配置的三维配置信息和用于确定三维空间中的视点位置和视线方向的视线信息，根据接收到的三维配置信息和视线信息，生成表示投影到二维面上的物体在二维面内的配置的二维配置信息，对存储有图像数据和配置信息的存储单元中所存储的配置信息、和所生成的二维配置信息进行比较，根据比较的结果来检索图像数据，其中，该配置信息表示图像数据示出的图像中所包含的物体的图像内的配置。

Description

信息提供装置、信息提供方法以及信息提供系统
技术领域
本发明涉及可经由网络向用户推荐与符合用户喜好的摄影点有关的有用的信息的信息提供装置等的技术领域。
背景技术
以往，公知有将与摄影对象有关的信息(例如，日出、高原植物、红叶等)作为关键字来检索关联的信息的检索服务。在这样的检索服务中，针对经由互联网连接的用户终端提供与该检索关键字相应的信息，并且在想要检索摄影点的情况下，能够检索通过评论等对所摄影的图像附加了关联信息后的信息。在专利文献1中公开了如下技术：在Exif形式的扩展标签部分中设定经度纬度信息，生成带位置信息原始图像，将该生成的图像在网页上公开，针对以用户的当前位置等任意的地点信息作为关键字的信息检索，提供与该任意的地点附近的场所的摄影点有关的信息。
现有技术文献
专利文献
专利文献1：日本特开2002-373168号公报
发明内容
发明要解决的问题
然而，在上述那样的现有技术中，检索摄影点的用户需要设定适合于该摄影点的检索关键字，对用户来讲该关键字的设定比较繁琐。此外，专利文献1是根据图像信息中所包含的经度纬度信息来提供与用户设定的任意的地点附近的摄影点有关的信息，根据摄影图像中作为图像所包含的物体(object)(例如，山、海等风景、家庭或孩子等人物等)来有效地推荐与符合用户喜好的摄影点有关的信息是困难的。此外，例如，在用户不去摄影点而想得到希望的图像等情况下，在现有技术中，高效地检索包含用户想象的物体(符合用户喜好的物体)的图像的图像并进行推荐是困难的。
本发明正是鉴于以上情况而完成的，其目的在于提供一种信息提供装置、信息提供方法、信息提供处理程序、记录了信息提供处理程序的记录介质以及信息提供系统，能够高效地检索包含符合用户喜好的物体的图像的图像数据，或者能够高效地推荐与符合用户喜好的摄影点有关的信息。
用于解决问题的手段
为了解决上述课题，权利要求1中记载的发明是一种信息提供装置，终端装置能够经由网络访问该信息提供装置，该信息提供装置的特征在于具有：接收单元，其从所述终端装置接收三维配置信息和视线信息，该三维配置信息表示三维空间中的物体的配置，该视线信息用于确定所述三维空间中的视点位置和视线方向；生成单元，其根据所述接收到的三维配置信息和视线信息，生成二维配置信息，该二维配置信息表示投影到二维面上的所述物体在该二维面内的配置；以及检索单元，其对存储在存储单元中的配置信息和所述生成的二维配置信息进行比较，根据该比较的结果来检索图像数据，其中，该存储单元存储有图像数据和所述配置信息，所述配置信息表示该图像数据表示出的图像所包含的物体在该图像内的配置。
根据该发明，通过使用户根据自己的喜好来指定物体、该物体在三维空间中的配置、用于确定视点位置和视线方向的信息，能够高效地检索包含符合用户喜好的物体的图像的数据。此外，能够高效地向用户推荐与可通过符合用户喜好的视点位置和视线方向对符合用户喜好地配置的物体进行摄影的摄影点有关的信息。
权利要求2中记载的发明是在权利要求1中记载的信息提供装置中，其特征在于，所述接收单元接收用于确定多个由视点位置和视线方向组成的组的所述视线信息，所述生成单元根据由所述接收到的视线信息确定的多个所述组，生成多个所述二维配置信息，所述检索单元对存储在所述存储单元中的所述配置信息和所述生成的多个二维配置信息进行比较。
根据该发明，例如使用户指定多个视点位置与视线方向的组合，或者使用户指定视点位置或视线方向的范围等，由此，在三维空间中物体的配置相同且在图像内的物体的配置成为与各个视点位置和视线方向对应的配置的多个图像数据成为检索对象。因此，能够容易地找到包含用户喜好的物体的图像的数据。此外，能够容易地找到与可对符合用户喜好地配置的物体进行摄影的摄影点有关的信息。此外，能够针对同一物体检索多个图像数据。此外，能够针对同一物体推荐与摄影角度或摄影距离彼此不同的多个摄影点有关的信息。
权利要求3中记载的发明是在权利要求2中记载的信息提供装置中，其特征在于，所述信息提供装置还具有选择单元，该选择单元从所述生成的多个二维配置信息中，选择表示所述二维面内的所述物体之间重叠最小的配置的二维配置信息，所述检索单元对存储在所述存储单元中的所述配置信息和所述选择出的二维配置信息进行比较。
根据该发明，能够检索图像内的物体之间的重叠小的图像数据。此外，能够推荐与可以物体之间的重叠变小的方式进行摄影的摄影点有关的信息。
权利要求4中记载的发明是在权利要求1至3中的任意一项中记载的信息提供装置中，其特征在于，所述接收单元还接收选择信息，该选择信息表示所述三维空间内配置的物体中被用户所选择的物体，所述检索单元对所述生成的二维配置信息表示的配置中的、所述接收到的选择信息表示的所述物体的配置，和存储在所述存储单元中的所述配置信息表示的配置中的、与所述接收到的选择信息表示的所述物体对应的物体的配置进行比较。
根据该发明，将用户指定了配置的物体中的被用户所选择的物体作为配置的比较对象，将图像内的物体中的与被用户所选择的物体对应的物体作为配置的比较对象。因此，能够检索至少包含用户所选择的物体的图像的数据。此外，能够推荐与至少可对用户所选择的物体进行摄影的摄影点有关的信息。
权利要求5中记载的发明是在权利要求1至3中的任意一项中记载的信息提供装置中，其特征在于，所述接收单元还接收选择信息，该选择信息表示所述三维空间内配置的物体中被用户所选择的物体，所述生成单元将所述三维空间内配置的物体中的所述接收到的选择信息表示的物体以外的物体从向所述二维面的投影对象中排除，生成所述二维配置信息。
根据该发明，将用户指定了配置的物体中的被用户所选择的物体以外的物体视为未配置的状态。因此，即使用户不解除物体的配置的指定，也能够检索不包含用户所选择的物体以外的物体的图像的数据。此外，能够推荐与可以不映入用户所选择的物体以外的物体的方式进行摄影的摄影点有关的信息。
权利要求6中记载的发明是在权利要求1至5中的任意一项中记载的信息提供装置中，其特征在于，所述信息提供装置还具有显示控制单元，该显示控制单元以能够由用户进行选择的方式将表示三维空间内配置的物体的物体候选显示在所述终端装置的显示画面上，所述接收单元接收表示被所述用户选择的在虚拟三维空间内配置的所述物体候选的配置的三维配置信息，作为表示所述三维空间中的物体的配置的三维配置信息。
根据该发明，用户能够根据自己的喜好容易地指定物体和该物体在三维空间中的配置。
权利要求7中记载的发明是在权利要求1至6中的任意一项中记载的信息提供装置中，其特征在于，所述接收单元还接收颜色信息，该颜色信息表示所述三维空间中的物体的颜色，所述检索单元还对所述接收到的颜色信息所示的所述物体的颜色和所述图像数据表示的图像所包含的物体的颜色进行比较。
根据该发明，通过使用户进一步指定物体的颜色，能够通过该物体的配置和颜色，高效地检索包含符合用户喜好的物体的图像的数据。此外，能够高效地向用户推荐与可将该物体拍摄出该颜色的摄影点有关的信息。
权利要求8中记载的发明是在权利要求1至7中的任意一项中记载的信息提供装置中，其特征在于，在所述存储单元中存储有所述图像数据的位置信息，所述接收单元还接收条件信息，该条件信息表示与所述位置信息有关的条件，所述检索单元针对与满足所述接收到的条件信息所示的所述条件的位置信息对应的所述图像数据进行所述比较。
根据该发明，通过使用户进一步指定与位置信息有关的条件，能够筛选与用户指定的条件一致的图像数据来进行检索。此外，能够筛选与用户指定的条件一致的、与可对上述物体进行摄影的摄影点有关的信息来进行推荐。
权利要求9中记载的发明是在权利要求1至8中的任意一项中记载的信息提供装置中，其特征在于，所述信息提供装置还具有发送单元，该发送单元将由所述检索单元检索到的所述图像数据发送到所述终端装置。
根据该发明，能够高效地向用户提供包含符合用户喜好的物体的图像的数据。
权利要求10中记载的发明是在权利要求1至8中的任意一项中记载的信息提供装置中，其特征在于，在所述存储单元中存储有所述图像数据的位置信息，所述信息提供装置还具有发送单元，该发送单元将由所述检索单元检索到的所述图像数据的位置信息发送到所述终端装置。
根据该发明，能够高效地向用户提供包含符合用户喜好的物体的图像的数据的位置信息。
权利要求11中记载的发明是一种信息提供装置中的信息提供方法，终端装置能够经由网络访问该信息提供装置，该信息提供方法的特征在于包含以下步骤：接收步骤，从所述终端装置接收三维配置信息和视线信息，该三维配置信息表示三维空间中的物体的配置，该视线信息用于确定所述三维空间中的视点位置和视线方向；生成步骤，根据所述接收到的三维配置信息和视线信息，生成二维配置信息，该二维配置信息表示投影到二维面上的所述物体在该二维面内的配置；以及检索步骤，对存储在存储单元中的配置信息和所述生成的二维配置信息进行比较，根据该比较的结果来检索图像数据，其中，在该存储单元中存储有图像数据和所述配置信息，所述配置信息表示该图像数据表示出的图像所包含的物体在该图像内的配置。
权利要求12中记载的发明使终端装置能够经由网络访问的信息提供装置所包含的计算机作为以下单元进行工作：接收单元，其从所述终端装置接收三维配置信息和视线信息，该三维配置信息表示三维空间中的物体的配置，该视线信息用于确定所述三维空间中的视点位置和视线方向；生成单元，其根据所述接收到的三维配置信息和视线信息，生成二维配置信息，该二维配置信息表示投影到二维面上的所述物体在该二维面内的配置；以及检索单元，其对存储在存储单元中的配置信息和所述生成的二维配置信息进行比较，根据该比较的结果来检索图像数据，其中，该存储单元存储有图像数据和所述配置信息，所述配置信息表示该图像数据表示出的图像所包含的物体在该图像内的配置。
权利要求13中记载的发明以计算机能够读取的方式记录有如下信息提供处理程序，该信息提供处理程序使终端装置能够经由网络访问的信息提供装置所包含的计算机作为以下单元进行工作：接收单元，其从所述终端装置接收三维配置信息和视线信息，该三维配置信息表示三维空间中的物体的配置，该视线信息用于确定所述三维空间中的视点位置和视线方向；生成单元，其根据所述接收到的三维配置信息和视线信息，生成二维配置信息，该二维配置信息表示投影到二维面上的所述物体在该二维面内的配置；以及检索单元，其对存储在存储单元中的配置信息和所述生成的二维配置信息进行比较，根据该比较的结果来检索图像数据，其中，该存储单元存储有图像数据和所述配置信息，所述配置信息表示该图像数据表示出的图像所包含的物体在该图像内的配置。
权利要求14中记载的发明是一种信息提供系统，其包含终端装置和该终端装置能够经由网络访问的信息提供装置，该信息提供系统的特征在于，所述终端装置具有发送单元，该发送单元向所述信息提供装置发送三维配置信息和视线信息，该三维配置信息表示三维空间中的物体的配置，该视线信息用于确定所述三维空间中的视点位置和视线方向，所述信息提供装置具有：接收单元，其接收从所述终端装置发送的所述三维配置信息和所述视线信息；生成单元，其根据所述接收到的三维配置信息和视线信息，生成二维配置信息，该二维配置信息表示投影到二维面上的所述物体在该二维面内的配置；以及检索单元，其对存储在存储单元中的配置信息与所述生成的二维配置信息进行比较，根据该比较的结果来检索图像数据，其中，该存储单元存储有图像数据和所述配置信息，所述配置信息表示该图像数据所包含的物体在该图像内的配置。
权利要求15中记载的发明是在权利要求14中记载的信息提供系统中，其特征在于，所述终端装置或者所述信息提供装置中的至少任意一方还具有确定单元，该确定单元确定在三维空间中视线被定向的基准位置，所述终端装置还具有：取得单元，其取得三维配置信息，该三维配置信息表示通过用户的操作而配置在虚拟三维空间内的虚拟物体在该虚拟三维空间内的配置；以及设定单元，其按照所述用户的操作，一边将从视点位置朝向所述确定的基准位置的方向作为视线方向，一边使该视点位置移动，来设定所述视线信息，所述发送单元对所述取得的三维配置信息和所述设定的视线信息进行发送。
根据该发明，通过进行以基准位置为中心而使视点位置移动的操作，能够设定视点位置和视线方向。
权利要求16中记载的发明是在权利要求15中记载的信息提供系统中，其特征在于，所述确定单元确定所述配置在虚拟三维空间内的虚拟物体中的大小最大的虚拟物体的位置，作为所述基准位置。
根据该发明，能够以将大小最大的物体投影到二维面上的方式设定视点位置和视线方向。
权利要求17中记载的发明是在权利要求15或权利要求16中记载的信息提供系统中，其特征在于，在所述虚拟三维空间内配置有多个所述虚拟物体的情况下，所述确定单元确定成为所配置的多个所述虚拟物体的位置的重心的位置，作为所述基准位置。
根据该发明，能够将对多个物体的位置取得平衡的位置作为基准位置。
权利要求18中记载的发明是在权利要求15中记载的信息提供系统中，其特征在于，所述终端装置或者所述信息提供装置中的至少任意一方还具有第2生成单元，该第2生成单元根据所述取得的三维配置信息，生成多个二维配置信息，该多个二维配置信息分别表示投影到所述二维面上的所述虚拟物体在该二维面内的配置，且该多个二维配置信息的视点位置或者视线方向中的至少任意一方彼此不同，所述确定单元在由如下的视点位置和视线方向示出的视线上确定所述基准位置，该视点位置和视线方向是生成所述生成的多个二维配置信息中的、配置在所述二维面内的虚拟物体之间重叠最小的二维配置信息时使用的，所述设定单元将生成配置在所述二维面内的虚拟物体之间的重叠最小的二维配置信息时使用的视点位置和视线方向设为初始状态，响应于所述用户的操作，使视点位置和视线方向从初始状态起进行变化。
根据该发明，能够从投影到二维面上时的二维面内的物体之间的重叠最小的视点位置和视线方向开始视点位置和视线方向的设定作业。
发明的效果
根据本发明，让用户根据自己的喜好来指定物体、该对象在三维空间中的配置、用于确定视点位置和视线方向的信息，能够高效地检索包含符合用户喜好的物体的图像的数据。此外，能够高效地向用户推荐与可通过符合用户喜好的视点位置和视线方向对符合用户喜好地配置的物体进行摄影的摄影地点有关的信息。
附图说明
图1是示出本实施方式的信息提供系统S的概要结构的一例的图。
图2是示出信息提供服务器2的概要结构例的框图。
图3是示出各数据库中所登记的信息的结构例的图。
图4是用于说明图像数据表示的图像中所包含的物体的配置位置信息的图。
图5是示出终端装置1-k的概要结构例的框图。
图6是示出物体配置画面300的一例的图。
图7是示出物体配置确认画面400的一例的图。
图8是示出终端装置1-k的系统控制部37的物体配置确认处理的流程图。
图9是示出信息提供服务器2的系统控制部23的地点信息的推荐处理的流程图。
图10是用于说明用户配置的虚拟物体在用户二维配置信息中的配置位置信息的图。
具体实施方式
以下，参照附图对本发明的实施方式进行详细说明。另外，以下说明的实施方式是对信息提供系统应用本发明的情况下的实施方式。
[1.信息提供系统的结构和功能概要]
首先，使用图1来说明本实施方式的信息提供系统S的结构和功能概要。图1是示出本实施方式的信息提供系统S的概要结构的一例的图。
如图1所示，信息提供系统S构成为包含多个终端装置1-k(k＝1、2、3···n)(终端装置的一例)和信息提供服务器2(信息提供装置的一例)。终端装置1-k与信息提供服务器2例如可经由网络NW在通信协议中使用TCP/IP等彼此进行数据的收发。另外，网络NW例如是通过互联网、专用通信回线(例如，CATV(Community Antenna Television：共用天线电视)回线)、移动通信网(包含基站等)以及网关等构建的。
接着，信息提供服务器2例如由具有Web服务器、应用服务器以及数据库服务器等的功能的1个或多个服务器计算机构成。信息提供服务器2提供摄影点提供网站。摄影点提供网站是根据来自会员的请求，提供与能够对会员想要摄影的风景等进行摄影的点有关的信息(摄影地点信息)的网站。
图2是示出信息提供服务器2的概要结构例的框图。如图2所示，信息提供服务器2大致由通信部21、存储部22和系统控制部23构成。通信部21与网络NW连接，控制与终端装置1-k等的通信状态。存储部22例如由硬盘驱动器等构成，对OS(Operating System：操作系统)、服务器程序(本发明的信息提供处理程序等)以及各种数据进行存储。另外，本发明的信息提供处理程序例如也可以从规定服务器等经由网络NW取得(下载)，还可以记录在CD(Compact Disc：光盘)、DVD(Digital Versatile Disc：数字多功能光盘)等记录介质而被读入。此外，在存储部22中构建有用户信息数据库(DB(database))221和图像信息数据库(DB)222等。存储部22的图像信息DB 222是本发明中的图像数据存储单元的一例。
图3是示出各数据库中所登记的信息的结构例的图。在图3(A)所示的用户信息DB221中按照每个用户对应地登记(存储)有在摄影点提供网站上被会员注册的用户的用户ID、密码、昵称、姓名、性别、住址、电话号码和邮件地址等用户信息。另外，会员注册例如通过从终端装置1-k向摄影点提供网站进行访问而提供的会员注册步骤画面来进行，此时，发布用户ID。
在图3(B)所示的图像信息DB 222中对应地登记有图像数据(包含文件名)、该图像数据的摄影日期时间、该图像数据的摄影地点信息(表示该图像数据的摄影点的摄影地点信息。本发明的“位置信息”的一例)、表示该图像数据示出的图像(基于图像数据所显示的图像)中作为物体图像(本发明的图像中所包含的物体的一例)所包含的物体的物体信息、该图像数据表示的图像中的各物体图像的配置位置信息以及用于识别该图像数据的图像ID等。另外，在图像数据表示的图像中包含多个物体图像的情况下，针对各个物体图像登记物体信息及其配置位置信息。图3(B)示出了在照片中仅包含一个物体图像时的例子，在包含多个物体图像的情况下，登记物体图像的数量的“物体信息”和“物体图像的配置位置信息”。
在图像信息DB 222中登记的图像数据是至少能够确定摄影地点信息的图像数据即可。例如，(i)在信息提供服务器2中登记了向另外经营的图像投稿网站投稿的图像数据的情况下，让投稿者与图像数据一起发送摄影地点信息来进行登记。此外，(ii)在对通过所谓的抓取器(Crawler)取得的网页上的图像数据进行登记的情况下，仅对可根据网页确定摄影地点信息的图像数据进行登记。这里，摄影地点信息例如是纬度经度信息或住址信息。另外，在(i)的情况下，如果是用具备GPS功能的相机摄影得到的图像数据，则一并记录摄影地点信息，从而发送该摄影地点信息。此外，在是用不具备GPS功能的相机摄影得到的图像数据的情况下，通过投稿者来指定摄影地点信息。例如，可以让投稿者在图像数据投稿用的画面上所显示的地图上进行指定，也可以让投稿者从分层地显示的住址一览中阶段地进行选择。此外，优选的是，在登记图像数据时，除了摄影地点信息以外，针对能够取得摄影日期时间的图像数据，在图像信息DB 222中预先登记。
物体例如是实际存在之物或者是虚拟之物。作为物体，例如有图像数据所涉及的照片中的被摄体等。作为物体的例子，例如可举出人物、动物(鹿、猿、熊、鸟等)、植物(花、高原植物等)、风景(建筑物、桥、山、湖、河、海、温泉、大树、森林、瀑布、红叶、旭日、夕阳等)、虫子等。这样的物体在图像信息DB 222中所登记的图像数据所涉及的照片中表示为图像。该图像是物体图像。物体信息例如是示出物体图像表示的物体的种类(例如，“人物”“山”等)的信息。例如，系统控制部23从图像数据中提取梯度信息和边缘信息等特征量，与预先准备的多个正确数据(作为基准的物体图像的特征量)进行比较，由此能够识别物体。在这样的物体识别算法中，能够识别图像数据所涉及的照片中表示的物体的种类、位置、数量、大小、颜色等。由此，能够根据图像数据取得例如“多个人物”、“两座山”、“湖”、“夕日和高原植物”、“鹿和森林”这样的物体信息。另外，也可以构成为，在提取了与预先准备的任意的正确数据(既知数据)进行比较也无法确定的未知的物体的情况下，将该新的物体的特征量作为正确数据进行登记。该情况下，新登记了正确数据的物体的物体信息通过管理者侧被任意地设定，或者，通过从与未知的物体对应的文本信息(例如，附加到图像的标题或标签)等提取特征词来进行设定。此外，也可以构成为，在与预先准备的任意的正确数据进行比较也无法确定物体信息等的情况下，由对图像数据进行投稿的用户任意地对该图像数据附加物体信息。该情况下，例如，从用户的终端装置1-k与图像数据一起将附加到该图像数据的物体信息发送给信息提供服务器2，并登记在图像信息DB 222中。此外，例如也可以构成为，从信息提供服务器2向用户的终端装置1-k发送用于输入或选择物体信息的物体信息指定画面的数据。该情况下，在终端装置1-k的显示部33所显示的用户物体信息指定画面上，由用户通过操作部34输入的物体信息，或者由用户从用户物体信息候选一览中选择的物体信息被发送到信息提供服务器2，与该图像数据对应起来登记在图像信息DB 222中。
作为在图像信息DB 222中登记的物体图像的配置位置信息，例如图4(A)所示，对被分配到分割图像P得到的各区域的区域号码N进行登记。例如图4(B)所示，在区域号码“12”、“13”、“22”、“23”、“32”、“33”的区域中表示大厦(以下，记作“大厦”。)B的情况下，登记这些区域号码，作为物体信息表示“大厦”的物体图像的配置位置信息。另外，所登记的区域号码为与由物体图像占据规定比例(例如，60％)以上的区域对应的区域号码。此外，在图4的例中，将图像P分割为80个区域，但也可以是，通过更细致地分割，由此能够更详细地确定物体图像的大小和形状。
另外，作为上述物体识别算法，能够使用公知的SIFT(Scale Invariant FeatureTransform：尺度不变特征变换)等技术，因此省略进一步的详细说明。此外，还存在由于图像数据而无法识别物体的情况下(没有对应的正确数据、图像复杂等)，但如果是对由投稿者投稿的图像数据进行登记等的情况下，也可以构成为，让投稿者输入在图像数据表示的图像中所包含的物体图像的物体信息及其配置位置信息，并进行登记。
系统控制部23由CPU(Central Processing Unit：中央处理单元)23a、ROM(ReadOnly Memory：只读存储器)23b、RAM(Random Access Memory：随机访问存储器)23c等构成。而且，由CPU23a读出存储在ROM 23b和存储部22中存储的服务器程序并执行该程序，由此，系统控制部23作为本发明的接收单元、生成单元、检索单元、选择单元、发送单元和显示控制单元等进行工作，进行后述的处理。
另一方面，终端装置1-k例如是由用户使用的PC(Personal Computer：个人计算机)、移动电话机、PDA、便携游戏机等。图5是示出用户终端3的概要结构例的框图。如图5所示，用户终端3具有通信部31、存储部32、显示部33、操作部34、驱动部35、输入输出接口36和系统控制部37。而且，系统控制部37与输入输出接口36经由系统总线38而连接。通信部31与网络NW等连接，控制与信息提供服务器2等的通信状态。存储部32例如由硬盘驱动器或闪存等构成。在该存储部32中存储有OS和浏览器等程序。显示部33例如由液晶显示器等构成，对字符和图像等信息进行显示。操作部34例如由键盘和鼠标或者键、触摸面板等构成，受理来自用户的操作指示，将该指示内容作为指示信号输出到系统控制部37。驱动部35从DVD或存储卡等碟片DK读出数据等，另一方面，向该碟片DK记录数据等。输入输出接口36进行通信部31～驱动部35与系统控制部37之间的接口处理。
系统控制部37由CPU 37a、ROM 37b、RAM 37c等构成。而且，由CPU37a读出存储在ROM 37b和存储部32中的各种程序并执行该程序，由此，系统控制部37作为本发明的发送单元、取得单元、确定单元、设定单元、第2生成单元进行工作。
系统控制部37访问摄影点提供网站，控制登录处理。然后，系统控制部37在通过登录处理进行了用户认证的情况下，从信息提供服务器2接收用于显示物体配置画面的显示数据，在显示部33中显示物体配置画面。显示数据例如包含用于将物体配置画面显示为网页的HTML(HyperText Markup Language：超文本标记语言)文档、XML(Extensible MarkupLanguage：可扩展标记语言)文档、图像数据等。
图6是示出物体配置画面300的一例的图。物体配置画面300是用于用户在虚拟三维空间中对虚拟物体进行配置的画面。虚拟三维空间是虚拟的三维空间。虚拟物体是配置在虚拟三维空间中的虚拟的物体。在物体配置画面300中显示对虚拟物体的一览进行显示的物体候选显示部310、配置画面320、画面切换按钮330和发送按钮340。
在物体候选显示部310中，显示按照虚拟物体的每个类别(例如，人物、动物、植物、风景等)设置的栏标(tab)311(311a～311e)。将属于与用户从这些栏标311中选择出的栏标311对应的类别的物体候选312(312a～312h)显示在物体候选显示部310中。物体候选312是用模拟的三维图像表示虚拟物体的候选的图像。
在配置画面320中显示虚拟三维空间内的虚拟物体配置状况。虚拟三维空间中的坐标是由世界坐标系定义的。例如，当用户观察配置画面320时，横向(宽度方向)的坐标轴是X轴。此外，深度方向的坐标轴是Y轴，高度方向(纵向)的坐标轴是Z轴。虚拟三维空间中纵、横和深度各自的长度被作为预先设定的单位距离的立方体划分。将该立方体称作块。虚拟三维空间的大小例如被预先设定。
在配置画面320中显示地面物体322。地面物体322是表示配置虚拟物体的地面的图像。地面物体322是从上空斜向下观察时看到的地面的模拟三维图像。即，在配置画面320中显示鸟瞰图的图像。地面物体322上表示的格子图案表示XY平面上的块的划分。
此外，在配置画面320中，在地面物体322上显示物体321(321a～321d)，该物体321(321a～321d)表示按照用户的操作而配置在虚拟三维空间内的虚拟物体。物体321是从上空斜向下观察时的虚拟物体的立体形状的模拟三维图像。例如，由用户通过拖放等选择在物体候选显示部310中显示的物体候选312，将配置在地面物体322上的任意一个块上的物体候选312作为物体321进行显示。这样，将虚拟物体配置在虚拟三维空间内。
虚拟物体可以块单位进行配置。根据所选择的物体候选312的不同，所配置的虚拟物体在虚拟三维空间所占的块的数量不同。例如，物体321b是表示森林的图像。该物体321b表示的森林占1个块。此外，物体321d是表示大厦的图像。该物体321d的大小为，纵向长度为2个块，横向和深度的长度为1个块。即，物体321d表示的大厦占2个块。
能够对配置在虚拟三维空间内的虚拟物体的大小进行变更。例如，在用户通过例如点击等将在配置画面320内显示的任意一个物体321设为选择状态后，例如通过拖放等进行使该物体321在纵、横或深度的方向上运动的操作。于是，物体321在被操作的方向上的大小发生变化。此外，也可以是，能够通过数值输入来改变虚拟物体的大小。例如，在用户选择了任意一个物体321后，进行弹出式菜单等的操作，由此在物体配置画面300内显示用于数值输入的对话框。在对话框中分别显示与纵、横和深度对应的输入栏。当用户在对话框内的各输入栏中输入数值后，所选择的物体321的纵、横和深度的大小变化为与所输入的数值对应的大小。例如，物体321a和物体321c表示变更了大小后的虚拟物体。物体321a是表示山的图像。该物体321a表示的山的纵、横和深度的长度是5个块、7个块和8个块。此外，物体321c是表示大厦的虚拟物体。该物体321c表示的大厦的纵长是4个块。
此外，能够通过用户的操作，使配置在虚拟三维空间内的物体321在虚拟三维空间内移动，或者将该物体321从虚拟三维空间删除。此外，也可以将虚拟物体配置成与地面分离。例如，用户在选择了物体321后，通过弹出式菜单等的操作输入块数。于是，所选择的物体321向上移动与所输入块数对应的量。即，虚拟物体浮在空中。
用户通过对物体配置画面300的操作，能够根据用户喜好来指定配置在虚拟三维空间中的虚拟物体并指定该虚拟物体的配置。
物体321表示的虚拟物体在虚拟三维空间中的配置被表示为三维配置位置信息(本发明的三维配置信息的一例)。三维配置位置信息例如包含虚拟物体的位置坐标和对虚拟物体的立体形状进行定义的形状数据。虚拟物体的位置坐标例如是示出配置了虚拟物体的块的位置和根据虚拟物体的形状算出的虚拟物体的重心的位置的世界坐标。形状数据例如包含对虚拟物体的各顶点的坐标、连接各顶点的线段或面进行定义的信息等。形状数据例如包含在从信息提供服务器2接收到的显示数据中。
另外，虚拟物体的配置状态也可以通过从正上方向下观察时的俯视图来表现。该情况下，虚拟三维空间中配置的虚拟物体也可以通过俯视图形来表现。在通过俯视图来表现的情况下，在配置画面320中，无法确认Z轴方向的虚拟物体的配置。但是，在该情况下，虚拟三维空间中所配置的虚拟物体的位置也用三维来定义。
在配置画面320还显示有视线标记323。视线标记323是示出虚拟三维空间内的视点的位置及来自该视点的视线的方向的图形。即，视线标记323示出对配置在虚拟三维空间内的虚拟物体进行摄影时的摄影位置和摄影方向。具体而言，在视线标记323中，引出箭头的支点表示视点，箭头被定向的方向表示视线方向。视点位置和视线方向被设定成视线通过虚拟三维空间内的基准点的位置和方向。基准点成为用于在后述的物体配置确认画面400中使视点位置旋转的中心点。该基准点的坐标(基准位置)的初始值例如被预先设定。例如，基准位置被设定为，在横和深度方向上位于虚拟三维空间的中心，并且距离地面物体322表示的地面的高度为1个块以内的高度。初始状态下的视点的高度例如被设定为与基准点的高度相同的高度。
画面切换按钮330是用于切换画面的按钮。具体而言，当画面切换按钮330被用户按下时，系统控制部37从信息提供服务器2接收用于显示物体配置确认画面400的显示数据，根据接收到的显示数据，在显示部33中显示物体配置确认画面400。
图7是示出物体配置确认画面400的一例的图。物体配置确认画面400是用于确认在对虚拟三维空间内配置的虚拟物体进行了摄影时得到的图像中所包含的虚拟物体的图像的配置的画面。在物体配置确认画面400中显示有模拟框410、移动按钮420(420a～420f)和画面切换按钮430。
模拟框410是将通过对虚拟三维空间内配置的虚拟物体进行透视投影而得到的投影像作为三维图像进行显示的模拟的框。具体而言，在模拟框410中，显示将视线从由视线标记323表示的视点位置朝向由视线标记323表示的视线方向时观察到的虚拟物体的像，作为物体三维图像411(411a～411c)。物体三维图像411a是物体310a表示的山的三维图像。此外，物体三维图像411b是物体310b表示的森林的三维图像。此外，物体三维图像411c是物体310c表示的大厦的三维图像。另外，由于物体310d表示的大厦被物体310c表示的大厦挡住，因此在模拟框410内未显示物体310d的三维图像。
另外，在物体配置确认画面400中，由于能够确认模拟框410内的虚拟物体的配置(投影像的配置)即可，因此也可以不是必须将虚拟物体立体地显示为三维图像。例如，通过用户能够理解虚拟物体的部分与没有虚拟物体的部分之间的边界，并且用户能够理解虚拟物体之间的边界的方式来显示图像即可。
移动按钮420是用于使虚拟三维空间中的视点位置或视线方向中的至少任意一方移动的按钮。例如，当移动按钮420a或420b被用户按下时，在被按下的期间内，视点位置在视线方向或其相反方向上移动。此时，视线方向不变化。此外，当移动按钮420c、420d、420e或420f被用户按下时，在被按下的期间内，视点以基准点为中心，向左、右、上或下方向圆状地移动。此时，为了从移动后的视点向基准点的方向维持视线，因此视线方向变化。通过移动按钮420的操作而使视点位置或视线方向发生变化，因此模拟框410内所显示的三维图像也变化。另外，在使用鼠标作为操作部34的情况下，也可以根据滚轮的操作、使鼠标移动的操作等，来变更视点位置、视线方向。
用户操作移动按钮420并确认在模拟框410中所显示的图像，由此能够设定用户喜好的视点位置和视线方向。
画面切换按钮430是用于切换画面的按钮。具体而言，当画面切换按钮430被用户按下时，系统控制部37在显示部33中显示物体配置画面300。在物体配置确认画面400中，用户改变了视点位置或视线方向后，当显示物体配置画面300时，视线标记323示出的视点位置或视线方向发生变化。
在物体配置画面300中，发送按钮340是用于将虚拟三维空间中的虚拟物体的配置状态发送到信息提供服务器2的按钮。具体而言，当发送按钮340被用户按下时，系统控制部37将包含用户三维配置信息和视线信息的请求消息发送到信息提供服务器2。用户三维配置信息包含配置在虚拟三维空间中的各虚拟物体的物体信息和三维配置位置信息。视线信息是用于确定通过用户操作所设定的视点位置和视线方向的信息。例如，视线信息包含视点位置的世界坐标和示出视线方向的角度。
另外，也可以是，能够通过用户的操作来变更基准位置。例如，系统控制部37在物体配置画面300的配置画面320中显示例如示出基准点的标记。用户例如通过拖放等使该标记移动，由此使基准位置移动。此外，也可以是，在物体配置画面300中，能够通过用户的操作来变更视点位置和视线方向。例如，用户例如通过拖放等使视线标记323移动，由此使视点位置移动。该情况下，视线方向不变化。此时，基准位置移动，使得视线通过基准点。此外，用户例如通过拖放等使视线标记323的箭头部分移动，由此以视点为中心而使视线方向旋转。该情况下，基准位置也移动。此外，在物体配置画面300中视点位置和视线方向可变更的情况下，也可以在物体配置确认画面400中不能够变更视点位置和视线方向。此外，也可以是，终端装置1-k仅显示物体配置画面300，不显示物体配置确认画面400。该情况下，用户能够一边根据配置画面320中所显示的物体321的配置状况和视线标记323来想象模拟框410内的虚拟物体的配置，一边进行配置作业。此外，也可以在物体配置确认画面400中显示用于发送请求消息的发送按钮。该情况下，当物体配置确认画面400中所显示的发送按钮被用户按下时，将包含与按下了发送按钮340时相同的信息的请求消息发送到信息提供服务器2。此外，在以显示发送按钮的方式构成物体配置确认画面400的情况下，也可以在物体配置画面300中不显示发送按钮340。
[2.信息提供系统的动作]
接着，使用图8对终端装置1-k中的物体配置确认处理进行说明。物体配置确认处理是显示物体配置确认画面400时的终端装置1-k的处理。
图8是示出终端装置1-k的系统控制部37的物体配置确认处理的流程图。当在终端装置1-k显示物体配置画面300的状态下画面切换按钮330被用户按下，并由此显示了物体配置确认画面400时，开始物体配置确认处理。
在图8中，系统控制部37取得配置在虚拟三维空间中的各虚拟物体的三维配置位置信息(步骤S1)。接着，系统控制部37确定虚拟三维空间中的基准位置、视点位置和视线方向的初始值(步骤S2)。例如，系统控制部37由从信息提供服务器2接收到的显示数据中取得预先设定的基准位置、视点位置和视线方向的坐标作为初始值。
接着，系统控制部37根据三维配置位置信息、所确定的视点位置和视线方向，将物体三维图像411在模拟框410中显示(步骤S3)。具体而言，系统控制部37在虚拟三维空间内定义投影了虚拟物体的投影面(本发明的二维面的一例)的世界坐标。该投影面相当于模拟框410，是纵和横的长度为预先设定的长度的平面。此外，该投影面将由视点位置和视线方向所示的视线作为法线，位于与视点位置相距预先设定的距离的位置。接着，系统控制部37根据三维配置位置信息中所包含的虚拟物体的位置坐标和形状数据，计算虚拟物体的各顶点的世界坐标等。接着，系统控制部37根据虚拟物体的各顶点、投影面和视点位置的世界坐标等，将各虚拟物体朝向视点位置在投影面上进行透视投影。这里，系统控制部37将通过投影而得到的投影面上的虚拟物体的投影像的世界坐标变换为屏幕坐标。屏幕坐标例如是将模拟框410(投影面)的横向坐标轴作为X轴、模拟框410(投影面)的纵向坐标轴作为Y轴的二维坐标系的坐标。接着，系统控制部37根据各虚拟物体的屏幕坐标，生成包含各物体三维图像411的框图像(显示尺寸与模拟框410相同的图像)。此时，系统控制部37进行隐藏面消除等处理。然后，系统控制部37将生成的框图像在模拟框410中显示。由此，在模拟框410中显示如图7所示的物体三维图像411。
接着，系统控制部37判定是否按下了移动按钮420(步骤S4)。此时，在系统控制部37判定为按下了移动按钮420的情况下(步骤S4：“是”)，按照被按下的移动按钮420来变更视点位置或视线方向中的至少任意一方(步骤S5)。例如，系统控制部37在移动按钮420a或420b被用户按下的情况下，使视点位置在视线方向或视线方向的相反方向上移动规定距离。此外，系统控制部37在移动按钮420c、420d、420e或420f被按下的情况下，使视点位置向左、右、上或下方向以基准点为中心圆状地移动规定距离。此时，系统控制部37以使得视线通过基准点的方式变更视线方向。系统控制部37在变更视点位置和视线方向后，使用变更后的视点位置和视线方向，生成包含物体三维图像411的框图像，并进行显示(步骤S3)。
另一方面，在系统控制部37判定为未按下移动按钮420的情况下(步骤S4：“否”)，判定是否按下了画面切换按钮430(步骤S6)。此时，在系统控制部37判定为未按下画面切换按钮430的情况下(步骤S6：“否”)，转移到步骤S4。另一方面，在系统控制部37判定为按下了画面切换按钮430的情况下(步骤S6：“是”)，结束物体配置确认处理。然后，系统控制部37在显示部33中显示物体配置画面300。
接着，使用图9和图10，对信息提供服务器2中的摄影地点信息的推荐处理进行说明。
图9是示出信息提供服务器2的系统控制部23的摄影地点信息的推荐处理的流程图。另外，在从终端装置1-k访问例如摄影点提供网站，并通过登录处理进行了用户认证时，开始图9所示的处理。
在图9中，信息提供服务器2的系统控制部23将用于显示物体配置画面300的显示数据发送到终端装置1-k(步骤S21)。终端装置1-k在接收到该显示数据后在显示部33中显示物体配置画面300。然后，系统控制部23根据通过用户按下画面切换按钮而发送来的消息，发送物体配置确认画面400的显示数据，或者发送物体配置画面300的显示数据。然后，如上所述，在配置了物体321的状态下，发送按钮340被用户按下时，终端装置1-k将包含用户三维配置信息和视线信息的请求消息发送到信息提供服务器2。
信息提供服务器2的系统控制部23在从终端装置1-k接收到请求消息后(步骤S22)，根据请求消息中所包含的用户三维配置信息和视线信息，生成用户二维配置信息(步骤S23)。用户二维配置信息是表示通过在基于视点位置和视线方向而确定的投影面上投影虚拟物体而在投影面上表示的投影像(本发明的投影到二维面上的物体的一例)在投影面内的配置的信息。用户二维配置信息包含投影到投影面上的每个虚拟物体的配置位置信息(本发明的二维配置信息的一例)。该配置位置信息的内容与在图像信息DB 222中所登记的配置位置信息的内容相同。系统控制部23与物体配置确认处理中的步骤S3的处理同样地，将在虚拟三维空间中配置的虚拟物体投影到投影面上。由此，系统控制部23计算虚拟物体(投影像)在投影面中的二维坐标。该二维坐标例如是将投影面的横向坐标轴作为X轴、投影面的纵向坐标轴作为Y轴的二维坐标系的坐标，与上述的模拟框410的屏幕坐标基本相同。接着，系统控制部23根据各虚拟物体的二维坐标生成用户二维配置信息。
图10是用于说明用户配置的虚拟物体的用户二维配置信息中的配置位置信息的图。如图10所示，与在图像信息DB 222中所登记的图像数据同样，投影面Q被分割为多个区域。并且，各区域被分配了区域号码N。纵和横的分割数量与在图像信息DB 222中所登记的图像数据相同。系统控制部23与在图像信息DB 222中所登记的配置位置信息的情况同样地，确定表示所投影的虚拟物体的区域(例如，投影像占据规定比例以上的区域)。例如，山M1表示在区域号码“56”、“65”、“66”、“68”的区域中。此外，大厦B1表示在区域号码“27”、“37”、“47”、“57”、“67”的区域中。这样，系统控制部23通过确定表示各虚拟物体的区域，来按照每个虚拟物体生成配置位置信息。然后，生成包含投影到投影面上的各虚拟物体的配置位置信息的用户二维配置信息。
接着，系统控制部23进行一致度判定处理(步骤S24)。具体而言，系统控制部23对用户三维配置信息中所包含的物体信息和所生成的用户二维配置信息中所包含的配置位置信息、与在图像信息DB 222中所登记的物体信息和配置位置信息进行比较，由此来判定一致度是否较高，根据一致度的判定结果来检索图像数据(即，根据上述比较的结果来检索图像数据)。例如，在用户三维配置信息中所包含的物体信息、与在图像信息DB 222中所登记的图像数据表示的图像中作为物体图像而包含的物体的物体信息完全一致，并且在一致的物体信息的配置位置信息之间区域号码完全一致的情况下，判定为一致度较高。此外，也可以是，在用户三维配置信息中所包含的物体信息、与在图像信息DB 222中所登记的图像数据表示的图像中所包含的物体的物体信息完全一致，并且在一致的物体信息的配置位置信息间之间区域号码一致的比例在规定比例(例如，70％)以上的情况下，判定为一致度较高。此外，也可以是，系统控制部23在用户三维配置信息中所包含的至少一部分的物体信息、与在图像信息DB 222中所登记的图像数据表示的图像中所包含的物体的至少一部分的物体的物体信息一致，并且一致的物体之间的配置位置信息之间区域号码完全一致或者规定比例一致的情况下，判定为一致度较高。
此外，也可以是，系统控制部23针对投影到投影面上的各虚拟物体和在图像信息DB 222中所登记的图像数据表示的图像中所包含的各物体计算一致度，根据所计算出的各一致度来计算整体的一致度，并对一致度进行判定。例如，系统控制部23从投影到投影面上的虚拟物体和图像数据表示的图像中所包含的物体中确定处于对应关系的虚拟物体和物体。具体而言，系统控制部23确定物体信息一致的虚拟物体和物体，来作为处于对应关系的虚拟物体和物体。这里，在物体信息一致的虚拟物体和物体中至少任意一方存在多个的情况下(例如，大厦的虚拟物体是3个，大厦的物体是2个等)，系统控制部23在它们中确定配置位置信息示出的配置最接近的虚拟物体和物体，作为处于对应关系的虚拟物体和物体。然后，系统控制部23计算处于对应关系的虚拟物体和物体的配置的一致度。例如，在处于对应关系的虚拟物体和物体的配置位置信息之间，区域号码一致的比例越高一致度就越高。此外，也可以是，例如在虚拟物体和物体的配置位置信息之间，区域号码所示的区域间的距离越短，一致度就越高。例如，设为将虚拟物体在区域号码“12”的区域中显示。另一方面，在图像中所包含的物体显示在区域号码“12”的区域中的情况下，例如，一致度示出最高的值。而且，例如当表示物体的“23”、“34”、“45”的区域远离表示虚拟物体的区域时，一致度根据距离而变低。另外，在投影到投影面的虚拟物体中不存在处于对应关系的物体的情况下，作为该虚拟物体的一致度，例如设定为能够设定的最低的一致度。此外，即便在图像数据表示的图像中所包含的物体中不存在处于对应关系的虚拟物体，作为该物体的一致度，例如也设定能够设定的最低的一致度。系统控制部23例如通过计算处于对应关系的虚拟物体和物体之间的一致度的整体的平均值等，来求出整体的一致度。然后，系统控制部23例如在整体的一致度为规定值以上情况下，判定为一致度较高。此外，也可以是，系统控制部23例如在图像信息数据库222中所登记的图像数据中，确定将相对较高的一致度计算为整体的一致度的图像数据，作为一致度较高的图像数据。即，将与其他图像数据相比，图像内的物体的配置接近投影面内的虚拟物体的配置的图像数据，作为一致度较高的图像数据。该情况下，也可以是，系统控制部23例如在图像信息数据库222中所登记的图像数据中确定计算出最高的一致度的图像数据，作为一致度较高的图像数据。或者，也可以是，系统控制部23确定从所计算出的一致度第1高的图像数据起到规定名次高的图像数据，作为一致度较高的图像数据。根据配置位置信息来进行一致度的判定，由此能够优选地检索包含符合用户喜好的物体信息的图像数据。
在系统控制部23通过上述检索无法确定一致度较高的图像数据的情况下(步骤S25：“否”)，结束图9所示的处理。另一方面，在系统控制部23通过上述检索确定了一致度较高的图像数据的情况下(步骤S25：“是”)，进入步骤S26。
在步骤S26中，系统控制部23从图像信息DB 222中取得根据一致度的判定结果而确定的图像数据、和与该图像数据对应地登记的摄影地点信息(表示该图像数据的摄影点的摄影地点信息)中的至少任意一方。
然后，系统控制部23执行将该取得的图像数据和摄影地点信息中的至少任意一方发送到终端装置1-k的推荐处理(步骤S27)。通过将这样发送的图像数据和摄影地点信息中的至少任意一方显示在终端装置1-k的显示部33的画面上来通知用户。这样，向用户推荐与摄影点有关的信息(图像数据和表示该图像数据的摄影点的摄影地点信息)。
另外，也可以构成为，在该推荐处理中，将该图像数据和摄影地点信息中的至少任意一方记述在电子邮件中，并将该电子邮件发送到该用户的邮件地址。
如以上说明的那样，根据上述实施方式，信息提供服务器2根据从终端装置1-k接收到的用户三维配置信息中所包含的三维配置位置信息和视线信息，生成用户二维配置信息，对在图像信息DB 222中所登记的图像数据表示的图像中所包含的物体的物体信息及其配置位置信息、与用户三维配置信息中所包含的物体信息和用户二维配置信息中所包含的配置位置信息进行比较，根据其比较的结果来检索图像数据，因此能够高效地检索包含符合用户喜好的物体的图像的图像数据。然后，信息提供服务器2将所检索到的图像数据和该图像数据的摄影地点信息中的至少任意一方通知给终端装置1-k的用户。由此，通过让终端装置1-k的用户根据自己的喜好来指定物体、该物体在三维空间中的配置位置、视点位置和视线方向，能够优选地推荐与可以符合用户喜好的视点位置和视线方向对该物体进行摄影的摄影点有关的信息。
此外，在信息提供服务器2中，系统控制部23发送在终端装置1-k的显示画面上可由用户选择地显示表示配置在虚拟三维空间中的物体的候选的物体候选312的物体配置画面300用的显示数据，此外，在信息提供服务器2中接收被用户选择的物体候选312表示的、配置在虚拟三维空间内的物体的候选的物体信息，以及该候选的配置位置信息。由此，用户能够根据自己的喜好来容易地指定物体及其配置位置。
此外，终端装置1-k取得表示通过用户的操作而配置在虚拟三维空间内的虚拟物体在该虚拟三维空间内的配置的三维配置位置信息，确定在虚拟三维空间中视线被定向的基准位置，按照用户的操作，一边将从视点位置朝向基准位置的方向作为视线方向，一边使视点位置移动，由此设定视点位置和视线方向，将取得的三维配置位置信息以及表示设定的视点位置和视线方向的视线信息向信息提供服务器2发送。由此，通过由用户进行以基准位置为中心使视点位置移动的操作，能够设定视点位置和视线方向。
另外，在上述实施方式中，从终端装置1-k发送的请求消息中所包含的视线信息仅示出了一组视点位置和视线方向。然而，视线信息也可以是能够确定多组视点位置和视线方向的信息。而且，也可以是，信息提供服务器2在上述步骤S23中，根据多组视点位置和视线方向生成多个用户二维配置信息，按照每个用户二维配置信息进行图像数据的检索。
例如，在物体配置确认画面400中，用户能够对移动按钮420进行操作，并将模拟框410中所显示的物体三维图像411的配置成为用户喜好的配置时的视点位置和视线方向保存在RAM 37c等中。该保存例如能够通过按下物体配置确认画面400上的规定按钮来实现。用户在保存了多个视点位置和视线方向的组之后，在物体配置画面300中按下发送按钮340。于是，终端装置1-k将包含至此所保存的多组视点位置和视线方向的视线信息的请求消息向信息提供服务器2发送。接收到请求消息的信息提供服务器2的系统控制部23按照视点位置和视线方向的每个组来生成用户二维配置信息。然后，系统控制部23按照生成的每个用户二维配置信息，对在图像信息DB 222中所登记的图像数据表示的图像中所包含的物体的物体信息及其配置位置信息、与用户三维配置位置信息中所包含的物体信息和用户二维配置信息中所包含的配置位置信息进行比较。然后，系统控制部23按照生成的每个用户二维配置信息来检索图像数据。
此外，也可以是，能够由用户来指定视点位置或视线方向中的至少任意一方的范围，并且信息提供服务器2在所指定的范围内确定多组视点位置和视线方向。例如，在物体配置画面300或者物体配置确认画面400中，设为能够由用户指定从基准点到视点的距离的范围，或者设为能够由用户指定以基准点为中心的视线方向的范围(例如，视线的角度的范围，或者以基准点为中心的、能够使视点位于其上的圆弧的长度等)。终端装置1-k将包含了含有用户的范围指定的视线信息的请求消息向信息提供服务器2发送。信息提供服务器2的系统控制部23根据视线信息，确定多个视点位置和视线方向的组。例如，系统控制部23在所指定的范围内，按照每个规定距离和规定角度确定视点位置和视线方向，或者在所指定的范围内，以相等间隔确定规定数量的视点位置和视线方向。另外，也可以是，由用户指定用于确定多个视点位置和视线方向的、距离间隔、角度间隔、确定的个数等，并将所指定的信息包含于视线信息中，向信息提供服务器2发送。系统控制部23通过计算多个视点位置或视线方向，来确定多组视点位置和视线方向。
根据多组视点位置和视线方向来进行图像数据的检索，由此，在三维空间中的物体的配置相同、且图像内的物体的配置成为与各个视点位置和视线方向相应的配置的多个图像数据成为检索对象。因此，能够容易地找到包含用户喜好的物体的图像的数据。此外，能够容易到找到与可以符合用户喜好地配置的物体进行摄影的摄影点有关的信息。此外，能够针对同一物体检索多个图像数据。此外，能够针对同一物体推荐与摄影角度和摄影距离彼此不同的多个摄影点有关的信息。
这里，也可以是，系统控制部23从根据多组视点位置和视线方向而生成的多个用户二维配置信息中，选择示出投影面内的虚拟物体之间的重叠最小的配置的用户二维配置信息，仅将选择出的用户二维配置信息中所包含的配置位置信息与在图像信息DB 222中所登记的配置位置信息进行比较，来检索图像数据。
例如，在图10所示的投影面Q中，山M1与大厦B1在区域号码“57”和“67”上重叠。由于山M1的相比于大厦B1与视点的距离较远，因此，在区域号码“57”和“67”上优先显示大厦B1。该情况下，在2个区域中，虚拟物体之间重叠。也可以是，系统控制部23针对各用户二维配置信息计算虚拟物体之间重叠的区域的个数，选择虚拟物体之间重叠的区域的个数最少的用户二维配置信息。此外，也可以是，系统控制部23针对各用户二维配置信息来计算虚拟物体所占的区域中的虚拟物体之间重叠的区域的比例，选择虚拟物体之间重叠的区域的比例最低的用户二维配置信息。在图10的例中，虚拟物体所占的区域的个数是9个，因此虚拟物体之间的重叠的区域的比例为2/9。
由此，能够检索图像内的物体之间的重叠较小的图像数据。此外，能够推荐与可以物体之间的重叠变小的方式进行摄影的摄影点有关的信息。
此外，也可以是，在物体配置画面300或物体配置确认画面400中，可由用户从虚拟三维空间内配置的虚拟物体中选择1个以上的虚拟物体，信息提供服务器2对由用户选择的虚拟物体的物体信息和配置位置信息，与在图像信息DB 222中所登记的图像数据表示的图像中所包含的物体中的、与由用户所选择的虚拟物体对应的物体的物体信息及其配置位置信息进行比较，来检索图像数据。
例如，终端装置1-k将包含表示由用户所选择的虚拟物体的选择物体信息(本发明的选择信息的一例)的请求消息向信息提供服务器2发送。信息提供服务器2的系统控制部23根据选择物体信息来确定由用户选择的虚拟物体的物体信息和三维配置位置信息。系统控制部23在上述步骤23中的用户二维配置信息的生成时，针对未被用户选择的虚拟物体，可以生成配置信息，也可以不生成配置信息。系统控制部23在上述步骤24的一致度的判定处理中，从在图像信息DB 222中所登记的图像数据表示的图像中作为物体图像而包含的物体中，确定与被用户选择的虚拟物体对应的物体。例如，系统控制部23确定物体信息与所选择的虚拟物体的物体信息一致，并且配置位置信息表示的配置与所选择的虚拟物体的配置位置信息表示的配置最接近的物体(例如，一致的区域号码最多的物体)，作为对应的物体。然后，系统控制部23针对由用户所选择的虚拟物体和与该虚拟物体对应的物体，对配置位置信息进行比较。这里，系统控制部23针对未被用户选择的虚拟物体和与由用户所选择的虚拟物体对应的物体以外的物体，不进行配置位置信息的比较。由此，系统控制部23判定一致度是否较高。
由此，能够检索至少包含与由用户所选择的虚拟物体相当的物体的图像的图像数据。此外，能够推荐与至少能够对由用户所选择的虚拟物体相当的物体进行摄影的摄影点有关的信息。例如，适合以下用户，该用户认为与自己选择的虚拟物体相当的物体以外的任何物体处于怎样的配置位置都可以，想拍摄至少与自己选择的虚拟物体相当的物体被配置在喜欢的位置的图像。
此外，也可以是，在物体配置画面300或物体配置确认画面400中，可由用户从虚拟三维空间内配置的虚拟物体中选择1个以上的虚拟物体，信息提供服务器2将由用户所选择的虚拟物体以外的虚拟物体从向投影面的投影对象中排除，生成用户二维配置信息。然后，系统控制部23可以根据这样生成的用户二维配置信息，进行步骤S24中的一致度的判定处理。由此，视为用户在虚拟三维空间中配置的虚拟物体中的由用户所选择的虚拟物体以外的虚拟物体未被配置的状态，进行一致度的判定。因此，即便用户不解除虚拟物体的配置的指定，也能够检索尽量不包含与用户所选择的虚拟物体相当的物体以外的物体的图像的数据。此外，能够推荐与能够以尽量不映入与用户所选择的虚拟物体相当的物体以外的物体的方式进行摄影的摄影点有关的信息。由此，例如，用户在图像数据的检索后，在继续虚拟物体的配置作业或视点位置和视线方向的设定作业等的情况下，能够省略从虚拟三维空间除去虚拟物体和对被除去的虚拟物体的进行再配置等的麻烦。该情况下，终端装置1-k例如也将包含表示由用户所选择的物体的选择物体信息的请求消息向信息提供服务器2发送。
此外，在上述步骤S2中，在终端装置1-k确定基准位置的初始值时，取得了预先设定的基准位置的坐标，但也可以是，根据三维空间内的虚拟物体的配置状况等，自动地设定基准位置的初始值。
例如，也可以是，终端装置1-k的系统控制部37从配置在虚拟三维空间的虚拟物体中，确定大小最大的虚拟物体的位置作为基准位置。具体而言，系统控制部37计算各虚拟物体的立体图形的体积。然后，系统控制部37将体积最大的虚拟物体的立体图形的重心位置的坐标设为基准位置的坐标。然后，系统控制部37以使得视线通过基准位置的方式，变更物体配置画面300中所显示的视线标记323表示的视点位置和视线方向中的至少任意一方，设定视点位置和视线方向初始值。由此，能够根据用户操作来设定视点位置和视线方向，使得大小最大的虚拟物体投影到投影面上。
此外，也可以是，系统控制部37在虚拟三维空间内配置了多个虚拟物体的情况下，确定虚拟三维空间内所配置的虚拟物体的位置的重心位置作为基准位置。即，在多个虚拟物体的配置的虚拟物体间的位置关系中，可以将其重心的位置作为基准位置。具体而言，系统控制部37确定各虚拟物体的立体图形的重心位置的坐标作为各个虚拟物体的位置的坐标。接着，系统控制部37计算成为多个虚拟物体的位置的重心的位置的坐标。例如可以是，系统控制部37将多个虚拟物体的位置的坐标按照X分量、Y分量、Z分量进行相加，将各分量的合计值除以虚拟物体的个数，由此计算重心位置的坐标。然后，系统控制部37将计算出的坐标作为基准位置的坐标。在该情况下，系统控制部37也以使得视线通过基准位置的方式，设定视点位置和视线方向的初始值。由此，能够将对多个虚拟物体的位置取得了平衡的位置作为基准位置。另外，在虚拟三维空间中仅配置了1个虚拟物体的情况下，所配置的虚拟物体的立体图形的重心位置成为基准位置。
此外，也可以是，系统控制部37将虚拟三维空间内配置的全部虚拟物体投影到投影面上，并且，确定所投影的虚拟物体之间的重叠最小的视点位置和视线方向，在由所确定的视点位置和视线方向所示的视线上确定基准位置的初始值。具体而言，系统控制部37根据在上述步骤S1中所取得的三维配置位置信息，生成与视点位置或视线方向中的至少任意一方不同的多个视点位置和视线方向的组对应的多个用户二维配置信息。这里，系统控制部37可以将视点位置固定在视线标记323表示的视点位置，以预先设定的角度间隔(例如，10度等)来改变视线方向，从而生成视点位置和视线方向的组。此外，系统控制部37也可以将视点方向固定在视线标记323表示的视线方向，以预先设定的距离间隔(例如，1个块)来改变视点位置，从而生成视点位置和视线方向的组。此外，系统控制部37也可以改变视点位置和视线方向双方。用户二维配置信息的生成方法与上述步骤S23的情况相同。这里，系统控制部37针对判定为虚拟三维空间内配置的虚拟物体中只要还存在1个没有投影到投影面上的虚拟物体的用户二维配置信息，从基准位置的确定候选中排除。另一方面，系统控制部37从判定为投影了全部虚拟物体的用户二维配置信息中选择投影面内的虚拟物体之间的重叠最小的用户二维配置信息。选择虚拟物体之间的重叠最小的用户二维配置信息的方法与前述的方法相同。接着，系统控制部37将在选择的用户二维配置信息的生成中所使用的视点位置和视线方向设定为视点位置和视线方向的初始值。此外，系统控制部23在由作为初始值而设定的视点位置和视线方向所示的视线上确定基准位置。例如，系统控制部37将位于与视点位置相距预先设定的距离的点作为基准点，将该基准点的位置作为基准位置。由此，用户能够从投影到投影面上时的投影面内的虚拟物体之间的重叠最小的视点位置和视线方向起，开始视点位置和视线方向的设定作业。此外，用户能够在配置在虚拟三维空间内的全部虚拟物体的物体三维图像411显示在模拟框410中状态下，开始作业。
另外，基准位置、视点位置和视线方向的初始值的确定也可以在信息提供服务器2侧进行。该情况下，终端装置1-k将用户三维配置信息向信息提供服务器2发送。此外，终端装置1-k根据需要将视线信息向信息提供服务器2发送。信息提供服务器2根据接收到的用户三维配置信息等，生成与视点位置或视线方向中的至少任意一方不同的多个视点位置和视线方向的组对应的多个用户二维配置信息。接着，信息提供服务器2根据生成的用户二维配置信息，确定基准位置、视点位置和视线方向的初始值。然后，信息提供服务器2将表示确定的基准位置、视点位置和视线方向的初始值的初始值信息向终端装置1-k发送。终端装置1-k在上述步骤S3中根据接收到的初始值信息来显示物体三维图像411。
此外，也可以构成为，在进行上述步骤S24中的一致度的判定时，从终端装置1-k取得表示进行了用户认证的用户的当前位置的位置信息(例如，由终端装置1-k的GPS接收机检测到的位置信息)，或者表示用户指定的位置的位置信息。该情况下，系统控制部23从图像信息DB 222中所登记的各图像数据中检索在从由终端装置1-k取得的位置信息所示的位置(例如，用户的当前位置，或者用户指定的位置)起规定范围(例如，以用户的当前位置或用户指定的位置为中心的半径规定距离内的范围)内进行摄影得到的图像数据。由此，能够在用户当前所在的场所(例如旅行目的地)，或用户指定的场所附近，高效地检索包含符合用户喜好的物体的图像的图像数据，能够高效地推荐与可在符合用户喜好的配置位置对符合用户喜好的物体进行摄影的摄影点有关的信息。
此外，在上述步骤S25的处理中，存在多个根据一致度的判定结果(即，比较的结果)所确定的图像数据的情况下，也可以构成为，在上述步骤S27的推荐处理中，将与各图像数据对应起来登记的摄影地点信息的一览发送到终端装置1-k并进行显示。根据该结构，用户在存在作为多个推荐对象的地点的情况下，也能够容易地掌握与这些地点邻近的摄影点。
此外，在上述步骤S25的处理中，存在多个根据一致度的判定结果所确定的图像数据的情况下，也可以构成为，在上述步骤S27的推荐处理中，将表示与各图像数据对应起来登记的各摄影地点的位置的地图信息发送到终端装置1-k并进行显示。根据该结构，用户在存在多个作为推荐对象的地点的情况下，也能够容易地在地图上掌握与这些地点邻近的摄影点的位置。
此外，在上述步骤S25的处理中，无法根据一致度的判定结果确定图像数据的情况下，也可以逐渐放宽判定的条件，知道能够根据一致度的判定结果确定至少1个图像数据。具体而言，也可以逐渐减少进行比较的物体的数量。此外，也可以是，用户在对虚拟物体在投影面上的配置位置、与表示在图像数据中符合的物体的配置位置进行比较时，逐渐扩大判定一致度的范围。例如，由区域号码“12”、“13”、“22”、“23”示出投影面中的虚拟物体的配置位置的情况下，也可以扩大进行比较的区域，使得将在由区域号码“1”～“5”、“11”～“15”、“21”～“25”、“31”～“35”所示的任意一个区域中显示符合的物体的图像数据判定为一致度较高。由此，能够降低针发生对用户的请求无法回答这样的情况的可能性。
此外，在上述步骤S24的处理(一致度判定处理)中，仅比较了物体信息的配置位置，但是，例如也可以是，用户能够在物体配置画面300或物体配置确认画面400中指定配置在虚拟三维空间中的虚拟物体的颜色，对物体的配置位置和颜色进行比较。具体而言，系统控制部23还接收表示虚拟物体的颜色的颜色信息，并进一步对接收到的颜色信息所示出的虚拟物体的颜色与所登记的图像数据表示的图像中所包含的物体的颜色之间的一致度进行判定。由此，用户例如指定“山”作为物体信息，并且指定“红”或“黄”作为其颜色，由此能够高效地检索包含树木带红叶的山的图像的图像数据，并能够取得与可对树木带红叶的山进行摄影的摄影点有关的信息。另外，通过与摄影地点信息发送摄影日期时间，能够向用户提示适合摄影的时间。
此外，在上述步骤S24的处理(一致度判定处理)中，将图像信息DB 222中所登记的全部图像数据作为了比较对象，但也可以是，让用户指定与摄影地点信息有关的条件，并仅将与满足该条件的摄影地点信息对应的图像数据作为比较对象。具体而言，系统控制部23还接收表示与摄影地点信息有关的条件的条件信息，针对与满足接收到的条件信息所示的条件的摄影地点信息对应的图像数据来进行步骤S24的处理(一致度判定处理)。由此，用户例如通过指定“摄影地点为关东地区”作为与摄影地点信息有关的条件，能够有效地检索可在关东地区进行摄影的图像数据，并取得与关东地区的点有关的信息。此外，在规定去韩国旅行等的情况下，通过指定“摄影地点为韩国国内”作为与摄影地点信息有关的条件，能够有效地检索可在韩国国内进行摄影的图像数据，并取得与韩国国内的点有关的信息。此外，通过指定“摄影地点为住宿施设的房间”作为与摄影地点信息有关的条件，并且根据想要从房间看到的景色在物体配置画面300中配置物体321，并在物体配置确认画面400中确定物体三维图像411的配置，能够高效地检索包含喜欢的景色的图像数据，能够取得与关于可看到喜欢的景色的住宿施设的房间的点有关的信息。另外，也可以是，另外构建住宿施设引导系统，和与点有关的信息一起提供符合的住宿施设的引导信息。此外，也可以提供住宿施设的预约服务。
此外，在上述步骤S24的处理(一致度判定处理)中，也可以构成为，根据用户对特定的摄影对象的物体的指定，来决定图像数据的提取对象范围。例如，在用户指定“山”作为物体，并为了确定(根据位置信息来确定)该山而指定了“富士山”的情况下，在上述步骤S24的处理(一致度判定处理)中，决定以该指定的富士山的位置信息(例如经度和纬度)为基准的规定范围作为图像数据的提取对象范围，进行在该范围内所摄影的图像数据的检索。由此，能够在用户指定的特定的摄影对象的物体(例如，富士山)的周围检索包含符合用户喜好的物体(例如富士山)的图像的图像数据，并能够高效地推荐与可以在符合用户喜好的配置位置对符合用户喜好的物体(例如，富士山)进行摄影的摄影点有关的信息。另外，例如以富士山的经度和纬度为中心的半径规定距离(例如，10km)内的范围，符合作为以富士山的位置信息为基准的规定范围。此外，该提取对象范围例如可以设为以富士山的位置信息为基准的圆环形的同心圆(即，以该位置信息为中心的圆的外侧的圆环区域)。此外，该半径规定距离构成为，例如通过以富士山的位置信息为基准，阶段性地变大，来阶段性地扩大提取对象范围。该情况下，例如可以使以富士山的位置信息为基准的圆环形的同心圆阶段性地扩大，也可以与该扩大联动地还使以该位置信息为中心的圆(即，圆环区域的内侧的圆)阶段性地扩大。或者，也可以构成为，例如根据投影到投影面上的虚拟物体的投影像相对于投影面的大小的比例(例如，面积的比率)来决定该规定范围。例如，当虚拟物体(山)的投影像对于投影面的大小的比例为90％时，将以该山的经度和纬度为中心的半径5km内的范围决定为提取对象范围。而且，该比例越从80％接近0％(换言之，虚拟物体的投影像的大小越小)，则该半径逐渐增大，其结果是，以逐渐增大的方式决定提取对象范围。根据这样的结构，用户仅通过决定虚拟物体的投影像的大小，就能够简单地决定图像数据的提取对象范围。另外，举出指定用于确定上述山的“富士山”作为与摄影地点信息有关的条件的例子。该情况下，系统控制部23将包含所指定的“富士山”作为条件的条件信息与用户配置信息一起从终端装置1-k接收。
在本实施方式中，(i)将向图像投稿网站投稿的图像数据在图像信息DB 222中进行登记的情况下，采用如下结构：信息提供服务器2的系统控制部23使用物体识别算法，来确定接收到的图像数据表示的图像中作为物体图像所包含的物体及其配置位置信息。也可以采用如下结构来代替该结构：在投稿者的终端装置中按照包含物体识别算法的程序，使该终端装置来确定图像数据表示的图像中所包含的物体及其配置位置信息，并由信息提供服务器2对其进行接收。此外，将包含物体识别算法的信息提供处理程序安装到终端装置，并且，预先将图像数据和该图像数据表示的图像中所包含的物体以及该图像中的该各物体的配置位置信息在例如终端装置内搭载的内部存储部或与终端装置连接的外部存储部中存储。而且，终端装置也可以构成为，根据用户的操作生成用户二维配置信息，对上述存储部中所存储的图像数据表示的图像中所包含的物体的配置位置信息、与所生成的用户二维配置信息中所包含的配置位置信息进行比较，根据该比较的判定结果来检索图像数据并进行显示。由此，例如能够从用户收集到的大量的图像数据中高效地检索包含该符合用户喜好的物体的图像的图像数据，并向该用户进行提示。另外，安装到终端装置中的信息提供处理程序，例如可以从规定的服务器等经由网络NW而取得(下载)，也可以被记录在CD(Compact Disc：光盘)、DVD(Digital Versatile Disc：数字多功能光盘)等记录介质中而被读入。
此外，在本实施方式中，通过区域号码来管理图像P或者投影面Q上的物体的配置位置和大小等，但是，也可以通过图像P中的物体图像的轮廓坐标或投影面Q上的投影像的轮廓坐标来进行管理。该情况下，通过对物体的轮廓坐标之间进行比较来判定一致度。例如，在将照片P与投影面Q重合时，物体的重复的部分为规定比例以上时判定为一致度较高。除此以外，还可以使用任意的方法作为管理物体的配置位置和大小的方法。
此外，在上述实施方式中，作为检索对象的图像数据是在摄影点作为摄影对象的图像数据，但是，也可以是与摄影点无关的图像数据。
标号说明
1-k：终端装置
2：信息提供服务器
21：通信部
22：存储部
23：系统控制部
NW：网络
S：信息提供系统

Claims (25)

1.一种信息提供装置，终端装置能够经由网络访问该信息提供装置，该信息提供装置的特征在于具有：
接收单元，其从所述终端装置接收三维配置信息和视线信息，该三维配置信息表示三维空间中的物体的配置，该视线信息用于确定所述三维空间中的视点位置和视线方向，其中，使用户根据自己的喜好来指定用于确定物体、该物体在三维空间中的配置、视点位置和视线方向的信息；
生成单元，其根据接收到的三维配置信息和视线信息，生成二维配置信息，该二维配置信息表示投影到二维面上的所述物体在该二维面内的配置；以及
检索单元，其对存储在存储单元中的配置信息和生成的二维配置信息进行比较，根据该比较的结果来检索图像数据，其中，该存储单元存储有图像数据和所述配置信息，所述配置信息表示该图像数据表示出的图像所包含的物体在该图像内的配置。
2.根据权利要求1所述的信息提供装置，其特征在于，
所述接收单元接收用于确定多个由视点位置和视线方向组成的组的所述视线信息，
所述生成单元根据由所述接收到的视线信息确定的多个所述组，生成多个所述二维配置信息，
所述检索单元对存储在所述存储单元中的所述配置信息和所述生成的多个二维配置信息进行比较。
3.根据权利要求2所述的信息提供装置，其特征在于，
该信息提供装置还具有选择单元，该选择单元从所述生成的多个二维配置信息中，选择表示所述二维面内的所述物体之间重叠最小的配置的二维配置信息，
所述检索单元对存储在所述存储单元中的所述配置信息和选择出的二维配置信息进行比较。
4.根据权利要求1至3中的任意一项所述的信息提供装置，其特征在于，
所述接收单元还接收选择信息，该选择信息表示配置在所述三维空间内的物体中由用户选择的物体，
所述检索单元对如下两种配置进行比较，其中，一种配置为，属于所述生成的二维配置信息表示的配置，且是所述接收到的选择信息表示的所述物体的配置，另一种配置为，属于存储在所述存储单元中的所述配置信息表示的配置，且是与所述接收到的选择信息表示的所述物体对应的物体的配置。
5.根据权利要求1至3中的任意一项所述的信息提供装置，其特征在于，
所述接收单元还接收选择信息，该选择信息表示配置在所述三维空间内的物体中由用户选择的物体，
所述生成单元将如下物体从向所述二维面的投影对象中排除，来生成所述二维配置信息，其中，该物体为，属于配置在所述三维空间内的物体，且是所述接收到的选择信息表示的物体信息以外的物体。
6.根据权利要求1至3中的任意一项所述的信息提供装置，其特征在于，
该信息提供装置还具有显示控制单元，该显示控制单元以能够由用户进行选择的方式将表示配置在三维空间内的物体的物体候选显示在所述终端装置的显示画面上，
所述接收单元接收表示由所述用户选择出且配置在虚拟三维空间内的所述物体候选的配置的三维配置信息，作为表示所述三维空间中的物体的配置的三维配置信息。
7.根据权利要求1至3中的任意一项所述的信息提供装置，其特征在于，
所述接收单元还接收颜色信息，该颜色信息表示所述三维空间中的物体的颜色，
所述检索单元还对所述接收到的颜色信息所示的所述物体的颜色和所述图像数据表示的图像所包含的物体的颜色进行比较。
8.根据权利要求1至3中的任意一项所述的信息提供装置，其特征在于，
在所述存储单元中存储有所述图像数据的位置信息，
所述接收单元还接收条件信息，该条件信息表示与所述位置信息有关的条件，
所述检索单元针对与满足所述接收到的条件信息所示的所述条件的位置信息对应的所述图像数据进行所述比较。
9.根据权利要求1至3中的任意一项所述的信息提供装置，其特征在于，
该信息提供装置还具有发送单元，该发送单元将由所述检索单元检索到的所述图像数据发送到所述终端装置。
10.根据权利要求1至3中的任意一项所述的信息提供装置，其特征在于，
在所述存储单元中存储有所述图像数据的位置信息，
该信息提供装置还具有发送单元，该发送单元将由所述检索单元检索到的所述图像数据的位置信息发送到所述终端装置。
11.一种信息提供装置中的信息提供方法，终端装置能够经由网络访问该信息提供装置，该信息提供方法的特征在于包括：
接收步骤，从所述终端装置接收三维配置信息和视线信息，该三维配置信息表示三维空间中的物体的配置，该视线信息用于确定所述三维空间中的视点位置和视线方向，其中，使用户根据自己的喜好来指定用于确定物体、该物体在三维空间中的配置、视点位置和视线方向的信息；
生成步骤，根据接收到的三维配置信息和视线信息，生成二维配置信息，该二维配置信息表示投影到二维面上的所述物体在该二维面内的配置；以及
检索步骤，对存储在存储单元中的配置信息和生成的二维配置信息进行比较，根据该比较的结果来检索图像数据，其中，该存储单元存储有图像数据和所述配置信息，所述配置信息表示该图像数据表示出的图像所包含的物体在该图像内的配置。
12.根据权利要求11所述的信息提供方法，其特征在于，
在所述接收步骤中，接收用于确定多个由视点位置和视线方向组成的组的所述视线信息，
在所述生成步骤中，根据由所述接收到的视线信息确定的多个所述组，生成多个所述二维配置信息，
在所述检索步骤中，对存储在所述存储单元中的所述配置信息和所述生成的多个二维配置信息进行比较。
13.根据权利要求12所述的信息提供方法，其特征在于，
该信息提供方法还包括选择步骤，在该选择步骤中，从所述生成的多个二维配置信息中，选择表示所述二维面内的所述物体之间重叠最小的配置的二维配置信息，
在所述检索步骤中，对存储在所述存储单元中的所述配置信息和选择出的二维配置信息进行比较。
14.根据权利要求11至13中的任意一项所述的信息提供方法，其特征在于，
在所述接收步骤中，还接收选择信息，该选择信息表示配置在所述三维空间内的物体中由用户选择的物体，
在所述检索步骤中，对如下两种配置进行比较，其中，一种配置为，属于所述生成的二维配置信息表示的配置，且是所述接收到的选择信息表示的所述物体的配置，另一种配置为，属于存储在所述存储单元中的所述配置信息表示的配置，且是与所述接收到的选择信息表示的所述物体对应的物体的配置。
15.根据权利要求11至13中的任意一项所述的信息提供方法，其特征在于，
在所述接收步骤中，还接收选择信息，该选择信息表示配置在所述三维空间内的物体中由用户选择的物体，
在所述生成步骤中，将如下物体从向所述二维面的投影对象中排除，来生成所述二维配置信息，其中，该物体为，属于配置在所述三维空间内的物体，且是所述接收到的选择信息表示的物体信息以外的物体。
16.根据权利要求11至13中的任意一项所述的信息提供方法，其特征在于，
该信息提供方法还包括显示控制步骤，在该显示控制步骤中，以能够由用户进行选择的方式将表示配置在三维空间内的物体的物体候选显示在所述终端装置的显示画面上，
在所述接收步骤中，接收表示由所述用户选择出且配置在虚拟三维空间内的所述物体候选的配置的三维配置信息，作为表示所述三维空间中的物体的配置的三维配置信息。
17.根据权利要求11至13中的任意一项所述的信息提供方法，其特征在于，
在所述接收步骤中，还接收颜色信息，该颜色信息表示所述三维空间中的物体的颜色，
在所述检索步骤中，还对所述接收到的颜色信息所示的所述物体的颜色和所述图像数据表示的图像所包含的物体的颜色进行比较。
18.根据权利要求11至13中的任意一项所述的信息提供方法，其特征在于，
在所述存储单元中存储有所述图像数据的位置信息，
在所述接收步骤中，还接收条件信息，该条件信息表示与所述位置信息有关的条件，
在所述检索步骤中，针对与满足所述接收到的条件信息所示的所述条件的位置信息对应的所述图像数据进行所述比较。
19.根据权利要求11至13中的任意一项所述的信息提供方法，其特征在于，
该信息提供方法还包括发送步骤，在该发送步骤中，将通过所述检索步骤检索到的所述图像数据发送到所述终端装置。
20.根据权利要求11至13中的任意一项所述的信息提供方法，其特征在于，
在所述存储单元中存储有所述图像数据的位置信息，
该信息提供方法还包括发送步骤，在该发送步骤中，将通过所述检索步骤检索到的所述图像数据的位置信息发送到所述终端装置。
21.一种信息提供系统，其包含终端装置和该终端装置能够经由网络访问的信息提供装置，该信息提供系统的特征在于，
所述终端装置具有发送单元，该发送单元向所述信息提供装置发送三维配置信息和视线信息，该三维配置信息表示三维空间中的物体的配置，该视线信息用于确定所述三维空间中的视点位置和视线方向，其中，使用户根据自己的喜好来指定用于确定物体、该物体在三维空间中的配置、视点位置和视线方向的信息，
所述信息提供装置具有：
接收单元，其接收从所述终端装置发送的所述三维配置信息和所述视线信息；
生成单元，其根据接收到的三维配置信息和视线信息，生成二维配置信息，该二维配置信息表示投影到二维面上的所述物体在该二维面内的配置；以及
检索单元，其对存储在存储单元中的配置信息与所述生成的二维配置信息进行比较，根据该比较的结果来检索图像数据，其中，该存储单元存储有图像数据和所述配置信息，所述配置信息表示该图像数据所包含的物体在该图像内的配置。
22.根据权利要求21所述的信息提供系统，其特征在于，
所述终端装置或者所述信息提供装置中的至少任意一方还具有确定单元，该确定单元确定在虚拟三维空间中视线被定向的基准位置，
所述终端装置还具有：
取得单元，其取得三维配置信息，该三维配置信息表示通过用户的操作而配置在虚拟三维空间内的虚拟物体在该虚拟三维空间内的配置；以及
设定单元，其按照所述用户的操作，一边将从视点位置朝向确定出的基准位置的方向作为视线方向，一边使该视点位置移动，来设定所述视线信息，
所述发送单元对取得的三维配置信息和设定的视线信息进行发送。
23.根据权利要求22所述的信息提供系统，其特征在于，
所述确定单元确定所述配置在虚拟三维空间内的虚拟物体中的大小最大的虚拟物体的位置，作为所述基准位置。
24.根据权利要求22或23所述的信息提供系统，其特征在于，
在所述虚拟三维空间内配置有多个所述虚拟物体的情况下，所述确定单元确定如下位置，作为所述基准位置，其中，该位置成为所配置的多个所述虚拟物体的位置的重心。
25.根据权利要求22所述的信息提供系统，其特征在于，
所述终端装置或者所述信息提供装置中的至少任意一方还具有第2生成单元，该第2生成单元根据所述取得的三维配置信息，生成多个二维配置信息，该多个二维配置信息分别表示投影到所述二维面上的所述虚拟物体在该二维面内的配置，且该多个二维配置信息的视点位置或者视线方向中的至少任意一方彼此不同，
所述确定单元在由如下的视点位置和视线方向示出的视线上确定所述基准位置，该视点位置和视线方向是生成所述生成的多个二维配置信息中的、配置在所述二维面内的虚拟物体之间重叠最小的二维配置信息时使用的，
所述设定单元将生成配置在所述二维面内的虚拟物体之间的重叠最小的二维配置信息时使用的视点位置和视线方向设为初始状态，按照所述用户的操作，使视点位置和视线方向从初始状态起进行变化。
CN201180071234.XA 2011-05-31 2011-05-31 信息提供装置、信息提供方法以及信息提供系统 Active CN103562957B (zh)

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
PCT/JP2011/062476 WO2012164685A1 (ja) 2011-05-31 2011-05-31 情報提供装置、情報提供方法、情報提供処理プログラム、情報提供処理プログラムを記録した記録媒体、及び情報提供システム

Publications (2)

Publication Number Publication Date
CN103562957A CN103562957A (zh) 2014-02-05
CN103562957B true CN103562957B (zh) 2016-12-14

Family

ID=47258571

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201180071234.XA Active CN103562957B (zh) 2011-05-31 2011-05-31 信息提供装置、信息提供方法以及信息提供系统

Country Status (6)

Country Link
US (1) US9886789B2 (zh)
EP (1) EP2711890B1 (zh)
JP (1) JP5467177B2 (zh)
CN (1) CN103562957B (zh)
ES (1) ES2684610T3 (zh)
WO (1) WO2012164685A1 (zh)

Families Citing this family (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2013026048A2 (en) * 2011-08-18 2013-02-21 Utherverse Digital, Inc. Systems and methods of virtual world interaction
JP6361228B2 (ja) * 2014-03-31 2018-07-25 株式会社ニコン 画像生成装置、及び画像生成プログラム
EP3198473A1 (en) * 2014-09-22 2017-08-02 THOMSON Licensing Use of depth perception as indicator of search, user interest or preference
EP3106963B1 (en) * 2015-06-16 2019-07-24 Nokia Technologies Oy Mediated reality
TWI616763B (zh) * 2015-09-25 2018-03-01 財團法人工業技術研究院 視訊索引建立方法及應用其之裝置
TWI603227B (zh) * 2016-12-23 2017-10-21 李雨暹 移動物件的虛擬訊息遠距管理方法與應用系統
WO2019195270A1 (en) * 2018-04-03 2019-10-10 Kaarta, Inc. Methods and systems for real or near real-time point cloud map data confidence evaluation
CN109033346B (zh) * 2018-07-24 2024-04-12 百度在线网络技术（北京）有限公司 三维内容呈现的方法、装置、存储介质和终端设备
CN112862977A (zh) * 2019-11-08 2021-05-28 华为技术有限公司 数字空间的管理方法、装置与设备
CN112783993B (zh) * 2019-11-08 2024-03-15 华为技术有限公司 基于数字地图的多个授权空间的内容同步方法

Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN1181557A (zh) * 1996-10-30 1998-05-13 三菱电机株式会社 信息检索装置
CN1720527A (zh) * 2002-11-06 2006-01-11 佳能株式会社 通信装置、图像存储装置、摄像装置以及它们的控制方法
JP2006309722A (ja) * 2005-03-31 2006-11-09 National Institute Of Information & Communication Technology 三次元モデルを利用した写真検索・閲覧システム及び同プログラム、写真を利用した三次元モデル表示・操作システム及び同プログラム
CN1871622A (zh) * 2003-10-21 2006-11-29 日本电气株式会社 图像比较系统和图像比较方法
CN101373481A (zh) * 2007-08-24 2009-02-25 株式会社理光 图像搜索设备、图像搜索方法、及存储程序的存储介质
CN101446952A (zh) * 2007-11-27 2009-06-03 株式会社日立制作所 三维类似形状检索装置
CN101853268A (zh) * 2009-03-30 2010-10-06 卡西欧计算机株式会社 图像检索系统及图像检索方法

Family Cites Families (12)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH08335223A (ja) * 1995-06-08 1996-12-17 Hitachi Ltd 画像検索システム
JP3798469B2 (ja) * 1996-04-26 2006-07-19 パイオニア株式会社 ナビゲーション装置
US6995788B2 (en) * 2001-10-10 2006-02-07 Sony Computer Entertainment America Inc. System and method for camera navigation
JP2002373168A (ja) * 2001-06-15 2002-12-26 Teizou Osaku 位置情報に基づく画像検索方法およびシステム
JP2003022445A (ja) * 2001-07-09 2003-01-24 Nippon Telegr & Teleph Corp <Ntt> 情報検索装置，情報検索方法並びにこの方法を実施するためのコンピュータプログラム及びこのプログラムを記録した媒体
US20050046645A1 (en) * 2003-07-24 2005-03-03 Breton Pierre Felix Autoscaling
US8160400B2 (en) * 2005-11-17 2012-04-17 Microsoft Corporation Navigating images using image based geometric alignment and object based controls
WO2008041313A1 (fr) * 2006-10-02 2008-04-10 Pioneer Corporation Dispositif d'affichage d'images
US8253736B2 (en) * 2007-01-29 2012-08-28 Microsoft Corporation Reducing occlusions in oblique views
US8233005B2 (en) * 2008-04-24 2012-07-31 International Business Machines Corporation Object size modifications based on avatar distance
WO2009137830A2 (en) * 2008-05-09 2009-11-12 Ltu Technologies S.A.S. Color match toolbox
US20110196864A1 (en) * 2009-09-03 2011-08-11 Steve Mason Apparatuses, methods and systems for a visual query builder

Patent Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN1181557A (zh) * 1996-10-30 1998-05-13 三菱电机株式会社 信息检索装置
CN1720527A (zh) * 2002-11-06 2006-01-11 佳能株式会社 通信装置、图像存储装置、摄像装置以及它们的控制方法
CN1871622A (zh) * 2003-10-21 2006-11-29 日本电气株式会社 图像比较系统和图像比较方法
JP2006309722A (ja) * 2005-03-31 2006-11-09 National Institute Of Information & Communication Technology 三次元モデルを利用した写真検索・閲覧システム及び同プログラム、写真を利用した三次元モデル表示・操作システム及び同プログラム
CN101373481A (zh) * 2007-08-24 2009-02-25 株式会社理光 图像搜索设备、图像搜索方法、及存储程序的存储介质
CN101446952A (zh) * 2007-11-27 2009-06-03 株式会社日立制作所 三维类似形状检索装置
CN101853268A (zh) * 2009-03-30 2010-10-06 卡西欧计算机株式会社 图像检索系统及图像检索方法

Also Published As

Publication number Publication date
US9886789B2 (en) 2018-02-06
US20140118343A1 (en) 2014-05-01
CN103562957A (zh) 2014-02-05
JP5467177B2 (ja) 2014-04-09
JPWO2012164685A1 (ja) 2014-07-31
EP2711890B1 (en) 2018-07-11
EP2711890A1 (en) 2014-03-26
ES2684610T3 (es) 2018-10-03
EP2711890A4 (en) 2015-03-04
WO2012164685A1 (ja) 2012-12-06

Similar Documents

Publication Publication Date Title
CN103562957B (zh) 信息提供装置、信息提供方法以及信息提供系统
CN102945276B (zh) 生成和更新基于事件的回放体验
US10467311B2 (en) Communication system and method of generating geographic social networks in virtual space
CN106951561A (zh) 基于虚拟现实技术与gis数据的电子地图系统
CN106225799A (zh) 旅游信息动态导航系统及方法
CN102436621A (zh) 房产景观数据展示系统及方法、数据生成系统及方法
CN102884523B (zh) 信息提供装置、信息提供方法、信息提供处理程序以及记录了信息提供处理程序的记录介质
CN102542483A (zh) 房产位置展示系统及方法、展示数据生成系统及方法
CN110199525A (zh) 用于选择场景以在增强现实界面中浏览历史记录的系统和方法
CN106446211A (zh) 一种在特定区域内推荐拍摄地点的方法
JP2022136211A (ja) システム
Aydın et al. ARCAMA-3D–a context-aware augmented reality mobile platform for environmental discovery
US20230031587A1 (en) System and method of controlling image processing devices
JP6413042B1 (ja) プログラム、情報処理装置及び情報処理方法
JP7316695B2 (ja) ロケーションベースのデジタルコンテンツを推奨する方法およびシステム
JP2015080154A (ja) 生物情報提供装置および生物情報提供システム
KR102054513B1 (ko) 오프라인 및 온라인 연동 보물찾기 서비스 제공 방법
CN108932088B (zh) 虚拟物件收集方法及可携式电子装置
GENTILE Using Flickr geotags to find similar tourism destinations
Lin et al. The application of unmanned aerial vehicle oblique photography technology in online tourism design
KR102167588B1 (ko) 복수의 사용자 장치를 기반으로 동영상을 생성하는 컨텐츠 생성 서비스 장치, 복수의 사용자 장치를 기반으로 동영상을 생성하는 방법 및 컴퓨터 프로그램이 기록된 기록매체
JP2018055730A (ja) 画像検索装置および画像検索方法
KR101259837B1 (ko) 게임형 도감제작시스템 및 도감제작방법
Patel et al. Markit: Community play and computation to generate rich location descriptions through a mobile phone game
JP2017054552A (ja) 画像検索装置、画像表示装置、画像検索方法、および画像表示方法

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
C14 Grant of patent or utility model
GR01 Patent grant
CP01 Change in the name or title of a patent holder
CP01 Change in the name or title of a patent holder

Address after: Tokyo, Japan

Patentee after: Lotte Group Co.,Ltd.

Address before: Tokyo, Japan

Patentee before: Rakuten, Inc.