CN109242978A - 三维模型的视角调整方法和装置 - Google Patents

三维模型的视角调整方法和装置 Download PDF

Info

Publication number
CN109242978A
CN109242978A CN201810955648.2A CN201810955648A CN109242978A CN 109242978 A CN109242978 A CN 109242978A CN 201810955648 A CN201810955648 A CN 201810955648A CN 109242978 A CN109242978 A CN 109242978A
Authority
CN
China
Prior art keywords
visual angle
threedimensional model
image
target object
description information
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN201810955648.2A
Other languages
English (en)
Other versions
CN109242978B (zh
Inventor
王群
董维山
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Beijing Baidu Netcom Science and Technology Co Ltd
Original Assignee
Beijing Baidu Netcom Science and Technology Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Beijing Baidu Netcom Science and Technology Co Ltd filed Critical Beijing Baidu Netcom Science and Technology Co Ltd
Priority to CN201810955648.2A priority Critical patent/CN109242978B/zh
Publication of CN109242978A publication Critical patent/CN109242978A/zh
Application granted granted Critical
Publication of CN109242978B publication Critical patent/CN109242978B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T19/00Manipulating 3D models or images for computer graphics
    • G06T19/003Navigation within 3D models or images

Landscapes

  • Engineering & Computer Science (AREA)
  • Software Systems (AREA)
  • Radar, Positioning & Navigation (AREA)
  • Remote Sensing (AREA)
  • Computer Graphics (AREA)
  • Computer Hardware Design (AREA)
  • General Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • Processing Or Creating Images (AREA)

Abstract

本申请提出一种三维模型的视角调整方法和装置,其中,方法包括:获取待展示的三维模型,以及三维模型的描述信息;在预设的各对象中,查询与描述信息匹配目标对象;获取三维模型在各视角下的二维图像;根据各视角下的二维图像的图像特征,与目标对象的图像特征之间的相似度,从各视角中确定目标视角;根据目标视角,对三维模型进行视角调整。该方法能够实现自动调整三维模型的视角,提升三维模型的显示效果,从而改善用户的观看体验。

Description

三维模型的视角调整方法和装置
技术领域
本申请涉及互联网技术领域,尤其涉及一种三维模型的视角调整方法和装置。
背景技术
随着互联网技术的不断发展,在浏览器中浏览三维模型的应用场景越来越多。目前,在网页中根据三维模型进行展示时,由于来源不同的三维模型,其初始化角度可能不同,从而在网页中显示的三维模型的角度也不相同。在一些情况下,可能导致三维模型在网页中的显示效果不佳。例如,当用户在页面输入的搜索词为“袋鼠”时,在页面中显示的为背向用户的三维袋鼠模型。
因此,如何在网页中展示合适角度的三维模型成为亟待解决的难题。
发明内容
本申请提出一种三维模型的视角调整方法和装置,实现自动调整三维模型的视角,提升三维模型的显示效果,从而改善用户的观看体验,以解决现有技术中三维模型的展示角度不佳,从而导致三维模型在网页中的显示效果不佳的技术问题。
本申请一方面实施例提出了一种三维模型的视角调整方法,包括:
获取待展示的三维模型,以及所述三维模型的描述信息;
在预设的各对象中,查询与所述描述信息匹配的目标对象;
获取所述三维模型在各视角下的二维图像;
根据各视角下的二维图像的图像特征,与所述目标对象的图像特征之间的相似度,从所述各视角中确定目标视角;
根据所述目标视角,对所述三维模型进行视角调整。
本申请实施例的三维模型的视角调整方法,通过获取待展示的三维模型,以及三维模型的描述信息,而后,在预设的各对象中,查询与描述信息匹配目标对象,接着,获取三维模型在各视角下的二维图像,并根据各视角下的二维图像的图像特征,与目标对象的图像特征之间的相似度,从各视角中确定目标视角,最后根据目标视角,对三维模型进行视角调整。由此,可以实现自动调整三维模型的视角,提升三维模型的显示效果,从而改善用户的观看体验。
本申请又一方面实施例提出了一种三维模型的视角调整装置,包括:
模型获取模块,用于获取待展示的三维模型,以及所述三维模型的描述信息;
查询模块,用于在预设的各对象中,查询与所述描述信息匹配的目标对象;
图像获取模块,用于获取所述三维模型在各视角下的二维图像;
确定模块,用于根据各视角下的二维图像的图像特征,与所述目标对象的图像特征之间的相似度,从所述各视角中确定目标视角;
调整模块,用于根据所述目标视角,对所述三维模型进行视角调整。
本申请实施例的三维模型的视角调整装置,通过获取待展示的三维模型,以及三维模型的描述信息,而后,在预设的各对象中,查询与描述信息匹配目标对象,接着,获取三维模型在各视角下的二维图像,并根据各视角下的二维图像的图像特征,与目标对象的图像特征之间的相似度,从各视角中确定目标视角,最后根据目标视角,对三维模型进行视角调整。由此,可以实现自动调整三维模型的视角,提升三维模型的显示效果,从而改善用户的观看体验。
本申请又一方面实施例提出了一种计算机设备,包括:存储器、处理器及存储在存储器上并可在处理器上运行的计算机程序,所述处理器执行所述程序时,实现如本申请前述实施例提出的三维模型的视角调整方法。
本申请又一方面实施例提出了一种非临时性计算机可读存储介质,其上存储有计算机程序,其特征在于,该程序被处理器执行时实现如本申请前述实施例提出的三维模型的视角调整方法。
为了实现上述目的,本申请第五方面实施例提出了一种计算机程序产品,当所述计算机程序产品中的指令由处理器执行时,执行如本申请前述实施例提出的三维模型的视角调整方法。
本申请附加的方面和优点将在下面的描述中部分给出,部分将从下面的描述中变得明显,或通过本申请的实践了解到。
附图说明
本申请上述的和/或附加的方面和优点从下面结合附图对实施例的描述中将变得明显和容易理解,其中:
图1为本申请实施例一所提供的三维模型的视角调整方法的流程示意图;
图2为本申请实施例中描述信息为“袋鼠”时对应的目标对象示意图;
图3为本申请实施例二所提供的三维模型的视角调整方法的流程示意图;
图4为本申请实施例三所提供的三维模型的视角调整方法的流程示意图;
图5为本申请实施例的三维模型的视角调整系统的结构示意图;
图6为本申请实施例中显示区显示的三维模型示意图;
图7为本申请实施例中显示区显示的视角调整后的三维模型示意图;
图8为本申请实施例四所提供的三维模型的视角调整装置的结构示意图;
图9为本申请实施例五所提供的三维模型的视角调整装置的结构示意图;
图10示出了适于用来实现本申请实施方式的示例性计算机设备的框图。
具体实施方式
下面详细描述本申请的实施例,所述实施例的示例在附图中示出,其中自始至终相同或类似的标号表示相同或类似的元件或具有相同或类似功能的元件。下面通过参考附图描述的实施例是示例性的,旨在用于解释本申请,而不能理解为对本申请的限制。
本申请主要针对现有技术中三维模型的展示角度不佳,从而导致三维模型在网页中的显示效果不佳的技术问题,提供一种三维模型的视角调整方法。
本申请实施例的三维模型的视角调整方法,通过获取待展示的三维模型,以及三维模型的描述信息,而后,在预设的各对象中,查询与描述信息匹配目标对象,接着,获取三维模型在各视角下的二维图像,并根据各视角下的二维图像的图像特征,与目标对象的图像特征之间的相似度,从各视角中确定目标视角,最后根据目标视角,对三维模型进行视角调整。由此,可以实现自动调整三维模型的视角,提升三维模型的显示效果,从而改善用户的观看体验。
下面参考附图描述本申请实施例的三维模型的视角调整方法和装置。
图1为本申请实施例一所提供的三维模型的视角调整方法的流程示意图。
本申请实施例以该三维模型的视角调整方法被配置于三维模型的视角调整装置中来举例说明,该三维模型的视角调整装置可以被配置于任一计算机设备中,以使该计算机设备执行三维模型的视角调整功能。
如图1所示,该三维模型的视角调整方法包括以下步骤:
步骤101,获取待展示的三维模型,以及三维模型的描述信息。
本申请实施例中,待展示的三维模型为需要进行展示的三维模型,待展示的三维模型的数据格式可以为:.obj、.gltf、.fbx等,三维模型的描述信息为该三维模型的文字描述信息,例如当待展示的三维模型为袋鼠时,三维模型的描述信息可以为:“袋鼠”、“幼年袋鼠”、“成年袋鼠”、“雄性袋鼠”等等。
可选地,可以从网络侧获取待展示的三维模型,或者,还可以从本地存储的数据库中获取待展示的三维模型,获取的三维模型可以标注有对应的描述信息,或者,还可以由用户输入三维模型的描述信息,对此不作限制。
步骤102,在预设的各对象中,查询与描述信息匹配的目标对象。
本申请实施例中,对象可以为人、动物、植物、建筑物、景物等内容对应的二维图片。
作为一种可能的实现方式,可以预先存储不同对象,每个对象的拍摄角度较为适宜,比如对象可以为以最佳视角拍摄的二维图片,此时,对象的视点、视线、镜头效果、图片细节等最佳,例如,当对象为某一动物,比如袋鼠对应的二维图片时,存储的对象可以为袋鼠对应的正视图,或者为侧视图等。并且,存储的对象可以标注有该对象对应的描述信息、属性信息或者类别信息。
可选地,在获取到三维模型的描述信息后,可以查询预设的各对象,将三维模型的描述信息,与每一个对象的描述信息、属性信息或者类别信息进行匹配,将匹配中的对象,作为目标对象。
可选地,可以基于关键词提取算法,对三维模型的描述信息进行提取,将提取后的关键词与每一个对象的描述信息、属性信息或者类别信息进行匹配,得到匹配度,从而将匹配度最高的对象,作为目标对象。或者,可以基于分词处理算法,对三维模型的描述信息进行分词处理,而后将提取后的各分词,与每一个对象的描述信息、属性信息或者类别信息进行匹配,得到匹配度,从而将匹配度最高的对象,作为目标对象。
作为一种示例,当三维模型的描述信息为“袋鼠”时,目标对象可以如图2所示。
步骤103,获取三维模型在各视角下的二维图像。
可选地,可以通过设置一个虚拟相机,按照任意一个视角,对三维模型进行拍摄,从而可以获取三维模型在任意视角下的二维图像。或者,可以预先设置需要进行拍摄的视角,例如为水平30度、水平60度、水平90度、…、水平270度、水平360度、和/或、垂直30度、垂直60度、垂直90度、…、垂直270度、垂直360度等等,而后可以控制虚拟相机,按照设置的视角,依次拍摄三维模型在各视角下的二维图像,例如可以控制虚拟相机每次顺时针旋转(或者逆时针旋转)30度,拍摄三维模型在相应视角下的二维图像,对此不作限制。
步骤104,根据各视角下的二维图像的图像特征,与目标对象的图像特征之间的相似度,从各视角中确定目标视角。
本申请实施例中,图像特征可以包括形状特征、轮廓特征、和/或、大小特征等。
可选地,对于每一视角下的二维图像,可以基于图像识别技术,提取该二维图像的图像特征,以及提取目标对象的图像特征,而后根据二维图像的图像特征,与目标对象的图像特征,计算两者之间的相似度。
其中,相似度可以包括形状、轮廓、大小等特征的总体相似度。具体实现时,对于二维图像的图像特征中的每个特征,可以将该特征的形状、轮廓、大小等特征,与目标对象的图像特征中的对应的特征的形状、轮廓、大小等特征进行匹配,可以获得该特征对应的形状特征的相似度、轮廓特征的相似度、大小特征的相似度等,而后可以基于预先设置的形状、轮廓、大小等特征对应的权重值,计算该特征的相似度。由此,可以获取二维图像的图像特征中的每个特征,与目标对象的图像特征中对应特征的相似度,从而可以基于预先设置的每个特征对应的权重值,得到二维图像的图像特征,与目标对象的图像特征之间的相似度。
或者,相似度还可以指二维图像的图像特征,与目标对象的图像特征之间的部分相似度。例如,该相似度可以包括形状特征的相似度、轮廓特征的相似度、和/或、大小特征的相似度等。具体实现时,对于二维图像的图像特征中的每个特征,可以将该特征的形状特征与目标对象的图像特征中的对应的特征的形状特征进行匹配,获取形状特征的相似度,将该特征的轮廓特征与目标对象的图像特征中的对应的特征的轮廓特征进行匹配,获取轮廓特征的相似度,和/或,将该特征的大小特征与目标对象的图像特征中的对应的特征的大小特征进行匹配,获取大小特征的相似度。而后,可以将形状特征的相似度、轮廓特征的相似度、和/或、大小特征的相似度,作为该特征的相似度。由此,可以获取二维图像的图像特征中的每个特征,与目标对象的图像特征中对应特征的相似度,从而可以基于预先设置的每个特征对应的权重值,得到二维图像的图像特征,与目标对象的图像特征之间的相似度。
举例而言,以二维图像的图像特征中的某个特征,例如鼻翼示例,可以将该特征的形状、轮廓、大小,与目标对象的图像特征中的对应的特征的形状、轮廓、大小进行匹配,可以获取该特征对应的形状特征的相似度、轮廓特征的相似度、大小特征的相似度,进而可以获取该特征的相似度,即获取鼻翼的相似度。
本申请实施例中,在确定每一视角下的二维图像的图像特征,与目标对象的图像特征之间的相似度后,可以将图像特征相似度最高的二维图像对应的视角,作为目标视角,从而提升后续三维模型的显示效果。
步骤105,根据目标视角,对三维模型进行视角调整。
本申请实施例中,在确定目标视角后,可以根据目标视角,对三维模型进行视角调整。例如,当目标视角为水平30度时,假设水平30度为水平向左旋转30度,则可以控制三维模型水平顺时针旋转30度。或者,当目标视角为垂直60度时,假设垂直60度为垂直向上旋转60度,则可以控制三维模型垂直逆时针旋转60度。
本申请实施例的三维模型的视角调整方法,通过获取待展示的三维模型,以及三维模型的描述信息,而后,在预设的各对象中,查询与描述信息匹配目标对象,接着,获取三维模型在各视角下的二维图像,并根据各视角下的二维图像的图像特征,与目标对象的图像特征之间的相似度,从各视角中确定目标视角,最后根据目标视角,对三维模型进行视角调整。由此,可以实现自动调整三维模型的视角,提升三维模型的显示效果,从而改善用户的观看体验。
为了清楚说明上一实施例,本实施例提供了另一种三维模型的视角调整方法,图3为本申请实施例二所提供的三维模型的视角调整方法的流程示意图。
如图3所示,该三维模型的视角调整方法可以包括以下步骤:
步骤201,获取待展示的三维模型,以及三维模型的描述信息。
步骤201的执行过程可以参见上述实施例中步骤101的执行过程,在此不做赘述。
步骤202,获取预设的各对象的类别信息。
本申请实施例中,对象可以为人、动物、植物、建筑物、景物等内容对应的二维图片。每个对象可以包括至少一种类别信息,例如,当对象为老鼠对应的二维图片时,该对象的类别信息可以包括鼠类、啮齿动物、哺乳动物、动物等多个类别,或者,当对象为玫瑰对应的二维图片时,该对象的类别信息可以包括植物、蔷薇科蔷薇属植物、双子叶植物等多个类别。
可选地,在预先存储不同对象时,可以同时在各对象上标注有该对象的类别信息。
步骤203,将描述信息与各对象的类别信息进行匹配,以确定与描述信息匹配的目标对象。
作为一种可能的实现方式,为了提升匹配效率,本申请中,类别信息可以包括相应对象所属的具有父子关系的多个类别。例如,当对象为老鼠对应的二维图片时,该对象的类别信息可以包括:鼠类->啮齿动物->哺乳动物->动物。从而对于每一个对象,可以将三维模型的描述信息与该对象的多个类别进行匹配,例如可以将描述信息与相应对象的多个类别,按照从子层级到父层级的顺序进行匹配,若存在匹配中的类别,则停止匹配,将相应对象作为所述目标对象,从而提升匹配效率。
举例而言,假设三维模型的描述信息为“老鼠”,预设的各对象中存在鲨鱼、老鼠、方桌、柳树、瓢虫等内容对应的二维图片,其中,老鼠的类别信息包括鼠类、啮齿动物、哺乳动物、动物等多个类别,由于袋鼠与哺乳动物匹配,则可以确定老鼠对应的二维图片为目标对象。由于采用了从子层级到父层级多个类别作为类别信息,有助于减少需要预先录入图像特征的对象个数。这是由于,属于同一类别的不同对象,往往外形具有一定相似性,层级越低这种相似程度就越高。基于该相似性,可以根据属于同一类别的相似对象的图像特征进行图像特征相似度匹配的过程,而无需三维模型的对象与预先录入图像特征的对象完全一致。
步骤204,获取三维模型在各视角下的二维图像。
步骤205,根据各视角下的二维图像的图像特征,与目标对象的图像特征之间的相似度,从各视角中确定目标视角。
步骤204-205的执行过程可以参见上述实施例中步骤103-104的执行过程,在此不做赘述。
步骤206,将目标视角存储在预设数据库中。
本申请实施例中,在确定目标视角后,可以将目标视角存储在预设数据库中,以供后续进行网页渲染初始化三维模型。
步骤207,当接收到对三维模型进行展示的请求时,从数据库中读取目标视角。
可选地,搜索页面可以设置有预设按钮,用户可以通过触发该预设按钮,请求对三维模型进行展示。或者,当用户在搜索页面输入搜索词,并点击搜索按钮时,此时,可以发送对搜索词相关的三维模型进行展示的请求,相应地,本申请实施例的三维模型的视角调整装置在接收到对三维模型进行展示的请求后,可以从数据库中读取目标视角。
步骤208,将三维模型以目标视角投影在二维平面,得到三维模型在目标视角下的二维图像。
可选地,由于在显示区显示的三维模型,为三维模型在虚拟相机的某个视角上的观察内容在显示区的投影,即在显示区显示的三维模型,为虚拟相机以某个视角拍摄得到的二维图像,因此,本申请实施例中,为了提升三维模型的显示效果,可以将三维模型以目标视角投影在二维平面,得到三维模型在目标视角下的二维图像。
本申请实施例的三维模型的视角调整方法,通过借助机器学习结果,辅助三维模型自动调整视角,一方面可以提升处理速度,减少人工处理成本,另一方面可以满足用户的观看体验。
作为一种可能的实现方式,参见图4,在图1和3所示实施例的基础上,在步骤104或者205之前,该三维模型的视角调整方法还可以包括以下步骤:
步骤301,将目标对象作为搜索词进行搜索,以获取搜索到的多个样本图片。
例如,当目标对象为袋鼠对应的二维图片时,可以以该袋鼠对应的二维图片为搜索词进行搜索,搜索得到多个袋鼠对应的样本图片。比如可以搜索得到各个生长时期的袋鼠对应的样本图片、以不同拍摄视角拍摄得到的袋鼠对应的样本图片等。
步骤302,根据多个样本图片进行模型训练,以使模型学习得到目标对象的图像特征;图像特征包括轮廓特征。
本申请实施例中,图像特征可以包括形状特征、轮廓特征、和/或大小特征等。
可选地,在搜索到多个样本图片后,可以对样本图片中的图像特征进行提取并标注,利用标注后的样本图片,对模型进行训练,从而可以使得模型学习得到目标对象的图像特征。
作为一种示例,参见图5,图5为本申请实施例的三维模型的视角调整系统的结构示意图。该视角调整系统包括:三维模型渲染模块41、三维模型展现角度调整模块42、训练模块43,以及相似度对比模块44。
首先,可以输入三维模型,该三维模型的数据格式可以为:.obj、.gltf、.fbx等,当三维模型有相关文字描述信息时,可以一并输入该三维模型的描述信息,例如输入的描述信息可以为“袋鼠”。
三维模型渲染模块41,用于对三维模型进行渲染。例如可以通过web图形库(Graphics Library,简称GL)协议进行三维模型渲染,并将三维模型初始化后,显示于显示区上,例如显示于正方形canvas画布上。作为一种示例,参见图6,图6为本申请实施例中显示区显示的三维模型示意图。
三维模型展现角度调整模块42,用于对三维模型的视角进行调整。三维模型渲染模块41对三维模型进行渲染后,在显示区显示的三维模型,为三维模型在虚拟相机的某个视角上的观察内容在显示区的投影,因此,调整虚拟相机的空间坐标(x,y,z)和观察角度,即可改变三维模型在显示区上的视角。
训练模块43,用于根据样本图片,对模型进行训练,使得模型学习得到图片的图像特征。
相似度对比模块44,用于计算训练模块43输出的图像特征与三维模型在各视角下的二维图像的图像特征之间的相似度。
具体地,三维模型展现角度调整模块42可以根据相似度对比模块44计算得到的最大值,确定三维模型需要调整的视角,而后自动调整虚拟相机的空间坐标,例如,每次可以以三维模型为中心点(0,0,0),沿着中心点顺时针偏转预设角度来调整虚拟相机的空间坐标,从而调整三维模型投影到显示区上的显示内容的角度。并且,在每次偏转预设角度后,三维模型展现角度调整模块42可以将虚拟相机拍摄的二维图像传递给相似度对比模块44,直到完成水平360度的偏转。
相似度对比模块44计算每个视角下的二维图像的图像特征与训练模块43输出的图像(例如图2所示)的图像特征的相似度。从而三维模型展现角度调整模块42可以选择相似度最高的二维图像对应的视角,作为调整视角并存储至数据库中,以供后续进行网页渲染初始化三维模型。
例如,视角调整后的三维模型可以如图7所示,与图6未经调整前的三维模型相比,调整后的三维模型的视角较佳,显示了更多的细节,可以提升用户的观看体验。
为了实现上述实施例,本申请还提出一种三维模型的视角调整装置。
图8为本申请实施例四所提供的三维模型的视角调整装置的结构示意图。
如图8所示,该三维模型的视角调整装置100包括:模型获取模块101、查询模块102、图像获取模块103、确定模块104,以及调整模块105。
其中,模型获取模块101,用于获取待展示的三维模型,以及三维模型的描述信息。
查询模块102,用于在预设的各对象中,查询与描述信息匹配目标对象。
图像获取模块103,用于获取三维模型在各视角下的二维图像。
确定模块104,用于根据各视角下的二维图像的图像特征,与目标对象的图像特征之间的相似度,从各视角中确定目标视角。
调整模块105,用于根据目标视角,对三维模型进行视角调整。
进一步地,在本申请实施例的一种可能的实现方式中,参见图9,在图8所示实施例的基础上,该三维模型的视角调整装置100还可以包括:
作为一种可能的实现方式,查询模块102,包括:
获取子模块1021,用于获取预设的各对象的类别信息。
匹配子模块1022,用于将描述信息与各对象的类别信息进行匹配,以确定与描述信息匹配的目标对象。
作为一种可能的实现方式,类别信息包括相应对象所属的具有父子关系的多个类别,则匹配子模块1022,具体用于:对每一个对象,将描述信息与相应对象的多个类别进行匹配;若存在匹配中的类别,将相应对象作为目标对象。
作为一种可能的实现方式,调整模块105,包括:
存储子模块1051,用于将目标视角存储在预设数据库中。
读取子模块1052,用于当接收到对三维模型进行展示的请求时,从数据库中读取目标视角。
投影子模块1053,用于将三维模型以目标视角投影在二维平面,得到三维模型在目标视角下的二维图像。
搜索模块106,用于在根据各视角下的二维图像的图像特征,与目标对象的图像特征之间的相似度,从各视角中确定目标视角之前,将目标对象作为搜索词进行搜索,以获取搜索到的多个样本图片。
训练模块107,用于根据多个样本图片进行模型训练,以使模型学习得到目标对象的图像特征;图像特征包括轮廓特征。
作为一种可能的实现方式,确定模块104,包括:
确定子模块1041,用于确定每一视角下的二维图像的图像特征,与目标对象的图像特征之间的相似度。
处理子模块1042,用于将图像特征相似度最高的二维图像对应的视角作为目标视角。
需要说明的是,前述对三维模型的视角调整方法实施例的解释说明也适用于该实施例的三维模型的视角调整装置100,此处不再赘述。
本申请实施例的三维模型的视角调整装置,通过获取待展示的三维模型,以及三维模型的描述信息,而后,在预设的各对象中,查询与描述信息匹配目标对象,接着,获取三维模型在各视角下的二维图像,并根据各视角下的二维图像的图像特征,与目标对象的图像特征之间的相似度,从各视角中确定目标视角,最后根据目标视角,对三维模型进行视角调整。由此,可以实现自动调整三维模型的视角,提升三维模型的显示效果,从而改善用户的观看体验。
为了实现上述实施例,本申请还提出一种计算机设备,包括:存储器、处理器及存储在存储器上并可在处理器上运行的计算机程序,处理器执行程序时,实现如本申请前述实施例提出的三维模型的视角调整方法。
为了实现上述实施例,本申请还提出一种非临时性计算机可读存储介质,其上存储有计算机程序,其特征在于,该程序被处理器执行时实现如本申请前述实施例提出的三维模型的视角调整方法。
为了实现上述实施例,本申请还提出一种计算机程序产品,当计算机程序产品中的指令由处理器执行时,执行如本申请前述实施例提出的三维模型的视角调整方法。
图10示出了适于用来实现本申请实施方式的示例性计算机设备的框图。图10显示的计算机设备12仅仅是一个示例,不应对本申请实施例的功能和使用范围带来任何限制。
如图10所示,计算机设备12以通用计算设备的形式表现。计算机设备12的组件可以包括但不限于:一个或者多个处理器或者处理单元16,系统存储器28,连接不同系统组件(包括系统存储器28和处理单元16)的总线18。
总线18表示几类总线结构中的一种或多种,包括存储器总线或者存储器控制器,外围总线,图形加速端口,处理器或者使用多种总线结构中的任意总线结构的局域总线。举例来说,这些体系结构包括但不限于工业标准体系结构(Industry StandardArchitecture;以下简称:ISA)总线,微通道体系结构(Micro Channel Architecture;以下简称:MAC)总线,增强型ISA总线、视频电子标准协会(Video Electronics StandardsAssociation;以下简称:VESA)局域总线以及外围组件互连(Peripheral ComponentInterconnection;以下简称:PCI)总线。
计算机设备12典型地包括多种计算机系统可读介质。这些介质可以是任何能够被计算机设备12访问的可用介质,包括易失性和非易失性介质,可移动的和不可移动的介质。
存储器28可以包括易失性存储器形式的计算机系统可读介质,例如随机存取存储器(Random Access Memory;以下简称:RAM)30和/或高速缓存存储器32。计算机设备12可以进一步包括其它可移动/不可移动的、易失性/非易失性计算机系统存储介质。仅作为举例,存储系统34可以用于读写不可移动的、非易失性磁介质(图10未显示,通常称为“硬盘驱动器”)。尽管图10中未示出,可以提供用于对可移动非易失性磁盘(例如“软盘”)读写的磁盘驱动器,以及对可移动非易失性光盘(例如:光盘只读存储器(Compact Disc Read OnlyMemory;以下简称:CD-ROM)、数字多功能只读光盘(Digital Video Disc Read OnlyMemory;以下简称:DVD-ROM)或者其它光介质)读写的光盘驱动器。在这些情况下,每个驱动器可以通过一个或者多个数据介质接口与总线18相连。存储器28可以包括至少一个程序产品,该程序产品具有一组(例如至少一个)程序模块,这些程序模块被配置以执行本申请各实施例的功能。
具有一组(至少一个)程序模块42的程序/实用工具40,可以存储在例如存储器28中,这样的程序模块42包括但不限于操作系统、一个或者多个应用程序、其它程序模块以及程序数据,这些示例中的每一个或某种组合中可能包括网络环境的实现。程序模块42通常执行本申请所描述的实施例中的功能和/或方法。
计算机设备12也可以与一个或多个外部设备14(例如键盘、指向设备、显示器24等)通信,还可与一个或者多个使得用户能与该计算机系统/服务器12交互的设备通信,和/或与使得该计算机系统/服务器12能与一个或多个其它计算设备进行通信的任何设备(例如网卡,调制解调器等等)通信。这种通信可以通过输入/输出(I/O)接口22进行。并且,计算机设备12还可以通过网络适配器20与一个或者多个网络(例如局域网(Local AreaNetwork;以下简称:LAN),广域网(Wide Area Network;以下简称:WAN)和/或公共网络,例如因特网)通信。如图所示,网络适配器20通过总线18与计算机设备12的其它模块通信。应当明白,尽管图中未示出,可以结合计算机设备12使用其它硬件和/或软件模块,包括但不限于:微代码、设备驱动器、冗余处理单元、外部磁盘驱动阵列、RAID系统、磁带驱动器以及数据备份存储系统等。
处理单元16通过运行存储在系统存储器28中的程序,从而执行各种功能应用以及数据处理,例如实现前述实施例中提及的三维模型的视角调整方法。
在本说明书的描述中,参考术语“一个实施例”、“一些实施例”、“示例”、“具体示例”、或“一些示例”等的描述意指结合该实施例或示例描述的具体特征、结构、材料或者特点包含于本申请的至少一个实施例或示例中。在本说明书中,对上述术语的示意性表述不必须针对的是相同的实施例或示例。而且,描述的具体特征、结构、材料或者特点可以在任一个或多个实施例或示例中以合适的方式结合。此外,在不相互矛盾的情况下,本领域的技术人员可以将本说明书中描述的不同实施例或示例以及不同实施例或示例的特征进行结合和组合。
此外,术语“第一”、“第二”仅用于描述目的,而不能理解为指示或暗示相对重要性或者隐含指明所指示的技术特征的数量。由此,限定有“第一”、“第二”的特征可以明示或者隐含地包括至少一个该特征。在本申请的描述中,“多个”的含义是至少两个,例如两个,三个等,除非另有明确具体的限定。
流程图中或在此以其他方式描述的任何过程或方法描述可以被理解为,表示包括一个或更多个用于实现定制逻辑功能或过程的步骤的可执行指令的代码的模块、片段或部分,并且本申请的优选实施方式的范围包括另外的实现,其中可以不按所示出或讨论的顺序,包括根据所涉及的功能按基本同时的方式或按相反的顺序,来执行功能,这应被本申请的实施例所属技术领域的技术人员所理解。
在流程图中表示或在此以其他方式描述的逻辑和/或步骤,例如,可以被认为是用于实现逻辑功能的可执行指令的定序列表,可以具体实现在任何计算机可读介质中,以供指令执行系统、装置或设备(如基于计算机的系统、包括处理器的系统或其他可以从指令执行系统、装置或设备取指令并执行指令的系统)使用,或结合这些指令执行系统、装置或设备而使用。就本说明书而言,"计算机可读介质"可以是任何可以包含、存储、通信、传播或传输程序以供指令执行系统、装置或设备或结合这些指令执行系统、装置或设备而使用的装置。计算机可读介质的更具体的示例(非穷尽性列表)包括以下:具有一个或多个布线的电连接部(电子装置),便携式计算机盘盒(磁装置),随机存取存储器(RAM),只读存储器(ROM),可擦除可编辑只读存储器(EPROM或闪速存储器),光纤装置,以及便携式光盘只读存储器(CDROM)。另外,计算机可读介质甚至可以是可在其上打印所述程序的纸或其他合适的介质,因为可以例如通过对纸或其他介质进行光学扫描,接着进行编辑、解译或必要时以其他合适方式进行处理来以电子方式获得所述程序,然后将其存储在计算机存储器中。
应当理解,本申请的各部分可以用硬件、软件、固件或它们的组合来实现。在上述实施方式中,多个步骤或方法可以用存储在存储器中且由合适的指令执行系统执行的软件或固件来实现。如,如果用硬件来实现和在另一实施方式中一样,可用本领域公知的下列技术中的任一项或他们的组合来实现:具有用于对数据信号实现逻辑功能的逻辑门电路的离散逻辑电路,具有合适的组合逻辑门电路的专用集成电路,可编程门阵列(PGA),现场可编程门阵列(FPGA)等。
本技术领域的普通技术人员可以理解实现上述实施例方法携带的全部或部分步骤是可以通过程序来指令相关的硬件完成,所述的程序可以存储于一种计算机可读存储介质中,该程序在执行时,包括方法实施例的步骤之一或其组合。
此外,在本申请各个实施例中的各功能单元可以集成在一个处理模块中,也可以是各个单元单独物理存在,也可以两个或两个以上单元集成在一个模块中。上述集成的模块既可以采用硬件的形式实现,也可以采用软件功能模块的形式实现。所述集成的模块如果以软件功能模块的形式实现并作为独立的产品销售或使用时,也可以存储在一个计算机可读取存储介质中。
上述提到的存储介质可以是只读存储器,磁盘或光盘等。尽管上面已经示出和描述了本申请的实施例,可以理解的是,上述实施例是示例性的,不能理解为对本申请的限制,本领域的普通技术人员在本申请的范围内可以对上述实施例进行变化、修改、替换和变型。

Claims (10)

1.一种三维模型的视角调整方法,其特征在于,所述方法包括以下步骤:
获取待展示的三维模型,以及所述三维模型的描述信息;
在预设的各对象中,查询与所述描述信息匹配的目标对象;
获取所述三维模型在各视角下的二维图像;
根据各视角下的二维图像的图像特征,与所述目标对象的图像特征之间的相似度,从所述各视角中确定目标视角;
根据所述目标视角,对所述三维模型进行视角调整。
2.根据权利要求1所述的视角调整方法,其特征在于,所述在预设的各对象中,查询与所述描述信息匹配目标对象,包括:
获取预设的各对象的类别信息;
将所述描述信息与各对象的类别信息进行匹配,以确定与所述描述信息匹配的目标对象。
3.根据权利要求2所述的视角调整方法,其特征在于,所述类别信息包括相应对象所属的具有父子关系的多个类别;所述将所述描述信息与各对象的类别信息进行匹配,以确定与所述描述信息匹配的目标对象,包括:
对每一个对象,将所述描述信息与相应对象的多个类别进行匹配;
若存在匹配中的类别,将相应对象作为所述目标对象。
4.根据权利要求1所述的视角调整方法,其特征在于,所述根据所述目标视角,对所述三维模型进行视角调整,包括:
将所述目标视角存储在预设数据库中;
当接收到对所述三维模型进行展示的请求时,从所述数据库中读取所述目标视角;
将所述三维模型以所述目标视角投影在二维平面,得到所述三维模型在所述目标视角下的二维图像。
5.根据权利要求1-4任一项所述的视角调整方法,其特征在于,所述根据各视角下的二维图像的图像特征,与所述目标对象的图像特征之间的相似度,从所述各视角中确定目标视角之前,还包括:
将所述目标对象作为搜索词进行搜索,以获取搜索到的多个样本图片;
根据所述多个样本图片进行模型训练,以使所述模型学习得到所述目标对象的图像特征;所述图像特征包括轮廓特征。
6.根据权利要求1-4任一项所述的视角调整方法,其特征在于,所述根据各视角下的二维图像的图像特征,与所述目标对象的图像特征之间的相似度,从所述各视角中确定目标视角,包括:
确定每一视角下的二维图像的图像特征,与所述目标对象的图像特征之间的相似度;
将图像特征相似度最高的二维图像对应的视角作为所述目标视角。
7.一种三维模型的视角调整装置,其特征在于,所述装置包括:
模型获取模块,用于获取待展示的三维模型,以及所述三维模型的描述信息;
查询模块,用于在预设的各对象中,查询与所述描述信息匹配的目标对象;
图像获取模块,用于获取所述三维模型在各视角下的二维图像;
确定模块,用于根据各视角下的二维图像的图像特征,与所述目标对象的图像特征之间的相似度,从所述各视角中确定目标视角;
调整模块,用于根据所述目标视角,对所述三维模型进行视角调整。
8.一种计算机设备,其特征在于,包括存储器、处理器及存储在存储器上并可在处理器上运行的计算机程序,所述处理器执行所述程序时,实现如权利要求1-6中任一所述的三维模型的视角调整方法。
9.一种非临时性计算机可读存储介质,其上存储有计算机程序,其特征在于,该程序被处理器执行时实现如权利要求1-6中任一所述的三维模型的视角调整方法。
10.一种计算机程序产品,其特征在于,当所述计算机程序产品中的指令由处理器执行时,执行如权利要求1-6中任一所述的三维模型的视角调整方法。
CN201810955648.2A 2018-08-21 2018-08-21 三维模型的视角调整方法和装置 Active CN109242978B (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201810955648.2A CN109242978B (zh) 2018-08-21 2018-08-21 三维模型的视角调整方法和装置

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201810955648.2A CN109242978B (zh) 2018-08-21 2018-08-21 三维模型的视角调整方法和装置

Publications (2)

Publication Number Publication Date
CN109242978A true CN109242978A (zh) 2019-01-18
CN109242978B CN109242978B (zh) 2023-07-07

Family

ID=65071144

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201810955648.2A Active CN109242978B (zh) 2018-08-21 2018-08-21 三维模型的视角调整方法和装置

Country Status (1)

Country Link
CN (1) CN109242978B (zh)

Cited By (12)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN109979017A (zh) * 2019-04-08 2019-07-05 王黎明 基于视角转换的指路装置及方法
CN110795904A (zh) * 2019-10-25 2020-02-14 深圳市元征科技股份有限公司 一种pcb布局与产品外壳结构核对方法及装置
CN110889905A (zh) * 2019-11-21 2020-03-17 宁波财经学院 基于裸眼3d的产品展示方法和系统
CN111242169A (zh) * 2019-12-31 2020-06-05 浙江工业大学 一种基于图片相似度计算的脑纤维视角自动选择方法
CN113129456A (zh) * 2019-12-30 2021-07-16 百度在线网络技术(北京)有限公司 车辆三维模型变形方法、装置和电子设备
CN113570693A (zh) * 2021-07-26 2021-10-29 北京达佳互联信息技术有限公司 一种三维模型的视角变换方法、装置、设备及存储介质
CN113793422A (zh) * 2021-08-13 2021-12-14 深圳安泰创新科技股份有限公司 三维模型的显示控制方法、电子设备及可读存储介质
CN114357555A (zh) * 2022-03-17 2022-04-15 中国建筑第五工程局有限公司 基于物资周转平台的模型展示方法、装置、介质及服务器
CN114399614A (zh) * 2021-12-16 2022-04-26 北方华录文化科技(北京)有限公司 虚拟对象的三维展示方法、装置、电子设备及存储介质
CN114398118A (zh) * 2021-12-21 2022-04-26 深圳市易图资讯股份有限公司 基于空间锚的智慧城市的智能定位系统及方法
CN114463528A (zh) * 2022-02-14 2022-05-10 深圳须弥云图空间科技有限公司 目标视角播放方法及装置
CN116433673A (zh) * 2023-06-15 2023-07-14 安徽容知日新科技股份有限公司 紧固件松动检测方法、装置、电子设备和可读存储介质

Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2002366966A (ja) * 2001-06-06 2002-12-20 Nippon Telegr & Teleph Corp <Ntt> 3次元cgモデル表示方法、3次元cgモデル表示システム、3次元cgモデル表示サーバ、3次元cgモデル表示クライアント
JP2011258036A (ja) * 2010-06-10 2011-12-22 Dainippon Printing Co Ltd 3次元形状検索装置、3次元形状検索方法、及びプログラム
JP2014081917A (ja) * 2012-09-28 2014-05-08 Canon Marketing Japan Inc 情報処理装置、その制御方法、及びプログラム
CN104395902A (zh) * 2012-04-02 2015-03-04 谷歌公司 根据存储的图像确定3d模型信息
CN106420052A (zh) * 2016-08-31 2017-02-22 北京市计算中心 一种靶点位置的导航方法及系统
US9836483B1 (en) * 2012-08-29 2017-12-05 Google Llc Using a mobile device for coarse shape matching against cloud-based 3D model database

Patent Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2002366966A (ja) * 2001-06-06 2002-12-20 Nippon Telegr & Teleph Corp <Ntt> 3次元cgモデル表示方法、3次元cgモデル表示システム、3次元cgモデル表示サーバ、3次元cgモデル表示クライアント
JP2011258036A (ja) * 2010-06-10 2011-12-22 Dainippon Printing Co Ltd 3次元形状検索装置、3次元形状検索方法、及びプログラム
CN104395902A (zh) * 2012-04-02 2015-03-04 谷歌公司 根据存储的图像确定3d模型信息
US9836483B1 (en) * 2012-08-29 2017-12-05 Google Llc Using a mobile device for coarse shape matching against cloud-based 3D model database
JP2014081917A (ja) * 2012-09-28 2014-05-08 Canon Marketing Japan Inc 情報処理装置、その制御方法、及びプログラム
CN106420052A (zh) * 2016-08-31 2017-02-22 北京市计算中心 一种靶点位置的导航方法及系统

Cited By (15)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN109979017A (zh) * 2019-04-08 2019-07-05 王黎明 基于视角转换的指路装置及方法
CN110795904A (zh) * 2019-10-25 2020-02-14 深圳市元征科技股份有限公司 一种pcb布局与产品外壳结构核对方法及装置
CN110889905B (zh) * 2019-11-21 2023-06-06 宁波财经学院 基于裸眼3d的产品展示方法和系统
CN110889905A (zh) * 2019-11-21 2020-03-17 宁波财经学院 基于裸眼3d的产品展示方法和系统
CN113129456A (zh) * 2019-12-30 2021-07-16 百度在线网络技术(北京)有限公司 车辆三维模型变形方法、装置和电子设备
CN111242169A (zh) * 2019-12-31 2020-06-05 浙江工业大学 一种基于图片相似度计算的脑纤维视角自动选择方法
CN111242169B (zh) * 2019-12-31 2024-03-26 浙江工业大学 一种基于图片相似度计算的脑纤维视角自动选择方法
CN113570693A (zh) * 2021-07-26 2021-10-29 北京达佳互联信息技术有限公司 一种三维模型的视角变换方法、装置、设备及存储介质
CN113793422A (zh) * 2021-08-13 2021-12-14 深圳安泰创新科技股份有限公司 三维模型的显示控制方法、电子设备及可读存储介质
CN113793422B (zh) * 2021-08-13 2024-02-23 深圳安泰创新科技股份有限公司 三维模型的显示控制方法、电子设备及可读存储介质
CN114399614A (zh) * 2021-12-16 2022-04-26 北方华录文化科技(北京)有限公司 虚拟对象的三维展示方法、装置、电子设备及存储介质
CN114398118A (zh) * 2021-12-21 2022-04-26 深圳市易图资讯股份有限公司 基于空间锚的智慧城市的智能定位系统及方法
CN114463528A (zh) * 2022-02-14 2022-05-10 深圳须弥云图空间科技有限公司 目标视角播放方法及装置
CN114357555A (zh) * 2022-03-17 2022-04-15 中国建筑第五工程局有限公司 基于物资周转平台的模型展示方法、装置、介质及服务器
CN116433673A (zh) * 2023-06-15 2023-07-14 安徽容知日新科技股份有限公司 紧固件松动检测方法、装置、电子设备和可读存储介质

Also Published As

Publication number Publication date
CN109242978B (zh) 2023-07-07

Similar Documents

Publication Publication Date Title
CN109242978A (zh) 三维模型的视角调整方法和装置
CN110310175B (zh) 用于移动增强现实的系统和方法
Ren et al. A coarse-to-fine indoor layout estimation (cfile) method
Armeni et al. 3d semantic parsing of large-scale indoor spaces
Hertzmann Why do line drawings work? a realism hypothesis
US8289317B2 (en) Automatic 3D modeling
CN103729885B (zh) 多视角投影与三维注册联合的手绘场景三维建模方法
Ni et al. Learning to photograph: A compositional perspective
Feng et al. Depth-projection-map-based bag of contour fragments for robust hand gesture recognition
CN104637090B (zh) 一种基于单张图片的室内场景建模方法
CN110516096A (zh) 合成感知数字图像搜索
CN106485196A (zh) 视觉搜索方法、对应的系统、设备和计算机程序产品
Rogez et al. Image-based synthesis for deep 3D human pose estimation
JP2011159329A (ja) 自動3dモデリングシステム及び方法
CN109902658A (zh) 行人特征识别方法、装置、计算机设备和存储介质
Carreira et al. Lifting object detection datasets into 3d
KR102181161B1 (ko) 영상 처리 방법 및 장치
Smith et al. A method for animating children’s drawings of the human figure
Teboul Shape grammar parsing: Application to image-based modeling
CN108416828A (zh) 一种3d场景文本图片合成方法及系统
KR20190115161A (ko) 3차원 객체 생성 장치
Pickering Intelligent camera planning for computer graphics
CN109213917A (zh) 3d内容的搜索方法、装置、计算机设备和存储介质
Bekhit Computer Vision and Augmented Reality in iOS
Michaelsen et al. Hierarchical perceptual grouping for object recognition

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant