CN110494864A - 3d模型的集成 - Google Patents

3d模型的集成 Download PDF

Info

Publication number
CN110494864A
CN110494864A CN201880023721.0A CN201880023721A CN110494864A CN 110494864 A CN110494864 A CN 110494864A CN 201880023721 A CN201880023721 A CN 201880023721A CN 110494864 A CN110494864 A CN 110494864A
Authority
CN
China
Prior art keywords
article
user
threedimensional model
model
image
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN201880023721.0A
Other languages
English (en)
Other versions
CN110494864B (zh
Inventor
詹姆斯·托马斯·多德尔
王乔松
谢金融
鲁宾逊·皮拉穆图
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
eBay Inc
Original Assignee
eBay Inc
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by eBay Inc filed Critical eBay Inc
Publication of CN110494864A publication Critical patent/CN110494864A/zh
Application granted granted Critical
Publication of CN110494864B publication Critical patent/CN110494864B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T15/00—3D [Three Dimensional] image rendering
    • G06T15/10—Geometric effects
    • G06T15/20—Perspective computation
    • G06T15/205—Image-based rendering
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T17/00—Three dimensional [3D] modelling, e.g. data description of 3D objects
    • G06T17/20—Finite element generation, e.g. wire-frame surface description, tesselation
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00—Image analysis
    • G06T7/90—Determination of colour characteristics
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2200/00—Indexing scheme for image data processing or generation, in general
    • G06T2200/08—Indexing scheme for image data processing or generation, in general involving all processing steps from image acquisition to 3D model generation
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00—Indexing scheme for image analysis or image enhancement
    • G06T2207/10—Image acquisition modality
    • G06T2207/10028—Range image; Depth image; 3D point clouds

Abstract

在各种示例实施方式中，公开了用于三维模型的集成的系统和方法。在一个示例实施方式中，一种方法包括：接收多个图像；选择图像上的点并对所述点进行三角测量以生成多个深度图；通过组合多个深度图来生成三维网格；通过将多个图像投影到使用所述点的网格上来生成物品的三维模型；使用图像中的颜色的颜色漫反射特性来校准在模型中使用的颜色；以及提供用户界面，该用于界面允许用户选择三维模型上的一个或更多个用户点并提供与所选择的用户点相关联的附加信息。

Description

3D模型的集成
优先权
该PCT申请要求2017年9月20日提交的题为“INTEGRATION OF 3D MODELS”的美国专利申请序列号第15/709,997号的申请日期的权益，并且该申请要求于2017年3月8日提交的题为“COMMERCIAL INTEGRATION OF 3D MODELS”的美国临时申请第62/468,748号的权益，上述申请中的每个的全部内容通过引用并入本文。
技术领域
本公开内容的实施方式涉及在处理流程中的数字三维(3D)模型的集成，并且更具体地但不作为限制，涉及在各种情况下的3D模型的使用。
背景技术
传统上，当用户期望电子地描述或以其他方式记录物品时，用户提供物品的二维(2D)照片。在一些示例中，期望向另一用户描述物品的用户将物品的照片发布到网络服务器，使得另一用户可以通过从网络服务器检索照片来查看它们。此外，当其他用户分析该物品时，他们查看该物品的许多照片以确定该物品的条件或其他物理特性。
然而，在许多情况下，由于2D相片的技术限制，另一用户不能够使用相片收集关于该物品的足够信息。在其他情况下，用户发布未能揭示关于该物品的某些问题(例如，划痕、变色、损坏、修改或其他非传统的改变)的不充分的图像。在其他示例中，用户不能或没有充分地描述与该物品相关联的特定缺陷。
附图说明
附图中的各个附图仅示出了本公开内容的示例实施方式，并且不能被认为是限制其范围。
图1是示出了根据一些示例实施方式的系统的框图。
图2是描绘了根据一个示例实施方式的3D集成系统的图示。
图3是描绘了根据另一示例实施方式的用于3D模型的用户界面的图示。
图4是示出了根据一个示例实施方式的用于集成3D模型的方法的流程图。
图5是示出了根据一个示例实施方式的用于集成3D模型的另一方法的流程图。
图6是示出了根据另一示例实施方式的用于集成3D模型的方法的流程图。
图7是示出了根据一个示例实施方式的用于集成3D模型的方法的流程图。
图8是示出了根据一个示例实施方式的用于集成3D模型的另一方法的流程图。
图9是示出了根据一些示例实施方式的可以安装在机器上的软件架构的示例的框图。
图10示出了根据示例实施方式的计算机系统的形式的机器的图形表示，在该计算机系统中可以执行一组指令以使机器执行本文所讨论的方法中的任何一种或更多种。
本文提供的标题仅仅是为了方便，并且不一定影响所使用的术语的范围或含义。
具体实施方式
以下的描述包括体现本公开内容的说明性实施方式的系统、方法、技术、指令序列和计算机器程序产品。在以下描述中，出于说明的目的，阐述了许多具体细节以便提供对本发明主题的各种实施方式的理解。然而，对于本领域技术人员来说将明显的是，可以在没有这些具体细节的情况下实践本发明主题的实施方式。通常，不一定详细示出了公知的指令实例、协议、结构和技术。
在某些实施方式中，如本文所述的系统被特别地配置成从用户检索多个图像(例如，作为静止图像或视频)。在一个示例实施方式中，3D集成系统(图2：146)请求不同的视角的物品的20个或更多个图像。然后，3D集成系统146使用该图像生成物品的3D模型。在该示例中，因为3D模型是使用物品的实际图像生成的，所以3D模型准确地反映了物品的物理条件。
在一个示例实施方式中，3D集成系统146使用图像组通过选择物品上的一些特定点来生成3D模型。在一个示例中，3D集成系统将图像分组为三组。然后，3D集成系统146使用图像组对特定点进行三角测量，并且生成针对每组图像的深度图。然后，3D集成系统146通过计算深度来组合深度图以创建3D网格并将每个图像投影到3D网格上。然后，3D集成系统146可以通过使用颜色的镜面反射特性及漫反射特性组合来自图像组的颜色来校准颜色。
在其他示例实施方式中，3D集成系统146使用如本领域技术人员可以理解的具有最少三个位移的Kruppa方程。在其他示例中，3D集成系统146应用使用如本领域技术人员可以理解的投影重构、仿射重构或欧几里德重构的分层。
在其他示例实施方式中，3D集成系统146应用已知的软件包以使用图像生成3D模型。可以被配置成生成3D模型的软件包的示例包括但不限于Sculpteo、Autodesk、3DSOM、Neitra 3D Pro、3-Sweep、Agisoft PhotoScan等。
在一个示例实施方式中，物品是具有特定定制的汽车。示例可以包括扰流板、替代轮、原始涂料或其他修改。如本文所述，因为3D集成系统146生成汽车的3D模型，用户(例如，潜在购买者)可以使用模型以任何期望的角度查看汽车，而不受检索到的汽车图像中呈现的特定角度限制。
在其他示例实施方式中，3D集成系统146将生成的3D模型上传到3D模型的数据库中。随着时间的推移，当许多3D模型被上传时，3D集成系统146然后可以使用3D模型作为物品的目录来执行。这样的物品的目录允许用户浏览多个物品并将类似的物品进行比较。3D集成系统146还可以生成多个3D模型的并排视图，并且可以在用户改变物品之一的视角时同步模型的位置、取向等。
在一个示例实施方式中，例如，3D集成系统146请求用户的手的多个图像，生成用户的手的3D模型，并且将该模型与诸如手套的物品的模型进行比较。在该示例中，3D集成系统146使用手套的模型的尺寸与用户的手的模型的尺寸相比来确定手套是否适配用户的手。以这种方式，用户可以确定物品是否适配他/她的体形而无需物理地试用该物品。
类似地，3D集成系统146可以确定鞋子是否适配用户的脚。此外，由于每个鞋子制造商的鞋子在尺寸上发生变化，因此无论设计如何，用户可以在购买鞋子之前更容易地确定鞋子是否适配他/她的脚。在其他示例中，3D集成系统146确定眼镜、帽子、衬衫、裤子、裙子、其他衣物等的适配。
参照图1，示出了基于客户端服务器的高层级网络架构100的示例实施方式。网络系统102经由网络104(例如，因特网或广域网(WAN))向一个或更多个客户端设备110提供服务器侧功能。图1示出了例如，在客户端设备110上执行的网络客户端112(例如，浏览器例如由华盛顿州雷德蒙德的公司开发的因特网浏览器)、客户端应用114。
客户端设备110可以包括但不限于移动电话、台式计算机、膝上型计算机、个人数字助理(PDA)、智能电话、平板电脑、超极本、上网本、膝上型计算机、多处理器系统、基于微处理器或可编程的消费电子产品、游戏控制台、机顶盒或者用户可以用来访问网络系统102的任何其他通信设备。在一些实施方式中，客户端设备110可以包括显示模块(未示出)以(例如，以用户界面的形式)显示信息。在进一步的实施方式中，客户端设备110可以包括触摸屏、加速度计、陀螺仪、相机、麦克风、全球定位系统(GPS)设备等中的一个或更多个。客户端设备110可以是用户用来执行涉及网络系统102内的数字物品的交易的设备。在一个实施方式中，网络系统102是下述基于网络的市场，其响应于对产品列表的请求、发布包括在基于网络的市场上可获得的产品的物品列表的发布以及管理对这些市场交易的支付。
一个或更多个用户106可以是人、机器或与客户端设备110交互的其他装置。在实施方式中，用户106不是网络架构100的一部分，但是可以经由客户端设备110或其他装置与网络架构100交互。例如，网络104的一个或更多个部分可以是无线自组网络、内联网、外联网、虚拟专用网络(VPN)、局域网(LAN)、无线LAN(WLAN)、WAN、无线WAN(WWAN)、城域网(MAN)、因特网的一部分、公共交换电话网(PSTN)的一部分、蜂窝电话网络、无线网络、WiFi网络、WiMax网络、另一类型的网络或者两种或更多种这样的网络的组合。
每个客户端设备110可以包括一个或更多个应用(也被称为“app”)，例如但不限于网络浏览器、消息接发应用、电子邮件(email)应用、电子商务网站应用(也被称为市场应用)等。在一些实施方式中，客户端设备110可以包括如下应用：该应用被配置成在本地提供用户界面以及在需要的基础上该应用被配置成与网络系统102通信的情况下的功能中的至少一些，以用于在本地不可获得的数据和/或处理能力(例如，访问可用于销售的物品的数据库、对用户进行验证、证实支付的方法等)。相反地，在其他实施方式中，客户端设备110可以使用其网络浏览器来访问网络系统102上托管的站点(或其变体)。
在示例实施方式中，用户106不是网络架构100的一部分，但是可以经由客户端设备110或其他装置与网络架构100交互。例如，用户106向客户端设备110提供输入(例如，触摸屏输入或字母数字输入)，并且然后经由网络104将该输入传送到网络系统102。在这种情况下，网络系统102响应于接收到来自用户106的输入，经由网络104将要呈现给用户106的信息传送到客户端设备110。以这种方式，用户106可以使用客户端设备110与网络系统102交互。
应用程序接口(API)服务器120和网络服务器122耦接到一个或更多个应用服务器140，并且分别向一个或更多个应用服务器140提供编程和网络接口。应用服务器140可以托管一个或更多个发布系统142，所述一个或更多个发布系统142可以包括一个或更多个模块或应用，并且所述一个或更多个发布系统142中的每个可以被实现为硬件、软件、固件或其任何组合。应用服务器140又被示出为耦接到一个或更多个数据库服务器124，所述一个或更多个数据库服务器124有助于对一个或更多个信息存储库或数据库126进行访问。在示例实施方式中，数据库126是存储要向发布系统142发布(例如，发布)的信息的存储设备。数据库126还可以根据示例实施方式存储数字物品信息。
在第三方服务器130上执行的第三方应用132被示出为具有经由通过API服务器120提供的编程接口对网络系统102的编程访问。例如，利用从网络系统102检索到的信息的第三方应用132支持由第三方托管的网站上的一个或更多个特征或功能。
发布系统142可以向访问网络系统102的用户106提供多个发布功能和服务。虽然发布系统142在图1中被示出为均形成网络系统102的一部分，但是应当理解的是，在替选实施方式中，发布系统142可以形成与网络系统102分离且不同于网络系统102的服务的一部分。
此外，虽然图1中所示的基于客户端-服务器的网络架构100采用客户端-服务器架构，但是本发明的主题当然不限于这样的架构，并且同样可以在例如分布式或对等架构系统中找到应用。发布系统142和3D集成系统146也可以被实现为独立的软件程序，该独立的软件程序不一定具有联网能力。
网络客户端112可以经由通过网络服务器122支持的网络接口访问发布系统142。编程客户端经由通过API服务器120提供的编程接口访问由发布系统142提供的各种服务和功能。例如，编程客户端可以是发布者应用以使得用户能够以离线方式创作并管理网络系统102上的发布，并且执行编程客户端与网络系统102之间的批处理模式通信。
在某些示例实施方式中，3D集成系统146生成要使用网络客户端112显示的3D模型。在一个示例中，3D集成系统146生成模型，将模型存储在远程服务器处，并且返回通用资源定位符(URL)以使用网络客户端112访问该模型。
另外，在第三方服务器130上执行的第三方应用132被示出为具有经由通过API服务器120提供的编程接口对网络系统102的编程访问。例如，利用从网络系统102检索到的信息的第三方应用132可以支持由第三方托管的网站上的一个或更多个特征或功能。
在一个示例实施方式中，3D集成系统146被配置为远程服务。在该示例中，网络系统102接收物品的图像，并将该图像发送到3D集成系统146。3D集成系统146生成物品的3D模型，并将生成的3D模型发送到网络系统102。在另一示例实施方式中，网络系统102是联网市场，并且3D集成系统146生成3D模型以在联网市场处的用于物品的列表中使用。
图2是描绘了根据一个示例实施方式的3D集成系统的图示。在该示例实施方式中，3D集成系统146包括图像源模块220、3D模型模块230、模型注释模块240、人工环境模块250、适配模块260、2D图像生成模块270和物品验证模块280。
在一个示例实施方式中，图像源模块220被配置成检索物品的多个图像。在一个示例中，图像源模块220与允许用户上传物品的图像的用户接口交互并检索用户上传的图像。
在另一示例实施方式中，图像源模块220接收视频并将视频的静止帧提取到将被用来生成3D模型的图像中。图像源模块220还可以针对物品的多个角度中的每个角度提取静止帧。以这种方式，图像源模块220确保图像描绘物品的足够角度以生成从许多不同角度精确的3D模型。
在另一示例实施方式中，图像源模块220从位于用户的眼镜上的相机接收视频，从视频中提取静止图像，并将该静止图像发送到3D模型模块230。
在一个示例实施方式中，3D模型模块230被特别地配置成通过组合检索到的图像来生成3D模型。3D集成服务器146将图像与包括相机特性(例如，焦点特性等)、空间特性和其他环境因素的图像元数据组合，以使用如本文所述的图像生成物品的3D模型。因此，3D模型模块230生成准确地反映物品的物理尺寸的实际物品的3D模型。
在另一示例实施方式中，提供的图像没有揭示物品的每个角度，并且3D模型模块230不能使用该图像制作完整的模型。作为响应，3D模型模块230检索描述该物品的另一模型的部分(或类似物品的从缺失角度的库存图像)，并且使用这些部分来使生成的物品的3D模型完整。在另一示例实施方式中，3D模型模块230检索物品的要被用来生成3D模型的库存图像。在一个示例中，物品是鞋子，并且图像示出了鞋子的除了鞋子的后跟之外的每个角度。因为3D模型模块230没有鞋子的后跟的图像，所以3D模型模块230从相似鞋子的另一模型中检索类似鞋子的后跟。在该示例实施方式中，3D模型模块230阴影化或以其他方式标记来自其他模型的图像的部分以将该部分与从图像生成的3D模型的部分区分开。
在另一示例实施方式中，3D模型模块230接收如此不良品质的图像(例如，模糊、低分辨率、图像的技术问题、物品被遮住等)，使得不能提取用以生成3D模型的准确信息。在该示例中，与先前示例一样，3D模型模块230从库存3D模型中检索3D模型的一部分(或用于替换不良品质的那些图像的物品的库存图像)以使物品的缺失部分完整。在一个特定示例中，3D模型模块230使用库存3D模型的部分检索用于物品模型的物理尺寸，并且使用来自接收到的图像的颜色对添加的部分进行着色。
在某些示例中，3D模型模块230通过计算图像的傅立叶变换并且确定图像的高频数目是否低于阈值数目来确定图像是模糊的。当然，本领域技术人员可以认识到确定图像的模糊度是否高于阈值量的其他方式，并且本公开内容在这方面不受限制。
在一个示例实施方式中，模型注释模块240被配置成提供允许用户对生成的3D模型进行注释的用户界面。在一个示例中，模型注释模块240显示3D模型并且接收用户在3D模型上的给定点处的点击。然后模型注释模块240打开对话框，该对话框允许用户输入要存储并与用户点击的3D模型上的的点相关联的信息。以这种方式，模型注释模块240允许用户将文本信息分配给3D模型上的特定点。
在另一示例实施方式中，模型注释模块240询问用户他们是否想要注释3D模型。在一个示例中，模型注释模块240经由用户界面显示是/否问题，并且允许响应于用户的肯定选择对3D模型的注释。
在另一个示例中，人工环境模块250被配置成将3D模型插入3D环境。在一个示例中，物品被置于3D环境中的虚拟表中。以这种方式，物品可以在更有美感的环境中呈现而没有来自其他物品或背景图像等的干扰。这可以使物品对于查看物品的其他用户更具吸引力。在另一具体示例中，汽车的3D模型被放置在阳光明媚的弯曲道路中，该阳光明媚的弯曲道路允许另一用户在更具吸引力的状态下观看物品。
在一个示例实施方式中，人工环境模块250被配置成将物品的3D模型与人的3D模型组合。在一个示例中，人工环境模块250将眼镜的3D模型置于人的3D模型的面部上。以相同的方式，3D模型模块230制作物品的3D模型，3D模型模块230还可以至少部分地基于用户的图像来制作用户的3D模型。在另一示例实施方式中，人工环境模块250将帽子的3D模型置于(在虚拟环境中)人的3D模型的头部上。
在另一示例实施方式中，人工环境模块250裁剪出图像的包括物品的部分以移除背景图像。以这种方式，用来生成3D模型的图像严格地包括物品的图像而没有附加的图像。
在另一示例实施方式中，人工环境模块250确定要被用来生成3D模型的物品是每个图片的中心处的物品。在一个示例实施方式中，用户指示正在出售“背包”，并且人工环境模块250使用一个或更多个计算机视觉算法分析每个图像以识别图像中的每个中的“背包”。然后，对于每个图像，人工环境模块250围绕识别到的物品进行追踪以将图像中的描绘该物品的像素和图像中的不描绘该物品的任何部分的其他像素分开。以这种方式，然后，人工环境模块250更容易地生成物品的3D模型，原因是修改的图像仅包括描绘物品的像素。
在一个示例实施方式中，适配模块260被配置成根据物品的3D模型确定物品的物理尺寸。因为物品的3D模型在物理上是准确的，所以适配模块260通过数字地测量物品的3D模型来确定物品的尺寸。然后，适配模块260至少部分地基于物品的物理尺寸和理论数字边界盒子的物理尺寸来确定包围物品的最小尺寸的边界盒子。在另一示例实施方式中，适配模块260从能够包围物品的一组盒子中选择盒子。因此，适配模块260确定可以被用来运输物品的特定的盒子。
在另一示例实施方式中，适配模块260通过将衣物的3D模型与人的一部分的3D模型进行数字比较来确定衣物在人身上是否适配。在一个示例中，衣物是一双鞋子，并且适配模块260将鞋子的3D模型与人的脚的3D模型进行比较。响应于鞋子能够包围人的脚，根据3D环境中的3D模型，适配模块260通知人由3D模型代表的这些鞋子适配人。此外，响应于人的鞋子的3D模型不能包围人的脚，根据3D环境，适配模块260通知人由3D模型代表的鞋子不适配人的脚。
在一个示例实施方式中，2D图像生成模块270被配置成根据3D模型在虚拟3D环境中的特定视角生成物品的2D图像。在某些示例实施方式中，2D图像生成模块270改变3D虚拟环境中的背景纹理，并且利用改变的背景纹理生成图像的2D图像。在其他示例中，2D图像生成模块270以预定角度、视点、背景等生成物品的特定图像。
在一个示例中，2D图像生成模块270接收一组角度，从所述一组角度生成物品的2D图像。例如，用于汽车的一组角度可以包括45度处的每个角等。因此，响应于接收汽车的图像并生成汽车的3D模型，2D图像生成模块270可以以每个特定角度旋转汽车的3D模型，并生成一组2D图像。在该示例中，因为用户可能不知道更优化地描述物品的特定角度，所以用户简单地拍摄物品的图像，并且2D图像生成模块270生成一组2D图像(使用利用接收到的图像生成的3D模型)，所述一组2D图像在描绘联网市场处的列表中的物品时是更有效的。可以使用在联网市场处销售的类似物品的统计分析来确定特定角度，该特定角度包括在用于那些类似物品的列表中使用的特定角度。
制作2D图像的另一个益处包括通过发送物品的一些2D图像而不是物品的3D模型来向用户描绘物品。在另一示例中，响应于确定用户的客户端设备不能显示3D模型，2D图像生成模块270发送物品的2D图像而不是物品的3D模型。在一个特定示例实施方式中，2D图像生成模块270从远程电子数据库检索物品的一组最佳图像角度，并且从这些角度生成图像。以这种方式，当销售策略开发时，2D图像生成模块可以根据最佳角度、颜色、背景、物品场景、情况等的远程电子数据库生成可以更优化地销售物品的物品图像。
在另一示例实施方式中，2D图像生成模块270通过增加3D虚拟环境中的人工光源以及使用更亮的虚拟光源生成物品的2D图像来增加3D模型的亮度。这可以是响应于物品的2D图像低于阈值亮度，但是当然，情况不一定如此。
在一个示例实施方式中，物品验证模块280被配置成至少部分地基于根据物品的3D模型的物品的虚拟测量与根据真实物品的3D模型的真实物品的虚拟测量进行比较对物品进行验证。
在一个示例中，照片据称是真实的手提包。3D集成系统146将据称真实的手提包的3D模型(例如，使用由用户提供的图像)与手提包的真实3D模型进行比较。在某些实施方式中，3D集成系统146将来自用户的据称真实的手提包的尺寸与真实的手提包的尺寸进行比较。响应于检测到与真实3D模型的尺寸不一致的尺寸，3D集成系统确定该物品不是真实的手提包。具体地，验证模块280测量从3D模型的一个角到另一个角的距离，并且将距离与来自真实3D模型的相同角的距离进行比较。验证模块280还可以测量真实3D模型的其他预定点之间的距离，并且本公开内容在这方面不受限制。验证模块280还可以分析物品的图案或其他特征以确保真实性(例如，如果物品上的图案与真实图案不匹配，则验证模块280确定该物品不是真实的)。
在某些实施方式中，3D集成系统146将接收到的3D模型存储在3D模型数据库299中。随着时间的推移，当许多3D模型被存储时，3D集成系统146可以响应于用户期望将一个模型与另一个模型进行比较向用户提供3D模型中的一个或更多个。3D集成系统146可以允许用户以某些方式旋转或操纵3D模型，并且相应地操纵比较物品的3D模型。以这种方式，向用户呈现用于比较的两个单独的模型，但是对于模型中的每个始终显示相同的视点。
图3是描绘了根据另一示例实施方式的用于3D模型的用户界面300的图示。在该用户界面300中，向用户呈现3D模型以允许用户选择模型上的点。
作为响应，模型注释模块240为用户提供输入文本框以插入将与所选择的点相关联的文本。在一个示例中，3D模型是汽车，并且用户选择3D模型上的在汽车上的划痕的位置处的点。响应于显示文本输入框，然后，用户可以描述划痕，或者提供与汽车相关的任何其他有用信息。以这种方式，用户可以通过对物品的3D模型的点进行注释来更准确地描述物品的特征。
在该示例中，用户选择点302，并且3D集成系统146请求用户提供与所选择的点相关联的信息。在其他示例中，用户选择点304并提供附加的信息。如果需要，3D集成系统146可以从用户接收任何数目的选择以允许用户记录物品的每个特征。
图4是示出了根据一个示例实施方式的用于集成3D模型的方法的流程图。方法400中的操作可以由使用上面关于图2描述的模块的3D集成服务器146来执行。
在一个示例实施方式中，方法400开始，并且在操作412处，图像源模块220接收物品的图像。在一个示例中，图像源模块220接收经由客户端设备使用基于网络的接口上传的图像。
方法400在操作414处继续，并且3D模型模块230选择图像中的一个或更多个点。例如，3D模型模块230还可以如前所述地将图像划分为组。在某些示例中，3D模型模块230选择物品的端点、物品的角点、特征点(例如，手柄、按钮、拉链、轮子或任何其他区分点)或其他点。
方法400在操作416处继续，并且3D模型模块230对包括上述点的图像中的每个点进行三角测量以生成每组图像的深度图。方法400在操作418处继续，并且3D模型模块230将深度图组合为3D网格。方法400在操作420处继续，并且3D模型模块通过将图像投影到3D网格上的它们各自的深度图上来生成3D模型。
方法400在操作422处继续，并且3D集成系统146通过使用颜色的镜面反射特性及漫反射特性组合来自图像组的颜色来校准3D模型中的颜色。方法400在操作424处继续，并且模型注释模块240与用户交互以检索要应用于3D模型的一个或更多个注释。
在一个示例实施方式中，3D模型模块230使用用户界面使3D模型显示，并接受指示3D模型的表面上的特定位置的指示符。在一个示例中，指示符是3D模型上的特定点处的点击。在另一示例中，指示符是定义3D模型中的特定点的3D坐标。
在另一示例实施方式中，3D注释模块240接收要应用于3D模型的一个或更多个注释。在一个示例中，注释包括关于对物品的损坏的评论。在该示例中，3D注释模块240针对提供的注释中的每个在物品的3D表面上添加点。响应于用户选择点，3D注释模块240显示与该点相关联的注释。在一个示例中，3D注释模块240打开文本框并用文本注释数据填充文本框。
在一个示例实施方式中，3D注释模块240将注释添加到物品的3D模型。在一个示例中，3D注释模块240通过提供注释的位置(在3D模型处)并将注释虚拟地附接到与注释相关联的特定点来将注释数据并入3D模型。
在另一示例实施方式中，3D集成系统146将URL返回到带注释的3D模型，使得网络客户端在查看显示该物品的网页时下载3D模型。在该示例中，用户提供3D模型上的注释，而另一用户可以查看3D虚拟环境中的包括注释的该物品。
图5是示出了根据一个示例实施方式的用于集成3D模型的另一方法500的流程图。方法500中的操作由使用上面关于图2描述的模块的3D集成服务器146来执行。
在一个示例实施方式中，方法500开始，并且在操作512处，图像源模块220接收物品的图像。在一个示例中，图像源模块220通过请求位于远程服务器处的位于特定目录中的图像来检索存储在远程服务器处的图像。
方法500在操作514处继续，并且3D模型模块230使用物品的图像并且如方法400的操作414至422中所述生成图像的3D模型。方法500在操作516处继续并且3D模型模块230查询3D模型数据库299以确定物品或基本类似的物品的3D模型当前是否存储在3D模型数据库299中。
在一个示例实施方式中，基本类似包括3D模型数据库299中的与该物品具有相同的制作和模型的物品。例如，响应于生成烤箱的一部分的3D模型，基本类似的烤箱包括由同一公司制造且具有相同型号的其他烤箱。
3D模型模块230查询3D模型数据库299以确定物品的基本类似版本是否已经在数据库299中。响应于不存在基本类似的3D模型，3D模型模块230将生成的3D模型添加到3D模型数据库299。在其他实施方式中，3D模型模块230还包括索引信息、物品特性例如但不限于大小、颜色、颜色图案、物品条件等。在其他实施方式中，基本类似的物品包括具有相同的制作和模型以及包括相同条件(例如，不良、破损、平均水平、优异、全新等)的物品。
方法500在操作518处继续，并且3D模型模块230接收对一组模型的请求。在一个示例中，该组模型包括用于比较的两个类似的模型。在一个具体的非限制性示例中，该组模型包括两个不同的微波炉。作为响应，3D模型模块230返回3D模型数据库299中的所请求的3D模型。
图6是示出了根据另一示例实施方式的用于集成3D模型的方法600的流程图。方法600中的操作可以由使用上面关于图2描述的模块的3D集成系统146来执行。
在一个示例实施方式中，方法600开始，并且在操作612处，图像源模块220如本文所述地检索物品的图像。方法600在操作614处继续，并且3D模型模块230使用物品的图像并且如方法400的操作414至422中所述生成图像的3D模型。
方法600在操作616处继续，并且适配模块260识别包围物品的最小边界运输容器。在一个示例中，响应于物品超过4英尺长，但是仅6英寸深和宽，适配模块260识别出超过4英尺长、超过6英寸深且超过6英寸宽的盒子。此外，适配模块260识别包围物品的可用的最小盒子。
在一个示例中，适配模块260使用盒子的物理尺寸生成最大盒子的3D模型，将物品的3D模型置于盒子的3D模型内的中心点处，然后以不同的角度(例如，以经度的30度间隔和纬度的30度间隔)对物品的3D模型进行定向。响应于取向中的任何一个完全被盒子包围，适配模块260选择下一个较小的盒子。
然后，适配模块260将相同的步骤应用于下一个较小的盒子。同样，如果物品(在任何取向上)适配盒子内部，则适配模块260选择下一个较小的盒子。响应于没有取向使物品完全包围在盒子中，适配模块260返回到完全包围物品的最后一个盒子。然后，适配模块260确定该前一盒子是可以完全包围物品(在先前包围盒子的正确取向上)的最小盒子。因此，适配模块260确定包围物品所需的容器的尺寸。
方法600在操作616处继续，适配模块260指示使用识别到的盒子或运输容器运输物品。在一个示例中，适配模块260至少部分地基于未由物品填充的空间的量来识别盒子、填充材料的量，并将盒子、填充材料、目的地地址发送到根据指导包装物品的运输服务。在一个示例中，通过从所选择的容器的体积中减去由物品占据的体积来确定空间的量。
在其他实施方式中，适配模块260同时将多个物品的运输指导发送到运输服务并总结运输容器的要求，使得运输服务可以证实运输容器的充足供应。
图7是示出了根据一个示例实施方式的用于集成3D模型的方法700的流程图。方法700中的操作由使用上面关于图2描述的模块的3D集成系统146来执行。
在一个示例实施方式中，方法700开始，并且在操作712处，图像源模块220检索物品的图像。方法700在操作714处继续，并且3D模型模块230使用物品的图像并且如方法400的操作414至422中所述生成图像的3D模型。
方法700在操作716处继续，并且适配模块260检索用户的一部分的图像，并且3D模型模块230使用用户的该部分的图像并且如方法400的操作414至422中所述生成用户的该部分的3D模型。在一个示例中，适配模块260请求用户提供用户的手的一组图像。作为响应，3D模型模块230生成用户的手的3D模型。
方法700在操作718处继续，并且适配模块260通过将虚拟环境中的物品的3D模型与人的该部分的3D模型组合来确定(具有关于物品的物理尺寸和用户的该部分的物理尺寸的信息)物品是否适配用户的该部分。然后，适配模块260操纵物品或人的该部分的3D模型以确定物品是否如先前所述适配人的该部分。
在一个示例实施方式中，适配模块260将手套的3D模型和人的手的3D模型进行组合，操纵两个3D模型以尝试使人的手在手套内部移动(在虚拟3D环境中)。响应于该物品能够包围人的该部分，方法700继续操作，并且适配模块260通知人：物品适配。响应于物品不能包围人的该部分，适配模块260通知人：该物品不适配人的该部分。
图8是示出了根据一个示例实施方式的用于集成3D模型的另一方法800的流程图。方法800中的操作可以由使用上面关于图2描述的模块的3D集成系统146来执行。
在一个示例实施方式中，方法800开始，并且在操作812处，图像源模块220检索物品的图像。当用户操纵用户接口以提交图像时，用户接口可以请求用户以不同方式提供物品的图像。在一个示例中，用户接口被配置成请求不同角度的物品的20个或更多个图像，从而提供足够多的不同视点的图像以生成物品的3D模型。方法800在操作814处继续，并且3D模型模块230使用物品的图像并且如方法400的操作414至422中所述生成图像的3D模型。
方法800在操作816处继续，并且物品验证模块280将生成的物品的3D模型与物品的真实版本的3D模型进行比较。在一个示例中，用户将物品描述为真实的RolexTM手表。然后，物品验证模块280测量据称真实的物品的各个点或特征之间的距离与真实的RolexTM手表的类似距离。
在一个示例实施方式中，物品验证模块280测量在手表的面上的从位于“1”位置处的条到位于“7”位置处的条的距离。物品验证模块280还可以测量各个数字位置处的条的尺寸、手表的面上的图标尺寸、颜色相似度、颜色图案、带尺寸或物品(例如，据称真实的手表)的其他物理特性。
方法800在操作818处继续，并且物品验证模块280确定据称真实的物品的3D模型与已知真实的物品的3D模型之间是否存在差异。
方法800在操作820处继续，并且物品验证模块280通知用户在任何测量中是否存在多于5％的阈值差。类似地，如果在所有测量中存在小于5％的阈值差，则物品验证模块280声明该物品是真实的。当然，可以使用其他阈值，并且本公开内容在这方面不受限制。
在另一示例实施方式中，物品验证模块280检索预定测量的列表以对物品进行验证。例如，响应于物品是据称真实的滑板(例如，特定品牌的滑板)，物品验证模块280通过查询网络连接上的远程数据库来检索要测量的尺寸的列表。响应于测量与滑板的已知真实版本一致，物品验证模块280声明该滑板是真实的。
机器和软件架构
在一些实施方式中，在机器和相关联的软件架构的上下文中实现结合图1至图8描述的模块、方法、应用等。以下部分描述适于与所公开的实施方式一起使用的代表性软件架构和机器(例如，硬件)架构。
软件架构与硬件架构结合使用以创建针对特定目的而定制的设备和机器。例如，与特定软件架构耦接的特定硬件架构将创建移动设备例如移动电话、平板设备等。稍有不同的硬件和软件架构可能产生用在“物联网”中的智能设备。而另一种组合产生用在云计算架构内的服务器计算机。这里并未呈现这样的软件和硬件架构的所有组合，因为本领域技术人员可以容易地理解如何在与本文所包含的公开内容不同的上下文中实现本发明的主题。
模块、组件和逻辑电路
某些实施方式在本文中被描述为包括逻辑电路或多个部件、模块或机构。模块可以构成软件模块(例如，在机器可读介质上包含的代码)或硬件模块。“硬件模块”是能够执行某些操作的有形单元，并且可以以某种物理方式来配置或布置。在各种示例实施方式中，一个或更多个计算机系统(例如，独立计算机系统、客户端计算机系统或服务器计算机系统)或者计算机系统中的一个或更多个硬件模块(例如，处理器或处理器组)可以通过软件(例如，应用或应用部分)被配置为进行操作以执行如本文所描述的某些操作的硬件模块。
在一些实施方式中，硬件模块可以机械地、电子地或以其任何合适的组合来实现。例如，硬件模块可以包括永久被配置成执行某些操作的专用电路或逻辑电路。例如，硬件模块可以是专用处理器例如现场可编程门阵列(FPGA)或专用集成电路(ASIC)。硬件模块还可以包括由软件临时配置成执行某些操作的可编程逻辑电路或电路。例如，硬件模块可以包括由通用处理器或其他可编程处理器执行的软件。一旦由这样的软件配置，则硬件模块变为被唯一地定制成执行配置的功能的特定的机器(或机器的特定部件)而不再是通用处理器。将理解的是，可以通过成本和时间考虑来推动在专用且永久配置的电路中或在临时配置的电路(例如，由软件进行配置)中机械地实现硬件模块的决策。
因此，短语“硬件模块”应当被理解成包含有形实体，即为被物理构造、永久配置(例如，硬连线)或临时配置(例如，编程)成以某种方式操作或者执行本文所描述的某些操作的实体。如本文所使用的，“硬件实现的模块”指的是硬件模块。在考虑到硬件模块被临时配置(例如，编程)的实施方式的情况下，硬件模块中的每个无需在任一时刻处被配置或实例化。例如，在硬件模块包括由软件配置成为专用处理器的通用处理器的情况下，通用处理器可以在不同时间处被配置为分别不同的专用处理器(例如，包括不同的硬件模块)。软件相应地配置一个或更多个特定处理器以例如在一个时刻处构成特定硬件模块并且在不同的时刻处构成不同的硬件模块。
硬件模块可以向其他硬件模块提供信息并且可以接收来自其他硬件模块的信息。因此，所描述的硬件模块可以被视为通信地耦接。在同时存在多个硬件模块的情况下，可以通过在硬件模块中的两个或更多个之间或之中的信号传输(例如，通过适当的电路和总线)来实现通信。在多个硬件模块在不同时间处被配置或实例化的实施方式中，可以例如通过将信息存储在多个硬件模块访问的存储器结构中并且在该存储器结构中检索信息来实现这样的硬件模块之间的通信。例如，一个硬件模块可以执行操作并且将该操作的输出存储在其通信上耦接的存储器设备中。另外的硬件模块然后可以在随后的时间处访问存储器设备以检索和处理所存储的输出。硬件模块还可以启动与输入装置或输出装置的通信，并且可以对资源(例如，信息的集合)进行操作。
在本文中描述的示例方法的各种操作可以至少部分地由临时地配置(例如，由软件)或永久地配置成执行相关操作的一个或更多个处理器来执行。无论是临时配置还是永久配置，这样的处理器可以构成进行操作以执行本文描述的一个或更多个操作或功能的处理器实现的模块。如本文所使用的，“处理器实现的模块”指的是使用一个或更多个处理器实现的硬件模块。
类似地，本文描述的方法可以是至少部分处理器实现的，其中，一个或更多个特定处理器是硬件的示例。例如，方法的操作中的至少一些操作可以由一个或更多个处理器或者处理器实现的模块来执行。此外，一个或更多个处理器还可以进行操作以支持“云计算”环境中的相关操作的执行或操作为“软件即服务”(SaaS)。例如，操作中的至少一些操作可以由一组计算机(作为包括处理器的机器的示例)执行，其中这些操作能够经由网络(例如，因特网)并且经由一个或更多个适当的接口(例如，API)访问。
某些操作的执行可以被分布在处理器之间，所述处理器不仅驻留在单个机器内，还被跨多个机器部署。在一些示例实施方式中，处理器或处理器实现的模块可以位于单个地理位置中(例如，在家庭环境、办公室环境或服务器群内)。在其他示例实施方式中，处理器或处理器实现的模块可以跨多个地理位置分布。
图9是示出了根据一些示例实施方式的可以安装在机器上的软件架构900的示例的框图。软件架构900可以与本文描述的各种硬件架构结合使用。图9仅是软件架构的非限制性示例，并且应当理解的是，可以实现许多其他架构以有助于本文描述的功能。软件架构900可以在诸如图16的机器1000的硬件上执行，该硬件包括处理器1010、存储器1030和I/O部件1050等。代表性硬件层904被示出并且可以表示例如图10的机器1000。代表性硬件层904包括具有相关联的可执行指令908的一个或更多个处理单元906。可执行指令908表示软件架构902的可执行指令，包括图1至图8的方法、模块等的实现。硬件层904还包括存储器和/或存储模块910，该存储器和/或存储模块910也具有可执行指令908。硬件层904还可以包括表示硬件层904的任何其他硬件的如由912指示的其他硬件，例如作为机器1000的一部分示出的其他硬件。
在图9的示例架构中，软件902可以概念化为层的堆叠，其中每个层提供特定功能。例如，软件902可以包括诸如操作系统914、库916、框架/中间件918、应用99和表示层922的层。在操作上，这些层中的应用920和/或其他部件可以通过软件堆栈来激发API调用924，并且响应于API调用924来接收被示出为消息926的响应、返回值等。示出的层本质上是代表性的，并且并非所有软件架构都具有所有层。例如，一些移动或专用操作系统可能不提供框架/中间件层918，而其他的可以提供这样的层。其他软件架构可以包括附加的层或不同的层。
操作系统914可以管理硬件资源并且提供公共服务。操作系统914可以包括例如内核928、服务930和驱动器932。内核928可以用作硬件与其他软件层之间的抽象层。例如，内核928可以负责存储器管理、处理器管理(例如，调度)、部件管理、联网、安全设置等。服务930可以为其他软件层提供其他公共服务。驱动器932可以负责控制底层硬件或者与底层硬件接口。例如，取决于硬件配置，驱动器932可以包括显示器驱动器、相机驱动器、驱动器、闪存驱动器、串行通信驱动器(例如，通用串行总线(USB)驱动器)、驱动器、音频驱动器、电源管理驱动器等。
库916可以提供可以由应用920和/或其他部件和/或层利用的公共基础架构。在一个特定实施方式中，3D集成系统146的各种模块被实现为应用920。与和底层操作系统914功能(例如，内核928、服务930和/或驱动器932)直接接口相比，库916通常提供允许其他软件模块以更容易的方式执行任务的功能。库916可以包括系统库934(例如，C标准库)，该系统库934可以提供诸如存储器分配功能、字符串操作功能、数学功能等的功能。另外，库916可以包括API库936，例如媒体库(例如，用于支持诸如MPEG4、H.264、MP3、AAC、AMR、JPG、PNG的各种媒体格式的呈现和操作的库)、图形库(例如，可以被用来在显示器上呈现二维和/或三维图形内容的OpenGL框架)、数据库库(例如，可以提供各种关系数据库功能的SQLite)、web库(例如，可以提供web浏览功能的WebKit)等。库916还可以包括各种其他库938以向应用920和其他软件部件/模块提供许多其他API。
框架918(有时也被称为中间件)可以提供可以由应用920和/或其他软件部件/模块利用的更高级的公共基础架构。例如，框架918可以提供各种图形用户界面(GUI)功能、高级资源管理、高级定位服务等。框架918可以提供可以由应用920和/或其他软件部件/模块利用的广泛的其他API，其中的一些可以专用于特定操作系统或平台。在一个示例实施方式中，3D集成系统146中的至少一部分被实现为中间件。在一个示例中，3D模型模块230被实现为中间件并且可以由任何应用920访问。
应用920包括内置应用940和/或第三方应用942。代表性内置应用940的示例可以包括但不限于联系人应用、浏览器应用、书籍阅读器应用、定位应用、媒体应用、消息接发应用和游戏应用或者其他应用等。第三方应用942可以包括内置应用中的任何一个以及各种其他应用。在特定示例中，第三方应用942(例如，由特定平台的除了供应商以外的实体使用AndroidTM或iOSTM软件开发工具包(SDK)开发的应用)可以是在移动操作系统例如iOSTM、AndroidTM、Phone或其他移动操作系统上运行的移动软件。在该示例中，第三方应用942可以激发由诸如操作系统914的移动操作系统提供的API调用924以有助于本文描述的功能。
应用920可以利用内置操作系统功能(例如，内核928、服务930和/或驱动器932)、库(例如，系统934、API 936和其他库938)、框架/中间件918来创建用户接口以与系统的用户交互。替选地或另外地，在一些系统中，与用户的交互可以通过表示层例如表示层944进行。在这些系统中，应用/模块“逻辑电路”可以与应用/模块的与用户交互的方面分离。
一些软件架构利用虚拟机。在图9的示例中，这由虚拟机948示出。虚拟机创建软件环境，在该软件环境中应用/模块可以像它们在硬件机器(例如图10的机器)上执行一样执行。虚拟机由主机操作系统(图9中的操作系统914)托管，并且通常，但不总是具有虚拟机监视器946，该虚拟机监视器946管理虚拟机的操作以及与主机操作系统(即操作系统914)的接口。软件架构在虚拟机例如操作系统950、库952、框架/中间件954、应用956和/或表示层958内执行。在虚拟机948内执行的软件架构的这些层可以与先前描述的相应层相同或可以不同。
示例机器架构和机器可读介质
图10是示出了根据一些示例实施方式的能够从机器可读介质(例如，机器可读存储介质)读取指令并执行本文所讨论的方法中的任何一种或更多种的机器1000的部件的框图。具体地，图10示出了计算机系统的示例形式的机器1000的图形表示，在该计算机系统内可以执行用于使机器1000执行本文所讨论的方法中的任何一种或更多种的指令1016(例如，软件、程序、应用、小应用程序、应用程序或其他可执行代码)。
例如，该指令可以使机器执行图4至图8的流程图。另外地或替选地，指令可以实现图2中描绘的模块。具体地，指令1016可以实现图像源模块220、3D模型模块230、模型注释模块240、人工环境模块250、适配模块260、2D图像生成模块270和物品验证模块280的各种功能。
指令将通用的未编程的机器变换为特定机器，该特定机器被编程为以所描述的方式执行所描述和示出的功能。在替选实施方式中，机器1000作为独立的装置操作或者可以耦接(例如，联网)到其他机器。在联网部署中，机器1000可以在服务器客户端网络环境中以服务器机器或客户端机器的容量操作，或者作为对等(或分布式)网络环境中的对等机器操作。机器1000可以包括但不限于服务器计算机、客户端计算机、个人计算机(PC)、平板计算机、膝上型计算机、上网本、机顶盒(STB)、PDA、娱乐媒体系统、蜂窝电话、智能电话、移动装置、可穿戴装置(例如，智能手表)、智能家居装置(例如，智能家用电器)、其他智能装置、网络装置、网络路由器、网络交换机、网络桥接器或能够顺序地或以其他方式执行指定要由机器1000采取的动作的指令1016的任何机器。此外，虽然仅示出了单个机器1000，但是术语“机器”应还被视为包括机器1000的集合，所述机器1000的集合单独地或共同地执行指令1016以执行本文所讨论的方法中的任何一种或更多种。
机器1000可以包括处理器1010、存储器1030和I/O部件1050，处理器1010、存储器1030和I/O部件1050可以被配置成例如经由总线1002彼此通信。在示例实施方式中，处理器1010(例如，中央处理单元(CPU)、简化指令集计算(RISC)处理器、复杂指令集计算(CISC)处理器、图形处理单元(GPU)、数字信号处理器(DSP)、ASIC、射频集成电路(RFIC)、另一处理器或其任何合适的组合)可以包括例如可以执行指令1016的处理器1012和处理器1014。术语“处理器”旨在包括可以包含两个或更多个独立处理器(有时被称为“核”)的多核处理器，所述两个或更多个独立处理器(有时被称为“核”)可以同时执行指令。虽然图10示出了多个处理器，但是机器1000可以包括具有单核的单个处理器、具有多核的单个处理器(例如，多核处理)、具有单核的多个处理器、具有多核的多个处理器或其任意组合。
存储器/存储装置1030可以包括诸如主存储器或其他存储装置的存储器1032以及存储单元1036，这两者都能够例如经由总线1002由处理器1010访问。存储单元1036和存储器1032存储实施本文中描述的方法或功能中的任何一个或更多个的指令1016。指令1016还可以在其由机器1000执行期间全部地或部分地驻留在存储器1032内、在存储单元1036内、在处理器1010中的至少一个内(例如，在处理器的高速缓冲存储器内)或其任何合适的组合。因此，存储器1032、存储单元1036和处理器1010的存储器是机器可读介质的示例。
如本文中使用的，“机器可读介质”是指能够临时地或永久地存储指令和数据的设备，并且可以包括但不限于：随机存取存储器(RAM)、只读存储器(ROM)、缓冲存储器、闪存、光学介质、磁性介质、高速缓冲存储器、其他类型的存储装置(例如，可擦除可编程只读存储器(EEPROM))和/或其任何合适的组合。术语“机器可读介质”应被认为包括能够存储指令1016的单个介质或多个介质(例如，集中式或分布式数据库或者相关联的高速缓冲存储器和服务器)。术语“机器可读介质”还应被视为包括下述任何介质或多个介质的组合，所述介质能够存储由机器(例如，机器1000)执行的指令(例如，指令1016)，使得所述指令在由机器1000的一个或更多个处理器(例如，处理器1010)执行时使机器1000执行本文中描述的方法中的任一种或更多种方法。因此，“机器可读介质”指的是单个存储装置或设备以及包括多个存储装置或设备的“基于云”的存储系统或存储网络。术语“机器可读介质”不包括信号本身。
I/O部件1050可以包括各种部件以接收输入、提供输出、产生输出、发送信息、交换信息、捕获测量结果等。包括在特定机器中的特定I/O部件1050将取决于机器的类型。例如，诸如移动电话的便携式机器将可能包括触摸输入装置或其他这样的输入机构，而无头服务器机器将可能不包括这样的触摸输入装置。将理解的是，I/O部件1050可以包括在图10中未示出的许多其他部件。I/O部件1050仅为了简化以下的讨论而根据功能被分组，并且该分组决不是限制性的。在各种示例实施方式中，I/O部件1050可以包括输出部件1052和输入部件1054。输出部件1052可以包括视觉部件(例如，诸如等离子显示板(PDP)、发光二极管(LED)显示器、液晶显示器(LCD)、投影仪或阴极射线管(CRT)的显示器)、听觉部件(例如，扬声器)、触觉部件(例如，振动马达、阻力机构)、其他信号发生器等。输入部件1054可以包括字母数字输入部件(例如，键盘、配置成接收字母数字输入的触摸屏、光电键盘或其他字母数字输入部件)、基于点的输入部件(例如，鼠标、触摸板、轨迹球、操纵杆、运动传感器或其他指向仪器)、触觉输入部件(例如，物理按钮、提供触摸或触摸手势的位置和/或力的触摸屏或其他触觉输入部件)、音频输入部件(例如，麦克风)等。
在另外的示例实施方式中，I/O部件1050可以包括各种其他部件中的生物识别部件1056、运动部件1058、环境部件1060或位置部件1062。例如，生物识别部件1056可以包括用于检测表达(例如，手表达、面部表情、声音表达、身体姿势或眼睛跟踪)、测量生物信号(例如，血压、心率、体温、出汗或脑波)、识别人(例如，声音识别、视网膜识别、面部识别、指纹识别或基于脑电图的识别)等的部件。运动部件1058可以包括加速度传感器部件(例如，加速度计)、重力传感器部件、旋转传感器部件(例如，陀螺仪)等。环境部件1060可以包括例如照明传感器部件(例如，光度计)、温度传感器部件(例如，检测环境温度的一个或更多个温度计)、湿度传感器部件、压力传感器部件(例如，气压计)、听觉传感器部件(例如，检测背景噪声的一个或更多个麦克风)、接近传感器部件(例如，检测附近物体的红外传感器)、气体传感器(例如，为了安全而检测危险气体的浓度或者测量大气中污染物的气体检测传感器)或者可以提供与周围物理环境对应的指示、测量或信号的其他部件。位置部件1062可以包括定位传感器部件(例如，GPS接收器部件)、海拔高度传感器部件(例如，检测可以得到海拔高度的气压的高度计或气压计)、取向传感器部件(例如，磁力计)等。
可以使用各种各样的技术来实现通信。I/O部件1050可以包括通信部件1064，通信部件1064能够进行操作以经由耦接1082和耦接1072分别将机器1000耦接到网络1080或设备1070。例如，通信部件1064可以包括网络接口部件或用以与网络1080接口的其他合适的设备。在其他示例中，通信部件1064可以包括有线通信部件、无线通信部件、蜂窝通信部件、近场通信(NFC)部件、部件(例如，低功耗)、部件和经由其他形式提供通信的其他通信部件。设备1070可以是另一机器或各种外围设备中的任何一个外围设备(例如，经由USB耦接的外围设备)。
此外，通信部件1064可以检测标识符或包括能够进行操作以检测标识符的部件。例如，通信部件1064可以包括射频识别(RFID)标签阅读器部件、NFC智能标签检测部件、光学阅读器部件(例如，用于检测诸如通用产品码(UPC)条形码的一维条形码、诸如快速响应(QR)码、Aztec码、Data Matrix、Dataglyph、MaxiCode、PDF417、Ultra Code、UCC RSS-2D条形码的多维条形码以及其他光学码的光学传感器)或听觉检测部件(例如，用于识别标记的音频信号的麦克风)。此外，可以经由通信部件1064得到各种信息，例如经由因特网协议(IP)地理位置的位置、经由信号三角测量的位置、经由检测可以指示特定位置的NFC信标信号的位置等。
传输介质
在各种示例实施方式中，网络1080中的一个或更多个部分可以是无线自组网络、内联网、外联网、VPN、LAN、WLAN、WAN、WWAN、MAN、因特网、因特网的一部分、PSTN的一部分、普通老式电话服务(POTS)网络、蜂窝电话网络、无线网络、网络、另一类型的网络或者两个或更多个这样的网络的组合。例如，网络1080或网络1080的一部分可以包括无线或蜂窝网络，并且耦接1082可以是码分多址(CDMA)连接、全球移动通信系统(GSM)连接或其他类型的蜂窝或无线耦接。在该示例中，耦接1082可以实现诸如以下的各种类型的数据传输技术中的任意一种数据传输技术：单载波无线电传输技术(1xRTT)、演进数据优化(EVDO)技术、通用分组无线电服务(GPRS)技术、增强型数据速率GSM演进(EDGE)技术、包括3G的第三代合作伙伴计划(3GPP)、第四代无线(4G)网络、通用移动通讯系统(UMTS)、高速分组接入(HSPA)、全球微波接入互操作性(WiMAX)、长期演进(LTE)标准、由各种标准设置组织定义的其他数据传输技术、其他长距离协议或其他数据传输技术。
可以经由网络接口设备(例如，包括在通信部件1064中的网络接口部件)使用传输介质并利用许多公知的传输协议中的任何一个(例如，超文本传输协议(HTTP))来在网络1080上发送或接收指令1016。类似地，可以经由到设备1070的耦接1072(例如，对等耦接)使用传输介质来发送或接收指令1016。术语“传输介质”应被视为包括能够存储、编码或携载用于由机器1000执行的指令1016的任何无形介质，并且包括数字或模拟通信信号或其他无形介质以有助于这样的软件的通信。
语言
在整个说明书中，多个实例可以实现被描述为单个实例的部件、操作或结构。虽然一个或更多个方法中的各个操作被示出和描述为单独的操作，但是各个操作中的一个或更多个可以同时执行，并且不要求以所示的顺序执行操作。在示例配置中作为单独的部件呈现的结构和功能可以被实现为组合的结构或部件。类似地，作为单个部件呈现的结构和功能可以被实现为单独的部件。这些和其他变化、修改、添加和改进都落入本文的主题的范围内。
尽管已经参照具体示例实施方式描述了本发明主题的概述，但是在不脱离本公开内容的实施方式的较宽泛的范围的情况下，可以对这些实施方式进行各种修改和改变。仅仅为了方便，可以在本文中通过术语“发明”来单独地或共同地引用本发明主题的这样的实施方式，并且如果事实上公开了不止一个公开内容或发明构思，则并不旨在自愿地将本申请的范围限制为任何单个公开内容或发明构思。
本文中示出的实施方式被足够详细地描述以使得本领域技术人员能够实践所公开的教示。可以使用其他实施方式并且可以从中得到其他实施方式，使得可以在不脱离本公开内容的范围的情况下进行结构和逻辑的替换和改变。因此，具体实施方式不以限制性意义被采用，并且各种实施方式的范围仅通过所附权利要求以及被称为这样的权利要求的等同物的全部范围来限定。
如本文中使用的，术语“或”可以被解释为包含性或排他性意义。此外，可以为在本文中描述为单个实例的资源、操作或结构提供多个实例。另外，各种资源、操作、模块、引擎和数据存储之间的边界在某种程度上是任意的，并且在特定说明性配置的上下文中示出了特定操作。功能的其他分配被构想并且可以落入本公开内容的各种实施方式的范围内。通常，在示例配置中呈现为单独的资源的结构和功能可以实现为组合的结构或资源。类似地，呈现为单个资源的结构和功能可以被实现为单独的资源。这些和其他变化、修改、添加和改进落入如由所附权利要求表示的本公开内容的实施方式的范围内。因此，说明书和附图应被视为是说明性的而非限制性的意义。

Claims (20)

1.一种计算机实现的方法，包括：
经由网络接口接收物品的多个二维图像；
选择在所述图像中的两个或更多个图像中描绘的所述物品上的特定点；
对所述特定点进行三角测量以生成多个深度图；
通过组合所述多个深度图来生成三维网格；
通过将所述多个图像投影到使用所述特定点的所述三维网格上来生成所述物品的三维模型；
使用所述多个图像中的颜色的镜面反射特性及漫反射特性来校准在所述三维模型中使用的颜色；以及
提供用户界面，所述用户界面允许用户选择所述三维模型上的一个或更多个用户点并提供与所选择的用户点相关联的附加信息。
2.根据权利要求1所述的方法，还包括确定所述多个图像之一缺乏足够品质，以及检索所述物品的库存图像以替换缺乏足够品质的所述图像，其中，所述库存图像在校准颜色中不被使用。
3.根据权利要求1所述的方法，还包括确定所述多个图像没有描绘所述物品的特定角度，以及检索该角度的所述物品的库存图像以用来生成所述三维模型，其中，所述库存图像在校准颜色中不被使用。
4.根据权利要求1所述的方法，还包括呈现包括所生成的三维模型的多个三维模型，以及操纵所述多个三维模型中的每个以保持它们相对于正被所述用户修改的三维模型之一有类似的取向。
5.根据权利要求1所述的方法，还包括：
通过使用由所述物品的所述三维模型确定的所述物品的尺寸选择能够包围所述物品的能够获得的最小运输容器，来选择用于所述物品的运输容器；以及
通过提供包括所选择的运输容器的给运输承运商的指示来指导所述物品的运输。
6.根据权利要求5所述的计算机实现的方法，还包括：根据所述三维模型，根据所述运输容器内的未被所述物品占据的空间的量来指示要使用的填充材料的量。
7.根据权利要求1所述的计算机实现的方法，还包括：
接收用户的一部分的多个图像；
生成所述用户的所述一部分的三维模型；
在三维环境中将所述物品的三维模型与所述用户的所述一部分的三维模型组合；
通过在所述三维环境中操纵所述三维模型以确定所述用户的所述一部分是否适配所述物品内部，来确定所述物品是否适配所述用户的所述一部分；以及
通知所述用户所述物品是否适配所述用户的所述一部分。
8.根据权利要求1所述的计算机实现的方法，还包括：
检索所述物品的真实三维表示；
将所述物品的三维模型与类似物品的真实三维表示进行比较；以及
响应于所述物品的三维模型的尺寸与所述类似物品的真实三维表示的尺寸一致，指示所述物品的真实性。
9.一种系统，包括：
机器可读存储器，在所述机器可读存储器上存储有指令，所述指令当由处理器执行时使所述系统执行操作，所述操作包括：
经由网络接口接收物品的多个图像；
选择在所述图像中的两个或更多个图像中描绘的所述物品上的特定点；
对所述特定点进行三角测量以生成多个深度图；
通过组合所述多个深度图来生成三维网格；
通过将所述多个图像投影到使用所述特定点的所述三维网格上来生成所述物品的三维模型；
使用所述多个图像中的颜色的镜面反射特性和漫反射特性来校准在所述三维模型中使用的颜色；以及
提供用户界面，所述用户界面允许用户选择所述三维模型上的一个或更多个用户点并提供与所选择的用户点相关联的附加信息。
10.根据权利要求9所述的系统，其中，所述操作还包括在所述图像中的每个中围绕所述物品进行追踪以去除每个图像中的不描绘所述物品的一部分的像素。
11.根据权利要求9所述的系统，其中，所述操作还包括确定数据库是否包括类似物品的三维模型，以及响应于所述数据库不包括所述类似物品，将所生成的三维模型上传到所述数据库。
12.根据权利要求9所述的系统，其中，所述操作还包括呈现包括所生成的三维模型的多个三维模型，以及操纵所述多个三维模型中的每个以保持它们相对于正被所述用户修改的三维模型之一有类似的取向。
13.根据权利要求9所述的系统，其中，所述操作还包括：
通过使用由所述物品的所述三维模型确定的所述物品的尺寸选择能够包围所述物品的能够获得的最小运输容器，来选择用于所述物品的运输容器；以及
通过提供包括所选择的运输容器的给运输承运商的指示来指导所述物品的运输。
14.根据权利要求9所述的系统，其中，所述操作还包括：
接收用户的一部分的多个图像；
生成所述用户的所述一部分的三维模型；
在三维环境中将所述物品的三维模型与所述用户的所述一部分的三维模型组合；
通过在所述三维环境中操纵所述三维模型以确定所述用户的所述一部分是否适配所述物品内部，来确定所述物品是否适配所述用户的所述一部分；以及
通知所述用户所述物品是否适配所述用户的所述一部分。
15.根据权利要求9所述的系统，其中，所述操作还包括：
检索所述物品的真实三维表示；
将所述物品的三维模型与类似物品的真实三维表示进行比较；以及
响应于所述物品的三维模型的尺寸与所述类似物品的真实三维表示的尺寸一致，指示所述物品的真实性。
16.一种机器可读硬件介质，在所述机器可读硬件介质上存储有指令，所述指令当由机器的一个或更多个处理器执行时使所述机器执行操作，所述操作包括：
经由网络接口接收物品的多个图像；
选择在所述图像中的两个或多个中描绘的在所述物品上的特定点；
对所述特定点进行三角测量以生成多个深度图；
通过组合所述多个深度图来生成三维网格；
通过将所述多个图像投影到使用所述特定点的所述三维网格上来生成所述物品的三维模型；
使用所述多个图像中的颜色的镜面反射特性及漫反射特性来校准在所述三维模型中使用的颜色；以及
提供用户界面，所述用户界面允许用户选择所述三维模型上的一个或更多个用户点并提供与所选择的用户点相关联的附加信息。
17.根据权利要求16所述的机器可读硬件介质，其中，所述操作还包括：
通过使用由所述物品的所述三维模型确定的所述物品的尺寸选择能够包围所述物品的能够获得的最小运输容器，来选择用于所述物品的运输容器；以及
通过提供包括所选择的运输容器的给运输承运商的指示来指导所述物品的运输。
18.根据权利要求16所述的机器可读硬件介质，其中，所述操作还包括：
接收用户的一部分的多个图像；
生成所述用户的所述一部分的三维模型；
在三维环境中将所述物品的三维模型与所述用户的所述一部分的三维模型组合；
通过在所述三维环境中操纵所述三维模型以确定所述用户的所述一部分是否适配所述物品内部，来确定所述物品是否适配所述用户的所述一部分；以及
通知所述用户所述物品是否适配所述用户的所述一部分。
19.根据权利要求16所述的机器可读硬件介质，其中，所述操作还包括：
检索所述物品的真实三维表示；
将所述物品的三维模型与类似物品的真实三维表示进行比较；以及
响应于所述物品的三维模型的尺寸与所述类似物品的真实三维表示的尺寸一致，指示所述物品的真实性。
20.根据权利要求16所述的机器可读硬件介质，其中，所述操作还包括：
接收用户的一部分的多个图像；
生成所述用户的所述一部分的三维模型；
在三维环境中将所述物品的三维模型与所述用户的所述一部分的三维模型组合；
通过在所述三维环境中操纵所述三维模型以确定所述用户的所述一部分是否适配所述物品内部，来确定所述物品是否适配所述用户的所述一部分；以及
通知所述用户所述物品是否适配所述用户的所述一部分。
CN201880023721.0A 2017-03-08 2018-03-02 3d模型的集成 Active CN110494864B (zh)

Applications Claiming Priority (5)

Application Number Priority Date Filing Date Title
US201762468748P 2017-03-08 2017-03-08
US62/468,748 2017-03-08
US15/709,997 2017-09-20
US15/709,997 US10586379B2 (en) 2017-03-08 2017-09-20 Integration of 3D models
PCT/US2018/020629 WO2018164949A1 (en) 2017-03-08 2018-03-02 Integration of 3d models

Publications (2)

Publication Number Publication Date
CN110494864A true CN110494864A (zh) 2019-11-22
CN110494864B CN110494864B (zh) 2023-08-11

Family

ID=63445451

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201880023721.0A Active CN110494864B (zh) 2017-03-08 2018-03-02 3d模型的集成

Country Status (4)

Country Link
US (3) US10586379B2 (zh)
EP (1) EP3593283A4 (zh)
CN (1) CN110494864B (zh)
WO (1) WO2018164949A1 (zh)

Families Citing this family (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US10586379B2 (en) * 2017-03-08 2020-03-10 Ebay Inc. Integration of 3D models
GB2569817B (en) * 2017-12-29 2021-06-23 Snugs Tech Ltd Ear insert shape determination
US11727656B2 (en) 2018-06-12 2023-08-15 Ebay Inc. Reconstruction of 3D model with immersive experience
US11176738B2 (en) * 2019-05-15 2021-11-16 Fittin, Llc Method for calculating the comfort level of footwear
US11727475B2 (en) * 2019-12-13 2023-08-15 Shopify Inc. Systems and methods for recommending 2D image
US11929896B1 (en) * 2021-01-28 2024-03-12 Wiz, Inc. System and method for generation of unified graph models for network entities

Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101246599A (zh) * 2007-01-26 2008-08-20 转换器有限公司 根据2d图像序列进行3d场景重构的方法
CN101432776A (zh) * 2006-05-05 2009-05-13 汤姆森特许公司 用于从二维图像进行三维物体重建的系统和方法
CN103325141A (zh) * 2012-03-23 2013-09-25 上海理工大学 基于非等中心c形臂2d投影图像的3d模型构建方法
CN103942388A (zh) * 2014-04-18 2014-07-23 重庆市勘测院 一种大规模建筑信息模型与三维数字城市集成方法
CN104952106A (zh) * 2014-03-31 2015-09-30 特里库比奇有限公司 用于提供虚拟整形手术社交网络服务的方法和装置
CN105378792A (zh) * 2013-05-31 2016-03-02 朗桑有限公司 三维对象建模
CN105849773A (zh) * 2013-12-17 2016-08-10 皇家飞利浦有限公司 解剖结构的基于模型的分割

Family Cites Families (111)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US7859551B2 (en) 1993-10-15 2010-12-28 Bulman Richard L Object customization and presentation system
US5526478A (en) * 1994-06-30 1996-06-11 Silicon Graphics, Inc. Three dimensional model with three dimensional pointers and multimedia functions linked to the pointers
JP3799633B2 (ja) 1995-06-16 2006-07-19 セイコーエプソン株式会社 顔画像処理方法および顔画像処理装置
US6420698B1 (en) 1997-04-24 2002-07-16 Cyra Technologies, Inc. Integrated system for quickly and accurately imaging and modeling three-dimensional objects
WO1999015945A2 (en) 1997-09-23 1999-04-01 Enroute, Inc. Generating three-dimensional models of objects defined by two-dimensional image data
US6144388A (en) * 1998-03-06 2000-11-07 Bornstein; Raanan Process for displaying articles of clothing on an image of a person
US6563504B1 (en) 1998-12-24 2003-05-13 B3D, Inc. System and method for creating 3D animated content for multiple playback platforms from a single production process
WO2000055815A1 (fr) * 1999-03-17 2000-09-21 Fujitsu Limited Systeme de cao et support d'enregistrement
US7236637B2 (en) 1999-11-24 2007-06-26 Ge Medical Systems Information Technologies, Inc. Method and apparatus for transmission and display of a compressed digitized image
JP4341135B2 (ja) * 2000-03-10 2009-10-07 コニカミノルタホールディングス株式会社 物体認識装置
US6337925B1 (en) * 2000-05-08 2002-01-08 Adobe Systems Incorporated Method for determining a border in a complex scene with applications to image masking
US20020024517A1 (en) * 2000-07-14 2002-02-28 Komatsu Ltd. Apparatus and method for three-dimensional image production and presenting real objects in virtual three-dimensional space
US20030050864A1 (en) * 2001-09-13 2003-03-13 Koninklijke Philips Electronics N.V. On-line method for aiding a customer in the purchase of clothes
JP4082021B2 (ja) * 2001-11-29 2008-04-30 コニカミノルタホールディングス株式会社 テクスチャ画像生成プログラム、テクスチャ画像データ及びデータ処理装置
JP4123774B2 (ja) * 2001-12-21 2008-07-23 コニカミノルタホールディングス株式会社 テクスチャマッピング装置
CN100378658C (zh) 2002-12-03 2008-04-02 韩国电子通信研究院 用于适配图形内容的装置和方法及其系统
US20040196282A1 (en) * 2003-02-14 2004-10-07 Oh Byong Mok Modeling and editing image panoramas
US20040227752A1 (en) * 2003-05-12 2004-11-18 Mccartha Bland Apparatus, system, and method for generating a three-dimensional model to represent a user for fitting garments
KR100528343B1 (ko) 2003-07-14 2005-11-15 삼성전자주식회사 3차원 객체의 영상 기반 표현 및 편집 방법 및 장치
US20050204306A1 (en) * 2003-09-15 2005-09-15 Hideya Kawahara Enhancements for manipulating two-dimensional windows within a three-dimensional display model
US7388585B2 (en) 2004-09-20 2008-06-17 My Virtual Reality Software Method, system and device for efficient distribution of real time three dimensional computer modeled image scenes over a network
US7730406B2 (en) * 2004-10-20 2010-06-01 Hewlett-Packard Development Company, L.P. Image processing system and method
JP4274154B2 (ja) * 2005-05-31 2009-06-03 富士ゼロックス株式会社 立体表示装置
US7689035B2 (en) * 2005-06-17 2010-03-30 The Regents Of The University Of California Methods for identifying, separating and editing reflection components in multi-channel images and videos
US7272333B2 (en) * 2005-06-30 2007-09-18 Xerox Corporation Image quality measurements using linear array in specular mode
US20070080967A1 (en) * 2005-10-11 2007-04-12 Animetrics Inc. Generation of normalized 2D imagery and ID systems via 2D to 3D lifting of multifeatured objects
US20100157021A1 (en) * 2006-11-15 2010-06-24 Abraham Thomas G Method for creating, storing, and providing access to three-dimensionally scanned images
US20160232375A1 (en) * 2007-03-19 2016-08-11 Michael R. Loeb Methods and systems for providing online digital image rights management and identity protection in a digital environment
JP5023375B2 (ja) * 2007-05-21 2012-09-12 株式会社リコー 光センサ及び画像形成装置
US8060835B2 (en) * 2007-06-05 2011-11-15 The Boeing Company Three dimensional defect mapping
US8487927B2 (en) * 2008-05-19 2013-07-16 Microsoft Corporation Validating user generated three-dimensional models
US8289318B1 (en) 2008-08-29 2012-10-16 Adobe Systems Incorporated Determining three-dimensional shape characteristics in a two-dimensional image
US8155775B2 (en) * 2008-10-02 2012-04-10 Stratasys, Inc. Support structure packaging
WO2010044844A1 (en) * 2008-10-13 2010-04-22 George Papaioannou Dynamic biplane roentgen stereophotogrammetric analysis
US8605989B2 (en) * 2009-02-13 2013-12-10 Cognitech, Inc. Registration and comparison of three dimensional objects in facial imaging
US8654121B1 (en) 2009-10-02 2014-02-18 Pixar Structured polygonal mesh retesselation
US9530077B2 (en) * 2010-02-10 2016-12-27 Imorphics Limited Image analysis
US8525828B1 (en) * 2010-05-05 2013-09-03 Amazon Technologies, Inc. Visualization of fit, flow, and texture of clothing items by online consumers
CN103210370B (zh) * 2010-08-03 2017-02-15 派克赛斯有限责任公司 基于所存储的属性数据来创建按需包装
DE212011100130U1 (de) 2010-08-05 2013-06-24 Philips Intellectual Property & Standards Gmbh Auf gleicher Ebene und interaktiv stattfindende Oberflächennetz-Anpassung
US20120054026A1 (en) * 2010-08-30 2012-03-01 Ebay Inc. Instructional interface machine
US20120062712A1 (en) 2010-09-11 2012-03-15 Spatial View Inc. Delivery of device-specific stereo 3d content
US20120081357A1 (en) 2010-10-01 2012-04-05 Martin Habbecke System and method for interactive painting of 2d images for iterative 3d modeling
KR20120062589A (ko) 2010-12-06 2012-06-14 삼성전자주식회사 3ｄ 디스플레이 장치 및 그 방법
US8452081B2 (en) 2011-01-11 2013-05-28 Eastman Kodak Company Forming 3D models using multiple images
US9204123B2 (en) 2011-01-14 2015-12-01 Comcast Cable Communications, Llc Video content generation
US9633392B2 (en) * 2011-04-13 2017-04-25 Paypal, Inc. Integrated finding experience systems and methods
CN103562934B (zh) * 2011-04-28 2017-05-10 皇家飞利浦有限公司 脸部位置检测
US8457355B2 (en) * 2011-05-05 2013-06-04 International Business Machines Corporation Incorporating video meta-data in 3D models
US8902288B1 (en) 2011-06-16 2014-12-02 Google Inc. Photo-image-based 3D modeling system on a mobile device
WO2013029232A1 (en) 2011-08-30 2013-03-07 Technicolor (China) Technology Co., Ltd. Multi-resolution 3d textured mesh coding
US8994736B2 (en) * 2011-09-23 2015-03-31 Adobe Systems Incorporated Methods and apparatus for freeform deformation of 3-D models
US9098822B1 (en) * 2011-10-26 2015-08-04 Amazon Technologies, Inc. Optimization of packaging sizes
US8766997B1 (en) * 2011-11-11 2014-07-01 Google Inc. Side-by-side and synchronized displays for three-dimensional (3D) object data models
US8823744B2 (en) * 2012-03-23 2014-09-02 Bluebeam Software, Inc. Method for indicating annotations associated with a particular display view of a three-dimensional model independent of any display view
US20130271461A1 (en) 2012-04-11 2013-10-17 Pinpoint 3D Systems and methods for obtaining parameters for a three dimensional model from reflectance data
US20130286161A1 (en) * 2012-04-25 2013-10-31 Futurewei Technologies, Inc. Three-dimensional face recognition for mobile devices
US20150178988A1 (en) 2012-05-22 2015-06-25 Telefonica, S.A. Method and a system for generating a realistic 3d reconstruction model for an object or being
RU2504009C1 (ru) * 2012-07-10 2014-01-10 Общество С Ограниченной Ответственностью "Дрессформер" Способ обеспечения удаленной примерки и/или выбора одежды
US9094670B1 (en) * 2012-09-25 2015-07-28 Amazon Technologies, Inc. Model generation and database
US9367870B2 (en) * 2012-10-05 2016-06-14 Sap Se Determining networked mobile device position and orientation for augmented-reality window shopping
US8761448B1 (en) 2012-12-13 2014-06-24 Intel Corporation Gesture pre-processing of video stream using a markered region
US9639635B2 (en) 2013-01-02 2017-05-02 Embodee Corp Footwear digitization system and method
US9965887B2 (en) * 2013-03-05 2018-05-08 Autodesk, Inc. Technique for mapping a texture onto a three-dimensional model
US9047706B1 (en) 2013-03-13 2015-06-02 Google Inc. Aligning digital 3D models using synthetic images
WO2014138997A1 (en) 2013-03-15 2014-09-18 Synaptive Medical (Barbados) Inc. System and method for detecting tissue and fiber tract deformation
RU2672002C2 (ru) * 2013-05-10 2018-11-08 Конинклейке Филипс Н.В. Система выбора интерфейсного устройства пациента и способ, основанный на трехмерном моделировании
US9811948B2 (en) * 2013-05-10 2017-11-07 Koninklijke Philips N.V. 3D modeled visualisation of a patient interface device fitted to a patient's face
US9165397B2 (en) * 2013-06-19 2015-10-20 Google Inc. Texture blending between view-dependent texture and base texture in a geographic information system
US9811854B2 (en) * 2013-07-02 2017-11-07 John A. Lucido 3-D immersion technology in a virtual store
WO2015081213A1 (en) 2013-11-27 2015-06-04 Children's National Medical Center 3d corrected imaging
WO2015173173A1 (en) 2014-05-12 2015-11-19 Dacuda Ag Method and apparatus for scanning and printing a 3d object
US9485540B2 (en) 2014-06-03 2016-11-01 Disney Enterprises, Inc. System and method for multi-device video image display and modification
US10574974B2 (en) 2014-06-27 2020-02-25 A9.Com, Inc. 3-D model generation using multiple cameras
US10235388B2 (en) * 2014-06-27 2019-03-19 Ebay Inc. Obtaining item listings relating to a look of image selected in a user interface
US9589362B2 (en) * 2014-07-01 2017-03-07 Qualcomm Incorporated System and method of three-dimensional model generation
RU2551731C1 (ru) * 2014-07-02 2015-05-27 Константин Александрович Караваев Способ виртуального подбора одежды
GB201414144D0 (en) * 2014-08-08 2014-09-24 Imagination Tech Ltd Relightable texture for use in rendering an image
JP6091472B2 (ja) * 2014-08-12 2017-03-08 ソフトバンク株式会社 商品等提供システム、商品等提供方法、及び商品等提供プログラム
US20160070952A1 (en) * 2014-09-05 2016-03-10 Samsung Electronics Co., Ltd. Method and apparatus for facial recognition
US9690752B2 (en) 2014-10-03 2017-06-27 Harris Corporation Method and system for performing robust regular gridded data resampling
GB201419441D0 (en) * 2014-10-31 2014-12-17 Microsoft Corp Modifying video call data
US9962921B1 (en) * 2014-12-17 2018-05-08 Amazon Technologies, Inc. Techniques for printing 3D shipping containers
US9516255B2 (en) * 2015-01-21 2016-12-06 Microsoft Technology Licensing, Llc Communication system
KR102533555B1 (ko) 2015-02-17 2023-05-18 네버마인드 캐피탈 엘엘씨 감축된 해상도 이미지들을 생성 및 이용하고 및/또는 재생 또는 컨텐트 분배 디바이스에 이러한 이미지들을 통신하기 위한 방법들 및 장치
CA2977374C (en) 2015-02-25 2019-04-16 Facebook, Inc. Identifying an object in a volume based on characteristics of light reflected by the object
WO2016151691A1 (ja) * 2015-03-20 2016-09-29 株式会社 東芝 画像処理装置、画像処理システム、画像処理方法及びプログラム
US9855499B2 (en) * 2015-04-01 2018-01-02 Take-Two Interactive Software, Inc. System and method for image capture and modeling
US10825081B2 (en) * 2015-05-14 2020-11-03 Ebay Inc. Displaying a virtual environment of a session
KR102285376B1 (ko) * 2015-12-01 2021-08-03 삼성전자주식회사 3d 얼굴 모델링 방법 및 3d 얼굴 모델링 장치
US10245821B2 (en) * 2015-12-04 2019-04-02 At&T Intellectual Property I, L.P. Reusable networked 3-D printing
US10318102B2 (en) * 2016-01-25 2019-06-11 Adobe Inc. 3D model generation from 2D images
WO2017210228A1 (en) 2016-05-28 2017-12-07 Acoustic Knowledge, LLC Digital camera with audio, visual and motion analysis
US10311648B2 (en) * 2016-06-22 2019-06-04 Aquifi, Inc. Systems and methods for scanning three-dimensional objects
US10019839B2 (en) * 2016-06-30 2018-07-10 Microsoft Technology Licensing, Llc Three-dimensional object scanning feedback
US10290119B2 (en) * 2016-09-15 2019-05-14 Sportsmedia Technology Corporation Multi view camera registration
US20180124378A1 (en) * 2016-11-03 2018-05-03 Qualcomm Incorporated Enhanced depth map images for mobile devices
US10055880B2 (en) * 2016-12-06 2018-08-21 Activision Publishing, Inc. Methods and systems to modify a two dimensional facial image to increase dimensional depth and generate a facial image that appears three dimensional
US11563895B2 (en) * 2016-12-21 2023-01-24 Motorola Solutions, Inc. System and method for displaying objects of interest at an incident scene
US20180225408A1 (en) * 2017-02-03 2018-08-09 Ignitor Labs, LLC System and method for interactive modeling and analysis of 3-d digital assemblies
US10165259B2 (en) * 2017-02-15 2018-12-25 Adobe Systems Incorporated Generating novel views of a three-dimensional object based on a single two-dimensional image
US10467760B2 (en) 2017-02-23 2019-11-05 Adobe Inc. Segmenting three-dimensional shapes into labeled component shapes
US10586379B2 (en) * 2017-03-08 2020-03-10 Ebay Inc. Integration of 3D models
US10102657B2 (en) * 2017-03-09 2018-10-16 Houzz, Inc. Generating enhanced images using dimensional data
US10754939B2 (en) * 2017-06-26 2020-08-25 International Business Machines Corporation System and method for continuous authentication using augmented reality and three dimensional object recognition
US10740964B2 (en) * 2018-03-13 2020-08-11 Recogni Inc. Three-dimensional environment modeling based on a multi-camera convolver system
US11727656B2 (en) 2018-06-12 2023-08-15 Ebay Inc. Reconstruction of 3D model with immersive experience
TWI676153B (zh) * 2018-07-25 2019-11-01 國立中央大學 利用2d影像資訊修補不完整3d深度影像之方法
US10960232B2 (en) * 2018-07-28 2021-03-30 Varian Medical Systems, Inc. Single-pass imaging and radiation treatment delivery via an extended rotation gantry
CN111862296B (zh) * 2019-04-24 2023-09-29 京东方科技集团股份有限公司 三维重建方法及装置、系统、模型训练方法、存储介质
CA3157749A1 (en) * 2019-11-11 2021-05-20 Matthew Thomas Systems and methods for selective image compositing

Patent Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101432776A (zh) * 2006-05-05 2009-05-13 汤姆森特许公司 用于从二维图像进行三维物体重建的系统和方法
CN101246599A (zh) * 2007-01-26 2008-08-20 转换器有限公司 根据2d图像序列进行3d场景重构的方法
CN103325141A (zh) * 2012-03-23 2013-09-25 上海理工大学 基于非等中心c形臂2d投影图像的3d模型构建方法
CN105378792A (zh) * 2013-05-31 2016-03-02 朗桑有限公司 三维对象建模
CN105849773A (zh) * 2013-12-17 2016-08-10 皇家飞利浦有限公司 解剖结构的基于模型的分割
CN104952106A (zh) * 2014-03-31 2015-09-30 特里库比奇有限公司 用于提供虚拟整形手术社交网络服务的方法和装置
CN103942388A (zh) * 2014-04-18 2014-07-23 重庆市勘测院 一种大规模建筑信息模型与三维数字城市集成方法

Also Published As

Publication number Publication date
US20200234489A1 (en) 2020-07-23
EP3593283A1 (en) 2020-01-15
US20220068011A1 (en) 2022-03-03
WO2018164949A1 (en) 2018-09-13
US11205299B2 (en) 2021-12-21
CN110494864B (zh) 2023-08-11
US10586379B2 (en) 2020-03-10
US11727627B2 (en) 2023-08-15
EP3593283A4 (en) 2020-07-01
US20180261001A1 (en) 2018-09-13

Similar Documents

Publication Publication Date Title
CN110494864A (zh) 3d模型的集成
US11900444B2 (en) Virtual facility platform
US20190251603A1 (en) Systems and methods for a machine learning based personalized virtual store within a video game using a game engine
US11687991B2 (en) Structured item organizing mechanism in e-commerce
US20170337612A1 (en) Real-time recommendation of entities by projection and comparison in vector spaces
CN110023982A (zh) 选择产品标题
CN108012559A (zh) 自动三维模型生成
CN107077320A (zh) 识别对自动完成搜索结果的时间需求
CN108885702B (zh) 图像的分析和链接
US20230076209A1 (en) Generating personalized banner images using machine learning
CN109416697A (zh) 使用结果反馈的搜索系统
CN113168735A (zh) 用于在混合现实环境中针对视觉数字创作处理和划分真实世界的部分的方法和系统
US20210286505A1 (en) Online Pluggable 3D Platform for 3D Representations of Items
CN109076097A (zh) 用于委托内容处理的系统和方法
KR20200041120A (ko) 꽃다발 추천 방법
US20240135433A1 (en) Virtual Facility Platform

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant