CN106462769B - 对象照片上的镜面高光 - Google Patents
对象照片上的镜面高光 Download PDFInfo
- Publication number
- CN106462769B CN106462769B CN201580032600.9A CN201580032600A CN106462769B CN 106462769 B CN106462769 B CN 106462769B CN 201580032600 A CN201580032600 A CN 201580032600A CN 106462769 B CN106462769 B CN 106462769B
- Authority
- CN
- China
- Prior art keywords
- images
- image
- composite image
- tilt
- composite
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T11/00—2D [Two Dimensional] image generation
- G06T11/60—Editing figures and text; Combining figures or text
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T1/00—General purpose image data processing
- G06T1/0007—Image acquisition
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T11/00—2D [Two Dimensional] image generation
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T11/00—2D [Two Dimensional] image generation
- G06T11/001—Texturing; Colouring; Generation of texture or colour
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T15/00—3D [Three Dimensional] image rendering
- G06T15/10—Geometric effects
- G06T15/20—Perspective computation
- G06T15/205—Image-based rendering
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N9/00—Details of colour television systems
- H04N9/12—Picture reproducers
- H04N9/31—Projection devices for colour picture display, e.g. using electronic spatial light modulators [ESLM]
- H04N9/3179—Video signal processing therefor
- H04N9/3185—Geometric adjustment, e.g. keystone or convergence
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2207/00—Indexing scheme for image analysis or image enhancement
- G06T2207/20—Special algorithmic details
- G06T2207/20212—Image combination
- G06T2207/20221—Image fusion; Image merging
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T2210/00—Indexing scheme for image generation or computer graphics
- G06T2210/62—Semi-transparency
Landscapes
- Engineering & Computer Science (AREA)
- Physics & Mathematics (AREA)
- Theoretical Computer Science (AREA)
- General Physics & Mathematics (AREA)
- Geometry (AREA)
- Computing Systems (AREA)
- Computer Graphics (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- Processing Or Creating Images (AREA)
- User Interface Of Digital Computer (AREA)
- Image Processing (AREA)
Abstract
提出了用于记录和查看具有镜面高光的对象的图像的系统和方法。在一些实施例中,计算机实现的方法可以包括访问第一多个图像,第一多个图像中的图像中的每个图像包括:从第一位置记录的对象,和来自位于与所述第一多个图像中的其它图像中的每个图像不同位置处的光源的光在所述对象上的反射。方法还可以包括生成所述对象的第一合成图像,所述第一合成图像包括所述第一多个图像的叠加,且其中,所述第一多个图像中的每个图像被配置为:在所述第一合成图像内并根据基于倾斜程度的第一输入,改变透明度。
Description
优先权要求
本国际申请要求于2014年4月23日提交的申请号为14/260,091的美国专利申请的优先权的权益,据此将其全部内容通过整体引用并入本文。
版权声明
本专利文件的公开内容的一部分包含受版权保护的材料。版权所有者不反对任何人对专利文件或专利公开内容的复制,因为它出现在专利商标局的专利文件或记录中,但是无论什么保留所有的版权权利。以下声明适用于如在下文以及在形成本文件的一部分的附图中描述的软件和数据:版权2013,eBay公司,保留所有权利。
技术领域
本文公开的主题总体上涉及增强数字图像。在一些示例实施例中,本公开内容涉及用于对象照片上的镜面高光的系统和方法。
附图说明
一些实施例通过示例的方式示出并且不限于附图中的图。
图1是根据一些示例实施例的适合于记录对象的图像并且用于基于所记录的图像来生成和/或查看合成图像的移动设备。
图2是根据一些示例实施例的适合于存储对象的图像并且用于基于所记录的图像来生成和/或发送合成图像的网络架构。
图3是在一些示例实施例中使用的具有镜面高光的对象的示例图像。
图4是根据一些示例实施例的用于记录具有镜面高光的对象的过程中的第一步骤的示例图像。
图5示出了根据一些示例实施例的在用于记录具有镜面高光的对象的过程中的其他步骤的示例图像。
图6A和6B示出了根据一些示例实施例的用于记录具有镜面高光的对象的过程中的其它步骤的示例图像。
图7示出了根据一些示例实施例的在用于记录具有镜面高光的对象的过程中的其它步骤的示例图像。
图8A和8B示出了根据一些示例实施例的查看具有镜面高光的对象的示例图像。
图9是根据一些示例实施例的示出了用于生成对象的合成图像的示例操作的流程图。
图10是根据一些示例实施例的示出了用于查看对象的合成图像的示例操作的流程图。
图11是示出了根据一些示例实施例的机器的组件的框图,该机器能够从机器可读介质读取指令并且执行本文论述的方法中的任何一个或多个方法。
具体实施方式
呈现了用于生成和查看对象的具有镜面高光的图像的示例方法、装置和系统。在一些示例实施例中,图像可以基于对显示图像的显示设备的运动控制来显示改变中的镜面性质。
随着数字图像变得更加普遍,期望通过数字手段来改善对现实生活对象的呈现。一般而言,存在一种期望,即:以尽可能真实的通过数字手段的描绘来表现现实生活对象和环境。然而,一些类型的对象比其它对象更难以有效地捕获和显示。具体地,作为示例,具有至少一些反射或镜面性质的对象(诸如,抛光的宝石、水晶瓶、珠宝、有光泽的塑料对象等等)倾向于在图片中未被良好地捕获,因为仅仅通过单独的静态图片不能充分体现这些对象的反射亮度。例如,查看者仅仅利用单个静态图像可能不能够充分理解具有很多反射角的宝石。一般而言,当试图显示在单个数字图像中时,具有镜面或反射性质的对象(其中光在很多不同方向上从对象反射出去)倾向于失去它们的光泽或亮度。
对于某些商家或行业而言,转换到在线显示和陈列室可能因此是困难的。例如,当尝试在线广告时,珠宝零售商和设计师在表达其产品的最佳切面时很困难。随着更多的产品和商家依赖于在线购物和销售,用于显示在线商品的当前手段可能对于某些商品来说是不充分的,并且因此这些商家或行业可能失去客户和/或销售。因此期望改善用于数字地记录和查看对象(并且特别地记录和查看具有反射或镜面性质的对象)的手段。这些问题以及更多问题可以通过以下公开来解决。
本公开的方案讨论用于记录和查看对象的具有镜面高光的图像的方法和系统。在一些示例实施例中,可以从各个角度“倾斜”对象的数字图像,并且从对象反射出的光可以根据图像的倾斜而变化。在一些示例实施例中,虽然对于查看者而言可能看起来仅仅存在呈现在显示屏上的单个对象图像,但是对象的图像可能实际上是同一对象的多个图像的合成混合,只不过有在多个图像中的每个图像中从不同的角度照射在对象上的至少一个光源。取决于查看者对合成图像的查看角度,基于由显示设备中的一个或多个陀螺仪和/或加速度计测量出的倾斜向量,例如,这些多个图像中的一些可能变得完全透明,使得它们基于所述查看角度是不可查看的,而该多个图像中的一个或多个可以变得更不透明,因此生成对象的某种混合图像,其显示从对象反射出的某个角度的光。将根据本公开的附图在本文呈现更详细的描述。
参考图1,根据一些示例实施例,呈现了示出移动设备100的框图。根据至少一些示例实施例,移动设备100可以配置为记录对象的具有镜面高光的图像以及查看图像。移动设备100可以配置为记录对象的图像,其中每个图像具有从不同角度指向对象的光源。例如,摄像机镜头185可以配置为接收图像数据,图像数据可以由图像记录器180使用来记录对象的图像,摄像机镜头185由图像记录器180控制。移动设备100可以备选地或附加地配置为查看对象的合成图像,合成图像示出根据倾斜向量指到对象上的各种角度的光。例如,根据一些示例实施例,显示器150可以配置为显示多个图像和/或合成图像。移动设备100可以包括处理器110。处理器110可以是适合于移动设备的各种不同类型的可商购处理器中的任何处理器(例如,Xscale架构微处理器、没有互锁流水线级(MIPS)架构处理器的微处理器或另一种类型的处理器)。根据一些示例实施例,处理器110可以配置为将对象的多个图像组合为合成图像。诸如随机存取存储器(RAM)、闪存或其它类型的存储器的存储器120通常可接入到处理器。存储器120可以适于存储操作系统(OS)130以及应用程序140,例如用于使用多个图像生成对象的合成图像的移动应用,和/或用于查看合成图像的移动应用。处理器110可以直接或经由适当的中间硬件耦合到显示器150和一个或多个输入/输出(I/O)设备160,例如小键盘、触摸面板传感器、麦克风等等。类似地,在一些实施例中,处理器110可以耦合到与天线190接口连接的收发器170。取决于移动设备100的性质,收发器170可以配置为经由天线190发送和接收蜂窝网络信号、无线数据信号或其它类型的信号。以这种方式,可以建立与网络(诸如,下文更详细论述的图2的网络204)的连接。移动设备100还可以包括用于获得移动设备100的3维取向的一个或多个装置。例如,一个或多个陀螺仪和/或加速度计(未示出)可以内置在移动设备中,陀螺仪和/或加速度计配置为确定移动设备100与垂直平面和/或水平面的倾斜程度。
参考图2,根据一些示例实施例,示出了基于客户端-服务器的高层网络架构200。对于本领域技术人员可能显而易见的是,网络架构200可以包括用于利用本公开的方案的系统、应用、模块和/或其它手段。例如,网络架构200可以包括用于访问对象的多个图像和用于基于多个图像并且根据本公开的方案生成合成图像的手段。网络架构200还可以配置为向一个或多个查看者传送合成图像。在一些示例实施例中,联网的系统202可以促进基于网络的市场或支付系统220(经由网络204(例如,因特网或广域网(WAN))向一个或多个客户端设备210和212提供服务器侧功能)。图2示出了例如在各自的客户端设备210和212上执行的web客户端206(例如,浏览器,诸如由开发的Internet浏览器)和编程客户端208。基于网络的市场系统220可以包括用于存储和显示合成图像的网站或其它中央储存库。图像可以例如用作在市场系统220中待售的产品的广告或描绘。
客户端设备210和212的示例可以包括但不限于移动电话、台式计算机、膝上型计算机、便携式数字助理(PDA)、智能电话、平板电脑、超级本、上网本、笔记本电脑、多处理器系统、基于微处理器的或可编程消费类电子产品、游戏控制台、机顶盒或用户可以利用以访问联网系统202的任何其它通信设备。示例客户端设备210和212可以与图1中描述的移动设备100相一致。在一些实施例中,客户端设备210和/或212可以包括显示信息(例如,以用户界面的形式)和图像的显示模块(未示出)。在另外的实施例中,客户端设备210和/或212可以包括触摸屏、加速度计、陀螺仪、摄像机、麦克风、全球定位系统(GPS)设备等等中的一个或多个。在一些示例实施例中,联网的系统202是基于网络的市场,其响应于对产品列表的请求,发布包括在基于网络的市场上可购得的产品的项目列表的发行物(publication),并且管理针对这些市场交易的支付。产品列表可以包括一个或多个不同产品的一个或多个图像。图像可以包括如本文描述的产品的一个或多个合成图像。一个或多个用户205可以是与客户端设备210和212交互的人、机器或其它装置。在实施例中,用户205不是网络架构200的一部分,但是可以经由客户端设备210和212或另一手段与网络架构200进行交互。
应用程序界面(API)服务器214和web服务器216耦合到一个或多个应用服务器218并且分别向其提供编程界面和web界面。应用服务器218可以托管一个或多个市场系统220,其可以包括一个或多个模块或应用并且其可以体现为硬件、软件、固件或其任何组合。应用服务器218继而示出为耦合到一个或多个数据库服务器224,其促进对一个或多个信息存储库或数据库226的访问。在一些示例实施例中,数据库226是存储将要发布给市场系统220的信息(例如,产品的发行物或列表、图像等等)的存储设备。根据示例实施例,数据库226还可以存储数字商品信息。
市场系统220可以向访问联网的系统202的用户205提供多个市场功能和服务。虽然市场系统220在图2中示出为形成联网的系统202的一部分,但是应当理解的是,在备选实施例中,系统220可以形成与联网的系统202分离且不同的支付服务的一部分。
此外,虽然在图2中示出的基于客户端-服务器的网络架构200采用客户端-服务器架构,但是本发明主题当然不限于这样的架构,并且可以同样在例如分布式或对等架构系统中找到应用。各种市场系统220还可以实现为不是必须具有联网能力的独立的软件程序。
web客户端206经由web服务器216支持的web界面访问各种市场系统220。类似地,编程客户端208经由API服务器214提供的编程界面访问市场系统220提供的各种服务和功能。编程客户端208可以例如是卖方应用(例如,由公司开发的Turbo Lister应用),其使得卖方能够以离线方式在联网的系统202上创作和管理列表,并且在编程客户端208和联网的系统202之间执行批量模式(batch-mode)通信。
此外,在第三方服务器230上执行的第三方应用228被示出为经由API服务器214提供的编程界面对联网的系统202进行编程访问。例如,第三方应用228利用从联网的系统202检索的信息可以支持在第三方托管的网站上的一个或多个特征或功能。第三方网站可以例如提供由联网的系统202的相关应用支持的一个或多个促销、市场或支付功能。第三方服务器230可以通过例如对在合成图像中示出的产品进行广告来帮助激增(proliferate)根据本公开的合成图像的显示。
参考图3,示出了对象310的示例图像300,其可以受益于根据本公开的方案而增强。对象310仅被用作一个示例,并且示例实施例当然可以利用其它对象。本文中,对象310可以是类似菠萝的玻璃或水晶花瓶。与正常的菠萝一样,对象310在其外部上包含很多边缘和凹槽,当光照射在其上时,像其这样的事物在很多方向上反射光。不幸的是,如果对象310仅仅显示为单个图像,则可能难以充分理解光从花瓶的该很多有角度的切面照射出得有多么明亮。相应地,期望出售这样的产品的商人可能不觉得在线发布对象310的单个图片将会有效地捕捉到其全部价值。即使示出对象310的来自不同的侧面的多个图片也可能是不足的,因为对象310(在本示例中是菠萝花瓶)是相对径向对称的,并且因此围绕对象310的每个侧面将不会提供差异很大的视角。此外,示出单个静态图像仍将不能捕捉到对象310的很多边缘和凹槽意图示出的全部闪光(sparkle)。一般而言,应当理解的是,对象的镜面高光(例如对象310的很多边缘和凹槽的反射性质)未被单个静态图像充分捕捉到的,不管该图像有多详细。
参考图4,对象310的示例图像400示出了用于根据本公开的方案增强镜面高光的过程的开始。如前所述,可以基于处于同一位置的对象310的多个图像来生成对象310的合成图像,但在每个图像中,光源在从不同的角度指向对象310。合成图像最终可勉强称得上是交互式图像,该交互式图像被配置为在显示设备中进行操纵以基于多个图像中的一个或多个并且根据显示设备的倾斜方向来显示对象310的变化中的光角度。示例过程可以开始于记录对象310的第一图像,第一图像包括以第一角度从光源指向对象310(例如,菠萝花瓶)的光。在这种情况下,在来自对象310的右上侧处的闪光灯(未示出)可以将光照射到对象310处。基于图像400中由对象310形成的阴影(例如,阴影410)并且在一些情况下还基于对象310被照得最明亮的部分(例如,亮点420),光的角度可以是显而易见的。
作为用于实践本公开的至少一些方案的过程的示例,拍摄者可以将摄像机或容纳摄像机或其它图像记录器的移动设备定位(position)在三脚架或其它稳定装置上。摄像机或移动设备的示例可以包括移动设备100。对象310可被固定地定位在某个稳定表面(例如牢固的(steady)凳子或桌子)上。摄像机可以被定位以记录对象310的多个图像。根据一些示例实施例,应用或其它软件程序可以引导拍摄者利用从特定的角度指向对象310的光源(例如,从对象310的右上侧指出的光源)记录对象310的图像。例如,示例应用的用户界面(UI)可以出现在移动设备100的显示器上并且命令用户利用从特定的方向指向对象310的光源记录对象310的图像。拍摄者可因而将光源(例如,闪光灯、摄像机闪光灯、闪光灯泡、聚光灯或某个其它远程光源)从指定的方向定位到对象310上,并且使用摄像机或移动设备100来记录图像。在一些示例实施例中,用于记录图像的移动设备与操作具有UI的应用或软件的设备可以是同一设备。
参考图5,根据一些示例实施例,示例图像510、520和530示出示例过程的继续。例如,可以从与图4中的图像400相同的位置记录对象310(例如,菠萝花瓶)的附加图像510、520和530。每个附加图像510、520和530的彼此不同之处可在于:在每个图像中,光源(未示出)从不同的角度指向对象310。例如,图像510、520和530在不同的方向上示出对象310的阴影,指示在每个图像510、520和530中,光源从不同的角度指向对象310。在这种情况下,量规(rubric)515、525和535各自示出闪光灯540的图片,分别指示每个图像510、520和530中光源照射到对象310上的方向。在此处,利用从对象310的左上方指向对象310的光源记录图像510。类似地,利用从对象310的正上方指向对象310的光源记录图像520。最后,利用从对象310的右上侧指向对象310的光源记录图像530。可显而易见的是,这些方向分别根据量规515、525和535中示出的闪光灯方向。根据一些示例实施例,移动设备或其它数字设备可以存储每个包含对象310和定向光的变化的角度的图像,该图像要被混合或“缝合”在一起以形成对象310的合成图像。
跟随从图4到5的进程的延伸,参考图6A和6B,根据一些示例实施例,示例综合图像600示出对象310的更综合的图像集合。参考图6A,示出了对象310的九个图像的示例综合集合,每个图像记录位于同一位置的对象310,但是在每个图像中光源从不同的角度指向对象310。参考图6B,在量规610中的每个方形示出了闪光灯图标,其在量规610中的同一位置处的方形内演示了综合图像600的每个对应图像中指向对象310的光源的取向。如本文使用的,“综合的图像集合”可以指代捕捉到从以相当平均和/或均匀的方式围绕对象310的各个角度(例如,在二维中是360度,全部围绕以该对象为中心的半个半球的角度等等)指向对象310的光源的图像的集合。在这种情况下,使用八个图像来捕捉都围绕着对象310指向的光,并且在第九个图像中,光从中性角(neutral angle)直接指向对象310。在其它情况下,可以使用更多或更少的图像,并且实施例不限于此。例如,可以使用四个或十六个图像。
将更多内容添加到用于实践从图4中开始论述的本公开方案的示例过程,在一些示例实施例中,综合图像600和量规610中的每个方形的角中的数字可以表示采用本公开方案的应用存储对象310的图像的顺序。例如,以具有UI的应用的示例继续,UI可以引导拍摄者拍摄对象310的特定数量的照片,其中针对每个照片,光源以特定的顺序指向对象310。例如,如图6A中的编号“1”所指示的,UI可以命令拍摄者将综合图像600中的第一图片记录为对象310的图像,其中光源直接径直朝向前方(例如,以相对于对象310的中心的中性角)。该图像是综合图像600的中心图像。拍摄者可以使用例如移动设备100记录图片,并且应用可以将该图片存储为中心图片。接着,如通过在顶部中心图像中的编号“2”指示的,UI可以命令拍摄者将在综合图像600中的第二图片记录为对象310的光来自于对象310的顶部的图像。拍摄者可以记录图片,并且应用可以将第二图片存储为光源指向上的图片。第三,如通过右上侧图像中的编号“3”指示的,应用存储对象310的光来自于对象310的右上侧的图像,且随着编号以此类推。在一些情况下,应用可以引导拍摄者以指定的顺序记录这些图像中的每个图像,并且由此以捕捉到的顺序存储图像。当然,示出的顺序仅仅是一个示例,并且根据各种实施例,其它顺序显然是可能的。在其它情况下,拍摄者可能已经先前记录了对象310的具有不同的光角度的一系列图像,并且可以在应用中对图像进行手动排序,由此应用还接收对光来自哪个方向的指示。该过程的确切机制可以变化,并且很多其它的可能对于本领域普通技术人员是显而易见的。所有变型都在本公开的范围内,并且实施例不限于此。
参考图7,访问对指向对象310的不同角度的光进行示出的图像的综合集合,则可以根据本公开的方案生成对象310的合成图像。如本文使用的,“合成图像”可以是指在图像的综合集合中的多个图像的重叠或叠加,由此可以基于与显示合成图像的设备的倾斜程度或取向的对应关系,以改变的不透明度来显示图像的综合集合的子集。通过图像的综合集合中的九个图像的级联来表示生成合成图像的过程,如在图像700中示出的。以这种方式,“合成图像”可以被理解为不仅仅是单个图像,而是彼此重叠的一系列多个图像,重叠的图像中的每个图像被配置为以不同程度的不透明度(或透明度)进行修改。在本示例中,所示出的级联图像的编号可以信号通知图像彼此覆盖的顺序。在其它示例实施例中,没有指定这样的排序,并且实施例不限于此。
作为示例用例,在现在生成的合成图像的情况下,查看者可以利用移动设备上的应用以查看对象310的合成图像。在一些示例实施例中,如果合成图像的中性角被定义为查看设备在首次显示合成图像时以其开始的任何取向,则当查看者旋转、转动和/或倾斜查看设备时,图像的综合集合内的某些图像将成为完全透明的(即,不可见的),而某些其它的图像可以以一定程度的不透明度来示出,使得一个或多个图像可以“混合”在一起。对对象310的九个图像的不透明(或相反地,透明)程度的确定可以取决于(例如,当以二维来表达时,与查看设备的中性角(例如,查看设备的初始起始取向)的)倾斜的程度。
作为“混合”合成图像的多个图像的示例,比方说查看者在查看设备(例如,移动设备100)中显示对象310,开始于查看设备平放在桌子上,其中显示屏幕面朝上。对象310的初始呈现然后可以是对象310的中心图像,如在图像600的中心图像(例如,框#1)中示出的,而所有其它八个图像成为完全透明的并且是不可见的。查看者然后可以倾斜查看设备,例如,仅仅抬高查看设备的右侧,使得显示屏幕现在略微朝向左侧。在一些示例实施例中,合成图像可以被布置为使得照射在所显示的对象上的光源的取向被假定为来自查看者的初始位置。因此,在此处,通过将设备略微向左侧倾斜,应用可以现在示出对象310的光源来自对象310右侧的情况下的图像(例如,图像600的框#4中的图像),而所有其它八个图像成为完全透明的并且是不可见的。换言之,现在对于查看者来说好像指向对象310的光来自右侧,使得查看者能够看到光如何不同地从对象310反射出来。在一些示例实施例中,从查看设备定向在初始中性位置到倾斜到左侧(即,仅仅抬高查看设备的右侧)的渐进进程可以对应地涉及从查看中心图像(例如,图像600中的框#1)到查看光源来自右侧的情况下的图像(例如,图像600中的框#4)的渐进改变。一般而言,从查看设备被从第一倾斜取向定位到斜切到第二倾斜取向的渐进进程可以对应地涉及从基于第一混合图像集合查看对象310到基于第二混合图像集合查看对象310的渐进改变,第一混合图像集合与第一倾斜取向相对应,并且第二混合图像集合与第二倾斜取向相对应。
例如,在完全抬高查看设备的右侧之间的中途,对象310的中心图像可以设置为50%透明度,而光源来自右侧的情况下的图像也可以设置为50%透明度。这可以生成两个图像的一种混合视图,其可以表示在光源指向中心和完全来自右侧之间的中途的情况下对象310可以看起来像什么。该混合视图还与查看设备的倾斜的程度相对应。作为另一个示例,如果设备仅仅向左侧倾斜完全倾斜角度的四分之一(例如,查看设备的右侧仅仅倾斜全部量的四分之一),则对象310的中心图像可以以75%不透明度(例如,25%透明度)示出,而右图像可以与中心图像重叠并且以25%不透明度(例如,75%透明度)示出,由此根据查看设备的倾斜程度来表示光源的角度的比例量。类似地,每个图像的透明度(或不透明度)可以平滑地改变并且根据查看设备的倾斜的程度来进行。
参考图8A和8B,分别在图像800和810中示出了两个其它示例,其示出了图像的综合集合的混合。这两个示例可以示出更复杂一些的情况。参考图8A和图像800,在图像800的右下角的“X”值和“Y”值可以指示长度测量结果,或在其它情况下,指示查看设备远离其水平轴和垂直轴的倾斜程度的百分比)。例如,值“X=+0.75”和“Y=+0.50”可以指示查看设备从右侧向上倾斜了其全部倾斜视图的75%且从顶部向上倾斜了其全部倾斜视图的50%。相应地,最右侧图像和右上侧图像(例如,在图像600中的框#3和框#4中的图像)的混合图像可被用来表达光可如何以指定的倾斜角度从对象310射出。在其它情况下,还可以使用中心图像,因为倾斜可能不完全朝向顶部或右侧。
参考图8B和图像810,类似地,值“X=-0.793402”和“Y=0.13847”可以指示查看设备从右侧向下(即,从左侧向上)倾斜其全部倾斜视图的~79%且从顶部向下(即,从底部向上)倾斜其全部倾斜视图的~13%。相应地,最左侧图像和左下侧图像(例如,在图像600中的框#7和框#8中的图像)的混合图像可被用来表达光可如何以指定的倾斜角度从对象310射出。在其它情况下,还可以使用中心图像,因为倾斜可能不完全朝向顶部或右侧。在其它情况下,还可以使用底部图像,因为倾斜角度还可以被认为包括底部图像的一部分。
一般而言,“缝合”或“混合”算法可以实现为基于倾斜输入来计算多个图像中的每个图像的透明度。例如,用于基于图像的综合集合中的多个图像之间的混合水平来计算合成图像的视图的算法可以基于对欧几里得(Euclidean)距离的计算。欧几里得距离函数可以采用光源角度的初始取向与当前倾斜角度之间的差来作为参数。在一些示例实施例中,角度可以分解为二维分量(例如“X”方向和“Y”方向)。如可以对本领域技术人员显而易见的是,当然可以使用其它二维坐标系统以及用于基于倾斜程度来计算合成图像的视图的其它距离函数或甚至其它方法,并且实施例不限于此。在一些示例实施例中,可以采用单独的平滑函数以示出初始倾斜取向和当前倾斜取向之间的渐进改变。平滑函数可以内插两个取向之间的运动,并且相应地示出对象310的光角度中的改变。
一般而言,本公开的方案可以基于显示对象310的合成图像的查看设备的相应倾斜程度来显示合成图像中变化的多个图像综合集合,每个集合以变化的不透明度(或透明度)来显示。随着取向和倾斜的程度改变(例如,基于查看者旋转和倾斜设备的方式而改变)时,每个图像的不透明度可以如以本文论述的方式相应地改变。因此,当查看者倾斜和旋转显示合成图像的设备时,查看者可以获得光如何按多个不同的角度从对象310反射出的交互视角,因为合成图像将根据改变中的倾斜和/或旋转而不断地改变。
本公开的方案因此可以帮助促进具有突出的镜面性质的对象的呈现,像其这样的事物否则可能不能通过常规手段来有效表达。除此之外,不同于当尝试通过视频或其它动画来演示镜面性质时,用户具有在至少两个平面维度上检查对象的多个镜面性质的自由度和控制,而不限于最多向前或向后查看对象的视频。
虽然可能没有以每个单个细微的角度来记录对象的实际图片(例如,在示例中,仅仅九个图像用于生成所有可用的查看角度),但是混合图片创建了对象在不同的照明场景下可能看起来像什么的模拟感觉。人类的大脑通常认为这是足够的,因为它通常不能够对实际图像与两个或更多个看起来相似的图像之间的近似图像进行区分。换言之,人类的大脑对反射光的处理倾向于是相当宽容的。此外,光在对象上的变化的视点的移动倾向于被人类的大脑更多地关注到,并且出于现实性,静态图像从一个图像到下一个图像的精确性不如从一个图像到另一个图像的过渡的平滑性那么重要。
在一些示例实施例中,可以基于类似于倾斜角度的输入来显示合成图像中的图像的正确“混合”(例如,对合成图像的鼠标控制滚动移动或鼠标控制拖动移动)。例如,合成图像的倾斜和旋转还可以显示在不拥有用于检测倾斜移动的任何手段(诸如陀螺仪、激光跟踪器或其它定位手段)的PC上。相反,例如,可以“点击和拖动”合成图像,其中鼠标光标在图像上相对于其中心的位置可以充当用于测量倾斜程度的模拟量。相应地,图像的适当混合可以基于鼠标光标在图像上相对于其中心的对应位置。作为另一个示例,两个滚动条(一个沿着合成图像的右侧定位,并且另一个沿着合成图像的底部定位)可以来回滚动以作为用于测量倾斜程度的模拟量。作为另一个示例,可以通过手指沿着显示屏幕滚动或滑动来模拟倾斜,由此,例如,沿着显示器的顶端滑动手指可以显示对象上从顶角看的光反射中的改变,诸如此类。类似地,可以采用对本领域技术人员显而易见的其它手段来确定合成图像中图像的适当混合,并且实施例不限于此。因此,如本文使用的,根据本公开的各种技术的对倾斜或旋转程度的参考还包括针对不具有确定倾斜或旋转程度的能力的设备的类似方法。
在一些示例实施例中,对象的多个侧面或面还可以连接在一起,其中,对象的每个侧面或面本身是该侧面或面的被以不同的光角度记录的重叠的图像的合成图像。例如,对象310的先前图像仅仅示出花瓶的一个侧面。对象310的俯视图或顶视图未示出,但是也可以使用本文描述的方法来示出。换言之,例如,还可以记录对象310的顶视图的九个图像,以与在所呈现的公开中描述的方式(参见,例如图4、5、6A、6B和7)相类似的方式来记录该九个图像。然后可以生成对象310的顶视图的合成图像。
在一些实施例中,对象的不同的面或侧面可以连接在一起以向对象的查看添加附加的维度。例如,查看者设备的用户还可以能够跨对象310的侧面图像的面沿着显示器向下滑动他的手指。这可以使得图像滚动或翻动到对象310的顶视图合成图像,在该点处,用户可以倾斜和旋转查看者设备以体验光如何从对象310的顶部反射出。在一些示例实施例中,使用与用于缝合图片以形成全景视图的那些技术相类似的已知图像连接技术,也可将从侧视图到顶视图的滚动平滑地混合或缝合在一起。在其它示例实施例中,可以不这样对示出不同侧面的多个合成图像进行连接,而是用户可以仅仅点击或轻击示出对象310的不同视图的下一个合成图像。
在一些示例实施例中,多个图像之间的混合方向可以与上述方向相反,并且实施例不限于此。例如,根据所描述的示例技术混合的图像的比例可以基于从查看者设备的左侧和底部而不是从右侧和顶部进行的倾斜的程度。一般而言,图像混合的确切方向和/或程度可以基于倾斜或旋转的不同取向或程度,并且实施例不限于此。
参考图9,示例流程图900示出用于生成对象的合成图像的示例方法。示例方法可以与本文描述(包括例如,在图3、4、5、6A、6B、7、8A和8B中的描述)的方法相一致。在框910,设备(例如,在图1中描述的移动设备100)可以访问第一多个图像,第一多个图像中的每个图像包括:从第一位置记录的对象(例如,图3的对象310),以及来自位于与第一多个图像中的其它图像中的每个图像不同位置处的光源的光在该对象上的反射。第一多个图像可以根据本文描述的方法(包括,例如在图4、5、6A和6B中的描述)来进行记录。例如,设备可以稳定在某个位置并且记录第一多个对象,其中,在第一多个图像中的每个图像中,光源从不同位置照射在对象上。图像可以存储在设备中,或在其它情况下可以经由网络存储在诸如云服务器的远程服务器中。在一些情况下,设备可以是远程服务器,并且可以从记录图像的移动设备来访问图像。
在框920,设备可以生成对象的第一合成图像,第一合成图像包括第一多个图像的叠加,且其中,第一多个图像中的每个图像被配置为:在第一合成图像内并根据基于倾斜程度的第一输入,改变透明度。该合成图像可以与本文论述的对合成图像的描述(例如,在图4、5、6A、6B、7、8A和8B中)相一致。合成图像可以存储在设备中。在其它情况下,合成图像可以存储在诸如云服务器的远程服务器中。在生成合成图像之后,在一些示例实施例中,可以向与生成合成图像的设备分离的查看者设备传送合成图像。在其它情况下,生成合成图像的设备可以与查看者设备相同。
在一些示例实施例中,所述第一多个图像中的每个图像的透明度的改变还根据于:在第一多个图像中的每个图像中,光源的位置相对于对象的方向。在一些示例实施例中,第一多个图像中的每个图像的透明度发生的改变基于以下二者之间的对应关系:倾斜程度,以及在所述第一多个图像中的每个图像中,光源的位置相对于对象的方向。在一些示例实施例中,所述第一多个图像中的每个图像的透明度的改变基于根据缝合算法进行的倾斜计算。这些描述可以与在整个公开中论述的描述(例如,在图4、5、6A、6B、7、8A和8B中)相一致。
在一些示例实施例中,基于倾斜程度的第一输入包括来自被配置为显示第一合成图像的显示设备中的加速度计或陀螺仪的测量。例如,显示设备可以基于来自显示设备中的一个或多个加速度计或陀螺仪的读数,测量用户对设备的倾斜的程度。在一些示例实施例中,基于倾斜程度的第一输入包括来自被配置为显示第一合成图像的设备的显示屏幕的触摸数据。例如,倾斜程度可以基于在显示合成图像的电容性触摸屏上的手指滑动的读数。在一些示例实施例中,基于倾斜程度的第一输入包括来自鼠标滚动的数据。例如,与鼠标光标的移动耦合的点击且拖动输入可以模拟倾斜角,并且在图像中的每个图像中的透明度可以根据鼠标移动的位置进行改变。这些描述可以与在整个公开中论述的描述(例如,在图4、5、6A、6B、7、8A和8B中)相一致。
在一些示例实施例中,对象的第二合成图像可以经由某种平滑图形连接与第一合成图像连接在一起,该对象的第二合成图像被从不同的位置记录以记录对象的不同的侧面。可以通过与第一合成图像相似的手段但是从示出对象的不同侧面的不同位置来生成第二合成图像。可以生成第一合成图像和第二合成图像之间的图形连接,其中第一合成图像的显示被配置为过渡到第二合成图像的显示,过渡基于第一合成图像和第二合成图像之间的图形连接。这些描述可以与在整个公开中论述的描述(例如,在图4、5、6A、6B、7、8A和8B中)相一致。
参考图10,流程图1000示出了在图9中描述的方法的对应方法(但是在该情况下涉及访问和查看合成图像)。此处描述的方法可以通过访问或存储合成图像的显示设备来实现。显示设备可以是与用于记录多个图像的设备不同的设备。在其它情况下,显示设备可以与用于记录多个图像的设备相同。在一些情况下,显示设备还可以生成合成图像但是可能没有记录该多个图像。
在框1010,显示设备可以访问对象(例如,对象310)的第一合成图像,第一合成图像包括第一多个图像的叠加,其中,第一多个图像中的每个图像包括:从第一位置记录的对象,和来自位于与所述第一多个图像中的其它图像中的每个图像不同位置处的光源的光在对象上的反射。在框1020,显示设备可以访问基于倾斜程度的第一输入。如前所述,倾斜程度可以基于多个不同的输入手段,包括例如来自陀螺仪、加速度计的数据、触摸数据或鼠标输入,其可以包括如上所述的倾斜数据的模拟。在框1030,显示设备可以显示合成图像,其中,以根据于第一倾斜程度输入的透明度来显示合成图像内的图像中的每个图像。例如,图像中的一些图像可以是完全透明的,而少数图像可以基于访问到的倾斜输入具有非零不透明度,该非零不透明度与查看者期望以其查看对象的计算出的角度相对应。一般而言,此处描述的方法可以与在整个公开中描述(包括例如在图4、5、6A、6B、7、8A和8B中的描述)的方法相一致。
在一些示例实施例中,与用于生成合成图像的方法相类似,第二合成图像可以与第一合成图像图形连接,并且查看者可以输入第二输入以在第一合成图像和第二合成图像之间平滑滚动。
参考图11,根据一些示例实施例,框图示出了机器1100的组件,机器1100能够从机器可读介质1122(例如,非瞬时机器可读介质、机器可读存储介质、计算机可读存储介质或其任何合适的组合)读取指令1124并且整体地或部分地执行本文论述的方法中的任何一个或多个方法。具体地,图11示出了计算机系统(例如计算机)的示例形式的机器1100,在其内可以整体地或部分地执行用于引起机器1100实施本文论述的方法中的任何一个或多个方法的指令1124(例如,软件、程序、应用程序(application)、小程序、应用(app)或其它可执行代码)。
在备选实施例中,机器1100作为独立的设备工作或可以连接(例如,联网)到其它机器。在联网的部署中,机器1100可以在服务器-客户端网络环境中以服务器机器或客户端机器的身份工作,或在分布式(例如,对等)网络环境中作为对等机器工作。机器1100可以包括硬件、软件或其组合,并且可以作为示例是服务器计算机、客户端计算机、个人计算机(PC)、平板计算机、膝上型计算机、上网本、蜂窝电话、智能电话、机顶盒(STB)、个人数字助理(PDA)、web应用、网络路由器、网络交换机、网桥或能够顺序或以其它方式执行指定将由该机器采取的动作的指令1124的任何机器。此外,虽然示出了仅仅单个机器,但是术语“机器”还将被认为包括单独地或联合地执行指令1124以实施本文论述的方法中的任何一个或多个方法的全部或部分的机器的任何集合。
机器1100包括处理器1102(例如,中央处理单元(CPU)、图形处理单元(GPU)、数字信号处理器(DSP)、专用集成电路(ASIC)、射频集成电路(RFIC)、或其任何合适的组合)、主存储器1104和静态存储器1106,它们被配置为经由总线1108彼此进行通信。处理器1102可以包含可由指令1124中的一些或全部暂时或永久配置的微电路,使得处理器1102可被配置为整体地或部分地执行本文描述的方法中的任何一个或多个方法。例如,处理器1102的一个或多个微电路的集合可以可配置为执行本文描述的一个或多个模块(例如,软件模块)。
机器1100还可以包括视频显示器1110(例如,等离子体显示面板(PDP)、发光二极管(LED)显示器、液晶显示器(LCD)、投影仪、阴极射线管(CRT)或能够显示图形或视频的任何其它显示器)。机器1100还可以包括字母数字输入设备1112(例如,键盘或小键盘)、光标控制设备1114(例如,鼠标、触摸板、跟踪球、操纵杆、移动传感器、眼镜跟踪设备或其它指向仪器)、存储单元1116、音频生成设备1118(例如,声卡、扩音器、扬声器、耳机插孔或其任何合适的组合)和网络接口设备1120。
存储单元1116包括机器可读介质1122(例如,有形和非瞬时机器可读存储介质),在其上存储有体现本文描述(包括例如图1、2、3、4、5、6A、6B、7、8A、8B、9和/或10的描述中的任何描述)的方法或功能中的任何一个或多个的指令1124。指令1124还可以在其由机器1100执行前或期间完全或至少部分驻留在主存储器1104内、在处理器1102内(例如,在处理器的高速缓存存储器内)或在此两者内。指令还可以驻留在静态存储器1106内。
相应地,主存储器1104和处理器1102可以被认为是机器可读介质(例如,有形和非瞬时机器可读介质)。可以经由网络接口设备1120通过网络1126来传送或接收指令1124。例如,网络接口设备1120可以使用任何一个或多个传输协议(例如,超文本传输协议(HTTP))来传输指令1124。机器1100还可以表示用于执行本文描述的功能(包括在图1、2、3、4、5、6A、6B、7、8A、8B、9和/或10中描述的过程)中的任何一个的示例手段。
在一些示例实施例中,机器1100可以是便携式计算设备(诸如智能电话或平板计算机)并且具有未示出的一个或多个附加的输入组件(例如,传感器或仪表)。这样的输入组件的示例包括图像输入组件(例如,一个或多个摄像机)、音频输入组件(例如,麦克风)、方向输入组件(例如,罗盘)、位置输入组件(例如,全球定位系统(GPS)接收器)、定向组件(例如,陀螺仪)、移动检测组件(例如,一个或多个加速度计)、高度检测组件(例如,高度计)和气体检测组件(例如,气体传感器)。由这些输入组件中的任何一个或多个获取的输入可以是可访问的,且可供本文描述的模块中的任何一个模块使用。
如本文使用的,术语“存储器”是指能够暂时或永久存储数据的机器可读介质,并且可以认为包括但不限于随机存取存储器(RAM)、只读存储器(ROM)、缓冲存储器、闪存和高速缓存存储器。虽然机器可读介质1122在示例实施例中示出为单个介质,但是术语“机器可读介质”应当被认为包括能够存储指令的单个介质或多个介质(例如,集中式或分布式数据库或相关联的高速缓存和服务器)。术语“机器可读介质”还将被认为包括任何介质或多个介质的组合,其能够存储用于由机器1100执行的指令1124,使得指令1124当由机器1100的一个或多个处理器(例如,处理器1102)执行时,引起机器1100整体地或部分地实施本文描述的方法中的任何一个或多个方法。相应地,“机器可读介质”是指单个存储装置或设备以及包括多个存储装置或设备的基于云的存储系统或存储网络。术语“机器可读介质”将相应地被认为包括但不限于以固态存储器、光学介质、磁介质或其任何合适的组合的形式的一个或多个有形(例如,非瞬时)数据存储库。
贯穿本说明书,多个实例可以实现被描述为单个实例的组件、操作或结构。尽管一个或多个方法的个别的(individual)操作被示出和描述为单独的操作,但是个别的操作中的一个或多个可以同时执行,并且绝不要求操作以示出的顺序来执行。在示例配置中呈现为单独的组件的结构和功能可以实现为组合的结构或组件。类似地,呈现为单个组件的结构和功能可以实现为单独的组件。这些和其它变型、修改、添加和改进都落入本文主题的范围内。
某些实施例在本文描述为包括逻辑或多个组件、模块或机构。模块可以构成软件模块(例如,存储或以其它方式包含在机器可读介质上或传输介质中的代码)、硬件模块或其任何合适的组合。“硬件模块”是能够执行某些操作的有形的(例如,非瞬时)单元并且可以以某个物理方式来进行配置或布置。在各种示例实施例中,一个或多个计算机系统(例如,独立的计算机系统、客户端计算机系统或服务器计算机系统)或计算机系统的一个或多个硬件模块(例如,处理器或处理器的群组)可以由软件(例如,应用程序或应用程序部分)配置为操作以执行如本文描述的某些操作的硬件模块。
在一些实施例中,可以以机械方式、电子方式或其任何合适的组合来实现硬件模块。例如,硬件模块可以包括永久配置为执行某些操作的专用电路或逻辑。例如,硬件模块可以是专用处理器(诸如现场可编程门阵列(FPGA)或ASIC)。硬件模块还可以包括由软件暂时配置为执行某些操作的可编程逻辑或电路。例如,硬件模块可以包括包含在通用处理器或其它可编程处理器内的软件。应当理解的是,可以通过成本考虑和时间考虑来推动在专用和永久配置的电路中或在暂时配置的(例如,由软件配置的)电路中以机械方式实现硬件模块的决定。
相应地,短语“硬件模块”应当被理解为包含有形实体,并且这样的有形实体可以被物理构造、永久配置(例如,硬连线)或暂时配置(例如编程)以按某个方式进行操作或执行本文描述的某些操作。本文使用的“硬件实现的模块”是指硬件模块。考虑硬件模块被暂时配置(例如,编程)的实施例,不需要在任何一个时刻对硬件模块中的每个进行配置或实例化。例如,在硬件模块包括由软件配置为成为专用处理器的通用处理器的情况下,通用处理器可以配置为在不同的时间分别作为不同的专用处理器(例如,包括不同的硬件模块)。软件(例如,软件模块)可以相应地配置例如一个或多个处理器以在一个时刻构成特定的硬件模块并且在不同的时刻构成不同的硬件模块。
硬件模块可以向其它硬件模块提供信息并且从其接收信息。相应地,所描述的硬件模块可以被视为是通信耦合的。在多个硬件模块同时存在的情况下,可以通过硬件模块中的两个或多于两个硬件模块之间或之中的信号传输(例如,通过适当的电路和总线)来实现通信。在多个硬件模块被在不同的时间配置或实例化的实施例中,可以例如通过对在存储器结构中的信息(多个硬件模块对其有访问权限)的存储和检索来实现在这样的硬件模块之间的通信。例如,一个硬件模块可以执行操作并且将该操作的输出存储在其通信地耦合到的存储器设备中。另外的硬件模块然后可以在稍后的时间访问存储器设备以检索和处理所存储的输出。硬件模块还可以发起与输入或输出设备的通信,并且可以对资源(例如,信息的集合)进行操作。
本文描述的示例方法的各种操作可以至少部分地由暂时配置(例如,通过软件)或永久配置以执行相关操作的一个或多个处理器来执行。无论是暂时配置还是永久配置,这样的处理器可以构成操作以执行本文描述的一个或多个操作或功能的处理器实现模块。本文使用,“处理器实现模块”是指使用一个或多个处理器实现的硬件模块。
类似地,本文描述的方法可以是至少部分处理器实现的,处理器是硬件的示例。例如,方法的操作中的至少一些可以由一个或多个处理器或处理器实现的模块来执行。本文使用的“处理器实现模块”是指其中硬件包括一个或多个处理器的硬件模块。此外,一个或多个处理器还可以操作以支持在“云计算”环境中的相关操作的执行或作为“软件即服务”(SaaS)。例如,操作中的至少一些可以由计算机的群组(作为包括处理器的机器的示例)来执行,其中这些操作可经由网络(例如,因特网)和经由一个或多个适当的接口(例如,应用程序接口(API))来访问。
某些操作的执行可以分布于一个或多个处理器(不仅驻留在单个机器内,而且部署在多个机器中)中。在一些示例实施例中,一个或多个处理器或处理器实现的模块可以位于单个地理位置(例如,在家庭环境、办公室环境或服务器群内)。在其它示例实施例中,一个或多个处理器或处理器实现的模块可以分布于多个地理位置中。
可以从对存储为机器存储器(例如,计算机存储器)内的比特或二进制数字信号的数据的操作的算法或符号表示方案来呈现本文论述的主题的一些部分。这样的算法或符号表示是由在数据处理领域的普通技术人员使用以向本领域的其它技术人员传达他们的工作的实质的技术的示例。如本文使用的,“算法”是导致期望结果的操作或类似处理的自相一致序列。在这种情况下,算法和操作涉及物理量的物理操纵。通常但不一定,这样的量可以采取能够由机器存储、访问、传送、组合、比较或以其它方式操纵的电、磁或光学信号的形式。有时主要出于普遍使用的原因以使用诸如“数据”、“内容”、“位”、“值”、“元件”、“符号”、“字符”、“术语”、“编号(number)、“数字(numeral)”等等的词语来指代这样的信号是方便的。然而这些词语仅仅是方便的标签并且将与适当的物理量相关联。
除非另有明确说明,本文使用诸如“处理”、“运算(computing)”、“计算(calculating)”、“确定”、“呈现”、“显示”等等的词语的论述可以是指机器(例如,计算机)的动作或过程,其对呈现为在一个或多个存储器(例如,易失性存储器、非易失性存储器或其任何合适的组合)、寄存器或接收、存储、传送或显示信息的其它机器组件内的物理(例如,电子、磁或光学)量的数据进行操纵或变换。此外,除非另有明确说明,本文使用如在专利文件中常见的术语“a(一)”或“an(一个)”以包括一个或多于一个实例。最后,如本文使用的,除非另有明确说明,连词“or(或)”是指非排他性的“or(或)”。
Claims (15)
1.一种计算机实现的方法,包括:
访问第一多个图像,所述第一多个图像中的每个图像包括:
从第一位置记录的对象,以及
来自位于与所述第一多个图像中的其它图像中的每个图像不同位置处的光源的光在所述对象上的反射;以及
生成所述对象的第一合成图像,所述第一合成图像包括所述第一多个图像的叠加,且其中,所述第一多个图像中的每个图像被配置为:在所述第一合成图像内并根据基于倾斜程度的第一输入,改变透明度。
2.根据权利要求1所述的方法,其中,所述第一多个图像中的每个图像的透明度的改变还根据于:在所述第一多个图像中的每个图像中,所述光源的位置相对于所述对象的方向。
3.根据权利要求1所述的方法,其中,所述第一多个图像中的每个图像的透明度的改变基于以下二者之间的对应关系:所述倾斜程度,以及在所述第一多个图像中的每个图像中所述光源的位置相对于所述对象的方向。
4.根据权利要求1所述的方法,其中,所述第一多个图像中的每个图像的透明度的改变基于根据缝合算法进行的倾斜计算。
5.根据权利要求1所述的方法,其中,所述基于倾斜程度的第一输入包括:来自被配置为显示所述第一合成图像的设备的显示屏幕的触摸数据。
6.根据权利要求1所述的方法,其中,所述基于倾斜程度的第一输入包括:来自鼠标滚动的数据。
7.根据权利要求1所述的方法,还包括:
访问第二多个图像,所述第二多个图像中的每个图像包括:
从第二位置记录的所述对象,以及
来自位于与其他第二多个图像中的每个图像不同位置处的光源的光在所述对象上的反射;
生成所述对象的第二合成图像,所述第二合成图像包括所述第二多个图像的叠加,且其中,所述第二多个图像中的每个图像被配置为:在所述第二合成图像内并根据基于倾斜程度的第二输入,改变透明度;以及
生成所述第一合成图像和所述第二合成图像之间的图形连接,其中,所述第一合成图像的显示被配置为过渡到所述第二合成图像的显示,所述过渡基于所述第一合成图像和所述第二合成图像之间的所述图形连接。
8.一种计算机实现的系统,包括:
第一存储器,耦合到第一处理器,所述第一处理器被配置为:
访问第一多个图像,所述第一多个图像中的每个图像包括:
从第一位置记录的对象,以及
来自位于与所述第一多个图像中的其它图像中的每个图像不同位置处的光源的光在所述对象上的反射;以及
生成所述对象的第一合成图像,所述第一合成图像包括所述第一多个图像的叠加,且其中,所述第一多个图像中的每个图像被配置为:在所述第一合成图像内并根据基于倾斜程度的第一输入,改变透明度。
9.根据权利要求8所述的系统,其中,所述第一多个图像中的每个图像的透明度的改变还根据于:在所述第一多个图像中的每个图像中,所述光源的位置相对于所述对象的方向。
10.根据权利要求8所述的系统,其中,所述基于倾斜程度的第一输入包括:来自被配置为显示所述第一合成图像的显示设备中的加速度计和/或陀螺仪的测量。
11.根据权利要求8所述的系统,其中,所述处理器还配置为:
访问第二多个图像,所述第二多个图像中的图像中的每个图像包括:
从第二位置记录的所述对象,以及
来自位于与其他第二多个图像中的每个图像不同位置处的光源的光在所述对象上的反射;
生成所述对象的第二合成图像,所述第二合成图像包括所述第二多个图像的叠加,且其中,所述第二多个图像中的每个图像被配置为:在所述第二合成图像内并根据基于倾斜程度的第二输入,改变透明度;以及
生成所述第一合成图像和所述第二合成图像之间的图形连接,其中,所述第一合成图像的显示被配置为过渡到所述第二合成图像的显示,所述过渡基于所述第一合成图像和所述第二合成图像之间的所述图形连接。
12.一种计算机实现的方法,包括:
访问第一多个图像,所述第一多个图像中的每个图像包括:从第一位置记录的对象,以及来自位于与所述第一多个图像中的其它图像中的每个图像不同位置处的光源的光在所述对象上的反射;
生成所述对象的第一合成图像,所述第一合成图像包括所述第一多个图像的叠加,且其中,所述第一多个图像中的每个图像被配置为:在所述第一合成图像内并根据基于倾斜程度的第一输入,改变透明度;以及
响应于用于对来自所述对象的光反射的交互视角进行呈现的用户输入,调整所述第一多个图像中的每个图像的透明度。
13.根据权利要求12所述的方法,其中,所述第一多个图像中的每个图像的透明度的改变基于根据缝合算法进行的倾斜计算。
14.根据权利要求12所述的方法,还包括:
访问第二多个图像,所述第二多个图像中的每个图像包括:
从第二位置记录的对象,以及
来自位于与其他第二多个图像中的每个图像不同位置处的光源的光在所述对象上的反射;
生成所述对象的第二合成图像,所述第二合成图像包括所述第二多个图像的叠加,且其中,所述第二多个图像中的每个图像被配置为:在所述第二合成图像内并根据基于倾斜程度的第二输入,改变透明度;以及
生成所述第一合成图像和所述第二合成图像之间的图形连接,其中,所述第一合成图像的显示被配置为过渡到所述第二合成图像的显示,所述过渡基于所述第一合成图像和所述第二合成图像之间的所述图形连接。
15.根据权利要求12所述的方法,其中,所述第一多个图像中的每个图像的透明度的改变还根据于:在所述第一多个图像中的每个图像中,所述光源的位置相对于所述对象的方向。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
CN202310078701.6A CN116109722A (zh) | 2014-04-23 | 2015-04-21 | 用于对象照片上的镜面高光的系统和方法 |
Applications Claiming Priority (3)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
US14/260,091 | 2014-04-23 | ||
US14/260,091 US9607411B2 (en) | 2014-04-23 | 2014-04-23 | Specular highlights on photos of objects |
PCT/US2015/026908 WO2015164395A1 (en) | 2014-04-23 | 2015-04-21 | Specular highlights on photos of objects |
Related Child Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN202310078701.6A Division CN116109722A (zh) | 2014-04-23 | 2015-04-21 | 用于对象照片上的镜面高光的系统和方法 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN106462769A CN106462769A (zh) | 2017-02-22 |
CN106462769B true CN106462769B (zh) | 2023-01-24 |
Family
ID=54333091
Family Applications (2)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN202310078701.6A Pending CN116109722A (zh) | 2014-04-23 | 2015-04-21 | 用于对象照片上的镜面高光的系统和方法 |
CN201580032600.9A Active CN106462769B (zh) | 2014-04-23 | 2015-04-21 | 对象照片上的镜面高光 |
Family Applications Before (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN202310078701.6A Pending CN116109722A (zh) | 2014-04-23 | 2015-04-21 | 用于对象照片上的镜面高光的系统和方法 |
Country Status (5)
Country | Link |
---|---|
US (4) | US9607411B2 (zh) |
EP (2) | EP3786877A1 (zh) |
KR (3) | KR101961382B1 (zh) |
CN (2) | CN116109722A (zh) |
WO (1) | WO2015164395A1 (zh) |
Families Citing this family (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US9607411B2 (en) | 2014-04-23 | 2017-03-28 | Ebay Inc. | Specular highlights on photos of objects |
USD800772S1 (en) * | 2015-09-04 | 2017-10-24 | Jaguar Land Rover Limited | Display screen or portion thereof with icon |
CN111489448B (zh) * | 2019-01-24 | 2024-08-20 | 宏达国际电子股份有限公司 | 检测真实世界光源的方法、混合实境系统及记录介质 |
US11010935B2 (en) | 2019-08-28 | 2021-05-18 | International Business Machines Corporation | Context aware dynamic image augmentation |
Citations (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US6031542A (en) * | 1996-02-12 | 2000-02-29 | Gmd - Forschungszentrum Informationstechnik Gmbh | Image processing method and arrangement for the display of reflective objects |
CN101751672A (zh) * | 2008-11-28 | 2010-06-23 | 索尼株式会社 | 图像处理系统 |
CN103051867A (zh) * | 2011-10-13 | 2013-04-17 | 爱信精机株式会社 | 图像生成器 |
Family Cites Families (32)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US4669812A (en) * | 1983-09-12 | 1987-06-02 | Hoebing John L | Method and apparatus for 3-D image synthesis |
EP1213569B1 (de) | 2000-12-08 | 2006-05-17 | Gretag-Macbeth AG | Vorrichtung zur bildelementweisen Ausmessung eines flächigen Messobjekts |
US6798429B2 (en) * | 2001-03-29 | 2004-09-28 | Intel Corporation | Intuitive mobile device interface to virtual spaces |
US20030137506A1 (en) | 2001-11-30 | 2003-07-24 | Daniel Efran | Image-based rendering for 3D viewing |
JP4217100B2 (ja) * | 2003-04-17 | 2009-01-28 | 本田技研工業株式会社 | 画像合成方法、装置、およびプログラム、ならびに立体モデルのレンダリング方法、装置、およびプログラム |
US7301538B2 (en) * | 2003-08-18 | 2007-11-27 | Fovia, Inc. | Method and system for adaptive direct volume rendering |
EP1737347B1 (en) | 2004-04-15 | 2020-07-01 | Edda Technology, Inc. | Multiple volume exploration system and method |
JP4483841B2 (ja) * | 2006-09-06 | 2010-06-16 | カシオ計算機株式会社 | 撮像装置 |
US8134553B2 (en) * | 2007-09-24 | 2012-03-13 | Microsoft Corporation | Rendering three-dimensional objects on a server computer |
US8159490B2 (en) | 2007-10-16 | 2012-04-17 | Dreamworks Animation Llc | Shading of translucent objects |
US20090135177A1 (en) | 2007-11-20 | 2009-05-28 | Big Stage Entertainment, Inc. | Systems and methods for voice personalization of video content |
US8184143B2 (en) | 2008-06-27 | 2012-05-22 | Sony Mobile Communications Ab | Simulated reflective display |
US20100054578A1 (en) | 2008-08-26 | 2010-03-04 | Frank Edughom Ekpar | Method and apparatus for interactive visualization and distribution of very large image data sets |
CN101673346B (zh) * | 2008-09-09 | 2013-06-05 | 日电(中国)有限公司 | 对图像进行处理的方法、设备和系统 |
WO2010052550A2 (en) | 2008-11-05 | 2010-05-14 | Easywalk Capital S.A. | System and method for creating and broadcasting interactive panoramic walk-through applications |
WO2010085249A1 (en) | 2009-01-22 | 2010-07-29 | Hewlett-Packard Development Company, L.P. | Estimating blur degradation of an image using specular higlights |
US8593485B1 (en) * | 2009-04-28 | 2013-11-26 | Google Inc. | Automatic video and dense image-based geographic information matching and browsing |
US20120099194A1 (en) | 2009-06-19 | 2012-04-26 | Koninklijke Philips Electronics N.V. | Multi-view device for generating animations or three dimensional images |
JP5528739B2 (ja) | 2009-08-12 | 2014-06-25 | 株式会社ジャパンディスプレイ | 検出装置、表示装置、および物体の近接距離測定方法 |
US8461532B2 (en) | 2009-11-05 | 2013-06-11 | The Aerospace Corporation | Refraction assisted illumination for imaging |
US20140063055A1 (en) * | 2010-02-28 | 2014-03-06 | Osterhout Group, Inc. | Ar glasses specific user interface and control interface based on a connected external device type |
US20120050144A1 (en) | 2010-08-26 | 2012-03-01 | Clayton Richard Morlock | Wearable augmented reality computing apparatus |
KR101688942B1 (ko) * | 2010-09-03 | 2016-12-22 | 엘지전자 주식회사 | 다중 디스플레이에 기반한 사용자 인터페이스 제공 방법 및 이를 이용하는 이동 단말기 |
US8818773B2 (en) | 2010-10-25 | 2014-08-26 | Vistaprint Schweiz Gmbh | Embroidery image rendering using parametric texture mapping |
US20130335437A1 (en) | 2011-04-11 | 2013-12-19 | Vistaprint Technologies Limited | Methods and systems for simulating areas of texture of physical product on electronic display |
JP5808985B2 (ja) * | 2011-09-05 | 2015-11-10 | 任天堂株式会社 | 情報処理プログラム、情報処理装置、情報処理システムおよび情報処理方法 |
US9019310B2 (en) | 2012-03-02 | 2015-04-28 | Adobe Systems Incorporated | Methods and apparatus for applying complex continuous gradients to images |
US9558590B2 (en) * | 2012-03-28 | 2017-01-31 | Microsoft Technology Licensing, Llc | Augmented reality light guide display |
KR101353786B1 (ko) * | 2012-04-18 | 2014-01-22 | 주식회사 엔토스 | Led 조명 이미지의 영상 구현을 위한 제어방법 |
CN102637303B (zh) * | 2012-04-26 | 2014-05-28 | 珠海医凯电子科技有限公司 | 基于gpu的超声三维混合叠加体渲染处理方法 |
US9216068B2 (en) | 2012-06-27 | 2015-12-22 | Camplex, Inc. | Optics for video cameras on a surgical visualization system |
US9607411B2 (en) | 2014-04-23 | 2017-03-28 | Ebay Inc. | Specular highlights on photos of objects |
-
2014
- 2014-04-23 US US14/260,091 patent/US9607411B2/en active Active
-
2015
- 2015-04-21 KR KR1020187011956A patent/KR101961382B1/ko active IP Right Grant
- 2015-04-21 CN CN202310078701.6A patent/CN116109722A/zh active Pending
- 2015-04-21 EP EP20202981.5A patent/EP3786877A1/en not_active Withdrawn
- 2015-04-21 EP EP15783577.8A patent/EP3134851B1/en active Active
- 2015-04-21 KR KR1020197007782A patent/KR102103679B1/ko active IP Right Grant
- 2015-04-21 KR KR1020167032550A patent/KR101854435B1/ko active Application Filing
- 2015-04-21 CN CN201580032600.9A patent/CN106462769B/zh active Active
- 2015-04-21 WO PCT/US2015/026908 patent/WO2015164395A1/en active Application Filing
-
2017
- 2017-03-24 US US15/468,761 patent/US9818215B2/en active Active
- 2017-11-10 US US15/809,577 patent/US10140744B2/en active Active
-
2018
- 2018-10-30 US US16/175,756 patent/US10424099B2/en active Active
Patent Citations (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US6031542A (en) * | 1996-02-12 | 2000-02-29 | Gmd - Forschungszentrum Informationstechnik Gmbh | Image processing method and arrangement for the display of reflective objects |
CN101751672A (zh) * | 2008-11-28 | 2010-06-23 | 索尼株式会社 | 图像处理系统 |
CN103051867A (zh) * | 2011-10-13 | 2013-04-17 | 爱信精机株式会社 | 图像生成器 |
Also Published As
Publication number | Publication date |
---|---|
CN106462769A (zh) | 2017-02-22 |
US20170200298A1 (en) | 2017-07-13 |
EP3134851A4 (en) | 2018-02-07 |
CN116109722A (zh) | 2023-05-12 |
US20190066350A1 (en) | 2019-02-28 |
US20150310635A1 (en) | 2015-10-29 |
KR20180049177A (ko) | 2018-05-10 |
US10424099B2 (en) | 2019-09-24 |
EP3134851A1 (en) | 2017-03-01 |
KR101854435B1 (ko) | 2018-05-04 |
US9818215B2 (en) | 2017-11-14 |
US20180158221A1 (en) | 2018-06-07 |
EP3786877A1 (en) | 2021-03-03 |
US9607411B2 (en) | 2017-03-28 |
KR102103679B1 (ko) | 2020-04-22 |
KR20160148620A (ko) | 2016-12-26 |
WO2015164395A1 (en) | 2015-10-29 |
KR20190031349A (ko) | 2019-03-25 |
KR101961382B1 (ko) | 2019-03-22 |
EP3134851B1 (en) | 2021-03-17 |
US10140744B2 (en) | 2018-11-27 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
US11416066B2 (en) | Methods and systems for generating and providing immersive 3D displays | |
US10424099B2 (en) | Specular highlights on photos of objects | |
US8884883B2 (en) | Projection of graphical objects on interactive irregular displays | |
CN104520785B (zh) | 基于检测到的输入来更改在显示区域的一部分中提供的内容的属性 | |
US20200020024A1 (en) | Virtual product inspection system using trackable three-dimensional object | |
US20150042654A1 (en) | Point and click lighting for image based lighting surfaces | |
US20130229406A1 (en) | Controlling images at mobile devices using sensors | |
US20140062998A1 (en) | User Interface for Orienting a Camera View Toward Surfaces in a 3D Map and Devices Incorporating the User Interface | |
US11562545B2 (en) | Method and device for providing augmented reality, and computer program | |
US20230153897A1 (en) | Integrating a product model into a user supplied image | |
AU2017202682B2 (en) | Rendering of digital images on a substrate | |
US11721061B2 (en) | Method and apparatus for displaying a collectible |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
C06 | Publication | ||
PB01 | Publication | ||
C10 | Entry into substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
GR01 | Patent grant | ||
GR01 | Patent grant |