CN104040576A - 物理对象的多角度成像 - Google Patents
物理对象的多角度成像 Download PDFInfo
- Publication number
- CN104040576A CN104040576A CN201280061709.1A CN201280061709A CN104040576A CN 104040576 A CN104040576 A CN 104040576A CN 201280061709 A CN201280061709 A CN 201280061709A CN 104040576 A CN104040576 A CN 104040576A
- Authority
- CN
- China
- Prior art keywords
- user
- images
- vision
- physical object
- mobile device
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
- 238000000034 method Methods 0.000 claims abstract description 56
- 230000033001 locomotion Effects 0.000 claims abstract description 19
- 230000004044 response Effects 0.000 claims abstract description 16
- 238000004458 analytical method Methods 0.000 claims abstract description 7
- 230000004438 eyesight Effects 0.000 claims description 140
- 230000000712 assembly Effects 0.000 claims description 17
- 238000000429 assembly Methods 0.000 claims description 17
- 238000001514 detection method Methods 0.000 claims description 11
- 238000013519 translation Methods 0.000 claims description 9
- 230000000007 visual effect Effects 0.000 abstract description 11
- 238000004891 communication Methods 0.000 description 20
- 238000010586 diagram Methods 0.000 description 17
- 230000008569 process Effects 0.000 description 14
- 238000012545 processing Methods 0.000 description 9
- 230000006870 function Effects 0.000 description 8
- 230000008859 change Effects 0.000 description 5
- 238000004590 computer program Methods 0.000 description 5
- 238000003384 imaging method Methods 0.000 description 5
- 238000005516 engineering process Methods 0.000 description 4
- 230000005540 biological transmission Effects 0.000 description 3
- 230000008878 coupling Effects 0.000 description 3
- 238000010168 coupling process Methods 0.000 description 3
- 238000005859 coupling reaction Methods 0.000 description 3
- 238000010191 image analysis Methods 0.000 description 3
- 230000003068 static effect Effects 0.000 description 3
- 230000001133 acceleration Effects 0.000 description 2
- 230000003321 amplification Effects 0.000 description 2
- 230000001413 cellular effect Effects 0.000 description 2
- 238000006243 chemical reaction Methods 0.000 description 2
- 239000012634 fragment Substances 0.000 description 2
- 238000003199 nucleic acid amplification method Methods 0.000 description 2
- 230000009467 reduction Effects 0.000 description 2
- 230000008054 signal transmission Effects 0.000 description 2
- 230000009471 action Effects 0.000 description 1
- 239000000654 additive Substances 0.000 description 1
- 230000000996 additive effect Effects 0.000 description 1
- 238000013459 approach Methods 0.000 description 1
- 230000006399 behavior Effects 0.000 description 1
- 230000008901 benefit Effects 0.000 description 1
- 150000001875 compounds Chemical class 0.000 description 1
- 239000012141 concentrate Substances 0.000 description 1
- 230000001419 dependent effect Effects 0.000 description 1
- 238000013461 design Methods 0.000 description 1
- 230000014509 gene expression Effects 0.000 description 1
- 238000005286 illumination Methods 0.000 description 1
- 230000000977 initiatory effect Effects 0.000 description 1
- 238000009434 installation Methods 0.000 description 1
- 239000004973 liquid crystal related substance Substances 0.000 description 1
- 239000011159 matrix material Substances 0.000 description 1
- 230000007246 mechanism Effects 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000003287 optical effect Effects 0.000 description 1
- 230000008520 organization Effects 0.000 description 1
- 230000002093 peripheral effect Effects 0.000 description 1
- 238000009877 rendering Methods 0.000 description 1
- 239000004065 semiconductor Substances 0.000 description 1
- 230000001502 supplementing effect Effects 0.000 description 1
- 238000010408 sweeping Methods 0.000 description 1
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/60—Control of cameras or camera modules
- H04N23/64—Computer-aided capture of images, e.g. transfer from script file into camera, check of taken image quality, advice or proposal for image composition or decision on when to take image
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T1/00—General purpose image data processing
- G06T1/0007—Image acquisition
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
- H04N13/20—Image signal generators
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/60—Control of cameras or camera modules
- H04N23/63—Control of cameras or camera modules by using electronic viewfinders
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/60—Control of cameras or camera modules
- H04N23/698—Control of cameras or camera modules for achieving an enlarged field of view, e.g. panoramic image capture
Landscapes
- Engineering & Computer Science (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Theoretical Computer Science (AREA)
- User Interface Of Digital Computer (AREA)
- Studio Devices (AREA)
Abstract
提出了一种用于捕获和显示物理对象的多角度成像的方法和系统。对于捕获,响应于用户输入从变化角度捕获对象的多个图像。分析图像以确定是否期望至少一个附加图像以允许产生对象的视觉呈现。基于分析通知用户发起捕获至少一个图像。响应于第二用户输入捕获附加图像。基于多个图像和附加图像产生呈现。对于显示,访问对象的视觉呈现,呈现具有来自变化角度的对象的多个图像。根据移动设备的用户移动向移动设备的用户呈现该呈现。用户输入确定图像的呈现速度和顺序。
Description
相关申请
本申请要求2011年12月14日递交的题为“Mobile Device Captureand Display of Multiple-Angle Imagery of Physical Objects”的美国申请No.13/325,855的优先权权益,其全部内部通过引用合并于此。
版权通知
本专利文献公开的一部分包含受版权保护的内容。当专利文献或专利公开出现在专利商标局的专利文件或记录中时,版权所有者不反对任何人对专利文献或专利公开的复制,但是另外保留所有版权权利。以下通知适用于如下所述并在形成本文献一部分的附图中的软件和数据:版权2012,eBay公司。保留所有权利。
技术领域
本申请总体上涉及软件开发,更具体地涉及使用移动或便携式设备捕获和观看对象的三维成像的系统和方法。
背景技术
互联网有助于百万计算机用户出于多种不同目的(例如,分销店、二手销售、一般信息交换等)在基本上无限制距离上邮递和观看静止照片和视频图像的能力。进一步增加这种能力是现在允许用户访问该视觉信息但不处在固定计算机系统的连接互联网的移动设备,例如,智能电话、支持互联网的个人数字助理(PDA)和平板计算机。
用于购物、销售和其他行为的大多数互联网相关成像涉及使用一个或多个单独的二维图像来向用户至少提供感兴趣的物理项目或位置的基本视图。近来,多方已经开始通过来自于相对于感兴趣的项目或位置的多个角度拍摄的图像,提供了呈现项目或位置的更现实视图的相关图像集合。
例如,一些网站提供所喜爱的室内或户外位置的全景视图示例。这些视图通常通过将在到固定位置多种方位处拍摄的多个照片图像“缝合”在一起来完成,以获得周围区域的360度视图。观看这种照片的用户然后可以通过鼠标或一组方向按钮来控制当前观看方位。
一些网站可以提供特定项目(例如,出售的产品)的图像集合,图像集合从多个角度或有利位置提供项目的视图。在一些情况下,在对象停留在旋转过一系列角度的转盘上的同时,使用固定摄像机来拍摄这些图像。然后在互联网上向用户呈现作为一系列相关图像的照片,用户可以再次通过鼠标或一组方向按钮来扫描这一系列图像。
附图说明
一些实施例由示例来说明但不受附图的限制,在附图中:
图1A是示出了示例移动设备的框图;
图1B是示出了图1A的示例移动设备的示例模块的框图;
图2是捕获物理对象的图像来产生对象的视觉呈现的示例方法的流程图;
图3是使用图1A的示例移动设备捕获物理对象的图像的示例的顶视图;
图4是根据对象的多个图像产生物理对象的视觉呈现的示例方法的流程图;
图5是示例了图像中对象的检测的物理对象的示例图像;
图6是物理对象的示例视觉呈现,其中视觉呈现包括多个图像;
图7是显示对象的视觉呈现的示例方法的流程图,其中显示在用户的控制下;
图8A是经由倾斜扫描通过对象视觉呈现的多个图像的示例用户控制的图示;
图8B是经由倾斜改变对象视觉呈现的图像缩放级别的示例用户控制的图示;
图9A是经由平移扫描通过对象视觉呈现的多个图像的示例用户控制的图示;
图9B是经由平移改变对象视觉呈现的图像缩放级别的示例用户控制的图示;以及
图10是示例形式的计算机系统中的机器的图示,在计算机系统内可以执行使机器执行本文讨论的任一个或多个方法的指令集。
具体实施方式
本文提出了经由移动设备捕获和显示多角度成像的示例方法和系统。在以下描述中,出于解释目的,提出多个特定细节,以便提供对示例实施例的完整理解。然而本领域技术人员清楚的是,可以在没有这些特定细节的情况下实践本发明主题。还应当清楚的是,本文描述的软件开发类型不限于所提供的示例,并且可以包括没有特别讨论的其他情形。
示例捕获和显示系统以及方法
根据示例实施例,图1示出了具有图像捕获组件116的示例移动设备102,图像捕获组件116可以允许移动设备102的用户从相对于对象150的多个角度捕获物理对象150的多个图像,并且基于多个图像产生对象150的多角度视觉呈现。移动设备102还可以配置为根据移动设备102的用户提供的输入向用户呈现视觉呈现。移动设备102可以配置为提供下文更详细描述的捕获和显示功能中的任一个或二者。物理对象150可以是任意尺寸和形状的任意物理对象(自然或人为),可以拍摄任意物理对象的多个图像,例如,单个静止图像的集合,或一个或多个视频剪辑。
在一个示例中,用户可以使用移动设备102,来经由图像捕获组件116捕获物理对象150周围某角度范围内(例如,180度或360度)的物理对象150的多个图像。用户然后可以经由移动设备102的用户接口108发起操作,以产生对象150的视觉呈现,这允许观看者从观看者所控制的多个角度中的任意角度仔细查看对象150。在一个实现方式中,移动设备102的用户可以经由通信网络160(例如,互联网或另一广域网(WAN))向通信节点170(例如网络服务器)上载生成的视觉呈现。在一个示例中,物理对象150是移动设备102的用户所有并有兴趣经由在线商场网站出售的对象。更具体地,通信节点170可以使得该视觉呈现可用于针对最终购买获取和观看的其他移动设备。此外,移动设备102可以获取其他用户提供的视觉呈现,以用于移动设备102的用户仔细查看。在其他示例中,物理对象105以及物理对象105的视觉呈现的捕获和观看可以不特定地与在线商场网站相关联,而是可以用于任意其他目的。
在一个示例中,移动设备102的用户可以利用移动设备102,从多个角度捕获物理对象150的图像,例如,通过围绕图像行进360度并且围绕对象每隔几度就拍摄静止照片图像。在另一示例中,用户可以通过用户围绕对象150行进时拍摄的一个或多个视频剪辑或片段来捕获对象150的多个图像。在另一示例中,对象150可以放置在可旋转或类似的设备上,并且在用户保持静止并经由移动设备102捕获图像的同时旋转。当按照这样的方式围绕对象150捕获图像涉及围绕对象150旋转的水平面时,可以在其他示例中利用除了描述水平面的那些角度以外的相对对象150的角度。
如图1A所示,示例移动设备102可以包括处理器104、存储器106、用户接口108、通信接口114和图像捕获组件116中的至少一个。处理器104执行存储器106中存储的一个或多个软件模块提供的指令,以下结合图1B更详细地描述一个或多个软件模块。存储器106还可以存储诸如多个图像等其他数据,以及物理对象150和其他物理对象的一个或多个视觉呈现。
通常,用户接口108辅助从用户到移动设备102的输入接收,以及从设备102到用户的信息输出。如图1A所示,用户接口108还可以包括显示组件110和运动检测组件112。在以下更详细描述的实施例中,显示组件110可以用于向用户提供产生的物理对象150的视觉呈现,向用户提供与图像捕获有关的反馈,以用于产生视觉呈现,并且提供其他信息。在一个示例中,运动检测组件112(例如,加速度计、陀螺仪和/或其他运动检测装置)检测用户对移动设备102施加的移动,而同时经由显示组件110向用户呈现视觉呈现,以控制视觉呈现的多个方面,如以下更详细描述的。
通信接口114辅助如上所述经由通信网络160的通信节点170与移动设备102之间的通信。在一个示例中,通信接口114包括经由与互联网耦接的蜂窝电话网络(例如,3G或4G蜂窝网络)进行通信的接口。在另一实施例中,通信接口114可以是能够例如通过DSL(数字订户线)或有线网关与耦接至互联网的无线路由器通信的IEEE802.11x(Wi-FiTM)接口。在其他示例中,其他类型的有线和/或无线通信接口可以用作通信接口114。
图像捕获组件116可以是能够捕获物理对象150的静止图像和/或视频剪辑或片段以供产生对象150的视觉呈现的任意组件或系统。在一个示例中,图像捕获组件116可以包括用于捕获来自对象150的光以产生一个或多个图像的图像阵列和一个或多个光学镜头。
图1B是移动设备102的存储器中存储的要由处理器104执行的示例软件模块的框图。如所示,模块包括图像捕获模块182、图像分析模块184、视觉呈现产生模块186、和视觉呈现显示控制模块188。在一个示例中,图像捕获模块182可以控制图像捕获组件116或与图像捕获组件116进行通信,来捕获在相对于物理对象150的多个角度处拍摄的对象图像。图像分析模块184可以分析经由图像捕获组件116和图像捕获模块182捕获的多个图像,以确定对象的一个或多个附加图像有利于产生对象150的期望视觉呈现。此外,图像分析模块184可以经由用户接口108向用户提供对相对于对象150的一个或多个角度的指示可以,从一个或多个角度捕获附加图像。视觉呈现产生模块186可以基于移动设备102捕获的物理对象150的图像,产生物理对象150的期望视觉呈现。视觉呈现显示控制模块188可以在正向用户呈现物理对象的视觉呈现的同时,经由用户接口108(更具体地,经由运动检测组件112)从用户接收输入,以控制或指导视觉呈现。当在软件模块方面描述图1B的模块时,可以以软件、硬件、固件和/或其某种组合来实现与这些模块相关联的多种功能。
图2示出了在相对于物理对象150的多个角度处捕获物理对象150的多个图像的示例方法200的流程图。在其他示例中,当图1A的移动设备102可以用于执行方法200时,利用不同组件或系统的其他移动设备或这任意其他计算或电子设备可以执行图2所示方法200的多个操作。在方法200中,响应于第一用户输入,从相对于物理对象150的变化角度捕获物理对象150的多个图像(操作202)。对图像进行分析,以确定至少一个附加图像是否可期望用于允许在相对于物理对象150的一定角度范围内产生物理对象的视觉呈现(操作204)。基于该分析通知用户发起对至少一个附加图像的捕获(操作206),其中向用户提供针对至少一个附加图像的相对于物理对象150的至少一个角度。然后响应于第二用户输入捕获对象150的至少一个附加图像(操作208)。基于多个图像和至少一个附加图像产生视觉呈现(操作210)。
在另一示例中,方法200可以编码为非临时性计算机可读存储介质(例如,集成电路、磁盘或光盘)上一个或多个电子处理器可读和可执行的指令。
图3示出了与要产生多角度视觉呈现的物理对象150相关的示例移动设备102的顶视图300。在该示例中,用户在遵循围绕对象150的路径302的同时使用移动设备102,从多个角度304捕获物理对象150的图像。如所示,用户可以通过针对每个图像发起移动设备102的静止照片图像模式来捕获单个图像,但是取而代之,用户也可以在其他实施例中采用移动设备102的视频剪辑捕获模式,能够使得在用户遵循围绕物理对象150的路径302时捕获许多图像。在一个示例中,移动设备102可以从用户接收发起多图像捕获模式的命令,响应于该命令,移动设备102可以发起基于用户指导而停止的视频捕获模式。在另一示例中,发起静止照片图像模式可以使移动设备102每单位时间(例如,一秒)捕获静止照片图像,直到用户终止图像捕获功能为止。
在捕获物理对象10的图像之后,移动设备102可以分析物理对象150的图像,以确定是否应当捕获物理对象150的任意附加图像,例如,以提高要产生的视觉呈现的质量。在一些实施例中,移动设备102可以确定是否应当捕获在附加角度306处或围绕附加角度360的至少一个附加图像。例如,在附加角度处306或在附加角度附近可以尚未捕获到对象150的图像,因此导致对象150的来自多个角度的整体图像覆盖中的“间隙”。在另一示例中,可以在附加角度306处或在附加角度306附近捕获了一个或多个图像,但是与在其他角度304处拍摄的图像相比,这些图像的质量不良(例如,照明不足、曝光过度等)。
响应于这样的分析,移动设备102可以请求用户在附加角度306处或附近捕获对象150的至少一个附加图像。此外,移动设备102可以指示相对于对象150的附加角度306,在附加角度306处要捕获一个或多个图像。在一个示例中,移动设备102可以呈现在邻近附加角度306的角度304处捕获的图像,并且指示用户应当在所呈现图像中指示的那些角度之间的角度306处拍摄附加图像。例如,可以通过全球定位系统(GPS)数据在其他实现方式中利用移动设备102可以向用户指示附加角度306的其他方法。在其他示例中,例如,移动设备102还可以通过建议拍摄闪光设置、光圈或捕获速度设置、缩放设置和/或与至少一个附加图像的捕获相关的其他设置,提供与如何捕获至少一个附加图像有关的向导。
响应于请求,用户然后可以使移动设备102在所请求的附加角度306处捕获图像。响应于正捕获的至少一个附加图像,移动设备102可以将先前捕获的图像连同任意附加捕获的图像一起进行分析,并且确定是否应当再捕获图像。如果是,则移动设备102然后可以请求在相对于对象150的一个或多个角度处拍摄更多图像。否则,移动设备102然后可以继续基于捕获的图像产生对象150的视觉呈现。
图4是根据物理对象150的多个捕获的图像产生视觉呈现的示例方法400的流程图。在方法400中,可以在物理对象150的多个捕获的图像中的每一个中识别到物理对象150(操作402)。图5提供了物理对象150的图像500的示例,在这种情况下,物理对象150是立方体对象。在图5中图像的其余区域标记为背景区域502。通过识别对感兴趣对象150加以表示的图像部分,移动设备102可以处理每个图像,以提供对象150的可接受视觉表示,如以下更详细描述的。
同样在方法400中,可以选择多个图像中的至少一些作为视觉呈现的基础(操作404)。例如,并选择非所有图像包括在视觉呈现中,在这种情况下,一些图像具有不良或不可接受的质量。在另一示例中,至少一些图像某种程度是可以是其他图像的复制,因此当产生视觉呈现时允许忽略复制图像或者保持未选择。对象150的视频剪辑可以包括几乎相同的图像的组。因此,并非所有这些图像可以包括在视觉呈现中,以便简化和减小视觉呈现的总体尺寸。
然后可以在移动设备102处对其余所选图像中的至少一些进行处理(操作406)以呈递更适合于包括在视觉呈现中的图像。在一个示例中,可以根据现有的所选图像对附加图像进行插值,以提供较平滑或更无缝的视觉呈现。例如,在与对象150的相对角度方面极接近拍摄的两个图像可以组成,以形成对与两个原始图像相关联的那些角度之间的相对角度加以表示的第三视觉图像。
在另一示例中,可以在一个或多个图像中采用插值来增强对象150的视觉呈现中所提供的每个图像的分辨率。在又一实现方式中,可以降低一个或多个图像的分辨率,以辅助在相对低分辨率的显示设备上观看视觉呈现。
图5是要合并到物理对象150的视觉呈现中的多个图像的图像500的图示。为了防止图像500内所呈现的物理对象150的不适当相对移动,可以对图像500进行处理,以检测物理对象(由图5中加黑轮廓线表示)。例如,这样的检测可以涉及每个图像500内的线检测,一个图像500与另一图像的比较、以及可采用检测对象150的其他技术。在一些示例中,移动设备102可以向移动设备102的用户请求输入,以识别一个或多个图像500内物理对象150的边界。
通过检测每个图像500内的物理对象150,可以进行其他处理来增强要产生的视觉呈现。例如,可以对一个或多个图像500进行处理,以在图像500内将物理对象150置于中心。如果按照这样的方式来处理要合并到视觉呈现中的大多数或所有图像500,则物理对象150看起来从图像500到视觉呈现的图像500保持固定,因此增强视觉体验。
在一些示例中,可以对一个或多个图像500进行处理,使得从图像500到图像500一致地呈现物理对象150的尺寸。在一个实现方式中,移动设备102可以对每个图像500进行“放大”和/或“缩小”,使得在用户观看生成的视觉呈现的同时物理对象150的总体外观尺寸看起来保持恒定。例如,该处理可以包括改变图像500的尺寸(提高分辨率或降低分辨率),以实现每个图像500内物理对象150的外观尺寸的对应改变。
在至少一些情况下,在一个或多个图像500内将物理对象150置于中心和/或改变物理对象150的尺寸可以使得图像500的所捕获部分占用少于可用于移动设备102的用户的所有可观看图像。为了解决该问题,移动设备102可以用其他视觉信息(例如,单色或一些视觉图案)来代替图像500的背景区域502的一个或多个部分(参见图5)。在一些示例中,可以按照这样的方式来代替全部背景区域502,以增强或强调图像500内的物理对象150。在一个实例中,可以用产生或创建的对象150的“阴影”来代替背景区域502的至少一部分,以向图像500提供某隐含深度。
在其他示例中,不是代替背景区域502,移动设备102可以通过多种技术来削弱图500的背景区域502,例如,将背景区域502从彩色转换成黑白,对背景区域502进行模糊或散焦,和/或降低背景区域502的亮度或对比度。
为了进一步增强视觉呈现的观看质量,移动设备102可以校正或调整物理对象150的其他方面和/或至少一些合并图像500的背景区域502。在一些示例中,这些方面可以包括物理对象150、背景区域502或二者的亮度、对比度、颜色、色调等。
尽管以上讨论了在产生视觉呈现中若干种不同形式的图像500的处理,但是在其他实施例中可以采用除了本文显式描述的那些形式处理以外或代替本文显式描述的那些形式的其他类型的处理。在另一示例中,可以采用图4的识别操作402、选择操作404和处理操作406中的任一个来确定用户是否应当捕获用于呈现的附加图像(如上参照图2的方法200所描述的)。
返回到图4的方法400,然后可以使用经处理的图像500来产生物理对象150的视觉呈现(操作408)。在一个示例中,多个图像法500可以链接在一起,或组合在单个文件或文件集合中。移动设备102或另一计算系统的用户能够访问并控制视觉呈现的显示。图6提供了视觉呈现600的图形示例,其中,多个图像602A、602B、602C(共同地,602)按照预定顺序链接在一起,使得用户可以如视觉呈现600中所指向地移动(traverse)图像602。在图6的示例中,图像602以线性方式链接,使得用户可以根据图像602相对于物理对象150的角度位置,从一个邻近图像602到另一邻近图像前进。在一个实现方式中,例如,如果图像602共同描述物理对象150的360度视图,则图像602可以按照圆形布置来链接。尽管图6的示例视觉表示600从位于物理对象150所处的水平面的多个角度提供物理对象150的视图,但是在其他实施例中,角度的一个或多个平面(包括物理对象150所处的一个或多个垂直和/或水平面)可以由视觉呈现600的图像602表示。在这样的实现方式中,多个图像602可以按照多维阵列或类似的数据结构链接,使得能够沿相对于物理对象150的垂直和水平方向二者对图像602进行处理。
此外,移动设备102的用户或用于观看视觉呈现600的其他计算设备也可以配置为从用户接收输入,以放大和/或缩小视觉呈现的一个或多个图像602,以增强物理对象150的观看。在一个示例中,单个图像602可以用于相对于对象150的每个角度,其中向该单个图像602施加缩放功能。在另一实现方式中,已经针对相对于对象150的每个角度捕获和处理了至少两个图像,在这种情况下,在特定角度处放大或缩小可以涉及显示图像602中与所选缩放级别相关联的特定一个图像。在其他示例中,可以利用图像选择和所选图像602内放大和缩小的组合。
除了实际图像602以外,视觉呈现600还可以包括多个元数据,包括但不限于,按照预定布置将多个图像602耦合在一起的链接信息、描述在视觉呈现600中表示的对象150周围的角度范围的信息、描述可用缩放范围的信息、以及描述物理对象150的信息。
尽管以上如在移动设备102中发生地描述了主要的图像处理以及产生视觉呈现600的其他方面,但是也可以在另一电子系统中完成这些方面中的至少一些。在一个示例中,移动设备102可以按照任一方式,经由通信网络160与通信节点170通信(图1A),以允许通信节点170执行至少一些图像处理和/或产生呈现600的其他方面。这样,可以更快速地执行这样的处理,并且在移动设备102上具有较低的计算负担。
在产生物理对象150的视觉呈现600之后,可以通过移动设备102、本文未特定描述的另一移动设备、或能够向用户显示视觉呈现的任意其他计算或电子设备来观看视觉呈现600。在以下示例中,图1A的电子设备102用于在用户的控制下显示视觉呈现600,主要经由用户对设备102的平移和/或倾斜(或旋转)移动。
图7是用于呈现视觉呈现(例如,图6的视觉呈现600)的示例方法700的流程图。在方法700中,在移动设备(例如,图1A的移动设备102)处访问物理对象的视觉呈现(操作702)。在一些示例中,视觉呈现可以预存在移动设备102的至少一个存储器中,或者可以从另一设备(例如,图1A的通信节点170)访问。如上所述,视觉呈现可以包括从相对于物理对象150的变化角度捕获的多个图像。通过对移动设备102进行移动(例如,平移和/或倾斜)的用户从移动设备102的用户接收输入(操作704)。根据用户输入向用户呈现视觉呈现,其中,输入确定多个图像的呈现顺序和呈现速度(操作706)。当在图7中呈现方法700作为按照特定顺序执行的一系列分离操作时,至少接收操作704和呈现操作706可以同时发生,使得移动设备102继续提供视觉呈现,作为对用户在移动设备102上施加的多个物理移动的反应。
图8A和8B分别提供了移动设备102的前视图和侧视图,指示移动设备102如何沿着多个方向倾斜或旋转,以便控制设备102的显示器110上的视觉呈现。如图8A所示,移动设备102可以顺时针倾斜,以便实现视觉呈现800的右扫描操作802。更具体地,当移动设备102从用户的角度顺时针倾斜时,显示给用户的视觉呈现800可以前进经过关联图像,到达相对于物理对象150的右侧,例如,从图像602A前进经过图像602B到达图像602C(图6)。根据该示例,移动设备102也可以逆时针倾斜,以使移动设备102从事针对视觉呈现800的左扫描操作804。因此,当移动设备102从用户的角度逆时针倾斜时,显示给用户的视觉呈现800的图像可以前进到相对于物理对象150的左侧,例如,从图像602C前进经过图像602B到达图像602A(图6)。
在一个实施例中,施加到移动设备102的倾斜或旋转量可以确定当显示给用户时扫描通过视觉呈现800中的图像的速度。例如,移动设备102从标称水平位置倾斜地越大,经由显示器110向用户连续显示视觉呈现800的各个单独图像的速度越快。相应地,将移动设备102保持在基本上水平位置(如图8A所示)可以使视觉呈现800提供与相对于物理对象150特定角度相关联的呈现800的图像的恒定或近似恒定显不。
在备选示例中,用户可以围绕垂直轴旋转(换言之,“偏航”)移动设备102,以使视觉呈现800根据用户在移动设备102上施加的旋转方向,从左到右扫描通过图像。
在图8B的示例中,移动设备102可以从用户的角度向前或向后倾斜,以使设备102呈现当前正向用户显示的呈现图像的放大或缩小版本。更具体地,将移动设备102的顶部远离用户倾斜(或者类似地,将设备102的底部朝向用户倾斜)可以使设备102对显示器110上正呈现的当前图像执行放大操作808。相反,将移动设备102的底部远离用户倾斜(或者相应地,将设备102的顶部朝向用户倾斜)可以使设备对当前图像执行缩小操作。类似于逐图像扫描,如上所述,移动设备102放大或缩小当前图像的速度可以与设备102向前或向后倾斜的幅度相关联。因此将移动设备102保持在垂直方位(如从设备102的侧面观看)可以将视觉呈现800保持在经由显示器110当前正呈现的图像的当前缩放级别。
此外,如图8A所示将移动设备102倾斜到左侧或右侧然后可以使设备102以针对正显示的每个图像相同缩放级别,沿对应方向前进经过视觉呈现800的图像。例如,如果呈现800的当前图像正以最大放大级别示出,则将设备102倾斜到左侧可以使设备102以相同放大级别扫描通过所有图像到达相对于对象150的左侧。
在先前示例中,以及以下更完整讨论的任意示例中,按照两种或多种不同方式同时倾斜或旋转移动设备102(例如,同时向前和向左倾斜设备102)可以使与这些方向中的每一个相关联的操作并发执行(例如,在增大图像的放大级别的同时向左扫描视觉呈现800)。
在视觉呈现800中,沿着向前和/或向后方向(如图8B所示)倾斜移动设备102可以使设备102扫描通过与对象150的上部视图和下部视图相关联的图像,而不改变图像的缩放级别,该视觉呈现800包括从相对于物理对象150的水平角度和垂直角度二者捕获的图像,使得可以看到对象150的上部视图和下部视图。例如,当用户向前倾斜移动设备102时,移动设备102可以扫描通过从与对象150的侧视图相关联的视图朝向与对象150的顶视图相关联的视图前进的图像。类似于如上所述的示例,向前或向后倾斜的幅度越大,扫描通过与对象150的较高视图或较低视图相关联的图像的速度越快。此外,向左或向右和向前或向后同时倾斜移动设备102可以使设备102沿着相对于物理对象150的垂直方向和水平方向二者前进经过视觉呈现800的图像。
图9A和9B分别提供了用户主要经由平移而不是旋转或倾斜控制视觉呈现800来操控移动设备102的前视图和侧视图。如图9A所示向左移动移动设备102可以使设备102前进经过呈现800的图像,就好像在左扫描操作904中移动至对象150的左侧。相反,向右移动移动设备102可以使设备102前进经过呈现800的图像,就好像在右扫描操作902中行进到相对于对象150的右侧。相应地,通过在水平方向上将移动设备102保持固定,用户可以使移动设备102在显示器110上保持视觉呈现800的当前图像。
在图9A中示出的相关示例中,移动设备102沿向上方向移动可以使移动设备102执行上扫描操作910,在上扫描操作910中,可以显示与对象150的上部视图相关联的图像,而同时移动设备102向下移动可以引起下扫描操作912,从而显示对象150的下部。此外,设备102的移动幅度(例如,通过距离、加速度或另外度量所测量的)可以与沿对应方向较快速地扫描通过呈现800的多个图像相关联。例如,向左侧快速地移动设备102可以引起以加速度方式沿外观上向左方向扫描通过呈现800的图像。同样,类似于结合图8A和8B上述复合移动,沿垂直方向和水平方向二者同时移动设备102可以引起相对于物理对象150对应扫描通过呈现800的图像。
图9B是移动设备102沿相对于用户的向前或向后方向操控移动设备102以改变经由显示器110正呈现的视觉呈现800的当前图像的缩放级别的图示。例如,通过朝向用户拉动或移动设备102,用户可以使设备102经由缩小操作906缩小当前正显示的图像。相应地,远离用户拉动或移动设备102可以使设备102经由放大操作908对正呈现的图像进行放大。因此沿向前和向后方向保持设备102固定可以保持正显示的图像的当前缩放级别。
当在上述示例中将特定扫描方向或缩放操作与移动设备102的特定倾斜或平移移动相关联时,在其他实现方式中这些或其他扫描或缩放操作可以与移动设备102的不同移动相关联。
作为本文讨论的至少一些实施例的结果,移动电子设备可以用于辅助捕获和/或观看针对物理对象的集成视觉呈现的图像。在一个示例中,视觉呈现可以经由移动设备与要经由在线商场网站销售或购买的对象的呈现的张贴和观看相关联,因此允许用户在更移动的环境下与在线商场交互。然而,在其他实现方式中视觉呈现以及与其相联系的对象可以与在线商场所涉及的任务或应用以外的其他任务或应用相关联,例如,社交网络、个人网页和其他计算机和通信相关环境。
在示例实施例中,在移动设备处响应于来自移动设备用户的第一用户输入,从相对于物理对象的变化角度捕获物理对象的多个图像。在移动设备处,可以对多个图像进行分析,以确定是否期望物理对象的至少一个附加图像以允许产生物理对象的视觉呈现,视觉呈现在相对于物理对象的一定角度范围内提供物理对象的视图。在移动设备处,基于对多个图像的分析,通知用户发起对至少一个附加图像的捕获,通知用户包括针对至少一个附加图像提供相对于物理对象的至少一个角度的指示。在移动设备处,响应于至少一个第二用户输入捕获至少一个附加图像。基于多个图像和至少一个附加图像产生视觉呈现。
在包括所有先前实施例的示例实施例中,通知用户还包括:向用户提供与要应用于移动设备以捕获至少一个附加图像的捕获设置有关的推荐。
在包括所有先前实施例的示例实施例中,推荐包括拍摄闪光灯设置的指示。
在包括所有先前实施例的示例实施例中,多个图像中每一个包括在移动设备处捕获的单个静止图像。
在包括所有先前实施例的示例实施例中,多个图像包括在移动设备处捕获的视频片段。
在包括所有先前实施例的示例实施例中,产生视觉呈现包括:选择非所有多个图像来合并到视觉呈现中。
在包括所有先前实施例的示例实施例中,产生视觉呈现包括:基于多个图像中的至少一个产生插值图像,以合并到视觉呈现中。
在包括所有先前实施例的示例实施例中,产生视觉呈现包括:识别多个图像中的每一个中的物理对象,并且基于对物理对象的识别,在多个图像中的至少一个内将物理对象置于中心。
在包括所有先前实施例的示例实施例中,产生视觉呈现包括:基于对物理对象的识别,改变多个图像中的至少一个中的物理对象的尺寸。
在包括所有先前实施例的示例实施例中,产生视觉呈现包括:识别多个图像中的每一个中的物理对象,并且编辑多个图像中的至少一个的背景区域,背景区域由多个图像中的至少一个中不包括物理对象的区域来限定。
在包括所有先前实施例的示例实施例中,产生视觉呈现包括:调整多个图像中的至少一个的亮度、对比度、颜色和色调中的至少一个。
在示例实施例中,一种设备包括:用户接口;图像捕获组件;至少一个处理器;和至少一个存储器组件,存储当由至少一个处理器执行时使至少一个处理器进行以下操作的指令:经由图像捕获组件,响应于经由用户接口从设备的用户接收的第一用户输入来捕获物理对象的多个图像,用户使从相对于物理对象的变化角度捕获多个图像;将多个图像存储在至少一个存储器组件中;对多个图像进行分析,以确定是否期望物理对象的至少一个附加图像以允许产生物理对象的视觉呈现,视觉呈现在相对于物理对象的一定角度范围内提供物理对象的视图;基于对多个图像的分析,经由用户接口通知用户发起捕获至少一个附加图像,通知用户包括针对至少一个附加图像的相对于物理对象的至少一个角度的指示;响应于经由用户接口接收的至少一个第二用户输入,捕获至少一个附加图像;基于多个图像和至少一个附加图像,产生视觉呈现;以及将视觉呈现存储在至少一个存储器组件中。
在包括所有先前实施例的示例实施例中,所述指令使至少一个处理器通过以下操作来通知用户:向用户提供与要应用于图像捕获组件来捕获至少一个附加图像的捕获设置有关的推荐。
在包括所有先前实施例的示例实施例中,多个图像中的每一个包括单个静止图像。
在包括所有先前实施例的示例实施例中,多个图像包括视频片段。
在包括所有先前实施例的示例实施例中,所述指令允许至少一个处理器通过以下操作来产生视觉呈现:选择非所有多个图像来合并到视觉呈现中。
在包括所有先前实施例的示例实施例中,所述指令允许至少一个处理器通过以下操作来产生视觉呈现:基于多个图像中的至少一个产生插值图像,以合并到视觉呈现中。
在示例示例中,在移动设备处访问物理对象的视觉呈现,视觉呈现包括来自于相对于物理对象的变化角度的物理对象的多个图像。移动设备的用户所提供的输入通过用户对移动设备进行移动来接收。根据移动设备的用户所提供的输入,向移动设备的用户呈现视觉呈现,输入确定要呈现给用户的多个图像的呈现顺序,以及要呈现给用户的多个图像的呈现速度。
在包括所有先前实施例的示例实施例中,输入还确定要呈现给用户的多个图像的缩放级别。
在包括所有先前实施例的示例实施例中,移动设备的移动包括平移移动设备。
在包括所有先前实施例的示例实施例中,移动设备的移动速度与向用户呈现多个图像中的每一个的时间段反向相关。
在包括所有先前实施例的示例实施例中,移动设备的移动包括倾斜移动设备。
在包括所有先前实施例的示例实施例中,移动设备的倾斜幅度与向用户呈现多个图像中的每一个的时间段反向相关。
在示例实施例中,一种设备包括:显示组件;运动检测组件;至少一个处理器;和至少一个存储器组件,存储物理对象的视觉呈现,视觉呈现包括来自于相对于物理对象的变化角度的物理对象的多个图像,并且存储当由至少一个处理器执行时使至少一个处理器进行以下操作的指令:访问至少一个存储器组件中的视觉呈现;从移动设备的用户接收由于用户移动设备而经由运动检测组件所检测的用户输入;并且根据用户输入,经由显示组件向设备的用户呈现视觉呈现,用户输入确定要呈现给用户的多个图像的呈现顺序以及要呈现给用户的多个图像的呈现速度。
在包括所有先前实施例的示例实施例中,用户输入还确定要呈现给用户的多个图像的缩放级别。
在包括所有先前实施例的示例实施例中,设备的移动包括平移设备和倾斜设备中的至少一个。
模块、组件和逻辑
本文描述了包括逻辑或多个组件、模块或机构的特定实施例。模块可以构成软件模块(例如,在机器可读介质上或传输信号中实现的代码)或硬件模块。硬件模块是能够执行特定操作的有形单元,并且可以按照特定反射来配置或布置。在示例实施例中,一个或多个计算机系统(例如,独立、客户端或服务器计算机系统),或者计算机系统的一个或多个硬件模块(例如,处理器或一组处理器)可以由软件(例如,应用或应用部分)来配置作为操作于执行本文所描述的特定操作的硬件模块。
在多个实施例中,可以机械或电子方式来实现硬件模块。例如,硬件模块可以包括专用电路或逻辑电路,永久配置(例如,配置为专用处理器,例如,现场可编程门阵列(FPGA)或专用集成电路(ASIC))为执行特定操作。硬件模块还可以包括可编程逻辑电路或电路(例如,包括在通用处理器或其他可编程处理器内),由软件临时配置来执行特定操作。应当认识到,判定在专用和永久配置的电路还是在临时配置的电路(例如,由软件来配置)中以机械方式实现硬件模块可以由成本和时间考虑来推动。
相应地,术语“硬件模块”应当理解为包括有形实体,是物理构造、永久配置(例如,硬线)或临时配置(例如,编程)为按照特定方式操作和/或执行本文描述的特定操作的实体。考虑临时配置(例如,编程)硬件模块的实施例,每个硬件模块不需要在任意时刻配置或示例。例如,如果硬件模块包括使用软件配置的通用后处理器,则通用处理器可以在不同时间配置为相应不同硬件模块。相应地,软件可以将处理器配置为在一个时刻构成例如特定硬件模块,并且在不同时刻构成不同硬件模块。
硬件模块可以向其他硬件模块提供信息,并从其他硬件模块接收信息。相应地,所描述的硬件模块可以视为通信耦合的。如果多个这样的硬件模块同时存在,则可以通过将硬件模块连接的信号传输(例如,通过适当的电路和总线)来实现通信。在不同时间配置或示例多个硬件模块的实施例中,例如,可以通过多个硬件模块访问的存储结构中信息的存储和获取来实现这种硬件模块之间的通信。例如,一个硬件模块可以执行操作并且将该操作的输出存储在与其通信耦合的存储器设备中。另一硬件模块然后可以在稍后时间访问存储器设备来获取并处理所存储的输出。硬件模块还可以发起与输入或输出设备的通信,并且可以对资源(例如,信息的收集)进行操作。
本文描述的示例方法的多个操作可以至少部分地由临时配置为(例如,由软件)或永久配置为执行相关操作的一个或多个处理器来执行。无论临时配置还是永久配置,这样的处理器均可以构成操作于执行功能的一个或多个操作的处理器实现的模块。在一些示例实施例中,本文所应用的模块包括处理器实现的模块。
类似地,本文描述的方法可以至少部分地是处理器实现的。例如,方法的一些操作可以由一个或多个处理器或处理器实现的模块来执行。特定操作的执行可以分布在一个或多个处理器之间,不仅驻留在单机内,而且在多机上部署。在一些示例实施例中,一个或多个处理器可以位于单个位置中(例如,在家庭环境、办公环境或服务器场内),而在其他实施例中,处理器可以在多个位置上分布。
一个或多个处理器还可以操作于支持“云计算”环境中的相关操作,或者操作为“作为服务的软件”(SaaS)。例如,至少一些操作可以由一组计算机(作为包括处理器的机器的示例)来执行,这些操作经由网络(例如,互联网)并且经由一个或多个适当接口(例如,应用编程接口(API))可访问。
电子装置和系统
示例实施例可以以数字电子电路或者在计算机硬件、固件或软件或其组合来实现。示例实施例可以使用计算机程序产品(例如,在信息载体或机器可读介质中有形地实现的计算机呈现)来实现,以由数据处理装置(例如,可编程处理器、一个或多个计算机)的操作来执行,或者控制数据处理装置的操作。
计算机程序可以按照任意形式的编程语言(包括编译或解释语言)来书写,并且可以按照任意形式来部署(包括单独程序或适合于在计算环境中使用的模块、子例程或其他单元)。计算机程序可以部署为在一个站点处的一个或多个计算机上执行,或者在多个上分布并且通过通信网络互连。
在示例实施例中,操作可以由一个或多个可编程处理器来执行,一个或多个可编程处理器执行计算机程序,以通过对输入数据进行操作并产生输出来执行功能。方法操作也可以由专用逻辑电路(例如,现场可编程门阵列(FPGA)或专用集成电路(ASIC))来执行,并且示例实施例的装置可以实现为专用逻辑电路。
计算系统可以包括客户端和服务器。客户端和服务器通常彼此远离,并且典型地通过通信网络交互。客户端和服务器之间的关系由于在它们相应计算机上运行并具有客户端-服务器彼此关系的计算机程序而出现。在部署可编程计算系统的实施例中,应当认识到可以考虑硬件和软件架构二者。具体地,应当认识到选择以永久配置硬件(例如,ASIC)、临时配置硬件(例如,软件和可编程处理器的组合)还是永久和临时配置硬件的组合来实现特定功能可以是设计选择。以下提出了可以在多个示例实施例中部署的硬件(例如,机器)和软件架构。
示例机器架构和机器可读介质
图10是示例形式的计算机系统1000中的机器的框图,在计算机系统1000内,可以执行使机器执行本文描述的任一或多个方法的指令。在备选实施例中,机器可以作为独立设备操作或可以与其他机器连接(例如,网络连接)。在网络布局中,机器可以作为服务器-客户端网络环境中的服务器或客户端机器来操作,或者作为对等(或分布式)网络环境中的对等端机器来操作。机器可以是个人计算机(PC)、平板PC、机顶盒(STB)、个人数字助理(PDA)、蜂窝电话、web应用、网络路由器、交换机或网桥,或者能够执行对该机器要采用的动作加以指定的指令(顺序或其他方式)的任何机器。此外,当仅示出了单机时,还应当采用术语“机器”来包括单独或联合执行一组(或多组)指令的机器的任意集合,以执行本文讨论的任一个或多个方法。
示例计算机系统1000包括处理器1002(例如,中央处理单元(CPU)、图形处理单元(GPU),或二者)、主存储器1004、和静态存储器1006,经由总线1008彼此通信。计算机系统1000还可以包括视频显示单元1010(例如,液晶显示器(LCD)或阴极射线管(CRT))。计算机系统1000还包括字母数字输入设备1012(例如,键盘)、用户接口(UI)导航设备1014(例如,鼠标)、盘驱动单元1016、信号发生设备1018(例如,扬声器)和网络接口设备1020。计算机系统1000还可以包括环境输入设备1026(例如,麦克风)、运动检测单元(例如,加速度计)、GPS(全球定位系统)单元、图像捕获单元、温度感测单元等。
机器可读介质
盘驱动单元1016包括:机器可读介质1022,其上存储有一个或多个数据指令集;以及指令1024(例如,软件)实现本文描述的任一个或多个方法或功能或由本文描述的任一个或多个方法或功能来使用。指令1024还可以在由计算机系统1000执行期间完全或至少部分地驻留在静态存储器1006、主存储器1004和/或处理器1002内,主存储器1004和处理器1002也构成机器可读介质。
当在示例实施例中将机器可读介质1022示为单个介质时,术语“机器可读介质”可以包括存储了一个或多个指令1024或数据结构的单个介质或多个介质(例如,集中式或分布式数据库、和/或关联的高速缓存和服务器)。也应当采用术语“非暂时性机器可读介质”来包括以下任意有形介质:能够存储、编码或执行由机器执行并使机器执行本发明主题的任一个或多个方法的指令,或者能够存储、编码或执行这样的指令所使用或与这样的指令相关联的数据结构。相应地应当采用术语“非暂时性机器可读介质”来包括但不限于,固态存储器和光学和磁介质。非暂时性机器可读介质的特定示例包括但不限于非易失性存储器,作为示例包括半导体存储器设备(例如,可擦除可编程只读存储器(EPROM)、电可擦除可编程只读存储器(EEPROM)、和闪速存储器设备)、磁盘(例如内部硬盘和可拆卸盘)、磁光盘、和CD-ROM(压缩盘只读存储器)和DVD-ROM(数字万能盘只读存储器)盘。
传输介质
指令1024还可以使用传输介质通过计算机网络1050来发送或接收。指令1024可以使用网络接口设备1020和多个公知的传输协议(例如,超文本传输协议(HTTP))中的任一个来传输。通信网络的示例包括局域网(LAN)、广域网(WAN)、互联网、移动电话网络、简易老式电话服务(POST)网络和无线数据网络(例如,WiFi和WiMAX网络)。应当采用术语“传输介质”来包括以下任意无形介质:能够存储、编码或执行由机器执行的指令,并且包括数字或模拟通信信号或其他无形介质来辅助这种软件的通信。
结论
因此,已经描述了辅助捕获和观看物理对象的多角度成像的方法和系统。尽管已经参照特定示例实施例描述了本发明主题,但是应当清楚的是,在不背离本发明主题的较宽范围的前提下,可以对这些实施例进行多种修改和改变。相应地,说明书和附图应视为示意性意义而不是限制性意义。形成本发明一部分的附图通过示意而不是限制示出可以实践本发明主题的特定实施例。足够详细地描述所示意的实施例以使得本领域技术人员能够实践本文描述的教导。可以利用和从中导出其他实施例,使得在不背离本公开范围的前提下进行结构和逻辑子替换和改变。因此该详细描述不应在限制意义下采用,并且多个实施例的范围仅由所附权利要求和等同于具有权利的权利要求的全部范围来限定。
仅出于方便起见,本发明主题的这种实施例单独和/或共同地由术语“本发明”引用于此,并不意在主动地将本申请的范围限制于任意单个发明或发明构思(如果事实上公开了多于一个发明或发明构思)。因此,尽管本文已经示意和描述了特定实施例,但是应当认识到计算为实现相同目的的任意布置可以代替所示的特定实施例。本公开意在覆盖多个实施例的任意和所有改变或变化。在查看以上描述时,这里没有特殊描述的以上实施例的组合和其他实施例对于本领域技术人员是显而易见的。
本文献中引用的所有公开、专利和专利文献的全部内容通过引用合并于此,就好像通过引用单独合并。在本文献与通过引用如此合并的那些文献之间的不一致使用的情况下,所合并参考文献中的使用应当视为对本文献的使用的补充;对于不可调和的不一致性,由本文献中的使用控制。
在本文献中,术语“一”或“一个”在专利文献中是常见的,以包括一个或多于一个,而与“至少一个”或“一个或多个”的任意其他情况或使用无关。在本文献中,术语“或”用于指代非排他,或者使得“A或B”包括“A而不是B”、“B而不是A”以及“A和B”,除非另外指示。在所附权利要求中,术语“包括”和“其中”用作相应术语“包含”和“其中”的易懂英文等同物。同样,在所附权利要求中,术语“包括”和“包含”是开放式的;即,权利要求中包括除了该术语之后所列的元件以外的其他元件的系统、设备、物品或处理仍视为落在该权利要求的范围内。此外,在所附权利要求中,术语“第一”、“第二”、“第三”等经用作标记,并不意在对它们的宾语强加数值要求。
提供本公开的摘要,以允许读者快速地确定本技术公开的本质。提交摘要,应理解其并不用于解释或限制权利要求的范围或含义。此外,在以上详细描述中,可以看出,出于使本公开简要的目的,多个特征在单个实施例中集中在一起。本公开的方法不应解释为反映所要求保护的实施例需要比每个权利要求中明确引述的特征更多特征的意图。相反,所附权利要求反映本发明主题落在单个公开实施例的非所有特征中。因此,所附权利要求据此合并到详细描述中,其中每个权利要求作为分离实施例依赖其自身。
Claims (20)
1.一种方法,包括:
在移动设备处,响应于来自移动设备用户的第一用户输入,从相对于物理对象的变化角度捕获物理对象的多个图像;
在移动设备处,对多个图像进行分析,以确定是否期望物理对象的至少一个附加图像以允许产生物理对象的视觉呈现,所述视觉呈现在相对于物理对象的一定角度范围内提供物理对象的视图;
在移动设备处,基于对多个图像的分析,通知用户发起对所述至少一个附加图像的捕获,所述通知用户包括:针对至少一个附加图像提供相对于物理对象的至少一个角度的指示;
在移动设备处,响应于至少一个第二用户输入捕获所述至少一个附加图像;以及
基于所述多个图像和所述至少一个附加图像产生视觉呈现。
2.根据权利要求1所述的方法,其中,通知用户还包括:向用户提供与要应用于移动设备以捕获所述至少一个附加图像的捕获设置有关的推荐。
3.根据权利要求2所述的方法,其中,推荐包括拍摄闪光灯设置的指示。
4.根据权利要求1所述的方法,其中,
产生视觉呈现包括以下中的至少一个:选择非所有多个图像来合并到视觉呈现中,以及基于多个图像中的至少一个产生插值图像以合并到视觉呈现中。
5.根据权利要求1所述的方法,其中,产生视觉呈现包括:
识别多个图像中每一个中的物理对象;并且
基于对物理对象的识别,在多个图像中的至少一个内将物理对象置于中心。
6.根据权利要求5所述的方法,其中,产生视觉呈现包括:基于对物理对象的识别,改变多个图像中的至少一个中的物理对象的尺寸。
7.根据权利要求1所述的方法,其中,产生视觉呈现包括:
识别多个图像中的每一个中的物理对象;并且
编辑多个图像中的至少一个图像的背景区域,所述背景区域由多个图像中的所述至少一个图像中不包括物理对象的区域来限定。
8.根据权利要求1所述的方法,其中,产生视觉呈现包括:调整多个图像中的至少一个图像的亮度、对比度、颜色和色调中的至少一个。
9.一种设备,包括:
用户接口;
图像捕获组件;
至少一个处理器;和
至少一个存储器组件,存储当由至少一个处理器执行时使至少一个处理器进行以下操作的指令:
经由图像捕获组件,响应于经由用户接口从设备的用户接收的第一用户输入来捕获物理对象的多个图像,用户使从相对于物理对象的变化角度捕获多个图像;
将多个图像存储在至少一个存储器组件中;
对多个图像进行分析,以确定是否期望物理对象的至少一个附加图像以允许产生物理对象的视觉呈现,视觉呈现在相对于物理对象的一定角度范围内提供物理对象的视图;
基于对多个图像的分析,经由用户接口通知用户发起捕获至少一个附加图像,通知用户包括针对至少一个附加图像指示相对于物理对象的至少一个角度;
响应于经由用户接口接收的至少一个第二用户输入,捕获至少一个附加图像;
基于多个图像和至少一个附加图像,产生视觉呈现;以及
将视觉呈现存储在至少一个存储器组件中。
10.根据权利要求9所述的设备,其中,所述指令使至少一个处理器通过以下操作来通知用户:向用户提供与要应用于图像捕获组件来捕获至少一个附加图像的捕获设置有关的推荐。
11.根据权利要求9所述的设备,其中,多个图像中的每一个包括单个静止图像。
12.根据权利要求9所述的设备,其中,多个图像包括视频片段。
13.根据权利要求9所述的设备,其中,所述指令使至少一个处理器通过以下操作来产生视觉呈现:选择非所有多个图像来合并到视觉呈现中。
14.根据权利要求9所述的设备,其中,所述指令使至少一个处理器通过以下操作来产生视觉呈现:基于多个图像中的至少一个产生插值图像,以合并到视觉呈现中。
15.一种设备,包括:
显示组件;
运动检测组件;
至少一个处理器;和
至少一个存储器组件,存储物理对象的视觉呈现,视觉呈现包括来自于相对于物理对象的变化角度的物理对象的多个图像,并且存储当由至少一个处理器执行时使至少一个处理器进行以下操作的指令:
访问至少一个存储器组件中的视觉呈现;
从设备的用户接收由于用户移动设备而经由运动检测组件所检测的用户输入;并且
根据用户输入,经由显示组件向设备的用户呈现视觉呈现,用户输入确定要呈现给用户的多个图像的呈现顺序以及要呈现给用户的多个图像的呈现速度。
16.根据权利要求15所述的设备,其中,用户输入还确定要呈现给用户的多个图像的缩放级别。
17.根据权利要求15所述的设备,其中,移动设备的移动包括平移移动设备。
18.根据权利要求17所述的设备,其中,移动设备的移动速度与向用户呈现多个图像中的每一个图像的时间段反向相关。
19.根据权利要求15所述的设备,其中,移动设备的移动包括倾斜移动设备。
20.根据权利要求19所述的设备,其中,移动设备的倾斜幅度与向用户呈现多个图像中的每一个图像的时间段反向相关。
Applications Claiming Priority (3)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
US13/325,855 US8872898B2 (en) | 2011-12-14 | 2011-12-14 | Mobile device capture and display of multiple-angle imagery of physical objects |
US13/325,855 | 2011-12-14 | ||
PCT/US2012/068959 WO2013090270A1 (en) | 2011-12-14 | 2012-12-11 | Multiple-angle imagery of physical objects |
Publications (2)
Publication Number | Publication Date |
---|---|
CN104040576A true CN104040576A (zh) | 2014-09-10 |
CN104040576B CN104040576B (zh) | 2017-11-24 |
Family
ID=48609734
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201280061709.1A Expired - Fee Related CN104040576B (zh) | 2011-12-14 | 2012-12-11 | 物理对象的多角度成像 |
Country Status (5)
Country | Link |
---|---|
US (2) | US8872898B2 (zh) |
CN (1) | CN104040576B (zh) |
AU (2) | AU2012352520B2 (zh) |
CA (1) | CA2858870C (zh) |
WO (1) | WO2013090270A1 (zh) |
Cited By (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN104349048A (zh) * | 2013-07-26 | 2015-02-11 | 三星电子株式会社 | 图像拍摄设备及其方法 |
CN107466474A (zh) * | 2015-05-26 | 2017-12-12 | 谷歌公司 | 针对移动设备的全方位立体捕获 |
CN109983504A (zh) * | 2016-09-07 | 2019-07-05 | 诺基亚技术有限公司 | 通过使用多层移动来促进立体视觉的方法和装置 |
CN110168606A (zh) * | 2016-06-08 | 2019-08-23 | 谷歌有限责任公司 | 从实体物品生成合成图像 |
CN112136156A (zh) * | 2018-05-30 | 2020-12-25 | 思拓凡瑞典有限公司 | 提供自动配置检测的方法以及生物过程系统 |
WO2024077772A1 (en) * | 2022-10-11 | 2024-04-18 | Guangdong Oppo Mobile Telecommunications Corp., Ltd. | Method and system for image data processing |
Families Citing this family (27)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO2012072606A1 (en) * | 2010-11-29 | 2012-06-07 | DigitalOptics Corporation Europe Limited | Portrait image synthesis from multiple images captured on a handheld device |
US8872898B2 (en) | 2011-12-14 | 2014-10-28 | Ebay Inc. | Mobile device capture and display of multiple-angle imagery of physical objects |
US20130250048A1 (en) * | 2012-01-13 | 2013-09-26 | Joshua Victor Aller | Method of capture, display and sharing of orientation-based image sets |
US10289660B2 (en) * | 2012-02-15 | 2019-05-14 | Apple Inc. | Device, method, and graphical user interface for sharing a content object in a document |
US9785201B2 (en) * | 2012-03-01 | 2017-10-10 | Microsoft Technology Licensing, Llc | Controlling images at mobile devices using sensors |
US9772764B2 (en) | 2013-06-06 | 2017-09-26 | Microsoft Technology Licensing, Llc | Accommodating sensors and touch in a unified experience |
JP5886242B2 (ja) * | 2013-06-10 | 2016-03-16 | ヤフー株式会社 | 画像処理装置、画像処理方法及び画像処理プログラム |
US10075676B2 (en) | 2013-06-26 | 2018-09-11 | Touchcast LLC | Intelligent virtual assistant system and method |
US11488363B2 (en) | 2019-03-15 | 2022-11-01 | Touchcast, Inc. | Augmented reality conferencing system and method |
US10356363B2 (en) | 2013-06-26 | 2019-07-16 | Touchcast LLC | System and method for interactive video conferencing |
US10297284B2 (en) | 2013-06-26 | 2019-05-21 | Touchcast LLC | Audio/visual synching system and method |
US9787945B2 (en) | 2013-06-26 | 2017-10-10 | Touchcast LLC | System and method for interactive video conferencing |
US11405587B1 (en) | 2013-06-26 | 2022-08-02 | Touchcast LLC | System and method for interactive video conferencing |
US10523899B2 (en) | 2013-06-26 | 2019-12-31 | Touchcast LLC | System and method for providing and interacting with coordinated presentations |
US10757365B2 (en) | 2013-06-26 | 2020-08-25 | Touchcast LLC | System and method for providing and interacting with coordinated presentations |
US11659138B1 (en) | 2013-06-26 | 2023-05-23 | Touchcast, Inc. | System and method for interactive video conferencing |
US10084849B1 (en) * | 2013-07-10 | 2018-09-25 | Touchcast LLC | System and method for providing and interacting with coordinated presentations |
CN103699390A (zh) * | 2013-12-30 | 2014-04-02 | 华为技术有限公司 | 一种图像缩放方法和终端设备 |
US20150382123A1 (en) * | 2014-01-16 | 2015-12-31 | Itamar Jobani | System and method for producing a personalized earphone |
US9865033B1 (en) * | 2014-01-17 | 2018-01-09 | Amazon Technologies, Inc. | Motion-based image views |
US9294670B2 (en) * | 2014-01-24 | 2016-03-22 | Amazon Technologies, Inc. | Lenticular image capture |
US10255251B2 (en) | 2014-06-26 | 2019-04-09 | Touchcast LLC | System and method for providing and interacting with coordinated presentations |
US20160065842A1 (en) * | 2014-09-02 | 2016-03-03 | Honeywell International Inc. | Visual data capture feedback |
WO2017014728A1 (en) * | 2015-07-17 | 2017-01-26 | Hewlett-Packard Development Company, L.P. | Rotating platform for a computing device |
WO2017192716A1 (en) * | 2016-05-03 | 2017-11-09 | Leoni Engineering Products & Services, Inc. | Vision system with color segmentation for operator enhanced viewing |
US10885622B2 (en) | 2018-06-29 | 2021-01-05 | Photogauge, Inc. | System and method for using images from a commodity camera for object scanning, reverse engineering, metrology, assembly, and analysis |
WO2023122820A1 (pt) * | 2021-12-27 | 2023-07-06 | Rosan Ismael | Smartphone estereoscópico 3d |
Citations (7)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US20070085913A1 (en) * | 2003-10-28 | 2007-04-19 | Koninklijke Philips Electronics N.V. | Digital camera with panorama or mosaic functionality |
US20090009605A1 (en) * | 2000-06-27 | 2009-01-08 | Ortiz Luis M | Providing multiple video perspectives of activities through a data network to a remote multimedia server for selective display by remote viewing audiences |
US20100149361A1 (en) * | 2008-10-16 | 2010-06-17 | Nikon Corporation | Image evaluation apparatus and camera |
US20100194860A1 (en) * | 2009-02-03 | 2010-08-05 | Bit Cauldron Corporation | Method of stereoscopic 3d image capture using a mobile device, cradle or dongle |
CN101852982A (zh) * | 2010-04-15 | 2010-10-06 | 万事利集团有限公司 | 四维动感照片的制作方法 |
US20110200980A1 (en) * | 2008-10-20 | 2011-08-18 | Camelot Co., Ltd. | Information processing device operation control system and operation control method |
CN102272690A (zh) * | 2009-01-06 | 2011-12-07 | 高通股份有限公司 | 用于移动装置的用户接口 |
Family Cites Families (11)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US7464344B1 (en) | 2000-08-14 | 2008-12-09 | Connie Carmichael | Systems and methods for immersive advertising |
US6762755B2 (en) | 2000-10-16 | 2004-07-13 | Pixel Science, Inc. | Method and apparatus for creating and displaying interactive three dimensional computer images |
WO2003009216A1 (en) * | 2001-07-17 | 2003-01-30 | Yesvideo, Inc. | Automatic selection of a visual image based on quality |
WO2007021667A2 (en) | 2005-08-09 | 2007-02-22 | Walker Digital, Llc | Apparatus, systems and methods for facilitating commerce |
US8112325B2 (en) * | 2005-09-15 | 2012-02-07 | Manheim Investments, Inc. | Method and apparatus for automatically capturing multiple images of motor vehicles and other items for sale or auction |
CA2699621A1 (en) | 2007-06-08 | 2008-12-11 | Tele Atlas N.V. | Method of and apparatus for producing a multi-viewpoint panorama |
US8350892B2 (en) | 2008-05-20 | 2013-01-08 | Sony Corporation | Image pickup apparatus, image pickup method, playback control apparatus, playback control method, and program |
US8121618B2 (en) | 2009-10-28 | 2012-02-21 | Digimarc Corporation | Intuitive computing methods and systems |
US20110316888A1 (en) * | 2010-06-28 | 2011-12-29 | Invensense, Inc. | Mobile device user interface combining input from motion sensors and other controls |
US8675049B2 (en) * | 2011-06-09 | 2014-03-18 | Microsoft Corporation | Navigation model to render centered objects using images |
US8872898B2 (en) | 2011-12-14 | 2014-10-28 | Ebay Inc. | Mobile device capture and display of multiple-angle imagery of physical objects |
-
2011
- 2011-12-14 US US13/325,855 patent/US8872898B2/en active Active
-
2012
- 2012-12-11 CN CN201280061709.1A patent/CN104040576B/zh not_active Expired - Fee Related
- 2012-12-11 WO PCT/US2012/068959 patent/WO2013090270A1/en active Application Filing
- 2012-12-11 AU AU2012352520A patent/AU2012352520B2/en not_active Ceased
- 2012-12-11 CA CA2858870A patent/CA2858870C/en not_active Expired - Fee Related
-
2014
- 2014-10-22 US US14/520,404 patent/US20150035947A1/en not_active Abandoned
-
2016
- 2016-06-10 AU AU2016203933A patent/AU2016203933A1/en not_active Abandoned
Patent Citations (7)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US20090009605A1 (en) * | 2000-06-27 | 2009-01-08 | Ortiz Luis M | Providing multiple video perspectives of activities through a data network to a remote multimedia server for selective display by remote viewing audiences |
US20070085913A1 (en) * | 2003-10-28 | 2007-04-19 | Koninklijke Philips Electronics N.V. | Digital camera with panorama or mosaic functionality |
US20100149361A1 (en) * | 2008-10-16 | 2010-06-17 | Nikon Corporation | Image evaluation apparatus and camera |
US20110200980A1 (en) * | 2008-10-20 | 2011-08-18 | Camelot Co., Ltd. | Information processing device operation control system and operation control method |
CN102272690A (zh) * | 2009-01-06 | 2011-12-07 | 高通股份有限公司 | 用于移动装置的用户接口 |
US20100194860A1 (en) * | 2009-02-03 | 2010-08-05 | Bit Cauldron Corporation | Method of stereoscopic 3d image capture using a mobile device, cradle or dongle |
CN101852982A (zh) * | 2010-04-15 | 2010-10-06 | 万事利集团有限公司 | 四维动感照片的制作方法 |
Cited By (10)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN104349048A (zh) * | 2013-07-26 | 2015-02-11 | 三星电子株式会社 | 图像拍摄设备及其方法 |
CN107466474A (zh) * | 2015-05-26 | 2017-12-12 | 谷歌公司 | 针对移动设备的全方位立体捕获 |
CN109035128A (zh) * | 2015-05-26 | 2018-12-18 | 谷歌公司 | 针对移动设备的全方位立体捕获 |
US10334165B2 (en) | 2015-05-26 | 2019-06-25 | Google Llc | Omnistereo capture for mobile devices |
CN107466474B (zh) * | 2015-05-26 | 2019-07-26 | 谷歌公司 | 针对移动设备的全方位立体捕获 |
CN110168606A (zh) * | 2016-06-08 | 2019-08-23 | 谷歌有限责任公司 | 从实体物品生成合成图像 |
CN110168606B (zh) * | 2016-06-08 | 2023-09-26 | 谷歌有限责任公司 | 生成实体物品的合成图像的方法和系统 |
CN109983504A (zh) * | 2016-09-07 | 2019-07-05 | 诺基亚技术有限公司 | 通过使用多层移动来促进立体视觉的方法和装置 |
CN112136156A (zh) * | 2018-05-30 | 2020-12-25 | 思拓凡瑞典有限公司 | 提供自动配置检测的方法以及生物过程系统 |
WO2024077772A1 (en) * | 2022-10-11 | 2024-04-18 | Guangdong Oppo Mobile Telecommunications Corp., Ltd. | Method and system for image data processing |
Also Published As
Publication number | Publication date |
---|---|
AU2016203933A1 (en) | 2016-07-07 |
WO2013090270A1 (en) | 2013-06-20 |
US8872898B2 (en) | 2014-10-28 |
AU2012352520B2 (en) | 2016-03-17 |
CA2858870A1 (en) | 2013-06-20 |
US20130155187A1 (en) | 2013-06-20 |
CA2858870C (en) | 2017-05-23 |
CN104040576B (zh) | 2017-11-24 |
US20150035947A1 (en) | 2015-02-05 |
AU2012352520A1 (en) | 2014-06-12 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN104040576A (zh) | 物理对象的多角度成像 | |
RU2491638C2 (ru) | Агрегация 3d контента, встроенная в устройства | |
CN104025004B (zh) | 信息处理设备、信息处理方法和计算机程序 | |
US10210659B2 (en) | Augmented reality system, method, and apparatus for displaying an item image in a contextual environment | |
CN103988497B (zh) | 一种创建空间书签的方法 | |
WO2016152633A1 (ja) | 画像処理システムおよび画像処理方法、並びにプログラム | |
CN104184985A (zh) | 图像获取的方法及装置 | |
CN106454065A (zh) | 信息处理装置及其控制方法 | |
JP6877149B2 (ja) | 撮影位置推薦方法、コンピュータプログラムおよび撮影位置推薦システム | |
US10824869B2 (en) | Clickless identification and online posting | |
CN108450035A (zh) | 导航穿过多维图像空间 | |
CN104281397A (zh) | 多深度区间的重聚焦方法、装置及电子设备 | |
CN102819413A (zh) | 显示控制设备、显示控制方法、程序、以及记录介质 | |
US20160275723A1 (en) | System and method for generating three dimensional representation using contextual information | |
US20230252599A1 (en) | Outputting warped images from captured video data | |
EP3177005B1 (en) | Display control system, display control device, display control method, and program | |
Kim et al. | Multimodal visual data registration for web-based visualization in media production | |
Guide | Leica Geosystems | |
CN111213206A (zh) | 为三维环境提供用户界面的方法和系统 | |
JP6994426B2 (ja) | 建築物の検査方法及び建築物の検査システム | |
US10867445B1 (en) | Content segmentation and navigation | |
US11675496B2 (en) | Apparatus, display system, and display control method | |
CN113674397B (zh) | 一种数据处理方法及装置 | |
US11687312B2 (en) | Display apparatus, data sharing system, and display control method | |
WO2022111005A1 (zh) | 虚拟现实设备及vr场景图像识别方法 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
C06 | Publication | ||
PB01 | Publication | ||
C10 | Entry into substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
GR01 | Patent grant | ||
GR01 | Patent grant | ||
CF01 | Termination of patent right due to non-payment of annual fee | ||
CF01 | Termination of patent right due to non-payment of annual fee |
Granted publication date: 20171124 |