CN109983763A - 显示设备及其控制方法 - Google Patents

显示设备及其控制方法 Download PDF

Info

Publication number
CN109983763A
CN109983763A CN201780071610.2A CN201780071610A CN109983763A CN 109983763 A CN109983763 A CN 109983763A CN 201780071610 A CN201780071610 A CN 201780071610A CN 109983763 A CN109983763 A CN 109983763A
Authority
CN
China
Prior art keywords
display
image
viewpoint
segment
display quality
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN201780071610.2A
Other languages
English (en)
Other versions
CN109983763B (zh
Inventor
H-B.田
金大王
朴正勋
朴汉燮
尹钟熙
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Samsung Electronics Co Ltd
Original Assignee
Samsung Electronics Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Samsung Electronics Co Ltd filed Critical Samsung Electronics Co Ltd
Publication of CN109983763A publication Critical patent/CN109983763A/zh
Application granted granted Critical
Publication of CN109983763B publication Critical patent/CN109983763B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/30Image reproducers
    • H04N13/361Reproducing mixed stereoscopic images; Reproducing mixed monoscopic and stereoscopic images, e.g. a stereoscopic image overlay window on a monoscopic image background
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T3/00Geometric image transformations in the plane of the image
    • G06T3/40Scaling of whole images or parts thereof, e.g. expanding or contracting
    • G06T3/4038Image mosaicing, e.g. composing plane images from plane sub-images
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60Control of cameras or camera modules
    • H04N23/698Control of cameras or camera modules for achieving an enlarged field of view, e.g. panoramic image capture
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/30Image reproducers
    • H04N13/324Colour aspects
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/30Image reproducers
    • H04N13/366Image reproducers using viewer tracking
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/47End-user applications
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/47End-user applications
    • H04N21/485End-user interface for client configuration
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2200/00Indexing scheme for image data processing or generation, in general
    • G06T2200/24Indexing scheme for image data processing or generation, in general involving graphical user interfaces [GUIs]
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/47End-user applications
    • H04N21/488Data services, e.g. news ticker
    • H04N21/4888Data services, e.g. news ticker for displaying teletext characters

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • Human Computer Interaction (AREA)
  • Controls And Circuits For Display Device (AREA)
  • Digital Computer Display Output (AREA)
  • Closed-Circuit Television Systems (AREA)
  • Testing, Inspecting, Measuring Of Stereoscopic Televisions And Televisions (AREA)
  • Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)

Abstract

提供一种显示设备及其控制方法。所述显示设备包含接收器、图像处理器、显示器和控制器。所述接收器接收呈图像片段形式的内容图像。所述图像处理器处理经由所述接收器接收的所述内容图像。所述显示器显示所述处理的内容图像。所述控制器控制所述图像处理器显示对应于所述内容图像的一个视点的图像,且基于所述图像片段的接收状态显示关于至少一个图像片段的显示质量的信息。借此,所述显示设备可提供关于所述内容图像的所述至少一个片段的显示质量的信息,由此允许用户在平滑地移动视点的同时观看所述内容图像。

Description

显示设备及其控制方法
技术领域
符合示范性实施例的设备和方法涉及一种显示设备及其控制方法,且更具体地说,涉及一种提供用户在平滑地移动他的视点的同时可观察的内容图像的显示设备及其控制方法。
背景技术
显示设备可提供内容的各种图像。360度图像是由以下技术实现的图像:所述技术利用若干相机或利用上面安装有多个镜头的相机捕获全景图像且将所捕获的全景图像映射到虚拟空间上。在屏幕上显示虚拟空间以向用户提供好像他在真实空间中那样的感觉且因此使得用户能够与屏幕交互且能够感觉到屏幕。为了提供360度图像,显示设备实现:根据由用户选择的视点转换正显示的图像;将全景图像转换成平面图像;或者放大或缩小正显示的图像。
如果内容图像是360度图像,由于其数据的大小大于典型图像的大小,因此显示设备可被配置成仅接收图像的会被用户观察到或预计会被用户观察到的那些片段,而不是立刻接收图像的所有片段。而且,如果显示设备使用自动感知网络环境以适应性地改变图像分辨率和传输分辨率改变的图像的自适应流式传送,那么360度图像针对其在不同时间接收的不同片段可具有不同分辨率。
发明内容
技术问题
因此,对于如上文所描述的相关技术的显示设备,存在以下问题:如果用户在观察360度图像的同时改变视点,那么由于意外缓冲或分辨率降低她或他可能无法平滑地观察360度图像。
技术方案
一个或多个示范性实施例可解决至少上述问题和/或缺点以及上文未描述的其它缺点。而且,示范性实施例无需克服上文所描述的缺点,且可能无法克服上文所描述的任何问题。
一个或多个示范性实施例可提供一种显示设备及其控制方法,所述显示设备根据内容图像的片段的接收状态提供关于内容图像的至少一个片段的显示质量的信息,由此在内容图像是360度图像时允许用户在观看图像的同时平滑地移动视点。
根据示范性实施例的方面,提供一种显示设备,其包含:接收器,所述接收器被配置成接收多个图像片段;图像处理器,所述图像处理器被配置成处理经由接收器接收的图像片段;显示器,所述显示器被配置成显示所处理的图像片段;和控制器,所述控制器被配置成基于经由接收器接收的多个图像片段生成映射到三维(3D)对象的内容图像,控制图像处理器显示对应于所生成的内容图像的第一视点的图像,且控制图像处理器基于图像片段的接收状态显示关于邻近于当前正显示的第一视点的图像的至少一个相邻视点的图像的显示质量的信息。因此,用户可在观看内容图像的同时平滑地移动视点。
显示质量可包含以下各项中的至少一个:接收对应于至少一个相邻视点的图像片段的速度;接收至少一个相邻视点的图像片段的程度;至少一个相邻视点的图像片段的可播放时间;和至少一个相邻视点的图像片段的分辨率。因此,显示设备可向用户提供关于显示质量的各种类型的信息。
控制器可被配置成将显示质量等级显示为文本。因此,可精确地传达关于显示质量的信息。
控制器可被配置成在显示器上显示用户界面(UI),所述用户界面(UI)包含具有对应于显示质量等级的大小的至少一个图形。因此,可经由直观界面提供关于显示质量的信息,由此提高设备的可用性。
控制器可被配置成响应于显示质量为第一级别而在显示器上显示第一颜色,且响应于显示质量为高于第一级别的第二级别而显示不同于第一颜色的第二颜色。因此,用户可根据颜色直观地了解显示质量等级。
控制器可被配置成响应于显示质量为介于第一级别与第二级别之间的第三级别而在显示器上显示介于第一颜色与第二颜色之间的第三颜色。因此,可引入对应于显示质量的中间级别的颜色。
控制器可被配置成在显示器上显示箭头,所述箭头指示具有高于其它图像片段的显示质量等级的显示质量等级的至少一个图像片段的方向或指示具有低于其它图像的显示质量等级的显示质量等级的至少一个图像片段的方向。因此,可向用户提供移动视点以平滑地观看内容图像的方向的向导。
控制器可被配置成在显示器的边缘上显示关于显示质量的信息,所述边缘对应于至少一个相邻视点的方向,例如,至少一个图像片段的方向。因此,可引入提供关于显示质量的信息的各种示范性实施例。
控制器可被配置成响应于第一视点在已停止之后移动而在显示器上显示关于显示质量的信息。因此,针对提供关于显示质量的信息的时间点提供各种示范性实施例。
控制器可被配置成响应于第一视点移动且落在与图像片段之间的边界相距预定距离内而在显示器上显示关于显示质量的信息。因此,可引入提供关于显示质量的信息的时间点的各种示范性实施例。
控制器可被配置成响应于显示质量等级低于预定临界级别而在显示器上显示关于显示质量的信息。因此,可引入提供关于显示质量的信息的时间点的各种示范性实施例。
控制器可被配置成响应于显示质量改变超过预定量而在显示器上显示关于显示质量的信息。因此,可引入提供关于显示质量的信息的时间点的各种示范性实施例。
根据另一示范性实施例的方面,提供一种显示设备的控制方法,其包含:接收多个图像片段;处理所接收的图像片段;和显示所处理的图像片段,其中所述显示包括基于多个所接收的图像片段生成映射到三维(3D)对象的内容图像,显示对应于来自所生成的内容图像当中的第一视点的图像,以及基于图像片段的接收状态显示关于邻近于当前正显示的第一视点的图像的至少一个相邻视点的图像的显示质量的信息。因此,用户可在观看内容图像的同时平滑地移动视点。
显示质量可包含以下各项中的至少一个:已接收对应于至少一个相邻视点的图像片段的速度;已接收至少一个相邻视点的图像片段的程度;至少一个相邻视点的图像片段的可播放时间;和至少一个相邻视点的图像片段的分辨率。因此,显示设备可向用户提供关于显示质量的各种信息。
显示关于显示质量的信息可包含将显示质量等级显示为文本。因此,可精确地传达关于显示质量的信息。
显示关于显示质量的信息可包含在显示器上显示用户界面(UI),所述用户界面(UI)包含具有对应于显示质量等级的大小的至少一个图形。因此,可经由直观界面提供关于显示质量的信息,由此提高设备的可用性。
显示关于显示质量的信息可包含响应于显示质量为第一级别而显示第一颜色,且响应于显示质量为高于第一级别的第二级别而显示第二颜色。因此,用户可根据颜色直观地了解显示质量等级。
显示关于显示质量的信息可包含响应于显示质量为介于第一级别与第二级别之间的第三级别而显示介于在第一颜色与第二颜色之间的第三颜色。因此,可引入对应于显示质量的中间等级的颜色。
显示关于显示质量的信息可包含显示箭头,所述箭头指示具有高于其它图像片段的显示质量等级的显示质量等级的至少一个图像片段的方向或指示具有低于其它图像的显示质量等级的显示质量等级的至少一个图像片段的方向。因此,可向用户提供移动视点以平滑地观看内容图像的方向的向导。
显示关于显示质量的信息可包含在显示器的边缘上显示关于显示质量的信息,所述边缘对应于至少一个相邻视点的方向,例如,至少一个图像片段的方向。因此,可引入提供关于显示质量的信息的各种示范性实施例。
附图说明
从结合附图进行的以下描述来看,本公开的示范性实施例的以上和其它示范性方面、特征和优点将更明显,其中:
图1说明根据示范性实施例的显示设备;
图2说明根据示范性实施例的处理360度图像的过程;
图3说明根据示范性实施例的显示设备的框图;
图4说明根据示范性实施例的分成多个片段的内容图像;
图5说明根据示范性实施例的提供用户界面(UI)的实例,所述用户界面(UI)包含具有对应于显示质量等级的大小的至少一个项目;
图6说明根据示范性实施例的提供UI的另一实例,所述UI包含具有对应于显示质量等级的颜色的至少一个项目;
图7说明根据另一示范性实施例的在对应于朝向正显示的图像的相邻视点的片段的方向的边缘上提供关于显示质量的信息以具有对应于显示质量等级的大小的实例;
图8说明根据另一示范性实施例的在对应于朝向正显示的图像的相邻视点的片段的方向的边缘上提供关于显示质量的信息对应于朝向正显示的图像的相邻视点的片段的方向的另一实例;
图9说明根据另一示范性实施例的提供指示显示质量为高的方向的箭头的实例;
图10说明根据示范性实施例的当视点移动时提供关于显示质量的信息的实例;
图11说明根据示范性实施例的视点变得靠近图像的片段之间的边界的实例;
图12说明根据示范性实施例的当视点变得靠近图像的片段之间的边界时提供关于显示质量的信息的实例;
图13说明当显示质量等级小于预定临界级别时提供关于显示质量的信息的实例;以及
图14是说明根据示范性实施例的显示设备的控制过程的流程图。
具体实施方式
在下文中将参考附图详细描述示范性实施例。在示范性实施例的以下描述中参考附图中所示的物质,且为清楚起见,相应图式中所呈现的相同附图标号指代基本上执行相同功能的相同元件。
在以下描述中,如果使用各自包含这种序列号如‘第一’、‘第二’等的术语,那么那些术语仅用于(除非另外明确地指示)描述各种元件。术语仅用于区分一个元件与其它元件的目的。这样做时,各种元件相应地不应受对应术语限制。在以下对各种示范性实施例的描述中使用的术语仅适用于解释目的而不适用于限制如由所附权利要求书及其等效物限定的示范性实施例的目的。
以下参考示范性实施例描述的本公开可适用于显示设备,其提供内容图像以使得观察者的视点能够改变360度。
图1说明根据示范性实施例的显示设备。根据示范性实施例的显示设备1可实施为电视机(TV)。在其它示范性实施例中,显示设备1可实施为能够输出图像的任何设备,包含但不限于:智能电话机、平板个人计算机(PC)、移动电话机、计算机、多媒体再现装置、电子相框、数字广告板、大规格显示器(LFD)、数字标牌、机顶盒、例如智能手表或头戴式显示器(HMD)等可佩戴装置、智能冰箱等。
在此示范性实施例中,显示设备1,其也在图3中示出,可实施为可处理多个图像片段以输出内容图像的设备。内容图像可为具有多个视点的360度图像。在下文中,内容图像可为360度图像。在此示范性实施例中,如果内容图像是360度图像,那么显示设备1可生成映射到3D映射对象的图像100。如果3D映射对象是球形,那么所映射的图像100也可被称为“球形图像”。显示设备1处理对应于来自球形图像100的视点101a或101b的一个区域以获得输出图像103a或103b,且在屏幕上显示所获得的输出图像103a或103b。在示范性实施例中,球形图像100可为通过将多个图像映射到3D映射对象而生成的图像,所述多个图像中的每一个相对于不同轴承由上面安装有至少一个镜头的相机获得。在一些情况下,至少一个镜头可为广角镜头。在此示范性实施例中,3D映射对象为球形,但不限于此。而且,用于生成球形图像100的手段不限于具体解释的说明。例如,球形图像100可为由多个相机生成的图像。显示设备1可从至少一个相机或从外部设备接收球形图像100,所述外部设备例如是服务器、通用串行总线(USB)存储装置、计算机等。在另一示范性实施例中,显示设备1可包含至少一个相机。显示设备1可从外部装置接收多个图像、球形图像100以及在以球形形状映射之前合并和拼接多个图像的拼接图像(图2中为201)。所接收的图像可接收为单个图像,且根据实施方式通过片段接收。片段中的每一个包含与其对应的区域的图像。在下文中,对应于每个片段的区域的图像也被称为图像片段。如果图像通过片段接收,那么显示设备1可通过片段处理和提供所接收的图像。如果一个视点101位于尚未接收到的片段的区域中,[101是区域还是视点??],那么显示设备1不会平滑地提供对应于所述一个视点101的输出图像103a或103b。而且,如果一个视点101位于具有低分辨率的片段的区域中,那么对应于一个视点101的输出图像103a或103b的分辨率变得不同于正观察的图像的分辨率。
图2说明根据示范性实施例的处理内容图像的过程。如果内容图像是具有360度视点的内容图像,那么输入图像200包含多个图像,所述多个图像中的每一个相对于不同轴承由至少一个相机或由具有至少一个镜头的相机获得。相对于输入图像200执行至少一个图像处理以生成输出图像207。至少一个图像处理可在显示设备1处执行,但也可或交替地在外部执行,从而使得所处理的图像被传输到显示设备1。如稍后所描述,所处理的图像可被传输为单个图像,且根据实施方式,通过片段传输(图4中的附图标号400到405)。至少一个图像处理包含拼接处理、映射处理和投影处理。
显示设备1将输入图像200映射到3D映射对象以生成球形图像100。3D映射对象不限于球形形状且可包含六面体。在下文中,将解释将输入图像映射成球形形状的示范性实施例。然而,此解释并不意欲使其它类型的映射处理从本公开排除。显示设备1接着通过执行投影处理而生成平面图像,所述投影处理将对应于来自所映射和生成的球形形状100的一个视点101的区域的弯曲图像转换成平面图像,且将所生成的平面图像输出为输出图像207。
在另一示范性实施例中,如果输入图像200通过片段400到405接收,那么显示设备1可在根据实施方式对输入图像200另外执行拼接处理之后映射输入图像200以生成球形图像100。
拼接处理是以下过程:通过使用高动态范围成像(HDRI)映射方法或立方体映射方法根据3D映射对象而连接(或拼接)输入图像200以生成所拼接的图像201。如果拼接处理由HDRI映射方法执行,那么输入图像200被映射到等距离长方圆柱图像作为在被映射到球形形状之前的操作。如果拼接处理由立方体映射方法执行,那么六个定向获得的图像被映射到为规则六面体的立方体。球形映射处理将所生成的拼接图像201映射到球形形状以生成球形图像100。
作为另一示范性实施例,输出图像207可由对应于视点101的所拼接的图像201的一个区域生成而无需经历生成球形图像100的操作。
根据示范性实施例的对应于视点101的一个区域的选择可由用户确定。更确切地说,根据在屏幕显示的同时移动视点101的用户输入,显示设备1确定对应于来自球形图像203当中的所移动的视点101的区域且显示对应于视点101的所确定的一个区域的图片或图像。移动视点101的用户命令(在下文中也被称为“视点移动命令”)可经由远程控制器接收。显示设备1可使用各种输入手段中的任一个接收视点移动命令,所述各种输入手段根据所实施的方法包含例如手指触碰、HMD移动等。
根据示范性实施例的内容图像通过片段(图4中的400到405)传输,如上文所描述。显示设备1通过片段400到405接收内容图像且显示对应于来自所接收的内容图像当中的一个视点101的图像。显示设备1可通过以下方式生成球形图像100:拼接通过片段400到405接收的输入图像200和/或将其映射到3D映射对象。可替代地,显示设备1可通过接收分成片段400到405的所拼接的图像201且将其映射到3D映射对象而生成球形图像100,且可显示对应于来自所生成的球形图像100的一个视点101的图像。作为另一示范性实施例,显示设备1可接收分成片段400到405的球形图像100且显示对应于来自所接收的球形图像100的一个视点101的图像。由于片段400到405中的每一个的接收状态可不同,因此内容图像的所有帧可能并不总是具有完成的拼接图像201或完成的球形图像100的形式。
显示设备1进一步基于相应片段400到405的接收状态显示关于邻近于当前正显示的一个视点101的图像的至少一个视点的图像的显示质量的信息。
显示质量可指示当视点改变时用户可保持平滑地观察图像的等级。因此,显示质量可包含接收对应于邻近于与当前正显示的输出图像207对应的一个视点101的视点的片段(“相邻片段”)的速度。显示质量还可包含接收相邻片段的量、相邻片段可播放的时间、相邻片段的分辨率等,但并不限于此。视点101的移动方向不受限制。显示设备1可使视点101左右/上下/成对角线、或者前后移动。视点101的移动可包含放大和缩小屏幕。如上文,显示设备1提供关于可从当前正显示的视点101的输出图像207移动的至少一个相邻视点的图像的显示质量的信息,由此允许用户基于所提供的信息移动视点101且因此平滑地使用内容而不会停止或内容变得不可用。
而且,内容图像可为移动图像。在此情况下,内容图像可由帧处理且显示设备1可以帧为单位接收内容图像。片段400到405因此通过将一个帧分成多个区域而获得,且如果内容图像包含360度图像,那么显示设备1通过片段400到405接收每个帧。
如果用户将视点101移动到图像尚未被接收或仅低分辨率的图像已被接收的至少一个片段400到405中,那么意外缓冲或低分辨率可能会妨碍用户观看内容图像或可能使观看不合乎期望。显示设备1提供关于邻近于当前正显示的一个视点101的输出图像207的至少一个相邻视点的图像(“相邻图像”)的显示质量的信息。例如,关于相邻图像的显示质量的信息可包含接收相邻片段的速度、接收相邻片段的量、相邻片段可播放的时间、相邻片段的分辨率等。
图3说明根据示范性实施例的显示设备的框图。根据示范性实施例的显示设备1包含接收器300、图像处理器301、显示器303和控制器309。根据示范性实施例的显示设备1可进一步包含用户输入接收器305和存储装置307中的至少一个。如图3所说明,根据示范性实施例的显示设备1的配置仅是实例且可以除图3所说明的配置外的配置实施。换句话说,根据示范性实施例的显示设备可被实施为包含除图3所说明的那些以外的额外元件或通过从图3所说明的元件当中移除任何一个元件来实施。
接收器300接收图像信号,包含输入图像200。接收器300可设置有用于接收图像信号的调谐器。调谐器可调谐到由用户从多个信道当中选择的任何一个信道的广播信号。接收器300可通过片段400到405经由因特网从服务器接收图像信号。作为一实例,接收器300包含用于与外部设备通信的通信器。
通信器可包含用于有线通信的连接器。连接器可根据标准传输和接收信号/数据,所述标准例如高清晰多媒体接口(HDMI)、HDMI-消费者电子控件(HDMI-CEC)、USB、分量等,且可包含对应于相应标准的至少一个连接部件或端子。通信器可执行经由有线局域网(LAN)与多个服务器的有线通信。
除包含用于有线通信的连接零部件或端子的连接器外,通信器还可以许多其它通信方式中的任一个实施。例如,通信器可包含用于传输和接收RF信号以与外部设备无线通信的射频(RF)电路,且可被配置成使用一个或多个协议通信,所述一个或多个协议例如无线保真(Wi-Fi)、蓝牙(BT)、Zi gbee、超宽带(UWM)、无线USB和近场通信(NFC)。
用户输入接收器305接收用户输入以传输到控制器309。用户输入接收器305可根据输入的方法实施为各种类型的输入中的任一个。用户输入接收器305可实施为例如:安装在显示设备1的外侧上的菜单按钮;用以接收对应于来自远程控制器的用户输入的远程控制信号的远程控制信号接收器;设置在显示器303上以接收用户的触摸输入的触摸屏;用以感测用户的手势输入的相机;用于辨识用户的语音输入的麦克风;用以感测用户移动的传感器等。用户输入包含视点移动命令。基于视点移动命令,显示设备1改变对应于视点101的区域且在显示器303上显示对应于来自球形图像100的所改变的区域的输出图像203。
存储装置307被配置成存储显示设备1的各种数据。存储装置307可设置有非易失性存储器,例如闪存存储器、可擦除可编程只读存储器(EPROM)、电可擦除和可编程只读存储器(EEPROM)等。存储装置可进一步包含具有比非易失性存储器更快的读取速度的易失性存储器,例如动态随机存取存储器(DRAM)或静态随机存取存储器(SRAM)。
图像处理器301相对于经由接收器300接收的输入图像200的图像信号执行图像处理且将所处理的图像信号输出到显示器303以显示输出图像203。在控制器309的控制下,图像处理器301可相对于对应于来自输入图像200的一个视点101的区域执行图像处理以生成输入图像203。而且,如果视点101移动,那么图像处理器301生成对应于所移动的视点101的区域的输出图像203。图像处理器301可实施为一个或多个硬件和/或软件模块或其组合。视点101根据用户输入来确定,如上文所描述。
作为另一示范性实施例,视点101可基于关于片段400到405的显示质量的信息来确定。例如,当根据视点移动命令视点101移动到对应于一个或多个片段的区域时,其中显示质量等级小于预定级别,显示设备1可能不会进一步移动视点101,而不管用户的视点移动命令。此时,显示设备1反而会发送请求到外部服务器,所述请求是通过片段传输图像,以优先地传输用户试图移动视点的区域的一个或多个片段,由此对用户的额外的视点移动命令做好准备。
显示器303显示输出图像203。显示器303的所实施类型不受限制,且显示器303可由各种类型的显示器中的任一个实施,所述各种类型的显示器例如液晶显示器(LCD)、等离子体显示面板(PDP)、发光二极管(LED)显示器、有机发光二极管(OLED)显示器、表面传导电子发射体、碳纳米管、纳米晶体显示器等。
如果显示器303是LCD,那么显示器303包含LCD面板、向LCD面板供应光的背光单元、驱动LDC面板的面板驱动电路板等。显示器303还可实施为OLED面板,其是没有背光单元的自发发射面板。
控制器309执行操作显示设备1的所有元件所需的控制。控制器309可包含按用于控制以执行如上文所描述的控制操作的控制程序、其中安装控制程序的非易失性存储器、其中加载至少一个控制程序的易失性存储器、以及用于执行所加载的控制程序的至少一个微处理器或中央处理单元(CPU)。控制程序可包含按以下各项中的至少一个实施的至少一个程序:基本输入/输出系统(BI OS)、装置驱动程序、操作系统、固件、平台和应用程序(应用)。作为示范性实施例,应用程序可在制造期间提前安装或存储在显示设备1中,或基于在使用时从外部源接收的数据安装在显示设备1中。可将应用程序的数据从外部服务器下载到显示设备1,所述外部服务器例如应用市场等。
作为示范性实施例,控制器309控制图像处理器301基于关于其中定位一个视点101的片段400到405的显示质量的信息改变正显示的输出图像的分辨率。例如,如果视点101位于具有720像素分辨率的第一片段404中,且视点接着移动到具有480像素分辨率的第二片段401中,使得对应于视点101的区域的一部分包含第一片段404且区域的另一部分包含第二片段401,那么控制器309可控制图像处理器301以允许输出图像203具有480像素的更低分辨率,从而提供一致性。
图4说明根据示范性实施例的分成多个片段400到405的内容图像。作为示范性实施例,控制器309显示来自由片段400到405接收的内容图像的一个视点101的图像410,且基于相应片段400到405的接收状态显示关于相邻图像的显示质量的信息。例如,控制器309可显示关于不同于其中定位当前视点101的片段401的片段400、402、403、404和405的显示质量的信息。如上文所描述,内容图像由片段400到405经由接收器300接收为输入图像300、拼接图像201或球形图像100。在图式中,出于方便说明的目的,球形图像100的多个片段400到405说明为被接收,但本公开的图像接收方法不限于此。如上文所描述,显示设备1可通过以下方式生成球形图像100:通过片段400到405接收拼接图像201和将其映射到3D映射对象。而且,对应于球形图像100中的多个片段400到405的区域限于图式中的说明。
如果内容图像为360度图像,那么其数据相当大。然而。可由接收器300每单位时间处理的数据量有限。为了最大化用户的观看,控制器309可请求服务器传输对应于用户正观察的区域(屏幕)的片段401或者优先于其它片段403和405传输邻近于当前视点101的视点的片段400、402和404。服务器通过片段400到405传输内容图像,同时考虑到显示设备1的请求、显示设备1的数据处理速度等。此时,取决于网络状态,可以低分辨率传输具有更低优先级的片段400和402。片段400到405的优先级可由各种条件确定,包含其它用户的实施方式方面的分析、电影作品的制片人的意图、网络状态、当前视点101的位置等。
在下文中,将参考附图描述提供关于显示质量的信息的各种示范性实施例。关于显示质量的信息可以许多方式提供,所述许多方式包含:显示用户界面(UI),所述用户界面(UI)包含对应于片段400到405中的至少一个的显示质量等级的至少一个项目;显示指示显示质量等级的文本;显示屏幕的具有对应于显示质量等级的大小或颜色的至少一部分等。在下文中,出于方便说明的目的,将描述来自各种示范性实施例当中的一些示范性实施例,但本公开不限于此。
图5说明根据示范性实施例的提供UI 500的实例,所述UI 500包含具有对应于显示质量级别的大小的至少一个项目。根据示范性实施例的控制器309可在显示器303上显示UI 500。UI 500包含具有分别对应于显示质量级别的大小的多个项目。UI 500包含分别指示相邻视点的多个箭头。箭头可指向对应相邻视点。尽管在图式中已显示接收对应于相邻视点的片段400到405的速度,但本公开不限于此。每个箭头的大小可对应于对应相邻视点的显示质量级别。例如,如果接收片段的速度为100mb/s,那么对应箭头具有大的大小,如果速度为50mb/s,那么对应箭头具有中间大小,且如果速度为5mb/s,那么对应箭头具有小的大小。显示对应于相邻视点的片段400到405的速度被接收且如上文所描述的相邻视点的箭头的大小仅是说明且本公开不限于此。
如果从用户接收到视点移动命令,用于在方向503上朝向具有5mb/s接收速度的片段402移动视点101,因此使控制器将视点101移动到定位在两个片段401与402之间的边界处,那么对应于第一片段401的第一部分得以平滑地显示,但对应于第二片段402的第二部分被不完全接收,从而使得输出图像未良好地显示。
由于来自对应于所移动的视点101b的图像当中的第二部分位于第二片段402内,因此第二片段402的优先级变得更高。显示设备1基于第二片段402的优先级请求外部服务器优先地传输第二片段402。根据显示设备1的请求,下载第二片段402的速度变得更快。由于下载第二片段402的速度发生改变,因此显示设备1提供UI 501,其中项目的大小和/或文本,即,对应于指示第二片段402的方向的相邻视点的箭头506发生改变。图5的图式仅借助于举例提供,且片段401和402的形状和大小不限于图式所说明的那些。
图6说明根据示范性实施例的提供UI 600的另一实例,所述UI 600包含具有对应于显示质量级别的颜色或阴影的至少一个项目。尽管在图式中显示由箭头指示的片段400到405的可播放时间,但本公开不限于此。UI 600可包含多个箭头,所述多个箭头各自具有对应于显示质量的颜色或阴影。作为一实例,控制器309可针对显示质量为第一级别而以第一颜色或阴影显示指示位于相邻片段中的相邻视点的箭头,且可针对显示质量为不同于(即,高于或低于)第一级别的第二级别而以第二颜色或阴影显示指示位于相邻片段中的相邻视点的箭头。控制器309可针对显示质量为介于第一级别与第二级别之间的第三级别而以第三颜色或阴影显示指示位于相邻片段中的相邻视点的箭头,所述第三颜色或阴影具有介于第一颜色或阴影与第二颜色或阴影之间的色调或阴影。第三颜色或阴影可包含具有与第一颜色和第二颜色的预定差别的颜色。预定色差可基于第三级别多大程度上不同于第一和第二级别来确定。例如,如果第一级别为1分钟,那么第一颜色可为白色R:255、G:255和B:255,且第二级别为1秒,且第二颜色可为黑色R:0,G:0和B:0,第三颜色可为灰色R:122.5,G:122.5和B:122.5,当第三级别为30秒时具有与第一和第二颜色相同的色差。在图式中,出于方便说明的目的,仅说明其中对应于不同显示质量的箭头具有不同对比度的实例,但本公开不限于此。
可提前确定和存储对应于显示质量的箭头的颜色。可替代地,在分别确定对应于最高等级和最低等级显示质量的两个颜色之后,箭头的颜色可根据显示质量级别从一个颜色到其它颜色逐渐变化。
根据另一示范性实施例,根据当前视点101与相邻片段之间的距离,指示其中定位相邻视点的相邻片段的箭头可具有多于两个颜色。例如,如果当前视点101位于第一片段404中且为远离相邻视点的第二相邻片段401的给定距离,那么控制器309可显示以对应于第一片段404的显示质量的第一颜色指示第二相邻片段401的箭头的一部分,且以对应于第二片段401的显示质量的第二颜色显示箭头的剩余部分。在此情况下,第一颜色与第二颜色之间的边界可被划分和显示成对应于给定距离或可被显示成使得其在第一颜色与第二颜色之间自然地逐渐转化。
图7说明在对应于朝向相邻视点的方向的显示器的边缘上提供关于显示质量的信息的实例。根据此示范性实施例,每个边缘的阴影实现为具有对应于对应相邻视点的显示质量等级的大小。由于边缘的此阴影对应于朝向相邻视点的方向,控制器309可提供关于显示质量的信息。作为一实例,控制器309可显示阴影700,所述阴影700具有对应于相邻片段400到405的显示质量等级的厚度。阴影700的厚度可对应于其中定位相邻视点的对应片段400到405的分辨率。例如,其中定位对应相邻视点的片段的分辨率越高,阴影700变得越厚。而且,对应片段的分辨率越低,阴影700越薄。如上文所描述的片段400到405的分辨率和阴影700的厚度仅为说明且本公开不限于此。
如果从用户接收到视点移动命令,且命令是用于在朝向相邻视点的片段的方向上移动视点101a,那么控制器308移动视点101a。所移动的视点101b位于两个片段401与404之间的边界处。
以高分辨率显示来自对应于所移动的视点101b的图像的对应于第一片段401的第一部分710。然而,以低于第一片段401的分辨率的分辨率显示来自图像的对应于第二片段404的第二部分711。由于所移动的视点101b位于第二片段404中,因此第二片段404的优先级变得更高。
显示设备1基于优先级请求外部服务器优先地传输第二片段404。外部服务器基于请求优先地传输第二片段404,由此允许第二片段404维持高分辨率。根据另一示范性实施例,显示设备1请求外部服务器基于优先级传输具有高图像质量的第二片段404。
图式仅是示范性的,且片段401和404的形状和大小不限于图式所说明的那些。
图8说明在对应于朝向相邻视点的方向的显示器的边缘上提供关于显示质量的信息的另一实例。根据此示范性实施例,使得边缘具有对应于其中定位相邻视点的相邻片段400到405的显示质量等级的颜色或阴影。尽管在图式中关于边缘上所示的显示质量的信息是相邻片段400到405的剩余帧的数目,但本公开不限于此。控制器309可显示对应于分别与朝向正显示的图像的边缘的方向对应的相邻视点的相邻片段400到405的显示质量等级的颜色或阴影的阴影800到805。作为一实例,控制器309可针对显示质量为第一级别而控制以第一颜色或阴影显示指示位于相邻片段中的相邻视点的方向的阴影800和803,且可针对显示质量为第二级别而以第二颜色或阴影显示指示位于相邻片段中的相邻视点的方向的阴影805。而且,控制器309可针对显示质量为介于第一级别与第二级别之间的第三级别而控制以介于第一颜色或阴影与第二颜色或阴影之间的第三颜色或阴影显示指示位于相邻片段中的相邻视点的方向的阴影801。例如,参考图8,对应于其中剩余帧数为100的片段的阴影800和803的颜色为白色,对应于其中剩余帧数为50的片段的阴影801的颜色为灰色,且对应于其中剩余帧数为15的片段的阴影805的颜色为黑色。出于方便说明的目的,说明图式,从而使得对应于不同显示质量的阴影800到805具有不同对比度级别,但本公开不限于此。
图9说明根据另一示范性实施例的提供箭头900以指示显示质量为高的方向的实例。为了促使视点101在用户可平滑地移动视点101的方向上的移动,控制器309可在显示器303上显示箭头900以指示一视点,具有高于来自多个片段400到405当中的其它片段的显示质量等级的片段位于所述视点中。
作为另一实例,箭头900可指示一视点,具有低于来自多个片段400到405当中的其它片段的显示质量等级的显示质量等级的片段位于所述视点中。
在下文中,将参考附图描述针对提供关于显示质量的信息的条件的各种示范性实施例。可仅当满足预定条件时提供关于片段400到405中的每一个的显示质量的信息。例如,预定条件可在各种情形中的任一个中实施,例如当视点101移动时,当视点101固定时,当视点101变得靠近片段400到405之间的边界时,当显示质量等级超出预定临界级别时,当显示质量等级等于或小于预定临界级别时,当显示质量等级改变超过预定量时等。在下文中,出于方便说明的目的,将描述来自这些各种示范性实施例的一些示范性实施例,但本公开不限于此。
图10说明根据示范性实施例的当视点101移动时提供关于显示质量的信息的实例。控制器309在视点101停止的同时可能不提供关于显示质量的任何信息,且可接着提供关于其中分别定位相邻视点的片段400到405的显示质量1000的信息以帮助当视点101开始移动时视点101的平滑移动。如上文所描述,可以各种方式中的任一种提供关于显示质量1000的信息,所述各种方式例如UI,所述UI包含对应于相邻视点或其中定位相邻视点的片段400到405中的至少一个的至少一个项目、文本等。
图11说明根据示范性实施例的视点101变得靠近片段之间的边界的实例,且图12说明根据示范性实施例的当视点101变得靠近片段之间的边界时提供关于显示质量的信息的实例。控制器309可当视点101移动且变为在与片段400到405之间的边界中的一个相距的预定距离内时提供关于显示质量的信息。换句话说,如果视点101移动且变得靠近有待定位在其间的片段400到405之间的边界中的一个,那么控制器309确定视点101可从一个片段移动到另一片段且提供关于其中定位邻近于视点101的视点的片段的显示质量1200的信息。
作为另一实例,控制器309可提供关于仅视点101变得在预定距离内的片段的显示质量的信息。例如,如果视点101位于第一片段401中且接着变得靠近第一片段401与第二片段402之间的边界,那么控制器309提供关于第二片段402的显示质量的信息。同样地,如果视点101变得靠近第一片段401与第三片段404之间的边界,那么控制器309提供关于第三片段404的显示质量的信息。
图式仅借助于举例提供,且片段401、402和404的形状和大小不限于图式所说明的那些。
图13说明当显示质量等级等于或小于预定临界级别时提供关于显示质量的信息的实例。为了允许用户平滑地移动视点,控制器309提供关于片段400到405的显示质量1300的信息,其中显示质量等级等于或小于预定临界级别。作为另一实例,控制器309可提供关于片段400到405的显示质量1300的信息,其中显示质量等级等于或大于预定临界级别。尽管图式已说明在对应于朝向片段或者片段400到405的方向的边缘上以阴影形式提供关于显示质量1300的信息的实例,其中显示质量级别等于或小于来自正显示的图像当中的预定临界级别,但本公开不限于此。
图14是说明根据示范性实施例的显示设备的控制过程的流程图。
在操作S1400处,接收器接收内容图像。在操作S1401处,信号处理器301处理所接收的内容图像。在操作S1402处,显示器303显示所处理的内容图像。在操作S1403处,控制器309基于片段400到405的接收状态显示对应于来自通过片段400到405接收的内容图像当中的一个视点的图像以及关于至少一个片段的显示质量的信息。
此外,在图14所说明的显示设备的控制方法中,参考图1到13解释的显示设备1的配置可以相同或类似方式应用。
如上文所描述,根据示范性实施例,显示设备可提供关于内容图像的至少一个片段的显示质量的信息,由此在内容图像是360度图像时允许用户在观看图像的同时平滑地移动视点。
虽然上文已经示出和描述了示范性实施例,但是本领域的技术人员将理解,可在其中做出形式和细节的各种改变而不脱离如所附权利要求书及其等同物所定义的本公开。

Claims (15)

1.一种显示设备,其包括:
接收器,被配置成接收多个图像片段;
图像处理器,被配置成处理经由所述接收器接收的图像片段;
显示器,被配置成显示处理的图像片段;和
控制器,被配置成:
基于经由所述接收器接收的所述多个图像片段生成映射到三维(3D)对象的内容图像;
控制所述图像处理器显示对应于所生成的内容图像的第一视点的图像;以及
控制所述图像处理器基于图像片段的接收状态显示关于邻近于所述第一视点的至少一个相邻视点的相邻图像的显示质量的信息。
2.根据权利要求1所述的设备,其中所述显示质量包括以下各项中的至少一个:接收对应于所述至少一个相邻视点的图像片段的速度;已接收对应于所述至少一个相邻视点的所述图像片段的程度;对应于所述至少一个相邻视点的所述图像片段的可播放时间;以及对应于所述至少一个相邻视点的所述图像片段的分辨率。
3.根据权利要求1所述的设备,其中所述控制器被配置成将关于所述显示质量的信息显示为文本。
4.根据权利要求1所述的设备,其中所述控制器被配置成显示用户界面(UI),所述用户界面(UI)包含具有对应于显示质量等级的大小的至少一个图形。
5.根据权利要求1所述的设备,其中所述控制器被配置成响应于所述显示质量为第一级别而显示第一颜色,且响应于所述显示质量为高于所述第一级别的第二级别而显示不同于所述第一颜色的第二颜色。
6.根据权利要求5所述的设备,其中所述控制器被配置成响应于所述显示质量为介于所述第一级别与所述第二级别之间的第三级别而显示第三颜色,所述第三颜色具有在所述第一颜色的阴影与所述第二颜色的阴影之间的阴影。
7.根据权利要求1所述的设备,其中所述控制器被配置成显示一箭头,所述箭头指示具有高于或低于其它图像片段的显示质量等级的显示质量等级的至少一个图像片段的方向。
8.根据权利要求1所述的设备,其中所述控制器被配置成在所述显示器的对应于所述至少一个相邻视点的方向的边缘上显示关于所述显示质量的信息。
9.根据权利要求1所述的设备,其中所述控制器被配置成响应于所述第一视点在已停止之后移动而在所述显示器上显示关于所述显示质量的信息。
10.根据权利要求1所述的设备,其中所述控制器被配置成响应于所述一个视点移动且落在距所述图像片段之间的边界预定距离内而在所述显示器上显示关于显示质量的信息。
11.根据权利要求1所述的设备,其中所述控制器被配置成响应于显示质量等级低于预定临界级别而显示关于所述显示质量的信息。
12.根据权利要求1所述的设备,其中所述控制器被配置成响应于所述显示质量改变超过预定量而显示关于所述显示质量的信息。
13.一种显示设备的控制方法,其包括:
接收多个图像片段;
处理所接收的图像片段;且
显示所处理的图像片段,
其中所述显示包括:
基于多个接收的图像片段生成映射到三维(3D)对象的内容图像;
显示对应于所生成的内容图像的第一视点的图像;以及
基于所述图像片段的接收状态显示关于邻近于所述第一视点的至少一个相邻视点的相邻图像的显示质量的信息。
14.根据权利要求13所述的方法,其中所述显示质量包括以下各项中的至少一个:接收对应于所述至少一个相邻视点的图像片段的速度;已接收对应于所述至少一个相邻视点的所述图像片段的程度;对应于所述至少一个相邻视点的所述图像片段的可播放时间;以及对应于所述至少一个相邻视点的所述图像片段的分辨率。
15.根据权利要求13所述的方法,其中所述显示关于所述显示质量的信息包括将显示质量等级显示为文本。
CN201780071610.2A 2016-11-21 2017-11-15 显示设备及其控制方法 Active CN109983763B (zh)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
KR10-2016-0155256 2016-11-21
KR1020160155256A KR102633595B1 (ko) 2016-11-21 2016-11-21 디스플레이장치 및 그 제어방법
PCT/KR2017/012939 WO2018093143A1 (en) 2016-11-21 2017-11-15 Display apparatus and control method thereof

Publications (2)

Publication Number Publication Date
CN109983763A true CN109983763A (zh) 2019-07-05
CN109983763B CN109983763B (zh) 2021-08-17

Family

ID=62145656

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201780071610.2A Active CN109983763B (zh) 2016-11-21 2017-11-15 显示设备及其控制方法

Country Status (6)

Country Link
US (1) US10893194B2 (zh)
EP (1) EP3507646B1 (zh)
JP (1) JP6744492B2 (zh)
KR (1) KR102633595B1 (zh)
CN (1) CN109983763B (zh)
WO (1) WO2018093143A1 (zh)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN115035808A (zh) * 2022-06-29 2022-09-09 卡莱特云科技股份有限公司 球形屏显示区域的播放方法、服务器、系统、设备及介质

Families Citing this family (13)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR102598082B1 (ko) * 2016-10-28 2023-11-03 삼성전자주식회사 영상 표시 장치, 모바일 장치 및 그 동작방법
KR20180051288A (ko) * 2016-11-08 2018-05-16 삼성전자주식회사 디스플레이 장치 및 그 제어 방법
US10999602B2 (en) 2016-12-23 2021-05-04 Apple Inc. Sphere projected motion estimation/compensation and mode decision
US11259046B2 (en) 2017-02-15 2022-02-22 Apple Inc. Processing of equirectangular object data to compensate for distortion by spherical projections
US10924747B2 (en) 2017-02-27 2021-02-16 Apple Inc. Video coding techniques for multi-view video
CN107016728A (zh) * 2017-03-08 2017-08-04 惠州Tcl移动通信有限公司 一种在虚拟现实场景中模拟摄影的方法及系统
JP6773214B2 (ja) * 2017-03-31 2020-10-21 日本電気株式会社 情報処理装置、情報処理方法および情報処理プログラム
US20180332219A1 (en) * 2017-05-10 2018-11-15 Fotonation Limited Wearable vision system and method of monitoring a region
US11093752B2 (en) 2017-06-02 2021-08-17 Apple Inc. Object tracking in multi-view video
US20190005709A1 (en) * 2017-06-30 2019-01-03 Apple Inc. Techniques for Correction of Visual Artifacts in Multi-View Images
US10754242B2 (en) 2017-06-30 2020-08-25 Apple Inc. Adaptive resolution and projection format in multi-direction video
US20230031530A1 (en) * 2020-01-08 2023-02-02 Arris Enterprises Llc Service Switching for Content Output
WO2023244829A1 (en) * 2022-06-16 2023-12-21 Axon Enterprise, Inc. Generating video data for simulating human perception

Citations (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20100002071A1 (en) * 2004-04-30 2010-01-07 Grandeye Ltd. Multiple View and Multiple Object Processing in Wide-Angle Video Camera
US20120139947A1 (en) * 2010-12-02 2012-06-07 Sony Corporation Information processor, information processing method and program
CN102737097A (zh) * 2012-03-30 2012-10-17 北京峰盛博远科技有限公司 基于lod透明纹理的三维矢量实时动态叠加技术
CN103930817A (zh) * 2011-06-20 2014-07-16 谷歌公司 用于数据的自适应传送的系统和方法
US20140211319A1 (en) * 2013-01-28 2014-07-31 Electronics And Telecommunications Research Institute Head-up display apparatus and method for vehicle
CN104079919A (zh) * 2009-11-04 2014-10-01 三星电子株式会社 使用主动亚像素渲染的高密度多视点图像显示系统及方法
US20150317832A1 (en) * 2014-05-01 2015-11-05 Michael John Ebstyne World-locked display quality feedback
US20160142612A1 (en) * 2014-11-18 2016-05-19 Elwha Llc Devices, methods and systems for visual imaging arrays
KR20160071797A (ko) * 2014-12-12 2016-06-22 삼성전자주식회사 디스플레이장치 및 그 제어방법

Family Cites Families (12)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP4727329B2 (ja) * 2005-07-15 2011-07-20 パナソニック株式会社 画像合成装置及び画像合成方法
KR100956266B1 (ko) 2008-07-15 2010-05-07 (주)씨디네트웍스 플레이어 프로그램의 화면을 통한 복수개의 화면 제공 방법및 장치
KR20120080504A (ko) 2011-01-07 2012-07-17 김회원 멀티미디어 재생기 조작을 위한 그래픽 사용자 인터페이스 및 응용 방법
EP2697720B1 (en) 2011-04-13 2023-02-22 Razer (Asia-Pacific) Pte. Ltd. Computer peripheral display and communication device providing an adjunct 3d user interface
JP5975739B2 (ja) * 2012-06-01 2016-08-23 任天堂株式会社 情報処理プログラム、情報処理装置、情報処理システム、およびパノラマ動画表示方法
EP2824885B1 (en) * 2013-07-12 2019-01-23 Provenance Asset Group LLC A manifest file format supporting panoramic video
CN106416239B (zh) * 2014-05-29 2019-04-09 奈克斯特Vr股份有限公司 用于交付内容和/或回放内容的方法和装置
US20160277772A1 (en) * 2014-09-30 2016-09-22 Telefonaktiebolaget L M Ericsson (Publ) Reduced bit rate immersive video
US9489044B2 (en) * 2014-11-07 2016-11-08 Eye Labs, LLC Visual stabilization system for head-mounted displays
KR102234477B1 (ko) * 2015-01-15 2021-04-01 한국전자통신연구원 영상 품질에 기초한 파노라마 영상 생성 장치 및 방법
WO2016123721A1 (en) * 2015-02-07 2016-08-11 Zhou Wang Method and system for smart adaptive video streaming driven by perceptual quality-of-experience estimations
GB2550589B (en) * 2016-05-23 2019-12-04 Canon Kk Method, device, and computer program for improving streaming of virtual reality media content

Patent Citations (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20100002071A1 (en) * 2004-04-30 2010-01-07 Grandeye Ltd. Multiple View and Multiple Object Processing in Wide-Angle Video Camera
CN104079919A (zh) * 2009-11-04 2014-10-01 三星电子株式会社 使用主动亚像素渲染的高密度多视点图像显示系统及方法
US20120139947A1 (en) * 2010-12-02 2012-06-07 Sony Corporation Information processor, information processing method and program
CN103930817A (zh) * 2011-06-20 2014-07-16 谷歌公司 用于数据的自适应传送的系统和方法
CN102737097A (zh) * 2012-03-30 2012-10-17 北京峰盛博远科技有限公司 基于lod透明纹理的三维矢量实时动态叠加技术
US20140211319A1 (en) * 2013-01-28 2014-07-31 Electronics And Telecommunications Research Institute Head-up display apparatus and method for vehicle
US20150317832A1 (en) * 2014-05-01 2015-11-05 Michael John Ebstyne World-locked display quality feedback
US20160142612A1 (en) * 2014-11-18 2016-05-19 Elwha Llc Devices, methods and systems for visual imaging arrays
KR20160071797A (ko) * 2014-12-12 2016-06-22 삼성전자주식회사 디스플레이장치 및 그 제어방법

Non-Patent Citations (1)

* Cited by examiner, † Cited by third party
Title
李怡静等: "多视点全景图与平滑漫游的研究与实现", 《计算机工程》 *

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN115035808A (zh) * 2022-06-29 2022-09-09 卡莱特云科技股份有限公司 球形屏显示区域的播放方法、服务器、系统、设备及介质
CN115035808B (zh) * 2022-06-29 2024-03-01 卡莱特云科技股份有限公司 球形屏显示区域的播放方法、服务器、系统、设备及介质

Also Published As

Publication number Publication date
WO2018093143A1 (en) 2018-05-24
EP3507646A1 (en) 2019-07-10
KR102633595B1 (ko) 2024-02-05
JP6744492B2 (ja) 2020-08-19
EP3507646B1 (en) 2021-04-28
JP2020518141A (ja) 2020-06-18
KR20180057081A (ko) 2018-05-30
CN109983763B (zh) 2021-08-17
US20180146138A1 (en) 2018-05-24
US10893194B2 (en) 2021-01-12
EP3507646A4 (en) 2019-12-04

Similar Documents

Publication Publication Date Title
CN109983763A (zh) 显示设备及其控制方法
US10019831B2 (en) Integrating real world conditions into virtual imagery
US10019849B2 (en) Personal electronic device with a display system
EP3166079A1 (en) Augmented reality method and system based on wearable device
US20200186407A1 (en) Communication terminal, image network system, display method, and program
US11303871B2 (en) Server and display apparatus, and control methods thereof
US20190289203A1 (en) Image processing apparatus, image capturing system, image processing method, and recording medium
CN109478344A (zh) 用于合成图像的方法和设备
EP3336845A1 (en) Display apparatus and control method thereof
US9766458B2 (en) Image generating system, image generating method, and information storage medium
KR20180002124A (ko) 표시 장치
US20140160305A1 (en) Information processing apparatus, information processing method, output apparatus, output method, program, and information processing system
KR20170092868A (ko) 디스플레이 장치 및 디스플레이 방법
CN114442972A (zh) 一种投屏方法及电子设备
CN107635132B (zh) 裸眼3d显示终端的显示控制方法、装置及显示终端
US20120127280A1 (en) Apparatus and method for generating three dimensional image in portable terminal
US20160350955A1 (en) Image processing method and device
CN110557552A (zh) 便携式图像采集设备
US20150085086A1 (en) Method and a device for creating images
CN116244024A (zh) 交互控制方法、装置、头戴显示设备及介质
KR102561860B1 (ko) 전자장치 및 그 제어방법
WO2018048093A1 (ko) 디스플레이장치 및 그 제어방법
CN106604146A (zh) 机顶盒显示界面放大的方法和装置
KR100761075B1 (ko) 3d용 카메라를 구비하는 액정표시장치
KR102640670B1 (ko) 디스플레이 장치 및 디스플레이 제어 방법

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant