CN108024127B - 图像显示装置、移动设备及其操作方法 - Google Patents

图像显示装置、移动设备及其操作方法 Download PDF

Info

Publication number
CN108024127B
CN108024127B CN201711022566.4A CN201711022566A CN108024127B CN 108024127 B CN108024127 B CN 108024127B CN 201711022566 A CN201711022566 A CN 201711022566A CN 108024127 B CN108024127 B CN 108024127B
Authority
CN
China
Prior art keywords
image
viewpoint
degree
mobile device
display apparatus
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201711022566.4A
Other languages
English (en)
Other versions
CN108024127A (zh
Inventor
金永一
梁宽植
张正禄
崔吉洙
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Samsung Electronics Co Ltd
Original Assignee
Samsung Electronics Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Samsung Electronics Co Ltd filed Critical Samsung Electronics Co Ltd
Publication of CN108024127A publication Critical patent/CN108024127A/zh
Application granted granted Critical
Publication of CN108024127B publication Critical patent/CN108024127B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/41—Structure of client; Structure of client peripherals
    • H04N21/4104—Peripherals receiving signals from specially adapted client devices
    • H04N21/4126—The peripheral being portable, e.g. PDAs or mobile phones
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04M—TELEPHONIC COMMUNICATION
    • H04M1/00—Substation equipment, e.g. for use by subscribers
    • H04M1/72—Mobile telephones; Cordless telephones, i.e. devices for establishing wireless links to base stations without route selection
    • H04M1/724—User interfaces specially adapted for cordless or mobile telephones
    • H04M1/72403—User interfaces specially adapted for cordless or mobile telephones with means for local support of applications that increase the functionality
    • H04M1/72409—User interfaces specially adapted for cordless or mobile telephones with means for local support of applications that increase the functionality by interfacing with external accessories
    • H04M1/72415—User interfaces specially adapted for cordless or mobile telephones with means for local support of applications that increase the functionality by interfacing with external accessories for remote control of appliances
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T15/00—3D [Three Dimensional] image rendering
    • G06T15/10—Geometric effects
    • G06T15/20—Perspective computation
    • G06T15/205—Image-based rendering
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0484—Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range
    • G06F3/04847—Interaction techniques to control parameter settings, e.g. interaction with sliders or dials
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0484—Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range
    • G06F3/0485—Scrolling or panning
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/14—Digital output to display device ; Cooperation and interconnection of the display device with other functional units
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/14—Digital output to display device ; Cooperation and interconnection of the display device with other functional units
    • G06F3/1454—Digital output to display device ; Cooperation and interconnection of the display device with other functional units involving copying of the display data of a local workstation or window to a remote workstation or window so that an actual copy of the data is displayed simultaneously on two or more displays, e.g. teledisplay
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/14—Digital output to display device ; Cooperation and interconnection of the display device with other functional units
    • G06F3/147—Digital output to display device ; Cooperation and interconnection of the display device with other functional units using display panels
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T19/00—Manipulating 3D models or images for computer graphics
    • G06T19/20—Editing of 3D images, e.g. changing shapes or colours, aligning objects or positioning parts
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T3/00—Geometric image transformations in the plane of the image
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T3/00—Geometric image transformations in the plane of the image
    • G06T3/06—Topological mapping of higher dimensional structures onto lower dimensional surfaces
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T3/00—Geometric image transformations in the plane of the image
    • G06T3/06—Topological mapping of higher dimensional structures onto lower dimensional surfaces
    • G06T3/073—Transforming surfaces of revolution to planar images, e.g. cylindrical surfaces to planar images
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T3/00—Geometric image transformations in the plane of the image
    • G06T3/40—Scaling of whole images or parts thereof, e.g. expanding or contracting
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/41—Structure of client; Structure of client peripherals
    • H04N21/4104—Peripherals receiving signals from specially adapted client devices
    • H04N21/4122—Peripherals receiving signals from specially adapted client devices additional display device, e.g. video projector
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/41—Structure of client; Structure of client peripherals
    • H04N21/422—Input-only peripherals, i.e. input devices connected to specially adapted client devices, e.g. global positioning system [GPS]
    • H04N21/42204—User interfaces specially adapted for controlling a client device through a remote control device; Remote control devices therefor
    • H04N21/42206—User interfaces specially adapted for controlling a client device through a remote control device; Remote control devices therefor characterized by hardware details
    • H04N21/42208—Display device provided on the remote control
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/431—Generation of visual interfaces for content selection or interaction; Content or additional data rendering
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/47—End-user applications
    • H04N21/472—End-user interface for requesting content, additional data or services; End-user interface for interacting with content, e.g. for content reservation or setting reminders, for requesting event notification, for manipulating displayed content
    • H04N21/47202—End-user interface for requesting content, additional data or services; End-user interface for interacting with content, e.g. for content reservation or setting reminders, for requesting event notification, for manipulating displayed content for requesting content on demand, e.g. video on demand
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60—Control of cameras or camera modules
    • H04N23/69—Control of means for changing angle of the field of view, e.g. optical zoom objectives or electronic zooming
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00—Details of television systems
    • H04N5/222—Studio circuitry; Studio devices; Studio equipment
    • H04N5/262—Studio circuits, e.g. for mixing, switching-over, change of character of image, other special effects ; Cameras specially adapted for the electronic generation of special effects
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F2203/00—Indexing scheme relating to G06F3/00 - G06F3/048
    • G06F2203/048—Indexing scheme relating to G06F3/048
    • G06F2203/04802—3D-info-object: information is displayed on the internal or external surface of a three dimensional manipulable object, e.g. on the faces of a cube that can be rotated by the user
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F2203/00—Indexing scheme relating to G06F3/00 - G06F3/048
    • G06F2203/048—Indexing scheme relating to G06F3/048
    • G06F2203/04806—Zoom, i.e. interaction techniques or interactors for controlling the zooming operation
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2200/00—Indexing scheme for image data processing or generation, in general
    • G06T2200/16—Indexing scheme for image data processing or generation, in general involving adaptation to the client's capabilities
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2219/00—Indexing scheme for manipulating 3D models or images for computer graphics
    • G06T2219/20—Indexing scheme for editing of 3D models
    • G06T2219/2021—Shape modification
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04M—TELEPHONIC COMMUNICATION
    • H04M2201/00—Electronic components, circuits, software, systems or apparatus used in telephone systems
    • H04M2201/34—Microprocessors
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04M—TELEPHONIC COMMUNICATION
    • H04M2201/00—Electronic components, circuits, software, systems or apparatus used in telephone systems
    • H04M2201/36—Memories
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04M—TELEPHONIC COMMUNICATION
    • H04M2201/00—Electronic components, circuits, software, systems or apparatus used in telephone systems
    • H04M2201/38—Displays
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04M—TELEPHONIC COMMUNICATION
    • H04M2250/00—Details of telephonic subscriber devices
    • H04M2250/06—Details of telephonic subscriber devices including a wireless LAN interface
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N1/00—Scanning, transmission or reproduction of documents or the like, e.g. facsimile transmission; Details thereof
    • H04N1/00095—Systems or arrangements for the transmission of the picture signal
    • H04N1/00103—Systems or arrangements for the transmission of the picture signal specially adapted for radio transmission, e.g. via satellites
    • H04N1/00106—Systems or arrangements for the transmission of the picture signal specially adapted for radio transmission, e.g. via satellites using land mobile radio networks, e.g. mobile telephone

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • General Engineering & Computer Science (AREA)
  • Human Computer Interaction (AREA)
  • Signal Processing (AREA)
  • Multimedia (AREA)
  • Computer Graphics (AREA)
  • Computer Hardware Design (AREA)
  • Software Systems (AREA)
  • Architecture (AREA)
  • Computing Systems (AREA)
  • Geometry (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Databases & Information Systems (AREA)
  • Controls And Circuits For Display Device (AREA)
  • User Interface Of Digital Computer (AREA)
  • Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)
  • Fittings On The Vehicle Exterior For Carrying Loads, And Devices For Holding Or Mounting Articles (AREA)
  • Telephone Function (AREA)

Abstract

提供移动设备。移动设备可以包括：通信接口；显示器；存储器，被配置为存储一个或多个指令；和至少一个处理器，被配置为执行存储在存储器中的一个或多个指令以：控制通信接口与图像显示装置进行通信；基于输入控制360度图像的视点；和控制通信接口，将与360度图像的视点对应的图像和与360度图像的视点相对应的视点控制信息中的至少一个传送到图像显示装置。

Description

图像显示装置、移动设备及其操作方法
相关申请的交叉引用
本申请要求2016年10月28日在韩国知识产权局提交的韩国专利申请10-2016-0142155的优先权，其全部内容通过引用并入本文。
技术领域
与示例性实施例一致的方法和装置涉及图像显示装置、移动设备以及操作图像显示装置和移动设备的方法。
背景技术
图像显示装置显示用户可以观看的图像。用户可以通过图像显示装置查看诸如广播节目的各种图像或视频。
最近开发了用于提供附加功能的智能电视(TV)。
360度图像是指包括在所有方向上的视图的图像。例如，可以使用全向照相机或一组照相机捕获360度图像。
发明内容
一个或多个示例性实施例提供图像显示装置、移动设备以及操作图像显示装置和移动设备的方法，由此可以方便和有效地控制360度图像。
附加方面将在下面的描述中部分地阐述，并且部分地将从描述中显而易见，或者可以通过实践示例性实施例来了解。
根据示例性实施例的一个方面，提供了一种移动设备，包括：通信接口；显示器；存储器，被配置为存储一个或多个指令；和至少一个处理器，被配置为执行存储在存储器中的一个或多个指令以：控制通信接口与图像显示装置进行通信；基于输入控制360度图像的视点；和控制通信接口，将与360度图像的视点对应的图像和与360度图像的视点相对应的视点控制信息中的至少一个传送到图像显示装置。
至少一个处理器还可以被配置为执行存储在存储器中的一个或多个指令，以基于360度图像生成球形360度图像。
至少一个处理器还可以被配置为执行存储在存储器中的一个或多个指令，以控制通信接口从连接的图像显示装置接收360度图像。
至少一个处理器还可以被配置为执行存储在存储器中的一个或多个指令，以通过旋转所述360度图像输入或基于输入放大所述360度图像来确定所述360度图像的视点。
所述至少一个处理器还可以被配置为执行存储在存储器中的一个或多个指令，以基于输入来确定对应于视点的图像。
至少一个处理器还可以被配置为执行存储在存储器中的一个或多个指令，以基于360度图像生成球形360度图像，并且控制所述通信接口以发送球形360度图像到所述图像显示装置。
至少一个处理器还可以被配置为执行存储在存储器中的一个或多个指令，以基于关于360度图像的信息和关于图像显示的信息中的至少一个来确定与视点对应的图像。
至少一个处理器还可以被配置为执行存储在所述存储器中的所述一个或多个指令，以基于所述图像显示装置的纵横比处理对应于所述视点的图像。
所述至少一个处理器还可以被配置为执行存储在存储器中的一个或多个指令，以控制所述通信接口来交换关于所述360度图像的信息以用于屏幕镜像，生成一个或多个用于屏幕镜像的任务，并且基于移动设备和图像显示装置的处理资源，将一个或多个任务中的每一个分配给移动设备和图像显示装置中的一个。
根据另一示例性实施例的一个方面，提供了一种图像显示装置，包括：通信接口；显示器；存储器，被配置为存储一个或多个指令；和至少一个处理器，被配置为执行存储在存储器中的一个或多个指令以：控制通信接口与移动设备进行通信，控制通信接口以从移动设备接收360度图像或将360度图像发送到移动设备，以及控制显示器以显示与360度图像的所选视点对应的图像。
所述至少一个处理器还可以被配置为执行存储在存储器中的一个或多个指令，以便：控制通信接口，从移动设备接收与基于输入的视点对应的视点控制信息和根据输入与视点对应的360度图像的区域的图像中的至少一个，以及基于视点控制信息和与视点对应的360度图像的区域的图像中的至少一个，确定360度图像的选择视点。
视点控制信息可以包括360度图像的视角和360度图像的缩放度中的至少一个。
对应于所选视点的图像可以对应于关于360度图像的信息和关于图像显示装置的信息中的至少一个
根据另一示例性实施例的方面，提供了一种操作移动设备的方法，所述方法包括：控制移动设备的通信接口和与360度图像相关的图像显示装置通信；在移动设备的显示器上显示360度图像；基于输入控制360度图像的视点；向图像显示装置发送与360度图像的视点对应的图像和与360度图像的视点对应的视点控制信息中的至少一个。
还可以包括从图像显示装置接收360度图像。
该方法还可以包括旋转360度图像和根据输入放大360度图像中的至少一个。
该方法还可以包括基于360度图像生成球形360度图像；并根据输入和球形360度图像来确定对应于视点的图像。
该方法还可以包括向图像显示装置发送与球形360度图像相对应的视点控制信息。
根据又一示例性实施例的方面，提供了一种操作图像显示装置的方法，所述方法包括：控制图像显示装置的通信接口连接到移动设备；从移动设备接收360度图像，或者将360度图像发送到移动设备；和控制图像显示装置显示与360度图像的视点对应的图像。
该方法还可以包括：从所述移动设备接收基于控制所述移动设备上显示的360度图像的视点的输入而生成的视点控制信息和与所述视点对应的360度图像中的区域的图像中的至少一个；和基于视点控制信息和与该视点对应的360度图像的区域的图像中的至少一个，显示与360度图像的视点对应的图像。
根据又一示例性实施例的一个方面，提供了一种图像显示装置，包括：通信接口；显示器；存储器，被配置为存储一个或多个指令；和至少一个处理器，被配置为执行存储在存储器中的一个或多个指令以：控制显示器显示360度图像，控制通信接口以从外部装置接收控制信号，根据控制信号控制显示器显示360度图像的一部分。
显示器可以包括被配置为生成触摸输入信号的触摸屏，并且所述至少一个处理器可以被进一步配置为执行存储在存储器中的一个或多个指令，以基于所述触摸输入信号和所述控制信号来控制所述显示器来显示所述360度图像的一部分。
所述至少一个处理器还可以被配置为执行存储在存储器中的一个或多个指令，以显示指示360度图像的部分的位置的3D指示符。
至少一个处理器还可以被配置为执行存储在存储器中的一个或多个指令，以：根据图像显示装置的一个资源和外部装置的资源，确定图像显示装置和外部装置中的一个，控制图像显示装置和外部装置之间确定的一个，以基于360度图像生成球形360度图像，以及在图像显示装置和外部装置之间传送球形360度图像。
附图说明
结合附图，从以下对实施例的描述中，这些和/或其他方面将变得显而易见和更容易理解，其中：
图1是示出根据示例性实施例的显示360度图像的图像显示装置和控制设备的图；
图2是用于描述根据示例性实施例的360度图像的视角的图；
图3是根据示例性实施例的用于描述显示360度图像的方法的图；
图4是根据示例性实施例的用于描述通过使用图像显示装置和移动设备显示360度图像的概念的参考图；
图5是根据示例性实施例的用于描述360度图像的原始图像、球形360度图像和所选视点图像的参考图；
图6示出了根据示例性实施例的图像显示装置和移动设备的框图；
图7是根据示例性实施例的用于镜像连接的移动设备中的操作过程的流程图。
图8是根据示例性实施例的用于镜像连接的图像显示装置中的操作步骤的流程图。
图9是根据示例性实施例的具有360度图像的移动设备和图像显示装置之间的镜像操作的流程图。
图10A和10B示出根据示例性实施例的要在移动设备上显示的球形360度图像的示例；
图11是根据示例性实施例的用于描述在移动设备上显示项目时的操作的参考图；
图12是用于描述根据示例性实施例的在移动设备上显示项目的模式中的操作的参考图；和
图13是根据示例性实施例的具有360度图像的图像显示装置和移动设备之间的镜像操作的流程图。
具体实施方式
在下文中，将简要描述在说明书中使用的术语，并且将详细描述本公开。
包括本文中使用的描述性或技术性的术语的所有术语应被解释为具有其普通含义。然而，应当理解，根据本领域普通技术人员的意图，先例或新技术的出现使得具体术语可以具有不同的含义。此外，一些术语可以由申请人任意选择，在这种情况下，这里将详细描述所选术语的含义。因此，本文使用的术语将在整个说明书中基于普通含义以及描述来理解。
在整个说明书中，当部件“包括”或“包含”元件时，除非具有与之相反的特定描述，否则该部件还可以包括其他元件。在下面的描述中，诸如“单元”和“模块”的术语表示用于处理至少一个功能或操作的单元，其中单元和块可以被实现为硬件或软件，或者通过组合硬件和软件来体现。
现在将详细参考示例性实施例，其各方面在附图中示出。然而，本公开可以以许多不同的形式实施，并且不应被解释为限于本文阐述的示例性实施例；而是提供这些示例性实施例，使得本公开将是彻底和完整的，并且将向本领域普通技术人员充分地传达该概念。在附图中，为了更清楚的描述，可以省略部件或单元。此外，在整个说明书中，附图中相同的附图标记表示相同的元件。
在元素列表之前的诸如“至少一个”的表达式修改整个元素列并且不修改列中的各个元素。
在示例性实施例的描述中，术语“用户”可以指通过使用控制设备来控制图像显示装置的功能或操作的人，并且可以包括观看者、管理者或安装工程师。
图1是示出根据示例性实施例的显示360度图像的图像显示装置100和控制设备的图。
参见图1，图像显示装置100可以显示360度图像。360度图像可以指示具有360度的视角的图像。360度图像可以是静止图像、运动图像或全景图像。例如，360度图像可以是基于通过使用至少一个照相机在360度方向上捕获的多个图像而生成的图像。在这点上，可以将多个拍摄图像映射到球体，并且可以将映射图像的接触缝合在一起以生成球形360度图像70。此外，球形360度图像70可以转换为平面型360度图像50，如图1所示，使得平面型360度图像50可以被发送到另一装置或被存储。
图像显示装置100可以对平面型360度图像50执行图形处理，从而将平面型360度图像50转换为球形360度图像70。图像显示装置100可以选择球形360度图像70的区域80，区域80对应于某个视角，并且可以在显示器上显示与所选区域80相对应的图像。在这点上，图像显示装置100可以根据显示器的分辨率对与所选择的区域80对应的图像进行缩放，然后可以显示图像。此外，图像显示装置100可以显示指示区域80在360度图像中的位置的三维(3D)指示符20。以下将参考图2来提供关于360度图像的视角的详细描述。
图像显示装置100可以是电视(TV)，但是这是示例性的，并且图像显示装置100可以被实现为包括显示器的任何电子设备。例如，图像显示装置100可以实现为移动电话、平板电脑(PC)、数码相机、摄像机、膝上型计算机、台式PC、电子书(电子书)终端、数字广播终端、个人数字助理(PDA)、便携式多媒体播放器(PMP)、导航机、MP3播放器、可穿戴设备等。特别地，示例性实施例可以容易地在具有诸如TV的大显示器的显示装置中实现，但不限于此。此外，图像显示装置100可以是静止型图像显示装置或移动型图像显示装置，并且可以是能够接收数字广播信号的数字广播接收机。
图像显示装置100可以被实现为不仅是平面显示装置，而是被实现为具有曲率的弯曲显示装置或曲率可调节的柔性显示装置。图像显示装置100的输出分辨率的示例可以包括高清晰度(HD)、全高清、超高清以及高于超高清的其他分辨率。
图像显示装置100可以由控制设备30控制。控制设备30可以被实现为能够控制图像显示装置100的各种装置之一，包括遥控器、移动电话等。
控制设备30可以通过使用诸如红外通信或蓝牙通信的短距离通信来控制图像显示装置100。控制设备30可以基于可以经由键(包括按钮)、触摸板、能够接收用户语音的麦克风、能够识别的传感器控制设备30或任何其它输入设备的运动的传感器输入的用户输入来控制图像显示装置100的至少一个功能。
控制设备30包括四方向键(或四方向按钮)。四方向键可以用于移动显示在显示器上的360度图像的区域80的位置。
控制设备30可以是指示设备。例如，当控制设备30接收到特定的键输入时，控制设备30可以作为指示设备进行操作。当控制设备30作为指示设备操作时，可以根据用户输入来控制图像显示装置100，所述用户输入以上、下、左或右方向移动控制设备30，或者使控制设备30倾斜。关于由控制设备30的传感器感测到的控制设备30的运动可以被发送到图像显示装置100。基于关于控制设备30的运动的信息，图像显示装置100可以改变区域80显示在显示屏上的360度图像。
或者，如果控制设备30包括触摸板，则图像显示装置100可以根据在触摸板上或附近移动的、诸如用户的手指的对象的位移值来移动显示在显示器上的360度图像的区域80的位置。
图2是用于说明360度图像的视角的图。
如上所述，360度图像可以是基于通过使用至少一个照相机在360度方向捕获的多个图像而生成的图像。在这点上，可以将多个拍摄图像映射到球体，并且可以将映射图像的接触缝合在一起以产生球形360度图像。
此外，360度图像可以指具有360度视角的图像。当360度图像被表示为球形图像200时，360度图像的视角可以包括x轴坐标和y轴坐标。x轴坐标可以表示当跨越球体的中心的垂直平面沿着球体的表面旋转时形成的角度。y轴坐标可以表示当横穿球体的中心的水平面沿着球体的表面旋转时形成的角度。例如，x轴坐标可以具有0度至360度的范围，并且y轴坐标可以具有-90度至90度或0度至180度的范围。
例如，参考图2，当位于球形图像200的球面处的预定点221的视角(x，y)被设置为(0度，0度)时，点222的视角可以是(30度，30度)。
图3是根据示例性实施例的关于显示360度图像的方法的图。
用户可以导航360度图像300，以便观看360度图像的图像，该图像对应于期望的角度。参考图3，当用户观看与其视角为0度的区域311对应的图像320时，如果用户想要观看右侧的区域的图像，则用户可以通过使用控制设备30选择调整视角的用户输入。例如，如果用户选择将视角改变为60度的用户输入，则图像显示装置100可以显示对应于视角为60度的区域312的图像321。
根据示例性实施例，用户可以通过使用控制设备30的四方向键来控制360度图像的视角。例如，用户可以通过使用四向键的左右方向键来水平地导航360度图像。例如，用户可以通过使用四方向键的上下方向键垂直地导航360度图像。
根据示例性实施例，用户可以通过将包括加速度传感器或陀螺仪传感器的控制设备30在上、下、右、左方向或其它方向移动来调整360度图像的视角。
根据示例性实施例，用户可以在触摸布置在控制设备30处的触摸板的同时根据用户的手指的移动方向来调整360度图像的视角。
如果图像显示装置100具有触敏屏，则用户可以通过使用用户的手指的触摸移动来调整360度图像的视角，手指在图像显示装置100上的触敏屏幕上。
用户可以通过使用控制设备30的特定键或按钮，或者使用控制设备30来执行手势，来放大或缩小360度图像。响应于放大输入，图像显示装置100可以放大并显示当前显示的区域。响应于缩小输入，图像显示装置100可以减小并显示当前显示的区域。根据示例性实施例，如果缩小度超过预设阈值，则图像显示装置100可以显示球形图像。例如，缩放范围可以在-4x和+4x之间。
图4是用于描述根据示例性实施例的通过使用图像显示装置100和移动设备600显示360度图像的概念的参考图。
参考图4，图像显示装置100和移动设备600可以通过使用各种镜像技术来连接。各种镜像技术可以包括数字生活网络联盟(DLNA)、蓝牙、Miracast、Wi-Fi直接、数字移动无线电(DMR)等。镜像技术涉及发送和接收显示在一个电子设备的屏幕上的图像，使得图像可以被平等地显示在另一电子设备的屏幕上。例如，可以将显示在智能电话的屏幕上的图像输出到智能电视的屏幕，并且可以将显示在智能电视的屏幕上的图像输出到智能电话的屏幕。
移动设备600可以显示从360度图像的原始图像生成的球形360度图像430。球形360度图像430表示原始360度图像的所有区域，即左右方向上为180度的区域，以及在上下方向上从-90度到+90度的区域，从而用户可以从球形360度图像430中观看较大范围的区域。由于用户可以一次查看大范围内的区域，与某一视角对应的360度图像的区域相比较，用户可以方便地搜索或选择360度图像的期望区域。用户可以通过控制显示在移动设备600上的球形360度图像430的视点来旋转球形360度图像430。例如，当球形360度图像430最初表示从x轴上的-90度到+90度的区域时，如果用户将视角改变了+30度，则移动设备600可以将球形360度图像430旋转+30度，从而显示从-60度到+120度的区域。
图像显示装置100可以显示与在球形360度图像430中所选视点对应的区域。所选择的视点可以被不同地确定。
360度图像的原始图像可以存在于图像显示装置100和移动设备600之一中。图像显示装置100和移动设备600可以交换360度图像，与360度图像的区域、以及通过使用各种镜像技术来控制360度图像的视点的信息对应的图像。
如图4所示，当通过使用镜像技术在图像显示装置100和移动设备600上显示360度图像时，图像显示装置100显示与360度图像的特定区域相对应的所选择的视点图像450，并且移动设备600显示球形360度图像430，使得用户可以从显示在移动设备600上的球形360度图像430查看大范围内的区域，并且通过使用360度图像430可以容易地控制球形360度图像的视点。
图5是用于描述根据示例性实施例的360度图像的原始图像410、球形360度图像430和选择的视点图像450的参考图。
参见图5，原始图像410是指二维(2D)360度图像，并且可以存在于图像显示装置100或移动设备600中。
球形360度图像430表示通过将360度图像的原始图像410映射到球体而生成的球形图像。球形360度图像430可以显示在移动设备600上。
所选择的视点图像450表示与所选择的视点对应的区域B的图像，区域B位于球形360度图像430的区域A、B和C中。可以不同地确定所选择的视点。例如，所选择的视点可以由图像显示装置100确定为默认值，可以根据360度图像的信息来确定，或者可以根据控制移动设备600上显示的球形360度图像430的用户输入来确定。所选择的视点图像450可以显示在图像显示装置100上。
可能需要大量的图形处理资源来将原始图像410映射到球形360度图像430，或者执行处理，以便从球形360度图像430投影所选择的视点图像450。因此，考虑到图像显示装置100和移动设备100之间的处理资源功能，可以确定以镜像方式连接的图像显示装置100和移动设备600中的哪个要执行映射处理或投影处理。
图6示出了根据示例性实施例的图像显示装置100和移动设备600的框图。
参见图6，移动设备600包括控制器610、通信接口620、视频处理器630、显示器640、传感器650和存储器660。
通信接口620允许移动设备600通过使用包括屏幕镜像、DLNA、蓝牙、Miracast、Wi-Fi直接等的各种镜像技术与图像显示装置100进行通信。
视频处理器630可以对由显示器640显示的图像执行信号处理，并且可以在视频上执行诸如解码、缩放、噪声滤波、帧速率转换、分辨率转换等各种图像处理数据。
特别地，图形处理器631可以将2D 360度图像映射到球形360度图像，或者可以投影球形360度图像中的所选视点区域的图像。如果移动设备600的图形处理器631的处理资源不足，则图像显示装置100的图形处理器131可执行映射处理或投影处理。
显示器640通过转换由视频处理器630处理的图像信号、数据信号、屏幕显示(OSD)信号、控制信号等来产生驱动信号。显示器640可以被实现为等离子体显示面板(PDP)、液晶显示器(LCD)、有机发光显示器(OLED)、柔性显示器等，或者可以被实施为3D显示器。此外，显示器640可以被实现为触摸屏，从而作为输出设备和输入设备进行操作。
显示器640可以通过使用镜像技术来显示从要显示的360度图像生成的球形360度图像。
此外，显示器640可以响应于控制球形360度图像的视点的用户输入而旋转并显示球形360度图像。
传感器650可以感测用户输入并且可以将感测到的信号发送到控制器610。传感器650可以包括用于接收用户语音的麦克风、用于接收用户图像的相机或者用于感知用户交互的光接收器或触摸盘。
传感器650可以感测用于移动在显示器64上显示的360度图像的区域的位置的输入(即用于控制360度图像的视点的用户输入)，或者用于缩放在显示器64上显示的图像的输入、用于允许显示与360度图像中的特定位置处的区域相对应的图像的输入等。
存储器660可以包括操作系统(OS)、要由控制器610处理的至少一个数据项以及由控制器610执行的一个或多个指令。
具体地，存储器660可以包括一个或多个指令，其涉及：控制通信接口620以与用于镜像连接的图像显示装置100交换360度图像；输出从所述360度图像生成的球形360度图像到显示器64；响应于控制所显示的球形360度图像的视点的用户输入，控制球形360度图像的视点；并且发送360度图像、360度图像的所选视点图像和关于360度图像的视点控制信息中的至少一个到图像显示装置100，以便在图像显示装置100上显示360度图像。
在本示例性实施例中，术语“存储器”包括控制器的存储器、只读存储器(ROM)或随机存取存储器(RAM)或存储卡(例如，微安全数字(microSD)卡、通用串行总线(USB)存储器等)。此外，存储器660可以包括非易失性存储器、易失性存储器、硬盘驱动器(HDD)或固态驱动器(SSD)。
控制器610控制移动设备600的所有操作和移动设备600的内部元件之间的信号流，并且处理数据。当接收到用户输入或满足预设和存储的条件时，控制器610可以执行存储在存储器660中的OS和各种应用。
控制器610可以包括：存储从移动设备600的外部源输入的信号或数据或者被用作与由移动设备600执行的各种操作对应的存储区域的RAM；存储控制器用于控制移动设备600的程序，以及处理器。
控制器610可以执行存储在存储器660中的一个或多个指令，从而执行本说明书中公开的镜像操作。
控制器610可以控制通信接口620与用于镜像连接的图像显示装置100交换360度图像，可以向显示器640输出从360度图像生成的球形360度图像，可以响应于控制所显示的球形360度图像的视点的用户输入来控制球形360度图像的视点，并且可以向图像显示装置100发送360度图像、360度图像的选择的视点图像以及关于360度图像的视点控制信息中的至少一个，以便在图像显示装置100上显示360度图像。
控制器610可以获得360度图像，可以将获得的360度图像改变为球形360度图像，并且因此可以生成球形360度图像。
控制器610可以接收360度图像或基于来自用于镜像连接的图像显示装置100的360度图像生成的球形360度图像。
控制器610可以通过根据用户输入视角旋转和显示球形360度图像或通过根据用户输入的缩放尺寸放大球形360度图像来控制球形360度图像的视点。
与所选择的视点相对应的图像可以包括与根据控制球形360度图像的用户输入确定的视点相对应的图像。
控制器610可以向图像显示装置100发送与控制球形360度图像的视点的用户输入相对应的视点控制信息。
与所选择的视点相对应的图像可以包括与由图像显示装置100确定的视点对应的图像或关于360度图像的信息。
当控制器610将与360度图像中的所选视点对应的图像发送到图像显示装置100时，控制器610可以考虑图像显示装置100的纵横比来处理与所选视点对应的图像。
控制器610可以将360度图像划分为用于屏幕镜像的一个或多个任务，并且可以考虑到移动设备600和图像显示装置100的处理资源而向移动设备600或图像显示装置100委派或分配一个或多个任务。
由控制器610执行的描述的功能可以以控制器610执行存储在存储器660中的一个或多个应用的方式来实现。
除了图6的元件之外，移动设备600还可以包括：音频处理器，以对音频数据执行处理；输出音频的音频输出接口以及用于从移动设备600的外部源接收视频、音频、附加信息等的输入/输出接口。
移动设备600不限于其名称。也就是说，包括处理器和存储器并执行应用的任何电子设备都可以是移动设备600，包括笔记本电脑、智能电话、平板电脑、可穿戴设备、PDA等。
图像显示装置100包括控制器110、通信接口120、视频处理器130、显示器140和存储器150。
通信接口120允许图像显示装置100通过使用包括屏幕镜像、DLNA、蓝牙、Miracast、Wi-Fi直接等的各种镜像技术与移动设备600进行通信。
视频处理器130可以对由显示器140显示的图像执行信号处理，并且可以在视频上执行诸如解码、缩放、噪声滤波、帧速率转换、分辨率转换等各种图像处理数据。
特别地，图形处理器131可以将2D 360度图像映射到球形360度图像，或者可以将与所选择的视点对应的区域的图像投影在球形360度图像中。如果图像显示装置100的图形处理器131的处理资源不足，则移动设备600的图形处理器631可以执行映射处理或投影处理。
显示器140通过转换由视频处理器130处理的图像信号、数据信号、OSD信号、控制信号等来产生驱动信号。显示器140可以被实现为PDP、LCD、OLED、柔性显示器等，或者可以被实施为3D显示器。此外，显示器140可以被实现为触摸屏，从而作为输出设备和输入设备进行操作。
显示器140可以通过使用镜像技术在360度图像中显示与所选择的视点对应的显示目标区域的图像。
响应于控制移动设备600上显示的球形360度图像的视点的用户输入，显示器140可以显示对应于改变的视点的区域的图像。
存储器150可以包括OS，要由控制器110处理的至少一个数据项以及由控制器110执行的一个或多个指令。
具体地，存储器150可以包括涉及以下的一个或多个指令：控制通信接口120连接到移动设备600以进行镜像；从显示基于360度图像生成的球形360度图像的移动设备600接收360度图像，或者发送360度图像或球形360度图像，以便允许在移动设备600上显示球形360度图像；并且控制显示器140在360度图像中显示与所选视点对应的图像。
在本示例性实施例中，术语“存储器”包括控制器的存储器、ROM或RAM、或者安装在图像显示装置100上的存储卡(例如，微型SD卡、USB存储器等)。此外，存储器150可以包括非易失性存储器、易失性存储器、HDD或SSD。
控制器110控制图像显示装置100的所有操作和图像显示装置100的内部元件之间的信号流，并且处理数据。当接收到用户输入或满足预设和存储条件时，控制器110可以执行OS和存储在存储器150中的各种应用。
控制器110可以包括RAM、ROM和处理器，RAM存储从图像显示装置100的外部源输入的信号或数据，或者被用作与由图像显示装置100执行的各种操作对应的存储区域，ROM存储用于控制图像显示装置100的控制程序。
控制器110可以执行存储在存储器150中的一个或多个指令，由此：控制通信接口120连接到移动设备600进行镜像；从显示从360度图像生成的球形360度图像的移动设备600接收360度图像，或者发送360度图像或球形360度图像，以便允许要在移动设备600上显示球形360度图像；并且控制显示器140在360度图像中显示与所选视点对应的图像。
控制器110可以从移动设备600接收与控制移动设备600上显示的球形360度图像的视点的用户输入相对应的视点控制信息，或者接收在根据用户输入对应于视点的360度图像中的区域的图像，并且可以基于360度图像中与所选视点对应的区域的视点控制信息或图像来显示与360度图像中的所选视点相对应的图像。
由控制器110执行的描述的功能可以以控制器110执行存储在存储器150中的一个或多个应用的方式来实现。
除了图6的元件之外，图像显示装置100还可以包括：音频处理器，用于执行音频数据的处理；输出音频的音频输出接口；用于从图像显示装置100的外部源接收视频、音频、附加信息等的输入/输出接口；用于接收广播信号的调谐器；以及感测用户语音、用户图像和用户交互的传感器。
图6所示的图像显示装置100或移动设备600的框图是示例性的。框图中的元件可以根据图像显示装置100或移动设备600的实际规格进行组合、添加或省略。也就是说，当需要时，可以将两个或更多个元件组合成一个元件或一个元件元素可以被细分为两个或更多个元素。此外，提供在每个块中执行的功能来描述示例性实施例，并且其装置的详细操作不限制本公开的范围。
图7是根据示例性实施例的用于镜像连接的移动设备600中的操作过程的流程图。
参考图7，在操作S710中，移动设备600可以控制通信接口620与用于镜像连接的图像显示装置100交换360度图像。
当移动设备600具有360度图像时，移动设备600可以将360度图像发送到图像显示装置100。或者，当图像显示装置100具有360度图像时，移动设备600可以从图像显示装置100接收360度图像。
在操作S720中，移动设备600可以向显示器640输出从360度图像生成的球形360度图像。
移动设备600可以从图像显示装置100接收从360度图像生成的球形360度图像。
移动设备600可以通过使用图形处理器631来执行从360度图像生成球形360度图像的映射处理。
根据各种示例性实施例，考虑到移动设备600和图像显示装置100的处理资源，可以灵活地确定移动设备600的图形处理器631和图像显示装置100的图形处理器131中的哪一个将执行从360度图像产生球形360度图像的映射处理。
在操作S730中，移动设备600可以响应于控制所显示的球形360度图像的视点的用户输入来控制球形360度图像的视点。
更详细地，移动设备600可以在显示器640上显示球形360度图像，并且可以感测到控制所显示的球形360度图像的视点的用户输入。视点可以包括用户观看360度图像的视角或缩放度。当移动设备600感测到控制视点的用户输入时，移动设备600可以控制在显示器640上显示的球形360度图像。也就是说，根据控制视角的用户输入，移动设备600可以旋转并显示球形360度图像与对应于用户输入的视角。根据控制缩放度的用户输入，移动设备600可以放大或缩小显示在显示器640上的球形360度图像。
在操作S740中，移动设备600可以向图像显示装置100发送360度图像、与360度图像中的所选视点对应的图像、以及关于360度图像的视点控制信息中的至少一个。
当移动设备600具有360度图像的原始图像时，移动设备600可以将360度图像发送到图像显示装置100。
根据控制视点的用户输入，移动设备600可以控制显示在移动设备600上的球形360度图像的旋转，并且图像显示装置100可以显示与所选择的视点对应的区域的图像，而不管用户对移动设备600的输入。在这种情况下，移动设备600将360度图像或360度图像中与所选择的视点相对应的区域的图像发送到图像显示装置100是充分的。
移动设备600可以根据控制视点的用户输入来控制显示在移动设备600上的球形360度图像的旋转，并且图像显示装置100可以显示对应于与到移动设备600的用户输入对应的视点的区域的图像。在这种情况下，移动设备600可以向图像显示装置100发送与用户输入对应的视点控制信息或对应于与用户输入对应的视点的区域的图像，该区域在360度图像中。
如果移动设备600具有关于图像显示装置100的宽高比的信息，则当移动设备600投影对应于与用户输入对应的视点的区域时，移动设备600可以考虑图像显示装置100的宽高比，该区域处于360度图像中。
图8是根据示例性实施例的用于镜像连接的图像显示装置100中的操作过程的流程图。
参考图8，在操作S810中，图像显示装置100可以控制通信接口120与用于镜像连接的移动设备600交换360度图像。
当图像显示装置100具有360度图像时，图像显示装置100可以将从360度图像生成的球形360度图像发送到移动设备600。当移动设备600具有360度图像时，图像显示装置100可以从移动设备600接收360度图像。
在操作S820中，图像显示装置100可以从显示根据360度图像生成的球形360度图像的移动设备600接收360度图像，或者可以发送360度图像到移动设备600，以便在移动设备600上显示球形360度图像。
当360度图像被存储在图像显示装置100上时，图像显示装置100可以将360度图像发送到移动设备600，或者可以将360度图像映射到球型360度图像，并可以将球形360度图像发送到移动设备600。是发送没有改变的360度图像还是将360度图像映射到球形360度图像并发送可以考虑图像显示装置100和移动设备600的处理资源来适当地确定。
在操作S830中，图像显示装置100可以在显示器140上显示与360度图像中的所选视点对应的图像。
所选择的视点可以是固定的或改变的。更详细地，图像显示装置100可以根据到移动设备600的用户输入不间断地显示与360度图像中的固定视点对应的图像，而不管视点控制。或者，图像显示装置100可以根据到移动设备600的用户输入以可变方式(即以图像显示装置100根据到移动设备600的用户输入反映视点控制的方式)显示与根据用户输入的视点对应的区域的图像。
图像显示装置100可以在显示器140上持续地显示360度图像中的区域的图像，该区域与由图像显示装置100或移动设备600设置的视点相对应。例如移动设备600或图像显示装置100可以确定360度图像中的区域的视点，其中该区域将被默认显示。
图像显示装置100可以在显示器140上持续显示与根据关于360度图像的信息选择的视点相对应的图像。例如，图像显示装置100可以在360度图像中显示与作为默认值确定的视点相对应的图像。
图像显示装置100可以根据用户输入从移动设备600接收与视点相对应的区域的、360度图像中的区域的图像。
图像显示装置100可以根据来自移动设备600的用户输入接收与视点对应的视点控制信息，从360度图像投影与视点控制信息所表示的视点对应的区域，并且可以在显示器140上显示投影区域的图像。例如，视点控制信息可以包括关于与用户输入相对应的视角或缩放度的信息。
根据各种示例性实施例，可以考虑到移动设备600和图像显示装置100的处理资源来确定：图像显示装置100是从移动设备600接收视点控制信息，并根据视点控制信息投影360度图像，还是图像显示装置100接收到基于来自移动设备600的视点控制信息来投影的区域的图像。
图9是根据示例性实施例的具有360度图像的移动设备600和图像显示装置100之间的镜像操作的流程图。
参考图9，在操作910中，移动设备600和图像显示装置100可以执行用于镜像的连接操作。
在操作920中，移动设备600可以向图像显示装置100发送360度图像，以便镜像360度图像。移动设备600可以发送360度图像的原始图像，或者如果移动设备600的处理资源可用，则移动设备600可以在360度图像中投影与所选视点对应的区域，以及可以显示投影区域的图像。此外，如果移动设备600具有关于图像显示装置100的宽高比的信息，则移动设备600可以在投影处理操作期间考虑图像显示装置100的宽高比。
在操作930中，图像显示装置100可以将从所选择的视点对应的区域投影在从移动设备600接收的360度图像中，并且可以显示投影区域的图像。
在操作940中，移动设备600可以将360度图像映射到球形360度图像。
在操作950中，移动设备600可以在显示器上显示球形360度图像。
在操作960中，移动设备600可以接收控制球形360度图像的用户输入。
图10A和10B示出了根据示例性实施例的要在移动设备600上显示的球形360度图像1000的示例。
参考图10A，移动设备600的显示器不仅可以显示球形360度图像1000，还可以显示一个或多个控制菜单。一个或多个控制菜单可以包括指示从360度图像的整个长度中的当前再现点的进度条1010、音量条1020、倒带菜单1030、暂停菜单1040、快进菜单1050、项目1060等。当移动设备600接收与控制菜单相对应的用户输入时，移动设备600可以根据与控制菜单相对应的用户输入来控制显示在移动设备600上的球形360度图像1000的显示，并且还可以基于与控制菜单相对应的用户输入将控制信息发送到图像显示装置100。图像显示装置100可以通过使用基于从移动设备600接收的控制菜单的控制信息来控制在图像显示装置100上显示的360度图像的显示。
此外，用户可以控制球形360度图像1000的视点。例如，如果移动设备600具有触摸屏，则用户可以通过使用手指或其他输入工具执行触摸输入、拖动输入、手势输入等来移动、改变或选择在触摸屏上显示的球形360度图像1000的视点。例如，用户可以通过使用手指在球形360度图像1000上向左侧执行拖动运动，以便将球形360度图像1000向左旋转，并且移动设备600可以接收用户输入。
在操作970中，移动设备600可以根据用户输入来控制球形360度图像的显示。
例如，参考图10A，当移动设备600在球形360度图像1000上接收到向左执行拖动运动的用户输入时，移动设备600可以控制显示以允许球形360度图像1000旋转到左边。在对应于视点的球形360度图像1000的区域为B并被控制为向左旋转的情况下，区域C可以是与视点对应的区域。
在操作980中，移动设备600可以将视点控制信息发送到图像显示装置100。视点控制信息可以是用于控制根据用户输入确定的视点的信息，并且可以包括对应于用户输入的关于视角或缩放度的信息。
根据示例性实施例，如果移动设备600的处理资源足够，则移动设备600可以不发送视点控制信息，但是可以对根据视点控制信息确定的区域执行投影处理，并且可以将投影区域的图像直接传送到图像显示装置100。
在操作990中，图像显示装置100可以从移动设备600接收视点控制信息，可以将与360度图像中的视点对应的区域投影，并且可以显示投影区域的图像。
参考图10A，在移动设备600上显示的一个或多个控制菜单可以包括项目1060，其指示根据移动设备600的360度图像的视点来显示在图像显示装置100的屏幕上显示的360度图像的视点。也就是说，当显示项目1060时，关于移动设备600上的球形360度图像1000的视点的控制可以用于控制显示在图像显示装置100上的360度图像的视点，使得如果用户通过使用移动设备600来调整360度图像的视点，则可以相应地调整图像显示装置100的视点。
图11是根据示例性实施例的用于描述在项目1060被显示在移动设备600上时的操作的参考图。
参考图11的1100a。球形360度图像1000的区域B被显示为与移动设备600上的视点相对应的区域，并且项目1060被显示在移动设备600上。另外，对应于移动设备600上显示的视点的球形360度图像1000的区域B被投影并显示在图像显示装置100上。当项目1060被显示在移动设备600上时，当用户向左拖动移动设备600上显示的球形360度图像1000时，如图11的1100b所示，移动设备600将球形360度图像1000向左旋转并显示球形360度图像1000，使得例如将区域C显示为与球形360度图像1000的视点相对应的区域。另外，由于移动设备600处于移动设备600上显示项目1060的状态，即，移动设备600处于以下模式：发送移动设备600的视点控制信息到图像显示装置100，移动设备600可以将与区域C相对应的视点控制信息发送到图像显示装置100，使得图像显示装置100可以显示对应于区域C的图像。
图10A所示的项目1060可以是切换型的。也就是说，当用户触摸在图10A的屏幕上显示的项目1060一次时，项目1060可以改变为项目1070，如图10B所示。项目1070指示对于在移动设备600上的360度图像的视点的控制不用于控制在图像显示装置100上显示的360度图像的视点，并且在图像显示装置100上显示的360度图像的视点是固定的。
参考图12的1200a，当在移动设备600上显示项目1070时，当用户将移动设备600上显示的球形360度图像1000向左拖动时，如图12的1200b所示，显示在移动设备600上的球形360度图像1000可以向左旋转，因此可以将区域C显示为与视点对应的区域。然而，根据显示项目1070的模式，即，由于是在图像显示装置100上显示的360度图像的视点固定的模式，所以图像显示装置100可以不断地显示与区域B相对应的图像，而不管关于移动设备600的视点的控制。
也就是说，根据触摸项目1060的输入，用户可以固定球形360度图像1000的执行屏幕，并且可以通过仅移动图像显示装置100的执行屏幕来查看另一视角的图像。另外，如果用户想要查看根据关于移动设备600的图像控制而改变的图像显示装置100的执行屏幕，则用户可以触摸项目1070。
图13是根据示例性实施例的具有360度图像的图像显示装置100与移动设备600之间的镜像操作的流程图。简要地提供了与图9类似的特征的描述。
参考图13，在操作1310中，移动设备600和图像显示装置100可以执行用于镜像的连接操作。
在操作1320中，图像显示装置100可以向移动设备600发送360度图像，以便镜像360度图像。考虑到移动设备600的处理资源，图像显示装置100可以发送360度图像的原始图像，或者可以将360度图像映射到球形360度图像，并且可以发送球形360度图像。
在操作1330中，图像显示装置100可以在360度图像中投影与所选视点对应的区域，并且可以显示投影区域的图像。
在操作1340中，移动设备600可以将从图像显示装置100接收到的360度图像映射到球形360度图像。
在操作1350中，移动设备600可以在显示器640上显示球形360度图像。
在操作1360中，移动设备600可以接收控制球形360度图像的用户输入。
在操作1370中，移动设备600可以根据用户输入来控制球形360度图像的显示。
在操作1380中，移动设备600可以将视点控制信息发送到图像显示装置100。视点控制信息可以是用于控制根据用户输入确定的视点的信息，并且可以包括根据用户输入的关于视角或缩放度的信息。
根据示例性实施例，如果移动设备600的处理资源足够，则移动设备600可以不发送视点控制信息，而是可以对根据视点控制信息确定的区域执行投影处理，并且可以直接将投影区域的图像发送到图像显示装置100。
在操作1390中，图像显示装置100可以从移动设备600接收视点控制信息，可以将与360度图像中的视点对应的区域投影，并且可以显示投影区域的图像。
根据图13所示的示例性实施例，在图像显示装置100上显示360度图像之前，完成了移动设备600与图像显示装置100之间的镜像连接。然而，即使在图像显示装置100显示360度图像时存在来自移动设备600的连接请求，图像显示装置100仍可以以相同的方式操作。也就是说，当图像显示装置100显示360度图像时，如果图像显示装置100检测到来自移动设备600的连接请求，则图像显示装置100可以将360度图像的原始图像发送到移动设备600，或者可以通过将360度图像映射到球体来生成球形360度图像，并且可以将球形360度图像发送到移动设备600。
根据上述示例性实施例，当360度图像被镜像到移动设备600和图像显示装置100时被显示时，可以容易地通过使用移动设备600来执行360度图像的视点的控制。
根据示例性实施例的操作移动设备和图像显示装置的方法可以体现为要在各种计算机单元中执行的编程命令，然后可以被记录在非暂时的计算机可读记录介质中。非暂时计算机可读记录介质可以包括一个或多个编程命令、数据文件、数据结构等。记录到非暂时计算机可读记录介质的编程命令可以是特别设计或配置的，或者是本领域普通技术人员所熟知的。非暂时计算机可读记录介质的示例包括：包括硬盘、磁带和软盘的磁介质、包括CD-ROM和DVD的光学介质、包括光学磁盘的磁光介质、以及设计用于存储和执行ROM、RAM、闪速存储器等中的编程命令。编程命令的示例不仅包括由编译器生成的机器代码，还包括使用解释器在计算机中执行的高级编程语言。
应当理解，本文描述的示例性实施例应仅在描述性意义上被考虑，而不是为了限制的目的。在其他示例性实施例中，每个示例性实施例中的特征或方面的描述通常被认为可用于其他类似特征或方面。
虽然已经参考附图描述了一个或多个示例性实施例，但是本领域普通技术人员将会理解，在不脱离所定义的精神和范围的情况下，可以在形式和细节上进行各种改变通过以下权利要求。

Claims (15)

1.一种移动设备，包括：
通信接口；
显示器；
存储器，被配置为存储一个或多个指令；和
至少一个处理器，被配置为执行存储在存储器中的一个或多个指令以：
控制通信接口与图像显示装置进行通信并且交换关于360度图像的信息以用于屏幕镜像；
控制移动设备的显示器显示从360度图像产生并且代表所述360度图像的球形图像以控制在图像显示装置上显示的360度图像的视点，360度图像是包括通过使用至少一个照相机在360度方向上捕获的多个图像的单个图像；
接收用于控制球形图像的输入；
基于用于控制球形图像的输入，生成关于视点的信息；和
控制通信接口，将生成的关于视点的信息发送到图像显示装置，使得图像显示装置基于生成的关于视点的信息来选择360度图像的视点以及显示所选择的360度图像的视点，
其中通过展开所述单个图像并且将其映射到球体来生成球形图像，
其中360度图像包含多个视点，
其中，在移动设备上显示的球形图像包括选择的在图像显示装置上显示的视点和其他相邻的视点，以及
其中在图像显示装置上显示所选择的视点的同时，其他相邻的视点没有显示在图像显示装置上。
2.根据权利要求1所述的移动设备，其中所述至少一个处理器还被配置为执行存储在所述存储器中的所述一个或多个指令，以：
从图像显示装置接收360度图像，并且
通过将360度图像映射到球体来生成球形图像。
3.根据权利要求1所述的移动设备，其中所述至少一个处理器还被配置为执行存储在所述存储器中的所述一个或多个指令，以控制所述通信接口来从所述图像显示装置接收所述球形图像。
4.根据权利要求1所述的移动设备，其中，所述至少一个处理器还被配置为执行存储在所述存储器中的所述一个或多个指令以通过根据输入基于视角旋转球形图像或者通过根据输入基于缩放度放大球形图像来控制球形图像的视点。
5.根据权利要求1所述的移动设备，其中，关于360度图像的视点的信息包括与360度图像的视点对应的图像以及与360度图像的视点对应的视点控制信息中的至少一个。
6.根据权利要求1所述的移动设备，其中所述至少一个处理器还被配置为执行存储在所述存储器中的所述一个或多个指令以：
在显示器上显示表示第一状态和第二状态之一的项目；
响应于第一状态，停止向图像显示装置发送关于所选择的360度图像的视点的信息；和
响应于第二状态，恢复向图像显示装置发送关于360度图像的视点的信息。
7.根据权利要求1所述的移动设备，其中，所述至少一个处理器还被配置为执行存储在所述存储器中的所述一个或多个指令，以进一步基于关于360度图像的信息和关于图像显示装置的信息中的至少一个来确定与所述视点相对应的图像。
8.根据权利要求1所述的移动设备，其中所述至少一个处理器还被配置为执行存储在所述存储器中的所述一个或多个指令，以基于所述图像显示装置的纵横比处理对应于所述视点的图像。
9.根据权利要求1所述的移动设备，其中所述至少一个处理器还被配置为生成一个或多个用于屏幕镜像的任务，并且基于移动设备和图像显示装置的处理资源，将一个或多个任务中的每一个分配给移动设备和图像显示装置中的一个。
10.一种图像显示装置，包括：
通信接口；
显示器；
存储器，被配置为存储一个或多个指令；和
至少一个处理器，被配置为执行存储在存储器中的一个或多个指令以：
控制通信接口与移动设备进行通信并且交换关于360度图像的信息以用于屏幕镜像；
从移动设备接收基于用于控制显示在移动设备上的球形图像的输入产生的视点的信息，所述球形图像从360度图像产生并且代表所述360度图像；
基于视点信息选择360度图像的视点，所述360度图像是包括通过使用至少一个照相机在360度方向上捕获的多个图像的单个图像；并且
控制显示器以显示与所选择的360度图像的视点对应的图像，其中通过展开所述单个图像并且将其映射到球体来生成球形图像，
其中360度图像包含多个视点，
其中，在移动设备上显示的球形图像包括选择的在图像显示装置上显示的视点和其他相邻的视点，以及
其中在图像显示装置上显示所选择的视点的同时，其他相邻的视点没有显示在图像显示装置上。
11.根据权利要求10所述的图像显示装置，其中，关于360度图像的视点的信息包括与360度图像的视点对应的图像以及与360度图像的视点对应的视点控制信息中的至少一个。
12.根据权利要求11所述的图像显示装置，其中，所述视点控制信息包括360度图像的视角和360度图像的缩放度中的至少一个。
13.一种操作移动设备的方法，所述方法包括：
与图像显示装置通信；
交换关于360度图像的信息以用于屏幕镜像；
在移动设备的显示器上显示从360度图像产生并且代表所述360度图像的球形图像以控制在图像显示装置上显示的360度图像的视点，360度图像是是包括通过使用至少一个照相机在360度方向上捕获的多个图像的单个图像；
接收用于控制球形图像的输入；
基于用于控制球形图像的输入产生关于视点的信息；和
向所述图像显示装置发送所生成的关于视点的信息，使得所述图像显示装置基于所生成的关于视点的信息来选择所述360度图像的视点以及显示所选择的360度图像的视点，
其中通过展开所述单个图像并且将其映射到球体来生成球形图像，
其中360度图像包含多个视点，
其中，在移动设备上显示的球形图像包括选择的在图像显示装置上显示的视点和其他相邻的视点，以及
其中在图像显示装置上显示所选择的视点的同时，相邻的视点没有显示在图像显示装置上。
14.一种操作图像显示装置的方法，所述方法包括：
与移动设备交换关于360度图像的信息以用于屏幕镜像
从移动设备接收基于用于控制在移动设备上显示的球形图像的输入而生成的视点的信息，所述球形图像从360度图像产生并且代表所述360度图像；
基于关于视点的信息选择360度图像的视点，所述360度图像是包括通过使用至少一个照相机在360度方向上捕获的多个图像的单个图像；以及
显示与所选择的360度图像的视点对应的图像，
其中通过展开所述单个图像并且将其映射到球体来生成球形图像，
其中360度图像包含多个视点，
其中，在移动设备上显示的球形图像包括选择的在图像显示装置上显示的视点和其他相邻的视点，以及
其中在图像显示装置上显示所选择的视点的同时，相邻的视点没有显示在图像显示装置上。
15.一种非暂时性计算机可读记录介质,在其上记录有程序，当计算机执行该程序时，所述程序用于实现权利要求13的方法。
CN201711022566.4A 2016-10-28 2017-10-27 图像显示装置、移动设备及其操作方法 Active CN108024127B (zh)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
KR10-2016-0142155 2016-10-28
KR1020160142155A KR102598082B1 (ko) 2016-10-28 2016-10-28 영상 표시 장치, 모바일 장치 및 그 동작방법

Publications (2)

Publication Number Publication Date
CN108024127A CN108024127A (zh) 2018-05-11
CN108024127B true CN108024127B (zh) 2020-11-20

Family

ID=62020527

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201711022566.4A Active CN108024127B (zh) 2016-10-28 2017-10-27 图像显示装置、移动设备及其操作方法

Country Status (5)

Country Link
US (1) US10810789B2 (zh)
JP (1) JP2020502851A (zh)
KR (1) KR102598082B1 (zh)
CN (1) CN108024127B (zh)
WO (1) WO2018080165A1 (zh)

Families Citing this family (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR102567002B1 (ko) * 2016-08-16 2023-08-14 삼성전자주식회사 영상 표시 장치 및 그 동작방법
JP2018037944A (ja) * 2016-09-01 2018-03-08 ソニーセミコンダクタソリューションズ株式会社 撮像制御装置、撮像装置および撮像制御方法
US10270851B2 (en) * 2017-02-13 2019-04-23 Microsoft Technology Licensing, Llc Activating a peer-to-peer communication channel
US11216149B2 (en) 2019-03-15 2022-01-04 Samsung Electronics Co., Ltd. 360° video viewer control using smart device
JP7192592B2 (ja) 2019-03-15 2022-12-20 株式会社リコー 撮像装置、画像通信システム、画像処理方法、プログラム
US11259081B2 (en) 2020-02-28 2022-02-22 Rovi Guides, Inc. Systems and methods for adaptively modifying presentation of media content
CN114430492B (zh) * 2020-10-29 2023-10-13 海信视像科技股份有限公司 显示设备、移动终端及图片同步缩放方法

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102065335A (zh) * 2009-11-13 2011-05-18 三星电子株式会社 显示装置、客户终端及其控制方法
CN103339927A (zh) * 2011-01-31 2013-10-02 三星电子株式会社 用于拍摄全景图像的摄影装置和方法
CN103634634A (zh) * 2012-08-22 2014-03-12 索尼公司 遥控器以及呈现受控设备显示器的快照的方法

Family Cites Families (301)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN1100300C (zh) * 1996-10-16 2003-01-29 夏普公司 字符输入装置
US6968094B1 (en) * 2000-03-27 2005-11-22 Eastman Kodak Company Method of estimating and correcting camera rotation with vanishing point location
US6778699B1 (en) * 2000-03-27 2004-08-17 Eastman Kodak Company Method of determining vanishing point location from an image
US7893963B2 (en) * 2000-03-27 2011-02-22 Eastman Kodak Company Digital camera which estimates and corrects small camera rotations
JP2003141562A (ja) 2001-10-29 2003-05-16 Sony Corp 非平面画像の画像処理装置及び画像処理方法、記憶媒体、並びにコンピュータ・プログラム
US8707354B1 (en) * 2002-06-12 2014-04-22 Tvworks, Llc Graphically rich, modular, promotional tile interface for interactive television
KR100415161B1 (ko) * 2003-07-01 2004-01-13 (주)두모션 기울기 센서를 이용한 3차원 이미지 조망 기능을 갖는핸드헬드 장치 및 이를 이용한 3차원 이미지 디스플레이시스템
JP4033198B2 (ja) * 2004-02-27 2008-01-16 カシオ計算機株式会社 画像処理装置、画像投影装置、画像処理方法及びプログラム
US7224326B2 (en) * 2004-03-03 2007-05-29 Volo, Llc Virtual reality system
US20060132482A1 (en) * 2004-11-12 2006-06-22 Oh Byong M Method for inter-scene transitions
US8438297B1 (en) * 2005-01-31 2013-05-07 At&T Intellectual Property Ii, L.P. Method and system for supplying media over communication networks
JP4244973B2 (ja) * 2005-08-03 2009-03-25 ソニー株式会社 撮像システムとカメラ制御装置およびパノラマ画像表示方法とプログラム
US20070157126A1 (en) * 2006-01-04 2007-07-05 Tschirhart Michael D Three-dimensional display and control image
US7768545B2 (en) * 2007-03-06 2010-08-03 Otto Gregory Glatt Panoramic image management system and method
EP3471053B1 (en) 2007-05-25 2020-07-08 Google LLC Rendering, viewing and annotating panoramic images, and applications thereof
KR101354899B1 (ko) 2007-08-29 2014-01-27 삼성전자주식회사 파노라마 사진 촬영 방법
US8683067B2 (en) * 2007-12-19 2014-03-25 Nvidia Corporation Video perspective navigation system and method
US8884883B2 (en) * 2008-01-25 2014-11-11 Microsoft Corporation Projection of graphical objects on interactive irregular displays
US8423076B2 (en) * 2008-02-01 2013-04-16 Lg Electronics Inc. User interface for a mobile device
US9740293B2 (en) * 2009-04-02 2017-08-22 Oblong Industries, Inc. Operating environment with gestural control and multiple client devices, displays, and users
US8274506B1 (en) 2008-04-28 2012-09-25 Adobe Systems Incorporated System and methods for creating a three-dimensional view of a two-dimensional map
JP2010117973A (ja) * 2008-11-14 2010-05-27 Sony Corp 情報処理装置、画像表示方法およびコンピュータプログラム
WO2011019155A2 (en) * 2009-08-14 2011-02-17 Lg Electronics Inc. Remote control device and remote control method using the same
JP5563270B2 (ja) * 2009-10-19 2014-07-30 シャープ株式会社 ネットワークシステム、通信方法、通信機器、および通信プログラム
EP2330561A1 (en) 2009-12-04 2011-06-08 Alcatel Lucent Method for browsing a 3 dimensional virtual environment
JP5554218B2 (ja) * 2009-12-14 2014-07-23 パナソニック株式会社 電子機器、通信システム
CN102111672A (zh) 2009-12-29 2011-06-29 康佳集团股份有限公司 一种在数字电视上浏览全景图像的方法、系统及终端
WO2011144793A1 (en) * 2010-05-18 2011-11-24 Teknologian Tutkimuskeskus Vtt Mobile device, server arrangement and method for augmented reality applications
US8378985B2 (en) * 2010-05-26 2013-02-19 Sony Mobile Communications Ab Touch interface for three-dimensional display control
KR101199852B1 (ko) * 2010-06-21 2012-11-09 한국과학기술연구원 이미지 조작 장치 및 방법
US9134799B2 (en) * 2010-07-16 2015-09-15 Qualcomm Incorporated Interacting with a projected user interface using orientation sensors
WO2012049941A1 (ja) 2010-10-13 2012-04-19 Ｎｅｃカシオモバイルコミュニケーションズ株式会社 動画像配信システム、及び動画像配信方法
US20120092348A1 (en) * 2010-10-14 2012-04-19 Immersive Media Company Semi-automatic navigation with an immersive image
WO2012071435A1 (en) 2010-11-24 2012-05-31 Google Inc. Rendering and navigating photographic panoramas with depth information in a geographic information system
US20120174038A1 (en) * 2011-01-05 2012-07-05 Disney Enterprises, Inc. System and method enabling content navigation and selection using an interactive virtual sphere
KR101742578B1 (ko) * 2011-01-14 2017-06-01 삼성전자주식회사 컨텐츠 관리 방법 및 이를 적용한 디스플레이 장치
KR101251964B1 (ko) 2011-01-19 2013-04-08 전자부품연구원 회전 제스처에 기반한 사용자 인터페이스 제공방법 및 이를 적용한 전자기기
KR101814602B1 (ko) * 2011-01-26 2018-01-30 삼성전자주식회사 원격 제어 장치 및 상기 원격 제어 장치에 의해 원격 제어되는 전자기기
US9288476B2 (en) * 2011-02-17 2016-03-15 Legend3D, Inc. System and method for real-time depth modification of stereo images of a virtual reality environment
US9282321B2 (en) * 2011-02-17 2016-03-08 Legend3D, Inc. 3D model multi-reviewer system
WO2012133980A1 (ko) * 2011-03-25 2012-10-04 엘지전자 주식회사 영상처리장치 및 영상처리방법
CN102971770B (zh) * 2011-03-31 2016-02-10 松下电器产业株式会社 进行全周围立体图像的描绘的图像描绘装置、图像描绘方法
US9055277B2 (en) * 2011-03-31 2015-06-09 Panasonic Intellectual Property Management Co., Ltd. Image rendering device, image rendering method, and image rendering program for rendering stereoscopic images
US20130027613A1 (en) * 2011-05-03 2013-01-31 Lg Electronics Inc. Image display apparatus, portable terminal, and methods for operating the same
US9848158B2 (en) * 2011-05-04 2017-12-19 Monument Peak Ventures, Llc Digital camera user interface for video trimming
JP5961926B2 (ja) * 2011-06-14 2016-08-03 ソニー株式会社 情報処理システム
KR20120138334A (ko) * 2011-06-15 2012-12-26 한성엘컴텍 주식회사 3ｄ영상 촬영이 가능한 휴대용 단말기
JP5820181B2 (ja) * 2011-07-29 2015-11-24 キヤノン株式会社 撮影システム及びその制御方法ならびに表示制御装置及びその制御方法、プログラム、記憶媒体
US9274595B2 (en) 2011-08-26 2016-03-01 Reincloud Corporation Coherent presentation of multiple reality and interaction models
CN102510474B (zh) 2011-10-19 2013-12-25 中国科学院宁波材料技术与工程研究所 一种360度全景监控系统
US20130129308A1 (en) * 2011-11-18 2013-05-23 Keith Stoll Karn Display device with adaptive fast navigation mode
US9197925B2 (en) * 2011-12-13 2015-11-24 Google Technology Holdings LLC Populating a user interface display with information
US10970888B2 (en) * 2011-12-27 2021-04-06 Sony Corporation Information processing device, information processing method and program
US9007323B2 (en) * 2012-02-03 2015-04-14 Panasonic Intellectual Property Management Co., Ltd. Haptic feedback device, method for driving haptic feedback device, and drive program
KR101931939B1 (ko) * 2012-04-02 2019-03-20 엘지전자 주식회사 업그레이드 가능한 디스플레이 장치 및 그 제어 방법
KR101952682B1 (ko) * 2012-04-23 2019-02-27 엘지전자 주식회사 이동 단말기 및 그 제어방법
US9395946B2 (en) * 2012-05-25 2016-07-19 Panasonic Intellectual Property Management Co., Ltd. Image viewing system, arbitrating terminal, image viewing method, and arbitrating method
KR101700616B1 (ko) * 2012-06-27 2017-01-31 한국전자통신연구원 화면 동기화를 위한 멀티미디어 장치와 원격 제어 장치 및 그 방법
US9632648B2 (en) 2012-07-06 2017-04-25 Lg Electronics Inc. Mobile terminal, image display device and user interface provision method using the same
KR20140030668A (ko) * 2012-09-03 2014-03-12 엘지전자 주식회사 이동 단말기 및 그 제어방법
US10524100B2 (en) * 2012-09-07 2019-12-31 Samsung Electronics Co., Ltd. Electronic apparatus and method of outputting content by the electronic apparatus
KR101936075B1 (ko) * 2012-09-21 2019-01-08 삼성전자주식회사 이동통신 단말기를 이용한 디스플레이 장치의 데이터 표시 방법 및 상기 장치들
KR102163740B1 (ko) * 2012-10-05 2020-10-12 삼성전자주식회사 플렉서블 디스플레이 장치 및 플렉서블 디스플레이 장치의 제어 방법
KR101473257B1 (ko) * 2012-11-01 2014-12-24 주식회사 케이티 유저 인터페이스 데이터를 포함하는 컨텐츠 스트림을 재생하는 장치 및 방법
US20140125554A1 (en) * 2012-11-07 2014-05-08 Shanghai Powermo Information Tech. Co. Ltd. Apparatus and algorithm to implement smart mirroring for a multiple display system
KR20140060040A (ko) * 2012-11-09 2014-05-19 삼성전자주식회사 디스플레이장치, 음성취득장치 및 그 음성인식방법
KR101911253B1 (ko) * 2012-11-21 2018-10-24 엘지전자 주식회사 전자 태그와 모바일 디바이스 및 디스플레이 장치를 포함하는 시스템의 제어 방법, 모바일 디바이스 그리고 디스플레이 장치
US9245373B2 (en) * 2012-12-04 2016-01-26 Nintendo Co., Ltd. Caching in map systems for displaying panoramic images
US9215448B2 (en) * 2013-01-31 2015-12-15 Here Global B.V. Stereo panoramic images
US20140218289A1 (en) * 2013-02-06 2014-08-07 Motorola Mobility Llc Electronic device with control interface and methods therefor
CN103984494A (zh) * 2013-02-07 2014-08-13 上海帛茂信息科技有限公司 用于多种设备间的直觉式用户互动系统及方法
KR102097640B1 (ko) * 2013-03-08 2020-04-06 엘지전자 주식회사 이동 단말기 및 그것의 제어 방법
US9179199B2 (en) * 2013-03-14 2015-11-03 Apple Inc. Media playback across multiple devices
US9298830B2 (en) * 2013-05-01 2016-03-29 Timothy Alan Barrett Method, system and apparatus for facilitating discovery of items sharing common attributes
JP6249202B2 (ja) * 2013-05-10 2017-12-20 ソニー株式会社 画像表示装置、画像表示方法、およびプログラム
US10021180B2 (en) * 2013-06-04 2018-07-10 Kingston Digital, Inc. Universal environment extender
KR102089432B1 (ko) * 2013-06-20 2020-04-14 엘지전자 주식회사 이동 단말기 및 이의 제어방법
JP6167703B2 (ja) * 2013-07-08 2017-07-26 株式会社リコー 表示制御装置、プログラム及び記録媒体
KR102189679B1 (ko) * 2013-07-12 2020-12-14 삼성전자주식회사 외부 기기에 디스플레이된 정보와 관련된 기능을 실행하는 휴대용 기기, 휴대용 기기에서 외부 기기에 디스플레이된 정보와 관련된 기능을 실행하는 방법 및 컴퓨터 판독 가능한 기록 매체
KR102089614B1 (ko) 2013-08-28 2020-04-14 삼성전자주식회사 구면 파노라마 이미지 촬영 방법 및 그 전자 장치
KR20150031098A (ko) * 2013-09-13 2015-03-23 삼성전자주식회사 화면 미러링 방법 및 그에 따른 디스플레이 기기
EP2849448A1 (fr) * 2013-09-13 2015-03-18 Nagravision S.A. Méthode pour contrôler l'accès à du contenu diffusé
KR102084633B1 (ko) * 2013-09-17 2020-03-04 삼성전자주식회사 화면 미러링 방법 및 그에 따른 소스 기기
JP5802249B2 (ja) * 2013-09-30 2015-10-28 シャープ株式会社 表示装置、ソース機器、及び表示システム
KR102087987B1 (ko) * 2013-10-04 2020-03-11 삼성전자주식회사 마스터 기기, 클라이언트 기기, 및 그에 따른 화면 미러링 방법
WO2015061689A1 (en) * 2013-10-24 2015-04-30 Ramos Olivia System and method for mining data using haptic feedback
US9686581B2 (en) * 2013-11-07 2017-06-20 Cisco Technology, Inc. Second-screen TV bridge
CN105960826B (zh) * 2014-02-12 2020-04-03 索尼公司 信息处理设备、信息处理系统和信息处理方法
WO2015140816A1 (en) * 2014-03-15 2015-09-24 Vats Nitin Self-demonstrating object features and/or operations in interactive 3d-model of real object for understanding object's functionality
GB2524250A (en) * 2014-03-17 2015-09-23 Sony Comp Entertainment Europe Image processing
GB2524249B (en) * 2014-03-17 2021-01-20 Sony Interactive Entertainment Inc Image Processing
CN103841332B (zh) * 2014-03-21 2018-10-12 英华达（上海）科技有限公司 全景景象拍摄及浏览的移动装置、系统及方法
WO2015145494A1 (ja) * 2014-03-25 2015-10-01 パナソニックＩｐマネジメント株式会社 情報表示システム及び情報表示方法
JP6496904B2 (ja) * 2014-03-25 2019-04-10 パナソニックＩｐマネジメント株式会社 多視点画像の撮影方法および撮影装置
KR102249827B1 (ko) * 2014-04-21 2021-05-10 삼성전자주식회사 심볼(symbol) 생성을 위한 디스플레이 장치 및 그 제어방법
KR102120843B1 (ko) * 2014-04-22 2020-06-09 삼성전자주식회사 디스플레이 장치 및 그의 멀티 뷰 디스플레이 방법
WO2015163529A1 (en) * 2014-04-23 2015-10-29 Lg Electronics Inc. Head mounted display device displaying thumbnail image and method of controlling therefor
KR20150122561A (ko) * 2014-04-23 2015-11-02 삼성전자주식회사 디바이스 및 상기 디바이스에서의 착신 호출 처리 방법
KR102270007B1 (ko) * 2014-05-07 2021-06-28 삼성전자주식회사 단말 장치 및 단말 장치의 원격 제어 방법
WO2015174501A1 (ja) * 2014-05-16 2015-11-19 株式会社ユニモト 全周動画配信システム、全周動画配信方法、画像処理装置、通信端末装置およびそれらの制御方法と制御プログラム
US9911454B2 (en) * 2014-05-29 2018-03-06 Jaunt Inc. Camera array including camera modules
TWI610221B (zh) * 2014-06-18 2018-01-01 緯創資通股份有限公司 螢幕播送方法以及使用該方法的系統與裝置
US9570113B2 (en) * 2014-07-03 2017-02-14 Gopro, Inc. Automatic generation of video and directional audio from spherical content
US10254942B2 (en) * 2014-07-31 2019-04-09 Microsoft Technology Licensing, Llc Adaptive sizing and positioning of application windows
KR102230024B1 (ko) * 2014-09-05 2021-03-18 엘지전자 주식회사 전자 기기 및 그 동작방법
WO2016038970A1 (ja) * 2014-09-08 2016-03-17 富士フイルム株式会社 撮像制御装置、撮像制御方法、カメラシステム及びプログラム
EP2996346A1 (en) * 2014-09-12 2016-03-16 Samsung Electronics Co., Ltd. Multi-screen control method and device supporting multiple window applications
KR20160034037A (ko) * 2014-09-19 2016-03-29 삼성전자주식회사 화면 캡쳐를 위한 방법 및 그 전자 장치
JP2016062486A (ja) * 2014-09-19 2016-04-25 株式会社ソニー・コンピュータエンタテインメント 画像生成装置および画像生成方法
US10055064B2 (en) * 2014-10-29 2018-08-21 Sony Corporation Controlling multiple devices with a wearable input device
CN107111819A (zh) * 2014-11-21 2017-08-29 夏普株式会社 服务器、项目提供系统、显示装置、移动终端、及控制程序
CN105830457B (zh) * 2014-11-27 2020-03-10 索尼公司 信息处理设备和信息处理方法
KR102322026B1 (ko) * 2014-12-09 2021-11-04 삼성전자주식회사 모바일 디바이스 및 모바일 디바이스의 동작 방법
US9767613B1 (en) * 2015-01-23 2017-09-19 Leap Motion, Inc. Systems and method of interacting with a virtual object
KR102364620B1 (ko) * 2015-01-26 2022-02-17 엘지전자 주식회사 영상표시장치, 및 그 동작방법
EP3065042B1 (en) * 2015-02-13 2018-11-07 LG Electronics Inc. Mobile terminal and method for controlling the same
US9497790B2 (en) * 2015-03-03 2016-11-15 Google Inc. Simulation of near-field communications
WO2016140083A1 (ja) * 2015-03-05 2016-09-09 ソニー株式会社 画像処理装置および画像処理方法
CN107439010B (zh) * 2015-05-27 2022-01-04 谷歌公司 流传输球形视频
KR20160142184A (ko) * 2015-06-02 2016-12-12 삼성전자주식회사 디스플레이 장치 및 이의 제어 방법.
US9866752B2 (en) * 2015-06-02 2018-01-09 Qualcomm Incorporated Systems and methods for producing a combined view from fisheye cameras
WO2017003007A1 (ko) * 2015-07-02 2017-01-05 엘지전자 주식회사 영상표시장치 및 이동 단말기
KR20170011190A (ko) * 2015-07-21 2017-02-02 엘지전자 주식회사 이동 단말기 및 그것의 제어방법
EP3333808B1 (en) * 2015-08-06 2021-10-27 Sony Interactive Entertainment Inc. Information processing device
US9864734B2 (en) * 2015-08-12 2018-01-09 International Business Machines Corporation Clickable links within live collaborative web meetings
KR101808852B1 (ko) * 2015-08-18 2017-12-13 권혁제 가상현실 헤드셋을 이용한 안경 렌즈 비교 시뮬레이션 시스템 및 그 방법
KR102381141B1 (ko) * 2015-09-03 2022-03-31 엘지전자 주식회사 디스플레이 디바이스 및 그 제어 방법
EP3347810A1 (en) * 2015-09-10 2018-07-18 Google LLC Playing spherical video on a limited bandwidth connection
US20170078653A1 (en) * 2015-09-15 2017-03-16 Qualcomm Incorporated Systems and methods for producing a surround view
CN105208368A (zh) 2015-09-23 2015-12-30 北京奇虎科技有限公司 显示全景数据的方法及装置
US10104282B2 (en) * 2015-09-30 2018-10-16 Ricoh Co., Ltd. Yaw user interface
CN105898460A (zh) 2015-12-10 2016-08-24 乐视网信息技术（北京）股份有限公司 调整智能电视的全景视频播放视角的方法和装置
KR102459590B1 (ko) * 2015-12-24 2022-10-26 엘지전자 주식회사 영상표시장치
US20170186219A1 (en) * 2015-12-28 2017-06-29 Le Holdings (Beijing) Co., Ltd. Method for 360-degree panoramic display, display module and mobile terminal
CN105913478A (zh) 2015-12-28 2016-08-31 乐视致新电子科技（天津）有限公司 360度全景显示方法、显示模块及移动终端
CN105898271A (zh) 2015-12-28 2016-08-24 乐视致新电子科技（天津）有限公司 360度全景视频的播放方法、播放模块及移动终端
US10977764B2 (en) * 2015-12-29 2021-04-13 Dolby Laboratories Licensing Corporation Viewport independent image coding and rendering
KR20170079198A (ko) * 2015-12-30 2017-07-10 엘지전자 주식회사 이동 단말기 및 그의 동작 방법
KR102482549B1 (ko) * 2016-01-11 2022-12-28 엘지전자 주식회사 영상표시장치
JP6665558B2 (ja) * 2016-01-29 2020-03-13 株式会社リコー 画像管理システム、画像管理方法、画像通信システム及びプログラム
KR102523997B1 (ko) * 2016-02-12 2023-04-21 삼성전자주식회사 360도 영상 처리 방법 및 장치
KR20170095030A (ko) * 2016-02-12 2017-08-22 삼성전자주식회사 통신 시스템에서 vr 컨텐트 디스플레이를 지원하는 기법
KR102484135B1 (ko) * 2016-02-15 2023-01-04 엘지전자 주식회사 디스플레이 장치 및 그의 동작 방법
US10880535B2 (en) * 2016-02-17 2020-12-29 Lg Electronics Inc. Method for transmitting 360 video, method for receiving 360 video, apparatus for transmitting 360 video, and apparatus for receiving 360 video
US10334224B2 (en) * 2016-02-19 2019-06-25 Alcacruz Inc. Systems and method for GPU based virtual reality video streaming server
KR102442527B1 (ko) * 2016-02-26 2022-09-13 엘지전자 주식회사 무선 디바이스
US10277836B2 (en) * 2016-03-07 2019-04-30 Ricoh Company, Ltd. Communication terminal, image management apparatus, image processing system, method for controlling display, and computer program product
US9996311B2 (en) * 2016-03-15 2018-06-12 Roku, Inc. Efficient communication interface for casting interactively controlled visual content
EP3433835A4 (en) * 2016-03-21 2020-01-01 Hulu, LLC CONVERSION AND PRE-PROCESSING OF A SPHERICAL VIDEO FOR CONTINUOUS BROADCASTING AND RETURN
KR20170111000A (ko) * 2016-03-24 2017-10-12 엘지전자 주식회사 디스플레이 장치 및 그의 동작 방법
JP6275362B1 (ja) * 2016-04-01 2018-02-07 株式会社ｗｉｓｅ ３ｄグラフィック生成、人工知能の検証・学習システム、プログラム及び方法
KR20170112797A (ko) * 2016-04-01 2017-10-12 삼성전자주식회사 디스플레이 장치, 시스템 및 그 제어 방법
US20170302714A1 (en) * 2016-04-15 2017-10-19 Diplloid Inc. Methods and systems for conversion, playback and tagging and streaming of spherical images and video
US20170316611A1 (en) * 2016-04-20 2017-11-02 30 60 90 Corporation System and method for very large-scale communication and asynchronous documentation in virtual reality and augmented reality environments enabling guided tours of shared design alternatives
KR20170124814A (ko) 2016-05-03 2017-11-13 삼성전자주식회사 영상 표시 장치 및 그 동작 방법
KR20170124811A (ko) * 2016-05-03 2017-11-13 삼성전자주식회사 영상 표시 장치 및 그 동작방법
US10019131B2 (en) * 2016-05-10 2018-07-10 Google Llc Two-handed object manipulations in virtual reality
KR102343651B1 (ko) * 2016-05-13 2021-12-28 소니그룹주식회사 생성 장치 및 생성 방법, 그리고, 재생 장치 및 재생 방법
CN106028115A (zh) 2016-05-18 2016-10-12 乐视控股（北京）有限公司 视频播放方法和装置
US11019257B2 (en) * 2016-05-19 2021-05-25 Avago Technologies International Sales Pte. Limited 360 degree video capture and playback
KR102208132B1 (ko) * 2016-05-26 2021-01-27 엘지전자 주식회사 360 비디오를 전송하는 방법, 360 비디오를 수신하는 방법, 360 비디오 전송 장치, 360 비디오 수신 장치
CN113542601B (zh) * 2016-06-20 2024-01-23 麦克赛尔株式会社 摄像装置、显示装置和摄像显示系统
CN106060570B (zh) 2016-06-30 2019-06-14 北京奇艺世纪科技有限公司 一种全景视频图像播放、编码方法及装置
US10297086B2 (en) * 2016-07-04 2019-05-21 Liquid Cinema Inc. System and method for processing digital video
KR20180005377A (ko) * 2016-07-06 2018-01-16 엘지전자 주식회사 이동단말기 및 그 제어 방법, 디스플레이 디바이스 및 그 제어 방법
US10277886B2 (en) * 2016-07-19 2019-04-30 Gopro, Inc. Mapping of spherical image data into rectangular faces for transport and decoding across networks
US10694102B2 (en) * 2016-07-22 2020-06-23 Immervision, Inc. Method to capture, store, distribute, share, stream and display panoramic image or video
KR102542515B1 (ko) * 2016-07-28 2023-06-12 삼성전자주식회사 영상 표시 장치 및 영상 표시 방법
KR102525575B1 (ko) 2016-08-12 2023-04-25 삼성전자주식회사 영상 표시 장치 및 그 동작 방법
KR102567002B1 (ko) * 2016-08-16 2023-08-14 삼성전자주식회사 영상 표시 장치 및 그 동작방법
KR102568897B1 (ko) * 2016-08-16 2023-08-21 삼성전자주식회사 전자 장치 및 그 제어 방법
KR20180020386A (ko) * 2016-08-18 2018-02-28 엘지전자 주식회사 이동 단말기 및 그의 동작 방법
KR20180020517A (ko) * 2016-08-18 2018-02-28 엘지전자 주식회사 이동 단말기
KR20180021515A (ko) * 2016-08-22 2018-03-05 삼성전자주식회사 영상 표시 장치 및 영상 표시 장치의 동작 방법
BR112019003605A2 (pt) * 2016-08-25 2019-05-21 Lg Electronics Inc. método para transmitir vídeo omnidirecional, método para receber vídeo omnidirecional, aparelho para transmitir vídeo omnidirecional, e aparelho para receber vídeo omnidirecional
WO2018043905A1 (ko) * 2016-08-29 2018-03-08 엘지전자 주식회사 360 비디오를 전송하는 방법, 360 비디오를 수신하는 방법, 360 비디오 전송 장치, 360 비디오 수신 장치
US10524018B2 (en) * 2016-08-30 2019-12-31 Samsung Electronics Co., Ltd. Apparatus and method for displaying image
KR102536945B1 (ko) * 2016-08-30 2023-05-25 삼성전자주식회사 영상 표시 장치 및 그 동작방법
KR102522565B1 (ko) * 2016-08-31 2023-04-17 삼성전자주식회사 영상 표시 장치 및 그 동작 방법
KR102627518B1 (ko) * 2016-09-02 2024-01-23 엘지전자 주식회사 싱크 디바이스 및 그 제어 방법
KR102567803B1 (ko) * 2016-09-06 2023-08-18 엘지전자 주식회사 디스플레이 장치
KR20180028320A (ko) * 2016-09-08 2018-03-16 삼성전자주식회사 디스플레이 장치 및 이의 제어 방법
KR20180028782A (ko) * 2016-09-09 2018-03-19 삼성전자주식회사 전자 장치 및 그 제어 방법
US11172005B2 (en) * 2016-09-09 2021-11-09 Nokia Technologies Oy Method and apparatus for controlled observation point and orientation selection audiovisual content
KR102560029B1 (ko) * 2016-09-12 2023-07-26 삼성전자주식회사 가상 현실 콘텐트를 송수신하는 방법 및 장치
KR20180029315A (ko) * 2016-09-12 2018-03-21 삼성전자주식회사 가상 현실 컨텐트의 영상을 투영하기 위한 영상 처리 방법 및 장치
US10623635B2 (en) * 2016-09-23 2020-04-14 Mediatek Inc. System and method for specifying, signaling and using coding-independent code points in processing media contents from multiple media sources
CN106548446B (zh) * 2016-09-29 2019-08-09 北京奇艺世纪科技有限公司 一种在球面全景图像上贴图的方法及装置
CN107888928B (zh) * 2016-09-30 2020-02-14 华为技术有限公司 运动补偿预测方法和设备
US20190238888A1 (en) * 2017-07-17 2019-08-01 Ki Baek Kim Image data encoding/decoding method and apparatus
KR20230030017A (ko) * 2016-10-04 2023-03-03 주식회사 비원영상기술연구소 영상 데이터 부호화/복호화 방법 및 장치
KR20180037725A (ko) * 2016-10-05 2018-04-13 엘지전자 주식회사 디스플레이 장치
KR20180037721A (ko) * 2016-10-05 2018-04-13 엘지전자 주식회사 디스플레이 장치
KR101969082B1 (ko) * 2016-10-06 2019-04-16 주식회사 카이 다수의 카메라를 이용한 최적의 구형 영상 획득 방법
CN109362242B (zh) * 2016-10-10 2021-05-14 华为技术有限公司 一种视频数据的处理方法及装置
US10339627B2 (en) * 2016-10-10 2019-07-02 Gopro, Inc. Apparatus and methods for the optimal stitch zone calculation of a generated projection of a spherical image
KR20180040451A (ko) * 2016-10-12 2018-04-20 엘지전자 주식회사 이동 단말기 및 그의 동작 방법
US10917564B2 (en) * 2016-10-12 2021-02-09 Qualcomm Incorporated Systems and methods of generating and processing files for partial decoding and most interested regions
CN107945101B (zh) * 2016-10-13 2021-01-29 华为技术有限公司 图像处理方法和装置
KR20180042777A (ko) * 2016-10-18 2018-04-26 엘지전자 주식회사 이동 단말기 및 그의 동작 방법
US10186067B2 (en) * 2016-10-25 2019-01-22 Aspeed Technology Inc. Method and apparatus for generating panoramic image with rotation, translation and warping process
CN106454321A (zh) * 2016-10-26 2017-02-22 深圳市道通智能航空技术有限公司 全景视频的处理方法、装置及系统
KR102589853B1 (ko) * 2016-10-27 2023-10-16 삼성전자주식회사 영상 표시 장치 및 영상 표시 방법
KR20180048170A (ko) * 2016-11-02 2018-05-10 엘지전자 주식회사 디스플레이 장치
KR20180051288A (ko) * 2016-11-08 2018-05-16 삼성전자주식회사 디스플레이 장치 및 그 제어 방법
GB2555788A (en) * 2016-11-08 2018-05-16 Nokia Technologies Oy An apparatus, a method and a computer program for video coding and decoding
US10448107B2 (en) * 2016-11-11 2019-10-15 Lg Electronics Inc. Display device
US9998847B2 (en) * 2016-11-17 2018-06-12 Glen A. Norris Localizing binaural sound to objects
KR102551713B1 (ko) * 2016-11-18 2023-07-06 삼성전자주식회사 전자 장치 및 그 이미지 처리 방법
KR102633595B1 (ko) * 2016-11-21 2024-02-05 삼성전자주식회사 디스플레이장치 및 그 제어방법
JP6565878B2 (ja) * 2016-11-25 2019-08-28 トヨタ自動車株式会社 表示システム
KR20180060236A (ko) * 2016-11-28 2018-06-07 엘지전자 주식회사 이동 단말기 및 그의 동작 방법
US10244215B2 (en) * 2016-11-29 2019-03-26 Microsoft Technology Licensing, Llc Re-projecting flat projections of pictures of panoramic video for rendering by application
US10244200B2 (en) * 2016-11-29 2019-03-26 Microsoft Technology Licensing, Llc View-dependent operations during playback of panoramic video
US10614606B2 (en) * 2016-11-30 2020-04-07 Ricoh Company, Ltd. Information processing apparatus for creating an animation from a spherical image
KR102561274B1 (ko) * 2016-12-01 2023-07-31 삼성전자주식회사 디스플레이 장치 및 디스플레이 장치의 제어 방법
CN110235438B (zh) * 2016-12-01 2021-12-28 Lg 电子株式会社 图像显示设备和包含该图像显示设备的图像显示系统
US10595069B2 (en) * 2016-12-05 2020-03-17 Adobe Inc. Prioritizing tile-based virtual reality video streaming using adaptive rate allocation
EP3334164B1 (en) * 2016-12-09 2019-08-21 Nokia Technologies Oy A method and an apparatus and a computer program product for video encoding and decoding
US20180167634A1 (en) * 2016-12-09 2018-06-14 Nokia Technologies Oy Method and an apparatus and a computer program product for video encoding and decoding
US10620441B2 (en) * 2016-12-14 2020-04-14 Qualcomm Incorporated Viewport-aware quality metric for 360-degree video
US10509965B2 (en) * 2016-12-15 2019-12-17 Google Llc Methods, systems, and media for detecting two-dimensional videos placed on a sphere in abusive spherical video content by tiling the sphere
KR20180070297A (ko) * 2016-12-16 2018-06-26 삼성전자주식회사 디스플레이장치 및 그 제어방법
US10242714B2 (en) * 2016-12-19 2019-03-26 Microsoft Technology Licensing, Llc Interface for application-specified playback of panoramic video
KR20180071012A (ko) * 2016-12-19 2018-06-27 삼성전자주식회사 전자 장치 및 전자 장치 제어 방법
KR20180074369A (ko) * 2016-12-23 2018-07-03 삼성전자주식회사 3차원 컨텐츠의 썸네일 관리 방법 및 그 장치
US10951871B2 (en) * 2016-12-28 2021-03-16 Sony Corporation Generation device, identification information generation method, reproduction device, and image reproduction related to stereo packing of projected frames
KR102412955B1 (ko) * 2016-12-28 2022-06-24 소니그룹주식회사 생성 장치, 식별 정보 생성 방법, 재생 장치 및 화상 생성 방법
CN109074678B (zh) * 2016-12-30 2021-02-05 华为技术有限公司 一种信息的处理方法及装置
US10863198B2 (en) * 2017-01-03 2020-12-08 Lg Electronics Inc. Intra-prediction method and device in image coding system for 360-degree video
US10560660B2 (en) * 2017-01-04 2020-02-11 Intel Corporation Rectilinear viewport extraction from a region of a wide field of view using messaging in video transmission
KR20180080892A (ko) * 2017-01-05 2018-07-13 삼성전자주식회사 전자 장치 및 그 제어 방법
US10742999B2 (en) * 2017-01-06 2020-08-11 Mediatek Inc. Methods and apparatus for signaling viewports and regions of interest
WO2018131832A1 (ko) * 2017-01-10 2018-07-19 엘지전자 주식회사 360 비디오를 전송하는 방법, 360 비디오를 수신하는 방법, 360 비디오 전송 장치, 360 비디오 수신 장치
WO2018131813A1 (en) * 2017-01-10 2018-07-19 Samsung Electronics Co., Ltd. Method and apparatus for generating metadata for 3d images
US10313664B2 (en) * 2017-01-11 2019-06-04 Qualcomm Incorporated Adjusting field of view of truncated square pyramid projection for 360-degree video
KR20180082812A (ko) * 2017-01-11 2018-07-19 삼성전자주식회사 영상 표시 장치 및 그 동작 방법
US10560682B2 (en) * 2017-01-13 2020-02-11 Gopro, Inc. Methods and apparatus for providing a frame packing arrangement for panoramic content
JP6805861B2 (ja) * 2017-02-09 2020-12-23 株式会社リコー 画像処理装置、画像処理システム、画像処理方法及びプログラム
US10368047B2 (en) * 2017-02-15 2019-07-30 Adone Inc. Six-degree of freedom video playback of a single monoscopic 360-degree video
KR20180096170A (ko) * 2017-02-20 2018-08-29 삼성전자주식회사 전자 장치 및 전자 장치에서 360도 영상 디스플레이 방법
WO2018156243A1 (en) * 2017-02-22 2018-08-30 Twitter, Inc. Transcoding video
US11172208B2 (en) * 2017-02-28 2021-11-09 Nokia Technologies Oy Method and apparatus for improving the visual quality of viewport-based omnidirectional video streaming
US20200074593A1 (en) * 2017-03-01 2020-03-05 Peking University Shenzhen Graduate School Panoramic image mapping method, apparatus, and device
CN106899840B (zh) * 2017-03-01 2018-06-05 北京大学深圳研究生院 全景图像映射方法
JP6775776B2 (ja) * 2017-03-09 2020-10-28 株式会社岩根研究所 自由視点移動表示装置
CN108632589A (zh) * 2017-03-15 2018-10-09 株式会社理光 信息处理装置、摄像系统以及记录介质
WO2018173791A1 (ja) * 2017-03-22 2018-09-27 ソニー株式会社 画像処理装置および方法、並びにプログラム
WO2018178507A1 (en) * 2017-03-27 2018-10-04 Nokia Technologies Oy An apparatus, a method and a computer program for video coding and decoding
CN110520903B (zh) * 2017-03-28 2023-11-28 三星电子株式会社 基于用户移动信息显示图像的方法和装置
US20190373245A1 (en) * 2017-03-29 2019-12-05 Lg Electronics Inc. 360 video transmission method, 360 video reception method, 360 video transmission device, and 360 video reception device
KR102362850B1 (ko) * 2017-04-14 2022-02-15 삼성전자주식회사 디스플레이장치, 디스플레이 시스템 및 디스플레이장치의 제어방법
WO2018194273A1 (en) * 2017-04-21 2018-10-25 Samsung Electronics Co., Ltd. Image display apparatus and method
US20180307352A1 (en) * 2017-04-25 2018-10-25 Gopro, Inc. Systems and methods for generating custom views of videos
WO2018196682A1 (en) * 2017-04-27 2018-11-01 Mediatek Inc. Method and apparatus for mapping virtual-reality image to a segmented sphere projection format
US10740972B2 (en) * 2017-04-28 2020-08-11 Harman International Industries, Incorporated System and method for presentation and control of augmented vehicle surround views
US10957009B2 (en) * 2017-05-04 2021-03-23 Electronics And Telecommunications Research Institute Image processing apparatus and method
JP6331178B1 (ja) * 2017-05-12 2018-05-30 パナソニックＩｐマネジメント株式会社 画像処理装置、及び、画像処理方法
US10182222B2 (en) * 2017-05-12 2019-01-15 Garmin Switzerland Gmbh Graphical object overlays for 360 degree cameras
US10469751B2 (en) * 2017-05-12 2019-11-05 Garmin Switzerland Gmbh Smart stabilization and reorientation for an omnidirectional camera
US10375375B2 (en) * 2017-05-15 2019-08-06 Lg Electronics Inc. Method of providing fixed region information or offset region information for subtitle in virtual reality system and device for controlling the same
US20180338160A1 (en) * 2017-05-18 2018-11-22 Mediatek Inc. Method and Apparatus for Reduction of Artifacts in Coded Virtual-Reality Images
JP6919334B2 (ja) * 2017-05-26 2021-08-18 株式会社リコー 画像処理装置、画像処理方法、プログラム
KR102262727B1 (ko) * 2017-05-26 2021-06-09 엘지전자 주식회사 360 비디오 처리 방법 및 그 장치
CN108965917B (zh) * 2017-05-27 2021-07-20 华为技术有限公司 视频图像的呈现、封装方法和视频图像的呈现、封装装置
BR102017012517A2 (pt) * 2017-06-12 2018-12-26 Samsung Eletrônica da Amazônia Ltda. método para exibição de mídia ou interface de bolhas em 360°
KR102350933B1 (ko) * 2017-06-20 2022-01-12 엘지전자 주식회사 영상표시장치
EP3422724B1 (en) * 2017-06-26 2024-05-01 Nokia Technologies Oy An apparatus, a method and a computer program for omnidirectional video
GB2563944B (en) * 2017-06-30 2021-11-03 Canon Kk 360-Degree video encoding with block-based extension of the boundary of projected parts
JP6721631B2 (ja) * 2017-07-07 2020-07-15 ノキア テクノロジーズ オーユー ビデオの符号化・復号の方法、装置、およびコンピュータプログラムプロダクト
KR102535031B1 (ko) * 2017-07-19 2023-05-22 삼성전자주식회사 디스플레이장치, 그 제어방법 및 그 컴퓨터프로그램제품
US10477266B2 (en) * 2017-07-24 2019-11-12 Facebook, Inc. Determining local network connections of devices using tokens
CN109327699B (zh) * 2017-07-31 2021-07-16 华为技术有限公司 一种图像的处理方法、终端和服务器
KR102422929B1 (ko) * 2017-08-16 2022-07-20 삼성전자 주식회사 디스플레이장치, 서버 및 그 제어방법
US10264297B1 (en) * 2017-09-13 2019-04-16 Perfect Sense, Inc. Time-based content synchronization
EP3687178B1 (en) * 2017-09-26 2023-03-15 LG Electronics Inc. Overlay processing method in 360 video system, and device thereof
CN107608605A (zh) * 2017-09-28 2018-01-19 北京金山安全软件有限公司 一种图像的显示方法、装置、电子设备及存储介质
USD857722S1 (en) * 2017-10-24 2019-08-27 Atlas Biomed Group Limited Display screen with graphical user interface
WO2019083266A1 (ko) * 2017-10-24 2019-05-02 엘지전자 주식회사 피쉬아이 비디오 정보를 포함한 360도 비디오를 송수신하는 방법 및 그 장치
US10560628B2 (en) * 2017-10-30 2020-02-11 Visual Supply Company Elimination of distortion in 360-degree video playback
EP3506619A1 (en) * 2017-12-27 2019-07-03 Nokia Technologies Oy Receiving and displaying sensor data on a substantially spherical surface of a display device
US10664127B2 (en) * 2017-12-29 2020-05-26 Facebook, Inc. Connected TV 360-degree media interactions
JP6413035B1 (ja) * 2018-01-18 2018-10-24 株式会社ほぼ日 プログラム、情報処理装置及び情報処理方法
US10740981B2 (en) * 2018-02-06 2020-08-11 Adobe Inc. Digital stages for presenting digital three-dimensional models
US20190281273A1 (en) * 2018-03-08 2019-09-12 Mediatek Inc. Adaptive loop filtering method for reconstructed projection-based frame that employs projection layout of 360-degree virtual reality projection
US10659780B2 (en) * 2018-03-09 2020-05-19 Mediatek Inc. De-blocking method for reconstructed projection-based frame that employs projection layout of 360-degree virtual reality projection
US10986371B2 (en) * 2018-03-22 2021-04-20 Mediatek Inc. Sample adaptive offset filtering method for reconstructed projection-based frame that employs projection layout of 360-degree virtual reality projection
KR102338901B1 (ko) * 2018-04-03 2021-12-13 삼성전자주식회사 전자 장치 및 그 동작 방법
WO2019194434A1 (ko) * 2018-04-05 2019-10-10 엘지전자 주식회사 복수의 뷰포인트들에 대한 메타데이터를 송수신하는 방법 및 장치
WO2019203456A1 (ko) * 2018-04-15 2019-10-24 엘지전자 주식회사 복수의 뷰포인트들에 대한 메타데이터를 송수신하는 방법 및 장치
CN110392206B (zh) * 2018-04-18 2021-04-02 株式会社理光 信息处理设备和记录介质
US10650790B2 (en) * 2018-04-30 2020-05-12 Ramzi Khalil Maalouf System, apparatus, and method for optimizing viewing experience on an intelligent terminal
KR102154530B1 (ko) * 2018-06-06 2020-09-21 엘지전자 주식회사 360 비디오 시스템에서 오버레이 미디어 처리 방법 및 그 장치
US11012657B2 (en) * 2018-06-08 2021-05-18 Lg Electronics Inc. Method for processing overlay in 360-degree video system and apparatus for the same
US10573060B1 (en) * 2018-06-14 2020-02-25 Kilburn Live, Llc Controller binding in virtual domes
WO2020009341A1 (ko) * 2018-07-06 2020-01-09 엘지전자 주식회사 동적 뷰포인트의 좌표계에 대한 메타데이터를 송수신하는 방법 및 장치
KR102188270B1 (ko) * 2018-07-06 2020-12-09 엘지전자 주식회사 360 비디오 데이터의 서브픽처 기반 처리 방법 및 그 장치
WO2020013484A1 (ko) * 2018-07-11 2020-01-16 엘지전자 주식회사 360 비디오 시스템에서 오버레이 처리 방법 및 그 장치
US10764513B2 (en) * 2018-07-31 2020-09-01 Ricoh Company, Ltd. Communication terminal, image data communication system, and communication method
US20200153885A1 (en) * 2018-10-01 2020-05-14 Lg Electronics Inc. Apparatus for transmitting point cloud data, a method for transmitting point cloud data, an apparatus for receiving point cloud data and/or a method for receiving point cloud data
WO2020071632A1 (ko) * 2018-10-02 2020-04-09 엘지전자 주식회사 360 비디오 시스템에서 오버레이 처리 방법 및 그 장치

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102065335A (zh) * 2009-11-13 2011-05-18 三星电子株式会社 显示装置、客户终端及其控制方法
CN103339927A (zh) * 2011-01-31 2013-10-02 三星电子株式会社 用于拍摄全景图像的摄影装置和方法
CN103634634A (zh) * 2012-08-22 2014-03-12 索尼公司 遥控器以及呈现受控设备显示器的快照的方法

Also Published As

Publication number Publication date
CN108024127A (zh) 2018-05-11
US20180122130A1 (en) 2018-05-03
US10810789B2 (en) 2020-10-20
KR20180046681A (ko) 2018-05-09
JP2020502851A (ja) 2020-01-23
KR102598082B1 (ko) 2023-11-03
WO2018080165A1 (en) 2018-05-03

Similar Documents

Publication Publication Date Title
CN108024127B (zh) 图像显示装置、移动设备及其操作方法
CN107736031B (zh) 图像显示设备及其操作方法
US20160231885A1 (en) Image display apparatus and method
US20210405838A1 (en) Image display device and operating method for enlarging an image displayed in a region of a display and displaying the enlarged image variously
CN109792561B (zh) 图像显示设备及其操作方法
KR102329124B1 (ko) 영상 표시 장치 및 영상 표시 방법
US11500509B2 (en) Image display apparatus and image display method
KR102191972B1 (ko) 디스플레이 장치가 화면을 디스플레이 하는 방법 및 그 디스플레이 장치
CN105763914B (zh) 图像显示装置和方法
KR20170124811A (ko) 영상 표시 장치 및 그 동작방법
CN107852425B (zh) 图像显示装置及其操作方法
EP3319308B1 (en) Spherical image display apparatus and method of displaying spherical image on a planar display
US20160224134A1 (en) Display apparatus and control method thereof
EP3032393B1 (en) Display apparatus and display method

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant