CN109792561A - 图像显示设备及其操作方法 - Google Patents

图像显示设备及其操作方法 Download PDF

Info

Publication number
CN109792561A
CN109792561A CN201780060917.2A CN201780060917A CN109792561A CN 109792561 A CN109792561 A CN 109792561A CN 201780060917 A CN201780060917 A CN 201780060917A CN 109792561 A CN109792561 A CN 109792561A
Authority
CN
China
Prior art keywords
degree
image
images
area
image display
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN201780060917.2A
Other languages
English (en)
Other versions
CN109792561B (zh
Inventor
尹铉敦
曺雅仁
高祥铁
卢汀镐
李奉锡
李相文
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Samsung Electronics Co Ltd
Original Assignee
Samsung Electronics Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Samsung Electronics Co Ltd filed Critical Samsung Electronics Co Ltd
Publication of CN109792561A publication Critical patent/CN109792561A/zh
Application granted granted Critical
Publication of CN109792561B publication Critical patent/CN109792561B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/30—Image reproducers
    • H04N13/388—Volumetric displays, i.e. systems where the image is built up from picture elements distributed through a volume
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/47—End-user applications
    • H04N21/472—End-user interface for requesting content, additional data or services; End-user interface for interacting with content, e.g. for content reservation or setting reminders, for requesting event notification, for manipulating displayed content
    • H04N21/47205—End-user interface for requesting content, additional data or services; End-user interface for interacting with content, e.g. for content reservation or setting reminders, for requesting event notification, for manipulating displayed content for manipulating displayed content, e.g. interacting with MPEG-4 objects, editing locally
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/4302—Content synchronisation processes, e.g. decoder synchronisation
    • H04N21/4307—Synchronising the rendering of multiple content streams or additional data on devices, e.g. synchronisation of audio on a mobile phone with the video output on the TV screen
    • H04N21/43076—Synchronising the rendering of multiple content streams or additional data on devices, e.g. synchronisation of audio on a mobile phone with the video output on the TV screen of the same content streams on multiple devices, e.g. when family members are watching the same movie on different devices
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/14—Digital output to display device ; Cooperation and interconnection of the display device with other functional units
    • G06F3/1423—Digital output to display device ; Cooperation and interconnection of the display device with other functional units controlling a plurality of local displays, e.g. CRT and flat panel display
    • G06F3/1438—Digital output to display device ; Cooperation and interconnection of the display device with other functional units controlling a plurality of local displays, e.g. CRT and flat panel display using more than one graphics controller
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T15/00—3D [Three Dimensional] image rendering
    • G06T15/04—Texture mapping
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T15/00—3D [Three Dimensional] image rendering
    • G06T15/10—Geometric effects
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T15/00—3D [Three Dimensional] image rendering
    • G06T15/10—Geometric effects
    • G06T15/20—Perspective computation
    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G3/00—Control arrangements or circuits, of interest only in connection with visual indicators other than cathode-ray tubes
    • G09G3/001—Control arrangements or circuits, of interest only in connection with visual indicators other than cathode-ray tubes using specific devices not provided for in groups G09G3/02 - G09G3/36, e.g. using an intermediate record carrier such as a film slide; Projection systems; Display of non-alphanumerical information, solely or in combination with alphanumerical information, e.g. digital display on projected diapositive as background
    • G09G3/002—Control arrangements or circuits, of interest only in connection with visual indicators other than cathode-ray tubes using specific devices not provided for in groups G09G3/02 - G09G3/36, e.g. using an intermediate record carrier such as a film slide; Projection systems; Display of non-alphanumerical information, solely or in combination with alphanumerical information, e.g. digital display on projected diapositive as background to project the image of a two-dimensional display, such as an array of light emitting or modulating elements or a CRT
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
    • H04N13/10—Processing, recording or transmission of stereoscopic or multi-view image signals
    • H04N13/189—Recording image signals; Reproducing recorded image signals
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/41—Structure of client; Structure of client peripherals
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/41—Structure of client; Structure of client peripherals
    • H04N21/4104—Peripherals receiving signals from specially adapted client devices
    • H04N21/4122—Peripherals receiving signals from specially adapted client devices additional display device, e.g. video projector
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/41—Structure of client; Structure of client peripherals
    • H04N21/422—Input-only peripherals, i.e. input devices connected to specially adapted client devices, e.g. global positioning system [GPS]
    • H04N21/42204—User interfaces specially adapted for controlling a client device through a remote control device; Remote control devices therefor
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/4302—Content synchronisation processes, e.g. decoder synchronisation
    • H04N21/4307—Synchronising the rendering of multiple content streams or additional data on devices, e.g. synchronisation of audio on a mobile phone with the video output on the TV screen
    • H04N21/43072—Synchronising the rendering of multiple content streams or additional data on devices, e.g. synchronisation of audio on a mobile phone with the video output on the TV screen of multiple content streams on the same device
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/4302—Content synchronisation processes, e.g. decoder synchronisation
    • H04N21/4307—Synchronising the rendering of multiple content streams or additional data on devices, e.g. synchronisation of audio on a mobile phone with the video output on the TV screen
    • H04N21/43079—Synchronising the rendering of multiple content streams or additional data on devices, e.g. synchronisation of audio on a mobile phone with the video output on the TV screen of additional data with content streams on multiple devices
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/47—End-user applications
    • H04N21/472—End-user interface for requesting content, additional data or services; End-user interface for interacting with content, e.g. for content reservation or setting reminders, for requesting event notification, for manipulating displayed content
    • H04N21/4728—End-user interface for requesting content, additional data or services; End-user interface for interacting with content, e.g. for content reservation or setting reminders, for requesting event notification, for manipulating displayed content for selecting a Region Of Interest [ROI], e.g. for requesting a higher resolution version of a selected region
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/80—Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/80—Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
    • H04N21/81—Monomedia components thereof
    • H04N21/8146—Monomedia components thereof involving graphical data, e.g. 3D object, 2D graphics
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/80—Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
    • H04N21/81—Monomedia components thereof
    • H04N21/816—Monomedia components thereof involving special video data, e.g 3D video
    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G2340/00—Aspects of display data processing
    • G09G2340/04—Changes in size, position or resolution of an image
    • G09G2340/0407—Resolution change, inclusive of the use of different resolutions for different screen areas
    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G2340/00—Aspects of display data processing
    • G09G2340/04—Changes in size, position or resolution of an image
    • G09G2340/045—Zooming at least part of an image, i.e. enlarging it or shrinking it
    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G2354/00—Aspects of interface with display user

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Computer Graphics (AREA)
  • Human Computer Interaction (AREA)
  • Databases & Information Systems (AREA)
  • Geometry (AREA)
  • General Engineering & Computer Science (AREA)
  • Computer Hardware Design (AREA)
  • Computing Systems (AREA)
  • Controls And Circuits For Display Device (AREA)

Abstract

一种由第一图像显示设备执行的方法包括：获得360度图像；在包括在第一图像显示设备中的第一显示器上显示与360度图像的第一区域相应的第一图像；控制第二图像显示设备显示与360度图像的第二区域相应的第二图像，其中，第二区域与第一区域相邻。

Description

图像显示设备及其操作方法
技术领域
本公开总体上涉及图像显示设备及其操作方法，并且例如，涉及显示360度图像的图像显示设备及其操作方法。
背景技术
图像显示设备是具有显示可由用户看到的图像的功能的设备。用户可经由图像显示设备观看广播节目。图像显示设备在其显示器上显示与用户从广播站发送的广播信号中选择的广播信号相应的广播节目。当前，广播系统的从模拟广播到数字广播的转换是全球趋势。
数字广播指的是发送数字图像信号和数字声音信号的广播。数字广播因为其不易受外部噪声的影响而比模拟广播具有更少的数据丢失，易于纠正错误，具有高分辨率，并且提供生动的屏幕。此外，与模拟广播不同，数字广播可提供双向服务。
近来，随着已经提供了能够显示360度图像的图像显示设备，已经发布了除提供数字广播功能之外还提供各种内容的智能电视(TV)。因此，需要一种用户方便地观看360度图像的方法。
发明内容
技术方案
根据示例实施例的一方面，一种由第一图像显示设备执行的方法包括：获得360度图像；在包括在第一图像显示设备中的第一显示器上显示与360度图像的第一区域相应的第一图像；并且控制第二图像显示设备显示与360度图像的第二区域相应的第二图像，其中，第二区域与第一区域相邻。
附图说明
从下面结合附图进行的详细描述中，本公开的这些和/或其他方面、特征和伴随的优点将变得显而易见且更容易理解，其中，相同的参考标号指的是相同的元件，并且其中：
图1是示出根据示例实施例的显示360度图像的示例图像显示设备和控制器的示图；
图2是示出360度图像的示例视角的示图；
图3是示出根据示例实施例的在多个图像显示设备上显示360度图像的示例方法的示图；
图4是示出根据示例实施例的包括服务器和在多个显示器上显示360度图像的至少一个图像显示设备的示例系统的示图；
图5是示出根据示例实施例的显示360度图像的图像显示设备的示例结构的框图；
图6是示出根据示例实施例的显示360度图像的图像显示设备的示例结构和服务器的示例结构的框图；
图7是示出根据示例实施例的显示360度图像的图像显示设备的示例结构的框图；
图8是示出根据示例实施例的由图像显示设备执行的示例方法的流程图；
图9是示出根据示例实施例的多个图像显示设备显示360度图像的示例的示图；
图10是示出根据示例实施例的在一个显示器上显示的360度图像被划分并由多个图像显示设备显示的示例的示图；
图11是示出根据示例实施例的360度图像的显示区域被改变的示例的示图；
图12是示出根据示例实施例的360度图像的显示倍率被改变的示例的示图；
图13是示出根据示例实施例的基于包括在多个图像显示设备中的扬声器的布局的示例音频输出的示图；
图14是示出根据示例实施例的与360度图像同步的示例音频输出处理的示图。
最佳实施方式
提供了一种显示360度图像的图像显示设备及其操作方法。
附加方面将在下面的描述中被部分地阐述，并且部分地将从描述而显而易见。
根据示例实施例的一方面，一种由第一图像显示设备执行的方法包括：获得360度图像；在包括在第一图像显示设备中的第一显示器上显示与360度图像的第一区域相应的第一图像；并且控制第二图像显示设备显示与360度图像的第二区域相应的第二图像，其中，第二区域与第一区域相邻。
控制第二图像显示设备显示第二图像的步骤可包括将360度图像和区域提取信息发送到第二图像显示设备或服务器，并且第二图像可以是由第二图像显示设备或服务器基于区域提取信息从360度图像提取的图像。
区域提取信息可包括以下项中的至少一项：第一区域的位置信息、第一区域的尺寸信息、第一区域的显示倍率信息、360度图像的第一区域的再现点信息、和关于与第一区域相邻的区域的信息，其中，第一区域被显示在第一显示器上。
所述方法还可包括：基于针对360度图像的第一区域的输入(例如，用户输入)来改变第一区域的位置、尺寸和显示倍率中的至少一个，并且基于对第一区域的改变在第一显示器上显示第一图像；控制第二图像显示设备将与改变后的第一区域相邻的区域设置为第二区域，并且显示与改变后的第二区域相应的第二图像。
获得360度图像的步骤可包括：从服务器接收360度图像，并且从服务器接收的360度图像可以是通过将球形360度图像映射到平面形状而产生的平面360度图像。
获得360度图像的步骤还可包括：将平面360度图像恢复为球形360度图像并且提取与第一区域相应的第一图像。
所述方法还可包括：再现360度图像，并且与360度图像的再现点同步地输出音频。
输出音频的步骤可包括基于以下项中的至少一项来重建将经由包括在第一图像显示设备中的至少一个扬声器和包括在第二图像显示设备中的至少一个扬声器输出的音频信号：所述包括在第一图像显示设备中的至少一个扬声器的位置信息、所述包括在第二图像显示设备中的至少一个扬声器的位置信息、用户视点的信息和图像信息。
根据另一示例实施例的一方面，一种第一图像显示设备包括：第一显示器；以及控制器，被配置为：获得360度图像，在第一显示器上显示与360度图像的第一区域相应的第一图像，并且控制第二图像显示设备显示与360度图像的第二区域相应的第二图像，其中，第二区域与第一区域相邻。
控制器还可被配置为将360度图像和区域提取信息发送到第二图像显示设备或服务器，并且第二图像可以是由第二图像显示设备或服务器基于区域提取信息从360度图像提取的图像。
区域提取信息可包括以下项中的至少一项：第一区域的位置信息、第一区域的尺寸信息、第一区域的显示倍率信息、360度图像的第一区域的再现点信息、以及关于与第一区域相邻的区域的信息，其中，第一区域被显示在第一显示器上。
控制器还可被配置为基于针对360度图像的第一区域的输入(例如，用户输入)来改变第一区域的位置、尺寸和显示倍率中的至少一个并基于对第一区域的改变在第一显示器上显示第一图像，并且控制器还可被配置为控制第二图像显示设备将与改变后的第一区域相邻的区域设置为第二区域并显示与改变后的第二区域相应的第二图像。
控制器还可被配置为从服务器接收360度图像，并且从服务器接收的360度图像可以是通过将球形360度图像映射到平面形状而产生的平面360度图像。
控制器还可被配置为将平面360度图像恢复为球形360度图像并且提取与第一区域相应的第一图像。
第一图像显示设备还可包括至少一个扬声器，并且控制器还可被配置为：再现360度图像，并且与360度图像的再现点同步地输出音频。
控制器还可被配置为基于以下项中的至少一项来重建将经由包括在第一图像显示设备中的至少一个扬声器和包括在第二图像显示设备中的至少一个扬声器输出的音频信号：包括在第一图像显示设备中的至少一个扬声器的位置信息、包括在第二图像显示设备中的至少一个扬声器的位置信息、用户视点的信息和图像信息。
具体实施方式
现在将更详细地参考附图中示出其示例的各种示例实施例，其中，相同的参考标号始终指相同的元件。就此而言，本示例实施例可具有不同的形式，并且不应被理解为限于本文阐述的描述。因此，下面通过参照附图来仅描述各种示例实施例以解释多个方面。如本文使用的，术语“和/或”包括相关联的列出项的一个或更多个的任意组合和所有组合。诸如“至少一个”的表述当在一列元素之后时，修饰整列元素而不是修饰该列的单个元素。
在整个本公开中，当部件“包括”元件时，将理解，只要不存在特定的相反叙述，该部件额外包括其他元件而不是排除其他元件。此外，在本公开中使用的诸如“…单元”、“模块”等的术语指示处理至少一个功能或运动的单元，并且该单元可通过硬件(例如，电路)或软件、或者通过硬件和软件的组合被实现。
在下文中，将参照附图更全面地描述本公开，其中，附图中示出了本公开的示例实施例。然而，本公开可以以许多不同的形式被实现，并且不应被理解为限于本文阐述的实施例；相反，这些实施例被提供使得本公开将是彻底且完整的，并且将本公开传达给本领域中的普通技术人员。在附图中，相同的参考标号表示相同的元件。此外，在描述本公开时，可省略关于可能使本公开的要点模糊的有关公知功能或配置的详细描述。
在本公开中，术语“用户”可指例如通过使用控制器来控制图像显示设备的功能或操作的人，并且可包括观看者、管理者或安装工程师。
图1是示出根据示例实施例的显示360度图像的示例图像显示设备100和控制器30(例如，遥控器)的示图。
参照图1，根据实施例的图像显示设备100可显示360度图像的全部或一部分。根据实施例的360度图像可以是具有360度视角的图像。360度图像可以是静止图像、视频或全景图像。例如，360度图像可以是基于使用至少一个相机在360度方向上拍摄的多个图像产生的图像。这里，拍摄的多个图像可被映射到球体，并且映射的图像的接触点可被接合以产生球体形状的360度图像。此外，球形360度图像可被发送到另一装置或者通过被转换为如图1中所示的平面360度图像50而被存储。
根据实施例的图像显示设备100可通过对平面360度图像50执行图形处理将平面360度图像50转换为球形360度图像70。图像显示设备100可从球形360度图像70选择与预定视角相应的区域80，并在显示器上显示与选择的区域80相应的图像。这里，图像显示设备100可根据显示器的分辨率缩放与选择的区域80相应的图像并显示该图像。此外，根据实施例的图像显示设备100可显示指示区域80在360度图像中的位置的三维指示符20。下面将参照图2更详细地描述360度图像的视角。
同时，根据实施例的图像显示设备100可以是例如而不限于电视(TV)，但它仅是示例。图像显示设备100可被实现为包括显示器的电子装置。例如，图像显示设备100可被实现为各种电子装置，诸如，例如，而不限于：蜂窝电话、平板个人计算机(PC)、数码相机、便携式摄像机、膝上型计算机、台式计算机、电子书终端、数字广播终端、个人数字助理(PDA)、便携式多媒体播放器(PMP)、导航装置、MPEG音频层-3(MP3)播放器、可穿戴装置等。具体地，可针对具有大显示器的显示设备(诸如，TV)容易地实现示例实施例。然而，它们不限于此。此外，图像显示设备100可以是固定设备或移动设备，并且可以是被配置为接收数字广播的数字广播接收器。
图像显示设备100不仅可被实现为平面显示设备，而且可被实现为具有弯曲屏幕的弯曲显示设备或能够调节其曲率的柔性显示设备。图像显示设备100的输出分辨率可包括例如而不限于：高清晰度(HD)、全HD、超HD或比超HD提供更大逼真度的分辨率。
此外，根据示例实施例的图像显示设备100可以是使用光将图像投影在屏幕(诸如，墙壁等)上的投影仪。
图像显示设备100可由控制器30控制。控制器30可被实现为用于控制图像显示设备100的各种类型的装置，诸如，例如，而不限于：遥控器或蜂窝电话。
此外，控制器30可经由短程无线通信(诸如，例如，但不限于：红外通信或蓝牙通信)来控制图像显示设备100。控制器30可使用包括在控制器30中的键(包括按钮)、触摸板、能够接收用户的语音的麦克风(未示出)和能够识别控制器30的运动的传感器(未示出)中的至少一个来控制图像显示设备100的功能。
根据实施例的控制器30可包括四向键(或四向按钮)。四向键可被用于移动显示器上显示的360度图像的区域80的位置。
此外，控制器30可以是指示装置。例如，当控制器30接收到预定键的输入时，控制器30可作为指示装置进行操作。当控制器30作为指示装置进行操作时，图像显示设备100可基于在左、右、上和下方向上移动控制器30或在预定方向上使控制器30倾斜的输入(例如，用户输入)被控制。关于经由控制器30的传感器感测到的控制器30的运动的信息可被发送到图像显示设备100。基于关于控制器30的运动的信息，图像显示设备100可移动360度图像中的在显示器上显示的区域80。
此外，当控制器30包括触摸板时，图像显示设备100可基于对象(诸如，正在触摸板上移动的用户的手指)的位移值，移动360度图像中的在显示器上显示的区域80。
图2是示出360度图像的视角的示例的示图。
如上所述，360度图像可以是基于使用至少一个相机在360度方向上拍摄的多个图像产生的图像。这里，拍摄的多个图像可被映射到球体，并且映射的图像的接触点可被接合以产生球形360度图像。
此外，360度图像可表示具有360度视角的图像。当360度图像被表示为球形图像2000时，360度图像的视角可包括x轴坐标和y轴坐标。x轴坐标可指示当穿过球体的中心的垂直平面沿着球体的表面旋转时形成的角度。y轴坐标可指示当穿过球体的中心的水平平面沿着球体的表面旋转时形成的角度。例如，x轴坐标可具有0度到360度的范围。例如，y轴坐标可具有-90度至90度或0度至180度的范围。
例如，参照图2，当从球形图像2000中的参考点朝向球形图像2000的球面上的点2021的视角(x度，y度)是(0度，0度)时，从参考点朝向点2022的视角是(30度，30度)。
图3是示出根据实施例的在多个图像显示设备101、201和301上显示360度图像3000的示例方法的示图。
根据实施例，360度图像3000可被划分并显示在多个显示器上，使得用户可通过宽屏幕观看具有各种角度的区域的360度图像3000。
参照图3，多个图像显示设备101、201和301可分别显示与球形360度图像3000的不同区域相应的图像3011、3012和3013。根据实施例，图像3011、3012和3013可以是代表相邻区域的图像(例如，相邻区域的且按照不同视角捕捉的图像)。在图3示出的示例中，图像3011、3012和3013与球形360度图像3000的第一至第三区域(例如，L、C、R)相应。此外，图像3011、3012和3013可以是分别包括在球形360度图像3000的第一至第三区域(例如，L、C、R)中的图像。
例如，第一图像显示设备101可在显示器上显示与位于球形360度图像3000的前表面的第一区域相应的图像3011。第二图像显示设备201可在显示器上显示图像3012。第三图像显示设备301可在显示器上显示图像3013。图像3012相应于与第一区域(例如，C)的左侧相邻的第二区域(例如，L)，并且图像3013相应于与第一区域的右侧相邻的第三区域(例如，R)。
根据实施例，第一至第三图像显示设备101、201和301可被实现为TV。可选地，第一图像显示设备101可以是TV，并且第二图像显示设备201和第三图像显示设备301可以是投影仪。然而，实施例不限于此。根据实施例的360度图像3000可由具有各种组合的图像显示设备显示。
根据实施例，第一图像显示设备101可将第二图像显示设备201和第三图像显示设备301预先设置为共享图像的装置。根据实施例，第一至第三图像显示设备101、201和301可以是经由同一Wifi网络被安装在家庭中的图像显示设备。
此外，根据实施例的第一至第三图像显示设备101、201和301中的每一个可包括处理器，并且基于处理器的控制进行操作。此外，第一至第三图像显示设备101、201和301可以是基于公共处理器的控制进行操作的多个图像显示设备。
图3示出根据实施例的存在三个图像显示设备101、201和301的示例。然而，本公开不限于此。根据实施例的360度图像3000可由两个或更多个图像显示设备显示。
此外，在每个图像显示设备101、201和301上显示的360度图像的每个区域的视角、尺寸、宽高比、图像的放大显示或紧凑显示的倍率等可被设置为默认值或者可基于输入(例如，用户输入)被设置或修改，并且可根据各种实施例而变化。
根据实施例，彼此相邻定位的多个图像显示设备101、201和301可分别显示与360度图像3000的相邻区域相应的图像，从而具有360度图像3000被划分并以无缝方式被显示在放大的屏幕上的视觉效果。因此，由于多个图像显示设备101、201和301，用户可具有在宽屏幕上观看具有宽范围的360度图像3000的视觉效果。
图4是示出根据示例实施例的包括服务器600和用于在多个显示器上显示360度图像的多于一个图像显示设备100、200和300的示例系统400的示图。
参照图4，系统400可包括例如服务器600、包括多个图像显示设备100、200和300的终端组470、以及网络。服务器600与图像显示设备100、200和300中的每个、以及服务器600与终端组470可经由网络彼此连接。
包括图像显示设备100、200和300的终端组470可包括显示装置和/或计算装置，其中，显示装置和/或计算装置包括处理器和以软件或硬件方式显示360度图像的显示器。
例如，终端组470可包括例如，但不限于：诸如TV100以及投影仪200和300的图像显示设备，其中，图像显示设备可被包括在同一Wifi网络区域中并且能够彼此通信。
根据实施例，图像显示设备100、200和300可从服务器600接收360度图像。此外，图像显示设备100、200和300可将360度图像提供给服务器600。
根据实施例，第一图像显示设备100可产生区域提取信息。
根据示例实施例的区域提取信息可包括以下项中的至少一项：360度图像的第一区域的位置信息、尺寸信息、显示倍率信息、再现点信息、以及关于显示的第一区域的相邻区域的信息，其中，第一区域与显示的第一图像相应。
根据实施例，第一图像显示设备100可将360度图像和区域提取信息提供给第二图像显示设备200。
根据示例实施例的第二图像显示设备200可基于由第一图像显示设备100产生的区域提取信息来确定360度图像的第二区域，其中，第二区域与第一区域相邻。第二图像显示设备200可将平面360度图像转换为球形360度图像，并且提取与第二区域相应的第二图像。根据实施例，第二图像显示设备200可在显示器上显示提取的第二图像。
可选地，根据实施例，第一图像显示设备100可将360度图像和区域提取信息提供给服务器600。根据示例实施例，服务器600可基于区域提取信息确定与第一区域相邻的第二区域。服务器600可将平面360度图像转换为球形360度图像，并且提取与第二区域相应的第二图像。根据实施例，服务器600可将提取的第二图像发送到第二图像显示设备200。根据实施例，第二图像显示设备200可在显示器上显示第二图像。
图5是示出根据示例实施例的用于显示360度图像的图像显示设备100a的示例结构的框图。图5中示出的图像显示设备100a可以是图1中示出的图像显示设备100的实施例。
参照图5，根据实施例的图像显示设备100a可包括显示器110、控制器(例如，包括处理电路)130和通信器(例如，包括通信电路)150。
显示器110可通过转换由控制器130处理的图像信号、数据信号、屏上显示(OSD)信号、控制信号等来产生驱动信号。显示器110可被实现为等离子显示面板(PDP)、液晶显示器(LCD)、有机发光显示器、柔性显示器等，但不限于此。此外，显示器110可被实现为三维(3D)显示器。此外，显示器110可被形成为将不仅被用作输出装置而且被用作输入装置的触摸屏。
根据实施例的显示器110可显示360度图像。显示器110可显示与360度的相应于预定视角的区域相应的图像。此外，显示器110可响应于改变360度图像的被显示区域的输入(例如，用户输入)，显示与改变后的显示区域相应的图像。
控制器130可包括各种处理电路，并且处理图像信号并将处理的图像信号输入到显示器110。因此，与输入的图像信号相应的图像可被显示在显示器110上。此外，控制器130也可基于接收到的命令(例如，经由传感器160(例如，参见图7)感测到的用户命令)或经由包括在控制器130中的程序，控制图像显示设备100a。
例如，根据实施例，控制器130可响应于感测到的用户输入而移动360度图像的被显示在显示器110上的区域的位置，并且可控制显示器110显示与移动后的区域相应的图像。
此外，控制器130可响应于感测到的放大或缩小输入而增大或减小360度图像的被显示在显示器110上的区域的显示倍率。
此外，根据实施例，控制器130可控制图像显示设备100a在显示器110上显示与360度图像的第一区域相应的第一图像，并且在第二图像显示设备200上显示与360度图像的第二区域相应的第二图像，其中，第二区域与第一区域相邻。
根据实施例，控制器130可将360度图像和区域提取信息发送到第二图像显示设备200或服务器600。
通信器150可包括各种通信电路，并且使图像显示设备100a能够与其他电子装置通信。通信器150可经由网络将区域提取信息发送到外部，其中，区域提取信息包括以下项中的至少一项：360度图像的显示在显示器110上的区域的位置信息、尺寸信息、显示倍率信息、再现点信息、以及关于显示的区域的相邻区域的信息。
图6是示出根据示例实施例的显示360度图像的示例图像显示设备100b和服务器600的框图。图6中示出的图像显示设备100a可以是图1中示出的图像显示设备100的实施例。
参照图6，根据实施例的图像显示设备100b可包括显示器110、控制器(例如，包括处理电路)130和通信器(例如，包括通信电路)150。显示器110和控制器130的描述与参照图5的显示器110和控制器130的描述相似或相同，因此将不被重复。
参照图6，根据实施例的服务器600可包括控制器(例如，包括处理电路)610、通信器(例如，包括通信电路)620和存储器630。
图像显示设备100b的通信器150可包括各种通信电路并且与服务器600的通信器620执行通信。根据实施例的图像显示设备100b的通信器150可基于控制器130的控制从服务器600请求360度图像。根据实施例的图像显示设备100b的通信器150可从服务器600接收360度图像。
此外，根据实施例，图像显示设备100b的控制器130可包括各种处理电路，并且从从另一图像显示设备或服务器600接收到的360度图像的文件提取区域提取信息，或者从与360度图像的文件分开的元文件获得区域提取信息。
根据实施例，服务器600的通信器620可包括各种通信电路，并且基于控制器610的控制，响应于图像显示设备100b的请求而发送360度图像。
根据实施例，360度图像可被存储到服务器600的存储器630。
此外，根据实施例，服务器600的通信器620可在控制器610的控制下从图像显示设备100b接收360度图像。服务器600的通信器620可与360度图像一起或与360度图像分开地接收与360度图像相应的区域提取信息。
根据实施例，服务器600的控制器610可包括各种处理电路，并且控制服务器600的包括通信器620和存储器630的一般组件。
根据实施例的控制器610可管理与360度图像相应的区域提取信息。
服务器600的控制器610可从360度图像的文件提取区域提取信息，或者从与360度图像的文件分开的元文件获得区域提取信息。
根据实施例，控制器610可管理与多个360度图像中的每一个相应的区域提取信息。
根据实施例，可针对一个360度图像产生并管理多条区域提取信息。所述多条区域提取信息可分别与将共享图像的多个图像显示设备200和300相应。
图7是示出根据示例实施例的显示360度图像的图像显示设备100b的示例结构的框图。图7中示出的图像显示设备100b可以是图1的图像显示设备100的实施例。
参照图7，根据实施例的图像显示设备100b除了包括控制器(例如，包括处理电路)130、显示器110和通信器(例如，包括通信电路)150之外，还可包括存储器120、调谐器140、传感器160、输入/输出单元(例如，包括输入/输出电路)170、视频处理器(例如，包括视频处理电路)180、图形处理器(例如，包括图形处理电路)181、音频处理器(例如，包括音频处理电路)115、音频输出单元(例如，包括音频输出电路)125、以及用户输入单元(例如，包括输入电路)190。
将不参照图7重复控制器130、显示器110和通信器150的与参照图5和图6描述的方面相同或相似的方面。
显示器110可基于控制器130的控制在屏幕上显示包括在经由调谐器140接收到的广播信号中的视频。此外，显示器110可显示经由通信器150或输入/输出单元170输入的内容(例如，视频)。显示器110可基于控制器130的控制输出被存储到存储器120的图像。此外，显示器110可显示用于基于声音识别执行声音识别任务的声音用户界面(UI)(例如，包括声音指令的指南)、或用于基于运动识别执行运动识别任务的运动UI(例如，包括用于运动识别的用户运动指南)。
存储器120可存储用于基于控制器130的控制来驱动并控制图像显示设备100b的各种数据、程序或应用。存储器120可存储与视频处理器180、显示器110、音频处理器115、音频输出单元125、控制器130、调谐器140、通信器150、传感器160和输入/输出单元170的操作相应地被输入/输出的信号或数据。存储器120可存储用于控制图像显示设备100b和控制器130的控制程序、最初由制造商提供或从外部下载的应用、与应用有关的图形用户界面(GUI)、用于提供GUI的对象(例如，图像、文本、图标、按钮等)、用户信息、文档、数据库或有关数据。
根据实施例，存储器120可存储360度图像。
根据实施例，存储器120可包括一个或更多个应用，其中，所述一个或更多个应用包括用于产生与显示的图像有关的区域提取信息的至少一个指令、用于存储产生的区域提取信息的至少一个指令、用于读取存储的区域提取信息的至少一个指令、用于编辑读取的区域提取信息的至少一个指令、以及用于通过使用从另一图像显示设备或服务器接收到的区域提取信息来播放360度图像的至少一个指令。
根据实施例，术语“存储器”可包括：例如，而不限于：控制器130的只读存储器(ROM)或随机存取存储器(RAM)、或者被安装在图像显示设备100b中的存储卡(例如，微型SD卡(未示出)或通用串行总线(USB)存储器(未示出))。此外，存储器120可包括非易失性存储器、易失性存储器、硬盘驱动器(HDD)或固态驱动器(SSD)。
控制器130可包括各种处理电路并控制图像显示设备100b的一般操作和包括在图像显示设备100b中的组件之间的信号流，并且可处理数据。当存在用户输入时或者当满足存储的预定条件时，控制器130可运行存储在存储器120中的操作系统(OS)和各种应用。
控制器130可包括例如而不限于RAM、ROM和处理器，其中，RAM被配置为存储从图像显示设备100b的外部输入的信号或数据或者被用作与图像显示设备100b中执行的各种操作相应的存储区域，ROM中存储用于控制图像显示设备100b的控制程序。
根据实施例的控制器130可执行存储到存储器120的至少一个指令，以在360度图像被再现时产生包括以下项中的至少一项的区域提取信息：360度图像的与当前显示的图像相应的区域的位置信息、尺寸信息、显示倍率信息、再现点信息以及关于该区域的相邻区域的信息。
根据实施例的控制器130可执行存储到存储器120的至少一个指令，以使用存储到存储器120的区域提取信息或从另一个图像显示设备或服务器600接收到的区域提取信息来再现360度图像。
视频处理器180可包括各种视频处理电路和用于处理与视频相应的图形的图形处理单元(GPU)181。视频处理器180可被实现为集成有核心处理器(未示出)和GPU的片上系统(SoC)。视频处理器180可包括单核处理器、双核处理器、三核处理器、四核处理器和多核处理器。
此外，视频处理器180可包括多个处理器。例如，视频处理器180可被实现为包括主处理器(未示出)和在睡眠模式下操作的子处理器(未示出)。
调谐器140可包括执行以下操作的各种电路：基于以无线或有线方式接收到的广播信号的放大、混频、谐振等，从许多无线电波分量中调谐并选择仅将被图像显示设备100b接收的频道的频率。广播信号可包括音频、视频和附加信息(例如，电子节目指南(EPG))。
调谐器140可基于用户输入(例如，从控制器130接收到的控制信号，即，频道号的输入、频道增大-减小的输入、或在EPG屏幕上对频道的输入)以与频道号(例如，有线广播号506)相应的频率带宽接收广播信号。
调谐器140可从诸如地波广播、有线广播、卫星广播、互联网广播等的各种源接收广播信号。调谐器140可从诸如模拟广播或数字广播的源接收广播信号。经由调谐器140接收的广播信号可被解码(例如，音频解码、视频解码或附加信息解码)并且被分离成音频、视频和/或附加信息。分离出的音频、视频和/或附加信息可基于控制器130的控制被存储在存储器120中。
图像显示设备100b可包括一个调谐器140或多个调谐器。调谐器140可通过被包括在图像显示设备100b中而被实现为一体机，或者调谐器140可被实现为与显示设备100b分离的装置(例如，机顶盒(未示出))，其中，所述分离的装置与图像显示设备100b电连接。可选地，调谐器140可被实现为与输入/输出单元170连接。
通信器150可包括各种通信电路，并且在控制器130的控制下将图像显示设备100b连接到外部装置(例如，音频装置等)。控制器130可经由通信器150向与图像显示设备100b连接的外部装置发送内容/向与图像显示设备100b连接的外部装置接收内容，从外部装置下载应用，或者执行网络浏览。通信器150可包括各种通信电路，诸如，例如，而不限于：与图像显示设备100b的性能和结构相应的无线局域网(LAN)151、蓝牙152和有线以太网153中的一个或更多个。此外，通信器150可包括无线LAN 151、蓝牙152和有线以太网153的组合。通信器150可基于控制器130的控制来接收控制器130的控制信号。控制信号可被实现为蓝牙类型、射频(RF)信号类型或Wifi类型。
通信器150还可包括除蓝牙通信之外的各种短程无线通信电路(例如，近场通信(NFC)(未示出))。
根据实施例，通信器150可向服务器请求360度图像，并且从服务器接收360度图像。
传感器160可感测用户的语音、图像或交互，并且可包括各种传感器或感测电路，例如包括而不限于：麦克风161、相机162和光接收器163中的一个或更多个。
麦克风161可接收用户发出的语音。麦克风161可将接收到的语音转换为电信号并将电信号输出到控制器130。用户的语音可包括例如与图像显示设备100b的菜单或功能相应的语音。例如，可经由麦克风161接收用户输入。
相机162可接收与包括在相机识别范围内的包括手势的用户运动相应的图像(例如，连续帧)。控制器130可基于接收到的运动的识别来选择图像显示设备100b上显示的菜单，或者可执行与运动的识别相应的控制操作。例如，控制器130可执行频道调节、音量调节、指示符移动、光标移动、在显示器110上显示的360度图像的区域的移动。
光接收器163可经由显示器110的边框的光学窗口(未示出)接收从设置在图像显示设备100b外部的控制器30(例如，遥控器)接收到的光信号(包括控制信号)。光接收器163可从外部控制器30接收与用户输入(例如，触摸操作、按压操作、触摸手势、语音或运动)相应的光信号。可基于控制器130的控制从接收到的光信号提取控制信号。例如，可经由光接收器163接收控制360度图像的再现的用户输入。
输入/输出单元170可包括各种输入/输出电路，并且基于控制器130的控制从图像显示设备100b的外部接收视频(例如，运动画面等)、音频(例如，语音、音乐等)、附加信息(例如，EPG等)等。输入/输出单元170可包括各种输入/输出电路，诸如，例如，但不限于，高清晰度多媒体接口(HDMI)端口171、组件插口172、PC端口173和USB端口174中的一个或更多个。输入/输出单元170可包括HDMI端口171、组件插口172、PC端口173和USB端口174的组合。
视频处理器180可包括各种处理电路，并且对由图像显示设备100b接收到的视频数据执行处理。视频处理器180可对视频数据执行诸如解码、缩放、噪声滤波、帧速率转换、分辨率转换等的各种图像处理。
图形处理器181可包括各种处理电路，并且使用例如计算器(未示出)和渲染器(未示出)产生包括各种对象(诸如，图标、图像、文本等)的屏幕。计算器可通过使用经由传感器160感测到的用户输入，基于屏幕的布局和对象的属性值(诸如，形状、尺寸、颜色等)来计算将在其上显示每个对象的坐标值。渲染器可基于由计算器计算的属性值产生包括对象的各种布局的屏幕。由渲染器产生的屏幕可被显示在显示器110的显示区域上。根据实施例的图形处理器181可如参照图1所述将平面360度图像映射为球体以产生球形360度图像。
音频处理器115可包括各种处理电路并且对音频数据执行处理。音频处理器115可对音频数据执行诸如解码、放大、噪声滤波等的各种处理。音频处理器115可包括多个音频处理模块，以处理与多条内容相应的音频。
音频输出单元125可包括各种组件和电路，并且基于控制器130的控制输出包括在经由调谐器140接收到的广播信号中的音频。音频输出单元125可输出经由通信器150或输入/输出单元170输入的音频(例如，语音、声音等)。此外，音频输出单元125可基于控制器130的控制输出存储到存储器120的音频。音频输出单元125可包括例如而不限于扬声器126、耳机输出端子127和索尼/飞利浦数字接口(S/PDIF)128中的一个或更多个。音频输出单元125可包括扬声器126、耳机输出端子127和S/PDIF输出端子128的组合。
用户输入单元190可包括各种输入电路，诸如，例如，但不限于，键区、按钮、触摸板、触摸屏等。用户可通过操纵用户输入单元190将针对图像显示设备100b的命令输入到控制器130。
例如，用户输入单元190可包括四向按钮或四向键。四向按钮或四向键可用于控制显示器110上显示的窗口、区域、应用、指示物或项目。四向键或四向按钮可用于指示左、右、上和下移动。此外，对于本领域中的普通技术人员将显而易见的是，用户输入单元190可包括双向键或双向按钮，而不是四向键或四向按钮。此外，用户输入单元190可包括可由用户操纵的各种类型的输入装置，诸如，滚动键或轻推键。
此外，根据实施例的用户输入单元190可经由控制器130的触摸板接收用户的拖动、触摸或轻弹输入。此外，可基于接收到的用户输入(例如，拖动输入的方向、触摸输入的持续时间等)来控制图像显示设备100b。
同时，针对各种示例实施例描述了图5至图7中示出的图像显示设备100a和100b的框图。框图的组件可根据实际实现的图像显示设备100的规范被集成、添加或省略。也就是说，根据需要，两个或更多个组件可被集成为一个组件，或者一个组件可被划分成两个或更多个组件。此外，框图的组件的功能针对实施例被描述，并且详细的操作或装置不限制本公开的范围。
图8是示出根据示例实施例的由图像显示设备100执行的示例方法的流程图。
参照图8，在操作S801，图像显示设备100可获得360度图像。
根据实施例，图像显示设备100可从服务器600获得360度图像。例如，图像显示设备100可向网络服务器请求360度图像内容并接收360度图像内容。此外，图像显示设备100可从广播服务器接收360度图像的广播流。作为另一示例，图像显示设备100可获得通过与图像显示设备100连接的相机拍摄的360度图像。此外，图像显示设备100可获得预先存储在存储器120中的360度图像。
在图8的操作S802，图像显示设备100可在第一显示器110上显示与360度图像的第一区域相应的第一图像。
根据实施例，图像显示设备100可基于预定规则从360度图像中选择将在第一显示器110上显示的第一区域，或者可基于用户输入确定第一区域。例如，图像显示设备100可基于被预先确定的视角、位置、尺寸、显示倍率等来选择360度图像的第一区域。此外，图像显示设备100可基于用户输入来确定第一区域的位置、尺寸、显示倍率(放大或缩小倍率)。
在图8的操作S803，图像显示设备100可控制第二图像显示设备200显示与360度图像的第二区域相应的第二图像，其中，第二区域与第一区域相邻。
根据示例实施例，图像显示设备100可在第一显示器110上显示360度图像的第一区域，并且控制第二图像显示设备200显示与和显示的第一区域相邻的第二区域相应的第二图像。
根据示例实施例，包括第二显示器的第二图像显示设备200可以是包括处理器和内部或外部显示器的显示设备。作为另一示例，第二图像显示设备200可以是与图像显示设备100通过相同的处理器进行操作的显示设备。
根据示例实施例，图像显示设备100可将360度图像发送到包括第二显示器的第二图像显示设备200。可选地，图像显示设备100可将360度图像发送到服务器600，并且服务器600可将360度图像发送到第二图像显示设备200。
当图像显示设备100再现360度图像时，图像显示设备100可产生区域提取信息，其中，该区域提取信息包括与显示的第一图像相应的第一区域的位置信息、尺寸信息、显示倍率信息、再现点信息以及关于第一区域的相邻区域的信息中的至少一个。
图像显示设备100可将区域提取信息与360度图像一起或与360度图像分开地发送到第二图像显示设备200或服务器600。
第二图像显示设备200或服务器600可基于区域提取信息从360度图像提取第二图像。
根据示例实施例，基于区域提取信息，第二图像显示设备200或服务器600可确定与第一图像显示设备100上显示的第一区域在预定方向上相邻的第二区域，并且提取与第二区域相应的第二图像。
根据示例实施例，当服务器600基于区域提取信息提取出第二图像时，服务器600可将第二图像发送到第二图像显示设备200以显示第二图像。
根据示例实施例，由于可经由彼此相邻定位的多个显示器显示360度图像，因此用户可以以无缝方式观看宽360度图像。
图9是示出根据示例实施例的多个图像显示设备100、200和300显示360度图像的示例的示图。
根据实施例，多个图像显示设备100、200和300可包括位于中心的第一图像显示设备(例如，TV)100以及分别位于第一图像显示设备100的左侧和右侧的第二图像显示设备200和第三图像显示设备300(例如，投影仪)。
根据实施例，第一图像显示设备100可将第二图像显示设备200和第三图像显示设备300预先设置为共享图像的装置。
根据实施例，第一至第三图像显示设备100、200和300可以是被安装在家庭中的同一WiFi网络区域中的图像显示设备。
根据实施例的第一图像显示设备100可显示与360度图像的第一区域相应的第一图像911。位于第一图像显示设备100左侧的第二图像显示设备200可显示与360度图像的第二区域相应的第二图像912，其中，第二区域与第一区域的左侧相邻。此外，位于第一图像显示设备100右侧的第三图像显示设备300可显示与360度图像的第三区域相应的第三图像913，其中，第三区域与第一区域的右侧相邻。
根据示例实施例，显示当第二图像显示设备200是投影仪时投影的第二图像912的屏幕的位置、第一图像显示设备100的显示器的位置、以及显示当第三图像显示设备300是投影仪时投影的第三图像913的屏幕的位置在水平方向上彼此相邻。因此，可产生在一个水平宽屏幕上显示360度图像的视觉效果。
图10是示出根据示例实施例的在一个显示器上显示的360度图像1011被划分并由多个图像显示设备100、200和300显示的示例的示图。
根据实施例，第一图像显示设备100可显示360度图像1011。当第一图像显示设备100接收到选择图标(例如，“360全景”)1015的用户输入时，第一图像显示设备100可基于控制器130的控制，经由多个图像显示设备100、200和300，通过将360度图像1011划分为图像1021、1022和1023来显示第一图像显示设备100上显示的360度图像1011。
参照图10，可由第一图像显示设备100显示与360度图像1011的中心区域相应的图像1021，可由第二图像显示设备200显示与360度图像1011的左侧区域相应的图像1022，并且可由第三图像显示设备300显示与360度图像1011的右侧区域相应的图像1023。
根据实施例，显示当第二图像显示设备200是投影仪时投影的图像1022的屏幕的位置、第一图像显示设备100的显示器的位置、以及显示当第三图像显示设备300是投影仪时投影的图像1023的屏幕的位置在水平方向上彼此相邻。因此，可产生360度图像1011被放大并被显示在水平宽屏幕上的视觉效果。
作为另一示例，根据实施例，第一图像显示设备100可显示与显示的360度图像的第一区域相应的第一图像，并且可控制第二图像显示设备200和第三图像显示设备300分别显示相应于与第一区域相邻的第二区域的第二图像以及相应于与第一区域相邻的第三区域的第三图像。
例如，响应于用户输入，第一图像显示设备100可控制第二图像显示设备200显示与360度图像的第二区域相应的第二图像，其中，第二区域在左侧方向上与第一区域相邻，并且未被显示。
此外，响应于用户输入，第一图像显示设备100可控制第三图像显示设备300显示与360度图像的第三区域相应的第三图像，其中，第三区域在右侧方向上与第一区域相邻，并且未被显示。
根据示例实施例，经由在水平方向上彼此相邻定位的多个显示器，可显示比在一个显示器上显示的360度图像具有更宽区域的360度图像。
图11是示出根据示例实施例的360度图像的显示区域被改变的示例的示图。
根据实施例，响应于改变显示的360度图像的第一区域的用户输入，第一图像显示设备100可改变第一区域的位置和尺寸中的至少一个，并且在第一显示器上显示与改变后的第一区域相应的第一图像。第一图像显示设备100可将第二区域改变为与改变后的第一区域相邻，并且可控制第二图像显示设备200在第二显示器上显示与改变后的第二区域相应的第二图像。
参照图11，根据示例实施例，第一至第三图像显示设备100、200和300可分别显示分别与360度图像的相邻区域相应的图像1111、1112和1113。
例如，当第一图像显示设备100显示第一图像1111时，第一图像显示设备100可基于控制器30的控制接收移动第一图像1111的位置的用户输入。这里，第一图像显示设备100可显示与例如沿左方向移动的区域相应的图像1121。
当第一图像显示设备100显示与沿左方向移动的区域相应的图像1121时，第二图像显示设备200和第三图像显示设备300可与改变后的第一图像1121的位置同步地分别显示分别相应于与改变后的第一图像的左侧和右侧相邻的区域的图像1122和1123。
根据实施例，当第一图像显示设备100的显示区域被移动时，第二图像显示设备200和第三图像显示设备300的显示区域也沿相同方向被移动。因此，可产生在第一至第三图像显示设备100、200和300上显示的360度图像的区域沿相同方向被同时移动的视觉效果。
图12是示出根据示例实施例的360度图像的显示倍率被改变的示例的示图。
参照图12，根据示例实施例，第一至第三图像显示设备100、200和300可分别显示分别与360度图像的相邻区域相应的图像1211、1212和1213。
例如，当第一图像显示设备100显示第一图像1211时，第一图像显示设备100可基于控制器30的控制接收放大第一图像1211的显示倍率的用户输入。这里，第一图像显示设备100可显示与基于放大倍率放大的区域相应的图像1221。
当第一图像显示设备100显示与基于放大倍率放大的区域相应的图像1221时，第二图像显示设备200和第三图像显示设备300可分别显示分别相应于与改变后的第一图像1221的左侧和右侧相邻的区域的图像1222和1223。
根据示例实施例，可放大或缩小在第一至第三图像显示设备100、200和300上显示且彼此相邻的图像1211、1212和1213。因此，可产生好像一个图像被放大或缩小的视觉效果。
图13是示出根据示例实施例的基于包括在多个图像显示设备100、200和300中的扬声器1301、1302、1303和1304的布局的示例音频输出的示图。
参照图13，根据实施例的第一图像显示设备100可包括多个扬声器1301和1302。第二图像显示设备200可包括扬声器1303，并且第三图像显示设备300可包括扬声器1304。然而，实施例不限于此。
根据示例实施例的第一图像显示设备100可基于扬声器布局信息来重建将被输出的音频信号，其中，扬声器布局信息包括：包括在第一图像显示设备100中的扬声器1301和1302以及分别包括在第二图像显示设备200和第三图像显示设备300中的扬声器1303和1304的相对位置、每个扬声器声道的定向方向、扬声器的总数、扬声器的输出性能等。
此外，根据实施例的第一图像显示设备100可基于图像信息来重建将被输出的音频信号，其中，图像信息包括显示器上显示的360度图像的内容、360度图像的显示的区域的视角、图像的放大或紧凑显示的倍率等。
此外，根据实施例的第一图像显示设备100可基于包括针对显示器的用户视点的信息等的用户信息来重建将被输出的音频信号。
参照图13，例如，第一图像显示设备100可基于用户视点的信息和包括多个扬声器1301、1302、1303和1304的位置、数量等的扬声器布局信息来重建将被输出的音频信号，其中，多个扬声器1301、1302、1303和1304包括：包括在第一图像显示设备100中的扬声器1301和1302以及分别包括在第二图像显示设备200和第三图像显示设备300中的扬声器1303和1304。第一图像显示设备100可控制多个扬声器1301、1302、1303和1304输出重建的音频信号。
根据示例实施例，当多个图像显示设备包括TV和投影仪的组合时，输出的音频信号可被重建，例如，而不限于，使得与背景声音相应的音频信号可经由包括在投影仪中的扬声器被输出并且人的语音可经由包括在电视中的扬声器被输出。
图14是示出根据示例实施例的与360度图像同步的示例音频输出处理的示图。
图像显示设备100可包括音频处理模块(例如，包括处理电路和/或程序元件)1408，其中，音频处理模块1408包括音频解码器1402、音频分析模块(例如，包括电路和/或程序元件)1403、当前点音频重建模块(例如，包括电路和/或程序元件)1404和音频渲染器(例如，包括渲染电路和/或程序元件)1407。
根据实施例的音频解码器1402可以是被配置为对输入的音频信号进行解码的模块。根据实施例的音频分析模块1403可包括基于音频信号来分析具有方向性的声源的数量和方向的各种音频解码电路和/或程序元件。
根据实施例的当前点音频重建模块1404可包括基于扬声器布局信息1405、用户信息1406、图像信息等重建与当前点图像相应的音频信号的各种电路和/或程序元件。根据实施例的音频渲染器1407可包括对被重键为与当前点相应的音频进行渲染的各种电路和/或程序元件。
此外，图像/音频同步器1409可包括通过使渲染的音频信号与经由图像渲染器1404渲染的图像信号同步来产生输出音频和输出图像的各种电路和/或程序元件。
本公开的方法可被实现为可由各种计算机工具执行的计算机指令，并且被记录在计算机可读记录介质上。计算机可读记录介质可包括程序命令、数据文件、数据结构或它们的组合。记录在计算机可读记录介质上的程序命令可为本公开专门设计和构造，或者可以是计算机软件领域中的普通技术人员已知的并可由计算机软件领域中的普通技术人员使用。计算机可读介质的示例包括存储介质，诸如，磁介质(例如，硬盘、软盘或磁带)、光学介质(例如，光盘只读存储器(CD-ROM)或数字通用盘(DVD))、磁光介质(例如，软光盘)、以及专门被配置为存储并执行程序命令的硬件装置(例如，ROM、RAM或闪存)。程序命令的示例包括可由计算机使用解释器执行的高级语言代码以及由编译器生成的机器语言代码。
应理解，本文描述的各种示例实施例应被视为仅是描述性的，而不是为了限制的目的。每个实施例中的特征或多个方面的描述通常应被认为可用于其他实施例中的其他类似特征或方面。
尽管已经参照附图描述了各种示例实施例，但是本领域中的普通技术人员将理解，在不脱离由所附权利要求及其等同物限定的本公开的精神和范围的情况下，可对其进行形式和细节上的各种改变。

Claims (15)

1.一种由第一图像显示设备执行的方法，所述方法包括：
获得360度图像；
在第一图像显示设备的第一显示器上显示与360度图像的第一区域相应的第一图像；
控制第二图像显示设备显示与360度图像的第二区域相应的第二图像，其中，第二区域与第一区域相邻。
2.如权利要求1所述的方法，其中，控制第二图像显示设备显示第二图像的步骤包括：将360度图像和区域提取信息发送到第二图像显示设备或服务器，
第二图像包括由第二图像显示设备或服务器基于区域提取信息从360度图像提取的图像。
3.如权利要求2所述的方法，其中，区域提取信息包括以下项中的至少一项：
第一区域的位置信息；
第一区域的尺寸信息；
第一区域的显示倍率信息；
360度图像的第一区域的再现点信息；
关于与第一区域相邻的区域的信息。
4.如权利要求1所述的方法，还包括：
基于接收到的针对360度图像的第一区域的输入来改变第一区域的位置、尺寸和显示倍率中的至少一个，并且基于对第一区域的改变在第一显示器上显示第一图像；
控制第二图像显示设备将与改变后的第一区域相邻的区域设置为第二区域并且显示与改变后的第二区域相应的第二图像。
5.如权利要求1所述的方法，其中，获得360度图像的步骤包括：从服务器接收360度图像，
从服务器接收的360度图像包括通过将球形360度图像映射到平面形状而产生的平面360度图像。
6.如权利要求5所述的方法，其中，获得360度图像的步骤还包括：将平面360度图像恢复为球形360度图像，并且提取与第一区域相应的第一图像。
7.一种第一图像显示设备，包括：
第一显示器；
控制器，被配置为：
获得360度图像，
在第一显示器上显示与360度图像的第一区域相应的第一图像，
控制第二图像显示设备显示与360度图像的第二区域相应的第二图像，其中，第二区域与第一区域相邻。
8.如权利要求7所述的第一图像显示设备，其中，控制器还被配置为将360度图像和区域提取信息发送到第二图像显示设备或服务器，
第二图像包括由第二图像显示设备或服务器基于区域提取信息从360度图像提取的图像。
9.如权利要求8所述的第一图像显示设备，其中，区域提取信息包括以下项中的至少一项：
第一区域的位置信息；
第一区域的尺寸信息；
第一区域的显示倍率信息；
360度图像的第一区域的再现点信息；
关于与第一区域相邻的区域的信息。
10.如权利要求7所述的第一图像显示设备，其中，
控制器还被配置为：基于接收到的针对360度图像的第一区域的输入来改变第一区域的位置、尺寸和显示倍率中的至少一个，并且基于对第一区域的改变在第一显示器上显示第一图像，
控制器还被配置为：控制第二图像显示设备将与改变后的第一区域相邻的区域设置为第二区域并且显示与改变后的第二区域相应的第二图像。
11.如权利要求7所述的第一图像显示设备，其中，控制器还被配置为从服务器接收360度图像，
从服务器接收的360度图像包括通过将球形360度图像映射到平面形状而产生的平面360度图像。
12.如权利要求11所述的第一图像显示设备，其中，控制器还被配置为将平面360度图像恢复为球形360度图像并且提取与第一区域相应的第一图像。
13.如权利要求7所述的第一图像显示设备，还包括：
至少一个扬声器，
其中，控制器还被配置为：
再现360度图像，
与360度图像的再现点同步地输出音频。
14.如权利要求13所述的第一图像显示设备，其中，控制器还被配置为基于以下项中的至少一项重建将经由第一图像显示设备的至少一个扬声器和第二图像显示设备的至少一个扬声器输出的音频信号：
所述第一图像显示设备的至少一个扬声器的位置信息、
所述第二图像显示设备的至少一个扬声器的位置信息、
用户视点的信息、
图像信息。
15.一种非暂时性计算机可读记录介质，其中，所述非暂时性计算机可读记录介质上包含有程序，其中，所述程序当被计算机运行时执行如权利要求1所述的方法。
CN201780060917.2A 2016-08-12 2017-08-11 图像显示设备及其操作方法 Active CN109792561B (zh)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
KR1020160103208A KR102525575B1 (ko) 2016-08-12 2016-08-12 영상 표시 장치 및 그 동작 방법
KR10-2016-0103208 2016-08-12
PCT/KR2017/008718 WO2018030829A1 (en) 2016-08-12 2017-08-11 Image display apparatus and operating method thereof

Publications (2)

Publication Number Publication Date
CN109792561A true CN109792561A (zh) 2019-05-21
CN109792561B CN109792561B (zh) 2022-04-19

Family

ID=61160399

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201780060917.2A Active CN109792561B (zh) 2016-08-12 2017-08-11 图像显示设备及其操作方法

Country Status (5)

Country Link
US (1) US10587869B2 (zh)
EP (1) EP3479590B1 (zh)
KR (1) KR102525575B1 (zh)
CN (1) CN109792561B (zh)
WO (1) WO2018030829A1 (zh)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN111240625A (zh) * 2020-01-09 2020-06-05 盾钰（上海）互联网科技有限公司 一种无限视觉边界的图像动态渲染的计算方法及系统

Families Citing this family (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR102589853B1 (ko) 2016-10-27 2023-10-16 삼성전자주식회사 영상 표시 장치 및 영상 표시 방법
EP3319307B1 (en) * 2016-10-27 2023-09-06 Samsung Electronics Co., Ltd. Spherical image display apparatus and method of displaying a spherical image on a planar display
KR102598082B1 (ko) * 2016-10-28 2023-11-03 삼성전자주식회사 영상 표시 장치, 모바일 장치 및 그 동작방법
EP3550825A4 (en) * 2016-12-01 2020-05-13 LG Electronics Inc. -1- IMAGE DISPLAY DEVICE AND THIS IMAGE DISPLAY SYSTEM
US20210243418A1 (en) * 2018-04-27 2021-08-05 Pcms Holdings, Inc. 360 degree multi-viewport system
US11683464B2 (en) 2018-12-28 2023-06-20 Canon Kabushiki Kaisha Electronic device, control method, and non-transitorycomputer readable medium
KR102414723B1 (ko) * 2021-12-10 2022-06-29 (주)진명아이앤씨 다중 영상 스트리밍 시스템
USD1029670S1 (en) * 2023-03-23 2024-06-04 Lange Uhren Gmbh Watch dial

Citations (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2005056295A (ja) * 2003-08-07 2005-03-03 Iwane Kenkyusho:Kk ３６０度画像変換処理装置
US20120194734A1 (en) * 2011-02-01 2012-08-02 Mcconville Ryan Patrick Video display method
US20130322843A1 (en) * 2012-06-01 2013-12-05 Hal Laboratory, Inc. Storage medium storing information processing program, information processing device, information processing system, and panoramic video display method
CN103916582A (zh) * 2013-01-07 2014-07-09 华为技术有限公司 一种图像处理方法及装置
US20150310596A1 (en) * 2014-04-24 2015-10-29 Google Inc. Automatically Generating Panorama Tours
KR20160021706A (ko) * 2015-02-03 2016-02-26 정관호 360도 공간영상 재생방법 및 그 시스템
KR20160052095A (ko) * 2014-11-04 2016-05-12 엘지전자 주식회사 파노라마 비디오 데이터를 처리하는 방법 그 장치
US20160150212A1 (en) * 2014-11-26 2016-05-26 Sony Corporation Live selective adaptive bandwidth

Family Cites Families (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP4610156B2 (ja) 2001-11-13 2011-01-12 アルスロン株式会社 パノラマ画像による道路や河川、鉄道の空間把握システム
US8453060B2 (en) 2006-08-25 2013-05-28 Microsoft Corporation Panoramic ring user interface
KR20070103347A (ko) 2007-10-03 2007-10-23 이제성 360도 파노라마 카메라의 영상컨텐츠를 이용한 고해상도광시야각 대형 디스플레이 방법
US9632648B2 (en) * 2012-07-06 2017-04-25 Lg Electronics Inc. Mobile terminal, image display device and user interface provision method using the same
KR20150000783A (ko) 2013-06-25 2015-01-05 삼성전자주식회사 멀티 스크린을 이용한 디스플레이 방법 및 장치
JP6119570B2 (ja) 2013-11-19 2017-04-26 ソニー株式会社 表示装置、表示方法およびプログラム
GB2523555B (en) * 2014-02-26 2020-03-25 Sony Interactive Entertainment Europe Ltd Image encoding and display
KR101530826B1 (ko) * 2014-08-18 2015-06-24 정관호 360도 공간영상 재생방법 및 그 시스템
US9997199B2 (en) * 2014-12-05 2018-06-12 Warner Bros. Entertainment Inc. Immersive virtual reality production and playback for storytelling content
US10038887B2 (en) * 2015-05-27 2018-07-31 Google Llc Capture and render of panoramic virtual reality content

Patent Citations (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2005056295A (ja) * 2003-08-07 2005-03-03 Iwane Kenkyusho:Kk ３６０度画像変換処理装置
US20120194734A1 (en) * 2011-02-01 2012-08-02 Mcconville Ryan Patrick Video display method
US20130322843A1 (en) * 2012-06-01 2013-12-05 Hal Laboratory, Inc. Storage medium storing information processing program, information processing device, information processing system, and panoramic video display method
CN103916582A (zh) * 2013-01-07 2014-07-09 华为技术有限公司 一种图像处理方法及装置
US20150310596A1 (en) * 2014-04-24 2015-10-29 Google Inc. Automatically Generating Panorama Tours
KR20160052095A (ko) * 2014-11-04 2016-05-12 엘지전자 주식회사 파노라마 비디오 데이터를 처리하는 방법 그 장치
US20160150212A1 (en) * 2014-11-26 2016-05-26 Sony Corporation Live selective adaptive bandwidth
KR20160021706A (ko) * 2015-02-03 2016-02-26 정관호 360도 공간영상 재생방법 및 그 시스템

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN111240625A (zh) * 2020-01-09 2020-06-05 盾钰（上海）互联网科技有限公司 一种无限视觉边界的图像动态渲染的计算方法及系统
CN111240625B (zh) * 2020-01-09 2022-03-18 盾钰（上海）互联网科技有限公司 一种无限视觉边界的图像动态渲染的计算方法及系统

Also Published As

Publication number Publication date
KR102525575B1 (ko) 2023-04-25
EP3479590A4 (en) 2019-05-08
US10587869B2 (en) 2020-03-10
EP3479590A1 (en) 2019-05-08
KR20180018169A (ko) 2018-02-21
WO2018030829A1 (en) 2018-02-15
CN109792561B (zh) 2022-04-19
US20180048886A1 (en) 2018-02-15
EP3479590B1 (en) 2021-06-09

Similar Documents

Publication Publication Date Title
CN109792561A (zh) 图像显示设备及其操作方法
US11062423B2 (en) Image display apparatus and method of operating the same
US10587903B2 (en) Display apparatus and method of displaying content
KR102575230B1 (ko) 원격제어장치 및 그 동작방법
RU2689412C2 (ru) Устройство отображения и способ отображения
US9811303B2 (en) Display apparatus, multi display system including the same, and control method thereof
CN107343215A (zh) 图像显示装置及其操作方法
CN109479162A (zh) 图像显示设备和显示图像的方法
CN108205431B (zh) 显示设备及其控制方法
EP3242267A1 (en) Image display device and method of operating the same
CN105704525B (zh) 显示设备和显示方法
US11064150B2 (en) High resolution user interface
US20160196018A1 (en) Image display apparatus and method
CN105739815A (zh) 图像显示设备和图像显示方法
KR102328121B1 (ko) 전자 장치 및 그 동작 방법
JP6960992B2 (ja) 映像表示装置及び映像表示方法
US11310441B2 (en) Electronic device for generating a background image for a display apparatus and operation method thereof
EP3032392B1 (en) Display apparatus and display method
US11336931B2 (en) Display apparatus and method of displaying content
KR20170072652A (ko) 디스플레이 장치 및 디스플레이 방법

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant