CN111699674A - 电子设备及其操作方法 - Google Patents

电子设备及其操作方法 Download PDF

Info

Publication number
CN111699674A
CN111699674A CN201980012845.3A CN201980012845A CN111699674A CN 111699674 A CN111699674 A CN 111699674A CN 201980012845 A CN201980012845 A CN 201980012845A CN 111699674 A CN111699674 A CN 111699674A
Authority
CN
China
Prior art keywords
image
display
display device
screen
display apparatus
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN201980012845.3A
Other languages
English (en)
Other versions
CN111699674B (zh
Inventor
李仁先
李润澔
梁宽植
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Samsung Electronics Co Ltd
Original Assignee
Samsung Electronics Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Samsung Electronics Co Ltd filed Critical Samsung Electronics Co Ltd
Publication of CN111699674A publication Critical patent/CN111699674A/zh
Application granted granted Critical
Publication of CN111699674B publication Critical patent/CN111699674B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00—Details of television systems
    • H04N5/222—Studio circuitry; Studio devices; Studio equipment
    • H04N5/262—Studio circuits, e.g. for mixing, switching-over, change of character of image, other special effects ; Cameras specially adapted for the electronic generation of special effects
    • H04N5/272—Means for inserting a foreground image in a background image, i.e. inlay, outlay
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/41—Structure of client; Structure of client peripherals
    • H04N21/4104—Peripherals receiving signals from specially adapted client devices
    • H04N21/4126—The peripheral being portable, e.g. PDAs or mobile phones
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/41—Structure of client; Structure of client peripherals
    • H04N21/422—Input-only peripherals, i.e. input devices connected to specially adapted client devices, e.g. global positioning system [GPS]
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/41—Structure of client; Structure of client peripherals
    • H04N21/422—Input-only peripherals, i.e. input devices connected to specially adapted client devices, e.g. global positioning system [GPS]
    • H04N21/42204—User interfaces specially adapted for controlling a client device through a remote control device; Remote control devices therefor
    • H04N21/42206—User interfaces specially adapted for controlling a client device through a remote control device; Remote control devices therefor characterized by hardware details
    • H04N21/4222—Remote control device emulator integrated into a non-television apparatus, e.g. a PDA, media center or smart toy
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/41—Structure of client; Structure of client peripherals
    • H04N21/422—Input-only peripherals, i.e. input devices connected to specially adapted client devices, e.g. global positioning system [GPS]
    • H04N21/4223—Cameras
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/44—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs
    • H04N21/44008—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs involving operations for analysing video streams, e.g. detecting features or characteristics in the video stream
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/80—Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
    • H04N21/81—Monomedia components thereof
    • H04N21/8146—Monomedia components thereof involving graphical data, e.g. 3D object, 2D graphics
    • H04N21/8153—Monomedia components thereof involving graphical data, e.g. 3D object, 2D graphics comprising still images, e.g. texture, background image
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60—Control of cameras or camera modules
    • H04N23/63—Control of cameras or camera modules by using electronic viewfinders
    • H04N23/633—Control of cameras or camera modules by using electronic viewfinders for displaying additional information relating to control or operation of the camera
    • H04N23/635—Region indicators; Field of view indicators
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60—Control of cameras or camera modules
    • H04N23/64—Computer-aided capture of images, e.g. transfer from script file into camera, check of taken image quality, advice or proposal for image composition or decision on when to take image
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60—Control of cameras or camera modules
    • H04N23/66—Remote control of cameras or camera parts, e.g. by remote control devices
    • H04N23/661—Transmitting camera control signals through networks, e.g. control via the Internet
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/80—Camera processing pipelines; Components thereof
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00—Details of television systems
    • H04N5/222—Studio circuitry; Studio devices; Studio equipment
    • H04N5/262—Studio circuits, e.g. for mixing, switching-over, change of character of image, other special effects ; Cameras specially adapted for the electronic generation of special effects
    • H04N5/2628—Alteration of picture size, shape, position or orientation, e.g. zooming, rotation, rolling, perspective, translation
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00—Details of television systems
    • H04N5/222—Studio circuitry; Studio devices; Studio equipment
    • H04N5/262—Studio circuits, e.g. for mixing, switching-over, change of character of image, other special effects ; Cameras specially adapted for the electronic generation of special effects
    • H04N5/265—Mixing
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00—Details of television systems
    • H04N5/44—Receiver circuitry for the reception of television signals according to analogue transmission standards
    • H04N5/4448—Receiver circuitry for the reception of television signals according to analogue transmission standards for frame-grabbing
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/41—Structure of client; Structure of client peripherals
    • H04N21/4104—Peripherals receiving signals from specially adapted client devices
    • H04N21/4131—Peripherals receiving signals from specially adapted client devices home appliance, e.g. lighting, air conditioning system, metering devices

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Human Computer Interaction (AREA)
  • Computer Graphics (AREA)
  • Controls And Circuits For Display Device (AREA)
  • User Interface Of Digital Computer (AREA)

Abstract

根据实施例公开了一种电子设备及其操作方法。根据实施例的电子设备包括：相机；显示器；通信接口；存储器，存储一个或多个指令；以及处理器，执行存储在存储器中的一个或多个指令，其中处理器通过执行一个或多个指令生成指示在显示装置的屏幕上显示多个标记的事件，以将所生成的事件发送给显示装置；基于根据所生成的事件而显示在显示装置的屏幕上的多个标记的识别，从相机获得的图像中确定要从中提取显示装置附近的墙壁表面的至少一个区域的图像；从所确定的图像中提取与基于所识别的多个标记而获得的形状相对应的区域；通过对所提取的区域的图像进行校正来生成要在显示装置的屏幕上显示的背景图像；以及将所生成的背景图像发送给显示装置，使得所生成的背景图像被显示在显示装置的屏幕上。

Description

电子设备及其操作方法
技术领域
各种实施例涉及一种电子设备及其操作方法，更具体地，涉及一种被配置为使显示装置能够显示墙壁表面图像的电子设备以及电子设备的操作方法。
背景技术
图像显示装置是具有显示用户观看的图像的功能的装置。用户可以经由图像显示装置观看广播节目。图像显示装置在其显示器上显示来自用户选择的广播信号的广播节目，其中，广播信号是从广播站发送的。当前，广播正在从模拟广播转变为数字广播。
数字广播是指其中发送数字图像和声音信号的广播。数字广播比模拟广播更不易受外部噪声的影响，因此数据丢失少，非常适合纠错，具有高分辨率，并提供生动的图像。此外，与模拟广播不同，数字广播能够进行双向服务。
已经提供了智能电视，智能电视除了提供数字广播功能之外还提供多种内容。智能电视不是根据用户的选择进行被动操作。相反，它旨在分析并提供用户需求而无需用户操纵。
此外，为了增强安装电视的环境的内部效果，已经提出了安装在墙壁表面上的壁挂式电视或提供框架美感的有框电视。
发明内容
技术问题
各种实施例提供了一种用于在电视的屏幕上显示墙壁表面图像以增强安装电视的环境的美感的方法和装置。
问题的解决方案
本公开提供了一种电子设备的操作方法，该操作方法包括：生成事件并将所生成的事件发送给显示装置，该事件被配置为指示在显示装置的屏幕上显示多个标记；通过对响应于所生成的事件而显示在显示装置的屏幕上的多个标记的识别，从相机获得的图像中确定要从中提取显示装置附近的墙壁表面的至少一个区域的图像；从所确定的图像中提取与基于所识别的多个标记而获得的形状相对应的区域；通过对所提取的区域的图像进行校正来生成要在显示装置的屏幕上显示的背景图像；将所生成的背景图像发送给显示装置，使得所生成的背景图像被显示在显示装置的屏幕上。
最佳方式
根据实施例，一种电子设备包括：相机；显示器；通信接口；存储器，存储一个或多个指令；以及处理器，被配置为执行存储在存储器中的一个或多个指令以：生成事件，并将所生成的事件发送给显示装置，以指示在显示装置的屏幕上显示多个标记；基于对响应于所生成的事件而显示在显示装置的屏幕上的多个标记的识别，从相机获得的图像中确定要从中提取显示装置附近的墙壁表面的至少一个区域的图像；从所确定的图像中提取与基于所识别的多个标记而获得的形状相对应的区域；通过对所提取的区域的图像进行校正来生成要在显示装置的屏幕上显示的背景图像；以及将所生成的背景图像发送给显示装置，使得所生成的背景图像被显示在显示装置的屏幕上。
处理器还可以被配置为执行一个或多个指令以：获取显示装置的屏幕的尺寸信息；以及基于所获取的尺寸信息来确定显示装置的屏幕上要显示多个标记的位置，并生成包括关于所确定的位置的信息在内的事件。
处理器还可以被配置为执行一个或多个指令以：当识别出在显示装置的屏幕上显示的多个标记时，从相机获得的图像中确定其中存在多个标记的图像，作为要从中提取背景图像的图像。
安装有显示装置的墙壁表面的至少一个区域可以包括显示装置附近的墙壁表面的左侧区域、右侧区域、上部区域和下部区域中的至少一个。
处理器还可以被配置为执行一个或多个指令以：通过执行以下至少一项来校正所提取的区域的图像：调整图像的至少一个边的长度、旋转所提取的区域的图像、以及使所提取的区域的图像对称化。
处理器还可以被配置为执行所述一个或多个指令以：通过对校正所提取的区域的图像而生成的图像和校正后的图像的对称图像进行组合，来生成背景图像。
处理器还可以被配置为执行一个或多个指令以：当所确定的图像是从显示装置附近的墙壁表面的左侧区域或右侧区域获得的图像时，通过使所获得的图像沿左方向或右方向对称化来获得对称图像；以及当所确定的图像是从显示装置附近的墙壁表面的上部区域或下部区域获得的图像时，通过使所获得的图像沿上方向或下方向对称化来获得对称图像。
处理器还可以被配置为执行一个或多个指令以：经由服务器将事件和背景图像发送给显示装置。
基于所识别的多个标记而获得的形状可以包括通过连接所识别的多个标记而获得的多边形形状。
根据实施例，一种电子设备的操作方法包括：生成指示在显示装置的屏幕上显示多个标记的事件，并将所生成的事件发送给显示装置；通过对响应于所生成的事件而显示在显示装置的屏幕上的多个标记的识别，从相机获得的图像中确定要从中提取显示装置附近的墙壁表面的至少一个区域的图像；从所确定的图像中提取与基于所识别的多个标记而获得的形状相对应的区域；通过对所提取的区域的图像进行校正来生成要在显示装置的屏幕上显示的背景图像；以及将所生成的背景图像发送给显示装置，使得所生成的背景图像被显示在显示装置的屏幕上。
根据实施例，一种计算机可读记录介质，其上记录有用于在计算机上执行显示装置的操作方法的程序。
本公开的有益效果
当根据实施例安装显示装置时，可以有效地捕获并处理墙壁表面图像以生成要在显示装置上显示的背景图像，因此可以增强其中安装显示装置的环境的美感。
附图说明
图1是用于描述根据实施例的在显示装置上显示墙壁表面图像的构思的参考图。
图2是用于描述根据实施例的在显示装置上显示墙壁表面图像的方法的参考图。
图3是用于描述根据实施例的被配置为在显示装置上显示墙壁表面图像的系统的示例的示意图。
图4是根据实施例的移动设备100、显示装置200和服务器300的框图。
图5示出了根据实施例的移动设备的操作方法。
图6是根据实施例的用于通过使用安装有显示装置的墙壁表面的图像来在显示装置上显示背景图像的移动设备、服务器和显示装置的操作流程图。
图7是根据实施例的用于通过使用安装有显示装置的墙壁表面的图像来在显示装置上显示背景图像的移动设备、服务器和显示装置的操作流程图。
图8示出了根据实施例的通过执行设备控制应用而由移动设备100提供的用户界面。
图9示出了根据实施例的在移动设备100的显示器上显示的预览图像的示例。
图10示出了根据实施例的显示装置附近的墙壁表面的要捕获的区域。
图11是用于描述根据实施例的显示装置附近的墙壁表面的要捕获的区域的尺寸的参考图。
图12是用于描述根据实施例的由移动设备执行的将标记显示事件发送给显示装置的方法的参考图。
图13是用于描述根据实施例的根据选择的要捕获的区域来确定显示标记的位置的方法的视图。
图14是用于描述根据实施例的在移动设备中显示一个或多个指引的示例的参考图。
图15是用于描述根据实施例的在移动设备中显示一个或多个指引的示例的参考图。
图16是用于描述根据实施例的捕获与显示装置相距边框厚度的区域的示例的参考图。
图17是用于描述需要对所提取的区域的图像进行校正的示例的参考图。
图18是用于描述根据实施例的当捕获的图像在X轴的负方向上偏置时区域的校正的参考图。
图19是用于描述根据实施例的当捕获的图像在X轴的正方向上偏置时区域的校正的参考图。
图20是用于描述根据实施例的当捕获的图像在Y轴的正方向上偏置时区域的校正的参考图。
图21是用于描述根据实施例的当捕获的图像在Y轴的负方向上偏置时区域的校正的参考图。
图22是用于描述根据实施例的当捕获的图像在Z轴的正方向上偏置时区域的校正的参考图。
图23是用于描述根据实施例的弯曲显示装置的应用示例的参考图。
具体实施方式
图1是用于描述根据实施例的在显示装置上显示墙壁表面图像的构思的参考图。
参考图1，显示装置200安装在墙壁表面10上。根据实施例的显示装置200可以在显示装置200的除正常操作模式以外的状态下显示墙壁表面10的区域的图像11，其中基于用户输入显示内容。在用户不操纵和使用显示装置200的状态下，显示装置200可以显示墙壁表面10的区域的图像11，从而可以增强安装显示装置200的环境的美感。此外，通过使显示装置200的边框201变瘦或者通过将边框201实现为人眼无法识别的颜色，当显示装置200未正在工作时可以向用户提供好像显示装置200不存在于墙壁表面10上的体验。提供这种效果的电视(TV)可以称为玻璃TV。
当显示装置200显示墙壁表面的图像11时，用户可以具有感觉显示装置200像墙壁表面的更真实的体验，因为实际墙壁表面10和显示装置200显示的墙壁表面的图像11更平滑地连接。在将显示装置200安装在墙壁表面10上之后，难以识别墙壁表面10的由显示装置200覆盖的区域。因此，重要的是在显示装置200上显示墙壁表面的图像11，使得在显示装置200安装在墙壁表面10上的状态下，图像11看起来尽可能自然地与显示装置200的周边区域连接。
图2是用于描述根据实施例的在显示装置上显示墙壁表面图像的方法的参考图。
参考图2，安装在墙壁表面10上的显示装置200可以显示一个或多个标记21。
移动设备100可以在移动设备100的显示器上显示一个或多个指引。移动设备100可以通过使用一个或多个指引23以及在显示装置200上显示的一个或多个标记21来捕获墙壁表面10的图像。例如，当用户移动移动设备100以将移动设备100的指引23定位在显示装置200上显示的标记21处时，移动设备100可以捕获墙壁表面的图像。当指引23定位在标记21处时，可以在由移动设备100捕获的区域的右侧部分24处识别显示装置200右侧周边的区域22的图像，因此移动设备100可以捕获墙壁表面10的区域22。区域22是显示装置200右侧周边的区域，因此，移动设备100可以通过使用区域22的捕获图像来执行适当的处理操作，以生成要在显示装置200上显示的墙壁表面图像，即背景图像。此外，区域22是与显示装置200直接相邻的区域，因此，当区域22的图像用于生成要在显示装置200上显示的背景图像时，可以生成与显示装置200的周边区域平滑地协调的图像。
在图2中捕获的显示装置200右侧周边的区域22是一个示例。要捕获的区域可以包括显示装置200的左侧区域、上部区域和下部区域中的任何一个。
此外，当捕获的图像失真时，由于倾斜地捕获了墙壁表面图像，因此移动设备100可以通过使用由从显示装置200检测到的标记获得的多边形来从捕获的图像提取区域并校正该区域。
图3是用于描述根据实施例的被配置为在显示装置上显示墙壁表面图像的系统的示例的示意图。
参考图3的(a)，根据实施例，系统可以包括移动设备100、显示装置200和服务器300。移动设备100、显示装置200和服务器300可以经由通信网络30相互通信。通信网络30可以包括根据各种通信标准的宽带网络，例如Zigbee、第三代(3G)、第三代合作伙伴计划(3GPP)、长期演进(LTE)，等等。
移动设备100可以经由服务器300从显示装置200或从服务器300接收关于显示装置200的信息(详细地是关于屏幕尺寸的信息)，并且可以基于接收到的信息生成标记显示事件。
可以经由服务器300将标记显示事件发送给显示装置200，并且当显示装置200接收到标记显示事件时，显示装置200可以响应于标记显示事件而在屏幕上显示一个或多个标记。标记可以显示在显示装置200的屏幕的各种位置上。
移动设备100可以通过使用在显示装置200上显示的标记来获得显示装置200附近的墙壁表面的图像。移动设备100可以根据在显示装置200的屏幕上显示的标记的位置来获得显示装置200的周边区域的图像。例如，当标记显示在显示装置200的左半屏幕上时，移动设备100可以获得显示装置200的左侧周边区域的图像。
移动设备100可以通过使用获得的原始图像和通过使原始图像对称化而获得的对称图像来生成要在显示装置200上显示的背景图像，并且可以将生成的背景图像经由服务器300发送给显示装置200。
当显示装置200经由服务器300接收背景图像时，显示装置200可以在屏幕上显示背景图像。
参考图3的(b)，根据实施例的系统可以包括移动设备100和显示装置200。移动设备100和显示装置200可以经由短距离无线等彼此执行通信。短距离无线通信可以包括短距离无线通信协议，例如蓝牙、蓝牙低功耗(BLE)、Wifi、Wifi直连、近场通信(NFC)、红外通信、激光束通信等。
因为不使用服务器，所以移动设备100可以从显示装置200直接接收显示装置200的屏幕信息，并且可以基于接收到的屏幕信息将生成的标记显示事件直接发送给显示装置200。
显示装置200可以响应于标记显示事件而在屏幕上显示一个或多个标记。移动设备100可以通过使用在显示装置200的屏幕上显示的标记来获得显示装置200的周边墙壁表面的图像，通过使用所获得的图像来生成背景图像，并且将生成的背景图像发送给显示装置200。
显示装置200可以接收背景图像并在屏幕上显示接收到的背景图像。
图4是根据实施例的移动设备100、显示装置200和服务器300的框图。
显示装置200可以处理从各种源接收的内容数据并显示图像。显示装置200可以通过使用射频(RF)天线从广播站接收RF信号。显示装置200可以通过基于互联网协议的通信网络来接收由内容提供服务器提供的内容。显示装置200可以经由各种端口或HDMI从与显示装置200连接的外部设备接收内容。外部设备可以包括例如机顶盒、游戏设备、BD播放器、PC、USB等。此外，显示装置200可以从与显示装置200连接的移动设备接收内容以用于通信或可以从存储在显示装置200中或用于本地访问而连接的存储器中获得内容数据。
显示装置200可以包括显示器210、通信接口220、传感器230和控制器240。
显示器210可以在控制器240的控制下在屏幕上显示从各种源接收的内容。各种源可以包括例如通信接口220、存储器250以及输入器/输出器。显示器210可以包括PDP、LCD、OLED、柔性显示器等。此外，显示器210可以包括三维(3D)显示器。此外，显示器210可以包括触摸屏，该触摸屏可以用作输入设备以及输出设备。
通信接口220可以在控制器240的控制下将显示装置200与外部设备(例如，移动设备100或服务器300)进行连接。与显示装置的性能和结构相对应，通信接口220可以包括无线LAN、蓝牙和有线以太网中的一种或其组合。除了蓝牙之外，通信接口220还可以包括其他短距离通信接口。例如，通信接口220还可以包括NFC和BLE。
传感器230可以感测用户的语音、用户的图像或用户的交互，并且可以包括被配置为接收用户的发出语音的麦克风，被配置为接收在相机的识别范围内的与用户的动作(动作包括手势)相对应的图像的相机部分，以及被配置为根据用户输入接收从外部遥控设备接收的光信号(包括控制信号)的光接收器。传感器230可以经由光接收器感测来自遥控设备的命令或控制信号，并且可以将感测的命令或控制信号发送给控制器240。遥控设备可以被实现为用于控制显示装置200的各种类型的设备。例如，可以将遥控设备实现为遥控器或蜂窝电话。
存储器250可以存储用于在控制器240的控制下操作和控制显示装置200的各种数据、程序或应用。存储器250可以存储用于控制显示装置200和控制器的操作系统、最初从制造商提供或从外部下载的应用、与应用相关的图形用户界面(GUI)、用于提供GUI的对象(例如，图像、文本、图标、按钮等)、用户信息、文档、数据库或相关数据。
存储器250可以包括安装在显示装置200中的ROM、RAM或存储卡(例如，微型SD卡或USB存储器(未示出))。此外，存储器200可以包括非易失性存储器、易失性存储器、硬盘驱动器(HDD)或固态驱动器(SSD)。
具体地，根据实施例，存储器250可以包括用于响应于移动设备100或服务器300的请求而发送关于显示装置200的信息的一个或多个指令。关于显示装置200的信息可以包括显示装置200的尺寸信息，详细地，可以包括显示装置200的屏幕尺寸信息。
根据实施例，存储器250可以包括用于从移动设备100或服务器300接收标记显示事件并且响应于标记显示事件而在显示器上显示一个或多个标记的一个或多个指令。
根据实施例，存储器250可以包括用于从移动设备100或服务器300接收背景图像并且在显示器上显示背景图像的一个或多个指令。背景图像可以包括通过使用安装有显示装置200的墙壁表面的周边区域而生成的图像。
控制器240可以控制显示装置200的总体操作以及显示装置200的组件之间的信号流，并且可以处理数据。当存在用户输入或满足预设和存储的条件时，控制器240可以执行存储在存储器250中的操作系统(OS)和各种应用。
用作控制器240的处理器可以包括用于处理与视频相对应的图形的图形处理单元(未示出)。处理器可以被实现为其中集成了核(未示出)和GPU(未示出)的片上系统(SoC)。处理器可以包括单核、双核、三核、四核和多核。
此外，处理器可以包括多个处理器。例如，处理器可以被实现为以休眠模式操作的主处理器(未示出)和子处理器(未示出)。
根据实施例的控制器240可以响应于来自移动设备100或服务器300的请求，来执行存储在存储器250中的一个或多个指令以发送关于显示装置200的信息。
根据实施例的控制器240可以执行存储在存储器250中的一个或多个指令，以从移动设备100或服务器300接收标记显示事件，并响应于标记显示事件而在显示器上显示一个或多个标记。
根据实施例的控制器240可以执行存储在存储器250中的一个或多个指令以从移动设备100或服务器300接收背景图像并将背景图像显示在显示器上。
显示装置200还可以包括输入器/输出器，输入器/输出器被配置为在控制器240的控制下从显示装置200的外部接收视频(例如，图像等)、音频(例如，语音、音乐等)和附加信息(例如，EPG等)。输入器/输出器可以包括高清多媒体接口(HDMI)端口、组件插孔、PC端口以及USB端口中的一个或其组合。根据实施例的显示装置200可以包括TV，但是，这是实施例。显示装置200可以被实现为包括显示器的电子设备。例如，显示装置200可以被实现为各种电子设备，例如台式计算机、数字广播终端等。显示装置200不仅可以被实现为平面显示装置，而且还可以被实现为屏幕具有曲率的弯曲显示装置或曲率可调整的柔性显示装置。
此外，显示装置200可以电连接到具有调谐器部分的附加外部设备(例如，机顶盒(未示出))。例如，显示装置200可以被实现为模拟TV、数字TV、3D-TV、智能TV、LED TV、OLEDTV、等离子TV、监视器等。然而，本领域普通技术人员可以理解的是，显示装置200不限于此。
同时，示出的显示装置200的框图是根据实施例的框图。可以根据实际显示装置200的规格来集成、添加或省略框图的各组件。换句话说，根据需要，可以将两个或更多个组件集成为一个组件，或者可以将一个组件分为两个组件。此外，说明了由每个框执行的功能以描述实施例，并且特定的操作或设备不对本公开的权利要求的范围进行限制。
服务器300可以是被配置为响应于用户(客户端)的请求而执行用于提供服务的服务器程序的计算设备。
服务器300可以包括通信接口310和控制器320。
通信接口310可以在控制器320的控制下将服务器300与外部设备(例如，移动设备100或显示装置200)进行连接。与显示装置的性能和结构相对应，通信接口220可以包括无线LAN、蓝牙和有线以太网中的一种或其组合。
存储器330可以存储用于在控制器320的控制下操作和控制服务器300的各种数据、程序或应用。存储器330可以存储用于控制服务器300和控制器的操作系统、最初从制造商处提供或从外部下载的应用、与应用相关的图形用户界面(GUI)、用于提供GUI的对象(例如，图像、文本、图标、按钮等)、用户信息、文档、数据库或相关数据。
存储器330可以包括安装在服务器300中的ROM、RAM或存储卡(例如，微型SD卡或USB存储器(未示出))。此外，存储器330可以包括非易失性存储器、易失性存储器、HDD或SSD。
特别地，根据实施例，存储器330可以包括用于响应于来自移动设备100的请求而将用于控制一个或多个假定的设备的应用发送给移动设备100的一个或多个指令。设备控制应用可以用于控制显示装置200，具体地，设备控制应用可以包括用于设置显示装置200的背景图像的一个或多个指令。
根据实施例，存储器330可以包括用于响应于移动设备100的请求而发送关于显示装置200的信息的一个或多个指令。关于显示装置200的信息可以包括显示装置200的尺寸信息，详细地，可以包括显示装置200的屏幕尺寸信息。
根据实施例，存储器330可以包括用于从移动设备100接收标记显示事件并将标记显示事件发送给显示装置200的一个或多个指令。
根据实施例，存储器330可以包括用于从移动设备100接收背景图像并将背景图像发送给显示装置200的一个或多个指令。背景图像可以包括通过使用安装有显示装置200的墙壁表面的周边区域而生成的图像。
控制器320可以控制服务器300的总体操作以及服务器300的组件之间的信号流，并且可以处理数据。当存在用户输入或满足预设和存储的条件时，控制器320可以执行存储在存储器250中的OS和各种应用。
用作控制器320的处理器可以包括用于处理与视频相对应的图形的图形处理单元(未示出)。处理器可以被实现为SoC，其中核(未示出)和GPU(未示出)被集成。处理器可以包括单核、双核、三核、四核和多核。
此外，处理器可以包括多个处理器。例如，处理器可以被实现为以休眠模式操作的主处理器(未示出)和子处理器(未示出)。
根据实施例的控制器320可以响应于来自移动设备100的请求，执行存储在存储器330中的一个或多个指令，以将用于控制一个或多个家用电器的应用发送给移动设备100。设备控制应用可以用于控制显示装置200，具体地，设备控制应用可以包括用于设置显示装置200的背景图像的一个或多个指令。
根据实施例的控制器320可以响应于来自移动设备100的请求，执行存储在存储器330中的一个或多个指令以发送关于显示装置200的信息。关于显示装置200的信息可以包括显示装置200的尺寸信息，详细地，包括显示装置200的屏幕尺寸信息。
根据实施例的控制器320可以执行存储在存储器330中的一个或多个指令以从移动设备100接收标记显示事件并将标记显示事件发送给显示装置200。
根据实施例的控制器320可以执行存储在存储器330中的一个或多个指令以从移动设备100接收背景图像并将背景图像发送给显示装置200。背景图像可以包括通过使用安装有显示装置200的墙壁表面的周边区域而生成的图像。
移动设备100可以捕获安装有显示装置200的墙壁表面的图像，基于所捕获的图像生成要显示在显示装置200的屏幕上的背景图像，并经由服务器300将所生成的图像发送给显示装置200。
移动设备100可以包括成像传感器电路110、通信接口120、显示器130、存储器140和控制器150。
成像传感器电路110可以接收在成像传感器的识别范围内的与用户的运动(运动包括手势)相对应的图像(例如，连续帧)。成像传感器电路110可以被实现为相机。根据实施例的成像传感器电路110可以捕获指示要由显示装置200显示的墙壁表面的图像。
通信接口120可以在控制器150的控制下将移动设备100与外部设备(例如，显示装置200或服务器300)进行连接。与移动设备的性能和结构相对应，通信接口120可以包括无线LAN、蓝牙和有线以太网中的一种或其组合。通信接口120可以详细地包括移动通信器和子通信器。
移动通信器可以根据诸如Zigbee、3G、3GPP、LTE等的各种通信标准来执行宽带网络。移动通信器可以用于与服务器300的通信。
子通信器可以通过使用诸如蓝牙、BLE、Wifi、NFC、红外通信、激光束通信等的短距离无线通信协议来执行与周边设备的通信。子通信器可以用于与显示装置200通信。
显示器130可以在控制器150的控制下在屏幕上显示从各种源接收到的内容。各种源可以包括例如通信接口120、存储器140和输入器/输出器。此外，显示器130可以包括触摸屏，该触摸屏可以被用作输入设备以及输出设备。
存储器140可以存储用于在控制器150的控制下操作和控制移动设备100的各种数据、程序或应用。存储器140可以存储用于控制移动设备100和控制器的操作系统、最初从制造商提供或从外部下载的应用、与应用相关的GUI、用于提供GUI的对象(例如，图像、文本、图标、按钮等)、用户信息、文档、数据库、或相关数据。
存储器140可以包括安装在移动设备100中的ROM、RAM或存储卡(例如，微型SD卡或USB存储器(未示出))。
具体地，根据实施例，存储器140可以包括用于将用于下载用于控制家用电器的应用的请求发送给服务器300并且接收并存储设备控制应用作为对该请求的响应的一个或多个指令。设备控制应用可以包括用于控制显示装置200的一个或多个指令，具体地，包括用于设置显示装置200的背景图像的一个或多个指令。
根据实施例，存储器140可以包括用于将关于显示装置200的信息发送给移动设备100或服务器300的一个或多个指令。关于显示装置200的信息可以包括显示装置200的尺寸信息，详细地，包括显示装置200的屏幕尺寸信息。
根据实施例，存储器140可以包括用于通过使用关于显示装置200的信息来生成标记显示事件并将标记显示事件发送给移动设备100或服务器300的一个或多个指令。标记显示事件可以包括关于根据显示装置200的屏幕尺寸要在显示装置的屏幕上显示的一个或多个标记的位置的信息。
根据实施例，存储器140可以包括用于以下操作的一个或多个指令：通过使用响应于标记显示事件而在显示装置200的屏幕上显示的一个或多个标记来获得安装有显示装置200的墙壁表面的区域的图像，处理所获得的图像以生成要在显示装置200的屏幕上显示的背景图像，并将背景图像发送给显示装置200或服务器300。
根据实施例，存储器140可以包括用于以下操作的一个或多个指令：生成引导多个标记在显示装置的屏幕上进行显示的事件并且将该事件发送给显示装置；基于对响应于所生成的事件而显示在显示装置的屏幕上的多个标记进行识别，从相机获得的图像中确定至少要从中提取显示装置附近的墙壁表面的区域的图像；从所确定的图像中提取与基于所识别的多个标记而获得的形状相对应的区域；通过对所提取的区域的图像进行校正来生成要在显示装置的屏幕上显示的背景图像；以及将所生成的背景图像发送给显示装置，以供显示装置在屏幕上显示所生成的背景图像。可以通过调整所提取的区域的图像的一个或多个边的长度、旋转所提取的区域的图像、获得所提取的区域的对称区域等来执行对所提取的区域的图像的校正。
控制器150可以控制移动设备100的总体操作和移动设备100的组件之间的信号流，并且可以处理数据。当存在用户输入或满足预设和存储的条件时，控制器150可以执行存储在存储器140中的OS和各种应用。
用作控制器150的处理器可以包括用于处理与视频相对应的图形的图形处理单元(未示出)。处理器可以被实现为SoC，其中核(未示出)和GPU(未示出)被集成。处理器可以包括单核、双核、三核、四核和多核。
此外，处理器可以包括多个处理器。例如，处理器可以被实现为以休眠模式操作的主处理器(未示出)和子处理器(未示出)。
根据实施例的控制器150可以执行存储在存储器140中的一个或多个指令，以将用于下载用于控制家用电器的应用的请求发送给服务器300，并根据该请求接收并存储设备控制应用。设备控制应用可以包括用于控制显示装置200的一个或多个指令，具体地，包括用于设置显示装置200的背景图像的一个或多个指令。
根据实施例的控制器150可以执行存储在存储器140中的一个或多个指令，以将关于显示装置200的信息发送给移动设备100或服务器300。关于显示装置200的信息可以包括显示装置200的尺寸信息，详细地，包括显示装置200的屏幕尺寸信息。
根据实施例的控制器150可以执行存储在存储器140中的一个或多个指令，以通过使用关于显示装置200的信息来生成标记显示事件，并将标记显示事件发送给移动设备100或服务器300。标记显示事件可以包括关于根据显示装置200的屏幕尺寸在显示装置的屏幕上显示一个或多个标记的位置的信息。
根据实施例的控制器150可以执行存储在存储器140中的一个或多个指令以：通过使用响应于标记显示事件而在显示装置200的屏幕上显示的一个或多个标记来获得安装有显示装置200的墙壁表面的区域的图像，通过处理所获得的图像来生成要在显示装置200的屏幕上显示的背景图像，并且将背景图像发送给显示装置200或服务器300。
根据实施例的控制器150可以执行存储在存储器140中的一个或多个指令以：从所获得的图像中提取与通过连接在显示装置200的屏幕上显示的一个或多个标记而获得的多边形相对应的形状的区域，校正所获得的区域的图像，并通过使用校正后的图像来生成要在显示装置的屏幕上显示的背景图像。可以通过调整所提取的区域的图像的一个或多个边的长度、旋转所提取的区域的图像、获得所提取的区域的对称区域等来执行对所提取的区域的图像的校正。
同时，示出的移动设备100的框图是根据实施例的框图。可以根据实际移动设备100的规格集成、添加或省略框图的组件。也就是说，根据需要，可以将两个或更多个组件集成为一个组件，或者可以将一个组件划分为两个组件。此外，说明了由每个框执行的功能以描述实施例，并且特定的操作或设备不限制本公开的权利要求的范围。
根据实施例的移动设备100可以被实现为各种电子设备，例如蜂窝电话、平板PC、数字相机、便携式摄像机、膝上型计算机、平板PC、电子书终端、数字广播终端、个人数字助理(PDA)、便携式多媒体播放器(PMP)、导航设备、MP3播放器、可穿戴设备等。
图5示出了根据实施例的移动设备的操作方法。
参考图5，在操作S510中，移动设备100可以生成指示在显示装置200的屏幕上显示一个或多个标记的事件，并且可以将所生成的事件发送给显示设备200。
根据实施例，移动设备100可以参考显示装置200的屏幕尺寸信息来确定要在显示装置200的屏幕上显示的一个或多个标记的位置。
根据实施例，移动设备100可以从用户、从显示装置200或从服务器300接收显示装置200的屏幕尺寸信息。
根据实施例，移动设备100可以生成包括一个或多个标记的确定的位置的标记显示事件，并将所生成的标记显示事件发送给显示装置200。
根据实施例，移动设备100可以将标记显示事件直接发送给显示装置200，或者可以经由服务器300将标记显示事件发送给显示装置200。
在操作S520中，移动设备100可以基于对响应于所生成的标记显示事件而显示在显示装置的屏幕上的一个或多个标记进行识别，从通过使用相机获得的图像中确定要从中提取显示装置200附近的墙壁表面的至少一部分的图像。
根据实施例，移动设备100可以通过使用在显示装置的屏幕上显示的一个或多个标记以及在移动设备的显示器上显示的一个或多个指引，来从相机获得的图像中确定要从中提取显示装置200附近的墙壁表面的至少一个区域的图像。
在操作S530中，移动设备100可以从所确定的图像中提取与基于显示在显示装置200的屏幕上的一个或多个标记而获得的形状相对应的区域。
在操作S540中，移动设备100可以对所提取的区域的图像进行校正并生成要在显示装置的屏幕上显示的背景图像。
根据实施例，移动设备100可以对所提取的区域的图像进行校正，并且使用校正后的图像和校正后的图像的对称图像来生成背景图像。
可以通过调整所提取的区域的图像的一个或多个边(边缘)的长度、旋转所提取的区域的图像、获得所提取的区域的对称区域等中的至少一项来执行对所提取的区域的图像的校正。
在操作S550中，移动设备100可以将所生成的背景图像发送给显示装置，使得所生成的背景图像显示在显示装置的屏幕上。
根据实施例，移动设备100可以将所生成的背景图像直接发送给显示装置200，或者可以经由服务器300将所生成的背景图像发送给显示装置200。
图6和图7是根据实施例的用于通过使用安装有显示装置的墙壁表面的图像来在显示装置上显示背景图像的移动设备、服务器和显示装置的操作流程图。
参考图6，在操作S705中，移动设备100可以下载并安装设备控制应用，并且在操作S710中，服务器300可以将设备控制应用发送给移动设备100。
当移动设备100请求从服务器300下载设备控制应用时，服务器可以将设备控制应用发送给移动设备100，并且移动设备100可以接收并安装设备控制应用。设备控制应用可以包括用于控制各种家用电器设备(例如冰箱、显示装置、洗衣机、音频设备等)的应用。
在操作S715中，移动设备100可以执行安装的设备控制应用。
在操作S720中，移动设备100可以接收用于选择背景屏幕设置菜单的用户输入。
图8示出了根据实施例的通过执行设备控制应用由移动设备100提供的用户界面。
参考图8，由移动设备100执行的设备控制应用的第一用户界面810可以接收用于选择要控制的设备的用户输入。第一用户界面810可以将显示装置811、音频设备812、洗衣机813和冰箱814显示为要控制的设备，并且用户可以选择所显示的设备之一。
当用户选择显示装置811时，移动设备100可以输出第二用户界面820。第二用户界面820可以显示与控制显示装置有关的菜单项，并且菜单项之一可以是背景屏幕设置项821。背景屏幕设置项821可以是菜单项，通过该菜单项可以将显示装置设置为在显示装置不基于用户操纵操作时显示与安装有显示装置的墙壁表面的图像相同的图像。
当用户选择了背景屏幕设置项821时，移动设备100可以输出第三用户界面830。第三用户界面830可以包括输入窗口831，通过该输入窗口831可以输入显示装置的型号名称。移动设备100可以通过输入窗口831接收显示装置的型号名称。
返回到操作S725，移动设备100可以请求并获得显示装置的屏幕信息。显示装置的屏幕信息可以包括显示装置200的屏幕的尺寸。显示装置的屏幕信息可以用于确定要在显示装置的屏幕上显示的一个或多个标记的位置。显示装置的屏幕信息可以包括在显示装置的产品信息中，并且可以通过使用显示装置的型号名称来获得。
移动设备100可以通过使用通过第三用户界面830接收的显示装置的型号名称来获得显示装置的屏幕信息。
在操作S730中，根据实施例，移动设备100可以将显示装置的型号名称发送给服务器300，并且可以从服务器300接收显示装置的屏幕信息，该屏幕信息与显示装置的型号名称相对应。
在操作S735中，根据另一实施例，服务器300可以将从移动设备100接收的显示装置的型号名称发送给显示装置200，并且显示装置200可以经由服务器300向移动设备100发送显示装置的屏幕信息，该屏幕信息与显示装置的型号名称相对应。
根据另一实施例，移动设备100可以存储显示装置的屏幕信息，该屏幕信息与显示装置的型号名称相对应，因此，可以在不请求服务器300的情况下获得显示装置的屏幕信息。
在操作S740中，移动设备100可以选择安装有显示装置200的墙壁表面的图像的区域。在获得显示装置的屏幕信息之后，可以将移动设备100转换为照片捕获模式。
当用户定位移动设备100以获得安装有显示装置200的墙壁表面的图像时，移动设备100的相机可以感测包括显示装置200并且安装有显示装置200的墙壁表面的图像，并且移动设备100的显示器可以将包括显示装置200的墙壁表面的图像显示为预览图像。此外，移动设备100可以在预览图像上显示要捕获的区域的指引线。此外，移动设备100可以显示要捕获的多个区域的指引线，并且可以从用户接收选择一个区域的输入。将参考图9至图11描述对要经由移动设备100捕获的区域进行选择的方法。
图9示出了根据实施例的显示在移动设备100的显示器上的预览图像的示例。
参考图9，移动设备100可以通过使用相机获得安装有显示装置200的墙壁表面的图像，并将所获得的图像显示在显示器上作为预览图像900。此外，显示器100可以在显示的预览图像900上显示用于选择要捕获的区域的指引线。在图9中，在预览图像900上显示了表示显示装置200的右侧区域A的指引线910，表示显示装置200的上部区域B的指引线920和表示显示装置200的左侧区域C的指引线930。用户可以选择指引线910、920和930之一来选择墙壁表面的图像区域(要捕获的图像区域)。
移动设备100可以不同地确定墙壁表面的要捕获的区域。
根据实施例，移动设备100可以将墙壁表面的要捕获的区域确定为默认。
根据实施例，如图9所示，移动设备100可以显示要被捕获的墙壁表面的区域，使得用户可以选择区域。移动设备100可以根据对墙壁表面的要捕获的区域的选择来确定要在显示装置上显示的标记的位置，并且可以确定到显示装置的包括关于标记的位置的信息的事件。
图10示出了根据实施例的显示装置附近的墙壁表面的要捕获的区域。
图10的1000A示出了根据实施例的在立式显示装置200的情况下捕获显示装置200附近的墙壁表面的右侧区域、上部区域和左侧区域的墙壁表面图像的示例。当显示装置200的屏幕尺寸是(宽度X，高度Y)时，可以将要捕获的左侧区域或右侧区域的尺寸确定为(宽度X/2，高度Y)，并且可以将要捕获的上部区域的尺寸确定为(宽度X，高度Y/2)。区域A、B和C中的每个与显示装置200的屏幕尺寸的一半相对应。因此，可以通过将捕获的区域的尺寸加倍来生成要在显示装置200的屏幕上显示的背景图像。
图10的1000B示出了根据实施例的在墙壁挂式显示装置200的情况下捕获显示装置200附近的墙壁表面的左侧区域、右侧区域、上部区域和下部区域的墙壁表面图像的示例。
图11是根据实施例的用于描述显示装置附近的墙壁表面的要捕获的区域的尺寸的参考图。
图11的1100A示出了根据实施例的捕获显示装置200附近的墙壁表面的左侧区域、右侧区域、上部区域和下部区域的墙壁表面图像的示例。当显示装置200的屏幕尺寸是(宽度X，高度Y)时，可以将要捕获的左侧区域或右侧区域的尺寸确定为(宽度X/3，高度Y)，并且将要捕获的上部区域或下部区域的尺寸确定为(宽度X，高度Y/3)。区域A、B、C和D中的每一个与显示装置200的屏幕尺寸的三分之一相对应。因此，可以通过将捕获的区域的尺寸增大为三倍来生成要在显示装置200的屏幕上显示的背景图像。
图11的1100B示出了根据实施例的捕获显示装置200附近的墙壁表面的左侧区域、右侧区域、上部区域和下部区域的墙壁表面图像的示例。当显示装置200的屏幕尺寸是(宽度X，高度Y)时，可以将要捕获的左侧区域或右侧区域的尺寸确定为(宽度X/4，高度Y)，并且将要捕获的上部区域或下部区域的尺寸确定为(宽度X，高度Y/4)。区域A、B、C和D中的每一个与显示装置200的屏幕尺寸的四分之一相对应。因此，可以通过将捕获的区域的尺寸增大为四倍来生成要在显示装置200的屏幕上显示的背景图像。
在操作S745中，移动设备100可以根据对要捕获的区域的选择来生成标记显示事件，并将所生成的标记显示事件发送给服务器300。在操作S750中，服务器300可以将从移动设备100接收的标记显示事件发送给显示装置200。在操作S755中，显示装置200可以根据从服务器300接收的标记显示事件在显示屏幕上显示一个或多个标记。
参考图12和图13描述操作S745、S750和S755的详细操作。
图12是根据实施例的用于描述由移动设备执行的将标记显示事件发送给显示装置的方法的参考图。
参考图12，移动设备100可以通过使用在操作S725中获得的显示屏幕信息和在操作S740中选择的要捕获的区域来生成标记显示事件1200。标记显示事件是指用于指示显示装置200在显示屏幕上显示一个或多个标记的事件。标记显示事件可以包括用于显示装置200在显示屏幕上显示一个或多个标记的命令以及关于要在显示屏幕上显示的一个或多个标记的位置的信息。移动设备100可以将所生成的标记显示事件1200直接发送给显示装置200，或者经由服务器300将所生成的标记显示事件1200发送给显示装置200。已经接收到标记显示事件1200的显示装置200可以根据关于包括在标记显示事件中的一个或多个标记的位置的信息，在显示屏幕上显示一个或多个标记1201、1202、1203和1204。可以根据在操作S740中选择的要捕获的区域来改变关于一个或多个标记的位置的信息。如图12A所示，当要捕获显示装置200的右侧墙壁表面的图像时，一个或多个标记可以显示在显示装置200的显示屏幕的右半边上。
在图12所示的示例中，标记以正方形形状显示。然而，标记可以以各种形状显示，例如圆形或三角形形状。
图13是根据实施例的用于描述根据选择的要捕获的区域来确定显示标记的位置的方法的视图。
参考图13，当移动设备100选择区域A作为要捕获的区域时，墙壁表面的对应区域可以是区域A'。移动设备100可以将一个或多个标记的位置确定为显示装置200的屏幕的右半边，以便捕获区域A'的图像。也就是说，当选择区域A时，移动设备100可以将显示标记的位置确定为m1、m2、m3和m4。此外，当选择区域B时，移动设备100可以将显示标记的位置确定为m1、m6、m9和m10，以便在显示装置的屏幕的上半边上显示一个或多个标记。此外，当选择区域C时，移动设备100可以将显示标记的位置确定为m5、m6、m7和m8，以便在显示装置的屏幕的左半边上显示一个或多个标记。
在图13所示的示例中，要捕获的区域被确定为显示装置的屏幕的一半，因此，多个标记被显示在与显示装置的屏幕的一半相对应的位置处。然而，当要捕获的区域与显示装置的屏幕的三分之一或四分之一相对应时，可以相应地改变标记的位置。
再次在图7的操作S760中，移动设备100可以通过识别在显示装置200上显示的多个标记来获得显示装置的周边图像。详细地，移动设备100可以基于对响应于标记显示事件而显示在显示装置的屏幕上的一个或多个标记进行识别，从通过使用相机获得的图像中确定要从中提取显示装置附近的墙壁表面的至少一个区域的图像。
根据实施例，如图12所示，当标记被显示在显示装置200上时，用户可以观看标记并移动移动设备100，以便标记定位在移动设备100的屏幕的左半边上，使得显示装置200的右侧区域1210定位在移动装置100的预览图像的右半边上。在这种情况下，移动装置100可以响应于捕获图像的用户命令来捕获图像。
根据另一实施例，当用户观看显示装置200的标记并移动移动设备100使得标记定位在移动设备100的屏幕的左半边上时，移动设备100的成像传感器可以识别在显示装置200上显示的标记，并且当完成标记的识别时，移动设备100可以自动地捕获墙壁表面图像。移动设备100可以通过使用基于特征点匹配的标记识别图像处理技术将标记图像的预先存储的特征点与从显示在显示装置200上的标记提取的特征点进行比较来识别标记。
根据另一实施例，为了准确地捕获图像，移动设备100可以在显示在移动设备100的显示屏幕上的预览图像上显示一个或多个指引。当用户移动移动设备100使得预览图像上的指引被定位在显示装置200的显示屏幕上显示的一个或多个标记处时，移动设备100的成像传感器可以在识别出一个或多个标记时捕获壁表面图像。将参考图14至图16描述该方面。
图14是根据实施例的用于描述在移动设备中显示一个或多个指引的示例的参考图。
参考图14，移动设备100可以在预览图像上显示一个或多个指引1401、1402、1403和1404，以帮助识别在显示装置200的屏幕上显示的标记1201、1202、1203和1204。标记可以显示在显示装置200的右半屏幕上，并且指引可以显示在移动设备100的预览图像的左半部分上，使得移动设备100可以捕获显示装置200的右侧墙壁表面的图像1210。当用户分别将预览图像上的指引1401、1402、1403和1404定位在显示在显示装置200的屏幕上的标记1201、1202、1203和1204处时，可以在显示在移动设备100的屏幕上的预览图像的右半区域1220处识别显示装置200的右侧墙壁表面的图像120。因此，当移动设备100的成像传感器在这种状态下通过对标记1201、1202、1203和1204进行识别来捕获图像时，可以获得右侧墙壁表面的图像1210。
此外，为了向用户提供帮助，移动设备可以在预览图像上显示<请将屏幕上显示的指引定位在显示装置上显示的标记处>的消息1400。
此外，在图14所示的示例中，在移动设备100的屏幕上显示的标记的数量是四个。然而，这仅是示例，标记的数量可以是至少一个。
图15是用于描述根据实施例的在移动设备中显示一个或多个指引的示例的参考图。
参考图15，移动设备100可以在预览图像上显示一个或多个指引1511、1512、1513和1514，以帮助识别在显示装置200的屏幕上显示的标记1501、1502、1503和1504。可以在显示装置200的上半屏幕上显示标记，并且可以在移动设备100的预览图像的下半边显示指引1511至1514，使得移动设备100可以捕获显示装置200的上部墙壁表面的图像1510。当用户将预览图像上的指引1511、1512、1513和1514分别定位在显示在显示装置200的屏幕上的标记1501、1502、1503和1504处时，可以在显示在移动设备100的屏幕上的预览图像的右半区域1510处识别显示装置200的上部墙壁表面的图像1500。因此，当移动设备100的成像传感器在这种状态下捕获图像时，可以获得上部墙壁表面的图像1500。
返回到操作S765，移动设备100可以从所确定的图像提取与基于多个标记而获得的形状相对应的区域。基于识别出的多个标记而获得的形状可以包括通过连接多个标记而获得的多边形形状。
在操作S770中，移动设备100可以通过对所提取的区域的图像进行校正来生成要在显示装置的屏幕上显示的背景图像。
在操作S775中，移动设备100可以将所生成的背景图像发送给服务器300或显示装置200。
在操作S780中，服务器300可以从移动设备100接收背景图像，并将背景图像发送给显示装置200。
在操作S785中，当显示装置200从服务器300接收背景图像时，显示装置200可以在显示装置200的除正常操作状态以外的状态下将背景图像显示在屏幕上。
参考图16至图23描述操作S765和S770的详细操作。
根据实施例，由移动设备100用来生成与墙壁表面协调的自然背景图像的墙壁表面图像可以不是与显示装置200直接相邻的墙壁表面图像。相反，如图16所示，移动设备100从与显示装置200的边框的端部相距距离d的区域获得墙壁表面图像，该距离d与显示装置200的边框的厚度d相对应。
此外，用户可能通过倾斜地定位移动设备来捕获安装有显示装置的墙壁表面的周边区域，而不是在墙壁表面的前方捕获墙壁表面的周边区域。当通过使用如上所述捕获的图像生成要在显示装置上显示的背景图像时，生成的背景图像可能与墙壁表面不协调。因此，需要一种通过考虑该方面来校正图像的方法。
图17是用于描述需要对所提取的区域的图像进行校正的示例的参考图。
参考图17，当用户通过使用移动设备100在安装有显示装置200的墙壁的前方捕获墙壁表面时，用户可能相对于x轴倾斜地定位移动设备100来捕获墙壁表面，而不是将移动设备100定位在墙壁表面的正前方。在这种情况下，图像1700可以显示在移动设备100的屏幕上。因此，在这种状态下从显示装置200的左侧墙壁表面的区域1710捕获的图像1720可能失真。也就是说，关于图像1720，布置在图像1720的右边的砖的厚度w1可能不同于布置在图像1720的左边的砖的厚度w2。通过基于右边使图像1720对称化而获得的第一图像1730可以被布置在背景图像区域的左边，并且通过基于右边使第一图像1730对称化而获得的第二图像1740可以被布置在背景图像的右边，以获得背景图像。然而，因为最初捕获的图像1720是失真的，所以关于最终生成的背景图像1750，在右边缘或左边缘处的砖的厚度为w1，而在中央区域处的砖的厚度为w2。因此，示出了生成的图像是失真的。
因此，在下文中，参考图18至图23，描述了通过在各种情况下校正失真图像来生成背景图像的方法。
图18是用于描述根据实施例的当捕获的图像在X轴的负方向上偏置时区域的校正的参考图。
参考图18，当用户通过使用移动设备100在安装有显示装置200的墙壁的前方捕获墙壁表面时，在捕获墙壁表面时用户可能未将移动设备100定位在墙壁正前方并可能将移动设备100相对于x轴倾斜地定位，从而经由移动设备100的相机生成图像1800。
移动设备100可以通过使用在显示装置200上显示的标记1801、1802、1803和1804捕获包括显示装置200的左侧周边区域的区域1820来获得图像1830。这里，移动设备100可以从所捕获的图像1830提取与通过连接标记1801、1802、1803和1804而获得的多边形1810的形状相对应的区域1840。所提取的区域1840可以具有长度为h2的右边和长度为h1的左边，长度h1小于长度h2，因此，所提取的区域1840的图像可能失真。因此，移动设备100可以执行将所提取的区域1840的左边的长度h1延伸为与所提取的区域1840的右边的长度h2相同的校正，以获得去除了失真的图像1850。
接下来，移动设备100可以将通过基于右边使校正后的图像1850对称化而获得的第一图像1860布置在背景图像区域的左边，并且将通过基于右边使第一图像1860对称化而获得的第二图像1870布置在背景图像区域的右边，以生成校正了失真的背景图像1880。
图19是用于描述根据实施例的当捕获的图像在X轴的正方向上偏置时区域的校正的参考图。
参考图19，当用户通过使用移动设备100在安装有显示装置200的墙壁的前方捕获墙壁表面时，在捕获墙壁表面时用户可能未将移动设备100定位在墙壁表面正前方并可能使移动设备100相对于x轴倾斜地定位，从而可以经由移动设备100的相机生成图像1900。
移动设备100可以通过使用在显示装置200上显示的标记1901、1902、1903和1904捕获包括显示装置200的右侧周边区域的区域1920来获得图像1930。这里，移动设备100可以从所捕获的图像1930提取与通过连接标记1901、1902、1903和1904而获得的多边形1910的形状相对应的区域1940。所提取的区域1940可以具有长度为h2的左边和长度为h1的右边，长度h1小于长度h2，因此，所提取的区域1940的图像可能失真。因此，移动设备100可以执行将所提取的区域1940的右边的长度h1延伸为与所提取的区域1940的左边的长度h2相同的校正，以获得去除了失真的图像1950。
接下来，移动设备100可以将通过基于左边使校正后的图像1950对称化而获得的第一图像1960布置在背景图像区域的右边，并且将通过基于左边使第一图像1960对称化而获得的第二图像1970布置在背景图像区域的左边，以生成校正了失真的背景图像1980。
图20是用于描述根据实施例的当捕获的图像在Y轴的正方向上偏置时区域的校正的参考图。
参考图20，当用户通过使用移动设备100在安装有显示装置200的墙壁的前方捕获墙壁表面时，在捕获墙壁表面时用户可能未将移动设备100定位在墙壁表面的正前方并可能使移动设备100相对于y轴倾斜地定位，从而经由移动设备100的相机生成图像2000。
移动设备100可以通过使用在显示装置200上显示的标记2001、2002、2003和2004捕获包括显示装置200的上部周边区域的区域2020来获得图像2030。这里，移动设备100可以从所捕获的图像2030提取与通过连接标记2001、2002、2003和2004而获得的多边形2010的形状相对应的区域2040。所提取的区域2040可以具有长度为w2的上边和长度为w1的下边，长度w2大于长度w1，因此，所提取的区域1940的图像可能失真。因此，移动设备100可以执行将所提取的区域2040的上边的长度w2减小为与所提取的区域2040的下边的长度w1相同的校正，以获得去除了失真的图像2050。
接下来，移动设备100可以将通过基于下边使校正后的图像2050对称化而获得的第一图像2060布置在背景图像区域的上边，并且将通过基于下边使第一图像2060对称化而获得的第二图像2070布置在背景图像区域的下边，以生成校正了失真的背景图像2080。
图21是根据实施例的用于描述当捕获的图像在Y轴的负方向上偏置时区域的校正的参考图。
参考图21，当用户通过使用移动设备100在安装有显示装置200的墙壁的前方捕获墙壁表面时，在捕获墙壁表面时用户可能未将移动设备100定位在墙壁表面的正前方并可能使移动设备100相对于y轴倾斜地定位，从而经由移动设备100的相机生成图像2100。
移动设备100可以通过使用在显示装置200上显示的标记2101、2102、2103和2104捕获包括显示装置200的上部周边区域的区域2120来获得图像2130。这里，移动设备100可以从所捕获的图像2130中提取与通过连接标记2101、2102、2103和2104而获得的多边形2110的形状相对应的区域2140。所提取的区域2140可以具有长度为w1的上边和长度为w2的下边，长度w1小于长度w2，因此所提取的区域2140的图像可能失真。因此，移动设备100可以执行将所提取的区域2140的上边的长度w1延伸为与所提取的区域2140的下边的长度w2相同的校正，以获得去除了失真的图像2150。
接下来，移动设备100可以将通过基于下边使校正后的图像2150对称化而获得的第一图像2160布置在背景图像区域的上边，并且将通过基于下边使第一图像2160对称化而获得的第二图像2170布置在背景图像区域的下边，以生成校正了失真的背景图像2180。
图22是用于描述根据实施例的当捕获的图像在Z轴的正方向上偏置时区域的校正的参考图。
参考图22，当用户通过使用移动设备100在安装有显示装置200的墙壁的前方捕获墙壁表面时，在捕获墙壁表面时用户可能未将移动设备100定位在墙壁表面的正前方并可能使移动设备100相对于z轴倾斜地定位，从而经由移动设备100的相机生成图像2200。
移动设备100可以通过使用在显示装置200上显示的标记2201、2202、2203和2204捕获包括显示装置200的左侧周边区域的区域2220来获得图像2230。这里，移动设备100可以从所捕获的图像2230提取与通过连接标记2201、2202、2203和2204获得的多边形2210的形状相对应的区域2240。所提取的区域2240具有倾斜角，因此所提取的区域2240可以被旋转倾斜角以获得图像2250。
接下来，移动设备100可以将通过基于右边使校正后的图像2250对称化而获得的第一图像2260布置在背景图像区域的左边，并且将通过基于右边使第一图像2260对称化而获得的第二图像2270布置在背景图像区域的右边，以生成校正了失真的图像2280。
图23是用于描述根据实施例的弯曲显示装置的应用示例的参考图。
当将从墙壁表面图像提取的背景图像应用于弯曲显示装置时，由于弯曲显示装置的曲率，通过正常捕获背景区域而提取的背景图像可能看上去与背景区域不协调，因为弯曲显示装置的两端部比其中央部离墙壁更远。因此，在弯曲显示装置的情况下，可以生成并应用具有有意的凸形中央的背景图像，以使弯曲显示的两端看起来与墙壁表面协调。
参考图23，当用户通过使用移动设备100在安装有显示装置200a的墙壁的前方捕获墙壁表面时，在捕获墙壁表面时用户可能将移动设备100定位在墙壁表面的正前方，从而经由移动设备100的相机生成图像2300。
移动设备100可以通过使用在显示装置200a上显示的标记2301、2302、2303和2304捕获包括显示装置200的左侧周边区域的区域2320来获得图像2330。这里，移动设备100可以从所捕获的图像2330提取与通过连接标记2301、2302、2303和2304而获得的多边形2310的形状相对应的区域2340。所提取的区域2340可以具有长度为h1的右边和长度为h2的左边，长度h2小于长度h1，因此，所提取的区域2340的图像可能失真。因此，移动设备100可以执行将所提取的区域2340的左边的长度h2延伸为与所提取的区域2340的右边的长度h1相同的校正，以获得去除了失真的图像2350。
接下来，移动设备100可以将通过基于右边使校正后的图像2350对称化而获得的第一图像2360布置在背景图像区域的左边，并且将通过基于右边使第一图像2360对称化而获得的第二图像2370布置在背景图像区域的右边，以生成校正了失真的背景图像2380。
在图23中，最终生成的背景图像2380的中央部分是凸的。当该背景图像2380显示在弯曲显示装置200a上时，由于其中弯曲显示装置200a的两端部比弯曲显示装置200a的中央部离墙壁更远的特性，弯曲显示装置200a的墙壁表面和背景图像可以被显示为自然地连接。
如上所述，当用户在移动设备相对于墙壁表面倾斜地定位的状态下捕获墙壁表面时，很有可能生成无法使用的缺陷图像，因此，可能必须再次执行捕获。然而，根据上述实施例，通过使用倾斜图像中的倾斜角来调整要捕获的区域而没有重新捕获图像所生成的图像可以用作显示装置的背景图像。
此外，当将生成的背景图像应用于弯曲显示装置时，由于弯曲显示装置的曲率，弯曲显示装置的两端可能不与墙壁表面平滑地连接，并且可能显得笨拙。然而，在这种情况下，具有凸出的中央部分的背景图像可以被生成并且可以被应用到弯曲显示装置，从而背景图像可以自然地显示在弯曲显示装置上。
根据实施例的移动设备、显示装置和服务器的操作方法可以被实现为可以由各种计算机装置执行并且被记录在计算机可读记录介质上的计算机指令。该计算机可读记录介质可以包括程序命令、数据文件、数据结构或其组合。记录在计算机可读记录介质上的程序命令可以针对本公开而专门设计和构造，或者可以是计算机软件领域的普通技术人员已知并且可用的。计算机可读介质的示例包括存储介质，例如磁介质(例如，硬盘、软盘或磁带)、光学介质(例如，压缩盘只读存储器(CD-ROM)或数字通用盘(例如，DVD))、磁光介质(例如，软光盘)和专门配置为存储和执行程序命令的硬件设备(例如，ROM、RAM或闪存)等。程序命令的示例包括可以由计算机使用解释器执行的高级语言代码以及由编译器生成的机器语言代码。
尽管详细描述了实施例，但是本公开的权利要求的范围不限于此。本公开的权利要求的范围包括本领域的普通技术人员使用由所附权利要求限定的本公开的构思做出的各种修改和替代形式。

Claims (15)

1.一种电子设备，包括：
相机；
显示器；
通信接口；
存储器，存储一个或多个指令；以及
处理器，被配置为执行存储在所述存储器中的所述一个或多个指令以：
生成事件，并将所生成的事件发送给显示装置，以指示在所述显示装置的屏幕上显示多个标记；
基于对响应于所生成的事件而显示在所述显示装置的屏幕上的所述多个标记的识别，从所述相机获得的图像中确定要从中提取所述显示装置附近的墙壁表面的至少一个区域的图像；
从所确定的图像中提取与基于所识别的多个标记而获得的形状相对应的区域；
通过对所提取的区域的图像进行校正来生成要在所述显示装置的屏幕上显示的背景图像；以及
将所生成的背景图像发送给所述显示装置，使得所生成的背景图像被显示在所述显示装置的屏幕上。
2.根据权利要求1所述的电子设备，其中，所述处理器还被配置为执行所述一个或多个指令以：
获取所述显示装置的屏幕的尺寸信息；以及
基于所获取的尺寸信息来确定所述显示装置的屏幕上要显示所述多个标记的位置，并生成包括关于所确定的位置的信息在内的所述事件。
3.根据权利要求1所述的电子设备，其中，所述处理器还被配置为执行所述一个或多个指令以：
当识别出在所述显示装置的屏幕上显示的所述多个标记时，从所述相机获得的图像中确定其中存在所述多个标记的图像，作为要从中提取所述背景图像的图像。
4.根据权利要求1所述的电子设备，其中，安装有所述显示装置的所述墙壁表面的所述至少一个区域包括所述显示装置附近的所述墙壁表面的左侧区域、右侧区域、上部区域和下部区域中的至少一个。
5.根据权利要求1所述的电子设备，其中，所述处理器还被配置为执行所述一个或多个指令以通过执行以下至少一项来校正所提取的区域的图像：调整所述图像的至少一个边的长度、旋转所提取的区域的图像、以及使所提取的区域的图像对称化。
6.根据权利要求1所述的电子设备，其中，所述处理器还被配置为执行所述一个或多个指令以：通过对校正所提取的区域的图像而生成的图像和校正后的图像的对称图像进行组合，来生成所述背景图像。
7.根据权利要求6所述的电子设备，其中，所述处理器还被配置为执行所述一个或多个指令以：
当所确定的图像是从所述显示装置附近的所述墙壁表面的左侧区域或右侧区域获得的图像时，通过使所获得的图像沿左方向或右方向对称化来获得所述对称图像；以及
当所确定的图像是从所述显示装置附近的所述墙壁表面的上部区域或下部区域获得的图像时，通过使所获得的图像沿上方向或下方向对称化来获得所述对称图像。
8.根据权利要求1所述的电子设备，其中，所述处理器还被配置为执行所述一个或多个指令以：经由服务器将所述事件和所述背景图像发送给所述显示装置。
9.根据权利要求1所述的电子设备，其中，基于所识别的多个标记而获得的所述形状包括通过连接所识别的多个标记而获得的多边形形状。
10.一种电子设备的操作方法，所述方法包括：
生成指示在显示装置的屏幕上显示多个标记的事件，并将所生成的事件发送给所述显示装置；
通过对响应于所生成的事件而显示在所述显示装置的屏幕上的所述多个标记的识别，从相机获得的图像中确定要从中提取所述显示装置附近的墙壁表面的至少一个区域的图像；
从所确定的图像中提取与基于所识别的多个标记而获得的形状相对应的区域；
通过对所提取的区域的图像进行校正来生成要在所述显示装置的屏幕上显示的背景图像；以及
将所生成的背景图像发送给所述显示装置，使得所生成的背景图像被显示在所述显示装置的屏幕上。
11.根据权利要求10所述的方法，还包括：
获取所述显示装置的屏幕的尺寸信息；以及
基于所获取的尺寸信息，确定所述显示装置的屏幕上要显示所述多个标记的位置，并生成包括关于所确定的位置的信息在内的所述事件。
12.根据权利要求10所述的方法，还包括：
从所述相机获得的图像中识别在所述显示装置的屏幕上显示的所述多个标记；以及
将其中存在所识别的多个标记的图像确定为要从中提取所述背景图像的图像。
13.根据权利要求10所述的方法，其中，安装有所述显示装置的所述墙壁表面的所述至少一个区域包括所述显示装置附近的所述墙壁表面的左侧区域、右侧区域、上部区域和下部区域中的至少一个。
14.根据权利要求10所述的方法，还包括：相对于所提取的区域的图像，通过执行以下至少一项来校正所提取的区域的图像：调整所述图像的至少一个边的长度、旋转所提取的区域的图像、以及使所提取的区域的图像对称化。
15.一种计算机可读记录介质，其上记录有用于在计算机上执行权利要求10的方法的程序。
CN201980012845.3A 2018-02-13 2019-01-29 电子设备及其操作方法 Active CN111699674B (zh)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
KR10-2018-0018061 2018-02-13
KR1020180018061A KR102338900B1 (ko) 2018-02-13 2018-02-13 전자 장치 및 그 동작 방법
PCT/KR2019/001219 WO2019160260A1 (ko) 2018-02-13 2019-01-29 전자 장치 및 그 동작 방법

Publications (2)

Publication Number Publication Date
CN111699674A true CN111699674A (zh) 2020-09-22
CN111699674B CN111699674B (zh) 2023-03-24

Family

ID=67618532

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201980012845.3A Active CN111699674B (zh) 2018-02-13 2019-01-29 电子设备及其操作方法

Country Status (5)

Country Link
US (1) US11310441B2 (zh)
EP (1) EP3754969B1 (zh)
KR (1) KR102338900B1 (zh)
CN (1) CN111699674B (zh)
WO (1) WO2019160260A1 (zh)

Families Citing this family (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US11995904B2 (en) 2021-03-31 2024-05-28 Arm Limited Systems, devices, and/or processes for dynamic surface marking
WO2022207145A1 (en) * 2021-03-31 2022-10-06 Arm Limited Systems, devices, and/or processes for dynamic surface marking

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20160239096A1 (en) * 2013-10-02 2016-08-18 Samsung Electronics Co., Ltd. Image display apparatus and pointing method for same
CN105991968A (zh) * 2015-02-04 2016-10-05 夏普株式会社 显示设备伪装/恢复系统和控制方法
US20170262247A1 (en) * 2016-03-09 2017-09-14 Samsung Electronics Co., Ltd. Configuration and operation of display devices including content curation
CN107534751A (zh) * 2015-11-02 2018-01-02 三星电子株式会社 显示设备及其图像显示方法

Family Cites Families (15)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20070022215A1 (en) * 2005-07-19 2007-01-25 Singer David W Method and apparatus for media data transmission
US20120013646A1 (en) * 2008-08-26 2012-01-19 Sharp Kabushiki Kaisha Image display device and image display device drive method
US8731301B1 (en) 2008-09-25 2014-05-20 Sprint Communications Company L.P. Display adaptation based on captured image feedback
CN102292978A (zh) * 2009-07-10 2011-12-21 松下电器产业株式会社 标识显示控制装置、集成电路及标识显示控制方法
KR20110051072A (ko) 2009-11-09 2011-05-17 엘지전자 주식회사 환경에 맞게 외면 색상을 변경할 수 있는 디스플레이 장치
EP2570986A1 (en) * 2011-09-13 2013-03-20 Alcatel Lucent Method for creating a cover for an electronic device and electronic device
WO2014094216A1 (en) * 2012-12-18 2014-06-26 Intel Corporation Multiple region video conference encoding
JP2014123230A (ja) * 2012-12-20 2014-07-03 Sony Corp 画像処理装置、画像処理方法、及び、プログラム
US20140313117A1 (en) 2013-04-17 2014-10-23 Honeywell International Inc. Camouflaged connected home controller
US10754511B2 (en) 2013-11-20 2020-08-25 Google Llc Multi-view audio and video interactive playback
US10229543B2 (en) * 2014-06-13 2019-03-12 Mitsubishi Electric Corporation Information processing device, information superimposed image display device, non-transitory computer readable medium recorded with marker display program, non-transitory computer readable medium recorded with information superimposed image display program, marker display method, and information-superimposed image display method
JP6241971B2 (ja) 2015-02-03 2017-12-06 合同会社紫光技研 ガス放電装置とそれを使用した平面光源およびそれらの駆動方法
KR102458261B1 (ko) 2016-02-03 2022-10-25 삼성전자주식회사 디스플레이를 제어하는 전자 장치 및 방법 및 이를 위한 서버 및 방법
KR102267397B1 (ko) * 2016-10-25 2021-06-21 삼성전자주식회사 전자 장치 및 이의 제어 방법
KR102328121B1 (ko) * 2018-02-12 2021-11-17 삼성전자주식회사 전자 장치 및 그 동작 방법

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20160239096A1 (en) * 2013-10-02 2016-08-18 Samsung Electronics Co., Ltd. Image display apparatus and pointing method for same
CN105991968A (zh) * 2015-02-04 2016-10-05 夏普株式会社 显示设备伪装/恢复系统和控制方法
CN107534751A (zh) * 2015-11-02 2018-01-02 三星电子株式会社 显示设备及其图像显示方法
US20170262247A1 (en) * 2016-03-09 2017-09-14 Samsung Electronics Co., Ltd. Configuration and operation of display devices including content curation

Also Published As

Publication number Publication date
CN111699674B (zh) 2023-03-24
KR102338900B1 (ko) 2021-12-13
EP3754969A4 (en) 2021-04-14
EP3754969A1 (en) 2020-12-23
US11310441B2 (en) 2022-04-19
KR20190097974A (ko) 2019-08-21
EP3754969B1 (en) 2024-03-27
WO2019160260A1 (ko) 2019-08-22
US20200374472A1 (en) 2020-11-26

Similar Documents

Publication Publication Date Title
CN107801094B (zh) 在信宿装置处控制信源装置的方法和使用该方法的设备
US10536742B2 (en) Display apparatus and display method
CN109565542B (zh) 电子装置及其控制方法
CN107770604B (zh) 电子装置和操作电子装置的方法
CN107636749B (zh) 图像显示设备及其操作方法
CN111699673B (zh) 电子设备及其操作方法
CN109792561B (zh) 图像显示设备及其操作方法
US10732792B2 (en) Image display apparatus and method for changing properties of a highlighted item and surrounding items
EP3024220A2 (en) Display apparatus and display method
CN111656767B (zh) 电子装置及其操作方法
KR101811719B1 (ko) 컨텐트를 제공하는 디바이스를 제어하는 방법, 그 디바이스 및 서버
CN111699674B (zh) 电子设备及其操作方法
US10742880B2 (en) Image display apparatus and method of displaying image
KR102407191B1 (ko) 영상 표시 장치 및 영상 표시 방법
KR102121535B1 (ko) 전자 장치, 보조 장치 및 전자 장치의 동작 방법
EP3319307B1 (en) Spherical image display apparatus and method of displaying a spherical image on a planar display

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant