CN111866565B - 显示装置及显示装置的控制方法 - Google Patents

显示装置及显示装置的控制方法 Download PDF

Info

Publication number
CN111866565B
CN111866565B CN201910860973.5A CN201910860973A CN111866565B CN 111866565 B CN111866565 B CN 111866565B CN 201910860973 A CN201910860973 A CN 201910860973A CN 111866565 B CN111866565 B CN 111866565B
Authority
CN
China
Prior art keywords
display screen
content
display
user terminal
user
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201910860973.5A
Other languages
English (en)
Other versions
CN111866565A (zh
Inventor
崔俊植
金正来
朴振用
崔贤镛
韩栋旭
权真我
吉河妍
金庆民
金永振
朴成用
朴时英
慎用雨
尹大植
赵恩珠
赵贞衍
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Samsung Electronics Co Ltd
Original Assignee
Samsung Electronics Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Priority claimed from KR1020190062772A external-priority patent/KR102656521B1/ko
Application filed by Samsung Electronics Co Ltd filed Critical Samsung Electronics Co Ltd
Publication of CN111866565A publication Critical patent/CN111866565A/zh
Application granted granted Critical
Publication of CN111866565B publication Critical patent/CN111866565B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/41Structure of client; Structure of client peripherals
    • H04N21/422Input-only peripherals, i.e. input devices connected to specially adapted client devices, e.g. global positioning system [GPS]
    • H04N21/42204User interfaces specially adapted for controlling a client device through a remote control device; Remote control devices therefor
    • H04N21/42206User interfaces specially adapted for controlling a client device through a remote control device; Remote control devices therefor characterized by hardware details
    • H04N21/42221Transmission circuitry, e.g. infrared [IR] or radio frequency [RF]
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/41Structure of client; Structure of client peripherals
    • H04N21/4104Peripherals receiving signals from specially adapted client devices
    • H04N21/4126The peripheral being portable, e.g. PDAs or mobile phones
    • H04N21/41265The peripheral being portable, e.g. PDAs or mobile phones having a remote control device for bidirectional communication between the remote control device and client device
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/41Structure of client; Structure of client peripherals
    • H04N21/422Input-only peripherals, i.e. input devices connected to specially adapted client devices, e.g. global positioning system [GPS]
    • H04N21/42204User interfaces specially adapted for controlling a client device through a remote control device; Remote control devices therefor
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/14Digital output to display device ; Cooperation and interconnection of the display device with other functional units
    • G06F3/1454Digital output to display device ; Cooperation and interconnection of the display device with other functional units involving copying of the display data of a local workstation or window to a remote workstation or window so that an actual copy of the data is displayed simultaneously on two or more displays, e.g. teledisplay
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/16Sound input; Sound output
    • G06F3/167Audio in a user interface, e.g. using voice commands for navigating, audio feedback
    • GPHYSICS
    • G10MUSICAL INSTRUMENTS; ACOUSTICS
    • G10LSPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
    • G10L15/00Speech recognition
    • G10L15/22Procedures used during a speech recognition process, e.g. man-machine dialogue
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/41Structure of client; Structure of client peripherals
    • H04N21/4104Peripherals receiving signals from specially adapted client devices
    • H04N21/4122Peripherals receiving signals from specially adapted client devices additional display device, e.g. video projector
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/41Structure of client; Structure of client peripherals
    • H04N21/4104Peripherals receiving signals from specially adapted client devices
    • H04N21/4126The peripheral being portable, e.g. PDAs or mobile phones
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/41Structure of client; Structure of client peripherals
    • H04N21/422Input-only peripherals, i.e. input devices connected to specially adapted client devices, e.g. global positioning system [GPS]
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/41Structure of client; Structure of client peripherals
    • H04N21/422Input-only peripherals, i.e. input devices connected to specially adapted client devices, e.g. global positioning system [GPS]
    • H04N21/42203Input-only peripherals, i.e. input devices connected to specially adapted client devices, e.g. global positioning system [GPS] sound input device, e.g. microphone
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/41Structure of client; Structure of client peripherals
    • H04N21/422Input-only peripherals, i.e. input devices connected to specially adapted client devices, e.g. global positioning system [GPS]
    • H04N21/42204User interfaces specially adapted for controlling a client device through a remote control device; Remote control devices therefor
    • H04N21/42206User interfaces specially adapted for controlling a client device through a remote control device; Remote control devices therefor characterized by hardware details
    • H04N21/4222Remote control device emulator integrated into a non-television apparatus, e.g. a PDA, media center or smart toy
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/431Generation of visual interfaces for content selection or interaction; Content or additional data rendering
    • H04N21/4312Generation of visual interfaces for content selection or interaction; Content or additional data rendering involving specific graphical features, e.g. screen layout, special fonts or colors, blinking icons, highlights or animations
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/436Interfacing a local distribution network, e.g. communicating with another STB or one or more peripheral devices inside the home
    • H04N21/4363Adapting the video stream to a specific local network, e.g. a Bluetooth® network
    • H04N21/43637Adapting the video stream to a specific local network, e.g. a Bluetooth® network involving a wireless protocol, e.g. Bluetooth, RF or wireless LAN [IEEE 802.11]
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/438Interfacing the downstream path of the transmission network originating from a server, e.g. retrieving encoded video stream packets from an IP network
    • H04N21/4383Accessing a communication channel
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/439Processing of audio elementary streams
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/442Monitoring of processes or resources, e.g. detecting the failure of a recording device, monitoring the downstream bandwidth, the number of times a movie has been viewed, the storage space available from the internal hard disk
    • H04N21/44213Monitoring of end-user related data
    • H04N21/44218Detecting physical presence or behaviour of the user, e.g. using sensors to detect if the user is leaving the room or changes his face expression during a TV program
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00Details of television systems
    • H04N5/64Constructional details of receivers, e.g. cabinets or dust covers
    • GPHYSICS
    • G10MUSICAL INSTRUMENTS; ACOUSTICS
    • G10LSPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
    • G10L15/00Speech recognition
    • G10L15/22Procedures used during a speech recognition process, e.g. man-machine dialogue
    • G10L2015/223Execution procedure of a spoken command
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/41Structure of client; Structure of client peripherals
    • H04N21/422Input-only peripherals, i.e. input devices connected to specially adapted client devices, e.g. global positioning system [GPS]
    • H04N21/42204User interfaces specially adapted for controlling a client device through a remote control device; Remote control devices therefor
    • H04N21/42206User interfaces specially adapted for controlling a client device through a remote control device; Remote control devices therefor characterized by hardware details

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Human Computer Interaction (AREA)
  • Theoretical Computer Science (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Health & Medical Sciences (AREA)
  • Physics & Mathematics (AREA)
  • General Health & Medical Sciences (AREA)
  • General Engineering & Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Audiology, Speech & Language Pathology (AREA)
  • Social Psychology (AREA)
  • Acoustics & Sound (AREA)
  • Databases & Information Systems (AREA)
  • Computational Linguistics (AREA)
  • User Interface Of Digital Computer (AREA)
  • Controls And Circuits For Display Device (AREA)

Abstract

提供一种能够基于用于控制显示装置的使用者命令的类型而使显示屏旋转的显示装置及显示装置的控制方法。具体而言,本公开的显示装置在显示装置的显示屏上显示第一内容的期间,接收用于控制显示装置的使用者命令,如果接收到的使用者命令是用于控制第一内容的命令,则决定为保持显示屏的旋转方向,如果接收到的使用者命令是用于在显示屏上显示第二内容的命令,则基于第二内容的类型,决定显示屏的旋转方向,控制显示屏,以使其与决定的显示屏的旋转方向对应。

Description

显示装置及显示装置的控制方法
技术领域
本公开涉及显示装置及显示装置的控制方法,具体而言,涉及一种能够基于用于控制显示装置的使用者命令的类型决定显示屏的旋转方向的显示装置及显示装置的控制方法。
背景技术
近来,使用者通过诸如智能手机的移动设备体验内容的时间正在增加。因此,就以社交媒体(Social Media)为主的网页内容而言,正在以符合移动设备的屏幕比率及使用者对移动设备的把持方向的方式提供。不仅如此,即使是以往曾一般沿横向提供的影像内容,近来也呈现沿纵向提供的内容的量正在急剧增加的趋势。
可是,使用者在利用诸如智能手机的移动设备欣赏内容时,由于移动设备的显示屏大小上的制约等,与通过诸如TV(电视机)的显示装置欣赏内容的情形相比,在使用者的视听体验方面存在界限。
另一方面,就诸如TV的显示装置而言,一般具备横向较长形态的显示屏,一般无法满足欣赏纵向的内容。另外,即使在显示装置具备能够使显示屏旋转为纵向的显示屏的情况下,实际上也被指出该显示屏的旋转不符合使用者的多样内容视听体验的问题。
因此,关于在以比移动设备更大的视觉体验提供多样内容的同时能够旋转显示屏以便符合使用者的多样内容视听体验的显示装置的需求正在兴起。
发明内容
本公开正是根据如上所述的需求而研发的,本公开的目的在于提供能够基于用于控制显示装置的使用者命令的类型决定显示屏的旋转方向的显示装置及显示装置的控制方法。
根据旨在达成如上所述目的的本公开的一实施例,显示装置包括:显示屏;电机,其使所述显示屏旋转;存储器,其存储至少一个指令(instr uction);及处理器,其运行所述至少一个指令,所述处理器在所述显示屏上显示第一内容的期间,接收用于控制所述显示装置的使用者命令,如果接收到的所述使用者命令是用于控制所述第一内容的命令,则决定为保持所述显示屏的旋转方向,如果接收到的所述使用者命令是用于在所述显示屏上显示第二内容的命令,则基于所述第二内容的类型,决定所述显示屏的旋转方向,所述处理器控制所述电机,以使所述显示屏与所决定的所述显示屏的旋转方向对应。
其中,所述显示装置可以还包括:通信部,其包括电路,所述处理器可以通过所述通信部,从与所述显示装置通信连接的使用者终端及用于控制所述显示装置的远程控制装置中至少一者接收所述使用者命令。
其中,如果在所述显示屏上显示所述第一内容的期间,从远程控制装置接收到用于显示所述第二内容的使用者命令,则所述处理器可以将所述显示屏的旋转方向决定为横向。
另一方面,如果在所述显示屏上显示所述第一内容的期间,接收到用于在所述显示屏上显示第二内容的使用者命令,则所述处理器可以通过所述通信部从使用者终端接收所述第二内容及与所述使用者终端的旋转方向有关的信息,如果所述第二内容是与所述使用者终端正显示的画面对应的内容,则所述处理器可以基于与所述使用者终端的旋转方向有关的信息,决定所述显示屏的旋转方向。
其中,如果通过所述通信部,从所述使用者终端接收到用于表示所述使用者终端的旋转方向为纵向的信息及所述使用者终端正显示的画面被旋转为横向的第二内容,则所述处理器可以将所述显示屏的旋转方向决定为纵向,控制所述电机,以使所述显示屏旋转为所述决定的纵向,处理接收到的所述第二内容,以使在旋转为所述纵向的显示屏上,纵向显示接收到的所述第二内容,控制所述显示屏,以使在旋转为所述纵向的显示屏上,显示处理后的所述第二内容。
另一方面,在所述显示屏上显示所述第二内容的期间,如果与所述使用者终端的通信连接结束,则所述处理器可以将所述显示屏的旋转方向决定为横向。
另一方面,如果在所述显示屏上显示所述第一内容的期间,接收到第一使用者语音,则所述处理器可以将接收到的所述第一使用者语音输入到第一人工智能模型,从而获得与接收到的所述第一使用者语音对应的第一使用者命令,如果获得的所述第一使用者命令是用于控制所述第一内容的命令,则所述处理器可以决定为保持所述显示屏的旋转方向,如果获得的所述第一使用者命令是用于在所述显示屏上显示第二内容的命令,则所述处理器可以基于所述第二内容的类型,决定所述显示屏的旋转方向。
其中,如果所述第二内容包含与所述第一使用者命令对应的对多个内容的搜索结果,则所述处理器可以将所述显示屏的旋转方向决定为纵向,控制所述电机,以使所述显示屏旋转为所述决定的纵向,在旋转为所述纵向的显示屏上显示所述第二内容,如果在旋转为所述纵向的显示屏上显示所述第二内容的期间,接收到第二使用者语音,则所述处理器可以将接收到的所述第二使用者语音输入到所述第一人工智能模型,获得与接收到的所述第二使用者语音对应的第二使用者命令,如果所述获得的第二使用者命令是用于将根据所述第一使用者命令显示的所述多个内容之一的影像内容显示于所述显示屏上的命令,则所述处理器可以将所述显示屏的旋转方向决定为横向。
另一方面,所述处理器可以将与所述第二内容的类型有关的信息输入到第二人工智能模型,获得与所述第二内容的类型对应的与显示屏的旋转方向有关的信息,所述处理器基于获得的与所述旋转方向有关的信息,决定所述显示屏的旋转方向。
根据旨在达成如上所述目的的本公开一个实施例,显示装置的控制方法包括:在所述显示装置的显示屏上显示第一内容的期间,接收用于控制所述显示装置的使用者命令的步骤;如果接收到的所述使用者命令是用于控制所述第一内容的命令,则决定为保持所述显示屏的旋转方向,如果接收到的所述使用者命令是用于在所述显示屏上显示第二内容的命令,则基于所述第二内容的类型决定所述显示屏的旋转方向的步骤;及控制所述显示屏,以使其与决定的所述显示屏的旋转方向对应的步骤。
其中,所述接收使用者命令的步骤可以包括:从与所述显示装置通信连接的使用者终端及用于控制所述显示装置的远程控制装置中至少一者接收所述使用者命令的步骤。
其中,所述决定显示屏的旋转方向的步骤可以包括:如果在所述显示屏上显示所述第一内容的期间,从远程控制装置接收到用于显示所述第二内容的使用者命令,则将所述显示屏的旋转方向决定为横向的步骤。
另一方面,可以还包括:如果在所述显示屏上显示所述第一内容的期间,接收用于在所述显示屏上显示第二内容的使用者命令,则从使用者终端接收所述第二内容及与所述使用者终端的旋转方向有关的信息的步骤,所述决定显示屏的旋转方向的步骤可以包括:如果所述第二内容是与所述使用者终端正显示的画面对应的内容,则基于与所述使用者终端的旋转方向有关的信息,决定所述显示屏的旋转方向的步骤。
其中,所述决定显示屏的旋转方向的步骤可以包括:如果从所述使用者终端接收到用于表示所述使用者终端的旋转方向为纵向的信息及所述使用者终端正显示的画面被旋转为横向的第二内容,则将所述显示屏的旋转方向决定为纵向的步骤,所述控制显示屏的步骤可以包括:控制所述显示屏,以使其旋转为所述决定的纵向的步骤;及在旋转为所述纵向的显示屏上,纵向显示接收到的所述第二内容的步骤。
另一方面,就所述决定显示屏的旋转方向的步骤而言,如果在所述显示屏上显示所述第二内容的期间,与所述使用者终端的通信连接结束,则可以将所述显示屏的旋转方向决定为横向。
另一方面,所述接收使用者命令的步骤可以包括:如果在所述显示屏上显示所述第一内容的期间,接收第一使用者语音,则将接收到的所述第一使用者语音输入到第一人工智能模型,从而获得与接收到的所述第一使用者语音对应的第一使用者命令的步骤,所述决定显示屏的旋转方向的步骤可以包括:如果获得的所述第一使用者命令是用于控制所述第一内容的命令,则决定为保持所述显示屏的旋转方向,如果获得的所述第一使用者命令是用于在所述显示屏上显示第二内容的命令,则基于所述第二内容的类型,决定所述显示屏的旋转方向的步骤。
其中,所述决定显示屏的旋转方向的步骤可以包括:如果所述第二内容包含与所述第一使用者命令对应的与多个内容有关的信息,则将所述显示屏的旋转方向决定为纵向的步骤,所述控制显示屏的步骤可以包括:控制所述电机,以使所述显示屏旋转为所述决定的纵向的步骤;及在旋转为所述纵向的显示屏上显示所述第二内容的步骤,所述显示装置的控制方法可以还包括:如果在旋转为所述纵向的显示屏上显示所述第二内容的期间,接收第二使用者语音,则将接收到的所述第二使用者语音输入到所述第一人工智能模型,从而获得与接收到的所述第二使用者语音对应的第二使用者命令的步骤;及如果所述获得的第二使用者命令是用于将所述多个内容之一的影像内容显示于所述显示屏上的命令,则将所述显示屏的旋转方向决定为横向的步骤。
另一方面,所述决定显示屏的旋转方向的步骤可以包括:将与所述第二内容的类型有关的信息输入到第二人工智能模型,从而获得与所述第二内容的类型对应的与显示屏的旋转方向有关的信息的步骤;及基于获得的与所述旋转方向有关的信息,决定所述显示屏的旋转方向的步骤。
根据旨在达成如上所述目的的本公开一个实施例,在包括用于运行使用者终端的控制方法的程序的计算机可读记录介质中,所述使用者终端的控制方法包括:如果输入了用于将与所述使用者终端的显示屏上正显示的画面对应的内容传输到显示装置的使用者命令,则与所述显示装置执行通信连接的步骤;如果获得用于表示所述使用者终端的旋转方向为纵向的信息,则获得所述显示屏上正显示的画面被旋转为横向的内容的步骤;及将表示所述使用者终端的旋转方向为纵向的信息及所述获得的内容传输到与所述使用者终端连接的显示装置的步骤。
附图说明
图1是用于概略地说明本公开的一个实施例的显示装置的控制过程的图。
图2是简略地表示本公开的一实施例的显示装置的结构的框图。
图3是详细地表示本公开的一实施例的显示装置的结构的框图。
图4及图5是用于具体说明以基于使用者语音的使用者命令为基础控制本公开的显示装置的过程的图。
图6是简略地表示本公开的一实施例的使用者终端的结构的框图。
图7是用于具体说明以与使用者终端的旋转方向有关的信息为基础控制本公开的显示装置的过程的图。
图8a及图8b是表示本公开的一实施例的使用者终端的用户界面的图。
图8c及图8d是用于说明通过使用者终端而放大或缩小显示在显示装置中正显示的内容的过程的图。
图9是表示本公开的一实施例的远程控制装置的图。
图10是用于表示本公开的一实施例的显示装置的用户界面的图。
图11是用于说明本公开的一实施例的显示装置的控制方法的流程图。
图12是用于具体说明本公开的一实施例的语音识别过程的图。
图13是表示本公开的一实施例的处理器的具体结构的框图。
具体实施方式
本发明的多个实施例可以实施各种变换且可以具有多种实施例,在附图中示例性图示特定实施例并在发明内容中详细说明。但是,这并非要将范围限定于特定的实施形态,应理解为包括本公开的实施例的多样变更(m odifications)、等同物(equivalents)及/或替代物(alternatives)。与附图说明相关联,对于类似的结构要素,也可以使用类似的附图标记。
在说明本公开方面,当判断认为对相关公知功能或结构的具体说明可能不必要地混淆本公开的要旨时,省略其详细说明。
而且,下述实施例可以变形为多种不同形态,并非本公开的技术思想的范围限定于下述实施例。相反,提供这些实施例用于使本公开更充实、完整,向从业人员完整地传递本公开的技术思想。
本公开中使用的术语只是为了说明特定的实施例而使用的,并非要限定权利范围之意。只要在文理上未明白地表示不同,单数的表现包括复数的表现。
在本公开中,“具有”、“可以具有”、“包括”或“可以包括”等的表述指代相应特征(例:数值、功能、运转或部件等结构要素)的存在,不排除追加性特征的存在。
在本公开中,“A或B”、“A或/及B中至少一者”或“A或/及B之一或其以上”等的表述,可以包括一同罗列的项目的所有可能的组合。例如,“A或B”、“A及B中至少一者”或“A或B中至少一者”,可以指称(1)包括至少一个A,(2)包括至少一个B,或(3)包括至少一个A及至少一个B的情形全部。
本公开中使用的“第一”、“第二”、“第1”或“第2”等的表现,可以与顺序及/或重要度无关地修饰各种结构要素,只用于将一个结构要素区别于其他结构要素,而不限定相应结构要素。
当提到某结构要素(例:第一结构要素)“(在功能上或在通信上)连接于((operatively or communicatively)coupled with/to)”或“接续于(connected to)”另一结构要素(例:第二结构要素)时,应理解为所述某结构要素可以直接连接于所述另一结构要素,或通过其他结构要素(例:第三结构要素)而连接。
相反,当提到某结构要素(例:第一结构要素)“直接连接”或“直接接续”于另一结构要素(例:第二结构要素)时,可以理解为在所述某结构要素与所述另一结构要素之间不存在其他结构要素(例:第三结构要素)。
在本公开中使用的表现“构成(或设置)(configured to)为~”,根据情况,例如可以与“适合于~(suitable for)的”、“具有~能力的(having the capacity to)”、“设计为(designed to)~”、“变更为(adapted to)~”、“形成为(made to)~”或“能够(capableof)~的”变换使用。术语“构成为(或设置)~”可以不必须只意味着在硬件上“特别设计的(specifically designed to)”。
取而代之,在某种情况下,“构成为~的装置”字样的表述,可以意味着该装置与其他装置或部件一同“可以进行~的”。例如,句子“构成(或设置)为执行A、B及C的处理器”,可以意味着用于执行相应运转的专用处理器(例:嵌入式处理器),或通过运行存储器装置中存储的一个以上的软件程序从而能够执行相应动作的通用处理器(generic-purposeprocessor)(例:CPU或application processor(应用处理器))。
在实施例中,“模块”或“部”可以执行至少一个功能或运转,以硬件或软件体现,或以硬件和软件的结合体现。另外,多个“模块”或多个“部”除了需要以特定硬件体现的“模块”或“部”之外,可以一体化成至少一个模块,以至少一个处理器体现。
另一方面,附图中的各种要素和区域是概略性地绘制的。因此,本发明的技术思想不由附图中绘制的相对大小或间隔限制。
下面参考附图,对本公开的实施例进行详细说明,以便本公开所属技术领域的普通技术人员能够容易实施。
图1是用于概略地说明本公开的一实施例的显示装置100的控制过程的图。
如图1所示,本公开的一实施例的显示装置100可以使显示装置100的显示屏旋转。即,本公开的显示装置100可以执行所谓枢轴(pivot)功能。具体而言,显示屏可以旋转为处于横向或纵向放置的状态。在图1中,图示了显示屏纵向放置的状态(110-1),针对显示屏横向放置的状态,以虚线图示(110-2)。另一方面,在图1中,图示了显示屏逆时针方向旋转的情形,但显示屏当然也可以顺时针方向旋转。
其中,所谓显示屏横向放置的状态是指配置为以地面为基准,显示屏的横向长度大于纵向长度的状态,可以表述为所谓的landscape状态。另一方面,所谓显示屏纵向放置的状态是指配置为以地面为基准,显示屏的纵向长度大于横向长度的状态,可以表述为所谓的portrait状态。
下面,在说明本公开方面,将绕轴旋转以使显示屏成为横向或纵向放置的状态,表述为显示屏旋转为横向或纵向。另一方面,显示装置100例如可以以数字TV或显示器等体现,但并非其种类有特别限制。
根据本公开的一实施例,显示装置100接收用于控制显示装置100的使用者命令。具体而言,显示装置100可以通过与显示装置100通信连接的使用者终端200而接收使用者命令,也可以通过用于控制显示装置100的远程控制装置300而接收使用者命令。
其中,使用者终端200可以执行与显示装置100的通信,向显示装置100传输控制信号及影像内容等。使用者终端200可以以诸如无线保真(Wi-Fi)、蓝牙(Bluetooth)等方式与显示装置100执行通信,不过,通信方式并非局限于特殊的方式。使用者终端200例如可以以智能手机或平板电脑等体现,但其种类并非有特别的限制。
特别地,使用者终端200可以执行用于控制显示装置100的应用程序,基于所执行的应用程序,显示用于接收使用者交互的用户界面。此外,如果通过用户界面接收到使用者交互,则使用者终端200能够对显示装置100传输与接收到的使用者交互对应的控制信号。如果从使用者终端200接收到控制信号,则显示装置100能够获得与接收到的控制信号对应的使用者命令。
另一方面,远程控制装置300可以接收用于控制显示装置100的使用者输入,基于接收的使用者输入,输出用于控制显示装置100的控制信号。远程控制装置300可以以诸如红外线通信、RF(Radio Frequency,射频)通信、蓝牙(Bluetooth)或UWB(Ultra-Wideband,超宽带)的通信方式输出控制信号,不过,远程控制装置300的通信方式也并非局限于特殊的方式。远程控制装置300例如可以为遥控器,但并非局限于此,也可以以智能手机等体现。
如果接收用于控制显示装置100的使用者命令,则显示装置100可以基于使用者命令的类型,决定显示屏的旋转方向。其中,所谓决定显示屏的旋转方向,不仅是将显示屏的旋转方向决定为横向与将显示屏的旋转方向决定为纵向,还包括决定为保持显示屏的旋转方向。下面,对基于使用者命令的类型决定显示屏的旋转方向的各种实施例进行详细叙述。
如果接收的使用者命令是用于控制显示屏上正显示的第一内容的命令,则显示装置100可以决定为保持显示屏的旋转方向。即,如果接收的使用者命令是用于保持显示屏上正显示的第一内容并变更与第一内容相关的设置的,则显示装置100可以决定为保持显示屏的旋转方向。例如,如果接收的使用者命令是用于变更第一内容的音量设置或暂停第一内容的播放的,则显示装置100可以决定为保持显示屏的旋转方向。
另一方面,如果接收的使用者命令是用于在显示屏上显示第二内容的命令,则显示装置100可以基于第二内容的类型,决定显示屏的旋转方向。即,如果接收的使用者命令是不显示显示屏上正显示的第一内容而用于显示与第一内容相异的第二内容的命令,则显示装置100可以基于第二内容的类型,决定显示屏的旋转方向。
其中,所谓基于第二内容的类型决定显示屏的旋转方向,可以根据是将第二内容显示于旋转为横向的显示屏上合适,还是显示于旋转为纵向的显示屏上合适来决定。
具体而言,可以根据第二内容是关于广播内容的、是关于DVD内容的、是关于游戏内容的、是关于网页内容的、是关于电子书(e-book)内容的,以及是关于与诸如使用者终端200的外部装置中显示的画面对应的内容的等,从而决定第二内容的类型。
例如,如果第二内容为广播内容,则显示装置100可以将显示屏的旋转方向决定为横向。其中,广播内容不仅是从地波频道、有线频道及卫星频道接收的内容,而且可以包括从提供在线流媒体网站的服务器接收的内容等。作为又一示例,如果第二内容为网页内容,则显示装置100只限于提供相应网页的服务器提供移动模式的网页的情形,可以将显示屏的旋转方向决定为纵向。
另一方面,第二内容的类型也可以基于诸如第二内容的纵横比、第二内容的提供主体等各种属性而决定。例如,如果第二内容的纵横比小于1,即第二内容的横向长度短于纵向长度,则显示装置100可以将显示屏的旋转方向决定为纵向。
另一方面,以上以第二内容是影像内容的情形为前提进行了说明,但第二内容也可以是语音内容。即,如果在显示屏上显示第一内容期间,接收用于输出作为语音内容的第二内容的使用者命令,则显示装置100可以决定为保持显示屏的旋转方向。
以上对基于第二内容的类型决定显示屏的旋转方向的过程进行了详细叙述,但与第二内容的类型对应的显示屏的旋转方向可以预先存储于显示装置100,也可以根据使用者的设置而更新。
不仅如此,与第二内容的类型对应的显示屏的旋转方向也可以通过经学习的人工智能模型而获得。具体而言,显示装置100可以将与第二内容的类型有关的信息输入到人工智能模型,从而获得与第二内容的类型对应的与显示屏的旋转方向有关的信息,还能够基于获得的与旋转方向有关的信息,决定显示屏的旋转方向。
另一方面,如果在显示屏上显示第一内容的期间,从远程控制装置300接收用于显示第二内容的使用者命令,则显示装置100可以将显示屏的旋转方向决定为横向。例如,如果在旋转为纵向的显示屏上显示第一内容的期间,从远程控制装置300接收用于显示第二内容的频道变更命令,则显示装置100可以将显示屏的旋转方向决定为横向,使显示屏旋转为所决定的横向,在旋转为横向的显示屏上显示第二内容。
另一方面,如果在显示装置100关闭状态下,从远程控制装置300接收用于开启显示装置的使用者命令,则显示装置100也可以将显示屏的旋转方向决定为横向。
另一方面,显示装置100可以接收与使用者终端200正显示的画面对应的内容,将接收的内容显示于显示屏。即,显示装置100可以执行所谓的镜像过程。而且,在执行镜像过程而将与使用者终端200正显示的画面对应的内容显示于显示屏上的情况下,显示装置100可以基于与使用者终端200的旋转方向有关的信息,决定显示屏的旋转方向。
具体而言,如果在显示屏上显示第一内容的期间,接收用于在显示屏上显示第二内容的使用者命令,则显示装置100可以从使用者终端200接收第二内容及与使用者终端200的旋转方向有关的信息。而且,如果第二内容是与使用者终端200正显示的画面对应的内容,则显示装置100可以基于与使用者终端200的旋转方向有关的信息,决定显示屏的旋转方向。例如,如果使用者终端200的旋转方向为纵向,则显示装置100可以将显示屏的旋转方向决定为纵向,如果使用者终端200的旋转方向为横向,则显示装置100可以将显示屏的旋转方向决定为横向。
然而,在执行如上所述的镜像过程的情况下,使用者终端200正显示的画面一般作为横向的传输影像被传输给显示装置100。因此,在使用者终端200的旋转方向为纵向、使用者终端200显示纵向的内容的情况下,如果使用者终端200不旋转与使用者终端200正显示的画面对应的内容,而是作为横向的传输影像而传输给显示装置100,则与作为纵向的传输影像进行传输的情形相比,传输影像包含的内容的大小缩小。而且,在显示装置100将接收的传输影像显示于纵向的显示屏的过程中,放大内容的大小,此时,可能导致内容包含的图像的劣化。
因此,根据本公开的一实施例,在使用者终端200的旋转方向为纵向的情况下,使用者终端200可以将使用者终端200正显示的画面被旋转为横向的内容传输给显示装置100,显示装置100将旋转为横向的内容重新旋转为纵向,将旋转为纵向的内容显示于纵向的显示屏。
具体而言,如果从使用者终端200接收表示使用者终端200的旋转方向为纵向的信息、及使用者终端200正显示的画面被旋转为横向的内容,则显示装置100可以将显示屏的旋转方向决定为纵向。然后,显示装置100可以使显示屏旋转而以使其与决定的纵向对应,处理所接收的内容以便在显示屏上纵向显示所接收的内容,并在显示屏上显示被处理后的内容。
另一方面,如果在执行如上所述的镜像过程的期间,与使用者终端200的通信连接结束,则显示装置100可以将显示屏的旋转方向决定为横向。此时,显示装置100也可以使显示屏旋转为横向而以便与所决定的横向对应,进而在旋转为横向的显示屏上,显示显示装置100中预先存储的内容。
如上所述,如果决定了与使用者命令的类型对应的显示屏的旋转方向,则显示装置100控制显示屏使其与所决定的旋转方向对应。其中,所谓控制显示屏使其与所决定的旋转方向对应,不仅包括在显示屏处于与所决定的旋转方向不对应的状态的情况下使显示屏旋转而使其与所决定的旋转方向对应的情形,而且还包括在显示屏已处于与所决定的旋转方向对应的状态的情况下不使显示屏旋转的情形。
如果显示屏被控制为与所决定的旋转方向对应,则显示装置100可以在显示屏上显示与使用者命令对应的内容。具体而言,如果在显示屏上显示第一内容的期间接收的使用者命令是用于控制第一内容的命令,则显示装置100可以保持显示屏上显示的第一内容。如果在显示屏上显示第一内容的期间接收的使用者命令是用于显示第二内容的命令,则显示装置100可以在显示屏上显示第二内容。例如,如果显示屏根据所决定的旋转方向旋转为横向,则显示装置100可以在旋转为横向的显示屏上,显示与使用者命令对应的内容。
另一方面,本公开的用于输入使用者命令的使用者交互可以通过多样方法输入。特别是用于控制显示装置100的使用者命令可以通过使用者语音输入。以下,就对接收的使用者语音执行语音识别而获得与接收的使用者语音对应的使用者命令,基于获得的使用者命令的类型决定显示屏的旋转方向进行详细叙述。
具体而言,显示装置100可以接收使用者语音,并将接收的使用者语音输入到经学习的人工智能模型而获得与接收的使用者语音对应的使用者命令。
在此,使用者语音可以通过显示装置100输入,不仅如此,也可以通过与显示装置100通信连接的使用者终端200或用于控制显示装置100的远程控制装置300来输入。而且,对输入的使用者语音的语音识别不仅可以通过显示装置100或使用者终端200中以内置方式包括的人工智能模型而执行,而且也可以通过与显示装置100或使用者终端200通信连接的服务器(未图示)中包括的人工智能模型而执行。
如果获得与接收的使用者语音对应的使用者命令,则如上所述,显示装置100可以基于使用者命令的类型决定显示屏的旋转方向。
具体而言,如果在显示屏上显示第一内容的期间接收第一使用者语音,则显示装置100可以将接收的第一使用者语音输入到第一人工智能模型,获得与接收的第一使用者语音对应的使用者命令。而且,如果获得的使用者命令是用于控制第一内容的命令,则显示装置100可以决定为保持显示屏的旋转方向。另一方面,如果获得的使用者命令是用于在显示屏上显示第二内容的命令,则显示装置100可以基于第二内容的类型决定显示屏的旋转方向。
作为另一例,显示装置100在显示屏上显示第一内容的期间,可以接收诸如“请提高一个频道”的使用者语音,作为与接收到的使用者语音对应的使用者命令,获得与“与分配给7号的广播频道对应的内容的显示”的控制动作相关的使用者命令,此时,与使用者语音对应的使用者命令是用于在显示屏上显示第二内容的命令,第二内容的类型是广播内容,因此显示装置100能够将显示屏的旋转方向决定为横向。
另一方面,如果第二内容包括关于与第一使用者命令对应的多个内容的信息,则显示装置100可以将显示屏的旋转方向决定为纵向。而且,显示装置100可以使显示屏旋转而使其与决定的纵向对应,在旋转为纵向的显示屏上显示第二内容。
如上所述,如果在旋转为纵向的显示屏上显示第二内容的期间接收第二使用者语音,则显示装置100可以将接收的第二使用者语音输入到第一人工智能模型,获得与接收的第二使用者语音对应的第二使用者命令。而且,如果获得的第二使用者命令是用于将多个内容之一的影像内容显示于显示屏上的命令,则显示装置100可以将显示屏的旋转方向决定为横向。
根据如上所述的本公开的各种实施例,显示装置100在以比使用者终端200更大的视觉体验提供各种内容的同时,基于用于控制显示装置100的使用者命令的类型而使显示屏旋转,从而可以通过旋转为符合使用者的各种内容视听体验的显示屏来提供内容。
下面参照图2至图13,对本公开的更多样实施例进行详细叙述。
图2是简略地表示本公开的一实施例的显示装置100的结构的框图。
如图2所示,本公开的一实施例的显示装置100包括显示屏110、电机120、存储器130及处理器140。
显示屏110可以根据处理器140的控制而输出影像数据。具体而言,显示屏110可以根据处理器140的控制,输出存储器130中预先存储的影像。特别是显示屏110也可以显示存储器130中存储的用户界面(User Interface)。
显示屏110可以以LCD(Liquid Crystal Display Panel,液晶显示面板)、OLED(Organic Light Emitting Diodes,有机电致发光二极管)等体现,另外,根据情况,显示屏110也可以由柔性显示屏110、透明显示屏110等体现。只是本公开的显示屏110并非限定于特定的种类。
特别是在本公开的各种实施例中,显示装置100可以执行所谓的枢轴(pivot)功能。具体而言,显示屏110可以旋转以使处于横向或纵向放置的状态。下面,在说明本公开方面,将显示屏110被绕轴旋转而成为横向或纵向放置的状态,简略地表述为旋转为横向或纵向。另一方面,另一方面,显示屏110不仅可以由使用者手动旋转,而且,也可以通过处理器140控制用于使显示屏110旋转的电机120而自动旋转。
电机120使显示屏110旋转。具体而言,电机120连接于显示屏110,根据处理器140的控制而被驱动,从而可以使连接于电机120的显示屏110顺时针方向或逆时针方向旋转。而且,由此显示屏110可以旋转为横向或纵向。电机120可以以DC电机(Direct Currentelectric Motor,直流电机)、AC电机(Alternating Current electric motor,交流电机)、BLDC(brushless DC electric motor,无刷直流电机)等各种电机体现。
在存储器130中,可以存储有关于显示装置100的至少一个命令。而且,在存储器130中,可以存储有用于驱动显示装置100的O/S(Operati ng System,操作系统)。另外,在存储器130中,也可以存储有显示装置100根据本公开的各种实施例运转所需的各种软件程序或应用程序。而且,存储器130可以包括诸如闪速存储器(Flash Memory)等半导体存储器或诸如硬盘(Hard Disk)等磁存储介质等。
具体而言,在存储器130中,可以存储有显示装置100根据本公开多样实施例运转所需的各种软件模块,处理器140可以运行存储器130中存储的各种软件模块,从而控制显示装置100的运转。即,存储器130可以被处理器140访问,执行借助于处理器140的数据读取/记录/修订/删除/更新等。
另一方面,在本公开中,存储器130字样的术语可以用作包括存储器130、处理器140内只读存储器(未图示)、随机存取器(未图示)或加装于显示装置100的存储卡(未图示)(例如,微型SD卡、记忆棒)的意义。
特别是在本公开的各种实施例中,在存储器130中,可以存储有与根据使用者命令而显示的内容的类型对应的与显示屏110的旋转方向有关的信息。另外,在存储器130中,可以存储有从诸如使用者终端200或广播接收装置的外部装置接收的内容等。此外,在旨在达成本公开的目的的范围内所需的各种信息可以存储于存储器130,存储器130中存储的信息也可以从服务器或外部装置接收,或根据使用者输入而更新。
处理器140控制显示装置100的全面运转。具体而言,处理器140可以与如上所述的包括显示屏110、电机120及存储器130的显示装置100的结构连接,运行如上所述的存储器130中存储的至少一个命令,全面控制显示装置100的运转。
处理器140可以以各种方式体现。例如,处理器140可以以专用集成电路(Application Specific Integrated Circuit,ASIC)、嵌入式处理器、微处理器、硬件控制逻辑、硬件有限状态机(hardware Finite State Mach ine,FSM)、数字信号处理器(Digital Signal Processor,DSP)中至少一种体现。另一方面,在本公开中,处理器140字样的术语可以用作包括C PU(Central Processing Unit,中央处理器)、GPU(GraphicProcessing Unit,图形处理器)及MPU(Main Processing Unit,主处理单元)等的意义。
特别是在本公开的各种实施例中,处理器140可以使显示屏110旋转,且在旋转的显示屏110上显示内容,下面对基于处理器140的控制的本公开的各种实施例进行详细叙述。
处理器140接收用于控制显示装置100的使用者命令。具体而言,处理器140可以通过经由通信部150与显示装置100通信连接的使用者终端200接收使用者命令,也可以通过用于经由通信部150控制显示装置100的远程控制装置300,接收使用者命令。
如前所述,使用者终端200是指可以与显示装置100执行通信并向显示装置100传输控制信号及影像内容等的装置,远程控制装置300是指可以接收用于控制显示装置100的使用者输入并基于接收到的使用者输入输出用于控制显示装置100的控制信号的装置。
如果接收到用于控制显示装置100的使用者命令,则处理器140可以基于使用者命令的类型决定显示屏的旋转方向。其中,所谓的决定显示屏的旋转方向,不仅是将显示屏的旋转方向决定为横向以及将显示屏的旋转方向决定为纵向,还包括决定为保持显示屏的旋转方向。下面,对基于使用者命令的类型决定显示屏的旋转方向的各种实施例进行详细叙述。
如果接收到的使用者命令是用于控制显示屏上正显示的第一内容的命令,则处理器140可以决定为保持显示屏的旋转方向。即,如果接收到的使用者命令是用于保持显示屏上正显示的第一内容并变更与第一内容相关的设置的命令,则处理器140可以决定为保持显示屏的旋转方向。例如,如果接收的使用者命令是用于变更第一内容的音量设置,或暂停第一内容播放的命令,则处理器140可以决定为保持显示屏的旋转方向。
另一方面,如果接收到的使用者命令是用于在显示屏上显示第二内容的命令,则处理器140可以基于第二内容的类型决定显示屏的旋转方向。即,如果接收到的使用者命令不是用于显示显示屏上正显示的第一内容而是用于显示与第一内容相异的第二内容的命令,则处理器140可以基于第二内容的类型决定显示屏的旋转方向。
其中,基于第二内容的类型决定显示屏的旋转方向,可以根据是将第二内容显示于旋转为横向的显示屏上合适,还是显示于旋转为纵向的显示屏上合适来决定。
具体而言,第二内容的类型可以根据第二内容是关于广播内容的、是关于DVD内容的、是关于游戏内容的、是关于网页内容的、是关于电子书(e-book)内容的,以及是关于与诸如使用者终端200的外部装置中显示的画面对应的内容的等而决定。
例如,如果第二内容为广播内容,则处理器140可以将显示屏的旋转方向决定为横向。其中,广播内容不仅包括从地波频道、有线频道及卫星频道接收的内容,而且可以包括从提供在线流媒体网站的服务器接收的内容等。作为另一示例,如果第二内容为网页内容,则处理器140可以只限于提供相应网页的服务器提供移动模式的网页的情形,将显示屏的旋转方向决定为纵向。
另一方面,第二内容的类型也可以基于诸如第二内容的纵横比、第二内容的提供主体等的各种属性来决定。例如,如果第二内容的纵横比小于1,即第二内容的横向长度短于纵向长度,则处理器140可以将显示屏的旋转方向决定为纵向。
另一方面,以上以第二内容是影像内容的情形为前提进行了说明,但第二内容也可以是语音内容。即,如果在显示屏上显示第一内容的期间,接收用于输出作为语音内容的第二内容的使用者命令,则处理器140可以决定为保持显示屏的旋转方向。
以上对基于第二内容的类型决定显示屏的旋转方向的过程进行了详细叙述,与第二内容的类型对应的显示屏的旋转方向可以预先存储于存储器130,也可以根据使用者的设置而更新。
不仅如此,与第二内容的类型对应的显示屏的旋转方向也可以通过经学习的人工智能模型而获得。具体而言,处理器140将与第二内容的类型有关的信息输入人工智能模型,从而可以获得与第二内容的类型对应的与显示屏的旋转方向有关的信息,也可以基于获得的与旋转方向有关的信息,决定显示屏的旋转方向。
具体而言,本公开的人工智能模型可以包括至少一个人工神经网络,借助于深度学习(deep learning)而学习。具体而言,人工智能模型可以包括深度神经网络(DeepNeural Network,DNN)、卷积神经网络(Con volution Neural Network,CNN)、递归神经网络(Recurrent Neural Net work,RNN)及对抗生成网络(Generative AdversarialNetworks,GAN)中至少一种人工神经网络。
另一方面,如果在显示屏上显示第一内容的期间,从远程控制装置300接收用于显示第二内容的使用者命令,则处理器140可以将显示屏的旋转方向决定为横向。例如,如果在旋转为纵向的显示屏上显示第一内容的期间,从远程控制装置300接收用于显示第二内容的频道变更命令,则处理器140可以将显示屏的旋转方向决定为横向,使显示屏旋转为所决定的横向,在旋转为横向的显示屏上显示第二内容。
另一方面,如果在显示装置100关闭状态下,从远程控制装置300接收用于开启显示装置的使用者命令,则显示装置100也可以将显示屏的旋转方向决定为横向。另一方面,处理器140可以接收与使用者终端200正显示的画面对应的内容,将接收的内容显示于显示屏110。即,显示装置100可以执行所谓镜像过程。而且,在执行镜像过程而将与使用者终端200正显示的画面对应的内容显示于显示屏上的情况下,处理器140可以基于与使用者终端200的旋转方向有关的信息,决定显示屏的旋转方向。
具体而言,如果在显示屏上显示第一内容的期间,接收用于在显示屏上显示第二内容的使用者命令,则处理器140可以从使用者终端200接收第二内容及与使用者终端200的旋转方向有关的信息。而且,如果第二内容是与使用者终端200正显示的画面对应的内容,则处理器140可以基于与使用者终端200的旋转方向有关的信息,决定显示屏的旋转方向。例如,如果使用者终端200的旋转方向为纵向,则处理器140可以将显示屏的旋转方向决定为纵向,如果使用者终端200的旋转方向为横向,则处理器140可以将显示屏的旋转方向决定为横向。
可是,在执行如上所述的镜像过程的情况下,使用者终端200正显示的画面一般作为横向的传输影像传输给显示装置100。因此,在使用者终端200的旋转方向为纵向且使用者终端200显示纵向的内容的情况下,如果使用者终端200不旋转与使用者终端200正显示的画面对应的内容,而是作为横向的传输影像传输给显示装置100,则与作为纵向的传输影像进行传输的情形相比,传输影像包含的内容的大小缩小。而且,在处理器140将接收的传输影像显示于纵向的显示屏110的过程中,放大内容的大小。因此,此时可能导致图像的劣化。
因此,根据本公开的一实施例,在使用者终端200的旋转方向为纵向的情况下,使用者终端200将使用者终端200正显示的画面旋转为横向的内容传输给显示装置100,处理器140可以将旋转为横向的内容重新旋转为纵向,控制显示屏110以使其将旋转为纵向的内容显示于纵向的显示屏110。
具体而言,如果从使用者终端200接收使用者终端200的旋转方向为纵向的信息及使用者终端200正显示的画面被旋转为横向的内容,则处理器140可以将显示屏110的旋转方向决定为纵向。然后,处理器140可以使显示屏110旋转而使其与决定的纵向对应,处理所接收的内容以便在显示屏110上纵向显示所接收的内容,并在显示屏110上显示处理后的内容。
另一方面,以上对在执行镜像过程的期间,基于与使用者终端200的旋转方向有关的信息决定显示屏110的旋转方向的实施例进行了详细叙述,但处理器140也可以与使用者终端200的旋转方向无关,基于使用者终端200正显示的内容的属性,决定显示屏110的旋转方向。
例如,如果从使用者终端200接收与使用者终端200正显示的画面对应的内容,则处理器140可以识别在接收到的内容的左右是否存在黑色区域。而且,如果在接收到的内容的左右不存在黑色区域,则处理器140可以将显示屏110的旋转方向决定为横向。相反,如果在接收到的内容的左右存在黑色区域,则处理器140可以将显示屏110的旋转方向决定为纵向。
另一方面,以上对显示装置100与使用者终端200通信连接的情形以及接收并显示与使用者终端200正显示的画面对应的内容的情形的实施例进行了详细叙述,但根据本公开的一实施例,如果显示装置100与使用者终端200之间的通信连接结束,则处理器140也可以基于表示与使用者终端200的通信连接已结束的信息,决定显示屏110的旋转方向。
具体而言,如果在执行如上所述的镜像过程的期间,显示装置100与使用者终端200之间的通信连接结束,则处理器140可以将显示屏110的旋转方向决定为横向。此时,处理器140可以使显示屏110旋转为横向以使其与所决定的横向对应,进而在旋转为横向的显示屏110上,显示存储器130中预先存储的内容。
特别是在使用者进行本公开的显示装置100的初始设置,即OOBE(O ut-of-BoxExperience,开箱体验)时,OOBE可以通过与显示装置100通信连接的使用者终端200而开始。而且,处理器140可以根据用于进行O OBE的画面的类型,使显示装置100的显示屏110旋转为横向或纵向,在旋转后的显示屏110上显示用于进行OOBE的画面。另一方面,如果在通过使用者终端200进行OOBE的期间出错,则处理器140为了通过显示屏110进行OOBE,也可以使显示装置100的显示屏110旋转为横向,在旋转后的显示屏110上显示用于进行OOBE的画面。
另一方面,以上对处理器140接收与使用者终端200正显示的画面对应的内容并显示的情形进行了详细叙述,但根据本公开的一实施例,处理器140也可以接收与使用者终端200正显示的画面中的一部分对应的内容并显示。
例如,在使用者终端200在区分为多屏的多个区域分别显示多个内容的情况下,处理器140可以仅接收与多个区域中的一个区域对应的内容并显示,即使在这种情况下,也可以应用本公开的各种实施例。作为另一例,如图8a或图8b所示,在使用者终端200通过第一图层显示影像内容并通过第二图层显示用户界面81、82、83的情况下,处理器140可以接收在使用者终端200显示的画面中仅与第一图层对应的影像内容而显示。
另一方面,在实时反映与使用者终端200的旋转方向有关的信息而使显示装置100旋转的情况下,诸如使用者终端200的旋转角度不大的情况、使用者终端200的旋转方向迅速地反复变更的情况,反而会存在与使用者意图相反的情形。
因此,根据本公开的一实施例,处理器140可以基于在预先设置的时间以上期间接收的、与使用者终端200的旋转方向有关的信息,判断使用者终端200的旋转方向是否保持既定时间期间,限于判断为使用者终端200的旋转方向保持既定时间期间的情形,基于与使用者终端200的旋转方向有关的信息,决定显示屏110的旋转方向,从而可以使得不发生与使用者意图相反的显示装置100旋转。
如上所述,如果决定了与使用者命令的类型对应的显示屏110的旋转方向,则处理器140控制电机120以使显示屏110与所决定的旋转方向对应。其中,所谓控制电机120以使显示屏110与所决定的旋转方向对应,不仅包括在显示屏110处于与决定的旋转方向不对应的状态时使显示屏110旋转而使其与所决定的旋转方向对应的情形,还包括在显示屏110已处于与所决定的旋转方向对应的状态时不使显示屏110旋转的情形。
如果显示屏110被控制为与所决定的旋转方向对应,则处理器140可以在显示屏110上显示与使用者命令对应的内容。具体而言,如果在显示屏上显示第一内容的期间接收的使用者命令是用于控制第一内容的命令,则处理器140可以保持显示屏上显示的第一内容。如果在显示屏上显示第一内容的期间接收的使用者命令是用于控制第二内容的命令,则处理器140可以在显示屏上显示第二内容。例如,如果显示屏110旋转为横向以便与所决定的旋转方向对应,则处理器140可以在旋转为横向的显示屏110上显示与使用者命令对应的内容。
图3是详细表示本公开的一实施例的显示装置100的结构的框图。
如图3所示,本公开的一实施例的显示装置100不仅包括显示屏110、电机120、存储器130及处理器140,还可以包括通信部150、扬声器170及麦克风160。但是,这种结构是示例性的,在实施本公开方面,当然可以在这种结构上添加新的结构或省略一部分结构。对于显示屏110、电机120、存储器130及处理器140,已参照图2进行详细叙述,因此以下对通信部150、扬声器170及麦克风160等进行详细叙述。
通信部150包括电路,可以执行与服务器或外部装置的通信。具体而言,处理器140可以从通过通信部150而连接的服务器或外部装置接收各种数据或信息,也可以向服务器或外部装置传输各种数据或信息。
通信部150可以包括WiFi模块151、蓝牙模块152、无线通信模块153及NFC(近场通信)模块154、IR(红外线)通信模块155中至少一种。具体而言,WiFi模块151和蓝牙模块分别可以以WiFi方式、蓝牙方式执行通信。在利用WiFi模块151或蓝牙模块152的情况下,可以首先发送接收诸如SSID(服务集标识符)等各种连接信息,利用其进行通信连接后,发送接收各种信息。
另外,无线通信模块153可以根据诸如IEEE(电气与电子工程师协会)、Zigbee(紫蜂)、3G(3rd Generation)、3GPP(3rd Generation P artnership Project,第三代合作伙伴计划)、LTE(Long Term Evolution,长期演进)、5G(5th Generation)等各式各样通信规格执行通信。而且,NFC模块154可以以在诸如135kHz、13.56MHz、433MHz、860~960MH z、2.45GHz等各种RF-ID频带中使用13.56MHz频带的NFC(Near Field Communication近场通讯)方式执行通信。
而且,IR通信模块155可以包括IR接收模块及IR发射模块。IR接收模块可以接收在显示装置100外部输出的红外线信号,可以包括用于接收红外线的红外线光电晶体管(Phototransistor)及用于对调制的红外线信号进行解调的红外线受光模块。IR发射模块可以向显示装置100的外部输出红外线信号,可以包括用于产生红外线信号的红外线发射二极管(Infra red Rays Emitting Diode;IRED)。
特别是在本公开的各种实施例中,处理器140可以通过通信部150而从使用者终端200接收使用者命令,可以通过通信部150而从远程控制装置300接收使用者命令。另外,处理器140可以通过通信部150而从使用者终端200接收与使用者终端200正显示的画面对应的内容及与使用者终端200的旋转方向有关的信息等各种信息。
扬声器170可以根据处理器140的控制而输出音频数据,指示器可以根据处理器140的控制而点亮。特别是在本公开的各种实施例中,扬声器170可以输出根据使用者命令而提供的语音内容。
麦克风160可以接收语音信号,并将接收的语音信号变换成电信号。特别是在本公开的各种实施例中,用于控制显示装置100的使用者命令可以通过麦克风160输入。下面就执行对接收到的使用者语音的语音识别,获得与接收到的使用者语音对应的使用者命令,基于获得的使用者命令的类型决定显示屏110的旋转方向的实施例进行详细叙述。
具体而言,处理器140可以通过麦克风160接收使用者语音,执行对接收到的使用者语音的语音识别,获得与接收到的使用者语音对应的使用者命令。更具体而言,处理器140可以通过麦克风160接收使用者语音,将接收到的使用者语音输入到经学习的人工智能模型,获得与接收到的使用者语音对应的使用者命令。而且,如果获得与接收到的使用者语音对应的使用者命令,则如上所述,处理器140可以基于使用者命令的类型,决定显示屏110的旋转方向。
对于根据基于使用者语音的使用者命令来控制本公开的显示装置100的过程,下面参照图4及图5进行详细叙述。
另一方面,获得与接收的使用者语音对应的使用者命令的语音识别过程可以通过经学习的人工智能模型来执行。本公开的人工智能模型包括至少一个人工神经网络,可以借助于深度学习(deep learning)而学习。具体而言,人工智能模型可以包括深度神经网络(Deep Neural Network,D NN)、卷积神经网络(Convolution Neural Network,CNN)、递归神经网络(Recurrent Neural Network,RNN)及对抗生成网络(Generative A dversarialNetworks,GAN)中至少一种人工神经网络。
只是,本公开的人工智能模型包括的具体人工神经网络模型并非限定于上述示例。对于本公开的语音识别过程及人工智能模型,将参照图12及图13进行详细叙述。
图4及图5是用于具体说明根据基于使用者语音的使用者命令来控制本公开的显示装置100的过程的图。
本公开的使用者命令可以基于接收到的使用者语音而获得。具体而言,显示装置100可以接收使用者语音,将接收到的使用者语音输入到经学习的人工智能模型,从而获得与接收到的使用者语音对应的使用者命令。
其中,使用者语音可以通过显示装置100输入,不仅如此,也可以通过与显示装置100通信连接的使用者终端200输入。而且,对输入的使用者语音的语音识别,还可以通过在显示装置100或使用者终端200中以内置方式包括的人工智能模型而执行,不仅如此,还可以通过与显示装置100或使用者终端200通信连接的服务器包括的人工智能模型而执行。
如果获得与接收到的使用者语音对应的使用者命令,则显示装置100可以基于使用者命令的类型决定显示屏的旋转方向。
具体而言,如果在显示屏上显示第一内容的期间接收使用者语音,则显示装置100可以将接收到的使用者语音输入到人工智能模型,从而获得与接收到的使用者语音对应的使用者命令。而且,如果获得的使用者命令是用于控制第一内容的命令,则显示装置100可以决定为保持显示屏的旋转方向。另一方面,如果获得的使用者命令是用于在显示屏上显示第二内容的命令,则显示装置100可以基于第二内容的类型决定显示屏的旋转方向。
根据本公开的一实施例,显示装置100可以根据与使用者语音对应的使用者命令是用于输出语音内容的命令、还是用于显示影像内容的命令而决定显示屏的旋转方向。
具体而言,如果与使用者语音对应的使用者命令是用于输出语音内容的命令,则显示装置100可以决定为保持显示屏的旋转方向。然后,显示装置100可以进行控制以使显示屏与所决定的旋转方向对应,并输出与使用者命令对应的语音内容。在语音内容输出的期间,显示装置100既可以保持显示屏上正显示的影像内容,也可以显示表示正在输出语音内容的影像。
例如,如图4所示,在接收诸如“今年A电影节作品奖获奖作品是什么?”的使用者语音的情况下,显示装置100可以不变更显示屏的旋转方向,而是输出诸如“是Love”的语音内容。
另一方面,如果与使用者语音对应的使用者命令是用于显示影像内容的命令,则显示装置100可以将显示屏的旋转方向决定为横向。然后,显示装置100可以进行控制以使显示屏与所决定的旋转方向对应,在显示屏上显示与使用者命令对应的影像内容。
例如,如图4所示,在接收诸如“再告诉我相关信息。”的使用者语音的情况下,显示装置100可以将显示屏旋转为横向,在旋转后的显示屏上显示与使用者命令对应的影像内容。
根据本公开的一实施例,显示装置100可以根据与使用者语音对应的使用者命令是用于显示对多个内容的搜索结果的命令、还是用于显示影像内容的命令而决定显示屏的旋转方向。
具体而言,如果与第一使用者语音对应的第一使用者命令是用于显示对多个内容的搜索结果的命令,则显示装置100可以将显示屏的旋转方向决定为纵向。然后,显示装置100可以进行控制以使显示屏与所决定的旋转方向对应,并在显示屏上显示与使用者命令对应的内容。
例如,如图5所示,在接收诸如“看看ABC组合的歌曲列表。”的使用者语音的情况下,显示装置100可以将显示屏旋转为纵向,在旋转为纵向的显示屏上,显示基于第一使用者命令的对多个内容的搜索结果。
如上所述,如果在旋转为纵向的显示屏上显示第二内容的期间接收第二使用者语音,则显示装置100可以将接收到的第二使用者语音输入到第一人工智能模型,获得与接到收的第二使用者语音对应的第二使用者命令。而且,如果获得的第二使用者命令是用于将根据第一使用者命令而显示的多个内容之一的影像内容显示于显示屏上的命令,则显示装置100可以将显示屏的旋转方向决定为横向。然后,显示装置100可以进行控制以使显示屏与所决定的横向对应,并在显示屏上显示与第二使用者命令对应的内容。
例如,如图5所示,在接收诸如“播放LOVE音乐视频。”的使用者语音的情况下,显示装置100可以将显示屏旋转为横向,在旋转为横向的显示屏上显示与第二使用者命令对应的影像内容。
此外,显示装置100可以基于与各种使用者语音对应的使用者命令的类型,决定显示屏的旋转方向,当然,本公开并非局限于如上所述的示例。
图6是简略地表示本公开的一实施例的使用者终端200的结构的框图,图7是用于具体说明基于与使用者终端200的旋转方向有关的信息来控制本公开的显示装置100的过程的图。
如图6所示,本公开的一实施例的使用者终端200可以包括通信部210、显示屏220、传感器230、存储器240及处理器250。但是,这种结构是示例性的,在实施本公开方面,当然可以在这种结构上添加新的结构或省略一部分结构。
通信部210包括电路,可以执行与服务器或外部装置的通信。具体而言,处理器250可以从通过通信部210而连接的服务器或外部装置接收各种数据或信息,也可以向服务器或外部装置传输各种数据或信息。通信部210可以包括WiFi模块、蓝牙模块、无线通信模块及NFC模块中至少一种。
特别是在本公开的各种实施例中,处理器250可以控制通信部210,以使将与使用者终端200正显示的画面对应的内容及与使用者终端200的旋转方向有关的信息传输给显示装置100。
显示屏220可以根据处理器250的控制而输出影像数据。具体而言,显示屏220可以根据处理器250的控制而输出存储器240中预先存储的影像。特别是显示屏220也可以显示存储器240中存储的用户界面(User Interface)。
显示屏220可以以LCD(Liquid Crystal Display Panel,液晶显示面板)、OLED(Organic Light Emitting Diodes,有机电致发光二极管)等体现,另外,根据情况,显示屏220也可以由柔性显示屏、透明显示屏等体现。不过,本公开的显示屏220并非限定于特定的种类。
特别是根据本公开的各种实施例,显示屏220可以显示各种用户界面,所述各种用户界面能够接受用于控制与使用者终端200通信连接的显示装置100的使用者命令的输入。
传感器230可以包括加速度传感器及陀螺仪传感器中至少一种。加速度传感器作为能够测量显示装置100的加速度的传感器,也称为加速度表(accelerometer)。陀螺仪传感器作为能够测量角速度的传感器,也称为陀螺仪(gyroscope)。
特别是在本公开的各种实施例中,处理器250可以通过传感器230,获得与使用者终端200的旋转方向有关的信息。即,处理器250可以通过传感器230,获得关于使用者终端200是处于旋转为横向的状态、还是处于旋转为纵向的状态的信息。
在存储器240中,可以存储有关于使用者终端200的至少一个命令。而且,在存储器240中,可以存储有用于驱动显示装置200的O/S(Oper ating System,操作系统)。另外,在存储器240中,根据本公开的各种实施例,也可以存储有使用者终端200运转所需的各种软件程序或应用程序。而且,存储器240可以包括诸如闪速存储器(Flash Memory)等半导体存储器或诸如硬盘(Hard Disk)等磁存储介质等。
具体而言,在存储器240中,可以存储有使用者终端200根据本公开的各种实施例运转所需的各种软件模块,处理器250可以运行存储器240中存储的各种软件模块,控制使用者终端200的运转。即,存储器240被处理器250访问,执行借助于处理器250的数据读取/记录/修订/删除/更新等。
另一方面,在本公开中,存储器240字样的术语可以用作包括存储器240、处理器250内只读存储器(未图示)、随机存取器(未图示)或加装于显示装置100的存储卡(未图示)(例如,微型SD卡、记忆棒)的意义。
特别是在本公开的各种实施例中,在存储器240中,可以存储有关于与使用者终端200正显示的画面对应的内容的信息及与使用者终端200的旋转方向有关的信息等。另外,在存储器240中,可以存储有各种用户界面,所述用户界面可以接受用于控制使用者终端200的使用者命令的输入。
处理器250控制使用者终端200的全面运转。具体而言,处理器250可以与包括如上所述的通信部210、显示屏220、传感器230及存储器240的使用者终端200的结构连接,运行如上所述的存储器240中存储的至少一个命令,从而全面控制使用者终端200的运转。
处理器250可以以各种方式体现。例如,处理器250可以以专用集成电路(Application Specific Integrated Circuit,ASIC)、嵌入式处理器、微处理器、硬件控制逻辑、硬件有限状态机(hardware Finite State Mach ine,FSM)、数字信号处理器(Digital Signal Processor,DSP)中至少一种体现。另一方面,在本公开中,处理器250字样的术语可以用作包括CPU(Central Processing Unit,中央处理器)、GPU(GraphicProcessing Unit,图形处理器)及MPU(Main Processing Unit,主处理器)等的意义。
特别是处理器250可以将与使用者终端200的显示屏220上正显示的画面对应的内容传输给显示装置100,使得与使用者终端200的显示屏220上正显示的画面对应的内容显示于显示装置100的显示屏110上,这称为所谓镜像。
但是,在执行镜像过程的情况下,使用者终端200的显示屏220上正显示的画面一般作为横向的传输影像而传输给显示装置100。因此,如图7所示,在使用者终端200的旋转方向为纵向且使用者终端200显示纵向的内容的情况下,如果使用者终端200不旋转与使用者终端200的显示屏220上正显示的画面对应的内容,作为横向的传输影像71而传输给显示装置100,则与作为纵向的传输影像72进行传输的情形相比,传输影像包含的内容的大小缩小。而且,在显示装置100将接收到的传输影像71显示于纵向的显示屏110的过程中,放大内容的大小,此时,可能导致内容包含的图像的劣化。
因此,根据本公开的一实施例,在使用者终端200的旋转方向为纵向的情况下,处理器250将使用者终端200的显示屏220上正显示的画面被旋转为横向的内容72传输给显示装置100,显示装置100可以将被旋转为横向的内容72重新旋转为纵向,将旋转为纵向的内容显示于纵向的显示屏110。
具体而言,在使用者终端200的旋转方向为纵向的情况下,处理器250可以将表示使用者终端200的旋转方向为纵向的信息及使用者终端200的显示屏220上正显示的画面被旋转为横向的内容传输给显示装置100。
更具体而言,如果输入用于将与使用者终端200的显示屏220上正显示的画面对应的内容传输给显示装置100的使用者命令,则处理器250可以通过通信部210而与显示装置100执行通信连接。而且,如果通过传感器230获得了表示使用者终端200的旋转方向为纵向的信息,则处理器250获得显示屏220上正显示的画面被旋转为横向的内容,控制通信部210以使其将表示使用者终端200的旋转方向为纵向的信息及所获得的内容传输给与使用者终端200连接的显示装置100。
另一方面,在使用者终端200的旋转方向为纵向的情况下,处理器250可以向显示装置100传输与在显示屏220上正显示的画面的分辨率有关的信息、以及在使用者终端200的显示屏220上正显示的画面被旋转为横向的内容72。如果接收到与在使用者终端200的显示屏220上正显示的画面的分辨率有关的信息、以及在使用者终端200的显示屏220上正显示的画面被旋转为横向的内容72,则显示装置100可以基于接收到的与分辨率有关的信息,识别在使用者终端200的显示屏220上显示的画面的纵横比。此外,如果在使用者终端200的显示屏220上显示的画面的横向长度比纵向长度短,则显示装置100可以将显示屏的旋转方向决定为纵向,将被旋转为横向的内容72重新旋转为纵向,将旋转为纵向的内容显示在显示屏110上。
另一方面,在实时反映与使用者终端200的旋转方向有关的信息而使显示装置100旋转的情况下,诸如使用者终端200的旋转角度不大的情况,或使用者终端200的旋转方向迅速地反复变更的情况,反而会存在与使用者意图相反的情形。
因此,根据本公开的一实施例,处理器250限于使用者终端200以既定角度以上保持既定时间以上期间的情形,将与使用者终端200的旋转方向有关的信息传输给显示装置100,从而可以使得不发生与使用者意图相反的显示装置100的旋转。
另一方面,在执行如上所述的镜像过程的期间,使用者终端200可以接收通知接到电话、短信或电子邮件等的提示消息。此时,使用者终端200可以显示用于询问是否将与接收到的电话、短信或电子邮件等有关的信息通过显示装置100输出的消息,可以根据使用者的选择,将与接收到的电话、短信或电子邮件等有关的信息显示于显示装置100。
另一方面,在将使用者终端200中接收到的与电话、短信或电子邮件等有关的信息显示于显示装置100的情况下,可以根据如上所述的各种实施例,决定是否旋转显示装置100的显示屏。例如,在将与接收到的短信有关的信息显示在显示装置100的情况下,显示装置100可以将显示屏的旋转方向决定为纵向。另一方面,在将与接收到的电话有关的信息显示在显示装置100的情况下,显示装置100可以决定为保持显示屏的旋转方向。
另一方面,如上所述的处理器250的控制过程在使用者终端200的控制方法中也可以同样地应用。具体而言,使用者终端200的控制方法包括:如果输入用于将与使用者终端200的显示屏220上正显示的画面对应的内容传输给显示装置的使用者命令,则与显示装置100执行通信连接的步骤;如果获得表示使用者终端200的旋转方向为纵向的信息,则获得显示屏220上正显示的画面被旋转为横向的内容的步骤;及将表示使用者终端200的旋转方向为纵向的信息及获得的内容传输给与使用者终端200连接的显示装置100的步骤。
另一方面,如上所述的使用者终端200的控制方法可以以程序体现,并提供给显示装置。特别是包括使用者终端200控制方法的程序可以存储于非暂时性可读介质(non-transitory computer readable medium)而提供。
具体而言,在包括运行使用者终端200的控制方法的程序的计算机可读记录介质中,使用者终端200的控制方法包括:如果输入用于将与使用者终端200的显示屏220上正显示的画面对应的内容传输给显示装置的使用者命令,则与显示装置100执行通信连接的步骤;如果获得表示使用者终端200的旋转方向为纵向的信息,则获得显示屏220上正显示的画面被旋转为横向的内容的步骤;及将表示使用者终端200的旋转方向为纵向的信息及获得的内容传输给与使用者终端200连接的显示装置100的步骤。
其中,所谓非暂时性可读介质,并非是如寄存器、高速缓存、存储器等那样可短暂期间存储数据的介质,而是意味着半永久性存储数据并可被设备读取(reading)的介质。具体而言,上述各种应用程序或程序可以存储于诸如CD(光盘)、DVD(数字化视频光盘)、硬盘、蓝光光盘、US B(通用串行总线)、存储卡、ROM(只读存储器)等非暂时性可读介质而提供。
图8a及图8b是表示本公开的一实施例的使用者终端200的用户界面的图。
以上针对基于与使用者终端200的旋转方向有关的信息,决定显示装置100中包括的显示屏的旋转方向的实施例进行了详细叙述,但用于使显示装置100的显示屏旋转的使用者命令也可以通过使用者终端200直接输入,显示装置100的显示屏也可以据此旋转。
具体而言,根据本公开的一实施例,与显示装置100通信连接的使用者终端200可以显示用户界面,所述用户界面用于接受用于使显示装置100的显示屏旋转的使用者命令的输入。而且,如果通过用户界面输入用于使显示装置100的显示屏旋转的使用者命令,则使用者终端200可以将与用于使显示屏旋转的使用者命令对应的控制信号传输给显示装置100。
具体而言,如图8a所示,使用者终端200的用户界面可以包括软按钮81,所述软按钮81用于接受用于使显示装置100的显示屏旋转的使用者命令的输入。另外,如图8b所示,使用者终端200的用户界面也可以包括:用于接受用于使显示装置100的显示屏旋转的使用者命令输入的图标82、用于放大或缩小显示装置100的显示屏上正显示的内容的图标83及用于结束与显示装置100通信连接的图标84等。此外,使用者终端200的用户界面当然可以包括用于控制显示装置100的各式各样种类的图标。
图8c及图8d是用于说明通过使用者终端200而放大或缩小显示显示装置100中正显示的内容的过程的图。
如前所述,显示装置100可以接收与使用者终端200正显示的画面对应的内容,将接收的内容显示于显示屏。即,显示装置100可以执行所谓镜像过程。而且,在执行镜像过程而将与使用者终端200正显示的画面对应的内容显示于显示屏上的情况下,显示装置100可以基于与使用者终端200的旋转方向有关的信息,决定显示屏的旋转方向。
另一方面,正如参照图8a及图8b而详细叙述,使用者终端200可以显示用户界面,所述用户界面用于接受用于使显示装置100的显示屏旋转的使用者命令的输入。因此,根据本公开的一实施例,在执行镜像过程而将与使用者终端200正显示的画面对应的内容显示于显示屏上的情况下,显示装置100可以从使用者终端200接收用于使显示装置100的显示屏旋转的使用者命令,基于接收到的使用者命令,使显示装置100的显示屏旋转。
在图8c中,使用者终端200的旋转方向为纵向,但显示装置100的旋转方向为横向,这是为了表示在执行镜像过程的期间,用于使显示屏旋转为横向的使用者命令通过使用者终端200输入,显示装置100的显示屏据此旋转的状态。
如果执行如上所述的镜像过程,则如图8c的第一画面810所示,显示装置100可以接收与使用者终端200正显示的画面对应的内容,将接收到的内容显示于显示装置100的显示屏上。
如果从使用者终端200接收用于放大显示装置100的显示屏上正显示的内容的使用者命令,则如图8c的第二画面820所示,显示装置100可以扩大显示显示屏上正显示的内容。此时,在正显示内容的区域中成为放大对象的区域、以及内容的放大比率,可以根据使用者的选择而相异地决定。
如果从使用者终端200接收用于将显示装置100的显示屏上正显示的内容中的影像内容85显示为全体画面的使用者命令,则如图8c的第三画面830所示,显示装置100可以放大显示屏上正显示的内容,将影像内容显示为全体画面。
另一方面,图8d是用于说明在使用者终端200的旋转方向为纵向且显示装置100的旋转方向也为纵向的情况下,通过使用者终端200放大或缩小显示显示装置100中正显示的内容的过程的图。
如果执行如上所述的镜像过程,则如图8d的第一画面840所示,与使用者终端200正显示的画面对应的内容可以显示于显示装置100的显示屏上。此时,在显示装置100的显示屏上,可以一同显示通知栏86及左右黑色区域87等。其中,左右黑色区域87起因于使用者终端200的显示屏与显示装置100的显示屏相互间的屏幕比率差异。
如果从使用者终端200接收用于放大显示装置100的显示屏上正显示的内容的使用者命令,则显示装置100可以放大显示显示屏上正显示的内容。此时,如图8d的第二画面850所示,显示装置可以放大显示内容而使得如上所述的通知栏86及左右黑色区域87不被显示。
另一方面,在图8d中虽然未具体图示,但与图8c所示情形相同,即使在显示装置100的显示屏旋转为纵向的状态下执行镜像功能的情况下,也可以输入用于将显示屏上正显示的内容中的影像内容显示为全体画面的使用者命令。
如果从使用者终端200接收用于将显示装置100的显示屏上正显示的内容中的影像内容显示为全体画面的使用者命令,则显示装置100可以基于根据使用者命令要以全体画面显示的影像内容的纵横比,使显示装置的显示屏旋转。
具体而言,如果从使用者终端200接收用于将显示屏上正显示的内容中的影像内容显示为全体画面的使用者命令且要以全体画面显示的影像内容的纵横比大于1,则也可以使显示装置100的显示屏旋转为横向,在旋转为横向的显示屏上,将影像内容显示为全体画面。
另一方面,以上只对放大显示显示装置100的显示屏上正显示的内容的情形进行了说明,但相反,也可以缩小显示显示装置100的显示屏上正显示的内容。具体而言,如果从使用者终端200接收用于缩小显示装置100的显示屏上正显示的内容的使用者命令,则如图8d的第三画面860所示,显示装置100可以缩小显示显示屏上正显示的内容。与扩大显示内容的情形相同,正显示内容的区域中的成为缩小对象的区域以及内容的缩小比率,可以根据使用者的选择而相异地决定。
图9是显示本公开的一实施例的远程控制装置300的图。
如图9所示,远程控制装置300可以包括用于控制显示装置100的多个按钮。而且,多个按钮分别与用于控制显示装置100的使用者命令中至少一者对应。即,如果使用者按下多个按钮中的一个按钮,则远程控制装置300可以将与相应按钮对应的控制信号传输给显示装置100。如图9所示,多个按钮可以包括电源按钮91、音量调节按钮92、播放/暂停按钮93、频道调节按钮94等。
根据本公开的一实施例,如果从用于控制显示装置100的远程控制装置300接收与使用者命令对应的控制信号,则显示装置100可以基于与控制信号对应的显示装置100的功能,决定显示屏的旋转方向。
例如,如果远程控制装置300将与电源按钮91或音量调节按钮92对应的控制信号传输给显示装置100,且显示装置100接收与电源按钮91或音量调节按钮92对应的控制信号,则显示装置100可以将与电源开启/关闭或音量调节的显示装置100功能对应的显示屏的旋转方向决定为纵向。
相反,如果远程控制装置300将与播放/暂停按钮93或频道调节按钮94对应的控制信号传输给显示装置100且显示装置100接收与播放/暂停按钮93或频道调节按钮94对应的控制信号,则显示装置100可以将与播放/暂停或频道调节的显示装置100的功能对应的显示屏的旋转方向决定为横向。
如上所述的示例只不过是关于决定与显示装置100功能对应的显示屏的旋转方向的示例,与各个显示装置100的功能对应的显示屏的旋转方向,当然可以根据使用者的设置等而变更。
图10是用于表示本公开的一实施例的显示装置100的用户界面的图。
显示装置100可以显示用户界面。特别是显示装置100的用户界面,即使在显示装置100电源关闭的情况下也可以显示。即,本公开的显示装置100可以包括指称为所谓始终显示(Always on Display,AoD)等的功能。
如图10所示,显示装置100的用户界面可以包括钟表状的对象1010。用户界面中包括的钟表状的对象可以表示当前时刻。
另一方面,显示装置100的用户界面可以从使用者终端200接收。而且,显示装置100可以存储接收到的用户界面,如果显示装置100的电源关闭,则可以显示预先存储的用户界面。
另一方面,在显示装置100中存储有多个用户界面的情况下,显示装置100在显示装置100的电源关闭后,可以显示预先存储的多个用户界面中的一个用户界面。然后,如果输入用于将显示的用户界面变更为另一用户界面的使用者命令,则显示装置100也可以根据使用者命令,将显示的用户界面变更为另一用户界面并显示。
另一方面,如图10所示,显示装置100的用户界面可以包括提示消息1020。具体而言,用户界面可以包括用于引导显示屏的旋转的提示消息1020。例如,提示消息1020可以是诸如“相应功能只在横向模式下可用。TV旋转为横向模式。”的消息。
虽然在图10中未图示,但显示装置100的用户界面可以包括关于显示屏是否旋转的询问消息及用于接受关于显示屏是否旋转的使用者命令的输入的对象。例如,关于显示屏是否旋转的询问消息可以是诸如“相应功能只在横向模式下可用。将TV旋转为横向模式吗?”的消息,用于接受关于显示屏是否旋转的使用者命令的输入的对象可以包括诸如“是”及“否”的消息。而且,此时,如果输入选择“是”字样的对象的使用者命令,则显示装置100可以使显示屏旋转。
除如上所述的示例外,显示装置100的用户界面可以显示与显示装置100的控制相关的各式各样种类的用户界面。
图11是用于说明本公开的一实施例的显示装置100的控制方法的流程图。
如图11所示,本公开的一实施例的显示装置100在显示装置的显示屏上显示第一内容的期间,接收用于控制显示装置100的使用者命令(S1110)。具体而言,显示装置100可以通过与显示装置100通信连接的使用者终端200接收使用者命令,也可以通过用于控制显示装置100的远程控制装置300接收使用者命令。
如果接收用于控制显示装置100的使用者命令,则显示装置100基于使用者命令的类型,决定显示屏的旋转方向。具体而言,如果接收到的使用者命令是用于控制第一内容的命令,则显示装置100可以决定为保持显示屏的旋转方向,如果接收到的使用者命令是用于在显示屏上显示第二内容的命令,则可以基于第二内容的类型,决定显示屏的旋转方向(S1120)。
具体而言,如果接收到的使用者命令是用于保持显示屏上正显示的第一内容而变更与第一内容相关的设置的命令,则显示装置100可以决定为保持显示屏的旋转方向。例如,如果接收到的使用者命令是用于变更第一内容的音量设置或暂停第一内容播放的命令,则显示装置100可以决定为保持显示屏的旋转方向。
另一方面,如果接收到的使用者命令是用于不显示显示屏上正显示的第一内容而显示与第一内容相异的第二内容的命令,则显示装置100可以基于第二内容的类型决定显示屏的旋转方向。
其中,基于第二内容的类型决定显示屏的旋转方向,可以根据是将第二内容在旋转为横向的显示屏上显示合适、还是在旋转为纵向的显示屏上显示合适而决定。
具体而言,第二内容的类型可以根据第二内容是关于广播内容的、是关于DVD内容的、是关于游戏内容的、是关于网页内容的、是关于电子书(e-book)内容的以及是关于与诸如使用者终端200的外部装置中显示的画面对应的内容的等而决定。
例如,如果第二内容为广播内容,则显示装置100可以将显示屏的旋转方向决定为横向。其中,广播内容不仅包括从地波频道、有线频道及卫星频道接收的内容,而且可以包括从提供在线流媒体网站的服务器接收的内容等。作为又一示例,如果第二内容为网页内容,则显示装置100限于提供相应网页的服务器提供移动模式的网页的情形,可以将显示屏的旋转方向决定为纵向。
另一方面,第二内容的类型也可以基于诸如第二内容的纵横比、第二内容的提供主体等各种属性而决定。例如,如果第二内容的纵横比小于1,即第二内容的横向长度短于纵向长度,则显示装置100可以将显示屏的旋转方向决定为纵向。
另一方面,以上以第二内容是影像内容的情形为前提进行了说明,但第二内容也可以是语音内容。即,如果在显示屏上显示第一内容的期间,接收用于输出作为语音内容的第二内容的使用者命令,则显示装置100可以决定为保持显示屏的旋转方向。
以上对基于第二内容的类型决定显示屏的旋转方向的过程进行详细叙述,但与第二内容的类型对应的显示屏的旋转方向可以预先存储于显示装置100,也可以根据使用者的设置而更新。
不仅如此,与第二内容的类型对应的显示屏的旋转方向也可以通过经学习的人工智能模型而获得。具体而言,显示装置100可以将与第二内容的类型有关的信息输入到人工智能模型,从而获得与第二内容的类型对应的与显示屏的旋转方向有关的信息,也可以基于获得的与旋转方向有关的信息,决定显示屏的旋转方向。
另一方面,如果在显示屏上显示第一内容的期间,从远程控制装置300接收用于显示第二内容的使用者命令,则显示装置100可以将显示屏的旋转方向决定为横向。例如,如果在旋转为纵向的显示屏上显示第一内容的期间,从远程控制装置300接收用于显示第二内容的频道变更命令,则显示装置100可以将显示屏的旋转方向决定为横向,使显示屏旋转为决定的横向,并在旋转为横向的显示屏上显示第二内容。
另一方面,显示装置100可以接收与使用者终端200正显示的画面对应的内容,将接收的内容显示于显示屏。即,显示装置100可以执行所谓镜像过程。而且,在执行镜像过程而将与使用者终端200正显示的画面对应的内容显示于显示屏上的情况下,显示装置100可以基于与使用者终端200的旋转方向有关的信息,决定显示屏的旋转方向。
具体而言,如果在显示屏上显示第一内容的期间,接收用于在显示屏上显示第二内容的使用者命令,则显示装置100可以从使用者终端200接收第二内容及与使用者终端200的旋转方向有关的信息。而且,如果第二内容是与使用者终端200正显示的画面对应的内容,则显示装置100可以基于与使用者终端200的旋转方向有关的信息,决定显示屏的旋转方向。例如,如果使用者终端200的旋转方向为纵向,则显示装置100可以将显示屏的旋转方向决定为纵向,如果使用者终端200的旋转方向为横向,则显示装置100可以将显示屏的旋转方向决定为横向。
另一方面,如果从使用者终端200接收表示使用者终端200的旋转方向为纵向的信息及使用者终端200正显示的画面被旋转为横向的内容,则显示装置100可以将显示屏的旋转方向决定为纵向。然后,显示装置100可以使显示屏旋转以使其与所决定的纵向对应,处理接收到的内容以使在显示屏上纵向显示所接收的内容,并在显示屏上显示处理后的内容。
另一方面,本公开的使用者命令也可以通过使用者语音而输入。具体而言,如果在显示屏上显示第一内容的期间接收第一使用者语音,则显示装置100可以将接收到的第一使用者语音输入到第一人工智能模型,获得与接收到的第一使用者语音对应的使用者命令。而且,如果获得的使用者命令是用于控制第一内容的命令,则显示装置100可以决定为保持显示屏的旋转方向。另一方面,如果获得的使用者命令是用于在显示屏上显示第二内容的命令,则显示装置100可以基于第二内容的类型决定显示屏的旋转方向。
如上所述,如果决定显示屏的旋转方向,则显示装置100可以控制显示屏以使其与所决定的旋转方向对应(S1130)。其中,所谓控制显示屏以使其与所决定的旋转方向对应,不仅包括在显示屏处于与决定的旋转方向不对应的状态时使显示屏旋转以使其与所决定的旋转方向对应的情形,还包括在显示屏已处于与所决定的旋转方向对应的状态时不使显示屏旋转的情形。
如果显示屏被控制为与所决定的旋转方向对应,则显示装置100可以在显示屏上显示与使用者命令对应的内容。具体而言,如果在显示屏上显示第一内容的期间接收到的使用者命令是用于控制第一内容的命令,则显示装置100可以保持显示屏上显示的第一内容。如果在显示屏上显示第一内容的期间接收到的使用者命令是用于显示第二内容的命令,则显示装置100可以在显示屏上显示第二内容。
另一方面,所述实施例的显示装置的控制方法可以以程序体现并提供给显示装置。特别是包括显示装置的控制方法的程序可以存储于非暂时性可读介质(non-transitory computer readable medium)而提供。
具体而言,在包括运行显示装置100的控制方法的程序的计算机可读记录介质中,显示装置100的控制方法包括:如果接收用于控制显示装置100的使用者命令,则基于使用者命令的类型决定显示装置100包括的显示屏的旋转方向的步骤;控制显示屏,以使其与所决定的旋转方向对应的步骤;及在显示屏上显示与使用者命令对应的内容的步骤。
其中,所谓非暂时性可读介质,并非是如寄存器、高速缓存、存储器等那样可短暂期间存储数据的介质,而是意味着半永久性存储数据并可被设备读取(reading)的介质。具体而言,上述各种应用程序或程序可以存储于诸如CD(光盘)、DVD(数字化视频光盘)、硬盘、蓝光光盘、USB(通用串行总线)、存储卡、ROM(只读存储器)等非暂时性可读介质而提供。
以上对显示装置100的控制方法以及包括运行显示装置100的控制方法的程序的计算机可读记录介质进行了简略说明,但这只是为了省略重复说明,关于显示装置100的各种实施例当然也可以针对显示装置100的控制方法以及包括用于运行显示装置100的控制方法的程序的计算机可读记录介质应用。
图12是用于具体说明本公开的一实施例的语音识别过程的图。
本公开的一实施例的语音识别过程可以通过如图12所示的人工智能代理系统执行。即,根据本公开的一实施例,显示装置100可以获得与接收到的使用者语音对应的使用者命令,这种语音识别过程可以通过人工智能模型执行。根据本公开的一实施例,语音识别系统可以存储于显示装置100的存储器内。但是,这只是一实施例,语音识别系统包括的至少一者可以包括于外部的至少一个服务器。
语音识别系统如图12所示,可以包括自动语音识别(automatic spee chrecognition)(ASR)模块1210、自然语言理解(natural language un derstanding)(NLU)模块1220、对话管理(dialogue manager)(DM)模块1230及自然语言生成(naturallanguage generator)(NLG)模块1240。此外,语音识别系统还可以包括路径规划(pathplanner)模块或行动规划(action planner)模块。
自动语音识别(automatic speech recognition)(ASR)模块1210可以将从显示装置100接收的使用者语音变换成文本数据。而且,自动语音识别模块1210可以包括发声识别模块,发声识别模块可以包括声学(aco ustic)模型及语言(language)模型。特别是声学模型可以获得与使用者语音的声学特征有关的信息。
具体而言,声学模型可以包括关于发声的信息,语言模型可以包括单位音素信息及与单位音素信息的组合有关的信息。而且,发声识别模块可以利用与发声相关的信息及与单位音素信息有关的信息,将使用者发声变换成文本数据。关于声学模型及语言模型的信息,例如可以存储于自动语音识别数据库(automatic speech recognition database)(ASR DB)1215。
如上所述的自动语音识别模块1210在其中尤其是如果基于声学模型获得了与使用者语音的声学特征有关的信息,则自动语音识别模块1210可以基于所获得的与使用者语音的声学特征有关的信息,获得与使用者的感情有关的信息。
例如,自动语音识别模块1210对包括卷积神经网络CNN(Convoluti on NeuralNetwork)等的人工智能模型中输入与使用者声学特征有关的信息,可以利用将使用者语音中包含的感情因子分类的方式等,获得与使用者的感情有关的信息。
自然语言理解模块1220可以执行语法分析(syntactic analyze)或语意分析(semantic analyze),从而掌握使用者意图。
自然语言理解模块1220可以将使用者输入分成语法单位(例:单词、句子、语素等),掌握拆分后的单位具有何种语法要素,从而执行语法分析。
自然语言理解模块1220可以利用语意(semantic)匹配、规则(rule)匹配、公式(formula)匹配等执行语意分析。因此,自然语言理解模块1220可以获得使用者输入表现哪个领域(domain)、意图(intent),或者表现意图所需的参数(parameter)(或者,属性槽(slot))。
自然语言理解模块1220可以利用分为领域(domain)、意图(inten d)及掌握意图所需的参数(parameter)(或者,属性槽(slot))的匹配规则,决定使用者的意图及参数。
例如,一个领域(例:警报)可以包括多个意图(例:警报设置、警报解除等),一个意图可以包括多个参数(例:时间、反复次数、警报音等)。而且,多个规则可以包括一个以上的必需要素参数。另一方面,匹配规则可以存储于自然语言识别数据库(natural languageunderstanding database)(NLU DB)1225。
自然语言理解模块1220可以利用语素、句子等的语言学特征(例:语法要素),掌握从使用者输入所提取的单词的意义,使掌握的单词的意义匹配于领域及意图,决定使用者的意图。
例如,自然语言理解模块1220可以计算各个领域及意图中包含多少从使用者输入所提取的单词,从而决定使用者意图。根据一实施例,自然语言理解模块1220可以利用成为掌握意图的基础的单词,从而决定使用者输入的参数。
另外,自然语言理解模块1220可以利用存储了掌握使用者输入的意图所需的语言学特征的自然语言识别数据库1225,从而决定使用者的意图。
自然语言理解模块1220可以基于使用者输入的意图及参数,生成路径规则。例如,自然语言理解模块1220可以基于使用者输入的意图,选择将运行的小程序,决定选择的小程序(App)将执行的动作。
自然语言理解模块1220可以决定与决定的动作对应的参数,从而生成路径规则。根据一实施例,由自然语言理解模块1220生成的路径规则可以包括与将运行的小程序、小程序将运行的动作及运行所述动作所需的参数有关的信息。
自然语言理解模块1220可以基于使用者输入的意图及参数,生成一个路径规则或多个路径规则。例如,自然语言理解模块1220可以从路径规划模块接收与显示装置100对应的路径规则集,将使用者输入的意图及参数映射于接收到的路径规则集,从而决定路径规则。
此时,路径规则可以包括与执行小程序功能所需的动作(或操作(op eration))有关的信息或与运行动作所需的参数有关的信息。另外,路径规则可以包括小程序的动作顺序。显示装置100可以接收路径规则,根据路径规则选择小程序,使所选择的小程序运行路径规则中所包含的动作。
自然语言理解模块1220可以基于使用者输入的意图及参数,决定将运行的小程序、小程序将运行的动作及运行所述动作所需的参数,从而生成一个路径规则或多个路径规则。
例如,自然语言理解模块1220可以利用显示装置100的信息,把将运行的小程序及该小程序将运行的动作根据使用者输入的意图排列成本体(ontology)或图表模型(graphmodel)形态,从而生成路径规则。而且,生成的路径规则可以通过路径规划模块,存储于路径规则数据库(path rule database)。所述生成的路径规则可以添加于数据库1225的路径规则集。
自然语言理解模块1220可以选择生成的多个路径规则中至少一个路径规则。例如,自然语言理解模块1220可以选择多个路径规则的最佳路径规则。又例如,自然语言理解模块1220可以基于使用者发声,当只特定了一部分动作时,选择多个路径规则。自然语言理解模块1220可以根据使用者的追加输入,决定多个路径规则的一个路径规则。
对话管理模块1230可以判断自然语言理解模块1220掌握的使用者的意图是否明确。例如,对话管理模块1230可以基于参数信息是否充分而判断使用者的意图是否明确。对话管理模块1230可以判断自然语言理解模块1220掌握的参数是否足以执行任务。
根据一实施例,对话管理模块1230在使用者的意图不明确的情况下,可以执行用于向使用者请求所需信息的反馈。例如,对话管理模块1230可以执行用于请求与掌握使用者意图所需的参数有关的信息的反馈。另外,对话管理模块1230可以生成用于确认包含由自然语言理解模块1220变更的文本的使用者疑问所需的消息并将其输出。
根据一实施例,对话管理模块1230可以包括内容提供(content prov ider)模块。内容提供模块在可以基于自然语言理解模块1220掌握的意图及参数而执行动作的情况下,可以生成执行与使用者输入对应的任务的结果。
自然语言生成模块(NLG模块)1240可以将指定的信息变更为文本形态。所述变更为文本形态的信息可以为自然语言发声的形态。其中,指定的信息可以是关于追加输入的信息、提示与使用者输入对应的动作已完成的信息或引导使用者的追加输入的信息(例:对使用者输入的反馈信息)。
变更为文本形态的信息可以显示于显示装置100的显示屏,或由文本语音变换模块(TTS模块)变更为语音形态。
图13是显示本公开一个实施例的处理器的具体结构的框图。
参照图13,一部分实施例的处理器140可以包括数据学习部1310及数据识别部1320。
数据学习部1310可以学习用于获得本公开的与接收到的使用者语音对应的使用者命令及获得与内容的类型对应的与显示屏的旋转方向有关的信息所需的基准。数据学习部1310可以学习关于为了获得与接收到的使用者语音对应的使用者命令及获得与内容的类型对应的与显示屏的旋转方向有关的信息而应利用何种数据、如何利用数据获得与接收到的使用者语音对应的使用者命令及获得与内容的类型对应的与显示屏的旋转方向有关的信息的基准。数据学习部1310获得将用于学习的数据,将获得的数据应用于人工智能模型,从而可以学习用于获得与接收到的使用者语音对应的使用者命令及获得与内容的类型对应的与显示屏的旋转方向有关的信息所需的基准。
数据识别部1320可以输出关于获得与接收到的使用者语音对应的使用者命令及获得与接收到的内容的类型对应的与显示屏的旋转方向有关的信息的结果。数据识别部1320可以利用经学习的人工智能模型,根据既定数据,输出关于获得与接收到的使用者语音对应的使用者命令及获得与内容的类型对应的与显示屏的旋转方向有关的信息的结果。
具体而言,数据识别部1320根据基于学习的预先设置的基准,获得既定的数据,以获得的数据为输入值,利用人工智能模型,从而可以输出关于获得与接收的使用者语音对应的使用者命令及获得与内容的类型对应的与显示屏的旋转方向有关的信息的结果。另外,借助于数据识别模型,以获得的数据为输入值而输出的结果值,可以用于更新人工智能模型。
数据学习部1310及数据识别部1320中至少一者可以制作成至少一个硬件芯片形态,从而搭载于显示装置。例如,数据学习部1310及数据识别部1320中至少一者既可以制作成用于人工智能(AI;artificial intellig ence)的专用硬件芯片形态,也可以制作成原有的通用处理器(例:CPU或application processor(应用处理器))或图形专用处理器(例:GPU)的一部分,从而搭载于前述各种显示装置。
此时,数据学习部1310及数据识别部1320既可以搭载于一个显示装置100,也可以分别搭载于独立的显示装置。例如,可以数据学习部1310及数据识别部1320之一包括于显示装置100,其余一者包括于服务器。
另外,数据学习部1310及数据识别部1320也可以通过有线或无线,将数据学习部1310所构建的模型信息提供给数据识别部1320,输入到数据识别部1320的数据也可以作为追加学习数据而提供给数据学习部1310。
另一方面,数据学习部1310及数据识别部1320中至少一者可以以软件模块体现。在数据学习部1310及数据识别部1320中至少一者以软件模块(或者,包括指令(instruction)的程序模块)体现的情况下,软件模块可以存储于计算机可以读取的非暂时性的计算机可读记录介质(non-trans itory computer readable media)。
另外,此时,至少一个软件模块可以借助于OS(Operating System)而提供,或借助于既定应用程序而提供。或者,至少一个软件模块中的一部分可以借助于OS(OperatingSystem)而提供,其余一部分可以借助于既定应用程序而提供。
根据如上所述的本公开的各种实施例,显示装置100在以比使用者终端200更大的视觉体验提供各种内容的同时,基于用于控制显示装置100的使用者命令的类型而使显示屏旋转,从而可以通过旋转为符合使用者的各种内容视听体验的显示屏来提供内容。
如上所述的本公开的各种实施例的结构要素(例:模块或程序)分别可以由单个或多个个体构成,前述相应子结构要素中的一部分子结构要素可以省略,或者其他子结构要素也可以包括于各种实施例。替代性或追加性地,一部分结构要素(例:模块或程序)可以统合为一个个体,可以相同或类似地执行统合前由各个相应结构要素执行的功能。
由各种实施例的模块、程序或其他结构要素所执行的动作,可以依次地、并列地、反复地或试探地运行,或者至少一部分动作可以按不同顺序运行或省略,或添加其他动作。
另一方面,本公开中使用的术语“部”或“模块”,可以包括由硬件、软件或固件构成的单元,例如,可以与逻辑、逻辑块、部件或电路等术语互换使用。“部”或“模块”可以为一体构成的部件或者执行一个或其以上功能的最小单位或其一部分。例如,模块可以以ASIC(application-specific in tegrated circuit,专用集成电路)构成。
本公开的各种实施例可以以能够用设备(machine)(例:计算机)读取的存储介质(machine-readable storage media)中存储的包括命令的软件体现。设备作为从存储介质导出所存储的命令并可以根据导出的命令进行运转的装置,可以包括公开实施例的显示装置(例:显示装置100)。
在所述命令被处理器运行的情况下,处理器可以直接或在所述处理器的控制下利用其他结构要素,执行与所述命令相应的功能。命令可以包括借助于编译器或解释器而生成或运行的代码。
能用设备读取的存储介质,可以以非暂时性(non-transitory)存储介质的形态提供。其中,“非暂时性”仅意味着存储介质不包括信号(signal)而是有形(tangible)的,不区分数据在存储介质中半永久性或临时性存储。
根据一实施例,本文书中公开的各种实施例的方法可以包含于计算机程序制品(computer program product)而提供。计算机程序制品作为商品,可以在销售者及购买者间交易。
计算机程序制品可以以能用设备读取的存储介质(例:compact disc read onlymemory(CD-ROM))形态,或通过应用程序商店(例:电子市场TM(play storeTM))而在线发布。在在线发布的情况下,计算机程序制品的至少一部分至少可以暂时存储于制造商的服务器、应用程序商店的服务器或中继服务器的诸如存储器的存储介质,或临时生成。
以上对本公开优选实施例进行了图示和说明,但本公开不限定于上述特定的实施例,在不超出权利要求书请求的本公开要旨的情况下,当然可以由相应公开所属技术领域的普通技术人员进行各种变形实施,这些变形实施不得独立于本公开的技术思想或展望而理解。

Claims (14)

1.一种显示装置,包括:
通信部;
显示屏;
电机,其使所述显示屏旋转;
存储器,其存储至少一个指令;及
处理器,其运行所述至少一个指令,
所述处理器
当通过所述通信部,从连接到所述显示装置的纵向状态的使用者终端接收到与所述使用者终端正显示的纵画面对应的影像数据向横向旋转90度的传输影像数据、以及表示所述使用者终端的旋转方向为纵向的信息时,控制所述电机以使所述显示屏向纵向旋转,
控制所述显示屏以显示纵向的第一内容,该第一内容是将所接收的所述传输影像数据向纵向旋转90度而生成的内容。
2.根据权利要求1所述的显示装置,其中,
所述处理器
如果在所述显示屏上显示所述第一内容的期间,通过所述通信部,接收到与第二内容对应的影像数据向横向旋转90度的传输影像数据、以及表示所述使用者终端的旋转方向为横向的信息时,控制所述电机以使所述显示屏向横向旋转,
控制所述显示屏以显示所述第二内容。
3.根据权利要求1所述的显示装置,其中,
还包括麦克风,
所述处理器,
在所述显示屏上显示第一内容的期间,接收用于控制所述显示装置的使用者命令,
所述使用者命令是,在所述显示屏上显示所述第一内容的期间,将通过所述麦克风而接收的使用者语音输入到经学习的人工智能模型而获得的。
4.根据权利要求1所述的显示装置,其中,
在所述显示屏上显示所述第一内容的期间,如果与所述使用者终端的通信连接结束,则所述处理器控制所述电机以使所述显示屏向横向旋转。
5.一种计算机可读记录介质,在包括用于运行使用者终端的控制方法的程序的非暂时性计算机可读记录介质中,
所述使用者终端的控制方法包括以下步骤:
在所述使用者终端处于纵向状态时,接收使用者输入,该使用者输入是用于将与所述使用者终端的显示屏上正显示的画面对应的内容传输到与所述使用者终端连接的显示装置;
当获得表示所述使用者终端的旋转方向为纵向的信息时,通过将与所述使用者终端的显示屏上正显示的纵画面对应的影像数据向横向旋转90度来生成传输影像数据;以及
向所述显示装置传输所述传输影像数据以及表示所述使用者终端的旋转方向为纵向的信息,以在所述显示装置上显示通过将所述传输影像数据向纵向旋转90度而生成的纵向内容。
6.根据权利要求5所述的计算机可读记录介质,其中,
所述使用者终端的控制方法还包括:
当获得表示所述使用者终端的旋转方向为横向的信息时,生成与所述显示屏上正显示的画面对应的内容的方向被保持的传输影像数据的步骤;以及
向所述显示装置传输与所述显示屏上正显示的画面对应的内容的方向被保持的传输影像数据。
7.根据权利要求5所述的计算机可读记录介质,其中,
所述使用者输入是通过所述显示屏上显示的用户界面来接收的。
8.根据权利要求5所述的计算机可读记录介质,其中,
所述使用者输入是从所述显示装置接收的。
9.根据权利要求5所述的计算机可读记录介质,其中,
所述影像数据向横向旋转90度的方向是顺时针方向和逆时针方向中之一的第一方向,
所述影像数据向纵向旋转90度的方向是顺时针方向和逆时针方向中之一的、与所述第一方向不同的第二方向。
10.一种使用者终端的控制方法,包括以下步骤:
在所述使用者终端处于纵向状态时,接收使用者输入,该使用者输入是用于将与所述使用者终端的显示屏上正显示的画面对应的内容传输到与所述使用者终端连接的显示装置;
当获得表示所述使用者终端的旋转方向为纵向的信息时,通过将与所述使用者终端的显示屏上正显示的纵画面对应的影像数据向横向旋转90度来生成传输影像数据;以及
向所述显示装置传输所述传输影像数据以及表示所述使用者终端的旋转方向为纵向的信息,以在所述显示装置上显示通过将所述传输影像数据向纵向旋转90度而生成的纵向内容。
11.根据权利要求10所述的使用者终端的控制方法,其中,
所述使用者终端的控制方法还包括:
当获得表示所述使用者终端的旋转方向为横向的信息时,生成与所述显示屏上正显示的画面对应的内容的方向被保持的传输影像数据的步骤;以及
向所述显示装置传输与所述显示屏上正显示的画面对应的内容的方向被保持的传输影像数据。
12.根据权利要求10所述的使用者终端的控制方法,其中,
所述使用者输入是通过所述显示屏上显示的用户界面来接收的。
13.根据权利要求10所述的使用者终端的控制方法,其中,
所述使用者输入是从所述显示装置接收的。
14.根据权利要求10所述的使用者终端的控制方法,其中,
所述影像数据向横向旋转90度的方向是顺时针方向和逆时针方向中之一的第一方向,
所述影像数据向纵向旋转90度的方向是顺时针方向和逆时针方向中之一的、与所述第一方向不同的第二方向。
CN201910860973.5A 2019-04-26 2019-09-11 显示装置及显示装置的控制方法 Active CN111866565B (zh)

Applications Claiming Priority (4)

Application Number Priority Date Filing Date Title
US201962839058P 2019-04-26 2019-04-26
US62/839,058 2019-04-26
KR10-2019-0062772 2019-05-28
KR1020190062772A KR102656521B1 (ko) 2019-04-26 2019-05-28 디스플레이 장치 및 디스플레이 장치의 제어 방법

Publications (2)

Publication Number Publication Date
CN111866565A CN111866565A (zh) 2020-10-30
CN111866565B true CN111866565B (zh) 2022-09-02

Family

ID=68072175

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201910860973.5A Active CN111866565B (zh) 2019-04-26 2019-09-11 显示装置及显示装置的控制方法

Country Status (4)

Country Link
US (2) US11019388B2 (zh)
EP (1) EP3731515A1 (zh)
CN (1) CN111866565B (zh)
WO (1) WO2020218686A1 (zh)

Families Citing this family (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN111866565B (zh) * 2019-04-26 2022-09-02 三星电子株式会社 显示装置及显示装置的控制方法
WO2021015307A1 (ko) * 2019-07-19 2021-01-28 엘지전자 주식회사 사용자의 음성을 통해 가전 기기를 제어할 수 있는 디스플레이 장치 및 인공 지능 서버
CN115136610A (zh) * 2020-03-13 2022-09-30 海信视像科技股份有限公司 一种显示设备及开机方法
KR20210118616A (ko) * 2020-03-23 2021-10-01 삼성전자주식회사 디스플레이 장치 및 그 제어 방법

Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN1463545A (zh) * 2001-06-27 2003-12-24 索尼株式会社 摄像机、其使用方法及其控制程序
CN111866565A (zh) * 2019-04-26 2020-10-30 三星电子株式会社 显示装置及显示装置的控制方法

Family Cites Families (18)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2612044B2 (ja) 1988-07-21 1997-05-21 株式会社日立製作所 電子ファイル装置
JP2000293111A (ja) 1999-04-09 2000-10-20 Sony Corp 画像表示装置
KR101087099B1 (ko) 2005-01-13 2011-11-25 엘지전자 주식회사 디스플레이 장치에서의 피봇 동작 디스플레이 방법
US8065624B2 (en) * 2007-06-28 2011-11-22 Panasonic Corporation Virtual keypad systems and methods
KR101655807B1 (ko) * 2009-12-17 2016-09-08 엘지전자 주식회사 영상표시장치 및 그 동작 방법
KR20110072163A (ko) * 2009-12-22 2011-06-29 성균관대학교산학협력단 컴퓨터용 모니터의 자동 회전장치
KR101708648B1 (ko) * 2010-05-04 2017-02-21 엘지전자 주식회사 영상표시장치 및 그 동작 방법
KR20110122556A (ko) 2010-05-04 2011-11-10 엘지전자 주식회사 영상표시장치 및 그 동작 방법
US20150304593A1 (en) * 2012-11-27 2015-10-22 Sony Corporation Display apparatus, display method, and computer program
KR20140133363A (ko) 2013-05-10 2014-11-19 삼성전자주식회사 디스플레이 장치 및 이의 제어 방법
JP2014232228A (ja) * 2013-05-29 2014-12-11 ソニー株式会社 情報処理装置、および情報処理システム
KR101768974B1 (ko) * 2013-06-17 2017-08-18 삼성전자주식회사 디스플레이 장치 및 그제어 방법
JP2015207891A (ja) * 2014-04-21 2015-11-19 三菱電機株式会社 映像表示装置
US20170140508A1 (en) 2014-05-22 2017-05-18 Huawei Technologies Co., Ltd. Method, apparatus, and terminal for controlling screen auto-rotation
US10048746B2 (en) * 2015-03-27 2018-08-14 Eduardo A. Gonzalez Solis Interactive digital entertainment kiosk
KR101746809B1 (ko) 2015-07-27 2017-06-14 엘지전자 주식회사 회전 스크린을 이용하는 3차원 디스플레이 장치 및 그 동작 방법
EP3324641A1 (en) * 2016-11-21 2018-05-23 Samsung Electronics Co., Ltd. Display apparatus and method of displaying content
KR102373510B1 (ko) * 2017-08-11 2022-03-11 삼성전자주식회사 디스플레이를 회전함에 따라 컨텐츠를 시각화 하는 디스플레이 장치 및 이의 제어 방법

Patent Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN1463545A (zh) * 2001-06-27 2003-12-24 索尼株式会社 摄像机、其使用方法及其控制程序
CN111866565A (zh) * 2019-04-26 2020-10-30 三星电子株式会社 显示装置及显示装置的控制方法

Also Published As

Publication number Publication date
WO2020218686A1 (en) 2020-10-29
US11575957B2 (en) 2023-02-07
EP3731515A1 (en) 2020-10-28
US20210274236A1 (en) 2021-09-02
CN111866565A (zh) 2020-10-30
US20200344435A1 (en) 2020-10-29
US11019388B2 (en) 2021-05-25

Similar Documents

Publication Publication Date Title
CN111866565B (zh) 显示装置及显示装置的控制方法
RU2627117C2 (ru) Электронное устройство, сервер и способ управления такими устройствами
EP2672481B1 (en) Method of providing voice recognition service and electronic device therefore
KR102218640B1 (ko) 디스플레이 장치 및 디스플레이 장치의 제어 방법
KR102411619B1 (ko) 전자 장치 및 그 제어 방법
KR20200052612A (ko) 사용자 발화를 처리하는 전자 장치, 및 그 전자 장치의 제어 방법
US10950240B2 (en) Information processing device and information processing method
EP3627502A1 (en) System and method for providing voice assistant service
US11822768B2 (en) Electronic apparatus and method for controlling machine reading comprehension based guide user interface
KR102257772B1 (ko) 디스플레이 장치 및 그의 제어 방법
KR20220089537A (ko) 전자 장치 및 이의 제어 방법
KR20220105036A (ko) 전자 장치 및 그 제어 방법
KR102677052B1 (ko) 보이스 어시스턴트 서비스를 제공하는 시스템 및 방법
CN111316226B (zh) 电子装置及其控制方法
US11915691B2 (en) Electronic apparatus and controlling method thereof
CN111601122B (zh) 电子装置以及该电子装置的控制方法
US20200357414A1 (en) Display apparatus and method for controlling thereof
KR102716781B1 (ko) 전자 장치 및 이의 제어 방법
CN112380871A (zh) 语义识别方法、设备及介质
EP4447466A1 (en) Electronic device and control method thereof
KR20240028164A (ko) 전자 장치 및 그 ui 제공 방법
KR20210108098A (ko) 전자 장치 및 그 제어 방법
KR20220127600A (ko) 다이얼로그 텍스트에 시각적 효과를 적용하는 전자 장치 및 이의 제어 방법
CN109558523A (zh) 搜索处理方法、装置及终端设备

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant