WO2017142163A1 - 디스플레이 장치 및 그 동작 방법 - Google Patents

디스플레이 장치 및 그 동작 방법 Download PDF

Info

Publication number
WO2017142163A1
WO2017142163A1 PCT/KR2016/011819 KR2016011819W WO2017142163A1 WO 2017142163 A1 WO2017142163 A1 WO 2017142163A1 KR 2016011819 W KR2016011819 W KR 2016011819W WO 2017142163 A1 WO2017142163 A1 WO 2017142163A1
Authority
WO
WIPO (PCT)
Prior art keywords
electronic device
display
function
display apparatus
control
Prior art date
Application number
PCT/KR2016/011819
Other languages
English (en)
French (fr)
Inventor
김정엽
Original Assignee
삼성전자 주식회사
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 삼성전자 주식회사 filed Critical 삼성전자 주식회사
Priority to US15/998,940 priority Critical patent/US20210211760A1/en
Publication of WO2017142163A1 publication Critical patent/WO2017142163A1/ko

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/41—Structure of client; Structure of client peripherals
    • H04N21/4104—Peripherals receiving signals from specially adapted client devices
    • H04N21/4126—The peripheral being portable, e.g. PDAs or mobile phones
    • H04N21/41265—The peripheral being portable, e.g. PDAs or mobile phones having a remote control device for bidirectional communication between the remote control device and client device
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60W—CONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W50/00—Details of control systems for road vehicle drive control not related to the control of a particular sub-unit, e.g. process diagnostic or vehicle driver interfaces
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04M—TELEPHONIC COMMUNICATION
    • H04M1/00—Substation equipment, e.g. for use by subscribers
    • H04M1/72—Mobile telephones; Cordless telephones, i.e. devices for establishing wireless links to base stations without route selection
    • H04M1/724—User interfaces specially adapted for cordless or mobile telephones
    • H04M1/72403—User interfaces specially adapted for cordless or mobile telephones with means for local support of applications that increase the functionality
    • H04M1/72409—User interfaces specially adapted for cordless or mobile telephones with means for local support of applications that increase the functionality by interfacing with external accessories
    • H04M1/72412—User interfaces specially adapted for cordless or mobile telephones with means for local support of applications that increase the functionality by interfacing with external accessories using two-way short-range wireless interfaces
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/41—Structure of client; Structure of client peripherals
    • H04N21/4104—Peripherals receiving signals from specially adapted client devices
    • H04N21/4126—The peripheral being portable, e.g. PDAs or mobile phones
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/41—Structure of client; Structure of client peripherals
    • H04N21/422—Input-only peripherals, i.e. input devices connected to specially adapted client devices, e.g. global positioning system [GPS]
    • H04N21/42203—Input-only peripherals, i.e. input devices connected to specially adapted client devices, e.g. global positioning system [GPS] sound input device, e.g. microphone
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/41—Structure of client; Structure of client peripherals
    • H04N21/422—Input-only peripherals, i.e. input devices connected to specially adapted client devices, e.g. global positioning system [GPS]
    • H04N21/42204—User interfaces specially adapted for controlling a client device through a remote control device; Remote control devices therefor
    • H04N21/42206—User interfaces specially adapted for controlling a client device through a remote control device; Remote control devices therefor characterized by hardware details
    • H04N21/42222—Additional components integrated in the remote control device, e.g. timer, speaker, sensors for detecting position, direction or movement of the remote control, microphone or battery charging device
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/436—Interfacing a local distribution network, e.g. communicating with another STB or one or more peripheral devices inside the home
    • H04N21/43615—Interfacing a Home Network, e.g. for connecting the client to a plurality of peripherals
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/442—Monitoring of processes or resources, e.g. detecting the failure of a recording device, monitoring the downstream bandwidth, the number of times a movie has been viewed, the storage space available from the internal hard disk
    • H04N21/44227—Monitoring of local network, e.g. connection or bandwidth variations; Detecting new devices in the local network
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/47—End-user applications
    • H04N21/478—Supplemental services, e.g. displaying phone caller identification, shopping application
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00—Details of television systems
    • H04N5/44—Receiver circuitry for the reception of television signals according to analogue transmission standards
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60W—CONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
    • B60W50/00—Details of control systems for road vehicle drive control not related to the control of a particular sub-unit, e.g. process diagnostic or vehicle driver interfaces
    • B60W2050/0062—Adapting control system settings
    • B60W2050/0063—Manual parameter input, manual setting means, manual initialising or calibrating means
    • B60W2050/0064—Manual parameter input, manual setting means, manual initialising or calibrating means using a remote, e.g. cordless, transmitter or receiver unit, e.g. remote keypad or mobile phone
    • H—ELECTRICITY
    • H02—GENERATION; CONVERSION OR DISTRIBUTION OF ELECTRIC POWER
    • H02J—CIRCUIT ARRANGEMENTS OR SYSTEMS FOR SUPPLYING OR DISTRIBUTING ELECTRIC POWER; SYSTEMS FOR STORING ELECTRIC ENERGY
    • H02J50/00—Circuit arrangements or systems for wireless supply or distribution of electric power
    • H02J50/10—Circuit arrangements or systems for wireless supply or distribution of electric power using inductive coupling
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04M—TELEPHONIC COMMUNICATION
    • H04M1/00—Substation equipment, e.g. for use by subscribers
    • H04M1/72—Mobile telephones; Cordless telephones, i.e. devices for establishing wireless links to base stations without route selection
    • H04M1/724—User interfaces specially adapted for cordless or mobile telephones
    • H04M1/72403—User interfaces specially adapted for cordless or mobile telephones with means for local support of applications that increase the functionality
    • H04M1/72409—User interfaces specially adapted for cordless or mobile telephones with means for local support of applications that increase the functionality by interfacing with external accessories
    • H04M1/72415—User interfaces specially adapted for cordless or mobile telephones with means for local support of applications that increase the functionality by interfacing with external accessories for remote control of appliances

Definitions

  • the present disclosure relates to a display device and a method of operating the same, and more particularly, to a display device and a method of operating the same, which can use a function of an electronic device in contact with the display device.
  • the display device is a device having a function of displaying an image that a user can watch.
  • a TV (television) device which is an example of a display device, has only a function of receiving a broadcast signal transmitted from a broadcasting station in one direction and displaying a broadcast image.
  • current display apparatuses are increasingly diversifying as well as providing a function of displaying a broadcast image received from a broadcasting station.
  • a technology for interlocking display devices with peripheral devices is also being developed.
  • An object of the present disclosure is to provide a display device and a method of operating the same, which can utilize a function of an electronic device in contact with the display device.
  • a display device may include a user interface (UI) for detecting a touch of a display unit, an electronic device, recognizing a communication unit communicating with the electronic device, and a function associated with the electronic device, and operating the recognized function. ) Is displayed on the display unit, and a control unit for receiving a user input for operating the function with respect to the UI from a control device.
  • UI user interface
  • the function of the electronic device in contact with the device according to the present invention can be used.
  • FIG. 1 is a diagram illustrating a display device and an electronic device according to some embodiments.
  • FIG. 2 illustrates an example of a display apparatus recognizing a call function of an electronic device, according to an exemplary embodiment.
  • 3 is another example where a display device recognizes a call function of an electronic device according to some embodiments.
  • FIG. 4 is a flowchart of a method of operating a display device, an electronic device, and a control device, in which a call function is performed, according to some embodiments.
  • FIG. 5 illustrates an example of a display device recognizing a messenger function of an electronic device, according to an exemplary embodiment.
  • FIG. 6 is a flowchart of a method of operating a display device, an electronic device, and a control device, in which a call function is performed, according to some embodiments.
  • FIG. 7 illustrates an example in which the display apparatus recognizes a wireless charging function according to some embodiments.
  • FIG 8 illustrates another example in which the display apparatus recognizes a wireless charging function.
  • 9 is an example of a case where a display device recognizes a remote control function of an electronic device according to some embodiments.
  • FIG. 10 is a diagram for describing a display device and a smart key, according to an exemplary embodiment.
  • FIG 11 illustrates a case in which the display device includes a touch pad according to some embodiments.
  • the display device includes a touch pad and a light emitting device according to some embodiments.
  • FIG. 13 illustrates that the display device determines a location where a UI is displayed on a screen according to a location of an electronic device.
  • the display device selects one of the functions associated with the electronic device according to an orientation of the electronic device, according to some embodiments.
  • the display device selects an icon included in the UI according to a degree of position change of the electronic device, according to an exemplary embodiment.
  • FIG. 16 illustrates an example in which a display device displays a UI on a screen, according to an exemplary embodiment.
  • FIG. 17 illustrates an example in which a display device displays a UI on a screen, according to an exemplary embodiment.
  • FIG. 18 illustrates an example in which a display device displays a UI on a screen, according to an exemplary embodiment.
  • 19 is a block diagram of a display device according to an exemplary embodiment.
  • 20 is another block diagram of a display device according to an exemplary embodiment.
  • 21 is a side view of a display device according to some embodiments.
  • 22 is another block diagram of a display device according to some embodiments.
  • 23 is a block diagram of an electronic device according to some embodiments.
  • FIG. 24 is an illustration of a screen of an electronic device, according to some embodiments.
  • 25 is an example of a screen of an electronic device when security is set in the electronic device, according to some embodiments.
  • 26 is a block diagram of a control device according to some embodiments.
  • FIG. 27 is a flowchart of a method of operating a display apparatus, according to some embodiments.
  • the display apparatus may further include a sound output unit, and the function recognized by the controller may include a call function of the electronic device, and the controller may output a first voice signal received from the electronic device to the sound output unit.
  • the user input received by the controller from the control device may include a second voice signal, and the controller may transmit the second voice signal to the electronic device.
  • the function recognized by the controller includes a messenger function of the electronic device, the UI displayed on the display unit includes a first message received from the electronic device, and the user receives from the control device by the controller.
  • the input may include at least one of a second message and a voice signal corresponding to the second message, and the controller may display the second message on the display unit.
  • the function recognized by the controller includes a control function for allowing the electronic device to remotely control a controlled device, and the controller controls a command to control the controlled device based on the user input received from the control device. Can be transmitted to the electronic device.
  • the controller recognizes that the electronic device is a smart key for controlling the vehicle, and the UI displayed on the display unit includes information about the vehicle, and controls a control command based on the user input received from the control device. Can be transmitted to the vehicle.
  • the display device further comprises a wireless charger for providing power to the electronic device, the communication unit includes a NFC (Near Field Communication) module for detecting the contact of the electronic device, the NFC module is an upper end of the display device
  • the wireless charger may be disposed adjacent to the NFC module at the upper end thereof.
  • the display device may further include a touch pad disposed on the upper end and configured to sense a touch input for the UI displayed on the display, and wherein the controller is associated with the electronic device based on the user input and the touch input.
  • the function can be operated.
  • the display apparatus further includes a plurality of light emitting elements disposed adjacent to the touch pad, and when the UI displayed on the display unit includes a plurality of icons selectable by a user, the controller controls the plurality of light emitting elements. Among the plurality of icons, the light emitting devices in positions corresponding to the displayed positions may be selected and the selected light emitting devices may emit light.
  • the controller may acquire orientation information of the electronic device, and determine a location where the UI is displayed on the display unit or select the recognized function based on the orientation information.
  • the controller may further display a UI for requesting authentication of a use right of the electronic device on the display unit.
  • a method of operating a display device may include detecting a contact of an electronic device, communicating with the electronic device, recognizing a function associated with the electronic device, and manipulating the recognized function. ) Is displayed on a screen of the display device, and a user input for operating the function with respect to the UI is received from a control device.
  • the recognized function includes a call function of the electronic device, outputting a first voice signal received from the electronic device, and the user input received from the control device is a second function. And a voice signal, and transmitting the second voice signal to the electronic device.
  • the operating method of the display device may include the recognized function including a messenger function of the electronic device, the displayed UI including a first message received from the electronic device, and the user input received from the control device.
  • the method may further include displaying at least one of a second message and a voice signal corresponding to the second message, and displaying the second message.
  • the operating method of the display device may include a control function for allowing the electronic device to remotely control a controlled device, and control the controlled device based on the user input received from the control device.
  • the method may further include transmitting a command to the electronic device.
  • the method of operating the display device may include: recognizing that the electronic device is a smart key for controlling a vehicle, and wherein the displayed UI includes information about the vehicle, and based on the user input received from the control device.
  • the method may further include transmitting a control command to the vehicle.
  • the method of operating the display device may include detecting a touch input for the displayed UI through a touch pad disposed at an upper end of the display device, and the function associated with the electronic device based on the user input and the touch input. It may further comprise the step of operating.
  • the display apparatus when the displayed UI includes a plurality of icons selectable by a user, the display apparatus may be located at a position corresponding to a position where the plurality of icons are displayed among the plurality of light emitting devices disposed adjacent to the touch pad.
  • the method may further include selecting the light emitting devices, and emitting the selected light emitting devices.
  • the operation method of the display device may include obtaining orientation information of the electronic device and determining a location where the UI is displayed on the screen of the display device or selecting the recognized function based on the orientation information. It may further comprise a step.
  • the method of operating the display device may further include displaying a UI for requesting authentication of a use right of the electronic device on a screen of the display device when security is set in the electronic device.
  • first and second may be used to describe various components, but the components should not be limited by these terms. These terms are used to distinguish one component from another.
  • Some embodiments of the present disclosure may be represented by functional block configurations and various processing steps. Some or all of these functional blocks may be implemented in various numbers of hardware and / or software configurations that perform particular functions.
  • the functional blocks of the present disclosure may be implemented by one or more microprocessors or by circuit configurations for a given function.
  • the functional blocks of the present disclosure may be implemented in various programming or scripting languages.
  • the functional blocks may be implemented in algorithms running on one or more processors.
  • the present disclosure may employ the prior art for electronic configuration, signal processing, and / or data processing. Terms such as “mechanism”, “element”, “means” and “configuration” may be used broadly and are not limited to mechanical and physical configurations.
  • connecting lines or connecting members between the components shown in the drawings are merely illustrative of functional connections and / or physical or circuit connections. In an actual device, the connections between components may be represented by various functional connections, physical connections, or circuit connections that are replaceable or added.
  • FIG. 1 is a diagram illustrating a display device and an electronic device according to some embodiments.
  • the display apparatus 100 may be a device configured to output audio / video (A / V) content.
  • the display apparatus 100 may output video content of the A / V content on a screen, and output audio content through a sound output unit included in the display apparatus 100 or a speaker connected to the display apparatus 100.
  • the speaker may be connected to the display apparatus 100 in various ways such as wired or wireless.
  • the speaker may be a wireless speaker, earphone, headphone, or the like.
  • the A / V content may be real-time broadcast content or non-real-time A / V content.
  • the non-real time A / V content may be A / V content provided by a video on demand (VOD) service.
  • the display apparatus 100 may receive A / V content from an A / V content provider.
  • the display apparatus 100 may receive or download A / V content by streaming.
  • the A / V content provider may be a broadcast service provider, a VOD service provider, or the like.
  • the display apparatus 100 may receive a broadcast signal and broadcast related information from the outside through a broadcast channel.
  • the broadcast channel may include a satellite channel and a terrestrial channel.
  • the display apparatus 100 may receive A / V content through a broadcast channel or the Internet.
  • the display apparatus 100 may receive A / V content from an external device connected by wire or wirelessly.
  • a / V content may be stored in a memory included in the display apparatus 100.
  • the display apparatus 100 may recognize a contact of the electronic device 200 and communicate with the electronic device 200.
  • the electronic device 200 may be placed on the top surface 101 of the display device 100.
  • the display apparatus 100 may detect a contact of the electronic device 200 placed on the top surface 101 and may be communicatively connected to the electronic device 200.
  • the electronic device 200 may be, for example, a smartphone 200-1, a smart key 200-2, a speaker 200-3, and the like. 1 is only an example of the electronic device 200, and does not limit the type of the electronic device 200 or the number of the electronic devices 200.
  • the electronic device 200 may include a tablet PC, a mobile phone, a personal digital assistant (PDA), a media player, a micro server, a global positioning system (GPS) device, an e-book device, a digital broadcasting terminal, navigation, kiosk, MP3 player, Digital cameras and other computing devices, but is not limited thereto.
  • the electronic device 200 may be any type as long as it is an electronic device including a communication unit and a control unit.
  • the display apparatus 100 may be in a state in which the display apparatus 100 is communicatively connected to the electronic device 200 while the electronic device 200 is placed on the top surface 101.
  • the display device 100 may be automatically connected to the electronic device 200.
  • the display device 100 may be disconnected from the electronic device 200.
  • the display apparatus 100 may include a near field communication (NFC) module that detects a contact of the electronic device 200.
  • NFC near field communication
  • the NFC module may be disposed on the upper end of the display apparatus 100.
  • the electronic device 200 is shown in contact with the top surface 101 of the display apparatus 100, but the portion in which the electronic device 200 is in contact with the display apparatus 100 is limited to the top surface 101. It doesn't happen.
  • the electronic device 200 may be in contact with another side such as the side of the display device 100.
  • the display apparatus 100 may place the NFC module on a specific portion to detect the contact of the electronic device 200 only at the specific portion.
  • the display apparatus 100 may have a mark representing a specific portion capable of detecting a contact of the electronic device 200. The user may recognize the specific part through the marking, so that the electronic device 200 can be easily contacted with the specific part. Markers of the display apparatus 100 may be indicated by lines, grooves, or the like.
  • the display apparatus 100 may recognize a function associated with the electronic device 200.
  • the functions associated with the electronic device 200 may include a call function of the electronic device 200, a messenger function of the electronic device 200, a sound output function of the electronic device 200, and the electronic device 200. It may be a function performed by the electronic device 200 such as a control function for remotely controlling a controlled device.
  • the functions associated with the electronic device 200 may vary, such as a content transmission and reception function with the electronic device 200, a communication function with the electronic device 200 such as a backup function, and a function of wirelessly charging the electronic device 200. have.
  • the function associated with the electronic device 200 is not limited to the described function, and the display device 100 may be various functions that can be linked with the electronic device 200.
  • the display apparatus 100 may recognize at least one function associated with the electronic device 200.
  • the display apparatus 100 may recognize a plurality of functions associated with one electronic device 200.
  • the display apparatus 100 may display a user interface (UI) 102 for operating a function associated with the recognized electronic device 200 on the screen.
  • the UI 102 is for interacting with a user, for allowing a user to recognize a function associated with the electronic device 200 recognized by the display device 100, and for allowing a user to manipulate the associated function. It may be.
  • the UI 102 may include various information such as information about the electronic device 200, information related to a function associated with the electronic device 200, information generated due to the execution of a function associated with the display device 100, and the like.
  • the UI 102 may include a UI that enables a user to select, set, or control a function associated with the electronic device 200.
  • the UI 102 may include a list of a plurality of functions and a UI capable of selecting, setting, and manipulating each function.
  • the UI 102 may be displayed on the screen in various ways, such as text, an image, and a combination thereof.
  • the display apparatus 100 may further output a sound UI in addition to the UI 102 displayed on the screen.
  • the display apparatus 100 may output at least one of the UI 102 and the sound UI displayed on the screen.
  • the display apparatus 100 may output the UI 102 in various ways so as to interact with the user.
  • the UI 102 displayed on the screen of the display apparatus 100 will be mainly described. However, the UI 102 does not exclude the sound UI.
  • the display apparatus 100 may output a UI 102 for authenticating a use right of the electronic device 200 or a control right for a function associated with the electronic device 200.
  • the display device 100 may detect a contact of the electronic device 200, the display device 100 may output a UI 102 requesting authentication of a use right of the electronic device 200 or a control right for the associated function.
  • the user may input the ID, password, fingerprint, etc. of the electronic device 200 through the control device 300.
  • the display apparatus 100 may request authentication of a use right or a control right.
  • the display apparatus 100 may request authentication of a use right or a control right whenever the touch of the electronic device 200 is detected.
  • the display apparatus 100 may request authentication of a use right or a control right only when detecting a contact of the electronic device 200 which has not been previously authenticated. That is, the display device 100 may not request authentication of a use right or a control right when detecting the re-contact of the electronic device 200 which has been authenticated once. Since authentication between the display apparatus 100 and the electronic device 200 may be implemented in various ways, the present invention is not limited to the described example.
  • the display apparatus 100 may receive a user input from the control apparatus 300 for manipulating a function associated with the electronic device 200 with respect to the UI 102.
  • the control device 300 is a device that can remotely control the display device 100. The user recognizes a function associated with the display apparatus 100 through the UI 102 displayed on the display apparatus 100, and inputs a user input to the control apparatus 300 by pressing a button of the control apparatus 300. can do.
  • the control apparatus 300 may transmit a user input to the display apparatus 100, and the display apparatus 100 receiving the user input may perform a function associated with the electronic device 200 based on the user input.
  • the display apparatus 100 may communicate with the electronic device 200 to perform a function associated with the electronic device 200. In addition, the display apparatus 100 may perform an associated function in cooperation with the electronic device 200.
  • control device 300 may also turn on or off the power of the display device 100, change channels, adjust the volume,
  • the display apparatus 100 may be controlled in various ways, such as selecting a type of broadcasting such as terrestrial broadcasting / cable broadcasting / satellite broadcasting or setting an environment of the display apparatus 100.
  • the control device 300 may be a TV remote control, a pointing remote control, a mouse, a motion recognizer, but is not limited thereto.
  • the control device 300 shown in FIG. 1 is merely an example, and any type of control device may be used as long as the device can control the display device 100.
  • the display apparatus 100 may obtain a user input for manipulating a function associated with the electronic device 200 with respect to the UI 102 in various ways.
  • the microphone included in the display apparatus 100 may receive an acoustic signal such as a voice of a user, and the display apparatus 100 may obtain a user input of the acoustic signal.
  • the camera included in the display apparatus 100 may detect a motion gesture of the user, and the display apparatus 100 may obtain the motion gesture as a user input.
  • the display apparatus 100 may receive a user input through a touch screen implemented on a screen of the display apparatus 100 or a touch pad implemented in addition to the screen of the display apparatus 100.
  • the display apparatus 100 may be outputting A / V content.
  • the display apparatus 100 outputting the A / V content may output the UI 102 together with the A / V content.
  • the display apparatus 100 may output the UI 102 together with the video content of the A / V content being output on the screen.
  • the display apparatus 100 may limit the output of the audio content of the A / V content to output the sound UI. For example, the display apparatus 100 may reduce the volume of audio content, mute the audio content, and output a sound UI.
  • the display apparatus 100 may output the UI 102 regardless of whether A / V content is output.
  • the display apparatus 100 may output the UI 102 on the standby mode screen.
  • the screen of the display apparatus 100 is in an off state and the display apparatus 100 detects contact of the electronic device 200 or determines the output of the UI 102, the screen is turned off.
  • the UI 102 may be output to the screen.
  • the user manipulates the associated function through the display device 100 and the control device 300 without having to approach the display device 100 and pick up the electronic device 200 to operate the function associated with the electronic device 200. can do.
  • the user may operate the function associated with the electronic device 200 through the control device 300 while watching the A / V content. Therefore, the user's convenience can be greatly increased.
  • the display apparatus 100 may detect a contact of the speaker 200-3 and may be automatically connected to the speaker 200-3.
  • the display apparatus 100 may recognize a sound output function of the speaker 200-3 as a function associated with the speaker 200-3. If there is audio content to be output, the display apparatus 100 may transmit the audio content to the speaker 200-3 so that the speaker 200-3 outputs the audio content.
  • the display apparatus 100 may recognize a sound output function of the speaker 200-3 and display a UI 102 for operating the sound output function on the screen.
  • the UI 102 displays, for example, information on a sound output function, information on the speaker 200-3, or the like, whether or not the speaker is connected to the speaker 200-3, adjusting the volume of the speaker 200-3, or the like. It may be a UI for controlling the speaker 200-3.
  • the UI 102 is not limited to the above-described example, and the display apparatus 100 may display the UI 102 on the screen in various ways in which the user can interact with the user.
  • FIG. 2 illustrates an example of a display apparatus recognizing a call function of an electronic device, according to an exemplary embodiment.
  • the display apparatus 100 may detect a contact of the electronic device 200.
  • the display apparatus 100 may recognize a function associated with the electronic device 200, and the recognized function may include a call function of the electronic device 200.
  • the display apparatus 100 may perform the recognized call function.
  • the display apparatus 100 may communicate with the electronic device 200 and interwork with the electronic device 200.
  • the display device 200 may display a UI 102 for operating a call function on the screen.
  • the UI 102 may be a UI that may display information on the call request or select whether to accept the call request.
  • the display apparatus 100 may output a sound UI instead of the UI 102 displayed on the screen, or may further output a sound UI together with the UI 102.
  • the UI 102 of FIG. 2 shows an icon indicating that a call request is received from a specific call requestor and accepting or rejecting the call request, FIG. 2 is only an example of the UI 102. It does not limit the implementation of 102).
  • the user may recognize a call request through the UI 102 and input a user input for operating a call function through the control device 300.
  • the user may accept or reject the call request through the control device 300.
  • FIG. 2 it is assumed that the control device 300 has a pointing function.
  • the display apparatus 100 may display a pointer of the control apparatus 300 on the screen.
  • the user may move the control device 300 so that the pointer of the display device 300 is positioned on the call request acceptance icon of the UI 102, and select the call request acceptance icon through the control device 300.
  • the display apparatus 100 may receive a user input from the control apparatus 300 that accepts the received call request. 2 is only an example of a user input for controlling a call function, and the display apparatus 100 may receive various user inputs from the control device 300.
  • the display apparatus 100 may perform a call function by communicating with the electronic device 200.
  • the display apparatus 100 uses a sound output unit included in the display apparatus 100 or a voice corresponding to “Hi Michael” received from an external device connected to the electronic device 200 through a speaker connected to the display apparatus 100. Can output a signal.
  • the microphone included in the control device 300 may detect “Hello” and obtain a voice signal corresponding to "Hello”.
  • the control device 300 may transmit a voice signal to the display device 100.
  • the display apparatus 100 transmits a voice signal corresponding to "Hello” received from the control device 300 to the electronic device 200, so that the voice corresponding to "Hello” to the external device to which the electronic device 200 is connected to the call. Can send a signal.
  • the user may talk with an external device connected to the electronic device 200 through a microphone included in the control device 300 and a speaker connected to the display device 100 or the sound output unit included in the display device 100. .
  • a user may answer a call through the display apparatus 100 and the control apparatus 300 without having to approach the display apparatus 100 and pick up the electronic apparatus 200 for a call. Therefore, the user's convenience can be greatly increased.
  • the display apparatus 100 may be outputting A / V content.
  • the display apparatus 100 may limit the output of the audio content of the A / V content to output the sound UI. For example, the display apparatus 100 may reduce the volume of audio content, mute the audio content, and output a sound UI.
  • the display apparatus 100 may limit the output of the A / V content being output. Since the audio content of the A / V content may interfere with a call, the display apparatus 100 may limit the output of the audio content while the electronic device 200 is connected to the call.
  • the electronic device 200 receives a call request from an external device.
  • the user may use the display device 100 and the control device 300. Instead of accessing the display apparatus 100 to pick up the electronic device 200 to make a call, the user may transmit a user input for making a call to the display apparatus 100 through the control device 300.
  • the display apparatus 100 may output a UI for allowing a user to request a call to an external device.
  • the electronic device 200 is connected to the external device through a call, the user may communicate with the external device through the display device 100 and the control device 300.
  • 3 is another example where a display device recognizes a call function of an electronic device according to some embodiments.
  • the display device 200 may display a UI 102 displaying information on the call request on the screen.
  • the display apparatus 100 may include a camera 170 and may detect a motion gesture of a user through the camera 170.
  • the camera 170 may acquire image data such as a still image or a moving image of the user.
  • the display apparatus 100 may detect the motion gesture by analyzing the image data acquired through the camera 170.
  • the display apparatus 100 may determine whether to accept the call request based on the detected motion gesture.
  • the motion gesture for accepting the call request and the motion gesture for rejecting the call request may be predetermined.
  • the display apparatus 100 may determine whether to accept the call request by comparing the detected motion gesture with a predetermined motion gesture. For example, the motion gesture of only the thumb and the little finger of the five fingers of the user may be predetermined as a motion gesture for accepting the call request.
  • the display apparatus 100 may determine the detected motion gesture as the acceptance of the call request.
  • 3 is an example of a motion gesture, and the motion gesture is not limited to FIG. 3.
  • the voice signal When a voice signal is received from an external device connected to the call by the electronic device 200, the voice signal may be output through a sound output unit included in the display apparatus 100 or a speaker connected to the display apparatus 100.
  • the microphone of the control apparatus near the user or the microphone included in the display apparatus 100 may detect “Hi Jessi” and acquire a corresponding voice signal.
  • the display apparatus 100 may transmit the obtained voice signal to the electronic device 200 so that the electronic device 200 transmits the voice signal to an external device to which the call is connected.
  • FIG. 4 is a flowchart of a method of operating a display device, an electronic device, and a control device, in which a call function is performed, according to some embodiments.
  • the display apparatus 100 may detect a contact of the electronic device 200 (S10).
  • the display apparatus 100 may recognize a call function of the electronic device 200 (S11).
  • the electronic device 200 may transmit information related to the call request to the display device 100 (S13).
  • the information related to the call request may include information about an external device requesting a call, for example, a name of the call requester, a phone number, and the like.
  • the display apparatus 100 may display a UI for a call request on the screen (S14).
  • the UI for the call request is a UI that allows the user to recognize the call request or to manipulate the call request.
  • the UI may be displayed on the screen in various ways such as text, an image, and a combination thereof.
  • the display apparatus 100 may output a sound UI instead of displaying the UI on the screen, or output the UI and the sound UI displayed on the screen together.
  • the display apparatus 100 may transmit a control signal for performing a call function to the control apparatus 300.
  • the control device 300 receiving the control signal may perform an operation related to performing a call function. For example, when the control device 300 operates in one of a plurality of modes including a control mode for controlling the display apparatus 100 and a call function performing mode, the control device that receives the control signal ( 300 may operate in a call function execution mode. Alternatively, the control device 300 receiving the control signal may activate the microphone of the control device 300. Alternatively, the control device 300 may blink the LED module of the control device 300. Through the blinking of the LED module of the control device 300 and the UI output by the display device 100, the user may recognize that the control device 300 may perform an operation related to performing a call function.
  • the display apparatus 100 may detect the motion gesture of the user and determine whether to accept the call request, the display apparatus 100 may detect the motion gesture after step S13 (170 of FIG. 3). ) Can be activated.
  • the display apparatus 100 may receive a user input for accepting a call request from the control apparatus 300 (S15).
  • the display apparatus 100 may determine whether to accept the call request by detecting a motion gesture of the user, the display apparatus 100 may receive a user input from the control apparatus 300, instead of receiving the user input. May detect the motion gesture of and determine whether to accept the call request based on the detected motion gesture.
  • the display apparatus 100 may transmit a call request acceptance to the electronic device 200 (S16) to allow the electronic device 200 to connect the call with the call requester.
  • the electronic device 200 may make a call connection with the external device 500 requesting the call (S17).
  • the display apparatus 100 when the display apparatus 100 receives a user input from the control apparatus 300 that rejects the call request or determines to reject the call request based on the detected motion gesture, the display apparatus 100. ) May transmit a call request rejection to the electronic device 200, and the electronic device 200 may not make a call connection with the external device 500 requesting the call.
  • the electronic device 200 When the electronic device 200 receives the first voice signal from the call-connected external device 500 (S19), the electronic device 200 transmits the first voice signal to the display device 100 (S20). 100 may output the first voice signal through the sound output unit included in the display apparatus 100 or the speaker connected to the display apparatus 100 (S21).
  • the control device 300 may transmit the second voice signal acquired through the user input to the display apparatus 100 (S22).
  • the display apparatus 100 transmits the second voice signal received from the control device 300 to the electronic device 200 (S23), and transmits the second voice signal to the external device 500 to which the electronic device 200 is connected. It may be to transmit (S24).
  • FIG. 5 illustrates an example of a display device recognizing a messenger function of an electronic device, according to an exemplary embodiment.
  • the display apparatus 100 may detect a contact of the electronic device 200.
  • the display apparatus 100 may recognize a function associated with the electronic device 200, and the recognized function may include a messenger function of the electronic device 200.
  • the display apparatus 100 may perform the recognized messenger function.
  • the display apparatus 100 may communicate with the electronic device 200 and interwork with the electronic device 200.
  • the electronic device 200 When the electronic device 200 receives the first message (“Hi Michael”) from the external device, the electronic device 200 displays information about the external device, the first message (“Hi Michael”), and the like. Can be delivered to.
  • the display apparatus 100 may display a UI 102 for operating a messenger function on the screen.
  • the UI 102 may include information on an external device (eg, a person's name, a phone number, etc.) that transmitted the message or a message received from the external device (“Hi Michael”).
  • the UI 102 may be a UI capable of selecting whether to check a received message. 5 is only an example of the UI 102 and does not limit the implementation of the UI 102.
  • the control device 300 may receive a second message “Hi Justin” from the user and transmit the second message “Hi Justin” to the display apparatus 100.
  • the display apparatus 100 may display the received second message "Hi Justin” on the screen.
  • the display device 102 may include a second message (“Hi Justin”) in the UI 102 to display it on the screen.
  • the display device 102 transmits a second message (“Hi Justin”) to the electronic device 200, so that the second message (“Hi Michael”) is transmitted to the external device to which the electronic device 200 transmits the first message (“Hi Michael”). "Hi Justin”) can be sent.
  • the user may perform a messenger function associated with the electronic device 200 by interworking with the electronic device 200 using the display device 100 and the control device 300.
  • the control device 300 may include a user input unit for inputting text and may receive text corresponding to “Hi Justin” from the user. Alternatively, the microphone included in the control device 300 may detect “Hi Justin” spoken by the user and acquire a voice signal corresponding to “Hi Justin”. The control device 300 may transmit a text message or a voice signal corresponding to “Hi Justin” to the display device 100. The display apparatus 100 receiving the voice signal may convert the voice signal into a text message (“Hi Justin”) and display the converted text message on the screen.
  • a user may use the messenger function through the display device 100 and the control device 300 without having to access the display device 100 and pick up the electronic device 200 to use the messenger function of the electronic device 200. Can be. Therefore, the user's convenience can be greatly increased.
  • FIG. 6 is a flowchart of a method of operating a display device, an electronic device, and a control device, in which a call function is performed, according to some embodiments.
  • the display apparatus 100 may detect a contact of the electronic device 200 (S30).
  • the display apparatus 100 may recognize a messenger function of the electronic device 200 (S31).
  • the electronic device 200 may transmit information related to the message reception to the display device 100 (S33).
  • the information related to the reception of the message may include information about an external device that has transmitted the message, for example, a name of the user of the external device, a telephone number, and the like. Also, the information related to the reception of the message may further include the received first message.
  • the display apparatus 100 may display a UI for receiving a message on the screen (S34).
  • the UI may be a UI that allows a user to recognize a message reception or to operate a messenger function.
  • the display apparatus 100 may transmit a control signal for performing a messenger function to the control apparatus 300.
  • the control device 300 receiving the control signal may perform an operation related to performing a messenger function. For example, when the control device 300 operates in one of a plurality of modes including a control mode for controlling the display apparatus 100 and a messenger function execution mode, the control device that receives the control signal ( 300 may operate in a messenger function execution mode. Alternatively, the control device 300 receiving the control signal may activate the microphone of the control device 300. Alternatively, the control device 300 may blink the LED module of the control device 300. Through the blinking of the LED module of the control device 300 and the UI output by the display device 100, the user may recognize that the control device 300 may perform an operation related to performing a messenger function.
  • the control device 300 may receive a second message from the user and transmit the second message to the display apparatus 100 (S35).
  • the display apparatus 100 may receive at least one of a second message and a voice signal corresponding to the second message from the control apparatus 300.
  • the display apparatus 100 may convert the voice signal into a second message.
  • the display apparatus 100 may display a second message on the screen (S36).
  • the display device 102 may include the second message in the UI 102 to display it on the screen.
  • the display apparatus 102 may transmit the second message to the electronic device 200 (S37), and allow the electronic device 200 to transmit the second message to the external device 500 that has transmitted the first message (S37). S38).
  • FIG. 7 illustrates an example in which the display apparatus recognizes a wireless charging function according to some embodiments.
  • the display apparatus 100 may detect a contact of the electronic device 200.
  • the display apparatus 100 may recognize a function associated with the electronic device 200, and the recognized function may include a wireless charging function.
  • the display apparatus 100 may wirelessly charge the electronic device 200.
  • the display apparatus 100 may include a wireless charger 150.
  • the display apparatus 100 may turn on the wireless charger 150 when it detects a contact of the electronic device 200 and recognizes a wireless charging function.
  • the wireless charger 150 may generate an electromagnetic field and supply power to the electronic device 200 which is electromagnetically coupled.
  • the display apparatus 100 may activate the function of the wireless charger 150 even in a power off state. For example, when the screen of the display apparatus 100 is in an off state, when the touch of the electronic device 200 is detected and the wireless charging function is recognized, the wireless charger 150 may be turned on.
  • the display apparatus 100 may display a UI 102 for operating a wireless charging function on the screen.
  • the UI 102 may include information indicating that the electronic device 200 is charging wirelessly, information on the charging state of the electronic device 200, and the like.
  • the UI 102 can include a UI that can turn on or off the wireless charging function.
  • the display apparatus 100 may output the UI 102 together with the A / V content being output. Accordingly, the user may check the charging state of the electronic device 200 through the UI 102 while watching the A / V content being output from the display device 100.
  • the display apparatus 100 may receive a user input for turning off the wireless charging function from the control device.
  • the display apparatus 100 may deactivate the wireless charging function by turning off the wireless charger 150.
  • FIG 8 illustrates another example in which the display apparatus recognizes a wireless charging function.
  • the display apparatus 100 may detect a contact of the electronic device 200 and recognize a wireless charging function as a function associated with the electronic device 200.
  • the electronic device 200 may not be electromagnetically coupled with the wireless charger 150 and thus will not be charged.
  • the display apparatus 100 may detect that the position of the electronic device 200 is out of the chargeable position.
  • the display device 100 may detect a location of the electronic device 200 or detect that the electronic device 200 is not electromagnetically coupled with the wireless charger 150.
  • the display apparatus 100 may display a UI 102 for notifying that the electronic device 200 is not charged on the screen.
  • the display apparatus 100 may display the UI 102 at a position on the screen corresponding to the position at which the UI 102 can be charged.
  • the user moves the electronic device 200 to the point of the upper portion 102 corresponding to the point where the UI 102 is displayed through the UI 102 to allow the electronic device 200 to be wirelessly charged. Can be.
  • the display device 100 After the movement of the electronic device 200, when the display device 100 detects that the electronic device 200 is in a chargeable position, the display device 100 no longer outputs the UI 102 of FIG. 8, or The UI 102 of FIG. 8 may be changed to the UI 102 of FIG. 7 displaying the charging state of the electronic device 200 and output.
  • 9 is an example of a case where a display device recognizes a remote control function of an electronic device according to some embodiments.
  • the display apparatus 100 may detect a contact of the electronic device 200 and recognize a function associated with the electronic device 200.
  • the recognized function may include a control function for allowing the electronic device 200 to remotely control the controlled device 400.
  • the controlled device 400 may be a general device or a thing having a built-in communication function.
  • the controlled device 400 may be a general device or a thing to which the Internet of Things (IoT) is applied.
  • the Internet of Things refers to a technology of connecting a computer chip and a communication function to various internet objects.
  • the controlled device 400 may be various home appliances such as a refrigerator and a washing machine, various wearable devices such as a smart watch, a car, and the like.
  • the controlled device 400 may include various sensors such as a temperature sensor, a humidity sensor, an acoustic sensor, a motion sensor, a proximity sensor, a gas sensor, a heat sensor, a lamp, a CCTV, a fire alarm, and a home appliance.
  • the controlled device 400 may be any type as long as the device has a built-in communication function.
  • the display apparatus 100 may display a UI 102 for operating a recognized remote control function on a screen.
  • the display apparatus 100 may control a remote control function based on a user input received from the control apparatus 300.
  • the display apparatus 100 may transmit a command to the electronic device 200 to control the controlled device 400 based on a user input received from the control apparatus 300.
  • the electronic device 200 may control the controlled device 400 by transmitting a command for controlling the controlled device 400 to the controlled device 400.
  • the UI 102 displayed by the display apparatus 100 may enable the user to recognize the remote control function or manipulate the remote control function in various ways.
  • the UI 102 may provide the user with a list of controlled devices 400 that the electronic device 200 can remotely control, or allow the user to select a controlled device 400 to remotely control.
  • the user may command an operation that the controlled device 400 wants to perform, or the user may authenticate the authority to use the electronic device 200 or the control right of the controlled device 400. Can be displayed in a manner.
  • the UI 102 is not limited to the above-described example, and the display apparatus 100 may output the UI 102 in various ways to enable interaction with the user.
  • the display apparatus 100 may receive a user input for commanding the control of the refrigerator from the control apparatus 300.
  • An example of the user input may be a command for controlling a refrigerator such as requesting information on a refrigerator state such as a refrigerator temperature, opening / closing a refrigerator door, adjusting a refrigerator temperature, or turning on or off a refrigerator power.
  • the display apparatus 100 may transmit a user input for controlling the refrigerator to the electronic device 200 so that the electronic device 200 may control the refrigerator according to the user input. That is, the display device 100 and the control device 300 may support interaction with a user with respect to a remote control function of the electronic device 200, and may actually communicate with the controlled device 400 and The controlling of the 400 may be the electronic device 200.
  • the display apparatus 100 may receive information for identifying and communicating with the controlled device 400 from the electronic device 200.
  • the information may include, for example, an IP (Internet Protocol) address of the controlled device 400.
  • the display apparatus 100 may receive the control authority of the controlled device 400 from the electronic device 200. In this case, the display apparatus 100 may directly control the controlled device 400 without passing through the electronic device 200.
  • the electronic device 200 may receive notification information from the controlled device 400.
  • the controlled device 400 may transmit, to the electronic device 200, notification information for notifying when the controlled device 400 reaches a preset specific state.
  • the controlled device 400 when the controlled device 400 is a refrigerator, when the refrigerator door is open for a predetermined time or more, the refrigerator may transmit notification information indicating the state to the electronic device 200.
  • the controlled device 400 is a washing machine, the washing machine may transmit notification information indicating that the washing is completed to the electronic device 200.
  • the controlled device 400 is a wearable device, the wearable device may periodically transmit the user's body information to the electronic device 200 as notification information.
  • the above-described notification information is only an example, and the notification information is not limited thereto.
  • the electronic device 200 may notify the display device 100 of the reception of the notification information.
  • the display apparatus 100 may display the UI 102 including the notification information on the screen.
  • the display apparatus 100 may display the UI 102 including the notification information on the screen in a popup form.
  • the user may determine a control operation required for the controlled device 400 through the notification information, and input a user input corresponding to the control command of the controlled device 400 through the control device 300.
  • the display apparatus 100 may transmit a command to the electronic device 200 to control the controlled device 400 based on a user input received from the control apparatus 300.
  • the electronic device 200 may control the controlled device 400 by transmitting a command for controlling the controlled device 400 to the controlled device 400.
  • the display apparatus 100 receives the control authority of the controlled device 400 from the electronic device 200, the display apparatus 100 controls the controlled device 400 without passing through the electronic device 200. You can also send commands directly.
  • FIG. 10 is a diagram for describing a display device and a smart key, according to an exemplary embodiment.
  • the smart key 202-2 is placed on the upper end 101 of the display apparatus 100.
  • the smart key 200-2 refers to a device capable of controlling the vehicle 400-1 without physical contact or coupling with the vehicle 400-1.
  • a user may control the vehicle 400-1 by inserting the car key into a key hole provided in the vehicle 400-1.
  • the smart key 200-2 may control the vehicle 400-1 through a wireless communication method. For example, when the user carries the smart key 200-2 and rides on the vehicle 400-1, the user can start or turn off the vehicle without inserting the smart key 200-2 into the key hole. When the user carries the smart key 200-2 and approaches the vehicle 400-1, the door of the controlled device 400 may be unlocked.
  • the vehicle 400-1 may communicate with the smart key 200-2.
  • the vehicle 400-1 may be connected to the Internet.
  • the vehicle 400-1 may be an electric vehicle or a smart car.
  • the display apparatus 100 may detect a contact of the smart key 200-2.
  • the display apparatus 100 may recognize that the electronic device in contact with the display apparatus 100 is the smart key 200-2 that can control the vehicle 400-1.
  • the display apparatus 100 may recognize a remote control function of the vehicle 400-1, which is a function associated with the smart key 200-2.
  • the display apparatus 100 may display the UI 102 for the remote control function of the vehicle 400-1 on the screen.
  • the display apparatus 100 may receive a user input for controlling the vehicle 400-1 from the control apparatus 300.
  • An example of the user input may be a command for controlling the vehicle 400-1, such as charging the vehicle 400-1, opening and closing the door of the vehicle 400-1, and monitoring the security of the vehicle 400-1.
  • the display apparatus 100 transmits a user input for command of the control of the vehicle 400-1 to the smart key 200-2 so that the smart key 200-2 controls the vehicle 400-1 according to the user input. Can be controlled.
  • the display apparatus 100 may directly control the vehicle 400-1 without passing through the smart key 200-2.
  • the display apparatus 100 and the vehicle 400-1, or the smart key 200-2 and the vehicle 400-1 may communicate with each other through a server.
  • the server may be configured to monitor the state of the vehicle 400-1 and manage the vehicle 400-1.
  • the command for controlling the vehicle 400-1 may further include transmitting information according to a user input to the vehicle 400-1.
  • the driving destination of the vehicle 400-1 may be transmitted to the vehicle 400-1 according to a user input.
  • the vehicle 400-1 may transmit a driving destination to the navigation provided in the vehicle 400-1, and the navigation may search for an optimal route.
  • the optimal path searched by the navigation may be delivered to the display apparatus 100.
  • the UI 102 of the display apparatus 100 may output the optimal path searched by the navigation of the vehicle 400-1.
  • the display apparatus 100 may obtain location information associated with the A / V content.
  • the A / V content may be a restaurant introduction broadcast program, and the display apparatus 100 may obtain location information of a restaurant associated with the A / V content from the A / V content provider.
  • the display apparatus 100 may transmit the location information acquired based on the user input to the vehicle 400-1.
  • the vehicle 400-1 may transmit location information to the navigation provided in the vehicle 400-1.
  • the UI 102 may include information about the vehicle 400-1.
  • the information about the vehicle 400-1 may include an identifier, a type, a year, driving information, a state of charge, a state of fuel, a part replacement cycle such as a tire, a tire pressure, a vehicle 400- 1) status information and the like.
  • the user may select information about the vehicle 400-1 desired by the user through the UI 102 and the control device 300. That is, the display apparatus 100 may receive a user input for selecting information on the vehicle 400-1 from the control apparatus 300 through the UI 102.
  • the display apparatus 100 may output information about the corresponding vehicle 400-1 through the UI 102 based on a user input.
  • the information about the vehicle 400-1 is stored in the smart key 200-2, stored in the vehicle 400-1, or connected to the smart key 200-2 and the vehicle 400-1. It may be stored on the server.
  • the information about the vehicle 400-1 may be information stored in a device included in the vehicle 400-1, such as a black box or a navigation device provided in the vehicle 400-1.
  • the information about the vehicle 400-1 may be an image stored in the black box, a path stored in the navigation, and the like.
  • the display apparatus 100 may request the newsletter for the vehicle 400-1 from the smart key 200-2, the vehicle 400-1, the server, or the like based on the user input received from the control device 300.
  • the smart key 200-2 may receive notification information from the vehicle 400-1.
  • the vehicle 400-1 may transmit, to the smart key 200-2, notification information indicating that the vehicle 400-1 is in a predetermined state.
  • the smart key 200-2 may inform the display apparatus 100 of the reception of the notification information.
  • the display apparatus 100 may display the UI 102 including the notification information on the screen. Through this, even if the smart key 200-2 is not located adjacent to the user, the user can easily check the notification information through the display apparatus 100. In particular, when the notification information is important information related to safety, it will be useful to confirm the notification information through the display apparatus 100.
  • FIG. 10 has been described with respect to the smart key 200-2, the contents described with reference to FIG. 10 will be equally applicable to an electronic device capable of controlling the vehicle 400-1 in addition to the smart key 200-2.
  • FIG 11 illustrates a case in which the display device includes a touch pad according to some embodiments.
  • the display apparatus 100 may detect a contact of the electronic device 200 and recognize a function associated with the electronic device 200.
  • the display apparatus 100 may display a UI 102 on the screen for selecting the recognized functions.
  • the UI 102 may include icons corresponding to the recognized functions, and may include a leader line 109 indicating a selected icon among the icons.
  • a leader line 109 indicating a selected icon among the icons.
  • the leader line 109 is connected to an icon corresponding to a call or message link function, indicating that a call or message link function is selected among functions associated with the electronic device 200.
  • the display apparatus 100 may include a touch pad that senses a user's touch input.
  • the touch pad may be disposed at an upper end of the display apparatus 100.
  • the touch pad may be implemented on the top surface 101 or a part of the top surface 101.
  • the touch pad may detect a user's touch input.
  • the user may touch the top surface 101 by touching or dragging a specific position of the top surface 101 of the display apparatus 100.
  • the touch pad of the display apparatus 100 may detect a user's touch input and adjust the position of the leader line 109 included in the UI 102 based on the touch input to display a selected icon among the plurality of icons.
  • 11 illustrates an example of manipulating the UI 102 displayed on the screen of the display apparatus 100 using a user's touch input. 11 does not limit the UI 102 of the display apparatus 100 or limit the user's touch input method.
  • the display device includes a touch pad and a light emitting device according to some embodiments.
  • the display apparatus 100 may include a plurality of light emitting elements 170.
  • the light emitting devices 170 may be disposed adjacent to the touch pad.
  • the plurality of light emitting devices 170 may be disposed directly below the touch pad implemented on the top surface 101 or a part of the top surface 101.
  • the UI 102 displayed by the display apparatus 100 may include a plurality of icons IC1, IC2, and IC3 selectable by a user.
  • the display apparatus 100 includes light emitting devices 170-1, 170-2, and 170-corresponding to positions where the icons IC1, IC2, and IC3 are displayed among the plurality of light emitting devices 170. 3) can be selected. That is, the position where the plurality of icons IC1, IC2, and IC3 are displayed on the screen may correspond to the positions of the light emitting devices 170-1, 170-2, and 170-3 selected on the upper surface 101.
  • the display apparatus 100 may emit the selected light emitting elements 170-1, 170-2, and 170-3.
  • the user may touch the light emitting devices at positions corresponding to an icon to be selected among the plurality of icons IC1, IC2, and IC3 among the light emitting devices 170-1, 170-2, and 170-3.
  • the user may touch the light emitting elements 170-1.
  • the touch pad senses a user's touch input in the light emitting devices 170-1, the display apparatus 100 may select an icon IC1 and perform an operation corresponding to the selected icon IC1.
  • the display apparatus 100 selectively emits light emitting elements 170, thereby providing a guide to which part of the upper surface 101 to touch.
  • the position at which the UI 102 is displayed on the screen of the display device 100 may be related to an orientation of the electronic device.
  • Orientation of the electronic device 200 may mean at least one of the position, direction, and rotation of the electronic device 200.
  • the display apparatus 100 may obtain orientation information of the electronic device 200.
  • the display apparatus 100 may determine a position where the UI 102 is displayed on the screen of the display apparatus 100 based on the orientation information of the electronic device 200.
  • the display apparatus 100 may include a sensor capable of obtaining orientation information of the electronic device 200, such as a position sensor and a gyroscope sensor.
  • the display apparatus 100 may receive orientation information of the display apparatus 100 from the electronic device 200.
  • the electronic device 200 may obtain orientation information of the electronic device 200 itself and transmit the orientation information of the electronic device 200 to the display device 100 through a sensor such as a position sensor or a gyroscope sensor included in the electronic device 200.
  • FIG. 13 illustrates that the display device determines a location where a UI is displayed on a screen according to a location of an electronic device.
  • the display apparatus 100 may obtain orientation information of the electronic device 200 and estimate that the electronic device 200 is located near the center of the top surface 101.
  • the display apparatus 100 may output a UI 102 for a function associated with the electronic device 200 near the center at the top of the screen.
  • the display device 100 may change the position where the UI 102 is displayed from near the center of the upper portion of the screen to the right side.
  • the display apparatus 100 may determine the position where the UI 102 is displayed on the screen to be visually associated with the position of the electronic device 200. As illustrated in FIG. 13, the UI 102 may be output to a portion corresponding to the bottom of the electronic device 200 on the screen.
  • the function associated with the electronic device 200 recognized by the display device 100 may be related to the orientation of the electronic device 200.
  • the display apparatus 100 may obtain orientation information of the electronic device 200.
  • the display apparatus 100 may select a function recognized as being associated with the electronic device 200, based on the orientation information of the electronic device 200.
  • the display apparatus 100 may select a function among the plurality of functions based on the orientation information of the electronic device 200.
  • the display device selects one of the functions associated with the electronic device according to an orientation of the electronic device, according to some embodiments.
  • the display apparatus 100 may output a UI 102 for a recognized function associated with the electronic device 200.
  • the UI 102 may include icons corresponding to the recognized functions, and may include a leader line 109 indicating a selected icon among the icons.
  • a leader line 109 indicating a selected icon among the icons.
  • three icons included in the UI 102 correspond to a wireless charging function, a data download function, a call, or a message link function in order from the left.
  • the display apparatus 100 may estimate that the electronic device 200 is upside down from the orientation information of the electronic device 200. That is, it may be estimated that the screen of the electronic device 200 faces the top surface 101 of the display device 100.
  • the display apparatus 100 may select the data download function and connect the indicator line 109 with an icon representing the data download function to indicate that the data download function is selected.
  • the display apparatus 100 may estimate that the screen of the electronic device 200 faces upward from the orientation information of the electronic device 200.
  • the display apparatus 100 may select the wireless charging function and connect the indicator line 109 with an icon representing the wireless charging function to indicate that the wireless charging function is selected.
  • the display apparatus 100 selects one of the functions associated with the electronic device 200 according to the orientation information of the electronic device 200.
  • the relationship of can be set in various ways.
  • the display device selects an icon included in the UI according to a degree of position change of the electronic device, according to an exemplary embodiment.
  • the UI 102 displayed by the display apparatus 100 may include a plurality of icons and a leader line 109 indicating a selected icon among the icons.
  • the display apparatus 100 acquires the degree of change in the position of the electronic apparatus 200 by moving the electronic apparatus 200 to the right by "BA". can do.
  • the display apparatus 100 may allow the leader line 109 to be connected to an icon representing a link function on the right side of an icon representing a data download function.
  • the display device 100 may display the wireless line on the left side of the icon indicating the data download function. It can be connected to an icon representing the charging function.
  • FIG. 16 illustrates an example in which a display device displays a UI on a screen, according to an exemplary embodiment.
  • the display apparatus 100 may display the UI 102 of the electronic device 200 on the screen in a hidden form or in a visible form.
  • the hidden form may be displayed on the screen in the form of a dot or a button.
  • the hidden form of the UI 102 may be displayed on the screen with a minimum size that allows the user to recognize the UI 102.
  • the display apparatus 100 may display the UI 102 in a hidden form when certain conditions are satisfied, such as when there is no notification from the electronic device 200 or when a user input for the UI 102 is not received for a predetermined time. .
  • the display apparatus 100 may display the UI 102 in a hidden form, thereby minimizing the video content output by the display apparatus 100 from being hidden by the UI 102. This may minimize the interruption of the video viewing due to the UI (102).
  • the display apparatus 100 may display the hidden UI 102 on the screen as the visible UI 102.
  • the hidden type UI 102 may be switched to the visible type.
  • the UI 102 switched to the visible form includes a plurality of selectable icons, the user may select a desired icon by adjusting the position of the pointer of the control device 300.
  • 16 is only an example in which the UI 102 is switched from the hidden form to the visible form, and does not limit a user input for switching the UI 102 to the visible form.
  • the movement of the pointer through the direction key of the control device 300 or the selection of a specific button of the control device 300 may be a user input for switching to the visible form.
  • the display device 100 may switch the UI 102 from hidden to visible.
  • the notification from the electronic device 200 may include a call request notification, a message reception notification, a notification of a controlled device of the electronic device 200, and the like.
  • FIG. 17 illustrates an example in which a display device displays a UI on a screen, according to an exemplary embodiment.
  • the display apparatus 100 may recognize a contact of a plurality of electronic devices 200-1, 200-2, and 200-3.
  • the display apparatus 100 may display the UIs 102 for functions associated with each of the plurality of electronic devices 200-1, 200-2, and 200-3.
  • the display apparatus 100 may display the UIs 102 in a hidden form, and may convert the UIs that receive a user input for switching to the visible form among the UIs 102 into the visible form.
  • the display apparatus 100 may switch the UI to the visible form.
  • the display apparatus 100 may determine a position where each of the UIs 102 is displayed on the screen to be visually associated with the positions of the electronic devices 200-1, 200-2, and 200-3.
  • the UIs 102 of the electronic devices 200-1, 200-2, and 200-3 may be output on a portion corresponding to the bottom of the electronic device 200 on the screen.
  • the user may intuitively know that the UI under the electronic device 200-1 on the screen is the UI of the electronic device 200-1. .
  • FIG. 18 illustrates an example in which a display device displays a UI on a screen, according to an exemplary embodiment.
  • the display apparatus 100 may not display the UI 102 of the electronic device 200 on the screen, or may display the UI 102 on the screen in a hidden form or in a visible form.
  • the display apparatus 100 may set the display area 103 for the UI 102 on the screen.
  • the display apparatus 100 may display the UI 102 in a hidden form. .
  • the display device 100 may be switched to the hidden type UI 102.
  • 19 is a block diagram of a display device according to an exemplary embodiment.
  • the display apparatus 100 may include a display 110, a communicator 120, and a controller 130.
  • the display 110 may output data processed by the display apparatus 100.
  • the communicator 120 is a means for enabling communication with various types of external devices according to various types of communication methods.
  • the communication unit 110 may include a communication module for performing communication in various types of communication methods.
  • the communicator 120 may detect contact of the electronic device and communicate with the electronic device.
  • the controller 130 may control the overall operation of the display apparatus 100.
  • the operation of the display display apparatus 100 described above may be performed by the controller 130.
  • 19 may be performed by the display apparatus 100 of FIG. 19, in particular, the controller 130, although the description related to the operation of the display apparatus 100 described above is not repeated.
  • the controller 130 may include a central processing unit (CPU), a microprocessor, a graphic processing unit (GPU), and the like, but is not limited thereto.
  • the controller 130 may detect contact with the display apparatus 100 and recognize a function associated with the communicating electronic device.
  • the controller 130 may display a UI for operating the recognized function on the display 110.
  • the controller 130 may receive a user input for operating a function from the control device.
  • the function recognized by the controller 130 may include a call function of the electronic device.
  • the controller 130 may output the first voice signal received from the electronic device to the sound output unit.
  • the user input received by the controller 130 from the control device may include a second voice signal, and the controller 130 may transmit the second voice signal to the electronic device.
  • the function recognized by the controller 130 may include a messenger function of the electronic device.
  • the UI displayed on the display 110 includes a first message received from the electronic device, and the user input received by the controller 130 from the control device may include at least one of a second message and a voice signal corresponding to the second message. It may include.
  • the controller 130 may display the second message on the display 110.
  • the function recognized by the controller 130 may include a control function for allowing the electronic device to remotely control the controlled device.
  • the controller 130 may transmit a command to the electronic device to control the controlled device based on the user input received from the control device.
  • the controller 130 may recognize that the electronic device is a smart key for controlling the vehicle, and the UI displayed on the display 110 may include information about the vehicle.
  • the controller 130 may transmit a control command based on a user input received from the control device to the vehicle.
  • the controller 130 may further display a UI for requesting authentication of a use right of the electronic device on the display 110.
  • the controller 130 may perform an operation performed by the display apparatus described above with reference to FIG. 19 even if the description is not repeated.
  • FIG. 20 is another block diagram of a display device according to an exemplary embodiment.
  • the display apparatus 1000 of FIG. 20 may be another example of the display apparatus 100 of FIG. 19.
  • the display apparatus 100 includes a display 110, a communicator 120, and a controller 130, and includes a sound output unit 140, a wireless charger 150, and a touch pad 160. It may further include.
  • the communicator 120 may include an NFC module 121.
  • the NFC module 121 may detect a contact of the electronic device.
  • the NFC module 121 may be disposed at an upper end of the display apparatus 100.
  • the display apparatus 100 may provide power to the electronic device contacted through the wireless charger 150.
  • the wireless charger 150 may be disposed adjacent to the NFC module 121. Both the wireless charger 150 and the NFC module 121 may be disposed at the upper end of the display device 100.
  • the touch pad 160 may be implemented together with the screen of the display apparatus 100 or may be disposed at the upper end of the display apparatus 100 instead of the screen.
  • the touch pad 160 may detect a touch input for the UI displayed on the display 110.
  • the controller 130 may operate a function associated with the electronic device based on a user input and a touch input received from the control device.
  • the display apparatus 100 may further include a plurality of light emitting elements 170 disposed adjacent to the touch pad 160.
  • the controller 130 may include a light emitting device having a position corresponding to a position where a plurality of icons are displayed among the plurality of light emitting devices 170. 170 may be selected and the selected light emitting device 170 may emit light.
  • 21 is a side view of a display device according to some embodiments.
  • the display apparatus 100 may include a display 110, an upper end 104, and a controller 130.
  • the display apparatus 100 may further include a cable 190 connecting the upper end 104 and the controller 130.
  • the upper end 104 may include the NFC module 121, the wireless charger 150, the touch pad 160, the light emitting device 170, and the like described with reference to FIG. 20.
  • the upper end 104 may be positioned below the upper surface 101 of the display apparatus 100.
  • the upper end 104 is perpendicular to the display 110.
  • the upper end 104 may protrude with respect to the display 110, and the protruding direction and the degree of protruding may vary.
  • the controller 130 may be implemented on a board. Other components of the display apparatus 100 may be implemented on the board.
  • the communicator 120 except for the NFC module 121 may be implemented on a board.
  • FIG. 22 is another block diagram of a display device according to some embodiments.
  • the display apparatus 1000 of FIG. 22 may be another example of the display apparatus 100 of FIGS. 19 and 20. However, not all of the components illustrated in FIG. 22 are essential components of the display apparatus 1000.
  • the display apparatus 1000 may be implemented by more components than the components illustrated in FIG. 22, or the display apparatus 1000 may be implemented by fewer components than the components illustrated in FIG. 22.
  • the display apparatus 1000 may include a user input unit 1100, an output unit 1200, a controller 1300, a sensing unit 1400, a communication unit 1500, an A / V input unit 1600, and a memory. 1700.
  • the user input unit 1100 refers to a means for receiving data for controlling the display apparatus 1000.
  • the user input unit 1100 may receive a user input for controlling the display apparatus 1000.
  • the user input unit 1100 includes a key pad, a dome switch, a touch pad (contact capacitive type, pressure resistive layer type, infrared sensing type, surface ultrasonic conduction type, and integral type). Tension measurement method, piezo effect method, etc.), a jog wheel, a jog switch, and the like, but are not limited thereto.
  • the user input unit 1100 may be an interface for receiving a user input signal from an external input device (not shown).
  • the output unit 1200 may output an audio signal, a video signal, or a vibration signal, and the output unit 1200 may include a display unit 1210, an audio output unit 1220, and a vibration motor 1230. have.
  • the display unit 1210 may output data processed by the display apparatus 1000.
  • the display unit 1210 may be used as an input device in addition to the output device.
  • the display unit 1210 may include a liquid crystal display, a thin film transistor-liquid crystal display, an organic light-emitting diode, a flexible display, and a three-dimensional display. 3D display, an electrophoretic display.
  • the display apparatus 1000 may include two or more display units 1210 according to the implementation form of the display apparatus 1000. In this case, the two or more display units 1210 may be disposed to face each other using a hinge.
  • the sound output unit 1220 outputs audio content received from the communication unit 1500 or stored in the memory 1700.
  • the sound output unit 1220 outputs a sound signal related to a function (for example, a call signal reception sound, a message reception sound, and a notification sound) performed by the display apparatus 1000.
  • the sound output unit 1220 may include a speaker, a buzzer, and the like.
  • the vibration motor 1230 may output a vibration signal.
  • the vibration motor 1230 may output a vibration signal corresponding to the output of audio content or video content (eg, call signal reception sound, message reception sound, etc.).
  • the vibration motor 1230 may output a vibration signal when a touch is input to the touch screen.
  • the controller 1300 generally controls the overall operation of the display apparatus 1000.
  • the controller 1300 may control other components in the display apparatus 1000 to execute the above-described operation of the display apparatus 1000.
  • the controller 1300 executes programs stored in the memory 1700, such that the user input unit 1100, the output unit 1200, the sensing unit 1400, the communication unit 1500, and the A / V input unit 1600 are provided. ) Can be controlled overall.
  • the controller 1300 may detect contact with the display apparatus 1000 and recognize a function associated with the communicating electronic device.
  • the controller 1300 may display a UI for manipulating the recognized function on the output unit 1200.
  • the controller 1300 may receive a user input for operating a function from the control device.
  • the function recognized by the controller 1300 may include a call function of the electronic device.
  • the controller 1300 may output the first voice signal received from the electronic device to the sound output unit 1220.
  • the user input received by the controller 1300 from the control device may include a second voice signal, and the controller 1300 may transmit the second voice signal to the electronic device.
  • the function recognized by the controller 1300 may include a messenger function of the electronic device.
  • the UI displayed on the display unit 1210 includes a first message received from the electronic device, and the user input received by the controller 1300 from the control device may include at least one of a second message and a voice signal corresponding to the second message. It may include.
  • the controller 1300 may display the second message on the display 1210.
  • the function recognized by the controller 1300 may include a control function for allowing the electronic device to remotely control the controlled device.
  • the controller 1300 may transmit a command to the electronic device to control the controlled device based on a user input received from the control device.
  • the controller 1300 may recognize that the electronic device is a smart key for controlling the vehicle, and the UI displayed on the display unit 1210 may include information about the vehicle.
  • the controller 1300 may transmit a control command based on a user input received from the control device to the vehicle.
  • the controller 1300 may further display a UI for requesting authentication of a use right of the electronic device on the display 1210.
  • the controller 1300 may perform an operation performed by the display apparatus described above with reference to FIG. 22 even if the description is not repeated.
  • the sensing unit 1400 may detect a state of the display apparatus 1000 or a state around the display apparatus 1000 and transmit the detected information to the controller 1300.
  • the sensing unit 1400 may include a geomagnetic sensor 1410, an acceleration sensor 1420, a temperature / humidity sensor 1430, an infrared sensor 1440, a gyroscope sensor 1450, and a position sensor. (Eg, GPS) 1460, barometric pressure sensor 1470, proximity sensor 1480, and RGB sensor (illuminance sensor) 1490, but are not limited thereto. Since functions of the respective sensors can be intuitively deduced by those skilled in the art from the names, detailed descriptions thereof will be omitted.
  • the controller 1300 may obtain orientation information of the electronic device, determine a location where the UI is displayed on the display 1210, or select a recognized function based on the orientation information. Orientation information of the electronic device may be obtained through the sensing unit 1400.
  • the communicator 1500 may include a short range communicator 1510, a mobile communicator 1520, and a broadcast receiver 1530.
  • the short-range wireless communication unit 1510 includes a Bluetooth communication unit, a Bluetooth Low Energy (BLE) communication unit, a Near Field Communication (NFC) module, a radio frequency identification (RFID) module, a WLAN (Wi-Fi) communication unit, and a Zigbee ( A Zigbee communication unit, an infrared data association (IrDA) communication unit, a Wi-Fi Direct communication unit, an ultra wideband communication unit, an Ant + communication unit, and the like, but are not limited thereto.
  • BLE Bluetooth Low Energy
  • NFC Near Field Communication
  • RFID radio frequency identification
  • WLAN Wi-Fi
  • Zigbee A Zigbee communication unit, an infrared data association (IrDA) communication unit, a Wi-Fi Direct communication unit, an ultra wideband communication unit, an Ant + communication unit, and the like, but are not limited thereto.
  • the NFC module may detect contact of the electronic device.
  • the NFC module may be disposed at an upper end of the display apparatus 1000.
  • the mobile communication unit 1520 transmits and receives a radio signal with at least one of a base station, an external terminal, and a server on a mobile communication network.
  • the wireless signal may include various types of data according to transmission and reception of a voice call signal, a video call call signal, or a text / multimedia message.
  • the broadcast receiving unit 1530 receives a broadcast signal and / or broadcast related information from the outside through a broadcast channel.
  • the broadcast channel may include a satellite channel and a terrestrial channel.
  • the A / V input unit 1600 is for inputting an audio signal or a video signal, and may include a camera 1610 and a microphone 1620.
  • the camera 1610 may obtain a still image or a video through an image sensor in a video call mode or a photographing mode.
  • the image captured by the image sensor may be processed by the controller 1300 or a separate image processor (not shown).
  • the still image or video processed by the camera 1610 may be stored in the memory 1700 or transmitted to the outside through the communication unit 1500.
  • the camera 1610 may acquire image data such as a still image or a moving image of the user.
  • the controller 1300 may detect the motion gesture by analyzing the image data acquired through the camera 1610.
  • the microphone 1620 receives an external sound signal and processes the external sound signal into electrical voice data.
  • the microphone 1620 may receive an acoustic signal from an external device or speaker.
  • the microphone 1620 may use various noise removing algorithms for removing noise generated in the process of receiving an external sound signal.
  • the memory 1700 may store a program for processing and controlling the controller 1300, and may store data input to the display apparatus 1000 or output from the display apparatus 1000.
  • the memory 1700 may include a flash memory type, a hard disk type, a multimedia card micro type, a card type memory (for example, SD or XD memory), RAM Random Access Memory (RAM) Static Random Access Memory (SRAM), Read-Only Memory (ROM), Electrically Erasable Programmable Read-Only Memory (EEPROM), Programmable Read-Only Memory (PROM), Magnetic Memory, Magnetic Disk It may include at least one type of storage medium of the optical disk.
  • RAM Random Access Memory
  • SRAM Static Random Access Memory
  • ROM Read-Only Memory
  • EEPROM Electrically Erasable Programmable Read-Only Memory
  • PROM Programmable Read-Only Memory
  • Magnetic Memory Magnetic Disk It may include at least one type of storage medium of the optical disk.
  • Programs stored in the memory 1700 may be classified into a plurality of modules according to their functions.
  • the programs stored in the memory 1700 may be classified into a UI module 1710, a touch screen module 1720, a notification module 1730, and the like. .
  • the UI module 1710 may provide a specialized UI, GUI, or the like that is linked to the display apparatus 1000 for each application.
  • the touch screen module 1720 may detect a touch gesture on a user's touch screen and transmit information about the touch gesture to the controller 1300.
  • the touch screen module 1720 according to some embodiments may recognize and analyze a touch code.
  • the touch screen module 1720 may be configured as separate hardware including a controller.
  • Various sensors may be provided inside or near the touch screen to detect a touch or proximity touch of the touch screen.
  • An example of a sensor for sensing a touch of a touch screen is a tactile sensor.
  • the tactile sensor refers to a sensor that senses the contact of a specific object to the extent that a person feels or more.
  • the tactile sensor may sense various information such as the roughness of the contact surface, the rigidity of the contact object, the temperature of the contact point, and the like.
  • an example of a sensor for sensing a touch of a touch screen is a proximity sensor.
  • the proximity sensor refers to a sensor that detects the presence or absence of an object approaching a predetermined detection surface or an object present in the vicinity without using a mechanical contact by using an electromagnetic force or infrared rays.
  • Examples of the proximity sensor include a transmission photoelectric sensor, a direct reflection photoelectric sensor, a mirror reflection photoelectric sensor, a high frequency oscillation proximity sensor, a capacitive proximity sensor, a magnetic proximity sensor, and an infrared proximity sensor.
  • the user's touch gesture may include tap, touch and hold, double tap, drag, pan, flick, drag and drop, and swipe.
  • the notification module 1730 may generate a signal for notifying occurrence of an event of the display apparatus 1000. Examples of events occurring in the display apparatus 1000 include call signal reception, message reception, key signal input, and schedule notification.
  • the notification module 1730 may output a notification signal in the form of video content through the display unit 1210, may output a notification signal in the form of an audio signal through the sound output unit 1220, and the vibration motor 1230. Through the notification signal may be output in the form of a vibration signal.
  • the display apparatus 1000 may further include a wireless charger.
  • the display apparatus 1000 may provide power to the electronic device contacted through the wireless charger.
  • the wireless charger may be disposed adjacent to the NFC module of the short range communication unit 1510. Both the wireless charger and the NFC module may be disposed at an upper end of the display apparatus 1000.
  • the display apparatus 1000 may further include a touch pad.
  • the touch pad may be disposed on the upper end of the display apparatus 1000.
  • the touch pad may detect a touch input for the UI displayed on the display 1210.
  • the controller 1300 may operate a function associated with the electronic device based on a user input and a touch input received from the control device.
  • the display apparatus 1000 may further include a plurality of light emitting devices disposed adjacent to the touch pad.
  • the controller 1300 selects light emitting devices at positions corresponding to the positions where the plurality of icons are displayed among the plurality of light emitting devices.
  • the selected light emitting devices may emit light.
  • 23 is a block diagram of an electronic device according to some embodiments.
  • the electronic device 200 may include a communication unit 210 and a control unit 220.
  • the communication unit 210 is a means for enabling communication with various types of external devices according to various types of communication methods.
  • the communication unit 210 may include a communication module for performing communication in various types of communication methods.
  • the communicator 210 may communicate with a display device in contact with the electronic device 200.
  • the controller 220 may control overall operations of the electronic device 200. In particular, the above-described operation of the electronic device 200 may be performed by the controller 220. The controller 220 may control an operation of the electronic device 200 so that the function of the electronic device 200 may be linked with the display device.
  • the controller 220 may include a central processing unit (CPU), a microprocessor, a graphic processing unit (GPU), and the like, but is not limited thereto.
  • CPU central processing unit
  • GPU graphic processing unit
  • FIG. 24 is an illustration of a screen of an electronic device, according to some embodiments.
  • the electronic device 200 may display a UI 201 that can be set for interworking with a display device on a screen.
  • the UI 201 may include a list of functions that can be linked with the display device.
  • the UI 201 may be implemented to select a function to be interlocked with the display apparatus among the interoperable functions of the list through a user input.
  • the UI 201 may include a call and messenger function, a remote control function for a controlled device, a wireless charging function, a video link function, and the like as functions that can be linked with a display device.
  • the call and messenger function, the remote control function for the controlled device, and the wireless charging function have been described in the previous drawings, and thus detailed description thereof will be omitted.
  • the image link function may be a function for outputting an image, an image, and the like stored in the electronic device 200 on the display device and controlling the image through the display device. In FIG. 24, the call and messenger function and the remote control function are selected.
  • the UI 201 of FIG. 24 is merely an example, and the electronic device 200 may variously implement the UI 201 that can be set for interworking with the display device, and the display device included in the UI 201. It does not limit the list of functions that can be linked with.
  • the electronic device 200 may set whether or not the electronic device 200 is secured with the display device through the UI 201. If the electronic device 200 has set security for interworking, the display device
  • the electronic device 200 when the electronic device 200 selects a call and messenger function and a remote control function without setting security through the UI 201, the electronic device 200 contacts the display device when the electronic device 200 contacts the display device. ) May directly interwork a call, messenger, and remote control function with the display device without requesting authentication from the display device.
  • the display device may recognize a call and messenger function and a remote control function.
  • the display device may perform a call and messenger function and a remote control function, and display a UI for operating a function on a screen.
  • the display device may recognize all functions (eg, a call and messenger function, a remote control function for a controlled device, a wireless charging function, and a video link function) that the electronic device 200 can interoperate with the display device. have.
  • the display device may perform only allowed functions (call and messenger functions, remote control functions) among the recognized functions.
  • the display device receives a user input for selecting functions (wireless charging function, video link function) that are not allowed through the control device 300 (or FIG. 1) or the touch pad of the display device, the display device displays an electronic device ( The UI requesting to authenticate the permission of use 200 may be displayed.
  • the electronic device 200 When the electronic device 200 establishes security through the UI 201, the electronic device 200 displays a display device for which the use right of the electronic device 200 or the control right for a function associated with the electronic device 200 is confirmed. Only works with. For example, the display device that detects a contact of the electronic device 200 may output a UI for authenticating a use right of the electronic device 200 or a control right for a function associated with the electronic device 200. After the authentication is confirmed, the electronic device 200 may interwork with the display device.
  • the electronic device 200 may set the connection with the display device in advance, and when the display device operates in conjunction with the electronic device 200, it may solve a problem such as leakage of personal information of the user and invasion of privacy.
  • 25 is an example of a screen of an electronic device when security is set in the electronic device, according to some embodiments.
  • the electronic device 200 may be secured by a user input through the UI 201. If security is set, the electronic device 200 may search for an adjacent display device. For example, the electronic device 200 may search for a display device connected through a local area network or may search for a display device through a discovery process.
  • the electronic device 200 may output a list of one or more display devices TV # 1 and TV # 2 found on the UI 201.
  • the UI 201 may be implemented to select a display device to exclude a security setting from among the one or more display devices TV # 1 and TV # 2 through a user input. That is, the electronic device 200 may selectively set the security of the searched one or more display devices TV # 1 and TV # 2.
  • the first display apparatus TV # 1 does not exclude the security setting
  • the second display apparatus TV # 2 excludes the security setting.
  • the first display device TV # 1 that detects a contact of the electronic device 200 may output a UI for authenticating a use right of the electronic device 200 or a control right for a function associated with the electronic device 200. have. After the authentication is confirmed, the electronic device 200 may interwork with the first display device TV # 1. Since the second display device TV # 2 that detects the contact of the electronic device 200 is a device without security setting, the second display device TV # 2 may directly interwork with the electronic device 200.
  • 26 is a block diagram of a control device according to some embodiments.
  • the control device 300 includes a communication unit 320, a user input unit 330, a sensor unit 340, an output unit 350, a microphone 360, a storage unit 370, and a control unit 380. It may include.
  • the communication unit 320 may transmit and receive a signal with the display apparatus 100 according to the above-described embodiments.
  • the communication unit 320 may include an RF module 321 capable of transmitting and receiving a signal with the display apparatus 100 according to the RF communication standard.
  • the control device 300 may include an IR module capable of transmitting and receiving a signal with the display device 100 according to the IR communication standard.
  • the user input unit 330 may be configured as a keypad, a button, a touch pad, or a touch screen.
  • the user may input a command related to the display apparatus 100 to the control apparatus 300 by manipulating the user input unit 330.
  • the user input unit 330 includes a hard key button
  • the user may input a command related to the display apparatus 100 to the control device 300 through a push operation of the hard key button.
  • the user input unit 330 includes a touch screen
  • the user may input a command related to the display device to the control device 300 by touching a soft key of the touch screen.
  • the user input unit 330 may include various kinds of input means that the user can operate, such as a scroll key or a jog key.
  • the user input unit 330 may include a touch pad.
  • the user input unit 330 may receive a user input of dragging, touching, or flipping through a touch pad of the control device 300.
  • the display apparatus may be controlled according to the type of received user input (for example, a direction in which a drag command is input or a time in which a touch command is input).
  • the user may view a UI for operating a function associated with the electronic device displayed on the display device, and input a user input for operating a function associated with the electronic device to the control device 300.
  • the sensor unit 340 may include a gyro sensor 341 or an acceleration sensor 343.
  • the gyro sensor 341 may sense movement information of the control device 300.
  • the gyro sensor 341 may sense information about an operation of the control device 300 based on the x, y, and z axes.
  • the acceleration sensor 343 may sense information about a moving speed of the control device 300.
  • a distance measuring sensor may be further provided, whereby the distance with the display device may be sensed.
  • the output unit 350 may output an image or audio signal corresponding to an operation of the user input unit 330 or a signal received by the display apparatus. The user may recognize whether the user input unit 330 is manipulated or whether the display apparatus 100 is controlled through the output unit 350.
  • the output unit 350 is an LED module 351 that is turned on when the user input unit 330 is manipulated or a signal is transmitted and received with the display apparatus 100 through the communication unit 320, and the vibration module 353 generating vibration. , A sound output module 355 for outputting sound, or a display module 357 for outputting an image.
  • the microphone 360 receives an external sound signal and processes the external sound signal into electrical voice data.
  • the microphone 360 may detect a user's voice and obtain a voice signal.
  • the controller 380 may obtain a voice signal as a user input.
  • the controller 380 may control an operation of the control device 300 or transmit a voice signal to the display device based on the voice signal.
  • the controller 380 may activate the microphone 360 based on a control signal received from the display apparatus through the communication unit 320.
  • the storage unit 370 may store various types of programs, application data, and the like required for controlling or operating the control device 300.
  • the controller 380 controls various items related to the control of the control device 300.
  • the controller 380 may transmit a signal corresponding to a predetermined key manipulation of the user input unit 330 or motion information of the control device 300 sensed by the sensor unit 340 to the display apparatus 100 through the communication unit 320. have.
  • the controller 380 may control the gyro sensor 341 and the RF module 321 so that the RF module 321 transmits motion information of the control device 300 sensed by the gyro sensor 341 to the display device. have.
  • the controller 380 may control the communicator 320 so that the communicator 320 may transmit a command to the display apparatus.
  • the control device 300 may further include a power supply unit.
  • the power supply unit supplies power to the control device 300.
  • the power supply unit 360 may reduce power waste by stopping power supply when the control device 300 does not move for a predetermined time.
  • the power supply unit 360 may resume power supply when a predetermined key provided in the control device 300 is operated.
  • FIG. 27 is a flowchart of a method of operating a display apparatus, according to some embodiments.
  • the display device may detect a contact of an electronic device (S110).
  • the display device may communicate with the electronic device that detected the touch (S120).
  • the display device may recognize a function associated with the electronic device (S130).
  • the display device may display a UI for operating the recognized function on the screen of the display device (S140).
  • the display device may receive a user input for operating a function associated with the electronic device with respect to the displayed UI from the control device (S150).
  • the function associated with the electronic device recognized by the display device may include a call function of the electronic device.
  • the display device may output a first voice signal received from the electronic device.
  • the user input that the display device receives from the control device may include a second voice signal.
  • the display device may transmit the second voice signal to the electronic device.
  • the function associated with the electronic device recognized by the display device may include a messenger function of the electronic device.
  • the UI displayed on the screen of the display device may include a first message received from the electronic device.
  • the user input received by the display device from the control device may include at least one of a second message and a voice signal corresponding to the second message.
  • the display device may display a second message on the screen of the display device.
  • the function associated with the electronic device recognized by the display device may include a control function for allowing the electronic device to remotely control the controlled device.
  • the display device may transmit a command to the electronic device to control the controlled device based on the user input received from the control device.
  • the display device may recognize that the electronic device is a smart key for controlling the vehicle.
  • the UI displayed on the screen of the display device may include information about the vehicle.
  • the display device may transmit a control command to the vehicle based on the user input received from the control device.
  • the display device may detect a touch input for the UI displayed on the screen through the touch pad disposed at the upper end of the display device.
  • the display device may operate a function associated with the electronic device based on at least one of a user input and a touch input received from the control device.
  • the display device selects light emitting devices at positions corresponding to the positions where the plurality of icons are displayed among the plurality of light emitting devices disposed adjacent to the touch pad.
  • the selected light emitting devices may emit light.
  • the display device may obtain orientation information of the electronic device.
  • the display device may determine a location where the UI is displayed on the screen of the display device or select a function associated with the electronic device based on the orientation information.
  • the display device may further display a UI for requesting authentication of a use right of the electronic device on a screen of the display device.
  • the operation method of the display apparatus of FIG. 27 may be performed by the display apparatuses 100 and 1000 of the previous drawings. Therefore, even if the description is not repeated, the operation performed by the display apparatus described with reference to FIG. 27 may be further performed.
  • the computer-readable recording medium includes storage media such as magnetic storage media (eg, ROM, floppy disk, hard disk, etc.) and optical reading media (eg, CD-ROM, DVD, etc.).
  • storage media such as magnetic storage media (eg, ROM, floppy disk, hard disk, etc.) and optical reading media (eg, CD-ROM, DVD, etc.).

Landscapes

  • Engineering & Computer Science (AREA)
  • Signal Processing (AREA)
  • Multimedia (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Human Computer Interaction (AREA)
  • Power Engineering (AREA)
  • Automation & Control Theory (AREA)
  • Transportation (AREA)
  • Mechanical Engineering (AREA)
  • Databases & Information Systems (AREA)
  • User Interface Of Digital Computer (AREA)

Abstract

디스플레이부, 전자 장치의 접촉을 감지하고, 상기 전자 장치와 통신하는 통신부 및 상기 전자 장치와 연관된 기능을 인식하고, 인식된 상기 기능을 조작하기 위한 UI(user interface)를 상기 디스플레이부에 표시하고, 상기 UI에 대해 상기 기능을 조작하기 위한 사용자 입력을 제어 장치로부터 수신하는 제어부를 포함하는 디스플레이 장치가 개시된다.

Description

디스플레이 장치 및 그 동작 방법
본 개시는 디스플레이 장치 및 그 동작 방법에 관한 것이며, 더욱 상세하게는 디스플레이 장치와 접촉하는 전자 장치의 기능을 이용할 수 있는 디스플레이 장치 및 그 동작 방법에 관한 것이다.
디스플레이 장치는 사용자가 시청할 수 있는 영상을 표시하는 기능을 갖춘 장치이다. 예를 들어, 디스플레이 장치의 예인 TV(television) 장치는 과거에는 방송국에서 송출하는 방송 신호를 단방향으로만 수신하여 방송 영상을 디스플레이해주는 기능만을 하였었다. 그러나 현재의 디스플레이 장치는 방송국으로부터 전달받는 방송 영상을 표시하는 기능뿐만 아니라 제공 기능이 점차 다양해 지고 있다. 또한 디스플레이 장치가 주변 기기와의 연동하는 기술 또한 개발되고 있다.
본 개시의 목적은, 디스플레이 장치와 접촉하는 전자 장치의 기능을 이용할 수 있는 디스플레이 장치 및 그 동작 방법을 제공하는 것이다.
일부 실시예에 따른 디스플레이 장치는, 디스플레이부, 전자 장치의 접촉을 감지하고, 상기 전자 장치와 통신하는 통신부 및 상기 전자 장치와 연관된 기능을 인식하고, 인식된 상기 기능을 조작하기 위한 UI(user interface)를 상기 디스플레이부에 표시하고, 상기 UI에 대해 상기 기능을 조작하기 위한 사용자 입력을 제어 장치로부터 수신하는 제어부를 포함한다.
본 실시예에 따르면, 본 발명에 따른 장치와 접촉하는 전자 장치의 기능을 이용할 수 있도록 한다.
도 1은 일부 실시예에 따른 디스플레이 장치 및 전자 장치를 설명하기 위한 도면이다.
도 2는 일부 실시예에 따른 디스플레이 장치가 전자 장치의 통화 기능을 인식한 경우의 예시이다.
도 3은 일부 실시예에 따른 디스플레이 장치가 전자 장치의 통화 기능을 인식한 경우의 다른 예시이다.
도 4는 일부 실시예에 따라 통화 기능이 수행되는 디스플레이 장치, 전자 장치 및 제어 장치의 동작 방법의 흐름도이다.
도 5는 일부 실시예에 따른 디스플레이 장치가 전자 장치의 메신저 기능을 인식한 경우의 예시이다.
도 6은 일부 실시예에 따라 통화 기능이 수행되는 디스플레이 장치, 전자 장치 및 제어 장치의 동작 방법의 흐름도이다.
도 7은 일부 실시예에 따른 디스플레이 장치가 무선 충전 기능을 인식한 경우의 예시이다.
도 8은 일부 실시예에 따른 디스플레이 장치가 무선 충전 기능을 인식한 경우의 다른 예시이다.
도 9는 일부 실시예에 따른 디스플레이 장치가 전자 장치의 원격 제어 기능을 인식한 경우의 예시이다.
도 10은 일부 실시예에 따른 디스플레이 장치 및 스마트 키를 설명하기 위한 도면이다.
도 11은 일부 실시예에 따른 디스플레이 장치가 터치 패드를 포함하는 경우를 나타낸다.
도 12는 일부 실시예에 따른 디스플레이 장치가 터치 패드 및 발광 소자를 포함하는 경우를 나타낸다.
도 13은 일부 실시예에 따른 디스플레이 장치가 전자 장치의 위치에 따라 화면에서 UI가 표시되는 위치를 결정하는 것을 나타낸다.
도 14는 일부 실시예에 따른 디스플레이 장치가 전자 장치의 오리엔테이션에 따라 전자 장치와 연관된 기능들 중 하나의 기능을 선택하는 것을 나타낸다.
도 15는 일부 실시예에 따른 디스플레이 장치가 전자 장치의 위치 변화 정도에 따라 UI에 포함되는 아이콘을 선택하는 것을 나타낸다.
도 16은 일부 실시예에 따른 디스플레이 장치가 화면에 UI를 표시하는 예시이다.
도 17은 일부 실시예에 따른 디스플레이 장치가 화면에 UI를 표시하는 예시이다.
도 18은 일부 실시예에 따른 디스플레이 장치가 화면에 UI를 표시하는 예시이다.
도 19는 일부 실시예에 따른 디스플레이 장치의 블록도이다.
도 20은 일부 실시예에 따른 디스플레이 장치의 다른 블록도이다.
도 21은 일부 실시예에 따른 디스플레이 장치의 측면도이다.
도 22는 일부 실시예에 따른 디스플레이 장치의 또 다른 블록도이다.
도 23은 일부 실시예에 따른 전자 장치의 블록도이다.
도 24는 일부 실시예에 따른 전자 장치의 화면의 예시이다.
도 25는 일부 실시예에 따라 전자 장치에 보안이 설정되는 경우 전자 장치의 화면의 예시이다
도 26은 일부 실시예에 따른 제어 장치의 블록도이다.
도 27은 일부 실시예에 따른 디스플레이 장치의 동작 방법의 흐름도이다.
상기 디스플레이 장치는 음향 출력부를 더 포함하고, 상기 제어부가 인식한 상기 기능은 상기 전자 장치의 통화 기능을 포함하고, 상기 제어부는 상기 전자 장치로부터 수신된 제1 음성 신호를 상기 음향 출력부에 출력하고, 상기 제어부가 상기 제어 장치로부터 수신하는 상기 사용자 입력은 제2 음성 신호를 포함하고, 상기 제어부는 상기 제2 음성 신호를 상기 전자 장치로 전송할 수 있다.
상기 제어부가 인식한 상기 기능은 상기 전자 장치의 메신저 기능을 포함하고, 상기 디스플레이부에 표시된 상기 UI는 상기 전자 장치로부터 수신된 제1 메시지를 포함하고, 상기 제어부가 상기 제어 장치로부터 수신하는 상기 사용자 입력은 제2 메시지 및 상기 제2 메시지에 대응하는 음성 신호 중 적어도 하나를 포함하고, 상기 제어부는 상기 제2 메시지를 상기 디스플레이부에 표시할 수 있다.
상기 제어부가 인식한 상기 기능은 상기 전자 장치가 피제어 기기를 원격으로 제어할 수 있는 제어 기능을 포함하고, 상기 제어부는 상기 제어 장치로부터 수신된 상기 사용자 입력에 기초한 상기 피제어 기기를 제어하는 명령을 상기 전자 장치로 전송할 수 있다.
상기 제어부는 상기 전자 장치가 차량을 제어할 수 있는 스마트 키임을 인식하고, 상기 디스플레이부에 표시되는 UI는 상기 차량에 대한 정보를 포함하고, 상기 제어 장치로부터 수신된 상기 사용자 입력에 기초한 제어 명령을 상기 차량으로 전송할 수 있다.
상기 디스플레이 장치는 상기 전자 장치로 전력을 제공하는 무선 충전기를 더 포함하고, 상기 통신부는 상기 전자 장치의 접촉을 감지하는 NFC(Near Field Communication) 모듈을 포함하고, 상기 NFC 모듈은 상기 디스플레이 장치의 상단부에 배치되고, 상기 무선 충전기는 상기 상단부에 상기 NFC 모듈에 인접하게 배치될 수 있다.
상기 디스플레이 장치는, 상기 상단부에 배치되고, 상기 디스플레이부에 표시된 상기 UI에 대한 터치 입력을 감지하는 터치 패드를 더 포함하고, 상기 제어부는 상기 사용자 입력 및 상기 터치 입력에 기초하여 상기 전자 장치와 연관된 상기 기능을 조작할 수 있다.
상기 디스플레이 장치는 상기 터치 패드와 인접하게 배치되는 복수의 발광 소자들을 더 포함하고, 상기 디스플레이부에 표시되는 UI가 사용자가 선택 가능한 복수의 아이콘들을 포함하는 경우, 상기 제어부는 상기 복수의 발광 소자들 중 상기 복수의 아이콘들이 표시된 위치와 대응하는 위치에 있는 발광 소자들을 선택하고, 선택된 발광 소자들을 발광시킬 수 있다.
상기 제어부는 상기 전자 장치의 오리엔테이션 정보를 획득하고, 상기 오리엔테이션 정보에 기초해, 상기 디스플레이부에서 상기 UI가 표시되는 위치를 결정하거나, 또는 상기 인식된 기능을 선택할 수 있다.
상기 제어부는 상기 전자 장치에 보안이 설정된 경우, 상기 전자 장치의 사용 권한의 인증을 요청하는 UI를 상기 디스플레이부에 더 표시할 수 있다.
일부 실시예에 따른 디스플레이 장치의 동작 방법은, 전자 장치의 접촉을 감지하고, 상기 전자 장치와 통신하는 단계, 상기 전자 장치와 연관된 기능을 인식하고, 인식된 상기 기능을 조작하기 위한 UI(user interface)를 상기 디스플레이 장치의 화면에 표시하는 단계 및 상기 UI에 대해 상기 기능을 조작하기 위한 사용자 입력을 제어 장치로부터 수신하는 단계를 포함한다.
상기 디스플레이 장치의 동작 방법은, 인식된 상기 기능은 상기 전자 장치의 통화 기능을 포함하고, 상기 전자 장치로부터 수신된 제1 음성 신호를 출력하는 단계 및 상기 제어 장치로부터 수신하는 상기 사용자 입력은 제2 음성 신호를 포함하고, 상기 제2 음성 신호를 상기 전자 장치로 전송하는 단계를 더 포함할 수 있다.
상기 디스플레이 장치의 동작 방법은, 인식된 상기 기능은 상기 전자 장치의 메신저 기능을 포함하고, 표시된 상기 UI는 상기 전자 장치로부터 수신된 제1 메시지를 포함하고, 상기 제어 장치로부터 수신하는 상기 사용자 입력은 제2 메시지 및 상기 제2 메시지에 대응하는 음성 신호 중 적어도 하나를 포함하고, 상기 제2 메시지를 표시하는 단계를 더 포함할 수 있다.
상기 디스플레이 장치의 동작 방법은, 인식된 상기 기능은 상기 전자 장치가 피제어 기기를 원격으로 제어할 수 있는 제어 기능을 포함하고, 상기 제어 장치로부터 수신된 상기 사용자 입력에 기초한 상기 피제어 기기를 제어하는 명령을 상기 전자 장치로 전송하는 단계를 더 포함할 수 있다.
상기 디스플레이 장치의 동작 방법은, 상기 전자 장치가 차량을 제어할 수 있는 스마트 키임을 인식하는 단계 및 상기 표시되는 UI는 상기 차량에 대한 정보를 포함하고, 상기 제어 장치로부터 수신된 상기 사용자 입력에 기초한 제어 명령을 상기 차량으로 전송하는 단계를 더 포함할 수 있다.
상기 디스플레이 장치의 동작 방법은, 상기 디스플레이 장치의 상단부에 배치된 터치 패드를 통해, 표시된 상기 UI에 대한 터치 입력을 감지하는 단계 및 상기 사용자 입력 및 상기 터치 입력에 기초하여 상기 전자 장치와 연관된 상기 기능을 조작하는 단계를 더 포함할 수 있다.
상기 디스플레이 장치의 동작 방법은, 표시된 상기 UI가 사용자가 선택 가능한 복수의 아이콘들을 포함하는 경우, 상기 터치 패드와 인접하게 배치되는 복수의 발광 소자들 중 상기 복수의 아이콘들이 표시된 위치와 대응하는 위치에 있는 발광 소자들을 선택하는 단계 및 선택된 발광 소자들을 발광시키는 단계를 더 포함할 수 있다.
상기 디스플레이 장치의 동작 방법은, 상기 전자 장치의 오리엔테이션 정보를 획득하는 단계 및 상기 오리엔테이션 정보에 기초해, 상기 디스플레이 장치의 화면에서 상기 UI가 표시되는 위치를 결정하거나, 또는 상기 인식된 기능을 선택하는 단계를 더 포함할 수 있다.
상기 디스플레이 장치의 동작 방법은, 상기 전자 장치에 보안이 설정된 경우, 상기 전자 장치의 사용 권한의 인증을 요청하는 UI를 상기 디스플레이 장치의 화면에 더 표시하는 단계를 더 포함할 수 있다.
아래에서는 첨부한 도면을 참조하여 본 개시가 속하는 기술 분야에서 통상의 지식을 가진 자가 용이하게 실시할 수 있도록 본 개시의 실시예를 상세히 설명한다. 그러나 본 개시는 여러 가지 상이한 형태로 구현될 수 있으며 여기에서 설명하는 실시예에 한정되지 않는다. 또한, 도면에서 본 개시를 명확하게 설명하기 위해서 설명과 관계없는 부분은 생략하였으며, 명세서 전체를 통하여 유사한 부분에 대해서는 유사한 도면 부호를 붙였다.
본 개시에서 사용되는 용어는, 본 개시에서 언급되는 기능을 고려하여 현재 사용되는 일반적인 용어로 기재되었으나, 이는 당 분야에 종사하는 기술자의 의도 또는 판례, 새로운 기술의 출현 등에 따라 다양한 다른 용어를 의미할 수 있다. 따라서 본 개시에서 사용되는 용어는 용어의 명칭만으로 해석되어서는 안되며, 용어가 가지는 의미와 본 개시의 전반에 걸친 내용을 토대로 해석되어야 한다.
또한, 제1, 제2 등의 용어는 다양한 구성 요소들을 설명하는데 사용될 수 있지만, 구성 요소들은 이 용어들에 의해 한정되어서는 안 된다. 이 용어들은 하나의 구성 요소를 다른 구성 요소로부터 구별하는 목적으로 사용된다.
또한, 본 개시에서 사용된 용어는 단지 특정한 실시 예를 설명하기 위해 사용된 것이며, 본 개시를 한정하려는 의도로 사용되는 것이 아니다. 단수의 표현은 문맥상 명백하게 단수를 뜻하지 않는 한, 복수의 의미를 포함한다. 또한, 명세서 전체에서, 어떤 부분이 다른 부분과 "연결"되어 있다고 할 때, 이는 "직접적으로 연결"되어 있는 경우뿐 아니라, 그 중간에 다른 소자를 사이에 두고 "전기적으로 연결"되어 있는 경우도 포함한다. 또한 어떤 부분이 어떤 구성 요소를 "포함"한다고 할 때, 이는 특별히 반대되는 기재가 없는 한 다른 구성 요소를 제외하는 것이 아니라 다른 구성 요소를 더 포함할 수 있는 것을 의미한다.
본 명세서, 특히, 특허 청구 범위에서 사용된 "상기" 및 이와 유사한 지시어는 단수 및 복수 모두를 지시하는 것일 수 있다. 또한, 본 개시에 따른 방법을 설명하는 단계들의 순서를 명백하게 지정하는 기재가 없다면, 기재된 단계들은 적당한 순서로 행해질 수 있다. 기재된 단계들의 기재 순서에 따라 본 개시가 한정되는 것은 아니다.
본 명세서에서 다양한 곳에 등장하는 "일부 실시예에서" 또는 "일 실시예에서" 등의 어구는 반드시 모두 동일한 실시예를 가리키는 것은 아니다.
본 개시의 일부 실시예는 기능적인 블록 구성들 및 다양한 처리 단계들로 나타내어질 수 있다. 이러한 기능 블록들의 일부 또는 전부는, 특정 기능들을 실행하는 다양한 개수의 하드웨어 및/또는 소프트웨어 구성들로 구현될 수 있다. 예를 들어, 본 개시의 기능 블록들은 하나 이상의 마이크로프로세서들에 의해 구현되거나, 소정의 기능을 위한 회로 구성들에 의해 구현될 수 있다. 또한, 예를 들어, 본 개시의 기능 블록들은 다양한 프로그래밍 또는 스크립팅 언어로 구현될 수 있다. 기능 블록들은 하나 이상의 프로세서들에서 실행되는 알고리즘으로 구현될 수 있다. 또한, 본 개시는 전자적인 환경 설정, 신호 처리, 및/또는 데이터 처리 등을 위하여 종래 기술을 채용할 수 있다. "매커니즘", "요소", "수단" 및 "구성" 등과 같은 용어는 넓게 사용될 수 있으며, 기계적이고 물리적인 구성들로서 한정되는 것은 아니다.
또한, 도면에 도시된 구성 요소들 간의 연결 선 또는 연결 부재들은 기능적인 연결 및/또는 물리적 또는 회로적 연결들을 예시적으로 나타낸 것일 뿐이다. 실제 장치에서는 대체 가능하거나 추가된 다양한 기능적인 연결, 물리적인 연결, 또는 회로 연결들에 의해 구성 요소들 간의 연결이 나타내어질 수 있다.
이하 첨부된 도면을 참고하여 본 개시를 상세히 설명하기로 한다.
도 1은 일부 실시예에 따른 디스플레이 장치 및 전자 장치를 설명하기 위한 도면이다.
도 1을 참고하면, 디스플레이 장치(100)는 A/V(audio/video) 콘텐트를 출력하도록 구성된 장치일 수 있다. 디스플레이 장치(100)는 A/V 콘텐트 중 비디오 콘텐트를 화면에 출력하고, 디스플레이 장치(100)에 포함된 음향 출력부 또는 디스플레이 장치(100)와 연결된 스피커를 통해 오디오 콘텐트를 출력할 수 있다. 스피커는 디스플레이 장치(100)와 유선 또는 무선 등 다양한 방식으로 연결될 수 있다. 예를 들어, 스피커는 무선 스피커, 이어폰, 헤드폰 등일 수 있다.
A/V 콘텐트는 실시간 방송 콘텐트이거나, 비실시간 A/V 콘텐트일 수 있다. 예를 들어, 비실시간 A/V 콘텐트는 VOD(Video On Demand) 서비스로 제공되는 A/V 콘텐트일 수 있다. 디스플레이 장치(100)는 A/V 콘텐트 제공자로부터 A/V 콘텐트를 수신할 수 있다. 디스플레이 장치(100)는 A/V 콘텐트를 스트리밍으로 수신하거나, 다운로드받을 수 있다. 예를 들어, A/V 콘텐트 제공자는 방송 서비스 제공자, VOD 서비스 제공자 등일 수 있다.
디스플레이 장치(100)는 방송 채널을 통하여 외부로부터 방송 신호 및 방송 관련된 정보를 수신할 수 있다. 방송 채널은 위성 채널, 지상파 채널을 포함할 수 있다. 디스플레이 장치(100)는 방송 채널 또는 인터넷을 통해 A/V 콘텐트를 수신할 수 있다. 또는, 디스플레이 장치(100)는 유선 또는 무선으로 연결되는 외부 기기로부터 A/V 콘텐트를 수신할 수 있다. 또는, 디스플레이 장치(100)에 포함되는 메모리에 A/V 콘텐트가 저장되어 있을 수 있다.
디스플레이 장치(100)는 전자 장치(200)의 접촉을 인식하고, 전자 장치(200)와 통신할 수 있다. 디스플레이 장치(100)의 상단면(101)에 전자 장치(200)가 놓일 수 있다. 디스플레이 장치(100)는 상단면(101)에 놓인 전자 장치(200)의 접촉을 감지하고, 전자 장치(200)와 통신적으로 연결될 수 있다.
전자 장치(200)는 예를 들어 스마트폰(200-1), 스마트 키(200-2), 스피커(200-3) 등일 수 있다. 다만 도 1은 전자 장치(200)의 예시일 뿐이고, 전자 장치(200)의 종류 또는 전자 장치(200)의 개수를 제한하는 것은 아니다. 다른 예로, 전자 장치(200)는 태블릿 PC, 휴대폰, PDA(personal digital assistant), 미디어 플레이어, 마이크로 서버, GPS(global positioning system) 장치, 전자책 단말기, 디지털방송용 단말기, 네비게이션, 키오스크, MP3 플레이어, 디지털 카메라 및 기타 컴퓨팅 장치일 수 있으나, 이에 제한되지 않는다. 전자 장치(200)는 통신부 및 제어부를 구비한 전자 장치라면 어떠한 종류라도 가능할 것이다.
디스플레이 장치(100)는 상단면(101)에 전자 장치(200)가 놓여져 있는 동안, 전자 장치(200)와 통신적으로 연결된 상태에 있을 수 있다. 사용자가 전자 장치(200)를 디스플레이 장치(100)의 상단면(101)에 놓으면, 디스플레이 장치(100)는 전자 장치(200)와 자동으로 연결될 수 있다. 사용자가 전자 장치(200)를 상단면(101)에서 치우면, 디스플레이 장치(100)는 전자 장치(200)와의 연결이 끊어질 수 있다.
디스플레이 장치(100)는 전자 장치(200)의 접촉을 감지하는 NFC(Near Field Communication) 모듈을 포함할 수 있다. NFC 모듈은 디스플레이 장치(100)의 상단부에 배치할 수 있다.
도 1에서는 전자 장치(200)가 디스플레이 장치(100)의 상단면(101)과 접촉하는 것으로 도시되었으나, 전자 장치(200)가 디스플레이 장치(100)와 접촉하는 부분이 상단면(101)으로 제한되는 것은 아니다. 전자 장치(200)는 디스플레이 장치(100)의 측면 등 다른 곳에 접촉 가능할 수 있다. 또는, 디스플레이 장치(100)는 특정 부분에 NFC 모듈을 배치하여 특정 부분에서만 전자 장치(200)의 접촉을 감지할 수도 있다. 디스플레이 장치(100)는 전자 장치(200)의 접촉을 감지할 수 있는 특정 부분을 표현하는 표식을 가질 수 있다. 사용자는 표식을 통해 상기 특정 부분을 인식할 수 있어, 특정 부분에 전자 장치(200)를 용이하게 접촉시킬 수 있다. 디스플레이 장치(100)의 표식은 선, 홈 등으로 표시되어 있을 수 있다.
디스플레이 장치(100)는 전자 장치(200)와 연관된 기능을 인식할 수 있다. 예를 들어, 전자 장치(200)와 연관된 기능은 전자 장치(200)의 통화 기능, 전자 장치(200)의 메신저 기능, 전자 장치(200)의 음향 출력 기능, 전자 장치(200)가 피제어 기기(controlled device)를 원격으로 제어할 수 있는 제어 기능 등 전자 장치(200)가 수행하는 기능일 수 있다. 또는, 전자 장치(200)와 연관된 기능은 전자 장치(200)와의 콘텐트 전송 및 수신 기능, 백업 기능과 같은 전자 장치(200)와의 통신 기능, 전자 장치(200)를 무선 충전하는 기능 등 다양할 수 있다. 다만, 전자 장치(200)와 연관된 기능은 서술된 기능에 한정하는 것이 아니며, 디스플레이 장치(100)가 전자 장치(200)와 연동 가능한 다양한 기능이 될 수 있다.
또한, 디스플레이 장치(100)는 전자 장치(200)와 연관된 적어도 하나의 기능을 인식할 수 있다. 디스플레이 장치(100)는 하나의 전자 장치(200)와 연관된 복수의 기능들을 인식할 수도 있다.
디스플레이 장치(100)는 인식된 전자 장치(200)와 연관된 기능을 조작하기 위한 UI(user interface)(102)를 화면에 표시할 수 있다. UI(102)는 사용자와 상호 작용을 위한 것으로, 디스플레이 장치(100)가 인식한 전자 장치(200)와 연관된 기능을 사용자가 인지할 수 있게 하고, 그리고 사용자가 연관된 기능을 조작할 수 있게 하기 위한 것일 수 있다. UI(102)는 전자 장치(200)에 대한 정보, 전자 장치(200)와 연관된 기능과 관계된 정보, 디스플레이 장치(100)가 연관된 기능 수행으로 인해 발생한 정보 등 다양한 정보를 포함할 수 있다. 또한, UI(102)는 사용자가 전자 장치(200)와 연관된 기능을 선택, 설정 또는 제어 가능하게 하는 UI를 포함할 수 있다.
디스플레이 장치(100)가 전자 장치(200)와 연관된 복수의 기능들을 인식한 경우, UI(102)는 복수의 기능들의 리스트 및 각 기능들을 선택, 설정, 조작 가능한 UI 등을 포함할 수 있다. UI(102)는 텍스트, 이미지, 이들의 조합 등 다양한 방식으로 화면에 표시될 수 있다. 디스플레이 장치(100)는 화면에 표시되는 UI(102) 외에 소리 UI를 더 출력할 수도 있다. 디스플레이 장치(100)는 화면에 표시되는 UI(102) 및 소리 UI 중 적어도 하나를 출력할 수도 있다. 디스플레이 장치(100)는 사용자와의 상호 작용이 가능하도록 다양한 방식으로 UI(102)를 출력할 수 있다. 이하, 설명의 편의를 위해 디스플레이 장치(100)의 화면에 표시되는 UI(102)를 위주로 설명하나, UI(102)가 소리 UI를 배제하는 것은 아니다.
디스플레이 장치(100)는 전자 장치(200)의 사용 권한 또는 전자 장치(200)와 연관된 기능에 대한 제어 권한을 인증하기 위한 UI(102)를 출력할 수도 있다. 디스플레이 장치(100)는 전자 장치(200)의 접촉을 감지하면, 전자 장치(200)의 사용 권한 또는 연관된 기능에 대한 제어 권한의 인증을 요청하는 UI(102)를 출력할 수 있다. 사용자는 제어 장치(300)를 통해 전자 장치(200)의 ID, 패스워드, 지문 등을 입력할 수 있다.
디스플레이 장치(100)는 전자 장치(200)의 접촉을 감지할 때 사용 권한 또는 제어 권한의 인증을 요청할 수 있다. 디스플레이 장치(100)는 전자 장치(200)의 접촉을 감지할 때마다 사용 권한 또는 제어 권한의 인증을 요청할 수 있다. 또는, 디스플레이 장치(100)는 이전에 인증되지 않은 전자 장치(200)의 접촉을 감지할 때만 사용 권한 또는 제어 권한의 인증을 요청할 수 있다. 즉, 디스플레이 장치(100)는 한번 인증된 전자 장치(200)의 재접촉을 감지할 때는 사용 권한 또는 제어 권한의 인증을 요청하지 않을 수 있다. 디스플레이 장치(100)와 전자 장치(200) 사이의 인증은 다양한 방식으로 구현 가능하므로, 서술된 예시에 한정되는 것은 아니다.
디스플레이 장치(100)는 UI(102)에 대해 전자 장치(200)와 연관된 기능을 조작하기 위한 사용자 입력을 제어 장치(300)로부터 수신할 수 있다. 제어 장치(300)는 디스플레이 장치(100)를 원격으로 제어할 수 있는 장치이다. 사용자는 디스플레이 장치(100)에 표시된 UI(102)를 통해 디스플레이 장치(100)와 연관된 기능을 인식하고, 제어 장치(300)의 버튼을 누르는 등의 방식으로 제어 장치(300)에 사용자 입력을 입력할 수 있다. 제어 장치(300)는 사용자 입력을 디스플레이 장치(100)로 전송하고, 사용자 입력을 수신한 디스플레이 장치(100)는 사용자 입력에 기초해 전자 장치(200)와 연관된 기능을 수행할 수 있다. 디스플레이 장치(100)는 전자 장치(200)와 연관된 기능을 수행하기 위해 전자 장치(200)와 통신을 수행할 수 있다. 또한, 디스플레이 장치(100)는 전자 장치(200)와 연동하여 연관된 기능을 수행할 수 있다.
제어 장치(300)를 통해 UI(102)가 조작될 수 있는 것 외에도, 제어 장치(300)를 통해, 디스플레이 장치(100)의 전원을 온 또는 오프시키거나, 채널을 변경하거나, 음량을 조정하거나, 지상파 방송/케이블 방송/위성 방송 등 방송의 종류를 선택하거나, 또는 디스플레이 장치(100)의 환경을 설정(setting)하는 등 다양하게 디스플레이 장치(100)가 제어될 수 있다.
제어 장치(300)는 TV 리모컨, 포인팅 리모컨, 마우스, 모션 인식기 등일 수 있으나, 이에 제한되는 것은 아니다. 도 1에 도시된 제어 장치(300)는 일 예에 불과하며, 디스플레이 장치(100)를 제어할 수 있는 장치라면 어떠한 형태의 제어 장치라도 가능하다.
디스플레이 장치(100)는 제어 장치(300) 외에도 다양한 방식으로 UI(102)에 대해 전자 장치(200)와 연관된 기능을 조작하기 위한 사용자 입력을 획득할 수 있다. 예를 들어, 디스플레이 장치(100)에 포함된 마이크로폰은 사용자의 음성 등의 음향 신호를 입력 받고, 디스플레이 장치(100)는 음향 신호를 사용자 입력을 획득할 수 있다. 디스플레이 장치(100)에 포함된 카메라는 사용자의 모션 제스처를 감지하고, 디스플레이 장치(100)는 모션 제스처를 사용자 입력으로 획득할 수 있다. 디스플레이 장치(100)는 디스플레이 장치(100)의 화면 상에 구현된 터치 스크린 또는 디스플레이 장치(100)의 화면 외에 구현된 터치 패드를 통해 사용자 입력을 수신할 수도 있다.
디스플레이 장치(100)는 A/V 콘텐트를 출력 중일 수 있다. A/V 콘텐트를 출력 중인 디스플레이 장치(100)는 UI(102)를 A/V 콘텐트와 함께 출력할 수 있다. 디스플레이 장치(100)는 화면에 출력 중인 A/V 콘텐트의 비디오 콘텐트와 함께 UI(102)를 출력할 수 있다. 디스플레이 장치(100)가 소리 UI를 출력하는 경우, 디스플레이 장치(100)는 소리 UI를 출력하기 위해 A/V 콘텐트의 오디오 콘텐트의 출력을 제한할 수 있다. 예를 들어, 디스플레이 장치(100)는 오디오 콘텐트의 볼륨을 줄이거나, 무음 처리하고, 소리 UI를 출력할 수 있다.
또는, 디스플레이 장치(100)는 A/V 콘텐트 출력 여부와 상관 없이 UI(102)를 출력할 수도 있다. 예를 들어, 디스플레이 장치(100)는 대기 모드 화면 상에 UI(102)를 출력할 수 있다. 또는, 디스플레이 장치(100)의 화면은 오프 상태로 있다가, 디스플레이 장치(100)가 전자 장치(200)의 접촉을 감지하거나, UI(102)의 출력을 결정한 경우, 화면을 오프 상태에서 온 상태로 변경하고, 화면에 UI(102)를 출력할 수 있다.
사용자는 전자 장치(200)와 연관된 기능을 조작하기 위해 디스플레이 장치(100)로 접근해 전자 장치(200)를 집어들 필요 없이, 디스플레이 장치(100) 및 제어 장치(300)를 통해 연관된 기능을 조작할 수 있다. 특히 사용자가 디스플레이 장치(100)를 통해 A/V 콘텐트를 시청 중인 경우, 사용자는 A/V 콘텐트를 시청하면서, 제어 장치(300)를 통해 전자 장치(200)와 연관된 기능을 조작할 수 있다. 따라서 사용자의 편의성이 크게 증가될 수 있다.
구체적인 예로, 디스플레이 장치(100)는 스피커(200-3)의 접촉을 감지할 수 있고, 자동으로 스피커(200-3)와 통신 연결될 수 있다. 디스플레이 장치(100)는 스피커(200-3)와 연관된 기능으로 스피커(200-3)의 음향 출력 기능을 인식할 수 있다. 디스플레이 장치(100)는 출력할 오디오 콘텐트가 있는 경우, 스피커(200-3)에 오디오 콘텐트를 전송하여 스피커(200-3)가 오디오 콘텐트를 출력하도록 할 수 있다.
디스플레이 장치(100)는 스피커(200-3)의 음향 출력 기능을 인식하고, 음향 출력 기능을 조작하기 위한 UI(102)를 화면에 표시할 수 있다. UI(102)는 예를 들어, 음향 출력 기능에 대한 정보, 스피커(200-3)에 대한 정보 등을 표시하거나, 스피커(200-3)와의 연결 여부, 스피커(200-3)의 볼륨 조정 등 스피커(200-3)를 제어하기 위한 UI일 수 있다. 다만 UI(102)는 서술된 예시에 한정되는 것이 아니며, 디스플레이 장치(100)는 사용자와의 상호 작용이 가능한 다양한 방식으로 UI(102)를 화면에 표시할 수 있다.
도 2는 일부 실시예에 따른 디스플레이 장치가 전자 장치의 통화 기능을 인식한 경우의 예시이다.
도 2를 참고하면, 디스플레이 장치(100)는 전자 장치(200)의 접촉을 감지할 수 있다. 디스플레이 장치(100)는 전자 장치(200)와 연관된 기능을 인식하고, 인식된 기능은 전자 장치(200)의 통화 기능을 포함할 수 있다. 디스플레이 장치(100)는 인식된 통화 기능을 수행할 수 있다. 통화 기능을 수행하기 위해, 디스플레이 장치(100)는 전자 장치(200)와 통신하고, 전자 장치(200)와 연동할 수 있다.
전자 장치(200)가 외부 기기로부터 통화를 요청 받으면, 디스플레이 장치(200)는 통화 기능을 조작하기 위한 UI(102)를 화면에 표시할 수 있다. UI(102)는 통화 요청에 대한 정보를 표시하거나, 통화 요청의 수락 여부를 선택할 수 있는 UI일 수 있다. 디스플레이 장치(100)는 화면에 표시되는 UI(102) 대신 소리 UI를 출력할 수도 있고, UI(102)와 함께 소리 UI를 더 출력할 수도 있다. 도 2의 UI(102)는 특정한 통화 요청자로부터 통화 요청이 있음을 알리고, 통화 요청을 수락 또는 거부할 수 아이콘을 포함하는 것으로 도시하고 있으나, 도 2는 UI(102)의 예시일 뿐, UI(102)의 구현을 제한하는 것은 아니다.
사용자는 UI(102)를 통해 통화 요청을 인식하고, 통화 기능을 조작하는 사용자 입력을 제어 장치(300)를 통해 입력할 수 있다. 사용자는 제어 장치(300)를 통해 통화 요청을 수락하거나 거절할 수 있다. 도 2에서는 제어 장치(300)가 포인팅 기능을 가진 것으로 가정하였다. 디스플레이 장치(100)는 제어 장치(300)의 포인터(pointer)를 화면에 표시할 수 있다. 사용자는 제어 장치(300)를 이동시켜 디스플레이 장치(300)의 포인터가 UI(102)의 통화 요청 수락 아이콘에 위치하도록 하고, 제어 장치(300)를 통해 통화 요청 수락 아이콘을 선택할 수 있다. 디스플레이 장치(100)는 수신된 통화 요청을 수락하는 사용자 입력을 제어 장치(300)로부터 수신할 수 있다. 도 2는 통화 기능을 제어하는 사용자 입력의 예시일 뿐이며, 디스플레이 장치(100)가 제어 장치(300)로부터 사용자 입력을 수신하는 방식은 다양하게 구현될 수 있다.
디스플레이 장치(100)는 통화 요청을 수락하는 사용자 입력을 수신하면, 디스플레이 장치(100)는 전자 장치(200)와 통신함으로써 통화 기능을 수행할 수 있다.
디스플레이 장치(100)는 디스플레이 장치(100)에 포함되는 음향 출력부 또는 디스플레이 장치(100)에 연결된 스피커를 통해, 전자 장치(200)와 통화 연결된 외부 기기로부터 수신한 "Hi Michael"에 대응하는 음성 신호를 출력할 수 있다.
사용자가 "Hello"라 말하면, 제어 장치(300)에 포함된 마이크로폰은 "Hello"를 감지하고 "Hello"에 대응하는 음성 신호를 획득할 수 있다. 제어 장치(300)는 음성 신호를 디스플레이 장치(100)로 전송할 수 있다. 디스플레이 장치(100)는 제어 장치(300)로부터 수신된 "Hello"에 대응하는 음성 신호를 전자 장치(200)에 전송하여, 전자 장치(200)가 통화 연결된 외부 기기로 "Hello"에 대응하는 음성 신호를 전송하도록 할 수 있다.
사용자는 제어 장치(300)에 포함된 마이크로폰 및 디스플레이 장치(100)에 포함된 음향 출력부 또는 디스플레이 장치(100)에 연결된 스피커를 통해, 전자 장치(200)와 통화 연결된 외부 기기와 통화할 수 있다. 사용자는 통화를 위해 디스플레이 장치(100)로 접근해 전자 장치(200)를 집어들 필요 없이, 디스플레이 장치(100) 및 제어 장치(300)를 통해 전화를 받을 수 있다. 따라서 사용자의 편의성이 크게 증가될 수 있다.
디스플레이 장치(100)는 A/V 콘텐트를 출력 중일 수 있다. 디스플레이 장치(100)가 소리 UI를 출력하는 경우, 디스플레이 장치(100)는 소리 UI를 출력하기 위해 A/V 콘텐트의 오디오 콘텐트의 출력을 제한할 수 있다. 예를 들어, 디스플레이 장치(100)는 오디오 콘텐트의 볼륨을 줄이거나, 무음 처리하고, 소리 UI를 출력할 수 있다. 또한, 전자 장치(200)가 통화 요청자와 통화 연결되면, 디스플레이 장치(100)는 출력 중이던 A/V 콘텐트의 출력을 제한할 수 있다. A/V 콘텐트의 오디오 콘텐트는 통화에 방해가 될 수 있으므로, 디스플레이 장치(100)는 전자 장치(200)가 통화 연결되는 동안 오디오 콘텐트의 출력을 제한할 수 있다.
도 2에서는 전자 장치(200)가 외부 기기로부터 통화를 요청 받는 경우를 도시한 것이나, 사용자가 전화를 거는 경우 역시, 사용자는 디스플레이 장치(100) 및 제어 장치(300)를 이용할 수 있을 것이다. 사용자는 전화를 걸기 위해 디스플레이 장치(100)로 접근해 전자 장치(200)를 집어 드는 대신, 제어 장치(300)를 통해 디스플레이 장치(100)에 전화를 걸기 위한 사용자 입력을 전송할 수 있다. 디스플레이 장치(100)는 사용자가 외부 기기로 통화를 요청할 수 있는 UI를 출력할 수 있다. 전자 장치(200)와 외부 기기가 통화 연결되면, 사용자는 디스플레이 장치(100) 및 제어 장치(300)를 통해 외부 기기와 통화할 수 있다.
도 3은 일부 실시예에 따른 디스플레이 장치가 전자 장치의 통화 기능을 인식한 경우의 다른 예시이다.
도 3을 참고하면, 전자 장치(200)가 외부 기기로부터 통화를 요청 받으면, 디스플레이 장치(200)는 통화 요청에 대한 정보를 표시하는 UI(102)를 화면에 표시할 수 있다.
디스플레이 장치(100)는 카메라(170)를 포함할 수 있고, 카메라(170)를 통해 사용자의 모션 제스처를 감지할 수 있다. 카메라(170)는 사용자를 촬영한 정지 영상 또는 동영상 등의 이미지 데이터를 획득할 수 있다. 디스플레이 장치(100)는 카메라(170)를 통해 획득된 이미지 데이터를 분석해 모션 제스처를 감지할 수 있다. 디스플레이 장치(100)는 감지된 모션 제스처에 기초해 통화 요청의 수락 여부를 결정할 수 있다. 통화 요청의 수락을 위한 모션 제스처 및 통화 요청의 거부를 위한 모션 제스처는 미리 결정되어 있을 수 있다. 디스플레이 장치(100)는 감지된 모션 제스처가 미리 결정된 모션 제스처와 비교하여 통화 요청의 수락 여부를 결정할 수 있다. 예를 들어, 사용자의 다섯 손가락들 중 엄지와 새끼 손가락만을 핀 모션 제스처는 통화 요청의 수락을 위한 모션 제스처로 미리 결정되어 있을 수 있다. 디스플레이 장치(100)가 해당 모션 제스처를 감지하면, 감지된 모션 제스처를 통화 요청의 수락으로 결정할 수 있다. 다만, 도 3은 모션 제스처의 예시이고, 모션 제스처가 도 3으로 제한되는 것은 아니다.
전자 장치(200)와 통화 연결된 외부 기기로부터 음성 신호가 수신되면, 디스플레이 장치(100)에 포함되는 음향 출력부 또는 디스플레이 장치(100)에 연결된 스피커를 통해 수신된 음성 신호를 출력할 수 있다.
사용자가 "Hi Jessi"라고 말하면, 사용자 근처에 있는 제어 장치의 마이크로폰 또는 디스플레이 장치(100)에 포함된 마이크로폰이 "Hi Jessi"를 감지하고 대응하는 음성 신호를 획득할 수 있다. 디스플레이 장치(100)는 획득된 음성 신호를 전자 장치(200)로 전송하여, 전자 장치(200)가 통화 연결된 외부 기기로 음성 신호를 전송하도록 할 수 있다.
도 4는 일부 실시예에 따라 통화 기능이 수행되는 디스플레이 장치, 전자 장치 및 제어 장치의 동작 방법의 흐름도이다.
도 4를 참고하면, 디스플레이 장치(100)는 전자 장치(200)의 접촉을 감지할 수 있다(S10). 디스플레이 장치(100)는 전자 장치(200)의 통화 기능을 인식할 수 있다(S11).
전자 장치(200)가 외부 기기(500)로부터 통화를 요청 받으면(S12), 전자 장치(200)는 통화 요청과 관계된 정보를 디스플레이 장치(100)로 전송할 수 있다(S13). 통화 요청과 관계된 정보는 통화를 요청한 외부 기기에 대한 정보, 예를 들어, 통화 요청자의 이름, 전화 번호 등을 포함할 수 있다.
디스플레이 장치(100)는 통화 요청에 대한 UI를 화면에 표시할 수 있다(S14). 통화 요청에 대한 UI는 사용자가 통화 요청을 인식할 수 있게 하거나, 통화 요청을 조작할 수 있게 하는 UI이다. UI는 텍스트, 이미지, 이들의 조합 등 다양한 방식으로 화면에 표시될 수 있다. 또는, 디스플레이 장치(100)는 UI를 화면에 표시하는 대신 소리 UI를 출력하거나, 화면에 표시되는 UI 및 소리 UI를 함께 출력할 수 있다.
단계 S13 이후, 디스플레이 장치(100)는 제어 장치(300)로 통화 기능 수행을 위한 제어 신호를 전송할 수도 있다. 제어 신호를 수신한 제어 장치(300)는 통화 기능 수행과 관련된 동작을 수행할 수 있다. 예를 들어, 제어 장치(300)가 디스플레이 장치(100)를 제어하기 위한 제어 모드 및 통화 기능 수행 모드를 포함하는 복수의 모드들 중 하나의 모드로 동작하는 경우, 제어 신호를 수신한 제어 장치(300)는 통화 기능 수행 모드로 동작할 수 있다. 또는, 제어 신호를 수신한 제어 장치(300)는 제어 장치(300)의 마이크로폰을 활성화시킬 수 있다. 또는, 제어 장치(300)는 제어 장치(300)의 LED 모듈을 점멸시킬 수 있다. 제어 장치(300)의 LED 모듈의 점멸 및 디스플레이 장치(100)가 출력하는 UI를 통해, 사용자는 제어 장치(300)가 통화 기능 수행과 관련된 동작을 수행할 수 있음을 인식할 수 있다.
도 3과 같이 디스플레이 장치(100)가 사용자의 모션 제스처를 감지하여 통화 요청의 수락 여부를 결정할 수 있는 경우, 단계 S13 이후 디스플레이 장치(100)는 모션 제스처를 감지할 수 있는 카메라(도 3의 170)를 활성화시킬 수 있다.
디스플레이 장치(100)는 통화 요청을 수락하는 사용자 입력을 제어 장치(300)로부터 수신할 수 있다(S15). 또는, 도 3과 같이 디스플레이 장치(100)가 사용자의 모션 제스처를 감지하여 통화 요청의 수락 여부를 결정할 수 있는 경우, 디스플레이 장치(100)는 사용자 입력을 제어 장치(300)로부터 수신하는 대신, 사용자의 모션 제스처를 감지하여, 감지된 모션 제스처에 기초해 통화 요청의 수락 여부를 결정할 수도 있다.
디스플레이 장치(100)는 전자 장치(200)로 통화 요청 수락을 전송하여(S16), 전자 장치(200)가 통화 요청자와 통화를 연결하도록 할 수 있다. 전자 장치(200)는 통화를 요청한 외부 기기(500)와 통화 연결할 수 있다(S17).
단계 S15 내지 단계 S17과 달리, 디스플레이 장치(100)가 통화 요청을 거부하는 사용자 입력을 제어 장치(300)로부터 수신하거나, 감지된 모션 제스처에 기초해 통화 요청의 거부를 결정한 경우, 디스플레이 장치(100)는 전자 장치(200)로 통화 요청 거부를 전송할 수 있고, 전자 장치(200)는 통화를 요청한 외부 기기(500)와 통화 연결하지 않을 수 있다.
전자 장치(200)가 통화 연결된 외부 기기(500)로부터 제1 음성 신호를 수신하면(S19), 전자 장치(200)는 제1 음성 신호를 디스플레이 장치(100)에 전송하고(S20), 디스플레이 장치(100)는 디스플레이 장치(100)에 포함되는 음향 출력부 또는 디스플레이 장치(100)에 연결된 스피커를 통해 제1 음성 신호를 출력할 수 있다(S21).
제어 장치(300)는 사용자 입력으로 획득된 제2 음성 신호를 디스플레이 장치(100)로 전송할 수 있다(S22). 디스플레이 장치(100)는 제어 장치(300)로부터 수신된 제2 음성 신호를 전자 장치(200)에 전송하여(S23), 전자 장치(200)가 통화 연결된 외부 기기(500)에 제2 음성 신호를 전송하도록 할 수 있다(S24).
또는, 디스플레이 장치(100)는 제어 장치(300)로부터 제2 음성 신호를 수신하는 대신, 다른 다양한 방식으로 제2 음성 신호를 획득할 수 있다. 예를 들어, 디스플레이 장치(100)의 마이크로폰, 디스플레이 장치(100)에게 유선 또는 무선으로 신호 전송이 가능한 기기에 포함된 마이크로폰을 통해 제2 음성 신호를 획득할 수도 있다. 예를 들어, 마이크로폰은 이어폰, 헤드폰과 같이 디스플레이 장치(100)와 연결된 스피커에 포함될 수 있다.
도 5는 일부 실시예에 따른 디스플레이 장치가 전자 장치의 메신저 기능을 인식한 경우의 예시이다.
도 5를 참고하면, 디스플레이 장치(100)는 전자 장치(200)의 접촉을 감지할 수 있다. 디스플레이 장치(100)는 전자 장치(200)와 연관된 기능을 인식하고, 인식된 기능은 전자 장치(200)의 메신저 기능을 포함할 수 있다. 디스플레이 장치(100)는 인식된 메신저 기능을 수행할 수 있다. 메신저 기능을 수행하기 위해, 디스플레이 장치(100)는 전자 장치(200)와 통신하고, 전자 장치(200)와 연동할 수 있다.
전자 장치(200)가 외부 기기로부터 제1 메시지("Hi Michael")를 수신하면, 전자 장치(200)는 외부 기기에 대한 정보 및 제1 메시지("Hi Michael") 등을 디스플레이 장치(100)에 전달할 수 있다.
디스플레이 장치(100)는 메신저 기능을 조작하기 위한 UI(102)를 화면에 표시할 수 있다. UI(102)는 메시지를 전송한 외부 기기에 대한 정보(예를 들어, 사람 이름, 전화 번호 등) 또는 외부 기기로부터 수신한 메시지("Hi Michael")를 포함할 수 있다. UI(102)는 수신된 메시지 확인 여부를 선택할 수 있는 UI일 수 있다. 도 5는 UI(102)의 예시일 뿐, UI(102)의 구현을 제한하는 것은 아니다.
제어 장치(300)는 사용자로부터 제2 메시지("Hi Justin")를 입력 받고, 제2 메시지("Hi Justin")를 디스플레이 장치(100)로 전송할 수 있다. 디스플레이 장치(100)는 전송 받은 제2 메시지("Hi Justin")를 화면에 표시할 수 있다. 디스플레이 장치(102)는 제2 메시지("Hi Justin")를 UI(102)에 포함시켜 화면에 표시할 수 있다. 디스플레이 장치(102)는 제2 메시지("Hi Justin")를 전자 장치(200)로 전송하여, 전자 장치(200)가 제1 메시지("Hi Michael")를 전송한 외부 기기로 제2 메시지("Hi Justin")를 전송하도록 할 수 있다.
사용자는 디스플레이 장치(100) 및 제어 장치(300)를 이용해 전자 장치(200)와 연관된 메신저 기능을 전자 장치(200)와 연동하여 수행할 수 있다.
제어 장치(300)는 텍스트를 입력할 수 있는 사용자 입력부를 포함할 수 있고, 사용자로부터 "Hi Justin"에 대응하는 텍스트를 입력 받을 수 있다. 또는, 제어 장치(300)에 포함되는 마이크로폰은 사용자가 말한 "Hi Justin"을 감지하고, "Hi Justin"에 대응하는 음성 신호를 획득할 수 있다. 제어 장치(300)는 "Hi Justin"에 대응하는 텍스트 메시지 또는 음성 신호를 디스플레이 장치(100)에 전송할 수 있다. 음성 신호를 수신한 디스플레이 장치(100)는 음성 신호를 텍스트 메시지("Hi Justin")로 변환하고, 변환된 텍스트 메시지를 화면에 표시할 수 있다.
사용자는 전자 장치(200)의 메신저 기능을 이용하기 위해 디스플레이 장치(100)로 접근해 전자 장치(200)를 집어들 필요 없이, 디스플레이 장치(100) 및 제어 장치(300)를 통해 메신저 기능을 이용할 수 있다. 따라서 사용자의 편의성이 크게 증가될 수 있다.
도 6은 일부 실시예에 따라 통화 기능이 수행되는 디스플레이 장치, 전자 장치 및 제어 장치의 동작 방법의 흐름도이다.
도 6을 참고하면, 디스플레이 장치(100)는 전자 장치(200)의 접촉을 감지할 수 있다(S30). 디스플레이 장치(100)는 전자 장치(200)의 메신저 기능을 인식할 수 있다(S31).
전자 장치(200)가 외부 기기로부터 제1 메시지를 수신하면(S32), 전자 장치(200)는 메시지 수신과 관계된 정보를 디스플레이 장치(100)로 전송할 수 있다(S33). 메시지 수신과 관계된 정보는 메시지를 전송한 외부 기기에 대한 정보, 예를 들어, 외부 기기의 사용자의 이름, 전화 번호 등을 포함할 수 있다. 또한, 메시지 수신과 관계된 정보는 수신된 제1 메시지를 더 포함할 수 있다.
디스플레이 장치(100)는 메시지 수신에 대한 UI를 화면에 표시할 수 있다(S34). UI는 사용자가 메시지 수신을 인식할 수 있게 하거나, 메신저 기능을 조작할 수 있게 하는 UI일 수 있다.
단계 S33 이후, 디스플레이 장치(100)는 제어 장치(300)로 메신저 기능 수행을 위한 제어 신호를 전송할 수도 있다. 제어 신호를 수신한 제어 장치(300)는 메신저 기능 수행과 관련된 동작을 수행할 수 있다. 예를 들어, 제어 장치(300)가 디스플레이 장치(100)를 제어하기 위한 제어 모드 및 메신저 기능 수행 모드를 포함하는 복수의 모드들 중 하나의 모드로 동작하는 경우, 제어 신호를 수신한 제어 장치(300)는 메신저 기능 수행 모드로 동작할 수 있다. 또는, 제어 신호를 수신한 제어 장치(300)는 제어 장치(300)의 마이크로폰을 활성화시킬 수 있다. 또는, 제어 장치(300)는 제어 장치(300)의 LED 모듈을 점멸시킬 수 있다. 제어 장치(300)의 LED 모듈의 점멸 및 디스플레이 장치(100)가 출력하는 UI를 통해, 사용자는 제어 장치(300)가 메신저 기능 수행과 관련된 동작을 수행할 수 있음을 인식할 수 있다.
제어 장치(300)는 사용자로부터 제2 메시지를 입력 받고, 제2 메시지를 디스플레이 장치(100)로 전송할 수 있다(S35). 디스플레이 장치(100)는 제어 장치(300)로부터 제2 메시지 및 제2 메시지에 대응하는 음성 신호 중 적어도 하나를 수신할 수 있다. 디스플레이 장치(100)가 음성 신호를 수신한 경우, 음성 신호를 제2 메시지로 변환할 수 있다.
디스플레이 장치(100)는 제2 메시지를 화면에 표시할 수 있다(S36). 디스플레이 장치(102)는 제2 메시지를 UI(102)에 포함시켜 화면에 표시할 수 있다. 디스플레이 장치(102)는 제2 메시지를 전자 장치(200)로 전송하여(S37), 전자 장치(200)가 제1 메시지를 전송한 외부 기기(500)로 제2 메시지를 전송하도록 할 수 있다(S38).
도 7은 일부 실시예에 따른 디스플레이 장치가 무선 충전 기능을 인식한 경우의 예시이다.
도 7을 참고하면, 디스플레이 장치(100)는 전자 장치(200)의 접촉을 감지할 수 있다. 디스플레이 장치(100)는 전자 장치(200)와 연관된 기능을 인식하고, 인식된 기능은 무선 충전 기능을 포함할 수 있다. 디스플레이 장치(100)는 전자 장치(200)를 무선 충전시킬 수 있다.
디스플레이 장치(100)는 무선 충전기(150)를 포함할 수 있다. 디스플레이 장치(100)는 전자 장치(200)의 접촉을 감지하고, 무선 충전 기능을 인식하면, 무선 충전기(150)를 턴온시킬 수 있다. 무선 충전기(150)는 전자기장을 생성하고, 전자기적으로 결합된 전자 장치(200)에 전력을 공급할 수 있다.
디스플레이 장치(100)는 전원 오프 상태에서도 무선 충전기(150) 기능을 활성화시킬 수 있다. 예를 들어, 디스플레이 장치(100)의 화면은 오프 상태로 있다가, 전자 장치(200)의 접촉을 감지하고, 무선 충전 기능을 인식하면 무선 충전기(150)를 턴온시킬 수 있다.
디스플레이 장치(100)는 무선 충전 기능을 조작하기 위한 UI(102)를 화면에 표시할 수 있다. UI(102)는 전자 장치(200)가 무선 충전 중임을 알리는 정보, 전자 장치(200)의 충전 상태에 대한 정보 등을 포함할 수 있다. UI(102)는 무선 충전 기능을 턴온 또는 턴오프시킬 수 있는 UI를 포함할 수 있다.
디스플레이 장치(100)는 출력 중인 A/V 콘텐트와 함께 UI(102)를 출력할 수 있다. 따라서 사용자는 디스플레이 장치(100)에서 출력 중인 A/V 콘텐트를 시청하면서, UI(102)를 통해 전자 장치(200)의 충전 상태를 확인할 수 있다.
디스플레이 장치(100)는 무선 충전 기능을 턴오프시키는 사용자 입력을 제어 장치로부터 수신할 수 있다. 디스플레이 장치(100)는 무선 충전기(150)를 턴오프시켜 무선 충전 기능을 비활성화시킬 수 있다.
도 8은 일부 실시예에 따른 디스플레이 장치가 무선 충전 기능을 인식한 경우의 다른 예시이다.
도 8을 참고하면, 디스플레이 장치(100)는 전자 장치(200)의 접촉을 감지하고, 전자 장치(200)와 연관된 기능으로 무선 충전 기능을 인식할 수 있다.
전자 장치(200)가 무선 충전기(150)와 어긋난 위치에 있으면, 전자 장치(200)는 무선 충전기(150)와 전자기적으로 결합할 수 없어 충전되지 않을 것이다.
디스플레이 장치(100)는 전자 장치(200)의 위치가 충전 가능 위치를 벗어나 있음을 감지할 수 있다. 디스플레이 장치(100)는 전자 장치(200)의 위치를 감지하거나, 전자 장치(200)가 무선 충전기(150)와 전자기적으로 결합되지 않음을 감지할 수 있다. 디스플레이 장치(100)는 전자 장치(200)가 충전되지 않고 않음을 알리기 위한 UI(102)를 화면에 표시할 수 있다. 디스플레이 장치(100)는 UI(102)를 충전 가능 위치에 대응되는 화면상의 위치에 UI(102)를 표시할 수 있다. 사용자는 UI(102)를 통해 전자 장치(200)를 UI(102)가 표시된 지점에 대응되는 상단부(102)의 지점으로 전자 장치(200)를 이동시켜, 전자 장치(200)가 무선 충전되도록 할 수 있다.
전자 장치(200)의 이동 후, 디스플레이 장치(100)가 전자 장치(200)가 충전 가능 위치에 있음을 감지하면, 디스플레이 장치(100)는 도 8의 UI(102)를 더 이상 출력하지 않거나, 도 8의 UI(102)를 전자 장치(200)의 충전 상태를 표시하는 도 7의 UI(102)로 변경하여 출력할 수 있다.
도 9는 일부 실시예에 따른 디스플레이 장치가 전자 장치의 원격 제어 기능을 인식한 경우의 예시이다.
도 9를 참고하면, 디스플레이 장치(100)는 전자 장치(200)의 접촉을 감지하고, 전자 장치(200)와 연관된 기능을 인식할 수 있다. 인식된 기능은 전자 장치(200)가 피제어 기기(400)를 원격으로 제어할 수 있는 제어 기능을 포함할 수 있다.
피제어 기기(400)는 통신 기능이 내장된 일반적인 기기 또는 사물일 수 있다. 피제어 기기(400)는 사물 인터넷(Internet of Things; IoT)이 적용되는 일반적인 기기 또는 사물일 수 있다. 사물 인터넷이란, 각종 사물에 컴퓨터 칩과 통신 기능을 내장하여 인터넷에 연결하는 기술을 의미한다. 예를 들어, 피제어 기기(400)는 냉장고, 세탁기 등의 각종 가전 기기, 스마트 워치 등의 각종 웨어러블 장치, 자동차 등일 수 있다. 이외에도 피제어 기기(400)는 온도 센서, 습도 센서, 음향 센서, 모션 센서, 근접 센서, 가스 감지 센서, 열 감지 센서 등의 각종 센서, 전등, CCTV, 화재 경보기, 댁내 기기 등 다양할 수 있다. 피제어 기기(400)는 통신 기능이 내장된 기기라면 어떠한 종류라도 가능할 것이다.
디스플레이 장치(100)는 인식된 원격 제어 기능을 조작하기 위한 UI(102)를 화면에 표시할 수 있다. 디스플레이 장치(100)는 제어 장치(300)로부터 수신된 사용자 입력에 기초해 원격 제어 기능을 제어할 수 있다. 디스플레이 장치(100)는 제어 장치(300)로부터 수신된 사용자 입력에 기초한 피제어 기기(400)를 제어하는 명령을 전자 장치(200)로 전송할 수 있다. 전자 장치(200)는 피제어 기기(400)를 제어하는 명령을 피제어 기기(400)로 전송하여 피제어 기기(400)를 제어할 수 있다.
예를 들어, 디스플레이 장치(100)가 표시하는 UI(102)는 다양한 방식으로 사용자가 원격 제어 기능을 인식할 수 있게 하거나, 원격 제어 기능을 조작할 수 있게 할 수 있다. 예를 들어, UI(102)는 사용자에게 전자 장치(200)가 원격 제어할 수 있는 피제어 기기(400)의 리스트를 제공하거나, 사용자가 원격 제어할 피제어 기기(400)를 선택할 수 있게 하거나, 사용자가 피제어 기기(400)가 수행하기 원하는 동작을 명령할 수 있게 하거나, 전자 장치(200)의 사용 권한이나 피제어 기기(400)의 제어 권한을 사용자가 인증할 수 있게 하는 등의 다양한 방식으로 표시될 수 있다. 다만 UI(102)는 서술된 예시에 한정되는 것이 아니며, 디스플레이 장치(100)는 사용자와의 상호 작용이 가능하도록 다양한 방식으로 UI(102)를 출력할 수 있다.
예를 들어, 디스플레이 장치(100)는 제어 장치(300)로부터 냉장고의 제어를 명령하는 사용자 입력을 수신할 수 있다. 사용자 입력의 예로는 냉장고 온도 등 냉장고 상태에 대한 정보 요청, 냉장고 문의 개폐, 냉장고 온도 조절, 냉장고 전원의 온-오프 등의 냉장고의 제어를 명령하는 것일 수 있다. 디스플레이 장치(100)는 냉장고의 제어를 명령하는 사용자 입력을 전자 장치(200)로 전송하여, 전자 장치(200)가 사용자 입력에 따라 냉장고를 제어하도록 할 수 있다. 즉, 디스플레이 장치(100) 및 제어 장치(300)는 전자 장치(200)의 원격 제어 기능에 대해 사용자와의 상호 작용을 지원하는 것일 수 있으며, 실제로 피제어 기기(400)와 통신하고 피제어 기기(400)를 제어하는 것은 전자 장치(200)일 수 있다.
다른 예로, 디스플레이 장치(100)는 전자 장치(200)로부터 피제어 기기(400)를 식별하고 통신할 수 있는 정보를 수신할 수 있다. 정보는 예를 들어 피제어 기기(400)의 IP(Internet Protocol) 어드레스를 포함할 수 있다. 또한, 디스플레이 장치(100)는 전자 장치(200)로부터 피제어 기기(400)의 제어 권한을 공유받을 수 있다. 이 경우, 디스플레이 장치(100)는 전자 장치(200)를 통하지 않고 직접 피제어 기기(400)를 제어할 수 있다.
전자 장치(200)는 피제어 기기(400)로부터 알림 정보를 수신할 수 있다. 피제어 기기(400)는 피제어 기기(400)가 미리 설정된 특정 상태가 되면 이를 알리는 알림 정보를 전자 장치(200)에 전송할 수 있다. 예를 들어, 피제어 기기(400)가 냉장고인 경우, 냉장고는 냉장고 문이 일정 시간 이상 열려 있는 경우 그 상태를 알리는 알림 정보를 전자 장치(200)로 전송할 수 있다. 피제어 기기(400)가 세탁기인 경우, 세탁기는 세탁이 완료되었음을 알리는 알림 정보를 전자 장치(200)에 전송할 수 있다. 피제어 기기(400)가 웨어러블 장치인 경우, 웨어러블 장치는 주기적으로 사용자의 신체 정보 등을 알림 정보로 전자 장치(200)로 전송할 수 있다. 다만, 서술한 알림 정보는 예시일 뿐이고, 알림 정보가 이에 제한되는 것은 아니다.
전자 장치(200)가 피제어 기기(400)로부터 알림 정보를 수신하면, 전자 장치(200)는 디스플레이 장치(100)에 알림 정보의 수신을 알릴 수 있다. 디스플레이 장치(100)는 알림 정보를 포함하는 UI(102)를 화면에 표시할 수 있다. 예를 들어, 디스플레이 장치(100)는 알림 정보를 포함하는 UI(102)를 팝업 형태로 화면에 표시할 수 있다.
사용자는 알림 정보를 통해 피제어 기기(400)에 필요한 제어 동작을 판단하여, 제어 장치(300)를 통해 피제어 기기(400)의 제어 명령에 대응하는 사용자 입력을 입력할 수 있다.
디스플레이 장치(100)는 제어 장치(300)로부터 수신된 사용자 입력에 기초한 피제어 기기(400)를 제어하는 명령을 전자 장치(200)로 전송할 수 있다. 전자 장치(200)는 피제어 기기(400)를 제어하는 명령을 피제어 기기(400)로 전송하여 피제어 기기(400)를 제어할 수 있다. 또는, 디스플레이 장치(100)가 전자 장치(200)로부터 피제어 기기(400)의 제어 권한을 공유받은 경우, 디스플레이 장치(100)는 전자 장치(200)를 통하지 않고 피제어 기기(400)로 제어 명령을 바로 전송할 수도 있다.
도 10은 일부 실시예에 따른 디스플레이 장치 및 스마트 키를 설명하기 위한 도면이다.
도 10을 참고하면, 디스플레이 장치(100)의 상단부(101)에 스마트 키(202-2)가 놓여져 있다. 스마트 키(200-2)는 차량(400-1)과의 물리적인 접촉 또는 결합 없이, 차량(400-1)을 제어할 수 있는 장치를 의미한다. 일반적인 차키의 경우, 사용자는 차키를 차량(400-1)에 구비된 키 홀(key hole)에 삽입함으로써 차량(400-1)을 제어할 수 있다. 스마트 키(200-2)는 무선 통신 방식을 통하여 차량(400-1)를 제어할 수 있다. 예를 들어, 사용자가 스마트 키(200-2)를 소지하고 차량(400-1)에 승차하면, 스마트 키(200-2)를 키 홀에 삽입하지 않고서도 시동을 걸거나 끌 수 있다. 사용자가 스마트 키(200-2)를 소지하고 차량(400-1)에 접근하면, 피제어 기기(400)의 출입문의 잠금이 해제될 수 있다.
차량(400-1)은 통신 기능이 내장되어 있어, 차량(400-1)은 스마트 키(200-2)와 통신할 수 있다. 또한, 차량(400-1)은 인터넷에 연결될 수도 있다. 차량(400-1)은 전기차, 스마트카일 수 있다.
디스플레이 장치(100)는 스마트 키(200-2)의 접촉을 감지할 수 있다. 디스플레이 장치(100)는 디스플레이 장치(100)와 접촉한 전자 장치가 차량(400-1)을 제어할 수 있는 스마트 키(200-2)임을 인식할 수 있다. 디스플레이 장치(100)는 스마트 키(200-2)와 연관된 기능인 차량(400-1)의 원격 제어 기능을 인식할 수 있다.
디스플레이 장치(100)는 차량(400-1)의 원격 제어 기능에 대한 UI(102)를 화면에 표시할 수 있다. 디스플레이 장치(100)는 제어 장치(300)로부터 차량(400-1)을 제어하는 사용자 입력을 수신할 수 있다. 사용자 입력의 예로는 차량(400-1) 충전, 차량(400-1) 문의 개폐, 차량(400-1)의 보안 감시 등의 차량(400-1)을 제어하는 명령일 수 있다. 디스플레이 장치(100)는 차량(400-1)의 제어를 명령하는 사용자 입력을 스마트 키(200-2)로 전송하여, 스마트 키(200-2)가 사용자 입력에 따라 차량(400-1)을 제어하도록 할 수 있다. 또는, 디스플레이 장치(100)는 스마트 키(200-2)를 통하지 않고 직접 차량(400-1)을 제어할 수도 있다.
디스플레이 장치(100)와 차량(400-1), 또는 스마트키(200-2)와 차량(400-1)은 서버를 통해 서로 통신할 수 있다. 서버는 차량(400-1)의 상태를 모니터링하고, 차량(400-1)을 관리하도록 구성될 수 있다.
차량(400-1)을 제어하는 명령에는 사용자 입력에 따른 정보를 차량(400-1)에 전송하는 것 등을 더 포함할 수 있다. 예를 들어, 사용자 입력에 따라 차량(400-1)의 운행 목적지가 차량(400-1)에 전송될 수 있다. 차량(400-1)은 차량(400-1)에 구비된 내비게이션에 운행 목적지를 전달하고, 내비게이션은 최적 경로를 탐색할 수 있다. 내비게이션이 탐색한 최적 경로는 디스플레이 장치(100)로 전달될 수 있다. 디스플레이 장치(100)의 UI(102)는 차량(400-1)의 내비게이션이 탐색한 최적 경로를 출력할 수 있다.
디스플레이 장치(100)가 A/V 콘텐트를 출력 중인 경우, 디스플레이 장치(100)는 A/V 콘텐트와 연관된 위치 정보를 획득할 수 있다. 예를 들어, A/V 콘텐트는 맛집 소개 방송 프로그램일 수 있고, 디스플레이 장치(100)는 A/V 콘텐트 제공자로부터 A/V 콘텐트와 연관된 맛집의 위치 정보를 획득할 수 있다. 디스플레이 장치(100)는 사용자 입력에 기초해 획득된 위치 정보를 차량(400-1)에 전송할 수 있다. 차량(400-1)은 차량(400-1)에 구비된 내비게이션에 위치 정보를 전달할 수 있다.
UI(102)는 차량(400-1)에 대한 정보를 포함할 수 있다. 예를 들어, 차량(400-1)에 대한 정보는 차량(400-1)의 식별자, 종류, 연식, 주행 정보, 충전 상태, 연료 상태, 타이어 등의 부품 교환 주기, 타이어 공기압, 차량(400-1) 상태 정보 등을 포함할 수 있다. 사용자는 UI(102) 및 제어 장치(300)를 통해 사용자가 원하는 차량(400-1)에 대한 정보를 선택할 수 있다. 즉, 디스플레이 장치(100)는 UI(102)를 통해 제어 장치(300)로부터 차량(400-1)에 대한 정보를 선택하는 사용자 입력을 수신할 수 있다. 디스플레이 장치(100)는 사용자 입력에 기초해 해당하는 차량(400-1)에 대한 정보를 UI(102)를 통해 출력할 수 있다.
차량(400-1)에 대한 정보는 스마트 키(200-2)에 저장되어 있거나, 차량(400-1)에 저장되어 있거나, 스마트 키(200-2) 및 차량(400-1)과 연결되는 서버에 저장되어 있을 수 있다. 차량(400-1)에 대한 정보는 차량(400-1)에 구비된 블랙박스나 내비게이션 등과 같이 차량(400-1)이 구비한 기기에 저장되어 있는 정보일 수도 있다. 예를 들어, 차량(400-1)에 대한 정보는 블랙박스에 저장되어 있는 영상, 내비게이션에 저장되어 있는 경로 등일 수 있다. 디스플레이 장치(100)는 제어 장치(300)로부터 수신된 사용자 입력에 기초해 차량(400-1)에 대한 종보를 스마트 키(200-2), 차량(400-1) 또는 서버 등에 요청할 수 있다.
스마트 키(200-2)는 차량(400-1)으로부터 알림 정보를 수신할 수 있다. 차량(400-1)은 차량(400-1)이 미리 설정된 특정 상태가 되면 이를 알리는 알림 정보를 스마트 키(200-2)에 전송할 수 있다. 스마트 키(200-2)가 차량(400-1)으로부터 알림 정보를 수신하면, 스마트 키(200-2)는 디스플레이 장치(100)에 알림 정보의 수신을 알릴 수 있다. 디스플레이 장치(100)는 알림 정보를 포함하는 UI(102)를 화면에 표시할 수 있다. 이를 통해, 스마트 키(200-2)가 사용자와 인접하게 위치하지 않더라도 사용자는 알림 정보를 디스플레이 장치(100)를 통해 용이하게 확인할 수 있다. 특히, 알림 정보가 안전과 관련된 중요한 정보인 경우, 디스플레이 장치(100)를 통한 알림 정보 확인의 효용성이 클 것이다.
도 10은 스마트 키(200-2)에 대해 설명하였으나, 도 10에서 설명한 내용은 스마트 키(200-2) 외에도 차량(400-1)을 제어할 수 있는 전자 장치에 동일하게 적용 가능할 것이다.
도 11은 일부 실시예에 따른 디스플레이 장치가 터치 패드를 포함하는 경우를 나타낸다.
도 11을 참고하면, 디스플레이 장치(100)는 전자 장치(200)의 접촉을 감지하고, 전자 장치(200)와 연관된 기능을 인식할 수 있다. 디스플레이 장치(100)는 인식된 기능들을 선택할 수 있는 UI(102)를 화면에 표시할 수 있다.
UI(102)는 인식된 기능들에 대응하는 아이콘들을 포함하고, 아이콘들 중 선택된 아이콘을 나타내는 지시선(109)을 포함할 수 있다. 예를 들어, 도 11에서 UI(102)에 포함되는 3개의 아이콘들은 왼쪽부터 순서대로 무선 충전 기능, 데이터 다운로드 기능, 통화 또는 메시지 링크 기능에 대응한다고 가정한다. 도 11에서 지시선(109)은 통화 또는 메시지 링크 기능에 대응하는 아이콘과 연결되어, 전자 장치(200)와 연관된 기능들 중 통화 또는 메시지 링크 기능이 선택되었음을 나타낸다.
디스플레이 장치(100)는 사용자의 터치 입력을 감지하는 터치 패드를 포함할 수 있다. 터치 패드는 디스플레이 장치(100)의 상단부에 배치될 수 있다. 예를 들어, 터치 패드는 상단면(101) 또는 상단면(101)의 일부에 구현될 수 있다. 사용자가 디스플레이 장치(100)의 상단면(101)을 터치하면, 터치 패드는 사용자의 터치 입력을 감지할 수 있다.
사용자는 디스플레이 장치(100)의 상단면(101)의 특정 위치를 터치하거나, 드래그 하는 등의 방식으로 상단면(101)을 터치할 수 있다. 디스플레이 장치(100)의 터치 패드는 사용자의 터치 입력을 감지하고, 터치 입력에 기초해 UI(102)에 포함된 지시선(109)의 위치를 조정해 복수의 아이콘들 중 선택된 아이콘을 나타낼 수 있다.
도 11은 사용자의 터치 입력으로 디스플레이 장치(100)의 화면에 표시된 UI(102)를 조작하는 예시이다. 도 11은 디스플레이 장치(100)의 UI(102)를 제한하거나, 사용자의 터치 입력 방식을 제한하는 것은 아니다.
도 12는 일부 실시예에 따른 디스플레이 장치가 터치 패드 및 발광 소자를 포함하는 경우를 나타낸다.
도 12를 참고하면, 디스플레이 장치(100)는 복수의 발광 소자들(170)을 포함할 수 있다. 발광 소자들(170)은 터치 패드와 인접하게 배치될 수 있다. 예를 들어, 복수의 발광 소자들(170)은 상단면(101) 또는 상단면(101)의 일부에 구현된 터치 패드 바로 아래에 배치될 수 있다.
디스플레이 장치(100)가 표시하는 UI(102)는 사용자가 선택 가능한 복수의 아이콘들(IC1, IC2, IC3)을 포함할 수 있다. 디스플레이 장치(100)는 복수의 발광 소자들(170) 중 상기 복수의 아이콘들(IC1, IC2, IC3)이 표시된 위치와 대응하는 위치에 있는 발광 소자들(170-1, 170-2, 170-3)을 선택할 수 있다. 즉 화면 상에서 복수의 아이콘들(IC1, IC2, IC3)이 표시된 위치는 상단면(101)에서 선택된 발광 소자들(170-1, 170-2, 170-3)의 위치와 대응할 수 있다.
디스플레이 장치(100)는 선택된 발광 소자들(170-1, 170-2, 170-3)을 발광시킬 수 있다. 사용자는 발광 소자들(170-1, 170-2, 170-3) 중에서 복수의 아이콘들(IC1, IC2, IC3) 중 선택하고 싶은 아이콘에 대응하는 위치에 있는 발광 소자들을 터치할 수 있다. 예를 들어, 사용자는 아이콘(IC1)을 선택하고 싶은 경우, 발광 소자들(170-1)을 터치할 수 있다. 터치 패드가 발광 소자들(170-1) 부분에서 사용자의 터치 입력을 감지하면, 디스플레이 장치(100)는 아이콘(IC1)을 선택하고, 선택된 아이콘(IC1)에 대응하는 동작을 할 수 있다.
도 12와 같이 디스플레이 장치(100)는 발광 소자들(170)을 선택적으로 발광시킴으로써, 사용자에게 상단면(101)의 어느 부분을 터치할지에 대한 가이드를 제공할 수 있다.
디스플레이 장치(100)의 화면에서 UI(102)가 표시되는 위치는 전자 장치의 오리엔테이션(orientation)에 관계될 수 있다. 전자 장치(200)의 오리엔테이션은 전자 장치(200)의 위치, 방향 및 회전 중 적어도 하나를 의미할 수 있다.
디스플레이 장치(100)는 전자 장치(200)의 오리엔테이션 정보를 획득할 수 있다. 디스플레이 장치(100)는 전자 장치(200)의 오리엔테이션 정보에 기초해, 디스플레이 장치(100)의 화면에서 UI(102)가 표시되는 위치를 결정할 수 있다. 디스플레이 장치(100)는 위치 센서, 자이로스코프 센서 등과 같이 전자 장치(200)의 오리엔테이션 정보를 획득할 수 있는 센서를 포함할 수 있다. 또는, 디스플레이 장치(100)는 전자 장치(200)로부터 디스플레이 장치(100)의 오리엔테이션 정보를 수신할 수 있다. 전자 장치(200)는 전자 장치(200)에 포함된 위치 센서, 자이로스코프 센서 등의 센서를 통해 전자 장치(200) 자신의 오리엔테이션 정보를 획득하여 디스플레이 장치(100)에 전송할 수 있다.
도 13은 일부 실시예에 따른 디스플레이 장치가 전자 장치의 위치에 따라 화면에서 UI가 표시되는 위치를 결정하는 것을 나타낸다.
도 13을 참고하면, 디스플레이 장치(100)는 전자 장치(200)의 오리엔테이션 정보를 획득하여, 전자 장치(200)가 상단면(101)의 중심 근처에 위치하는 것으로 추정할 수 있다. 디스플레이 장치(100)는 전자 장치(200)와 연관된 기능에 대한 UI(102)를 화면의 상부에서 중심 근처에 출력할 수 있다.
전자 장치(200)의 위치가 상단면(101)의 우측으로 변경되면, 디스플레이 장치(100)는 UI(102)가 표시되는 위치를 화면의 상부의 중심 근처에서 우측으로 변경할 수 있다.
디스플레이 장치(100)는 UI(102)가 화면에 표시되는 위치를 전자 장치(200)의 위치와 시각적으로 연관되게 결정할 수 있다. 도 13과 같이, UI(102)는 화면에서 전자 장치(200) 아래에 해당하는 부분에 출력될 수 있다.
또는, 디스플레이 장치(100)가 인식하는 전자 장치(200)와 연관된 기능은 전자 장치(200)의 오리엔테이션에 관계될 수 있다.
디스플레이 장치(100)는 전자 장치(200)의 오리엔테이션 정보를 획득할 수 있다. 디스플레이 장치(100)는 전자 장치(200)의 오리엔테이션 정보에 기초해, 디스플레이 장치(100)는 전자 장치(200)와 연관된 것으로 인식된 기능을 선택할 수 있다. 디스플레이 장치(100)가 전자 장치(200)와 연관된 복수의 기능들을 인식한 경우, 디스플레이 장치(100)는 전자 장치(200)의 오리엔테이션 정보에 기초해 복수의 기능들 중 기능을 선택할 수 있다.
도 14는 일부 실시예에 따른 디스플레이 장치가 전자 장치의 오리엔테이션에 따라 전자 장치와 연관된 기능들 중 하나의 기능을 선택하는 것을 나타낸다.
도 14를 참고하면, 디스플레이 장치(100)는 전자 장치(200)와 연관된 인식된 기능에 대한 UI(102)를 출력할 수 있다. UI(102)는 인식된 기능들에 대응하는 아이콘들을 포함하고, 아이콘들 중 선택된 아이콘을 나타내는 지시선(109)을 포함할 수 있다. 예를 들어, 도 14에서 UI(102)에 포함되는 3개의 아이콘들은 왼쪽부터 순서대로 무선 충전 기능, 데이터 다운로드 기능, 통화 또는 메시지 링크 기능에 대응한다고 가정한다.
디스플레이 장치(100)는 전자 장치(200)의 오리엔테이션 정보로부터 전자 장치(200)가 뒤집어져 있음을 추정할 수 있다. 즉, 전자 장치(200)의 화면이 디스플레이 장치(100)의 상단면(101)과 마주보는 것으로 추정할 수 있다. 디스플레이 장치(100)는 데이터 다운로드 기능을 선택하고, 지시선(109)을 데이터 다운로드 기능을 나타내는 아이콘과 연결하여, 데이터 다운로드 기능이 선택되었음을 나타낼 수 있다.
디스플레이 장치(100)는 전자 장치(200)의 오리엔테이션 정보로부터 전자 장치(200)의 화면이 위를 향하고 있음을 추정할 수 있다. 디스플레이 장치(100)는 무선 충전 기능을 선택하고, 지시선(109)을 무선 충전 기능을 나타내는 아이콘과 연결하여, 무선 충전 기능이 선택되었음을 나타낼 수 있다.
다만 도 14는 디스플레이 장치(100)가 전자 장치(200)의 오리엔테이션 정보에 따라 전자 장치(200)와 연관된 기능들 중 하나의 기능을 선택하는 것의 예시일 뿐이고, 오리엔테이션 정보에 따라 선택되는 연관된 기능 사이의 관계는 다양한 방식으로 설정될 수 있다.
도 15는 일부 실시예에 따른 디스플레이 장치가 전자 장치의 위치 변화 정도에 따라 UI에 포함되는 아이콘을 선택하는 것을 나타낸다.
도 15를 참고하면, 디스플레이 장치(100)가 표시하는 UI(102)는 복수의 아이콘들 및 아이콘들 중 선택된 아이콘을 나타내는 지시선(109)을 포함할 수 있다. 지시선(109)이 데이터 다운로드 기능을 나타내는 아이콘과 연결되어 있는 상태에서, 디스플레이 장치(100)는 전자 장치(200)가 "B-A"만큼 우측으로 이동한 것으로 전자 장치(200)의 위치 변화 정도를 획득할 수 있다. 디스플레이 장치(100)는 지시선(109)이 데이터 다운로드 기능을 나타내는 아이콘의 우측에 있는 링크 기능을 나타내는 아이콘과 연결되게 할 수 있다.
만일 디스플레이 장치(100)가 전자 장치(200)가 우측이 아니라 좌측으로 이동한 것으로 위치 변화 정도를 획득한다면, 디스플레이 장치(100)는 지시선(109)이 데이터 다운로드 기능을 나타내는 아이콘의 좌측에 있는 무선 충전 기능을 나타내는 아이콘과 연결되게 할 수 있다.
도 16은 일부 실시예에 따른 디스플레이 장치가 화면에 UI를 표시하는 예시이다.
도 16을 참고하면, 디스플레이 장치(100)는 전자 장치(200)에 대한 UI(102)를 숨김 형태 또는 보임 형태로 화면에 표시할 수 있다. 예를 들어, 숨김 형태는 점, 버튼과 같은 형태로 화면에 표시될 수 있다. UI(102)의 숨김 형태는 사용자가 UI(102)를 인식할 수 있는 최소한의 크기로 화면에 표시될 수 있다. 디스플레이 장치(100)는 전자 장치(200)로부터 알림이 없거나, 일정 시간 UI(102)에 대한 사용자 입력을 수신하지 않은 경우 등과 같이 어떤 조건을 만족하면 UI(102)를 숨김 형태로 표시할 수 있다. 디스플레이 장치(100)는 UI(102)를 숨김 형태로 표시함으로써, 디스플레이 장치(100)가 출력하는 비디오 콘텐트가 UI(102)에 가려지는 것을 최소화할 수 있다. 이를 통해 UI(102)로 인해 비디오 시청이 방해 받는 것을 최소화할 수 있다.
디스플레이 장치(100)는 UI(102)를 보임 형태로 전환하기 위한 사용자 입력을 수신하면 숨김 형태의 UI(102)를 보임 형태의 UI(102)로 화면에 표시할 수 있다. 예를 들어, 제어 장치(300)의 이동으로 제어 장치(300)의 포인터가 숨김 형태의 UI(102)를 가리키면 숨김 형태의 UI(102)는 보임 형태로 전환될 수 있다. 보임 형태로 전환된 UI(102)가 선택 가능한 복수의 아이콘들을 포함하는 경우, 사용자는 제어 장치(300)의 포인터의 위치를 조정하여 원하는 아이콘을 선택할 수 있다.
도 16은 UI(102)가 숨김 형태에서 보임 형태로 전환되는 경우의 예시일 뿐이며, UI(102)를 보임 형태로 전환하기 위한 사용자 입력을 제한하는 것은 아니다. 제어 장치(300)의 방향 키를 통한 포인터 이동 또는 제어 장치(300)의 특정 버튼의 선택 등이 보임 형태로 전환하기 위한 사용자 입력일 수 있다.
또는, 디스플레이 장치(100)가 전자 장치(200)로부터 알림을 수신하면, 디스플레이 장치(100)는 UI(102)를 숨김 형태에서 보임 형태로 전환할 수 있다. 예를 들어, 전자 장치(200)로부터 알림은 통화 요청 알림, 메시지 수신 알림, 전자 장치(200)의 피제어 기기에 대한 알림 등을 포함할 수 있다.
도 17은 일부 실시예에 따른 디스플레이 장치가 화면에 UI를 표시하는 예시이다.
도 17을 참고하면, 디스플레이 장치(100)는 복수의 전자 장치들(200-1, 200-2, 200-3)의 접촉을 인식할 수 있다. 디스플레이 장치(100)는 복수의 전자 장치들(200-1, 200-2, 200-3)마다 연관된 기능에 대한 UI들(102)을 표시할 수 있다. 디스플레이 장치(100)는 UI들(102)을 숨김 형태로 표시하고, UI들(102) 중 보임 형태로 전환하기 위한 사용자 입력을 수신한 UI를 보임 형태로 전환할 수 있다. 디스플레이 장치(100)는 포인터가 UI들(102) 중 가장 왼쪽에 있는 숨김 형태의 UI를 가리킴을 인식하면, UI를 보임 형태로 전환할 수 있다.
디스플레이 장치(100)는 각 UI들(102)이 화면에 표시되는 위치를 전자 장치들(200-1, 200-2, 200-3)의 위치와 시각적으로 연관되게 결정할 수 있다. 예를 들어, 각 전자 장치(200-1, 200-2, 200-3)의 UI들(102)은 화면에서 전자 장치(200) 아래에 해당하는 부분에 출력될 수 있다. 사용자는 전자 장치(200-1)의 UI를 보임 형태로 전환하고 싶은 경우, 화면에서 전자 장치(200-1)의 아래에 있는 UI가 전자 장치(200-1)의 UI임을 직관적으로 알 수 있다.
도 18은 일부 실시예에 따른 디스플레이 장치가 화면에 UI를 표시하는 예시이다.
도 18을 참고하면, 디스플레이 장치(100)는 전자 장치(200)에 대한 UI(102)를 화면에 표시하지 않거나, 숨김 형태 또는 보임 형태로 화면에 표시할 수 있다.
디스플레이 장치(100)는 화면에 UI(102)를 위한 표시 영역(103)을 설정할 수 있다. 디스플레이 장치(100)는 UI(102)를 화면에 표시하지 않다가, 제어 장치(300)의 포인터가 표시 영역(103)에 진입함을 인식하면, UI(102)를 숨김 형태로 표시할 수 있다.
디스플레이 장치(100)는 장치(300)의 포인터가 숨김 형태의 UI(102)를 가리키면 숨김 형태의 UI(102)를 보임 형태로 전환될 수 있다.
도 19는 일부 실시예에 따른 디스플레이 장치의 블록도이다.
도 19를 참고하면, 디스플레이 장치(100)는 디스플레이부(110), 통신부(120) 및 제어부(130)를 포함할 수 있다.
디스플레이부(110)는 디스플레이 장치(100)에서 처리되는 데이터를 출력할 수 있다.
통신부(120)는 다양한 유형의 통신 방식에 따라 다양한 유형의 외부 기기와 통신 가능하게 하는 수단이다. 통신부(110)는 다양한 유형의 통신 방식으로 통신을 수행하기 위한 통신 모듈을 포함할 수 있다. 통신부(120)는 전자 장치의 접촉을 감지하고, 전자 장치와 통신할 수 있다.
제어부(130)는 디스플레이 장치(100)의 전반적인 동작을 제어할 수 있다. 특히, 전술한 디스플레이 디스플레이 장치(100)의 동작은 제어부(130)에서 수행될 수 있다. 도 19 이전에 설명한 디스플레이 장치(100)의 동작과 관련한 설명은 중복하여 설명하지 않더라도 도 19의 디스플레이 장치(100), 특히 제어부(130)에서 수행될 수 있다. 예를 들어, 제어부(130)는, CPU(central processing unit), 마이크로 프로세서, GPU(graphic processing unit) 등을 포함할 수 있으나, 이에 한정되는 것은 아니다.
제어부(130)는 디스플레이 장치(100)와의 접촉을 감지하고, 통신하는 전자 장치와 연관된 기능을 인식할 수 있다. 제어부(130)는 인식된 기능을 조작하기 위한 UI를 디스플레이부(110)에 표시할 수 있다. 제어부(130)는 UI에 대해 기능을 조작하기 위한 사용자 입력을 제어 장치로부터 수신할 수 있다.
제어부(130)가 인식한 기능은 전자 장치의 통화 기능을 포함할 수 있다. 제어부(130)는 전자 장치로부터 수신된 제1 음성 신호를 음향 출력부에 출력할 수 있다. 제어부(130)가 제어 장치로부터 수신하는 사용자 입력은 제2 음성 신호를 포함하고, 제어부(130)는 제2 음성 신호를 전자 장치로 전송할 수 있다.
제어부(130)가 인식한 기능은 전자 장치의 메신저 기능을 포함할 수 있다. 디스플레이부(110)에 표시된 UI는 전자 장치로부터 수신된 제1 메시지를 포함하고, 제어부(130)가 제어 장치로부터 수신하는 사용자 입력은 제2 메시지 및 제2 메시지에 대응하는 음성 신호 중 적어도 하나를 포함할 수 있다. 제어부(130)는 제2 메시지를 디스플레이부(110)에 표시할 수 있다.
제어부(130)가 인식한 기능은 전자 장치가 피제어 기기를 원격으로 제어할 수 있는 제어 기능을 포함할 수 있다. 제어부(130)는 제어 장치로부터 수신된 사용자 입력에 기초한 피제어 기기를 제어하는 명령을 전자 장치로 전송할 수 있다.
제어부(130)는 전자 장치가 차량을 제어할 수 있는 스마트 키임을 인식하고, 디스플레이부(110)에 표시되는 UI는 차량에 대한 정보를 포함할 수 있다. 제어부(130)는 제어 장치로부터 수신된 사용자 입력에 기초한 제어 명령을 차량으로 전송할 수 있다.
제어부(130)는 전자 장치에 보안이 설정된 경우, 전자 장치의 사용 권한의 인증을 요청하는 UI를 디스플레이부(110)에 더 표시할 수 있다.
제어부(130)는 중복하여 설명하지 않더라도 도 19 이전에 설명한 디스플레이 장치가 수행하는 동작을 수행할 수 있다.
도 20은 일부 실시예에 따른 디스플레이 장치의 다른 블록도이다. 도 20의 디스플레이 장치(1000)는 도 19의 디스플레이 장치(100)의 다른 예일 수 있다.
도 20을 참고하면, 디스플레이 장치(100)는 디스플레이부(110), 통신부(120), 제어부(130)를 포함하고, 음향 출력부(140), 무선 충전기(150) 및 터치 패드(160)를 더 포함할 수 있다.
통신부(120)는 NFC 모듈(121)을 포함할 수 있다. NFC 모듈(121)은 전자 장치의 접촉을 감지할 수 있다. NFC 모듈(121)은 디스플레이 장치(100)의 상단부에 배치될 수 있다.
디스플레이 장치(100)는 무선 충전기(150)를 통해 접촉된 전자 장치로 전력을 제공할 수 있다. 무선 충전기(150)는 NFC 모듈(121)에 인접하게 배치될 수 있다. 무선 충전기(150) 및 NFC 모듈(121)은 모두 디스플레이 장치(100)의 상단부에 배치될 수 있다.
터치 패드(160)는 디스플레이 장치(100)의 화면과 함께 구현되거나, 화면이 아닌 디스플레이 장치(100)의 상단부에 배치될 수도 있다. 터치 패드(160)는 디스플레이부(110)에 표시된 UI에 대한 터치 입력을 감지할 수 있다. 제어부(130)는 제어 장치로부터 수신한 사용자 입력 및 터치 입력에 기초하여 전자 장치와 연관된 기능을 조작할 수 있다.
디스플레이 장치(100)는 터치 패드(160)와 인접하게 배치되는 복수의 발광 소자(170)를 더 포함할 수 있다. 디스플레이부(110)에 표시되는 UI가 사용자가 선택 가능한 복수의 아이콘들을 포함하는 경우, 제어부(130)는 복수의 발광 소자(170) 중 복수의 아이콘들이 표시된 위치와 대응하는 위치에 있는 발광 소자(170)를 선택하고, 선택된 발광 소자(170)를 발광시킬 수 있다.
도 21은 일부 실시예에 따른 디스플레이 장치의 측면도이다.
도 21을 참고하면, 디스플레이 장치(100)는 디스플레이부(110), 상단부(104), 및 제어부(130)를 포함할 수 있다. 디스플레이 장치(100)는 상단부(104)와 제어부(130)를 연결하는 케이블(190)을 더 포함할 수 있다. 상단부(104)는 도 20에서 설명한 NFC 모듈(121), 무선 충전기(150), 터치 패드(160) 및 발광 소자(170) 등을 포함할 수 있다.
상단부(104)는 디스플레이 장치(100)의 상단면(101) 아래 위치할 수 있다. 상단부(104)는 디스플레이부(110)와 수직을 이룬다. 상단부(104)는 디스플레이부(110)에 대해 돌출될 수 있고, 돌출 방향과 돌출 정도는 다양할 수 있다.
제어부(130)는 보드 위에 구현될 수 있다. 보드 위에 디스플레이 장치(100)의 다른 구성 요소가 구현될 수도 있다. NFC 모듈(121)을 제외한 통신부(120)는 보드 위에 구현될 수 있다.
도 22는 일부 실시예에 따른 디스플레이 장치의 또 다른 블록도이다. 도 22의 디스플레이 장치(1000)는 도 19 및 도 20의 디스플레이 장치(100)의 다른 예일 수 있다. 그러나, 도 22에 도시된 구성 요소 모두가 디스플레이 장치(1000)의 필수 구성 요소인 것은 아니다. 도 22에 도시된 구성 요소보다 많은 구성 요소에 의해 디스플레이 장치(1000)가 구현될 수도 있고, 도 22에 도시된 구성 요소보다 적은 구성 요소에 의해 디스플레이 장치(1000)가 구현될 수도 있다.
도 22를 참고하면, 디스플레이 장치(1000)는 사용자 입력부(1100), 출력부(1200), 제어부(1300), 센싱부(1400), 통신부(1500), A/V 입력부(1600), 및 메모리(1700)를 포함할 수 있다.
사용자 입력부(1100)는, 디스플레이 장치(1000)를 제어하기 위한 데이터를 입력받는 수단을 의미한다. 사용자 입력부(1100)는 디스플레이 장치(1000)를 제어하기 위한 사용자의 입력을 수신할 수 있다. 예를 들어, 사용자 입력부(1100)에는 키 패드(key pad), 돔 스위치 (dome switch), 터치 패드(접촉식 정전 용량 방식, 압력식 저항막 방식, 적외선 감지 방식, 표면 초음파 전도 방식, 적분식 장력 측정 방식, 피에조 효과 방식 등), 조그 휠, 조그 스위치 등이 있을 수 있으나 이에 한정되는 것은 아니다. 또한, 예를 들어, 사용자 입력부(1100)는, 외부의 입력 장치(미도시)로부터 사용자 입력 신호를 수신하는 인터페이스일 수 있다.
출력부(1200)는, 오디오 신호, 비디오 신호 또는 진동 신호를 출력할 수 있으며, 출력부(1200)는 디스플레이부(1210), 음향 출력부(1220), 및 진동 모터(1230)를 포함할 수 있다.
디스플레이부(1210)는 디스플레이 장치(1000)에서 처리되는 데이터를 출렧할 수 있다.
한편, 디스플레이부(1210)와 터치패드가 레이어 구조를 이루어 터치 스크린으로 구성되는 경우, 디스플레이부(1210)는 출력 장치 이외에 입력 장치로도 사용될 수 있다. 디스플레이부(1210)는 액정 디스플레이(liquid crystal display), 박막 트랜지스터 액정 디스플레이(thin film transistor-liquid crystal display), 유기 발광 다이오드(organic light-emitting diode), 플렉시블 디스플레이(flexible display), 3차원 디스플레이(3D display), 전기영동 디스플레이(electrophoretic display) 중에서 적어도 하나를 포함할 수 있다. 그리고 디스플레이 장치(1000)의 구현 형태에 따라 디스플레이 장치(1000)는 디스플레이부(1210)를 2개 이상 포함할 수도 있다. 이때, 2개 이상의 디스플레이부(1210)는 힌지(hinge)를 이용하여 마주보게 배치될 수 있다.
음향 출력부(1220)는 통신부(1500)로부터 수신되거나 메모리(1700)에 저장된 오디오 콘텐트를 출력한다. 또한, 음향 출력부(1220)는 디스플레이 장치(1000)에서 수행되는 기능(예를 들어, 호신호 수신음, 메시지 수신음, 알림음)과 관련된 음향 신호를 출력한다. 이러한 음향 출력부(1220)에는 스피커(speaker), 버저(Buzzer) 등이 포함될 수 있다.
진동 모터(1230)는 진동 신호를 출력할 수 있다. 예를 들어, 진동 모터(1230)는 오디오 콘텐트 또는 비디오 콘텐트(예컨대, 호신호 수신음, 메시지 수신음 등)의 출력에 대응하는 진동 신호를 출력할 수 있다. 또한, 진동 모터(1230)는 터치스크린에 터치가 입력되는 경우 진동 신호를 출력할 수도 있다.
제어부(1300)는, 통상적으로 디스플레이 장치(1000)의 전반적인 동작을 제어한다. 제어부(1300)는 상술한 디스플레이 장치(1000)의 동작을 실행하기 위하여, 디스플레이 장치(1000) 내의 다른 구성 요소들을 제어할 수 있다. 예를 들어, 제어부(1300)는, 메모리(1700)에 저장된 프로그램들을 실행함으로써, 사용자 입력부(1100), 출력부(1200), 센싱부(1400), 통신부(1500), A/V 입력부(1600) 등을 전반적으로 제어할 수 있다.
구체적으로, 제어부(1300)는 디스플레이 장치(1000)와의 접촉을 감지하고, 통신하는 전자 장치와 연관된 기능을 인식할 수 있다. 제어부(1300)는 인식된 기능을 조작하기 위한 UI를 출력부(1200)에 표시할 수 있다. 제어부(1300)는 UI에 대해 기능을 조작하기 위한 사용자 입력을 제어 장치로부터 수신할 수 있다.
제어부(1300)가 인식한 기능은 전자 장치의 통화 기능을 포함할 수 있다. 제어부(1300)는 전자 장치로부터 수신된 제1 음성 신호를 음향 출력부(1220)에 출력할 수 있다. 제어부(1300)가 제어 장치로부터 수신하는 사용자 입력은 제2 음성 신호를 포함하고, 제어부(1300)는 제2 음성 신호를 전자 장치로 전송할 수 있다.
제어부(1300)가 인식한 기능은 전자 장치의 메신저 기능을 포함할 수 있다. 디스플레이부(1210)에 표시된 UI는 전자 장치로부터 수신된 제1 메시지를 포함하고, 제어부(1300)가 제어 장치로부터 수신하는 사용자 입력은 제2 메시지 및 제2 메시지에 대응하는 음성 신호 중 적어도 하나를 포함할 수 있다. 제어부(1300)는 제2 메시지를 디스플레이부(1210)에 표시할 수 있다.
제어부(1300)가 인식한 기능은 전자 장치가 피제어 기기를 원격으로 제어할 수 있는 제어 기능을 포함할 수 있다. 제어부(1300)는 제어 장치로부터 수신된 사용자 입력에 기초한 피제어 기기를 제어하는 명령을 전자 장치로 전송할 수 있다.
제어부(1300)는 전자 장치가 차량을 제어할 수 있는 스마트 키임을 인식하고, 디스플레이부(1210)에 표시되는 UI는 차량에 대한 정보를 포함할 수 있다. 제어부(1300)는 제어 장치로부터 수신된 사용자 입력에 기초한 제어 명령을 차량으로 전송할 수 있다.
제어부(1300)는 전자 장치에 보안이 설정된 경우, 전자 장치의 사용 권한의 인증을 요청하는 UI를 디스플레이부(1210)에 더 표시할 수 있다.
제어부(1300)는 중복하여 설명하지 않더라도 도 22 이전에 설명한 디스플레이 장치가 수행하는 동작을 수행할 수 있다.
센싱부(1400)는, 디스플레이 장치(1000)의 상태 또는 디스플레이 장치(1000) 주변의 상태를 감지하고, 감지된 정보를 제어부(1300)로 전달할 수 있다.
센싱부(1400)는, 지자기 센서(Magnetic sensor)(1410), 가속도 센서(Acceleration sensor)(1420), 온/습도 센서(1430), 적외선 센서(1440), 자이로스코프 센서(1450), 위치 센서(예컨대, GPS)(1460), 기압 센서(1470), 근접 센서(1480), 및 RGB 센서(illuminance sensor)(1490) 중 적어도 하나를 포함할 수 있으나, 이에 한정되는 것은 아니다. 각 센서들의 기능은 그 명칭으로부터 당업자가 직관적으로 추론할 수 있으므로, 구체적인 설명은 생략하기로 한다.
제어부(1300)는 전자 장치의 오리엔테이션 정보를 획득하고, 오리엔테이션 정보에 기초해, 디스플레이부(1210)에서 UI가 표시되는 위치를 결정하거나, 또는 인식된 기능을 선택할 수 있다. 전자 장치의 오리엔테이션 정보는 센싱부(1400)를 통해 획득될 수 있다.
통신부(1500)는, 근거리 통신부(1510), 이동 통신부(1520), 방송 수신부(1530)를 포함할 수 있다.
근거리 통신부(short-range wireless communication unit)(1510)는, 블루투스 통신부, BLE(Bluetooth Low Energy) 통신부, NFC(Near Field Communication) 모듈, RFID(radio frequency identification) 모듈, WLAN(와이파이) 통신부, 지그비(Zigbee) 통신부, 적외선(IrDA, infrared Data Association) 통신부, WFD(Wi-Fi Direct) 통신부, UWB(ultra wideband) 통신부, Ant+ 통신부 등을 포함할 수 있으나, 이에 한정되는 것은 아니다.
NFC 모듈은 전자 장치의 접촉을 감지할 수 있다. NFC 모듈은 디스플레이 장치(1000)의 상단부에 배치될 수 있다.
이동 통신부(1520)는, 이동 통신망 상에서 기지국, 외부의 단말, 서버 중 적어도 하나와 무선 신호를 송수신한다. 여기에서, 무선 신호는, 음성 호 신호, 화상 통화 호 신호 또는 문자/멀티미디어 메시지 송수신에 따른 다양한 형태의 데이터를 포함할 수 있다.
방송 수신부(1530)는, 방송 채널을 통하여 외부로부터 방송 신호 및/또는 방송 관련된 정보를 수신한다. 방송 채널은 위성 채널, 지상파 채널을 포함할 수 있다.
A/V(Audio/Video) 입력부(1600)는 오디오 신호 또는 비디오 신호 입력을 위한 것으로, 이에는 카메라(1610)와 마이크로폰(1620) 등이 포함될 수 있다. 카메라(1610)은 화상 통화모드 또는 촬영 모드에서 이미지 센서를 통해 정지영상 또는 동영상 등을 얻을 수 있다. 이미지 센서를 통해 캡쳐된 이미지는 제어부(1300) 또는 별도의 이미지 처리부(미도시)를 통해 처리될 수 있다.
카메라(1610)에서 처리된 정지 영상 또는 동영상은 메모리(1700)에 저장되거나 통신부(1500)를 통하여 외부로 전송될 수 있다. 카메라(1610)는 사용자를 촬영한 정지 영상 또는 동영상 등의 이미지 데이터를 획득할 수 있다. 제어부(1300)는 카메라(1610)를 통해 획득된 이미지 데이터를 분석해 모션 제스처를 감지할 수 있다.
마이크로폰(1620)은, 외부의 음향 신호를 입력 받아 전기적인 음성 데이터로 처리한다. 예를 들어, 마이크로폰(1620)은 외부 디바이스 또는 화자로부터 음향 신호를 수신할 수 있다. 마이크로폰(1620)는 외부의 음향 신호를 입력 받는 과정에서 발생 되는 잡음(noise)를 제거하기 위한 다양한 잡음 제거 알고리즘을 이용할 수 있다.
메모리(1700)는, 제어부(1300)의 처리 및 제어를 위한 프로그램을 저장할 수 있고, 디스플레이 장치(1000)로 입력되거나 디스플레이 장치(1000)로부터 출력되는 데이터를 저장할 수도 있다.
메모리(1700)는 플래시 메모리 타입(flash memory type), 하드디스크 타입(hard disk type), 멀티미디어 카드 마이크로 타입(multimedia card micro type), 카드 타입의 메모리(예를 들어 SD 또는 XD 메모리 등), 램(RAM, Random Access Memory) SRAM(Static Random Access Memory), 롬(ROM, Read-Only Memory), EEPROM(Electrically Erasable Programmable Read-Only Memory), PROM(Programmable Read-Only Memory), 자기 메모리, 자기 디스크, 광디스크 중 적어도 하나의 타입의 저장매체를 포함할 수 있다.
메모리(1700)에 저장된 프로그램들은 그 기능에 따라 복수 개의 모듈들로 분류할 수 있는데, 예를 들어, UI 모듈(1710), 터치 스크린 모듈(1720), 알림 모듈(1730) 등으로 분류될 수 있다.
UI 모듈(1710)은, 어플리케이션 별로 디스플레이 장치(1000)와 연동되는 특화된 UI, GUI 등을 제공할 수 있다. 터치 스크린 모듈(1720)은 사용자의 터치 스크린 상의 터치 제스처를 감지하고, 터치 제스처에 관한 정보를 제어부(1300)로 전달할 수 있다. 일부 실시예에 따른 터치 스크린 모듈(1720)은 터치 코드를 인식하고 분석할 수 있다. 터치 스크린 모듈(1720)은 컨트롤러를 포함하는 별도의 하드웨어로 구성될 수도 있다.
터치스크린의 터치 또는 근접 터치를 감지하기 위해 터치스크린의 내부 또는 근처에 다양한 센서가 구비될 수 있다. 터치스크린의 터치를 감지하기 위한 센서의 일례로 촉각 센서가 있다. 촉각 센서는 사람이 느끼는 정도로 또는 그 이상으로 특정 물체의 접촉을 감지하는 센서를 말한다. 촉각 센서는 접촉면의 거칠기, 접촉 물체의 단단함, 접촉 지점의 온도 등의 다양한 정보를 감지할 수 있다.
또한, 터치스크린의 터치를 감지하기 위한 센서의 일례로 근접 센서가 있다.
근접 센서는 소정의 검출면에 접근하는 물체, 혹은 근방에 존재하는 물체의 유무를 전자계의 힘 또는 적외선을 이용하여 기계적 접촉이 없이 검출하는 센서를 말한다. 근접 센서의 예로는 투과형 광전 센서, 직접 반사형 광전 센서, 미러 반사형 광전 센서, 고주파 발진형 근접 센서, 정전용량형 근접 센서, 자기형 근접 센서, 적외선 근접 센서 등이 있다. 사용자의 터치 제스처에는 탭, 터치&홀드, 더블 탭, 드래그, 패닝, 플릭, 드래그 앤드 드롭, 스와이프 등이 있을 수 있다.
알림 모듈(1730)은 디스플레이 장치(1000)의 이벤트 발생을 알리기 위한 신호를 발생할 수 있다. 디스플레이 장치(1000)에서 발생되는 이벤트의 예로는 호 신호 수신, 메시지 수신, 키 신호 입력, 일정 알림 등이 있다. 알림 모듈(1730)은 디스플레이부(1210)를 통해 비디오 콘텐트 형태로 알림 신호를 출력할 수도 있고, 음향 출력부(1220)를 통해 오디오 신호 형태로 알림 신호를 출력할 수도 있고, 진동 모터(1230)를 통해 진동 신호 형태로 알림 신호를 출력할 수도 있다.
디스플레이 장치(1000)는 무선 충전기를 더 포함할 수 있다. 디스플레이 장치(1000)는 무선 충전기를 통해 접촉된 전자 장치로 전력을 제공할 수 있다. 무선 충전기는 근거리 통신부(1510)의 NFC 모듈에 인접하게 배치될 수 있다. 무선 충전기 및 NFC 모듈은 모두 디스플레이 장치(1000)의 상단부에 배치될 수 있다.
디스플레이 장치(1000)는 터치 패드를 더 포함할 수 있다. 터치 패드는 디스플레이 장치(1000)의 상단부에 배치될 수 있다. 터치 패드는 디스플레이부(1210)에 표시된 UI에 대한 터치 입력을 감지할 수 있다. 제어부(1300)는 제어 장치로부터 수신한 사용자 입력 및 터치 입력에 기초하여 전자 장치와 연관된 기능을 조작할 수 있다.
디스플레이 장치(1000)는 터치 패드와 인접하게 배치되는 복수의 발광 소자들을 더 포함할 수 있다. 디스플레이부(1210)에 표시되는 UI가 사용자가 선택 가능한 복수의 아이콘들을 포함하는 경우, 제어부(1300)는 복수의 발광 소자들 중 복수의 아이콘들이 표시된 위치와 대응하는 위치에 있는 발광 소자들을 선택하고, 선택된 발광 소자들을 발광시킬 수 있다.
도 23은 일부 실시예에 따른 전자 장치의 블록도이다.
도 23을 참고하면, 전자 장치(200)는 통신부(210) 및 제어부(220)를 포함할 수 있다.
통신부(210)는 다양한 유형의 통신 방식에 따라 다양한 유형의 외부 기기와 통신 가능하게 하는 수단이다. 통신부(210)는 다양한 유형의 통신 방식으로 통신을 수행하기 위한 통신 모듈을 포함할 수 있다. 통신부(210)는 전자 장치(200)와 접촉한 디스플레이 장치와 통신할 수 있다.
제어부(220)는 전자 장치(200)의 전반적인 동작을 제어할 수 있다. 특히, 전술한 전자 장치(200)의 동작은 제어부(220)에서 수행될 수 있다. 제어부(220)는 전자 장치(200)의 기능이 디스플레이 장치와 연동 가능하도록 전자 장치(200)의 동작을 제어할 수 있다.
예를 들어, 제어부(220)는, CPU(central processing unit), 마이크로 프로세서, GPU(graphic processing unit) 등을 포함할 수 있으나, 이에 한정되는 것은 아니다.
도 24는 일부 실시예에 따른 전자 장치의 화면의 예시이다.
도 24를 참고하면, 전자 장치(200)는 디스플레이 장치와의 연동에 대해 설정할 수 있는 UI(201)를 화면에 표시할 수 있다. UI(201)는 디스플레이 장치와 연동 가능한 기능들의 리스트를 포함할 수 있다. 또한, UI(201)는 사용자 입력을 통해 리스트의 연동 가능한 기능들 중 디스플레이 장치와 연동할 기능을 선택할 수 있도록 구현될 수 있다.
UI(201)는 통화 및 메신저 기능, 피제어 기기에 대한 원격 제어 기능, 무선 충전 기능 및 영상 링크 기능 등을 디스플레이 장치와 연동 가능한 기능들로 포함할 수 있다. 통화 및 메신저 기능, 피제어 기기에 대한 원격 제어 기능 및 무선 충전 기능은 이전 도면들에서 설명하였으므로 상세한 설명을 생략한다. 영상 링크 기능은 전자 장치(200)에 저장된 영상, 이미지 등을 디스플레이 장치에서 출력하고, 디스플레이 장치를 통해 제어할 수 있는 기능일 수 있다. 도 24에서는 통화 및 메신저 기능과 원격 제어 기능이 선택된 것으로 도시되었다. 다만 도 24의 UI(201)는 예시일 뿐, 전자 장치(200)는 디스플레이 장치와의 연동에 대해 설정할 수 있는 UI(201)를 다양하게 구현할 수 있을 것이며, UI(201)가 포함하는 디스플레이 장치와 연동 가능한 기능들의 리스트를 제한하는 것이 아니다.
전자 장치(200)는 UI(201)를 통해 전자 장치(200)와 디스플레이 장치와 연동에 대한 보안 여부를 설정할 수 있다. 전자 장치(200)가 연동에 대한 보안을 설정한 경우, 디스플레이 장치
도 24와 같이, 전자 장치(200)가 UI(201)를 통해 보안을 설정하지 않고, 통화 및 메신저 기능과 원격 제어 기능을 선택한 경우, 전자 장치(200)는 디스플레이 장치와 접촉 시 전자 장치(200)는 디스플레이 장치에게 인증을 요청하지 않고 바로 통화 및 메신저 기능과 원격 제어 기능을 디스플레이 장치와 연동할 수 있다.
즉, 디스플레이 장치가 전자 장치(200)의 접촉을 감지하면, 디스플레이 장치는 통화 및 메신저 기능과 원격 제어 기능을 인식할 수 있다. 디스플레이 장치는 통화 및 메신저 기능과 원격 제어 기능을 수행할 수 있고, 기능을 조작하기 위한 UI를 화면에 표시할 수 있다. 아니면, 디스플레이 장치는 전자 장치(200)가 디스플레이 장치와 연동 가능한 모든 기능들(예를 들어, 통화 및 메신저 기능, 피제어 기기에 대한 원격 제어 기능, 무선 충전 기능, 영상 링크 기능)을 인식할 수도 있다. 디스플레이 장치는 인식된 기능들 중 허용된 기능들(통화 및 메신저 기능, 원격 제어 기능)만을 수행할 수 있다. 디스플레이 장치가 제어 장치(도 1의 300) 또는 디스플레이 장치의 터치 패드를 통해 허용되지 않은 기능들(무선 충전 기능, 영상 링크 기능)을 선택하는 사용자 입력을 수신하면, 디스플레이 장치는 화면에 전자 장치(200)의 사용 권한을 인증할 것을 요청하는 UI를 표시할 수 있다.
전자 장치(200)가 UI(201)를 통해 보안을 설정한 경우, 전자 장치(200)는 전자 장치(200)의 사용 권한 또는 전자 장치(200)와 연관된 기능에 대한 제어 권한이 확인된 디스플레이 장치와만 연동할 수 있다. 예를 들어, 전자 장치(200)의 접촉을 감지한 디스플레이 장치는 전자 장치(200)의 사용 권한 또는 전자 장치(200)와 연관된 기능에 대한 제어 권한을 인증하기 위한 UI를 출력할 수 있다. 인증이 확인된 후, 전자 장치(200)는 디스플레이 장치와 연동할 수 있다.
이와 같이, 전자 장치(200)는 디스플레이 장치와의 연동에 대해 미리 설정함으로써, 디스플레이 장치가 전자 장치(200)와 연동하여 동작하는 경우 사용자의 개인 정보 유출, 프라이버시 침해 등의 문제를 해결할 수 있다.
도 25는 일부 실시예에 따라 전자 장치에 보안이 설정되는 경우 전자 장치의 화면의 예시이다
도 25를 참고하면, 전자 장치(200)는 UI(201)를 통한 사용자 입력에 의해 보안이 설정될 수 있다. 보안이 설정되면, 전자 장치(200)는 인접한 디스플레이 장치를 검색할 수 있다. 예를 들어, 전자 장치(200)는 근거리 네트워크를 통해 연결되는 디스플레이 장치를 검색하거나, 디스커버리 과정을 통해 디스플레이 장치를 검색할 수 있다.
전자 장치(200)는 UI(201)에 검색된 하나 이상의 디스플레이 장치(TV#1, TV#2)의 리스트를 출력할 수 있다. 또한, UI(201)는 사용자 입력을 통해 리스트의 하나 이상의 디스플레이 장치(TV#1, TV#2) 중 보안 설정을 제외할 디스플레이 장치를 선택할 수 있도록 구현될 수 있다. 즉, 전자 장치(200)는 검색된 하나 이상의 디스플레이 장치(TV#1, TV#2)의 보안을 선택적으로 설정할 수 있다.
도 25에서와 같이 제1 디스플레이 장치(TV#1)는 보안 설정을 제외하지 않고, 제2 디스플레이 장치(TV#2)는 보안 설정을 제외한 경우를 가정한다. 전자 장치(200)의 접촉을 감지한 제1 디스플레이 장치(TV#1)는 전자 장치(200)의 사용 권한 또는 전자 장치(200)와 연관된 기능에 대한 제어 권한을 인증하기 위한 UI를 출력할 수 있다. 인증이 확인된 후, 전자 장치(200)는 제1 디스플레이 장치(TV#1)와 연동할 수 있다. 전자 장치(200)의 접촉을 감지한 제2 디스플레이 장치(TV#2)는 보안 설정이 제외된 장치이므로, 바로 전자 장치(200)와 연동할 수 있다.
도 26은 일부 실시예에 따른 제어 장치의 블록도이다.
도 26을 참고하면, 제어 장치(300)는 통신부(320), 사용자 입력부(330), 센서부(340), 출력부(350), 마이크로폰(360), 저장부(370) 및 제어부(380)를 포함할 수 있다.
통신부(320)는 전술하여 설명한 실시예들에 따른 디스플레이 장치(100)와 신호를 송수신할 수 있다. 통신부(320)는 RF 통신규격에 따라 디스플레이 장치(100)와 신호를 송수신할 수 있는 RF 모듈(321)을 구비할 수 있다. 또한, 제어 장치(300)는 IR 통신규격에 따라 디스플레이 장치(100)와 신호를 송수신할 수 있는 IR 모듈을 구비할 수 있다.
사용자 입력부(330)는 키패드, 버튼, 터치 패드, 또는 터치 스크린 등으로 구성될 수 있다. 사용자는 사용자 입력부(330)를 조작하여 제어 장치(300)로 디스플레이 장치(100)와 관련된 명령을 입력할 수 있다. 사용자 입력부(330)가 하드 키 버튼을 구비할 경우, 사용자는 하드 키 버튼의 푸쉬 동작을 통하여 제어 장치(300)로 디스플레이 장치(100)와 관련된 명령을 입력할 수 있다. 사용자 입력부(330)가 터치스크린을 구비할 경우 사용자는 터치스크린의 소프트 키를 터치하여 제어 장치(300)로 디스플레이 장치와 관련된 명령을 입력할 수 있다.
또한, 사용자 입력부(330)는 스크롤 키나, 조그 키 등 사용자가 조작할 수 있는 다양한 종류의 입력수단을 구비할 수 있다.
또한, 사용자 입력부(330)는 터치 패드를 포함할 수 있다. 일 실시예에 따른 사용자 입력부(330)는 제어 장치(300)의 터치 패드를 통해 드래그(drag), 터치(touch) 또는 플립(flip)하는 사용자 입력을 수신할 수 있다. 또한, 수신한 사용자 입력의 종류(예를 들면, 드래그 명령이 입력된 방향, 터치 명령이 입력된 시간)에 따라, 디스플레이 장치가 제어될 수 있다.
사용자는 디스플레이 장치에 표시된 전자 장치와 연관된 기능을 조작하기 위한 UI를 보고, 제어 장치(300)로 전자 장치와 연관된 기능을 조작하기 위한 사용자 입력을 입력할 수 있다.
센서부(340)는 자이로 센서(341) 또는 가속도 센서(343)를 구비할 수 있다. 자이로 센서(341)는 제어 장치(300)의 움직임 정보를 센싱할 수 있다. 일예로, 자이로 센서(341)는 제어 장치(300)의 동작에 관한 정보를 x, y, z 축을 기준으로 센싱할 수 있다. 가속도 센서(343)는 제어 장치(300)의 이동속도 등에 관한 정보를 센싱할 수 있다. 한편, 거리 측정 센서를 더 구비할 수 있으며, 이에 의해, 디스플레이 장치와의 거리를 센싱할 수 있다.
출력부(350)는 사용자 입력부(330)의 조작에 대응하거나 디스플레이 장치에서 수신한 신호에 대응하는 영상 또는 음성 신호를 출력할 수 있다. 출력부(350)를 통하여 사용자는 사용자 입력부(330)의 조작 여부 또는 디스플레이 장치(100)의 제어 여부를 인지할 수 있다.
일예로, 출력부(350)는 사용자 입력부(330)가 조작되거나 통신부(320)를 통하여 디스플레이 장치(100)와 신호가 송수신되면 점등되는 LED 모듈(351), 진동을 발생하는 진동 모듈(353), 음향을 출력하는 음향 출력 모듈(355), 또는 영상을 출력하는 디스플레이 모듈(357)을 구비할 수 있다.
마이크로폰(360)은 외부의 음향 신호를 입력 받아 전기적인 음성 데이터로 처리한다. 마이크로폰(360)은 사용자의 음성을 감지하고, 음성 신호를 획득할 수 있다. 제어부(380)는 음성 신호를 사용자 입력으로 획득할 수 있다. 제어부(380)는 음성 신호에 기초해 제어 장치(300)의 동작을 제어하거나, 음성 신호를 디스플레이 장치로 전송할 수 있다.
제어부(380)는 통신부(320)를 통해 디스플레이 장치로부터 수신된 제어 신호에 기초해 마이크로폰(360)을 활성화시킬 수 있다.
저장부(370)는 제어 장치(300)의 제어 또는 동작에 필요한 여러 종류의 프로그램, 애플리케이션 데이터 등이 저장될 수 있다.
제어부(380)는 제어 장치(300)의 제어에 관련된 제반 사항을 제어한다. 제어부(380)는 사용자 입력부(330)의 소정 키 조작에 대응하는 신호 또는 센서부(340)에서 센싱한 제어 장치(300)의 움직임 정보를 통신부(320)를 통하여 디스플레이 장치(100)로 전송할 수 있다.
제어부(380)는 자이로 센서(341) 및 RF 모듈(321)을 제어하여, RF 모듈(321)이 자이로 센서(341)에서 센싱한 제어 장치(300)의 움직임 정보를 디스플레이 장치로 전송하게 할 수 있다.
사용자 입력부(330)를 통해 디스플레이 장치(100)와 관련된 명령이 입력되면, 제어부(380)는 통신부(320)를 제어하여, 통신부(320)가 명령을 디스플레이 장치로 전송하게 할 수 있다.
제어 장치(300)는 전원 공급부를 더 포함할 수 있다. 전원 공급부는 제어 장치(300)로 전원을 공급한다. 전원 공급부(360)는 제어 장치(300)가 소정 시간 동안 움직이지 않은 경우 전원 공급을 중단함으로서 전원 낭비를 줄일 수 있다. 전원 공급부(360)는 제어 장치(300)에 구비된 소정 키가 조작된 경우에 전원 공급을 재개할 수 있다.
도 27은 일부 실시예에 따른 디스플레이 장치의 동작 방법의 흐름도이다.
도 27을 참고하면, 디스플레이 장치는 전자 장치의 접촉을 감지할 수 있다(S110). 디스플레이 장치는 접촉을 감지한 전자 장치와 통신할 수 있다(S120). 디스플레이 장치는 전자 장치와 연관된 기능을 인식할 수 있다(S130). 디스플레이 장치는 인식된 기능을 조작하기 위한 UI를 디스플레이 장치의 화면에 표시할 수 있다(S140). 디스플레이 장치는 표시된 UI에 대해 전자 장치와 연관된 기능을 조작하기 위한 사용자 입력을 제어 장치로부터 수신할 수 있다(S150).
디스플레이 장치가 인식한 전자 장치와 연관된 기능은 전자 장치의 통화 기능을 포함할 수 있다. 디스플레이 장치는 전자 장치로부터 수신된 제1 음성 신호를 출력할 수 있다. 디스플레이 장치가 제어 장치로부터 수신하는 사용자 입력은 제2 음성 신호를 포함할 수 있다. 디스플레이 장치는 제2 음성 신호를 전자 장치로 전송할 수 있다.
디스플레이 장치가 인식한 전자 장치와 연관된 기능은 전자 장치의 메신저 기능을 포함할 수 있다. 디스플레이 장치의 화면에 표시된 UI는 전자 장치로부터 수신된 제1 메시지를 포함할 수 있다. 디스플레이 장치가 제어 장치로부터 수신하는 사용자 입력은 제2 메시지 및 제2 메시지에 대응하는 음성 신호 중 적어도 하나를 포함할 수 있다. 디스플레이 장치는 디스플레이 장치의 화면에 제2 메시지를 표시할 수 있다.
디스플레이 장치가 인식한 전자 장치와 연관된 기능은 전자 장치가 피제어 기기를 원격으로 제어할 수 있는 제어 기능을 포함할 수 있다. 디스플레이 장치는 제어 장치로부터 수신된 사용자 입력에 기초한 피제어 기기를 제어하는 명령을 전자 장치로 전송할 수 있다.
디스플레이 장치는 전자 장치가 차량을 제어할 수 있는 스마트 키임을 인식할 수 있다. 디스플레이 장치의 화면에 표시되는 UI는 차량에 대한 정보를 포함할 수 있다. 디스플레이 장치는 제어 장치로부터 수신된 사용자 입력에 기초한 제어 명령을 차량으로 전송할 수 있다.
디스플레이 장치는 디스플레이 장치의 상단부에 배치된 터치 패드를 통해, 화면에 표시된 UI에 대한 터치 입력을 감지할 수 있다. 디스플레이 장치는 제어 장치로부터 수신된 사용자 입력 및 터치 입력 중 적어도 하나에 기초하여 전자 장치와 연관된 기능을 조작할 수 있다.
디스플레이 장치에 표시된 UI가 사용자가 선택 가능한 복수의 아이콘들을 포함하는 경우, 디스플레이 장치는 터치 패드와 인접하게 배치되는 복수의 발광 소자들 중 복수의 아이콘들이 표시된 위치와 대응하는 위치에 있는 발광 소자들을 선택하고, 선택된 발광 소자들을 발광시킬 수 있다.
디스플레이 장치는 전자 장치의 오리엔테이션 정보를 획득할 수 있다. 디스플레이 장치는 오리엔테이션 정보에 기초해, 디스플레이 장치의 화면에서 UI가 표시되는 위치를 결정하거나, 전자 장치와 연관된 기능을 선택할 수 있다.
디스플레이 장치는 전자 장치에 보안이 설정된 경우, 전자 장치의 사용 권한의 인증을 요청하는 UI를 디스플레이 장치의 화면에 더 표시할 수 있다.
도 27의 디스플레이 장치의 동작 방법은 이전 도면들의 디스플레이 장치(100, 1000)에서 수행될 수 있다. 따라서 중복하여 설명하지 않더라도 도 27 이전에 설명한 디스플레이 장치가 수행하는 동작을 더 수행할 수 있다.
한편, 상술한 일부 실시예들은 컴퓨터에서 실행될 수 있는 프로그램으로 작성가능하고, 컴퓨터로 읽을 수 있는 기록매체를 이용하여 상기 프로그램을 동작시키는 범용 디지털 컴퓨터에서 구현될 수 있다.
상기 컴퓨터로 읽을 수 있는 기록매체는 마그네틱 저장매체(예를 들면, 롬, 플로피 디스크, 하드디스크 등) 및 광학적 판독 매체(예를 들면, 시디롬, 디브이디 등)와 같은 저장매체를 포함한다.
이상과 첨부된 도면을 참조하여 본 발명의 실시예를 설명하였지만, 본 발명이 속하는 기술분야에서 통상의 지식을 가진 자는 본 발명이 그 기술적 사상이나 필수적인 특징을 변경하지 않고서 다른 구체적인 형태로 실시될 수 있다는 것을 이해할 수 있을 것이다. 그러므로 이상에서 기술한 실시예들은 모든 면에서 예시적인 것이며 한정적이 아닌 것으로 이해해야만 한다.

Claims (15)

  1. 디스플레이부;
    전자 장치의 접촉을 감지하고, 상기 전자 장치와 통신하는 통신부; 및
    상기 전자 장치와 연관된 기능을 인식하고,
    인식된 상기 기능을 조작하기 위한 UI(user interface)를 상기 디스플레이부에 표시하고,
    상기 UI에 대해 상기 기능을 조작하기 위한 사용자 입력을 제어 장치로부터 수신하는 제어부를 포함하는 디스플레이 장치.
  2. 제1항에 있어서,
    음향 출력부를 더 포함하고,
    상기 제어부가 인식한 상기 기능은 상기 전자 장치의 통화 기능을 포함하고,
    상기 제어부는 상기 전자 장치로부터 수신된 제1 음성 신호를 상기 음향 출력부에 출력하고,
    상기 제어부가 상기 제어 장치로부터 수신하는 상기 사용자 입력은 제2 음성 신호를 포함하고, 상기 제어부는 상기 제2 음성 신호를 상기 전자 장치로 전송하는, 디스플레이 장치.
  3. 제1항에 있어서,
    상기 제어부가 인식한 상기 기능은 상기 전자 장치의 메신저 기능을 포함하고,
    상기 디스플레이부에 표시된 상기 UI는 상기 전자 장치로부터 수신된 제1 메시지를 포함하고,
    상기 제어부가 상기 제어 장치로부터 수신하는 상기 사용자 입력은 제2 메시지 및 상기 제2 메시지에 대응하는 음성 신호 중 적어도 하나를 포함하고, 상기 제어부는 상기 제2 메시지를 상기 디스플레이부에 표시하는, 디스플레이 장치.
  4. 제1항에 있어서,
    상기 제어부가 인식한 상기 기능은 상기 전자 장치가 피제어 기기를 원격으로 제어할 수 있는 제어 기능을 포함하고,
    상기 제어부는 상기 제어 장치로부터 수신된 상기 사용자 입력에 기초한 상기 피제어 기기를 제어하는 명령을 상기 전자 장치로 전송하는, 디스플레이 장치.
  5. 제1항에 있어서,
    상기 제어부는 상기 전자 장치가 차량을 제어할 수 있는 스마트 키임을 인식하고, 상기 디스플레이부에 표시되는 UI는 상기 차량에 대한 정보를 포함하고, 상기 제어 장치로부터 수신된 상기 사용자 입력에 기초한 제어 명령을 상기 차량으로 전송하는, 디스플레이 장치.
  6. 제1항에 있어서,
    상기 전자 장치로 전력을 제공하는 무선 충전기를 더 포함하고, 상기 통신부는 상기 전자 장치의 접촉을 감지하는 NFC(Near Field Communication) 모듈을 포함하고, 상기 NFC 모듈은 상기 디스플레이 장치의 상단부에 배치되고, 상기 무선 충전기는 상기 상단부에 상기 NFC 모듈에 인접하게 배치되는, 디스플레이 장치.
  7. 제1항에 있어서,
    상기 제어부는 상기 전자 장치의 오리엔테이션 정보를 획득하고,
    상기 오리엔테이션 정보에 기초해, 상기 디스플레이부에서 상기 UI가 표시되는 위치를 결정하거나, 또는 상기 인식된 기능을 선택하는, 디스플레이 장치.
  8. 디스플레이 장치의 동작 방법에 있어서,
    전자 장치의 접촉을 감지하고, 상기 전자 장치와 통신하는 단계;
    상기 전자 장치와 연관된 기능을 인식하고, 인식된 상기 기능을 조작하기 위한 UI(user interface)를 상기 디스플레이 장치의 화면에 표시하는 단계; 및
    상기 UI에 대해 상기 기능을 조작하기 위한 사용자 입력을 제어 장치로부터 수신하는 단계를 포함하는 디스플레이 장치의 동작 방법.
  9. 제8항에 있어서,
    인식된 상기 기능은 상기 전자 장치의 통화 기능을 포함하고, 상기 전자 장치로부터 수신된 제1 음성 신호를 출력하는 단계; 및
    상기 제어 장치로부터 수신하는 상기 사용자 입력은 제2 음성 신호를 포함하고, 상기 제2 음성 신호를 상기 전자 장치로 전송하는 단계를 더 포함하는 디스플레이 장치의 동작 방법.
  10. 제8항에 있어서,
    인식된 상기 기능은 상기 전자 장치의 메신저 기능을 포함하고, 표시된 상기 UI는 상기 전자 장치로부터 수신된 제1 메시지를 포함하고, 상기 제어 장치로부터 수신하는 상기 사용자 입력은 제2 메시지 및 상기 제2 메시지에 대응하는 음성 신호 중 적어도 하나를 포함하고,
    상기 제2 메시지를 표시하는 단계를 더 포함하는 디스플레이 장치의 동작 방법.
  11. 제8항에 있어서,
    인식된 상기 기능은 상기 전자 장치가 피제어 기기를 원격으로 제어할 수 있는 제어 기능을 포함하고,
    상기 제어 장치로부터 수신된 상기 사용자 입력에 기초한 상기 피제어 기기를 제어하는 명령을 상기 전자 장치로 전송하는 단계를 더 포함하는 디스플레이 장치의 동작 방법.
  12. 제8항에 있어서,
    상기 전자 장치가 차량을 제어할 수 있는 스마트 키임을 인식하는 단계; 및
    표시되는 상기 UI는 상기 차량에 대한 정보를 포함하고, 상기 제어 장치로부터 수신된 상기 사용자 입력에 기초한 제어 명령을 상기 차량으로 전송하는 단계를 더 포함하는 디스플레이 장치의 동작 방법.
  13. 제8항에 있어서,
    상기 디스플레이 장치의 상단부에 배치된 터치 패드를 통해, 표시된 상기 UI에 대한 터치 입력을 감지하는 단계; 및
    상기 사용자 입력 및 상기 터치 입력에 기초하여 상기 전자 장치와 연관된 상기 기능을 조작하는 단계를 더 포함하는 디스플레이 장치의 동작 방법.
  14. 제8항에 있어서,
    상기 전자 장치의 오리엔테이션 정보를 획득하는 단계; 및
    상기 오리엔테이션 정보에 기초해, 상기 디스플레이 장치의 화면에서 상기 UI가 표시되는 위치를 결정하거나, 또는 상기 인식된 기능을 선택하는 단계를 더 포함하는 디스플레이 장치의 동작 방법.
  15. 제8항의 방법을 구현하기 위한 프로그램이 기록된 컴퓨터로 판독 가능한 기록 매체.
PCT/KR2016/011819 2016-02-17 2016-10-20 디스플레이 장치 및 그 동작 방법 WO2017142163A1 (ko)

Priority Applications (1)

Application Number Priority Date Filing Date Title
US15/998,940 US20210211760A1 (en) 2016-02-17 2016-10-20 Display device and operation method therefor

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
KR1020160018552A KR20170096821A (ko) 2016-02-17 2016-02-17 디스플레이 장치 및 그 동작 방법
KR10-2016-0018552 2016-02-17

Publications (1)

Publication Number Publication Date
WO2017142163A1 true WO2017142163A1 (ko) 2017-08-24

Family

ID=59625229

Family Applications (1)

Application Number Title Priority Date Filing Date
PCT/KR2016/011819 WO2017142163A1 (ko) 2016-02-17 2016-10-20 디스플레이 장치 및 그 동작 방법

Country Status (3)

Country Link
US (1) US20210211760A1 (ko)
KR (1) KR20170096821A (ko)
WO (1) WO2017142163A1 (ko)

Families Citing this family (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR102546726B1 (ko) * 2018-08-08 2023-06-23 삼성전자주식회사 인커밍 콜 처리 방법 및 이를 지원하는 전자 장치
US11678165B2 (en) * 2020-05-29 2023-06-13 Shure Acquisition Holdings, Inc. System and method for wireless power transfer and communication

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20120093743A (ko) * 2011-02-15 2012-08-23 엘지전자 주식회사 데이터 송수신 방법, 그를 이용한 디스플레이 장치 및 휴대용 단말기
KR20130000532A (ko) * 2011-06-23 2013-01-03 엘지전자 주식회사 휴대 단말기 및 그 제어 방법
KR20140088449A (ko) * 2013-01-02 2014-07-10 엘지전자 주식회사 중앙 제어 장치 및 그것의 제어 방법
JP2015532720A (ja) * 2012-06-20 2015-11-12 ヒュージフロー カンパニー リミテッド 情報処理方法及び装置、並びにデータ処理方法及びこれを用いる装置
KR101570424B1 (ko) * 2014-05-29 2015-11-20 엘지전자 주식회사 이동 단말기 및 그것의 제어방법

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20120093743A (ko) * 2011-02-15 2012-08-23 엘지전자 주식회사 데이터 송수신 방법, 그를 이용한 디스플레이 장치 및 휴대용 단말기
KR20130000532A (ko) * 2011-06-23 2013-01-03 엘지전자 주식회사 휴대 단말기 및 그 제어 방법
JP2015532720A (ja) * 2012-06-20 2015-11-12 ヒュージフロー カンパニー リミテッド 情報処理方法及び装置、並びにデータ処理方法及びこれを用いる装置
KR20140088449A (ko) * 2013-01-02 2014-07-10 엘지전자 주식회사 중앙 제어 장치 및 그것의 제어 방법
KR101570424B1 (ko) * 2014-05-29 2015-11-20 엘지전자 주식회사 이동 단말기 및 그것의 제어방법

Also Published As

Publication number Publication date
US20210211760A1 (en) 2021-07-08
KR20170096821A (ko) 2017-08-25

Similar Documents

Publication Publication Date Title
WO2019107945A1 (en) Method of providing service based on location of sound source and speech recognition device therefor
WO2017171204A1 (ko) 단말장치 및 그 제어방법
WO2017003018A1 (ko) 이동 단말기 및 그 제어 방법
WO2012020864A1 (ko) 이동단말기, 디스플레이 장치 및 그 제어 방법
WO2012020863A1 (ko) 이동단말기, 디스플레이 장치 및 그 제어 방법
WO2016108660A1 (en) Method and device for controlling home device
WO2017105021A1 (en) Display apparatus and method for controlling display apparatus
WO2014185615A1 (en) Method of controlling communication unit via magnetic sensor and electronic device using the method
WO2017047854A1 (ko) 이동 단말기 및 그 제어방법
WO2016111556A1 (en) Method of wirelessly connecting devices, and device thereof
WO2013058423A1 (ko) 전자기기 및 전자기기의 동작 방법
WO2017007045A1 (ko) 무인 항공기, 이동 단말기 및 그것들의 제어방법
WO2016129778A1 (ko) 이동 단말기 및 그 제어 방법
WO2015102470A1 (ko) 제어 장치
WO2016010202A1 (en) Mobile terminal and control method for the mobile terminal
WO2019172671A1 (en) Display device and control method thereof
WO2018124343A1 (ko) 전자장치
WO2015194693A1 (ko) 영상 표시 기기 및 그의 동작 방법
WO2017051959A1 (ko) 단말 장치 및 단말 장치의 제어 방법
WO2013129799A1 (en) Electronic device and method for controlling electronic device
WO2017159941A1 (en) Display device and method of operating the same
WO2014171620A1 (en) Method and system for controlling external device
WO2016114437A1 (ko) 이동 단말기 및 그것의 제어방법
WO2019031708A1 (en) ELECTRONIC DEVICE AND METHOD FOR PROCESSING INFORMATION RELATING TO DRIVING
WO2015126012A1 (ko) 이동단말기 및 그 제어방법

Legal Events

Date Code Title Description
121 Ep: the epo has been informed by wipo that ep was designated in this application

Ref document number: 16890754

Country of ref document: EP

Kind code of ref document: A1

NENP Non-entry into the national phase

Ref country code: DE

122 Ep: pct application non-entry in european phase

Ref document number: 16890754

Country of ref document: EP

Kind code of ref document: A1