WO2017222097A2 - 디스플레이 장치 - Google Patents

디스플레이 장치 Download PDF

Info

Publication number
WO2017222097A2
WO2017222097A2 PCT/KR2016/006795 KR2016006795W WO2017222097A2 WO 2017222097 A2 WO2017222097 A2 WO 2017222097A2 KR 2016006795 W KR2016006795 W KR 2016006795W WO 2017222097 A2 WO2017222097 A2 WO 2017222097A2
Authority
WO
WIPO (PCT)
Prior art keywords
content
display
unit
search
play
Prior art date
Application number
PCT/KR2016/006795
Other languages
English (en)
French (fr)
Other versions
WO2017222097A3 (ko
Inventor
허승현
이재경
장지안
Original Assignee
엘지전자 주식회사
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 엘지전자 주식회사 filed Critical 엘지전자 주식회사
Priority to US16/306,727 priority Critical patent/US10945026B2/en
Priority to PCT/KR2016/006795 priority patent/WO2017222097A2/ko
Publication of WO2017222097A2 publication Critical patent/WO2017222097A2/ko
Publication of WO2017222097A3 publication Critical patent/WO2017222097A3/ko

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/433—Content storage operation, e.g. storage operation in response to a pause request, caching operations
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/47—End-user applications
    • H04N21/472—End-user interface for requesting content, additional data or services; End-user interface for interacting with content, e.g. for content reservation or setting reminders, for requesting event notification, for manipulating displayed content
    • H04N21/47217—End-user interface for requesting content, additional data or services; End-user interface for interacting with content, e.g. for content reservation or setting reminders, for requesting event notification, for manipulating displayed content for controlling playback functions for recorded or on-demand content, e.g. using progress bars, mode or play-point indicators or bookmarks
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/439—Processing of audio elementary streams
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/439—Processing of audio elementary streams
    • H04N21/4394—Processing of audio elementary streams involving operations for analysing the audio stream, e.g. detecting features or characteristics in audio streams
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/44—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/443—OS processes, e.g. booting an STB, implementing a Java virtual machine in an STB or power management in an STB
    • H04N21/4431—OS processes, e.g. booting an STB, implementing a Java virtual machine in an STB or power management in an STB characterized by the use of Application Program Interface [API] libraries
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/45—Management operations performed by the client for facilitating the reception of or the interaction with the content or administrating data related to the end-user or to the client device itself, e.g. learning user preferences for recommending movies, resolving scheduling conflicts
    • H04N21/462—Content or additional data management, e.g. creating a master electronic program guide from data received from the Internet and a Head-end, controlling the complexity of a video stream by scaling the resolution or bit-rate based on the client capabilities
    • H04N21/4622—Retrieving content or additional data from different sources, e.g. from a broadcast channel and the Internet
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/47—End-user applications
    • H04N21/482—End-user interface for program selection
    • H04N21/4825—End-user interface for program selection using a list of items to be played back in a given order, e.g. playlists
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/80—Generation or processing of content or additional data by content creator independently of the distribution process; Content per se
    • H04N21/85—Assembly of content; Generation of multimedia applications
    • H04N21/854—Content authoring
    • H04N21/8545—Content authoring for generating interactive applications

Definitions

  • the present invention relates to a display device, and more particularly, to a display device capable of integrating and managing multimedia contents provided from a plurality of content providers.
  • display devices such as smart TVs and IPTVs, unlike conventional display devices that provide only real-time broadcasting, may provide various multimedia contents to users.
  • the multimedia content may be provided from various content providers, and the content providers provide a dedicated application (eg, a playback application) for providing the multimedia content.
  • a dedicated application eg, a playback application
  • the dedicated application By installing the dedicated application on the display device, the user can use the multimedia content provided from the corresponding content provider.
  • An object of the present invention is to provide a method for collectively managing and playing content provided from various content providers when using multimedia content through a display device.
  • a display apparatus includes a display unit, a storage unit storing a playlist including first content provided from a first content provider and second content provided from a second content provider, and the playlist Is displayed on the display unit, the first content included in the displayed playlist is played through an application related to the first content provider, and whether or not the reproduction of the first content is completed, based on a detection result, And a controller for playing second content through an application related to the second content provider.
  • the controller may display the playlist for the executed multimedia player application through the display unit.
  • the controller obtains information on content currently provided through the display apparatus, generates at least one search command based on the obtained information, and provides the current information using the generated search command. Search for at least one related content for the content to be found, and display the searched at least one related content through the display.
  • the control unit may display a search result window including the searched at least one related content through the display unit, and the search result window may include at least one search category corresponding to each of the at least one search command. Each of the at least one related content may be included in any one of the at least one search category.
  • the control unit may receive a request to add one of the at least one related content displayed on the display unit to the playlist, and in response to the received request, the one or more related contents may be added to the playlist. Can be added to
  • the display apparatus may further include a play completion detector configured to detect whether the content has been played, and wherein the controller is further configured to determine the second content when it is detected that the play of the first content is completed by the play completion detector.
  • the content may be played through an application related to the second content provider.
  • the reproduction completion detector detects whether an audio signal related to the first content is transmitted to the sound output unit, and if the audio signal is not transmitted to the sound output unit for a reference time, the reproduction of the first content is stopped. It can be detected as complete.
  • the controller may deactivate a detection operation of the reproduction completion detector when the audio of the first content is not output in response to a mute command received during the reproduction of the first content.
  • the reproduction completion detector detects whether a video signal related to the first content is transmitted to the display unit, and if the video signal is not transmitted to the display unit for a reference time, the reproduction of the first content is completed. It can be detected as.
  • the display unit displays a playback screen of an application associated with the first content provider when the first content is played back, and the playback completion detector recognizes and recognizes playback state information included in the playback screen through image recognition.
  • the reproduction state information may be used to detect whether the first content has been played.
  • the display apparatus may improve user convenience by managing and playing contents provided from various content providers as one playlist.
  • the user when a user wants to add related content related to the multimedia content currently being played to a playlist, the user can conveniently search for the related content and easily add the searched related content to the playlist, thereby improving usability. You can.
  • FIG. 1 is a block diagram illustrating a configuration of a display apparatus according to an exemplary embodiment.
  • FIG. 2 is a block diagram of a remote control apparatus according to an embodiment of the present invention.
  • Figure 3 shows an example of the actual configuration of the remote control device according to an embodiment of the present invention.
  • FIG. 4 shows an example of using a remote control device according to an embodiment of the present invention.
  • FIG. 5 is a flowchart for describing a method of operating a display apparatus according to an exemplary embodiment.
  • FIG. 6 is a diagram illustrating an embodiment of a screen displayed when a multimedia player application installed in a display device is executed.
  • FIG. 7 is a flowchart for describing an operation of adding, by a display apparatus, at least one content related to content currently being provided to a playlist, according to an exemplary embodiment.
  • 8A to 8B illustrate an embodiment of an operation of searching for at least one content related to content provided through a multimedia playing application and displaying the searched at least one content.
  • FIGS. 8A to 8B are diagrams illustrating an embodiment of an operation of adding searched content to a playlist according to the embodiment illustrated in FIGS. 8A to 8B.
  • FIG. 10 is a diagram for describing an embodiment of searching for related content based on information of real-time broadcast content provided through a display device, and adding the found content to a playlist.
  • 11A to 11B illustrate an embodiment of providing various types of information about an artist related to content.
  • FIG. 12 is a diagram for describing an operation of controlling, by the display apparatus according to an embodiment of the present invention, the reproduction of a specific content of a playlist and controlling the playback of the next content.
  • FIG. 13 to 16 illustrate various embodiments in which the play completion detector illustrated in FIG. 12 detects play completion of content.
  • 17A to 17C are views illustrating an operation of reproducing various contents provided by a plurality of content providers by a display apparatus according to an exemplary embodiment.
  • FIG. 1 is a block diagram illustrating a configuration of a display apparatus according to an exemplary embodiment.
  • the display apparatus 100 may be implemented as a TV, a monitor, a projector, or a device including the same.
  • the display apparatus 100 may include a broadcast receiver 130, an external device interface 135, a storage 140, a user input interface 150, a camera 160, a controller 170, a display 180, The audio output unit 185 and the power supply unit 190 may be included.
  • the broadcast receiver 130 may include a tuner 131, a demodulator 132, and a network interface unit 133.
  • the tuner 131 may tune a specific broadcast channel according to a channel tuning command.
  • the tuner 131 may receive a broadcast signal for a tuned specific broadcast channel.
  • the demodulator 132 may separate the received broadcast signal into a video signal, an audio signal, and a data signal associated with a broadcast program, and may restore the separated video signal, the audio signal, and the data signal into a form capable of outputting the broadcast signal.
  • the network interface unit 133 may provide an interface for connecting the display apparatus 100 to a wired / wireless network including an internet network.
  • the network interface unit 133 may transmit or receive data with another user or another electronic device through the connected network or another network linked to the connected network.
  • some content data stored in the display apparatus 100 may be transmitted to a user selected from another user or another electronic device registered in the display apparatus 100 or a selected electronic apparatus.
  • the network interface unit 133 may access a predetermined web page through a connected network or another network linked to the connected network. That is, by accessing a predetermined web page through the network, it is possible to send or receive data with the server.
  • the network interface unit 133 may receive content or data provided by a content provider or a network operator. That is, the network interface unit 133 may receive content such as a movie, an advertisement, a game, a VOD, a broadcast signal, and related information provided from a content provider or a network provider through a network.
  • content such as a movie, an advertisement, a game, a VOD, a broadcast signal, and related information provided from a content provider or a network provider through a network.
  • the network interface unit 133 may receive the update information and the update file of the firmware provided by the network operator, and may transmit data to the Internet or the content provider or the network operator.
  • the network interface unit 133 may select and receive a desired application from among applications that are open to the public through the network.
  • the external device interface unit 135 may receive an application or a list of applications in a neighboring external device and transmit the received application to the controller 170 or the storage 140.
  • the external device interface unit 135 may provide a connection path between the display apparatus 100 and the external device.
  • the display apparatus 100 may be connected to the external device by wire or wirelessly through the external device interface unit 135.
  • the external device interface unit 135 may receive one or more of an image and audio output from the external device and transmit the received one or more to the controller 170.
  • the external device connectable to the external device interface unit 135 may be any one of a set top box, a Blu-ray player, a DVD player, a game machine, a sound bar, a mobile terminal such as a smartphone, a PC, a USB memory, and a home theater.
  • the storage unit 140 may store a program for processing and controlling each signal in the controller 170, and may store a signal-processed video, audio, or data signal.
  • the storage 140 may perform a function for temporarily storing an image, audio, or data signal input from the external device interface 135, the network interface 133, or the camera 160.
  • the channel storage function may also store information about a predetermined image.
  • the storage 140 may store an application or a list of applications input from the external device interface 135 or the network interface 133.
  • the display apparatus 100 may reproduce and provide a content file (video file, still image file, music file, document file, application file, etc.) stored in the storage 140 to the user.
  • a content file video file, still image file, music file, document file, application file, etc.
  • the user input interface unit 150 may transmit a signal input by the user to the controller 170, or may transmit a signal from the controller 170 to the user.
  • the user input interface unit 150 may be configured according to various communication methods such as Bluetooth, Ultra Wideband (UWB), ZigBee, RF (Radio Frequency) communication, or Infrared (IR) communication.
  • the remote controller 200 may receive and process a control signal such as power on / off, channel selection, screen setting, or the like, or transmit a control signal from the controller 170 to the remote controller 200.
  • the user input interface unit 150 may transmit a control signal input from a local key (not shown) such as a power key, a channel key, a volume key, and a set value to the controller 170.
  • a local key such as a power key, a channel key, a volume key, and a set value
  • the image signal processed by the controller 170 may be input to the display unit 180 and displayed as an image corresponding to the image signal.
  • the image signal processed by the controller 170 may be input to the external output device through the external device interface unit 135.
  • the audio signal processed by the controller 170 may be audio output to the audio output unit 185.
  • the voice signal processed by the controller 170 may be input to the external output device through the external device interface unit 135.
  • controller 170 may control overall operations of the display apparatus 100.
  • controller 170 may control the display apparatus 100 by a user command or an internal program input through the user input interface unit 150, and access the network to display an application or a list of applications desired by the user. Can be downloaded to (100).
  • the controller 170 may output the channel information selected by the user together with the processed video or audio signal through the display unit 180 or the audio output unit 185.
  • controller 170 may output an external device input through the external device interface unit 135 according to an external device image playback command received through the user input interface unit 150, for example, from a camera or a camcorder.
  • the video signal or the audio signal may be output through the display unit 180 or the audio output unit 185.
  • the controller 170 may control the display unit 180 to display an image, for example, a broadcast image input through the tuner 131, or an external input input through the external device interface unit 135.
  • An image, an image input through a network interface unit, or an image stored in the storage 140 may be controlled to be displayed on the display unit 180.
  • the image displayed on the display unit 180 may be a still image or a video, and may be a 2D image or a 3D image.
  • the controller 170 may control the content stored in the display apparatus 100, the received broadcast content, or the external input content input from the outside to be reproduced.
  • the content may include a broadcast image, an external input image, an audio file, It may be in various forms such as a still image, a connected web screen, and a document file.
  • the display unit 180 converts an image signal, a data signal, an OSD signal processed by the controller 170, or an image signal, data signal, etc. received from the external device interface unit 135 into R, G, and B signals, respectively. You can generate a signal.
  • the display device 100 shown in FIG. 1 is only an embodiment of the present invention. Some of the illustrated components may be integrated, added, or omitted according to the specifications of the display apparatus 100 that is actually implemented.
  • two or more components may be combined into one component as needed, or one component may be divided into two or more components.
  • the function performed in each block is for explaining an embodiment of the present invention, the specific operation or device does not limit the scope of the present invention.
  • the display apparatus 100 does not include the tuner 131 and the demodulator 132, as shown in FIG. 1, but the network interface unit 133 or the external device interface unit ( 135 may be received and played back.
  • the display apparatus 100 may be divided into an image processing apparatus such as a set-top box, such as for receiving broadcast signals or contents according to various network services, and a content reproducing apparatus for playing contents input from the image processing apparatus. Can be implemented.
  • an image processing apparatus such as a set-top box, such as for receiving broadcast signals or contents according to various network services
  • a content reproducing apparatus for playing contents input from the image processing apparatus. Can be implemented.
  • the operation method of the display apparatus according to the embodiment of the present invention described below is not only the display apparatus 100 as described with reference to FIG. 1, but also an image processing apparatus or a display unit such as the separated set-top box or the like. 180 may be performed by any one of the content reproducing apparatus having the audio output unit 185.
  • FIG. 2 is a block diagram of a remote control apparatus according to an embodiment of the present invention
  • Figure 3 shows an actual configuration of the remote control apparatus according to an embodiment of the present invention.
  • the remote control apparatus 200 includes a fingerprint recognition unit 210, a wireless communication unit 220, a user input unit 230, a sensor unit 240, an output unit 250, and a power supply unit 260. ), A storage unit 270, a control unit 280, and a voice acquisition unit 290.
  • the wireless communication unit 220 transmits and receives a signal to and from a display device according to an embodiment of the present invention described above.
  • the remote control apparatus 200 includes an RF module 221 capable of transmitting and receiving a signal with the display apparatus 100 according to the RF communication standard, and capable of transmitting and receiving a signal with the display apparatus 100 according to the IR communication standard.
  • IR module 223 may be provided.
  • the remote control apparatus 200 may include a Bluetooth module 225 capable of transmitting and receiving a signal with the display apparatus 100 according to the Bluetooth communication standard.
  • the remote control apparatus 200 includes an NFC module 227 capable of transmitting and receiving a signal to and from the display apparatus 100 according to a Near Field Communication (NFC) communication standard, and displaying according to a WLAN (Wireless LAN) communication standard.
  • WLAN module 229 capable of transmitting and receiving signals to and from device 100 may be provided.
  • the remote control apparatus 200 transmits a signal containing information regarding the movement of the remote control apparatus 200 to the display apparatus 100 through the wireless communication unit 220.
  • the remote control device 200 may receive a signal transmitted from the display device 100 through the RF module 221, and if necessary, the power supply to the display device 100 via the IR module 223 / Commands regarding off, channel change, volume change, etc. can be sent.
  • the user input unit 230 may include a keypad, a button, a touch pad, or a touch screen.
  • the user may input a command related to the display apparatus 100 to the remote control apparatus 200 by manipulating the user input unit 230.
  • the user input unit 230 includes a hard key button, the user may input a command related to the display apparatus 100 to the remote control apparatus 200 through a push operation of the hard key button. This will be described with reference to FIG. 3.
  • the remote control apparatus 200 may include a plurality of buttons.
  • the plurality of buttons may include a fingerprint recognition button 212, a power button 231, a home button 232, a live button 233, an external input button 234, a volume control button 235, a voice recognition button 236, It may include a channel change button 237, a confirmation button 238, and a back button 239.
  • the fingerprint recognition button 212 may be a button for recognizing a fingerprint of a user. In one embodiment, the fingerprint recognition button 212 may be pushed to receive a push operation and a fingerprint recognition operation.
  • the power button 231 may be a button for turning on / off the power of the display apparatus 100.
  • the home button 232 may be a button for moving to the home screen of the display apparatus 100.
  • the live button 233 may be a button for displaying a live broadcast program.
  • the external input button 234 may be a button for receiving an external input connected to the display apparatus 100.
  • the volume control button 235 may be a button for adjusting the volume of the volume output from the display apparatus 100.
  • the voice recognition button 236 may be a button for receiving a user's voice and recognizing the received voice.
  • the channel change button 237 may be a button for receiving a broadcast signal of a specific broadcast channel.
  • the confirmation button 238 may be a button for selecting a specific function, and the back button 239 may be
  • the user input unit 230 When the user input unit 230 includes a touch screen, the user may input a command related to the display apparatus 100 to the remote control apparatus 200 by touching a soft key of the touch screen.
  • the user input unit 230 may include various kinds of input means that the user can operate, such as a scroll key or a jog key, and the embodiment does not limit the scope of the present invention.
  • the sensor unit 240 may include a gyro sensor 241 or an acceleration sensor 243, and the gyro sensor 241 may sense information about the movement of the remote controller 200.
  • the gyro sensor 241 may sense information about the operation of the remote control device 200 based on the x, y, and z axes, and the acceleration sensor 243 may move the speed of the remote control device 200. Information about the data can be sensed.
  • the remote control device 200 may further include a distance measuring sensor, it is possible to sense the distance to the display unit 180 of the display device 100.
  • the output unit 250 may output a video or audio signal corresponding to an operation of the user input unit 235 or a signal transmitted from the display apparatus 100.
  • the user may recognize whether the user input unit 235 is manipulated or whether the display apparatus 100 is controlled through the output unit 250.
  • the output unit 250 is an LED module 251 that is turned on when the user input unit 235 is manipulated or a signal is transmitted to or received from the display apparatus 100 through the wireless communication unit 225, and a vibration module generating vibration. 253, a sound output module 255 for outputting sound, or a display module 257 for outputting an image.
  • the power supply unit 260 supplies power to the remote control device 200, and can reduce power waste by stopping the power supply when the remote control device 200 does not move for a predetermined time.
  • the power supply unit 260 may resume power supply when a predetermined key provided in the remote control apparatus 200 is operated.
  • the storage unit 270 may store various types of programs, application data, and the like necessary for controlling or operating the remote control apparatus 200. If the remote control apparatus 200 transmits and receives a signal wirelessly through the display apparatus 100 and the RF module 221, the remote control apparatus 200 and the display apparatus 100 transmit and receive signals through a predetermined frequency band. .
  • the control unit 280 of the remote control apparatus 200 stores and refers to the storage unit 270 with information about a frequency band for transmitting and receiving a signal wirelessly with the display apparatus 100 paired with the remote control apparatus 200. can do.
  • the controller 280 controls various matters related to the control of the remote controller 200.
  • the controller 280 may display a signal corresponding to a predetermined key manipulation of the user input unit 235 or a signal corresponding to the movement of the remote controller 200 sensed by the sensor unit 240 through the wireless communication unit 220. 100).
  • the voice acquisition unit 290 of the remote control device 200 may obtain a voice.
  • the voice acquirer 290 may include at least one microphone, and may obtain a voice through the microphone.
  • FIG. 4 is demonstrated.
  • FIG. 4 shows an example of using a remote control device according to an embodiment of the present invention.
  • FIG. 4A illustrates that a pointer 205 corresponding to the remote control apparatus 200 is displayed on the display unit 180.
  • the user may move or rotate the remote control apparatus 200 vertically, left and right.
  • the pointer 205 displayed on the display unit 180 of the display apparatus 100 corresponds to the movement of the remote control apparatus 200.
  • the remote control apparatus 200 may be referred to as a spatial remote controller because the pointer 205 is moved and displayed according to the movement in the 3D space as shown in the figure.
  • FIG. 4B illustrates that when the user moves the remote control apparatus 200 to the left side, the pointer 205 displayed on the display unit 180 of the display apparatus 100 also moves to the left side correspondingly.
  • the display apparatus 100 may calculate the coordinates of the pointer 205 from the information about the movement of the remote control apparatus 200.
  • the display apparatus 100 may display the pointer 205 to correspond to the calculated coordinates.
  • FIG. 4C illustrates a case in which the user moves the remote control apparatus 200 away from the display unit 180 while pressing a specific button in the remote control apparatus 200.
  • the selection area in the display unit 180 corresponding to the pointer 205 may be zoomed in to be enlarged and displayed.
  • the selection area in the display unit 180 corresponding to the pointer 205 may be zoomed out and reduced.
  • the selection area may be zoomed out, and when the remote control apparatus 200 approaches the display unit 180, the selection area may be zoomed in.
  • recognition of up, down, left and right movements may be excluded when a specific button in the remote control apparatus 200 is pressed. That is, when the remote control apparatus 200 moves away from or approaches the display unit 180, the up, down, left, and right movements are not recognized, and only the front and back movements may be recognized. In a state in which a specific button in the remote control apparatus 200 is not pressed, only the pointer 205 moves according to the up, down, left, and right movements of the remote control apparatus 200.
  • the moving speed or the moving direction of the pointer 205 may correspond to the moving speed or the moving direction of the remote control apparatus 200.
  • the pointer in the present specification refers to an object displayed on the display unit 180 in response to the operation of the remote control apparatus 200.
  • the pointer 205 may be an object of various shapes in addition to the arrow shape shown in the drawing.
  • the concept may include a point, a cursor, a prompt, a thick outline, and the like.
  • the pointer 205 may be displayed corresponding to any one of the horizontal axis and the vertical axis of the display unit 180, or may be displayed corresponding to a plurality of points such as a line and a surface. Do.
  • FIG. 5 is a flowchart for describing a method of operating a display apparatus according to an exemplary embodiment.
  • the display apparatus 100 may execute a multimedia reproduction application (S100).
  • S100 multimedia reproduction application
  • the controller 170 of the display apparatus 100 may execute the multimedia playback application installed in the display apparatus 100 and stored in the storage 140 in response to the request for executing the multimedia playback application.
  • the multimedia playback application may mean a kind of music player, but is not limited thereto and may mean an application capable of playing various types of multimedia contents.
  • the display apparatus 100 on which the multimedia playback application is executed may load a playlist including first content provided from the first content provider and second content provided from the second content provider (S110).
  • the playlist for the multimedia playback application may include various contents provided from a plurality of content providers.
  • the plurality of content providers may include various content providing service platforms such as a music streaming service platform, a multimedia content streaming service platform, and a music download service platform.
  • the plurality of content providers may include the display apparatus 100 itself.
  • the content provided by the display apparatus 100 may refer to multimedia content stored in the storage 140.
  • the plurality of content providers may provide their own content using a dedicated application.
  • the display apparatus 100 may add content provided from various content providers to one playlist. In this regard, it will be described in more detail with reference to FIGS. 6 to 11B.
  • FIG. 6 is a diagram illustrating an embodiment of a screen displayed when a multimedia player application installed in a display device is executed.
  • the controller 170 of the display apparatus 100 may execute a multimedia playback application in response to a request for executing the multimedia playback application.
  • the execution request may refer to an input for selecting a multimedia player application icon (not shown) displayed through the display unit 180, but is not limited thereto and may be implemented in various forms.
  • the controller 170 may load a playlist for the executed multimedia playback application from the storage 140.
  • the controller 170 may receive the playlist from the server and load the received playlist. have.
  • the playlist may include a name (title), a thumbnail image, a uniform resource locator (URL), etc. of each of the plurality of contents.
  • the controller 170 may display the loaded playlist on the execution screen 310 of the multimedia playback application.
  • the controller 170 may display the execution screen 310 of the multimedia player application on the display 180.
  • an execution screen 310 is displayed on a content (for example, broadcast content, etc.) 181 currently displayed through the display unit 180.
  • a content for example, broadcast content, etc.
  • the execution screen 310 may be displayed through the display unit 180 and the content 181 may not be displayed or the content 181 may be displayed in a partial area of the display unit 180. That is, the execution screen 310 and the currently provided content 181 when the multimedia playback application is executed may be displayed in various forms.
  • the execution screen 310 of the multimedia player application may display the loaded playlist. That is, the execution screen 310 may include thumbnail images 311 of each of the plurality of contents included in the playlist, a file name of the content currently being played, a progress bar 312 indicating a playback state of the contents, and a multimedia playback application. It may include an end icon 313 for termination.
  • the playlist may include various content provided from a plurality of content providers.
  • the display apparatus 100 may continuously play a plurality of contents provided from different content providers and integrate and manage the plurality of contents.
  • embodiments of adding various contents to a playlist will be described with reference to FIGS. 7 to 10.
  • FIG. 7 is a flowchart for describing an operation of adding, by a display apparatus, at least one content related to content currently being provided to a playlist, according to an exemplary embodiment.
  • the display apparatus 100 may obtain information about content currently provided (S200).
  • the currently provided content is content that is being played through a multimedia playback application, broadcast content received and output through the tuner 131, or received and output through the network interface 133 or the external device interface 135. It may mean various contents, but is not limited thereto.
  • the controller 170 may store information about the played content in the storage 140.
  • the information about the content stored in the storage 140 may be updated.
  • the information about the content may mean various information such as title, artist, genre, and the like of the content.
  • the controller 170 may receive a search request through the user input interface unit 150 and the like, and may obtain information about the content stored in the storage 140 in response to the received search request.
  • the display apparatus 100 may search for at least one content related to the currently provided content, based on the obtained information (S210).
  • the display apparatus 100 may include a search module, and the controller 170 may control the operation of the search module to perform a search operation.
  • the search module may generate at least one search command based on the information about the content obtained in operation S200.
  • the search command may include a search word and a search root (such as a search location or a content provider to search), but is not limited thereto.
  • the controller 170 may perform a search operation by using the generated search command.
  • the controller 170 may perform a search operation using a search word included in the search command in a server of a content provider included in the search command, and receive information of content related to the search word as a search result. Since the search word is generated based on the information of the currently provided content, the searched at least one content may be content related to the currently provided content.
  • the display apparatus 100 may add the retrieved at least one content to a playlist (S220).
  • the controller 170 receives a request to add some or all of the at least one searched content to the playlist according to step S210, and in response to the received request, the controller 170 adds some or all of the searched content to the playlist. You can add In this case, various contents retrieved from the plurality of content providers may be added to the playlist.
  • FIG. 7 Each step illustrated in FIG. 7 will be described in more detail with reference to FIGS. 8A to 10.
  • 8A to 8B illustrate an embodiment of an operation of searching for at least one content related to content provided through a multimedia playing application and displaying the searched at least one content.
  • the player 300 refers to a multimedia playback application.
  • operations of each of the player 300 and the search module 400 may be controlled by the controller 170. That is, the operation of the player 300 or the search module 400 means that the controller 170 controls the player 300 or the search module 400 to perform the certain operation. May mean that the controller 170 performs any of the above operations.
  • search module 400 is illustrated as being included in the display apparatus 100, in some embodiments, the search module 400 may be included in a separate server connected to the display apparatus 100.
  • the player 300 may play any one content of at least one content included in the playlist (S300).
  • the content played by the player 300 is music content.
  • the player 300 may update the information on the content currently being played in the first database 140_1 (S310).
  • the first database 140_1 may have a purpose of storing information of content currently being played.
  • the first database 140_1 may be included in the storage 140, but is not necessarily the same and may be provided in a separate configuration from the storage 140.
  • Information of the content currently being played may include the title, artist, and genre of the content, but is not limited thereto and may include various types of information related to the content currently being played. For example, if the title of the content currently being played is “Love Song”, the artist is “John”, and the genre is “Ballard”, the player 300 may update the information in the first database 140_1.
  • the controller 170 may receive a search request through the user input interface unit 150 (S320).
  • the search request may be received as a search button included in the remote control apparatus 200 is input or may be received by selecting a search icon displayed through the display unit 180, but is not limited thereto.
  • the controller 170 may control an operation of the search module 400.
  • the search module 400 may obtain content information from the first database 140_1 (S330), and generate at least one search command using the obtained content information (S340).
  • the search command may include a search keyword and a content provider to search. However, the search command may be implemented in various forms.
  • the search module 400 generates various search keywords (“Love Song”, “John”, “Ballard”, “Lyrics of Love Song”, etc.) using the content information obtained from the first database 140_1,
  • the search operation using the generated search keyword may be performed for various content providers (eg, “YoTube”, “Bogs”, “Playlist”, “Web”, etc.).
  • the controller 170 may display the search result window 410 on the display 180.
  • the search result window 410 is shown in a form of being displayed on a portion of the display unit 180, but the display form of the search result window 410 may be implemented in various ways.
  • the search result pane 410 may include search categories 420, 430, 440, 450, 460, and 470.
  • the search categories 420, 430, 440, 450, 460, and 470 may correspond to each of the search instructions generated by the search module 400. As shown in FIG. 8B, the search categories 420, 430, 440, 450, 460, and 470 may visually represent search keywords and / or information about a searched content provider.
  • search category eg, the first search category 420
  • search command corresponding to the first search category 420 is selected.
  • a list of the contents 421, 422, 423, and 424 found through may be displayed. Since the search command is generated based on the information of the content 311 currently being played, the contents 421, 422, 423, and 424 searched through the generated search command will be related content with respect to the content 311 currently being played. .
  • the user may conveniently search for various contents related to the content currently being played through the multimedia playback application.
  • FIGS. 8A to 8B are diagrams illustrating an embodiment of an operation of adding searched content to a playlist according to the embodiment illustrated in FIGS. 8A to 8B.
  • the controller 170 may receive a content addition request through the user input interface unit 150 (S400).
  • the content addition request may be a request to add one of the searched content to the playlist according to the embodiment shown in FIGS. 8A to 8B.
  • the content addition request will be described later with reference to FIGS. 9B to 9C.
  • the search module 400 may add any one content to the playlist (S410).
  • the search module 400 may store information of any one content in the second database 140_2.
  • the second database 140_2 may store information of content included in the playlist.
  • the information of the content stored in the second database 140_2 may include a title of the content, a thumbnail image, and a URL (where the content is stored in the display apparatus 100, where the content file is stored). It is not limited to this.
  • the player 300 may load a playlist from the second database 140_2 (S420). Accordingly, the content newly added to the playlist by the content addition request may be played by the player 300.
  • the controller 170 may display additional buttons AB1 to AB3 on each of the searched contents 421 to 424 displayed in the search result window 410.
  • the controller 170 or the search module 400 receives an input for any one additional button (for example, the second add button AB2) as a content addition request, and responds to the received input with a second add button ( Content 422 corresponding to AB2) may be added to the playlist.
  • a thumbnail image of the content 422 may be added and displayed on the execution screen 310 of the multimedia playback application.
  • the controller 170 may request to select the second search category 430 among the search categories 420, 430, 440, 450, 460, and 470 included in the search result window 410.
  • the list of searched contents 431 to 435 may be displayed through a search command corresponding to the second search category 430.
  • the content providers of the contents 421 to 424 included in the first search category 420 and the content providers of the contents 431 to 435 included in the second search category 430 may be different from each other.
  • the controller 170 displays the add buttons AB1 to AB5 on each of the contents 431 to 435 displayed in the search result window 410, and displays one of the add buttons (for example, the second add button AB2).
  • the content 432 corresponding to the second add button AB2 may be added to the playlist.
  • a thumbnail image of the content 432 may be added and displayed on the execution screen 310 of the multimedia playback application.
  • the user may conveniently add related content searched for in relation to the content currently being played through the multimedia playback application to the playlist.
  • the display apparatus 100 may allow a user to integrate content management by adding various contents provided from different content providers to one playlist.
  • FIG. 10 is a diagram for describing an embodiment of searching for related content based on information of real-time broadcast content provided through a display device, and adding the found content to a playlist.
  • the real-time TV application 500 illustrated in FIG. 10 may refer to an application that performs an operation of outputting real-time broadcast content through the display unit 180 or the like based on the broadcast signal received from the broadcast receiver 130.
  • the operation of the real-time TV application 500 may be controlled by the controller 170.
  • the real-time TV application 500 may update information on the real-time broadcast content currently being output through the display unit 180 to the third database 140_3 (S500).
  • the third database 140_3 may have a purpose of storing information on real-time broadcast content or video content currently being output.
  • the third database 140_3 may be included in the storage 140, but may be provided in a separate configuration from the storage 140. According to an embodiment, the third database 140_3 may be integrally formed with the first database 140_1 of FIG. 8A.
  • the information on the currently output broadcast content may include the title and genre of the broadcast content, but is not limited thereto. For example, if the title of the broadcast content currently being output is “Trap” and the genre is “Drama,” the real-time TV application 500 may update the corresponding information in the third database 140_3.
  • the controller 170 may receive a search request through the user input interface unit 150 (S510).
  • the search request is substantially the same as the search request described above in step S320 of FIG. 8A, and a description thereof will be omitted.
  • the controller 170 may control an operation of the search module 400.
  • the search module 400 obtains content information from the third database 140_3 (S520), generates at least one search command using the obtained content information, and performs a search operation using the generated search command. It may be (S530).
  • the search module 400 may add at least one of the searched contents to the playlist based on the content addition request in operation S540. Since steps S520 to S540 are similar to steps S330 and S340 of FIG. 8A and steps S400 and S410 of FIG. 9A, descriptions thereof will be omitted.
  • 11A to 11B illustrate an embodiment of providing various types of information about an artist related to content.
  • the controller 170 may include a search category including a search result related to an artist among the search categories 520, 530, 540, 550, and 560 displayed in the search result window 510. For example, a request for selecting the third search category 540 may be received.
  • the controller 170 may display the artist information window 541 in the search result window 510 in response to the received selection request.
  • the artist information window 541 may include profile information for the artist.
  • Profile information for the artist may include a variety of information such as the artist's photo, name, date of birth, genre, website.
  • the profile information may be stored in a separate server connected to the display apparatus 100.
  • the artist information window 541 provides a link to the artist's website address 542 to provide more detailed information about the artist, and an internet access button 543 for providing search results for the artist over the Internet.
  • the pre-connect button 544 but are not limited thereto and may provide various means for providing detailed information about the artist.
  • the controller 170 may display the artist's website access screen 552 in response to the request to select the website address link 542, and in response to the request to select the Internet access button 543, the Internet portal.
  • the artist search result screen 553 in the site may be displayed, and the artist search result screen 554 in the dictionary may be displayed in response to a request for selecting the pre-connect button 544.
  • the display apparatus 100 may effectively provide various information related to the artist of the content to the user.
  • the display apparatus 100 may play the first content of the loaded playlist through an application related to the first content provider (S120).
  • content provided by a particular content provider may be output only through an application associated with the content provider (eg, a dedicated playback application). That is, the multimedia playback application installed in the display apparatus 100 may directly play content stored in the display apparatus 100 and may not directly play content provided by a specific content provider.
  • an application associated with the content provider eg, a dedicated playback application. That is, the multimedia playback application installed in the display apparatus 100 may directly play content stored in the display apparatus 100 and may not directly play content provided by a specific content provider.
  • the multimedia player application may determine the content provider when playing the content of the playlist, and control to play the content through an application related to the content provider based on the determination result.
  • the display apparatus 100 may recognize whether the reproduction of the first content being played is completed (S130).
  • the conventional multimedia reproduction application cannot recognize whether the reproduction of the first content is completed. Therefore, in the related art, it is not possible to add content provided from various content providers to a playlist managed by a multimedia playback application.
  • the multimedia playback application may recognize whether the first content has been played back using the play completion detector 700 implemented in the display apparatus 100.
  • the display apparatus 100 may reproduce the second content included in the playlist through an application related to the second content provider (S150).
  • Steps S120 to S150 will be described in more detail with reference to FIGS. 12 to 17C.
  • FIG. 12 is a diagram for describing an operation of controlling, by the display apparatus according to an embodiment of the present invention, the reproduction of a specific content of a playlist and controlling the playback of the next content.
  • the display apparatus 100 may include a play completion detector 700 for detecting play completion of content.
  • the playback completion detector 700 may be implemented in hardware or software form.
  • the player 300 controlled by the controller 170 may load the playlist from the second database 140_2 in which the playlist is stored (S600).
  • the playlist may store information (eg, a title, a thumbnail image, a URL, etc.) of each of at least one content.
  • the player 300 or the controller 170 may request to play one of the contents (eg, the first content) among the contents included in the loaded playlist (S610).
  • the player 300 may identify the content provider based on the information (eg, the URL) of the first content. Based on the identification result, the player 300 may request the application to play the first content in order to play the first content through an application associated with the corresponding content provider. For example, when the content provider of the first content is local content (content stored in the display device 100), the player 300 may directly play the first content.
  • the player 300 plays the first content to an application 302 related to 'YoTube' or an application 303 related to 'Bogs'. You can request
  • the player 300 updates the thumbnail image displayed through the display unit 180 with the thumbnail image of the content to be played (S620), and an application associated with the content provider who is requested to play the content may play the content (S630). .
  • the order of steps S620 and S630 may be freely changed.
  • the controller 170 may control the play completion detector 700 to detect whether the content being played is completed (S640). If it is detected that the reproduction of the content has been completed, the reproduction completion detecting unit 700 may transmit a detection result to the player 300 or request the reproduction of the next content (S650). The operation of the display apparatus 100 after step S650 may be performed by repeating steps S610 to S650.
  • FIG. 12 An operation of the display apparatus 100 illustrated in FIG. 12 will be described in more detail with reference to FIGS. 13 to 17C.
  • FIG. 13 to 16 illustrate various embodiments in which the play completion detector illustrated in FIG. 12 detects play completion of content.
  • the player 300 may request playback of the content from the application 302 related to 'YoTube'.
  • the application 302 can play the content in response to a request from the player 300. It is assumed that the content reproduced in FIG. 13 is content (eg, music content, video content, etc.) outputting audio through the sound output unit 185.
  • the audio signal of the content may be processed through the audio decoder 171 and the audio mixer 172, and the processed audio signal may be output as audio of the content through the sound output unit 185.
  • the playback completion detector 700 may detect the completion of playback of the content by detecting whether an audio signal is transmitted from the audio decoder 171 or the audio mixer 172 to the sound output unit 185. That is, if the audio signal is not output from the audio mixer 172 to the sound output unit 185 for a reference time, the reproduction completion detection unit 700 detects that the reproduction of the content is completed, and then the player 300 determines the next content. May request regeneration. At this time, when the mute command is received by the user and the audio of the content is not output, the controller 170 stops the detection operation of the play completion detector 700 or by the play completion detector 700. Even if the playback of the content is detected as complete, the next content may not be played.
  • the player 300 requests playback of content to an application 302 related to 'YoTube', and the application 302 responds to a request from the player 300.
  • the content can be played back.
  • the content reproduced in FIG. 14 is video content output through the display unit 180.
  • the display unit 180 may output the image by receiving the video signal of the content through the video decoder 173 and the video mixer 174.
  • the video decoder 173 and the video mixer 174 may process data provided by the application 302 and transmit a video signal of the content generated as a result of the processing to the display unit 180.
  • the playback completion detector 700 may detect the completion of content playback by detecting whether a video signal is transmitted from the video decoder 173 or the video mixer 174 to the display 180. That is, the playback completion detector 700 does not output the video signal from the video decoder 173 or the video mixer 174 to the display 180 for a reference time, or the screen displayed by the video signal is longer than a predetermined time. In the case of the same or a specific screen (for example, a black screen, etc.), the content may be detected as being completed and the player 300 may be requested to play the next content. At this time, when a pause command is received by the user and the playback of the content is temporarily stopped, the controller 170 stops the detection operation of the playback completion detector 700 or the playback completion detector. If it is detected by the 700 that the playback of the content is completed, the next content may not be played.
  • the controller 170 may display a playback screen of an application related to a content provider of the content through the display unit 180 when the content is played.
  • the play completion detector 700 may detect the play completion of the content based on the play state information included in the play screen.
  • the play status information includes a play timer (PT) indicating the current play time / total play time, and / or a play status bar (BAR), and the content (using the play timer (PT) and the play status bar (BAR)) is displayed.
  • the playback state of 182 may be provided visually.
  • the reproduction status bar may be displayed in the form of a progress bar, but is not limited thereto.
  • the play timer PT and the play status bar BAR may be displayed in various forms according to the type of the content play application.
  • the play completion detection unit 700 recognizes play state information (play timer (PT) and / or play state bar (BAR)) using a known image recognition technology, and plays back content using the recognized play state information. You can detect the completion. For example, when the current play time and the total play time of the play timer PT are the same, or when the colors of the play status bar BAR are all filled, the play completion detector 700 may detect that the play of the content is completed. have.
  • play state information play timer (PT) and / or play state bar (BAR)
  • BAR play state bar
  • the player 300 requests playback of content to an application 302 related to 'YoTube', and the application 302 responds to a request from the player 300.
  • the content can be played back.
  • the content reproduced in FIG. 16 is multimedia content that outputs an image through the display unit 180 and outputs audio through the sound output unit 185.
  • the controller 170 may perform a synchronization operation between the video signal and the audio signal using the sink manager 175 included in the display apparatus 100.
  • the playback completion detector 700 may detect the completion of content playback by detecting whether the sync manager 175 is operated. That is, when the sync manager 175 that has been in operation does not operate for a predetermined time, the play completion detector 700 may detect that the content is finished playing and request the player 300 to play the next content. According to an embodiment, the playback completion detector 700 may detect the completion of content playback by detecting whether an audio signal and / or a video signal are output from the audio decoder 171 and / or the video decoder 173. .
  • the play completion detection unit 700 when the play completion detection unit 700 receives a request for playing the next content, the player 300 requests an application related to the content provider of the next content to play the next content. Can be.
  • the reproduction completion detection unit 700 included in the display apparatus 100 simultaneously performs at least some of the content reproduction completion detection operations illustrated in FIGS. 13 to 16, thereby further improving the accuracy of content reproduction completion detection. It may be.
  • 17A to 17C are views illustrating an operation of reproducing various contents provided by a plurality of content providers by a display apparatus according to an exemplary embodiment.
  • the player 300 may play the first content 311 among the contents included in the playlist.
  • the first content 311 is content that can be played back by the player 300 (eg, local content stored in the display apparatus 100, etc.)
  • the player 300 directly displays the first content 311. Can play.
  • the player 300 may directly detect whether playback of the first content 311 is completed.
  • the player 300 may play the second content 314. If the second content 314 is content that is not played by the player 300 (eg, content is played through an application associated with a 'YoTube' content provider), the player 300 is associated with the 'YoTube'.
  • the application may request to play the second content 314. Accordingly, the application may play the second content 314 and display the playback screen as shown in FIG. 17B.
  • the controller 170 may control the playback completion detector 700 to detect whether the second content 314 played through the application is completed.
  • the operations for detecting whether the reproduction is completed may refer to the operations described above with reference to FIGS. 13 to 16.
  • the player 300 may play the third content 315 that is the next content of the second content 314. If the third content 315 is content that is not played by the player 300 (eg, content is played through an application associated with a 'Bogs' content provider), the player 300 is associated with a 'Bogs'.
  • the application may request to play the third content 315. Accordingly, the application may play the third content 315 and display the playback screen as shown in FIG. 17C.
  • the controller 170 may control the play completion detector 700 to detect whether the third content 315 is finished playing.
  • the display apparatus 100 may detect whether the content has been played. Content provided through various content providers may be sequentially provided. Accordingly, the user can manage and play content provided from various content providers as one playlist, thereby improving convenience.
  • the present invention described above can be embodied as computer readable codes on a medium in which a program is recorded.
  • the computer-readable medium includes all kinds of recording devices in which data that can be read by a computer system is stored. Examples of computer-readable media include hard disk drives (HDDs), solid state disks (SSDs), silicon disk drives (SDDs), ROMs, RAMs, CD-ROMs, magnetic tapes, floppy disks, optical data storage devices, and the like. This also includes implementations in the form of carrier waves (eg, transmission over the Internet).
  • the computer may include a controller of a display device. Accordingly, the above detailed description should not be construed as limiting in all aspects and should be considered as illustrative. The scope of the invention should be determined by reasonable interpretation of the appended claims, and all changes within the equivalent scope of the invention are included in the scope of the invention.

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Databases & Information Systems (AREA)
  • Human Computer Interaction (AREA)
  • Computer Security & Cryptography (AREA)
  • Library & Information Science (AREA)
  • Software Systems (AREA)
  • User Interface Of Digital Computer (AREA)
  • Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)

Abstract

본 발명의 실시 예에 따른 디스플레이 장치는, 디스플레이부, 제1 컨텐트 제공자로부터 제공되는 제1 컨텐트 및 제2 컨텐트 제공자로부터 제공되는 제2 컨텐트를 포함하는 재생 목록을 저장하는 저장부, 및 상기 재생 목록을 상기 디스플레이부를 통해 표시하고, 표시된 재생 목록에 포함된 상기 제1 컨텐트를 상기 제1 컨텐트 제공자와 관련된 애플리케이션을 통해 재생하고, 상기 제1 컨텐트의 재생 완료 여부를 감지하고, 감지 결과에 기초하여 상기 제2 컨텐트를 상기 제2 컨텐트 제공자와 관련된 애플리케이션을 통해 재생하는 제어부를 포함한다.

Description

디스플레이 장치
본 발명은 디스플레이 장치에 관한 것으로, 보다 상세하게는, 복수의 컨텐츠 제공자들로부터 제공되는 멀티미디어 컨텐츠를 통합하여 관리 및 재생할 수 있는 디스플레이 장치에 관한 것이다.
최근 널리 보급되는 스마트 TV, IPTV와 같은 디스플레이 장치는, 실시간 방송만을 제공하는 기존의 디스플레이 장치와 달리, 다양한 멀티미디어 컨텐츠를 사용자에게 제공할 수 있다.
상기 멀티미디어 컨텐츠는 다양한 컨텐트 제공자들(content providers)로부터 제공받을 수 있고, 컨텐트 제공자들은 멀티미디어 컨텐츠를 제공하기 위한 전용 애플리케이션(예컨대, 재생 애플리케이션)을 제공한다. 디스플레이 장치에 상기 전용 애플리케이션이 설치됨으로써, 사용자는 해당 컨텐트 제공자로부터 제공되는 멀티미디어 컨텐츠를 이용할 수 있다.
사용자가 이용하고자 하는 컨텐츠가 다양한 컨텐트 제공자들로부터 제공되는 경우, 사용자는 각 컨텐트를 이용하기 위해 복수의 전용 애플리케이션들을 수동으로 실행 및 종료시켜야 하므로, 컨텐츠 간의 연속적인 재생이 불가능하고 이용의 번거로움을 겪을 수 있다.
본 발명은 디스플레이 장치를 통한 멀티미디어 컨텐츠 이용시, 다양한 컨텐츠 제공자들로부터 제공되는 컨텐츠를 통합적으로 관리하고 재생하기 위한 방법을 제공하는 것에 그 목적이 있다.
본 발명의 실시 예에 따른 디스플레이 장치는, 디스플레이부, 제1 컨텐트 제공자로부터 제공되는 제1 컨텐트 및 제2 컨텐트 제공자로부터 제공되는 제2 컨텐트를 포함하는 재생 목록을 저장하는 저장부, 및 상기 재생 목록을 상기 디스플레이부를 통해 표시하고, 표시된 재생 목록에 포함된 상기 제1 컨텐트를 상기 제1 컨텐트 제공자와 관련된 애플리케이션을 통해 재생하고, 상기 제1 컨텐트의 재생 완료 여부를 감지하고, 감지 결과에 기초하여 상기 제2 컨텐트를 상기 제2 컨텐트 제공자와 관련된 애플리케이션을 통해 재생하는 제어부를 포함한다.
상기 제어부는 상기 디스플레이 장치에 설치된 멀티미디어 재생 애플리케이션이 실행되면, 실행된 멀티미디어 재생 애플리케이션에 대한 상기 재생 목록을 상기 디스플레이부를 통해 표시할 수 있다.
일 실시 예에 따라, 상기 제어부는 상기 디스플레이 장치를 통해 현재 제공되는 컨텐트에 대한 정보를 획득하고, 획득된 정보에 기초하여 적어도 하나의 검색 명령을 생성하고, 생성된 검색 명령을 이용하여 상기 현재 제공되는 컨텐트에 대한 적어도 하나의 연관 컨텐트를 검색하고, 검색된 적어도 하나의 연관 컨텐트를 상기 디스플레이부를 통해 표시할 수 있다.
상기 제어부는, 상기 검색된 적어도 하나의 연관 컨텐트를 포함하는 검색 결과 창을 상기 디스플레이부를 통해 표시하고, 상기 검색 결과 창은 상기 적어도 하나의 검색 명령 각각에 대응하는 적어도 하나의 검색 카테고리를 포함하고, 상기 적어도 하나의 연관 컨텐트 각각은 상기 적어도 하나의 검색 카테고리 중 어느 하나에 포함될 수 있다.
상기 제어부는, 상기 디스플레이부를 통해 표시되는 상기 적어도 하나의 연관 컨텐트 중 어느 하나의 연관 컨텐트를 상기 재생 목록에 추가하는 요청을 수신하고, 수신된 요청에 응답하여 상기 어느 하나의 연관 컨텐트를 상기 재생 목록에 추가할 수 있다.
상기 디스플레이 장치는 컨텐트의 재생 완료 여부를 감지하기 위한 재생 완료 감지부를 더 포함하고, 상기 제어부는, 상기 재생 완료 감지부에 의해 상기 제1 컨텐트의 재생이 완료된 것으로 감지된 경우, 상기 제2 컨텐트를 상기 제2 컨텐트 제공자와 관련된 애플리케이션을 통해 재생할 수 있다.
상기 재생 완료 감지부는, 상기 제1 컨텐트와 관련된 오디오 신호가 음향 출력부로 전송되는지 여부를 감지하고, 감지 결과 상기 오디오 신호가 상기 음향 출력부로 기준 시간동안 전송되지 않는 경우, 상기 제1 컨텐트의 재생이 완료된 것으로 감지할 수 있다.
상기 제어부는, 상기 제1 컨텐트의 재생 중 수신되는 음소거 명령에 응답하여 상기 제1 컨텐트의 오디오를 출력하지 않는 경우, 상기 재생 완료 감지부의 감지 동작을 비활성화할 수 있다.
상기 재생 완료 감지부는, 상기 제1 컨텐트와 관련된 비디오 신호가 상기 디스플레이부로 전송되는지 여부를 감지하고, 감지 결과 상기 비디오 신호가 상기 디스플레이부로 기준 시간동안 전송되지 않는 경우, 상기 제1 컨텐트의 재생이 완료된 것으로 감지할 수 있다.
상기 디스플레이부는, 상기 제1 컨텐트의 재생시 상기 제1 컨텐트 제공자와 관련된 애플리케이션의 재생 화면을 표시하고, 상기 재생 완료 감지부는, 상기 재생 화면에 포함된 재생 상태 정보를 영상 인식을 통해 인식하고, 인식된 재생 상태 정보를 이용하여 상기 제1 컨텐트의 재생 완료 여부를 감지할 수 있다.
본 발명의 다양한 실시 예에 따르면, 디스플레이 장치는 다양한 컨텐트 제공자들로부터 제공되는 컨텐츠를 하나의 재생 목록으로 관리하고 재생함으로써 사용자의 편의성을 향상시키는 효과가 있다.
또한, 사용자가 현재 재생 중인 멀티미디어 컨텐트와 관련된 연관 컨텐트를 재생 목록에 추가하고자 하는 경우, 해당 연관 컨텐트를 편리하게 검색하고 검색된 연관 컨텐트를 재생 목록에 손쉽게 추가할 수 있는 기능을 제공함으로써 이용 편의성을 향상시킬 수 있다.
도 1은 본 발명의 일 실시 예에 따른 디스플레이 장치의 구성을 블록도로 도시한 것이다.
도 2는 본 발명의 일 실시 예에 따른 원격제어장치의 블록도이다.
도 3은 본 발명의 일 실시 예에 따른 원격제어장치의 실제 구성 예를 보여준다.
도 4는 본 발명의 실시 예에 따라 원격 제어 장치를 활용하는 예를 보여준다.
도 5는 본 발명의 실시 예에 따른 디스플레이 장치의 동작 방법을 설명하기 위한 플로우차트이다.
도 6은 디스플레이 장치에 설치된 멀티미디어 재생 애플리케이션이 실행되는 경우 표시되는 화면에 대한 일 실시 예를 보여주는 도면이다.
도 7은 본 발명의 실시 예에 따른 디스플레이 장치가, 현재 제공 중인 컨텐트와 관련된 적어도 하나의 컨텐트를 재생 목록에 추가하는 동작을 설명하기 위한 플로우차트이다.
도 8a 내지 도 8b는 멀티미디어 재생 애플리케이션을 통해 제공되는 컨텐트와 관련된 적어도 하나의 컨텐트를 검색하고, 검색된 적어도 하나의 컨텐트를 표시하는 동작에 대한 실시 예를 보여주는 도면이다.
도 9a 내지 도 9c는 도 8a 내지 도 8b에 도시된 실시 예에 따라 검색된 컨텐트를 재생 목록에 추가하는 동작에 대한 실시 예를 보여주는 도면이다.
도 10은 디스플레이 장치를 통해 제공되는 실시간 방송 컨텐트의 정보에 기초하여 관련 컨텐트를 검색하고, 검색된 컨텐트를 재생 목록에 추가하는 실시 예를 설명하기 위한 도면이다.
도 11a 내지 도 11b는 컨텐트와 관련된 아티스트에 대한 각종 정보를 제공하는 실시 예를 보여주는 도면이다.
도 12는 본 발명의 실시 예에 따른 디스플레이 장치가, 재생 목록의 특정 컨텐트의 재생 완료를 감지하여 다음 컨텐트의 재생을 제어하는 동작을 설명하기 위한 도면이다.
도 13 내지 도 16은 도 12에 도시된 재생 완료 감지부가 컨텐트의 재생 완료를 감지하는 다양한 실시 예들을 보여주는 도면들이다.
도 17a 내지 도 17c는 본 발명의 실시 예에 따른 디스플레이 장치가 복수의 컨텐츠 제공자들로부터 제공되는 다양한 컨텐츠를 재생하는 동작을 보여주는 도면들이다.
이하, 첨부된 도면을 참조하여 본 명세서에 개시된 실시 예를 상세히 설명하되, 도면 부호에 관계없이 동일하거나 유사한 구성요소는 동일한 참조 번호를 부여하고 이에 대한 중복되는 설명은 생략하기로 한다. 이하의 설명에서 사용되는 구성요소에 대한 접미사 "모듈" 및 "부"는 명세서 작성의 용이함만이 고려되어 부여되거나 혼용되는 것으로서, 그 자체로 서로 구별되는 의미 또는 역할을 갖는 것은 아니다. 또한, 본 명세서에 개시된 실시 예를 설명함에 있어서 관련된 공지 기술에 대한 구체적인 설명이 본 명세서에 개시된 실시 예의 요지를 흐릴 수 있다고 판단되는 경우 그 상세한 설명을 생략한다. 또한, 첨부된 도면은 본 명세서에 개시된 실시 예를 쉽게 이해할 수 있도록 하기 위한 것일 뿐, 첨부된 도면에 의해 본 명세서에 개시된 기술적 사상이 제한되지 않으며, 본 발명의 사상 및 기술 범위에 포함되는 모든 변경, 균등물 내지 대체물을 포함하는 것으로 이해되어야 한다.
제1, 제2 등과 같이 서수를 포함하는 용어는 다양한 구성요소들을 설명하는데 사용될 수 있지만, 상기 구성요소들은 상기 용어들에 의해 한정되지는 않는다. 상기 용어들은 하나의 구성요소를 다른 구성요소로부터 구별하는 목적으로만 사용된다.
어떤 구성요소가 다른 구성요소에 "연결되어" 있다거나 "접속되어" 있다고 언급된 때에는, 그 다른 구성요소에 직접적으로 연결되어 있거나 또는 접속되어 있을 수도 있지만, 중간에 다른 구성요소가 존재할 수도 있다고 이해되어야 할 것이다. 반면에, 어떤 구성요소가 다른 구성요소에 "직접 연결되어" 있다거나 "직접 접속되어" 있다고 언급된 때에는, 중간에 다른 구성요소가 존재하지 않는 것으로 이해되어야 할 것이다.
단수의 표현은 문맥상 명백하게 다르게 뜻하지 않는 한, 복수의 표현을 포함한다.
본 출원에서, "포함한다" 또는 "가지다" 등의 용어는 명세서상에 기재된 특징, 숫자, 단계, 동작, 구성요소, 부품 또는 이들을 조합한 것이 존재함을 지정하려는 것이지, 하나 또는 그 이상의 다른 특징들이나 숫자, 단계, 동작, 구성요소, 부품 또는 이들을 조합한 것들의 존재 또는 부가 가능성을 미리 배제하지 않는 것으로 이해되어야 한다.
이하, 본 명세서에 첨부된 도면들을 참조하여 본 발명의 실시 예들을 상세히 설명한다.
도 1은 본 발명의 일 실시 예에 따른 디스플레이 장치의 구성을 블록도로 도시한 것이다.
도 1을 참조하면, 디스플레이 장치(100)는 TV, 모니터, 프로젝터 또는 이를 포함하는 장치 등으로 구현될 수 있다.
디스플레이 장치(100)는 방송 수신부(130), 외부기기 인터페이스부(135), 저장부(140), 사용자입력 인터페이스부(150), 카메라(160), 제어부(170), 디스플레이부(180), 오디오 출력부(185), 및 전원공급부(190)를 포함할 수 있다.
방송 수신부(130)는 튜너(131), 복조부(132) 및 네트워크 인터페이스부 (133)를 포함할 수 있다.
튜너(131)는 채널 선국 명령에 따라 특정 방송 채널을 선국할 수 있다. 튜너 (131)는 선국된 특정 방송 채널에 대한 방송 신호를 수신할 수 있다.
복조부(132)는 수신한 방송 신호를 비디오 신호, 오디오 신호, 방송 프로그램과 관련된 데이터 신호로 분리할 수 있고, 분리된 비디오 신호, 오디오 신호 및 데이터 신호를 출력이 가능한 형태로 복원할 수 있다.
네트워크 인터페이스부(133)는 디스플레이 장치(100)를 인터넷망을 포함하는 유/무선 네트워크와 연결하기 위한 인터페이스를 제공할 수 있다. 네트워크 인터페이스부(133)는 접속된 네트워크 또는 접속된 네트워크에 링크된 다른 네트워크를 통해, 다른 사용자 또는 다른 전자 기기와 데이터를 송신 또는 수신할 수 있다.
또한, 디스플레이 장치(100)에 미리 등록된 다른 사용자 또는 다른 전자 기기 중 선택된 사용자 또는 선택된 전자기기에, 디스플레이 장치(100)에 저장된 일부의 컨텐츠 데이터를 송신할 수 있다.
네트워크 인터페이스부(133)는 접속된 네트워크 또는 접속된 네트워크에 링크된 다른 네트워크를 통해, 소정 웹 페이지에 접속할 수 있다. 즉, 네트워크를 통해 소정 웹 페이지에 접속하여, 해당 서버와 데이터를 송신 또는 수신할 수 있다.
그리고, 네트워크 인터페이스부(133)는 컨텐츠 제공자 또는 네트워크 운영자가 제공하는 컨텐츠 또는 데이터들을 수신할 수 있다. 즉, 네트워크 인터페이스부(133)는 네트워크를 통하여 컨텐츠 제공자 또는 네트워크 제공자로부터 제공되는 영화, 광고, 게임, VOD, 방송 신호 등의 컨텐츠 및 그와 관련된 정보를 수신할 수 있다.
또한, 네트워크 인터페이스부(133)는 네트워크 운영자가 제공하는 펌웨어의 업데이트 정보 및 업데이트 파일을 수신할 수 있으며, 인터넷 또는 컨텐츠 제공자 또는 네트워크 운영자에게 데이터들을 송신할 수 있다.
네트워크 인터페이스부(133)는 네트워크를 통해, 공중에 공개(open)된 애플리케이션들 중 원하는 애플리케이션을 선택하여 수신할 수 있다.
외부기기 인터페이스부(135)는 인접하는 외부 장치 내의 애플리케이션 또는 애플리케이션 목록을 수신하여, 제어부(170) 또는 저장부(140)로 전달할 수 있다.
외부기기 인터페이스부(135)는 디스플레이 장치(100)와 외부장치 간의 연결 경로를 제공할 수 있다. 디스플레이 장치(100)는 외부기기 인터페이스부(135)를 통해 외부장치와 유선 또는 무선으로 연결될 수 있다.
외부기기 인터페이스부(135)는 외부장치로부터 출력된 영상, 오디오 중 하나 이상을 수신하여, 제어부(170)로 전달할 수 있다. 외부기기 인터페이스부(135)에 연결 가능한 외부장치는 셋톱박스, 블루레이 플레이어, DVD 플레이어, 게임기, 사운드 바, 스마트폰과 같은 이동 단말기, PC, USB 메모리, 홈 씨어터 중 어느 하나일 수 있다.
저장부(140)는 제어부(170) 내의 각 신호 처리 및 제어를 위한 프로그램을 저장하고, 신호 처리된 영상, 음성 또는 데이터신호를 저장할 수 있다.
또한, 저장부(140)는 외부기기 인터페이스부(135), 네트워크 인터페이스부 (133), 또는 카메라(160)로부터 입력되는 영상, 음성, 또는 데이터 신호의 임시 저장을 위한 기능을 수행할 수도 있으며, 채널 기억 기능을 통하여 소정 이미지에 관한 정보를 저장할 수도 있다.
저장부(140)는 외부기기 인터페이스부(135) 또는 네트워크 인터페이스부 (133)로부터 입력되는 애플리케이션 또는 애플리케이션 목록을 저장할 수 있다.
디스플레이 장치(100)는 저장부(140) 내에 저장되어 있는 컨텐츠 파일 (동영상 파일, 정지영상 파일, 음악 파일, 문서 파일, 애플리케이션 파일 등)을 재생하여 사용자에게 제공할 수 있다.
사용자입력 인터페이스부(150)는 사용자가 입력한 신호를 제어부(170)로 전달하거나, 제어부(170)로부터의 신호를 사용자에게 전달할 수 있다. 예를 들어, 사용자입력 인터페이스부(150)는 블루투스(Bluetooth), UWB(Ultra Wideband), 지그비(ZigBee) 방식, RF(Radio Frequency) 통신 방식 또는 적외선(IR) 통신 방식 등 다양한 통신 방식에 따라, 원격제어장치(200)로부터 전원 온/오프, 채널 선택, 화면 설정 등의 제어 신호를 수신하여 처리하거나, 제어부(170)로부터의 제어 신호를 원격제어장치(200)로 송신하도록 처리할 수 있다.
또한, 사용자입력 인터페이스부(150)는, 전원키, 채널키, 볼륨키, 설정치 등의 로컬키(미도시)에서 입력되는 제어 신호를 제어부(170)에 전달할 수 있다.
제어부(170)에서 영상 처리된 영상 신호는 디스플레이부(180)로 입력되어 해당 영상 신호에 대응하는 영상으로 표시될 수 있다. 또한, 제어부(170)에서 영상 처리된 영상 신호는 외부기기 인터페이스부(135)를 통하여 외부 출력장치로 입력될 수 있다.
제어부(170)에서 처리된 음성 신호는 오디오 출력부(185)로 오디오 출력될 수 있다. 또한, 제어부(170)에서 처리된 음성 신호는 외부기기 인터페이스부 (135)를 통하여 외부 출력장치로 입력될 수 있다.
그 외, 제어부(170)는, 디스플레이 장치(100) 내의 전반적인 동작을 제어할 수 있다.
또한, 제어부(170)는 사용자입력 인터페이스부(150)를 통하여 입력된 사용자 명령 또는 내부 프로그램에 의하여 디스플레이 장치(100)를 제어할 수 있으며, 네트워크에 접속하여 사용자가 원하는 애플리케이션 또는 애플리케이션 목록을 디스플레이 장치(100) 내로 다운받을 수 있도록 할 수 있다.
제어부(170)는 사용자가 선택한 채널 정보 등이 처리한 영상 또는 음성신호와 함께 디스플레이부(180) 또는 오디오 출력부(185)를 통하여 출력될 수 있도록 한다.
또한, 제어부(170)는 사용자입력 인터페이스부(150)를 통하여 수신한 외부장치 영상 재생 명령에 따라, 외부기기 인터페이스부(135)를 통하여 입력되는 외부 장치, 예를 들어, 카메라 또는 캠코더로부터의, 영상 신호 또는 음성 신호가 디스플레이부(180) 또는 오디오 출력부(185)를 통해 출력될 수 있도록 한다.
한편, 제어부(170)는 영상을 표시하도록 디스플레이부(180)를 제어할 수 있으며, 예를 들어 튜너(131)를 통해 입력되는 방송 영상, 또는 외부기기 인터페이스부(135)를 통해 입력되는 외부 입력 영상, 또는 네트워크 인터페이스부를 통해 입력되는 영상, 또는 저장부(140)에 저장된 영상이 디스플레이부(180)에서 표시되도록 제어할 수 있다. 이 경우, 디스플레이부(180)에 표시되는 영상은 정지 영상 또는 동영상일 수 있으며, 2D 영상 또는 3D 영상일 수 있다.
또한, 제어부(170)는 디스플레이 장치(100) 내에 저장된 컨텐츠, 또는 수신된 방송 컨텐츠, 외부로부터 입력되는 외부 입력 컨텐츠가 재생되도록 제어할 수 있으며, 상기 컨텐츠는 방송 영상, 외부 입력 영상, 오디오 파일, 정지 영상, 접속된 웹 화면, 및 문서 파일 등 다양한 형태일 수 있다.
디스플레이부(180)는 제어부(170)에서 처리된 영상 신호, 데이터 신호, OSD 신호 또는 외부기기 인터페이스부(135)에서 수신되는 영상 신호, 데이터 신호 등을 각각 R,G,B 신호로 변환하여 구동 신호를 생성할 수 있다.
한편, 도 1에 도시된 디스플레이 장치(100)는 본 발명의 일 실시 예에 불과하므로. 도시된 구성요소들 중 일부는 실제 구현되는 디스플레이 장치(100)의 사양에 따라 통합, 추가, 또는 생략될 수 있다.
즉, 필요에 따라 2 이상의 구성요소가 하나의 구성요소로 합쳐지거나, 혹은 하나의 구성요소가 2 이상의 구성요소로 세분되어 구성될 수 있다. 또한, 각 블록에서 수행하는 기능은 본 발명의 실시예를 설명하기 위한 것이며, 그 구체적인 동작이나 장치는 본 발명의 권리범위를 제한하지 아니한다.
본 발명의 또 다른 실시예에 따르면, 디스플레이 장치(100)는 도 1에 도시된 바와 달리, 튜너(131)와 복조부(132)를 구비하지 않고 네트워크 인터페이스부(133) 또는 외부기기 인터페이스부(135)를 통해서 영상을 수신하여 재생할 수도 있다.
예를 들어, 디스플레이 장치(100)는 방송 신호 또는 다양한 네트워크 서비스에 따른 컨텐츠들을 수신하기 위한 등과 같은 셋탑 박스 등과 같은 영상 처리 장치와 상기 영상 처리 장치로부터 입력되는 컨텐츠를 재생하는 컨텐츠 재생 장치로 분리되어 구현될 수 있다.
이 경우, 이하에서 설명할 본 발명의 실시예에 따른 디스플레이 장치의 동작 방법은 도 1을 참조하여 설명한 바와 같은 디스플레이 장치(100)뿐 아니라, 상기 분리된 셋탑 박스 등과 같은 영상 처리 장치 또는 디스플레이부(180) 및 오디오 출력부(185)를 구비하는 컨텐츠 재생 장치 중 어느 하나에 의해 수행될 수도 있다.
다음으로, 도 2 내지 도 3을 참조하여, 본 발명의 일 실시 예에 따른 원격제어장치에 대해 설명한다.
도 2는 본 발명의 일 실시 예에 따른 원격제어장치의 블록도이고, 도 3은 본 발명의 일 실시 예에 따른 원격제어장치의 실제 구성 예를 보여준다.
먼저, 도 2를 참조하면, 원격제어장치(200)는 지문인식부(210), 무선통신부 (220), 사용자 입력부(230), 센서부(240), 출력부(250), 전원공급부(260), 저장부 (270), 제어부(280), 음성 획득부(290)를 포함할 수 있다.
도 2를 참조하면, 무선통신부(220)는 전술하여 설명한 본 발명의 실시 예에 따른 디스플레이 장치와 신호를 송수신한다.
원격제어장치(200)는 RF 통신규격에 따라 디스플레이 장치(100)와 신호를 송수신할 수 있는 RF 모듈(221)을 구비하며, IR 통신규격에 따라 디스플레이 장치(100)와 신호를 송수신할 수 있는 IR 모듈(223)을 구비할 수 있다. 또한, 원격제어장치(200)는 블루투스 통신규격에 따라 디스플레이 장치(100)와 신호를 송수신할 수 있는 블루투스 모듈(225)을 구비할 수 있다. 또한, 원격제어장치 (200)는 NFC(Near Field Communication) 통신 규격에 따라 디스플레이 장치(100)와 신호를 송수할 수 있는 NFC 모듈(227)을 구비하며, WLAN(Wireless LAN) 통신 규격에 따라 디스플레이 장치(100)와 신호를 송수신할 수 있는 WLAN 모듈(229)을 구비할 수 있다.
또한, 원격제어장치(200)는 디스플레이 장치(100)로 원격제어장치(200)의 움직임 등에 관한 정보가 담긴 신호를 무선 통신부(220)를 통해 전송한다.
한편, 원격제어장치(200)는 디스플레이 장치(100)가 전송한 신호를 RF 모듈(221)을 통하여 수신할 수 있으며, 필요에 따라 IR 모듈(223)을 통하여 디스플레이 장치(100)로 전원 온/오프, 채널 변경, 볼륨 변경 등에 관한 명령을 전송할 수 있다.
사용자 입력부(230)는 키패드, 버튼, 터치 패드, 또는 터치 스크린 등으로 구성될 수 있다. 사용자는 사용자 입력부(230)를 조작하여 원격제어장치(200)로 디스플레이 장치(100)와 관련된 명령을 입력할 수 있다. 사용자 입력부(230)가 하드키 버튼을 구비할 경우 사용자는 하드키 버튼의 푸쉬 동작을 통하여 원격제어장치(200)로 디스플레이 장치(100)와 관련된 명령을 입력할 수 있다. 이에 대해서는 도 3을 참조하여 설명한다.
도 3을 참조하면, 원격제어장치(200)는 복수의 버튼을 포함할 수 있다. 복수의 버튼은 지문 인식 버튼(212), 전원 버튼(231), 홈 버튼(232), 라이브 버튼(233), 외부 입력 버튼(234), 음량 조절 버튼(235), 음성 인식 버튼(236), 채널 변경 버튼(237), 확인 버튼(238) 및 뒤로 가기 버튼(239)을 포함할 수 있다.
지문 인식 버튼(212)은 사용자의 지문을 인식하기 위한 버튼일 수 있다. 일 실시예로, 지문 인식 버튼(212)은 푸쉬 동작이 가능하여, 푸쉬 동작 및 지문 인식 동작을 수신할 수도 있다. 전원 버튼(231)은 디스플레이 장치(100)의 전원을 온/오프 하기 위한 버튼일 수 있다. 홈 버튼(232)은 디스플레이 장치(100)의 홈 화면으로 이동하기 위한 버튼일 수 있다. 라이브 버튼(233)은 실시간 방송 프로그램을 디스플레이 하기 위한 버튼일 수 있다. 외부 입력 버튼(234)은 디스플레이 장치(100)에 연결된 외부 입력을 수신하기 위한 버튼일 수 있다. 음량 조절 버튼(235)은 디스플레이 장치(100)가 출력하는 음량의 크기를 조절하기 위한 버튼일 수 있다. 음성 인식 버튼(236)은 사용자의 음성을 수신하고, 수신된 음성을 인식하기 위한 버튼일 수 있다. 채널 변경 버튼(237)은 특정 방송 채널의 방송 신호를 수신하기 위한 버튼일 수 있다. 확인 버튼(238)은 특정 기능을 선택하기 위한 버튼일 수 있고, 뒤로 가기 버튼(239)은 이전 화면으로 되돌아가기 위한 버튼일 수 있다.
다시 도 2를 설명한다.
사용자 입력부(230)가 터치스크린을 구비할 경우 사용자는 터치스크린의 소프트키를 터치하여 원격제어장치(200)로 디스플레이 장치(100)와 관련된 명령을 입력할 수 있다. 또한, 사용자 입력부(230)는 스크롤 키나, 조그 키 등 사용자가 조작할 수 있는 다양한 종류의 입력수단을 구비할 수 있으며 본 실시 예는 본 발명의 권리범위를 제한하지 아니한다.
센서부(240)는 자이로 센서(241) 또는 가속도 센서(243)를 구비할 수 있으며, 자이로 센서(241)는 원격제어장치(200)의 움직임에 관한 정보를 센싱할 수 있다.
예를 들어, 자이로 센서(241)는 원격제어장치(200)의 동작에 관한 정보를 x,y,z 축을 기준으로 센싱할 수 있으며, 가속도 센서(243)는 원격제어장치(200)의 이동속도 등에 관한 정보를 센싱할 수 있다. 한편, 원격제어장치(200)는 거리측정센서를 더 구비할 수 있어, 디스플레이 장치(100)의 디스플레이부 (180)와의 거리를 센싱할 수 있다.
출력부(250)는 사용자 입력부(235)의 조작에 대응하거나 디스플레이 장치(100)에서 전송한 신호에 대응하는 영상 또는 음성 신호를 출력할 수 있다. 출력부(250)를 통하여 사용자는 사용자 입력부(235)의 조작 여부 또는 디스플레이 장치(100)의 제어 여부를 인지할 수 있다.
예를 들어, 출력부(250)는 사용자 입력부(235)가 조작되거나 무선 통신부(225)를 통하여 디스플레이 장치(100)와 신호가 송수신되면 점등되는 LED 모듈(251), 진동을 발생하는 진동 모듈(253), 음향을 출력하는 음향 출력 모듈(255), 또는 영상을 출력하는 디스플레이 모듈(257)을 구비할 수 있다.
또한, 전원공급부(260)는 원격제어장치(200)로 전원을 공급하며, 원격제어장치(200)가 소정 시간 동안 움직이지 않은 경우 전원 공급을 중단함으로써 전원 낭비를 줄일 수 있다. 전원공급부(260)는 원격제어장치(200)에 구비된 소정 키가 조작된 경우에 전원 공급을 재개할 수 있다.
저장부(270)는 원격제어장치(200)의 제어 또는 동작에 필요한 여러 종류의 프로그램, 애플리케이션 데이터 등이 저장될 수 있다. 만일 원격제어장치(200)가 디스플레이 장치(100)와 RF 모듈(221)을 통하여 무선으로 신호를 송수신할 경우 원격제어장치(200)과 디스플레이 장치(100)는 소정 주파수 대역을 통하여 신호를 송수신한다.
원격제어장치(200)의 제어부(280)는 원격제어장치(200)와 페어링된 디스플레이 장치(100)와 신호를 무선으로 송수신할 수 있는 주파수 대역 등에 관한 정보를 저장부(270)에 저장하고 참조할 수 있다.
제어부(280)는 원격제어장치(200)의 제어에 관련된 제반사항을 제어한다. 제어부(280)는 사용자 입력부(235)의 소정 키 조작에 대응하는 신호 또는 센서부(240)에서 센싱한 원격제어장치(200)의 움직임에 대응하는 신호를 무선 통신부(220)를 통하여 디스플레이 장치(100)로 전송할 수 있다.
또한, 원격제어장치(200)의 음성 획득부(290)는 음성을 획득할 수 있다.
음성 획득부(290)는 적어도 하나 이상의 마이크를 포함할 수 있고, 마이크를 통해 음성을 획득할 수 있다.
다음으로 도 4를 설명한다.
도 4는 본 발명의 실시 예에 따라 원격 제어 장치를 활용하는 예를 보여준다.
도 4의 (a)는 원격 제어 장치(200)에 대응하는 포인터(205)가 디스플레이부 (180)에 표시되는 것을 예시한다.
사용자는 원격 제어 장치(200)를 상하, 좌우로 움직이거나 회전할 수 있다. 디스플레이 장치(100)의 디스플레이부(180)에 표시된 포인터(205)는 원격 제어 장치(200)의 움직임에 대응한다. 이러한 원격 제어 장치(200)는, 도면과 같이, 3D 공간 상의 움직임에 따라 해당 포인터(205)가 이동되어 표시되므로, 공간 리모콘이라 명명할 수 있다.
도 4의 (b)는 사용자가 원격 제어 장치(200)를 왼쪽으로 이동하면, 디스플레이 장치(100)의 디스플레이부(180)에 표시된 포인터(205)도 이에 대응하여 왼쪽으로 이동하는 것을 예시한다.
원격 제어 장치(200)의 센서를 통하여 감지된 원격 제어 장치(200)의 움직임에 관한 정보는 디스플레이 장치(100)로 전송된다. 디스플레이 장치(100)는 원격 제어 장치(200)의 움직임에 관한 정보로부터 포인터(205)의 좌표를 산출할 수 있다. 디스플레이 장치(100)는 산출한 좌표에 대응하도록 포인터(205)를 표시할 수 있다.
도 4의 (c)는, 원격 제어 장치(200) 내의 특정 버튼을 누른 상태에서, 사용자가 원격 제어 장치(200)를 디스플레이부(180)에서 멀어지도록 이동하는 경우를 예시한다. 이에 의해, 포인터(205)에 대응하는 디스플레이부(180) 내의 선택 영역이 줌인되어 확대 표시될 수 있다.
이와 반대로, 사용자가 원격 제어 장치(200)를 디스플레이부(180)에 가까워지도록 이동하는 경우, 포인터(205)에 대응하는 디스플레이부(180) 내의 선택 영역이 줌아웃되어 축소 표시될 수 있다.
한편, 원격 제어 장치(200)가 디스플레이부(180)에서 멀어지는 경우, 선택 영역이 줌아웃되고, 원격 제어 장치(200)가 디스플레이부(180)에 가까워지는 경우, 선택 영역이 줌인될 수도 있다.
또한, 원격 제어 장치(200) 내의 특정 버튼을 누른 상태에서는 상하, 좌우 이동의 인식이 배제될 수 있다. 즉, 원격 제어 장치(200)가 디스플레이부(180)에서 멀어지거나 접근하도록 이동하는 경우, 상, 하, 좌, 우 이동은 인식되지 않고, 앞뒤 이동만 인식되도록 할 수 있다. 원격 제어 장치(200) 내의 특정 버튼을 누르지 않은 상태에서는, 원격 제어 장치(200)의 상, 하, 좌, 우 이동에 따라 포인터(205)만 이동하게 된다.
한편, 포인터(205)의 이동속도나 이동방향은 원격 제어 장치(200)의 이동속도나 이동방향에 대응할 수 있다.
한편, 본 명세서에서의 포인터는, 원격 제어 장치(200)의 동작에 대응하여, 디스플레이부(180)에 표시되는 오브젝트를 의미한다. 따라서, 포인터(205)로 도면에 도시된 화살표 형상 외에 다양한 형상의 오브젝트가 가능하다. 예를 들어, 점, 커서, 프롬프트, 두꺼운 외곽선 등을 포함하는 개념일 수 있다. 그리고, 포인터(205)가 디스플레이부(180) 상의 가로축과 세로축 중 어느 한 지점(point)에 대응하여 표시되는 것은 물론, 선(line), 면(surface) 등 복수 지점에 대응하여 표시되는 것도 가능하다.
도 5는 본 발명의 실시 예에 따른 디스플레이 장치의 동작 방법을 설명하기 위한 플로우차트이다.
도 5를 참조하면, 디스플레이 장치(100)는 멀티미디어 재생 애플리케이션을 실행할 수 있다(S100).
구체적으로, 디스플레이 장치(100)의 제어부(170)는 멀티미디어 재생 애플리케이션 실행 요청에 응답하여, 디스플레이 장치(100)에 설치되어 저장부(140)에 저장된 멀티미디어 재생 애플리케이션을 실행할 수 있다. 상기 멀티미디어 재생 애플리케이션은 일종의 음악 플레이어를 의미할 수 있으나, 이에 한정되는 것은 아니고 다양한 형태의 멀티미디어 컨텐트를 재생할 수 있는 애플리케이션을 의미할 수도 있다.
멀티미디어 재생 애플리케이션이 실행된 디스플레이 장치(100)는, 제1 컨텐트 제공자로부터 제공되는 제1 컨텐트와, 제2 컨텐트 제공자로부터 제공되는 제2 컨텐트를 포함하는 재생 목록을 로드할 수 있다(S110).
즉, 본 발명의 실시 예에 의하면, 상기 멀티미디어 재생 애플리케이션에 대한 재생 목록은 복수의 컨텐트 제공자들로부터 제공되는 다양한 컨텐츠를 포함할 수 있다. 상기 복수의 컨텐트 제공자들은 음원 스트리밍 서비스 플랫폼, 멀티미디어 컨텐츠 스트리밍 서비스 플랫폼, 음원 다운로드 서비스 플랫폼 등의 다양한 컨텐츠 제공 서비스 플랫폼들을 포함할 수 있다. 특히, 상기 복수의 컨텐트 제공자들은 디스플레이 장치(100) 자체를 포함할 수 있고, 이 경우 디스플레이 장치(100)가 제공하는 컨텐츠는 저장부(140)에 저장된 멀티미디어 컨텐츠를 의미할 수 있다. 일반적으로, 상기 복수의 컨텐트 제공자들은 전용 애플리케이션을 이용하여 각자의 컨텐츠를 제공할 수 있다.
본 발명의 실시 예에 따른 디스플레이 장치(100)는, 다양한 컨텐트 제공자들로부터 제공되는 컨텐츠를 하나의 재생 목록에 추가할 수 있다. 이와 관련하여, 도 6 내지 도 11b를 참조하여 보다 상세히 설명하기로 한다.
도 6은 디스플레이 장치에 설치된 멀티미디어 재생 애플리케이션이 실행되는 경우 표시되는 화면에 대한 일 실시 예를 보여주는 도면이다.
도 6을 참조하면, 디스플레이 장치(100)의 제어부(170)는 멀티미디어 재생 애플리케이션의 실행 요청에 응답하여 멀티미디어 재생 애플리케이션을 실행할 수 있다. 상기 실행 요청은 디스플레이부(180)를 통해 표시되는 멀티미디어 재생 애플리케이션 아이콘(미도시)을 선택하는 입력을 의미할 수 있으나, 이에 한정되는 것은 아니고 다양한 형태로 구현될 수 있다.
제어부(170)는 실행된 멀티미디어 재생 애플리케이션에 대한 재생 목록을 저장부(140)로부터 로드할 수 있다. 실시 예에 따라, 상기 재생 목록이 저장부(140) 대신 별도의 서버(또는 데이터베이스 서버)에 저장되는 경우, 제어부(170)는 서버로부터 상기 재생 목록을 수신하고, 수신한 재생 목록을 로드할 수도 있다. 재생 목록은 복수의 컨텐츠 각각의 명칭(타이틀), 썸네일 이미지, URL(uniform resource locator) 등을 포함할 수 있다. 제어부(170)는 로드된 재생 목록을 멀티미디어 재생 애플리케이션의 실행 화면(310) 상에 표시할 수 있다.
제어부(170)는 멀티미디어 재생 애플리케이션의 실행 화면(310)을 디스플레이부(180)를 통해 표시할 수 있다. 도 6에는 현재 디스플레이부(180)를 통해 표시되는 컨텐트(예컨대, 방송 컨텐트 등; 181) 상에 실행 화면(310)이 표시되는 것으로 도시되어 있으나, 실시 예에 따라 제어부(170)는 멀티미디어 재생 애플리케이션이 실행되면, 디스플레이부(180)를 통해 실행 화면(310)만을 표시하고 컨텐트(181)를 표시하지 않거나 디스플레이부(180)의 일부 영역에 컨텐트(181)를 표시할 수도 있다. 즉, 멀티미디어 재생 애플리케이션 실행시 실행 화면(310) 및 현재 제공되는 컨텐트(181)는 다양한 형태로 표시될 수 있다.
멀티미디어 재생 애플리케이션의 실행 화면(310)은 로드된 재생 목록을 표시할 수 있다. 즉, 실행 화면(310)은 재생 목록에 포함된 복수의 컨텐츠 각각의 썸네일 이미지(311), 현재 재생중인 컨텐트의 파일명, 컨텐트의 재생 상태를 표시하는 프로그레스 바(312), 및 멀티미디어 재생 애플리케이션의 종료를 위한 종료 아이콘(313) 등을 포함할 수 있다.
상술한 바와 같이, 재생 목록은 복수의 컨텐트 제공자들로부터 제공되는 다양한 컨텐츠를 포함할 수 있다. 상기 재생 목록을 이용하여, 본 발명의 실시 예에 따른 디스플레이 장치(100)는 서로 다른 컨텐트 제공자들로부터 제공되는 복수의 컨텐츠를 연속적으로 재생할 수 있고, 복수의 컨텐츠를 통합하여 관리할 수 있다. 이하, 도 7 내지 도 10을 참조하여 다양한 컨텐츠를 재생 목록에 추가하는 실시 예들에 대해 설명하기로 한다.
도 7은 본 발명의 실시 예에 따른 디스플레이 장치가, 현재 제공 중인 컨텐트와 관련된 적어도 하나의 컨텐트를 재생 목록에 추가하는 동작을 설명하기 위한 플로우차트이다.
도 7을 참조하면, 디스플레이 장치(100)는 현재 제공되는 컨텐트에 대한 정보를 획득할 수 있다(S200). 여기서, 현재 제공되는 컨텐트는 멀티미디어 재생 애플리케이션을 통해 재생 중인 컨텐트, 튜너(131)를 통해 수신되어 출력되는 방송 컨텐트, 또는 네트워크 인터페이스부(133)나 외부기기 인터페이스부(135)를 통해 수신되어 출력되는 각종 컨텐트를 의미할 수 있으나, 이에 한정되는 것은 아니다.
제어부(170)는 컨텐트가 재생(또는 출력)될 때, 재생되는 컨텐트에 대한 정보를 저장부(140)에 저장할 수 있다. 재생되는 컨텐트가 변경되는 경우, 저장부(140)에 저장되는 컨텐트에 대한 정보는 업데이트될 수 있다. 컨텐트에 대한 정보는 컨텐트의 타이틀, 아티스트, 장르 등과 같은 다양한 정보를 의미할 수 있다.
제어부(170)는 사용자 입력 인터페이스부(150) 등을 통해 검색 요청을 수신하고, 수신된 검색 요청에 응답하여 저장부(140)에 저장된 상기 컨텐트에 대한 정보를 획득할 수 있다.
디스플레이 장치(100)는 획득된 정보에 기초하여, 현재 제공되는 컨텐트와 관련된 적어도 하나의 컨텐트를 검색할 수 있다(S210). 실시 예에 따라, 디스플레이 장치(100)는 검색 모듈을 포함하고, 제어부(170)는 검색 모듈의 동작을 제어하여 검색 동작을 수행할 수 있다.
구체적으로, 검색 모듈은 S200 단계에 따라 획득된 컨텐트에 대한 정보에 기초하여 적어도 하나의 검색 명령을 생성할 수 있다. 예컨대, 검색 명령은 검색어, 및 검색 루트(검색 위치 또는 검색할 컨텐트 제공자 등)을 포함할 수 있으나, 이에 한정되는 것은 아니다.
제어부(170; 또는 검색 모듈)는 생성된 검색 명령을 이용하여 검색 동작을 수행할 수 있다. 구체적으로, 제어부(170)는 검색 명령에 포함된 컨텐트 제공자의 서버에서 상기 검색 명령에 포함된 검색어를 이용한 검색 동작을 수행하고, 검색 결과로서 상기 검색어와 관련된 컨텐츠의 정보를 수신할 수 있다. 상기 검색어는 현재 제공되는 컨텐트의 정보에 기초하여 생성된 것이므로, 검색된 적어도 하나의 컨텐트는 현재 제공되는 컨텐트와 관련된 컨텐트일 수 있다.
디스플레이 장치(100)는 검색된 적어도 하나의 컨텐트를 재생 목록에 추가할 수 있다(S220). 구체적으로, 제어부(170)는 S210 단계에 따라 검색된 적어도 하나의 컨텐트 중 일부 또는 전부를 재생 목록에 추가하는 요청을 수신하고, 수신된 추가 요청에 응답하여 상기 검색된 컨텐츠의 일부 또는 전부를 재생 목록에 추가할 수 있다. 이 경우, 복수의 컨텐츠 제공자들로부터 검색된 다양한 컨텐츠가 재생 목록에 추가될 수 있다.
도 7에 도시된 각 단계에 대해서는 도 8a 내지 도 10을 통해 보다 상세히 설명하기로 한다.
도 8a 내지 도 8b는 멀티미디어 재생 애플리케이션을 통해 제공되는 컨텐트와 관련된 적어도 하나의 컨텐트를 검색하고, 검색된 적어도 하나의 컨텐트를 표시하는 동작에 대한 실시 예를 보여주는 도면이다.
본 명세서에서, 플레이어(300)는 멀티미디어 재생 애플리케이션을 의미한다. 또한, 플레이어(300) 및 검색 모듈(400) 각각의 동작은 제어부(170)에 의해 제어될 수 있다. 즉, 플레이어(300) 또는 검색 모듈(400)이 어떠한 동작을 수행한다 함은, 제어부(170)가 상기 어떠한 동작을 수행하도록 플레이어(300) 또는 검색 모듈(400)을 제어하는 것으로서, 경우에 따라서는 제어부(170)가 상기 어떠한 동작을 수행함을 의미할 수도 있다.
또한, 검색 모듈(400)은 디스플레이 장치(100)에 포함된 것으로 도시되어 있으나, 실시 예에 따라 검색 모듈(400)은 디스플레이 장치(100)와 연결되는 별도의 서버에 포함되어 있을 수도 있다.
도 8a를 참조하면, 플레이어(300)는 재생 목록에 포함된 적어도 하나의 컨텐트 중 어느 하나의 컨텐트를 재생할 수 있다(S300). 여기서, 플레이어(300)에 의해 재생되는 컨텐트는 음악 컨텐트인 것으로 가정한다.
플레이어(300)는 현재 재생 중인 컨텐트에 대한 정보를 제1 데이터베이스(140_1)에 업데이트할 수 있다(S310). 제1 데이터베이스(140_1)는 현재 재생 중인 컨텐트의 정보를 저장하는 용도를 가질 수 있다. 제1 데이터베이스(140_1)는 저장부(140)에 포함된 것일 수 있으나, 반드시 그러한 것은 아니고 저장부(140)와는 별개의 구성으로 구비될 수 있다.
현재 재생 중인 컨텐트의 정보는 컨텐트의 타이틀, 아티스트, 및 장르를 포함할 수 있으나, 이에 한정되는 것은 아니고 현재 재생 중인 컨텐트와 관련된 각종 정보를 포함할 수 있다. 예컨대, 현재 재생 중인 컨텐트의 타이틀이 “Love Song”이고, 아티스트가 “John”이며, 장르가 “발라드”인 경우, 플레이어(300)는 해당 정보를 제1 데이터베이스(140_1)에 업데이트할 수 있다.
제어부(170)는 사용자 입력 인터페이스부(150) 등을 통해 검색 요청을 수신할 수 있다(S320). 예컨대, 상기 검색 요청은 원격 제어 장치(200)에 포함된 검색 버튼이 입력됨에 따라 수신되거나, 디스플레이부(180)를 통해 표시되는 검색 아이콘을 선택함으로써 수신될 수 있으나, 이에 한정되는 것은 아니다. 수신된 검색 요청에 응답하여, 제어부(170)는 검색 모듈(400)의 동작을 제어할 수 있다.
검색 모듈(400)은 제1 데이터베이스(140_1)로부터 컨텐트 정보를 획득하고(S330), 획득된 컨텐트 정보를 이용하여 적어도 하나의 검색 명령을 생성할 수 있다(S340).
도 8a에는 검색 모듈(400)에 의해 생성된 검색 명령들의 예들이 도시되어 있다. 검색 명령은 검색 키워드, 검색할 컨텐트 제공자를 포함할 수 있으나, 상기 검색 명령의 형태는 다양하게 구현될 수 있다. 검색 모듈(400)은 제1 데이터베이스(140_1)로부터 획득된 컨텐트 정보를 이용하여 다양한 검색 키워드들(“Love Song”, “John”, “Ballard”, “Love Song의 가사” 등)을 생성하고, 생성된 검색 키워드를 이용한 검색 동작을 다양한 컨텐트 제공자(예컨대, “YoTube”, “Bogs”, “재생 목록”, 및 “Web” 등)에 대해 수행할 수 있다.
도 8b를 참조하면, 제어부(170)는 검색 결과 창(410)을 디스플레이부 (180)를 통해 표시할 수 있다. 도 8b에는 검색 결과 창(410)이 디스플레이부(180)의 일부 영역에 표시되는 형태로 도시되어 있으나, 검색 결과 창(410)의 표시 형태는 다양하게 구현될 수 있다.
검색 결과 창(410)은 검색 카테고리들(420, 430, 440, 450, 460, 및 470)을 포함할 수 있다. 검색 카테고리들(420, 430, 440, 450, 460, 및 470)은 검색 모듈(400)에 의해 생성된 검색 명령들 각각에 대응할 수 있다. 도 8b에 도시된 바와 같이, 검색 카테고리들(420, 430, 440, 450, 460, 및 470)은 검색 키워드 및/또는 검색한 컨텐트 제공자에 대한 정보를 시각적으로 나타낼 수 있다.
검색 카테고리들(420, 430, 440, 450, 460, 및 470) 중 어느 하나의 검색 카테고리(예컨대, 제1 검색 카테고리(420))가 선택되면, 제1 검색 카테고리(420)에 대응하는 검색 명령을 통해 검색된 컨텐츠(421, 422, 423, 및 424)의 리스트가 표시될 수 있다. 상기 검색 명령은 현재 재생 중인 컨텐트(311)의 정보에 기초하여 생성된 것이므로, 생성된 검색 명령을 통해 검색된 컨텐츠(421,422, 423, 및 424)는 현재 재생 중인 컨텐트(311)에 대한 연관 컨텐츠일 것이다.
즉, 도 8a 및 도 8b에 도시된 실시 예에 따르면, 사용자는 현재 멀티미디어 재생 애플리케이션을 통해 재생 중인 컨텐트와 관련된 다양한 컨텐츠를 편리하게 검색할 수 있다.
도 9a 내지 도 9c는 도 8a 내지 도 8b에 도시된 실시 예에 따라 검색된 컨텐트를 재생 목록에 추가하는 동작에 대한 실시 예를 보여주는 도면이다.
도 9a를 참조하면, 제어부(170)는 사용자 입력 인터페이스부(150) 등을 통해 컨텐트 추가 요청을 수신할 수 있다(S400). 상기 컨텐트 추가 요청은 도 8a 내지 도 8b에 도시된 실시 예에 따라 검색된 컨텐츠 중 어느 하나의 컨텐트를 재생 목록에 추가하는 요청일 수 있다. 컨텐트 추가 요청에 대해서는 추후 도 9b 내지 도 9c를 참조하여 설명하기로 한다.
컨텐트 추가 요청에 응답하여, 검색 모듈(400)은 상기 어느 하나의 컨텐트를 재생 목록에 추가할 수 있다(S410). 구체적으로, 검색 모듈(400)은 상기 어느 하나의 컨텐트의 정보를 제2 데이터베이스(140_2)에 저장할 수 있다. 제2 데이터베이스(140_2)는 재생 목록에 포함되는 컨텐츠의 정보를 저장할 수 있다. 예컨대, 제2 데이터베이스(140_2)에 저장되는 컨텐츠의 정보는 컨텐트의 타이틀, 썸네일 이미지, 및 URL(해당 컨텐트가 디스플레이 장치(100) 내에 저장된 컨텐트인 경우, 컨텐트 파일의 저장 위치)을 포함할 수 있으나, 이에 한정되는 것은 아니다.
플레이어(300)는 제2 데이터베이스(140_2)로부터 재생 목록을 로드할 수 있다(S420). 이에 따라, 컨텐트 추가 요청에 의해 재생 목록에 새롭게 추가된 컨텐트가 플레이어(300)에 의해 재생될 수 있다.
도 9b를 참조하면, 제어부(170)는 검색 결과 창(410)에 표시되는 검색된 컨텐츠(421 내지 424) 각각에 추가 버튼(AB1 내지 AB3)을 표시할 수 있다. 제어부(170; 또는 검색 모듈(400))는 컨텐트 추가 요청으로서 어느 하나의 추가 버튼(예컨대, 제2 추가 버튼(AB2))에 대한 입력을 수신하고, 수신된 입력에 응답하여 제2 추가 버튼(AB2)에 대응하는 컨텐트(422)를 재생 목록에 추가할 수 있다. 컨텐트(422)가 재생 목록에 추가됨에 따라, 멀티미디어 재생 애플리케이션의 실행 화면(310)에 컨텐트(422)의 썸네일 이미지가 추가되어 표시될 수 있다.
도 9c를 참조하면, 제어부(170)는 검색 결과 창(410)에 포함된 검색 카테고리들(420, 430, 440, 450, 460, 및 470) 중 제2 검색 카테고리(430)를 선택하는 요청에 응답하여, 제2 검색 카테고리(430)에 대응하는 검색 명령을 통해 검색된 컨텐츠(431 내지 435)의 리스트를 표시할 수 있다. 여기서, 제1 검색 카테고리(420)에 포함된 컨텐츠(421 내지 424)의 컨텐트 제공자와, 제2 검색 카테고리(430)에 포함된 컨텐츠(431 내지 435)의 컨텐트 제공자는 서로 다를 수 있다.
제어부(170)는 검색 결과 창(410)에 표시되는 컨텐츠(431 내지 435) 각각에 추가 버튼(AB1 내지 AB5)을 표시하고, 어느 하나의 추가 버튼(예컨대, 제2 추가 버튼(AB2))에 대한 입력을 수신한 경우, 제2 추가 버튼(AB2)에 대응하는 컨텐트(432)를 재생 목록에 추가할 수 있다. 컨텐트(432)가 재생 목록에 추가됨에 따라, 멀티미디어 재생 애플리케이션의 실행 화면(310)에 컨텐트(432)의 썸네일 이미지가 추가되어 표시될 수 있다.
즉, 도 9a 내지 도 9c에 도시된 실시 예에 따르면, 사용자는 현재 멀티미디어 재생 애플리케이션을 통해 재생 중인 컨텐트와 관련되어 검색된 연관 컨텐츠를 재생 목록에 편리하게 추가할 수 있다. 또한, 디스플레이 장치(100)는 서로 다른 컨텐트 제공자들로부터 제공되는 다양한 컨텐츠를 하나의 재생 목록에 추가함으로써, 사용자로 하여금 컨텐츠의 통합적인 관리가 가능하도록 해 줄 수 있다.
도 10은 디스플레이 장치를 통해 제공되는 실시간 방송 컨텐트의 정보에 기초하여 관련 컨텐트를 검색하고, 검색된 컨텐트를 재생 목록에 추가하는 실시 예를 설명하기 위한 도면이다.
도 10에 도시된 실시간 TV 애플리케이션(500)은 방송 수신부(130)로부터 수신되는 방송 신호에 기초하여 디스플레이부(180) 등을 통해 실시간 방송 컨텐트를 출력하는 동작을 수행하는 애플리케이션을 의미할 수 있다. 실시간 TV 애플리케이션(500)의 동작은 제어부(170)에 의해 제어될 수 있다.
도 10을 참조하면, 실시간 TV 애플리케이션(500)은 현재 디스플레이부(180)를 통해 출력 중인 실시간 방송 컨텐트에 대한 정보를 제3 데이터베이스(140_3)에 업데이트할 수 있다(S500). 제3 데이터베이스(140_3)는 현재 출력 중인 실시간 방송 컨텐트 또는 영상 컨텐트의 정보를 저장하는 용도를 가질 수 있다. 제3 데이터베이스(140_3)는 저장부(140)에 포함된 것일 수 있으나, 저장부(140)와 별개의 구성으로 구비될 수도 있다. 실시 예에 따라, 제3 데이터베이스(140_3)는 도 8a의 제1 데이터베이스(140_1)와 일체로 구성된 것일 수도 있다.
현재 출력 중인 방송 컨텐트에 대한 정보는, 방송 컨텐트의 타이틀 및 장르를 포함할 수 있으나, 이에 한정되는 것은 아니다. 예컨대, 현재 출력 중인 방송 컨텐트의 타이틀이 “Trap”이고, 장르가 “드라마”인 경우, 실시간 TV 애플리케이션(500)은 해당 정보를 제3 데이터베이스(140_3)에 업데이트할 수 있다.
제어부(170)는 사용자 입력 인터페이스부(150) 등을 통해 검색 요청을 수신할 수 있다(S510). 상기 검색 요청은 도 8a의 S320 단계에서 상술한 검색 요청과 실질적으로 동일한 바, 이에 대한 설명은 생략하기로 한다. 수신된 검색 요청에 응답하여, 제어부(170)는 검색 모듈(400)의 동작을 제어할 수 있다.
검색 모듈(400)은 제3 데이터베이스(140_3)로부터 컨텐트 정보를 획득하고(S520), 획득된 컨텐트 정보를 이용하여 적어도 하나의 검색 명령을 생성하고, 생성된 검색 명령을 이용하여 검색 동작을 수행할 수 있다(S530). 검색 모듈(400)은 컨텐트 추가 요청에 기초하여 검색된 컨텐츠 중 적어도 하나를 재생 목록에 추가할 수 있다(S540). S520 단계 내지 S540 단계는 도 8a의 S330 단계와 S340 단계, 및 도 9a의 S400 단계 및 S410 단계와 유사하므로, 이에 대한 설명은 생략하기로 한다.
도 11a 내지 도 11b는 컨텐트와 관련된 아티스트에 대한 각종 정보를 제공하는 실시 예를 보여주는 도면이다.
도 11a와 도 11b를 참조하면, 제어부(170)는 검색 결과 창(510)에 표시된 검색 카테고리들(520, 530, 540, 550, 및 560) 중, 아티스트와 관련된 검색 결과를 포함하는 검색 카테고리(예컨대, 제3 검색 카테고리(540))를 선택하는 요청을 수신할 수 있다.
제어부(170)는 수신된 선택 요청에 응답하여, 검색 결과 창(510) 내에 아티스트 정보 창(541)을 표시할 수 있다. 도 11b에 도시된 바와 같이, 아티스트 정보 창(541)은 아티스트에 대한 프로필 정보를 포함할 수 있다. 아티스트에 대한 프로필 정보는 아티스트의 사진, 성명, 생년월일, 장르, 웹사이트 등 각종 정보를 포함할 수 있다. 상기 프로필 정보는 디스플레이 장치(100)와 연결되는 별도의 서버에 저장되어 있을 수 있다. 실시 예에 따라, 아티스트 정보 창(541)은 아티스트에 대한 보다 상세한 정보를 제공하기 위해, 아티스트의 웹사이트 주소 링크(542), 인터넷을 통해 아티스트에 대한 검색 결과를 제공하기 위한 인터넷 접속 버튼(543) 및 사전 접속 버튼(544)을 포함할 수 있으나, 이에 한정되는 것은 아니고 아티스트에 대한 상세 정보를 제공하기 위한 다양한 수단을 제공할 수 있다.
제어부(170)는, 웹사이트 주소 링크(542)를 선택하는 요청에 응답하여 아티스트의 웹사이트 접속 화면(552)을 표시할 수 있고, 인터넷 접속 버튼(543)을 선택하는 요청에 응답하여 인터넷 포털 사이트에서의 아티스트 검색 결과 화면(553)을 표시할 수 있고, 사전 접속 버튼(544)을 선택하는 요청에 응답하여 사전에서의 아티스트 검색 결과 화면(554)을 표시할 수 있다.
즉, 디스플레이 장치(100)는 컨텐트의 아티스트와 관련된 각종 정보를 사용자에게 효과적으로 제공할 수 있다.
다시 도 5를 설명한다.
디스플레이 장치(100)는, 로드된 재생 목록의 제1 컨텐트를, 상기 제1 컨텐트 제공자와 관련된 애플리케이션을 통해 재생할 수 있다(S120).
일반적으로, 특정 컨텐트 제공자에 의해 제공되는 컨텐트는, 컨텐트 제공자와 관련된 애플리케이션(예컨대, 전용 재생 애플리케이션)을 통해서만 출력될 수 있다. 즉, 디스플레이 장치(100)에 설치된 멀티미디어 재생 애플리케이션은, 디스플레이 장치(100) 내에 저장된 컨텐트를 직접 재생할 수 있을 뿐, 특정 컨텐트 제공자에 의해 제공되는 컨텐트를 직접 재생하지는 못할 수 있다.
따라서, 본 발명의 실시 예에 따른 멀티미디어 재생 애플리케이션은, 재생 목록의 컨텐트 재생 시 컨텐트 제공자를 판단하고, 판단 결과에 기초하여 컨텐트 제공자와 관련된 애플리케이션을 통해 컨텐트를 재생하도록 제어할 수 있다.
디스플레이 장치(100)는 재생 중인 제1 컨텐트의 재생 완료 여부를 인식할 수 있다(S130).
종래의 멀티미디어 재생 애플리케이션은, 특정 컨텐트 제공자와 관련된 애플리케이션을 통해 제1 컨텐트가 재생되는 경우, 상기 제1 컨텐트의 재생 완료 여부를 인식할 수 없다. 따라서, 종래의 경우에는 멀티미디어 재생 애플리케이션이 관리하는 재생 목록에 다양한 컨텐트 제공자들로부터 제공되는 컨텐츠를 추가할 수 없다.
반면, 본 발명의 실시 예에 따른 멀티미디어 재생 애플리케이션은, 디스플레이 장치(100) 내에 구현되는 재생 완료 감지부(700)를 이용하여 상기 제1 컨텐트의 재생 완료 여부를 인식할 수 있다.
인식 결과 제1 컨텐트의 재생이 완료된 경우(S140의 YES), 디스플레이 장치(100)는 재생 목록에 포함된 제2 컨텐트를, 상기 제2 컨텐트 제공자와 관련된 애플리케이션을 통해 재생할 수 있다(S150).
S120 단계 내지 S150 단계에 대해서는 도 12 내지 도 17c를 통해 보다 상세히 설명하기로 한다.
도 12는 본 발명의 실시 예에 따른 디스플레이 장치가, 재생 목록의 특정 컨텐트의 재생 완료를 감지하여 다음 컨텐트의 재생을 제어하는 동작을 설명하기 위한 도면이다.
도 12를 참조하면, 디스플레이 장치(100)는 컨텐트의 재생 완료를 감지하기 위한 재생 완료 감지부(700)를 포함할 수 있다. 재생 완료 감지부(700)는 하드웨어 또는 소프트웨어 형태로 구현될 수 있다.
제어부(170)에 의해 제어되는 플레이어(300)는 재생 목록이 저장된 제2 데이터베이스(140_2)로부터 재생 목록을 로드할 수 있다(S600). 상술한 바와 같이, 재생 목록에는 적어도 하나의 컨텐트 각각의 정보(예컨대, 타이틀, 썸네일 이미지, 및 URL 등)가 저장되어 있을 수 있다.
플레이어(300; 또는 제어부(170))는 로드된 재생 목록에 포함된 컨텐츠 중 어느 하나의 컨텐트(예컨대, 제1 컨텐트)의 재생을 요청할 수 있다(S610). 구체적으로, 플레이어(300)는 제1 컨텐트의 정보(예컨대, URL 등)에 기초하여 컨텐트 제공자를 식별할 수 있다. 식별 결과에 기초하여, 플레이어(300)는 해당 컨텐트 제공자와 관련된 애플리케이션을 통해 제1 컨텐트를 재생하기 위해, 상기 애플리케이션으로 상기 제1 컨텐트의 재생을 요청할 수 있다. 예컨대, 제1 컨텐트의 컨텐트 제공자가 로컬 컨텐츠(디스플레이 장치(100) 내에 저장된 컨텐츠)인 경우, 플레이어(300)는 직접 제1 컨텐트를 재생할 수 있다. 반면, 제1 컨텐트의 컨텐트 제공자가 'YoTube' 또는 'Bogs'인 경우, 플레이어(300)는 'YoTube'와 관련된 애플리케이션(302) 또는 'Bogs'와 관련된 애플리케이션(303)으로 상기 제1 컨텐트의 재생을 요청할 수 있다.
플레이어(300)는 디스플레이부(180)를 통해 표시되는 썸네일 이미지를 재생될 컨텐트의 썸네일 이미지로 업데이트하고(S620), 컨텐트의 재생을 요청받은 컨텐트 제공자와 관련된 애플리케이션은 컨텐트를 재생할 수 있다(S630). 실시 예에 따라, S620 단계와 S630 단계의 순서는 자유롭게 변경될 수 있다.
제어부(170)는 재생 중인 컨텐트의 재생 완료 여부를 감지하도록 재생 완료 감지부(700)를 제어할 수 있다(S640). 컨텐트의 재생이 완료된 것으로 감지되는 경우, 재생 완료 감지부(700)는 플레이어(300)로 감지 결과를 전송하거나 다음 컨텐트의 재생을 요청할 수 있다(S650). S650 단계 이후의 디스플레이 장치(100)의 동작은 S610 단계 내지 S650 단계의 반복으로 이루어질 수 있다.
도 12에 도시된 디스플레이 장치(100)의 동작에 대해서는 도 13 내지 도 17c를 통해 보다 상세히 설명하기로 한다.
도 13 내지 도 16은 도 12에 도시된 재생 완료 감지부가 컨텐트의 재생 완료를 감지하는 다양한 실시 예들을 보여주는 도면들이다.
도 13을 참조하면, 플레이어(300)가 재생하고자 하는 컨텐트가 'YoTube'로부터 제공되는 컨텐트인 경우, 플레이어(300)는 'YoTube'와 관련된 애플리케이션(302)으로 컨텐트의 재생을 요청할 수 있다. 애플리케이션(302)은 플레이어(300)로부터의 요청에 응답하여 상기 컨텐트를 재생할 수 있다. 도 13에서 재생되는 컨텐트는 음향 출력부(185)를 통해 오디오를 출력하는 컨텐트(예컨대, 음악 컨텐트, 비디오 컨텐트 등)인 것으로 가정한다.
컨텐트의 오디오 신호는 오디오 디코더(171) 및 오디오 믹서(172)를 통해 처리되고, 처리된 오디오 신호가 음향 출력부(185)를 통해 상기 컨텐트의 오디오로서 출력될 수 있다.
재생 완료 감지부(700)는 오디오 신호가 오디오 디코더(171) 또는 오디오 믹서(172)로부터 음향 출력부(185)로 전송되는지 여부를 감지함으로써 컨텐트의 재생 완료를 감지할 수 있다. 즉, 재생 완료 감지부(700)는 오디오 믹서(172)로부터 음향 출력부(185)로 오디오 신호가 기준 시간동안 출력되지 않는 경우, 컨텐트의 재생이 완료된 것으로 감지하고, 플레이어(300)로 다음 컨텐트의 재생을 요청할 수 있다. 이 때, 제어부(170)는 사용자에 의해 음소거 명령이 수신되어 컨텐트의 오디오를 출력하지 않는 경우에는, 재생 완료 감지부(700)의 감지 동작을 중지시키거나, 재생 완료 감지부(700)에 의해 컨텐트의 재생이 완료된 것으로 감지되더라도 다음 컨텐트를 재생하지 않을 수 있다.
도 14를 참조하면, 도 13에서 상술한 바와 같이 플레이어(300)는 'YoTube'와 관련된 애플리케이션(302)으로 컨텐트의 재생을 요청하고, 애플리케이션(302)은 플레이어(300)로부터의 요청에 응답하여 상기 컨텐트를 재생할 수 있다. 이 때, 도 14에서 재생되는 컨텐트는 디스플레이부(180)를 통해 출력되는 영상(video) 컨텐트인 것으로 가정한다.
디스플레이부(180)는 컨텐트의 비디오 신호를 비디오 디코더(173) 및 비디오 믹서(174)를 통해 수신하여 영상을 출력할 수 있다. 비디오 디코더(173) 및 비디오 믹서(174)는 애플리케이션(302)에 의해 제공되는 데이터를 처리하고, 처리 결과 생성되는 상기 컨텐트의 비디오 신호를 디스플레이부(180)로 전송할 수 있다.
재생 완료 감지부(700)는 비디오 신호가 비디오 디코더(173) 또는 비디오 믹서(174)로부터 디스플레이부(180)로 전송되는지 여부를 감지함으로써 컨텐트의 재생 완료를 감지할 수 있다. 즉, 재생 완료 감지부(700)는 비디오 디코더(173) 또는 비디오 믹서(174)로부터 디스플레이부(180)로 비디오 신호가 기준 시간동안 출력되지 않거나, 상기 비디오 신호에 의해 표시되는 화면이 소정 시간 이상 동일하거나 특정 화면(예컨대, 블랙 화면 등)인 경우, 컨텐트의 재생이 완료된 것으로 감지하고, 플레이어(300)로 다음 컨텐트의 재생을 요청할 수 있다. 이 때, 제어부(170)는 사용자에 의해 일시정지(pause) 명령이 수신되어 컨텐트의 재생을 일시적으로 정지한 경우에는, 재생 완료 감지부(700)의 감지 동작을 중지시키거나, 재생 완료 감지부(700)에 의해 컨텐트의 재생이 완료된 것으로 감지되더라도 다음 컨텐트를 재생하지 않을 수 있다.
도 15를 참조하면, 제어부(170)는 컨텐트의 재생 시, 상기 컨텐트의 컨텐트 제공자와 관련된 애플리케이션의 재생 화면을 디스플레이부(180)를 통해 표시할 수 있다. 재생 완료 감지부(700)는 상기 재생 화면에 포함된 재생 상태 정보에 기초하여 컨텐트의 재생 완료를 감지할 수 있다. 재생 상태 정보는 현재 재생 시간/총 재생 시간을 표시하는 재생 타이머(PT), 및/또는 재생 상태 바(BAR)를 포함하고, 재생 타이머(PT)와 재생 상태 바(BAR)를 이용하여 컨텐트(182)의 재생 상태를 시각적으로 제공할 수 있다. 재생 상태 바(BAR)는 프로그레스 바(progress bar) 형태로 표시될 수 있으나, 이에 한정되는 것은 아니다. 재생 타이머(PT)와 재생 상태 바(BAR)는 컨텐트 재생 애플리케이션의 종류에 따라 다양한 형태로 표시될 수 있다.
재생 완료 감지부(700)는 공지된 영상 인식 기술을 이용하여 재생 상태 정보(재생 타이머(PT) 및/또는 재생 상태 바(BAR))를 인식하고, 인식된 재생 상태 정보를 이용하여 컨텐트의 재생 완료 여부를 감지할 수 있다. 예컨대, 재생 타이머(PT)의 현재 재생 시간과 총 재생 시간이 동일한 경우, 또는 재생 상태 바(BAR)의 색이 모두 채워진 경우, 재생 완료 감지부(700)는 컨텐트의 재생이 완료된 것으로 감지할 수 있다.
도 16을 참조하면, 도 13에서 상술한 바와 같이 플레이어(300)는 'YoTube'와 관련된 애플리케이션(302)으로 컨텐트의 재생을 요청하고, 애플리케이션(302)은 플레이어(300)로부터의 요청에 응답하여 상기 컨텐트를 재생할 수 있다. 이 때, 도 16에서 재생되는 컨텐트는 디스플레이부(180)를 통해 영상을 출력하고, 음향 출력부(185)를 통해 오디오를 출력하는 멀티미디어 컨텐트인 것으로 가정한다.
컨텐트의 영상 및 오디오가 동시에 출력되는 경우, 제어부(170)는 디스플레이 장치(100)에 포함되는 싱크 매니저(175)를 이용하여 비디오 신호와 오디오 신호의 동기화 작업을 수행할 수 있다.
재생 완료 감지부(700)는 싱크 매니저(175)의 동작 여부를 감지함으로써 컨텐트의 재생 완료를 감지할 수 있다. 즉, 재생 완료 감지부(700)는 동작 중이던 싱크 매니저(175)가 소정 시간 동안 동작하지 않는 경우, 컨텐트의 재생이 완료된 것으로 감지하고, 플레이어(300)로 다음 컨텐트의 재생을 요청할 수 있다. 실시 예에 따라, 재생 완료 감지부(700)는 오디오 디코더(171) 및/또는 비디오 디코더(173)로부터 오디오 신호 및/또는 비디오 신호가 출력되는지 여부를 감지함으로써 컨텐트의 재생 완료를 감지할 수도 있다.
도 13 내지 도 16에 도시된 실시 예에 따라 재생 완료 감지부(700)로부터 다음 컨텐트의 재생 요청을 수신하면, 플레이어(300)는 다음 컨텐트의 컨텐트 제공자와 관련된 애플리케이션으로 상기 다음 컨텐트의 재생을 요청할 수 있다.
또한, 디스플레이 장치(100)에 포함된 재생 완료 감지부(700)는 도 13 내지 도 16에 도시된 컨텐트 재생 완료 감지 동작들 중 적어도 일부를 동시에 수행함으로써, 컨텐트 재생 완료 감지의 정확도를 보다 향상시킬 수도 있다.
도 17a 내지 도 17c는 본 발명의 실시 예에 따른 디스플레이 장치가 복수의 컨텐츠 제공자들로부터 제공되는 다양한 컨텐츠를 재생하는 동작을 보여주는 도면들이다.
도 17a를 참조하면, 플레이어(300)는 재생 목록에 포함된 컨텐츠 중 제1 컨텐트(311)를 재생할 수 있다. 예컨대, 제1 컨텐트(311)가 플레이어(300)에 의해 재생될 수 있는 컨텐트(예컨대, 디스플레이 장치(100)에 저장된 로컬 컨텐트 등)인 경우, 플레이어(300)는 제1 컨텐트(311)를 직접 재생할 수 있다. 이 경우, 플레이어(300)는 제1 컨텐트(311)의 재생 완료 여부를 직접 감지할 수 있다.
도 17b를 참조하면, 제1 컨텐트(311)의 재생이 완료된 경우, 플레이어(300)는 제2 컨텐트(314)를 재생할 수 있다. 제2 컨텐트(314)가 플레이어(300)에 의해 재생되지 않는 컨텐트인 경우(예를 들어 'YoTube' 컨텐트 제공자와 관련된 애플리케이션을 통해 재생되는 컨텐트인 경우), 플레이어(300)는 'YoTube'와 관련된 애플리케이션으로 제2 컨텐트(314)의 재생을 요청할 수 있다. 이에 따라, 상기 애플리케이션은 제2 컨텐트(314)를 재생하고, 재생 화면을 도 17b에 도시된 바와 같이 표시할 수 있다.
제어부(170)는 재생 완료 감지부(700)를 제어하여 상기 애플리케이션을 통해 재생되는 제2 컨텐트(314)의 재생 완료 여부를 감지할 수 있다. 상기 재생 완료 여부를 감지하는 동작들은 도 13 내지 도 16에서 상술한 동작들을 의미할 수 있다.
제2 컨텐트(314)의 재생이 완료된 것으로 감지되는 경우, 플레이어(300)는 제2 컨텐트(314)의 다음 컨텐트인 제3 컨텐트(315)를 재생할 수 있다. 제3 컨텐트(315)가 플레이어(300)에 의해 재생되지 않는 컨텐트인 경우(예를 들어 'Bogs' 컨텐트 제공자와 관련된 애플리케이션을 통해 재생되는 컨텐트인 경우), 플레이어(300)는 'Bogs'와 관련된 애플리케이션으로 제3 컨텐트(315)의 재생을 요청할 수 있다. 이에 따라, 상기 애플리케이션은 제3 컨텐트(315)를 재생하고, 재생 화면을 도 17c에 도시된 바와 같이 표시할 수 있다. 제어부(170)는 재생 완료 감지부(700)를 제어하여 제3 컨텐트(315)의 재생 완료 여부를 감지할 수 있다.
즉, 도 12 내지 도 17c에 도시된 실시 예에 따르면, 디스플레이 장치(100)는 재생 목록에 포함된 컨텐트가 상기 컨텐트의 컨텐트 제공자와 관련된 애플리케이션을 통해 재생되는 경우, 컨텐트의 재생 완료 여부를 감지함으로써 다양한 컨텐트 제공자를 통해 제공되는 컨텐츠를 순차적으로 제공할 수 있다. 이에 따라, 사용자는 다양한 컨텐트 제공자들로부터 제공되는 컨텐츠를 하나의 재생 목록으로 관리하고 재생할 수 있으므로 편의성을 향상시킬 수 있다.
전술한 본 발명은, 프로그램이 기록된 매체에 컴퓨터가 읽을 수 있는 코드로서 구현하는 것이 가능하다. 컴퓨터가 읽을 수 있는 매체는, 컴퓨터 시스템에 의하여 읽혀질 수 있는 데이터가 저장되는 모든 종류의 기록장치를 포함한다. 컴퓨터가 읽을 수 있는 매체의 예로는, HDD(Hard Disk Drive), SSD(Solid State Disk), SDD(Silicon Disk Drive), ROM, RAM, CD-ROM, 자기 테이프, 플로피 디스크, 광 데이터 저장 장치 등이 있으며, 또한 캐리어 웨이브(예를 들어, 인터넷을 통한 전송)의 형태로 구현되는 것도 포함한다. 또한, 상기 컴퓨터는 디스플레이 장치의 제어부를 포함할 수도 있다. 따라서, 상기의 상세한 설명은 모든 면에서 제한적으로 해석되어서는 아니되고 예시적인 것으로 고려되어야 한다. 본 발명의 범위는 첨부된 청구항의 합리적 해석에 의해 결정되어야 하고, 본 발명의 등가적 범위 내에서의 모든 변경은 본 발명의 범위에 포함된다.

Claims (10)

  1. 디스플레이 장치에 있어서,
    디스플레이부;
    제1 컨텐트 제공자로부터 제공되는 제1 컨텐트 및 제2 컨텐트 제공자로부터 제공되는 제2 컨텐트를 포함하는 재생 목록을 저장하는 저장부; 및
    상기 재생 목록을 상기 디스플레이부를 통해 표시하고, 표시된 재생 목록에 포함된 상기 제1 컨텐트를 상기 제1 컨텐트 제공자와 관련된 애플리케이션을 통해 재생하고, 상기 제1 컨텐트의 재생 완료 여부를 감지하고, 감지 결과에 기초하여 상기 제2 컨텐트를 상기 제2 컨텐트 제공자와 관련된 애플리케이션을 통해 재생하는 제어부를 포함하는 디스플레이 장치.
  2. 제1항에 있어서,
    상기 제어부는,
    상기 디스플레이 장치에 설치된 멀티미디어 재생 애플리케이션이 실행되면, 실행된 멀티미디어 재생 애플리케이션에 대한 상기 재생 목록을 상기 디스플레이부를 통해 표시하는 디스플레이 장치.
  3. 제1항에 있어서,
    상기 제어부는,
    상기 디스플레이 장치를 통해 현재 제공되는 컨텐트에 대한 정보를 획득하고,
    획득된 정보에 기초하여 적어도 하나의 검색 명령을 생성하고, 생성된 검색 명령을 이용하여 상기 현재 제공되는 컨텐트에 대한 적어도 하나의 연관 컨텐트를 검색하고,
    검색된 적어도 하나의 연관 컨텐트를 상기 디스플레이부를 통해 표시하는 디스플레이 장치.
  4. 제3항에 있어서,
    상기 제어부는,
    상기 검색된 적어도 하나의 연관 컨텐트를 포함하는 검색 결과 창을 상기 디스플레이부를 통해 표시하고,
    상기 검색 결과 창은 상기 적어도 하나의 검색 명령 각각에 대응하는 적어도 하나의 검색 카테고리를 포함하고,
    상기 적어도 하나의 연관 컨텐트 각각은 상기 적어도 하나의 검색 카테고리 중 어느 하나에 포함되는 디스플레이 장치.
  5. 제3항에 있어서,
    상기 제어부는,
    상기 디스플레이부를 통해 표시되는 상기 적어도 하나의 연관 컨텐트 중 어느 하나의 연관 컨텐트를 상기 재생 목록에 추가하는 요청을 수신하고,
    수신된 요청에 응답하여 상기 어느 하나의 연관 컨텐트를 상기 재생 목록에 추가하는 디스플레이 장치.
  6. 제1항에 있어서,
    컨텐트의 재생 완료 여부를 감지하기 위한 재생 완료 감지부를 더 포함하고,
    상기 제어부는,
    상기 재생 완료 감지부에 의해 상기 제1 컨텐트의 재생이 완료된 것으로 감지된 경우, 상기 제2 컨텐트를 상기 제2 컨텐트 제공자와 관련된 애플리케이션을 통해 재생하는 디스플레이 장치.
  7. 제6항에 있어서,
    상기 재생 완료 감지부는,
    상기 제1 컨텐트와 관련된 오디오 신호가 음향 출력부로 전송되는지 여부를 감지하고,
    감지 결과 상기 오디오 신호가 상기 음향 출력부로 기준 시간동안 전송되지 않는 경우, 상기 제1 컨텐트의 재생이 완료된 것으로 감지하는 디스플레이 장치.
  8. 제7항에 있어서,
    상기 제어부는,
    상기 제1 컨텐트의 재생 중 수신되는 음소거 명령에 응답하여 상기 제1 컨텐트의 오디오를 출력하지 않는 경우, 상기 재생 완료 감지부의 감지 동작을 비활성화하는 디스플레이 장치.
  9. 제6항에 있어서,
    상기 재생 완료 감지부는,
    상기 제1 컨텐트와 관련된 비디오 신호가 상기 디스플레이부로 전송되는지 여부를 감지하고,
    감지 결과 상기 비디오 신호가 상기 디스플레이부로 기준 시간동안 전송되지 않는 경우, 상기 제1 컨텐트의 재생이 완료된 것으로 감지하는 디스플레이 장치.
  10. 제6항에 있어서,
    상기 디스플레이부는,
    상기 제1 컨텐트의 재생시 상기 제1 컨텐트 제공자와 관련된 애플리케이션의 재생 화면을 표시하고,
    상기 재생 완료 감지부는,
    상기 재생 화면에 포함된 재생 상태 정보를 영상 인식을 통해 인식하고, 인식된 재생 상태 정보를 이용하여 상기 제1 컨텐트의 재생 완료 여부를 감지하는 디스플레이 장치.
PCT/KR2016/006795 2016-06-24 2016-06-24 디스플레이 장치 WO2017222097A2 (ko)

Priority Applications (2)

Application Number Priority Date Filing Date Title
US16/306,727 US10945026B2 (en) 2016-06-24 2016-06-24 Display device
PCT/KR2016/006795 WO2017222097A2 (ko) 2016-06-24 2016-06-24 디스플레이 장치

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
PCT/KR2016/006795 WO2017222097A2 (ko) 2016-06-24 2016-06-24 디스플레이 장치

Publications (2)

Publication Number Publication Date
WO2017222097A2 true WO2017222097A2 (ko) 2017-12-28
WO2017222097A3 WO2017222097A3 (ko) 2018-03-08

Family

ID=60783460

Family Applications (1)

Application Number Title Priority Date Filing Date
PCT/KR2016/006795 WO2017222097A2 (ko) 2016-06-24 2016-06-24 디스플레이 장치

Country Status (2)

Country Link
US (1) US10945026B2 (ko)
WO (1) WO2017222097A2 (ko)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20180268869A1 (en) * 2017-03-15 2018-09-20 Canon Kabushiki Kaisha Communication apparatus, communication system, communication method, and storage medium

Family Cites Families (19)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US4390904A (en) * 1979-09-20 1983-06-28 Shelton Video Editors, Inc. Automatic circuit and method for editing commercial messages from television signals
JP2002244866A (ja) 2001-02-20 2002-08-30 Toshiba Corp 携帯型情報機器
US20060059535A1 (en) * 2004-09-14 2006-03-16 D Avello Robert F Method and apparatus for playing content
JP4846352B2 (ja) 2005-11-28 2011-12-28 ソフトバンクＢｂ株式会社 マルチメディア視聴システム及びマルチメディア視聴方法
US20080271078A1 (en) * 2007-04-30 2008-10-30 Google Inc. Momentary Electronic Program Guide
US9639531B2 (en) * 2008-04-09 2017-05-02 The Nielsen Company (Us), Llc Methods and apparatus to play and control playing of media in a web page
US8634944B2 (en) * 2008-07-10 2014-01-21 Apple Inc. Auto-station tuning
JP5286133B2 (ja) 2009-03-30 2013-09-11 株式会社東芝 再生装置、再生装置の制御プログラム、再生装置の動作方法
US20110225496A1 (en) * 2010-03-12 2011-09-15 Peter Jeffe Suggested playlist
US20110247035A1 (en) * 2010-03-31 2011-10-06 Verizon Patent And Licensing, Inc. Content playlist
US9176960B2 (en) * 2010-06-28 2015-11-03 Vizio, Inc Playlist of multiple objects across multiple providers
WO2012030318A1 (en) * 2010-09-03 2012-03-08 Packetvideo Corporation System and method for transferring media content
US8473577B2 (en) 2010-10-13 2013-06-25 Google Inc. Continuous application execution between multiple devices
EP2786293B1 (en) * 2011-11-29 2021-08-18 Spotify AB Content provider with multi-device secure application integration
US9788055B2 (en) * 2012-09-19 2017-10-10 Google Inc. Identification and presentation of internet-accessible content associated with currently playing television programs
US20160227281A1 (en) * 2015-02-03 2016-08-04 International Business Machines Corporation Adjustment of media recording schedule based on broadcast content
US10264322B2 (en) * 2015-02-18 2019-04-16 Mobitv, Inc. Unified playlist
US20160357737A1 (en) * 2015-06-05 2016-12-08 Apple Inc. Networked media player with searching capabilities
KR101674856B1 (ko) 2016-04-25 2016-11-09 주식회사 엘지유플러스 디스플레이 장치 및 그 제어방법과, 그 제어방법을 실행하기 위한 프로그램을 기록한 기록 매체와, 하드웨어와 결합되어 그 제어방법을 실행시키기 위하여 매체에 저장된 애플리케이션

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20180268869A1 (en) * 2017-03-15 2018-09-20 Canon Kabushiki Kaisha Communication apparatus, communication system, communication method, and storage medium
US10734031B2 (en) * 2017-03-15 2020-08-04 Canon Kabushiki Kaisha Communication apparatus, communication system, communication method, and storage medium

Also Published As

Publication number Publication date
WO2017222097A3 (ko) 2018-03-08
US10945026B2 (en) 2021-03-09
US20190132635A1 (en) 2019-05-02

Similar Documents

Publication Publication Date Title
WO2012070812A2 (en) Control method using voice and gesture in multimedia device and multimedia device thereof
WO2015194697A1 (en) Video display device and operating method thereof
WO2021060575A1 (ko) 인공 지능 서버 및 그의 동작 방법
WO2019135433A1 (ko) 디스플레이 장치 및 디스플레이 장치를 포함하는 시스템
WO2015186857A1 (ko) 영상 표시 기기 및 그의 동작 방법
WO2021251519A1 (ko) 디스플레이 장치 및 그의 동작 방법
WO2019172472A1 (ko) 디스플레이 장치
WO2018066788A1 (ko) 디스플레이 장치
WO2017222097A2 (ko) 디스플레이 장치
WO2022034935A1 (ko) 맞춤 광고를 제공하는 디스플레이 장치 및 그의 동작 방법
WO2021241777A1 (ko) 디스플레이 장치 및 그의 동작 방법
WO2021029453A1 (ko) 디스플레이 장치 및 그의 동작 방법
WO2021015319A1 (ko) 디스플레이 장치 및 그의 동작 방법
WO2020222322A1 (ko) 음성 인식 서비스를 제공하기 위한 디스플레이 장치
WO2020230923A1 (ko) 음성 인식 서비스를 제공하기 위한 디스플레이 장치 및 그의 동작 방법
WO2020122274A1 (ko) 디스플레이 장치
WO2019164020A1 (ko) 디스플레이 장치
WO2023145985A1 (ko) 디스플레이 장치
WO2023068405A1 (ko) 디스플레이 장치
WO2022085820A1 (ko) 디스플레이 장치 및 그의 동작 방법
WO2023149590A1 (ko) 디스플레이 장치 및 그의 동작 방법
WO2024019186A1 (ko) 디스플레이 장치 및 그의 동작 방법
WO2021054495A1 (ko) 디스플레이 장치 및 인공 지능 서버
WO2022255502A1 (ko) 디스플레이 장치 및 그의 동작 방법
WO2022255513A1 (ko) 디스플레이 장치 및 그의 동작 방법

Legal Events

Date Code Title Description
121 Ep: the epo has been informed by wipo that ep was designated in this application

Ref document number: 16906372

Country of ref document: EP

Kind code of ref document: A2

NENP Non-entry into the national phase

Ref country code: DE

122 Ep: pct application non-entry in european phase

Ref document number: 16906372

Country of ref document: EP

Kind code of ref document: A2