WO2022080866A1 - 전자 장치 및 그 동작 방법 - Google Patents

전자 장치 및 그 동작 방법 Download PDF

Info

Publication number
WO2022080866A1
WO2022080866A1 PCT/KR2021/014141 KR2021014141W WO2022080866A1 WO 2022080866 A1 WO2022080866 A1 WO 2022080866A1 KR 2021014141 W KR2021014141 W KR 2021014141W WO 2022080866 A1 WO2022080866 A1 WO 2022080866A1
Authority
WO
WIPO (PCT)
Prior art keywords
view
signal
content
electronic device
displayed
Prior art date
Application number
PCT/KR2021/014141
Other languages
English (en)
French (fr)
Inventor
최길수
김세현
이종인
박지원
Original Assignee
삼성전자 주식회사
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 삼성전자 주식회사 filed Critical 삼성전자 주식회사
Publication of WO2022080866A1 publication Critical patent/WO2022080866A1/ko
Priority to US18/299,974 priority Critical patent/US20230262285A1/en

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/438—Interfacing the downstream path of the transmission network originating from a server, e.g. retrieving MPEG packets from an IP network
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/47—End-user applications
    • H04N21/485—End-user interface for client configuration
    • H04N21/4858—End-user interface for client configuration for modifying screen layout parameters, e.g. fonts, size of the windows
    • G—PHYSICS
    • G11—INFORMATION STORAGE
    • G11B—INFORMATION STORAGE BASED ON RELATIVE MOVEMENT BETWEEN RECORD CARRIER AND TRANSDUCER
    • G11B27/00—Editing; Indexing; Addressing; Timing or synchronising; Monitoring; Measuring tape travel
    • G11B27/005—Reproducing at a different information rate from the information rate of recording
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/21—Server components or server architectures
    • H04N21/218—Source of audio or video content, e.g. local disk arrays
    • H04N21/2187—Live feed
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/23—Processing of content or additional data; Elementary server operations; Server middleware
    • H04N21/238—Interfacing the downstream path of the transmission network, e.g. adapting the transmission rate of a video stream to network bandwidth; Processing of multiplex streams
    • H04N21/2381—Adapting the multiplex stream to a specific network, e.g. an Internet Protocol [IP] network
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/431—Generation of visual interfaces for content selection or interaction; Content or additional data rendering
    • H04N21/4312—Generation of visual interfaces for content selection or interaction; Content or additional data rendering involving specific graphical features, e.g. screen layout, special fonts or colors, blinking icons, highlights or animations
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/431—Generation of visual interfaces for content selection or interaction; Content or additional data rendering
    • H04N21/4312—Generation of visual interfaces for content selection or interaction; Content or additional data rendering involving specific graphical features, e.g. screen layout, special fonts or colors, blinking icons, highlights or animations
    • H04N21/4316—Generation of visual interfaces for content selection or interaction; Content or additional data rendering involving specific graphical features, e.g. screen layout, special fonts or colors, blinking icons, highlights or animations for displaying supplemental content in a region of the screen, e.g. an advertisement in a separate window
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/436—Interfacing a local distribution network, e.g. communicating with another STB or one or more peripheral devices inside the home
    • H04N21/43615—Interfacing a Home Network, e.g. for connecting the client to a plurality of peripherals
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/44—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream, rendering scenes according to MPEG-4 scene graphs
    • H04N21/44004—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream, rendering scenes according to MPEG-4 scene graphs involving video buffer management, e.g. video decoder buffer or video display buffer
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/45—Management operations performed by the client for facilitating the reception of or the interaction with the content or administrating data related to the end-user or to the client device itself, e.g. learning user preferences for recommending movies, resolving scheduling conflicts
    • H04N21/462—Content or additional data management, e.g. creating a master electronic program guide from data received from the Internet and a Head-end, controlling the complexity of a video stream by scaling the resolution or bit-rate based on the client capabilities
    • H04N21/4622—Retrieving content or additional data from different sources, e.g. from a broadcast channel and the Internet
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/47—End-user applications
    • H04N21/472—End-user interface for requesting content, additional data or services; End-user interface for interacting with content, e.g. for content reservation or setting reminders, for requesting event notification, for manipulating displayed content
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/60—Network structure or processes for video distribution between server and client or between remote clients; Control signalling between clients, server and network components; Transmission of management data between server and client, e.g. sending from server to client commands for recording incoming content stream; Communication details between server and client 
    • H04N21/63—Control signaling related to video distribution between client, server and network components; Network processes for video distribution between server and clients or between remote clients, e.g. transmitting basic layer and enhancement layers over different transmission paths, setting up a peer-to-peer communication via Internet between remote STB's; Communication protocols; Addressing
    • H04N21/643—Communication protocols
    • H04N21/64322—IP

Definitions

  • Various embodiments relate to an electronic device and an operating method thereof, and more particularly, to an electronic device capable of providing a seamless screen transition when switching between multi-view and single-view, and an operating method thereof.
  • a display device such as a television receives one broadcast content and displays it on a single screen of the display device.
  • a display device divides a display screen into a plurality of screens and displays different content on each of the divided screens. Attempts are being made to provide services.
  • a content source when the display device displays content on a single screen in the single view mode and a signal source when a single screen is split into a plurality of screens in the multi-view mode and different content is displayed on each split screen are different from each other Since they are different, problems such as screen tearing may occur when switching between single view and multi view.
  • Various embodiments are intended to provide an electronic device capable of naturally switching a screen when switching between a single view and a multi-view, and an operating method thereof.
  • An electronic device includes a communication interface; a memory storing one or more instructions; and a processor executing one or more instructions stored in the memory, wherein the processor receives a multi-view switching request for converting a single view in which content is displayed on a single screen to a multi-view by executing the one or more instructions, In response to the multi-view switching request being received, the content based on the IP streaming signal is displayed through a plurality of screens, and the RF signal corresponding to the content displayed in the single view is received and stored in a buffer, and the multi-view is saved in the single view.
  • the playback time information of the IP streaming signal at the time the single-view switching request is received is checked, and the same playback time information is played back in the RF signal stored in the buffer A reproduction position having time information is identified and displayed in a single view based on the RF signal from the identified reproduction position.
  • the content based on the IP streaming signal displayed through the plurality of screens in the multi-view may be content related to the content based on the RF signal displayed in the single view.
  • the content based on the IP streaming signal displayed through the first screen among the plurality of screens constituting the multi-view may be the same content as the content based on the RF signal displayed in the single view.
  • the processor identifies attribute information of content based on the IP streaming signal displayed through the first screen by executing the one or more instructions, and according to the identified attribute information, the first A user interface for receiving a user input for selecting content displayed on the screen to be converted into a single view may be output to a partial region of the first screen.
  • the processor may display the content displayed on the first screen in a single view in response to receiving a user input for selecting the single view conversion by executing the one or more instructions.
  • the reproduction position identified in the stored RF signal may indicate a time delayed from the current reproduction position of the RF signal broadcast in real time.
  • the processor is configured to: by executing the one or more instructions, by increasing a reproduction rate upon reproduction from the identified reproduction position, the reproduction position in the stored RF signal is currently reproduced in the real-time broadcast RF signal.
  • the buffer for storing the RF signal may be released, and the RF signal may be displayed by switching to the RF live view.
  • the method of operating an electronic device includes receiving a multi-view switching request for converting a single view in which content is displayed on a single screen to a multi-view, and IP streaming through a plurality of screens in response to the multi-view switching request being received In addition to displaying the content based on the signal, receiving an RF signal corresponding to the content displayed in the single view and storing it in a buffer, upon receiving a single view conversion request for converting the multi-view to the single view, Checking the playback time information of the IP streaming signal at the time when the view change request is received, identifying a playback position having the same playback time information as the confirmed playback time information in the RF signal stored in the buffer, and the identified It may include an operation of displaying a single view based on the RF signal from the reproduction position.
  • the method of operating the electronic device includes displaying content on a single screen Receiving a multi-view conversion request for converting a single view to a multi-view, displaying the content based on the IP streaming signal through a plurality of screens according to the multi-view conversion request received, and responding to the content displayed in the single view operation of receiving and storing an RF signal of action,
  • a seamless screen transition when switching from a multi-view to a single view, can be implemented without interruption between the screen reproduced in the multi-view and the screen by playing using the RF signal stored in the buffer.
  • 1 is a reference diagram for explaining a single-view mode, a multi-view mode, and a transition from a single-view mode to a multi-view mode.
  • FIG. 2 is a reference diagram for explaining a method for providing a seamless screen transition when an electronic device switches from a multi-view to a single-view mode, according to an embodiment.
  • FIG. 3 is a schematic block diagram of an electronic device according to an exemplary embodiment.
  • FIG. 4 is a detailed block diagram of an electronic device according to an exemplary embodiment.
  • FIG. 5 shows an example of a memory 110 for configuring a single-view multi-view conversion module according to an embodiment.
  • FIG. 6 is a flowchart illustrating an operation of a method for providing a seamless screen transition when a multi-view single view is switched according to an embodiment.
  • FIG. 7 shows an example of an RF signal received in a single-view mode and an IP streaming signal received in a multi-view mode according to an embodiment.
  • FIG. 8 is a reference diagram for explaining a time difference between an RF signal received in a single-view mode and an IP streaming signal received in a multi-view mode, according to an embodiment.
  • FIG. 9 is a reference diagram for explaining a method of finding a reproduction position of an RF signal for a seamless screen change when a single view is switched according to an embodiment.
  • FIG. 10 is a reference diagram for explaining a method for resolving a time difference between a reproduction position of an RF signal stored in a buffer and a display position of a real-time broadcast RF signal, according to an embodiment.
  • FIG. 11 illustrates an example of a user interface that allows a user to select a seamless switching function when switching from a multi-view to a single-view according to an embodiment.
  • FIG. 12 is an example of a flowchart of an operation of performing a seamless screen switching function when the electronic device 100 switches from a multi-view to a single-view mode, according to an embodiment.
  • the term “user” means a person who controls a function or operation of a computing device or an electronic device using a control device, and may include a viewer, an administrator, or an installer.
  • the term “multi-streaming service” refers to a service in which the display screen of the electronic device is divided into a plurality of regions, and each divided region is used as a sub-screen to provide different contents on each sub-screen.
  • the display screen may be divided into two or more sub screens.
  • the content provided to each sub screen may be main content and content related to the main content.
  • the content provided to each sub-screen may be content from the same source or content from different sources.
  • the multi-streaming service may be referred to as a multi-view service or a multi-screen service.
  • 1 is a reference diagram for explaining a single-view mode, a multi-view mode, and a transition from a single-view mode to a multi-view mode.
  • the single view mode 10 is a mode in which one content is displayed on one single screen of a display in a display device such as a television.
  • the content displayed in the single view mode 10 may include broadcast content directly received from a broadcasting station, broadcast content received through an external source, and content received from a content providing server through the Internet.
  • the multi-view mode 20 may be provided for broadcast content.
  • the multi-view mode 20 is a mode in which the display screen of the display device is divided into a plurality of screens, and different contents are displayed on the divided screens. Each divided screen may be referred to as a sub screen in order to distinguish it from a case in which the display consists of one single screen.
  • the multi-view mode 20 includes, for example, four screens, that is, a first screen, a second screen, a third screen, and a fourth screen.
  • the display mode of the display device may be displayed in the single view mode and then switched to the multi-view mode.
  • the content displayed in the multi-view mode may be content related to the content displayed in the single-view mode.
  • the content displayed on a plurality of screens in the multi-view mode may be content corresponding to a plurality of scenes that can be captured in the corresponding sports game content.
  • each screen in the multi-view mode may display content centered on the batter, content centered on the catcher, content centered on the coach, and content centered on the spectators.
  • each screen in the multi-view mode may display content that is centered on each performer performing or performing in the corresponding performance.
  • the content displayed in the multi-view mode may include content that provides additional information about the content displayed in the single-view mode.
  • the additional information about the content may include information about the score of a baseball game, team information, and baseball players in a baseball game broadcast, and information about performers and performances in a performance relay broadcast. may contain information.
  • the electronic device may receive an RF signal 30 corresponding to first content and display it on a single screen.
  • the RF signal 30 may be directly received by the electronic device through a tuner or may be received through an external device such as a set-top box.
  • the electronic device 100 that displays the first content in the single-view mode 10 may receive a multi-view switch request.
  • the multi-view switch request may be received through various user interfaces, for example, a control signal through a remote control device, a key input signal provided in the electronic device, a voice recognition function, etc.
  • An item 50 called ⁇ multi-view conversion> may be provided to a part of the screen, and a multi-view conversion request may be received according to an input for selecting such an item.
  • the electronic device 100 identifies the property of content displayed on the screen, and when it is recognized that the content is multi-view switchable from the property of the content, the electronic device 100 outputs a user interface indicating multi-view switch to a partial area of the screen on which the content is displayed. can do.
  • the electronic device 100 may receive the IP streaming signal 40 through an external server such as an IP streaming server, and may display each of a plurality of contents included in the IP streaming signal 40 on a plurality of screens, respectively. For example, the electronic device 100 displays the first content included in the IP streaming signal 40 on the first screen, the second content on the second screen, the third content on the third screen, and the fourth content on the fourth screen. can do.
  • an external server such as an IP streaming server
  • the first content corresponding to the RF signal 30 displayed by the electronic device 100 in the single view is the main video content of the baseball game
  • the first content corresponding to the IP streaming signal 40 displayed in the multi-view is the single
  • the second content is a video that focuses on the batter in the baseball game
  • the third content focuses on the coach
  • the fourth content focuses on the spectators. there is.
  • the IP streaming signal 40 is a signal generated by acquiring the RF signal 30 corresponding to the first content broadcast in real time and packaging it with other content
  • the IP streaming signal 40 takes a predetermined time compared to the RF signal 30 broadcast in real time; For example, it may be a signal delayed by several seconds. That is, a certain time difference may occur between the RF signal 30 sent from the broadcasting station and the IP streaming signal 40 sent from the IP streaming server.
  • a multi-view switching request is received, and the electronic device 100 receives the IP streaming signal 40 to receive the first to second content.
  • the electronic device 100 displays the first to fourth contents at, for example, the playback position 00:00:38.
  • the content displayed in the multi-view mode may always be delayed by a certain time compared to the content displayed in the single-view mode. Accordingly, when the multi-view mode is switched back to the single-view mode, it cannot but be displayed in the single-view mode at a playback position earlier than the playback position displayed in the multi-view mode.
  • the electronic device 100 receives an RF signal at the playback position 00:20:42 that is advanced by 2 seconds to display the contents, the user has no choice but to see the video that has been skipped for about 2 seconds depending on the single view conversion. Accordingly, the present disclosure provides a method for preventing screen tearing that may occur when switching from a multi-view to a single-view mode and providing a seamless screen change.
  • FIG. 2 is a reference diagram for explaining a method for providing a seamless screen transition when an electronic device switches from a multi-view to a single-view mode, according to an embodiment.
  • the electronic device 100 displays the first content, the second content, the third content, and the fourth content obtained from the IP streaming signal 40 when switching from a single view to a multi-view of the electronic device.
  • the RF signal 30 corresponding to the first content may be received and stored in the buffer 113 while being displayed on a plurality of screens constituting the .
  • the buffer 113 is a space capable of storing the received RF signal, any storage device may be used.
  • the buffer 113 may have a predetermined size and store the RF signal as much as the predetermined size.
  • the buffer 113 can store several seconds to several tens of seconds of RF signals.
  • the electronic device 100 may display the first content based on the RF signal stored in the buffer 113 instead of receiving and displaying the RF signal 30 when switching from the multi-view mode to the single-view mode.
  • the first content can be displayed only from the playback position currently broadcast in real time, but by using the RF signal stored in the buffer 113, the electronic device 100 reproduces the RF signal location can be actively determined.
  • the electronic device 100 obtains playback time information corresponding to the playback position of the IP streaming signal displayed on the electronic device 100 when requesting to switch from the multi-view mode to the single-view mode, and has the same playback time as the playback time information.
  • a reproduction position of the RF signal having information may be identified in the buffer 113, and content corresponding to the RF signal may be displayed from the identified reproduction position of the RF signal.
  • the reproduction position identified from the RF signal stored in the buffer by the electronic device 100 may indicate a delayed time point from the current reproduction position of the RF signal broadcast in real time.
  • the electronic device 100 increases the playback speed when playing back the first content from the playback position identified in the buffer when switching single view, so that the playback position in the RF signal stored in the buffer is displayed in the RF signal broadcast in real time. When it becomes the same as the current playback position of , it can be displayed by releasing the buffer that stores the RF signal and switching to the RF live view.
  • the electronic device 100 identifies attribute information of content based on the IP streaming signal displayed on a plurality of screens constituting a multi-view in a multi-view mode, and, according to the identified attribute information, content displayed on the screen
  • a user interface for receiving a user input for selecting to switch to a single view may be output to a partial area of the screen. For example, referring to FIG.
  • the electronic device 100 identifies attribute information of the first content output to the first screen in the multi-view mode 20, and determines that the first content is based on an RF signal according to the identified attribute information can recognize Accordingly, the electronic device 100 may output the ⁇ single view conversion> item 60 for receiving a user input for selecting conversion of the first content output on the first screen to a single view in a partial area of the first screen.
  • the electronic device 100 may output the ⁇ single view conversion> item 60 for receiving a user input for selecting conversion of the first content output on the first screen to a single view in a partial area of the first screen.
  • the electronic device 100 may display content displayed on the corresponding screen in a single view in response to receiving a user input for selecting a single view switch on one of a plurality of screens constituting a multi-view.
  • FIG. 3 is a schematic block diagram of an electronic device according to an exemplary embodiment.
  • the electronic device 100 may include a memory 110 and a processor 120 .
  • the electronic device 100 may be implemented by more components than the illustrated components, and is not limited to the above-described example.
  • the memory 110 may store a program for processing and controlling the processor 120 and may store data input to or output from the electronic device 100 .
  • the memory 110 may include a flash memory type, a hard disk type, a multimedia card micro type, a card type memory (eg, SD or XD memory), and a RAM (RAM).
  • RAM Random Access Memory SRAM (Static Random Access Memory), ROM (Read-Only Memory), EEPROM (Electrically Erasable Programmable Read-Only Memory), PROM (Programmable Read-Only Memory), magnetic memory, magnetic disk, optical disk It may include at least one type of storage medium.
  • the processor 120 controls the overall operation of the electronic device 100 .
  • the processor 120 may perform the function of the electronic device 100 described in the present disclosure by executing one or more instructions stored in the memory 110 .
  • the processor 120 may execute one or more instructions stored in the memory 110 to control the above-described operations to be performed.
  • the memory 110 may store one or more instructions executable by the processor 120 .
  • the processor 120 stores one or more instructions in an internally provided memory and executes one or more instructions stored in an internally provided memory to control the above-described operations to be performed. That is, the processor 120 may perform a predetermined operation by executing at least one instruction or program stored in the internal memory or the memory 110 provided in the processor 120 .
  • processor 120 may be illustrated in FIG. 3 , a plurality of processors (not shown) may be provided. In this case, each of the operations performed by the electronic device according to an embodiment of the present disclosure may be performed through at least one of a plurality of processors.
  • the processor 120 receives a multi-view conversion request for converting a single view in which content is displayed on a single screen to a multi-view by executing one or more instructions stored in the memory 110, and according to the multi-view conversion request received While displaying the content based on the IP streaming signal through multiple screens, receiving an RF signal corresponding to the content displayed in the single view, storing it in the buffer, and requesting a single view conversion to convert the multi view to the single view
  • the playback time information of the IP streaming signal at the time the single view switch request is received is checked, and the playback position having the same playback time information as the confirmed playback time information in the RF signal stored in the buffer is identified and display in a single view based on the RF signal from the identified reproduction position.
  • the content based on the IP streaming signal displayed through the plurality of screens in the multi-view may be content related to the content based on the RF signal displayed in the single view.
  • the content based on the IP streaming signal displayed through the first screen among the plurality of screens constituting the multi-view may be the same content as the content based on the RF signal displayed in the single view.
  • the processor identifies attribute information of content based on the IP streaming signal displayed through the first screen by executing the one or more instructions, and according to the identified attribute information, the first A user interface for receiving a user input for selecting content displayed on the screen to be converted into a single view may be output to a partial region of the first screen.
  • the processor may display the content displayed on the first screen in a single view in response to receiving a user input for selecting the single view conversion by executing the one or more instructions.
  • the reproduction position identified in the stored RF signal may indicate a time delayed from the current reproduction position of the RF signal broadcast in real time.
  • the processor is configured to: by executing the one or more instructions, by increasing a reproduction rate upon reproduction from the identified reproduction position, the reproduction position in the stored RF signal is currently reproduced in the real-time broadcast RF signal.
  • the buffer for storing the RF signal may be released, and the RF signal may be displayed by switching to the RF live view.
  • the electronic device 100 may be any type of device that performs a function, including a processor and a memory.
  • the electronic device 100 may be a fixed or portable device.
  • the electronic device 100 may include various electronic devices such as a desktop, a laptop computer, a computer such as a tablet, a television, a set-top box, a smartphone, a cellular phone, a game player, a music player, a video player, a medical device, and a home appliance.
  • the electronic device 100 may also be referred to as a display device, a computing device, or a media device.
  • FIG. 4 is a detailed block diagram of an electronic device according to an exemplary embodiment.
  • FIG. 4 the same configuration as in FIG. 3 is illustrated using the same reference numerals. Therefore, in describing the electronic device 100 , a description overlapping with that of FIG. 3 will be omitted.
  • the electronic device 100 includes, in addition to the memory 110 and the processor 120, a display 130, a video processing unit 135, an audio processing unit 145, an audio output unit 140, a communication unit 150, an antenna 155, a sensing unit 160, an input/output unit 180, and a user input unit 190 may be further included.
  • the processor 120 may control each component of the electronic device 100 to perform an operation.
  • the display 130 may display an image on the screen under the control of the processor 120 .
  • the image displayed on the screen may be received from the communication unit 150, the input/output unit 180, and the memory 110.
  • the video processing unit 135 may process image data to be displayed by the display 130, and may perform various image processing operations such as decoding, rendering, scaling, noise filtering, frame rate conversion, and resolution conversion on the image data.
  • the video processing unit 135 may configure the screen of the display 130 as a single view screen to display one video content.
  • the video processing unit 135 may configure the screen of the display 130 as a multi-view screen to display different video contents on a plurality of screens configuring the multi-view screen.
  • the audio processing unit 145 processes audio data.
  • various processes such as decoding, amplification, and noise filtering on audio data may be performed.
  • the audio output unit 140 may output audio included in a broadcast signal received under the control of the processor 120, audio input through the communication unit 150 or the input/output unit 180, and audio stored in the memory 110.
  • the audio output unit 140 may include at least one of a speaker 141, a headphone output terminal 142, and a Sony/Philips Digital Interface (S/PDIF: output terminal 143).
  • the transmit/receive antenna 155 serves to receive signals transmitted by other devices or transmit signals to the other devices. Although the transmit/receive antenna 155 is illustrated as one, it can support a multiple input multiple output (MIMO) system by having a plurality of antennas.
  • MIMO multiple input multiple output
  • the communication unit 150 may include one or more modules that enable wireless communication between the electronic device 100 and a wireless communication system or between the electronic device 100 and a network in which another electronic device is located.
  • the communication unit 150 may include a broadcast reception module 151 , a mobile communication module 152 , a wireless Internet module 153 , and a short-range communication module 154 .
  • the communication unit 150 may be referred to as a transmitter/receiver.
  • the broadcast reception module 151 receives a broadcast signal and/or broadcast related information from an external broadcast management server through a broadcast channel.
  • the broadcast signal may include a TV broadcast signal, a radio broadcast signal, and a data broadcast signal, as well as a TV broadcast signal or a broadcast signal in which a data broadcast signal is combined with a radio broadcast signal.
  • the mobile communication module 152 transmits/receives a wireless signal to and from at least one of a base station, an external terminal, and a server on a mobile communication network.
  • the wireless signal may include various types of data according to transmission/reception of a voice call signal, a video call signal, or a text/multimedia message.
  • the wireless Internet module 153 refers to a module for wireless Internet access, and may be built-in or external to the device.
  • wireless Internet technologies wireless LAN (WLAN) (WiFi), wireless broadband (Wibro), World Interoperability for Microwave Access (Wimax), High Speed Downlink Packet Access (HSDPA), etc. may be used.
  • the device may establish a Wi-Fi peer-to-peer (P2P) connection with another device through the wireless Internet module 153 .
  • P2P Wi-Fi peer-to-peer
  • the short-range communication module 154 refers to a module for short-distance communication.
  • Bluetooth Radio Frequency Identification (RFID), Infrared Data Association (IrDA), Ultra Wideband (UWB), ZigBee, etc. may be used.
  • RFID Radio Frequency Identification
  • IrDA Infrared Data Association
  • UWB Ultra Wideband
  • ZigBee ZigBee
  • the sensing unit 160 detects a user's voice, a user's image, or a user's interaction, and may include a microphone 161, a camera unit 162, and a light receiving unit 163.
  • the microphone 161 receives the user's uttered voice.
  • the microphone 161 may convert the received voice into an electrical signal and output it to the processor 120 .
  • the microphone 161 may receive a user's voice command for controlling the magic hand function under the control of the processor 120 and transmit it to the processor 120 .
  • the camera unit 162 may receive an image (eg, a continuous frame) corresponding to a user's motion including a gesture in a camera recognition range.
  • an image eg, a continuous frame
  • the light receiver 163 receives an optical signal (including a control signal) received from the remote control device.
  • the light receiver 163 may receive an optical signal corresponding to a user input (eg, touch, press, touch gesture, voice, or motion) from the remote control device.
  • a control signal may be extracted from the received optical signal under the control of the processor 120 .
  • the input/output unit 180 receives video (eg, moving picture, etc.), audio (eg, voice, music, etc.) and additional information (eg, EPG, etc.) from the outside of the electronic device 100 under the control of the processor 120 . receive etc.
  • the input/output unit 180 may include one of an HDMI port (High-Definition Multimedia Interface port, 181, a component jack, 182), a PC port (PC port, 183), and a USB port (USB port, 184).
  • the input/output unit 180 may include a combination of an HDMI port 181, a component jack 182, a PC port 183), and a USB port 184).
  • the HDMI port 181 may receive broadcast content from a set-top box or a content providing device.
  • the user input unit 190 means a means for a user to input data for controlling the electronic device 100 .
  • the user input unit 190 may include, but is not limited to, a key pad, a dome switch, a touch pad, a jog wheel, a jog switch, and the like.
  • the memory 110 may store a program for processing and control of the processor 120 and may store data input to or output from the electronic device 100 . Also, the memory 110 may store data necessary for the operation of the electronic device 100 .
  • the programs stored in the memory 110 may be classified into a plurality of modules according to their functions.
  • the processor 120 controls the overall operation of the electronic device 100 and a signal flow between internal components of the electronic device 100, and performs a function of processing data.
  • the processor 120 may execute an operating system (OS) and various applications stored in the memory 110 when there is a user input or a preset stored condition is satisfied.
  • OS operating system
  • the processor 120 may include an internal memory.
  • at least one of data, programs, and instructions stored in the memory 110 may be stored in an internal memory (not shown) of the processor 120 .
  • a block diagram of the electronic device 100 illustrated in FIGS. 3 to 4 is a block diagram for an exemplary embodiment.
  • Each component in the block diagram may be integrated, added, or omitted according to specifications of the electronic device 100 that are actually implemented. For example, two or more components may be combined into one component, or one component may be subdivided into two or more components as needed.
  • the function performed in each block is for describing the embodiments, and the specific operation or device does not limit the scope of the present invention.
  • FIG. 5 shows an example of a memory 110 for configuring a single-view multi-view conversion module according to an embodiment.
  • the multi-view manager 111, the buffer manager 112, and the buffer 113 are implemented as software stored in the memory 110, but are not limited thereto, and the multi-view manager 111, the buffer manager 112, and the buffer 113 are the single-view multi-views disclosed in the present disclosure. It may be implemented in any combination of suitable software, logic, circuitry, interfaces, and/or code that may be operable to perform the conversion function.
  • the multi-view manager 111 may manage an overall operation for controlling single-view and multi-view switching. For example, when the multi-view manager 111 receives a request to switch from single view to multi-view, it receives an IP streaming signal corresponding to the RF signal content displayed in the single view, and receives the IP streaming signal extracted from the IP streaming signal on a plurality of divided screens. Each of a plurality of contents may be controlled to be displayed. Also, when receiving a multi-view switching request from a single view, the multi-view manager 111 may control the buffer manager 112 to store an RF signal received through the communication unit in a buffer.
  • the IP streaming signal is played from the playback position of the RF signal stored in the buffer, which has the same playback time information as the playback time information played in the multi-view mode. can be controlled
  • the buffer manager 112 may control to continuously receive the RF signal received in the single-view mode when switching from the single-view to the multi-view under the control of the multi-view manager 111 and store the RF signal in the buffer 113 .
  • the buffer 113 may store an RF signal received through the communication unit by a predetermined size under the control of the buffer manager 112 .
  • FIG. 6 is a flowchart illustrating an operation of a method for providing a seamless screen transition when a multi-view single view is switched according to an embodiment.
  • the electronic device 100 may receive a multi-view switching request for converting a single view into a multi-view.
  • the electronic device 100 receives an RF signal directly through a communication unit or receives a real-time broadcast RF signal from a set-top box or an external source through an HDMI interface to display content through a single screen of the display of the electronic device 100.
  • Content can be displayed in single view mode.
  • the multi-view is a mode in which the display of the electronic device 100 is divided into a plurality of screens and different contents are displayed on each of the divided screens.
  • a multi-view switching request for switching to a multi-view may be received.
  • At least one content among a plurality of content displayed in the multi-view may be the same as the content displayed in the single view.
  • the plurality of contents displayed in the multi-view may be contents related to the contents displayed in the single view.
  • the electronic device 100 may receive the multi-view switch request in various forms. According to an embodiment, the electronic device 100 may receive a multi-view switching request through voice recognition. For example, when receiving a voice utterance such as ⁇ switch to multi-view> through the microphone 161, the electronic device 100 may receive a multi-view change request by recognizing the uttered voice. According to an embodiment, the electronic device 100 may receive a multi-view switching request by recognizing a specific user gesture through the camera 162 . According to an embodiment, the electronic device 100 may receive a multi-view switching request by receiving a signal corresponding to a specific button provided in the remote control device.
  • voice recognition For example, when receiving a voice utterance such as ⁇ switch to multi-view> through the microphone 161, the electronic device 100 may receive a multi-view change request by recognizing the uttered voice. According to an embodiment, the electronic device 100 may receive a multi-view switching request by recognizing a specific user gesture through the camera 162 . According to an embodiment, the electronic
  • the electronic device 100 displays an item representing ⁇ multi-view switch> on a part of a screen displaying content in the single view mode and receives a user input for selecting the displayed ⁇ multi-view switch> item, thereby A view switching request may be received.
  • the electronic device 100 may display content based on the IP streaming signal through a plurality of screens according to the reception of the multi-view switch request, and receive the RF signal and store it in the buffer.
  • the electronic device 100 may divide the display screen into a plurality of screens and control to display different content on each of the divided screens.
  • the electronic device 100 may request IP streaming content corresponding to the content displayed in the single view from the IP streaming server in order to display different content on the plurality of divided screens.
  • the multi-view manager requests multi-view content corresponding to the content from the IP streaming server using the identifier of the content displayed in the single view, and an IP streaming signal corresponding to the multi-view content requested from the IP streaming server. can receive
  • the electronic device 100 may provide a multi-view by extracting a plurality of contents from an IP streaming signal received from an IP streaming server and outputting each of the extracted contents to each of the divided screens.
  • the electronic device 100 receives and displays multi-view content in response to a multi-view switching request on a plurality of screens, and continues to receive an RF signal previously received in a single view and buffers the received RF signal. can be stored in In this way, even when single view is terminated by switching from single view to multi view, when returning from multi view to single view in the future, a seamless screen change can be implemented using the RF signal stored in the buffer.
  • the electronic device 100 allocates a buffer of a predetermined size and continuously stores the RF signal in the buffer, so that the electronic device 100 can always store the RF signal of a predetermined size at any point in time.
  • the electronic device 100 may store an RF signal of several seconds to several tens of seconds in a buffer.
  • the electronic device 100 may check reproduction time information of the IP streaming signal at the time the single-view switching request is received.
  • the electronic device 100 checks whether the corresponding content is convertible to a single view based on attribute information of the content displayed on each screen of the plurality of screens, and determines that the content can be switched to the single view as a result of the check In this case, a ⁇ single view conversion> item that allows a single view conversion to be selected can be output to a part of the screen. According to an example, the electronic device 100 determines whether single-view switching is possible based on attribute information of content displayed on each screen among a plurality of screens constituting the multi-view. Do not output single view conversion items.
  • the electronic device 100 may check reproduction time information of the IP streaming signal displayed at the time the single-view switching request is received. For example, the electronic device 100 may check reproduction time information by checking a presentation time stamp (PTS) of an IP streaming signal displayed at a time when a single view switch request is received.
  • PTS presentation time stamp
  • the electronic device 100 may identify a reproduction position having the same reproduction time information as the identified reproduction time information from the RF signal stored in the buffer, and display it in a single view from the identified reproduction position based on the RF signal. there is.
  • the electronic device 100 identifies, from the RF signal stored in the buffer, a playback position having the same PTS as the PTS of the IP streaming signal at the point in time when the single view switch request is received, and reproduces the RF signal from the identified playback position.
  • seamless screen switching can be performed without any screen break.
  • FIG. 7 shows an example of an RF signal received in a single-view mode and an IP streaming signal received in a multi-view mode according to an embodiment.
  • the electronic device 100 may receive an RF signal including the first content 720 from the broadcasting station 700 and display the first content on a single screen.
  • the electronic device 100 may receive the RF signal from the broadcasting station 700 through an external device such as a set-top box.
  • the content provided in the multi-view mode may be provided through the IP streaming content server 710 .
  • the IP streaming content server 710 receives the RF signal containing the first content 720 transmitted from the broadcasting station 700 in real time, and uses the received first content 720 and other content related to the first content 720, for example, the second content. 730, the third content 740, and the fourth content 750 may be packaged together and provided to the electronic device 100 as an IP streaming signal 760.
  • the IP streaming content server 710 receives the second content 730, the third content 740, and the fourth content 750 from the broadcasting station 700 together with the RF signal containing the first content 720 transmitted from the broadcasting station 700, and receives the first content 710 and the second content 720, the third content 730, and the fourth content 740 may be packaged together and provided to the electronic device 100 as an IP streaming signal 760.
  • the electronic device 100 receives the IP streaming signal 760 containing the first content 720, the second content 730, the third content 740, and the fourth content 750 from the IP streaming content server 710 in the multi-view mode, and provides a multi-view of each content. It can output to each of a plurality of screens to comprise.
  • the IP streaming signal is provided to the electronic device 100 by processing or packaging the RF signal transmitted from the broadcasting station, the IP streaming signal received from the IP streaming content server 710 is always more constant than the RF signal transmitted from the broadcasting station 700 in real time. A time lag may inevitably occur.
  • FIG. 8 is a reference diagram for explaining a time difference between an RF signal received in a single-view mode and an IP streaming signal received in a multi-view mode, according to an embodiment.
  • the IP streaming signal 820 since the IP streaming signal 820 is provided by packaging the RF signal 810 broadcast in real time, it may be provided after a predetermined time has elapsed after the RF signal 810 is transmitted. Accordingly, the electronic device 100 may always receive the IP streaming signal 820 with a delay compared to the RF signal 810 . For example, if the time difference between the IP streaming signal 820 and the RF signal 810 is 2 seconds, after the electronic device 100 receives a specific part of the RF signal of the content, 2 seconds pass, and a specific part of the IP streaming signal containing the same content is displayed. can receive
  • the electronic device 100 when receiving the multi-view switching request 830 from the single view at 00:00:20 at the reproduction position of the RF signal, requests and receives the multi-view switching request 830 from the IP streaming server at the time of receiving the multi-view switching request 830
  • One IP streaming signal 820 may correspond to a reproduction position 00:00:18 due to a time difference between the RF signal and the IP streaming signal.
  • the electronic device 100 displays the content corresponding to the IP streaming signal in the multi-view with a delay corresponding to the time difference when the single view is switched to the multi-view.
  • the electronic device 100 when the electronic device 100 receives a request 840 to switch from the multi-view to the single view while providing the multi-view based on the IP streaming signal with a delay by the time difference between the RF signal and the IP streaming signal, the electronic device 100 provides the multi-view. You can turn it off, that is, stop the multi-view display based on the IP streaming signal, and provide a single view based on the RF signal.
  • the IP streaming signal 820 already has a certain time difference with the RF signal 810 broadcast in real time, if the RF signal is received immediately at the time of the single view conversion request and the content is displayed based on the RF signal, the predetermined time difference is converted to an advanced screen have no choice but to do That is, for example, referring to FIG. 8 , if the single view switch request 840 is received at the playback position 00:10:20 of the IP streaming signal 820, and the RF signal is received and displayed at this point, the The playback position will be switched to 00:10:22.
  • the user views 00:10:20 of the same content by switching to a single view and then suddenly switches to 00:10:22, giving an uncomfortable experience due to the screen tearing phenomenon that abruptly skips 2 seconds of content.
  • FIG. 9 is a reference diagram for explaining a method of finding a reproduction position of an RF signal for a seamless screen change when a single view is switched according to an embodiment.
  • the electronic device 100 when there is a single-view switching request from multi-view, the electronic device 100 receives IP streaming content for multi-view display and displays the plurality of contents on a plurality of screens, and the electronic device 100 returns to the screen later.
  • the RF signal received in the single view can be stored in the buffer 113 for seamless screen change during single view conversion. In this way, by storing a predetermined amount of the RF signal in the buffer 113, the electronic device 100 does not switch the screen to the reproduction position of the RF signal broadcast in real time when switching back to the single view later, but rather than the reproduction position of the real-time broadcast RF signal. It may be possible to move to a delayed playback position. Accordingly, the electronic device 100 may implement a seamless screen transition when switching to a single view.
  • the electronic device 100 may check the playback time information of the IP streaming content at the point in time when the single view switch request 900 is received.
  • the reproduction position B having the same reproduction time information as the reproduction time information of the IP streaming content at the time when the single view switch request 900 is received can be identified from the RF signal stored in the buffer 113 .
  • the RF signal stored in the buffer is not used and the RF signal is immediately switched to the real-time broadcast signal when the single view is switched, as shown in FIG. Because of the conversion, the screen is skipped by the time difference D in the end to show the content in the single view screen, and thus an unnatural and awkward screen may be provided to the user.
  • FIG. 10 is a reference diagram for explaining a method for resolving a time difference between a reproduction position of an RF signal stored in a buffer and a display position of a real-time broadcast RF signal, according to an embodiment.
  • the playback position is delayed and reproduced using the RF signal stored in the buffer between the IP streaming content screen in the multi-view mode and the content screen based on the RF signal in the single-view mode.
  • a seamless screen transition can be implemented.
  • the playback position B which starts playing using the RF signal stored in the buffer
  • the real-time broadcast RF signal display position C at the time of single-view switching request
  • the content is displayed using the RF signal stored in the buffer. In this case, it is always delayed by a time difference D from the real-time broadcast RF signal and displayed.
  • the electronic device 100 can gradually catch up with the timing of a real-time broadcast by reproducing the RF signal stored in the buffer 113 at a predetermined double speed by using a catch up mode, etc. to resolve the time difference D.
  • the electronic device 10 may catch up with the reproduction position of the real-time broadcast RF signal at a point D by reproducing the RF signal stored in the buffer 113 at double speed, such as at 1.2x speed, in order to resolve the time difference D.
  • the electronic device 100 releases the allocation of the buffer 113, receives the real-time broadcast RF signal directly, and It can be displayed on a single view screen.
  • FIG. 11 illustrates an example of a user interface that allows a user to select a seamless switching function when switching from a multi-view to a single-view according to an embodiment.
  • whether or not to apply a seamless switching function when switching a single view from a multi-view as described in the present disclosure may be made available to the user through a setting menu or the like.
  • some users may choose the seamless switching function, considering that seamless screen switching is important, but some users directly watch RF broadcasts transmitted in real time rather than seamless screen You may want to do Accordingly, in order to provide a function suitable for the user's selection, the electronic device 100 may provide a user interface that inquires whether to apply the seamless switching function.
  • the electronic device 100 uses the ⁇ Do you want to use the seamless switching function when switching from multi-view to single-view?
  • a user interface 1100 such as yes or no> may be output.
  • the electronic device 100 uses the seamless switching function when switching from a multi-view to a single view as described in the present disclosure to the buffer when switching to a multi-view.
  • seamless screen switching can be performed using the RF signal stored in the buffer when switching single views.
  • the electronic device 100 When the user selects not to use the seamless switching function in response to the user interface 1100, the electronic device 100 receives the RF signal that is broadcast in real time without using the RF signal stored in the buffer when switching from the multi-view to the single view, can be displayed.
  • FIG. 12 is an example of a flowchart of an operation of performing a seamless screen switching function when the electronic device 100 switches from a multi-view to a single-view mode, according to an embodiment.
  • the electronic device 100 may receive an RF signal from the broadcasting station 700 and display first content in a single view based on the received RF signal.
  • the electronic device 100 may display, for example, the first content on the first screen configured as a single screen.
  • the multi-view manager 111 of the electronic device 100 may receive a multi-view switch request.
  • the multi-view manager 111 may request an IP streaming signal from the IP streaming server 710 .
  • the multi-view manager 111 may request an IP streaming signal from the IP streaming server 710 based on identification information of the first content displayed in the single view.
  • the IP streaming server 710 receives an RF signal from the broadcasting station 700, and in operation 1205, the IP streaming server 710 may transmit an IP streaming signal obtained based on the received RF signal to the multi-view manager 111.
  • the multi-view manager 111 may control the received IP streaming signal to be displayed on a plurality of screens constituting the multi-view. For example, the multi-view manager 111 may control the first content of the IP streaming signal to be displayed on the first screen and the second to fourth content of the IP streaming signal to be displayed on the second screen to the fourth screen, respectively.
  • the multi-view manager 111 may also control the buffer manager 112 to store the RF signal received in the single view in the buffer. That is, in operation 1208 the buffer manager 112 may receive the RF signal, and in operation 1209 the buffer manager may store the received RF signal in the buffer 113 .
  • the multi-view manager 111 may receive a single-view switching request.
  • the multi-view manager 111 may check the IP streaming signal reproduction time information at the point in time when the single-view switch request is received, and provide the verified IP streaming signal reproduction time information to the buffer manager 112 .
  • the buffer manager 112 identifies the reproduction position of the RF signal stored in the buffer having the same reproduction time information as the reproduction time information of the received IP streaming signal, and in operation 1213 from the reproduction position of the RF signal identified from the buffer 113 It can be controlled to reproduce the RF signal.
  • Computer-readable media can be any available media that can be accessed by a computer and includes both volatile and nonvolatile media, removable and non-removable media. Also, computer-readable media may include computer storage media. Computer storage media includes both volatile and nonvolatile, removable and non-removable media implemented in any method or technology for storage of information such as computer readable instructions, data structures, program modules or other data.
  • the disclosed embodiments may be implemented as a S/W program including instructions stored in a computer-readable storage medium.
  • the computer may include an electronic device according to the disclosed embodiments as a device capable of calling a stored instruction from a storage medium and operating according to the called instruction according to the disclosed embodiment.
  • the computer-readable storage medium may be provided in the form of a non-transitory storage medium.
  • 'non-transitory' means that the storage medium does not include a signal and is tangible, and does not distinguish that data is semi-permanently or temporarily stored in the storage medium.
  • control method according to the disclosed embodiments may be provided included in a computer program product (computer program product).
  • Computer program products may be traded between sellers and buyers as commodities.
  • the computer program product may include a S/W program and a computer-readable storage medium in which the S/W program is stored.
  • the computer program product may include a product (eg, a downloadable app) in the form of a S/W program distributed electronically through a device manufacturer or an electronic market (eg, Google Play Store, App Store).
  • a product eg, a downloadable app
  • the storage medium may be a server of a manufacturer, a server of an electronic market, or a storage medium of a relay server temporarily storing a SW program.
  • the computer program product in a system consisting of a server and a device, may include a storage medium of the server or a storage medium of the device.
  • the computer program product when there is a server or a third device (eg, a smart phone) that is communicatively connected to the device, the computer program product may include a storage medium of the third device.
  • the computer program product may include the S/W program itself transmitted from the server to the device or the third apparatus, or transmitted from the third apparatus to the device.
  • one of the server, the device and the third apparatus may execute the computer program product to perform the method according to the disclosed embodiments.
  • two or more of a server, a device, and a third apparatus may execute a computer program product to distribute the method according to the disclosed embodiments.
  • a server may execute a computer program product stored in the server to control a device communicatively connected with the server to perform the method according to the disclosed embodiments.
  • the third apparatus may execute a computer program product to control a device communicatively connected with the third apparatus to perform the method according to the disclosed embodiment.
  • the third device may download the computer program product from the server and execute the downloaded computer program product.
  • the third device may execute the computer program product provided in a preloaded state to perform the method according to the disclosed embodiments.
  • unit may be a hardware component such as a processor or circuit, and/or a software component executed by a hardware component such as a processor.

Abstract

실시예들에 따라, 전자 장치 및 그 동작 방법이 개시된다. 개시된 전자 장치는, 통신 인터페이스; 하나 이상의 인스트럭션을 저장하는 메모리; 및 상기 메모리에 저장된 하나 이상의 인스트럭션을 실행하는 프로세서를 포함하고, 상기 프로세서는, 상기 하나 이상의 인스트럭션을 실행함으로써, 컨텐츠가 단일 화면에 표시되는 싱글뷰를 멀티뷰로 전환하는 멀티뷰 전환 요청을 수신하고, 상기 멀티뷰 전환 요청 수신에 따라 복수의 화면을 통해서 IP 스트리밍 신호에 기반한 컨텐츠를 표시함과 함께, 싱글뷰에서 표시되던 컨텐츠에 대응하는 RF 신호를 수신하여 버퍼에 저장하고, 상기 멀티뷰를 상기 싱글뷰로 전환하는 싱글뷰 전환 요청을 수신함에 따라, 상기 싱글뷰 전환 요청이 수신된 시점에서의 IP 스트리밍 신호의 재생 시간 정보를 확인하고, 상기 버퍼에 저장된 RF 신호에서 상기 확인된 재생 시간 정보와 동일한 재생 시간 정보를 가지는 재생 위치를 식별하고, 상기 식별된 재생 위치로부터 상기 RF 신호에 기반하여 싱글뷰로 표시한다.

Description

전자 장치 및 그 동작 방법
다양한 실시예들은 전자 장치 및 그 동작 방법에 관한 것으로, 보다 구체적으로는, 멀티뷰 와 싱글뷰 전환시에 심리스한 화면 전환을 제공할 수 있는 전자 장치 및 그 동작 방법에 관한 것이다.
종래에 텔레비전 등의 디스플레이 장치는 하나의 방송 컨텐츠를 수신하여 디스플레이 장치의 단일 화면에 표시하는 것이 일반적이었다. 최근에는 사용자들에게 다양한 컨텐츠 경험을 제공하기 위해 방송 컨텐츠와 관련된 복수의 컨텐츠를 제공하고, 디스플레이 장치는 디스플레이 화면을 복수개의 화면으로 분할하고 분할된 복수개의 화면 각각에 서로 다른 컨텐츠를 표시하는 멀티스트리밍 서비스를 제공하려는 시도들이 일어나고 있다.
디스플레이 장치가 싱글뷰 모드에서 단일 화면으로 컨텐츠를 표시하는 경우의 컨텐츠 소오스와, 멀티뷰 모드에서, 단일 화면을 복수개의 화면으로 분할하고 각 분할 화면에서 서로 다른 컨텐츠를 표시하는 경우의 신호 소오스는 서로 다르기 때문에 싱글뷰와 멀티뷰 사이의 전환을 수행하는 경우 화면 끊김 등의 문제가 발생할 수 있다.
다양한 실시예들은, 싱글뷰와 멀티뷰 사이의 전환시 화면 전환을 자연스럽게 할 수 있는 전자 장치 및 그 동작 방법을 제공하고자 한다.
일 실시예에 따른 전자 장치는, 통신 인터페이스; 하나 이상의 인스트럭션을 저장하는 메모리; 및 상기 메모리에 저장된 하나 이상의 인스트럭션을 실행하는 프로세서를 포함하고, 상기 프로세서는, 상기 하나 이상의 인스트럭션을 실행함으로써, 컨텐츠가 단일 화면에 표시되는 싱글뷰를 멀티뷰로 전환하는 멀티뷰 전환 요청을 수신하고, 상기 멀티뷰 전환 요청 수신에 따라 복수의 화면을 통해서 IP 스트리밍 신호에 기반한 컨텐츠를 표시함과 함께, 싱글뷰에서 표시되던 컨텐츠에 대응하는 RF 신호를 수신하여 버퍼에 저장하고, 상기 멀티뷰를 상기 싱글뷰로 전환하는 싱글뷰 전환 요청을 수신함에 따라, 상기 싱글뷰 전환 요청이 수신된 시점에서의 IP 스트리밍 신호의 재생 시간 정보를 확인하고, 상기 버퍼에 저장된 RF 신호에서 상기 확인된 재생 시간 정보와 동일한 재생 시간 정보를 가지는 재생 위치를 식별하고, 상기 식별된 재생 위치로부터 상기 RF 신호에 기반하여 싱글뷰로 표시한다.
일 실시예에 따라 상기 멀티뷰에서 상기 복수의 화면을 통해서 표시되는 상기 IP 스트리밍 신호에 기반한 컨텐츠는, 상기 싱글뷰에서 표시되는 상기 RF 신호에 기반한 컨텐트와 연관성이 있는 컨텐츠일 수 있다.
일 실시예에 따라 상기 멀티뷰를 구성하는 상기 복수의 화면 중 제1화면을 통해서 표시되는 상기 IP 스트리밍 신호에 기반한 컨텐츠는, 상기 싱글뷰에서 표시되는 상기 RF 신호에 기반한 컨텐츠와 동일한 컨텐츠일 수 있다.
일 실시예에 따라 상기 프로세서는, 상기 하나 이상의 인스트럭션을 실행함으로써, 상기 제1화면을 통해서 표시되는 상기 IP 스트리밍 신호에 기반한 컨텐츠의 속성 정보를 식별하고, 상기 식별된 속성 정보에 따라, 상기 제1화면에 표시되는 컨텐츠를 싱글뷰로 전환을 선택하기 위한 사용자 입력을 수신하기 위한 사용자 인터페이스를 상기 제1화면의 일부 영역에 출력할 수 있다.
일 실시예에 따라 상기 프로세서는, 상기 하나 이상의 인스트럭션을 실행함으로써, 상기 싱글뷰 전환을 선택하는 사용자 입력을 수신함에 따라, 상기 제1화면에 표시되는 컨텐츠를 싱글뷰로 표시할 수 있다.
일 실시예에 따라 상기 저장된 RF 신호에서 식별된 재생 위치는, 실시간으로 방송되는 RF 신호의 현재 재생 위치보다 지연된 시점을 나타낼 수 있다.
일 실시예에 따라 상기 프로세서는, 상기 하나 이상의 인스트럭션을 실행함으로써, 상기 식별된 재생 위치로부터 재생시 재생 속도를 증가시킴으로써 상기 저장된 RF 신호에서의 재생 위치가 상기 실시간으로 방송되는 RF 신호에서의 현재 재생 위치와 동일하게 되면, 상기 RF 신호를 저장하는 버퍼를 해제하고 RF 라이브 뷰로 전환하여 표시할 수 있다.
일 실시예에 따른 전자 장치의 동작 방법은, 컨텐츠가 단일 화면에 표시되는 싱글뷰를 멀티뷰로 전환하는 멀티뷰 전환 요청을 수신하는 동작, 상기 멀티뷰 전환 요청 수신에 따라 복수의 화면을 통해서 IP 스트리밍 신호에 기반한 컨텐츠를 표시함과 함께, 싱글뷰에서 표시되던 컨텐츠에 대응하는 RF 신호를 수신하여 버퍼에 저장하는 동작, 상기 멀티뷰를 상기 싱글뷰로 전환하는 싱글뷰 전환 요청을 수신함에 따라, 상기 싱글뷰 전환 요청이 수신된 시점에서의 IP 스트리밍 신호의 재생 시간 정보를 확인하는 동작, 상기 버퍼에 저장된 RF 신호에서 상기 확인된 재생 시간 정보와 동일한 재생 시간 정보를 가지는 재생 위치를 식별하고, 상기 식별된 재생 위치로부터 상기 RF 신호에 기반하여 싱글뷰로 표시하는 동작을 포함할 수 있다.
일 실시예에 따른 전자 장치의 동작 방법의 구현을 위해 전자 장치의 프로세서에 의해 실행되는 하나 이상의 프로그램이 기록된 컴퓨터 판독가능 기록 매체에 있어서, 상기 전자 장치의 동작 방법은, 컨텐츠가 단일 화면에 표시되는 싱글뷰를 멀티뷰로 전환하는 멀티뷰 전환 요청을 수신하는 동작, 상기 멀티뷰 전환 요청 수신에 따라 복수의 화면을 통해서 IP 스트리밍 신호에 기반한 컨텐츠를 표시함과 함께, 싱글뷰에서 표시되던 컨텐츠에 대응하는 RF 신호를 수신하여 버퍼에 저장하는 동작, 상기 멀티뷰를 상기 싱글뷰로 전환하는 싱글뷰 전환 요청을 수신함에 따라, 상기 싱글뷰 전환 요청이 수신된 시점에서의 IP 스트리밍 신호의 재생 시간 정보를 확인하는 동작,
상기 버퍼에 저장된 RF 신호에서 상기 확인된 재생 시간 정보와 동일한 재생 시간 정보를 가지는 재생 위치를 식별하고, 상기 식별된 재생 위치로부터 상기 RF 신호에 기반하여 싱글뷰로 표시하는 동작을 포함할 수 있다.
본 개시서의 다양한 실시예들에 따르면, 멀티뷰에서 싱글뷰로 전환시 버퍼에 저장된 RF 신호를 이용하여 재생함으로써 멀티뷰에서 재생되던 화면과 화면의 끊김 없이 심리스한 화면 전환을 구현할 수 있다.
도 1은 싱글뷰 모드와 멀티뷰 모드 및 싱글뷰 모드에서 멀티뷰 모드로의 전환을 설명하기 위한 참고도이다.
도 2는 일 실시예에 따라 전자 장치에서 멀티뷰에서 싱글뷰 모드로 전환시 심리스한 화면 전환을 제공하기 위한 방법을 설명하기 위한 참고도이다.
도 3은 일 실시예에 따른 전자 장치의 개략적인 블록도이다.
도 4는 일 실시예에 따른 전자 장치의 세부적인 블록도이다.
도 5는 일 실시예에 따라 싱글뷰 멀티뷰 전환 모듈을 구성하기 위한 메모리 110의 일 예를 나타낸다.
도 6은 일 실시예에 따라 멀티뷰 싱글뷰 전환시 심리스한 화면 전환을 제공하기 위한 방법의 동작을 나타내는 흐름도이다.
도 7은 일 실시예에 따라 싱글뷰 모드에서 수신되는 RF 신호와 멀티뷰 모드에서 수신되는 IP 스트리밍 신호의 예를 나타낸다.
도 8은 일 실시예에 따라 싱글뷰 모드에서 수신되는 RF 신호와 멀티뷰 모드에서 수신되는 IP 스트리밍 신호의 시간차를 설명하기 위한 참고도이다.
도 9는 일 실시예에 따라 싱글뷰 전환시 심리스한 화면 전환을 위해 RF 신호의 재생 위치를 찾는 방법을 설명하기 위한 참고도이다.
도 10은 일 실시예에 따라 버퍼에 저장된 RF 신호의 재생 위치와 실시간 방송 RF 신호의 표시 위치간의 시간차를 해소하기 위한 방법을 설명하기 위한 참고도이다.
도 11은 일 실시예에 따라 멀티뷰에서 싱글뷰 전환시 심리스 전환 기능을 사용자로 하여금 선택할 수 있도록 하는 사용자 인터페이스의 일 예를 나타낸다.
도 12는 일 실시예에 따라 전자 장치 100에서 멀티뷰에서 싱글뷰 모드 전환시 심리스 화면 전환 기능을 수행하는 동작의 흐름도의 일 예이다.
본 명세서에서 사용되는 용어에 대해 간략히 설명하고, 본 발명에 대해 구체적으로 설명하기로 한다.
본 발명에서 사용되는 용어는 본 발명에서의 기능을 고려하면서 가능한 현재 널리 사용되는 일반적인 용어들을 선택하였으나, 이는 당 분야에 종사하는 기술자의 의도 또는 판례, 새로운 기술의 출현 등에 따라 달라질 수 있다. 또한, 특정한 경우는 출원인이 임의로 선정한 용어도 있으며, 이 경우 해당되는 발명의 설명 부분에서 상세히 그 의미를 기재할 것이다. 따라서 본 발명에서 사용되는 용어는 단순한 용어의 명칭이 아닌, 그 용어가 가지는 의미와 본 발명의 전반에 걸친 내용을 토대로 정의되어야 한다.
명세서 전체에서 어떤 부분이 어떤 구성요소를 "포함"한다고 할 때, 이는 특별히 반대되는 기재가 없는 한 다른 구성요소를 제외하는 것이 아니라 다른 구성요소를 더 포함할 수 있음을 의미한다. 또한, 명세서에 기재된 "...부", "모듈" 등의 용어는 적어도 하나의 기능이나 동작을 처리하는 단위를 의미하며, 이는 하드웨어 또는 소프트웨어로 구현되거나 하드웨어와 소프트웨어의 결합으로 구현될 수 있다.
아래에서는 첨부한 도면을 참고하여 실시예들에 대하여 본 발명이 속하는 기술 분야에서 통상의 지식을 가진 자가 용이하게 실시할 수 있도록 상세히 설명한다. 그러나 본 발명은 여러 가지 상이한 형태로 구현될 수 있으며 여기에서 설명하는 실시예에 한정되지 않는다. 그리고 도면에서 본 발명을 명확하게 설명하기 위해서 설명과 관계없는 부분은 생략하였으며, 명세서 전체를 통하여 유사한 부분에 대해서는 유사한 도면 부호를 붙였다.
본 명세서의 실시예에서 "사용자"라는 용어는 제어 장치를 이용하여 컴퓨팅 장치 또는 전자 장치의 기능 또는 동작을 제어하는 사람을 의미하며, 시청자, 관리자 또는 설치 기사를 포함할 수 있다.
본 명세서의 실시예에서 “멀티스트리밍 서비스”라는 용어는 전자 장치의 디스플레이 화면을 복수개의 영역으로 분할하고, 분할된 각 영역을 서브 화면으로 하여, 각 서브 화면에서 서로 다른 컨텐츠를 제공하는 서비스를 나타낼 수 있다. 디스플레이 화면은 두 개 이상의 서브 화면으로 분할될 수 있다. 각 서브 화면에 제공되는 컨텐츠는 메인 컨텐츠 및 메인 컨텐츠에 연관된 컨텐츠가 될 수 있다. 각 서브 화면에 제공되는 컨텐츠는 동일한 소오스로부터의 컨텐츠일 수도 있고, 서로 다른 소오스로부터의 컨텐츠 일 수도 있다. 멀티스트리밍 서비스는 멀티뷰 서비스 또는 멀티스크린 서비스로 언급될 수도 있다.
도 1은 싱글뷰 모드와 멀티뷰 모드 및 싱글뷰 모드에서 멀티뷰 모드로의 전환을 설명하기 위한 참고도이다.
도 1을 참조하면, 싱글뷰 모드 10은 텔레비전 등의 디스플레이 장치에서 디스플레이의 하나의 싱글 화면에 하나의 컨텐츠를 표시하는 모드이다. 싱글뷰 모드 10에서 표시되는 컨텐츠는 방송국으로부터 직접 수신된 방송 컨텐츠, 외부 소오스를 통해서 수신된 방송 컨텐츠, 인터넷을 통해 컨텐츠 제공 서버로부터 수신되는 컨텐츠 등을 포함할 수 있다.
사용자들에게 좀더 다양한 컨텐츠 경험을 제공하기 위해 방송 컨텐츠에 대해서 멀티뷰 모드 20가 제공될 수 있다. 멀티뷰 모드 20는 디스플레이 장치의 디스플레이 화면을 복수개의 화면으로 분할하고, 분할된 화면에 각각 서로 다른 컨텐츠를 표시하는 모드이다. 디스플레이가 하나의 싱글 화면으로 이루어진 경우와 구별시키기 위해 각 분할된 화면을 서브 화면으로 언급될 수 있다. 도 1을 참조하면, 멀티뷰 모드 20은 예를 들어 네 개의 화면, 즉, 제1 화면, 제2 화면, 제3 화면, 제4 화면으로 구성된다.
디스플레이 장치의 디스플레이 모드는 싱글뷰 모드로 표시되다가 멀티뷰 모드로 전환될 수 있다. 싱글뷰 모드에서 어떤 컨텐츠가 표시되다가 멀티뷰 모드로 전환된 경우에, 멀티뷰 모드에서 표시되는 컨텐츠는 싱글뷰 모드에서 표시되던 컨텐츠와 연관된 컨텐츠일 수 있다. 예를 들어, 야구 등의 스포츠 경기 컨텐츠인 경우, 멀티뷰 모드에서 복수의 화면에 표시되는 컨텐츠는 해당 스포츠 경기 컨텐츠에서 포착될 수 있는 복수의 장면에 대응하는 컨텐츠가 될 수 있다. 예를 들어, 멀티뷰 모드의 각 화면은 타자를 중심으로 보여주는 컨텐츠, 포수를 중심으로 보여주는 컨텐츠, 감독을 중심으로 보여주는 컨텐츠, 관중을 중심으로 보여주는 컨텐츠를 표시할 수 있다. 예를 들어, 공연을 중계하는 컨텐츠의 경우, 멀티뷰 모드의 각 화면은 해당 공연에서 연기를 하거나 연주를 하는 각 공연자를 중심으로 보여주는 컨텐츠를 표시할 수 있다.
멀티뷰 모드에서 표시되는 컨텐츠는 싱글뷰 모드에서 표시되던 컨텐츠에 대한 부가 정보를 제공하는 컨텐츠를 포함할 수 있다. 예를 들어, 컨텐츠에 대한 부가 정보는 야구 경기 방송에서 야구 경기의 점수나, 팀에 대한 정보, 야구 선수들에 대한 정보를 포함할 수 있고, 공연 중계 방송에서 공연자들에 대한 정보, 공연물에 대한 정보를 포함할 수 있다.
도 1을 참조하면, 싱글뷰 모드 10에서 전자 장치는 제1컨텐츠에 대응하는 RF 신호 30를 수신하여 싱글 화면에 표시할 수 있다. 이와 같은 RF 신호 30는 전자 장치가 튜너를 통하여 직접 수신할 수도 있고 셋탑 박스 등의 외부 장치 등을 통해서 수신할 수도 있다.
싱글뷰 모드 10에서 제1컨텐츠를 표시하는 전자 장치 100는 멀티뷰 전환 요청을 수신할 수 있다. 멀티뷰 전환 요청은 다양한 사용자 인터페이스, 예를 들어, 원격 제어 장치를 통한 제어 신호, 전자 장치에 마련된 키 입력 신호, 음성 인식 기능 등을 통해서 수신될 수 있겠지만, 일 예에 따라서 제1컨텐츠를 표시하는 화면의 일부에 <멀티뷰 전환> 이라는 아이템 50을 제공하고, 이러한 아이템을 선택하는 입력에 따라서 멀티뷰 전환 요청을 수신할 수 있다. 예를 들어, 전자 장치 100는 화면에 표시되는 컨텐츠의 속성을 파악하고, 컨텐츠의 속성으로부터 멀티뷰 전환 가능한 컨텐츠임이 인식되면, 컨텐츠가 표시되는 화면의 일부 영역에 멀티뷰 전환을 나타내는 사용자 인터페이스를 출력할 수 있다.
멀티뷰 전환 요청을 수신한 전자 장치 100는 IP 스트리밍 서버 등의 외부 서버를 통해 IP 스트리밍 신호 40을 수신하고, IP 스트리밍 신호 40에 포함된 복수의 컨텐츠 각각을 복수의 화면에 각각 표시할 수 있다. 예를 들어 전자 장치 100는 IP 스트리밍 신호 40에 포함된 제1컨텐츠는 제1화면에, 제2컨텐츠는 제2화면에, 제3컨텐츠는 제3화면에, 제4컨텐츠는 제4화면에 표시할 수 있다. 예를 들어, 전자 장치 100가 싱글뷰에서 표시하는 RF 신호 30에 대응하는 제1컨텐츠가 야구 경기의 메인 영상 컨텐츠인 경우, 멀티뷰에서 표시하는 IP 스트리밍 신호 40에 대응하는 제1컨텐츠는, 싱글뷰에서 보여준 것과 동일한 야구 경기 메인 영상, 제2컨텐츠는 해당 야구 경기에서 타자를 포커스해서 보여주는 영상, 제3컨텐츠는 감독을 포커스해서 보여주는 영상, 제4컨텐츠는 관중석을 포커스해서 보여주는 영상 등과 같이 될 수 있다.
IP 스트리밍 신호 40는 실시간으로 방송되는 제1컨텐츠에 대응하는 RF 신호 30를 획득해서 다른 컨텐츠와 함께 패키징하여 생성되는 신호이기 때문에, IP 스트리밍 신호 40는 실시간으로 방송되는 RF 신호 30 에 비해서 소정 시간, 예를 들어, 수 초 정도 지연된 신호 일 수 있다. 즉, 방송국에서 보내는 RF 신호 30와 IP스트리밍 서버 등에서 보내는 IP 스트리밍 신호 40에는 일정한 시간차가 발생할 수 있다. 예를 들어, 전자 장치 100에서 RF 신호를 수신하여 재생 위치 00:00:40에서 제1컨텐츠를 표시하는 중 멀티뷰 전환 요청이 수신되어 전자 장치 100가 IP 스트리밍 신호 40를 수신하여 제1 내지 제4컨텐츠를 표시하는 경우에, 앞서 설명한 바와 같이 RF 신호와 IP 스트리밍 신호의 시간 차가 2초 라면, 전자 장치 100는 예를 들어, 재생 위치 00:00:38 에서 제1내지 제4컨텐츠를 표시할 수 있다. 이와 같이 RF 신호 30와 IP 스트리밍 신호 40 간에는 일정한 시간 차가 발생하기 때문에, 멀티뷰 모드에서 표시되는 컨텐츠는 싱글뷰 모드에서 표시되는 컨텐츠보다 항상 일정 시간 지연된 상태가 될 수 있다. 따라서, 멀티뷰 모드에서 다시 싱글뷰 모드로 전환되는 경우에는 멀티뷰 모드에서 표시되던 재생 위치보다 더 앞선 재생 위치에서 싱글뷰 모드에서 표시될 수 밖에 없다. 예를 들어, 멀티뷰 모드에서 재생 위치 00:20:40에서 컨텐츠를 표시중 싱글뷰 전환 요청이 수신된 경우, 전자 장치 100는 2초 정도 앞서나간 재생 위치 00:20:42의 RF 신호를 수신하여 컨텐츠를 표시하게 되므로, 사용자 입장에서는 싱글뷰 전환에 따라서 2초 정도 건너 뛴 영상을 보게 될 수 밖에 없다. 따라서, 본 개시서에서는 멀티뷰에서 싱글뷰 모드로 전환시 발생할 수 있는 화면 끊김 현상을 방지하고 심리스한 화면 전환을 제공하기 위한 방법을 제시한다.
도 2는 일 실시예에 따라 전자 장치에서 멀티뷰에서 싱글뷰 모드로 전환시 심리스한 화면 전환을 제공하기 위한 방법을 설명하기 위한 참고도이다.
도 2를 참조하면, 일 실시예에 따른 전자 장치 100는 싱글뷰에서 멀티뷰 전환시에 IP 스트리밍 신호 40로부터 얻은 제1컨텐츠, 제2컨텐츠, 제3컨텐츠, 제4컨텐츠를 전자 장치의 멀티뷰를 구성하는 복수의 화면에 표시함과 함께, 제1컨텐츠에 대응하는 RF 신호 30을 수신하여 버퍼 113에 저장할 수 있다. 버퍼 113는 수신된 RF 신호를 저장할 수 있는 공간이면 어떠한 기억 장치도 이용될 수 있다. 예를 들어 버퍼 113는 미리 정해진 사이즈를 가지고, 미리 정해진 사이즈 만큼 RF 신호를 저장해둘 수 있다. 예를 들어 버퍼 113는 수 초에서 수십 초 분량의 RF 신호를 저장해둘 수 있다.
일 실시예에 따라 전자 장치 100는 멀티뷰 모드에서 싱글뷰 모드 전환시 RF 신호 30을 수신하여 표시하는 것이 아니라 버퍼 113에 저장된 RF 신호를 기반으로 제1컨텐츠를 표시할 수 있다. 실시간으로 방송되는 RF 신호를 수신하여 표시하는 경우에는 현재 실시간으로 방송되는 재생 위치에서부터만 제1컨텐츠의 표시를 할 수 있지만, 버퍼 113에 저장된 RF 신호를 이용함으로써, 전자 장치 100는 RF 신호의 재생 위치를 능동적으로 결정할 수 있다.
일 실시예에 따라 전자 장치 100는 멀티뷰 모드에서 싱글뷰 모드 전환 요청시에 전자 장치 100에서 표시되던 IP 스트리밍 신호의 재생 위치에 대응하는 재생 시간 정보를 획득하고, 이 재생 시간 정보와 동일한 재생 시간 정보를 가지는 RF 신호의 재생 위치를 버퍼 113에서 식별하고, 식별된 RF 신호의 재생 위치로부터 RF 신호에 대응하는 컨텐츠를 표시할 수 있다. 이와 같이, 싱글뷰 모드 전환시 IP 스트리밍 신호의 재생 위치에 대응하는 재생 시간 정보와 동일한 재생 시간 정보를 가지는 RF 신호의 재생 위치로부터 컨텐츠를 표시함으로써, 싱글뷰 모드 전환시에 멀티뷰에서 마지막으로 표시되는 컨텐츠의 재생 시점과 싱글뷰 모드에서 표시 시작되는 컨텐츠의 재생 시점을 일치시킴으로써 끊김없는 화면 전환을 가능하게 할 수 있다.
일 실시예에 따라 전자 장치 100가 버퍼에 저장된 RF 신호에서 식별한 재생 위치는, 실시간으로 방송되는 RF 신호의 현재 재생 위치보다 지연된 시점을 나타낼 수 있다.
일 실시예에 따라 전자 장치 100는 싱글뷰 전환시 버퍼에서 식별된 재생 위치로부터 제1컨텐츠를 재생하는 경우 재생 속도를 증가시킴으로써, 버퍼에 저장된 RF 신호에서의 재생 위치가 실시간으로 방송되는 RF 신호에서의 현재 재생 위치와 동일하게 되면, RF 신호를 저장하는 버퍼를 해제하고 RF 라이브 뷰로 전환하여 표시할 수 있다.
일 실시예에 따라 전자 장치 100는 멀티뷰 모드에서 멀티뷰를 구성하는 복수의 화면에 표시되는 상기 IP 스트리밍 신호에 기반한 컨텐츠의 속성 정보를 식별하고, 식별된 속성 정보에 따라, 화면에 표시되는 컨텐츠를 싱글뷰로 전환을 선택하는 사용자 입력을 수신하기 위한 사용자 인터페이스를 화면의 일부 영역에 출력할 수 있다. 예를 들어, 도 2를 참조하면, 전자 장치 100는 멀티뷰 모드 20에서 제1화면에 출력되는 제1컨텐츠의 속성 정보를 식별하고, 식별된 속성 정보에 따라 제1컨텐츠가 RF 신호에 기반한 것임을 인식할 수 있다. 따라서 전자 장치 100는 제1화면의 일부 영역에, 제1화면에 출력되는 제1컨텐츠를 싱글뷰로 전환을 선택하는 사용자 입력을 수신하기 위한 <싱글뷰 전환> 아이템 60을 출력할 수 있다. 이와 같이 멀티뷰를 구성하는 복수의 화면에 대해서 각 화면에 출력되는 컨텐츠의 속성에 따라서 적응적으로 컨텐츠를 제어할 수 있는 메뉴를 제공함으로써 사용자로 하여금 용이하고 직관적으로 복수의 화면에 제공되는 컨텐츠를 제어하는 것을 가능하게 할 수 있다.
일 실시예에 따라 전자 장치 100는 멀티뷰를 구성하는 복수의 화면 중 어느 하나의 화면에서 싱글뷰 전환을 선택하는 사용자 입력을 수신함에 따라, 해당 화면에 표시되는 컨텐츠를 싱글뷰로 표시할 수 있다.
도 3은 일 실시예에 따른 전자 장치의 개략적인 블록도이다.
도 3을 참조하면, 전자 장치 100는 메모리 110 및 프로세서 120를 포함할 수 있다. 그러나, 전자 장치 100는, 도시된 구성요소보다 많은 구성요소에 의해 구현될 수 있으며, 전술한 예에 한정되지 않는다.
일 실시예에 따른 메모리 110는, 프로세서 120의 처리 및 제어를 위한 프로그램을 저장할 수 있고, 전자 장치 100으로 입력되거나 전자 장치 100로부터 출력되는 데이터를 저장할 수 있다.
메모리 110는 플래시 메모리 타입(flash memory type), 하드디스크 타입(hard disk type), 멀티미디어 카드 마이크로 타입(multimedia card micro type), 카드 타입의 메모리(예를 들어 SD 또는 XD 메모리 등), 램(RAM, Random Access Memory) SRAM(Static Random Access Memory), 롬(ROM, Read-Only Memory), EEPROM(Electrically Erasable Programmable Read-Only Memory), PROM(Programmable Read-Only Memory), 자기 메모리, 자기 디스크, 광디스크 중 적어도 하나의 타입의 저장매체를 포함할 수 있다.
프로세서 120는 전자 장치 100의 전반적인 동작을 제어한다. 예를 들어, 프로세서 120는, 메모리 110에 저장된 하나 이상의 인스트럭션을 실행함으로써, 본 개시서에 기재된 전자 장치 100의 기능을 수행할 수 있다.
본 개시의 실시예에서, 프로세서 120는 메모리 110에 저장된 하나 이상의 인스트럭션을 실행하여, 전술한 동작들이 수행되도록 제어할 수 있다. 이 경우, 메모리 110는 프로세서 120에 의해서 실행가능한 하나 이상의 인스트럭션을 저장하고 있을 수 있다.
또한, 본 개시의 실시예에서, 프로세서 120는 내부적으로 구비되는 메모리에 하나 이상의 인스트럭션을 저장하고, 내부적으로 구비되는 메모리에 저장된 하나 이상의 인스트럭션을 실행하여 전술한 동작들이 수행되도록 제어할 수 있다. 즉, 프로세서 120는 프로세서 120의 내부에 구비되는 내부 메모리 또는 메모리 110에 저장된 적어도 하나의 인스트럭션 또는 프로그램을 실행하여 소정 동작을 수행할 수 있다.
또한, 도 3에서는 하나의 프로세서 120를 도시하였으나, 복수개의 프로세서(미도시)가 구비될 수도 있을 것이다. 이 경우, 본 개시의 실시예에 따른 전자 장치에서 수행되는 동작들 각각은 복수개의 프로세서 중 적어도 하나를 통하여 수행될 수 있다.
일 실시예에 따라 프로세서 120는, 메모리 110에 저장된 하나 이상의 인스트럭션을 실행함으로써, 컨텐츠가 단일 화면에 표시되는 싱글뷰를 멀티뷰로 전환하는 멀티뷰 전환 요청을 수신하고, 상기 멀티뷰 전환 요청 수신에 따라 복수의 화면을 통해서 IP 스트리밍 신호에 기반한 컨텐츠를 표시함과 함께, 싱글뷰에서 표시되던 컨텐츠에 대응하는 RF 신호를 수신하여 버퍼에 저장하고, 상기 멀티뷰를 상기 싱글뷰로 전환하는 싱글뷰 전환 요청을 수신함에 따라, 상기 싱글뷰 전환 요청이 수신된 시점에서의 IP 스트리밍 신호의 재생 시간 정보를 확인하고, 상기 버퍼에 저장된 RF 신호에서 상기 확인된 재생 시간 정보와 동일한 재생 시간 정보를 가지는 재생 위치를 식별하고, 상기 식별된 재생 위치로부터 상기 RF 신호에 기반하여 싱글뷰로 표시할 수 있다.
일 실시예에 따라 상기 멀티뷰에서 상기 복수의 화면을 통해서 표시되는 상기 IP 스트리밍 신호에 기반한 컨텐츠는, 상기 싱글뷰에서 표시되는 상기 RF 신호에 기반한 컨텐트와 연관성이 있는 컨텐츠일 수 있다.
일 실시예에 따라 상기 멀티뷰를 구성하는 상기 복수의 화면 중 제1화면을 통해서 표시되는 상기 IP 스트리밍 신호에 기반한 컨텐츠는, 상기 싱글뷰에서 표시되는 상기 RF 신호에 기반한 컨텐츠와 동일한 컨텐츠일 수 있다.
일 실시예에 따라 상기 프로세서는, 상기 하나 이상의 인스트럭션을 실행함으로써, 상기 제1화면을 통해서 표시되는 상기 IP 스트리밍 신호에 기반한 컨텐츠의 속성 정보를 식별하고, 상기 식별된 속성 정보에 따라, 상기 제1화면에 표시되는 컨텐츠를 싱글뷰로 전환을 선택하기 위한 사용자 입력을 수신하기 위한 사용자 인터페이스를 상기 제1화면의 일부 영역에 출력할 수 있다.
일 실시예에 따라 상기 프로세서는, 상기 하나 이상의 인스트럭션을 실행함으로써, 상기 싱글뷰 전환을 선택하는 사용자 입력을 수신함에 따라, 상기 제1화면에 표시되는 컨텐츠를 싱글뷰로 표시할 수 있다.
일 실시예에 따라 상기 저장된 RF 신호에서 식별된 재생 위치는, 실시간으로 방송되는 RF 신호의 현재 재생 위치보다 지연된 시점을 나타낼 수 있다.
일 실시예에 따라 상기 프로세서는, 상기 하나 이상의 인스트럭션을 실행함으로써, 상기 식별된 재생 위치로부터 재생시 재생 속도를 증가시킴으로써 상기 저장된 RF 신호에서의 재생 위치가 상기 실시간으로 방송되는 RF 신호에서의 현재 재생 위치와 동일하게 되면, 상기 RF 신호를 저장하는 버퍼를 해제하고 RF 라이브 뷰로 전환하여 표시할 수 있다.
전자 장치 100는 프로세서와 메모리를 포함하여 기능을 수행하는 어떠한 형태의 장치도 될 수 있다. 전자 장치 100는 고정형 또는 휴대형 장치가 될 수 있다. 예를 들어, 전자 장치 100는, 데스크탑, 랩탑, 태블릿과 같은 컴퓨터, 텔레비전, 셋탑박스, 스마트폰, 셀룰러폰, 게임 플레이어, 음악 플레이어, 비디오 플레이어, 의료 장비, 가전 제품 등 다양한 전자 장치를 포함할 수 있다. 전자 장치 100는 디스플레이 장치, 컴퓨팅 장치, 미디어 장치로도 언급될 수 있다.
도 4는 일 실시예에 따른 전자 장치의 세부적인 블록도이다.
도 4에 있어서, 도 3 에서와 동일한 구성은 동일한 도면 기호를 이용하여 도시하였다. 따라서, 전자 장치 100를 설명하는데 있어서 도 3 에서와 중복되는 설명은 생략한다.
도 4를 참조하면, 전자 장치 100는, 메모리 110 및 프로세서 120 이외에, 디스플레이 130, 비디오 처리부 135, 오디오 처리부 145, 오디오 출력부 140, 통신부 150, 안테나 155, 감지부 160, 입/출력부 180, 및 사용자 입력부 190를 더 포함할 수 있다. 프로세서 120는 전자 장치 100의 각 구성요소를 제어하여 동작을 수행하게 할 수 있다.
메모리 110 및 프로세서 120에 대하여, 도 3에서 설명한 내용과 동일한 내용은 도 4에서 생략한다.
디스플레이 130는 프로세서 120의 제어에 의해 이미지를 화면에 표시할 수 있다. 화면에 표시되는 이미지는 통신부 150, 입/출력부 180, 메모리 110로부터 수신될 수 있다.
비디오 처리부 135는, 디스플레이 130에 의해 표시될 이미지 데이터를 처리하며, 이미지 데이터에 대한 디코딩, 렌더링, 스케일링, 노이즈 필터링, 프레임 레이트 변환, 및 해상도 변환 등과 같은 다양한 영상 처리 동작을 수행할 수 있다.
일 실시예에 따라 비디오 처리부 135는 디스플레이 130의 화면을 싱글뷰 화면으로 구성하여 하나의 비디오 컨텐츠를 표시되도록 처리할 수 있다.
일 실시예에 따라 비디오 처리부 135는 디스플레이 130의 화면을 멀티뷰 화면으로 구성하여 멀티뷰 화면을 구성하는 복수개의 화면에 서로 다른 비디오 컨텐츠가 표시되도록 처리할 수 있다.
오디오 처리부 145는 오디오 데이터에 대한 처리를 수행한다. 오디오 처리부 145에서는 오디오 데이터에 대한 디코딩이나 증폭, 노이즈 필터링 등과 같은 다양한 처리가 수행될 수 있다.
오디오 출력부 140는 프로세서 120의 제어에 의해 수신된 방송 신호에 포함된 오디오, 통신부 150 또는 입/출력부 180를 통해 입력되는 오디오, 메모리 110에 저장된 오디오를 출력할 수 있다. 오디오 출력부 140는 스피커 141, 헤드폰 출력 단자 142 또는 S/PDIF(Sony/Philips Digital Interface: 출력 단자 143 중 적어도 하나를 포함할 수 있다.
송/수신 안테나 155은 다른 디바이스들이 전송한 신호를 수신하거나, 상기 다른 디바이스들로 신호를 전송하는 역할을 한다. 송/수신 안테나 155은 하나로 도시되어 있지만, 복수개의 안테나를 구비함으로써 MIMO(Multiple Input Multiple Output) 시스템을 지원할 수 있다.
통신부 150는 전자 장치 100과 무선 통신 시스템 사이 또는 전자 장치 100과 다른 전자 장치가 위치한 네트워크 사이의 무선 통신을 가능하게 하는 하나 이상의 모듈을 포함할 수 있다. 예를 들어, 통신부 150는 방송 수신 모듈 151, 이동통신 모듈 152, 무선 인터넷 모듈 153 및 근거리 통신 모듈 154을 포함할 수 있다. 통신부 150는 송/수신부로 호칭될 수 있다.
방송 수신 모듈 151은 방송 채널을 통하여 외부의 방송 관리 서버로부터 방송 신호 및/또는 방송 관련된 정보를 수신한다. 방송 신호는, TV 방송 신호, 라디오 방송 신호, 데이터 방송 신호를 포함할 뿐만 아니라, TV 방송 신호 또는 라디오 방송 신호에 데이터 방송 신호가 결합된 형태의 방송 신호도 포함할 수 있다.
이동통신 모듈 152는, 이동 통신망 상에서 기지국, 외부의 단말, 서버 중 적어도 하나와 무선 신호를 송수신한다. 상기 무선 신호는, 음성 호 신호, 화상 통화 호 신호 또는 문자/멀티미디어 메시지 송수신에 따른 다양한 형태의 데이터를 포함할 수 있다.
무선 인터넷 모듈 153은 무선 인터넷 접속을 위한 모듈을 말하는 것으로, 디바이스에 내장되거나 외장될 수 있다. 무선 인터넷 기술로는 WLAN(Wireless LAN)(WiFi), Wibro(Wireless broadband), Wimax(World Interoperability for Microwave Access), HSDPA(High Speed Downlink Packet Access) 등이 이용될 수 있다. 상기 무선 인터넷 모듈 153을 통해서 상기 디바이스는 다른 디바이스와 와이 파이(Wi-Fi) P2P(Peer to Peer)연결을 할 수 있다.
근거리 통신 모듈 154은 근거리 통신을 위한 모듈을 말한다. 근거리 통신 기술로 블루투스(Bluetooth), RFID(Radio Frequency Identification), 적외선 통신(IrDA, infrared Data Association), UWB(Ultra Wideband), ZigBee 등이 이용될 수 있다.
감지부 160는 사용자의 음성, 사용자의 영상, 또는 사용자의 인터랙션을 감지하며, 마이크로폰 161, 카메라부 162, 및 광 수신부 163를 포함할 수 있다.
마이크로폰 161는 사용자의 발화(utterance)된 음성을 수신한다. 마이크 161는 수신된 음성을 전기 신호로 변환하여 프로세서 120로 출력할 수 있다.
일 실시예에 따라 마이크 161는 프로세서 120의 제어에 의해 매직 핸드 기능을 제어하는 사용자의 음성 커맨드를 수신하여 프로세서 120로 전달할 수 있다.
카메라부 162는 카메라 인식 범위에서 제스처를 포함하는 사용자의 모션에 대응되는 영상(예를 들어, 연속되는 프레임)을 수신할 수 있다.
광 수신부 163는, 원격 제어 장치에서부터 수신되는 광 신호(제어 신호를 포함)를 수신한다. 광 수신부 163는 원격 제어 장치로부터 사용자 입력(예를 들어, 터치, 눌림, 터치 제스처, 음성, 또는 모션)에 대응되는 광 신호를 수신할 수 있다. 수신된 광 신호로부터 프로세서 120의 제어에 의해 제어 신호가 추출될 수 있다.
입/출력부 180는 프로세서 120의 제어에 의해 전자 장치 100의 외부에서부터 비디오(예를 들어, 동영상 등), 오디오(예를 들어, 음성, 음악 등) 및 부가 정보(예를 들어, EPG 등) 등을 수신한다. 입/출력부 180는 HDMI 포트(High-Definition Multimedia Interface port, 181, 컴포넌트 잭(component jack, 182), PC 포트(PC port, 183), 및 USB 포트(USB port, 184) 중 하나를 포함할 수 있다. 입/출력부 180는 HDMI 포트 181, 컴포넌트 잭 182, PC 포트 183), 및 USB 포트 184)의 조합을 포함할 수 있다.
일 실시예에 따라 프로세서 120의 제어에 따라 HDMI 포트 181은 셋탑박스나 컨텐츠 제공 장치로부터 방송 컨텐츠를 수신할 수 있다.
사용자 입력부 190는, 사용자가 전자 장치 100를 제어하기 위한 데이터를 입력하는 수단을 의미한다. 예를 들어, 사용자 입력부 190는 키 패드(key pad), 돔 스위치 (dome switch), 터치 패드, 조그 휠, 조그 스위치 등을 포함할 수 있으나, 이에 한정되는 것은 아니다.
일 실시예에 따른 메모리 110는, 프로세서 120의 처리 및 제어를 위한 프로그램을 저장할 수 있고, 전자 장치 100로 입력되거나 전자 장치 100로부터 출력되는 데이터를 저장할 수 있다. 또한, 메모리 110는 전자 장치 100의 동작에 필요한 데이터들을 저장할 수 있다.
또한, 메모리 110에 저장된 프로그램들은 그 기능에 따라 복수 개의 모듈들로 분류할 수 있다.
프로세서 120는 전자 장치 100의 전반적인 동작 및 전자 장치 100의 내부 구성 요소들 사이의 신호 흐름을 제어하고, 데이터를 처리하는 기능을 수행한다. 프로세서 120는 사용자의 입력이 있거나 기 설정되어 저장된 조건을 만족하는 경우, 메모리 110에 저장된 OS(Operation System) 및 다양한 애플리케이션을 실행할 수 있다.
또한, 프로세서 120는 내부 메모리를 포함할 수 있을 것이다. 이 경우, 메모리 110에 저장되는 데이터, 프로그램, 및 인스트럭션 중 적어도 하나가 프로세서 120의 내부 메모리(미도시)에 저장될 수 있다.
한편, 도 3 내지 도 4에 도시된 전자 장치 100의 블록도는 일 실시예를 위한 블록도이다. 블록도의 각 구성요소는 실제 구현되는 전자 장치 100의 사양에 따라 통합, 추가, 또는 생략될 수 있다. 예를 들어, 필요에 따라 2 이상의 구성요소가 하나의 구성요소로 합쳐지거나, 혹은 하나의 구성요소가 2 이상의 구성요소로 세분화되어 구성될 수 있다. 또한, 각 블록에서 수행하는 기능은 실시예들을 설명하기 위한 것이며, 그 구체적인 동작이나 장치는 본 발명의 권리범위를 제한하지 아니한다.
도 5는 일 실시예에 따라 싱글뷰 멀티뷰 전환 모듈을 구성하기 위한 메모리 110의 일 예를 나타낸다.
도 5에서 멀티뷰 매니저 111, 버퍼 매니저 112, 버퍼 113은 메모리 110에 저장된 소프트웨어로 구현되었지만, 이에 한정되지 않고, 멀티뷰 매니저 111, 버퍼 매니저 112, 버퍼 113은 본 개시서에 개시된 싱글뷰 멀티뷰 전환 기능을 수행하도록 동작될 수 있는 적절한 소프트웨어, 로직, 회로, 인터페이스, 및/또는 코드의 조합으로 구현될 수 있다.
일 실시예에 따라 멀티뷰 매니저 111는 싱글뷰 멀티뷰 전환을 제어하기 위한 전체적인 동작을 관리할 수 있다. 예를 들어, 멀티뷰 매니저 111는 싱글뷰로부터 멀티뷰로 전환 요청을 수신한 경우 싱글뷰에서 표시되던 RF 신호 컨텐츠에 대응하는 IP 스트리밍 신호를 수신하고, 복수의 분할된 화면에 IP 스트리밍 신호로부터 추출된 복수의 컨텐츠 각각을 표시하도록 제어할 수 있다. 또한 멀티뷰 매니저 111는 싱글뷰로부터 멀티뷰 전환 요청을 수신한 경우, 통신부를 통해서 수신되는 RF 신호를 버퍼에 저장하도록 버퍼 매니저 112를 제어할 수 있다. 또한 멀티뷰 매니저 111는 멀티뷰에서 싱글뷰로 전환 요청을 수신한 경우, IP 스트리밍 신호가 멀티뷰 모드에서 재생되던 재생 시간 정보와 동일한 재생 시간 정보에 가지는, 버퍼에 저장된 RF 신호의 재생 위치로부터 재생되도록 제어할 수 있다.
일 실시예에 따라 버퍼 매니저 112는 멀티뷰 매니저 111의 제어에 따라 싱글뷰에서 멀티뷰 전환시에 싱글뷰 모드에서 수신되던 RF 신호를 계속 수신하여 이를 버퍼 113에 저장되도록 제어할 수 있다.
일 실시예에 따라 버퍼 113는 버퍼 매니저 112의 제어에 따라 통신부를 통해 수신되는 RF 신호를 일정한 사이즈만큼 저장할 수 있다.
도 6은 일 실시예에 따라 멀티뷰 싱글뷰 전환시 심리스한 화면 전환을 제공하기 위한 방법의 동작을 나타내는 흐름도이다.
도 6을 참조하면, 동작 610에서, 전자 장치 100는 싱글뷰를 멀티뷰로 전환하는 멀티뷰 전환 요청을 수신할 수 있다.
일 예에 따라 전자 장치 100는 통신부를 통해서 RF 신호를 직접 수신하거나 또는 HDMI 인터페이스 등을 통해서 셋탑박스나 외부 소오스로부터 실시간 방송 RF 신호를 전달받아 전자 장치 100의 디스플레이의 단일 화면을 통해서 컨텐츠를 표시하는 싱글뷰 모드로 컨텐츠를 표시할 수 있다.
멀티뷰는 전자 장치 100의 디스플레이를 복수의 화면으로 분할하고 각 분할된 복수의 화면에 서로 다른 컨텐츠를 표시하는 모드로서, 전자 장치 100는 싱글뷰 모드로 단일 화면에 컨텐츠를 표시하는 동안 싱글뷰를 멀티뷰로 전환하는 멀티뷰 전환 요청을 수신할 수 있다.
일 실시예에 따라 싱글뷰에서 멀티뷰로 전환시에, 멀티뷰에서 표시되는 복수의 컨텐츠 중 적어도 하나의 컨텐츠를 싱글뷰에서 표시되는 컨텐츠와 동일할 수 있다. 또한 멀티뷰에서 표시되는 복수의 컨텐츠는 싱글뷰에서 표시되는 컨텐츠와 관련된 컨텐츠 일 수 있다.
전자 장치 100는 멀티뷰 전환 요청을 다양한 형태로 수신할 수 있다. 일 실시예에 따라, 전자 장치 100는 음성인식을 통해 멀티뷰 전환 요청을 수신할 수 있다. 예를 들어, 전자 장치 100는 마이크로폰 161을 통해서 <멀티뷰로 전환해줘>와 같은 음성 발화를 수신하면 이와 같이 발화된 음성을 인식함으로써 멀티뷰 전환 요청을 수신할 수 있다. 일 실시예에 따라, 전자 장치 100는 카메라 162를 통해서 사용자의 특정한 제스쳐를 인식함으로써 멀티뷰 전환 요청을 수신할 수 있다. 일 실시예에 따라, 전자 장치 100는 원격 제어 장치에 마련된 특정한 버튼에 대응하는 신호를 수신함으로써 멀티뷰 전환 요청을 수신할 수 있다. 일 실시예에 따라, 전자 장치 100는 싱글뷰 모드에서 컨텐츠를 표시하는 화면의 일부에 <멀티뷰 전환>을 나타내는 아이템을 표시하고, 표시된 <멀티뷰 전환> 아이템을 선택하는 사용자 입력을 수신함으로써 멀티뷰 전환 요청을 수신할 수 있다.
동작 620에서, 전자 장치 100는 멀티뷰 전환 요청 수신에 따라 복수의 화면을 통해서 IP 스트리밍 신호에 기반한 컨텐츠를 표시함과 함께, RF 신호를 수신하여 버퍼에 저장할 수 있다.
일 실시예에 따라 전자 장치 100는 멀티뷰 전환 요청을 수신하면, 디스플레이 화면을 복수개의 화면으로 분할하고, 분할된 각 화면에 서로 다른 컨텐츠를 표시하도록 제어할 수 있다. 전자 장치 100는 분할된 복수의 화면에 서로 다른 컨텐츠를 표시하기 위해 싱글뷰에서 표시되던 컨텐츠에 대응하는 IP 스트리밍 컨텐츠를 IP 스트리밍 서버에 요청할 수 있다. 예를 들어, 멀티뷰 매니저는 싱글뷰에서 표시되던 컨텐츠의 식별자를 이용하여 IP 스트리밍 서버에 해당 컨텐츠에 대응하는 멀티뷰 컨텐츠를 요청하고, IP 스트리밍 서버로부터 요청된 멀티뷰 컨텐츠에 대응하는 IP 스트리밍 신호를 수신할 수 있다.
일 실시예에 따라 전자 장치 100는 IP 스트리밍 서버로부터 수신된 IP 스트리밍 신호로부터 복수의 컨텐츠를 추출하고, 추출된 복수의 컨텐츠 각각을 분할된 화면 각각에 출력함으로써 멀티뷰를 제공할 수 있다.
일 실시예에 따라 전자 장치 100는 멀티뷰 전환 요청에 따라 멀티뷰 컨텐츠를 수신하여 복수의 화면에 표시할 뿐만 아니라, 기존에 싱글뷰에서 수신되던 RF 신호도 계속하여 수신하고 수신된 RF 신호를 버퍼에 저장할 수 있다. 이와 같이 싱글뷰에서 멀티뷰로 전환함으로써 싱글뷰가 종료된 상황에서도, 차후 멀티뷰에서 싱글뷰로 되돌아갈 때 버퍼에 저장된 RF 신호를 이용하여 심리스한 화면 전환을 구현할 수 있다.
일 실시예에 따라 전자 장치 100는 일정 사이즈의 버퍼를 할당하고, 지속적으로 RF 신호를 버퍼에 저장함으로써, 전자 장치 100는 임의의 시점에서도 항상 일정 사이즈 분량의 RF 신호를 보관할 수 있게 된다. 예를 들어, 전자 장치 100는 수 초에서 수십 초 분량의 RF 신호를 버퍼에 저장해둘 수 있다.
동작 630에서, 전자 장치 100는 멀티뷰를 싱글뷰로 전환하는 싱글뷰 전환 요청을 수신함에 따라, 싱글뷰 전환 요청이 수신된 시점에서의 IP 스트리밍 신호의 재생 시간 정보를 확인할 수 있다.
일 실시예에 따라 전자 장치 100는 멀티뷰 제공시 복수의 화면들의 각 화면마다 각 화면에서 표시되는 컨텐츠의 속성 정보를 기반으로 해당 컨텐츠가 싱글뷰로 전환가능한지 확인하고, 확인 결과 싱글뷰로 전환가능하다고 판단된 경우에 해당 화면의 일부 영역에 싱글뷰 전환을 선택하게 하는 <싱글뷰 전환> 아이템을 출력할 수 있다. 일 예에 따라 전자 장치 100는 멀티뷰를 구성하는 복수의 화면중 각 화면에 표시되는 컨텐츠의 속성 정보를 기반으로 싱글뷰 전환이 가능한지 판단한 결과 싱글뷰 전환이 가능하지 않다고 판단된 경우에는 해당 화면에 싱글뷰 전환 아이템을 출력하지 않는다. 이와 같이 싱글뷰 전환이 가능한 화면에는 싱글뷰 전환 아이템을 출력하고, 싱글뷰 전환이 가능하지 않은 화면에는 싱글뷰 전환 아이템이 출력되지 않게 함으로써 사용자로 하여금 멀티뷰를 구성하는 복수의 화면들중 어느 화면이 싱글뷰로 전환가능하고 어느 화면이 싱글뷰로 전환가능하지 않은지를 알려줌으로써 사용자로 하여금 싱글뷰 전환이 가능한 화면을 직관적으로 인식하게 할 수 있다.
일 실시예에 따라 전자 장치 100는 싱글뷰 전환 요청을 수신한 경우에, 싱글뷰 전환 요청이 수신된 시점에서 표시되는 IP 스트리밍 신호의 재생 시간 정보를 확인할 수 있다. 예를 들어, 전자 장치 100는 싱글뷰 전환 요청이 수신된 시점에서 표시되는 IP 스트리밍 신호의 PTS (Presentation time stamp) 등을 확인함으로써 재생 시간 정보를 확인할 수 있다.
동작 640에서, 전자 장치 100는 버퍼에 저장된 RF 신호에서 상기 확인된 재생 시간 정보와 동일한 재생 시간 정보를 가지는 재생 위치를 식별하고, 상기 식별된 재생 위치로부터 상기 RF 신호에 기반하여 싱글뷰로 표시할 수 있다.
예를 들어, 전자 장치 100는 싱글뷰 전환 요청이 수신된 시점에서의 IP 스트리밍 신호의 PTS와 동일한 PTS를 가지는 재생 위치를 버퍼에 저장된 RF 신호에서 식별하고, 식별된 재생 위치로부터 RF 신호를 재생하여 싱글뷰로 화면에 표시함으로써 화면 끊김 없이 심리스한 화면 전환을 수행할 수 있다.
도 7은 일 실시예에 따라 싱글뷰 모드에서 수신되는 RF 신호와 멀티뷰 모드에서 수신되는 IP 스트리밍 신호의 예를 나타낸다.
전자 장치 100는 싱글뷰 모드에서는 방송국 700로부터의 제1컨텐츠 720를 담고 있는 RF 신호를 수신하여 단일 화면에 제1컨텐츠를 표시할 수 있다. 또는 전자 장치 100는 방송국 700로부터의 RF 신호를 셋탑박스 등의 외부 장치를 통해서 수신할 수도 있다.
멀티뷰 모드에서는 방송국에서 송출되는 제1컨텐츠와 함께 제1컨텐츠와 관련된 복수의 다른 컨텐츠를 더 제공하려는 것이기 때문에 멀티뷰 모드에서 제공되는 컨텐츠는 IP 스트리밍 컨텐츠 서버 710를 통해서 제공될 수 있다. IP 스트리밍 컨텐츠 서버 710는 방송국 700으로부터 송출되는 제1컨텐츠 720를 담고 있는 RF 신호를 실시간으로 수신하고, 수신된 제1컨텐츠 720를, 제1컨텐츠 720와 관련된 다른 컨텐츠들 예를 들어, 제 2컨텐츠 730, 제3컨텐츠 740, 제4컨텐츠 750과 함께 패키징하여 IP 스트리밍 신호 760로서 전자 장치 100으로 제공될 수 있다. IP 스트리밍 컨텐츠 서버 710는 방송국 700으로부터 송출되는 제1컨텐츠 720를 담고 있는 RF 신호와 함께 제 2컨텐츠 730, 제3컨텐츠 740, 제4컨텐츠 750를 방송국 700으로부터 수신하여 제1컨텐츠 710과 제2 컨텐츠 720, 제3컨텐츠 730, 제4컨텐츠 740을 함께 패키징하여 IP 스트리밍 신호 760로서 전자 장치 100으로 제공될 수 있다.
전자 장치 100는 멀티뷰 모드에서 IP 스트리밍 컨텐츠 서버 710로부터 제1컨텐츠 720, 제2컨텐츠 730, 제3컨텐츠 740, 제4컨텐츠 750을 담고 있는 IP 스트리밍 신호 760을 수신하고, 각 컨텐츠를 멀티뷰를 구성하는 복수의 화면의 각각에 출력할 수 있다.
이와 같이 IP 스트리밍 신호는 방송국에서 송출되는 RF 신호를 가공하거나 패키징하여 전자 장치 100에 제공되는 것이기 때문에, IP 스트리밍 컨텐츠 서버 710로부터 수신되는 IP 스트리밍 신호는 방송국 700에서 실시간으로 송출되는 RF 신호보다 항상 일정 시간 시간차가 발생할 수 밖에 없다.
도 8은 일 실시예에 따라 싱글뷰 모드에서 수신되는 RF 신호와 멀티뷰 모드에서 수신되는 IP 스트리밍 신호의 시간차를 설명하기 위한 참고도이다.
도 8을 참조하면, IP 스트리밍 신호 820는 실시간으로 방송되는 RF 신호 810를 패키징하여 제공되는 신호이기 때문에 RF 신호 810이 송출되고 나서 일정 시간 경과후 제공될 수 있다. 따라서 전자 장치 100는 IP 스트리밍 신호 820를 RF 신호 810 보다 항상 지연되게 수신할 수 있다. 예를 들어, IP 스트리밍 신호 820과 RF 신호 810의 시간차가 2초 라고 하면, 전자 장치 100가 컨텐츠의 RF 신호의 특정 부분을 수신한 후 2초가 지나서 동일한 컨텐츠를 담고 있는 IP 스트리밍 신호의 특정 부분을 수신할 수 있다.
예를 들어 RF 신호의 재생 위치 00:00:20에서 싱글뷰로부터 멀티뷰 전환 요청 830을 수신한 경우에, 이러한 멀티뷰 전환 요청 830을 수신한 시점에서 전자 장치 100가 IP 스트리밍 서버에 요청해서 수신한 IP 스트리밍 신호 820는 RF 신호와 IP 스트리밍 신호의 시간차로 인해 재생 위치 00:00:18에 해당할 수 있다.
이와 같이 RF 신호와 IP 스트리밍 신호가 제공되는 시간차로 인해서 전자 장치 100는 싱글뷰에서 멀티뷰로 전환된 경우에 이러한 시간차 만큼 지연된 상태로 IP 스트리밍 신호에 대응하는 컨텐츠를 멀티뷰로 표시하게 된다.
이와 같이 RF 신호와 IP 스트리밍 신호의 시간차 만큼 지연된 상태로 IP 스트리밍 신호에 기반하여 멀티뷰를 제공하다가 전자 장치 100가 멀티뷰에서 싱글뷰로 전환하는 요청 840을 수신한 경우에 전자 장치 100는 멀티뷰를 해제하고 즉, IP 스트리밍 신호에 기반한 멀티뷰 표시를 중단하고 RF 신호에 기반한 싱글뷰를 제공할 수 있다. 그런데 이때 이미 IP 스트리밍 신호 820는 실시간으로 방송되는 RF 신호 810와 일정한 시간차를 갖고 있기 때문에 싱글뷰 전환 요청 시점에 바로 RF 신호를 수신하여 RF 신호에 기반하여 컨텐츠를 표시한다면 일정한 시간차를 앞선 화면으로 전환하게 될 수 밖에 없다. 즉, 예를 들어 도 8을 참조하면, IP 스트리밍 신호 820의 재생 위치 00:10:20에서 싱글뷰 전환 요청 840을 수신한 경우에, 이 시점에서 바로 RF 신호를 수신하여 표시한다면 RF 신호 810의 재생 위치 00:10:22로 전환하게 된다. 그러면 사용자 입장에서는 싱글뷰 전환에 의해 동일한 컨텐츠의 00:10:20을 시청하다가 갑자기 00:10:22로 전환하게 되어, 갑자기 2초 분량의 컨텐츠를 건너뛰게 되는 화면 끊김 현상으로 인해 불편한 경험을 주게 될 수 있다. 따라서 이러한 화면 끊김 현상을 방지하기 위해서는 멀티뷰 싱글뷰 전환 요청시 IP 스트리밍 신호 820의 재생 위치와 동일한 재생 위치에서 RF 신호에 기반한 컨텐츠를 표시하는 것이 바람직하다. 즉, 도 8을 참조하면, 싱글뷰 전환 요청 840을 수신한 시점에서의 재생 위치인 00:10:20과 동일한 재생 위치인 00:10:20에서부터 RF 신호에 기반하여 컨텐츠를 표시하는 것이 바람직하다. 이를 위해서는 멀티뷰 모드 동작 중에서도 RF 신호를 버퍼에 저장해두고 싱글뷰 전환 요청이 수신된 경우 버퍼에 저장된 RF 신호에서 적절한 재생 위치를 찾아서 재생하는 것이 바람직하다.
도 9는 일 실시예에 따라 싱글뷰 전환시 심리스한 화면 전환을 위해 RF 신호의 재생 위치를 찾는 방법을 설명하기 위한 참고도이다.
도 9를 참조하면, 멀티뷰에서 싱글뷰 전환 요청이 있는 경우 전자 장치 100는 멀티뷰 표시를 위한 IP 스트리밍 컨텐츠를 수신하여 복수의 화면에 복수의 컨텐츠를 표시할 뿐만 아니라, 전자 장치 100는 추후 다시 싱글뷰 전환시의 심리스한 화면 전환을 위해 싱글뷰에서 수신되던 RF 신호를 버퍼 113에 저장해둘 수 있다. 이와 같이 버퍼 113에 RF 신호를 일정 분량 만큼 저장해둠으로써 전자 장치 100는 나중에 다시 싱글뷰로 전환할 때 실시간으로 방송되는 RF 신호의 재생 위치로 화면 전환을 하는 것이 아니라 실시간 방송 RF 신호의 재생 위치보다 일정 시간 늦춰진 재생 위치로 이동하는 것을 가능하게 할 수 있다. 이에 따라 전자 장치 100는 싱글뷰로 전환시 심리스한 화면 전환을 구현할 수 있다.
일 실시예에 따라 전자 장치 100는 싱글뷰 전환 요청 900을 수신한 시점에서의 IP 스트리밍 컨텐츠의 재생 시간 정보를 확인할 수 있다. 그리고 이러한 싱글뷰 전환 요청 900을 수신한 시점에서의 IP 스트리밍 컨텐츠의 재생 시간 정보와 동일한 재생 시간 정보를 갖는 재생 위치 B를 버퍼 113에 저장된 RF 신호에서 식별할 수 있다. 이와 같이 식별된 재생 위치 B로부터 싱글뷰를 위한 컨텐츠 재생을 시작함으로써 싱글뷰 전환 요청이 있었던 시점에서의 IP 스트리밍 컨텐츠의 마지막 화면과 버퍼에 저장된 RF 신호의 처음 화면의 심리스한 화면 재생을 구현할 수 있다. 만약 이와 같이 버퍼에 저장된 RF 신호를 이용하지 않고 싱글뷰 전환시 바로 실시간 방송되는 RF 신호로 전환하게 되면, 도 9에 도시된 바와 같이, 싱글뷰 전환 요청 시점에서의 실시간 방송 RF 신호 위치 C 로 화면 전환을 하게 되므로, 결국 시간차 D 만큼의 화면을 건너 뛰어 싱글뷰 화면에서 컨텐츠를 보여주게 될 수 밖에 없게 되고 따라서 사용자에게 자연스럽지 않고 어색한 화면을 제공하게 될 수 있다.
도 10은 일 실시예에 따라 버퍼에 저장된 RF 신호의 재생 위치와 실시간 방송 RF 신호의 표시 위치간의 시간차를 해소하기 위한 방법을 설명하기 위한 참고도이다.
도 9를 참조하여 설명한 바와 같이, 싱글뷰 전환시에 버퍼에 저장된 RF 신호를 이용하여 재생 위치를 늦추어 재생함으로써 멀티뷰 모드에서의 IP 스트리밍 컨텐츠 화면과 싱글뷰 모드에서의 RF 신호에 기반한 컨텐츠 화면 간에 심리스한 화면 전환을 구현할 수 있다. 그러나 버퍼에 저장된 RF 신호를 이용하여 재생하기 시작하는 재생 위치 B는 싱글뷰 전환 요청 시점에서의 실시간 방송 RF 신호 표시 위치 C와는 시간차 D가 존재하므로, 버퍼에 저장된 RF 신호를 이용하여 컨텐츠를 표시하는 경우 실시간 방송 RF 신호와는 항상 시간차 D 만큼 지연되어 표시하게 된다.
도 10을 참조하면, 일 실시예에 따라 전자 장치 100는 이와 같은 시간차 D를 해소하기 위해 catch up mode 등을 이용하여 버퍼 113에 저장된 RF 신호를 소정 배속 빠르게 재생함으로써 실시간 방송의 시점을 서서히 따라 잡을 수 있다. 예를 들어 전자 장치 10는 시간차 D의 해소를 위해 버퍼 113에 저장된 RF 신호를 1.2배속 등으로 배속 재생함으로써 어느 시점 D에서는 실시간 방송 RF 신호의 재생 위치를 따라 잡을 수 있다. 이와 같이 버퍼에 저장된 RF 신호를 이용하여 재생하다가 배속 재생에 의해 실시간 방송 RF 신호의 재생 위치를 따라 잡은 경우, 전자 장치 100는 버퍼 113의 할당을 해제하고, 실시간 방송 RF 신호를 직접적으로 수신하여 이를 싱글뷰 화면에 표시할 수 있다.
도 11은 일 실시예에 따라 멀티뷰에서 싱글뷰 전환시 심리스 전환 기능을 사용자로 하여금 선택할 수 있도록 하는 사용자 인터페이스의 일 예를 나타낸다.
본 개시서에 설명된 바와 같은 멀티뷰에서 싱글뷰 전환시 심리스 전환 기능을 적용할 지에 여부에 대해서 설정 메뉴 등을 통해 사용자로 하여금 선택하게 할 수 있다. 사용자들에 따라서는 멀티뷰에서 싱글뷰로 전환할 때, 끊김 없는 화면 전환을 중요하게 생각하여 심리스 전환 기능을 선택할 수도 있지만, 어떤 사용자들에 따라서는 끊김 없는 화면 보다는 실시간으로 송출되는 RF 방송을 바로 시청하기를 원할 수도 있다. 따라서, 사용자의 선택에 맞는 기능을 제공하기 위해 전자 장치 100는 심리스 전환 기능을 적용할지 문의하는 사용자 인터페이스를 제공할 수 있다.
도 11을 참조하면, 전자 장치 100는 <멀티뷰에서 싱글뷰 전환시 심리스 전환 기능을 이용하시겠습니까? 예 아니오> 와 같은 사용자 인터페이스 1100을 출력할 수 있다. 이와 같은 사용자 인터페이스 1100에 대응해서 사용자가 심리스 전환 기능을 이용하는 것으로 선택한 경우에는 전자 장치 100는 본 개시서에서 설명된 바와 같은 멀티뷰에서 싱글뷰 전환시 심리스 전환 기능을 이용하여 멀티뷰 전환시 버퍼에 RF 신호를 저장해두고, 싱글뷰 전환시에 버퍼에 저장된 RF 신호를 이용하여 심리스한 화면 전환을 수행할 수 있다.
사용자 인터페이스 1100에 대응해서 사용자가 심리스 전환 기능을 이용하지 않는 것으로 선택한 경우에, 전자 장치 100는 멀티뷰에서 싱글뷰로 전환시 버퍼에 저장된 RF 신호를 이용하지 않고 바로 실시간 방송되는 RF 신호를 수신하여 컨텐츠를 표시할 수 있다.
도 12는 일 실시예에 따라 전자 장치 100에서 멀티뷰에서 싱글뷰 모드 전환시 심리스 화면 전환 기능을 수행하는 동작의 흐름도의 일 예이다.
도 12를 참조하면, 동작 1201에서, 전자 장치 100는 방송국 700으로부터 RF 신호를 수신하여 수신된 RF 신호에 기반하여 싱글뷰로 제1컨텐츠를 표시할 수 있다. 전자 장치 100는 예를 들어 제1컨텐츠를 단일 화면으로 구성된 제1화면에 표시할 수 있다.
동작 1202에서, 전자 장치 100의 멀티뷰 매니저 111은 멀티뷰 전환 요청을 수신할 수 있다.
동작 1203에서, 멀티뷰 매니저 111은 IP 스트리밍 서버 710으로 IP 스트리밍 신호를 요청할 수 있다. 이때 멀티뷰 매니저 111은 싱글뷰에서 표시되던 제1컨텐츠의 식별 정보 등에 기반하여 IP 스트리밍 서버 710로 IP 스트리밍 신호를 요청할 수 있다.
동작 1204에서, IP 스트리밍 서버 710는 방송국 700으로부터 RF 신호를 수신하고, 동작 1205에서 IP 스트리밍 서버 710는 수신된 RF 신호에 기반하여 획득된 IP 스트리밍 신호를 멀티뷰 매니저 111로 전송할 수 있다.
동작 1206, 1207에서, 멀티뷰 매니저 111는 수신된 IP 스트리밍 신호가 멀티뷰를 구성하는 복수의 화면에 표시되도록 제어할 수 있다. 예를 들어, 멀티뷰 매니저 111는, IP 스트리밍 신호중 제1컨텐츠는 제1화면에 표시되고 IP 스트리밍 신호중 제2 내지 제4 컨텐츠는 제2 화면 내지 제4화면 각각에 표시되게 제어할 수 있다.
멀티뷰 매니저 111는 또한 싱글뷰에서 수신되던 RF 신호를 버퍼에 저장되도록 버퍼 매니저 112를 제어할 수 있다. 즉, 동작 1208에서 버퍼 매니저 112는 RF 신호를 수신하고, 동작 1209에서 버퍼 매니저는 수신된 RF 신호를 버퍼 113에 저장할 수 있다.
동작 1210에서 멀티뷰 매니저 111는 싱글뷰 전환 요청을 수신할 수 있다.
동작 1211에서 멀티뷰 매니저 111는 싱글뷰 전환 요청이 수신된 시점에서의 IP 스트리밍 신호 재생 시간 정보를 확인하여 확인된 IP 스트리밍 신호의 재생 시간 정보를 버퍼 매니저 112로 제공할 수 있다.
동작 1212에서 버퍼 매니저 112는 수신된 IP 스트리밍 신호의 재생 시간 정보와 동일한 재생 시간 정보를 가지는, 버퍼에 저장된 RF 신호의 재생 위치를 식별하고, 동작 1213에서 버퍼 113로부터 식별된 RF 신호의 재생 위치로부터 RF 신호를 재생하도록 제어할 수 있다.
일부 실시예는 컴퓨터에 의해 실행되는 프로그램 모듈과 같은 컴퓨터에 의해 실행가능한 명령어를 포함하는 기록 매체의 형태로도 구현될 수 있다. 컴퓨터 판독 가능 매체는 컴퓨터에 의해 액세스될 수 있는 임의의 가용 매체일 수 있고, 휘발성 및 비휘발성 매체, 분리형 및 비분리형 매체를 모두 포함한다. 또한, 컴퓨터 판독가능 매체는 컴퓨터 저장 매체를 포함할 수 있다. 컴퓨터 저장 매체는 컴퓨터 판독가능 명령어, 데이터 구조, 프로그램 모듈 또는 기타 데이터와 같은 정보의 저장을 위한 임의의 방법 또는 기술로 구현된 휘발성 및 비휘발성, 분리형 및 비분리형 매체를 모두 포함한다.
개시된 실시예들은 컴퓨터로 읽을 수 있는 저장 매체(computer-readable storage media)에 저장된 명령어를 포함하는 S/W 프로그램으로 구현될 수 있다.
컴퓨터는, 저장 매체로부터 저장된 명령어를 호출하고, 호출된 명령어에 따라 개시된 실시예에 따른 동작이 가능한 장치로서, 개시된 실시예들에 따른 전자 장치를 포함할 수 있다.
컴퓨터로 읽을 수 있는 저장매체는, 비일시적(non-transitory) 저장매체의 형태로 제공될 수 있다. 여기서,‘비일시적’은 저장매체가 신호(signal)를 포함하지 않으며 실재(tangible)한다는 것을 의미할 뿐 데이터가 저장매체에 반영구적 또는 임시적으로 저장됨을 구분하지 않는다.
또한, 개시된 실시예들에 따른 제어 방법은 컴퓨터 프로그램 제품(computer program product)에 포함되어 제공될 수 있다. 컴퓨터 프로그램 제품은 상품으로서 판매자 및 구매자 간에 거래될 수 있다.
컴퓨터 프로그램 제품은 S/W 프로그램, S/W 프로그램이 저장된 컴퓨터로 읽을 수 있는 저장 매체를 포함할 수 있다. 예를 들어, 컴퓨터 프로그램 제품은 디바이스의 제조사 또는 전자 마켓(예, 구글 플레이 스토어, 앱 스토어)을 통해 전자적으로 배포되는 S/W 프로그램 형태의 상품(예, 다운로더블 앱)을 포함할 수 있다. 전자적 배포를 위하여, S/W 프로그램의 적어도 일부는 저장 매체에 저장되거나, 임시적으로 생성될 수 있다. 이 경우, 저장 매체는 제조사의 서버, 전자 마켓의 서버, 또는 SW 프로그램을 임시적으로 저장하는 중계 서버의 저장매체가 될 수 있다.
컴퓨터 프로그램 제품은, 서버 및 디바이스로 구성되는 시스템에서, 서버의 저장매체 또는 디바이스의 저장매체를 포함할 수 있다. 또는, 서버 또는 디바이스와 통신 연결되는 제 3 장치(예, 스마트폰)가 존재하는 경우, 컴퓨터 프로그램 제품은 제 3 장치의 저장매체를 포함할 수 있다. 또는, 컴퓨터 프로그램 제품은 서버로부터 디바이스 또는 제 3 장치로 전송되거나, 제 3 장치로부터 디바이스로 전송되는 S/W 프로그램 자체를 포함할 수 있다.
이 경우, 서버, 디바이스 및 제 3 장치 중 하나가 컴퓨터 프로그램 제품을 실행하여 개시된 실시예들에 따른 방법을 수행할 수 있다. 또는, 서버, 디바이스 및 제 3 장치 중 둘 이상이 컴퓨터 프로그램 제품을 실행하여 개시된 실시예들에 따른 방법을 분산하여 실시할 수 있다.
예를 들면, 서버(예로, 클라우드 서버 또는 인공 지능 서버 등)가 서버에 저장된 컴퓨터 프로그램 제품을 실행하여, 서버와 통신 연결된 디바이스가 개시된 실시예들에 따른 방법을 수행하도록 제어할 수 있다.
또 다른 예로, 제 3 장치가 컴퓨터 프로그램 제품을 실행하여, 제 3 장치와 통신 연결된 디바이스가 개시된 실시예에 따른 방법을 수행하도록 제어할 수 있다. 제 3 장치가 컴퓨터 프로그램 제품을 실행하는 경우, 제 3 장치는 서버로부터 컴퓨터 프로그램 제품을 다운로드하고, 다운로드 된 컴퓨터 프로그램 제품을 실행할 수 있다. 또는, 제 3 장치는 프리로드 된 상태로 제공된 컴퓨터 프로그램 제품을 실행하여 개시된 실시예들에 따른 방법을 수행할 수도 있다.
또한, 본 명세서에서, "부"는 프로세서 또는 회로와 같은 하드웨어 구성(hardware component), 및/또는 프로세서와 같은 하드웨어 구성에 의해 실행되는 소프트웨어 구성(software component)일 수 있다.
전술한 본 개시의 설명은 예시를 위한 것이며, 본 개시가 속하는 기술분야의 통상의 지식을 가진 자는 본 개시의 기술적 사상이나 필수적인 특징을 변경하지 않고서 다른 구체적인 형태로 쉽게 변형이 가능하다는 것을 이해할 수 있을 것이다. 그러므로 이상에서 기술한 실시예들은 모든 면에서 예시적인 것이며 한정적이 아닌 것으로 이해해야만 한다. 예를 들어, 단일형으로 설명되어 있는 각 구성 요소는 분산되어 실시될 수도 있으며, 마찬가지로 분산된 것으로 설명되어 있는 구성 요소들도 결합된 형태로 실시될 수 있다.
본 개시의 범위는 상기 상세한 설명보다는 후술하는 특허청구범위에 의하여 나타내어지며, 특허청구범위의 의미 및 범위 그리고 그 균등 개념으로부터 도출되는 모든 변경 또는 변형된 형태가 본 개시의 범위에 포함되는 것으로 해석되어야 한다.

Claims (15)

  1. 전자 장치에 있어서,
    통신 인터페이스;
    하나 이상의 인스트럭션을 저장하는 메모리; 및
    상기 메모리에 저장된 하나 이상의 인스트럭션을 실행하는 프로세서를 포함하고,
    상기 프로세서는, 상기 하나 이상의 인스트럭션을 실행함으로써,
    컨텐츠가 단일 화면에 표시되는 싱글뷰를 멀티뷰로 전환하는 멀티뷰 전환 요청을 수신하고,
    상기 멀티뷰 전환 요청의 수신에 따라 복수의 화면을 통해서 IP 스트리밍 신호에 기반한 컨텐츠를 표시함과 함께, 상기 싱글뷰에서 표시되던 컨텐츠에 대응하는 RF 신호를 수신하여 버퍼에 저장하고,
    상기 멀티뷰를 상기 싱글뷰로 전환하는 싱글뷰 전환 요청을 수신함에 따라, 상기 싱글뷰 전환 요청이 수신된 시점에서의 상기 IP 스트리밍 신호의 재생 시간 정보를 확인하고,
    상기 버퍼에 저장된 RF 신호에서 상기 확인된 재생 시간 정보와 동일한 재생 시간 정보를 가지는 재생 위치를 식별하고, 상기 식별된 재생 위치로부터 상기 RF 신호에 기반하여 싱글뷰로 표시하는, 전자 장치.
  2. 제1항에 있어서,
    상기 멀티뷰에서 상기 복수의 화면을 통해서 표시되는 상기 IP 스트리밍 신호에 기반한 컨텐츠는, 상기 싱글뷰에서 표시되는 상기 RF 신호에 기반한 컨텐트와 연관성이 있는 컨텐츠인, 전자 장치.
  3. 제1항에 있어서,
    상기 멀티뷰를 구성하는 상기 복수의 화면 중 제1화면을 통해서 표시되는 상기 IP 스트리밍 신호에 기반한 컨텐츠는, 상기 싱글뷰에서 표시되는 상기 RF 신호에 기반한 컨텐츠와 동일한 컨텐츠인, 전자 장치.
  4. 제3항에 있어서,
    상기 프로세서는, 상기 하나 이상의 인스트럭션을 실행함으로써,
    상기 제1화면을 통해서 표시되는 상기 IP 스트리밍 신호에 기반한 컨텐츠의 속성 정보를 식별하고,
    상기 식별된 속성 정보에 따라, 상기 제1화면에 표시되는 컨텐츠를 싱글뷰로 전환을 선택하기 위한 사용자 입력을 수신하기 위한 사용자 인터페이스를 상기 제1화면의 일부 영역에 출력하는, 전자 장치.
  5. 제4항에 있어서,
    상기 프로세서는, 상기 하나 이상의 인스트럭션을 실행함으로써,
    상기 싱글뷰 전환을 선택하는 사용자 입력을 수신함에 따라, 상기 제1화면에 표시되는 컨텐츠를 싱글뷰로 표시하는, 전자 장치.
  6. 제1항에 있어서,
    상기 저장된 RF 신호에서 식별된 재생 위치는, 실시간으로 방송되는 RF 신호의 현재 재생 위치보다 지연된 시점을 나타내는, 전자 장치.
  7. 제6항에 있어서,
    상기 프로세서는, 상기 하나 이상의 인스트럭션을 실행함으로써,
    상기 식별된 재생 위치로부터 재생시 재생 속도를 증가시킴으로써 상기 저장된 RF 신호에서의 재생 위치가 상기 실시간으로 방송되는 RF 신호에서의 현재 재생 위치와 동일하게 되면, 상기 RF 신호를 저장하는 버퍼를 해제하고 RF 라이브 뷰로 전환하여 표시하는, 전자 장치.
  8. 전자 장치의 동작 방법에 있어서,
    컨텐츠가 단일 화면에 표시되는 싱글뷰를 멀티뷰로 전환하는 멀티뷰 전환 요청을 수신하는 동작,
    상기 멀티뷰 전환 요청 수신에 따라 복수의 화면을 통해서 IP 스트리밍 신호에 기반한 컨텐츠를 표시함과 함께, 상기 싱글뷰에서 표시되던 컨텐츠에 대응하는 RF 신호를 수신하여 버퍼에 저장하는 동작,
    상기 멀티뷰를 상기 싱글뷰로 전환하는 싱글뷰 전환 요청을 수신함에 따라, 상기 싱글뷰 전환 요청이 수신된 시점에서의 상기 IP 스트리밍 신호의 재생 시간 정보를 확인하는 동작,
    상기 버퍼에 저장된 RF 신호에서 상기 확인된 재생 시간 정보와 동일한 재생 시간 정보를 가지는 재생 위치를 식별하고, 상기 식별된 재생 위치로부터 상기 RF 신호에 기반하여 싱글뷰로 표시하는 동작을 포함하는, 전자 장치의 동작 방법.
  9. 제8항에 있어서,
    상기 멀티뷰에서 상기 복수의 화면을 통해서 표시되는 상기 IP 스트리밍 신호에 기반한 컨텐츠는, 상기 싱글뷰에서 표시되는 상기 RF 신호에 기반한 컨텐트와 연관성이 있는 컨텐츠인, 전자 장치의 동작 방법.
  10. 제8항에 있어서,
    상기 멀티뷰를 구성하는 상기 복수의 화면 중 제1화면을 통해서 표시되는 상기 IP 스트리밍 신호에 기반한 컨텐츠는, 상기 싱글뷰에서 표시되는 상기 RF 신호에 기반한 컨텐츠와 동일한 컨텐츠인, 전자 장치의 동작 방법.
  11. 제10항에 있어서,
    상기 제1화면을 통해서 표시되는 상기 IP 스트리밍 신호에 기반한 컨텐츠의 속성 정보를 식별하는 동작,
    상기 식별된 속성 정보에 따라, 상기 제1화면에 표시되는 컨텐츠를 싱글뷰로 전환을 선택하기 위한 사용자 입력을 수신하기 위한 사용자 인터페이스를 상기 제1화면의 일부 영역에 출력하는 동작을 포함하는, 전자 장치의 동작 방법.
  12. 제11항에 있어서,
    상기 싱글뷰 전환을 선택하는 사용자 입력을 수신함에 따라, 상기 제1화면에 표시되는 컨텐츠를 싱글뷰로 표시하는 동작을 더 포함하는, 전자 장치의 동작 방법.
  13. 제8항에 있어서,
    상기 저장된 RF 신호에서 식별된 재생 위치는, 실시간으로 방송되는 RF 신호의 현재 재생 위치보다 지연된 시점을 나타내는, 전자 장치의 동작 방법.
  14. 제13항에 있어서,
    상기 식별된 재생 위치로부터 재생시 재생 속도를 증가시킴으로써 상기 저장된 RF 신호에서의 재생 위치가 상기 실시간으로 방송되는 RF 신호에서의 현재 재생 위치와 동일하게 되면, 상기 RF 신호를 저장하는 버퍼를 해제하고 RF 라이브 뷰로 전환하여 표시하는 동작을 더 포함하는, 전자 장치의 동작 방법.
  15. 전자 장치의 동작 방법의 구현을 위해 전자 장치의 프로세서에 의해 실행되는 하나 이상의 프로그램이 기록된 컴퓨터 판독가능 기록 매체에 있어서, 상기 전자 장치의 동작 방법은,
    컨텐츠가 단일 화면에 표시되는 싱글뷰를 멀티뷰로 전환하는 멀티뷰 전환 요청을 수신하는 동작,
    상기 멀티뷰 전환 요청 수신에 따라 복수의 화면을 통해서 IP 스트리밍 신호에 기반한 컨텐츠를 표시함과 함께, 상기 싱글뷰에서 표시되던 컨텐츠에 대응하는 RF 신호를 수신하여 버퍼에 저장하는 동작,
    상기 멀티뷰를 상기 싱글뷰로 전환하는 싱글뷰 전환 요청을 수신함에 따라, 상기 싱글뷰 전환 요청이 수신된 시점에서의 상기 IP 스트리밍 신호의 재생 시간 정보를 확인하는 동작,
    상기 버퍼에 저장된 RF 신호에서 상기 확인된 재생 시간 정보와 동일한 재생 시간 정보를 가지는 재생 위치를 식별하고, 상기 식별된 재생 위치로부터 상기 RF 신호에 기반하여 싱글뷰로 표시하는 동작을 포함하는, 컴퓨터 판독가능 기록 매체.
PCT/KR2021/014141 2020-10-13 2021-10-13 전자 장치 및 그 동작 방법 WO2022080866A1 (ko)

Priority Applications (1)

Application Number Priority Date Filing Date Title
US18/299,974 US20230262285A1 (en) 2020-10-13 2023-04-13 Electronic device and operation method therefor

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
KR1020200131821A KR20220048670A (ko) 2020-10-13 2020-10-13 전자 장치 및 그 동작 방법
KR10-2020-0131821 2020-10-13

Related Child Applications (1)

Application Number Title Priority Date Filing Date
US18/299,974 Continuation US20230262285A1 (en) 2020-10-13 2023-04-13 Electronic device and operation method therefor

Publications (1)

Publication Number Publication Date
WO2022080866A1 true WO2022080866A1 (ko) 2022-04-21

Family

ID=81207479

Family Applications (1)

Application Number Title Priority Date Filing Date
PCT/KR2021/014141 WO2022080866A1 (ko) 2020-10-13 2021-10-13 전자 장치 및 그 동작 방법

Country Status (3)

Country Link
US (1) US20230262285A1 (ko)
KR (1) KR20220048670A (ko)
WO (1) WO2022080866A1 (ko)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN114780054A (zh) * 2022-06-20 2022-07-22 深圳乐播科技有限公司 分屏显示方法及相关装置

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20130087994A (ko) * 2012-01-30 2013-08-07 삼성전자주식회사 디스플레이 장치 및 이를 이용한 멀티 뷰 제공 방법
KR20180002599A (ko) * 2015-05-06 2018-01-08 엘지전자 주식회사 디지털 디바이스 및 디지털 디바이스 제어 방법
JP6426034B2 (ja) * 2015-03-19 2018-11-21 アルパイン株式会社 放送受信装置およびシームレスリンク状態表示方法
KR102111572B1 (ko) * 2015-02-13 2020-05-15 에스케이텔레콤 주식회사 저지연 생방송 컨텐츠 제공을 위한 프로그램을 기록한 기록매체 및 장치
KR102126257B1 (ko) * 2015-02-13 2020-06-24 에스케이텔레콤 주식회사 멀티뷰 스트리밍 서비스 지원 방법 및 이를 지원하는 장치

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20130087994A (ko) * 2012-01-30 2013-08-07 삼성전자주식회사 디스플레이 장치 및 이를 이용한 멀티 뷰 제공 방법
KR102111572B1 (ko) * 2015-02-13 2020-05-15 에스케이텔레콤 주식회사 저지연 생방송 컨텐츠 제공을 위한 프로그램을 기록한 기록매체 및 장치
KR102126257B1 (ko) * 2015-02-13 2020-06-24 에스케이텔레콤 주식회사 멀티뷰 스트리밍 서비스 지원 방법 및 이를 지원하는 장치
JP6426034B2 (ja) * 2015-03-19 2018-11-21 アルパイン株式会社 放送受信装置およびシームレスリンク状態表示方法
KR20180002599A (ko) * 2015-05-06 2018-01-08 엘지전자 주식회사 디지털 디바이스 및 디지털 디바이스 제어 방법

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN114780054A (zh) * 2022-06-20 2022-07-22 深圳乐播科技有限公司 分屏显示方法及相关装置
CN114780054B (zh) * 2022-06-20 2022-09-13 深圳乐播科技有限公司 分屏显示方法及相关装置

Also Published As

Publication number Publication date
KR20220048670A (ko) 2022-04-20
US20230262285A1 (en) 2023-08-17

Similar Documents

Publication Publication Date Title
KR102164481B1 (ko) 패턴 매칭 및 문자 인식을 이용한 사용자 시청 행동을 추적하는 장치 및 방법, 그리고 시스템
WO2018186592A1 (en) Electronic device and operating method thereof
JP5113935B1 (ja) 再生装置、テレビジョン受像機、機器選択方法、プログラムおよび記録媒体
WO2012026750A2 (ko) 컨텐츠 공유 제어 방법, 그를 이용한 휴대용 단말기 및 컨텐츠 공유 시스템
WO2016137134A1 (en) Broadcast receiving apparatus and method for controlling the same
US9813753B2 (en) Core device, audio/video control system, portable terminal device, audio/video control program, and audio/video control method
WO2015133789A1 (en) Display apparatus and control method thereof
WO2021133042A1 (en) Electronic device and method of operating the same
WO2022080866A1 (ko) 전자 장치 및 그 동작 방법
WO2020235699A1 (ko) 디스플레이 장치
WO2015190780A1 (ko) 사용자 단말 및 이의 제어 방법
JPH10117332A (ja) マルチネットワークテレビジョン装置
WO2019031718A1 (en) ELECTRONIC APPARATUS AND CONTROL METHOD THEREOF
WO2022050728A1 (ko) 전자 장치 및 그 동작 방법
WO2020262920A1 (en) Display apparatus and the control method thereof
WO2022055256A1 (ko) 전자 장치 및 그 동작 방법
JP2012141787A (ja) 映像表示装置及びその表示方法
WO2014119896A1 (en) Display apparatus and menu displaying method thereof
WO2022050761A1 (ko) 전자 장치 및 그 동작 방법
KR102468763B1 (ko) 영상처리장치 및 그 제어방법
JP5106623B2 (ja) プレゼンス送信方法、映像表示装置および映像表示システム
JP6271169B2 (ja) 番組関連プログラム
WO2023085740A1 (ko) 모바일 장치 및 그 제어 방법
US11669295B2 (en) Multiple output control based on user input
WO2022181862A1 (ko) 디스플레이 장치

Legal Events

Date Code Title Description
121 Ep: the epo has been informed by wipo that ep was designated in this application

Ref document number: 21880513

Country of ref document: EP

Kind code of ref document: A1

NENP Non-entry into the national phase

Ref country code: DE

122 Ep: pct application non-entry in european phase

Ref document number: 21880513

Country of ref document: EP

Kind code of ref document: A1