WO2015072787A1 - 전자 장치가 외부 디스플레이 장치와 화면을 공유하는 방법 및 전자 장치 - Google Patents

전자 장치가 외부 디스플레이 장치와 화면을 공유하는 방법 및 전자 장치 Download PDF

Info

Publication number
WO2015072787A1
WO2015072787A1 PCT/KR2014/010975 KR2014010975W WO2015072787A1 WO 2015072787 A1 WO2015072787 A1 WO 2015072787A1 KR 2014010975 W KR2014010975 W KR 2014010975W WO 2015072787 A1 WO2015072787 A1 WO 2015072787A1
Authority
WO
WIPO (PCT)
Prior art keywords
electronic device
screen size
screen
external display
display device
Prior art date
Application number
PCT/KR2014/010975
Other languages
English (en)
French (fr)
Inventor
첸샤오샤오
후지쿤
리완유
Original Assignee
삼성전자 주식회사
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 삼성전자 주식회사 filed Critical 삼성전자 주식회사
Priority to US15/037,000 priority Critical patent/US10360871B2/en
Priority to EP14862354.9A priority patent/EP3043256A4/en
Publication of WO2015072787A1 publication Critical patent/WO2015072787A1/ko

Links

Images

Classifications

    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G5/00—Control arrangements or circuits for visual indicators common to cathode-ray tube indicators and other visual indicators
    • G09G5/003—Details of a display terminal, the details relating to the control arrangement of the display terminal and to the interfaces thereto
    • G09G5/005—Adapting incoming signals to the display format of the display terminal
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/14—Digital output to display device ; Cooperation and interconnection of the display device with other functional units
    • G06F3/1423—Digital output to display device ; Cooperation and interconnection of the display device with other functional units controlling a plurality of local displays, e.g. CRT and flat panel display
    • G06F3/1446—Digital output to display device ; Cooperation and interconnection of the display device with other functional units controlling a plurality of local displays, e.g. CRT and flat panel display display composed of modules, e.g. video walls
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0484—Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range
    • G06F3/04845—Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range for image manipulation, e.g. dragging, rotation, expansion or change of colour
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0487—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser
    • G06F3/0488—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures
    • G06F3/04883—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures for inputting data by handwriting, e.g. gesture or text
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/14—Digital output to display device ; Cooperation and interconnection of the display device with other functional units
    • G06F3/1454—Digital output to display device ; Cooperation and interconnection of the display device with other functional units involving copying of the display data of a local workstation or window to a remote workstation or window so that an actual copy of the data is displayed simultaneously on two or more displays, e.g. teledisplay
    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G5/00—Control arrangements or circuits for visual indicators common to cathode-ray tube indicators and other visual indicators
    • G09G5/14—Display of multiple viewports
    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G2340/00—Aspects of display data processing
    • G09G2340/14—Solving problems related to the presentation of information to be displayed
    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G2356/00—Detection of the display position w.r.t. other display screens
    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G2370/00—Aspects of data communication
    • G09G2370/02—Networking aspects
    • G09G2370/022—Centralised management of display operation, e.g. in a server instead of locally
    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G2370/00—Aspects of data communication
    • G09G2370/16—Use of wireless transmission of display information

Definitions

  • the present invention relates to a method and an electronic device for sharing an screen with an external display device.
  • An electronic device such as a mobile terminal may be configured to perform various functions. Examples of such various functions include data and voice communication functions, taking pictures or videos through a camera, storing voices, playing music files through a speaker system, and displaying images or videos. In addition, as tasks through electronic devices become more common, a variety of functions are frequently shared through screen sharing with other electronic devices. However, the platforms applied to the electronic device may be different. For example, the electronic device may apply various platforms such as an android platform and a window platform. In addition, the functions performed for each platform may be different.
  • an electronic device may include screens of at least one external display device and a communication unit for receiving a screen size of at least one external display device adjacent to the electronic device from at least one external display device.
  • the controller may include a controller configured to determine a target screen size based on the screen size and to change a display configuration parameter of the electronic device so that the screen size of the electronic device corresponds to the target screen size.
  • An embodiment of the present disclosure may provide a method and an apparatus for displaying an content by an electronic device sharing a screen with at least one external display device.
  • an embodiment of the present invention may provide a method and apparatus for displaying a plurality of related contents by an electronic device sharing a screen with at least one external display device.
  • FIG. 1 is a block diagram of an electronic device 100 according to an exemplary embodiment.
  • FIG. 2 is a flowchart illustrating a method in which the electronic device 100 shares a screen with an external display device adjacent to the electronic device 100, according to an exemplary embodiment.
  • FIG. 3 is a flowchart illustrating a method in which the electronic device 100 detects an adjacent external display device and sets a display mode.
  • 4 and 5 illustrate an example in which the electronic device 100 detects the external display device 200.
  • FIG. 6 is a flowchart illustrating a method of generating display data by the electronic device 100 in a screen share mode.
  • 7A and 7B illustrate an example in which the electronic device 100 determines a target screen size in the screen sharing mode.
  • 8A and 8B illustrate an example in which the electronic device 100 determines a target screen size in the screen sharing mode.
  • FIG. 9 is a flowchart illustrating a method in which the electronic device 100 transmits a part of display data to an external display device in the screen sharing mode.
  • FIG 10A illustrates an example of the content 1010 to be displayed on the electronic device 100 and the external display device 200.
  • FIG. 10B and 10C illustrate an example in which the content 1010 of FIG. 10A is displayed on the electronic device 100 and the external display device according to a distribution type of the external display device.
  • FIG. 11 is a flowchart illustrating a method in which the electronic device 100 and the external display device share a screen to display one content in the screen sharing mode.
  • FIG. 12 is a block diagram of an electronic device 100a according to an embodiment.
  • FIG. 13 is a flowchart illustrating a method of generating display data by the electronic device 100a in an independent screen mode.
  • 14A and 14B illustrate an example in which the electronic device 100a shares a screen with an external display device in response to a user input in the individual screen mode.
  • 15 is a flowchart of generating display data through parallel processing when the electronic device 100a is in an individual screen mode.
  • FIG. 16A illustrates an example in which the electronic device 100a generates display data through parallel processing in the individual screen mode
  • FIG. 16B illustrates a plurality of contents of the electronic device 100a and the external display device 200. Is an example of displaying each.
  • FIG 17 illustrates another example in which the electronic device 100a generates display data through parallel processing in the individual screen mode.
  • FIG. 18 is a flowchart illustrating a method in which the electronic device 100a generates display data through a single process or thread in the individual screen mode.
  • 19 illustrates an example in which the electronic device 100a generates display data through a single process or thread in the individual screen mode.
  • 20 is a flowchart illustrating a method in which the electronic device 100a processes an event generated in the external display device 200.
  • FIG. 21 illustrates an example in which the electronic device 100a generates display data according to an event generated in the external display device 200.
  • 22A and 22B illustrate an example of executing an application in the electronic device 100a and the external display device 200.
  • FIG. 23 is a flowchart illustrating a method of sharing a screen through a screen share mode in the electronic device 100a and the external display device having different screen sizes.
  • FIG. 24 illustrates an example of sharing a screen through the screen sharing mode in the electronic device 100a and the external display device 200 having different screen sizes.
  • 25 is a block diagram illustrating a configuration of an electronic device 3000 according to an exemplary embodiment.
  • the communication unit for receiving the screen size of the at least one external display device from at least one external display device; And determine a target screen size based on the screen size of the electronic device and the screen size of the at least one external display device, and display configuration parameters of the electronic device so that the screen size of the electronic device corresponds to the target screen size. and a controller for changing a display configuration parameter.
  • the controller may determine the target screen size according to whether the screen size of the electronic device and the screen size of the at least one external display device are the same.
  • the target screen size may be an integer multiple of the screen size of the electronic device when the screen size of the electronic device and the screen size of the at least one external display device are the same.
  • the controller may determine a distribution way based on the arrangement of the electronic device and the at least one external display device.
  • the controller may generate display data corresponding to the target screen size according to the display configuration parameter and divide the display data according to the distribution type.
  • the electronic device may further include a display unit configured to display display data corresponding to the electronic device among the divided display data.
  • the communication unit may transmit display data corresponding to the at least one external display device to the at least one external display device.
  • the target screen size may be the screen size of at least one external display device when the screen size of the electronic device is not the same as the screen size of the at least one external display device.
  • the electronic device may further include an input unit configured to receive a user input, and the controller may be further configured to process new display data corresponding to the target screen size according to the display configuration parameter in response to the user input. ) Or through threads.
  • controller may change the display configuration parameter to parallel process the first display data and the second display data to be displayed in the electronic device.
  • the communication unit may receive information about an event from at least one external display device, and the controller may generate display data corresponding to the target screen size based on the information about the event and the display configuration parameter.
  • a method of an electronic device sharing a screen with at least one external display device receiving a screen size of at least one external display device adjacent to the electronic device from at least one external display device ; Determining a target screen size based on the screen size of the electronic device and the screen size of the at least one external display device; And changing a display configuration parameter of the electronic device so that the screen size of the electronic device corresponds to the target screen size.
  • the determining of the target screen size may determine the target screen size according to whether the screen size of the electronic device and the screen size of the at least one external display device are the same.
  • the target screen size may be an integer multiple of the screen size of the electronic device when the screen size of the electronic device and the screen size of the at least one external display device are the same.
  • the method may further include determining a distribution way based on the arrangement of the electronic device and the at least one external display device.
  • the method may further include generating display data corresponding to the target screen size according to the display configuration parameter; And dividing the display data according to the distribution type.
  • the method may further include displaying display data corresponding to the electronic device among the divided display data; And transmitting display data corresponding to the at least one external display device to the at least one external display device.
  • the target screen size may be the screen size of at least one external display device when the screen size of the electronic device is not the same as the screen size of the at least one external display device.
  • the method may further include changing the display configuration parameter to parallel process the first display data and the second display data to be displayed in the electronic device.
  • the method may further include receiving information about an event from at least one external display device; And generating display data corresponding to the target screen size based on the information on the event and the display configuration parameter.
  • any part of the specification is to “include” any component, this means that it may further include other components, except to exclude other components unless otherwise stated.
  • the terms “... unit”, “module”, etc. described in the specification mean a unit for processing at least one function or operation, which may be implemented in hardware or software or a combination of hardware and software. .
  • content may mean digital information displayed on a screen of an electronic device.
  • Content may mean digital information displayed on a screen of an electronic device.
  • video content eg, TV program video, VOD (Video On Demand), personal video (UCC: User-Created Contents, music video, YouTube video, etc.
  • still image content For example, pictures, pictures, etc.
  • text content eg, e-books (poetry, novels), letters, business files
  • music content eg, music, performances, radio broadcasts, etc.
  • web pages application execution information, and the like. It may be, but is not limited thereto.
  • the electronic device 100 may include a communication unit 110 and a control unit 120.
  • the communication unit 110 may perform various types of external device communication according to various types of communication methods.
  • the communication unit 110 may communicate with an external display device through at least one of Wi-Fi, Bluetooth, wireless communication, and near field communication (NFC). Can communicate.
  • Wi-Fi Wi-Fi
  • Bluetooth wireless communication
  • NFC near field communication
  • the communication unit 110 may receive screen size information of the external display device from the external display device adjacent to the electronic device 100.
  • the screen size information may include information about a screen height and width of the external display device.
  • the communication unit 110 may provide the controller 120 with screen size information of the received external display device.
  • the screen size information of the external display device may be pre-stored in a storage unit (not shown) of the electronic device 100.
  • the controller 120 is a hardware configuration implemented by at least one processor such as a central processing unit (CPU), a graphics processing unit (GPU), an application processor (AP), or the like, and may control overall operations of the electronic device 100.
  • the CPU of the controller 120 may perform operations such as execution and control of an operating system, various data processing, and control of each component of the electronic device 100.
  • the GPU may calculate attribute values such as a coordinate value, a shape, a size, and a color in which content is displayed according to the layout of the screen.
  • the GPU of the controller 120 may generate display data for displaying content on the screen based on the calculated attribute value.
  • the controller 120 may set a display mode based on the screen size information of the external display device provided by the communication unit 110 and the screen size information of the electronic device 100. For example, the controller 120 may set a screen share mode when the screen size of the external display device is the same as the screen size of the electronic device 100.
  • the screen sharing mode may be a mode in which the electronic device 100 and the external display device share a screen to display one content. Of course, it will be understood by those skilled in the art that the screen sharing mode can be set even when the screen sizes are not the same.
  • the controller 120 may set an independent screen mode when the screen size of the external display device is different from the screen size of the electronic device 100.
  • the individual screen mode may be a mode in which the electronic device 100 and the external display device display a plurality of related contents on the screen of each device.
  • the controller 120 may set a display mode based on a user setting.
  • the controller 120 may provide a user interface for receiving a user input and set a display mode in response to receiving the user input through the user interface.
  • the controller 120 may determine a target screen size according to the set mode.
  • the target screen size may mean a screen size for displaying content.
  • the target screen size may be a screen size shared by the electronic device 100 and the external display device. Therefore, the target screen size may be expressed as an integer (N) times the screen size of the electronic device 100.
  • the target screen size may be the screen size of the electronic device 100 or the external display device on which the respective content is to be displayed.
  • the controller 120 may change a display configuration parameter of the electronic device 100 so that the screen size of the electronic device 100 corresponds to the target screen size.
  • the display configuration parameter may be a parameter for a control parameter or a hardware attribute value for controlling at least one hardware related to the display.
  • the controller 120 may change the display configuration parameter such that the LCD size is the target screen size.
  • the controller 120 may change the display configuration parameter in order to change a graphic processing unit (GPU) attribute value because the screen size of the electronic device 100 is the target screen size.
  • the controller 120 may perform display related operations according to the target screen size regardless of the actual screen size included in the electronic device 100 by changing the display configuration parameter.
  • the controller 120 may determine a distribution way based on the arrangement of the electronic device and the external display device.
  • the distribution type is a method of distributing display data generated by the electronic device 100 to adjacent external display devices.
  • the distribution type is a single lien, 2 ⁇ 2 square (depending on the arrangement of the electronic device 100 and the external display device). square) and the like.
  • the controller 120 may determine the height and width of the target screen size based on the distribution type.
  • the controller 120 may generate display data corresponding to the target screen size according to the display configuration parameter.
  • the display data may include pixel information for displaying content on the screen.
  • the controller 120 may divide the generated display data according to the distribution type.
  • the controller 120 may change display configuration parameters of the electronic device 100 to render each of the divided display data. For example, the controller 120 may change the display configuration parameter such that the GPU zooms and renders the entire display data into divided areas.
  • the controller 120 may change display configuration parameters of the electronic device 100 to render each divided display data. Thereafter, the electronic device 100 may display the rendered result.
  • the electronic device 100 may compress the rendered result and transmit it to the external display device through the communication unit 110.
  • the controller 120 may generate display data through a new process or thread. In addition, the controller 120 may render the generated display data and transmit the result to the external display device.
  • the configuration of the electronic device 100 using the external display device in the individual screen mode will be described later with reference to FIG. 12.
  • the electronic device 100 may generate display data including pixel information corresponding to a target screen size, and share the generated display data with an external display device. Accordingly, the electronic device 100 may share the screen with the external display device without considering the platform of the external display device (for example, the android platform, the window platform, etc.).
  • the platform of the external display device for example, the android platform, the window platform, etc.
  • FIG. 2 is a flowchart illustrating a method in which the electronic device 100 shares a screen with an external display device adjacent to the electronic device 100, according to an exemplary embodiment.
  • the electronic device 100 may receive screen size information of an external display device adjacent to the electronic device 100 from the external display device (S110).
  • the screen size information may include screen height and width information of the external display device.
  • the electronic device 100 may determine a target screen size based on the screen size of the electronic device 100 and the screen size of the external display device (S120). The electronic device 100 may determine whether the height and width of the screen of the electronic device are the same as the height and width of the screen of the external display device. The electronic device 100 may set a display mode according to the determination result.
  • the display mode may include a screen share mode and an independent screen mode.
  • the screen sharing mode may be a mode in which the electronic device 100 and the external display device share a screen to display one content. For example, one content displayed by the electronic device and the external display device through screen sharing may include various web documents such as image data, video data, application data, and HTML.
  • the individual screen mode may be a mode in which the electronic device 100 and the external display device display a plurality of related contents on the screen of each device. For example, when the screen sizes of the electronic device 100 and the external display device are the same, the electronic device 100 may set a screen sharing mode. In addition, when the screen sizes of the devices are different, the electronic device 100 may set an individual screen mode. Alternatively, the electronic device 100 may set the screen sharing mode or the individual screen mode based on the input received from the user.
  • the electronic device 100 may vary a method of sharing a screen with an external display device according to the display mode. Also, the electronic device 100 may change a target screen size according to the display mode.
  • the target screen size may mean a size of a screen on which content is displayed.
  • the electronic device 100 may determine the target screen size to be an integer (N) times the screen size of the electronic device 100.
  • the electronic device 100 may determine the target screen size as the screen size of the electronic device 100 or the screen size of the external display device.
  • the electronic device 100 may change a display configuration parameter of the electronic device 100 so that the screen size of the electronic device 100 corresponds to the target screen size (S130).
  • the display configuration parameter may be a parameter for a control parameter or a hardware attribute value for controlling at least one hardware related to the display.
  • the electronic device 100 may change display configuration parameters for the LCD or GPU, but is not limited thereto and may change display configuration parameters of hardware related to the display.
  • the electronic device 100 may generate display data corresponding to the target screen size according to the display configuration parameter.
  • the display data may include pixel information for displaying content on the screen.
  • the electronic device 100 transmits a part of display data for displaying one piece of content to an external display device to display one piece of content together with the external display device. Can be.
  • the electronic device 100 may display the plurality of related contents on the electronic device 100 and the external display device by transmitting the generated display data to the external display device. .
  • FIG. 3 is a flowchart illustrating a method in which the electronic device 100 detects an adjacent external display device and sets a display mode.
  • the electronic device 100 may detect an adjacent external display device (S210).
  • the electronic device 100 may include various sensors for detecting an external display device adjacent to the electronic device 100.
  • the electronic device 100 may include at least one of a proximity sensor, an infrared sensor, and an electromagnetic sensor.
  • the electronic device 100 may determine whether the external display device is adjacent through a proximity sensor disposed on the side surface of the main body of the electronic device 100.
  • the electronic device 100 may determine whether the external display device is adjacent to the electronic device 100 based on the location information received from the external display device and the location information of the electronic device 100.
  • the electronic device 100 may detect relative positions of external display devices adjacent to the electronic device 100. For example, the electronic device 100 may detect whether an external display device adjacent to the electronic device 100 is located on the left or right side (or up or down) based on the electronic device 100. Through this, the electronic device 100 may know the arrangement form of the electronic device 100 and the external display device.
  • the electronic device 100 may receive screen size information of the external display device from the external display device (S220).
  • the screen size information may include height and width information of the external display device.
  • the electronic device 100 may determine whether the screen size of the external display device is the same as the screen size of the electronic device 100 (S230).
  • the electronic device 100 may set a display mode according to the determination result.
  • the electronic device 100 may set a screen share mode (S240).
  • the screen sizes of the electronic device 100 and the external display device are the same, not only when the height and width of the screen of each device are the same, but also the difference between the height value and the width value of the screen of each device. It may include a case within the set error range.
  • the electronic device 100 may set an independent screen mode (S250).
  • the electronic device 100 may receive a user input for selecting a display mode.
  • the electronic device 100 may operate based on the display mode set by the user input.
  • 4 and 5 illustrate an example in which the electronic device 100 detects the external display device 200.
  • the electronic device 100 detects the external display device 200 adjacent to the electronic device 100 through the proximity sensor 410 disposed inside the main body side bezel. can do.
  • the proximity sensor 410 may be disposed inside or outside the at least one side bezel of the electronic device 100 or the front bezel of the electronic device 100.
  • the proximity sensor 410 may be a sensor that detects the presence or absence of an object approaching a predetermined detection surface or an object present in the vicinity without using mechanical force by using an electromagnetic force or infrared rays.
  • the electronic device 100 may receive screen size information of the external display device from the adjacent external display device 200.
  • the received screen size information may include screen height 432 and width 434 information of the external display device.
  • the electronic device 100 may set a display mode by comparing the height 422 and the width 424 of the screen of the electronic device with the height 432 and the width 424 of the screen of the external display device.
  • the electronic device 100 may receive location information of the external display device 200 from the external display device 200.
  • the electronic device 100 may detect the adjacent external display device 200 based on the received location information.
  • the electronic device 100 may receive an identification value of the external display device 200 together with the location information of the external display device 200 through near field communication (eg, Bluetooth). .
  • the electronic device 100 may determine whether the external display device 200 and the electronic device 100 are located within a threshold range based on the received location information. When the external display device 200 is located within the threshold range, the electronic device 100 may request screen size information of the external display device 200 according to the received identification value.
  • FIG. 6 is a flowchart illustrating a method of generating display data by the electronic device 100 in a screen share mode.
  • the electronic device 100 may set a screen share mode (S310).
  • the electronic device 100 may determine a target screen size as an integer N times the screen size of the electronic device 100 (S320).
  • the target screen size may mean the size of the screen on which the content is displayed.
  • the integer N may mean the sum of the number of the electronic device 100 and the external display device adjacent to the electronic device 100. For example, when the electronic device 100 detects one external display device adjacent to the electronic device 100 (N is 2), the electronic device 100 may double the target screen size. When the electronic device 100 detects three external display devices adjacent to the electronic device 100 (N is 4), the electronic device 100 may quadruple the target screen size.
  • the electronic device 100 may determine a distribution way.
  • the distribution type is a method of distributing display data generated by the electronic device 100 to adjacent external display devices.
  • the distribution type is a single lien, 2 ⁇ 2 square, or 2 ⁇ 2 according to the arrangement of the electronic device 100 and the external display device. square) and the like.
  • the electronic device 100 may enlarge the height and the width of the screen of the electronic device by an integer number N, depending on the distribution type. For example, when the distribution form is one line, the electronic device 100 may multiply the height (or width) of the target screen size by an integer N times the height (or width) of the screen of the electronic device.
  • the distribution type is 2 ⁇ 2
  • the electronic device 100 may double the height and width of the target screen size and the height and width of the electronic device screen, respectively.
  • the electronic device 100 may generate display data corresponding to the target screen size according to the display configuration parameter (S330).
  • the display data may include pixel information for displaying content on the screen.
  • the display data may include pixel information for displaying content executed in the electronic device 100 on a screen having a target screen size.
  • 7A and 7B illustrate an example in which the electronic device 100 determines a target screen size in the screen sharing mode.
  • the electronic device 100 may detect an external display device 200 adjacent to the electronic device 100.
  • the electronic device 100 may set the screen sharing mode when the screen sizes 725 and 727 of the adjacent external display device 200 are the same as the screen sizes 721 and 723 of the electronic device 100.
  • the electronic device 100 may determine the target screen size to be twice the screen sizes 721 and 723 of the electronic device 100.
  • the electronic device 100 may determine a distribution way as a single-line distribution type according to the arrangement of the external display device 200.
  • the electronic device 100 may determine the width 731 of the target screen size to be twice the screen width 721 of the electronic device 100 according to the line distribution form. Therefore, as shown in FIG. 7B, the target screen size has the same height 734 as the screen height 724 of the electronic device 100, and the screen width 722 of the electronic device 100 is doubled. May have a width 732.
  • the electronic device 100 displays display data 710 for displaying the content 710-1 displayed on the screen of the electronic device 100 on the screen having the target screen sizes 731 and 733. -2) can be generated.
  • the electronic device 100 may change the display configuration parameter such that the LCD size of the electronic device 100 is the target screen sizes 732 and 734.
  • the electronic device 100 may change the display configuration parameter such that the GPU calculates the screen size of the electronic device 100 as the target screen sizes 732 and 734.
  • 8A and 8B illustrate an example in which the electronic device 100 determines a target screen size in the screen sharing mode.
  • the electronic device 100 may detect a plurality of external display devices 200-1 to 200-3 adjacent to the electronic device 100.
  • the electronic device 100 may set a screen sharing mode.
  • the electronic device 100 may determine a target screen size as four times the screen sizes 821 and 823 of the electronic device 100.
  • the electronic device 100 may determine a distribution way as a 2 ⁇ 2 square distribution type according to the arrangement of the external display devices 200-1 to 200-3. Accordingly, the target screen size may have a width 832 and a height 834 in which the screen width 821 and the height 823 of the electronic device 100 are doubled, respectively, as shown in FIG. 8B. .
  • the electronic device 100 displays display data 810 for displaying the content 810-1 displayed on the screen of the electronic device 100 on the screen having the target screen sizes 831 and 833. -2) can be generated.
  • FIG. 9 is a flowchart illustrating a method in which the electronic device 100 transmits a part of display data to an external display device in the screen sharing mode.
  • the electronic device 100 may divide the display data into respective areas based on a distribution way (S410). For example, in the case of a single-line distribution form as shown in FIG. 7B, the electronic device 100 may divide the display data into two pieces based on the width of the target screen size. In addition, in the case of a 2 ⁇ 2 square distribution form as shown in FIG. 8B, the electronic device 100 may divide the display data into four pieces based on the width and the height of the target screen size. Meanwhile, the divided display data may have the same size (that is, the screen size of the electronic device 100).
  • the electronic device 100 may change a display configuration parameter to render divided display data (S420). For example, the electronic device 100 may change a graphic processor configuration parameter to render and display divided display data. Alternatively, the electronic device 100 may change the display configuration parameter to zoom and render the entire display data into an area corresponding to the divided display data.
  • the electronic device 100 may determine whether the divided display data correspond to the electronic device 100 or the external display device. When the divided display data corresponds to the electronic device 100, the electronic device 100 may display the rendered result according to the display configuration parameter (S440). Meanwhile, when the divided display data corresponds to the external display device, the electronic device 100 may compress the rendered result and transmit it to the external display device (S450).
  • the electronic device 100 may repeatedly perform S420 to S450 on each of the divided display data, thereby displaying the divided display data on the electronic device 100 or transmitting the divided display data to the external display device.
  • FIG 10A illustrates an example of the content 1010 to be displayed on the electronic device 100 and the external display device 200.
  • FIG. 10B and 10C illustrate an example in which the content 1010 of FIG. 10A is displayed on the electronic device 100 and the external display device according to a distribution type of the external display device.
  • the electronic device 100 may include a target screen in which the screen width of the electronic device 100 is tripled according to the arrangement of the external display devices 200-1 and 200-2. size) 1021 and 1023 may be determined.
  • the electronic device 100 may generate display data 1020 for displaying the content 1010 of FIG. 10A on a screen having target screen sizes 1021 and 1023.
  • the electronic device 100 may divide the display data 1020 according to a single line distribution form of the external display devices 200-1 and 200-2. Each divided display data 1020-1, 1020-2, and 1020-3 may be displayed together in the electronic device 100 and the external display devices 200-1 and 200-2.
  • the electronic device 100 may include a target screen in which the width and height of the screen of the electronic device 100 are doubled, respectively, according to the arrangement of the external display devices 200-1 to 200-3. Sizes 1031 and 1033 can be determined.
  • the electronic device 100 may generate display data 1030 to display the content 1010 of FIG. 10A on a screen having target screen sizes 1031 and 1033.
  • the electronic device 100 may divide the display data 1030 according to the 2 ⁇ 2 square distribution form of the external display devices 200-1 to 200-3. Each divided display data 1030-1 through 1030-4 may be displayed together in the electronic device 100 and the external display devices 200-1 through 200-3.
  • the electronic device 100 may change a display configuration parameter, thereby sharing the screen without simply enlarging or reducing the content displayed on the screen of the electronic device 100.
  • Content can be displayed according to their screen size (ie, target screen size). Therefore, by adding the number of external display devices sharing the screen, the user can be provided with content including more information.
  • FIG. 11 is a flowchart illustrating a method in which the electronic device 100 and the external display device share a screen to display one content in the screen sharing mode.
  • the electronic device 100 may generate display data having a size corresponding to a target screen size (S505).
  • the method for generating display data by the electronic device 100 includes the contents described with reference to FIG. 6, and thus a detailed description thereof will be omitted.
  • the electronic device 100 may divide the display data into first display data and second display data having the same size, based on a distribution way (S510).
  • the electronic device 100 may render first display data corresponding to the external display device 200 (S515).
  • the electronic device 100 may compress the rendered first display data through an encoder.
  • the electronic device 100 may transmit the compressed first display data to the external display device 200 (S525).
  • the external display apparatus 200 may decompress the compressed first display data to display the decoded first display data (S530).
  • the electronic device 100 may render the second display data after rendering the first display data (S535). Since the second display data corresponds to the electronic device 100, the electronic device 100 may display the rendered result without compressing the rendered result (S540). As such, the electronic device 100 and the external display device 200 may display one display data by sharing the screen.
  • the electronic device 100a may include an input unit 1230 that receives a user input. Can be.
  • the communication unit 1210 may perform various types of external device communication according to various types of communication methods.
  • the communication unit 110 may communicate with an external display device through at least one of Wi-Fi, Bluetooth, wireless communication, and near field communication (NFC). Can communicate.
  • Wi-Fi Wi-Fi
  • Bluetooth wireless communication
  • NFC near field communication
  • the communication unit 1210 may receive screen size information of the external display device from an external display device adjacent to the electronic device 100a.
  • the screen size information may include height and width information of a screen of the external display device.
  • the communicator 1210 may provide the controller 1220 with received screen size information of the external display device.
  • the communication unit 1210 may receive information about an event generated in the external display device from the external display device.
  • the event may mean the occurrence of an action or an event generated by a user to cause the program to respond.
  • the event may be a user's touch gesture or touch input.
  • the information on the event may include an event type, screen coordinate information on which the event occurred, and the like.
  • the communication unit 1210 may provide information about the received event to the control unit 1220.
  • the controller 1220 may set a display mode based on the screen size of the external display device provided from the communication unit 1210 and the screen size of the electronic device 100a. For example, the controller 1220 may set an independent screen mode when the screen size of the external display device is different from the screen size of the electronic device 100a.
  • the individual screen mode may be a mode in which the electronic device 100 and the external display device display a plurality of related contents on the screen of each device.
  • the controller 1210 may set the individual screen mode based on the user setting.
  • the controller 120 may provide a user interface for receiving a user input and set an individual screen mode in response to receiving the user input through the user interface.
  • the controller 1220 may determine the target screen size as the screen size of the electronic device 100a or the screen size of the external display device.
  • the controller 1220 may change a display configuration parameter of the electronic device 100a such that the screen size of the electronic device 100a corresponds to the target screen size.
  • the display configuration parameter may be a parameter for a control parameter or a hardware attribute value for controlling at least one hardware related to the display.
  • the controller 1220 may change the display configuration parameter such that the LCD size is the target screen size.
  • the controller 1220 may change the display configuration parameter to change the attribute value of the graphic processing unit (GPU) as the screen size of the electronic device 100a is the target screen size.
  • the controller 120 may perform a display related operation based on the target screen size regardless of the actual screen size of the electronic device 100a by changing the display configuration parameter.
  • the input unit 1230 may receive a user input.
  • the input unit 1230 may include at least one or a combination of a key, a touch sensor, a touch screen, a pen recognition panel, a bending sensor, a biosignal detection sensor, and a microphone.
  • the input unit 1230 may be provided with content including a graphical user interface (GUI).
  • GUI graphical user interface
  • the user's touch gesture or touch input may include tap, touch and hold, double tap, drag, pan, flick, drag and drop.
  • the input unit 1230 may receive a user input for controlling the electronic device 100a.
  • the input unit 1230 may receive an on / off instruction of the electronic device 100, an execution instruction of an application, a user input for the application, and the like.
  • the input unit 1230 may receive a user input for displaying predetermined content on a screen of an external display device.
  • the input unit 1230 may receive a user input for selecting one object on a screen on which first content including a plurality of objects is displayed.
  • the input unit 1230 may receive a user input of dragging the screen in a direction in which the external display device is located on the screen on which the first content is displayed.
  • the controller 1220 may generate display data for displaying the second content related to the first content on the screen according to a display configuration parameter in response to a user input received from the screen on which the first content is displayed.
  • the display data corresponds to the target screen size and may include pixel information for displaying the second content on the screen.
  • the controller 1220 may generate display data through a new process or thread.
  • the controller 1220 may generate display data through a process or thread that processes existing content.
  • the controller 1220 may perform an operation corresponding to an event provided from the communication unit 1210 and then generate corresponding display data.
  • FIG. 13 is a flowchart illustrating a method of generating display data by the electronic device 100a in an independent screen mode.
  • the electronic device 100a may receive screen size information of the external display device adjacent to the electronic device 100a from the external display device.
  • the screen size information may include height and width information of a screen of the external display device.
  • the electronic device 100a may determine whether the screen sizes of the electronic device 100a and the external display device are the same.
  • whether the screen size of each device is the same may include a case where the difference between the height value and the width value of each device screen is within a preset error range.
  • the electronic device 100a may set a display mode to an independent screen mode (S610). In addition, the electronic device 100a may determine the target screen size as the screen size of the external display device. Thereafter, the electronic device 100a may receive a user input (S620). For example, the electronic device 100a may receive a user input of dragging the screen in the direction in which the external display device is located. Alternatively, the electronic device 100a may receive a user input for tapping the screen. As the user input is received, the electronic device 100a may change the display configuration parameter of the electronic device 100a such that the screen size of the electronic device 100a corresponds to the target screen size.
  • the display configuration parameter may be a parameter for a control parameter or a hardware attribute value for controlling at least one hardware related to the display.
  • the electronic device 100a may change the display configuration parameter such that the LCD size of the electronic device 100a is the target screen size.
  • the electronic device 100a may change the display configuration parameter to change the attribute value of the graphic processing unit (GPU) as the screen size of the electronic device 100a is the target screen size.
  • GPU graphic processing unit
  • the electronic device 100a may generate display data corresponding to the target screen size according to the display configuration parameter (S630). According to an embodiment, the electronic device 100a may generate display data through a new process or thread. For example, the electronic device 100a may receive a user input for tapping a screen on a screen on which content processed in a first process (or a first thread) is displayed. The electronic device 100a may generate display data corresponding to the target screen size and display new content on the screen through a second process (or a new second thread) in response to a user input. Alternatively, the electronic device 100a may receive a user input of dragging a screen on a screen on which content processed in the first process is displayed.
  • the electronic device 100a may generate display data corresponding to the target screen size and display the first content on the screen through a second process in response to a user input.
  • the electronic device 100a may compress the generated display data and transmit the generated display data to the external display device through the second process.
  • the electronic device 100a may generate display data through an existing process or thread. For example, the electronic device 100a may receive a user input of dragging a screen on the screen on which the first content processed by the first process is displayed. In response to the user input, the electronic device 100a may generate display data corresponding to the target screen size and display second content related to the first content on the screen through a first process. In this case, the electronic device 100a may compress the generated display data and transmit the generated display data to the external display device through the first process.
  • the generated display data is not directly displayed on the electronic device 100a but is directly transmitted to the external display device.
  • the present invention is not limited thereto, and the generated display data may be displayed on the electronic device 100a and then transmitted to the external display device.
  • the display data transmitted to the external display device may be displayed on the external display device according to hardware configuration parameters of the external display device.
  • 14A and 14B illustrate an example in which the electronic device 100a shares a screen with an external display device in response to a user input in the individual screen mode.
  • the electronic device 100a may receive a tab input 1410 of a user who selects one picture list 1415 on a screen 1410 on which a first content including a picture list is displayed. Can be.
  • the second content corresponding to the user's tap input 1410 may be displayed on the external display device 200.
  • the electronic device 100a may display a display configuration parameter such that the screen size of the electronic device 100a corresponds to the target screen sizes 1401 and 1403. Can be changed.
  • the target screen size is the screen sizes 1401 and 1403 of the external display device.
  • the electronic device 100a corresponds to the target screen sizes 1401 and 1403 through a new process and displays display data 1420 for displaying the second content on the screen. Can be generated.
  • the electronic device 100a may transmit the display data 1420 generated through the new process to the external display device 200 while continuously displaying the first content through the existing process of processing the first content.
  • 15 is a flowchart of generating display data through parallel processing when the electronic device 100a is in an individual screen mode.
  • the electronic device 100a may receive a user input of dragging a screen in a direction in which an external display device is located on a screen on which first content is displayed (S710).
  • the first content may be processed by a first process of the electronic device 100a.
  • the electronic device 100a may generate first display data corresponding to the target screen size and display the first content on the screen through the second process (S720-1).
  • the second process can be a new process or a thread.
  • the electronic device 100a may generate second display data corresponding to the screen size of the electronic device 100a through the first process and for displaying content prior to the first content on the screen (S720). -2).
  • the display configuration parameter may be set in the electronic device 100a such that the screen size of the electronic device 100a is the target screen size (ie, the screen size of the external display device). Therefore, the electronic device 100a may change the display configuration parameter to zoom-in or zoom-out the second display data based on the screen size of the electronic device 100a. . Meanwhile, the electronic device 100a may parallel process the S720-1 and S720-2 through different processes.
  • the electronic device 100a may compress the generated first display data and transmit the generated first display data to the external display device through the second process (S730).
  • the electronic device 100a may display the generated second display data through the first process.
  • the user may receive the screen displayed on the electronic device 100a by the external display device by dragging the screen, and may receive the previous execution screen through the screen of the electronic device 100a.
  • FIG. 16A illustrates an example in which the electronic device 100a generates display data through parallel processing in the individual screen mode
  • FIG. 16B illustrates a plurality of contents of the electronic device 100a and the external display device 200. Is an example of displaying each.
  • the electronic device 100a may enlarge and display the selected picture (1600-). One).
  • the selected picture is referred to as first content.
  • the electronic device 100a may process the screen including the picture list and the first content through a first process (or a first thread).
  • the electronic device 100a may receive a drag input 1640 that drags the screen in a direction in which the external display device 200 is located on the screen 1630 on which the first content is displayed (1600-2).
  • the electronic device 100a corresponds to target screen sizes 1605 and 1607 through a second process, and displays the first content on the screen.
  • First display data 1650-1 may be generated for display.
  • the electronic device 100a corresponds to the screen sizes 1601 and 1603 of the electronic device 100a through the existing first process, and displays the previously displayed content (eg, a picture list) on the screen.
  • Second display data 1650-2 may be generated.
  • the electronic device 100a may compress the first display data 1650-1 through the first process and transmit the first display data 1650-1 to the external display device 200, and through the first process, the second display data 1650. -2) may be displayed on the electronic device 100a. Meanwhile, each operation performed in the first process and the second process may be parallelized.
  • the first display data 1650-1 may be displayed on the external display device 200, and the second display data 1650-2 may be displayed on the electronic device 100a. Can be.
  • FIG 17 illustrates another example in which the electronic device 100a generates display data through parallel processing in the individual screen mode.
  • the electronic device 100a may receive a drag input 1720 that drags a screen from the screen 1710 on which video content is displayed to the external display device 200 (1700-1). Video content is processed through a first process of the electronic device 100a. Thereafter, the electronic device 100a may determine a target screen size based on the screen size of the external display device 200, and change the display configuration parameter such that the screen size of the electronic device 100a is the target screen size. have. Thereafter, the electronic device 100a may generate first display data 1730-1 corresponding to the target screen size and for displaying the video content on the screen through a new second process.
  • the electronic device 100a corresponds to the screen size of the electronic device 100a through the existing first process, and displays second display data 1730 for indicating a home screen of the electronic device 100a. -2) can be generated.
  • the first display data 1730-1 may be displayed on the external display device 200
  • the second display data 1730-2 may be displayed on the electronic device 100a (1700-2).
  • the user may continue to receive video content through the external display device 200, and simultaneously execute a new application through the home screen of the electronic device 100a.
  • the electronic device 100a may display display data including pixel information regardless of the platform (eg, android, window, etc.) of the external display device.
  • the external display device 200 By providing the external display device 200, content may be displayed through a screen of the external display device.
  • the electronic device 100a may quickly display a plurality of contents in the electronic device 100a and the external display device 200 through a parallel processing method.
  • FIG. 18 is a flowchart illustrating a method in which the electronic device 100a generates display data through a single process or thread in the individual screen mode.
  • the electronic device 100a may receive a drag input of a user dragging the screen on the screen on which the first content is displayed (S810).
  • the drag input direction may be a direction in which the external display apparatus 200 is located.
  • the electronic device 100a may change a display configuration parameter such that the screen size of the electronic device 100a corresponds to the target screen size according to the drag input.
  • the electronic device 100a may generate first display data corresponding to the target screen size and display lower content of the first content on the screen through a process (or thread) for processing the first content. (S820).
  • the electronic device 100a may compress the generated first display data and transmit the compressed first display data to the external display device.
  • the electronic device 100a may perform an additional operation for continuously displaying the first content on the electronic device 100a.
  • the electronic device 100a changes the screen size of the electronic device 100a to the target screen size, and the display configuration parameter such that the screen size of the electronic device 100a corresponds to the target screen size. ) Can be changed.
  • the electronic device 100a may generate and display second display data for displaying the first content on the screen based on the changed display configuration parameter.
  • the electronic device 100a may generate second display data for displaying the first content on the screen without changing the target screen size.
  • the electronic device 100a may zoom-in or zoom out the second display data so that the second display data corresponds to the screen size of the electronic device 100a. You can also change the display configuration parameters.
  • the electronic device 100a may display the second display data zoomed in or zoomed out.
  • the electronic device 100a may provide a plurality of related contents in the electronic device 100a and the external display device through the above-described method.
  • 19 illustrates an example in which the electronic device 100a generates display data through a single process or thread in the individual screen mode.
  • the electronic device 100a may receive a drag input 1820 for dragging a screen from the screen 1910-1 on which a circle setting menu is displayed to the external display device 200.
  • the electronic device 100a may generate first display data 1940 corresponding to the target screen size and for displaying a lower menu of the menu 1920 on which the drag input 1820 is received.
  • the electronic device 100a may compress the generated first display data 1940 and transmit the compressed first display data 1940 to the external display device 200. Thereafter, the electronic device 100a may generate second display data 1910-2 to continuously display the environment setting menu on the screen.
  • 20 is a flowchart illustrating a method in which the electronic device 100a processes an event generated in the external display device 200.
  • the external display device 200 may detect an event on a screen on which display data generated by the electronic device 100a is displayed (S905).
  • the event may mean the occurrence of an action or an event generated by a user to cause the program to respond.
  • the event may be a user's touch gesture or touch input.
  • the external display device 200 may transmit information about the detected event to the electronic device 100a (S910).
  • the information on the event may include an event type, an event identification value, and screen coordinate information on which the event occurred.
  • the screen coordinate information may correspond to the target screen size. For example, when the sizes of the electronic device 100a and the external display device 200 are 1024 * 1024 and the target screen size is 2048 * 1024, the received screen coordinate information may be (2000, 1000).
  • the electronic device 100a may generate display data corresponding to the target screen size based on the information about the event (S915). For example, when video content is displayed on the electronic device 100a and the external display device 200, the external display device 200 detects an event of jumping the video content to an arbitrary point of view, and the electronic device 100a. You can inform.
  • the electronic device 100a may generate display data for displaying video content corresponding to an arbitrary time point on the screen.
  • the electronic device 100a may compress a portion (eg, in the screen sharing mode) or all (eg, in the individual screen mode) of the generated display data and transmit the compressed data to the external display device 200 (S920).
  • the external display device 200 may decompress the received display data and display it on the screen.
  • FIG. 21 illustrates an example in which the electronic device 100a generates display data according to an event generated in the external display device 200.
  • the external display device 200 may receive and display a portion 2110-2 of display data from the electronic device 100a.
  • the external display apparatus 200 may receive a touch input event 2120 from a user on a screen on which a portion 2110-2 of the display data is displayed (2100-1).
  • the electronic device 100a may receive information about the touch input event 2120 from the external display device 200.
  • the received information about the touch input event 2120 may include coordinate information on which the user's touch input is received.
  • the screen coordinate information may be coordinates corresponding to the target screen size (eg, 2048 * 2048).
  • the electronic device 100a may generate display data 2130-1 and 2130-2 based on the information about the event.
  • the generated display data 2130-1 and 2130-2 may be divided into first display data 2130-1 and second display data 2130-2 having the same size. have.
  • the electronic device 100a and the external display device 200 may display the first display data 2130-1 and the second display data 2130-2, respectively.
  • 22A and 22B illustrate screen sharing between the electronic device 100a and the external display device 200.
  • the electronic device 100a may share a screen of the external display device 200 and display an execution screen of a game application. Since the game application is executed in the electronic device 100a, the external display device 200 does not separately execute the game application. In this case, the user of the electronic device 100a may set the screen sharing mode regardless of the screen size of the external display device 200. Regardless of the screen size, a method of sharing the screen between the electronic device 100 and the external display device 200 through the screen sharing mode will be described later with reference to FIG. 23.
  • the electronic device 100a may receive an event generated by the electronic device 100a or the external display device 200 and perform an operation corresponding to the event. In addition, the electronic device 100a may generate display data based on an operation corresponding to the event. For example, the electronic device 100a may receive a touch input event of a user moving a stone of Go from the external display device 200 and generate display data for displaying an execution screen of a game application in which the changed horse position is reflected. Can be.
  • the electronic device 100a may share an execution screen of an e-book application with the external display device 200.
  • FIG. 23 is a flowchart illustrating a method of sharing a screen through a screen share mode between the electronic device 100a and the external display device having different screen sizes.
  • the electronic device 100a may set the screen sharing mode even when the screen sizes of the electronic device 100a and the external display device 200 are different.
  • the electronic device 100a may set the screen sharing mode based on a user input.
  • the electronic device 100a may determine a target screen size based on the number of external display devices adjacent to the electronic device 100a (S910).
  • the determined target screen size may be an integer N times the screen size of the electronic device 100a.
  • the electronic device 100a may determine a distribution way according to the arrangement of the external display device. For example, when the number of adjacent external display devices is one, the electronic device 100a may determine the target screen size to be twice the screen size of the electronic device 100a.
  • the electronic device 100a may determine the height and width of the target screen size according to the distribution type.
  • the electronic device 100a may generate display data corresponding to the target screen size in operation S920.
  • the electronic device 100a may change the display configuration parameter such that the LCD size of the electronic device 100a is the target screen size.
  • the electronic device 100a may change a display configuration parameter to change a GPU attribute value corresponding to the target screen size.
  • the electronic device 100a may generate display data for displaying content executed in the electronic device 100a on a screen having a target screen size according to the changed display configuration parameter.
  • the electronic device 100a may divide the generated display data according to the distribution type. For example, the electronic device 100a may divide the display data into first display data and second display data. The first display data and the second display data correspond to the screen size of the electronic device 100a.
  • the electronic device 100a may zoom in or zoom out the display data corresponding to the external display device among the divided display data according to the screen size of the external display device (S940). .
  • the electronic device 100a may change the display configuration parameter to zoom in or zoom out the second display data.
  • Zoomed-in or zoomed-out second display data may be transmitted to an external display device, and the first display data may be directly displayed on the electronic device 100a.
  • FIG. 24 illustrates an example of sharing a screen through a screen sharing mode between the electronic device 100a and the external display device 200 having different sizes.
  • the electronic device 100a may display an execution screen of a game application using the external display device 200 having a screen size different from that of the electronic device 100a. . Since the game application is executed in the electronic device 100a, the external display device 200 does not separately execute the game application.
  • the electronic device 100a may determine twice the screen size of the electronic device 100a as the target screen size. In addition, the electronic device 100a may correspond to the determined target screen size and may generate display data for displaying the execution screen of the game application on the screen. After dividing the display data into two first display data and second display data, the electronic device 100a may zoom in the second display data corresponding to the external display device 200. The zoomed-in second display data may be transmitted to the external display device 200 and displayed on the external display device 200. The electronic device 100a may directly display the first display data.
  • the electronic device 100a may receive an event received from the external display device 200 and coordinate information on which the event occurred. In addition, the electronic device 100a may calculate coordinate information on the target screen size corresponding to the received coordinate information. The electronic device 100a may generate display data corresponding to the operation after performing the operation corresponding to the event. The generated display data may be shared with the external display device 200 through the above-described process. As such, the user may be provided with a shared screen through devices having different screen sizes and devices to which different platforms are applied.
  • 25 is a block diagram illustrating a configuration of an electronic device 3000 according to an exemplary embodiment.
  • the configuration of the electronic device 3000 may include, for example, a mobile phone, a tablet PC, a PDA, an MP3 player, a kiosk, an electronic picture frame, a navigation device, a digital TV, a wrist watch, or an HMD.
  • the present invention can be applied to various types of devices such as a wearable device such as a head-mounted display.
  • the electronic device 3000 may include an input unit 3100, an output unit 3200, a controller 3300, a sensing unit 3400, a communication unit 3500, an A / V input unit 3600, and a memory 3700. It may include at least one of.
  • the input unit 3100, the control unit 3300, and the communication unit 3500 of FIG. 25 may correspond to the input unit 1230, the control unit 1220, and the communication unit 1210 of FIG. 12.
  • the input unit 3100 may receive various commands from a user.
  • the input unit 3100 may include at least one of a key 3110, a touch panel 3120, and a pen recognition panel 3130.
  • the key 3110 may include various types of keys such as mechanical buttons and wheels formed in various areas such as a front portion, a side portion, and a rear portion of the main body exterior of the electronic device 3000.
  • the touch panel 3120 may detect a user's touch input and output a touch event value corresponding to the detected touch signal.
  • the touch screen may be implemented as various types of touch sensors such as capacitive, pressure sensitive, and piezoelectric.
  • the capacitive type is a method of calculating touch coordinates by detecting fine electricity generated by the human body of a user when a part of the user's body is touched by the touch screen surface by using a dielectric coated on the touch screen surface.
  • the pressure-sensitive type includes two electrode plates embedded in the touch screen, and when the user touches the screen, the touch panel calculates touch coordinates by detecting that the upper and lower plates of the touched point are in contact with current.
  • the touch event occurring in the touch screen may be mainly generated by a human finger, but may also be generated by an object of conductive material that can apply a change in capacitance.
  • the pen recognition panel 3130 detects a proximity input or touch input of a pen according to the operation of a user's touch pen (eg, a stylus pen or a digitizer pen) and detects a detected pen proximity event or pen.
  • a touch event can be output.
  • the input unit 3100 may receive a user input for displaying predetermined content on a screen of an external display device. For example, the input unit 3100 may receive a user input of selecting one object on a screen on which first content including a plurality of objects is displayed. Alternatively, the input unit 3100 may receive a user input of dragging the screen in a direction in which the external display device is positioned on the screen on which the first content is displayed.
  • the output unit 3200 is for outputting an audio signal, a video signal, or a vibration signal.
  • the output unit 3200 may include a display unit 3210, a sound output unit 3220, a vibration motor 3230, and the like.
  • the display unit 3210 may include a display panel 3211 and a controller (not shown) for controlling the display panel 3211.
  • the display panel 3211 may be implemented in various types of displays, such as a liquid crystal display (LCD), an organic light emitting diode (OLED) display, an active-matrix organic light-emitting diode (AMOLED), a plasma display panel (PDP), and the like. have.
  • the display panel 3211 may be implemented to be flexible, transparent, or wearable.
  • the display unit 3210 may be combined with the touch panel 3120 of the input unit 3100 and provided as a touch screen (not shown).
  • the touch screen (not shown) may include an integrated module in which the display panel 3211 and the touch panel 3120 are combined in a stacked structure.
  • the display 3210 displays and outputs information processed by the electronic device 3000.
  • the display 3210 may receive and display a result of rendering through the controller 3300.
  • the sound output unit 3220 outputs audio data received from the communication unit 1500 or stored in the memory 3700. Also, the sound output unit 3220 outputs a sound signal related to a function (for example, a call signal reception sound, a message reception sound, and a notification sound) performed by the electronic device 3000.
  • the sound output unit 3220 may include a speaker, a buzzer, and the like.
  • the vibration motor 3230 may output a vibration signal.
  • the vibration motor 3230 may output a vibration signal corresponding to the output of audio data or video data (eg, call signal reception sound, message reception sound, etc.).
  • the vibration motor 3230 may output a vibration signal when a touch is input to the touch screen.
  • the controller 3300 may include at least one of a CPU 3310, a Graphic Processing Unit (GPU) 3320, a RAM 3330, and a ROM 3340.
  • the CPU 3310, the GPU 3320, the RAM 3330, the ROM 3340, and the like may be connected to each other through a bus.
  • the CPU 3310 accesses the memory 3700 and performs booting using an operating system stored in the memory 3700. In addition, various operations are performed using various programs, content, data, and the like stored in the memory 3700.
  • the ROM 3340 stores a command set for system booting. For example, when the turn-on command is input and the power is supplied, the electronic device 3000 copies the OS stored in the memory 3700 to the RAM 3330 according to the command stored in the ROM 3340, and copies the OS. You can boot the system by running it. When the booting is completed, the CPU 3310 copies various programs stored in the memory 3700 to the RAM 3330, and executes the programs copied to the RAM 3330 to perform various operations. When booting of the electronic device 3000 is completed, the GPU 3320 displays a UI screen on an area of the display unit 3210. In detail, the GPU 3320 may generate a screen on which an electronic document including various objects such as content, icons, menus, and the like is displayed.
  • the GPU 3320 calculates attribute values, such as coordinate values, shapes, sizes, and colors, in which the objects are to be displayed, according to the layout of the screen. Alternatively, the GPU 3320 may calculate a changed attribute value through a display configuration parameter. The GPU 3320 may generate display data of various layouts including objects based on the calculated configuration parameter. For example, the GPU 3320 may generate display data by performing a rendering operation based on the calculated attribute value. The display data generated by the GPU 3320 may be provided to the display unit 3210 and displayed on each area of the display unit 3210.
  • the sensing unit 3400 may detect a state of the electronic device 3000 or a state around the electronic device 3000 and transmit the detected information to the controller 3300.
  • the sensing unit 3400 may include a geomagnetic sensor 3410, an acceleration sensor 3420, a temperature / humidity sensor 3430, an infrared sensor 3440, a gyroscope sensor 3450, and a position sensor. (Eg, GPS) 3460, barometric pressure sensor 3470, proximity sensor 3480, and RGB sensor (illuminance sensor) 3490, but are not limited thereto.
  • the sensing unit 3400 may be disposed on a side portion, a front portion, or the like of the electronic device 3000 to detect whether the external display device is adjacent to the sensing unit 3400.
  • the sensing unit 3480 may detect a relative position of an adjacent external display device.
  • the electronic device 3000 detects whether an external display device adjacent to the electronic device 3000 is located on the left or right side (or up or down) based on the electronic device 3000, and the controller 3300. ) May provide the location information of the external display device.
  • the controller 3300 may know the arrangement form of the electronic device 3000 and the external display device through the sensing unit 3400.
  • the function of each sensor can be intuitively inferred by those skilled in the art from the name, a detailed description thereof will be omitted.
  • the communicator 3500 may include one or more components that allow communication between the electronic device 3000 and the external display device or the electronic device 3000 and the server.
  • the communicator 3500 may include a short range communicator 3510, a mobile communicator 3520, and a broadcast receiver 3530.
  • the short-range wireless communication unit 3510 includes a Bluetooth communication unit, a Bluetooth low energy (BLE) communication unit, a near field communication unit, a WLAN (Wi-Fi) communication unit, a Zigbee communication unit, and an infrared ray ( IrDA (Infrared Data Association) communication unit, WFD (Wi-Fi Direct) communication unit, UWB (ultra wideband) communication unit, Ant + communication unit and the like, but may not be limited thereto.
  • the mobile communication unit 3520 transmits and receives a wireless signal with at least one of a base station, an external terminal, and a server on a mobile communication network.
  • the wireless signal may include various types of data according to transmission and reception of a voice call signal, a video call call signal, or a text / multimedia message.
  • the broadcast receiver 3530 receives a broadcast signal and / or broadcast related information from the outside through a broadcast channel.
  • the broadcast channel may include a satellite channel and a terrestrial channel.
  • the electronic device 3000 may not include the broadcast receiver 3530.
  • the A / V input unit 3600 is for inputting an audio signal or a video signal, and may include a camera 3610 and a microphone 3620.
  • the camera 3610 may obtain an image frame such as a still image or a moving image through an image sensor in a video call mode or a shooting mode.
  • the image captured by the image sensor may be processed by the controller 3300 or an additional image processor (not shown).
  • the image frame processed by the camera 3610 may be stored in the memory 3700 or transmitted to the outside through the communication unit 3500. Two or more cameras 3610 may be provided according to a configuration aspect of the terminal.
  • the microphone 3620 receives an external sound signal and processes the external sound signal into electrical voice data.
  • the microphone 3620 may receive an acoustic signal from an external device or speaker.
  • the microphone 3620 may use various noise removing algorithms for removing noise generated in the process of receiving an external sound signal.
  • the memory 3700 may store a program for processing and controlling the controller 3300, and input / output data (eg, a plurality of menus, a plurality of first hierarchical sub-menus corresponding to each of the plurality of menus, and a plurality of menus). And a plurality of second hierarchical submenus corresponding to each of the first hierarchical submenus).
  • input / output data eg, a plurality of menus, a plurality of first hierarchical sub-menus corresponding to each of the plurality of menus, and a plurality of menus.
  • second hierarchical submenus corresponding to each of the first hierarchical submenus
  • the memory 3700 may include a flash memory type, a hard disk type, a multimedia card micro type, a card type memory (for example, SD or XD memory), RAM Random Access Memory (RAM) Static Random Access Memory (SRAM), Read-Only Memory (ROM), Electrically Erasable Programmable Read-Only Memory (EEPROM), Programmable Read-Only Memory (PROM), Magnetic Memory, Magnetic Disk It may include at least one type of storage medium of the optical disk.
  • the electronic device 3000 may operate a web storage or a cloud server that performs a storage function of the memory 3700 on the Internet.
  • Programs stored in the memory 3700 may be classified into a plurality of modules according to their functions.
  • the programs may be classified into a UI module 3710, a touch screen module 3720, a notification module 3730, and the like. .
  • the UI module 3710 may provide a specialized UI, a GUI, and the like that interoperate with the electronic device 3000 for each application.
  • the touch screen module 3720 may detect a touch gesture on a user's touch screen and transmit information about the touch gesture to the controller 3300.
  • the touch screen module 3720 according to an embodiment of the present invention may recognize and analyze a touch code.
  • the touch screen module 3720 may be configured as separate hardware including a controller.
  • a sensing value may be provided from a sensor inside the touch screen or from the sensing unit 3400.
  • An example of a sensor for sensing a touch of a touch screen is a tactile sensor.
  • the tactile sensor refers to a sensor that senses the contact of a specific object to the extent that a person feels or more.
  • the tactile sensor may sense various information such as the roughness of the contact surface, the rigidity of the contact object, the temperature of the contact point, and the like.
  • the notification module 3730 may generate a signal for notifying a call signal reception, a message reception, a key signal input, a schedule notification, and the like of the electronic device 3000.
  • the notification module 3730 may output a notification signal in the form of a video signal through the display unit 3210, or may output the notification signal in the form of an audio signal through the sound output unit 3220, or the vibration motor 3230. Through the notification signal may be output in the form of a vibration signal.
  • Embodiments and all functional operations of the invention described herein may be implemented within digital electronic circuitry or within computer software, firmware, or hardware, including the structures disclosed herein and equivalent structures thereof, or a combination of one or more thereof. It can be carried out within.
  • Method according to an embodiment of the present invention is implemented in the form of program instructions that can be executed by various computer means may be recorded on a computer readable medium.
  • the computer readable medium may include program instructions, data files, data structures, etc. alone or in combination.
  • Program instructions recorded on the media may be those specially designed and constructed for the purposes of the present invention, or they may be of the kind well-known and available to those having skill in the computer software arts.
  • Examples of computer-readable recording media include magnetic media such as hard disks, floppy disks, and magnetic tape, optical media such as CD-ROMs, DVDs, and magnetic disks, such as floppy disks.
  • Examples of program instructions include not only machine code generated by a compiler, but also high-level language code that can be executed by a computer using an interpreter or the like.

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • General Engineering & Computer Science (AREA)
  • Human Computer Interaction (AREA)
  • Computer Hardware Design (AREA)
  • Multimedia (AREA)
  • User Interface Of Digital Computer (AREA)
  • Controls And Circuits For Display Device (AREA)
  • Information Transfer Between Computers (AREA)

Abstract

전자 장치는, 전자 장치에 인접한 적어도 하나의 외부 디스플레이 장치의 화면 크기를 적어도 하나의 외부 디스플레이 장치로부터 수신하고, 전자 장치의 화면 크기 및 적어도 하나의 외부 디스플레이 장치의 화면 크기에 기초하여 타겟 화면 크기(target screen size)를 결정하며, 전자 장치의 화면 크기가 타겟 화면 크기에 상응하도록 전자 장치의 디스플레이 구성 파라미터(display configuration parameter)를 변경함으로써, 적어도 하나의 외부 디스플레이 장치와 화면을 공유하기 위한 디스플레이 데이터를 생성할 수 있다.

Description

전자 장치가 외부 디스플레이 장치와 화면을 공유하는 방법 및 전자 장치
전자 장치가 외부 디스플레이 장치와 화면을 공유하는 방법 및 전자 장치에 관한 발명이다.
이동 단말기 등과 같은 전자 장치는 다양한 기능을 수행할 수 있도록 구성될 수 있다. 그러한 다양한 기능들의 예로 데이터 및 음성 통신 기능, 카메라를 통해 사진이나 동영상을 촬영하는 기능, 음성 저장 기능, 스피커 시스템을 통한 음악 파일의 재생 기능, 이미지나 비디오의 디스플레이 기능 등이 있다. 또한, 전자 장치를 통한 작업이 일상화 되면서, 타 전자 장치와 화면 공유를 통해 다양한 기능을 함께하는 경우가 빈번해지고 있다. 그러나, 전자 장치에 적용되는 플랫폼(platform)들은 상이할 수 있다. 예를 들어, 전자 장치는 안드로이드 플랫폼(android platform), 윈도우 플랫폼(window platform) 등의 다양한 플랫폼을 적용할 수 있다. 또한, 각 플랫폼마다 수행되는 기능들은 차이가 있을 수 있다.
따라서, 상이한 플랫폼을 적용한 전자 장치들을 이용하여 화면을 공유하는 방법의 개발이 필요하다.
전자 장치를 통한 작업이 일상화 되면서, 타 전자 장치와 화면 공유를 통해 다양한 기능을 함께하는 경우가 빈번해지고 있다. 그러나, 전자 장치에 적용되는 플랫폼(platform)들은 상이할 수 있다. 따라서, 사용자가 상이한 플랫폼들이 적용된 복수의 전자 장치들을 통해서 화면을 공유할 수 있는 방법이 제공될 필요가 있다.
본 발명의 일 실시예에 따른 전자 장치는, 전자 장치에 인접한 적어도 하나의 외부 디스플레이 장치의 화면 크기를 적어도 하나의 외부 디스플레이 장치로부터 수신하는 통신부와 전자 장치의 화면 크기 및 적어도 하나의 외부 디스플레이 장치의 화면 크기에 기초하여 타겟 화면 크기(target screen size)를 결정하고, 전자 장치의 화면 크기가 타겟 화면 크기에 상응하도록 전자 장치의 디스플레이 구성 파라미터(display configuration parameter)를 변경하는 제어부를 포함할 수 있다.
본 발명의 일 실시예는, 전자 장치가 적어도 하나의 외부 디스플레이 장치와 화면을 공유하여 하나의 콘텐트를 디스플레이하는 방법 및 장치를 제공할 수 있다.
또한, 본 발명의 일 실시예는, 전자 장치가 적어도 하나의 외부 디스플레이 장치와 화면을 공유하여 관련된 복수의 콘텐트를 디스플레이하는 방법 및 장치를 제공할 수 있다.
도 1은 일 실시예에 따른 전자 장치(100)의 블록도이다.
도 2는 일 실시예에 따른 전자 장치(100)가 전자 장치(100)에 인접한 외부 디스플레이 장치와 화면을 공유하는 방법을 설명하는 흐름도이다.
도 3은 전자 장치(100)가 인접한 외부 디스플레이 장치를 감지하고 디스플레이 모드(display mode)를 설정하는 방법을 설명하는 흐름도이다.
도 4 및 도 5는 전자 장치(100)가 외부 디스플레이 장치(200)를 감지하는 일례이다.
도 6은 전자 장치(100)가 화면 공유 모드(screen share mode)에서 디스플레이 데이터를 생성하는 방법을 설명하는 흐름도이다.
도 7a 및 도 7b는 화면 공유 모드인 경우, 전자 장치(100)가 타겟 화면 크기(target screen size)를 결정하는 일례를 설명하는 도면이다.
도 8a 및 도 8b는 화면 공유 모드인 경우, 전자 장치(100)가 타겟 화면 크기(target screen size)를 결정하는 일례를 설명하는 도면이다.
도 9는 화면 공유 모드인 경우, 전자 장치(100)가 디스플레이 데이터의 일부를 외부 디스플레이 장치에게 전송하는 방법을 설명하는 흐름도이다.
도 10a는 전자 장치(100) 및 외부 디스플레이 장치(200)에서 디스플레이될 콘텐트(1010)의 일례이다.
도 10b 및 도 10c는 외부 디스플레이 장치의 분배 형태에 따라 도 10a의 콘텐트(1010)가 전자 장치(100) 및 외부 디스플레이 장치에서 디스플레이되는 일례를 설명하는 도면이다.
도 11은 화면 공유 모드인 경우, 전자 장치(100) 및 외부 디스플레이 장치가 화면을 공유하여 하나의 콘텐트를 디스플레이하는 방법을 설명하는 흐름도이다.
도 12는 일 실시예에 따른 전자 장치(100a)의 블록도이다.
도 13은 전자 장치(100a)가 개별 화면 모드(independent screen mode)에서 디스플레이 데이터를 생성하는 방법을 설명하는 흐름도이다.
도 14a 및 도 14b는 개별 화면 모드인 경우, 전자 장치(100a)가 사용자 입력에 응답하여, 외부 디스플레이 장치와 화면을 공유하는 일례이다.
도 15는 전자 장치(100a)가 개별 화면 모드인 경우, 병렬처리(parallel processing)를 통해 디스플레이 데이터를 생성하는 흐름도이다.
도 16a는 개별 화면 모드인 경우, 전자 장치(100a)가 병렬처리(parallel processing)을 통해 디스플레이 데이터를 생성하는 일례이며, 도 16b는 전자 장치(100a) 및 외부 디스플레이 장치(200)가 복수의 콘텐트를 각각 디스플레이하는 일례이다.
도 17은 개별 화면 모드인 경우, 전자 장치(100a)가 병렬처리(parallel processing)을 통해 디스플레이 데이터를 생성하는 다른 일례이다.
도 18은 개별 화면 모드인 경우, 전자 장치(100a)가 단일 프로세스(process) 또는 쓰레드(thread)를 통해, 디스플레이 데이터를 생성하는 방법을 설명하는 흐름도이다.
도 19는 개별 화면 모드인 경우, 전자 장치(100a)가 단일 프로세스(process) 또는 쓰레드(thread)를 통해, 디스플레이 데이터를 생성하는 일례이다.
도 20은 전자 장치(100a)가 외부 디스플레이 장치(200)에서 발생된 이벤트를 처리하는 방법을 설명하는 흐름도이다.
도 21은 외부 디스플레이 장치(200)에서 발생된 이벤트에 따라 전자 장치(100a)가 디스플레이 데이터를 생성하는 일례이다.
도 22a 및 도 22b는 전자 장치(100a) 및 외부 디스플레이 장치(200)에서 어플리케이션을 실행하는 일례이다.
도 23은 화면 크기가 상이한 전자 장치(100a) 및 외부 디스플레이 장치에서, 화면 공유 모드(screen share mode)를 통해, 화면을 공유하는 방법을 설명하는 흐름도이다.
도 24는 화면 크기가 상이한 전자 장치(100a) 및 외부 디스플레이 장치(200)에서, 화면 공유 모드를 통해, 화면을 공유하는 일례이다.
도 25는 일 실시예에 따른 전자 장치(3000)의 구성을 나타내는 블록도이다.
본 발명의 일 실시예에 따른 전자 장치는, 적어도 하나의 외부 디스플레이 장치의 화면 크기를 적어도 하나의 외부 디스플레이 장치로부터 수신하는 통신부; 및 전자 장치의 화면 크기 및 적어도 하나의 외부 디스플레이 장치의 화면 크기에 기초하여 타겟 화면 크기(target screen size)를 결정하고, 전자 장치의 화면 크기가 타겟 화면 크기에 상응하도록 전자 장치의 디스플레이 구성 파라미터(display configuration parameter)를 변경하는 제어부를 포함할 수 있다.
또한, 제어부는, 전자 장치의 화면 크기 및 적어도 하나의 외부 디스플레이 장치의 화면 크기가 동일한지 여부에 따라 타겟 화면 크기를 결정할 수 있다.
또한, 타겟 화면 크기는, 전자 장치의 화면 크기 및 적어도 하나의 외부 디스플레이 장치의 화면 크기가 동일한 경우 전자 장치의 화면 크기의 정수 배일 수 있다.
또한, 제어부는, 전자 장치 및 적어도 하나의 외부 디스플레이 장치의 배치 형태에 기초하여 분배 형태(distribution way)를 결정할 수 있다.
또한, 제어부는, 디스플레이 구성 파라미터에 따라 타겟 화면 크기에 대응되는 디스플레이 데이터를 생성하고, 분배 형태에 따라 디스플레이 데이터를 나눌 수 있다.
또한, 전자 장치는, 각 나누어진 디스플레이 데이터 중에서 전자 장치에 대응되는 디스플레이 데이터를 디스플레이하는 디스플레이부를 더 포함할 수 있다.
또한, 통신부는, 적어도 하나의 외부 디스플레이 장치에 대응되는 디스플레이 데이터를 적어도 하나의 외부 디스플레이 장치에게 전송할 수 있다.
또한, 타겟 화면 크기는, 전자 장치의 화면 크기가 적어도 하나의 외부 디스플레이 장치의 화면 크기와 동일하지 않은 경우, 적어도 하나의 외부 디스플레이 장치의 화면 크기일 수도 있다.
또한, 전자 장치는, 사용자 입력을 수신하는 입력부;를 더 포함할 수 있으며, 제어부는, 사용자 입력에 응답하여, 디스플레이 구성 파라미터에 따라, 타겟 화면 크기에 대응되는 제1 디스플레이 데이터를 새로운 프로세스(process) 또는 쓰레드(thread)를 통해 생성할 수 있다.
또한, 제어부는, 제1 디스플레이 데이터 및 전자 장치에서 디스플레이될 제2 디스플레이 데이터를 병렬처리(parallel processing)하도록 디스플레이 구성 파라미터를 변경할 수 있다.
또한, 통신부는, 적어도 하나의 외부 디스플레이 장치로부터 이벤트에 대한 정보를 수신하고, 제어부는, 이벤트에 대한 정보 및 디스플레이 구성 파라미터에 기초하여, 타겟 화면 크기에 대응되는 디스플레이 데이터를 생성할 수 있다.
본 발명의 일 실시예에 따른 전자 장치가 적어도 하나의 외부 디스플레이 장치와 화면을 공유하는 방법에 있어서, 전자 장치에 인접한 적어도 하나의 외부 디스플레이 장치의 화면 크기를 적어도 하나의 외부 디스플레이 장치로부터 수신하는 단계; 전자 장치의 화면 크기 및 적어도 하나의 외부 디스플레이 장치의 화면 크기에 기초하여 타겟 화면 크기(target screen size)를 결정하는 단계; 및 전자 장치의 화면 크기가 타겟 화면 크기에 상응하도록 전자 장치의 디스플레이 구성 파라미터(display configuration parameter)를 변경하는 단계;를 포함할 수 있다.
또한, 타겟 화면 크기를 결정하는 단계는, 전자 장치의 화면 크기 및 적어도 하나의 외부 디스플레이 장치의 화면 크기가 동일한지 여부에 따라 타겟 화면 크기를 결정할 수 있다.
또한, 타겟 화면 크기는, 전자 장치의 화면 크기 및 적어도 하나의 외부 디스플레이 장치의 화면 크기가 동일한 경우, 전자 장치의 화면 크기의 정수 배일 수 있다.
또한, 전자 장치 및 적어도 하나의 외부 디스플레이 장치의 배치 형태에 기초하여 분배 형태(distribution way)를 결정하는 단계;를 더 포함할 수 있다.
또한, 디스플레이 구성 파라미터에 따라 타겟 화면 크기에 대응되는 디스플레이 데이터를 생성하는 단계; 및 분배 형태에 따라 디스플레이 데이터를 나누는(separating) 단계;를 더 포함할 수 있다.
또한, 각 나누어진 디스플레이 데이터 중에서 전자 장치에 대응되는 디스플레이 데이터를 디스플레이하는 단계; 및 적어도 하나의 외부 디스플레이 장치에 대응되는 디스플레이 데이터를 적어도 하나의 외부 디스플레이 장치에게 전송하는 단계;를 더 포함할 수 있다.
또한, 타겟 화면 크기는, 전자 장치의 화면 크기가 적어도 하나의 외부 디스플레이 장치의 화면 크기와 동일하지 않은 경우, 적어도 하나의 외부 디스플레이 장치의 화면 크기일 수 있다.
또한, 사용자 입력을 수신하는 단계; 및 사용자 입력에 따라, 디스플레이 구성 파라미터에 따라, 타겟 화면 크기에 대응되는 제1 디스플레이 데이터를 새로운 프로세스(process) 또는 쓰레드(thread)를 통해 생성하는 단계;를 더 포함할 수 있다.
또한, 제1 디스플레이 데이터 및 전자 장치에서 디스플레이될 제2 디스플레이 데이터를 병렬처리(parallel processing)하도록 디스플레이 구성 파라미터를 변경하는 단계;를 더 포함할 수 있다.
또한, 적어도 하나의 외부 디스플레이 장치로부터 이벤트에 대한 정보를 수신하는 단계; 및 이벤트에 대한 정보 및 디스플레이 구성 파라미터에 기초하여, 타겟 화면 크기에 대응되는 디스플레이 데이터를 생성하는 단계;를 더 포함할 수 있다.
본 명세서에서 사용되는 용어에 대해 간략히 설명하고, 본 발명에 대해 구체적으로 설명하기로 한다.
본 발명에서 사용되는 용어는 본 발명에서의 기능을 고려하면서 가능한 현재 널리 사용되는 일반적인 용어들을 선택하였으나, 이는 당 분야에 종사하는 기술자의 의도 또는 판례, 새로운 기술의 출현 등에 따라 달라질 수 있다. 또한, 특정한 경우는 출원인이 임의로 선정한 용어도 있으며, 이 경우 해당되는 발명의 설명 부분에서 상세히 그 의미를 기재할 것이다. 따라서 본 발명에서 사용되는 용어는 단순한 용어의 명칭이 아닌, 그 용어가 가지는 의미와 본 발명의 전반에 걸친 내용을 토대로 정의되어야 한다.
명세서 전체에서 어떤 부분이 어떤 구성요소를 "포함"한다고 할 때, 이는 특별히 반대되는 기재가 없는 한 다른 구성요소를 제외하는 것이 아니라 다른 구성요소를 더 포함할 수 있음을 의미한다. 또한, 명세서에 기재된 "...부", "모듈" 등의 용어는 적어도 하나의 기능이나 동작을 처리하는 단위를 의미하며, 이는 하드웨어 또는 소프트웨어로 구현되거나 하드웨어와 소프트웨어의 결합으로 구현될 수 있다.
명세서 전체에서 “콘텐트”는 전자 장치의 화면에 표시되는 디지털 정보를 의미할 수 있다. 본 발명의 일 실시예에 따른 콘텐트는, 동영상 콘텐트(예컨대, TV 프로그램 영상, VOD(Video On Demand), 개인 영상(UCC: User-Created Contents), 뮤직비디오, 유투브 영상 등), 정지 영상 콘텐트(예컨대, 사진, 그림 등), 텍스트 콘텐트(예컨대, 전자책(시, 소설), 편지, 업무 파일), 음악 콘텐트(예컨대, 음악, 연주곡, 라디오 방송 등), 웹 페이지, 애플리케이션 실행 정보 등을 포함할 수 있으나, 이에 한정되는 것은 아니다.
아래에서는 첨부한 도면을 참고하여 본 발명의 실시예에 대하여 본 발명이 속하는 기술 분야에서 통상의 지식을 가진 자가 용이하게 실시할 수 있도록 상세히 설명한다. 그러나 본 발명은 여러 가지 상이한 형태로 구현될 수 있으며 여기에서 설명하는 실시예에 한정되지 않는다. 그리고 도면에서 본 발명을 명확하게 설명하기 위해서 설명과 관계없는 부분은 생략하였으며, 명세서 전체를 통하여 유사한 부분에 대해서는 유사한 도면 부호를 붙였다.
도 1은 일 실시예에 따른 전자 장치(100)의 블록도이다. 도 1을 참조하면, 전자 장치(100)는 통신부(110) 및 제어부(120)를 포함할 수 있다.
일 실시예에 의하면, 통신부(110)는 다양한 유형의 통신 방식에 따라 다양한 유형의 외부 기기 통신을 수행할 수 있다. 예를 들어, 통신부(110)는 와이파이(Wi-fi), 블루투스(Bluetooth), 무선 통신(wireless communication), 비접촉식 근거리 무선 통신(NFC, near field communication) 중 적어도 하나의 방식을 통하여 외부 디스플레이 장치와 통신할 수 있다.
통신부(110)는 전자 장치(100)에 인접한 외부 디스플레이 장치로부터, 외부 디스플레이 장치의 화면 크기 정보를 수신할 수 있다. 화면 크기 정보는, 외부 디스플레이 장치의 화면 높이(height) 및 너비(width)에 대한 정보를 포함할 수 있다. 통신부(110)는 수신된 외부 디스플레이 장치의 화면 크기 정보를 제어부(120)에게 제공할 수 있다. 일 실시예에 따라서, 외부 디스플레이 장치의 화면 크기 정보는 전자 장치(100)의 저장부(미도시)에 기 저장되어 있을 수 있다.
제어부(120)는 CPU(Central Processing Unit), GPU(Graphic Processing Unit), AP(application processor) 등과 같은 적어도 하나의 프로세서로 구현된 하드웨어 구성으로서, 전자 장치(100)의 전반적인 동작을 제어할 수 있다. 예를 들어, 제어부(120)의 CPU는 운영체제(operating system)의 실행 및 제어, 각종 데이터 처리, 전자 장치(100)의 각 구성요소들의 제어 등의 동작을 수행할 수 있다. 또한, GPU는 화면의 레이아웃에 따라 콘텐트가 표시될 좌표값, 형태, 크기, 컬러 등과 같은 속성 값을 연산할 수 있다. 또한, 제어부(120)의 GPU는 연산된 속성 값에 기초하여 콘텐트를 화면에 나타내기 위한 디스플레이 데이터를 생성할 수 있다.
제어부(120)는 통신부(110)로부터 제공되는 외부 디스플레이 장치의 화면 크기 정보 및 전자 장치(100)의 화면 크기 정보에 기초하여 디스플레이 모드(display mode)를 설정할 수 있다. 예를 들어, 제어부(120)는 외부 디스플레이 장치의 화면 크기가 전자 장치(100)의 화면 크기와 동일한 경우 화면 공유 모드(screen share mode)를 설정할 수 있다. 화면 공유 모드는, 전자 장치(100) 및 외부 디스플레이 장치가 화면을 공유하여 하나의 콘텐트를 디스플레이하는 모드일 수 있다. 물론 화면 크기가 동일하지 않은 경우에도 화면 공유 모드를 설정할 수 있음은 당업자에 의해 충분히 이해될 수 있을 것이다.
또한, 제어부(120)는 외부 디스플레이 장치의 화면 크기가 전자 장치(100)의 화면 크기와 상이한 경우 개별 화면 모드(independent screen mode)를 설정할 수 있다. 개별 화면 모드는, 전자 장치(100) 및 외부 디스플레이 장치가 각 장치의 화면에서 관련 있는 복수의 콘텐트를 디스플레이하는 모드일 수 있다. 물론 화면 크기가 동일한 경우에도 개별 화면 모드를 설정할 수 있음은 당업자에 의해 충분히 이해될 것이다. 예를 들어, 제어부(120)는 사용자 설정에 기초하여 디스플레이 모드(display mode)를 설정할 수도 있다. 일 실시예에 의하면, 제어부(120)는 사용자 입력을 수신할 수 있는 사용자 인터페이스를 제공하고 사용자 인터페이스를 통해서 사용자 입력을 수신하면, 이에 대응하여 디스플레이 모드를 설정할 수 있다.
제어부(120)는 설정된 모드에 따라서 타겟 화면 크기(target screen size)를 결정할 수 있다. 타겟 화면 크기는, 콘텐트가 디스플레이될 화면 크기를 의미할 수 있다. 예를 들어, 화면 공유 모드인 경우, 타겟 화면 크기는 전자 장치(100) 및 외부 디스플레이 장치가 공유하는 화면 크기일 수 있다. 따라서, 타겟 화면 크기는 전자 장치(100) 화면 크기의 정수(N) 배로 표현될 수 있다. 개별 화면 모드인 경우, 타겟 화면 크기는 각각의 콘텐트가 디스플레이될 전자 장치(100) 또는 외부 디스플레이 장치의 화면 크기일 수 있다.
제어부(120)는 전자 장치(100)의 화면 크기가 타겟 화면 크기에 상응하도록 전자 장치(100)의 디스플레이 구성 파라미터(display configuration parameter)를 변경할 수 있다. 여기서, 디스플레이 구성 파라미터는 디스플레이에 관련된 적어도 하나의 하드웨어를 제어하기 위한 제어 파라미터 또는 하드웨어 속성 값에 대한 파라미터일 수 있다. 예를 들어, 제어부(120)는 LCD 크기가 타겟 화면 크기인 것으로 디스플레이 구성 파라미터를 변경할 수 있다. 또는, 제어부(120)는 전자 장치(100)의 화면 크기가 타겟 화면 크기인 것으로 그래픽 처리 유닛(GPU) 속성 값을 변경하기 위해 디스플레이 구성 파라미터를 변경할 수도 있다. 제어부(120)는 디스플레이 구성 파라미터를 변경함으로써, 전자 장치(100)에 구비된 실제 화면 크기와 관계없이, 타겟 화면 크기에 따라 디스플레이 관련 동작을 수행할 수 있다. 또한, 제어부(120)는 전자 장치 및 외부 디스플레이 장치의 배치 형태에 기초하여, 분배 형태(distribution way)를 결정할 수 있다. 분배 형태는, 전자 장치(100)에서 생성된 디스플레이 데이터를 인접한 외부 디스플레이 장치들에게 분배하는 방법으로, 전자 장치(100) 및 외부 디스플레이 장치가 배치된 형태에 따라 일렬(single lien), 2X2 사각(square) 등으로 표현될 수 있다. 제어부(120)는 분배 형태에 기초하여, 타겟 화면 크기의 높이 및 너비를 결정할 수 있다.
제어부(120)는 디스플레이 구성 파라미터에 따라 타겟 화면 크기에 대응되는 디스플레이 데이터(display data)를 생성할 수 있다. 디스플레이 데이터는, 콘텐트를 화면에 나타내기 위한 픽셀 정보(pixel information)를 포함할 수 있다. 화면 공유 모드에서, 제어부(120)는 생성된 디스플레이 데이터를 분배 형태에 따라 나눌 수 있다. 일 실시예에 의하면, 제어부(120)는 나누어진 디스플레이 데이터 각각을 렌더링(rendering)하도록 전자 장치(100)의 디스플레이 구성 파라미터를 변경할 수 있다. 예를 들어, 제어부(120)는 GPU가 전체 디스플레이 데이터를 나누어진 영역으로 줌(zoom)하여 렌더링(rendering)하도록 디스플레이 구성 파라미터를 변경할 수 있다. 또는, 제어부(120)는 나누어진 디스플레이 데이터 각각을 렌더링(rendering)하도록 전자 장치(100)의 디스플레이 구성 파라미터를 변경할 수 있다. 이후, 전자 장치(100)는 렌더링된 결과를 디스플레이할 수 있다. 또한, 전자 장치(100)는 통신부(110)를 통하여, 렌더링된 결과를 압축(compressing)하여 외부 디스플레이 장치에게 전송할 수 있다.
개별 화면 모드에서, 제어부(120)는 새로운 프로세스 또는 쓰레드를 통해 디스플레이 데이터를 생성할 수 있다. 또한, 제어부(120)는 생성된 디스플레이 데이터를 렌더링한 후, 그 결과를 외부 디스플레이 장치에게 전송할 수 있다. 개별 화면 모드에서 전자 장치(100)가 외부 디스플레이 장치를 이용하여 디스플레이하는 구성에 대해서는, 도 12에서 후술한다.
이와 같이, 일 실시예에 따른 전자 장치(100)는 타겟 화면 크기에 대응되는 픽셀 정보를 포함하는 디스플레이 데이터를 생성하고, 생성된 디스플레이 데이터를 외부 디스플레이 장치와 공유할 수 있다. 따라서, 전자 장치(100)는 외부 디스플레이 장치의 플랫폼(예컨대, 안드로이드 플랫폼(android platform), 윈도우 플랫폼(window platform) 등)을 고려할 필요 없이 외부 디스플레이 장치와 화면을 공유할 수 있다.
도 2는 일 실시예에 따른 전자 장치(100)가 전자 장치(100)에 인접한 외부 디스플레이 장치와 화면을 공유하는 방법을 설명하는 흐름도이다.
도 2를 참조하면, 전자 장치(100)는 전자 장치(100)에 인접한 외부 디스플레이 장치의 화면 크기 정보를 외부 디스플레이 장치로부터 수신할 수 있다 (S110). 화면 크기 정보는 외부 디스플레이 장치의 화면 높이(height) 및 너비(width) 정보를 포함할 수 있다.
전자 장치(100)는 전자 장치(100)의 화면 크기 및 외부 디스플레이 장치의 화면 크기에 기초하여, 타겟 화면 크기(target screen size)를 결정할 수 있다 (S120). 전자 장치(100)는 전자 장치 화면의 높이 및 너비가 외부 디스플레이 장치 화면의 높이 및 너비와 동일한지 여부를 판단할 수 있다. 전자 장치(100)는 판단 결과에 따라 디스플레이 모드(display mode)를 설정할 수 있다. 디스플레이 모드는 화면 공유 모드(screen share mode)와 개별 화면 모드(independent screen mode)를 포함할 수 있다. 화면 공유 모드는 전자 장치(100) 및 외부 디스플레이 장치가 화면을 공유하여 하나의 콘텐트를 디스플레이하는 모드일 수 있다. 예를 들어, 전자 장치와 외부 디스플레이 장치가 화면 공유로 디스플레이하는 하나의 콘텐트는 예를 들어, 이미지 데이터, 동영상 데이터, 애플리케이션 데이터, HTML 등의 각종 웹문서를 포함할 수 있을 것이다. 개별 화면 모드는 전자 장치(100) 및 외부 디스플레이 장치가 각 장치의 화면에서 관련 있는 복수의 콘텐트를 디스플레이하는 모드일 수 있다. 예를 들어, 전자 장치(100) 및 외부 디스플레이 장치의 화면 크기가 동일한 경우, 전자 장치(100)는 화면 공유 모드를 설정할 수 있다. 또한, 각 장치의 화면 크기가 다른 경우, 전자 장치(100)는 개별 화면 모드를 설정할 수 있다. 또는, 전자 장치(100)는 사용자로부터 수신된 입력에 기초하여 화면 공유 모드 또는 개별 화면 모드를 설정할 수도 있다.
전자 장치(100)는 디스플레이 모드에 따라, 외부 디스플레이 장치와 화면을 공유하는 방법을 달리할 수 있다. 또한, 전자 장치(100)는 디스플레이 모드에 따라, 타겟 화면 크기(target screen size)를 달리할 수 있다. 타겟 화면 크기는, 콘텐트가 디스플레이될 화면의 크기를 의미할 수 있다. 예를 들어, 화면 공유 모드인 경우, 전자 장치(100)는 타겟 화면 크기를 전자 장치(100)의 화면 크기의 정수(N) 배로 결정할 수 있다. 이와 달리, 개별 화면 모드인 경우, 전자 장치(100)는 타겟 화면 크기를 전자 장치(100)의 화면 크기 또는 외부 디스플레이 장치의 화면 크기로 결정할 수 있다.
전자 장치(100)는 전자 장치(100)의 화면 크기가 타겟 화면 크기에 상응하도록 전자 장치(100)의 디스플레이 구성 파라미터(display configuration parameter)를 변경할 수 있다 (S130). 디스플레이 구성 파라미터는 디스플레이에 관련된 적어도 하나의 하드웨어를 제어하기 위한 제어 파라미터 또는 하드웨어 속성 값에 대한 파라미터일 수 있다. 예를 들어, 전자 장치(100)는 LCD 또는 GPU 에 대한 디스플레이 구성 파라미터를 변경할 수 있으며, 이에 한정되지 않고, 디스플레이에 관련된 하드웨어의 디스플레이 구성 파라미터를 변경할 수 있다. 전자 장치(100)는 디스플레이 구성 파라미터에 따라 타겟 화면 크기에 대응되는 디스플레이 데이터를 생성할 수 있다. 디스플레이 데이터는, 콘텐트를 화면에 나타내기 위한 픽셀 정보(pixel information)를 포함할 수 있다. 일 실시예에 의하면, 화면 공유 모드인 경우, 전자 장치(100)는 하나의 콘텐트를 화면에 나타내기 위한 디스플레이 데이터의 일부를 외부 디스플레이 장치에게 전송함으로써, 하나의 콘텐트를 외부 디스플레이 장치와 함께 디스플레이할 수 있다. 다른 실시예에 의하면, 개별 공유 모드에서, 전자 장치(100)는 생성된 디스플레이 데이터를 외부 디스플레이 장치에게 전송함으로써, 관련 있는 복수의 콘텐트를 전자 장치(100) 및 외부 디스플레이 장치 각각에서 디스플레이할 수 있다.
도 3은 전자 장치(100)가 인접한 외부 디스플레이 장치를 감지하고 디스플레이 모드(display mode)를 설정하는 방법을 설명하는 흐름도이다.
도 3을 참조하면, 전자 장치(100)는 인접한 외부 디스플레이 장치를 감지할 수 있다 (S210). 전자 장치(100)는 전자 장치(100)에 인접한 외부 디스플레이 장치를 감지하기 위한 다양한 센서를 포함할 수 있다. 예를 들어, 전자 장치(100)는 근접 센서, 적외선 센서, 전자기 센서 중 적어도 하나를 포함할 수 있다. 일 실시예에 의하면, 전자 장치(100)는 전자 장치(100)의 본체 측면부에 배치된 근접 센서를 통해서 외부 디스플레이 장치가 인접했는지 여부를 판단할 수 있다. 또는, 전자 장치(100)는 외부 디스플레이 장치로부터 수신된 위치 정보와 전자 장치(100)의 위치 정보에 기초하여, 외부 디스플레이 장치가 전자 장치(100)에 인접했는지 여부를 판단할 수도 있다.
또한, 전자 장치(100)는 전자 장치(100)에 인접한 외부 디스플레이 장치들의 상대적 위치를 감지할 수 있다. 예를 들어, 전자 장치(100)는 전자 장치(100)에 인접한 외부 디스플레이 장치가 전자 장치(100)를 기준으로 왼쪽 또는 오른쪽(또는, 위 또는 아래)에 위치하는지 여부를 감지할 수 있다. 이를 통해, 전자 장치(100)는 전자 장치(100) 및 외부 디스플레이 장치의 배치 형태를 알 수 있다.
전자 장치(100)는 외부 디스플레이 장치의 화면 크기 정보를 외부 디스플레이 장치로부터 수신할 수 있다 (S220). 화면 크기 정보는 외부 디스플레이 장치의 높이(height) 및 너비(width) 정보를 포함할 수 있다.
전자 장치(100)는 외부 디스플레이 장치의 화면 크기가 전자 장치(100)의 화면 크기와 동일한지 판단할 수 있다 (S230). 전자 장치(100)는 판단 결과에 따라, 디스플레이 모드(display mode)를 설정할 수 있다. 전자 장치(100) 및 외부 디스플레이 장치의 화면 크기가 동일한 경우, 전자 장치(100)는 화면 공유 모드(screen share mode)를 설정할 수 있다 (S240). 여기서, 전자 장치(100) 및 외부 디스플레이 장치의 화면 크기가 동일하다는 것은, 각 장치의 화면의 높이와 너비가 모두 동일한 경우뿐 아니라, 각 장치의 화면의 높이 값의 차이 및 너비 값의 차이가 기 설정된 오차 범위 내인 경우를 포함할 수 있다. 전자 장치(100) 및 외부 디스플레이 장치의 화면 크기가 다른 경우, 전자 장치(100)는 개별 화면 모드(independent screen mode)를 설정할 수 있다 (S250).
한편, 위 설명에서는, 전자 장치(100)가 외부 디스플레이 장치로부터 수신된 외부 디스플레이 장치의 화면 크기 정보에 기초하여 디스플레이 모드가 설정되는 것으로 설명하였으나, 이에 한정되지 않는다. 예를 들어, 전자 장치(100)는 디스플레이 모드를 선택하는 사용자 입력을 수신할 수도 있다. 이 경우, 전자 장치(100)는 외부 디스플레이 장치가 인접함에 따라, 사용자 입력에 의해 설정된 디스플레이 모드에 기초하여 동작할 수 있다.
도 4 및 도 5는 전자 장치(100)가 외부 디스플레이 장치(200)를 감지하는 일례이다.
일 실시예에 의하면, 전자 장치(100)는 도 4에 도시된 바와 같이, 본체 측면부 베젤의 내부에 배치된 근접 센서(410)를 통하여 전자 장치(100)에 인접한 외부 디스플레이 장치(200)를 감지할 수 있다. 근접 센서(410)는 전자 장치(100)의 적어도 하나의 측면부 베젤 또는 전자 장치(100)의 정면부 베젤의 내부 또는 외부에 배치될 수 있다. 근접 센서(410)는 소정의 검출면에 접근하는 물체, 혹은 근방에 존재하는 물체의 유무를 전자계의 힘 또는 적외선을 이용하여 기계적 접촉 없이 감지하는 센서일 수 있다.
전자 장치(100)는 인접한 외부 디스플레이 장치(200)로부터 외부 디스플레이 장치의 화면 크기 정보를 수신할 수 있다. 수신되는 화면 크기 정보는, 외부 디스플레이 장치의 화면 높이(432) 및 너비(434) 정보를 포함할 수 있다. 전자 장치(100)는 전자 장치 화면의 높이(422) 및 너비(424)와 외부 디스플레이 장치 화면의 높이(432) 및 너비(424)를 비교함으로써, 디스플레이 모드(display mode)를 설정할 수 있다.
또는, 도 5에 도시된 바와 같이, 전자 장치(100)는 외부 디스플레이 장치(200)의 위치 정보를 외부 디스플레이 장치(200)로부터 수신할 수 있다. 전자 장치(100)는 수신된 위치 정보에 기초하여, 인접한 외부 디스플레이 장치(200)를 감지할 수 있다. 예를 들어, 전자 장치(100)는 근거리 무선 통신(예컨대, 블루투스(Bluetooth) 등)을 통하여 외부 디스플레이 장치(200)에 대한 식별값을 외부 디스플레이 장치(200)의 위치 정보와 함께 수신할 수 있다. 전자 장치(100)는 수신된 위치 정보에 기초하여, 전자 장치(100)는 외부 디스플레이 장치(200)와 전자 장치(100)가 임계 범위 내에 위치하는지 판별할 수 있다. 외부 디스플레이 장치(200)가 임계 범위 내에 위치하는 경우, 전자 장치(100)는 수신된 식별값에 따라 외부 디스플레이 장치(200)의 화면 크기 정보를 요청할 수 있다.
도 6은 전자 장치(100)가 화면 공유 모드(screen share mode)에서 디스플레이 데이터를 생성하는 방법을 설명하는 흐름도이다.
도 6을 참조하면, 전자 장치(100)는 화면 공유 모드(screen share mode)를 설정할 수 있다 (S310). 이 경우, 전자 장치(100)는 타겟 화면 크기(target screen size)를 전자 장치(100)의 화면 크기의 정수(N) 배로 결정할 수 있다 (S320). 여기서, 타겟 화면 크기는 콘텐트가 디스플레이될 화면의 크기를 의미할 수 있다. 또한, 정수(N)는 전자 장치(100) 및 전자 장치(100)에 인접한 외부 디스플레이 장치의 개수의 합을 의미할 수 있다. 예를 들어, 전자 장치(100)가 전자 장치(100)에 인접한 하나의 외부 디스플레이 장치를 감지하는 경우(N은 2), 전자 장치(100)는 타겟 화면 크기를 두 배로 할 수 있다. 전자 장치(100)가 전자 장치(100)에 인접한 세 개의 외부 디스플레이 장치를 감지하는 경우(N은 4), 전자 장치(100)는 타겟 화면 크기를 네 배로 할 수 있다.
또한, 전자 장치(100)는 분배 형태(distribution way)를 결정할 수 있다. 분배 형태는, 전자 장치(100)에서 생성된 디스플레이 데이터를 인접한 외부 디스플레이 장치들에게 분배하는 방법으로, 전자 장치(100) 및 외부 디스플레이 장치의 배치 형태에 따라 일렬(single lien), 2X2 사각(2X2 square) 등으로 표현될 수 있다. 또한, 전자 장치(100)는 분배 형태에 따라 전자 장치 화면의 높이 및 너비를 각각 정수(N) 배로 확대할 수 있다. 예를 들어, 분배 형태가 일렬인 경우, 전자 장치(100)는 타겟 화면 크기의 높이(또는 너비)을 전자 장치 화면의 높이(또는 너비)의 정수(N) 배로 할 수 있다. 또한, 분배 형태가 2X2인 경우, 전자 장치(100)는 타겟 화면 크기의 높이 및 너비를 전자 장치 화면의 높이 및 너비를 각각 두 배로 할 수 있다.
전자 장치(100)는 디스플레이 구성 파라미터(display configuration parameter)에 따라 타겟 화면 크기에 대응되는 디스플레이 데이터를 생성할 수 있다 (S330). 디스플레이 데이터는, 콘텐트를 화면에 나타내기 위한 픽셀 정보(pixel information)를 포함할 수 있다. 예를 들어, 디스플레이 데이터는 전자 장치(100)에서 실행되는 콘텐트를, 타겟 화면 크기를 가지는 화면에 나타내기 위한 픽셀 정보를 포함할 수 있다.
도 7a 및 도 7b는 화면 공유 모드인 경우, 전자 장치(100)가 타겟 화면 크기(target screen size)를 결정하는 일례를 설명하는 도면이다.
도 7a를 참조하면, 전자 장치(100)는 전자 장치(100)에 인접한 외부 디스플레이 장치(200)를 감지할 수 있다. 전자 장치(100)는 인접한 외부 디스플레이 장치(200)의 화면 크기(725, 727)가 전자 장치(100)의 화면 크기(721, 723)와 동일한 경우, 화면 공유 모드를 설정할 수 있다. 전자 장치(100)는 화면 공유 모드인 경우, 타겟 화면 크기(target screen size)를 전자 장치(100)의 화면 크기(721, 723)의 두 배로 결정할 수 있다. 또한, 전자 장치(100)는 외부 디스플레이 장치(200)의 배치 형태에 따라, 분배 형태(distribution way)를 일렬(single-line) 분배 형태로 결정할 수 있다. 전자 장치(100)는 일렬 분배 형태에 따라, 타겟 화면 크기의 너비(731)를 전자 장치(100)의 화면 너비(721)의 두 배로 결정할 수 있다. 따라서, 타겟 화면 크기는, 도 7b에 도시된 바와 같이, 전자 장치(100)의 화면 높이(724)와 동일한 높이(734)를 가지며, 전자 장치(100)의 화면 너비(722)가 두 배로 확대된 너비(732)를 가질 수 있다.
한편, 전자 장치(100)는 화면 공유 모드인 경우, 전자 장치(100)의 화면에 디스플레이된 콘텐트(710-1)를 타겟 화면 크기(731, 733)를 가지는 화면에 나타내기 위한 디스플레이 데이터(710-2)를 생성할 수 있다. 이를 위해, 전자 장치(100)는 전자 장치(100)의 LCD 크기가 타겟 화면 크기(732, 734)인 것으로 디스플레이 구성 파라미터(display configuration parameter)를 변경할 수 있다. 또는, 전자 장치(100)는 GPU가 전자 장치(100)의 화면 크기를 타겟 화면 크기(732, 734)인 것으로 연산하도록 디스플레이 구성 파라미터를 변경할 수도 있다.
도 8a 및 도 8b는 화면 공유 모드인 경우, 전자 장치(100)가 타겟 화면 크기(target screen size)를 결정하는 일례를 설명하는 도면이다.
도 8a를 참조하면, 전자 장치(100)는 전자 장치(100)에 인접한 복수의 외부 디스플레이 장치(200-1 내지 200-3)를 감지할 수 있다. 인접한 외부 디스플레이 장치들(200-1 내지 200-3)의 각 화면 크기가 전자 장치(100)의 화면 크기와 동일한 경우, 전자 장치(100)는 화면 공유 모드를 설정할 수 있다. 이 경우, 전자 장치(100)는 타겟 화면 크기(target screen size)를 전자 장치(100)의 화면 크기(821, 823)의 네 배로 결정할 수 있다. 또한, 전자 장치(100)는 외부 디스플레이 장치들(200-1 내지 200-3)의 배치 형태에 따라, 분배 형태(distribution way)를 2X2 사각(2X2 square) 분배 형태로 결정할 수 있다. 따라서, 타겟 화면 크기는, 도 8b에 도시된 바와 같이, 전자 장치(100)의 화면 너비(821) 및 높이(823)가 각각 두 배로 확대된 너비(832) 및 높이(834)를 가질 수 있다.
한편, 전자 장치(100)는 화면 공유 모드인 경우, 전자 장치(100)의 화면에 디스플레이된 콘텐트(810-1)를 타겟 화면 크기(831, 833)를 갖는 화면에 나타내기 위한 디스플레이 데이터(810-2)를 생성할 수 있다.
도 9는 화면 공유 모드인 경우, 전자 장치(100)가 디스플레이 데이터의 일부를 외부 디스플레이 장치에게 전송하는 방법을 설명하는 흐름도이다.
도 9를 참조하면, 전자 장치(100)는 분배 형태(distribution way)에 기초하여, 디스플레이 데이터를 각 영역으로 나눌 수 있다 (S410). 예를 들어, 도 7b와 같이 일렬(single-line) 분배 형태인 경우, 전자 장치(100)는 타겟 화면 크기의 너비를 기준으로 디스플레이 데이터를 두 개로 나눌 수 있다. 또한, 도 8b와 같이 2X2 사각(2X2 square) 분배 형태인 경우, 전자 장치(100)는 타겟 화면 크기의 너비 및 높이를 기준으로 디스플레이 데이터를 네 개로 나눌 수 있다. 한편, 나눠진 각각의 디스플레이 데이터는 동일한 크기(즉, 전자 장치(100)의 화면 크기)를 가질 수 있다.
전자 장치(100)는 나눠진 디스플레이 데이터를 렌더링(rendering)하도록 디스플레이 구성 파라미터(display configuration parameter)를 변경할 수 있다 (S420). 예를 들어, 전자 장치(100)는 나눠진 디스플레이 데이터를 렌더링(rendering)하여 디스플레이하도록 디스플레이 구성 파라미터(graphic processor configuration parameter)를 변경할 수 있다. 또는, 전자 장치(100)는 전체 디스플레이 데이터를 나눠진 디스플레이 데이터에 대응되는 영역으로 줌(zoom)하여 렌더링(rendering)하도록 디스플레이 구성 파라미터를 변경할 수도 있다. 또한, 전자 장치(100)는 나눠진 디스플레이 데이터에 대하여, 전자 장치(100)에 대응되는지 또는 외부 디스플레이 장치에 대응되는지 판단할 수 있다 (S430). 나눠진 디스플레이 데이터가 전자 장치(100)에 대응되는 경우, 전자 장치(100)는 디스플레이 구성 파라미터에 따라, 렌더링된 결과를 디스플레이할 수 있다 (S440). 한편, 나눠진 디스플레이 데이터가 외부 디스플레이 장치에 대응되는 경우, 전자 장치(100)는 렌더링된 결과를 압축(compressing)하여 외부 디스플레이 장치에게 전송할 수 있다 (S450).
이와 같이, 전자 장치(100)는 나눠진 각각의 디스플레이 데이터에 대하여 S420 내지 S450을 반복하여 수행함으로써, 나눠진 각각의 디스플레이 데이터를 전자 장치(100)에서 디스플레이하거나 외부 디스플레이 장치에게 전송할 수 있다.
도 10a는 전자 장치(100) 및 외부 디스플레이 장치(200)에서 디스플레이될 콘텐트(1010)의 일례이다.
도 10b 및 도 10c는 외부 디스플레이 장치의 분배 형태에 따라 도 10a의 콘텐트(1010)가 전자 장치(100) 및 외부 디스플레이 장치에서 디스플레이되는 일례를 설명하는 도면이다.
도 10b를 참조하면, 전자 장치(100)는 외부 디스플레이 장치들(200-1 및 200-2)의 배치 형태에 따라, 전자 장치(100)의 화면 너비가 세 배로 확대된 타겟 화면 크기(target screen size)(1021, 1023)를 결정할 수 있다. 전자 장치(100)는 도 10a의 콘텐트(1010)를 타겟 화면 크기(1021, 1023)를 갖는 화면에 나타내기 위한 디스플레이 데이터(1020)를 생성할 수 있다. 또한, 전자 장치(100)는 외부 디스플레이 장치들(200-1, 200-2)의 일렬(single line) 분배 형태에 따라 디스플레이 데이터(1020)를 나눌 수 있다. 나눠진 각각의 디스플레이 데이터(1020-1, 1020-2, 1020-3)는 전자 장치(100) 및 외부 디스플레이 장치들(200-1, 200-2)에서 함께 디스플레이될 수 있다.
도 10c를 참조하면, 전자 장치(100)는 외부 디스플레이 장치들(200-1 내지 200-3)의 배치 형태에 따라, 전자 장치(100)의 화면의 너비 및 높이가 각각 두 배로 확대된 타겟 화면 크기(1031, 1033)를 결정할 수 있다. 전자 장치(100)는 도 10a의 콘텐트(1010)를 타겟 화면 크기(1031, 1033)를 갖는 화면에 나타내기 위하여 디스플레이 데이터(1030)를 생성할 수 있다. 또한, 전자 장치(100)는 외부 디스플레이 장치들(200-1 내지 200-3)의 2X2 사각(2X2 square) 분배 형태에 따라 디스플레이 데이터(1030)를 나눌 수 있다. 나눠진 각각의 디스플레이 데이터(1030-1 내지 1030-4)는 전자 장치(100) 및 외부 디스플레이 장치들(200-1 내지 200-3)에서 함께 디스플레이될 수 잇다.
이와 같이, 일 실시예에 따른 전자 장치(100)는 디스플레이 구성 파라미터(display configuration parameter)를 변경함으로써, 전자 장치(100)의 화면에 디스플레이되는 콘텐트를 단순히 확대 또는 축소하지 않고, 화면을 공유하는 장치들의 화면 크기(즉, 타겟 화면 크기)에 따라 콘텐트를 디스플레이할 수 있다. 따라서, 화면을 공유하는 외부 디스플레이 장치들의 개수를 추가함으로써, 사용자는 더 많은 정보를 포함하는 콘텐트를 제공받을 수 있다.
도 11은 화면 공유 모드인 경우, 전자 장치(100) 및 외부 디스플레이 장치가 화면을 공유하여 하나의 콘텐트를 디스플레이하는 방법을 설명하는 흐름도이다.
일 실시예에 의하면, 전자 장치(100)는 타겟 화면 크기(target screen size)에 상응하는 크기의 디스플레이 데이터를 생성할 수 있다 (S505). 전자 장치(100)가 디스플레이 데이터를 생성하는 방법은 도 6에서 설명한 내용을 포함하는 바, 상세한 설명은 생략한다. 전자 장치(100)는 분배 형태(distribution way)에 기초하여, 디스플레이 데이터를 동일한 크기의 제1 디스플레이 데이터 및 제2 디스플레이 데이터로 나눌 수 있다 (S510). 전자 장치(100)는 외부 디스플레이 장치(200)에 대응되는 제1 디스플레이 데이터를 렌더링(rendering)할 수 있다 (S515). 또한, 전자 장치(100)는 렌더링된 제1 디스플레이 데이터를 엔코더(encoder)를 통하여 압축(compressing) 할 수 있다 (S520). 또한, 전자 장치(100)는 압축된 제1 디스플레이 데이터를 외부 디스플레이 장치(200)에게 전송할 수 있다 (S525). 외부 디스플레이 장치(200)는 압축된 제1 디스플레이 데이터의 압축을 해제(decompressing)하여 디스플레이 할 수 있다 (S530).
한편, 전자 장치(100)는 제1 디스플레이 데이터를 렌더링한 후, 제 2 디스플레이 데이터를 렌더링할 수 있다 (S535). 제2 디스플레이 데이터는 전자 장치(100)에 대응되므로, 전자 장치(100)는 렌더링된 결과를 압축할 필요 없이 디스플레이 할 수 있다 (S540). 이와 같이, 전자 장치(100) 및 외부 디스플레이 장치(200)는 화면을 공유하여 하나의 디스플레이 데이터를 디스플레이할 수 있다.
도 12는 일 실시예에 따른 전자 장치(100a)의 블록도이다. 도 12를 참조하면, 전자 장치(100a)는 도 1의 통신부(110) 및 제어부(120)에 대응되는 통신부(1210) 및 제어부(1220) 외에도, 사용자 입력을 수신하는 입력부(1230)를 포함할 수 있다.
일 실시예에 의하면, 통신부(1210)는 다양한 유형의 통신 방식에 따라 다양한 유형의 외부 기기 통신을 수행할 수 있다. 예를 들어, 통신부(110)는 와이파이(Wi-fi), 블루투스(Bluetooth), 무선 통신(wireless communication), 비접촉식 근거리 무선 통신(NFC, near field communication) 중 적어도 하나의 방식을 통하여 외부 디스플레이 장치와 통신할 수 있다.
통신부(1210)는 전자 장치(100a)에 인접한 외부 디스플레이 장치로부터 외부 디스플레이 장치의 화면 크기 정보를 수신할 수 있다. 화면 크기 정보는, 외부 디스플레이 장치의 화면의 높이(height) 및 너비(width) 정보를 포함할 수 있다. 통신부(1210)는 수신된 외부 디스플레이 장치의 화면 크기 정보를 제어부(1220)에게 제공할 수 있다.
또한, 통신부(1210)는 외부 디스플레이 장치로부터 외부 디스플레이 장치에서 발생된 이벤트(event)에 대한 정보를 수신할 수도 있다. 여기서, 이벤트는 프로그램이 반응하도록 사용자가 생성시키는 동작 또는 사건의 발생을 의미할 수 있다. 예를 들어, 이벤트는 사용자의 터치 제스처 또는 터치 입력일 수 있다. 이벤트에 대한 정보는, 이벤트 타입, 이벤트가 발생된 화면 좌표 정보 등을 포함할 수 있다. 통신부(1210)는 수신된 이벤트에 대한 정보를 제어부(1220)에게 제공할 수 있다.
제어부(1220)는 통신부(1210)로부터 제공되는 외부 디스플레이 장치의 화면 크기 및 전자 장치(100a)의 화면 크기에 기초하여 디스플레이 모드(display mode)를 설정할 수 있다. 예를 들어, 제어부(1220)는 외부 디스플레이 장치의 화면 크기가 전자 장치(100a)의 화면 크기와 상이한 경우 개별 화면 모드(independent screen mode)를 설정할 수 있다. 개별 화면 모드는 전자 장치(100) 및 외부 디스플레이 장치가 각 장치의 화면에서 관련 있는 복수의 콘텐트를 디스플레이하는 모드일 수 있다. 물론 화면 크기가 동일한 경우에도 개별 화면 모드를 설정할 수 있음은 당업자에 의해 충분히 이해될 것이다. 예를 들어, 제어부(1210)는 사용자 설정에 기초하여 개별 화면 모드를 설정할 수도 있다. 일 실시예에 의하면, 제어부(120)는 사용자 입력을 수신할 수 있는 사용자 인터페이스를 제공하고 사용자 인터페이스를 통해서 사용자 입력을 수신하면, 이에 대응하여 개별 화면 모드를 설정할 수 있다. 제어부(1220)는 개별 화면 모드인 경우, 타겟 화면 크기(target screen size)를 전자 장치(100a)의 화면 크기 또는 외부 디스플레이 장치의 화면 크기로 결정할 수 있다.
제어부(1220)는 전자 장치(100a)의 화면 크기가 타겟 화면 크기에 상응하도록 전자 장치(100a)의 디스플레이 구성 파라미터(display configuration parameter)를 변경할 수 있다. 여기서, 디스플레이 구성 파라미터는 디스플레이에 관련된 적어도 하나의 하드웨어를 제어하기 위한 제어 파라미터 또는 하드웨어 속성 값에 대한 파라미터일 수 있다. 예를 들어, 제어부(1220)는 LCD 크기가 타겟 화면 크기인 것으로 디스플레이 구성 파라미터를 변경할 수 있다. 또는, 제어부(1220)는 전자 장치(100a)의 화면 크기가 타겟 화면 크기인 것으로 그래픽 처리 유닛(GPU)의 속성 값을 변경하기 위해 디스플레이 구성 파라미터를 변경할 수도 있다. 제어부(120)는 디스플레이 구성 파라미터를 변경함으로써, 전자 장치(100a)의 실제 화면 크기와 관계없이, 타겟 화면 크기에 기초하여 디스플레이 관련 동작을 수행할 수 있다.
입력부(1230)는 사용자 입력을 수신할 수 있다. 예를 들어, 입력부(1230)는 키(key), 터치 센서, 터치 스크린, 펜 인식 패널, 벤딩 센서, 생체 신호 검출 센서, 마이크 중 적어도 하나 또는 이들의 조합을 포함할 수 있다. 일 실시예에 의하면, 입력부(1230)는 GUI(graphic user interface)를 포함하는 콘텐트와 함께 제공될 수 있다. 한편, 사용자의 터치 제스처 또는 터치 입력에는 탭, 터치 앤드 홀드, 더블 탭, 드래그, 패닝, 플릭, 드래그 앤드 드롭 등이 포함될 수 있다.
입력부(1230)는 전자 장치(100a)를 제어하는 사용자 입력을 수신할 수 있다. 예를 들어, 입력부(1230)는 전자 장치(100)의 온/오프 지시, 어플리케이션의 실행 지시, 어플리케이션에 대한 사용자 입력 등을 수신할 수 있다. 또한, 입력부(1230)는 소정 콘텐트를 외부 디스플레이 장치의 화면에서 디스플레이하기 위한 사용자 입력을 수신할 수 있다. 예를 들어, 입력부(1230)는 복수의 객체를 포함하는 제1 콘텐트가 디스플레이된 화면에서 하나의 객체를 선택하는 사용자 입력을 수신할 수 있다. 또는 입력부(1230)는 제1 콘텐트가 디스플레이된 화면에서 외부 디스플레이 장치가 위치하는 방향으로 화면을 드래그하는 사용자 입력을 수신할 수 있다.
제어부(1220)는 제1 콘텐트가 디스플레이된 화면에서 수신된 사용자 입력에 응답하여, 디스플레이 구성 파라미터에 따라 제1 콘텐트에 관련된 제2 콘텐트를 화면에 나타내기 위한 디스플레이 데이터를 생성할 수 있다. 디스플레이 데이터는, 타겟 화면 크기에 대응되며, 제2 콘텐트를 화면에 나타내기 위한 픽셀 정보(pixel information)를 포함할 수 있다. 일 실시예에 의하면, 제어부(1220)는 새로운 프로세스(process) 또는 쓰레드(thread)를 통해 디스플레이 데이터를 생성할 수 있다. 또는, 제어부(1220)는 기존 콘텐트를 처리하는 프로세스 또는 쓰레드를 통해 디스플레이 데이터를 생성할 수도 있다. 또한, 제어부(1220)는 통신부(1210)로부터 제공된 이벤트에 대응되는 동작을 수행한 후, 대응되는 디스플레이 데이터를 생성 할 수 있다.
도 13은 전자 장치(100a)가 개별 화면 모드(independent screen mode)에서 디스플레이 데이터를 생성하는 방법을 설명하는 흐름도이다.
일 실시예에 의하면, 전자 장치(100a)는 전자 장치(100a)에 인접한 외부 디스플레이 장치의 화면 크기 정보를 외부 디스플레이 장치로부터 수신할 수 있다. 화면 크기 정보는 외부 디스플레이 장치의 화면의 높이(height) 및 너비(width) 정보를 포함할 수 있다. 전자 장치(100a)는 전자 장치(100a) 및 외부 디스플레이 장치 화면 크기가 동일한지 여부를 판단할 수 있다. 여기서, 각 장치의 화면 크기가 동일한지 여부는, 각 장치 화면의 높이 값의 차이 및 너비 값의 차이가 기 설정된 오차 범위 내인 경우를 포함할 수 있다.
전자 장치(100a) 및 외부 디스플레이 장치의 화면 크기가 다른 경우, 전자 장치(100a)는 디스플레이 모드(display mode)를 개별 화면 모드(independent screen mode)로 설정할 수 있다 (S610). 또한, 전자 장치(100a)는 타겟 화면 크기(target screen size)를 외부 디스플레이 장치의 화면 크기로 결정할 수 있다. 이 후, 전자 장치(100a)는 사용자 입력을 수신할 수 있다 (S620). 예를 들어, 전자 장치(100a)는 외부 디스플레이 장치가 위치하는 방향으로 화면을 드래그하는 사용자 입력을 수신할 수 있다. 또는, 전자 장치(100a)는 화면을 탭하는 사용자 입력을 수신할 수도 있다. 사용자 입력이 수신됨에 따라, 전자 장치(100a)는 전자 장치(100a)의 화면 크기가 타겟 화면 크기에 상응하는 것으로 전자 장치(100a)의 디스플레이 구성 파라미터(display configuration parameter)를 변경할 수 있다. 디스플레이 구성 파라미터는 디스플레이에 관련된 적어도 하나의 하드웨어를 제어하기 위한 제어 파라미터 또는 하드웨어 속성 값에 대한 파라미터일 수 있다. 예를 들어, 전자 장치(100a)는 전자 장치(100a)의 LCD 크기가 타겟 화면 크기인 것으로 디스플레이 구성 파라미터를 변경할 수 있다. 또는, 전자 장치(100a)는 전자 장치(100a)의 화면 크기가 타겟 화면 크기인 것으로 그래픽 처리 유닛(GPU)의 속성 값을 변경하기 위하여 디스플레이 구성 파라미터를 변경할 수도 있다.
전자 장치(100a)는 디스플레이 구성 파라미터에 따라, 타겟 화면 크기에 대응되는 디스플레이 데이터를 생성할 수 있다 (S630). 일 실시예에 의하면, 전자 장치(100a)는 새로운 프로세스(process) 또는 쓰레드(thread)를 통해, 디스플레이 데이터를 생성할 수 있다. 예를 들어, 전자 장치(100a)는 제1 프로세스(또는 제1 쓰레드)에서 처리되는 콘텐트가 디스플레이된 화면에서, 화면을 탭하는 사용자 입력을 수신할 수 있다. 전자 장치(100a)는 사용자 입력에 응답하여, 제2 프로세스(또는 새로운 제2 쓰레드)를 통해, 타겟 화면 크기에 대응되며, 새로운 콘텐트를 화면에 나타내기 위한 디스플레이 데이터를 생성할 수 있다. 또는, 전자 장치(100a)는 제1 프로세스에서 처리되는 콘텐트가 디스플레이된 화면에서, 화면을 드래그하는 사용자 입력을 수신할 수 있다. 전자 장치(100a)는 사용자 입력에 응답하여, 제2 프로세스를 통해, 타겟 화면 크기에 대응되며, 제1 콘텐트를 화면에 나타내기 위한 디스플레이 데이터를 생성할 수도 있다. 전자 장치(100a)는 제2 프로세스를 통해, 생성된 디스플레이 데이터를 압축(compressing)하여 외부 디스플레이 장치로 전송할 수 있다.
또는, 전자 장치(100a)는 기존의 프로세스(process) 또는 쓰레드(thread)를 통해, 디스플레이 데이터를 생성할 수도 있다. 예를 들어, 전자 장치(100a)는 제1 프로세스가 처리하는 제1 콘텐트가 디스플레이된 화면에서, 화면을 드래그하는 사용자 입력을 수신할 수 있다. 전자 장치(100a)는 사용자 입력에 응답하여, 제1 프로세스를 통해, 타겟 화면 크기에 대응되며, 제1 콘텐트와 관련된 제2 콘텐트를 화면에 나타내기 위한 디스플레이 데이터를 생성할 수 있다. 이 경우, 전자 장치(100a)는 제1 프로세스를 통해, 생성된 디스플레이 데이터를 압축(compressing)하여 외부 디스플레이 장치로 전송할 수 있다.
한편, 위 설명에서는, 생성된 디스플레이 데이터가 전자 장치(100a)에서 디스플레이되지 않고 바로 외부 디스플레이 장치에게 전송되는 것으로 설명하였다. 그러나, 이에 제한되지 않으며, 생성된 디스플레이 데이터는 전자 장치(100a)에서 디스플레이된 후에 외부 디스플레이 장치로 전송될 수도 있다. 외부 디스플레이 장치로 전송된 디스플레이 데이터는, 외부 디스플레이 장치의 하드웨어 구성 파라미터에 따라, 외부 디스플레이 장치에서 디스플레이 될 수 있다.
도 14a 및 도 14b는 개별 화면 모드인 경우, 전자 장치(100a)가 사용자 입력에 응답하여, 외부 디스플레이 장치와 화면을 공유하는 일례이다.
도 14a에 도시된 바와 같이, 전자 장치(100a)는 사진 목록을 포함하는 제1 콘텐트가 디스플레이된 화면(1410)에서 하나의 사진 목록(1415)을 선택하는 사용자의 탭 입력(1410)을 수신할 수 있다. 이 경우, 사용자의 탭 입력(1410)에 대응되는 제2 콘텐트는 외부 디스플레이 장치(200)에서 디스플레이될 수 있다.
예를 들어, 사용자의 탭 입력(1410)이 수신됨에 따라, 전자 장치(100a)는 전자 장치(100a)의 화면 크기가 타겟 화면 크기(1401, 1403)에 상응하도록 디스플레이 구성 파라미터(display configuration parameter)를 변경할 수 있다. 여기서, 타겟 화면 크기(target screen size)는, 외부 디스플레이 장치의 화면 크기(1401, 1403)이다. 전자 장치(100a)는, 도 14b에 도시된 바와 같이, 새로운 프로세스(process)를 통해, 타겟 화면 크기(1401, 1403)에 대응되며, 제2 콘텐트를 화면에 나타내기 위한 디스플레이 데이터(1420)를 생성할 수 있다. 이 경우, 전자 장치(100a)는 제1 콘텐트를 처리하던 기존 프로세스를 통해 제1 콘텐트를 계속 디스플레이하면서, 새로운 프로세스를 통해 생성된 디스플레이 데이터(1420)를 외부 디스플레이 장치(200)에게 전송할 수 있다.
도 15는 전자 장치(100a)가 개별 화면 모드인 경우, 병렬처리(parallel processing)를 통해 디스플레이 데이터를 생성하는 흐름도이다.
도 15를 참조하면, 전자 장치(100a)는 제1 콘텐트가 디스플레이된 화면에서, 외부 디스플레이 장치가 위치하는 방향으로 화면을 드래그하는 사용자 입력을 수신할 수 있다 (S710). 여기서, 제1 콘텐트는 전자 장치(100a)의 제1 프로세스(process)에 의해 처리(processing)될 수 있다. 전자 장치(100a)는 제2 프로세스를 통해, 타겟 화면 크기(target screen size)에 대응되며, 제1 콘텐트를 화면에 나타내기 위한 제1 디스플레이 데이터를 생성할 수 있다 (S720-1). 제2 프로세스는 새로운 프로세스 또는 쓰레드일 수 있다. 한편, 전자 장치(100a)는 제1 프로세스를 통해, 전자 장치(100a)의 화면 크기에 대응되며, 제1 콘텐트 이전의 콘텐트를 화면에 나타내기 위한, 제2 디스플레이 데이터를 생성할 수 있다 (S720-2). 이 경우, 전자 장치(100a)는 전자 장치(100a)의 화면 크기가 타겟 화면 크기(즉, 외부 디스플레이 장치의 화면 크기)인 것으로 디스플레이 구성 파라미터가 설정되어 있을 수 있다. 따라서, 전자 장치(100a)는 전자 장치(100a)의 화면 크기에 기초하여 제2 디스플레이 데이터를 줌인(zoom-in) 또는 줌아웃(zoom-out)하여 렌더링(rendering)하도록 디스플레이 구성 파라미터를 변경할 수 있다. 한편, 전자 장치(100a)는 S720-1 및 S720-2 를 각각 다른 프로세스를 통해 병렬처리(parallel processing) 할 수 있다.
전자 장치(100a)는 제2 프로세스를 통해, 생성된 제1 디스플레이 데이터를 압축(compressing)하여 외부 디스플레이 장치에게 전송할 수 있다 (S730). 또한, 전자 장치(100a)는 제1 프로세스를 통해, 생성된 제2 디스플레이 데이터를 디스플레이할 수 있다 (S740). 이와 같이, 사용자는 화면을 드래그함으로써, 전자 장치(100a)에서 디스플레이되던 화면을 외부 디스플레이 장치에서 제공받을 수 있으며, 전자 장치(100a)의 화면을 통해 이전의 실행화면을 제공받을 수 있다.
도 16a는 개별 화면 모드인 경우, 전자 장치(100a)가 병렬처리(parallel processing)을 통해 디스플레이 데이터를 생성하는 일례이며, 도 16b는 전자 장치(100a) 및 외부 디스플레이 장치(200)가 복수의 콘텐트를 각각 디스플레이하는 일례이다.
도 16a을 참조하면, 사진 목록을 포함하는 화면(1610)에서 하나의 사진을 선택하는 사용자의 탭 입력(1620)에 따라, 전자 장치(100a)는 선택된 사진을 확대하여 디스플레이 할 수 있다 (1600-1). 설명의 편의상, 선택된 사진을 제1 콘텐트라 한다. 전자 장치(100a)는 사진 목록을 포함하는 화면 및 제1 콘텐트를 제1 프로세스(또는 제1 쓰레드)를 통해 처리할 수 있다.
전자 장치(100a)는 제1 콘텐트가 디스플레이된 화면(1630)에서 외부 디스플레이 장치(200)가 위치하는 방향으로 화면을 드래그하는 드래그 입력(1640)을 수신할 수 있다 (1600-2). 도 16a의 1600-3을 참조하면, 전자 장치(100a)는 드래그 입력(1640)이 수신됨에 따라, 제2 프로세스를 통해, 타겟 화면 크기(1605, 1607)에 대응되며, 제1 콘텐트를 화면에 나타내기 위한 제1 디스플레이 데이터(1650-1)를 생성할 수 있다. 한편, 전자 장치(100a)는 기존의 제1 프로세스를 통해, 전자 장치(100a)의 화면 크기(1601, 1603)에 대응되며, 이전에 디스플레이되던 콘텐트(예컨대, 사진 목록)를 화면에 나타내기 위한 제2 디스플레이 데이터(1650-2)를 생성할 수 있다. 전자 장치(100a)는 제1 프로세스를 통해, 제 1 디스플레이 데이터(1650-1)를 압축(compressing)하여 외부 디스플레이 장치(200)에게 전송할 수 있으며, 제1 프로세스를 통해, 제2 디스플레이 데이터(1650-2)를 전자 장치(100a)에서 디스플레이할 수 있다. 한편, 제1 프로세스 및 제2 프로세스에서 수행되는 각 동작은 병렬처리 될 수 있다.
결과적으로, 도 16b에 도시된 바와 같이, 제1 디스플레이 데이터(1650-1)는 외부 디스플레이 장치(200)에서 디스플레이될 수 있으며, 제2 디스플레이 데이터(1650-2)는 전자 장치(100a)에서 디스플레이될 수 있다.
도 17은 개별 화면 모드인 경우, 전자 장치(100a)가 병렬처리(parallel processing)을 통해 디스플레이 데이터를 생성하는 다른 일례이다.
도 17을 참조하면, 전자 장치(100a)는 비디오 콘텐트가 디스플레이되는 화면(1710)에서 외부 디스플레이 장치(200) 방향으로 화면을 드래그하는 드래그 입력(1720)을 수신할 수 있다 (1700-1). 비디오 콘텐트는 전자 장치(100a)의 제1 프로세스를 통해 처리된다. 이후, 전자 장치(100a)는 외부 디스플레이 장치(200)의 화면 크기로 타겟 화면 크기(target screen size)를 결정하고, 전자 장치(100a)의 화면 크기가 타겟 화면 크기인 것으로 디스플레이 구성 파라미터를 변경할 수 있다. 이후, 전자 장치(100a)는 새로운 제2 프로세스를 통해, 타겟 화면 크기에 대응되며, 비디오 콘텐트를 화면에 나타내기 위한 제1 디스플레이 데이터(1730-1)를 생성할 수 있다. 또한, 전자 장치(100a)는 기존의 제1 프로세스를 통해, 전자 장치(100a)의 화면 크기에 대응되며, 전자 장치(100a)의 홈 화면(home screen)을 나타내기 위한 제2 디스플레이 데이터(1730-2)를 생성할 수 있다. 제1 디스플레이 데이터(1730-1)는 외부 디스플레이 장치(200)에서 디스플레이될 수 있으며, 제2 디스플레이 데이터(1730-2)는 전자 장치(100a)에서 디스플레이될 수 있다 (1700-2). 이와 같이, 사용자는 외부 디스플레이 장치(200)를 통해서 비디오 콘텐트를 계속 제공받을 수 있으며, 동시에 전자 장치(100a)의 홈 화면을 통해 새로운 어플리케이션의 실행 등을 할 수 있다.
전술한 바와 같이, 일 실시예에 따른 전자 장치(100a)는 외부 디스플레이 장치의 플랫폼(platform)(예컨대, 안드로이드(android), 윈도우(window) 등)에 관계 없이, 픽셀 정보를 포함하는 디스플레이 데이터를 외부 디스플레이 장치(200)에게 제공함으로써 외부 디스플레이 장치의 화면을 통해 콘텐트를 디스플레이할 수 있다. 또한, 전자 장치(100a)는 병렬처리 방식을 통하여 전자 장치(100a) 및 외부 디스플레이 장치(200)에서 복수의 콘텐트를 신속하게 디스플레이할 수 있다.
도 18은 개별 화면 모드인 경우, 전자 장치(100a)가 단일 프로세스(process) 또는 쓰레드(thread)를 통해, 디스플레이 데이터를 생성하는 방법을 설명하는 흐름도이다.
일 실시예에 의하면, 전자 장치(100a)는 제1 콘텐트가 디스플레이된 화면에서 화면을 드래그하는 사용자의 드래그 입력을 수신할 수 있다 (S810). 이때, 드래그 입력의 방향은 외부 디스플레이 장치(200)가 위치하는 방향일 수 있다. 전자 장치(100a)는 드래그 입력에 따라, 전자 장치(100a)의 화면 크기가 타겟 화면 크기에 상응하도록 디스플레이 구성 파라미터(display configuration parameter)를 변경할 수 있다. 또한, 전자 장치(100a)는 제1 콘텐트를 처리하는 프로세스(또는 쓰레드)를 통해, 타겟 화면 크기에 대응되며, 제1 콘텐트의 하위 콘텐트를 화면에 나타내기 위한 제1 디스플레이 데이터를 생성할 수 있다 (S820). 전자 장치(100a)는 생성된 제1 디스플레이 데이터를 압축(compressing)하여 외부 디스플레이 장치로 전송할 수 있다.
또한, 전자 장치(100a)는 제1 콘텐트를 전자 장치(100a)에서 계속 디스플레이 하기 위한 추가 작업을 수행할 수 있다. 일 실시예에 의하면, 전자 장치(100a)는 전자 장치(100a)의 화면 크기를 타겟 화면 크기로 변경하고, 전자 장치(100a)의 화면 크기가 타겟 화면 크기에 상응하도록 디스플레이 구성 파라미터(display configuration parameter)를 변경할 수 있다. 또한, 전자 장치(100a)는 변경된 디스플레이 구성 파라미터에 기초하여, 제1 콘텐트를 화면에 나타내기 위한 제2 디스플레이 데이터를 생성하여, 디스플레이할 수 있다. 또는, 전자 장치(100a)는 타겟 화면 크기를 변경하지 않고, 제1 콘텐트를 화면에 나타내기 위한 제2 디스플레이 데이터를 생성할 수 있다. 이 경우, 전자 장치(100a)는 제2 디스플레이 데이터가 전자 장치(100a)의 화면 크기에 대응되도록, 제2 디스플레이 데이터를 줌인(zoom-in) 또는 줌아웃(zoom-out) 하여 렌더링(rendering)하도록 디스플레이 구성 파라미터를 변경할 수도 있다. 전자 장치(100a)는 줌인 또는 줌아웃된 제2 디스플레이 데이터를 디스플레이할 수 있다.
이와 같이, 전자 장치(100a)는 병렬 처리(parallel processing)가 불가능한 경우, 전술한 방법을 통해서 전자 장치(100a) 및 외부 디스플레이 장치에서 관련된 복수의 콘텐트를 제공할 수 있다.
도 19는 개별 화면 모드인 경우, 전자 장치(100a)가 단일 프로세스(process) 또는 쓰레드(thread)를 통해, 디스플레이 데이터를 생성하는 일례이다.
도 19를 참조하면, 전자 장치(100a)는 환결 설정 메뉴가 디스플레이된 화면(1910-1)에서 외부 디스플레이 장치(200) 방향으로 화면을 드래그하는 드래그 입력(1820)을 수신할 수 있다. 전자 장치(100a)는 타겟 화면 크기에 대응되며, 드래그 입력(1820)이 수신된 메뉴(1920)의 하위 메뉴를 화면에 나타내기 위한 제1 디스플레이 데이터(1940)를 생성할 수 있다. 전자 장치(100a)는 생성된 제1 디스플레이 데이터(1940)를 압축하여 외부 디스플레이 장치(200)에게 전송할 수 있다. 이후, 전자 장치(100a)는 환경 설정 메뉴를 화면에 계속 디스플레이하기 위하여 제2 디스플레이 데이터(1910-2)를 생성할 수 있다.
도 20은 전자 장치(100a)가 외부 디스플레이 장치(200)에서 발생된 이벤트를 처리하는 방법을 설명하는 흐름도이다.
일 실시예에 의하면, 외부 디스플레이 장치(200)는 전자 장치(100a)에서 생성된 디스플레이 데이터가 디스플레이된 화면에서 이벤트(event)를 감지할 수 있다 (S905). 여기서, 이벤트는 프로그램이 반응하도록 사용자가 생성시키는 동작 또는 사건의 발생을 의미할 수 있다. 예를 들어, 이벤트는 사용자의 터치 제스처 또는 터치 입력일 수 있다. 외부 디스플레이 장치(200)는 감지된 이벤트에 대한 정보를 전자 장치(100a)에게 전송할 수 있다 (S910). 이벤트에 대한 정보는 이벤트 타입(type), 이벤트 식별값 및 이벤트가 발생된 화면 좌표 정보 등을 포함할 수 있다. 여기서, 화면 좌표 정보는 타겟 화면 크기(target screen size)에 대응될 수 있다. 예를 들어, 전자 장치(100a) 및 외부 디스플레이 장치(200)의 크기가 1024*1024이고 타겟 화면 크기가 2048*1024 인 경우, 수신되는 화면 좌표 정보는 (2000, 1000) 일 수 있다. 전자 장치(100a)는 이벤트에 대한 정보에 기초하여, 타겟 화면 크기에 대응되는 디스플레이 데이터를 생성할 수 있다 (S915). 예를 들어, 비디오 콘텐트가 전자 장치(100a) 및 외부 디스플레이 장치(200)에서 디스플레이되는 경우, 외부 디스플레이 장치(200)는 비디오 콘텐트를 임의의 시점으로 점프하는 이벤트를 감지하고, 전자 장치(100a)에게 알릴 수 있다. 전자 장치(100a)는 임의의 시점에 대응되는 비디오 콘텐트를 화면에 나타내기 위한 디스플레이 데이터를 생성할 수 있다. 전자 장치(100a)는 생성된 디스플레이 데이터의 일부(예컨대, 화면 공유 모드인 경우) 또는 전부(예컨대, 개별 화면 모드인 경우)를 압축하여 외부 디스플레이 장치(200)에게 전송할 수 있다 (S920). 외부 디스플레이 장치(200)는 수신된 디스플레이 데이터의 압축을 해제(decompressing)하여 화면에 디스플레이할 수 있다.
도 21은 외부 디스플레이 장치(200)에서 발생된 이벤트에 따라 전자 장치(100a)가 디스플레이 데이터를 생성하는 일례이다.
도 21을 살펴보면, 화면 공유 모드(screen share mode)인 경우, 외부 디스플레이 장치(200)는 전자 장치(100a)로부터 디스플레이 데이터의 일부(2110-2)를 제공받아 디스플레이할 수 있다. 외부 디스플레이 장치(200)는 디스플레이 데이터의 일부(2110-2)가 디스플레이되는 화면에서 사용자로부터 터치 입력 이벤트(2120)를 수신할 수 있다 (2100-1). 또한, 전자 장치(100a)는 터치 입력 이벤트(2120)에 대한 정보를 외부 디스플레이 장치(200)로부터 수신할 수 있다. 수신되는 터치 입력 이벤트(2120)에 대한 정보는 사용자의 터치 입력이 수신된 좌표 정보를 포함할 수 있다. 화면 좌표 정보는, 타겟 화면 크기(예컨대, 2048*2048)에 대응되는 좌표일 수 있다. 전자 장치(100a)는 이벤트에 대한 정보에 기초하여, 디스플레이 데이터(2130-1 및 2130-2)를 생성할 수 있다. 전자 장치(100a)는 화면 공유 모드이므로, 생성된 디스플레이 데이터(2130-1 및 2130-2)를 같은 크기의 제1 디스플레이 데이터(2130-1) 및 제2 디스플레이 데이터(2130-2)로 나눌 수 있다. 전자 장치(100a) 및 외부 디스플레이 장치(200)는 각각 제1 디스플레이 데이터(2130-1) 및 제2 디스플레이 데이터(2130-2)를 디스플레이할 수 있다.
도 22a 및 도 22b는 전자 장치(100a) 및 외부 디스플레이 장치(200)에서 화면을 공유하는 일례이다.
일 실시예에 의하면, 도 22a에 도시된 바와 같이, 전자 장치(100a)는 외부 디스플레이 장치(200)의 화면을 공유하여, 게임 어플리케이션의 실행화면을 디스플레이할 수 있다. 게임 어플리케이션은 전자 장치(100a)에서 실행되므로 외부 디스플레이 장치(200)는 게임 어플리케이션을 별도로 실행되지 않는다. 또한, 이 경우, 전자 장치(100a)의 사용자는 외부 디스플레이 장치(200)의 화면 크기에 관계 없이, 화면 공유 모드를 설정할 수 있다. 화면 크기에 관계 없이, 화면 공유 모드를 통해 전자 장치(100) 및 외부 디스플레이 장치(200)가 화면을 공유 하는 방법에 대해서는, 도 23에서 후술한다.
전자 장치(100a)는 전자 장치(100a) 또는 외부 디스플레이 장치(200)에서 발생된 이벤트를 수신하여 이벤트에 대응되는 동작을 수행할 수 있다. 또한, 전자 장치(100a)는 이벤트에 대응되는 동작에 기초하여, 디스플레이 데이터를 생성할 수 있다. 예를 들어, 전자 장치(100a)는 바둑의 돌을 움직이는 사용자의 터치 입력 이벤트를 외부 디스플레이 장치(200)로부터 수신하고 변경된 말의 위치가 반영된 게임 어플리케이션의 실행화면을 나타내기 위한 디스플레이 데이터를 생성할 수 있다.
또한, 전자 장치(100a)는 도 22b에 도시된 바와 같이, 전자 장치(100a)는 외부 디스플레이 장치(200)와 이북(e-book) 어플리케이션의 실행화면을 공유할 수도 있다.
도 23은 화면 크기가 다른 전자 장치(100a) 및 외부 디스플레이 장치에서 화면 공유 모드(screen share mode)를 통해 화면을 공유하는 방법을 설명하는 흐름도이다.
도 23을 참조하면, 전자 장치(100a)는 전자 장치(100a) 및 외부 디스플레이 장치(200)의 화면 크기가 다른 경우에도 화면 공유 모드를 설정할 수 있다. 예를 들어, 전자 장치(100a)는 사용자 입력에 기초하여, 화면 공유 모드를 설정할 수 있다. 이 경우, 전자 장치(100a)는 전자 장치(100a)에 인접한 외부 디스플레이 장치의 개수에 기초하여, 타겟 화면 크기(target screen size)를 결정할 수 있다 (S910). 결정된 타겟 화면 크기는 전자 장치(100a)의 화면 크기의 정수(N) 배일 수 있다. 또한, 전자 장치(100a)는 외부 디스플레이 장치의 배치 형태에 따라, 분배 형태(distribution way)를 결정할 수 있다. 예를 들어, 전자 장치(100a)는 인접한 외부 디스플레이 장치의 개수가 한 개인 경우, 타겟 화면 크기를 전자 장치(100a)의 화면 크기의 두 배로 결정할 수 있다. 또한, 전자 장치(100a)는 분배 형태에 따라, 타겟 화면 크기의 높이 및 너비를 결정할 수 있다.
전자 장치(100a)는 타겟 화면 크기에 대응되는 디스플레이 데이터를 생성할 수 있다 (S920). 예를 들어, 전자 장치(100a)는 전자 장치(100a)의 LCD 크기가 타겟 화면 크기인 것으로 디스플레이 구성 매개변수를 변경할 수 있다. 또는 전자 장치(100a)는 타겟 화면 크기에 대응되는 GPU 속성 값을 변경하기 위하여 디스플레이 구성 매개변수를 변경할 수 있다. 전자 장치(100a)는 변경된 디스플레이 구성 매개변수에 따라, 전자 장치(100a)에서 실행되는 콘텐트를 타겟 화면 크기를 갖는 화면에 나타내기 위한 디스플레이 데이터를 생성할 수 있다. 또한, 전자 장치(100a)는 분배 형태에 따라, 생성된 디스플레이 데이터를 나눌 수 있다 (S930). 예를 들어, 전자 장치(100a)는 디스플레이 데이터를 제1 디스플레이 데이터 및 제2 디스플레이 데이터로 나눌 수 있다. 제1 디스플레이 데이터 및 제2 디스플레이 데이터는 전자 장치(100a)의 화면 크기에 대응된다. 따라서, 전자 장치(100a)는 외부 디스플레이 장치의 화면 크기에 따라, 나누어진 디스플레이 데이터 중에서 외부 디스플레이 장치에 대응되는 디스플레이 데이터를 줌인(zoom-in) 또는 줌아웃(zoom-out)할 수 있다 (S940). 예를 들어, 전자 장치(100a)는 제2 디스플레이 데이터를 줌인 또는 줌아웃하여 렌더링하도록 디스플레이 구성 매개변수를 변경할 수 있다. 줌인 또는 줌아웃된 제2 디스플레이 데이터는 외부 디스플레이 장치에게 전송될 수 있으며, 제1 디스플레이 데이터는 바로 전자 장치(100a)에서 디스플레이될 수 있다.
도 24는 크기가 다른 전자 장치(100a) 및 외부 디스플레이 장치(200)에서 화면 공유 모드를 통해 화면을 공유하는 일례이다.
일 실시예에 의하면, 도 24에 도시된 바와 같이, 전자 장치(100a)는 전자 장치(100a)와 화면 크기가 상이한 외부 디스플레이 장치(200)를 이용하여, 게임 어플리케이션의 실행화면을 디스플레이할 수 있다. 게임 어플리케이션은 전자 장치(100a)에서 실행되므로 외부 디스플레이 장치(200)는 게임 어플리케이션을 별도로 실행되지 않는다.
전자 장치(100a)는 전자 장치(100a)의 화면 크기의 두 배를 타겟 화면 크기로 결정할 수 있다. 또한, 전자 장치(100a)는 결정된 타겟 화면 크기에 대응되며, 게임 어플리케이션의 실행 화면을 화면에 나타내기 위한 디스플레이 데이터를 생성할 수 있다. 전자 장치(100a)는 디스플레이 데이터를 두 개의 제1 디스플레이 데이터 및 제2 디스플레이 데이터로 나눈 후, 외부 디스플레이 장치(200)에 대응되는 제2 디스플레이 데이터를 줌인(zoom-in)할 수 있다. 줌인된 제2 디스플레이 데이터는 외부 디스플레이 장치(200)로 전송되고 외부 디스플레이 장치(200)에서 디스플레이될 수 있다. 전자 장치(100a)는 제1 디스플레이 데이터를 바로 디스플레이할 수 있다.
한편, 전자 장치(100a)는 외부 디스플레이 장치(200)에서 수신된 이벤트 및 이벤트가 발생된 좌표 정보를 수신할 수 있다. 또한, 전자 장치(100a)는 수신된 좌표 정보에 대응되는 타겟 화면 크기 상의 좌표 정보를 산출할 수 있다. 전자 장치(100a)는 이벤트에 대응되는 동작을 수행한 후, 동작에 대응되는 디스플레이 데이터를 생성할 수 있다. 생성된 디스플레이 데이터는 전술한 과정을 통해 외부 디스플레이 장치(200)와 공유될 수 있다. 이와 같이, 사용자는 화면 크기가 상이한 장치들 및 상이한 플랫폼(platform)이 적용된 장치들을 통하여 공유된 화면을 제공받을 수 있다.
도 25는 일 실시예에 따른 전자 장치(3000)의 구성을 나타내는 블록도이다.
도 25에 도시된 바와 같이, 전자 장치(3000)의 구성은, 예를 들어, 휴대폰, 태블릿 PC, PDA, MP3 플레이어, 키오스크, 전자 액자, 네비게이션 장치, 디지털 TV, 손목 시계(Wrist watch) 또는 HMD(Head-Mounted Display)와 같은 웨어러블 기기(Wearable device) 등과 같은 다양한 유형의 장치에 적용될 수 있다.
도 25에 따르면, 전자 장치(3000)는 입력부(3100), 출력부(3200), 제어부(3300), 센싱부(3400), 통신부(3500), A/V 입력부(3600) 및 메모리(3700) 중 적어도 하나를 포함할 수 있다. 도 25의 입력부(3100), 제어부(3300) 및 통신부(3500)는 도 12의 입력부(1230), 제어부(1220) 및 통신부(1210)에 대응될 수 있다.
입력부(3100)는 사용자로부터 다양한 명령어를 입력 받을 수 있다. 예를 들어, 입력부(3100)는 키(3110), 터치 패널(3120) 및 펜 인식 패널(3130) 중 적어도 하나를 포함할 수 있다.
키(3110)는 전자 장치(3000)의 본체 외관의 전면부나 측면부, 배면부 등의 다양한 영역에 형성된 기계적 버튼, 휠 등과 같은 다양한 유형의 키를 포함할 수 있다.
터치 패널(3120)은 사용자의 터치 입력을 감지하고, 감지된 터치 신호에 해당하는 터치 이벤트 값을 출력할 수 있다. 터치 패널(3120)이 표시 패널(3211)과 결합하여 터치 스크린(미도시)을 구성한 경우, 터치 스크린은 정전식이나, 감압식, 압전식 등과 같은 다양한 유형의 터치 센서로 구현될 수 있다. 정전식은 터치 스크린 표면에 코팅된 유전체를 이용하여, 사용자의 신체 일부가 터치 스크린 표면에 터치되었을 때 사용자의 인체로 야기되는 미세 전기를 감지하여 터치 좌표를 산출하는 방식이다. 감압식은 터치 스크린에 내장된 두 개의 전극 판을 포함하여, 사용자가 화면을 터치하였을 경우, 터치된 지점의 상하 판이 접촉되어 전류가 흐르게 되는 것을 감지하여 터치 좌표를 산출하는 방식이다. 터치 스크린에서 발생하는 터치 이벤트는 주로 사람의 손가락에 의하여 생성될 수 있으나, 정전 용량 변화를 가할 수 있는 전도성 재질의 물체에 의해서도 생성될 수 있다.
펜 인식 패널(3130)은 사용자의 터치용 펜(예컨대, 스타일러스 펜(stylus pen), 디지타이저 펜(digitizer pen))의 운용에 따른 펜의 근접 입력 또는 터치 입력을 감지하고 감지된 펜 근접 이벤트 또는 펜 터치 이벤트를 출력할 수 있다.
입력부(3100)는 소정 콘텐트를 외부 디스플레이 장치의 화면에서 디스플레이하기 위한 사용자 입력을 수신할 수 있다. 예를 들어, 입력부(3100)는 복수의 객체를 포함하는 제1 콘텐트가 디스플레이된 화면에서 하나의 객체를 선택하는 사용자 입력을 수신할 수 있다. 또는 입력부(3100)는 제1 콘텐트가 디스플레이된 화면에서 외부 디스플레이 장치가 위치하는 방향으로 화면을 드래그하는 사용자 입력을 수신할 수 있다.
출력부(3200)는 오디오 신호 또는 비디오 신호 또는 진동 신호의 출력을 위한 것으로, 이에는 디스플레이부(3210)와 음향 출력부(3220), 진동 모터(3230) 등이 포함될 수 있다.
디스플레이부(3210)는 표시패널(3211) 및 표시 패널(3211)을 제어하는 컨트롤러(미도시)를 포함할 수 있다. 표시패널(3211)에는 LCD(Liquid Crystal Display), OLED(Organic Light Emitting Diodes) 디스플레이, AMOLED(Active-Matrix Organic Light-Emitting Diode), PDP(Plasma Display Panel) 등과 같은 다양한 형태의 디스플레이로 구현될 수 있다. 표시패널(3211)은 유연하게(flexible), 투명하게(transparent) 또는 착용할 수 있게(wearable) 구현될 수 있다. 디스플레이부(3210)는 입력부(3100)의 터치 패널(3120)과 결합되어 터치 스크린(미도시)으로 제공될 수 있다. 예를 들어, 터치 스크린(미도시)은 표시 패널(3211)과 터치 패널(3120)이 적층 구조로 결합된 일체형의 모듈을 포함할 수 있다.
디스플레이부(3210)는 전자 장치(3000)에서 처리되는 정보를 표시 출력한다. 예를 들어, 디스플레이부(3210)는 제어부(3300)를 통해서 렌더링(rendering)된 결과를 수신하여, 디스플레이 할 수 있다.
음향 출력부(3220)는 통신부(1500)로부터 수신되거나 메모리(3700)에 저장된 오디오 데이터를 출력한다. 또한, 음향 출력부(3220)는 전자 장치(3000)에서 수행되는 기능(예를 들어, 호신호 수신음, 메시지 수신음, 알림음)과 관련된 음향 신호를 출력한다. 이러한 음향 출력부(3220)에는 스피커(speaker), 버저(Buzzer) 등이 포함될 수 있다.
진동 모터(3230)는 진동 신호를 출력할 수 있다. 예를 들어, 진동 모터(3230)는 오디오 데이터 또는 비디오 데이터(예컨대, 호신호 수신음, 메시지 수신음 등)의 출력에 대응하는 진동 신호를 출력할 수 있다. 또한, 진동 모터(3230)는 터치스크린에 터치가 입력되는 경우 진동 신호를 출력할 수도 있다.
제어부(3300)는 CPU(3310), GPU(Graphic Processing Unit)(3320), RAM(3330) 및 ROM(3340) 중 적어도 하나를 포함할 수 있다. CPU(3310), GPU(3320), RAM(3330) 및 ROM(3340) 등은 버스를 통해 서로 연결될 수 있다.
CPU(3310)는 메모리(3700)에 액세스하여, 메모리(3700)에 저장된 O/S를 이용하여 부팅을 수행한다. 그리고, 메모리(3700)에 저장된 각종 프로그램, 콘텐트, 데이터 등을 이용하여 다양한 동작을 수행한다.
ROM(3340)에는 시스템 부팅을 위한 명령어 세트 등이 저장된다. 예로, 전자 장치(3000)는 턴온 명령이 입력되어 전원이 공급되면, CPU(3310)가 ROM(3340)에 저장된 명령어에 따라 메모리(3700)에 저장된 OS를 RAM(3330)에 복사하고, OS를 실행시켜 시스템을 부팅시킬 수 있다. 부팅이 완료되면, CPU(3310)는 메모리(3700)에 저장된 각종 프로그램을 RAM(3330)에 복사하고, RAM(3330)에 복사된 프로그램을 실행시켜 각종 동작을 수행한다. GPU(3320)는 전자 장치(3000)의 부팅이 완료되면, 디스플레이부(3210)의 영역에 UI 화면을 디스플레이한다. 구체적으로는, GPU(3320)는 콘텐트, 아이콘, 메뉴 등과 같은 다양한 객체를 포함하는 전자문서가 표시된 화면을 생성할 수 있다. GPU(3320)는 화면의 레이아웃에 따라 각 객체들이 표시될 좌표값, 형태, 크기, 컬러 등과 같은 속성 값을 연산한다. 또는, GPU(3320)는 디스플레이 구성 파라미터(display configuration parameter)를 통해 변경된 속성 값을 연산할 수 있다. 그리고, GPU(3320)는 연산된 구성 파라미터 기초하여 객체를 포함하는 다양한 레이아웃의 디스플레이 데이터를 생성할 수 있다. 예를 들어, GPU(3320)는 연산된 속성 값에 기초하여 렌더링(rendering) 작업을 수행함으로써, 디스플레이 데이터를 생성할 수 있다. GPU(3320)에서 생성된 디스플레이 데이터는 디스플레이부(3210)로 제공되어, 디스플레이부(3210)의 각 영역에 각각 표시될 수 있다.
센싱부(3400)는 전자 장치(3000)의 상태 또는 전자 장치(3000) 주변의 상태를 감지하고, 감지된 정보를 제어부(3300)로 전달할 수 있다.
센싱부(3400)는, 지자기 센서(Magnetic sensor)(3410), 가속도 센서(Acceleration sensor)(3420), 온/습도 센서(3430), 적외선 센서(3440), 자이로스코프 센서(3450), 위치 센서(예컨대, GPS)(3460), 기압 센서(3470), 근접 센서(3480), 및 RGB 센서(illuminance sensor)(3490) 중 적어도 하나를 포함할 수 있으나, 이에 한정되는 것은 아니다. 일 실시예에 의하면, 센싱부(3400)는 전자 장치(3000)의 측면부, 전면부 등에 배치되어, 외부 디스플레이 장치가 인접했는지 여부를 감지할 수 있다. 또한, 센싱부(3480)는 인접한 외부 디스플레이 장치의 상대적 위치를 감지할 수 있다. 예를 들어, 전자 장치(3000)는 전자 장치(3000)에 인접한 외부 디스플레이 장치가 전자 장치(3000)를 기준으로 왼쪽 또는 오른쪽(또는, 위 또는 아래)에 위치하는지 여부를 감지하고, 제어부(3300)에게 외부 디스플레이 장치의 위치 정보를 제공할 수 있다. 제어부(3300)는 센싱부(3400)를 통해 전자 장치(3000) 및 외부 디스플레이 장치의 배치 형태를 알 수 있다. 한편, 각 센서들의 기능은 그 명칭으로부터 당업자가 직관적으로 추론할 수 있으므로, 구체적인 설명은 생략하기로 한다.
통신부(3500)는 전자 장치(3000)와 외부 디스플레이 장치 또는 전자 장치(3000)와 서버 간의 통신을 하게 하는 하나 이상의 구성요소를 포함할 수 있다. 예를 들어, 통신부(3500)는, 근거리 통신부(3510), 이동 통신부(3520) 및 방송 수신부(3530)를 포함할 수 있다.
근거리 통신부(short-range wireless communication unit)(3510)는, 블루투스 통신부, BLE(Bluetooth Low Energy) 통신부, 근거리 무선 통신부(Near Field Communication unit), WLAN(와이파이) 통신부, 지그비(Zigbee) 통신부, 적외선(IrDA, infrared Data Association) 통신부, WFD(Wi-Fi Direct) 통신부, UWB(ultra wideband) 통신부, Ant+ 통신부 등을 포함할 수 있으나, 이에 한정되는 것은 아니다.
이동 통신부(3520)는, 이동 통신망 상에서 기지국, 외부의 단말, 서버 중 적어도 하나와 무선 신호를 송수신한다. 여기에서, 무선 신호는, 음성 호 신호, 화상 통화 호 신호 또는 문자/멀티미디어 메시지 송수신에 따른 다양한 형태의 데이터를 포함할 수 있다.
방송 수신부(3530)는 방송 채널을 통하여 외부로부터 방송 신호 및/또는 방송 관련된 정보를 수신한다. 방송 채널은 위성 채널, 지상파 채널을 포함할 수 있다. 구현 예에 따라서 전자 장치(3000)가 방송 수신부(3530)를 포함하지 않을 수도 있다.
A/V(Audio/Video) 입력부(3600)는 오디오 신호 또는 비디오 신호 입력을 위한 것으로, 이에는 카메라(3610)와 마이크로폰(3620) 등이 포함될 수 있다. 카메라(3610)는 화상 통화모드 또는 촬영 모드에서 이미지 센서를 통해 정지영상 또는 동영상 등의 화상 프레임을 얻을 수 있다. 이미지 센서를 통해 캡쳐된 이미지는 제어부(3300) 또는 별도의 이미지 처리부(미도시)를 통해 처리될 수 있다.
카메라(3610)에서 처리된 화상 프레임은 메모리(3700)에 저장되거나 통신부(3500)를 통하여 외부로 전송될 수 있다. 카메라(3610)는 단말기의 구성 태양에 따라 2개 이상이 구비될 수도 있다.
마이크로폰(3620)은 외부의 음향 신호를 입력 받아 전기적인 음성 데이터로 처리한다. 예를 들어, 마이크로폰(3620)은 외부 디바이스 또는 화자로부터 음향 신호를 수신할 수 있다. 마이크로폰(3620)은 외부의 음향 신호를 입력 받는 과정에서 발생 되는 잡음(noise)을 제거하기 위한 다양한 잡음 제거 알고리즘을 이용할 수 있다.
메모리(3700)는 제어부(3300)의 처리 및 제어를 위한 프로그램을 저장할 수도 있고, 입/출력되는 데이터들(예컨대, 복수의 메뉴, 복수의 메뉴 각각에 대응하는 복수의 제 1 계층 서브 메뉴, 복수의 제 1 계층 서브 메뉴 각각에 대응하는 복수의 제 2 계층 서브 메뉴 등)을 저장할 수도 있다.
메모리(3700)는 플래시 메모리 타입(flash memory type), 하드디스크 타입(hard disk type), 멀티미디어 카드 마이크로 타입(multimedia card micro type), 카드 타입의 메모리(예를 들어 SD 또는 XD 메모리 등), 램(RAM, Random Access Memory) SRAM(Static Random Access Memory), 롬(ROM, Read-Only Memory), EEPROM(Electrically Erasable Programmable Read-Only Memory), PROM(Programmable Read-Only Memory), 자기 메모리, 자기 디스크, 광디스크 중 적어도 하나의 타입의 저장매체를 포함할 수 있다. 또한, 전자 장치(3000)는 인터넷(internet)상에서 메모리(3700)의 저장 기능을 수행하는 웹 스토리지(web storage) 또는 클라우드 서버를 운영할 수도 있다.
메모리(3700)에 저장된 프로그램들은 그 기능에 따라 복수 개의 모듈들로 분류할 수 있는데, 예를 들어, UI 모듈(3710), 터치 스크린 모듈(3720), 알림 모듈(3730) 등으로 분류될 수 있다.
UI 모듈(3710)은, 애플리케이션 별로 전자 장치(3000)와 연동되는 특화된 UI, GUI 등을 제공할 수 있다. 터치 스크린 모듈(3720)은 사용자의 터치 스크린 상의 터치 제스처를 감지하고, 터치 제스처에 관한 정보를 제어부(3300)로 전달할 수 있다. 본 발명의 일 실시예에 따른 터치 스크린 모듈(3720)은 터치 코드를 인식하고 분석할 수 있다. 터치 스크린 모듈(3720)은 컨트롤러를 포함하는 별도의 하드웨어로 구성될 수도 있다.
터치스크린의 터치 또는 근접 터치를 감지하기 위해 터치스크린 내부의 센서로부터 또는 센싱부(3400)로부터 센싱값을 제공받을 수 있다. 터치스크린의 터치를 감지하기 위한 센서의 일례로 촉각 센서가 있다. 촉각 센서는 사람이 느끼는 정도로 또는 그 이상으로 특정 물체의 접촉을 감지하는 센서를 말한다. 촉각 센서는 접촉면의 거칠기, 접촉 물체의 단단함, 접촉 지점의 온도 등의 다양한 정보를 감지할 수 있다.
알림 모듈(3730)은 전자 장치(3000)의 호 신호 수신, 메시지 수신, 키 신호 입력, 일정 알림 등을 알리기 위한 신호를 발생할 수 있다. 알림 모듈(3730)은 디스플레이부(3210)를 통해 비디오 신호 형태로 알림 신호를 출력할 수도 있고, 음향 출력부(3220)를 통해 오디오 신호 형태로 알림 신호를 출력할 수도 있고, 진동 모터(3230)를 통해 진동 신호 형태로 알림 신호를 출력할 수도 있다.
본 명세서에 설명된 발명의 실시예 및 모든 기능 동작들은 디지털 전자 회로 내에서 또는 본 명세서에서 개시된 구조들 및 이들의 균등 구조들을 포함하는 컴퓨터 소프트웨어, 펌웨어, 또는 하드웨어 내에서, 또는 이들의 하나 이상의 조합 내에서 실시될 수 있다.
본 발명의 일 실시예에 따른 방법은 다양한 컴퓨터 수단을 통하여 수행될 수 있는 프로그램 명령 형태로 구현되어 컴퓨터 판독 가능 매체에 기록될 수 있다. 상기 컴퓨터 판독 가능 매체는 프로그램 명령, 데이터 파일, 데이터 구조 등을 단독으로 또는 조합하여 포함할 수 있다. 상기 매체에 기록되는 프로그램 명령은 본 발명을 위하여 특별히 설계되고 구성된 것들이거나 컴퓨터 소프트웨어 당업자에게 공지되어 사용 가능한 것일 수도 있다. 컴퓨터 판독 가능 기록 매체의 예에는 하드 디스크, 플로피 디스크 및 자기 테이프와 같은 자기 매체(magnetic media), CD-ROM, DVD와 같은 광기록 매체(optical media), 플롭티컬 디스크(floptical disk)와 같은 자기-광 매체(magneto-optical media), 및 롬(ROM), 램(RAM), 플래시 메모리 등과 같은 프로그램 명령을 저장하고 수행하도록 특별히 구성된 하드웨어 장치가 포함된다. 프로그램 명령의 예에는 컴파일러에 의해 만들어지는 것과 같은 기계어 코드뿐만 아니라 인터프리터 등을 사용해서 컴퓨터에 의해서 실행될 수 있는 고급 언어 코드를 포함한다.
전술한 본 발명의 설명은 예시를 위한 것이며, 본 발명이 속하는 기술분야의 통상의 지식을 가진 자는 본 발명의 기술적 사상이나 필수적인 특징을 변경하지 않고서 다른 구체적인 형태로 쉽게 변형이 가능하다는 것을 이해할 수 있을 것이다. 그러므로 이상에서 기술한 실시예들은 모든 면에서 예시적인 것이며 한정적이 아닌 것으로 이해해야만 한다. 예를 들어, 단일형으로 설명되어 있는 각 구성 요소는 분산되어 실시될 수도 있으며, 마찬가지로 분산된 것으로 설명되어 있는 구성 요소들도 결합된 형태로 실시될 수 있다.
본 발명의 범위는 상기 상세한 설명보다는 후술하는 특허청구범위에 의하여 나타내어지며, 특허청구범위의 의미 및 범위 그리고 그 균등 개념으로부터 도출되는 모든 변경 또는 변형된 형태가 본 발명의 범위에 포함되는 것으로 해석되어야 한다.

Claims (20)

  1. 전자 장치에 인접한 적어도 하나의 외부 디스플레이 장치의 화면 크기를 상기 적어도 하나의 외부 디스플레이 장치로부터 수신하는 통신부; 및
    상기 전자 장치의 화면 크기 및 상기 적어도 하나의 외부 디스플레이 장치의 화면 크기에 기초하여 타겟 화면 크기(target screen size)를 결정하고, 상기 전자 장치의 화면 크기가 상기 타겟 화면 크기에 상응하도록 상기 전자 장치의 디스플레이 구성 파라미터(display configuration parameter)를 변경하는 제어부; 를 포함하는,
    전자 장치.
  2. 제 1 항에 있어서,
    상기 제어부는, 상기 전자 장치의 화면 크기 및 상기 적어도 하나의 외부 디스플레이 장치의 화면 크기가 동일한지 여부에 따라 상기 타겟 화면 크기를 결정하는,
    전자 장치.
  3. 제 2 항에 있어서,
    상기 타겟 화면 크기는, 상기 전자 장치의 화면 크기 및 상기 적어도 하나의 외부 디스플레이 장치의 화면 크기가 동일한 경우 상기 전자 장치의 화면 크기의 정수 배인,
    전자 장치.
  4. 제 3 항에 있어서,
    상기 제어부는, 상기 전자 장치 및 상기 적어도 하나의 외부 디스플레이 장치의 배치 형태에 기초하여 분배 형태(distribution way)를 결정하는,
    전자 장치.
  5. 제 4 항에 있어서,
    상기 제어부는, 상기 디스플레이 구성 파라미터에 따라 상기 타겟 화면 크기에 대응되는 디스플레이 데이터를 생성하고, 상기 분배 형태에 따라 상기 디스플레이 데이터를 나누는,
    전자 장치.
  6. 제 5 항에 있어서,
    상기 전자 장치는,
    상기 나누어진 디스플레이 데이터 중에서 상기 전자 장치에 대응되는 디스플레이 데이터를 디스플레이하는 디스플레이부;를 더 포함하며,
    상기 통신부는, 상기 적어도 하나의 외부 디스플레이 장치에 대응되는 디스플레이 데이터를 상기 적어도 하나의 외부 디스플레이 장치에게 전송하는,
    전자 장치.
  7. 제 2 항에 있어서,
    상기 타겟 화면 크기는, 상기 전자 장치의 화면 크기가 상기 적어도 하나의 외부 디스플레이 장치의 화면 크기와 동일하지 않은 경우, 상기 적어도 하나의 외부 디스플레이 장치의 화면 크기인,
    전자 장치.
  8. 제 7 항에 있어서,
    상기 전자 장치는, 사용자 입력을 수신하는 입력부;를 더 포함하는,
    상기 제어부는, 상기 사용자 입력에 응답하여, 상기 디스플레이 구성 파라미터에 따라, 상기 타겟 화면 크기에 대응되는 제1 디스플레이 데이터를 새로운 프로세스(process) 또는 쓰레드(thread)를 통해 생성하는,
    전자 장치.
  9. 제 8 항에 있어서,
    상기 제어부는, 상기 제1 디스플레이 데이터 및 상기 전자 장치에서 디스플레이될 제2 디스플레이 데이터를 병렬처리(parallel processing)하도록 상기 디스플레이 구성 파라미터를 변경하는,
    전자 장치.
  10. 제 1 항에 있어서,
    상기 통신부는, 상기 적어도 하나의 외부 디스플레이 장치로부터 이벤트에 대한 정보를 수신하고,
    상기 제어부는, 상기 이벤트에 대한 정보 및 상기 디스플레이 구성 파라미터에 기초하여, 상기 타겟 화면 크기에 대응되는 디스플레이 데이터를 생성하는,
    전자 장치.
  11. 전자 장치가 적어도 하나의 외부 디스플레이 장치와 화면을 공유하는 방법에 있어서,
    상기 전자 장치에 인접한 상기 적어도 하나의 외부 디스플레이 장치의 화면 크기를 상기 적어도 하나의 외부 디스플레이 장치로부터 수신하는 단계;
    상기 전자 장치의 화면 크기 및 상기 적어도 하나의 외부 디스플레이 장치의 화면 크기에 기초하여 타겟 화면 크기(target screen size)를 결정하는 단계; 및
    상기 전자 장치의 화면 크기가 상기 타겟 화면 크기에 상응하도록 상기 전자 장치의 디스플레이 구성 파라미터(display configuration parameter)를 변경하는 단계;를 포함하는,
    화면 공유 방법.
  12. 제 11 항에 있어서,
    상기 타겟 화면 크기를 결정하는 단계는, 상기 전자 장치의 화면 크기 및 상기 적어도 하나의 외부 디스플레이 장치의 화면 크기가 동일한지 여부에 따라 상기 타겟 화면 크기를 결정하는 것인,
    화면 공유 방법.
  13. 제 12 항에 있어서,
    상기 타겟 화면 크기는, 상기 전자 장치의 화면 크기 및 상기 적어도 하나의 외부 디스플레이 장치의 화면 크기가 동일한 경우 상기 전자 장치의 화면 크기의 정수 배인,
    화면 공유 방법.
  14. 제 13 항에 있어서,
    상기 전자 장치 및 상기 적어도 하나의 외부 디스플레이 장치의 배치 형태에 기초하여 분배 형태(distribution way)를 결정하는 단계;를 더 포함하는,
    화면 공유 방법.
  15. 제 14 항에 있어서,
    상기 디스플레이 구성 파라미터에 따라 상기 타겟 화면 크기에 대응되는 디스플레이 데이터를 생성하는 단계; 및
    상기 분배 형태에 따라 상기 디스플레이 데이터를 나누는 단계;를 더 포함하는,
    화면 공유 방법.
  16. 제 15 항에 있어서,
    상기 나누어진 디스플레이 데이터 중에서 상기 전자 장치에 대응되는 디스플레이 데이터를 디스플레이하는 단계; 및
    상기 적어도 하나의 외부 디스플레이 장치에 대응되는 디스플레이 데이터를 상기 적어도 하나의 외부 디스플레이 장치에게 전송하는 단계;를 더 포함하는,
    화면 공유 방법.
  17. 제 12 항에 있어서,
    상기 타겟 화면 크기는, 상기 전자 장치의 화면 크기가 상기 적어도 하나의 외부 디스플레이 장치의 화면 크기와 동일하지 않은 경우, 상기 적어도 하나의 외부 디스플레이 장치의 화면 크기인,
    화면 공유 방법.
  18. 제 17 항에 있어서,
    사용자 입력을 수신하는 단계; 및
    사용자 입력에 따라, 상기 디스플레이 구성 파라미터에 따라, 상기 타겟 화면 크기에 대응되는 제1 디스플레이 데이터를 새로운 프로세스(process) 또는 쓰레드(thread)를 통해 생성하는 단계;를 더 포함하는,
    화면 공유 방법.
  19. 제 18 항에 있어서,
    상기 제1 디스플레이 데이터 및 상기 전자 장치에서 디스플레이될 제2 디스플레이 데이터를 병렬처리(parallel processing)하도록 디스플레이 구성 파라미터를 변경하는 단계;를 더 포함하는,
    화면 공유 방법.
  20. 제 11 항에 있어서,
    상기 적어도 하나의 외부 디스플레이 장치로부터 이벤트에 대한 정보를 수신하는 단계; 및
    상기 이벤트에 대한 정보 및 상기 디스플레이 구성 파라미터에 기초하여, 상기 타겟 화면 크기에 대응되는 디스플레이 데이터를 생성하는 단계;를 더 포함하는,
    화면 공유 방법.
PCT/KR2014/010975 2013-11-14 2014-11-14 전자 장치가 외부 디스플레이 장치와 화면을 공유하는 방법 및 전자 장치 WO2015072787A1 (ko)

Priority Applications (2)

Application Number Priority Date Filing Date Title
US15/037,000 US10360871B2 (en) 2013-11-14 2014-11-14 Method for sharing screen with external display device by electronic device and electronic device
EP14862354.9A EP3043256A4 (en) 2013-11-14 2014-11-14 Method for sharing screen with external display device by electronic device and electronic device

Applications Claiming Priority (4)

Application Number Priority Date Filing Date Title
CN201310573258.6 2013-11-14
CN201310573258.6A CN103593111A (zh) 2013-11-14 2013-11-14 一种移动终端屏幕共享的方法和移动终端
CN201410588298.2A CN104360790A (zh) 2013-11-14 2014-10-28 一种移动终端屏幕共享的方法和移动终端
CN201410588298.2 2014-10-28

Publications (1)

Publication Number Publication Date
WO2015072787A1 true WO2015072787A1 (ko) 2015-05-21

Family

ID=50083286

Family Applications (1)

Application Number Title Priority Date Filing Date
PCT/KR2014/010975 WO2015072787A1 (ko) 2013-11-14 2014-11-14 전자 장치가 외부 디스플레이 장치와 화면을 공유하는 방법 및 전자 장치

Country Status (5)

Country Link
US (1) US10360871B2 (ko)
EP (1) EP3043256A4 (ko)
KR (1) KR102284108B1 (ko)
CN (2) CN103593111A (ko)
WO (1) WO2015072787A1 (ko)

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2017010651A1 (ko) * 2015-07-13 2017-01-19 엘지전자 주식회사 디스플레이 시스템
US20190043447A1 (en) * 2017-08-01 2019-02-07 Samsung Electronics Co., Ltd. Synchronizing holographic displays and 3d objects with physical video panels

Families Citing this family (17)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US10126927B1 (en) * 2013-03-15 2018-11-13 Study Social, Inc. Collaborative, social online education and whiteboard techniques
US10545714B2 (en) * 2015-09-04 2020-01-28 Samsung Electronics Co., Ltd. Dual screen head mounted display
CN105681884A (zh) * 2016-01-15 2016-06-15 四川长虹电器股份有限公司 Wi-Fi数据智能传输方法及系统
CN106209969A (zh) * 2016-06-16 2016-12-07 深圳市飞图视讯有限公司 一种移动终端之间的屏幕镜像方法及装置
CN108462851A (zh) * 2017-02-21 2018-08-28 北京视联动力国际信息技术有限公司 数据处理的方法和移动终端、服务器、第二移动终端
CN107368274A (zh) * 2017-07-20 2017-11-21 三星半导体(中国)研究开发有限公司 移动终端及其显示控制方法
CN107800875A (zh) * 2017-10-18 2018-03-13 深圳市战音科技有限公司 一种无线智能多屏显示器的显示方法和系统
CN108737699B (zh) * 2018-05-04 2020-02-18 北京字节跳动网络技术有限公司 一种影像装置和移动终端
US10942559B2 (en) * 2018-09-06 2021-03-09 Apple Inc. Electronic display power management systems and methods
CN111131761B (zh) * 2018-10-30 2022-03-25 杭州海康威视数字技术股份有限公司 分布式拼接显示系统和数据传输方法
US11036456B1 (en) * 2019-10-18 2021-06-15 Splunk Inc. Control of a display device included in a display grid
KR20210112662A (ko) 2020-03-05 2021-09-15 삼성전자주식회사 외부 전자 장치의 어플리케이션을 제어하는 방법 및 이를 지원하는 전자 장치
CN111580764B (zh) * 2020-04-18 2023-08-29 广州视源电子科技股份有限公司 智能交互平板的屏幕共享方法、装置、设备和存储介质
CN113553014B (zh) * 2020-09-10 2023-01-06 华为技术有限公司 多窗口投屏场景下的应用界面显示方法及电子设备
CN112181353B (zh) * 2020-10-15 2022-05-20 Oppo广东移动通信有限公司 音频播放方法、装置、电子设备及存储介质
CN114968147A (zh) * 2021-02-27 2022-08-30 华为技术有限公司 一种拼接显示的方法、电子设备和系统
CN112612570B (zh) * 2021-03-08 2021-06-22 全时云商务服务股份有限公司 一种查看应用程序被遮挡区域的方法及系统

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20110096230A1 (en) * 2008-06-30 2011-04-28 Daisaku Komiya Terminal device and method for processing data
KR20120028757A (ko) * 2010-09-15 2012-03-23 엘지전자 주식회사 단말기 및 단말기의 컨텐츠 공유 방법
US20130076764A1 (en) * 2011-09-26 2013-03-28 Nec Corporation Display screen sharing system, display screen sharing method, and program
US20130093659A1 (en) * 2011-10-14 2013-04-18 Lenovo (Singapore) Pte. Ltd. Automatic adjustment logical positions of multiple screen
US20130214995A1 (en) * 2012-02-21 2013-08-22 Research In Motion Tat Ab System and method for displaying a user interface across multiple electronic devices

Family Cites Families (15)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US7176635B2 (en) * 2004-02-24 2007-02-13 Musco Corporation Apparatus and method for compensating for reduced light output of a light source having a lumen depreciation characteristic over its operational life
JP4176122B2 (ja) 2006-10-24 2008-11-05 株式会社東芝 サーバ端末、画面共有方法およびプログラム
JP2009294689A (ja) 2008-06-02 2009-12-17 Sharp Corp 移動端末装置およびその制御方法、制御プログラム、コンピュータ読み取り可能な記録媒体ならびにマルチディスプレイシステム
JP5177071B2 (ja) * 2009-04-30 2013-04-03 ソニー株式会社 送信装置および方法、受信装置および方法、並びに送受信システム
CN101674364B (zh) * 2009-09-28 2011-11-09 华为终端有限公司 一种无线屏幕拼接显示方法、移动通信终端和装置
JP2011166691A (ja) * 2010-02-15 2011-08-25 Toshiba Corp 電子機器
US9213480B2 (en) * 2010-04-08 2015-12-15 Nokia Technologies Oy Method, apparatus and computer program product for joining the displays of multiple devices
JP2011221253A (ja) * 2010-04-08 2011-11-04 Sony Corp 撮像装置、固体撮像素子、撮像方法およびプログラム
CN102222493A (zh) * 2010-04-19 2011-10-19 英业达股份有限公司 扩大显示影像的方法及装置
US9159298B2 (en) 2010-09-08 2015-10-13 Lg Electronics Inc. Terminal and contents sharing method for terminal
CN102510405A (zh) 2011-11-18 2012-06-20 深圳中兴网信科技有限公司 一种屏幕共享方法及其系统
CN102495712B (zh) * 2011-12-15 2014-02-05 王飞 一种基于多个显示终端的地图拼接显示方法
KR101881925B1 (ko) * 2012-01-06 2018-07-26 삼성전자주식회사 복수의 휴대 단말들을 이용하여 멀티 비전 시스템을 구축하는 방법 및 이를 위한 장치
US9552147B2 (en) * 2012-02-01 2017-01-24 Facebook, Inc. Hierarchical user interface
CN103366715A (zh) * 2013-06-28 2013-10-23 长春理工大学 多手机扩屏显示方法

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20110096230A1 (en) * 2008-06-30 2011-04-28 Daisaku Komiya Terminal device and method for processing data
KR20120028757A (ko) * 2010-09-15 2012-03-23 엘지전자 주식회사 단말기 및 단말기의 컨텐츠 공유 방법
US20130076764A1 (en) * 2011-09-26 2013-03-28 Nec Corporation Display screen sharing system, display screen sharing method, and program
US20130093659A1 (en) * 2011-10-14 2013-04-18 Lenovo (Singapore) Pte. Ltd. Automatic adjustment logical positions of multiple screen
US20130214995A1 (en) * 2012-02-21 2013-08-22 Research In Motion Tat Ab System and method for displaying a user interface across multiple electronic devices

Non-Patent Citations (1)

* Cited by examiner, † Cited by third party
Title
See also references of EP3043256A4 *

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2017010651A1 (ko) * 2015-07-13 2017-01-19 엘지전자 주식회사 디스플레이 시스템
US20190043447A1 (en) * 2017-08-01 2019-02-07 Samsung Electronics Co., Ltd. Synchronizing holographic displays and 3d objects with physical video panels
US10803832B2 (en) * 2017-08-01 2020-10-13 Samsung Electronics Co., Ltd. Synchronizing holographic displays and 3D objects with physical video panels

Also Published As

Publication number Publication date
KR102284108B1 (ko) 2021-08-02
US20160260408A1 (en) 2016-09-08
CN104360790A (zh) 2015-02-18
EP3043256A1 (en) 2016-07-13
CN103593111A (zh) 2014-02-19
US10360871B2 (en) 2019-07-23
EP3043256A4 (en) 2017-05-03
KR20150056074A (ko) 2015-05-22

Similar Documents

Publication Publication Date Title
WO2015072787A1 (ko) 전자 장치가 외부 디스플레이 장치와 화면을 공유하는 방법 및 전자 장치
WO2016060514A1 (en) Method for sharing screen between devices and device using the same
WO2014112777A1 (en) Method for providing haptic effect in portable terminal, machine-readable storage medium, and portable terminal
WO2016195291A1 (en) User terminal apparatus and method of controlling the same
WO2016093506A1 (ko) 이동 단말기 및 그 제어 방법
WO2015199484A2 (en) Portable terminal and display method thereof
WO2016167503A1 (en) Display apparatus and method for displaying
WO2017065494A1 (en) Portable device and screen display method of portable device
WO2016052876A1 (en) Display apparatus and controlling method thereof
WO2016036137A1 (en) Electronic device with bent display and method for controlling thereof
WO2013180454A1 (en) Method for displaying item in terminal and terminal using the same
WO2017052143A1 (en) Image display device and method of operating the same
WO2015119463A1 (en) User terminal device and displaying method thereof
WO2014107087A1 (en) Method and apparatus for providing mouse function using touch device
WO2015016508A1 (en) Character input method and display apparatus
WO2015178677A1 (en) User terminal device, method for controlling user terminal device, and multimedia system thereof
WO2015009110A1 (ko) 디스플레이를 구비한 휴대 단말기 및 그 휴대 단말기의 동작 방법
WO2014088253A1 (en) Method and system for providing information based on context, and computer-readable recording medium thereof
WO2015182811A1 (ko) 사용자 인터페이스 제공 장치 및 방법
WO2016167610A1 (ko) 밝기를 조절하는 휴대 단말기 및 이의 밝기 조절 방법
WO2014137176A1 (en) Input apparatus, display apparatus, and control methods thereof
WO2015046899A1 (en) Display apparatus and method of controlling display apparatus
WO2021118225A1 (en) Display device and operating method thereof
WO2014042474A2 (en) Method and system for executing application, and device and recording medium thereof
WO2016089074A1 (en) Device and method for receiving character input through the same

Legal Events

Date Code Title Description
121 Ep: the epo has been informed by wipo that ep was designated in this application

Ref document number: 14862354

Country of ref document: EP

Kind code of ref document: A1

REEP Request for entry into the european phase

Ref document number: 2014862354

Country of ref document: EP

WWE Wipo information: entry into national phase

Ref document number: 2014862354

Country of ref document: EP

WWE Wipo information: entry into national phase

Ref document number: 15037000

Country of ref document: US

NENP Non-entry into the national phase

Ref country code: DE