WO2014014215A1 - Method of sharing screens between user terminals through rcs mobile communication network - Google Patents

Method of sharing screens between user terminals through rcs mobile communication network Download PDF

Info

Publication number
WO2014014215A1
WO2014014215A1 PCT/KR2013/005889 KR2013005889W WO2014014215A1 WO 2014014215 A1 WO2014014215 A1 WO 2014014215A1 KR 2013005889 W KR2013005889 W KR 2013005889W WO 2014014215 A1 WO2014014215 A1 WO 2014014215A1
Authority
WO
WIPO (PCT)
Prior art keywords
terminal
screen
user
sharing
user terminals
Prior art date
Application number
PCT/KR2013/005889
Other languages
French (fr)
Korean (ko)
Inventor
이종환
차용주
김현표
이현송
Original Assignee
주식회사 케이티
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 주식회사 케이티 filed Critical 주식회사 케이티
Publication of WO2014014215A1 publication Critical patent/WO2014014215A1/en

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04WWIRELESS COMMUNICATION NETWORKS
    • H04W4/00Services specially adapted for wireless communication networks; Facilities therefor
    • H04W4/20Services signaling; Auxiliary data signalling, i.e. transmitting data via a non-traffic channel
    • H04W4/203Services signaling; Auxiliary data signalling, i.e. transmitting data via a non-traffic channel for converged personal network application service interworking, e.g. OMA converged personal network services [CPNS]
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06QINFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q30/00Commerce
    • G06Q30/02Marketing; Price estimation or determination; Fundraising
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06QINFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q50/00Information and communication technology [ICT] specially adapted for implementation of business processes of specific business sectors, e.g. utilities or tourism
    • G06Q50/10Services
    • GPHYSICS
    • G09EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09BEDUCATIONAL OR DEMONSTRATION APPLIANCES; APPLIANCES FOR TEACHING, OR COMMUNICATING WITH, THE BLIND, DEAF OR MUTE; MODELS; PLANETARIA; GLOBES; MAPS; DIAGRAMS
    • G09B5/00Electrically-operated educational appliances
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04WWIRELESS COMMUNICATION NETWORKS
    • H04W4/00Services specially adapted for wireless communication networks; Facilities therefor
    • H04W4/18Information format or content conversion, e.g. adaptation by the network of the transmitted or received information for the purpose of wireless delivery to users or terminals

Definitions

  • the present invention relates to a screen sharing method between user terminals.
  • various multimedia information can be shared between user terminals by supporting an area designated by the terminal screen to be shared with the other party during a communication service between a user terminal such as a call or a chat through a mobile communication network.
  • the present invention relates to a screen sharing method between user terminals for providing a Rich Communication Suite (RCS) service to be shared.
  • RCS Rich Communication Suite
  • Korean Patent Application No. 10-2005-0025511 establishes an additional session between user terminals during a voice call, so that information such as a video, photo, still image, etc. stored in one terminal may be transmitted through the Internet through the RTP (Real Time Transport Protocol) method.
  • the sharing method is disclosed.
  • the Republic of Korea Patent Application No. 10-2009-0100801 displays the map on both terminals at the request of any one of the two terminals during the voice call, calculate the GPS position value for the touched position and display the corresponding position on the other terminal
  • the present invention discloses a method of identifying the destination route to each other.
  • Korean Patent Application No. 10-2007-0071895 discloses a technology for realizing a whiteboard function on both terminals during a call so that each user can share a picture, text, etc. input by each user.
  • the existing technologies such as the above support sharing of multimedia information during a voice call
  • the digital multimedia file itself is transmitted from one terminal to the other terminal, or simply some information (location value, whiteboard memo, etc.) of one terminal. Since only) is transmitted to the other terminal, there is a limit to conveying the emotion sufficiently as if talking to a nearby person.
  • an object of the present invention is to solve the above-described problems, and an object of the present invention is to provide a counterpart that is arbitrarily designated by a terminal screen during a communication service between a user terminal such as a call or a chat through a mobile communication network without installing a separate application.
  • multimedia information e.g. videos, maps, document files, web pages, whiteboards, notes, etc.
  • the present invention provides a screen sharing method between user terminals capable of supporting a Rich Communication Suite (RCS) service.
  • RCS Rich Communication Suite
  • the screen sharing method in the screen sharing method between the user terminal on the mobile communication network, the synchronized for screen sharing between the user terminals connected to each other communication session Establishing another communication session; Transmitting image data for a shared area designated by the user in any shape on a screen through one of the user terminals through the other synchronized communication sessions; And receiving the image data at another terminal of the user terminals and displaying the image data on the screen.
  • the synchronized other communication session can be established.
  • the server controls to transmit the predetermined advertisement content managed in a database to the other terminal for display on the screen without setting up the other synchronized communication session. can do.
  • the server on the network setting up the other synchronized communication session transmits the image data to the other terminal, and converts the image data according to the resolution of the other terminal by referring to a database in which the terminal information of the user terminals is managed. Can transmit
  • the shared area may be a circular, square, triangular, or any other designated area that is designated as a touch on the touch screen or by moving a cursor on the screen with a moving key of the keyboard.
  • the other terminal generates a separate partitioned window other than the display window currently displayed on the screen and displays the image data as shown in the above shape, or displays the image data as shown in the shape at a predetermined position on the screen and displays the image already. You can display it on your desktop or on the display.
  • the other terminal displays the image data at the corresponding location as the user moves the window on the touch screen on which the image data is displayed by a touch or selects and moves the window on which the image data is displayed with a keyboard. can do.
  • the other terminal may display the change of the image data in real time.
  • An image of the sharing area may be displayed on the screen of the user terminals, and a point or a path touched by the users of the user terminal on the image of the sharing area may be displayed on the screen of the user terminals.
  • the map included in the sharing area may be displayed on the screen of the user terminals, and a point or a path touched by the users of the user terminals on the map may be displayed on the screen of the user terminals.
  • the corresponding audio data is also transmitted along with the image data, and the other terminal receiving the same may output the corresponding audio data together with the display of the image data.
  • a server on a network that receives a whiteboard sharing request message from one of the user terminals requests and receives a response from another of the user terminals.
  • the sharing area may be designated while establishing a communication session for whiteboard sharing according to a message, and while each whiteboard window of the user terminals for whiteboard sharing is displayed.
  • each whiteboard window of the user terminals a point or path touched by the user is shared and displayed on the screen of the user terminals, or a web page or file (image) loaded in the whiteboard window respectively in the user terminals.
  • Video, or document may be shared and displayed on the screen of the user terminals.
  • the user terminals may load and share a file stored in another server on a network in the whiteboard window, and the work performed on the file may be updated and stored in the other server.
  • each of the different carriers on the network receiving a sharing request message from any one of the user terminals.
  • the server may establish another synchronized communication session according to a message received by requesting a response from another terminal among the user terminals.
  • Each server may convert and transmit the image data according to the resolution of the other terminal by referring to a database in which terminal information of the other terminal registered in its network is managed.
  • a mobile communication terminal includes: means for generating and transmitting a sharing request message for screen sharing with another terminal on a mobile communication network to which a communication session is connected; And as the server on the network receiving the sharing request message sets up another communication session synchronized with the received message by requesting a response from the other terminal, the image data of the sharing area designated by the user in an arbitrary shape on the screen. And means for generating and transmitting the image data from the other terminal to display the image of the sharing area on a screen, and the image of the sharing area may be shared and displayed on the screen of the user terminals.
  • the screen sharing method between user terminals by supporting a variety of multimedia information between the user terminal during the communication service between the user terminal, such as a call, chat, so as to share the multimedia experience at the same time, through the content sharing family, acquaintances You can improve your relationship with each other, and you can easily grasp the interests of your friends in real time, and support RCS services so that you can share rich emotions as if you are talking with someone nearby even during two-way conversation or chat.
  • FIG. 1 is a diagram illustrating a mobile communication network environment for an RCS service according to an embodiment of the present invention.
  • FIG. 2 is a flowchart illustrating a screen sharing method through an RCS service according to an embodiment of the present invention.
  • FIG. 3 is a view for explaining an example of the screen share of FIG.
  • FIG. 4 is a diagram for explaining map sharing as the screen share of FIG. 2.
  • FIG. 5 is a diagram for describing video sharing as the screen share of FIG. 2.
  • FIG. 6 is a flowchart illustrating a screen sharing method among whiteboard functions through an RCS service according to another embodiment of the present invention.
  • FIG. 7 is a diagram for describing a whiteboard function of FIG. 6.
  • FIG. 8 is a diagram for describing a screen share among the whiteboard functions of FIG. 6.
  • FIG. 9 is a flowchart illustrating a screen sharing method when interworking with a third party network according to another exemplary embodiment of the present invention.
  • FIG. 1 is a diagram illustrating a mobile communication network environment for a Rich Communication Suite (RCS) service according to an embodiment of the present invention.
  • RCS Rich Communication Suite
  • the mobile communication system 100 interworks with a mobile communication network 140 including an RCS server 141 and an IMS (IP Multimedia Subsystem) server 142. It includes the user terminal (110, 120) receiving a mobile communication service through the base station 111 or the AP (Access Point) 112, the mobile communication service through any mobile communication network 140 of such a carrier
  • the user terminals 110 and 120 receiving the call are connected to the mobile communication network 150 of another telecommunication company through interworking between the networks 140 and 150, and the user terminal 130 also receives a mobile communication service. All communication services between terminals such as messaging and text messaging (SMS, MMS, etc.) can be used.
  • SMS messaging and text messaging
  • the mobile communication network 150 of another communication company may also include an RCS server 151 and an IMS server 152, and the user terminals 130 may access a base station 131 or an AP that interworks with its network 150. Through 132, a mobile communication service may be provided.
  • the mobile communication networks 140 and 150 interworking with each other are 3G (WCDMA) / 4G (LTE) mobile communication operated by a mobile telecommunication company and a network supporting Internet communication according to IP (Internet Protocol). , Mobile communication network).
  • the IMS server 142/152 having a gateway proxy and the like can be extended to interwork with the RCS server 141/151.
  • the IMS server 142/152 stores messages, contents, data, etc. exchanged between user terminals during the screen share of the present invention. It can retransmit in case of failure.
  • the user terminal (s) referred to in the present invention can be provided with a mobile communication service by accessing a network for 3G (WCDMA) / 4G (LTE) mobile communication through a base station, or Wi-Fi (WiFi: Wireless) through the AP
  • WCDMA 3G
  • LTE 4G
  • Wi-Fi Wi-Fi: Wireless
  • a mobile communication terminal capable of data communication by supporting the wireless Internet according to the Fidelity protocol which may include a smartphone, an iPhone, and the like, and is not only a terminal capable of such two types of communication but also 3G (WCDMA) or 4G in some cases.
  • LTE may be a mobile communication terminal that can receive only mobile communication services, or may be a mobile communication terminal that can receive only wireless Internet services through the AP.
  • the terminal after establishing another synchronized communication session for screen sharing between user terminals (two or more terminals) connected to each other such as voice call, video call, or instant messaging, one of the user terminals In another terminal of the user terminals, the terminal transmits the image data for the shared area designated by the user in any shape (circular, square, triangular, or any other shape) on the screen through the other synchronized communication session.
  • the image data can be received and displayed on the screen.
  • any one of the user terminals may share the screen with another terminal on the mobile communication network through a predetermined means. It generates and transmits a sharing request message for the network, and an RCS server (communication server of each network when interworking with its own server or another communication company) on the network receiving the sharing request message receives a response from another terminal (eg, called party) among user terminals.
  • the synchronized other communication session may be established according to the request and the received message.
  • the terminal eg, the sender
  • the terminal that has transmitted the sharing request message may generate and transmit image data through a predetermined means to the sharing area designated by the user in an arbitrary shape on the screen. Receiving the video data from the called party and displaying the image of the sharing area on the screen, and the image of the sharing area is shared and displayed on the screen of the user terminals, thereby sharing the image of the same sharing area in real time. You can do it.
  • the multimedia experience is supported by allowing various multimedia information to be shared among the user terminals during a communication service between user terminals such as voice call, video call, or instant messaging (messenger, katok, etc.).
  • Share content with others improve content relationships with family and acquaintances, and share your interests in real-time and conveniently, sharing rich emotions as if you're talking to someone nearby during a two-way conversation or chat.
  • It can support RCS service.
  • it is possible to provide a rich mobile communication environment through a seamless high quality RCS service even for a large amount of multimedia data traffic, and may provide a convenient advertising environment for users and advertisers by interworking with the advertising service linked with the advertiser.
  • FIG. 2 is a flowchart illustrating a screen sharing method through an RCS service according to an embodiment of the present invention.
  • the screen sharing method between the user A terminal 110 and the user B terminal 120 using the mobile communication network 140 will be described.
  • a communication session for a voice call, a video call, or an instant messaging is connected between the user A terminal 110 and the user B terminal 120.
  • Any one of the user A terminal 110 and the user B terminal 120 may be a caller or a called party terminal without distinction.
  • the user of the user A terminal 110 designates a sharing area to be screen-shared with the user B terminal 120 (S110).
  • the screen of the user A terminal 110 is a touch screen
  • the user may designate a sharing area in a circular, square, triangle, or other arbitrary shape by a touch on the touch screen, and the user A terminal 110
  • the user can move the cursor on the screen with the navigation keys of the keyboard (mechanical or on-screen keyboard) to designate the shared area in a circle, rectangle, triangle, or other arbitrary shape (dotted line in FIG. 3). Circular share area).
  • the user can designate a sharing area avoiding an area where personal information not to be shared with the user B terminal 120 is displayed on the screen, so that the private secret of the individual can be protected for the personal information display area other than the sharing area.
  • the predetermined means of the user A terminal 110 may generate and transmit a sharing request message for screen sharing with the user B terminal 120 (S111).
  • the sharing request message is transmitted after the region designation (S110) (S111).
  • the region designation is received after receiving the acceptance message (S113). (S110) may be made.
  • the RCS server 141 receives the request and delivers the shared request message to the user B terminal 120 to request a response.
  • the user B terminal 120 receiving the sharing request message from the RCS server 141 may be displayed as "accept sharing request?", Etc., and the user may answer 'yes' or 'no' in the terminal.
  • the user B terminal 120 may transmit a corresponding response (accept / deny) message, and thus the corresponding response (accept / deny) message is transmitted to the user A terminal 110 through the RCS server 141. It may be (S112).
  • the RCS server 141 may establish another synchronized communication session for screen sharing between the user A terminal 110 and the user B terminal 120 (S120). If the response message indicates rejection (S113), the RCS server 141 does not establish a communication session for screen sharing and the user A terminal 110 and the user B terminal 120 maintain the call state while maintaining the existing screen. In some cases, the RCS server 141 may control to transmit the schedule advertisement content managed in the database to the user B terminal 120 to display on the screen (S114).
  • the RCS server 141 may store and manage advertisement contents such as a predetermined image and a video (including audio) registered by an advertiser in a database, and the user B terminal 120 may manage various advertisement contents of advertisers according to a predetermined policy. Can be sent to.
  • the user B terminal 120 displays the advertisement content by generating a separate partitioned window other than the display window currently displayed on the screen, or displays the advertisement content at a predetermined position on the screen, and the desktop which has already been displayed, or It can also be displayed on the display.
  • the predetermined means of the user A terminal 110 are as described above.
  • the image data of the shared area on the screen designated as an arbitrary shape may be generated and transmitted (S121), and the RCS server 141 may receive it and transmit it to the user B terminal 120 (S123).
  • the RCS server 141 may display the corresponding image in a form that can be displayed on the terminal according to the resolution of the user B terminal 120. Data may be converted (S122).
  • the RCS server 141 collects each terminal profile information (eg, terminal number, terminal model, CPU performance, serial number, resolution, etc.) of subscribers through a terminal management system on a network, and manages the database.
  • the user B terminal 120 may convert the image data into data corresponding to a resolution lower than or equal to the resolution that can be displayed (S122) and transmit the same to the user B terminal 120 (S123). .
  • the user B terminal 120 may receive the corresponding image data and display the image of the corresponding shared area on the screen (S124).
  • the image of the sharing area is shared and displayed on the screens of the user terminals 110 and 120, so that the image of the same sharing area may be shared in real time (S130).
  • the user B terminal 120 that receives and displays the image data from the user A terminal 110 has a shape (circular or square) designated by the user A terminal 110 at the predetermined position of the screen as shown in FIG. 3. , Triangles, or any other shape) can be displayed (overlapping) on the desktop that was already displayed, or on another display.
  • the user B terminal 120 generates a separate partitioned window (deletable window) other than the display window currently displayed on the screen, and displays the corresponding image data in the same shape as that specified in the user A terminal 110. Can be displayed.
  • the user B terminal 120 freely moves the window on the touch screen on which the corresponding shared area is displayed. Can be made (S140). For example, the user can move a window on the touch screen on which the corresponding shared area is displayed by touching it to move to another position where the touch ends. Alternatively, if the touch screen is not a touch screen, the window is selected by using a predetermined key on the keyboard. By moving to (up, down, left, and right arrow keys), it can be moved to a desired position, and thus image data can be displayed at the corresponding position.
  • an image eg, a video
  • each user of the user A terminal 110 and the user B terminal 120 may be touched or extended by a point or finger through a finger or a stylus on a window (or image) on which an image of the corresponding shared area is displayed.
  • a touch or the like may be performed, and thus a corresponding touch point or a touch path may be displayed on the screen of the user A terminal 110 and the user B terminal 120 at the same time.
  • the user A terminal 110 may designate all or a portion of the map as a shared area, so that the map included in the shared area is a user.
  • a point or a touch path that each user of terminal A 110 and terminal B 120 touches on a corresponding map image may be displayed on a screen of terminal A 110 and terminal B 120. It can be displayed on the screen of each user terminal.
  • the map screen share as described above, while performing a voice call, a video call, or an instant messaging, the map is spread out next to the user and thus, the user can receive the guidance of the appointment place more conveniently.
  • the user A terminal 110 may also transmit the corresponding audio data when the corresponding video data is transmitted.
  • the receiving user B terminal 120 also outputs the corresponding audio data together with the display of the corresponding image data, thereby making it possible to make a call while simultaneously listening to music included in the video.
  • the IMS server 142/152 having a gateway proxy or the like can be extended to work with the RCS server 141/151, the IMS server 142/152 is the user terminal (s) during the performance of the screen share function as described above ( 110, 120, 130 may store a message, content, data, etc. sent and received between the retransmission in the case of a temporary failure (S150).
  • the IMS server 142/152 requests the RCS server 141/151 to re-establish the synchronized communication session for screen sharing as described above between the user A terminal 110 and the user B terminal 120 so that the RCS server 141/151 May control to allow the corresponding synchronized communication session for existing screen sharing to take place.
  • the IMS server 142/152 returns messages, contents, data, etc., which have occurred in the user terminals 110, 120, and 130, but failed to be transmitted to the corresponding terminal during power off or network failure. I can send it.
  • FIG. 6 is a flowchart illustrating a screen sharing method among whiteboard functions through an RCS service according to another embodiment of the present invention.
  • a method of screen sharing while sharing the whiteboard function between the user A terminal 110 and the user B terminal 120 using the mobile communication network 140 will be described.
  • a communication session for a voice call, a video call, or an instant messaging is connected between the user A terminal 110 and the user B terminal 120.
  • Any one of the user A terminal 110 and the user B terminal 120 may be a caller or a called party terminal without distinction.
  • the user of the user A terminal 110 executes the whiteboard function of the user A terminal 110 to share writing with the user B terminal 120 through the whiteboard window. Or, you can import web pages, documents, images, and more to share and collaborate with each other.
  • the user selects a whiteboard function through an icon or a menu in the user A terminal 110, so that the user A terminal 110 drives a means for the whiteboard function to display a whiteboard window on the screen as shown in FIG. If necessary, a keyboard window may also be displayed for editing the document file loaded on the whiteboard as necessary (S210).
  • the predetermined means of the user A terminal 110 may generate and transmit a sharing request message for sharing the whiteboard with the user B terminal 120 (S211).
  • a whiteboard sharing request message after display of the whiteboard window is described as an example.
  • S211 whiteboard sharing request message
  • S212 receiving an acceptance message described below
  • a whiteboard window may be displayed.
  • the RCS server 141 receives the request and delivers it to the user B terminal 120 to request a response.
  • the user B terminal 120 receiving the sharing request message from the RCS server 141 may be displayed as "Accept whiteboard sharing request?", Etc., and the user may select 'yes' (accept) or 'no' ( User B terminal 120 may transmit a corresponding response (accept / deny) message, so that the corresponding response (accept / deny) message may be transmitted through the RCS server 141. It may be transmitted to (S212).
  • the whiteboard window is also displayed on the screen of the user B terminal 120 (S213), and the RCS server 141 shares the white board between the user A terminal 110 and the user B terminal 120.
  • the user A terminal 110 and the user B terminal 120 is in real time interlocked with the whiteboard window to display the same content.
  • a point or a path touched by the user may be shared and displayed on the screen of the user terminals (S221). That is, when the user writes by touch, the meeting or discussion is possible while viewing the same content that is shared and written on the screen of the user terminals.
  • users can load and share files (including images, videos, or documents) in a whiteboard window at each user terminal, and can also share web pages by displaying them.
  • Importing a file may be a file (including an image, a video, or a document) stored in each user terminal, or a file stored in an IMS server 142 which is a cloud server. It may be.
  • the web page retrieval may be displayed in a whiteboard window by retrieving it via the Internet by inputting a uniform resource locator (URL) in a predetermined window.
  • URL uniform resource locator
  • the user A terminal 110 may search for shared files stored in the IMS server 142 and request a necessary file (S230). Accordingly, the IMS server 142 transmits the file to the RCS server 141 (S231), the RCS server 141 transmits the file to the user A terminal 110 (S232), and the user B terminal 120 ) Can also be transmitted to the file (S233), so that it can be shared and displayed on the screen of the user terminals. As shown in FIG.
  • each user has a corresponding document file ( For example, you can work on TXT, WORD, HWP, PDF, EXCEL, etc. (eg, add, edit, change, edit, etc.), and the work history is linked to the RCS server 141 and the IMS server 142 with IMS.
  • the server 142 may be updated and stored in the corresponding file (S240).
  • a whiteboard window is shared to each user terminal
  • screen sharing is possible by designating a sharing area as described with reference to FIG. 2 (S250). That is, while a communication session between user terminals for voice call, video call, or instant messaging is connected, and a session in which the whiteboard function is shared is connected, any one of the user terminals, Through a predetermined means, a sharing request message for screen sharing with other terminals on the mobile communication network may be generated and transmitted.
  • the whiteboard window there may be another window displaying a video, an image, a web page, etc. on the screen of the terminal that transmits the sharing request message, and the user requests to share a certain area of the screen with the other terminal. to be.
  • the RCS server (communication server of each network when interworking with its own server or another communication company) on the network receiving the sharing request message requests the response of the other terminal among the user terminals to the other synchronized communication session according to the received message. Can be set. Accordingly, the terminal that has transmitted the sharing request message may generate and transmit image data to a sharing area designated by the user in a random shape on a screen through a predetermined means. By receiving data and displaying an image of the sharing area on the screen, and the image of the sharing area is shared and displayed on the screen of the user terminals, it is possible to share the image for the same sharing area in real time.
  • FIG. 9 is a flowchart illustrating a screen sharing method when interworking with a third party network according to another exemplary embodiment of the present invention.
  • the screen sharing method between the user A terminal 110 using the mobile communication network 140 of the company and the user B terminal 130 using the mobile communication network 150 of the other company will be described.
  • the interworking between the RCS server 141 and the RCS server 151 is added, and the rest of the process is similar to that of FIG.
  • the interworking process between the RCS server 141 and the RCS server 151 may be similarly applied to the realization of the whiteboard function as shown in FIG. 6.
  • a communication session for voice call, video call, or instant messaging is connected between user A terminal 110 and user B terminal 130.
  • Any one of the user A terminal 110 and the user B terminal 130 may be a caller or a called party terminal without distinction.
  • the user of the user A terminal 110 designates a sharing area (circular, square, triangular, or other arbitrary shape) to be screen-shared with the user B terminal 130 ( S310).
  • the user may designate a sharing area avoiding an area where personal information that is not desired to be shared with the user B terminal 130 is displayed on the screen, so that a private secret of the individual may be protected for the personal information display area other than the sharing area.
  • the predetermined means of the user A terminal 110 may generate and transmit a sharing request message for screen sharing with the user B terminal 130 (S311).
  • a sharing request message is transmitted (S311) after region designation (S310).
  • an area is designated after receiving an acceptance message (S312). (S310) may be made.
  • the RCS server 141 receives this and transmits it to the RCS server 151 of the other company, and the RCS server 142 transmits it to the user B terminal ( And request a response.
  • the user B terminal 130 receiving the sharing request message from the RCS server 151 may be displayed as "accept sharing request?", Etc., and the user may answer 'yes' or 'no' in the terminal.
  • the user B terminal 130 may transmit a corresponding response (accept / deny) message by selecting the corresponding message, and thus the corresponding response (accept / deny) message may be transmitted to the user A through the RCS server 151 and the RCS server 141. It may be transmitted to the terminal 110 (S312).
  • the response message indicates acceptance
  • another synchronized communication session for screen sharing between the user A terminal 110 and the user B terminal 130 may be established by interworking with each of the RCS servers 141 and 151 of different telecommunication companies. There is (S320). If the response message indicates the rejection, the RCS server 151 may control to display certain advertisement content managed in a database to the user B terminal 130 for display on the screen without establishing a communication session for screen sharing. (See Figure 2).
  • the RCS servers 141 and 151 predetermined means of the user A terminal 110 are maintained. May generate and transmit the image data for the shared area on the screen designated as an arbitrary shape as described above (S321), and the RCS servers 141 and 151 may receive it and transmit it to the user B terminal 130 (S323). ). However, before the RCS server 151 transmits the image data received from the user A terminal 110 to the user B terminal 130 registered in the company network, the RCS server 151 displays the terminal according to the resolution of the user B terminal 130. The image data may be converted in a possible form (S322).
  • the RCS server 151 collects terminal profile information (eg, terminal number, terminal model, CPU performance, serial number, resolution, etc.) of subscribers through a terminal management system on a network, and manages the database.
  • terminal profile information eg, terminal number, terminal model, CPU performance, serial number, resolution, etc.
  • the user B terminal 130 may transmit the image data to the user B terminal 130 (S323).
  • the user B terminal 130 may receive the image data and display the image of the corresponding shared area on the screen (S324).
  • the image of the sharing area is shared and displayed on the screens of the user terminals 110 and 130, thereby enabling sharing of the image of the same sharing area in real time (S330).
  • User B terminal 130 for receiving and displaying the image data from the user A terminal 110, as shown in Fig. 3, the shape (circular, square) specified by the user A terminal 110 to the corresponding video data at a predetermined position of the screen , Triangles, or any other shape) can be displayed (overlapping) on the desktop that was already displayed, or on another display.
  • the user B terminal 130 generates a separate partitioned window (deletable window) other than the display window currently displayed on the screen, and displays the corresponding image data in the same shape as that specified in the user A terminal 110. Can be displayed.
  • the user B terminal 130 freely moves the window on the touch screen on which the corresponding shared area is displayed. Can be made (S340). For example, the user can move a window on the touch screen on which the corresponding shared area is displayed by touching it to move to another position where the touch ends. Alternatively, if the touch screen is not a touch screen, the window is selected by using a predetermined key on the keyboard. By moving to (up, down, left, and right arrow keys), it can be moved to a desired position, and thus image data can be displayed at the corresponding position. A more detailed description is as described with reference to FIG. 2.
  • the IMS server 142/152 having a gateway proxy or the like can be extended to interwork with the RCS server 141/151, and the IMS server 142/152 can perform the user terminal (s) while performing the screen sharing function as described above.
  • 110, 120, 130 may store a message, content, data, etc. sent and received between the retransmission in the case of a temporary failure (S150).
  • the IMS server 142/152 requests the RCS server 141/151 to reestablish the synchronized communication session for screen sharing as described above between the user A terminal 110 and the user B terminal 130 so that the RCS server 141/151 May control to allow the corresponding synchronized communication session for existing screen sharing to take place.
  • the IMS server 142/152 returns messages, contents, data, etc., which have occurred in the user terminals 110, 120, and 130, but failed to be transmitted during power off or network failure. In particular, it can be transmitted to a terminal registered (subscribed) in its network.
  • the present invention has been described by way of limited embodiments and drawings, but the present invention is not limited to the above embodiments, and those skilled in the art to which the present invention pertains various modifications and variations from such descriptions.
  • the screen sharing method for performing the respective functions for the user A terminal 110 and the user B terminal 120/130 has been described, the user A terminal 110 or the user B terminal 120/130 is described. Means for performing each function may be included in all the user terminals (110, 120, 130) to operate. Therefore, the scope of the present invention should not be limited to the described embodiments, but should be determined not only by the claims below but also by the equivalents of the claims.

Landscapes

  • Engineering & Computer Science (AREA)
  • Business, Economics & Management (AREA)
  • Physics & Mathematics (AREA)
  • Signal Processing (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • General Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • Strategic Management (AREA)
  • Marketing (AREA)
  • Accounting & Taxation (AREA)
  • Finance (AREA)
  • Development Economics (AREA)
  • Economics (AREA)
  • Educational Administration (AREA)
  • Tourism & Hospitality (AREA)
  • General Business, Economics & Management (AREA)
  • Educational Technology (AREA)
  • Primary Health Care (AREA)
  • Health & Medical Sciences (AREA)
  • Human Resources & Organizations (AREA)
  • Entrepreneurship & Innovation (AREA)
  • General Health & Medical Sciences (AREA)
  • Game Theory and Decision Science (AREA)
  • Information Transfer Between Computers (AREA)

Abstract

The present invention relates to a method of sharing screens between user terminals for providing rich communication suite (RCS) service that enables an area arbitrarily designated on a terminal screen to be shared during the use of a communication service such as calling and chatting between user terminals through a mobile communication network so that various pieces of multimedia information may be shared between the user terminals.

Description

RCS 이동통신 네트워크를 통한 사용자 단말간 스크린 쉐어 방법Screen sharing method between user terminals through RCS mobile communication network
본 발명은 사용자 단말간 스크린 쉐어 방법에 관한 것으로서, 특히, 이동통신 네트워크를 통하여 통화, 채팅 등 사용자 단말간 통신 서비스 중에 임의로 단말 스크린에서 지정한 영역이 상대방과 공유되도록 지원함으로써 다양한 멀티미디어 정보를 사용자 단말간에 공유할 수 있도록 RCS(Rich Communication Suite) 서비스를 제공하기 위한 사용자 단말간 스크린 쉐어 방법에 관한 것이다.The present invention relates to a screen sharing method between user terminals. In particular, various multimedia information can be shared between user terminals by supporting an area designated by the terminal screen to be shared with the other party during a communication service between a user terminal such as a call or a chat through a mobile communication network. The present invention relates to a screen sharing method between user terminals for providing a Rich Communication Suite (RCS) service to be shared.
음성 통화 중에 이미지, 동영상, 문서 파일 등과 관련된 디지털 멀티미디어 정보를 공유하고자 하는 시도가 있어왔다. 예를 들어, 대한민국 특허출원번호 10-2005-0025511에서는 음성 통화 중에 사용자 단말간에 추가 세션을 설정하여 한쪽 단말에 저장된 동영상, 사진, 스틸 이미지 등의 정보를 인터넷을 통해서 RTP(Real Time Transport Protocol) 방식으로 전달함으로 공유하는 방식이 개시되어 있다. 또한, 대한민국 특허출원번호 10-2009-0100801에서는 음성 통화 중 두 단말 중 어느 한 단말의 요청으로 지도를 양쪽 단말에 표시하고, 터치된 위치에 대한 GPS 위치값을 산출하여 다른 단말에도 해당 위치가 표시되도록 함으로써 목적지 경로를 서로 파악할 수 있도록 하는 방식이 개시되어 있다. 그리고, 대한민국 특허출원번호 10-2007-0071895에서는 통화 중 양쪽 단말에 화이트보드 기능을 실현하여 각 사용자가 입력하는 그림, 글자 등을 서로 공유하여 볼 수 있도록 하는 기술이 개시되어 있다.Attempts have been made to share digital multimedia information related to images, videos, document files and the like during voice calls. For example, Korean Patent Application No. 10-2005-0025511 establishes an additional session between user terminals during a voice call, so that information such as a video, photo, still image, etc. stored in one terminal may be transmitted through the Internet through the RTP (Real Time Transport Protocol) method. The sharing method is disclosed. In addition, the Republic of Korea Patent Application No. 10-2009-0100801 displays the map on both terminals at the request of any one of the two terminals during the voice call, calculate the GPS position value for the touched position and display the corresponding position on the other terminal The present invention discloses a method of identifying the destination route to each other. In addition, Korean Patent Application No. 10-2007-0071895 discloses a technology for realizing a whiteboard function on both terminals during a call so that each user can share a picture, text, etc. input by each user.
그러나 위와 같은 기존 기술들에서 음성 통화 중 멀티미디어 정보의 공유를 지원하고 있지만, 한쪽 단말에서 다른쪽 단말로 디지털 멀티미디어 파일 자체를 전송하는 형식이거나, 단순히 한쪽 단말의 일부 정보(위치값, 화이트보드 메모 등)만이 다른쪽 단말로 전달되므로, 가까이 있는 사람과 이야기 하듯이 감성을 충분히 전달하기에는 한계가 있는 실정이다.However, although the existing technologies such as the above support sharing of multimedia information during a voice call, the digital multimedia file itself is transmitted from one terminal to the other terminal, or simply some information (location value, whiteboard memo, etc.) of one terminal. Since only) is transmitted to the other terminal, there is a limit to conveying the emotion sufficiently as if talking to a nearby person.
따라서, 본 발명은 상술한 문제점을 해결하기 위한 것으로서, 본 발명의 목적은, 별도의 어플리케이션을 설치하지 않아도 이동통신 네트워크를 통하여 통화, 채팅 등 사용자 단말간 통신 서비스 중에 임의로 단말 스크린에서 지정한 영역이 상대방과 공유되도록 지원함으로써 다양한 멀티미디어 정보(예, 동영상, 지도, 문서파일, 웹페이지, 화이트보드, 메모 등)가 사용자 단말간에 공유되어 양자 대화나 채팅 중에도 가까이 있는 사람과 이야기 하듯이 풍부한 감성을 공유할 수 있도록 RCS(Rich Communication Suite) 서비스를 지원할 수 있는 사용자 단말간 스크린 쉐어 방법을 제공하는 데 있다.Accordingly, an object of the present invention is to solve the above-described problems, and an object of the present invention is to provide a counterpart that is arbitrarily designated by a terminal screen during a communication service between a user terminal such as a call or a chat through a mobile communication network without installing a separate application. And multimedia information (e.g. videos, maps, document files, web pages, whiteboards, notes, etc.) can be shared between users' terminals, allowing them to share rich emotions as if they are talking to someone nearby during a two-way conversation or chat. The present invention provides a screen sharing method between user terminals capable of supporting a Rich Communication Suite (RCS) service.
먼저, 본 발명의 특징을 요약하면, 본 발명의 일면에 따른, 스크린 쉐어 방법은, 이동통신 네트워크 상의 사용자 단말 간 스크린 쉐어 방법에 있어서, 서로 통신 세션이 연결된 사용자 단말들 간에 스크린 공유를 위한 동기화된 다른 통신 세션을 설정하는 단계; 상기 사용자 단말들 중 어느 한 단말에서 사용자가 스크린 상에서 임의의 모양으로 지정하는 공유 영역에 대한 영상 데이터를 상기 동기화된 다른 통신 세션을 통하여 전송하는 단계; 및 상기 사용자 단말들 중 다른 단말에서 상기 영상 데이터를 수신하여 스크린 상에 디스플레이하는 단계를 포함한다.First, to summarize the features of the present invention, the screen sharing method according to an aspect of the present invention, in the screen sharing method between the user terminal on the mobile communication network, the synchronized for screen sharing between the user terminals connected to each other communication session Establishing another communication session; Transmitting image data for a shared area designated by the user in any shape on a screen through one of the user terminals through the other synchronized communication sessions; And receiving the image data at another terminal of the user terminals and displaying the image data on the screen.
음성 통화, 영상 통화, 또는 인스턴트 메시징을 위한 상기 통신 세션의 연결 중에 상기 사용자 단말들 중 어느 한 단말에서 공유 요청 메시지를 받는 네트워크 상의 서버가 상기 사용자 단말들 중 다른 단말의 응답을 요청하여 수신한 메시지에 따라 상기 동기화된 다른 통신 세션을 설정할 수 있다.A message received by a server on a network receiving a sharing request message from one of the user terminals during a connection of the communication session for voice call, video call, or instant messaging by requesting a response from another of the user terminals. The synchronized other communication session can be established.
상기 다른 단말로부터 수신한 상기 메시지가 스크린 공유를 거부하는 메시지인 경우 상기 서버는 상기 동기화된 다른 통신 세션을 설정하지 않고 데이터베이스에 관리되는 일정 광고 콘텐츠를 상기 다른 단말로 전송하여 스크린 상에 디스플레이하도록 제어할 수 있다.If the message received from the other terminal is a message for rejecting screen sharing, the server controls to transmit the predetermined advertisement content managed in a database to the other terminal for display on the screen without setting up the other synchronized communication session. can do.
상기 동기화된 다른 통신 세션을 설정하는 네트워크 상의 서버는 상기 영상 데이터를 상기 다른 단말로 전송하되, 상기 사용자 단말들의 단말 정보가 관리되는 데이터베이스를 참조하여 상기 다른 단말의 해상도에 따라 상기 영상 데이터를 변환해 전송할 수 있다.The server on the network setting up the other synchronized communication session transmits the image data to the other terminal, and converts the image data according to the resolution of the other terminal by referring to a database in which the terminal information of the user terminals is managed. Can transmit
상기 공유 영역은, 터치 스크린 상에 터치로 지정하거나, 스크린 상의 커서를 키보드의 이동키로 이동시켜 지정하는, 원형, 사각형, 삼각형, 또는 다른 임의의 지정 영역일 수 있다.The shared area may be a circular, square, triangular, or any other designated area that is designated as a touch on the touch screen or by moving a cursor on the screen with a moving key of the keyboard.
상기 다른 단말은 스크린에 현재 디스플레이하고 있는 표시창 이외의 별도의 분할된 창을 생성하여 상기 영상 데이터를 상기 모양과 같게 디스플레이하거나, 스크린의 미리 지정된 위치에 상기 영상 데이터를 상기 모양과 같게 디스플레이하여 이미 디스플레이하고 있던 바탕화면, 또는 표시창 위에 디스플레이할 수 있다.The other terminal generates a separate partitioned window other than the display window currently displayed on the screen and displays the image data as shown in the above shape, or displays the image data as shown in the shape at a predetermined position on the screen and displays the image already. You can display it on your desktop or on the display.
상기 다른 단말은 상기 영상 데이터가 디스플레이되고 있는 터치 스크린 상의 창을 사용자가 터치로 이동시키거나, 상기 영상 데이터가 디스플레이되고 있는 창을 키보드로 선택하여 이동시킴에 따라, 상기 영상 데이터를 해당 위치에서 디스플레이할 수 있다.The other terminal displays the image data at the corresponding location as the user moves the window on the touch screen on which the image data is displayed by a touch or selects and moves the window on which the image data is displayed with a keyboard. can do.
상기 공유 영역에서의 영상의 변화에 따라 상기 다른 단말에서 상기 영상 데이터의 변화를 실시간 반영하여 디스플레이할 수 있다.According to the change of the image in the sharing area, the other terminal may display the change of the image data in real time.
상기 공유 영역의 영상이 상기 사용자 단말들의 스크린 상에 디스플레이되고, 상기 사용자 단말들의 사용자들이 상기 공유 영역의 영상 상에 터치한 점 또는 경로가 상기 사용자 단말들의 스크린 상에 디스플레이될 수 있다.An image of the sharing area may be displayed on the screen of the user terminals, and a point or a path touched by the users of the user terminal on the image of the sharing area may be displayed on the screen of the user terminals.
상기 공유 영역에 포함된 지도가 상기 사용자 단말들의 스크린 상에 디스플레이되고, 상기 사용자 단말들의 사용자들이 상기 지도 상에 터치한 점 또는 경로가 상기 사용자 단말들의 스크린 상에 디스플레이 될 수 있다.The map included in the sharing area may be displayed on the screen of the user terminals, and a point or a path touched by the users of the user terminals on the map may be displayed on the screen of the user terminals.
상기 공유 영역에 동영상이 포함되면 상기 영상 데이터와 함께 해당 음성 데이터도 전송되어 이를 수신하는 상기 다른 단말에서도 상기 영상 데이터의 디스플레이와 함께 해당 음성 데이터를 출력할 수 있다.When the video is included in the sharing area, the corresponding audio data is also transmitted along with the image data, and the other terminal receiving the same may output the corresponding audio data together with the display of the image data.
음성 통화, 영상 통화, 또는 인스턴트 메시징을 위한 상기 통신 세션의 연결 중에 상기 사용자 단말들 중 어느 한 단말에서 화이트 보드 공유 요청 메시지를 받는 네트워크 상의 서버가 상기 사용자 단말들 중 다른 단말의 응답을 요청하여 수신한 메시지에 따라 화이트 보드 공유를 위한 통신 세션을 설정하며, 상기 화이트 보드 공유를 위한 상기 사용자 단말들의 각각의 화이트 보드 창이 디스플레이되는 동안, 상기 공유 영역이 지정될 수 있다.During connection of the communication session for voice call, video call, or instant messaging, a server on a network that receives a whiteboard sharing request message from one of the user terminals requests and receives a response from another of the user terminals. The sharing area may be designated while establishing a communication session for whiteboard sharing according to a message, and while each whiteboard window of the user terminals for whiteboard sharing is displayed.
상기 사용자 단말들의 각각의 화이트 보드 창에서, 사용자들이 터치한 점 또는 경로가 상기 사용자 단말들의 스크린 상에 공유되어 디스플레이되거나, 상기 사용자 단말들에서 각각 상기 화이트 보드 창에 불러온 웹페이지 또는 파일(이미지, 동영상, 또는 문서를 포함함.)이 상기 사용자 단말들의 스크린 상에 공유되어 디스플레이될 수 있다.In each whiteboard window of the user terminals, a point or path touched by the user is shared and displayed on the screen of the user terminals, or a web page or file (image) loaded in the whiteboard window respectively in the user terminals. , Video, or document) may be shared and displayed on the screen of the user terminals.
상기 사용자 단말들에서 상기 화이트 보드 창에 네트워크 상의 다른 서버에 저장된 파일을 불러와 공유하며 상기 파일에 작업한 내역이 상기 다른 서버에 업데이트되어 저장될 수 있다.The user terminals may load and share a file stored in another server on a network in the whiteboard window, and the work performed on the file may be updated and stored in the other server.
서로 다른 통신사의 네트워크와 연동을 통한, 음성 통화, 영상 통화, 또는 인스턴트 메시징을 위한 상기 통신 세션의 연결 중에, 상기 사용자 단말들 중 어느 한 단말에서 공유 요청 메시지를 받는 네트워크 상의 상기 서로 다른 통신사의 각 서버가 연동으로 상기 사용자 단말들 중 다른 단말의 응답을 요청하여 수신한 메시지에 따라 상기 동기화된 다른 통신 세션을 설정할 수 있다.During connection of the communication session for voice call, video call, or instant messaging through interworking with networks of different carriers, each of the different carriers on the network receiving a sharing request message from any one of the user terminals. The server may establish another synchronized communication session according to a message received by requesting a response from another terminal among the user terminals.
상기 각 서버는 자사 네트워크에 등록된 상기 다른 단말의 단말 정보가 관리되는 데이터베이스를 참조하여 상기 다른 단말의 해상도에 따라 상기 영상 데이터를 변환해 전송할 수 있다.Each server may convert and transmit the image data according to the resolution of the other terminal by referring to a database in which terminal information of the other terminal registered in its network is managed.
그리고, 본 발명의 다른 일면에 따른, 이동 통신 단말은, 서로 통신 세션이 연결된 이동통신 네트워크 상의 다른 단말과의 스크린 공유를 위한 공유 요청 메시지를 생성하여 전송하는 수단; 및 상기 공유 요청 메시지를 받는 네트워크 상의 서버가 상기 다른 단말의 응답을 요청하여 수신한 메시지에 따라 동기화된 다른 통신 세션을 설정함에 따라, 사용자가 스크린 상에서 임의의 모양으로 지정한 공유 영역에 대한 영상 데이터를 생성하여 전송하는 수단을 포함하고, 상기 다른 단말에서 상기 영상 데이터를 수신하여 스크린 상에 상기 공유 영역의 영상을 디스플레이하고, 상기 공유 영역의 영상이 상기 사용자 단말들의 스크린 상에 공유되어 디스플레이될 수 있다.According to another aspect of the present invention, a mobile communication terminal includes: means for generating and transmitting a sharing request message for screen sharing with another terminal on a mobile communication network to which a communication session is connected; And as the server on the network receiving the sharing request message sets up another communication session synchronized with the received message by requesting a response from the other terminal, the image data of the sharing area designated by the user in an arbitrary shape on the screen. And means for generating and transmitting the image data from the other terminal to display the image of the sharing area on a screen, and the image of the sharing area may be shared and displayed on the screen of the user terminals. .
본 발명에 따른 사용자 단말간 스크린 쉐어 방법에 따르면, 통화, 채팅 등 사용자 단말간 통신 서비스 중에 다양한 멀티미디어 정보가 사용자 단말간에 공유되도록 지원함으로써, 멀티미디어 경험을 동시에 공유하도록 하며, 콘텐츠 공유를 통해 가족, 지인과 유대 관계를 향상시킬 수 있고, 지인의 관심 분야를 실시간 편리하게 파악할 수 있어서, 양자 대화나 채팅 중에도 가까이 있는 사람과 이야기 하듯이 풍부한 감성을 공유할 수 있도록 RCS 서비스를 지원할 수 있다.According to the screen sharing method between user terminals according to the present invention, by supporting a variety of multimedia information between the user terminal during the communication service between the user terminal, such as a call, chat, so as to share the multimedia experience at the same time, through the content sharing family, acquaintances You can improve your relationship with each other, and you can easily grasp the interests of your friends in real time, and support RCS services so that you can share rich emotions as if you are talking with someone nearby even during two-way conversation or chat.
또한, 대용량 멀티미디어 데이터 트래픽에 대하여도 끊김없는 양질의 RCS 서비스를 통해서 풍부한 모바일 통신 환경을 제공할 수 있으며, 광고주와 연계한 광고 서비스를 연동하여 사용자와 광고주에게 편리한 광고 환경을 제공할 수도 있다. In addition, it is possible to provide a rich mobile communication environment through a seamless high quality RCS service even for a large amount of multimedia data traffic, and may provide a convenient advertising environment for users and advertisers by interworking with the advertising service linked with the advertiser.
도 1은 본 발명의 일실시예에 따른 RCS 서비스를 위한 이동통신 네트워크 환경을 설명하기 도면이다.1 is a diagram illustrating a mobile communication network environment for an RCS service according to an embodiment of the present invention.
도 2는 본 발명의 일실시예에 따른 RCS 서비스를 통한 스크린 쉐어 방법을 설명하기 흐름도이다.2 is a flowchart illustrating a screen sharing method through an RCS service according to an embodiment of the present invention.
도 3은 도 2의 스크린 쉐어의 일례를 설명하기 위한 도면이다.3 is a view for explaining an example of the screen share of FIG.
도 4는 도 2의 스크린 쉐어로서 지도 공유를 설명하기 위한 도면이다.FIG. 4 is a diagram for explaining map sharing as the screen share of FIG. 2.
도 5는 도 2의 스크린 쉐어로서 동영상 공유를 설명하기 위한 도면이다.FIG. 5 is a diagram for describing video sharing as the screen share of FIG. 2.
도 6은 본 발명의 다른 실시예에 따른 RCS 서비스를 통한 화이트 보드 기능 중 스크린 쉐어 방법을 설명하기 흐름도이다.6 is a flowchart illustrating a screen sharing method among whiteboard functions through an RCS service according to another embodiment of the present invention.
도 7은 도 6의 화이트 보드 기능을 설명하기 위한 도면이다.FIG. 7 is a diagram for describing a whiteboard function of FIG. 6.
도 8은 도 6의 화이트 보드 기능 중 스크린 쉐어를 설명하기 위한 도면이다.FIG. 8 is a diagram for describing a screen share among the whiteboard functions of FIG. 6.
도 9는 본 발명의 또 다른 실시예에 따른 타사망과의 연동 시의 스크린 쉐어 방법을 설명하기 흐름도이다.9 is a flowchart illustrating a screen sharing method when interworking with a third party network according to another exemplary embodiment of the present invention.
이하 첨부 도면들 및 첨부 도면들에 기재된 내용들을 참조하여 본 발명의 바람직한 실시예를 상세하게 설명하지만, 본 발명이 실시예들에 의해 제한되거나 한정되는 것은 아니다. Hereinafter, exemplary embodiments of the present invention will be described in detail with reference to the accompanying drawings and the contents described in the accompanying drawings, but the present invention is not limited or limited to the embodiments.
도 1은 본 발명의 일실시예에 따른 RCS(Rich Communication Suite) 서비스를 위한 이동통신 네트워크 환경을 설명하기 도면이다.1 is a diagram illustrating a mobile communication network environment for a Rich Communication Suite (RCS) service according to an embodiment of the present invention.
도 1을 참조하면, 본 발명의 일실시예에 따른 이동통신 시스템(100)은, RCS 서버(141)와 IMS(IP Multimedia Subsystem) 서버(142) 등을 포함하는 이동통신 네트워크(140)와 연동하는 기지국(111)이나 AP(Access Point)(112)를 통해서 이동통신 서비스를 제공받는 사용자 단말들(110, 120)을 포함하며, 이와 같은 어느 통신사의 이동통신 네트워크(140)를 통해 이동통신 서비스를 제공받는 사용자 단말들(110, 120)은 네트워크들(140, 150) 간 연동으로 다른 통신사의 이동통신 네트워크(150)와 연결되어 이동통신 서비스를 제공받는 사용자 단말들(130)과도 통화, 인스턴트 메시징, 문자(SMS, MMS 등) 메시징 등 단말간에 이루어지는 모든 통신 서비스를 이용할 수 있다. 다른 통신사의 이동통신 네트워크(150) 역시 RCS 서버(151)와 IMS 서버(152) 등을 포함할 수 있으며, 사용자 단말들(130)은 자사의 네트워크(150)와 연동하는 기지국(131)이나 AP(132)를 통해서 이동통신 서비스를 제공받을 수 있다. Referring to FIG. 1, the mobile communication system 100 according to an embodiment of the present invention interworks with a mobile communication network 140 including an RCS server 141 and an IMS (IP Multimedia Subsystem) server 142. It includes the user terminal (110, 120) receiving a mobile communication service through the base station 111 or the AP (Access Point) 112, the mobile communication service through any mobile communication network 140 of such a carrier The user terminals 110 and 120 receiving the call are connected to the mobile communication network 150 of another telecommunication company through interworking between the networks 140 and 150, and the user terminal 130 also receives a mobile communication service. All communication services between terminals such as messaging and text messaging (SMS, MMS, etc.) can be used. The mobile communication network 150 of another communication company may also include an RCS server 151 and an IMS server 152, and the user terminals 130 may access a base station 131 or an AP that interworks with its network 150. Through 132, a mobile communication service may be provided.
여기서, 서로 연동하는 이동통신 네트워크들(140, 150)은 이동통신사가 운용하는 3G(WCDMA)/4G(LTE) 이동통신과 IP(Internet Protocol)에 따른 인터넷 통신이 가능하도록 지원하는 네트워크(IP 네트워크, 이동통신네트워크 포함)일 수 있다. 게이트웨이 프록시 등을 갖는 IMS 서버(142/152)는 RCS 서버(141/151)와 연동하도록 확장이 가능하며, 본 발명의 스크린 쉐어 동안 사용자 단말들 간에 주고 받는 메시지, 콘텐츠, 데이터 등을 저장하여 일시적 장애시 재전송하는 기능 등을 수행할 수 있다. 또한, 본 발명에서 언급되는 사용자 단말(들)은 기지국을 통하여 3G(WCDMA)/4G(LTE) 이동통신을 위한 네트워크에 접속하여 이동통신 서비스를 제공받을 수 있거나, AP를 통해서 와이파이(WiFi: Wireless Fidelity) 프로토콜에 따른 무선 인터넷을 지원받아 데이터 통신이 가능한 이동통신 단말로서, 스마트폰, 아이폰 등을 포함할 수 있고, 이러한 두가지 통신이 항상 가능한 단말뿐만아니라, 경우에 따라서는3G(WCDMA) 또는 4G(LTE) 이동통신 서비스만을 받을 수 있는 이동통신 단말일 수도 있고, AP를 통한 무선 인터넷 서비스만을 제공받을 수 있는 이동통신 단말일 수도 있다. Herein, the mobile communication networks 140 and 150 interworking with each other are 3G (WCDMA) / 4G (LTE) mobile communication operated by a mobile telecommunication company and a network supporting Internet communication according to IP (Internet Protocol). , Mobile communication network). The IMS server 142/152 having a gateway proxy and the like can be extended to interwork with the RCS server 141/151. The IMS server 142/152 stores messages, contents, data, etc. exchanged between user terminals during the screen share of the present invention. It can retransmit in case of failure. In addition, the user terminal (s) referred to in the present invention can be provided with a mobile communication service by accessing a network for 3G (WCDMA) / 4G (LTE) mobile communication through a base station, or Wi-Fi (WiFi: Wireless) through the AP A mobile communication terminal capable of data communication by supporting the wireless Internet according to the Fidelity protocol, which may include a smartphone, an iPhone, and the like, and is not only a terminal capable of such two types of communication but also 3G (WCDMA) or 4G in some cases. (LTE) may be a mobile communication terminal that can receive only mobile communication services, or may be a mobile communication terminal that can receive only wireless Internet services through the AP.
특히, 본 발명에서는 음성 통화, 영상 통화, 또는 인스턴트 메시징 등 서로 통신 세션이 연결된 사용자 단말들(2 이상의 단말들) 간에 스크린 공유를 위한 동기화된 다른 통신 세션을 설정한 후, 사용자 단말들 중 어느 한 단말에서 사용자가 스크린 상에서 임의의 모양(원형, 사각형, 삼각형, 또는 다른 임의의 모양)으로 지정하는 공유 영역에 대한 영상 데이터를 상기 동기화된 다른 통신 세션을 통하여 전송함으로써, 사용자 단말들 중 다른 단말에서 해당 영상 데이터를 수신하여 스크린 상에 디스플레이할 수 있도록 하였다.Particularly, in the present invention, after establishing another synchronized communication session for screen sharing between user terminals (two or more terminals) connected to each other such as voice call, video call, or instant messaging, one of the user terminals In another terminal of the user terminals, the terminal transmits the image data for the shared area designated by the user in any shape (circular, square, triangular, or any other shape) on the screen through the other synchronized communication session. The image data can be received and displayed on the screen.
음성 통화, 영상 통화, 또는 인스턴트 메시징 등을 위한 사용자 단말들 간 통신 세션의 연결 중에 사용자 단말들 중 어느 한 단말(예, 발신자)은, 소정 수단을 통해 이동통신 네트워크 상의 다른 단말과의 스크린 공유를 위한 공유 요청 메시지를 생성하여 전송하며, 상기 공유 요청 메시지를 받는 네트워크 상의 RCS 서버(자사 서버 또는 다른 통신사와 연동 시 각 네트워크의 통신사 서버)가 사용자 단말들 중 다른 단말(예, 착신자)의 응답을 요청하여 수신한 메시지에 따라 상기 동기화된 다른 통신 세션을 설정할 수 있다. 이에 따라, 상기 공유 요청 메시지를 전송한 단말(예, 발신자)은, 사용자가 스크린 상에서 임의의 모양으로 지정한 공유 영역에 대하여 소정 수단을 통해 영상 데이터를 생성하여 전송할 수 있으며, 이에 따라 상대방 단말(예, 착신자)에서 해당 영상 데이터를 수신하여 스크린 상에 상기 공유 영역의 영상을 디스플레이하고, 상기 공유 영역의 영상이 상기 사용자 단말들의 스크린 상에 공유되어 디스플레이됨으로써, 같은 공유 영역에 대한 영상을 실시간으로 공유할 수 있게 된다. During connection of a communication session between user terminals for voice call, video call, or instant messaging, any one of the user terminals (eg, the caller) may share the screen with another terminal on the mobile communication network through a predetermined means. It generates and transmits a sharing request message for the network, and an RCS server (communication server of each network when interworking with its own server or another communication company) on the network receiving the sharing request message receives a response from another terminal (eg, called party) among user terminals. The synchronized other communication session may be established according to the request and the received message. Accordingly, the terminal (eg, the sender) that has transmitted the sharing request message may generate and transmit image data through a predetermined means to the sharing area designated by the user in an arbitrary shape on the screen. Receiving the video data from the called party and displaying the image of the sharing area on the screen, and the image of the sharing area is shared and displayed on the screen of the user terminals, thereby sharing the image of the same sharing area in real time. You can do it.
이와 같은 사용자 단말간 스크린 쉐어(share) 방법에 따라, 음성 통화, 영상 통화, 또는 인스턴트 메시징(메신저, 카톡 등) 등 사용자 단말간 통신 서비스 중에 다양한 멀티미디어 정보가 사용자 단말간에 공유되도록 지원함으로써, 멀티미디어 경험을 동시에 공유하도록 하며, 콘텐츠 공유를 통해 가족, 지인과 유대 관계를 향상시킬 수 있고, 지인의 관심 분야를 실시간 편리하게 파악할 수 있어서, 양자 대화나 채팅 중에도 가까이 있는 사람과 이야기 하듯이 풍부한 감성을 공유할 수 있도록 RCS 서비스를 지원할 수 있다. 또한, 대용량 멀티미디어 데이터 트래픽에 대하여도 끊김없는 양질의 RCS 서비스를 통해서 풍부한 모바일 통신 환경을 제공할 수 있으며, 광고주와 연계한 광고 서비스를 연동하여 사용자와 광고주에게 편리한 광고 환경을 제공할 수도 있다. According to the screen sharing method between the user terminals, the multimedia experience is supported by allowing various multimedia information to be shared among the user terminals during a communication service between user terminals such as voice call, video call, or instant messaging (messenger, katok, etc.). Share content with others, improve content relationships with family and acquaintances, and share your interests in real-time and conveniently, sharing rich emotions as if you're talking to someone nearby during a two-way conversation or chat. It can support RCS service. In addition, it is possible to provide a rich mobile communication environment through a seamless high quality RCS service even for a large amount of multimedia data traffic, and may provide a convenient advertising environment for users and advertisers by interworking with the advertising service linked with the advertiser.
이하 이와 같은 본 발명의 일실시예에 따른 이동통신 시스템(100)에서의 이동통신 네트워크(140/150)를 통한 스크린 쉐어 방법을 도 2내지 도 9를 참조하여 자세히 설명한다. Hereinafter, the screen sharing method through the mobile communication network 140/150 in the mobile communication system 100 according to an embodiment of the present invention will be described in detail with reference to FIGS. 2 to 9.
도 2는 본 발명의 일실시예에 따른 RCS 서비스를 통한 스크린 쉐어 방법을 설명하기 흐름도이다. 여기서는 이동통신 네트워크(140)를 이용하는 사용자 A 단말(110)과 사용자 B 단말(120) 간의 스크린 쉐어 방법을 설명한다. 2 is a flowchart illustrating a screen sharing method through an RCS service according to an embodiment of the present invention. Here, the screen sharing method between the user A terminal 110 and the user B terminal 120 using the mobile communication network 140 will be described.
먼저, 사용자 A 단말(110)과 사용자 B 단말(120) 간에 음성 통화, 영상 통화, 또는 인스턴트 메시징(메신저, 카톡 등) 등을 위한 통신 세션이 연결되어 있다. 사용자 A 단말(110)과 사용자 B 단말(120) 중 어느 것이나 구분없이 발신자 또는 착신자 단말일 수 있다. First, a communication session for a voice call, a video call, or an instant messaging (messenger, katok, etc.) is connected between the user A terminal 110 and the user B terminal 120. Any one of the user A terminal 110 and the user B terminal 120 may be a caller or a called party terminal without distinction.
이때, 이와 같은 통신 세션이 연결 상태에 있는 동안, 사용자 A 단말(110)의 사용자는 사용자 B 단말(120)과 스크린 공유할 공유 영역을 지정한다(S110). 예를 들어, 사용자 A 단말(110)의 스크린이 터치 스크린인 경우에 사용자는 터치 스크린 상에 터치로 원형, 사각형, 삼각형, 또는 다른 임의 모양으로 공유 영역을 지정할 수 있으며, 사용자 A 단말(110)의 스크린이 터치 스크린이 아닌 경우에 사용자는 스크린 상의 커서를 키보드(기계식 또는 화면 상의 키보드)의 이동키로 이동시켜 원형, 사각형, 삼각형, 또는 다른 임의 모양으로 공유 영역을 지정할 수 있다(도 3의 점선 원형 공유 영역 참조). 이때 사용자는 스크린 상에서 사용자 B 단말(120)과 공유하고 싶지 않은 개인 정보가 표시되는 영역을 피하여 공유 영역을 지정함으로써, 공유 영역 이외의 개인 정보 표시 영역에 대하여는 개인의 사적인 비밀이 보호될 수 있다. At this time, while the communication session is in the connected state, the user of the user A terminal 110 designates a sharing area to be screen-shared with the user B terminal 120 (S110). For example, when the screen of the user A terminal 110 is a touch screen, the user may designate a sharing area in a circular, square, triangle, or other arbitrary shape by a touch on the touch screen, and the user A terminal 110 If the screen is not a touch screen, the user can move the cursor on the screen with the navigation keys of the keyboard (mechanical or on-screen keyboard) to designate the shared area in a circle, rectangle, triangle, or other arbitrary shape (dotted line in FIG. 3). Circular share area). In this case, the user can designate a sharing area avoiding an area where personal information not to be shared with the user B terminal 120 is displayed on the screen, so that the private secret of the individual can be protected for the personal information display area other than the sharing area.
이에 따라 사용자 A 단말(110)의 소정 수단은 사용자 B 단말(120)과의 스크린 공유를 위한 공유 요청 메시지를 생성하여 전송할 수 있다(S111). 여기서, 영역 지정(S110) 후 공유 요청 메시지를 전송(S111)하는 것을 예로 들어 설명하지만, 경우에 따라서는 공유 요청 메시지를 전송(S111) 한 후 하기하는 수락 메시지를 수신한 후(S113) 영역 지정(S110)이 이루어 질 수도 있다. 이와 같이 사용자 A 단말(110)이 공유 요청 메시지를 생성하여 전송하면, RCS 서버(141)는 이를 수신하여, 사용자 B 단말(120)로 전달하여 응답을 요청한다.Accordingly, the predetermined means of the user A terminal 110 may generate and transmit a sharing request message for screen sharing with the user B terminal 120 (S111). Here, an example is described in which the sharing request message is transmitted after the region designation (S110) (S111). However, in some cases, the region designation is received after receiving the acceptance message (S113). (S110) may be made. As such, when the user A terminal 110 generates and transmits a sharing request message, the RCS server 141 receives the request and delivers the shared request message to the user B terminal 120 to request a response.
RCS 서버(141)로부터 공유 요청 메시지를 수신하는 사용자 B 단말(120)에는 "공유 요청 수락?"등으로 표시될 수 있고, 사용자는 단말에서 '예'(수락), 또는 '아니오'(거부) 등을 선택함으로써 사용자 B 단말(120)은 해당 응답(수락/거부) 메시지를 전송할 수 있고, 이에 따라 해당 응답(수락/거부) 메시지가 RCS 서버(141)를 통해 사용자 A 단말(110)로 전송될 수 있다(S112). The user B terminal 120 receiving the sharing request message from the RCS server 141 may be displayed as "accept sharing request?", Etc., and the user may answer 'yes' or 'no' in the terminal. The user B terminal 120 may transmit a corresponding response (accept / deny) message, and thus the corresponding response (accept / deny) message is transmitted to the user A terminal 110 through the RCS server 141. It may be (S112).
이때 상기 응답 메시지가 수락을 나타내면(S113), RCS 서버(141)는 사용자 A 단말(110)과 사용자 B 단말(120) 간에 스크린 공유를 위한 동기화된 다른 통신 세션을 설정할 수 있다(S120). 상기 응답 메시지가 거부를 나타내면(S113), RCS 서버(141)는 스크린 공유를 위한 통신 세션을 설정하지 않고 사용자 A 단말(110)과 사용자 B 단말(120)은 기존 화면을 유지하면서 통화 상태를 유지할 수 있으며, 경우에 따라서는 RCS 서버(141)는 데이터베이스에 관리되는 일정 광고 콘텐츠를 사용자 B 단말(120)로 전송하여 스크린 상에 디스플레이하도록 제어할 수 있다(S114). 이를 위하여 RCS 서버(141)는 데이터베이스에 광고주로부터 등록받은 소정 이미지, 동영상(음성포함 가능) 등의 광고 콘텐츠를 저장 관리할 수 있으며, 광고주들의 다양한 광고 콘텐츠들을 소정 정책에 따라 사용자 B 단말(120)로 전송할 수 있다. 사용자 B 단말(120)은, 스크린에 현재 디스플레이하고 있는 표시창 이외의 별도의 분할된 창을 생성하여 광고 콘텐츠를 디스플레이하거나, 스크린의 미리 지정된 위치에 광고 콘텐츠를 디스플레이하여 이미 디스플레이하고 있던 바탕화면, 또는 표시창 위에 디스플레이할 수도 있다. In this case, if the response message indicates acceptance (S113), the RCS server 141 may establish another synchronized communication session for screen sharing between the user A terminal 110 and the user B terminal 120 (S120). If the response message indicates rejection (S113), the RCS server 141 does not establish a communication session for screen sharing and the user A terminal 110 and the user B terminal 120 maintain the call state while maintaining the existing screen. In some cases, the RCS server 141 may control to transmit the schedule advertisement content managed in the database to the user B terminal 120 to display on the screen (S114). To this end, the RCS server 141 may store and manage advertisement contents such as a predetermined image and a video (including audio) registered by an advertiser in a database, and the user B terminal 120 may manage various advertisement contents of advertisers according to a predetermined policy. Can be sent to. The user B terminal 120 displays the advertisement content by generating a separate partitioned window other than the display window currently displayed on the screen, or displays the advertisement content at a predetermined position on the screen, and the desktop which has already been displayed, or It can also be displayed on the display.
한편, RCS 서버(141)에 의해 사용자 A 단말(110)과 사용자 B 단말(120) 간에 스크린 공유를 위한 동기화된 통신 세션이 설정되어 유지되는 동안, 사용자 A 단말(110)의 소정 수단은 위와 같이 임의의 모양으로 지정한 스크린 상의 공유 영역에 대한 영상 데이터를 생성하여 전송할 수 있으며(S121), RCS 서버(141)는 이를 수신하여 사용자 B 단말(120)로 전송할 수 있다(S123). 다만, RCS 서버(141)는 사용자 A 단말(110)로부터 수신한 영상 데이터를 사용자 B 단말(120)로 전송하기 전에, 사용자 B 단말(120)의 해상도에 따라 해당 단말에서 디스플레이 가능한 형태로 해당 영상 데이터를 변환할 수 있다(S122). 예를 들어, RCS 서버(141)는 네트워크 상의 단말 관리 시스템 등을 통하여 가입자들의 각 단말 프로파일 정보(예, 단말 번호, 단말 기종, CPU 성능, 시리얼번호, 해상도 등)를 수집하고, 데이터베이스에 관리할 수 있으며, 이를 참조하여 사용자 B 단말(120)가 디스플레이 가능한 해상도에 맞게 그 이하의 해상도에 해당하는 데이터로 영상 데이터를 변환한 후(S122), 사용자 B 단말(120)로 전송할 수 있다(S123).Meanwhile, while the synchronized communication session for screen sharing between the user A terminal 110 and the user B terminal 120 is established and maintained by the RCS server 141, the predetermined means of the user A terminal 110 are as described above. The image data of the shared area on the screen designated as an arbitrary shape may be generated and transmitted (S121), and the RCS server 141 may receive it and transmit it to the user B terminal 120 (S123). However, before transmitting the image data received from the user A terminal 110 to the user B terminal 120, the RCS server 141 may display the corresponding image in a form that can be displayed on the terminal according to the resolution of the user B terminal 120. Data may be converted (S122). For example, the RCS server 141 collects each terminal profile information (eg, terminal number, terminal model, CPU performance, serial number, resolution, etc.) of subscribers through a terminal management system on a network, and manages the database. In operation S122, the user B terminal 120 may convert the image data into data corresponding to a resolution lower than or equal to the resolution that can be displayed (S122) and transmit the same to the user B terminal 120 (S123). .
이에 따라 사용자 B 단말(120)은 해당 영상 데이터를 수신하여 스크린 상에 해당 공유 영역의 영상을 디스플레이할 수 있다(S124). 이와 같이 상기 공유 영역의 영상이 사용자 단말들(110, 120)의 스크린 상에 공유되어 디스플레이됨으로써, 같은 공유 영역에 대한 영상을 실시간으로 공유할 수 있게 된다(S130). Accordingly, the user B terminal 120 may receive the corresponding image data and display the image of the corresponding shared area on the screen (S124). As such, the image of the sharing area is shared and displayed on the screens of the user terminals 110 and 120, so that the image of the same sharing area may be shared in real time (S130).
사용자 A 단말(110)로부터 영상 데이터를 수신하여 디스플레이하는 사용자 B 단말(120)은, 도 3과 같이, 스크린의 미리 지정된 위치에 해당 영상 데이터를 사용자 A 단말(110)에서 지정한 모양(원형, 사각형, 삼각형, 또는 다른 임의 모양)과 같게 디스플레이하여 이미 디스플레이하고 있던 바탕화면, 또는 다른 표시창 위에 (중첩적으로) 디스플레이할 수 있다. 이외에도, 사용자 B 단말(120)은, 스크린에 현재 디스플레이하고 있는 표시창 이외의 별도의 분할된 창(삭제 가능한 창)을 생성하여 해당 영상 데이터를 사용자 A 단말(110)에서 지정한 모양과 같게 같은 모양으로 디스플레이할 수 있다. The user B terminal 120 that receives and displays the image data from the user A terminal 110 has a shape (circular or square) designated by the user A terminal 110 at the predetermined position of the screen as shown in FIG. 3. , Triangles, or any other shape) can be displayed (overlapping) on the desktop that was already displayed, or on another display. In addition, the user B terminal 120 generates a separate partitioned window (deletable window) other than the display window currently displayed on the screen, and displays the corresponding image data in the same shape as that specified in the user A terminal 110. Can be displayed.
또한, 위와 같이 사용자 A 단말(110)와 사용자 B 단말(120)에 공유 영역이 공유되어 디스플레이되는 동안, 사용자 B 단말(120)에서는 해당 공유영역이 디스플레이되고 있는 터치 스크린 상의 창을 사용자가 자유롭게 이동시킬 수 있다(S140). 예를 들어, 사용자는 해당 공유영역이 디스플레이되고 있는 터치 스크린 상의 창을 터치로 밀어 터치가 끝나는 다른 위치로 가도록 이동시킬 수 있으며, 또는 터치 스크린이 아닌 경우에는 해당 창은 키보드의 소정키로 선택하여 이동키(상하좌우 화살표키)로 이동시킴에 따라 원하는 위치로 이동될 수 있고, 이에 따라 해당 영상 데이터를 해당 위치에서 디스플레이할 수 있다. In addition, while the shared area is shared and displayed on the user A terminal 110 and the user B terminal 120 as described above, the user B terminal 120 freely moves the window on the touch screen on which the corresponding shared area is displayed. Can be made (S140). For example, the user can move a window on the touch screen on which the corresponding shared area is displayed by touching it to move to another position where the touch ends. Alternatively, if the touch screen is not a touch screen, the window is selected by using a predetermined key on the keyboard. By moving to (up, down, left, and right arrow keys), it can be moved to a desired position, and thus image data can be displayed at the corresponding position.
이와 같이, 사용자 A 단말(110)과 사용자 B 단말(120) 간에 스크린 공유를 위한 동기화된 통신 세션이 설정되어 유지되는 동안, 사용자 A 단말(110)에서의 해당 공유 영역에서의 영상(예, 동영상)은 변화될 수 있으며, 이에 따라 사용자 A 단말(110)에서 해당 공유 영역에 대한 영상 데이터를 바로바로 전송함으로써 해당 영상의 변화가 바로바로 실시간 사용자 B 단말(120)에도 반영되어 디스플레이된다. As such, while the synchronized communication session for screen sharing between the user A terminal 110 and the user B terminal 120 is established and maintained, an image (eg, a video) in the corresponding sharing area of the user A terminal 110 is maintained. ) Can be changed, so that the user A terminal 110 directly transmits the image data of the corresponding shared area so that the change of the corresponding image is immediately reflected on the real-time user B terminal 120 and displayed.
동영상이 아닌 경우에도 사용자 A 단말(110)과 사용자 B 단말(120)의 각 사용자는 해당 공유 영역의 영상이 디스플레이되는 창(또는 영상) 상에 손가락 또는 스타일러스 펜 등을 통하여 점 터치 또는 길게 연장되는 터치 등을 할 수 있으며 이에 따라 사용자 A 단말(110)과 사용자 B 단말(120)의 스크린 상에 동시에 해당 터치한 점 또는 터치 경로가 디스플레이될 수 있다. Even if the video is not a video, each user of the user A terminal 110 and the user B terminal 120 may be touched or extended by a point or finger through a finger or a stylus on a window (or image) on which an image of the corresponding shared area is displayed. A touch or the like may be performed, and thus a corresponding touch point or a touch path may be displayed on the screen of the user A terminal 110 and the user B terminal 120 at the same time.
예를 들어, 도 4와 같이, 사용자 A 단말(110)은 스크린에 지도를 디스플레이하는 동안 해당 지도의 전부 또는 일부의 영역을 공유 영역으로 지정할 수 있고, 이에 따라 해당 공유 영역에 포함된 지도가 사용자 A 단말(110)과 사용자 B 단말(120)의 스크린 상에 디스플레이될 수 있고, 사용자 A 단말(110)과 사용자 B 단말(120)의 각 사용자가 해당 지도 영상 상에 터치한 점 또는 터치 경로가 각 사용자 단말의 스크린 상에 디스플레이될 수 있다. 이와 같은 지도 스크린 쉐어에 따라 음성 통화, 영상 통화, 또는 인스턴트 메시징 등을 수행하면서 옆에서 지도를 펼쳐 놓고 설명하는 효과가 있고, 이에 따라 사용자들은 더욱 편리하게 약속장소 등에 대한 길안내를 받을 수 있다. For example, as shown in FIG. 4, while displaying a map on the screen, the user A terminal 110 may designate all or a portion of the map as a shared area, so that the map included in the shared area is a user. A point or a touch path that each user of terminal A 110 and terminal B 120 touches on a corresponding map image may be displayed on a screen of terminal A 110 and terminal B 120. It can be displayed on the screen of each user terminal. According to the map screen share as described above, while performing a voice call, a video call, or an instant messaging, the map is spread out next to the user and thus, the user can receive the guidance of the appointment place more conveniently.
또한, 도 5와 같이, 사용자 A 단말(110)에서 지정한 공유 영역에 동영상이 포함되면, 사용자 A 단말(110)에서는 해당 영상 데이터의 전송 시에 이와 함께 해당 음성 데이터도 전송할 수 있으며, 이에 따라 이를 수신하는 사용자 B 단말(120)에서도 해당 영상 데이터의 디스플레이와 함께 해당 음성 데이터를 출력함으로써, 동영상에 포함된 음악 등을 동시에 들으면서 통화할 수도 있게 된다. In addition, as shown in FIG. 5, when the video is included in the sharing area designated by the user A terminal 110, the user A terminal 110 may also transmit the corresponding audio data when the corresponding video data is transmitted. The receiving user B terminal 120 also outputs the corresponding audio data together with the display of the corresponding image data, thereby making it possible to make a call while simultaneously listening to music included in the video.
한편, 게이트웨이 프록시 등을 갖는 IMS 서버(142/152)는 RCS 서버(141/151)와 연동하도록 확장이 가능하며, IMS 서버(142/152)는 위와 같은 스크린 쉐어 기능의 수행 동안 사용자 단말들(110, 120, 130) 간에 주고 받는 메시지, 콘텐츠, 데이터 등을 저장하여 일시적 장애시 재전송하는 기능 등을 수행할 수 있다(S150). 예를 들어, 사용자 단말들(110, 120, 130) 중 전부 또는 일부가 전원이 오프되거나 네트워크 상의 장애 등으로 일시적으로 스크린 쉐어 기능이 정지된 경우에, 전원이나 네트워크가 정상적으로 복귀되면, IMS 서버(142/152)는 사용자 A 단말(110)과 사용자 B 단말(120) 간에 위와 같이 스크린 공유를 위한 동기화된 통신 세션이 다시 설정되도록 RCS 서버(141/151)로 요청함으로써 RCS 서버(141/151)가 기존의 스크린 공유를 위한 해당 동기화된 통신 세션이 이루어지도록 제어할 수 있게 할 수 있다. IMS 서버(142/152)는 이와 같이 세션이 복귀되면, 전원이 오프되거나 네트워크 상의 장애 동안 사용자 단말들(110, 120, 130)에서 발생하였으나 전송이 실패된 메시지, 콘텐츠, 데이터 등을 해당 단말로 전송해 줄 수 있다. On the other hand, the IMS server 142/152 having a gateway proxy or the like can be extended to work with the RCS server 141/151, the IMS server 142/152 is the user terminal (s) during the performance of the screen share function as described above ( 110, 120, 130 may store a message, content, data, etc. sent and received between the retransmission in the case of a temporary failure (S150). For example, when all or some of the user terminals 110, 120, 130 are temporarily turned off due to a power off or a failure in the network, the IMS server ( 142/152 requests the RCS server 141/151 to re-establish the synchronized communication session for screen sharing as described above between the user A terminal 110 and the user B terminal 120 so that the RCS server 141/151 May control to allow the corresponding synchronized communication session for existing screen sharing to take place. When the session is restored, the IMS server 142/152 returns messages, contents, data, etc., which have occurred in the user terminals 110, 120, and 130, but failed to be transmitted to the corresponding terminal during power off or network failure. I can send it.
도 6은 본 발명의 다른 실시예에 따른 RCS 서비스를 통한 화이트 보드 기능 중 스크린 쉐어 방법을 설명하기 흐름도이다. 여기서는 이동통신 네트워크(140)를 이용하는 사용자 A 단말(110)과 사용자 B 단말(120) 간에 화이트 보드 기능을 공유하면서 스크린 쉐어하는 방법을 설명한다. 6 is a flowchart illustrating a screen sharing method among whiteboard functions through an RCS service according to another embodiment of the present invention. Here, a method of screen sharing while sharing the whiteboard function between the user A terminal 110 and the user B terminal 120 using the mobile communication network 140 will be described.
먼저, 사용자 A 단말(110)과 사용자 B 단말(120) 간에 음성 통화, 영상 통화, 또는 인스턴트 메시징(메신저, 카톡 등) 등을 위한 통신 세션이 연결되어 있다. 사용자 A 단말(110)과 사용자 B 단말(120) 중 어느 것이나 구분없이 발신자 또는 착신자 단말일 수 있다. First, a communication session for a voice call, a video call, or an instant messaging (messenger, katok, etc.) is connected between the user A terminal 110 and the user B terminal 120. Any one of the user A terminal 110 and the user B terminal 120 may be a caller or a called party terminal without distinction.
이때, 이와 같은 통신 세션이 연결 상태에 있는 동안, 사용자 A 단말(110)의 사용자는 사용자 A 단말(110)의 화이트 보드 기능을 실행하여 사용자 B 단말(120)과 화이트 보드 창을 통해 글쓰기를 공유하거나, 웹페이지, 문서, 이미지 등을 불러와 서로 공유하고 협업하기를 시도할 수 있다. 사용자는 사용자 A 단말(110)에서 아이콘 또는 메뉴를 통하여 화이트 보드 기능을 선택함으로써, 사용자 A 단말(110)는 화이트 보드 기능을 위한 수단 구동하여 도 7 또는 도 8과 같이 화이트 보드 창을 스크린에 디스플레이할 수 있으며, 필요에 따라 화이트 보드에 불러온 문서 파일의 편집 등을 위하여 키보드 창도 디스플레이할 수 있다(S210). 이와 같이 화이트 보드 창이 디스플레이 된 후 자동으로 또는 사용자의 메뉴 선택으로 사용자 A 단말(110)의 소정 수단은 사용자 B 단말(120)과의 화이트 보드 공유를 위한 공유 요청 메시지를 생성하여 전송할 수 있다(S211). 여기서, 화이트 보드 창의 디스플레이 후 화이트 보드 공유 요청 메시지를 전송(S211)하는 것을 예로 들어 설명하지만, 경우에 따라서는 화이트 보드 공유 요청 메시지를 전송(S211) 한 후 하기하는 수락 메시지를 수신한 후(S212) 화이트 보드 창의 디스플레이가 이루어 질 수도 있다. 이와 같이 사용자 A 단말(110)이 화이트 보드 공유 요청 메시지를 생성하여 전송하면, RCS 서버(141)는 이를 수신하여, 사용자 B 단말(120)로 전달하여 응답을 요청한다.At this time, while the communication session is in the connected state, the user of the user A terminal 110 executes the whiteboard function of the user A terminal 110 to share writing with the user B terminal 120 through the whiteboard window. Or, you can import web pages, documents, images, and more to share and collaborate with each other. The user selects a whiteboard function through an icon or a menu in the user A terminal 110, so that the user A terminal 110 drives a means for the whiteboard function to display a whiteboard window on the screen as shown in FIG. If necessary, a keyboard window may also be displayed for editing the document file loaded on the whiteboard as necessary (S210). As described above, after the whiteboard window is displayed or by a user's menu selection, the predetermined means of the user A terminal 110 may generate and transmit a sharing request message for sharing the whiteboard with the user B terminal 120 (S211). ). Here, an example of transmitting a whiteboard sharing request message after display of the whiteboard window is described as an example. However, in some cases, after receiving a whiteboard sharing request message (S211) and receiving an acceptance message described below (S212). A whiteboard window may be displayed. As described above, when the user A terminal 110 generates and transmits a whiteboard sharing request message, the RCS server 141 receives the request and delivers it to the user B terminal 120 to request a response.
RCS 서버(141)로부터 공유 요청 메시지를 수신하는 사용자 B 단말(120)에는 "화이트 보드 공유 요청 수락?"등으로 표시될 수 있고, 사용자는 단말에서 '예'(수락), 또는 '아니오'(거부) 등을 선택함으로써 사용자 B 단말(120)은 해당 응답(수락/거부) 메시지를 전송할 수 있고, 이에 따라 해당 응답(수락/거부) 메시지가 RCS 서버(141)를 통해 사용자 A 단말(110)로 전송될 수 있다(S212). 이때 상기 응답 메시지가 수락을 나타내면, 사용자 B 단말(120)의 스크린에도 화이트 보드 창이 디스플레이되며(S213), RCS 서버(141)는 사용자 A 단말(110)과 사용자 B 단말(120) 간에 화이트 보드 공유를 위한 동기화된 다른 통신 세션을 설정함으로써(S220), 사용자 A 단말(110)과 사용자 B 단말(120)은 화이트 보드 창이 실시간 연동되어 같은 내용을 디스플레이하게 된다. The user B terminal 120 receiving the sharing request message from the RCS server 141 may be displayed as "Accept whiteboard sharing request?", Etc., and the user may select 'yes' (accept) or 'no' ( User B terminal 120 may transmit a corresponding response (accept / deny) message, so that the corresponding response (accept / deny) message may be transmitted through the RCS server 141. It may be transmitted to (S212). In this case, if the response message indicates acceptance, the whiteboard window is also displayed on the screen of the user B terminal 120 (S213), and the RCS server 141 shares the white board between the user A terminal 110 and the user B terminal 120. By setting up another synchronized communication session for the user (S220), the user A terminal 110 and the user B terminal 120 is in real time interlocked with the whiteboard window to display the same content.
한편, RCS 서버(141)에 의해 사용자 A 단말(110)과 사용자 B 단말(120) 간에 화이트 보드 공유를 위한 동기화된 통신 세션이 설정되어 유지되는 동안, 도 7과 같이, 사용자 단말들(사용자 A 단말(110) 또는 사용자 B 단말(120))의 각각의 화이트 보드 창에서, 사용자들이 터치한 점 또는 경로가 사용자 단말들의 스크린 상에 공유되어 디스플레이될 수 있다(S221). 즉, 사용자들이 터치로 글쓰기를 하면 사용자 단말들의 스크린 상에 공유되어 글쓰기된 같은 내용을 서로 보면서 회의나 토론이 가능하다. 이외에도, 사용자들은 각 사용자 단말에서 화이트 보드 창에 파일(이미지, 동영상, 또는 문서를 포함함.)을 불러와 서로 공유할 수 있으며, 또한 웹페이지를 불러와 서로 공유되어 디스플레이되도록 할 수도 있다. 파일(이미지, 동영상, 또는 문서를 포함함.) 불러오기는 각 사용자 단말에 저장된 파일(이미지, 동영상, 또는 문서를 포함함.)일 수도 있으며, 클라우드 서버인 IMS 서버(142)에 저장된 파일일 수도 있다. 웹페이지 불러오기는 소정의 창에 URL(uniform resource locator)을 입력하여 인터넷을 통해 불러옴으로써 화이트 보드 창에 디스플레이될 수 있다. Meanwhile, while the synchronized communication session for whiteboard sharing is established between the user A terminal 110 and the user B terminal 120 by the RCS server 141, as shown in FIG. In each whiteboard window of the terminal 110 or the user B terminal 120, a point or a path touched by the user may be shared and displayed on the screen of the user terminals (S221). That is, when the user writes by touch, the meeting or discussion is possible while viewing the same content that is shared and written on the screen of the user terminals. In addition, users can load and share files (including images, videos, or documents) in a whiteboard window at each user terminal, and can also share web pages by displaying them. Importing a file (including an image, a video, or a document) may be a file (including an image, a video, or a document) stored in each user terminal, or a file stored in an IMS server 142 which is a cloud server. It may be. The web page retrieval may be displayed in a whiteboard window by retrieving it via the Internet by inputting a uniform resource locator (URL) in a predetermined window.
특히, 편집가능한 문서 파일을 불러와 협업이 가능하며, 이를 위하여, 예를 들어, 사용자 A 단말(110)는 IMS 서버(142)에 저장된 공유 파일들을 검색하여 필요한 파일을 요청할 수 있으며(S230), 이에 따라 IMS 서버(142)는 RCS 서버(141)로 해당 파일을 전송하고(S231), RCS 서버(141)는 사용자 A 단말(110)로 해당 파일을 전송하며(S232), 사용자 B 단말(120)로도 해당 파일을 전송하여(S233), 사용자 단말들의 스크린 상에 공유되어 디스플레이되도록 할 수 있다. 도 8과 같이, 사용자 단말들은 각 화이트 보드 창에 네트워크 상의 RCS 서버(141)와 IMS 서버(142)의 연동으로 IMS 서버(142)의 파일을 불러와 공유하는 동안, 각 사용자는 해당 문서 파일(예, TXT, WORD, HWP, PDF, EXCEL 등)에 작업(예, 글자 추가, 수정, 변경 등 편집)할 수 있으며, 작업한 내역은 RCS 서버(141)와 IMS 서버(142)의 연동으로 IMS 서버(142)의 해당 파일에 업데이트되어 저장되도록 할 수 있다(S240). In particular, it is possible to collaborate by bringing up the editable document file. For this purpose, for example, the user A terminal 110 may search for shared files stored in the IMS server 142 and request a necessary file (S230). Accordingly, the IMS server 142 transmits the file to the RCS server 141 (S231), the RCS server 141 transmits the file to the user A terminal 110 (S232), and the user B terminal 120 ) Can also be transmitted to the file (S233), so that it can be shared and displayed on the screen of the user terminals. As shown in FIG. 8, while the user terminals load and share a file of the IMS server 142 by interworking between the RCS server 141 and the IMS server 142 on the network in each whiteboard window, each user has a corresponding document file ( For example, you can work on TXT, WORD, HWP, PDF, EXCEL, etc. (eg, add, edit, change, edit, etc.), and the work history is linked to the RCS server 141 and the IMS server 142 with IMS. The server 142 may be updated and stored in the corresponding file (S240).
한편, 이와 같은 화이트 보드 창이 각 사용자 단말에 공유 되는 동안에도, 도 2에서 설명한 바와 같이 공유 영역을 지정해 스크린 공유가 가능하다(S250). 즉, 음성 통화, 영상 통화, 또는 인스턴트 메시징 등을 위한 사용자 단말들 간 통신 세션이 연결되어 있고, 또한 위와 같은 화이트 보드 기능이 공유되는 세션이 연결되어 있는 동안에도, 사용자 단말들 중 어느 한 단말, 소정 수단을 통해 이동통신 네트워크 상의 다른 단말과의 스크린 공유를 위한 공유 요청 메시지를 생성하여 전송할 수 있다. 공유 요청 메시지를 전송하는 단말의 스크린에는 화이트 보드 창 이외에 동영상, 이미지, 웹 페이지 등을 디스플레이하는 다른 창이 더 있을 수 있으며, 사용자는 이와 같은 스크린의 일부 영역을 상대방 단말과 공유하기 위하여 공유 요청하는 경우이다. 이와 같은 상기 공유 요청 메시지를 받는 네트워크 상의 RCS 서버(자사 서버 또는 다른 통신사와 연동 시 각 네트워크의 통신사 서버)가 사용자 단말들 중 다른 단말의 응답을 요청하여 수신한 메시지에 따라 상기 동기화된 다른 통신 세션을 설정할 수 있다. 이에 따라, 상기 공유 요청 메시지를 전송한 단말은, 사용자가 스크린 상에서 임의의 모양으로 지정한 공유 영역에 대하여 소정 수단을 통해 영상 데이터를 생성하여 전송할 수 있으며, 이에 따라 도 8과 같이 상대방 단말에서 해당 영상 데이터를 수신하여 스크린 상에 상기 공유 영역의 영상을 디스플레이하고, 상기 공유 영역의 영상이 상기 사용자 단말들의 스크린 상에 공유되어 디스플레이됨으로써, 같은 공유 영역에 대한 영상을 실시간으로 공유할 수 있게 된다. On the other hand, while such a whiteboard window is shared to each user terminal, screen sharing is possible by designating a sharing area as described with reference to FIG. 2 (S250). That is, while a communication session between user terminals for voice call, video call, or instant messaging is connected, and a session in which the whiteboard function is shared is connected, any one of the user terminals, Through a predetermined means, a sharing request message for screen sharing with other terminals on the mobile communication network may be generated and transmitted. In addition to the whiteboard window, there may be another window displaying a video, an image, a web page, etc. on the screen of the terminal that transmits the sharing request message, and the user requests to share a certain area of the screen with the other terminal. to be. The RCS server (communication server of each network when interworking with its own server or another communication company) on the network receiving the sharing request message requests the response of the other terminal among the user terminals to the other synchronized communication session according to the received message. Can be set. Accordingly, the terminal that has transmitted the sharing request message may generate and transmit image data to a sharing area designated by the user in a random shape on a screen through a predetermined means. By receiving data and displaying an image of the sharing area on the screen, and the image of the sharing area is shared and displayed on the screen of the user terminals, it is possible to share the image for the same sharing area in real time.
도 9는 본 발명의 또 다른 실시예에 따른 타사망과의 연동 시의 스크린 쉐어 방법을 설명하기 흐름도이다. 여기서는 자사의 이동통신 네트워크(140)를 이용하는 사용자 A 단말(110)과 타사의 이동통신 네트워크(150)를 이용하는 사용자 B 단말(130) 간의 스크린 쉐어 방법을 설명한다. 여기서는 자사의 RCS 서버(141)와 RCS 서버(151) 간에 연동이 이루어지는 것이 추가되며 나머지 과정은 도 2의 과정과 유사하다. 또한 이와 같은 RCS 서버(141)와 RCS 서버(151) 간의 연동 과정은 도 6과 같은 화이트 보드 기능의 실현에도 유사하게 적용될 수 있다. 9 is a flowchart illustrating a screen sharing method when interworking with a third party network according to another exemplary embodiment of the present invention. Here, the screen sharing method between the user A terminal 110 using the mobile communication network 140 of the company and the user B terminal 130 using the mobile communication network 150 of the other company will be described. Here, the interworking between the RCS server 141 and the RCS server 151 is added, and the rest of the process is similar to that of FIG. In addition, the interworking process between the RCS server 141 and the RCS server 151 may be similarly applied to the realization of the whiteboard function as shown in FIG. 6.
예를 들어, 사용자 A 단말(110)과 사용자 B 단말(130) 간에 음성 통화, 영상 통화, 또는 인스턴트 메시징(메신저, 카톡 등) 등을 위한 통신 세션이 연결되어 있다. 사용자 A 단말(110)과 사용자 B 단말(130) 중 어느 것이나 구분없이 발신자 또는 착신자 단말일 수 있다. For example, a communication session for voice call, video call, or instant messaging (messenger, katok, etc.) is connected between user A terminal 110 and user B terminal 130. Any one of the user A terminal 110 and the user B terminal 130 may be a caller or a called party terminal without distinction.
이때, 이와 같은 통신 세션이 연결 상태에 있는 동안, 사용자 A 단말(110)의 사용자는 사용자 B 단말(130)과 스크린 공유할 공유 영역(원형, 사각형, 삼각형, 또는 다른 임의 모양)을 지정한다(S310). 이때 사용자는 스크린 상에서 사용자 B 단말(130)과 공유하고 싶지 않은 개인 정보가 표시되는 영역을 피하여 공유 영역을 지정함으로써, 공유 영역 이외의 개인 정보 표시 영역에 대하여는 개인의 사적인 비밀이 보호될 수 있다. At this time, while the communication session is in the connected state, the user of the user A terminal 110 designates a sharing area (circular, square, triangular, or other arbitrary shape) to be screen-shared with the user B terminal 130 ( S310). In this case, the user may designate a sharing area avoiding an area where personal information that is not desired to be shared with the user B terminal 130 is displayed on the screen, so that a private secret of the individual may be protected for the personal information display area other than the sharing area.
이에 따라 사용자 A 단말(110)의 소정 수단은 사용자 B 단말(130)과의 스크린 공유를 위한 공유 요청 메시지를 생성하여 전송할 수 있다(S311). 여기서, 영역 지정(S310) 후 공유 요청 메시지를 전송(S311)하는 것을 예로 들어 설명하지만, 경우에 따라서는 공유 요청 메시지를 전송(S311) 한 후 하기하는 수락 메시지를 수신한 후(S312) 영역 지정(S310)이 이루어 질 수도 있다. 이와 같이 사용자 A 단말(110)이 공유 요청 메시지를 생성하여 전송하면, RCS 서버(141)는 이를 수신하여, 타사의 RCS 서버(151)로 전송하며, RCS 서버(142)는 이를 사용자 B 단말(130)로 전달하여 응답을 요청한다.Accordingly, the predetermined means of the user A terminal 110 may generate and transmit a sharing request message for screen sharing with the user B terminal 130 (S311). Herein, an example is described in which a sharing request message is transmitted (S311) after region designation (S310). However, in some cases, an area is designated after receiving an acceptance message (S312). (S310) may be made. When the user A terminal 110 generates and transmits a sharing request message as described above, the RCS server 141 receives this and transmits it to the RCS server 151 of the other company, and the RCS server 142 transmits it to the user B terminal ( And request a response.
RCS 서버(151)로부터 공유 요청 메시지를 수신하는 사용자 B 단말(130)에는 "공유 요청 수락?"등으로 표시될 수 있고, 사용자는 단말에서 '예'(수락), 또는 '아니오'(거부) 등을 선택함으로써 사용자 B 단말(130)은 해당 응답(수락/거부) 메시지를 전송할 수 있고, 이에 따라 해당 응답(수락/거부) 메시지가 RCS 서버(151), RCS 서버(141)를 통해 사용자 A 단말(110)로 전송될 수 있다(S312). The user B terminal 130 receiving the sharing request message from the RCS server 151 may be displayed as "accept sharing request?", Etc., and the user may answer 'yes' or 'no' in the terminal. The user B terminal 130 may transmit a corresponding response (accept / deny) message by selecting the corresponding message, and thus the corresponding response (accept / deny) message may be transmitted to the user A through the RCS server 151 and the RCS server 141. It may be transmitted to the terminal 110 (S312).
이때 상기 응답 메시지가 수락을 나타내면, 서로 다른 통신사의 각 RCS 서버(141, 151)의 연동으로 사용자 A 단말(110)과 사용자 B 단말(130) 간에 스크린 공유를 위한 동기화된 다른 통신 세션을 설정할 수 있다(S320). 상기 응답 메시지가 거부를 나타내면, RCS 서버(151)는 스크린 공유를 위한 통신 세션을 설정하지 않고 데이터베이스에 관리되는 일정 광고 콘텐츠를 사용자 B 단말(130)로 전송하여 스크린 상에 디스플레이하도록 제어할 수 있다(도 2 참조). In this case, if the response message indicates acceptance, another synchronized communication session for screen sharing between the user A terminal 110 and the user B terminal 130 may be established by interworking with each of the RCS servers 141 and 151 of different telecommunication companies. There is (S320). If the response message indicates the rejection, the RCS server 151 may control to display certain advertisement content managed in a database to the user B terminal 130 for display on the screen without establishing a communication session for screen sharing. (See Figure 2).
한편, RCS 서버들(141, 151)에 의해 사용자 A 단말(110)과 사용자 B 단말(130) 간에 스크린 공유를 위한 동기화된 통신 세션이 설정되어 유지되는 동안, 사용자 A 단말(110)의 소정 수단은 위와 같이 임의의 모양으로 지정한 스크린 상의 공유 영역에 대한 영상 데이터를 생성하여 전송할 수 있으며(S321), RCS 서버들(141, 151)은 이를 수신하여 사용자 B 단말(130)로 전송할 수 있다(S323). 다만, RCS 서버(151)는 사용자 A 단말(110)로부터 수신한 영상 데이터를 자사 네트워크에 등록된 사용자 B 단말(130)로 전송하기 전에, 사용자 B 단말(130)의 해상도에 따라 해당 단말에서 디스플레이 가능한 형태로 해당 영상 데이터를 변환할 수 있다(S322). 예를 들어, RCS 서버(151)는 네트워크 상의 단말 관리 시스템 등을 통하여 가입자들의 각 단말 프로파일 정보(예, 단말 번호, 단말 기종, CPU 성능, 시리얼번호, 해상도 등)를 수집하고, 데이터베이스에 관리할 수 있으며, 이를 참조하여 사용자 B 단말(130)가 디스플레이 가능한 해상도에 맞게 그 이하의 해상도에 해당하는 데이터로 영상 데이터를 변환한 후(S322), 사용자 B 단말(130)로 전송할 수 있다(S323).Meanwhile, while the synchronized communication session for screen sharing between the user A terminal 110 and the user B terminal 130 is established and maintained by the RCS servers 141 and 151, predetermined means of the user A terminal 110 are maintained. May generate and transmit the image data for the shared area on the screen designated as an arbitrary shape as described above (S321), and the RCS servers 141 and 151 may receive it and transmit it to the user B terminal 130 (S323). ). However, before the RCS server 151 transmits the image data received from the user A terminal 110 to the user B terminal 130 registered in the company network, the RCS server 151 displays the terminal according to the resolution of the user B terminal 130. The image data may be converted in a possible form (S322). For example, the RCS server 151 collects terminal profile information (eg, terminal number, terminal model, CPU performance, serial number, resolution, etc.) of subscribers through a terminal management system on a network, and manages the database. With reference to this, after the user B terminal 130 converts the image data into data corresponding to a resolution lower than or equal to the displayable resolution (S322), the user B terminal 130 may transmit the image data to the user B terminal 130 (S323). .
이에 따라 사용자 B 단말(130)은 해당 영상 데이터를 수신하여 스크린 상에 해당 공유 영역의 영상을 디스플레이할 수 있다(S324). 이와 같이 상기 공유 영역의 영상이 사용자 단말들(110, 130)의 스크린 상에 공유되어 디스플레이됨으로써, 같은 공유 영역에 대한 영상을 실시간으로 공유할 수 있게 된다(S330). Accordingly, the user B terminal 130 may receive the image data and display the image of the corresponding shared area on the screen (S324). As such, the image of the sharing area is shared and displayed on the screens of the user terminals 110 and 130, thereby enabling sharing of the image of the same sharing area in real time (S330).
사용자 A 단말(110)로부터 영상 데이터를 수신하여 디스플레이하는 사용자 B 단말(130)은, 도 3과 같이, 스크린의 미리 지정된 위치에 해당 영상 데이터를 사용자 A 단말(110)에서 지정한 모양(원형, 사각형, 삼각형, 또는 다른 임의 모양)과 같게 디스플레이하여 이미 디스플레이하고 있던 바탕화면, 또는 다른 표시창 위에 (중첩적으로) 디스플레이할 수 있다. 이외에도, 사용자 B 단말(130)은, 스크린에 현재 디스플레이하고 있는 표시창 이외의 별도의 분할된 창(삭제 가능한 창)을 생성하여 해당 영상 데이터를 사용자 A 단말(110)에서 지정한 모양과 같게 같은 모양으로 디스플레이할 수 있다. User B terminal 130 for receiving and displaying the image data from the user A terminal 110, as shown in Fig. 3, the shape (circular, square) specified by the user A terminal 110 to the corresponding video data at a predetermined position of the screen , Triangles, or any other shape) can be displayed (overlapping) on the desktop that was already displayed, or on another display. In addition, the user B terminal 130 generates a separate partitioned window (deletable window) other than the display window currently displayed on the screen, and displays the corresponding image data in the same shape as that specified in the user A terminal 110. Can be displayed.
또한, 위와 같이 사용자 A 단말(110)와 사용자 B 단말(130)에 공유 영역이 공유되어 디스플레이되는 동안, 사용자 B 단말(130)에서는 해당 공유영역이 디스플레이되고 있는 터치 스크린 상의 창을 사용자가 자유롭게 이동시킬 수 있다(S340). 예를 들어, 사용자는 해당 공유영역이 디스플레이되고 있는 터치 스크린 상의 창을 터치로 밀어 터치가 끝나는 다른 위치로 가도록 이동시킬 수 있으며, 또는 터치 스크린이 아닌 경우에는 해당 창은 키보드의 소정키로 선택하여 이동키(상하좌우 화살표키)로 이동시킴에 따라 원하는 위치로 이동될 수 있고, 이에 따라 해당 영상 데이터를 해당 위치에서 디스플레이할 수 있다. 좀 더 자세한 설명은 도 2에서 설명한 바와 같다. In addition, while the shared area is shared and displayed on the user A terminal 110 and the user B terminal 130 as described above, the user B terminal 130 freely moves the window on the touch screen on which the corresponding shared area is displayed. Can be made (S340). For example, the user can move a window on the touch screen on which the corresponding shared area is displayed by touching it to move to another position where the touch ends. Alternatively, if the touch screen is not a touch screen, the window is selected by using a predetermined key on the keyboard. By moving to (up, down, left, and right arrow keys), it can be moved to a desired position, and thus image data can be displayed at the corresponding position. A more detailed description is as described with reference to FIG. 2.
여기서도, 게이트웨이 프록시 등을 갖는 IMS 서버(142/152)는 RCS 서버(141/151)와 연동하도록 확장이 가능하며, IMS 서버(142/152)는 위와 같은 스크린 쉐어 기능의 수행 동안 사용자 단말들(110, 120, 130) 간에 주고 받는 메시지, 콘텐츠, 데이터 등을 저장하여 일시적 장애시 재전송하는 기능 등을 수행할 수 있다(S150). 예를 들어, 사용자 단말들(110, 120, 130) 중 전부 또는 일부가 전원이 오프되거나 네트워크 상의 장애 등으로 일시적으로 스크린 쉐어 기능이 정지된 경우에, 전원이나 네트워크가 정상적으로 복귀되면, IMS 서버(142/152)는 사용자 A 단말(110)과 사용자 B 단말(130) 간에 위와 같이 스크린 공유를 위한 동기화된 통신 세션이 다시 설정되도록 RCS 서버(141/151)로 요청함으로써 RCS 서버(141/151)가 기존의 스크린 공유를 위한 해당 동기화된 통신 세션이 이루어지도록 제어할 수 있게 할 수 있다. IMS 서버(142/152)는 이와 같이 세션이 복귀되면, 전원이 오프되거나 네트워크 상의 장애 동안 사용자 단말들(110, 120, 130)에서 발생하였으나 전송이 실패된 메시지, 콘텐츠, 데이터 등을 해당 단말, 특히, 자사의 네트워크에 등록된(가입된) 단말로 전송해 줄 수 있다.Here, the IMS server 142/152 having a gateway proxy or the like can be extended to interwork with the RCS server 141/151, and the IMS server 142/152 can perform the user terminal (s) while performing the screen sharing function as described above. 110, 120, 130 may store a message, content, data, etc. sent and received between the retransmission in the case of a temporary failure (S150). For example, when all or some of the user terminals 110, 120, 130 are temporarily turned off due to a power off or a failure in the network, the IMS server ( 142/152 requests the RCS server 141/151 to reestablish the synchronized communication session for screen sharing as described above between the user A terminal 110 and the user B terminal 130 so that the RCS server 141/151 May control to allow the corresponding synchronized communication session for existing screen sharing to take place. When the session is restored, the IMS server 142/152 returns messages, contents, data, etc., which have occurred in the user terminals 110, 120, and 130, but failed to be transmitted during power off or network failure. In particular, it can be transmitted to a terminal registered (subscribed) in its network.
이상과 같이 본 발명은 비록 한정된 실시예와 도면에 의해 설명되었으나, 본 발명은 상기의 실시예에 한정되는 것은 아니며, 본 발명이 속하는 분야에서 통상의 지식을 가진 자라면 이러한 기재로부터 다양한 수정 및 변형이 가능하다. 예를 들어, 사용자 A 단말(110), 사용자 B 단말(120/130)에 대하여 각각의 기능을 수행하는 스크린 쉐어 방법을 기술하였으나, 사용자 A 단말(110) 또는 사용자 B 단말(120/130)에서 수행하는 각 기능을 위한 수단들은 모든 사용자 단말들(110, 120, 130)에 포함되어 동작될 수 있다. 그러므로, 본 발명의 범위는 설명된 실시예에 국한되어 정해져서는 아니 되며, 후술하는 특허청구범위뿐 아니라 이 특허청구범위와 균등한 것들에 의해 정해져야 한다.As described above, the present invention has been described by way of limited embodiments and drawings, but the present invention is not limited to the above embodiments, and those skilled in the art to which the present invention pertains various modifications and variations from such descriptions. This is possible. For example, although the screen sharing method for performing the respective functions for the user A terminal 110 and the user B terminal 120/130 has been described, the user A terminal 110 or the user B terminal 120/130 is described. Means for performing each function may be included in all the user terminals (110, 120, 130) to operate. Therefore, the scope of the present invention should not be limited to the described embodiments, but should be determined not only by the claims below but also by the equivalents of the claims.

Claims (17)

  1. 이동통신 네트워크 상의 사용자 단말 간 스크린 쉐어 방법에 있어서,In the screen sharing method between user terminals on a mobile communication network,
    서로 통신 세션이 연결된 사용자 단말들 간에 스크린 공유를 위한 동기화된 다른 통신 세션을 설정하는 단계;Establishing another synchronized communication session for screen sharing between user terminals connected to each other;
    상기 사용자 단말들 중 어느 한 단말에서 사용자가 스크린 상에서 임의의 모양으로 지정하는 공유 영역에 대한 영상 데이터를 상기 동기화된 다른 통신 세션을 통하여 전송하는 단계; 및Transmitting image data for a shared area designated by the user in any shape on a screen through one of the user terminals through the other synchronized communication sessions; And
    상기 사용자 단말들 중 다른 단말에서 상기 영상 데이터를 수신하여 스크린 상에 디스플레이하는 단계 Receiving the image data from the other terminal of the user terminal and displaying on the screen
    를 포함하는 것을 특징으로 하는 스크린 쉐어 방법.Screen sharing method comprising a.
  2. 제1항에 있어서,The method of claim 1,
    음성 통화, 영상 통화, 또는 인스턴트 메시징을 위한 상기 통신 세션의 연결 중에 상기 사용자 단말들 중 어느 한 단말에서 공유 요청 메시지를 받는 네트워크 상의 서버가 상기 사용자 단말들 중 다른 단말의 응답을 요청하여 수신한 메시지에 따라 상기 동기화된 다른 통신 세션을 설정하는 것을 특징으로 하는 스크린 쉐어 방법.A message received by a server on a network receiving a sharing request message from one of the user terminals during a connection of the communication session for voice call, video call, or instant messaging by requesting a response from another of the user terminals. And establishing another synchronized communication session according to the method.
  3. 제2항에 있어서,The method of claim 2,
    상기 다른 단말로부터 수신한 상기 메시지가 스크린 공유를 거부하는 메시지인 경우 상기 서버는 상기 동기화된 다른 통신 세션을 설정하지 않고 데이터베이스에 관리되는 일정 광고 콘텐츠를 상기 다른 단말로 전송하여 스크린 상에 디스플레이하도록 제어하는 것을 특징으로 하는 스크린 쉐어 방법.If the message received from the other terminal is a message for rejecting screen sharing, the server controls to transmit the predetermined advertisement content managed in a database to the other terminal for display on the screen without setting up the other synchronized communication session. Screen sharing method characterized in that.
  4. 제1항에 있어서,The method of claim 1,
    상기 동기화된 다른 통신 세션을 설정하는 네트워크 상의 서버는 상기 영상 데이터를 상기 다른 단말로 전송하되, 상기 사용자 단말들의 단말 정보가 관리되는 데이터베이스를 참조하여 상기 다른 단말의 해상도에 따라 상기 영상 데이터를 변환해 전송하는 것을 특징으로 하는 스크린 쉐어 방법.The server on the network setting up the other synchronized communication session transmits the image data to the other terminal, and converts the image data according to the resolution of the other terminal by referring to a database in which the terminal information of the user terminals is managed. Screen sharing method characterized in that the transmission.
  5. 제1항에 있어서,The method of claim 1,
    상기 공유 영역은, 터치 스크린 상에 터치로 지정하거나, 스크린 상의 커서를 키보드의 이동키로 이동시켜 지정하는, 원형, 사각형, 삼각형, 또는 다른 임의의 지정 영역인 것을 특징으로 하는 스크린 쉐어 방법.And said sharing area is a circular, square, triangular, or any other designated area designated by a touch on a touch screen or by moving a cursor on the screen with a moving key of a keyboard.
  6. 제1항에 있어서,The method of claim 1,
    상기 다른 단말은 스크린에 현재 디스플레이하고 있는 표시창 이외의 별도의 분할된 창을 생성하여 상기 영상 데이터를 상기 모양과 같게 디스플레이하거나, 스크린의 미리 지정된 위치에 상기 영상 데이터를 상기 모양과 같게 디스플레이하여 이미 디스플레이하고 있던 바탕화면, 또는 표시창 위에 디스플레이하는 것을 특징으로 하는 스크린 쉐어 방법.The other terminal generates a separate partitioned window other than the display window currently displayed on the screen and displays the image data as shown in the above shape, or displays the image data as shown in the shape at a predetermined position on the screen and displays the image already. The screen sharing method characterized by displaying on the desktop or the display window was used.
  7. 제1항에 있어서,The method of claim 1,
    상기 다른 단말은 상기 영상 데이터가 디스플레이되고 있는 터치 스크린 상의 창을 사용자가 터치로 이동시키거나, 상기 영상 데이터가 디스플레이되고 있는 창을 키보드로 선택하여 이동시킴에 따라, 상기 영상 데이터를 해당 위치에서 디스플레이하는 것을 특징으로 하는 스크린 쉐어 방법.The other terminal displays the image data at the corresponding location as the user moves the window on the touch screen on which the image data is displayed by a touch or selects and moves the window on which the image data is displayed with a keyboard. Screen sharing method characterized in that.
  8. 제1항에 있어서,The method of claim 1,
    상기 공유 영역에서의 영상의 변화에 따라 상기 다른 단말에서 상기 영상 데이터의 변화를 실시간 반영하여 디스플레이하는 것을 특징으로 하는 스크린 쉐어 방법.And sharing the change of the image data in the other terminal in real time according to the change of the image in the sharing area.
  9. 제1항에 있어서,The method of claim 1,
    상기 공유 영역의 영상이 상기 사용자 단말들의 스크린 상에 디스플레이되고, 상기 사용자 단말들의 사용자들이 상기 공유 영역의 영상 상에 터치한 점 또는 경로가 상기 사용자 단말들의 스크린 상에 디스플레이되는 것을 특징으로 하는 스크린 쉐어 방법.An image of the sharing area is displayed on the screen of the user terminals, and a point or a path touched by the users of the user terminal on the image of the sharing area is displayed on the screen of the user terminals. Way.
  10. 제1항에 있어서,The method of claim 1,
    상기 공유 영역에 포함된 지도가 상기 사용자 단말들의 스크린 상에 디스플레이되고, 상기 사용자 단말들의 사용자들이 상기 지도 상에 터치한 점 또는 경로가 상기 사용자 단말들의 스크린 상에 디스플레이되는 것을 특징으로 하는 스크린 쉐어 방법.A map included in the sharing area is displayed on the screen of the user terminals, and a point or a path touched by the users of the user terminals on the map is displayed on the screen of the user terminals. .
  11. 제1항에 있어서,The method of claim 1,
    상기 공유 영역에 동영상이 포함되면 상기 영상 데이터와 함께 해당 음성 데이터도 전송되어 이를 수신하는 상기 다른 단말에서도 상기 영상 데이터의 디스플레이와 함께 해당 음성 데이터를 출력하는 것을 특징으로 하는 스크린 쉐어 방법.And when the video is included in the sharing area, the corresponding audio data is also transmitted along with the image data, and the other terminal receiving the same outputs the corresponding audio data together with the display of the image data.
  12. 제1항에 있어서,The method of claim 1,
    음성 통화, 영상 통화, 또는 인스턴트 메시징을 위한 상기 통신 세션의 연결 중에 상기 사용자 단말들 중 어느 한 단말에서 화이트 보드 공유 요청 메시지를 받는 네트워크 상의 서버가 상기 사용자 단말들 중 다른 단말의 응답을 요청하여 수신한 메시지에 따라 화이트 보드 공유를 위한 통신 세션을 설정하며, 상기 화이트 보드 공유를 위한 상기 사용자 단말들의 각각의 화이트 보드 창이 디스플레이되는 동안, 상기 공유 영역이 지정되는 것을 특징으로 하는 스크린 쉐어 방법.During connection of the communication session for voice call, video call, or instant messaging, a server on a network that receives a whiteboard sharing request message from one of the user terminals requests and receives a response from another of the user terminals. And establishing a communication session for whiteboard sharing according to one message, wherein the sharing area is designated while each whiteboard window of the user terminals for whiteboard sharing is displayed.
  13. 제12항에 있어서,The method of claim 12,
    상기 사용자 단말들의 각각의 화이트 보드 창에서, 사용자들이 터치한 점 또는 경로가 상기 사용자 단말들의 스크린 상에 공유되어 디스플레이되거나, 상기 사용자 단말들에서 각각 상기 화이트 보드 창에 불러온 웹페이지 또는 파일(이미지, 동영상, 또는 문서를 포함함.)이 상기 사용자 단말들의 스크린 상에 공유되어 디스플레이되는 것을 특징으로 하는 스크린 쉐어 방법.In each whiteboard window of the user terminals, a point or path touched by the user is shared and displayed on the screen of the user terminals, or a web page or file (image) loaded in the whiteboard window respectively in the user terminals. , Video, or document.) Is shared and displayed on the screen of the user terminals.
  14. 제12항에 있어서,The method of claim 12,
    상기 사용자 단말들에서 상기 화이트 보드 창에 네트워크 상의 다른 서버에 저장된 파일을 불러와 공유하며 상기 파일에 작업한 내역이 상기 다른 서버에 업데이트되어 저장되는 것을 특징으로 하는 스크린 쉐어 방법.And sharing a file stored in another server on a network in the whiteboard window in the user terminals, and the work done on the file is updated and stored in the other server.
  15. 제1항에 있어서,The method of claim 1,
    서로 다른 통신사의 네트워크와 연동을 통한, 음성 통화, 영상 통화, 또는 인스턴트 메시징을 위한 상기 통신 세션의 연결 중에,During the connection of the communication session for voice call, video call, or instant messaging, in conjunction with a network of different carriers,
    상기 사용자 단말들 중 어느 한 단말에서 공유 요청 메시지를 받는 네트워크 상의 상기 서로 다른 통신사의 각 서버가 연동으로 상기 사용자 단말들 중 다른 단말의 응답을 요청하여 수신한 메시지에 따라 상기 동기화된 다른 통신 세션을 설정하는 것을 특징으로 하는 스크린 쉐어 방법.Each server of the different telecommunication companies on the network receiving a sharing request message from one of the user terminals requests the response of the other one of the user terminals in cooperation to establish another synchronized communication session according to the received message. Screen sharing method characterized in that the setting.
  16. 제15항에 있어서,The method of claim 15,
    상기 각 서버는 자사 네트워크에 등록된 상기 다른 단말의 단말 정보가 관리되는 데이터베이스를 참조하여 상기 다른 단말의 해상도에 따라 상기 영상 데이터를 변환해 전송하는 것을 특징으로 하는 스크린 쉐어 방법.Wherein each server converts the image data according to the resolution of the other terminal by referring to a database in which terminal information of the other terminal registered in its network is managed.
  17. 서로 통신 세션이 연결된 이동통신 네트워크 상의 다른 단말과의 스크린 공유를 위한 공유 요청 메시지를 생성하여 전송하는 수단; 및Means for generating and transmitting a sharing request message for screen sharing with other terminals on a mobile communication network to which a communication session is connected; And
    상기 공유 요청 메시지를 받는 네트워크 상의 서버가 상기 다른 단말의 응답을 요청하여 수신한 메시지에 따라 동기화된 다른 통신 세션을 설정함에 따라, 사용자가 스크린 상에서 임의의 모양으로 지정한 공유 영역에 대한 영상 데이터를 생성하여 전송하는 수단을 포함하고,As the server on the network receiving the sharing request message sets up another communication session synchronized according to the received message by requesting a response from the other terminal, the user generates image data of the sharing area designated by the user in a random shape on the screen. Means for transmitting by
    상기 다른 단말에서 상기 영상 데이터를 수신하여 스크린 상에 상기 공유 영역의 영상을 디스플레이하고, 상기 공유 영역의 영상이 상기 사용자 단말들의 스크린 상에 공유되어 디스플레이되는 것을 특징으로 하는 이동 통신 단말.And receiving the image data from the other terminal to display the image of the sharing area on a screen, and the image of the sharing area is shared and displayed on the screen of the user terminals.
PCT/KR2013/005889 2012-07-20 2013-07-03 Method of sharing screens between user terminals through rcs mobile communication network WO2014014215A1 (en)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
KR1020120079346A KR101470346B1 (en) 2012-07-20 2012-07-20 Screen Share Method Between User Stations through RCS Mobile Communication Service Network
KR10-2012-0079346 2012-07-20

Publications (1)

Publication Number Publication Date
WO2014014215A1 true WO2014014215A1 (en) 2014-01-23

Family

ID=49949006

Family Applications (1)

Application Number Title Priority Date Filing Date
PCT/KR2013/005889 WO2014014215A1 (en) 2012-07-20 2013-07-03 Method of sharing screens between user terminals through rcs mobile communication network

Country Status (2)

Country Link
KR (1) KR101470346B1 (en)
WO (1) WO2014014215A1 (en)

Cited By (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2016093506A1 (en) * 2014-12-08 2016-06-16 엘지전자 주식회사 Mobile terminal and control method therefor
CN106471753A (en) * 2014-06-27 2017-03-01 X开发有限责任公司 Streaming display data from mobile devices using backscatter communications
CN110225491A (en) * 2019-05-20 2019-09-10 超讯通信股份有限公司 A kind of communication means, server and terminal device
US20210141933A1 (en) * 2017-11-24 2021-05-13 International Business Machines Corporation Safeguarding confidential information during a screen share session
CN114422460A (en) * 2021-12-12 2022-04-29 路九阳 Method and system for establishing same-screen communication sharing in instant messaging application
WO2023131290A1 (en) * 2022-01-10 2023-07-13 维沃移动通信有限公司 Information interaction methods and apparatuses, electronic device and medium

Families Citing this family (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR101644029B1 (en) * 2015-11-30 2016-08-01 주식회사 엘지유플러스 Method, server and computer-readable recording medium for synchronizing sharing contents
KR102201494B1 (en) * 2019-04-23 2021-01-12 주식회사 이루온 Distributed data system and method based on block chain for providing rich communication suite
US11122110B2 (en) 2019-06-11 2021-09-14 Advanced New Technologies Co., Ltd. Blockchain-based file processing method, apparatus, and device, and storage medium
KR20230001840A (en) 2021-06-29 2023-01-05 (주)파워텔레콤 RCS and PMS linked multimedia message service provision system and method thereof
KR102522738B1 (en) 2023-01-19 2023-04-17 안태현 Power rich communication service message transmission system and method thereof
KR102606412B1 (en) 2023-03-13 2023-11-29 이노뎁 주식회사 Parking lot accident detection system using omnidirectional camera and method thereof

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20100092712A (en) * 2009-02-13 2010-08-23 엘지전자 주식회사 Terminal and method for sharing a data in the same
US20100331082A1 (en) * 2009-06-30 2010-12-30 Lg Electronics Inc. Mobile terminal capable of providing multiplayer game and operating method of the mobile terminal
KR20110107058A (en) * 2010-03-24 2011-09-30 엘지전자 주식회사 Mobile terminal and method for controlling thereof
KR20120077605A (en) * 2010-12-30 2012-07-10 엘지전자 주식회사 Mobile terminal and method for sharing display thereof
KR20120079454A (en) * 2011-01-04 2012-07-12 삼성전자주식회사 Apparatus and method for screen sharing

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20100092712A (en) * 2009-02-13 2010-08-23 엘지전자 주식회사 Terminal and method for sharing a data in the same
US20100331082A1 (en) * 2009-06-30 2010-12-30 Lg Electronics Inc. Mobile terminal capable of providing multiplayer game and operating method of the mobile terminal
KR20110107058A (en) * 2010-03-24 2011-09-30 엘지전자 주식회사 Mobile terminal and method for controlling thereof
KR20120077605A (en) * 2010-12-30 2012-07-10 엘지전자 주식회사 Mobile terminal and method for sharing display thereof
KR20120079454A (en) * 2011-01-04 2012-07-12 삼성전자주식회사 Apparatus and method for screen sharing

Cited By (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN106471753A (en) * 2014-06-27 2017-03-01 X开发有限责任公司 Streaming display data from mobile devices using backscatter communications
CN106471753B (en) * 2014-06-27 2019-06-04 X开发有限责任公司 Method for wireless streaming of display data from a mobile device, machine accessible storage medium and base station
WO2016093506A1 (en) * 2014-12-08 2016-06-16 엘지전자 주식회사 Mobile terminal and control method therefor
US10268434B2 (en) 2014-12-08 2019-04-23 Lg Electronics Inc. Mobile terminal and control method therefor
US20210141933A1 (en) * 2017-11-24 2021-05-13 International Business Machines Corporation Safeguarding confidential information during a screen share session
US11455423B2 (en) * 2017-11-24 2022-09-27 International Business Machines Corporation Safeguarding confidential information during a screen share session
CN110225491A (en) * 2019-05-20 2019-09-10 超讯通信股份有限公司 A kind of communication means, server and terminal device
CN114422460A (en) * 2021-12-12 2022-04-29 路九阳 Method and system for establishing same-screen communication sharing in instant messaging application
CN114422460B (en) * 2021-12-12 2024-03-01 路九阳 Method and system for establishing same-screen communication sharing in instant communication application
WO2023131290A1 (en) * 2022-01-10 2023-07-13 维沃移动通信有限公司 Information interaction methods and apparatuses, electronic device and medium

Also Published As

Publication number Publication date
KR20140018453A (en) 2014-02-13
KR101470346B1 (en) 2014-12-09

Similar Documents

Publication Publication Date Title
WO2014014215A1 (en) Method of sharing screens between user terminals through rcs mobile communication network
CN106209592B (en) WeChat customer service system and customer service message interaction method thereof
WO2016148525A1 (en) Method for searching for emoticon, and terminal
KR101626474B1 (en) Apparatus for providing document sharing service based messenger and method using the same
CN103069755B (en) Use the method and system that the instant message of multiple client instance transmits
CN103200224B (en) A kind of method of Information Sharing, device and terminal
CN113591439B (en) Information interaction method and device, electronic equipment and storage medium
WO2015183045A1 (en) Method and device for tagging chat message
CN112019625B (en) Websocket-based message pushing method, system, device and medium
KR20120079010A (en) System and method for transmitting media data during a call
WO2014038790A1 (en) Method and system for linking chat service to application service
EP3085010A1 (en) Presence-based content sharing
EP1860907A1 (en) Broadcast system and data transmission method
CN111183441A (en) Information processing method, information processing apparatus, and information processing program
KR100874337B1 (en) How to share photos using a mobile terminal
CN112269770A (en) Document sharing method, device and system and electronic equipment
JP2011223506A (en) Display system, display method and program
WO2015183043A1 (en) Method, device, and server for grouping chat messages
WO2018186698A2 (en) Method, system, and non-transitory computer-readable recording medium for providing multi-point communication service
WO2012081950A2 (en) Method and apparatus for automatically sharing an application among a plurality of clients
WO2016182271A1 (en) Method and system for transmitting/receiving push data
CN114650274B (en) Method, device and system for displaying conference sharing screen content
KR20130012235A (en) Apparatus and method for providing community service in portable terminal
KR101739558B1 (en) System and method for transmitting message conditionally
JP2016134747A (en) Telephone device, program, and telephone system

Legal Events

Date Code Title Description
121 Ep: the epo has been informed by wipo that ep was designated in this application

Ref document number: 13819993

Country of ref document: EP

Kind code of ref document: A1

NENP Non-entry into the national phase

Ref country code: DE

32PN Ep: public notification in the ep bulletin as address of the adressee cannot be established

Free format text: NOTING OF LOSS OF RIGHTS PURSUANT TO RULE 112(1) EPC (EPO FORM 1205A DATED 18/05/2015)

122 Ep: pct application non-entry in european phase

Ref document number: 13819993

Country of ref document: EP

Kind code of ref document: A1